WO2004077831A1

WO2004077831A1 - 映像伝送システム、映像送信装置、映像受信装置および映像伝送方法

Info

Publication number: WO2004077831A1
Application number: PCT/JP2004/001988
Authority: WO
Inventors: Yoshimasa Honda; Tsutomu Uenoyama
Original assignee: Matsushita Electric Industrial Co., Ltd.
Priority date: 2003-02-28
Filing date: 2004-02-20
Publication date: 2004-09-10
Also published as: CN1736107A; US20050175084A1; US7382729B2; JP2004266503A

Description

映像伝送システム

技術分野

本発明は、ネットワークを通じて映像を伝送する映像伝送システムに関する。

明背景技術

書

従来の映像伝送システムで伝送される映像データは、ある一定の伝送帯域で伝送できるように、通常、 H. 2 6 1方式や MP EG (Moving Picture Experts Group) 方式などによって一定帯域以下に圧縮符号化されており、一度符号化された映像データは伝送帯域が変わっても映像品質を変えることはできない。

しかし、近年のネットワークの多様化に伴い、伝送路の帯域変動が大きく、複数の帯域に見合った品質の映像を伝送可能な映像データが必要とされており、これに対応するために、階層構造を持ち複数帯域に対応できる階層符号化方式が規格化されている。このような階層符号化方式の中でも、とりわけ帯域選択に関して自由度が高い方式である MP E G— 4 F G S (Fine Granularity Scalability) が現在規格化されたところである。 MP EG— 4 FG Sにより符号化された映像データは、単体で復号化が可能な動画像ストリームである一の基本レイヤと、基本レイヤの複号化動画像品質を向上させるための動画像ストリームである、少なくとも一以上の拡張レイヤとで構成される。基本レイヤは低帯域で低画質の映像データであり、これに拡張レイャを帯域に応じて足し合わせることにより自由度の高い高画質化が可能である。

MPEG— 4 FGSにおいては、伝送する拡張レイヤの総データサイズを制御して様々な帯域に適応させることが可能であり、帯域に応じた品質の映像を伝送することが可能である。

しかし、複数の端末で同時に映像を受信する場合には、映像を受信する端末の能力や各端末が使用するネットワークの特性（受信帯域）が異なるため、端末ごとに必要とされる品質が異なるという課題がある。なお、ここでいう品質には、たとえば、画質、フレームレート（動きの滑らかさ）、エラー耐性、解像度、遅延、処理の複雑度などがある。

この点に関し、ネットワークの輻輳などによりネットワーク状況が変動する端末に対して、ネットワークの特性に合わせて適切な品質で映像伝送を行うための技術として、映像ストリームを階層化し優先度の異なるチャネルで伝送するようにしたものがある（たとえば、特開平 4一 1 0 0 4 9 4号公報、第 1頁、第 1図を参照）。

図 1は、従来の映像符号化装置の構成の一例を示す図である。この映像符号化装置 1 0において、映像符号化回路 1 2は、入力した映像信号に対して、動き補償■ D C T (Discrete Cosine Transform：離散コサイン変換） ·量子化を用いた映像符号化を行い、符号化データを階層化回路 1 4に出力する。階層化回路 1 4は、映像符号化回路 1 2から入力した符号化データに対して D C Tに用いられる N X N画素のブロック単位で M個の領域に分割し（ただし、 N、 Mは共に自然数）、 M個の符号化データをバケツト化バッファ 1 6に出力する。ここで、階層化回路 1 4のデータ分割においては、 M個の領域のうちある領域が破棄された場合に生じる画質劣化を測定し、あらかじめ設定された許容値に等しくなるように領域の大きさを制御している。パケット化バッファ 1 6は、階層化回路 1 4から入力した分割符号化データに対して、低周波成分を含む領域から高い優先度のチャネルで伝送する。

このように、映像符号化装置 1 0においては、 D C T係数を領域分割し、低周波成分から高い優先度のチャネルで伝送することにより、ネットワークの輻輳が発生した場合においても、低い優先度のチャネルにおける符号化データが破棄されるため、帯域に応じた画質で映像を受信することが可能である。

しかしながら、上記した従来の技術においては、伝送帯域に応じた画質で映像を受信することは可能であるが、複数の受信端末がそれぞれ自由に優先する品質の種類（たとえば、上記のように、画質、動きの滑らかさ、エラー耐性、解像度や処理複雑度など）を選択することはできない。

たとえば、限られた伝送帯域の中で表示画面の大きい端末は、低画質で動きが滑らかな映像よりも、動きは滑らかでないが 1枚 1枚が高画質な画質優先の映像を受信することが望ましい。逆に、画面の小さい端末は、高画質で動きが滑らかでない映像よりも、低画質で動きが滑らかな映像を受信することが望ましい。また、ネットワークでのエラー発生率が高い無線環境における端末は、エラー耐性が弱くエラ一がない状況でのみ再生可能な映像よりも、エラ一耐性が高くエラーの発生する状況においても再生可能な映像を受信することが望ましい。

このように、特性（端末能力や受信帯域）が異なる複数の端末で同時に映像を受信する場合には、映像品質の種類と程度を端末が自由に選択でき、端末の特性や状況に応じた適切な品質で映像を受信できることが必要とされている。発明の開示

本発明の目的は、特性が異なる複数の端末で同時に映像を受信する場合において、各端末が自己に適した品質で映像を受信することができる映像伝送システムを提供することである。

本発明の一形態によれば、映像伝送システムは、ネットワークを通じて階層符号化データを映像送信装置から映像受信装置に伝送する映像伝送システムであって、前記映像送信装置は、階層符号化データを品質別または品質および帯域別に別々のチヤネルに分割する分割手段と、分割された階層符号化データを互いに別チャネルで送信する第 1送信手段と、品質別にチャネルをグルーピングしてグループリストを算出する算出手段と、算出されたグループリストを送信する第 2送信手段と、を有し、前記映像受信装置は、前記映像送信装置から送信されたグループリストを受信する第 1受信手段と、受信されたグループリストを用いて受信チャネルを決定する決定手段と、前記映像送信装置から送信された分割階層符号化データのうち、決定された受信チャネルのデータを受信する第 2受信手段と、を有する。

本発明の他の形態によれば、映像送信装置は、階層符号化データを品質別または品質および帯域別に別々のチヤネルに分割する分割手段と、分割された階層符号化データを互いに別チャネルで送信する第 1送信手段と、品質別にチャネルをグルーピングしてグループリストを算出する算出手段と、算出されたグループリストを送信する第 2送信手段と、を有する。

本発明のさらに他の形態によれば、映像伝送方法は、ネットワークを通じて階層符号化データを映像送信装置から映像受信装置に伝送する映像伝送方法であって、前記映像送信装置が、階層符号化データを品質別または品質およぴ帯域別に別々のチヤネルに分割するステップと、前記映像送信装置が、分割した階層符号化データを互いに別チヤネルで送信するステップと、前記映像送信装置が、品質別にチャネルをグルーピングしてグループリストを算出するステップと、前記映像送信装置が、算出したグループリストを送信するステップと、前記映像受信装置が、前記映像送信装置から送信されたダル一プリストを受信するステップと、前記映像受信装置が、受信したグループリストを用いて受信チャネルを決定するステップと、前記映像受信装置が、前記映像送信装置から送信された分割階層符号化データのうち、決定した受信チャネルのデータを受信するステップと、を有する。図面の簡単な説明

図 1は、従来の映像符号化装置の構成の一例を示す図、図 2は、本発明の実施の形態 1に係る映像伝送システムの構成を示す図、図 3は、 M P E G— 4 F G S符号化を用いた場合の符号化データの構造の一例を示す図、

図 4は、 1 3の符号化データに対するチャネル分割結果の一例を示す図、図 5は、施の形態 1に対応する映像送信装置の動作を示すフローチヤ一卜、

図 6 Aは優先度付与とグルービングを説明するための図、

図 6 Bは動き重視の場合の優先度付与を説明するための図、

図 6 Cは画質重視の場合の優先度付与を説明するための図、

図 7 Aは動き重視の場合の優先度マップを示す図、

図 7 Bは画質重視の場合の優先度マップを示す図、

図 8 Aは優先度マップの一例を示す図、

図 8 Bは上記優先度マップに基づく優先度付与後のチャネルを示す図、図 9 Aはグループリストのうち動き優先グループを示す図、

図 9 Bはグループリストのうち画質優先グループを示す図、

図 9 Cはグループリストのうちフルクオリティグループを示す図、図 1 0は実施の形態 1に対応する映像受信装置の動作を示すフローチヤート、

図 1 1は実施の形態 1に対応する映像伝送システムにおける主要な情報のやり取りを示すシーケンス図、

図 1 2は、実施の形態 1の映像伝送システムの適用例を示す図、図 1 3は、本発明の実施の形態 2に係る映像伝送システムの構成を示す図、図 1 4は、実施の形態 2に対応する映像送信装置の動作を示すフローチヤ一ト、

図 1 5は、本発明の実施の形態 3に係る映像伝送システムの構成を示す図、図 1 6は、実施の形態 3に対応する映像送信装置の動作を示すフローチヤート、図 1 7 Aは、チャネルの優先度マップの一例を示す図、

図 1 7 Bは、上記チャネル優先度マップに基づく優先度付与後のチャネルの一部を示す図、

図 1 7 Cは、バケツト分割とバケツト優先度の一例を示す図、

図 1 8は、本発明の実施の形態 4に係る映像伝送システムの構成を示す図、図 1 9は、実施の形態 4に対応する映像受信装置の動作を示すフローチヤ一トである。発明を実施するための最良の形態

本発明の骨子は、階層符号化された映像ストリームを伝送するシステムにおいて、その階層符号化された映像ストリームを品質別または品質および帯城別に分割し別チャネルで伝送するとともに、品質別にチヤネルをグルーピングしそのリストを送信することにより、複数の受信端末がそれぞれ映像の受信品質を選択でき、適切な品質で映像を受信できることである。

また、その際、優先する品質に合わせて各チャネルに優先度を付けて伝送を行う（このとき、ネットワークノードは優先度に従つたパケット伝送を行う）ことにより、限られた帯域において、受信端末が、優先する品質のダループを選択して受信し、自動的に最高品質の映像を受信できることである。以下、本発明の実施の形態について、図面を参照して詳細に説明する。

(実施の形態 1 )

本実施の形態では、階層符号化データを品質 ·帯域別にチャネル分割し、端末情報を用いて算出した優先度を付加して別チャネルで伝送するとともに、品質別にチャネルをグルーピングしたダル一プリストを送信することにより、受信端末が優先する品質を選択でき、ネットワークの状況に応じ端末特性に適した品質で映像を受信することができる映像伝送システムについて説明する。

図 2は、本発明の実施の形態 1に係る映像伝送システムの構成を示す図である。

この映像伝送システムは、映像を送信する映像送信装置（以下「送信端末」ともいう） 1 00と、映像を受信する映像受信装置（以下「受信端末」ともいう） 1 50と、映像送信装置 100から送信された映像を映像受信装置 1 50に中継するネットワーク 1 80とを有する。すなわち、映像送信装置 1 00から送信された映像は、ネットワーク 1 80を通じて映像受信装置 1 5 0に伝送される。

映像送信装置 1 00は、映像入力部 1 02、映像符号化部 104、チヤネル分割部 1 06、映像送信部 1 08、端末情報受信部 1 1 0、優先度算出部 1 1 2、グループリスト算出部 1 14、およびグループリスト送信部 1 1 6 を有する。

映像入力部 1 02は、外部から提供されたまたは当該装置 100で生成された映像を構成する画像を 1フレームごとに映像符号化部 1 04に出力する。映像符号化部 1 04は、映像入力部 1 02から出力された画像を入力画像として階層符号化し、得られた符号化データをチヤネル分割部 1 06に出力する。

たとえば、階層符号化として MP EG— 4 FG S符号化を用いる場合、符号化データの構造の一例は、図 3に示すとおりである。すなわち、映像符号化部 104は、入力画像に対して基本レイヤ（B L) と、画質を向上させる拡張レイヤ 1 (EL 1) と、動きの滑らかさを向上させる拡張レイヤ 2 (E L 2)、拡張レイヤ 3 (E L 3)、拡張レイヤ 4 (E L4) とからなる符号化データを生成し、チャネル分割部 1 06に出力する。

この場合、基本レイヤに拡張レイヤ 1を加えることにより、画質を向上することができ、また、基本レイヤに拡張レイヤ 2、拡張レイヤ 3、拡張レイャ 4の順でデータを加えることにより、動きがより一層滑らかになる。さらに、拡張レイヤは下位層（映像ストリームの先頭）からデータを複数に分割することができ、基本レイヤに加えるデータの量を制御することによって、向上させる品質の程度を制御することが可能である。

チャネル分割部 1 0 6は、映像符号化部 1 0 4から出力された符号化データを複数に分割し、各分割データに別々のチャネルを割り当てるとともに優先度算出部 1 1 2から出力される優先度を付加して映像送信部 1 0 8に出力する。また、分割データと割り当てチャネルとのリストである分割リストを生成し、グループリスト算出部 1 1 4に出力する。たとえば、チャネル分割結果の一例は、図 4に示すとおりである。処理の詳細については、後で説明する。

映像送信部 1 0 8は、チャネル分割部 1 0 6から出力された分割データを対応する別々のチヤネルでネットワーク 1 8 0に伝送する。具体的には、たとえば、分割され別々のチャネルに割り当てられた符号化データを、指定された優先度をへッダに付加して別々のチヤネルでマルチキャスト送信する。優先度は、たとえば、 I P ( Internet Protocol) ヘッダ内に記述することができる。また、チャネルは、たとえば、マルチキャストァドレスで示されるものとする。ここで、マルチキャスト送信とは、 1つの送信端末から同時に複数の端末にデータを送信方式であり、送信データチャネルであるマルチキヤストァドレスを受信指定した端末に対してのみデータ転送する方式であり、複数の受信端末が受信を行う場合においても同一伝送路内では伝送されるデ一タに重複がないため、伝送効率が良い伝送方式である。

なお、映像ストリ一ムの送信方法は、もちろん、マルチキャスト送信に限定されない。

端末情報受信部 1 1 0は、受信端末（映像受信装置 1 5 0 ) から送信される端末情報を受信し、優先度算出部 1 1 2に出力する。ここで、端末情報は、受信端末に関する情報であって優先すべき品質を示すことができるものであれば、どのような情報でもよい。端末情報としては、たとえば、受信端末が使用する表示デバイスの画面サイズや端末の処理能力や端末が接続されているネットワークのエラ一発生率などを挙げることができる。優先度算出部 1 1 2は、端末情報受信部 1 1 0から出力された端末情報を用いてチャネルの優先度を決定し、決定した優先度をチャネル分割部 1 0 6 に出力する。処理の詳細については、後で説明する。

グループリスト算出部 1 1 4は、チャネル分割部 1 0 6から出力された分割リストを用いて、優先品質と受信すべきチャネルとのリストであるグループリストを生成し、グループリスト送信部 1 1 6に出力する。処理の詳細については、後で説明する。

グループリスト送信部 1 1 6は、グループリスト算出部 1 1 4から出力されたグループリストをネットワーク 1 8 0に伝送する。具体的には、たとえば、グループリストを、ネットワーク 1 8 0を通じて、すべての受信端末に送信する。

なお、本実施の形態では、グループリストの送信を必ず行う場合を例にとつて説明するが、これに限定されない。たとえば、伝送路の混雑を避けるため、一定の間隔で送信することも可能である。

ネットワーク 1 8 0は、図示しないノード（ネットワークノード) を有する。ネットワークノードは、チャネルに付加された優先度に従ってデータの伝送（パケット伝送）を行う。具体的には、ネットワークが混雑している場合は、優先度の低いチャネルからデータを破棄し、優先度の高いチャネルのデータ伝送を保証する。また、送信端末 1 0 0から送信される複数のチヤネルのうち受信端末 1 5 0が選択しているチャネルのデータのみを当該受信端末 1 5 0に転送する。ネットワークノードは、たとえば、ルータである。映像受信装置 1 5 0は、端末情報送信部 1 5 2、優先品質入力部 1 5 4、グループリスト受信部 1 5 6、受信チャネル決定部 1 5 8、映像受信部 1 6 0、映像復号化部 1 6 2、および映像表示部 1 6 4を有する。

端末情報送信部 1 5 2は、当該映像受信装置 1 5 0の端末情報を映像送信装置 1 0 0に送信する。たとえば、端末情報として表示画面の大きさを送信する。端末情報は、上記のように、受信端末に関する情報であって優先すベき品質を示すことができるものであれば、どのような情報でもよい。

なお、本実施の形態では、映像データを受信する度に端末情報を送信する場合を例にとって説明するが、これに限定されない。たとえば、伝送路の混雑を避けるため、一定の間隔で送信することも可能である。

優先品質入力部 1 5 4は、ユーザが指定した優先する品質（たとえば、画質優先、動き優先など）を受信チャネル決定部 1 5 8に出力する。ただし、ユーザからの指定がない場合は、優先品質の出力は行わない。

グループリスト受信部 1 5 6は、送信端末（映像送信装置 1 0 0 ) から送信されたグループリスト (上記のように、品質とチャネルを示すリスト) を受信し、受信チャネル決定部 1 5 8に出力する。

受信チャネル決定部 1 5 8は、優先品質入力部 1 5 4から出力された優先品質とグループリスト受信部 1 5 6から出力されたダル一プリストを用いて、受信すべきチャネルを決定する。具体的には、受信するチャネル番号を決定し、決定したチャネル番号を映像受信部 1 6 0に出力する。ただし、優先品質入力部 1 5 4またはグループリスト受信部 1 5 6からの出力がない場合は、前回決定したチャネル番号を映像受信部 1 6 0に出力する。処理の詳細については、後で説明する。

映像受信部 1 6 0は、受信チャネル決定部 1 5 8から出力されたチヤネノレ番号に対応する符号化データを受信し、受信した符号化データを映像複号化部 1 6 2に出力する。

映像複号化部 1 6 2は、映像受信部 1 6 0から出力された符号化データを復号化し、複号化して得られた映像を映像表示部 1 6 4に出力する。

映像表示部 1 6 4は、映像復号化部 1 6 2から出力された映像を画面に表示する。映像表示部 1 6 4は、表示デバイスで構成されている。

次いで、上記構成を有する映像送信装置 1 0 0の動作について、図 5に示すフローチャートを用いて説明する。なお、図 5に示すフローチャートは、映像送信装置 1 0 0の図示しない記憶装置（たとえば、 R O Mやフラッシュメモリなど）に制御プログラムとして記憶されており、同じく図示しない C P Uによって実行される。

まず、ステップ S 1 0 0 0では、映像入力部 1 0 2で、映像を構成する画像を 1フレームごとに映像符号化部 1 0 4に出力する。

そして、ステップ S 1 1 0 0では、映像符号化部 1 0 4で、映像入力部 1 0 2から出力された画像に対して階層符号化を行い、得られた符号化データをチャネル分割部 1 0 6に出力する。たとえば、階層符号化として M P E G - 4 F G S符号化を用いる場合、符号化データは、基本レイヤ（B L ) と複数の拡張レイヤ ( E L ) とで構成される。ここでは、一例として、図 3に示すように、符号化データが 1つの基本レイヤ ( B L ) と 4つの拡張レイヤ ( E L l〜4 ) とで構成される場合を例にとつて説明する。

—方、ステップ S 1 2 0 0では、端末情報受信部 1 1 0で、複数の受信端末 1 5 0から送信された端末情報を受信し、優先度算出部 1 1 2に出力する。ここでは、一例として、たとえば、端末情報は、受信端末 1 5 0が使用する表示デバイスの画面サイズ ( Dインチ) であるとする。

ただし、上記のように、端末情報は、画面サイズに限定されるわけではなく、たとえば、ユーザの好み (動き優先、画質優先）などの優先すべき品質を示すことができる情報であれば使用可能である。

そして、ステップ S 1 3 0 0では、優先度算出部 1 1 2で、端末情報受信部 1 1 0から出力された端末情報を用いて各チャネルの優先度を決定し、決定した優先度をチャネル分割部 1 0 6に出力する。すなわち、端末情報が受信された場合は、受信された端末情報を用いて優先度を決定し、決定した優先度をチャネル分割部 1 0 6に出力する。これに対し、端末情報が受信されない場合は、前回の優先度をチャネル分割部 1 0 6に出力する。

具体的には、複数の端末情報 D— n ( nは端末番号）を用いて重視する品質を決定し、この重視する品質に基づいて各チャネルの優先度を決定する。手順は、次のとおりである。 1) 平均画面サイズの算出

複数の端末情報 D— nを用いて、次の（式 1) により、

1 N

D =丄>"£1 n ··· (式 1)

- N - 平均画面サイズ D— A VRを算出する。ここで、 Nは端末の総数である。

2) 重視する品質の決定

平均画面サイズ D__ A V Rをしきい値 T Hと比較して、重視する品質を決定する。ここでは、端末の表示画面サイズが大きいほど、 1枚 1枚の画質が高品位であることが望ましいため、画質重視とする。具体的には、たとえば、平均画面サイズ D— AVRがしきい値 THを超える（D— AVR>TH) 場合は、画質重視とし、そうでない場合、つまり、平均画面サイズ D— AVR がしきい値 TH以下（D— AVR TH) の場合は、動き重視とする。

3) 優先度の決定

重視する品質に基づいて各チャネルの優先度を決定する。具体的には、動き重視の場合は、動き向上（時間スケーラビリティ）の方向にチャネル優先度を上げ（図 6A、図 6 B参照）、画質重視の場合は、画質向上（画質スケーラビリティ）の方向にチャネル優先度を上げる (図 6 A、図 6 C参照）。これを図 7の優先度マップ (チャネルと優先度を示すマップ) を用いて説明すると、動き重視の場合は、優先度マップの X方向に優先度を上げ、逆に、画質重視の場合は、優先度マップの Y方向に優先度を上げる。たとえば、動き重視の場合は、図 7 Aに示すように優先度を設定し、画質重視の場合は、図 7 Bに示すように優先度を設定する。なお、優先度マップについては、後で再度説明する。また、優先度マップは、図 7に示す方法に限定されない。図 7において、数字が小さい程、優先度が高いことを表す。

このように端末情報に合わせて優先度を決定することにより、いかなる帯域においても端末の特性に適した品質の種類に関して高い優先度で伝送することが可能になる。そして、ステップ S 1400では、チャネル分割部 1 06で、映像符号化部 1 04から出力された符号化データを複数に分割し、各分割データに別々のチャネルを割り当てるとともに優先度算出部 1 1 2から出力される優先度を付加して映像送信部 1 08に出力する。

具体的に、たとえば、図 3に示す構造の符号化データを例にとって説明すると、まず、基本レイヤ（B L) を 1つのチャネルとし、拡張レイヤ（E L) 1〜4をそれぞれあらかじめ決められたデータ量で分割し別チャネルとする。たとえば、 4つに分割する場合、各チヤネルのビットレートが設定ビットレート B— B L、 B— E L 1、 B_E L 2、 B— EL 3となるように、拡張レイヤ 1を E L 1— 1〜E L— 3に、拡張レイヤ 2を E L 2— 0〜 E L 2— 3に、拡張レイヤ 3を E L 3— 0〜E L 3— 3に、拡張レイヤ 4を E L 4__ 0〜E L 4— 3にそれぞれ分割し、合計で 4 XNに分割する（図 4のチヤネル分割例参照。この場合、 N=4)。なお、当然のことながら、分割数は 4に限定されない。

次に、優先度算出部 1 1 2から出力された優先度を各チャネルに付与する。たとえば、図 8 Aは、優先度マップを示しており、この優先度マップは、 4 X 4のマトリクスで構成されている。優先度マップにおいて、左下（X， Y) = (0, 0) は基本レイヤ B Lの優先度を示し、基本レイヤ B Lから X方向に行くにつれて順に拡張レイヤ E L 2— 0〜E L 4— 0の優先度を、 Υ方向に行くにつれて順に拡張レイヤ E L 1— 1〜E L 1—2の優先度をそれぞれ示している。一般に、（X, Υ) = ( I， J ) は、 E L ( I + 1 ) — Jの優先度を示している。図 4のチャネル分割結果に図 8 Aの優先度マップを適用して得られる、優先度付与後のチャネルは、図 8 Bに示すとおりである。

そして、ステップ S 1 500では、グループリスト算出部 1 14で、チヤネル分割部 1 06から出力された分割リストを用いて、優先する品質別に受信すべきチャネルを示したグループリストを生成し、グループリスト送信部 1 1 6に出力する。図 9は、グループリストの一例を示している。この例では、 3つのグループ（動き優先、画質優先、フルクオリティ）を算出する場合を示している。なお、グループリストは、もちろん、 3つに限定されない。 1つ以上のチヤネルの組み合わせであれば、どのようなグループでもよい。たとえば、同じ種類の品質について、程度の異なる複数のグループを設けてもよい（たとえば、図 6 Aにおける動き優先グループ 1と 2、画質優先グループ 1と 2参照）。すなわち、品質の種類と程度が異なるグループを任意に設けることができる。図 9の例において、（Χ , Υ ) = ( 0 , 0 )は、基本レイヤ B Lに対応し、（X , Υ ) = ( I , J ) は、チャネル E L ( 1 + 1 ) — Jに対応し、丸 (〇) を付けたチャネルは、当該グループで受信すべきチャネルを示している。すなわち、動き優先グループの場合は、動きを向上する拡張レイヤのチャネルを優先的に受信するリストを生成し、画質優先グループの場合は、画質を向上する拡張レイヤのチャネルを優先的に受信するリストを生成し、フルクオリティグループの場合は、全チャネルを受信するリストを生成する。このようにダル —プリストを生成することにより、受信端末が優先する品質に合わせてチヤネルを受信し、選択した品質において最適な映像を受信することが可能である

そして、ステップ S 1 6 0 0では、グループリスト送信部 1 1 6で、グループリスト算出部 1 1 4から出力されたグループリストをネットワーク 1 8 0に伝送する。具体的には、たとえば、グループリストを、ネットワーク 1 8 0を通じて、すべての受信端末に送信する。なお、本実施の形態では、グループリストの送信を必ず行うようにしているが、これに限定されるわけではなく、たとえば、上記のように、伝送路の混雑を避けるため、一定の間隔で送信することも可能である。

そして、ステップ S 1 7 0 0では、映像送信部 1 0 8で、チャネル分割部 1 0 6から出力された分割データを対応する別々のチャネルでネットワーク 1 8 0に伝送する。具体的には、たとえば、上記のように、分割され別々のチャネルに割り当てられた符号化データを、指定された優先度をヘッダに付加して別々のチャネルでマルチキャスト送信する。このとき、チャネルは、たとえば、マルチキャストァドレスで示されている。

次いで、上記構成を有する映像受信装置 1 5 0の動作について、図 1 0に示すフローチャートを用いて説明する。なお、図 1 0に示すフローチャートは、映像受信装置 1 5 0の図示しない記憶装置（たとえば、 R O Mやフラッシュメモリなど）に制御プログラムとして記憶されており、同じく図示しない C P Uによって実行される。

まず、ステップ S 2 0 0 0では、優先品質入力部 1 5 4で、ユーザが指定した優先する品質を受信チャネル決定部 1 5 8に出力する。ここでは、たとえば、動き優先、画質優先、フルクオリティの 3つの種類の中から 1つを選択するものとする（図 9参照）。ただし、上記のように、ユーザからの指定がない場合は優先品質の出力は行わない。

一方、ステップ S 2 1 0 0では、グループリスト受信部 1 5 6で、送信端末 1 0 0から送信されたグループリストを受信し、受信チャネル決定部 1 5 8に出力する。

ステップ S 2 2 0 0では、受信チャネル決定部 1 5 8で、優先品質入力部 1 5 4から出力された優先品質とグループリスト受信部 1 5 6から出力されたグループリス 1、を用いて、受信すべきチャネルを決定する。

たとえば、図 9のグループリストを受信した場合を考える。この場合、優先品質が動き優先の場合は、図 9 Aに示す丸 (〇) のチャネルを受信するものと、優先品質が動き優先の場合は、図 9 Bに示す丸（〇）のチャネルを受信するものと、優先品質がフルクオリティの場合は、図 9 Cに示す丸（〇）のチャネルを受信するものとそれぞれ決定する。

ただし、優先品質入力部 1 5 4またはグループリスト受信部 1 5 6力らの出力がない場合は、前回決定したチャネル番号を映像受信部 1 6 0に出力する。そして、ステップ S 2300では、映像受信部 1 60で、受信チャネル決定部 1 58から出力されたチャネル番号に関して、符号化データの受信を行い、受信した符号化データを映像復号化部 1 6 2に出力する。

そして、ステップ S 2400では、映像復号化部 1 6 2で、映像受信部 1 60から出力された符号化データを復号化し、得られた映像を映像表示部 1 64に出力する。

そして、ステップ S 2500では、映像表示部 1 64で、映像複号化部 1 6 2から出力された映像を画面に表示する。

そして、ステップ S 2600では、端末情報送信部 1 5 2で、当該受信端末 1 50の端末情報を送信端末 1 00に送信する。たとえば、端末情報として、上記のように、端末が使用する表示デバイスの画面サイズ (Dインチ) を送信する。なお、本実施の形態では、映像データを受信する度に端末情報を送信するようにしているが、これに限定されるわけではなく、たとえば、上記のように、伝送路の混雑を避けるため、一定の間隔で送信することも可能である。

次いで、上記構成の映像伝送システムにおける主要な情報のやり取りについて、図 1 1のシーケンス図を用いて説明する。

まず、受信端末 1 50は、端末情報 (たとえば、表示画面のサイズ) を、ネットワーク 1 80を通じて送信端末 1 00に送信する（（1))。

そして、送信端末 1 00は、受信端末 1 50からの端末情報を受信すると、受信した端末情報を用いてチャネルの優先度を算出した後 ((2))、グループリストを算出し、算出したグループリストをネットワーク 1 80を通じて受信端末 1 50に送信する（（3))。

そして、受信端末 1 50は、送信端末 1 00からのグループリストを受信すると、受信したグループリストを用いて受信チャネルを決定する（（4))。そして、送信端末 1 00は、入力映像に対して、 1フレームごとに、映像符号化とチャネル分割（優先度付与を含む）を行い、分割ノ優先度付与後の符号化データを別々のチャネルでネットワーク 180を通じて受信端末 1 5 0に送信する（（5))。その際、ネットワーク 1 80は、優先度に応じたデータ伝送（バケツト伝送）を行う。

そして、受信端末 1 50は、送信端末 1 0,0からの符号化映像データを上記受信チャネルで受信し、復号化し、画面に表示する（（6))。

図 1 2は、本実施の形態の映像伝送システムの適用例を示している。図 1 2において、映像送信装置として映像サーバ 100が設けられ、映像受信装置として大画面端末 1 50 a、小画面端末 1 50 b、および低帯域端末 1 5 0 cが設けられている。映像サーバ 1 00と各端末 1 50 a〜 1 50 cとは、ネットワーク 1 80を通じて互いに接続されている。ネットワーク 1 80は、 LAN 1 82, ィンターネット 1 84、およぴモバイル網 1 86を有し、 L AN 1 8 2とインターネット 1 84はルータ 1 88を介して互いに接続され、 LAN 1 8 2とモバイル網 1 86はルータ 1 90を介して互いに接続されている。すなわち、映像サーバ 1 00と大画面端末 1 50 aとは LAN 1 8 2 を介して接続され、映像サーバ 1 00と小画面端末 1 50 bとは LAN 1 8 2、ルータ 1 88、インターネット 1 84を介して接続され、映像サーバ 1 00と低帯域端末 1 50 cとは LAN 1 8 2、ルータ 1 90、モバイル網 1 86を介して接続されている。

この場合、大画面端末 1 50 aは、画質優先で映像を受信することができ、小画面端末 1 5 O bは、動き優先で映像を受信することができ、低帯域端末 1 50 cは、エラー耐性優先で映像を受信することができる。

このように、本実施の形態によれば、階層符号化データを品質，帯域別に別チャネルに分割し、品質別のグループリストを送信するため、複数の受信端末がそれぞれ優先する品質を自由に選択し映像受信することができる。また、端末情報に基づいて各チャネルの優先度を算出し、優先度を付けて伝送を行うため、端末の使用可能な伝送帯域において、各端末は優先する品質のグループを選択 ·受信し、自動的に自己の特性に適した最高品質の映像を受信することができる。また、端末特性に合わせた品質での映像伝送を実現することができる。

(実施の形態 2)

本実施の形態では、階層符号化データを品質■帯域別にチャネル分割し、入力映像情報を用いて算出した優先度を付加して別チャネルで伝送するとともに、品質別のグループリストを送信することにより、受信端末が優先する品質を選択でき、ネットワークの状況に応じ映像特性に適した品質で映像を受信することができる映像伝送システムについて説明する。

図 1 3は、本発明の実施の形態 2に係る映像伝送システムの構成を示す図である。なお、この映像伝送システムにおける映像送信装置 200およぴ映像受信装置 2 50は、図 2に示す映像伝送システムにおける映像送信装置 1 00および映像受信装置 1 50とそれぞれ同様の基本的構成を有しており、同一の構成要素には同一の符号を付し、その説明を省略する。

本実施の形態の特徴は、実施の形態 1ではチャネルの優先度を端末情報に基づいて算出するのに対し、ここでは、映像特性に基づいてチャネル優先度の算出を行うことである。そのため、映像送信装置 200は、映像符号化部 1 04 a、映像特性算出部 202、およぴ優先度算出部 204を有する。また、映像受信装置 250は、図 2の端末情報送信部 1 5 2を有していない。映像符号化部 1 04 aは、図 2の映像符号化部 1 04と同様に、映像入力部 1 02から出力された画像を入力画像として階層符号化し、得られた符号化データをチャネル分割部 1 06に出力する。たとえば、階層符号化として MP EG— 4 FG S符号化を用いる場合、入力画像に対して、基本レイヤ（B L) と、画質を向上させる拡張レイヤ 1 (E L 1) と、動きの滑らかさを向上させる拡張レイヤ 2 (E L 2)、拡張レイヤ 3 (E L 3)、拡張レイヤ 4 (E L 4) とからなる符号化データを生成し（図 3参照）、出力する。ただし、本実施の形態では、映像符号化部 1 04 aは、さらに、基本レイヤ（B L) を映像特性算出部 202に出力する。映像特性算出部 2 0 2は、映像符号化部 1 0 4 aから出力された基本レイャ（B L ) から動きベクトルを抽出して入力映像の映像特性を算出し、得られた映像特性値を優先度算出部 2 0 4に出力する。処理の詳細については、後で説明する。

優先度算出部 2 0 4は、映像特性算出部 2 0 2から出力された映像特性値を用いて各チャネルの優先度を決定し、優先度マップをチャネル分割部 1 0 6に出力する。

次いで、上記構成を有する映像送信装置 2 0 0の動作について、図 1 4に示すフローチヤ一トを用いて説明する。なお、図 1 4に示すフローチャートは、映像送信装置 2 0 0の図示しない記憶装置（たとえば、 R O Mやフラッシュメモリなど）に制御プログラムとして記憶されており、同じく図示しなレヽ C P Uによって実行される。

本実施の形態では、図 1 4に示すように、ステップ S 1 2 5 0を図 5に示すフローチヤ一トに揷入し、ステップ S 1 2 0 0を削除している。

ステップ S 1 0 0 0およびステップ S 1 1 0 0は、図 5に示すフローチヤ一トの各ステップと同様であるため、その説明を省略する。ただし、本実施の形態では、ステップ S 1 1 0 0の映像符号化処理の際に、映像符号化部 1 0 4 aで、基本レイヤ ( Bし) の符号化データを映像特性算出部 2 0 2に出力する。

そして、ステップ S 1 2 5 0では、映像特性算出部 2 0 2で、映像符号化部 1 0 4 aから出力された基本レイヤ ( Bし) から動きべクトルを抽出して入力映像の映像特性を算出し、得られた映像特性値を優先度算出部 2 0 4に出力する。具体的には、たとえば、映像符号化部 1 0 4 aから出力された基本レイヤの符号化データを用いて動きべクトノレを抽出し、抽出した動きべクトルの絶対和を算出し、算出した絶対和を映像特性値 Mとする。

ここで、映像特性値 Mは、映像中の動きの大きさを表す値であり、 Mの値が大きいほど動きの大きい映像であり、逆に、 Mの値が小さいほど動きの小さい映像である。

なお、本実施の形態では、映像特性値を動きベクトルの絶対和としたが、これに限定されるわけではなく、映像の動きの大きさを表すことができるものであれば、どのようなものでもよい。

そして、ステップ S 1 3 0 0では、優先度算出部 2 0 4で、映像特性算出部 2 0 2から出力された映像特性値を用いて各チャネルの優先度を決定し、優先度マップをチャネル分割部 1 0 6に出力する。

具体的には、まず映像特性を用いて重視する品質を決定し、この重視する品質に基づいて各チャネルの優先度を決定する。手順は、次のとおりである。

1 ) 重視する品質の決定

映像特性値 Mをしきい値 T Hと比較して、重視する品質を決定する。ここでは、映像特性値が大きいほど、つまり、動きの大きい映像であるほど、動きの滑らかさが高いことが望ましいため、動き重視とする。具体的には、たとえば、映像特性値 Mがしきい値 T Hを超える（M > T H) 場合は、動き重視とし、そうでない場合、つまり、映像特性値 Mがしきい値 T H以下 (M≤ T H) の場合は、画質重視とする。

2 ) 優先度の決定

重視する品質に基づいて各チャネルの優先度を決定する。たとえば、上記のように、動き重視の場合は、優先度マップの X方向に優先度を上げ、逆に、画質重視の場合は、優先度マップの Y方向に優先度を上げる（図 7 A、図 7 B参照）。このように映像特性に合わせて優先度を決定することにより、映像特性に合わせ、いかなる帯域においても主観画質を高く保っための品質に関して高い優先度で伝送することが可能になる。

ステップ S 1 4 0 0〜ステップ S 1 7 0 0は、図 5に示すフローチヤ一トの各ステップと同様であるため、その説明を省略する。

このように、本実施の形態によれば、階層符号化を品質 '帯域別に別チヤネルに分割し、品質別のグループリストを送信するため、複数の受信端末がそれぞれ優先する品質を自由に選択し映像受信することができる。

また、映像特性に基づいて各チャネルの優先度を算出し、優先度を付けて伝送を行うため、各端末の使用可能な伝送帯域において、入力映像に対して主観画質に与える影響の大きい品質を優先して受信することができる。すなわち、映像特性に合わせて適切な品質を重視した映像伝送を実現することができる。

(実施の形態 3 )

本実施の形態では、階層符号化データを品質 ·帯域別に分割し、各チヤネル内のバケツトごとに算出した優先度を付加して別チャネルで伝送するとともに、品質別のグループリストを送信することにより、受信端末が優先する品質を選択でき、より細かい精度でネットワークの状況に応じ端末特性や映像特性に適した品質で映像を受信することができる映像伝送システムについて説明する。

図 1 5は、本発明の実施の形態 3に係る映像伝送システムの構成を示す図である。なお、この映像伝送システムにおける映像送信装置 3 0 0は、図 2 に示す映像伝送システムにおける映像送信装置 1 0 0と同様の基本的構成を有しており、同一の構成要素には同一の符号を付し、その説明を省略する。また、映像受信装置 1 5 0は、図 2に示すものと全く同一であるため、その説明を省略する。

本実施の形態の特徴は、実施の形態 1 (および実施の形態 2 ) ではチヤネルに対して優先度を付けるのに対し、ここでは、チャネル內のパケットに対してさらに細かい優先度を付けて伝送を行うことである。そのため、映像送信装置 3 0 0は、チャネル分割部 3 0 2を有する。

チャネル分割部 3 0 2は、映像符号化部 1 0 4から出力された符号化データを複数に分割し、各分割データに別々のチャネルを割り当てて優先度算出部 1 1 2から出力される優先度を付加し、さらに、チャネルごとにバケツト分割を行い、パケットの優先度を算出してパケットに優先度を付け、映像送信部 108に分割データを出力し、分割リストをグループリスト算出部 1 1 4に出力する。処理の詳細については、後で説明する。

次いで、上記構成を有する映像送信装置 300の動作について、図 1 6に示すフローチャートを用いて説明する。なお、図 1 6に示すフローチャートは、映像送信装置 300の図示しない記憶装置（たとえば、 ROMやフラッシュメモリなど）に制御プログラムとして記憶されており、同じく図示しない C PUによって実行される。

本実施の形態では、図 1 6に示すように、ステップ S 1420およびステップ S 1440を図 5に示すフローチャートに挿入し、ステップ S 1400 を削除している。

ステップ S 1 000〜ステップ S 1 300は、図 5に示すフローチヤ一トの各ステップと同様であるため、その説明を省略する。

そして、ステップ S 1420では、チャネル分割部 302で、実施の形態 1と同様に、符号化データの分割を行う。たとえば、基本レイヤを 1つのチャネルとし（B L)、拡張レイヤ（E L) 1〜4をそれぞれあらかじめ決められたデータ量で分割し、別チャネルとする（図 4参照）。そして、優先度算出部 1 1 2から出力された優先度（図 8A参照）を各チャネルに付与する（図 8 B参照）。

そして、ステップ S 1440では、同じくチャネル分割部 302で、さらに、チャネルを構成するパケットへの優先度を算出する。ここで、パケットとは、データ送出の最小単位であり、たとえば、 I Pパケットのことを指す。具体的な処理の手順は、次のとおりである。

1) バケツト分割

チャネル内のバケツトをあらかじめ設定された分割数 κのバケツト群に分割する。たとえば、図 1 7 Cは、 K= 4の場合であってチャネル E L 1—1 を 4等分割する場合を示している。なお、パケットの分割方法は、等分割に限定されない。 2) バケツト優先度算出

各バケツトの優先度を算出する。図 1 7は、バケツト優先度算出の一例を示しており、特に、図 1 7 Aは、チャネルの優先度マップであり、図 1 7 B は、基本レイヤ（B L)、拡張レイヤ 1 (E L 1) のチャネル優先度を示し、図 1 7 Cは、チャネル E L 1—1に対して分割されたパケット群のパケット優先度の一例を示している。図 1 7において、数字が小さいパケット程、優先度が高いことを示す。

図 1 7 Cの例では、チャネル優先度 Pを用いて、次の（式 2) に従い、丄 … （式 2)

人

下位に属するパケットから高い優先度を算出する。ここで、 iはパケットの位置するパケット群番号であり、 P iはパケット群の優先度であり、 Kはチャネルの分割数であり、 Pはチャネルの優先度である。なお、パケット優先度の算出方法は、上記の（式 2) に限定されない。

こうして算出されたバケツト優先度は、各バケツトのヘッダに付与される。バケツト優先度を付けた符号化データは、映像送信部 1 08に出力される。ステップ S 1 500〜ステップ S 1 700は、図 5に示すフローチヤ一トの各ステップと同様であるため、その説明を省略する。

このように、本実施の形態によれば、階層符号化データを品質 ·帯域別に別チャネルに分割し、端末情報に基づいてチャネルに優先度を付け、さらにチャネル内のパケッ卜に細かい優先度を付けて伝送を行うため、各端末の使用可能な伝送帯域において、より細かい精度で自動的に端末特性に適した品質の符号化データを優先して受信することができる。

なお、本実施の形態では、チャネルの優先度算出方法として実施の形態 1 と同様に端末情報を用いる場合を示した力 S、これに限定されるわけではなく、実施の形態 2と同様に映像特性を用いることも可能である。

(実施の形態 4) 本実施の形態では、階層符号化データを品質 ·帯域別に分割し別チャネル. で伝送するとともに、受信端末の受信状況に応じて優先する品質の種類を制御することにより、主観画質の高い映像を受信することができる映像伝送システムについて説明する。

図 1 8は、本発明の実施の形態 4に係る映像伝送システムの構成を示す図である。なお、この映像伝送システムにおける映像受信装置 4 5 0は、図 2 に示す映像伝送システムにおける映像受信装置 1 5 0と同様の基本的構成を有しており、同一の構成要素には同一の符号を付し、その説明を省略する。また、映像送信装置 1 0 0は、図 2に示すものと全く同一であるため、その説明を省略する。

本実施の形態の特徴は、受信端末の受信状況 (たとえば、データ欠落率またはパケットロス率）に応じて優先する品質の種類を制御することである。そのため、映像受信装置 4 5 0は、受信状況算出部 4 5 2、受信チャネル決定部 4 5 4、および映像受信部 1 6 0 aを有する。

映像受信部 1 6 0 aは、図 2の映像受信装置 1 5 0と同様に、受信チヤネル決定部 4 5 4から出力されたチャネル番号に対応する符号化データを受信し、受信した符号化データを映像復号化部 1 6 2に出力する。ただし、本実施の形態では、さらに、受信チャネルの総数と、正常にデータを受信できたチャネルの総数とを受信状況算出部 4 5 2に出力する。

受信状況算出部 4 5 2は、映像受信部 1 6 0 aから出力された情報を用いて受信状況を算出する。具体的には、映像受信部 1 6 0 aから出力された受信チヤネル総数および正常に受信できたチャネル総数を用いてデータ欠落率 Lを算出し、算出したデータ欠落率 Lを受信チャネル決定部 4 5 4に出力する。処理の詳細については、後で説明する。

受信チャネル決定部 4 5 4は、受信状況算出部 4 5 2から出力されたデータ欠落率 Lを用いて優先品質を決定し、決定した優先品質とグループリスト受信部 1 5 6から出力されたグループリストを用いて受信するチャネル番号を決定し、決定したチャネル番号を映像受信部 1 6 0 aに出力する。ただし、受信状況算出部 4 5 2またはグループリスト受信部 1 5 6からの出力がない場合は、前回決定したチャネル番号を映像受信部 1 6 0 aに出力する。処理の詳細については、後で説明する。

次いで、上記構成を有する映像受信装置 4 5 0の動作について、図 1 9に示すフローチャートを用いて説明する。なお、図 1 9に示すフローチャートは、映像受信装置 4 5 0の図示しない記憶装置（たとえば、 R O Mやフラッシュメモリなど）に制御プログラムとして記憶されており、同じく図示しない。 P Uによって実行される。

本実施の形態では、図 1 9に示すように、ステップ S 2 0 5 0を図 1 0に示すフローチヤ一トに挿入し、ステップ S 2 0 0 0を削除している。

ステップ S 2 0 5 0では、受信状況算出部 4 5 2で、映像受信部 1 6 0 a から出力された情報（受信チャネル総数と正常に受信できたチャネル総数）を用いてデータ欠落率 Lを算出し、算出したデータ欠落率 Lを受信チャネル決定部 4 5 4に出力する。ここで、データ欠落率 Lは、たとえば、次の（式 3 )、

_L -n - T„j ... (式 _{3 )}

C M

によって算出される。ただし、 C _nは受信チヤネル総数であり、 τ _ηは正常に受信できたチヤネル総数である。

なお、データ欠落率 Lの算出方法は、上記の例に限定されない。

ステップ S 2 1 0 0〜ステップ S 2 6 0 0は、図 1 0に示すフローチヤ一トの各ステップと同様であるため、その説明を省略する。ただし、本実施の形態では、ステップ S 2 2 0 0の受信チャネル決定処理の際に、次のような処理を行う。

すなわち、ステップ S 2 2 0 0では、受信チャネル決定部 4 5 4で、受信状況算出部 4 5 2から出力されたデータ欠落率 Lを用いて優先品質を決定し、さらに、決定した優先品質とグループリスト受信部 1 56から出力されたグループリストを用いて受信すべきチャネル番号を決定し、決定したチャネル番号を映像受信部 160 aに出力する。

ここで、具体的な優先品質決定方法は、たとえば、次のとおりである。すなわち、データ欠落率 Lを所定のしきい値 THと比較して、優先品質を決定する。ここでは、データ欠落率 Lが高くしきい値 THを超える（L>TH) 場合は、データ欠落の影響が小さい動き優先とし（動き優先の場合は、フレームレートが高く、パケットエラーの主観画質への影響が小さい）、データ欠落率 Lが低くしきい値 TH以下 (L≤TH) の場合は、データ欠落の影響が大きい画質優先とする（画質優先の場合は、フレームレートが低く、バケツトエラーにより主観画質が大きく低下してしまう）。

このように、本実施の形態によれば、階層符号化データを品質 ·帯域別に別チャネルに分割し優先度を付けて伝送する映像伝送システムにおいて、受信端末の受信状況を用いてデータ欠落率を算出し、データ欠落率が高い場合は、フレームレートが高くデータ欠落が主観画質に与える影響の小さい動き優先を選択し、そうでない場合は画質優先を選択するため、受信状況によらず主観画質の高い映像を受信することができる。すなわち、受信状況に合わせて受信品質の向上を図ることができる。

以上説明したように、本発明によれば、特性が異なる複数の端末で同時に映像を受信する場合において、各端末が自己に適した品質で映像を受信することができる。

本明細書は、 200 3年 2月 28日出願の特願 2003— 05 3 780に基づく。この内容はすべてここに含めておく。産業上の利用可能性

本発明は、特性が異なる複数の端末で同時に映像を受信する場合において、各端末が自己に適した品質で映像を受信することができる効果を有し、ネットワークを通じて映像を伝送する映像伝送システムにおいて適用することができる

Claims

請求の範囲

1 . ネットワークを通じて階層符号化データを映像送信装置から映像受信装置に伝送する映像伝送システムであって、

前記映像送信装置は、

階層符号化データを品質別または品質および帯域別に別々のチヤネルに分割する分割手段と、

分割された階層符号化データを互いに別チャネルで送信する第 1送信手段と、

品質別にチャネルをグルーピングしてグループリストを算出する算出手段と、

算出されたグループリストを送信する第 2送信手段と、を有し、前記映像受信装置は、

前記映像送信装置から送信されたグループリストを受信する第 1受信手段と、

受信されたグループリストを用いて受信チヤネルを決定する決定手段と、前記映像送信装置から送信された分割階層符号化データのうち、決定された受信チャネルのデータを受信する第 2受信手段と、

を有する、映像伝送システム。

2 . 前記品質は、画質、フレームレート、エラー耐性、解像度、およぴ遅延のうちの一以上の組み合わせである、

請求の範囲 1記載の映像伝送システム。

3 . 階層符号化データを品質別または品質および帯域別に別々のチヤネルに分割する分割手段と、

算出されたグループリストを送信する第 2送信手段と、

を有する、映像送信装置。

4 . 各チャネルの優先度を算出する第 2算出手段、をさらに有し、前記分割手段は、

階層符号化データを品質別または品質および帯域別に別々のチャネルに分割するとともに、各チャネルに算出されたチャネル優先度を付与し、前記第 1送信手段は、

分割された階層符号化データをチャネル優先度が付与された互いに別のチャネルで送信する、請求の範囲 3記載の映像送信装置。

5 . 前記第 2算出手段は、

受信端末情報に基づいて各チャネルの優先度を算出する、

請求の範囲 4記載の映像送信装置。

6 . 前記受信端末情報は、映像受信装置の表示デバイスの画面サイズである、請求の範囲 5記載の映像送信装置。

7 . 前記受信端末情報は、映像受信装置のチャネル受信状況である、請求の範囲 5記載の映像送信装置。

8 . 前記第 2算出手段は、

映像特性に基づいて各チャネルの優先度を算出する、

請求の範囲 4記載の映像送信装置。

9 . 前記分割手段は、

階層符号化データを品質別または品質おょぴ帯域別に別々のチャネルに分割し、各チャネルに算出されたチャネル優先度を付与するとともに、各チヤネル内のバケツトの優先度を算出し、各バケツトに算出されたパケット優先度を付与し、

前記第 1送信手段は、

分割された階層符号化データをパケット優先度が付与された互いに別のチャネルで送信する、

請求の範囲 4記載の映像送信装置。

1 0 . 請求項 3記載の映像送信装置から送信されたグループリストを受信する第 1受信手段と、

受信されたグループリストを用いて受信チャネルを決定する決定手段と、前記映像送信装置から送信された分割階層符号化データのうち、決定された受信チャネルのデータを受信する第 2受信手段と、

を有する、映像受信装置。

1 1 . 受信状況を算出する第 3算出手段、をさらに有し、

前記決定手段は、

受信されたグループリストおよび算出された受信状況を用いて受信チヤネルを決定する、

請求の範囲 1 0記載の映像受信装置。

1 2 . ネットワークを通じて階層符号化データを映像送信装置から映像受信装置に伝送する映像伝送方法であって、

前記映像送信装置が、階層符号化データを品質別または品質および帯域別に別々のチヤネルに分割するステップと、

前記映像送信装置が、分割した階層符号化データを互いに別チャネルで送信するステップと、

前記映像送信装置が、品質別にチャネルをグルーピングしてグループリストを算出するステップと、

前記映像送信装置が、算出したグループリストを送信するステップと、前記映像受信装置が、前記映像送信装置から送信されたグループリストを受信するステップと、

前記映像受信装置が、受信したグループリストを用いて受信チャネルを決定するステップと、

前記映像受信装置が、前記映像送信装置から送信された分割階層符号化データのうち、決定した受信チャネルのデータを受信するステップと、を有する、映像伝送方法。