JP7296219B2 - 受信装置、送信装置、及びプログラム - Google Patents

Description

本発明は、映像伝送システムにおいて用いられる受信装置、送信装置、及びプログラムに関する。

近年、全方位映像に対応したカメラやヘッドマウントディスプレイの進化に伴い、全方位映像を提供する映像伝送システムが注目されている。

全方位映像は、例えばＥＲＰ（正距円筒図法）により二次元の矩形映像に射影変換した後、ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）などの映像符号化方式で圧縮し、放送や通信回線で伝送する。受信側では、圧縮された映像信号を復号し、射影変換とは逆の変換を行い、表示装置に表示する。

全方位映像を提供するサービスでは一般に、利用者の視線方向の映像だけでなく、側面や背面の映像も表示される。

この際、全方位映像を均一の品質で表示するだけでなく、利用者の視線方向は高品質の映像（例えば高解像度の映像）を表示し、背面の映像は低品質の映像（例えば低解像度の映像）を表示することで、全方位映像全体の符号化ビットレートが同じ場合の主観品質を向上することができる。

このため、送信側は、高解像度の映像と低解像度の映像とを用意し、それらを独立して復号可能な矩形状の分割領域（例えば、ＨＥＶＣで圧縮符号化する場合のタイル（Ｍｏｔｉｏｎ Ｃｏｎｓｔｒａｉｎｅｄ Ｔｉｌｅ Ｓｅｔｓ））に分割する。

受信側は、ヘッドマウントディスプレイの視線センサーやタブレット端末でのユーザー操作により特定された利用者の視線方向の情報をＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）－ＤＡＳＨ或いはＭＭＴ（ＭＰＥＧ Ｍｅｄｉａ Ｔｒａｎｓｐｏｒｔ）の制御情報により送信側に伝送する。

この情報を用いて、送信側は、利用者の視線方向に応じた分割領域を選択し、それらの分割領域を組み合わせた映像を生成して受信側に送信する。受信側は、この映像を受信し、送信側が組み合わせた分割領域を復号し、それぞれの領域をそれぞれの方向の映像として表示する。

Information technology -Coded representation of immersive media - Part 2: Omnidirectional media format、ISO/IEC FDIS 23090-2 Information technology - High efficiency coding and media delivery in heterogeneous environments - Part 1:MPEG media transport (MMT)、ISO/IEC 23008-1 映像情報メディア学会誌 vol.73, no.1,"360度VR映像の標準化動向"(2019年1月)

しかしながら、上述した映像伝送システムは、利用者の視線方向に応じた分割領域の選択を送信側で行うため、利用者（受信側）の数が増えると送信側の負荷が高まるとともに、ＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）マルチキャストのような一方向の伝送で用いることができないという課題がある。

そこで、本発明は、利用者の視線方向に応じて分割領域を組み合わせて表示する場合であっても、送信側の負荷の増大を抑制するとともに、一方向の伝送にも適用可能な受信装置、送信装置、及びプログラムを提供することを目的とする。

第１の態様に係る受信装置は、映像伝送システムにおいて用いられる受信装置であって、互いに映像品質の異なる複数の映像トラックのそれぞれを分割して得られた分割領域に関する品質情報を受信する品質情報受信部と、前記受信装置の利用者の視線方向を特定する視線方向特定部と、前記品質情報受信部が受信した前記品質情報と、前記視線方向特定部が特定した前記視線方向とに基づいて、表示する映像を構成するために組み合わせる分割領域を選択する分割領域選択部とを備えることを要旨とする。

第２の態様に係る送信装置は、映像伝送システムにおいて用いられる送信装置であって、互いに映像品質の異なる複数の映像トラックのそれぞれを分割して得られた分割領域に関する品質情報を受信装置に送信する品質情報送信部を備え、前記品質情報は、表示する映像を構成するために組み合わせる分割領域を前記受信装置において選択する際に参照されることを要旨とする。

第３の態様に係るプログラムは、コンピュータを第１の態様に係る受信装置として機能させることを要旨とする。

第４の態様に係るプログラムは、コンピュータを第２の態様に係る送信装置として機能させることを要旨とする。

本発明によれば、利用者の視線方向に応じて分割領域を組み合わせて表示する場合であっても、送信側の負荷の増大を抑制するとともに、一方向の伝送にも適用可能な受信装置、送信装置、及びプログラムを提供できる。

第１実施形態に係る配信サーバ及び受信端末の構成を示す図である。 第１実施形態及び第２実施形態に係る射影変換の一例を示す図である。 第１実施形態及び第２実施形態に係る配信サーバが用意する３つの映像トラックの一例を示す図である。 第１実施形態及び第２実施形態に係る受信端末において視線方向が０度の時に選択するタイルの一例を示す図である。 第１実施形態及び第２実施形態に係る受信端末において選択したタイルを統合した映像の一例を示す図である。 第１実施形態及び第２実施形態に係る受信端末において図５の映像を復号後に表示される映像の一例を示す図である。 第１実施形態に係る映像伝送システムの動作シーケンスを示す図である。 第２実施形態に係る映像伝送システムにおけるＩＰマルチキャストを示す図である。 第２実施形態に係る配信サーバ及び受信端末の構成を示す図である。 第２実施形態に係る映像伝送システムの動作シーケンスを示す図である。

図面を参照して実施形態について説明する。図面の記載において、同一又は類似の部分には同一又は類似の符号を付している。

＜第１実施形態＞
（映像伝送システム）
まず、本実施形態に係る映像伝送システムについて説明する。図１は、本実施形態に係る映像伝送システムを示す図である。

本実施形態に係る映像伝送システムは、図１に示すように、配信サーバ１と、受信端末２とを有する。配信サーバ１は送信装置の一例であり、受信端末２は受信装置の一例である。

配信サーバ１は、伝送路３を介して受信端末２に対して映像伝送を行うことで、受信端末２の利用者に全方位映像を提供する。伝送路３は、配信サーバ１と受信端末２との間のＩＰネットワークにより構成される有線伝送路であってもよい。但し、伝送路３の少なくとも一部が無線伝送路であってもよい。

受信端末２は、配信サーバ１からの映像伝送を受信可能な機器であればどのようなものであってもよいが、例えば、ヘッドマウントディスプレイ、タブレット端末、スマートフォン、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）などである。

（配信サーバの構成）
次に、本実施形態に係る配信サーバ１の構成について説明する。

配信サーバ１は、図１に示すように、映像マッピング部１１と、映像符号化部１２と、映像蓄積部１３と、視聴要求受信部１４と、品質情報送信部１５と、配信要求受信部１６と、分割領域配信部１７Ａとを有する。

映像マッピング部１１は、図２に示すように、入力される全方位映像を例えばＥＲＰで射影変換により二次元の矩形映像に射影変換する。射影変換には、ＥＲＰに限らず、キューブマップを用いてもよい。射影変換した映像は３６０度全方位の映像を含むが、その一部分を用いずダミーの画素とすることも考えられる。また、映像マッピング部１１は、射影変換により得た矩形映像を複数の分割領域に分割し、矩形映像を分割領域に分割した状態で映像符号化部１２に出力する。

映像符号化部１２は、映像マッピング部１１から入力される矩形映像をＨＥＶＣなどの映像符号化方式で圧縮し、圧縮符号化した映像を映像蓄積部１３に出力する。ここで、映像符号化部１２は、独立して復号可能な分割領域ごとに圧縮符号化する。

ＨＥＶＣで圧縮符号化する場合、このような分割領域は「タイル」と呼ばれる。タイルは、動き予測の参照範囲が制限されたＭＣＴＳ（Ｍｏｔｉｏｎ Ｃｏｎｓｔｒａｉｎｅｄ Ｔｉｌｅ Ｓｅｔｓ）であって、それぞれのタイルが独立して復号できる構造とする。タイルが独立して復号できる構造であれば、圧縮符号化方式はＨＥＶＣでなくてもよい。

本実施形態において、映像マッピング部１１及び映像符号化部１２は、伝送路３の限られた帯域や受信端末２の復号能力において可能な限りユーザー体感品質を向上するために、同一コンテンツにおいていくつかの品質の映像を用意する。

ここで、品質とは、映像の解像度、フレームレート、量子化ビット数、ダイナミックレンジなどの映像パラメタの値による品質や、同一映像パラメタ値であっても映像の符号化レートの多少に依存する品質などを意味する。

例えば、映像マッピング部１１及び映像符号化部１２は、高品質の映像と低品質の映像とを用意し、各映像を圧縮符号化する。以下において、高品質の映像が高解像度の映像であり、低品質の映像が低解像度の映像である一例について説明する。

映像マッピング部１１及び映像符号化部１２は、図３（ａ）に示すように、例えば５１２０画素×２５６０画素の高解像度の映像を１２８０画素×１２８０画素の８個のタイルに分割したうえで、ＨＥＶＣで圧縮符号化する。

映像符号化部１２は、このように圧縮符号化した高解像度の映像を、ＯＭＡＦ（Ｏｍｎｉｄｉｒｅｃｔｉｏｎａｌ Ｍｅｄｉａ Ｆｏｒｍａｔ）で規定されるファイルフォーマットの映像トラック１として格納し、映像トラック１を映像蓄積部１３に出力する。

映像マッピング部１１は、図３（ｂ）及び（ｃ）に示すように、高解像度の映像を２５６０画素×１２８０画素にダウンサンプルした低解像度の映像を生成する。映像マッピング部１１は、中心方向が９０度異なる２種類の低解像度映像（映像Ａ、映像Ｂ）を生成し、それぞれ１２８０画素×６４０画素の４個のタイルに分割する。

映像符号化部１２は、映像Ａ及び映像ＢのそれぞれをＨＥＶＣでタイルごとに圧縮符号化し、これらの低解像度映像を、ＯＭＡＦで規定されるファイルフォーマットの映像トラック２及び３に格納し、映像トラック２及び３を映像蓄積部１３に出力する。

このように、高解像度の映像及び低解像度の映像は、別々のストリームであり、ＯＭＡＦのトラックに別々に格納される。

映像蓄積部１３は、映像符号化部１２から入力される映像トラック１乃至３を蓄積する。なお、ＯＭＡＦを用いる場合、あらかじめ圧縮符号化したコンテンツを蓄積してから配信するオンデマンド型の配信である場合もあるほか、全方位映像の撮影から射影変換及び圧縮符号化をリアルタイムに行うリアルタイムストリーミング型の配信も想定される。

ＯＭＡＦでは、トラック１は「ＥＲＰで射影変換した中心方向が０度の映像」、トラック２は「ＥＲＰで射影変換した中心方向が０度の映像」、トラック３は「ＥＲＰで射影変換した中心方向が９０度の映像」などの各映像の情報を“ｐｒｏｊｅｃｔｅｄ ｏｍｎｉｄｉｒｅｃｔｉｏｎａｌ ｖｉｄｅｏ”ｂｏｘで示すことができる。

また、ＯＭＡＦでは、映像トラックとは別に、映像の分割の状態やそれぞれの品質を示す情報として、“ｓｐｈｅｒｉｃａｌ ｒｅｇｉｏｎ－ｗｉｓｅ ｑｕａｌｉｔｙ ｒａｎｋｉｎｇ”ｂｏｘ或いは“２Ｄ ｒｅｇｉｏｎ－ｗｉｓｅ ｑｕａｌｉｔｙ ｒａｎｋｉｎｇ”ｂｏｘを含むことができる。

“２Ｄ ｒｅｇｉｏｎ－ｗｉｓｅ ｑｕａｌｉｔｙ ｒａｎｋｉｎｇ”ｂｏｘは、映像トラックの映像分割の情報と、相対的な映像品質とを格納することができる。具体的には、同ｂｏｘ内のｎｕｍ＿ｒｅｇｉｏｎフィールドが分割領域の数を示し、それぞれの分割領域ごとにｑｕａｌｉｔｙ＿ｒａｎｋｉｎｇが相対的な品質とそれぞれの分割領域の位置とを示す。ここで、相対的な品質を示す値とは、０を除き、値が小さい方が高品質であることを示す１～２５５の値をいう。

図３の例では、“２Ｄ ｒｅｇｉｏｎ－ｗｉｓｅ ｑｕａｌｉｔｙ ｒａｎｋｉｎｇ”ｂｏｘは、
・映像トラック１は、８分割され、いずれの分割領域もｑｕａｌｉｔｙ＿ｒａｎｋｉｎｇ＝１
・映像トラック２は、４分割され、いずれの分割領域もｑｕａｌｉｔｙ＿ｒａｎｋｉｎｇ＝２
・映像トラック３は、４分割され、いずれの分割領域もｑｕａｌｉｔｙ＿ｒａｎｋｉｎｇ＝２
であることを示す。

なお、本実施形態では、ＯＭＡＦにおけるｑｕａｌｉｔｙ＿ｒａｎｋｉｎｇを含むｂｏｘを用いる例を説明するが、同じ内容が含まれる品質情報であれば、ｑｕａｌｉｔｙ＿ｒａｎｋｉｎｇを含むｂｏｘでなくてもよい。

視聴要求受信部１４は、視聴するコンテンツを示す視聴要求を受信端末２から伝送路３を介して受信し、要求されたコンテンツを示す情報を品質情報送信部１５に出力する。

品質情報送信部１５は、受信端末２から要求されたコンテンツについての品質情報を、伝送路３を介して受信端末２に送信する。品質情報は、映像品質の異なる複数の映像トラックのそれぞれを分割して得られた分割領域に関する品質情報であって、それぞれの分割領域の相対的な品質及びそれぞれの分割領域の位置を示す。品質情報は、分割領域の数をさらに示してもよい。

例えば、品質情報送信部１５は、受信端末２に対し、“ｐｒｏｊｅｃｔｅｄ ｏｍｎｉｄｉｒｅｃｔｉｏｎａｌ ｖｉｄｅｏ”ｂｏｘと品質情報とを送信する。ＭＭＴにより伝送する場合、品質情報送信部１５は、“ｐｒｏｊｅｃｔｅｄ ｏｍｎｉｄｉｒｅｃｔｉｏｎａｌ ｖｉｄｅｏ”ｂｏｘと品質情報とをＭＭＴにおけるムービーフラグメントメタデータとしてＭＭＴパケットで送信する。或いは、品質情報送信部１５は、単にＴＣＰでファイルとして受信端末２に品質情報を送信してもよい。

詳細については後述するが、受信端末２は、品質情報に基づいて分割領域（本実施形態では、タイル）を選択する。配信要求受信部１６は、受信端末２において選択された分割領域の配信要求を受信端末２から伝送路３を介して受信し、要求されたタイルを示す情報を分割領域配信部１７Ａに出力する。

分割領域配信部１７Ａは、受信端末２から要求されたタイルを映像蓄積部１３から読み出し、伝送路３を介してこれらのタイルを受信端末２に配信する。タイルはＨＥＶＣで符号化したストリームであるため、ＭＭＴのＭＰＵ（Ｍｅｄｉａ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）として送信することができる。

（受信装置の構成）
次に、本実施形態に係る受信端末２の構成について説明する。

受信端末２は、図１に示すように、視聴要求部２１と、品質情報受信部２２と、視線方向特定部２３と、分割領域選択部２４と、配信要求部２５と、分割領域取得部２６Ａと、映像復号部２７と、表示部２８とを有する。

視聴要求部２１は、例えばインターネット上のポータルサイトで提示される全方位映像コンテンツの一覧から受信端末２の利用者が選択したコンテンツを示す視聴要求を、伝送路３を介して配信サーバ１に送信する。

品質情報受信部２２は、視聴要求に対応するコンテンツの視聴するコンテンツの品質情報を受信し、受信した品質情報を分割領域選択部２４に出力する。例えば、品質情報受信部２２は、配信サーバ１から、“ｐｒｏｊｅｃｔｅｄ ｏｍｎｉｄｉｒｅｃｔｉｏｎａｌ ｖｉｄｅｏ”ｂｏｘと品質情報とを受信する。

視線方向特定部２３は、受信端末２の利用者の視線方向を特定し、特定した視線方向を示す情報を分割領域選択部２４に出力する。例えば、ヘッドマウントディスプレイなど視線センサーを備える場合、視線方向特定部２３は、視線センサーが検出する方向を視線方向として特定する。タブレット端末などにコンテンツを表示する場合は、角度センサーとユーザーのスワイプ操作とにより、利用者が視聴する方向を視線方向として特定する。

分割領域選択部２４は、品質情報受信部２２が受信した品質情報と、視線方向特定部２３が特定した視線方向とに基づいて、表示する映像を構成するために組み合わせる映像トラックの分割領域（本実施形態では、タイル）を選択し、選択したタイルを示す情報を配信要求部２５に出力する。

分割領域選択部２４は、利用者の視線方向に対応する領域については、高解像度のトラック１のタイルを選択する。一方、分割領域選択部２４は、利用者の視線方向に対応する領域以外の領域については、低解像度のトラック２又は３のタイルを選択する。

例えば、分割領域選択部２４は、図４（ａ）に示すように、利用者の視線方向が０度である場合、視線方向から－９０度から９０度までは高解像度の領域にするために、トラック１の中央の４つのタイルを選択する。また、分割領域選択部２４は、図４（ｂ）に示すように、この視線方向に対して背面に位置する－９０度から－１８０度と９０度から１８０度とをあわせ、９０度から２７０度の領域として、低解像度の映像のうち角度が適合するトラック３の右側の２つのタイルを選択する。

配信要求部２５は、分割領域選択部２４が選択したトラックのタイルを示す配信要求を、伝送路３を介して配信サーバ１に送信する。この要求はＴＣＰで行うことができるほか、ＭＭＴの制御情報としてＭＭＴパケットで送信してもよい。

分割領域取得部２６Ａは、配信要求に対応するトラックのタイルを、伝送路３を介して配信サーバ１から取得し、取得した各タイルを映像復号部２７に出力する。図４の例では、分割領域取得部２６Ａは、トラック１の中央の４つのタイルとトラック３の右側の２つのタイルとを配信サーバ１から取得することになる。

映像復号部２７は、図５に示すように、分割領域取得部２６Ａが取得した各タイルを復号するために１つのストリームに統合し、映像として復号する。映像復号部２７は、復号した映像を表示部２８に出力する。ここで、映像復号部２７は、図６に示すように、背面の低解像度の映像をアップサンプルし、５１２０画素×２５６０画素の映像を出力する。

表示部２８は、映像復号部２７が復号した映像を表示する。

視線方向特定部２３による視線方向の検出から、表示部２８による表示までの一連の動作を繰り返すことで、受信端末２において視線方向だけが高解像度の映像を視聴することができる。

（動作シーケンス）
次に、本実施形態に係る映像伝送システムの動作シーケンスについて説明する。図７は、本実施形態に係る映像伝送システムの動作シーケンスを示す図である。

図７に示すように、ステップＳ１０１において、受信端末２は、利用者が選択したコンテンツを示す視聴要求を配信サーバ１に送信する。

ステップＳ１０２において、配信サーバ１は、受信端末２から要求されたコンテンツについての品質情報を受信端末２に送信する。

ステップＳ１０３において、受信端末２は、配信サーバ１から受信した品質情報と利用者の視線方向とに基づいて、表示する映像を構成するために組み合わせる映像トラックの分割領域を選択する。

ステップＳ１０４において、受信端末２は、選択した映像トラックの分割領域の配信を配信サーバ１に要求する。

ステップＳ１０５において、配信サーバ１は、要求された必要な映像トラックの分割領域を受信端末２に送信する。

ステップＳ１０６において、受信端末２は、配信サーバ１から受信した映像トラックの分割領域を組み合わせて復号し、映像を表示する。なお、分割領域が、ＨＥＶＣで圧縮符号化したタイルの場合は受信端末２が分割領域を組み合わせて復号するが、個別のタイル毎に復号可能な圧縮方式の場合は分割領域を組み合わせて復号する必要はなく、個別のタイル毎に受信端末２が復号すればよい。

（本実施形態の効果）
本実施形態によれば、映像トラックの分割領域の品質情報を受信端末２に伝送し、受信端末２が、利用者の視線方向に応じた分割領域を選択及び組み合わせて表示することで、配信サーバ１の負荷を減らすことができる。

＜第２実施形態＞
第２実施形態について、上述した第１実施形態との相違点を主として説明する。

上述した第１実施形態では双方向の伝送路３を想定して説明したが、第２実施形態では、一方向の伝送路３を想定する。一方向の伝送路３は、ＩＰマルチキャストであってもよいし、放送波であってもよい。

（映像伝送システム）
まず、本実施形態に係る映像伝送システムについて説明する。図８は、本実施形態に係る映像伝送システムにおけるＩＰマルチキャストを示す図である。

図８に示すように、配信サーバ１は、個別の受信端末２の要求に応じて必要なトラックのタイルを送信することはせず、高解像度の映像と低解像度の映像とを別々のＩＰマルチキャストグループで送信する。図８において、トラック１をグループアドレスＡ宛で配信し、トラック２をグループアドレスＢ宛で配信し、トラック３をグループアドレスＣ宛で配信する一例を示している。

なお、通信回線でのＩＰマルチキャストは、放送波での伝送であってもよい。ＩＳＤＢ（Ｉｎｔｅｇｒａｔｅｄ Ｓｅｒｖｉｃｅｓ Ｄｉｇｉｔａｌ Ｂｒｏａｄｃａｓｔｉｎｇ）－Ｓ３や、ＡＴＳＣ（Ａｄｖａｎｃｅｄ Ｔｅｌｅｖｉｓｉｏｎ Ｓｙｓｔｅｍｓ Ｃｏｍｍｉｔｔｅｅ）３．０などのＩＰパケットの伝送に対応した放送システムは、通信回線におけるＩＰマルチキャストと同様の伝送路と考えられる。

放送波と組み合わせる場合、例えば低解像度の映像（トラック２）を放送波で送信し、高解像度の映像（トラック１）と別の低解像度の映像（トラック３）とを通信回線でＩＰマルチキャスト送信することが考えられる。

（配信サーバ及び受信端末の構成）
次に、本実施形態に係る配信サーバ１及び受信端末２の構成について説明する。図９は、本実施形態に係る配信サーバ１及び受信端末２の構成を示す図である。

配信サーバ１は、図９に示すように、第１実施形態で説明した配信要求受信部１６を有しておらず、且つ、第１実施形態で説明した分割領域配信部１７Ａに代えて映像トラック配信部１７Ｂを有する。映像トラック配信部１７Ｂは、高解像度の映像と低解像度の映像とを、伝送路３を介して別々のＩＰマルチキャストグループで送信する。配信サーバ１のその他の構成については、第１実施形態と同様である。

受信端末２は、図９に示すように、第１実施形態で説明した配信要求部２５を有しておらず、且つ、第１実施形態で説明した分割領域取得部２６Ａに代えて映像トラック取得部２６Ｂを有する。映像トラック取得部２６Ｂは、分割領域選択部２４が選択した分割領域（タイル）を含む映像トラックを、伝送路３を介して配信サーバ１から取得する。本実施形態において、映像復号部２７は、映像トラック取得部２６Ｂが取得した映像トラックの中から、分割領域選択部２４が選択した分割領域を統合して復号する。

具体的には、映像トラック取得部２６Ｂは、分割領域選択部２４が必要な分割領域を選択した後、その分割領域を含む映像トラックを送信しているマルチキャストのグループを受信することにより、その映像トラックを取得する。第１実施形態で説明した例では、映像トラック取得部２６Ｂは、トラック１及びトラック３の２つのＩＰフローを受信する。

この場合、必要としないタイルも受信することとなるが、受信端末２が備える復号能力が限られているため、低解像度のタイルを組み合わせることで、限られた復号装置でも復号することができる。

なお、一つの映像トラックを一つのマルチキャストグループで送信するのではなく、分割したタイルを一つのマルチキャストグループで送信することも考えられる。この場合、トラック１は８個のマルチキャストグループで、トラック２とトラック３はそれぞれ４個のマルチキャストグループで送信することとなる。

（動作シーケンス）
次に、本実施形態に係る映像伝送システムの動作シーケンスについて説明する。図１０は、本実施形態に係る映像伝送システムの動作シーケンスを示す図である。

図１０に示すように、ステップＳ２０１において、受信端末２は、利用者が選択したコンテンツを示す視聴要求を配信サーバ１に送信する。

ステップＳ２０２において、配信サーバ１は、受信端末２から要求されたコンテンツについての品質情報を受信端末２に送信する。

ステップＳ２０３において、受信端末２は、配信サーバ１から受信した品質情報と利用者の視線方向とに基づいて、表示する映像を構成するために組み合わせる映像トラックの分割領域を選択する。

ステップＳ２０４において、受信端末２は、選択した分割領域を含む映像トラックを送信しているマルチキャストのグループを受信して映像トラックを取得する。

ステップＳ２０５において、受信端末２は、取得した映像トラックの分割領域を組み合わせて復号し、映像を表示する。

（本実施形態の効果）
本実施形態によれば、映像トラックの分割領域の品質情報を受信端末２に伝送し、受信端末２が、利用者の視線方向に応じた分割領域を選択及び組み合わせて表示することで、一方向の伝送にも適用可能である。

＜その他の実施形態＞
第１実施形態及び第２実施形態において、受信端末２からの要求に応じて配信サーバ１が受信端末２に品質情報を送信する一例について説明した。しかしながら、各映像トラックについての品質情報を、ＩＰマルチキャストで送信したり、放送波で伝送したりすることも考えられる。このような品質情報の伝送方法を用いる場合、上述した視聴要求受信部１４及び視聴要求部２１は不要である。配信サーバ１は、個別の受信端末２の要求に応じる必要がないため、受信端末２が増えたとしても、配信サーバ１の負荷が増えることはない。

配信サーバ１が行う各処理をコンピュータに実行させるプログラム及び受信端末２が行う各処理をコンピュータに実行させるプログラムが提供されてもよい。プログラムは、コンピュータ読取り可能媒体に記録されていてもよい。コンピュータ読取り可能媒体を用いれば、コンピュータにプログラムをインストールすることが可能である。ここで、プログラムが記録されたコンピュータ読取り可能媒体は、非一過性の記録媒体であってもよい。非一過性の記録媒体は、特に限定されるものではないが、例えば、ＣＤ－ＲＯＭやＤＶＤ－ＲＯＭ等の記録媒体であってもよい。

また、配信サーバ１が行う各処理を実行する機能部（回路）を集積化し、配信サーバ１の少なくとも一部を半導体集積回路（チップセット、ＳｏＣ）として構成してもよい。同様に、受信端末２が行う各処理を実行する機能部（回路）を集積化し、受信端末２の少なくとも一部を半導体集積回路（チップセット、ＳｏＣ）として構成してもよい。

以上、図面を参照して一実施形態について詳しく説明したが、具体的な構成は上述のものに限られることはなく、要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。

１ ：配信サーバ
２ ：受信端末
３ ：伝送路
１１ ：映像マッピング部
１２ ：映像符号化部
１３ ：映像蓄積部
１４ ：視聴要求受信部
１５ ：品質情報送信部
１６ ：配信要求受信部
１７Ａ ：分割領域配信部
１７Ｂ ：映像トラック配信部
２１ ：視聴要求部
２２ ：品質情報受信部
２３ ：視線方向特定部
２４ ：分割領域選択部
２５ ：配信要求部
２６Ａ ：分割領域取得部
２６Ｂ ：映像トラック取得部
２７ ：映像復号部
２８ ：表示部

Claims (5)

1. 映像伝送システムにおいて用いられる受信装置であって、
   互いに映像品質の異なる複数の映像トラックのそれぞれを分割して得られた分割領域に関する品質情報を受信する品質情報受信部と、
   前記受信装置の利用者の視線方向を特定する視線方向特定部と、
   前記品質情報受信部が受信した前記品質情報と、前記視線方向特定部が特定した前記視線方向とに基づいて、表示する映像を構成するために組み合わせる分割領域を選択する分割領域選択部と、
   前記分割領域選択部が選択した分割領域を含む映像トラックを取得する映像トラック取得部と、
   前記映像トラック取得部が取得した映像トラックの中から、前記分割領域選択部が選択した分割領域を復号する映像復号部と、を備えることを特徴とする受信装置。
2. 前記品質情報受信部は、ＯＭＡＦ（Ｏｍｎｉｄｉｒｅｃｔｉｏｎａｌ Ｍｅｄｉａ Ｆｏｒｍａｔ）に格納された前記品質情報を受信することを特徴とする請求項１に記載の受信装置。
3. 前記品質情報受信部は、ＭＭＴ（ＭＰＥＧ Ｍｅｄｉａ Ｔｒａｎｓｐｏｒｔ）パケットに格納された前記品質情報を受信することを特徴とする請求項１に記載の受信装置。
4. 前記分割領域選択部が選択した分割領域の配信を配信サーバに要求する配信要求部と、
   前記配信サーバから配信された分割領域を取得する分割領域取得部と、
   前記分割領域取得部が取得した分割領域を復号する映像復号部と、をさらに備えることを特徴とする請求項１乃至３のいずれか１項に記載の受信装置。
5. コンピュータを請求項１乃至４のいずれか１項に記載の受信装置として機能させることを特徴とするプログラム。

Images