JP4190357B2

JP4190357B2 - Broadcast data transmitting apparatus, broadcast data transmitting method, and broadcast data receiving apparatus

Info

Publication number: JP4190357B2
Application number: JP2003168265A
Authority: JP
Inventors: 直樹石原; 竜二北浦; 一人大原; 敏男野村; 典男伊藤; 正宏塩井
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2003-06-12
Filing date: 2003-06-12
Publication date: 2008-12-03
Anticipated expiration: 2023-06-12
Also published as: JP2005006114A

Description

【０００１】
【発明の属する技術分野】
本発明はデジタル放送技術に関し、特に立体視を行うことのできる３次元画像データを含む放送データを送信する放送データ送信装置、および３次元画像データを含む放送データを受信するための放送データ受信装置等に関する。
【０００２】
【従来の技術】
従来、３次元画像を表示する様々な方法が提案されている。その中でも一般的に用いられているのは両眼視差を利用する２眼式と呼ばれるものである。すなわち、両眼視差を持った左眼画像と右眼画像を用意し、それぞれ独立に左右の眼に投影することにより立体視を行う。２眼式の代表的な方式としてフィールドシーケンシャル方式やパララクスバリア方式が提案されている。
【０００３】
図２５は、フィールドシーケンシャル方式を説明するための概念図である。このフィールドシーケンシャル方式は、図２５のように、左眼画像と右眼画像が垂直方向１画素おきに交互にならんだ形に配置され、左眼画像の表示と右眼画像の表示が交互に切り替えて表示されるものである。左眼画像および右眼画像は通常の２次元表示時に比べて垂直解像度が１／２になっている。観察者はディスプレイの切り替え周期に同期して開閉するシャッタ式のメガネを着用する。ここで使用するシャッタは、左眼画像が表示されている時は左眼側が開いて右眼側が閉じ、右眼画像が表示されている時は左眼側が閉じて右眼側が開く。こうすることで、左眼画像は左眼だけで、右眼画像は右眼だけで観察されることになり、立体視を行うことができる。
【０００４】
図２６は、パララクスバリア方式を説明するための概念図である。図２６（Ａ）は、視差が生じる原理を示す図である。一方、図２６（Ｂ）は、パララクスバリア方式で表示される画面を示す図である。
【０００５】
図２６（Ａ）では、図２６（Ｂ）に示すような左眼画像と右眼画像が水平方向１画素おきに交互にならんだ形に配置された画像を、画像表示パネル２６０１に表示し、同一視点の画素の間隔よりも狭い間隔でスリットを持つパララクスバリア２６０２を画像表示パネル２６０１の前面に置くことにより、左眼画像は左眼２６０３だけで、右眼画像は右眼２６０４だけで観察することになり、立体視を行うことができる。
【０００６】
表示の方式に適した画像の形式が異なるため、それぞれの表示形式に合わせて３次元画像を作成する必要があり、３次元画像に汎用性がないという問題があった。
【０００７】
このような問題を解決するために、特開２００３−１１１１０１号公報（２００３年４月１１日公開）では、画像の構成や視点数など立体画像を表示するための一連の処理において参照すべき情報を、３次元画像データに付加することで、立体画像に汎用性を持たせることのできる立体画像処理方法、装置、およびシステムが開示されている。
【０００８】
【特許文献１】
特開２００３−１１１１０１号公報
【０００９】
【発明が解決しようとする課題】
しかしながら、特開２００３−１１１１０１号公報では、前記情報は画像データのヘッダ領域に配置されるため、通信回線を利用したデータ配信やファイルへの記録を目的としており、画像データを放送する場合が考慮されておらず、そのままでは画像データの放送に適用できないという問題がある。
【００１０】
本発明は、以上のような問題点を解決するためになされたものであって、その目的は、汎用性を具備した３次元画像を含む放送データの送受信をすることのできる放送データ送信装置、放送データ送信方法および放送データ受信装置を提供することにある。
【００１１】
【課題を解決するための手段】
上記目的を達成するために、画像データを含むコンテンツを放送データとして送信する放送データ送信装置であって、前記コンテンツを再生するために使用される番組配列情報を作成する番組配列情報作成手段を備え、前記番組配列情報は前記コンテンツに含まれる３次元画像データの表示を制御する３次元制御情報を含み、前記番組配列情報作成手段は、前記３次元画像データの再生時間帯を示す情報を前記３次元制御情報に格納することを特徴とする。
【００１３】
また、本発明は、画像データを含むコンテンツを放送データとして送信する放送データ送信装置であって、前記コンテンツを再生するために使用される番組配列情報を作成する番組配列情報作成手段を備え、前記番組配列情報は前記コンテンツに含まれる３次元画像データの表示を制御する３次元制御情報を含み、前記番組配列情報作成手段は、前記３次元画像データを２次元表示するときに選択される視点画像を示す２次元表示画像情報を前記３次元制御情報に格納することを特徴とする。
【００１４】
また、本発明は、画像データを含むコンテンツを放送データとして送信する放送データ送信方法であって、前記コンテンツを再生するために使用される番組配列情報を作成する番組配列情報作成ステップを持ち、前記番組配列情報は前記コンテンツに含まれる３次元画像データの表示を制御する３次元制御情報を含み、前記番組配列情報作成ステップは、前記３次元画像データの再生時間帯を示す情報を前記３次元制御情報に格納することを特徴とする。
【００１６】
また、本発明は、画像データを含むコンテンツを放送データとして送信する放送データ送信方法であって、前記コンテンツを再生するために使用される番組配列情報を作成する番組配列情報作成ステップを持ち、前記番組配列情報は前記コンテンツに含まれる３次元画像データの表示を制御する３次元制御情報を含み、前記番組配列情報作成ステップは、前記３次元画像データを２次元表示するときに選択される視点画像を示す２次元表示画像情報を前記３次元制御情報に格納することを特徴とする。
【００１７】
また、本発明は、放送データを受信する放送データ受信装置であって、前記放送データに含まれるコンテンツに対する制御情報を解析する番組配列情報解析手段と、入力された画像データを２次元表示するか、もしくは３次元表示するかを外部の入力により切り替えて表示することのできる表示手段と、前記表示手段を制御する表示制御手段とを備え、前記番組配列情報は、放送データに含まれる３次元画像データの表示を制御する３次元制御情報を含み、更に前記３次元制御情報は、コンテンツ中に３次元画像データが存在する時間帯を示す３次元表示時間情報を含み、前記番組配列情報解析手段は、前記番組配列情報を解析することにより前記３次元制御情報を表示制御手段に送り、前記表示制御手段は、内部にタイマーを備え、入力された前記３次元制御情報に従って前記表示手段を２次元表示するか、もしくは３次元表示するかを切り替え、前記３次元表示時間情報と前記タイマーの時刻から受信した放送データに含まれる画像データが２次元画像データであるか、もしくは３次元画像データであるかを判定し、２次元画像データであれば２次元表示を、３次元画像データであれば３次元表示を行うように前記表示手段を制御することを特徴とする。
【００１８】
また、本発明は、放送データを受信する放送データ受信装置であって、前記放送データに含まれるコンテンツに対する制御情報を解析する番組配列情報解析手段と、入力された画像データを２次元表示する表示手段と、前記表示手段を制御する表示制御手段と、を備え、前記番組配列情報は、放送データに含まれる３次元画像データの表示を制御する３次元制御情報を含み、前記３次元制御情報は、受信した放送データに含まれる受信画像データが２次元画像データであることを示す識別子と、３次元画像データであることを示す識別子をそれぞれ定義する識別子情報を含み、前記番組配列情報解析手段は、前記番組配列情報を解析することにより前記３次元制御情報を表示制御手段に送り、前記表示制御手段は、入力された前記３次元制御情報に従って前記表示手段を制御し、前記識別子情報と前記受信画像データの識別子から、前記受信画像データが２次元画像データであるか、もしくは３次元画像データであるかを判定し、２次元画像データである場合は表示を行うように前記表示手段を制御し、３次元画像データである場合は表示できない、または正しく表示できない旨を観察者に通知する表示制御手段であることを特徴とする。
【００１９】
また、本発明は、放送データを受信する放送データ受信装置であって、前記放送データに含まれるコンテンツに対する制御情報を解析する番組配列情報解析手段と、入力された画像データを２次元表示する表示手段と、前記表示手段を制御する表示制御手段とを備え、前記番組配列情報は、放送データに含まれる３次元画像データの表示を制御する３次元制御情報を含み、更に前記３次元制御情報は、コンテンツ中に３次元画像データが存在する時間帯を示す３次元表示時間情報を含み、前記番組配列情報解析手段は、前記番組配列情報を解析することにより前記３次元制御情報を表示制御手段に送り、前記表示制御手段は、内部にタイマーを備え、入力された前記３次元制御情報に従って前記表示手段を制御し、前記３次元表示時間情報と前記タイマーの時刻から、受信した放送データに含まれる受信画像データが２次元画像データであるか、もしくは３次元画像データであるかを判定し、２次元画像データである場合は表示を行うように前記表示手段を制御し、３次元画像データである場合は表示できない、または正しく表示できない旨を観察者に通知する表示制御手段であることを特徴とする。
【００３８】
【発明の実施の形態】
本発明における実施の形態の説明をする前に、本明細書において使用する用語について、以下のように定義する。
【００３９】
放送データとは、放送局から送出されるデータの総称であり、無線や有線を介して送信される放送や、インターネットのストリーミング放送など含む。
コンテンツとは、一般的には放送される番組と同じ意味であるが、ここでは少なくともビデオデータとオーディオデータとデータ放送用データのいずれか１つを含むデータの集まりである。放送データには、複数のコンテンツが含まれる。
【００４０】
番組配列情報とは、放送データ中にどのようなコンテンツが含まれているかを管理するための情報であり、複数のコンテンツの内容を示す情報である。
【００４１】
番組配列情報には、ＰＭＴ（Program Map Table）やＥＩＴ（Event Information Table）などがある。
【００４２】
ＰＭＴとは、放送データの中からチャンネルを構成するビデオデータやオーディオデータなどを分離するためのＰＩＤ（ＰａｃｋｅｔＩＤ）などのストリーム情報を含み、同じチャンネル内のコンテンツで共通する番組配列情報である。ＰＭＴは、同じチャンネル内のコンテンツで共通の番組配列情報であるため、頻繁に更新されないという特徴がある。
【００４３】
ＥＩＴとは、チャンネルに含まれる各コンテンツの放送時間帯を示す番組時間情報などの番組情報を含み、コンテンツ毎に異なる固有の情報を１つまたは複数のコンテンツ分だけ含む番組配列情報である。ＥＩＴは、コンテンツ毎に異なる固有の情報であるため、頻繁に更新されるという特徴がある。
【００４４】
これらの番組配列情報は、受信機におけるチャンネルの切り替えがどの時点で行われても対応できるように、図１２に示すように放送データ中に繰り返し多重化されて送信される。
【００４５】
３Ｄ画像とは、視差のある複数の画像の組により構成される画像である。図１３に３Ｄ画像の一例を示す。この例の３Ｄ画像は、左眼画像と右眼画像の２つの視点に対応する画像を、横並びに配置した３Ｄ画像である。
３Ｄ画像制御情報とは、３Ｄ画像の特徴を示す２視点や横並びといった情報や、３Ｄ画像の表示を制御する際に用いる情報である。
３Ｄ表示とは、複数の視点画像を用いて、観察者の左眼と右眼が異なる視点画像を画像を観察できるように表示することである。これに対して、２Ｄ表示とは、観察者の左眼と右眼が同じ画像を観察できるように表示することである。
【００４６】
３Ｄコンテンツとは、コンテンツ中に３Ｄ画像からなるビデオデータやデータ放送用データを含むコンテンツのことである。
【００４７】
画像多重方式とは、３Ｄ画像を構成する各視点画像がどのように配置されているかを示す情報である。本実施形態では、画像多重方式として、統合方式、時分割方式、マルチストリーム方式の３つを用いる。ここで、画像多重方式について、図１４を用いて説明する。図１４は、２視点の場合の画像多重方式を説明するための模式図である。図１４（Ａ）に示すように、３Ｄ画像の画像多重に用いられる各視点のビデオデータは、複数のフレームから構成され、それぞれ独立した系列であるものとする。
【００４８】
統合方式とは、図１４（Ｂ）に示すように、各視点画像をフレーム毎に隣接させて伝送する方式である。時分割方式とは、図１４（Ｃ）に示すように、フレーム周期で左眼画像と右眼画像を交互に切り替えて伝送する方式である。ここで伝送される右眼画像のフレームは、先に送られる左眼画像のフレームと同じ時間のものである。この例では左眼画像を先に伝送しているが、右眼画像が先であってもよい。マルチストリーム方式とは、図１４（Ａ）に示す左眼画像と右眼画像のビデオデータを、それぞれ別のデータ列として伝送する方式である。
なお、走査方式がインターレースの場合には、上記のフレームをフィールドで置き換えてもよい。
また、それぞれの画像多重方式は視点数が３以上であっても適用できる。
【００４９】
＜第１の実施形態＞
本発明における第１の実施形態について説明する。第１の実施形態による送信装置は、３Ｄコンテンツを送信する際、３Ｄコンテンツに含まれる３Ｄ画像の３Ｄ画像制御情報を、番組配列情報に格納して送信するものである。その際、図１１に示すように、３Ｄ画像制御情報の中でも、同じチャンネル内に含まれる３Ｄコンテンツで共通であり、頻繁に更新されない情報（以下、３Ｄ共通情報とする）をＰＭＴに格納し、３Ｄコンテンツ毎に固有であり、頻繁に更新される情報（以下、３Ｄ固有情報とする）をＥＩＴに格納し、３Ｄコンテンツと多重して繰り返し送信する。ＰＭＴやＥＩＴは、例えば約１秒に１回の割合で送信するというように、それぞれある一定の時間毎に送信してもよいし、また、例えばビデオデータのキーフレームを送信する時にＰＭＴやＥＩＴも送信するというように、送信するビデオデータを構成するフレームの種別と同期させて送信してもよい。３Ｄ共通情報と３Ｄ固有情報の詳細については後述する。また、本実施形態の受信装置は、番組配列情報に格納されている３Ｄ共通情報と３Ｄ固有情報をもとに、３Ｄ画像の立体表示を行う。
【００５０】
はじめに、本実施形態による放送データ送信装置の詳細について説明する。図１は本実施形態による放送データ送信装置の構成例を示すブロック図である。図１に示すように、放送データ送信装置１００は、番組配列情報作成手段１０１と、多重化手段１０２と、伝送路符号化手段１０３から構成される。
【００５１】
番組配列情報作成手段１０１は、３Ｄ画像制御情報を含むＰＭＴやＥＩＴなどの番組配列情報を作成する。番組配列情報作成手段１０１の詳細については後述する。
【００５２】
多重化手段１０２は、番組配列情報作成手段１０１で作成された番組配列情報と、ＭＰＥＧ（Moving Picture Experts Group）−１、ＭＰＥＧ−２、ＭＰＥＧ−４などを含むビデオデータと、ＡＡＣ（Advanced Audio Coding）、ＭＰ３（MPeg audio layer3）、ＷＭＡ（Windows（Ｒ） Media Audio）などを含むオーディオデータと、ＪＰＥＧ（Joint Picture Experts Group）、ＰＮＧ（Portable Network Graphics）、ＢＭＬ（Broadcast Markup Language）などを含むデータ放送用データなどを、それぞれＴＳ（Transport Stream）パケットに格納して多重化をする。
伝送路符号化手段１０３は、ＴＳパケットを既定の変調方式に従って符号化し、放送データとして送信する。
【００５３】
ここで、番組配列情報作成手段１０１の詳細について説明する。図２は番組配列情報作成手段１０１の構成例を示すブロック図である。番組配列情報作成手段１０１は、ＰＭＴを作成するＰＭＴ作成手段２００と、ＥＩＴを作成するＥＩＴ作成手段２０１を含む構成となっている。
【００５４】
まず、ＰＭＴ作成手段２００について説明する。ＰＭＴ作成手段２００には、チャンネルを構成するビデオデータやオーディオデータなどのストリームを、放送データの中から分離するためのＰＩＤを含むストリーム情報が入力される。ストリーム情報が、３Ｄ画像を含む、または３Ｄ画像を構成するビデオデータに関するストリーム情報の場合、ストリーム情報の他に３Ｄ共通情報が入力される。３Ｄ共通情報は、３Ｄ画像制御情報の中で、同じチャンネル内に含まれる３Ｄコンテンツで共通の情報である。３Ｄ共通情報に含まれる情報の例として、視点数情報や画像多重方式情報、強制２Ｄフラグ情報などが挙げられる。
【００５５】
視点数情報は、３Ｄ画像を構成する画像の視点数を示す情報である。
また、画像多重方式情報は、前述の画像多重方式を示す情報である。
また、強制２Ｄフラグ情報は、受信装置において３Ｄコンテンツを強制的に２Ｄ表示させるための情報である。強制２Ｄフラグ情報については後述する。
【００５６】
次に、ＰＭＴ作成手段２００が作成するＰＭＴの構成例を図５に示す。
図５（Ａ）のＰＭＴは、ＰＭＴを識別するＰＭＴ識別子５００と、ＰＭＴのバージョン番号を含むＰＭＴ制御情報５０１と、チャンネルを構成するストリームを識別するＰＩＤを含むストリーム情報５０２、５０４と、各ストリーム情報の拡張情報を格納する記述子５０３、５０５を含む構成となっている。
【００５７】
図５（Ａ）において、ストリーム情報５０２が、３Ｄ画像を含む、または３Ｄ画像を構成するビデオデータに関するストリーム情報であるとすると、ストリーム情報５０２に続く記述子５０３に３Ｄ共通情報記述子を格納する。
【００５８】
図５（Ｂ）に３Ｄ共通情報記述子の構成例を示す。３Ｄ共通情報記述子は、３Ｄ画像制御情報を含む記述子であることを識別する３Ｄ識別子５０６と、３Ｄ共通情報記述子を識別する３Ｄ共通情報識別子５０７と、前述した視点数情報５０８および画像多重方式情報５０９、強制２Ｄフラグ情報５１０と、付加情報５１１を含む構成となっている。付加情報５１１については後に説明する。
【００５９】
続いて、図５のＰＭＴを作成する際のＰＭＴ作成手段２００の動作について、図３のフローチャートを用いて説明する。
まず、作成する番組配列情報がＰＭＴであることを示すＰＭＴ識別子を作成し（ステップＳ３００）、続いてＰＭＴのバージョン番号を含むＰＭＴ制御情報を作成する（ステップＳ３０１）。次に、コンテンツを構成するビデオデータやオーディオデータなどのストリーム毎に、ＰＩＤを含むストリーム情報を作成する（ステップＳ３０２）。次に、ストリームがビデオデータかどうかを判定し（ステップＳ３０３）、ビデオデータである場合は、３Ｄ共通情報を格納する３Ｄ共通情報記述子を作成する（ステップＳ３０４）。全てのストリーム情報が完成するまで以上の動作を繰り返し、全てのストリーム情報が完成するとＰＭＴの作成を終了する（ステップＳ３０５）。なお、画像多重方式がマルチストリームの場合は、３Ｄ画像を構成する各ビデオデータごとにストリーム情報と３Ｄ共通情報記述子を作成する。
【００６０】
ここで、ステップＳ３０４の３Ｄ共通情報記述子の作成方法について、図４のフローチャートを用いて説明する。まず、作成する記述子が３Ｄ共通情報記述子であることを示す３Ｄ識別子および３Ｄ共通情報識別子などを作成する（ステップＳ４００）。次に、必須共通情報を作成する（ステップＳ４０１）。必須共通情報とは、３Ｄ共通情報記述子に必ず格納しなければならない情報を指す。例えば、前述の視点数情報、画像多重方式情報、強制２Ｄフラグ情報などが挙げられる。
【００６１】
次に、必須共通情報の付加情報を作成する。必須共通情報の付加情報とは、必須共通情報の拡張情報であり、必須共通情報の値によって異なる情報である。必須共通情報の付加情報を作成する例として、画像多重方式情報ごとに異なる付加情報を作成する例を挙げる。
【００６２】
まず、画像多重方式が統合方式かどうかを判定する（ステップＳ４０２）。統合方式であれば統合方式固有の付加情報を作成する（ステップＳ４０３）。統合方式固有の付加情報の例として、フレーム内の各視点画像の配置が、横並びか縦並びかを示す画像配置情報と、フレーム内の各視点画像の縮小率を示す画像縮小情報が挙げられる。
【００６３】
画像多重方式が統合方式でなければ、時分割方式かどうかを判定する（ステップＳ４０４）。時分割方式であれば時分割方式固有の付加情報を作成する（ステップＳ４０５）。時分割方式固有の付加情報の例として、例えば２視点の場合、どのフレームが左眼画像または右眼画像に対応するかを示す視点・フレーム対応情報が挙げられる。
【００６４】
画像多重方式が時分割方式でなければ、マルチストリーム方式であるので、マルチストリーム方式固有の付加情報を作成する（ステップＳ４０６）。マルチストリーム方式固有の付加情報の例として、３Ｄ共通情報と関連づけられている各ビデオデータが、どの視点に相当する画像であるかを示す視点位置情報が挙げられる。このようにして、３Ｄ共通情報記述子を作成する。
【００６５】
上記の例は、全てのチャンネルに含まれるＰＭＴに３Ｄ共通情報記述子を含める場合について述べているが、３Ｄコンテンツを含まないチャンネルにおいては、ＰＭＴに３Ｄ共通情報記述子を含めないようにすることを選択できるようにしてもよい。
【００６６】
また、上記の例では、ストリーム情報が、３Ｄ画像を含む、または３Ｄ画像を構成するビデオデータに関するストリーム情報である場合に３Ｄ共通情報記述子を付加しているが、ストリーム情報が、３Ｄ画像を含む、または３Ｄ画像を構成するデータ放送用データに関するストリーム情報である場合にも３Ｄ共通情報記述子を付加してもよい。
【００６７】
また、あるチャンネルには画像多重方式が統合方式である３Ｄコンテンツのみを送信し、別のチャンネルには画像多重方式が時分割方式である３Ｄコンテンツのみを送信するというように、複数のチャンネルに、異なった画像多重方式の３Ｄコンテンツを送信してもよい。
【００６８】
次に、ＥＩＴ作成手段２０１について説明する。ＥＩＴ作成手段２０１には、コンテンツの放送時間帯を示す番組時間情報を含む番組情報が入力される。また、番組に３Ｄ画像が含まれている場合、番組情報の他に、３Ｄ固有情報が入力される。３Ｄ固有情報は、３Ｄ画像制御情報の中で、３Ｄコンテンツ毎に固有の情報である。３Ｄ固有情報に含まれる情報の例として、２Ｄ表示画像情報や視差量調整情報、３Ｄシーン時間情報などが挙げられる。
【００６９】
２Ｄ表示画像情報は、受信装置において３Ｄ画像を２Ｄ表示する際に選択すべき視点の画像を示す情報である。
また、視差量調整情報は、３Ｄ画像を立体表示した時の飛び出し具合の程度の調整値を示す情報である。
【００７０】
また、３Ｄシーン時間情報は、ビデオデータが３Ｄシーンと２Ｄシーンで構成されている場合に、３Ｄシーンの時間帯を指定する情報である。図６に示すように、３Ｄシーン時間情報は、３Ｄシーンデータが始まる時刻を示す３Ｄシーン開始時刻と、３Ｄシーン開始時刻から３Ｄシーンが継続する時間を示す３Ｄシーン継続時間を含む構成となっている。ビデオデータの中に３Ｄシーンが複数含まれている場合は、３Ｄシーンの数だけ３Ｄシーン開始時刻と３Ｄシーン継続時間を格納する。
【００７１】
また、ビデオデータの中に含まれる３Ｄシーンの数を３Ｄシーン時間情報に格納してもよい。また、３Ｄシーン継続時間の代わりに、３Ｄシーンが終了する時刻を示す３Ｄシーン終了時刻を用いてもよい。また、ビデオデータの中に、２Ｄビデオデータが含まれず、３Ｄシーンだけで構成される場合は、３Ｄシーン時間情報はなくてもよい。また、３Ｄ固有情報の中に、３Ｄシーン時間情報を含むかどうかを示すフラグを格納してもよい。また、３Ｄシーン時間情報の代わりに、２Ｄシーンが始まる時刻を示す２Ｄシーン開始時刻と、２Ｄシーン開始時刻から２Ｄシーンが継続する時間を示す２Ｄシーン継続時間を含む、２Ｄシーン時間情報を用いてもよい。
【００７２】
次に、ＥＩＴ作成手段２０１が作成するＥＩＴの構成例を図９に示す。図９（Ａ）のＥＩＴは、ＥＩＴを識別するＥＩＴ識別子９００と、ＥＩＴのバージョン番号を含むＥＩＴ制御情報９０１と、チャンネルに含まれるコンテンツの放送時間帯を記述した番組時間情報を含む番組情報９０２、９０４と、各番組情報の拡張情報を格納する記述子９０３、９０５を含む構成となっている。
【００７３】
図９（Ａ）において、番組情報９０２が３Ｄシーンを含む番組に関する情報であるとすると、番組情報９０２に続く記述子９０３に３Ｄ固有情報記述子を格納する。
【００７４】
図９（Ｂ）に３Ｄ固有情報記述子の構成を示す。３Ｄ固有情報記述子は、３Ｄ画像制御情報を含む記述子であることを識別する３Ｄ識別子９０６と、３Ｄ固有情報記述子を識別する３Ｄ固有情報識別子９０７と、前述した２Ｄ表示画像情報９０８、視差量調整情報９０９、３Ｄシーン時間情報９１０を含む構成となっている。
【００７５】
続いて、図９のＥＩＴを作成する際のＥＩＴ作成手段２０１の動作について、図７のフローチャートを用いて説明する。
まず、どの番組の番組情報を作成してＥＩＴに格納するかを指定する（ステップＳ７００）。例えば、全番組の番組情報の作成を指定したり、ある１つの番組のみの番組情報の作成を指定することができる。次に、作成する番組配列情報がＥＩＴであることを示すＥＩＴ識別子を作成し（ステップＳ７０１）、続いてＥＩＴのバージョン番号を含むＥＩＴ制御情報を作成する（ステップＳ７０２）。
【００７６】
次に、番組毎に番組時間情報を含む番組情報を作成する（ステップＳ７０３）。次いで、番組が３Ｄコンテンツかどうかを判定し（ステップＳ７０４）、３Ｄコンテンツである場合は３Ｄ固有情報を格納する３Ｄ固有情報記述子を作成する（ステップＳ７０５）。ステップＳ７００において指定された番組の番組情報が完成するまで以上の動作を繰り返し、完成するとＥＩＴの作成を終了する（ステップＳ７０６）。
【００７７】
ここで、ステップＳ７０５の３Ｄ固有情報記述子の作成方法について、図８のフローチャートを用いて説明する。
まず、作成する記述子が３Ｄ固有情報記述子であることを示す３Ｄ識別子および３Ｄ固有情報識別子などを作成する（ステップＳ８００）。次に、必須固有情報を作成する（ステップＳ８０１）。ここで、必須固有情報とは、３Ｄ固有情報記述子に必ず格納しなければならない情報を指す。例えば、前述の２Ｄ表示画像情報や視差量調整情報などが挙げられる。次に、前述の３Ｄシーン時間情報を作成する。まず、ビデオデータに２Ｄシーンが含まれるかを判定し（ステップＳ８０２）、２Ｄシーンを含んでいれば、３Ｄシーンの数だけ前述の３Ｄシーン時間情報を作成し（ステップＳ８０３）、２Ｄビデオデータを含んでいなければ、ビデオデータは３Ｄシーンのみで構成されているので、３Ｄシーン時間情報は作成しない。このようにして、３Ｄ固有情報記述子を作成する。
【００７８】
次に、データ放送用データに含まれる３Ｄ画像に対応する３Ｄ固有情報の格納場所について説明する。
データ放送用データに含まれる３Ｄ画像に対応する３Ｄ固有情報は、ＤＩＩ（Download Information Indication）と呼ばれるデータ放送用データの制御情報が定義してあるテーブルに格納する。ＤＩＩの構成例を図１０に示す。図１０のＤＩＩは、ＤＩＩを識別するＤＩＩ識別子１０００と、データ放送用データを構成するモジュールの制御情報を記述したモジュール情報１００１、１００３と、各モジュール情報の拡張情報が格納されている記述子１００２、１００４とを含む構成となっている。モジュール情報１００１が、３Ｄ画像を含む、または３Ｄ画像を構成するモジュールに関するモジュール情報であるとすると、モジュール情報１００１に続く記述子１００２に前述の３Ｄ固有情報記述子を格納する。
【００７９】
ここで、モジュール情報１００１に対応するモジュールが複数のサブモジュールで構成され、各サブモジュールに３Ｄ画像が含まれているとすると、各サブモジュールの３Ｄ画像毎に３Ｄ固有情報記述子を作成し、記述子１００２に格納する。この際、各サブモジュールの３Ｄ画像と３Ｄ固有情報記述子を関連付けるために、３Ｄ固有情報記述子を記述子１００２に格納する順番を決めておいてもよいし、各３Ｄ画像を識別するインデックス情報を３Ｄ固有情報記述子に格納してもよい。なお、ＤＩＩはチャンネルの切り替えがどの時点で行われても対応できるように、放送データ中に繰り返し多重化されて送信される。また、データ放送用データに含まれる３Ｄ画像に対応する３Ｄ固有情報をＥＩＴに格納してもよい。
【００８０】
以上説明したように、ＰＭＴ作成手段２００で作成された３Ｄ共通情報を含むＰＭＴと、ＥＩＴ作成手段２０１で作成された３Ｄ固有情報を含むＥＩＴと、ＰＭＴとＥＩＴ以外の番組配列情報は、多重化手段１０２でＴＳパケットに変換され、ビデオデータやオーディオデータなどのＴＳパケットと多重化される。多重化されたＴＳパケットは、伝送路符号化手段１０３で変調方式に従って符号化され、放送データとして送信される。
【００８１】
なお、上記の実施形態では、３Ｄ共通情報をＰＭＴに格納し、３Ｄ固有情報をＥＩＴに格納しているが、３Ｄ共通情報と３Ｄ固有情報をＰＭＴもしくはＥＩＴにまとめて格納してもよし、ＰＭＴとＥＩＴ以外の番組配列情報に格納してもよい。その際、３Ｄ共通情報と３Ｄ固有情報をまとめて同じ記述子に格納してもよい。
【００８２】
また、上記の実施形態では、３Ｄ共通情報と３Ｄ固有情報をＰＭＴやＥＩＴなどの番組配列情報に格納して送信しているが、番組配列情報のようなテーブルを含む情報以外の情報に格納して送信してもよい。また、３Ｄ共通情報と３Ｄ固有情報をそれぞれ単独で送信してもよい。
【００８３】
また、上記の実施形態では、３Ｄ共通情報記述子と３Ｄ固有情報記述子の先頭を３Ｄ識別子としているが、３Ｄ識別子は省略し、３Ｄ共通情報記述子の先頭を３Ｄ共通情報識別子、３Ｄ固有情報記述子の先頭を３Ｄ固有情報識別子としてもよい。
【００８４】
次に、本発明の実施形態における放送データ受信装置について説明する。図１５は本発明の実施形態における放送データ受信装置１５００の構成例を示すブロック図である。放送データ受信装置１５００は、放送データを入力とし、入力された放送データをＴＳパケットデータに復号する伝送路復号手段１５０１と、ＴＳパケットデータを分離する分離手段１５０２と、番組配列情報解析手段１５０３と、３Ｄ表示の制御を行う３Ｄ制御手段１５０４と、ビデオデータを復号するビデオ復号手段１５０５と、データ放送用データを処理するデータ処理手段１５０６と、オーディオデータを復号するオーディオ復号手段１５０７と、ビデオ復号手段１５０５とデータ処理手段１５０６の出力を合成する合成手段１５０８とを含んで構成される。
【００８５】
なお、図には示さないが、伝送路復号手段１５０１の先にはチューナが接続されており、チューナから受信した放送データが入力される。また、合成手段１５０８の先には画面データを表示するための表示装置が接続される。この際の表示装置は、入力された画面データを、外部の入力によって２Ｄ表示を行うか、もしくは、３Ｄ表示を行うかを切り替えることのできる表示装置とする。また、表示装置は２Ｄ／３Ｄ切り替えのために、３Ｄ制御手段１５０４と接続してもよい。また、オーディオ復号手段１５０７の先にはスピーカ等が接続される。
【００８６】
以上のように構成された放送データ受信装置１５００について、その動作を説明する。伝送路復号手段１５０１には、チューナにより受信された放送データが入力される。
伝送路復号手段１５０１は、入力された放送データに対して、デジタル復調や誤り訂正を施してＴＳパケットデータを得る。
【００８７】
分離手段１５０２はＴＳパケットデータに付けられたＰＩＤを参照し、必要なＴＳパケットデータを選択する。不必要なＴＳパケットデータは廃棄する。ＰＩＤはビデオデータ、オーディオデータ、データ放送用データごとに一意に割り当てられ、１つのビデオデータを構成するデータを含むＴＳパケットデータには、同一のＰＩＤが付される。前述のＰＭＴやＥＩＴにも一意のＰＩＤが付されている。分離手段１５０２はＰＩＤをもとに、目的とするＰＭＴまたはＥＩＴを含むＴＳパケットデータをサーチし、ＴＳパケットデータを番組配列情報解析手段１５０３に出力する。
【００８８】
番組配列情報解析手段１５０３は、分離手段１５０２から入力されたＰＭＴを解析し、番組を構成するビデオデータ、オーディオデータ、データ放送用データのＰＩＤを得て、分離手段１５０２に出力する。ＰＭＴに３Ｄ共通情報記述子が含まれている場合には、解析した結果として得られる３Ｄ共通情報を３Ｄ制御手段１５０４に出力する。
【００８９】
同様に、分離手段１５０２から入力されたＥＩＴを解析し、番組情報を得る。ＥＩＴに３Ｄ固有情報記述子が含まれている場合には、解析した結果として得られる３Ｄ固有情報を３Ｄ制御手段１５０４に出力する。
【００９０】
３Ｄ制御手段１５０４は、表示装置において３Ｄ表示ができるように、３Ｄ画像制御情報に基づいて表示画面の制御を行う。また、３Ｄ画像制御情報の有無等により、表示装置に対する表示モードの指定を決定する。これらの動作については後述する。
【００９１】
ＰＭＴやＥＩＴは一定の周期で継続して送信されるため、３Ｄ画像制御情報が、繰り返し３Ｄ制御手段１５０４に入力される。３Ｄ制御手段１５０４は、入力された３Ｄ画像制御情報を保持しておき、新たに番組情報解析手段１５０３から３Ｄ画像制御情報が入力された場合には、保持している３Ｄ画像制御情報と、入力された３Ｄ画像制御情報とを比較する。この結果、３Ｄ画像制御情報が更新されていれば、保持している３Ｄ画像制御情報を入力された３Ｄ画像制御情報に置き換える。３Ｄ画像制御情報の一部の情報が更新されている場合には、その情報のみを更新する。以上の動作を、３Ｄ制御手段１５０４における更新動作と呼ぶ。
【００９２】
分離手段１５０２は、番組配列情報解析手段１５０３から入力されたＰＩＤを基に、目的とするビデオデータ、オーディオデータ、データ放送用データを含んだＴＳパケットデータをサーチし、それぞれビデオ復号手段１５０５、オーディオ復号手段１５０７、データ処理手段１５０６に出力する。
ビデオ復号手段１５０５は、入力されたビデオデータを復号する。復号後のビデオデータは合成手段１５０８に出力される。
【００９３】
データ処理手段１５０６は、データ放送用データを処理し、文字や図形、静止画データなどを得る。文字や図形、静止画データは合成手段１５０６に出力される。なお、図１５には図示しないが、データ処理手段１５０６と３Ｄ制御手段１５０４は接続されており、データ放送用データの制御情報であるＤＩＩに３Ｄ固有情報が格納されている場合には、データ処理手段１５０６によりＤＩＩから読み取られた３Ｄ固有情報が、３Ｄ制御手段１５０４に対して出力される。３Ｄ制御手段１５０４は、この３Ｄ固有情報に基づいてデータ放送用データの表示制御を行う。
【００９４】
オーディオ復号手段１５０７は入力されたオーディオデータを復号する。復号後のオーディオデータはスピーカ等に出力される。
合成手段１５０８は、ビデオデータ、静止画データおよび文字や図形を表示するための表示用画面を複数持っており、必要に応じてそれぞれを重ね合わせて１つの画面を合成し、画面データを画面の表示方式に合わせて変換し、表示装置に対して出力する。
【００９５】
ここで、画面の表示形式とは、表示装置により規定されるビデオの構造に関する形式である。例えば、表示装置がフィールドシーケンシャル方式の場合、入力として想定されているのは、図２５に示すような左眼画像と右眼画像が垂直方向に１画素おきに交互に並べられた形式である。また、表示装置がパララクスバリア方式の場合には、図２６（Ｂ）に示すような左眼画像と右眼画像が水平方向に１画素おきに交互に並べられた形式が、入力として想定されている。
【００９６】
次に、３Ｄ制御手段１５０４の動作について説明する。３Ｄ制御手段１５０４は、番組配列情報解析手段１５０３から入力された３Ｄ画像制御情報を参照することで、ビデオデータや静止画データの構造に関する形式を知ることができる。以下の説明では、ビデオデータについて述べるが、静止画データや図形や文字に関しても同様の制御を行う。
【００９７】
まずはじめに、受信するビデオデータに３Ｄシーンが含まれるかどうかの判定を行う。番組配列情報解析手段１５０３から３Ｄ共通情報が入力されない場合には、受信するビデオデータには３Ｄシーンが含まれないと判定する。３Ｄ共通情報が入力される場合には、受信したビデオデータには３Ｄシーンが含まれると判定する。ビデオデータに３Ｄシーンが含まれる場合、ビデオデータは２Ｄシーンと３Ｄシーンが混在している可能性があるため、３Ｄ固有情報に含まれる３Ｄシーン時間情報の内容により、以下のように判定する。
【００９８】
３Ｄ制御手段１５０４は、その内部に時間を管理するためのタイマーを備えている。タイマーの示す時刻が、前述の３Ｄシーン時間情報により指定された３Ｄシーンの放送時間帯であれば、３Ｄシーンであると判定し、それ以外の場合には２Ｄシーンであると判定する。この際、３Ｄシーン時間情報をもとに、番組表中に３Ｄシーンの時間帯を表示してもよい。
【００９９】
２Ｄシーンの場合、３Ｄ制御手段１５０４は、合成手段１５０８に対して入力されたビデオデータをそのままの形式で合成し、表示するように制御する。また、表示モードを２Ｄとする。
【０１００】
一方、３Ｄシーンの場合には、前述したように画像多重方式情報により統合方式、時分割方式、マルチストリーム方式のいずれかが指定される。また、例えば画像多重方式情報が統合方式を示す場合には、さらに画像配置情報と、画像縮小情報が指定されている。
【０１０１】
また、３Ｄシーンの場合、強制２Ｄフラグ情報をもとに３Ｄシーンのビデオデータの表示制御を行ってもよい。強制２Ｄフラグ情報が１の場合、３Ｄシーンのビデオデータから、２Ｄ表示画像情報で指定される視点のビデオデータを選択し、画素アスペクト比が１：１となるように、拡大または縮小処理を行うように合成手段１５０８の表示制御を行う。ここで、２Ｄ表示画像情報で指定される視点のフレームを選択しているが、受信装置であらかじめ決められた視点のフレームを選択してもよいし、ユーザが自由に選択できるようにしてもよい。２Ｄ表示画像情報で指定されない場合も同様である。３Ｄ制御手段１５０４は、表示モードを２Ｄとする。
【０１０２】
一方、強制２Ｄフラグ情報が０の場合、３Ｄ表示するように合成手段１５０８に対して表示制御を行い、表示モードを３Ｄとする。例えば画像多重方式情報が統合方式を示し、画像配置情報が横並びを示す場合には、ビデオデータとして入力される画像フレームは図１３で示した形態となっている。したがって、表示装置がパララクスバリア方式であるならば、画像フレームを図２６（Ｂ）で示す形式に変換するように合成手段１５０８を制御する。
【０１０３】
なお、３Ｄ制御手段１５０４は、内部に保持した３Ｄ画像制御情報に基づいて合成手段１５０８に対する表示制御を行うが、新たに３Ｄ画像制御情報が入力された場合には、該３Ｄ画像制御情報の３Ｄシーン時間情報をチェックし、現在の時刻から３Ｄシーンの開始時刻までの時間が所定の時間より短い場合には、前述の更新動作を後まわしにして、直ちに該３Ｄ画像制御情報に基づいて合成手段１５０８に対する表示制御を行うようにしてもよい。
【０１０４】
また、３Ｄシーンの場合、視差量調整情報を用いて表示装置の表示面から３Ｄ画像が飛び出して見える量を調整してもよい。飛び出し量について、図１６を用いて説明する。図１６において、左眼画像の画素Ｌ１は表示位置１６０１に表示され、右眼画像の対応する画素Ｒ１は表示位置１６０２に表示される。これらの画素は位置１６０３に結像する。
【０１０５】
ここで、右眼画像の画素Ｒ１の表示位置を左に移動して表示位置１６０２から表示位置１６０４に変更すると、位置１６０３に像を結んでいた画像が位置１６０５に見えるようになる。位置１６０５は位置１６０３と比べて手前にあるため、表示面から飛び出して見えるようになる。逆に画素Ｒ１を表示位置１６０２よりも右に移動させると、位置１６０３に像を結んでいた画像が表示面よりも奥に見えるようになる。ここで、画素Ｒ１を画素Ｌ１の対応点と呼ぶ。
【０１０６】
このように視差量調整情報により指定された飛び出し量を実現するために、３Ｄ制御手段１５０４は左右いずれかの画像を、水平方向に所定の画素数だけシフトさせるように、合成手段１５０８に対して制御情報を出力する。
【０１０７】
図１７は右眼画像を左にシフトした場合を示す図である。図１７（Ａ）はシフト前の状態を示しており、表示画面の全域が３Ｄ表示されている。図１７（Ｂ）はシフト後の状態を示しており、右眼画像をシフトさせた結果、右眼画像のうち点線で示した領域１７０１が表示画面の外にでるため画像全体は表示できなくなる。
【０１０８】
図１８はこのときの表示例を示す図である。図１８（Ａ）はシフトすることにより表示画面の外に出てしまった右眼画像（ここでは図１７で示した領域１７０１のことである）を表示せず、左眼画像のうち右眼画像との対応点がなくなった領域を２Ｄ表示する場合である。図１８（Ｂ）は反対に右眼画像を残して左眼画像を表示しない場合を示しており、図１８（Ａ）と同様に右眼画像のうち左眼画像との対応点のなくなった領域を２Ｄ表示している。図１８（Ｃ）は対応点のある領域のみを３Ｄ表示した場合を示している。
【０１０９】
なお、視差量調整情報は、放送データ受信装置１５００において予め決められた設定を用いてもよいし、ユーザ指定により変更できるようにしてもよい。
以上のような動作で、３Ｄ制御手段１５０４は受信したビデオデータに対する処理を行う。
【０１１０】
上記の例では、合成手段１５０８に接続される表示装置を、入力された画面データに対して、外部の指示によって２Ｄ表示を行うか、もしくは、３Ｄ表示を行うかを切り替えて表示することのできる表示装置としたが、この表示装置を２Ｄ表示のみが可能な表示装置としてもよい。この場合、前述の説明と同様に、表示装置を３Ｄ制御手段１５０４と接続して、入力された画面データが３Ｄ表示用のデータである場合は、入力された画面データのかわりに前の画面データを保持したり、特定の画面データを表示するなどして、３Ｄ表示用の画面データは表示しないようにしてもよい。
【０１１１】
また、３Ｄ表示用の画面データをそのまま２Ｄ表示してもよい。
また、合成手段１５０８と表示装置の間に、３Ｄ表示用の画面データから２Ｄ表示用の画面データを変換する変換手段を設けて、２Ｄ表示用の画面データを作成し、その画面データを２Ｄ表示するようにしてもよい。
【０１１２】
また、３Ｄ表示用の画面データを２Ｄ表示のみが可能な表示装置で表示する場合、現在表示している画面データが３Ｄ表示用の画面データであることを観察者に伝えるための、ブザー、発光灯などの光源、警告メッセージなどの伝達手段を設けてもよい。その際、画面データを表示しない場合は画面データが不適切なため表示できない旨を通知したり、３Ｄ表示用の画面データをそのまま２Ｄ表示する場合は３Ｄ表示用の画面データをそのまま表示する旨を通知したり、変換手段による変換を行って表示する場合は変換して表示する旨を通知したりするような通知手段を設けてもよい。
また、３Ｄ表示のみが可能な表示装置に２Ｄ表示用のデータが入力された場合も同様の動作を行う。
【０１１３】
以上のように、表示装置に不適切な表示方法の画像データから構成されている放送データを受信した際であっても、適切な画面データに変換して表示したり、不適切である旨を観察者に伝えて表示を行ったり、画面データ自体を非表示にすることができる。
【０１１４】
また、番組配列情報解析手段１５０３において解析した画像多重方式情報が、放送データ受信装置が対応していない画像多重方式情報であった場合、番組配列情報解析手段１５０３が受信したビデオデータを表示できないことを示す情報を３Ｄ制御手段１５０４に送り、その情報に従って３Ｄ制御手段１５０４が前記のように表示を行わないように表示装置を制御してもよい。
【０１１５】
また、非対応の画像多重方式の種類を表示してもよい。
また、上記の例では、３Ｄ画像を含む、または３Ｄ画像を構成するビデオデータを受信した場合の動作を説明したが、３Ｄ画像を含む、または３Ｄ画像を構成するデータ放送用データを受信した場合にも同様の動作を行う。
【０１１６】
また、上記の実施形態は、放送データ送信装置においてＰＭＴおよびＥＩＴに３Ｄ画像制御情報を格納し、放送データ受信装置において３Ｄ画像制御情報の有無とその内容により、２Ｄビデオデータと３Ｄビデオデータの判定を行っているが、２Ｄビデオデータと３Ｄビデオデータの種別を示すフラグ情報をビデオデータに付加してもよい。
【０１１７】
ビデオデータをＴＳパケットにする際は、符号化により得られるビット列を所定の処理単位で分割してＰＥＳ（Packetized Elementary Stream）パケットに格納し、さらに前記パケットを所定のサイズのＴＳパケットに分割する。したがって、フラグ情報をＰＥＳパケットのヘッダ部や、ＴＳパケットのヘッダ部に記録してもよいし、符号化後のビット列の所定位置に格納するようにしてもよい。例えばＭＰＥＧ−４の場合には、ＶＯＬ（Video Object Layer）内のユーザデータに格納する。
【０１１８】
＜第２の実施形態＞
次に、本発明における第２の実施形態の放送データ送信装置と放送データ受信装置について説明する。
【０１１９】
本発明における第２の実施形態の放送データ送信装置は、１つのＰＭＴの中で、２Ｄシーンのみで構成されるビデオデータのＰＩＤと、３Ｄシーンのみで構成されるビデオデータのＰＩＤを別々に定義するというように、種別の違うビデオデータのＰＩＤを定義したＰＭＴを含む放送データを作成し、送信する放送データ送信装置である。
【０１２０】
また、本発明における第２の実施形態の放送データ受信装置は、上記の放送データを受信する放送データ受信装置である。放送データを上記のような構成にすると、ＰＩＤの違いから、受信したビデオデータが２Ｄシーンのみで構成されるビデオデータなのか、３Ｄシーンのみで構成されるビデオデータなのかを区別することが出来る。
【０１２１】
以下に、本実施形態の放送データ送信装置と放送データ受信装置について詳細に説明する。
まず、本実施形態による放送データ送信装置について、図面を参照して説明する。
【０１２２】
本実施形態による放送データ送信装置の構成は、図１及び図２で説明した第１の実施形態の放送データ送信装置と同じであり、相違点は、図２のＰＭＴ作成手段２００における、ビデオデータのストリーム情報の作成部分のみである。
【０１２３】
前述の第１の実施形態による放送データ送信装置では、１つのビデオデータに２Ｄシーンと３Ｄシーンが混在している例を説明したが、本実施形態の放送データ送信装置では、２Ｄシーンのみで構成されるビデオデータと、３Ｄシーンのみで構成されるビデオデータを作成し、ＰＭＴ内でこれらのビデオデータの種別ごとにＰＩＤを定義する。以下の説明では、２Ｄシーンのみで構成されるビデオデータを２Ｄビデオデータ、３Ｄシーンのみで構成されるビデオデータを３Ｄビデオデータとする。
【０１２４】
また、図１の多重化手段１０２において、ビデオデータとオーディオデータとデータ放送用データとを多重化する際に、番組配列情報作成手段１０１で作成されたＰＭＴにおけるＰＩＤの定義と対応させて、ＴＳパケットデータを作成する。
【０１２５】
次に、本実施形態の放送データ受信装置において、図２のＰＭＴ作成手段２００で作成されるＰＭＴにについて詳細に説明する。本実施形態では、図５（Ａ）の記載のストリーム情報と記述子を合わせたものをＰＩＤ定義情報とする。
まず、２ＤビデオデータのＰＩＤ定義情報について図面を用いて詳細に説明する。
【０１２６】
図１９は、２ＤビデオデータのＰＩＤ定義情報を含むＰＭＴの構造の一例を示す図である。
ＰＭＴ１９００はＰＩＤ定義情報１９０１を含んでおり、このＰＩＤ定義情報１９０１がどのような種別のデータであるか示すストリームタイプと、ＰＩＤを含む構成となっている。ストリームタイプの定義の例として、「ＭＰＥＧ−４圧縮符号化を用いたビデオデータ」や、「ＭＰＥＧ−２ＡＡＣ符号化によるオーディオデータ」や、「データ放送用データ」などがある。
【０１２７】
ここで、例えばＰＩＤ定義情報１９０１のストリームタイプが「ＭＰＥＧ−４圧縮符号化を用いたビデオデータ」、ＰＩＤが「０ｘ０１」であるとすると、ＰＩＤの値が「０ｘ０１」のデータはすべて、２Ｄシーンのみで構成されるＭＰＥＧ−４圧縮符号化を用いたビデオデータとなる。
【０１２８】
一方、図２０は、前述の画像多重方式が統合方式または時分割方式である場合における、３ＤビデオデータのＰＩＤ定義情報を含むＰＭＴの構造の一例を示す図である。
【０１２９】
ＰＭＴ２０００はＰＩＤ定義情報２００１を含んでおり、このＰＩＤ定義情報２００１は、ストリームタイプおよびＰＩＤと、このＰＩＤ定義情報が３Ｄビデオデータ用のＰＩＤ定義情報であることを示す３Ｄ共通情報記述子２００２を含む。３Ｄ共通情報記述子２００２は図５（Ｂ）で示した３Ｄ共通情報記述子と同様のものであり、３Ｄ共通情報記述子２００２に含まれる画像多重方式情報は、統合方式または時分割方式を示すものとする。
【０１３０】
ここで例えば、ＰＩＤ定義情報２００１のストリームタイプが「ＭＰＥＧ−４圧縮符号化を用いたビデオデータ」、ＰＩＤが「０ｘ０２」と記述されているとすると、ＰＩＤの値が「０ｘ０２」のデータはすべて、３Ｄシーンのみで構成されるＭＰＥＧ−４圧縮符号化を用いたビデオデータとなる。
【０１３１】
上記で説明した２Ｄビデオデータに対するＰＩＤ定義情報と、３Ｄビデオデータに対するＰＩＤ定義情報は、同一のＰＭＴ内に格納することができる。この場合、複数のビデオデータに対するＰＩＤ定義情報がＰＭＴ内で存在することになるが、３Ｄ共通情報記述子２００２の有無により、３Ｄビデオデータに対するＰＩＤ定義情報と２Ｄビデオデータに対するＰＩＤ定義情報の区別が可能である。
【０１３２】
つまり、ＰＩＤ定義情報内に３Ｄ共通情報記述子２００２が存在すれば、そのＰＩＤ定義情報は３Ｄビデオデータに対応したＰＩＤ定義情報であり、またＰＩＤ定義情報内に３Ｄ共通情報記述子２００２が存在しなければ、そのＰＩＤ定義情報は２Ｄビデオデータに対応したＰＩＤ定義情報であると判定することができる。
【０１３３】
次に、画像多重方式情報がマルチストリーム方式を示す場合のＰＩＤ定義情報について説明する。
【０１３４】
画像多重方式情報がマルチストリーム方式である場合、放送データ内に複数のビデオデータのストリームが存在する。この場合、３Ｄビデオデータを復元するために複数のビデオデータのストリームが必要となる。よってＰＭＴ内において、３Ｄビデオデータに対するＰＩＤ定義情報は、放送データ受信装置が３Ｄ表示するのに必要なビデオデータのストリームの数だけ必要となる。
【０１３５】
図２１は、画像多重方式情報がマルチストリーム方式を示す場合の３ＤビデオデータのＰＩＤ定義情報を含むＰＭＴの構造の一例を示す図である。
ＰＭＴ２１００は、ＰＩＤ定義情報２１０１とＰＩＤ定義情報２１０２を含んでおり、このＰＩＤ定義情報２１０１は、ストリームタイプとＰＩＤ、３Ｄ共通情報記述子２１０３を、ＰＩＤ定義情報２１０２は、ストリームタイプとＰＩＤ、３Ｄ共通情報記述子２１０４を、それぞれ含んでいる。
【０１３６】
ここで、例えばＰＩＤ定義情報２１０１において、ストリームタイプが「ＭＰＥＧ−４圧縮符号化を用いたビデオデータ」、ＰＩＤが「０ｘ０３」と記述されているとすると、ＰＩＤの値が「０ｘ０３」のデータはすべて３ＤシーンのＭＰＥＧ−４圧縮符号化を用いたビデオデータとなり、また、ＰＩＤ定義情報２１０２において、ストリームタイプが「ＭＰＥＧ−４圧縮符号化を用いたビデオデータ」、ＰＩＤが「０ｘ０４」と記述されているとすると、ＰＩＤの値が「０ｘ０４」のデータも、すべて３Ｄシーンのみで構成されるＭＰＥＧ−４圧縮符号化を用いたビデオデータとなる。
【０１３７】
３Ｄ共通情報記述子２１０３と３Ｄ共通情報記述子２１０４には、３Ｄ識別子と画像多重方式情報等がそれぞれ含まれている。ここで、３Ｄ共通情報記述子２１０３と３Ｄ共通情報記述子２１０４に含まれる画像多重方式情報は、両方ともマルチストリーム方式を示すものとする。
【０１３８】
以上のように、画像多重方式情報がマルチストリーム方式を示す場合は、３Ｄ画像を復元するのに必要なストリームの数だけ、ＰＭＴ内でＰＩＤ定義情報が定義される。
【０１３９】
また、マルチストリーム方式のように３Ｄ画像を構成するビデオデータのＰＩＤ定義情報が複数存在する場合、放送データ受信装置が３Ｄ画像を３Ｄ表示するためには、各ＰＩＤ定義情報と対応するビデオデータがどの視点を示しているかを区別できるように、各ビデオデータがどの視点の画像であるかを示す視点位置情報が必要となる。
【０１４０】
例えば、３Ｄ共通情報記述子２１０３にはマルチストリーム方式固有の情報である付加情報２１０５を、３Ｄ共通情報記述子２１０４には同じくマルチストリーム方式固有の情報である付加情報２１０６を、それぞれ含むような構成にし、さらに、付加情報２１０５には視点位置情報２１０７を、付加情報２１０６には視点位置情報２１０８をそれぞれ含むような構成にする。
【０１４１】
上記のようにすると、画像多重方式がマルチストリーム方式であっても、３Ｄビデオデータに対するＰＩＤ定義情報を定義することができる。
【０１４２】
以上で述べたような本実施形態による放送データ送信装置が放送データを送信する際の送信方法について、図２２のフローチャートを用いて説明する。
【０１４３】
まず、ステップＳ２２００において、放送データ送信装置に放送の開始を示す情報が入力され、放送データ送信装置は、放送データの作成及び送信を開始する。次に、ステップＳ２２０１において、放送データの作成に必要な、ビデオデータ、オーディオデータ、データ放送用データ、制御情報などが放送データ送信装置に入力される。次に、ステップＳ２２０２において、放送するチャンネルに３Ｄビデオデータを含むかどうかを判定する。３Ｄビデオデータを含まない場合はステップＳ２２０４に、３Ｄビデオデータを含む場合はステップＳ２２０３に処理が進む。
【０１４４】
ステップＳ２２０４において、放送データ送信装置は、入力されたビデオデータ、オーディオデータ、データ放送用データ、制御情報などを用いて、２Ｄビデオデータを含む放送データを作成し、作成したデータを送信した後、ステップＳ２２０７に処理が進む。
【０１４５】
一方、ステップＳ２２０３において、制御情報に含まれる画像多重方式情報から、画像多重方式がマルチストリーム方式か否かを判定する。マルチストリーム方式である場合はステップＳ２２０５に、そうでない場合はステップＳ２２０６に処理が進む。
【０１４６】
ステップＳ２２０５において、入力されたビデオデータ、オーディオデータ、データ放送用データ、制御情報などを用いて、複数のストリームから構成される３Ｄビデオデータを含む放送データを作成し、作成したデータを送信した後、ステップＳ２２０７に処理が進む。
【０１４７】
一方、ステップＳ２２０６において、入力されたビデオデータ、オーディオデータ、データ放送用データ、制御情報などを用いて、３Ｄビデオデータを含む放送データを作成し、作成したデータを送信した後、判定Ｓ２２０７に処理が進む。
【０１４８】
ステップＳ２２０７は、放送を継続するか否かを外部の入力から判定する。例えば、放送を終了したい場合にその旨を外部から入力する。放送を継続する場合は、ステップＳ２２０１に戻って放送データの作成および送信を引き続き行い、そうでない場合はステップＳ２２０８に処理が進む。ステップＳ２２０８では、放送データ送信装置は、放送データの作成と送信を止め、放送を終了する。
【０１４９】
以上のようにして、本実施形態の放送データ送信装置は放送データを作成し、作成した放送データを送信する。
【０１５０】
次に、第２の実施形態における放送データ受信装置について説明する。図１５を用いて説明したように、第１の実施形態における放送データ受信装置は、３Ｄ制御手段１５０４において、３Ｄシーン時間情報と現在の時刻とを比較することにより、受信したビデオデータの２Ｄ表示と３Ｄ表示を切り替える例を説明したが、第２の実施形態における放送データ受信装置は、分離手段１５０２が受信したビデオデータが２Ｄビデオデータであるか、３Ｄビデオデータであるかを判定し、３Ｄビデオデータである場合には、３Ｄビデオデータを受信したことを示す情報を３Ｄ制御手段１５０４へ送る。
【０１５１】
つまり、番組配列情報解析手段１５０３は受信したＰＭＴを解析し、ＰＭＴに記載されている２ＤビデオデータのＰＩＤと、３ＤビデオデータのＰＩＤを分離手段１５０２に送り、分離手段１５０２はそれらのＰＩＤをもとに、受信したビデオデータが２Ｄビデオデータであるか、３Ｄビデオデータであるかを判定し、３Ｄビデオデータである場合には、３Ｄビデオデータを受信したことを示す情報を３Ｄ制御手段１５０４へ送る処理を行う判定手段を備える。
【０１５２】
また、この判定手段を３Ｄ制御手段１５０４が備えるような構成にしてもよい。例えば、番組配列情報解析手段１５０３は受信したＰＭＴを解析し、ＰＭＴに記載されている２ＤビデオデータのＰＩＤと、３ＤビデオデータのＰＩＤを３Ｄ制御手段１５０４に送り、また、分離手段１５０２は受信したビデオデータのＰＩＤを３Ｄ制御手段１５０４に送り、３Ｄ制御手段１５０４は受け取ったＰＩＤが２Ｄビデオデータであるか、３Ｄビデオデータであるかを判定する。
【０１５３】
また、この判定手段を別途設けて、分離手段１５０２、番組配列情報解析手段１５０３、３Ｄ制御手段１５０４にそれぞれ接続し、番組配列情報解析手段１５０３と分離手段１５０２からの情報から、ビデオデータが３Ｄビデオデータであると判定した場合に、３Ｄ制御手段１５０４に３Ｄビデオデータが入力されたこと示す情報を伝送するような構成にしても構わない。
【０１５４】
図２３は、受信した放送データのビデオデータのＰＩＤから、受信したビデオデータの種別を判定する方法のフローチャート図である。
ステップＳ２３００で、放送データ受信装置は、受信した放送データを読み込む。このとき受信した放送データのＰＭＴが、番組配列情報解析手段１５０３に送られる。番組配列情報解析手段１５０３では、２ＤビデオデータのＰＩＤと３ＤビデオデータのＰＩＤの情報が解析され、それらのＰＩＤは分離手段１５０２に送られる。分離手段１５０２は、受信した放送データに含まれるビデオデータのＰＩＤにより、受信したビデオデータの種別が２Ｄビデオデータなのか３ＤビデオデータなのかをステップＳ２３０１で判定する。３Ｄビデオデータであると判定された場合のみ、３Ｄ制御手段１５０４へ受信したビデオデータが３Ｄビデオデータであることを示す情報を送り、放送データ受信装置は、第１の実施形態による放送データ受信装置と同様にして３Ｄ表示を行う。
【０１５５】
以上のように、本実施形態の放送データ受信装置は、３Ｄシーン時間情報は使用せず、受信した放送データのビデオデータのＰＩＤから、受信したビデオデータの種別を判定することが可能である。
【０１５６】
次に、上記で説明した本発明における第２の実施形態による放送データ送信装置と、放送データ受信装置を用いて、１つの番組内に２Ｄビデオデータと３Ｄビデオデータが混在する場合におけるそれぞれの装置の動作について説明する。
【０１５７】
図２４は、１つの番組内に２Ｄビデオデータと３Ｄビデオデータが混在する場合の放送データ送信装置と、放送データ受信装置の動作について説明するための図である。例えば、図２４のように、横軸を時間ｔとして、２Ｄビデオデータと３Ｄビデオデータが混在する１つの番組（プログラムＡとする）が放送されているとする。
【０１５８】
表１に図２４の時間ｔにおける放送データ送信装置の動作と放送データ受信装置の動作を示す。
【０１５９】
【表１】

【０１６０】
例えば図２４のように、プログラムＡが時間ｔ０から放送開始され、時間ｔ３に放送終了されるとする。このプログラムＡでは、時間ｔ０から時間ｔ１までの間は２Ｄビデオデータ、時間ｔ１から時間ｔ２までの間は３Ｄビデオデータ、時間ｔ２から時間ｔ３までの間は２Ｄビデオデータが放送されるものとする。
【０１６１】
放送データ送信装置は、時間ｔ０から時間ｔ１までの間と、時間ｔ２から時間ｔ３までの間は、ビデオデータとして２Ｄビデオデータを送信し、時間ｔ１から時間ｔ２までの間は、ビデオデータとして３Ｄビデオデータを送信する。
【０１６２】
一方、放送データ受信装置は、放送データ送信装置で送信された放送データを、時間ｔ０'から時間ｔ３'まで受信する。ここで、時間ｔ０と時間ｔ０'、時間ｔ１と時間ｔ１'、時間ｔ２と時間ｔ２'、時間ｔ３と時間ｔ３'は、それぞれほぼ同じ時間であり、その違いは放送データ送信装置が放送データを送信して放送データ受信装置が受信するまでのわずかな時間の違いでしかないものとする。
【０１６３】
放送データ受信装置は受信したビデオデータのＰＩＤが、２ＤビデオデータのＰＩＤであれば２Ｄ表示を行い（時間ｔ０'から時間ｔ１'までの間、及び、時間ｔ２'から時間ｔ３'までの間）、３ＤビデオデータのＰＩＤであれば３Ｄ表示を行う（時間ｔ１'から時間ｔ２'までの間）。
【０１６４】
以上のように、本発明における第２の実施形態による放送データ送信装置は、２ＤビデオデータのＰＩＤ定義情報と、３ＤビデオデータのＰＩＤ定義情報をＰＭＴ内で別々に定義し、それらのＰＩＤ定義情報に基づいて２Ｄビデオデータと３Ｄビデオデータで別のＰＩＤを持つＴＳパケットを作成することにより、１つの番組内において２Ｄビデオデータと３Ｄビデオデータが混在した番組を放送することが出来る。
【０１６５】
また本発明における第２の実施形態による放送データ受信装置は、受信したＰＭＴ内で定義されたビデオデータのＰＩＤから、２ＤビデオデータのＰＩＤと３ＤビデオデータのＰＩＤを取得し、受信したビデオデータのＴＳパケットのＰＩＤからビデオデータの種別を判定することにより、１つの番組内において２Ｄビデオデータと３Ｄビデオデータが混在した番組放送を受信することが出来る。
【０１６６】
またこの場合、３Ｄシーン時間情報が放送データ内に含まれていなくとも、１つの番組内において２Ｄビデオデータと３Ｄビデオデータが混在した番組を視聴することが出来るため、それらの３Ｄシーン時間情報を省略することによって放送データ内における番組配列情報の割合の削減が可能となる。
【０１６７】
また上記の例では、ＰＩＤを用いて放送データ受信装置が受信しているビデオデータの種別が２Ｄビデオデータなのか、３Ｄビデオデータなのかを判定する方法について説明したが、この場合でも、３Ｄシーン時間情報が放送データ内に含まれていて構わない。
【０１６８】
さらに、この場合、３Ｄシーン時間情報は、ＰＭＴ内の３Ｄ共通情報に含まれていても、ＥＩＴ内の３Ｄ固有情報に含まれていても構わない。
【０１６９】
また、受信したビデオデータの種別を判定する際、受信したビデオデータのＰＩＤから判定する結果と、３Ｄシーン時間情報から判定する結果が異なる場合は、どちらか一方の情報を優先して用いてもよい。どちらの情報を優先して使うかは、予め端末に設定しておいてもよいし、途中でユーザが端末を操作して変更してもよい。
【０１７０】
また、本実施形態の放送データ送信装置では、２Ｄビデオデータと３Ｄビデオデータで別々のＰＩＤを定義しているが、それに加えて、２Ｄビデオデータから３Ｄビデオデータへ、もしくは、３Ｄビデオデータから２Ｄビデオデータへ切り替わる時刻を示すビデオ切り替え時刻情報を、ＴＳパケットのヘッダ部、ＰＥＳパケットのヘッダ部、ビデオデータのヘッダ部などに挿入してもよい。
【０１７１】
また、放送データ受信装置は、ＰＩＤにより受信したが２Ｄビデオデータであるか３Ｄビデオデータであるかを区別し、かつ、ビデオ切り替え時刻情報により、ビデオデータの種別が切り替わる時刻を知ることが出来、事前に切り替えの準備を行うことが出来る。例えば、放送データ受信装置が、２Ｄビデオデータを受信している際に、受信中の２ＤビデオデータのＴＳパケットにビデオ切り替え時刻情報があった場合、次にビデオデータの種別が３Ｄビデオデータに切り替わる時刻を予め知ることが出来るため、観察者にビデオデータの種別が切り替わるまでの時間を通知することが出来る。
【０１７２】
【発明の効果】
以上説明したように、本発明によれば、３Ｄ画像を表示するために使用される３Ｄ画像制御情報を繰り返し送信することで、コンテンツの途中から受信した場合でも、適切に立体表示を行うことができるという有利な効果が得られる。
また、本発明によれば、頻繁に更新されない３Ｄ画像制御情報である３Ｄ共通情報を、番組配列情報を構成する記述子のうち、頻繁に更新されない記述子に格納することで、画像制御処理の簡素化を行うことができるという有利な効果が得られる。
【０１７３】
また、本発明によれば、チャンネル毎に異なる番組配列情報毎に、３Ｄ画像制御情報を格納するので、チャンネル毎に異なる３Ｄ画像の設定ができるという有利な効果が得られる。
【０１７４】
また、本発明によれば、頻繁に更新される３Ｄ画像制御情報である３Ｄ固有情報を、番組配列情報を構成する記述子のうち、頻繁に更新される記述子に格納することで、コンテンツ毎に３Ｄ画像の制御パラメータを変更することができるという有利な効果が得られる。
【０１７５】
また、本発明によれば、３Ｄ固有情報に３Ｄシーン時間情報を格納することで、３Ｄコンテンツ中の任意のシーンだけを３Ｄ表示するように指定できるという有利な効果が得られる。
【０１７６】
また、本発明によれば、３Ｄ固有情報に３Ｄシーン時間情報を格納することで、番組表中に３Ｄビデオデータの時間帯を表示することが可能となるという有利な効果が得られる。
【０１７７】
また、本発明によれば、２ＤビデオデータのＰＩＤと、３ＤビデオデータのＰＩＤをそれぞれＰＭＴ内で定義し、そのＰＩＤを用いて、受信したビデオデータの種別を判定することにより、１つの番組内において２Ｄビデオデータと３Ｄビデオデータが混在した番組を放送することができるという有利な効果が得られる。
【０１７８】
また本発明によれば、受信したＰＭＴから、２ＤビデオデータのＰＩＤと３ＤビデオデータのＰＩＤを取得し、受信したビデオデータのＴＳパケットのＰＩＤから受信したビデオデータの種別を判定することにより、１つの番組内において２Ｄビデオデータと３Ｄビデオデータが混在した番組放送を受信することができるという有利な効果が得られる。
【０１７９】
また、本発明によれば、ビデオデータのＴＳパケットのＰＩＤによりビデオデータの種別を判定するので、３Ｄシーン時間情報が放送データ内に含まれていなくとも、１つの番組内において２Ｄビデオデータと３Ｄビデオデータが混在した番組を視聴することができ、また、３Ｄシーン時間情報を省略することによって放送データ内における番組配列情報の割合の削減が可能となるという有利な効果が得られる。
【図面の簡単な説明】
【図１】本発明の第１の実施形態における放送データ送信装置を示すブロック図である。
【図２】番組配列情報作成手段を示すブロック図である。
【図３】ＰＭＴ作成手段の動作を示すフローチャートである。
【図４】３Ｄ共通情報記述子の作成方法を示すフローチャートである。
【図５】ＰＭＴと３Ｄ共有情報記述子の構成を示す概念図である。
【図６】３Ｄシーン時間情報を示す概念図である。
【図７】ＥＩＴ作成手段の動作を示すフローチャートである。
【図８】３Ｄ固有情報記述子の作成方法を示すフローチャートである。
【図９】ＥＩＴと３Ｄ固有情報記述子の構成を示す概念図である。
【図１０】ＤＩＩの構成の一例を示す図である。
【図１１】本実施形態における放送データ送信方法を示す概念図である。
【図１２】デジタル放送の放送データ送信方法を示す概念図である。
【図１３】３Ｄ画像の一例を示す概念図である。
【図１４】画像多重方式を示す概念図である。
【図１５】本発明の第１の実施形態における放送データ受信装置を示すブロック図である。
【図１６】飛び出し量調整の原理を説明するための図である。
【図１７】飛び出し量調整時の画像形式の変化を説明するための図である。
【図１８】飛び出し量調整時の表示方法を説明するための図である。
【図１９】２ＤビデオデータのＰＩＤ定義情報を含むＰＭＴの構造の一例を示す図である。
【図２０】画像多重方式情報がマルチストリーム方式でない場合の３ＤビデオデータのＰＩＤ定義情報を含むＰＭＴの構造の一例を示す図である。
【図２１】画像多重方式情報がマルチストリーム方式である場合の３ＤビデオデータのＰＩＤ定義情報を含むＰＭＴの構造の一例を示す図である。
【図２２】本発明の第２の実施形態の放送データ送信装置の送信動作のフローチャート図である。
【図２３】受信した放送データのビデオデータのＰＩＤから、受信したビデオデータの種別を判定する方法のフローチャート図である。
【図２４】１つの番組内で２Ｄシーンと３Ｄシーンが混在する場合の放送データ送信装置と放送データ受信装置の動作について説明するための図である。
【図２５】フィールドシーケンシャル方式の表示方式を説明するための図である。
【図２６】パララクスバリア方式の表示方式を説明するための図である。
【符号の説明】
１００放送データ送信装置
１０１番組配列情報作成手段
１０２多重化手段
１０３伝送路符号化手段
２００ＰＭＴ作成手段
２０１ＥＩＴ作成手段[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a digital broadcasting technique, and more particularly, to a broadcast data transmitting apparatus that transmits broadcast data including three-dimensional image data that can be stereoscopically viewed, and a broadcast data receiving apparatus that receives broadcast data including three-dimensional image data. Etc.
[0002]
[Prior art]
Conventionally, various methods for displaying a three-dimensional image have been proposed. Among them, what is generally used is a so-called binocular system that uses binocular parallax. That is, a left-eye image and a right-eye image having binocular parallax are prepared, and stereoscopic vision is performed by projecting them to the left and right eyes independently. A field sequential method and a parallax barrier method have been proposed as representative methods of the binocular system.
[0003]
FIG. 25 is a conceptual diagram for explaining the field sequential method. In this field sequential method, as shown in FIG. 25, the left eye image and the right eye image are alternately arranged every other pixel in the vertical direction, and the display of the left eye image and the display of the right eye image are alternately switched. Is displayed. The left-eye image and the right-eye image have a vertical resolution that is ½ that of normal two-dimensional display. The observer wears shutter-type glasses that open and close in synchronization with the display switching cycle. The shutter used here opens the left eye side and closes the right eye side when the left eye image is displayed, and closes the left eye side and opens the right eye side when the right eye image is displayed. By doing so, the left eye image is observed only by the left eye, and the right eye image is observed only by the right eye, and stereoscopic viewing can be performed.
[0004]
FIG. 26 is a conceptual diagram for explaining the parallax barrier method. FIG. 26A is a diagram illustrating the principle of generating parallax. On the other hand, FIG. 26B is a diagram showing a screen displayed by the parallax barrier method.
[0005]
In FIG. 26A, an image in which the left eye image and the right eye image as shown in FIG. 26B are alternately arranged every other pixel in the horizontal direction is displayed on the image display panel 2601. By placing a parallax barrier 2602 having slits at an interval narrower than the interval between pixels of the same viewpoint on the front surface of the image display panel 2601, the left eye image is observed only by the left eye 2603, and the right eye image is observed only by the right eye 2604. As a result, stereoscopic viewing can be performed.
[0006]
Since the image formats suitable for the display method are different, it is necessary to create a three-dimensional image according to each display format, and there is a problem that the three-dimensional image is not versatile.
[0007]
In order to solve such a problem, in Japanese Patent Laid-Open No. 2003-111101 (published on April 11, 2003), information to be referred to in a series of processes for displaying a stereoscopic image such as the configuration of the image and the number of viewpoints A stereoscopic image processing method, apparatus, and system that can make a stereoscopic image versatile by adding to the three-dimensional image data are disclosed.
[0008]
[Patent Document 1]
JP 2003-111101 A
[0009]
[Problems to be solved by the invention]
However, in Japanese Patent Laid-Open No. 2003-111101, since the information is arranged in the header area of image data, it is intended for data distribution using a communication line or recording to a file, and considers the case of broadcasting image data. However, it cannot be applied to image data broadcasting as it is.
[0010]
The present invention has been made in order to solve the above-described problems, and an object of the present invention is to provide a broadcast data transmitting apparatus capable of transmitting and receiving broadcast data including a three-dimensional image having versatility. An object of the present invention is to provide a broadcast data transmission method and a broadcast data receiving apparatus.
[0011]
[Means for Solving the Problems]
To achieve the above objective,A broadcast data transmitting apparatus for transmitting content including image data as broadcast data, comprising: program sequence information creating means for creating program sequence information used for reproducing the content, wherein the program sequence information is the content 3D control information for controlling the display of the 3D image data included in the program, and the program array information creating means stores information indicating a reproduction time zone of the 3D image data in the 3D control information. Features.
[0013]
Further, the present invention is a broadcast data transmitting apparatus for transmitting content including image data as broadcast data, comprising program sequence information creating means for creating program sequence information used for reproducing the content, The program sequence information includes 3D control information for controlling the display of the 3D image data included in the content, and the program sequence information creating means is a viewpoint image selected when the 3D image data is displayed in 2D. Is stored in the three-dimensional control information.
[0014]
Further, the present invention is a broadcast data transmission method for transmitting content including image data as broadcast data, comprising a program sequence information creation step for creating program sequence information used for reproducing the content, The program arrangement information includes three-dimensional control information for controlling display of the three-dimensional image data included in the content, and the program arrangement information creating step includes information indicating a reproduction time zone of the three-dimensional image data. It is stored in information.
[0016]
Further, the present invention is a broadcast data transmission method for transmitting content including image data as broadcast data, comprising a program sequence information creation step for creating program sequence information used for reproducing the content, The program arrangement information includes three-dimensional control information for controlling display of the three-dimensional image data included in the content, and the program arrangement information creation step includes a viewpoint image selected when the three-dimensional image data is two-dimensionally displayed. Is stored in the three-dimensional control information.
[0017]
Further, the present invention is a broadcast data receiving apparatus for receiving broadcast data, wherein program sequence information analyzing means for analyzing control information for content included in the broadcast data, and whether input image data is displayed in two dimensions Or display means capable of switching between three-dimensional display by external input and display control means for controlling the display means, wherein the program arrangement information is a three-dimensional image included in broadcast data 3D control information for controlling display of data is included, and the 3D control information further includes 3D display time information indicating a time zone in which 3D image data is present in the content, and the program sequence information analysis means includes: The three-dimensional control information is sent to the display control means by analyzing the program arrangement information, and the display control means is provided with an internal timer and is input. According to the three-dimensional control information, the display means is switched between two-dimensional display and three-dimensional display, and the image data included in the broadcast data received from the three-dimensional display time information and the time of the timer is two-dimensional. It is determined whether the data is image data or 3D image data, and the display means is controlled to perform 2D display if it is 2D image data and 3D display if it is 3D image data. It is characterized by that.
[0018]
The present invention is also a broadcast data receiving apparatus for receiving broadcast data, wherein the program arrangement information analyzing means for analyzing the control information for the content included in the broadcast data, and the display for displaying the input image data in two dimensions And display control means for controlling the display means, wherein the program arrangement information includes three-dimensional control information for controlling display of three-dimensional image data included in broadcast data, and the three-dimensional control information is The program sequence information analyzing means includes identifier information defining an identifier indicating that the received image data included in the received broadcast data is 2D image data and an identifier indicating that the received image data is 3D image data, respectively. The three-dimensional control information is sent to the display control means by analyzing the program arrangement information, and the display control means receives the inputted three-dimensional control. The display means is controlled according to the information, and it is determined from the identifier information and the identifier of the received image data whether the received image data is two-dimensional image data or three-dimensional image data. The display means controls the display so as to display, and if it is three-dimensional image data, it is a display control means for notifying the observer that it cannot be displayed or cannot be displayed correctly.
[0019]
The present invention is also a broadcast data receiving apparatus for receiving broadcast data, wherein the program arrangement information analyzing means for analyzing the control information for the content included in the broadcast data, and the display for displaying the input image data in two dimensions And display control means for controlling the display means, wherein the program arrangement information includes three-dimensional control information for controlling display of three-dimensional image data included in broadcast data, and the three-dimensional control information is , Including 3D display time information indicating a time zone in which 3D image data exists in the content, and the program sequence information analyzing means analyzes the program sequence information to display the 3D control information in the display control means. The display control means includes a timer inside and controls the display means according to the inputted three-dimensional control information, and the three-dimensional display time information From the time of the timer, it is determined whether the received image data included in the received broadcast data is 2D image data or 3D image data, and if it is 2D image data, display is performed. The display means is a display control means for controlling the display means and notifying an observer that it cannot be displayed or cannot be displayed correctly in the case of 3D image data.
[0038]
DETAILED DESCRIPTION OF THE INVENTION
Before describing embodiments of the present invention, terms used in this specification are defined as follows.
[0039]
Broadcast data is a general term for data transmitted from a broadcasting station, and includes broadcasts transmitted via radio or wire, Internet streaming broadcasts, and the like.
Content generally has the same meaning as a broadcast program, but here is a collection of data including at least one of video data, audio data, and data broadcasting data. The broadcast data includes a plurality of contents.
[0040]
The program arrangement information is information for managing what kind of content is included in the broadcast data, and is information indicating the contents of a plurality of contents.
[0041]
Program sequence information includes PMT (Program Map Table) and EIT (Event Information Table).
[0042]
PMT is program arrangement information that includes stream information such as PID (Packet ID) for separating video data, audio data, and the like constituting a channel from broadcast data, and is common to contents in the same channel. Since the PMT is program arrangement information common to contents in the same channel, it is characterized in that it is not frequently updated.
[0043]
The EIT is program arrangement information including program information such as program time information indicating a broadcast time zone of each content included in a channel, and including one or more pieces of unique information different for each content. Since the EIT is unique information that is different for each content, the EIT is frequently updated.
[0044]
The program arrangement information is repeatedly multiplexed and transmitted in the broadcast data as shown in FIG. 12 so as to be able to cope with any channel switching in the receiver.
[0045]
A 3D image is an image configured by a set of a plurality of images having parallax. FIG. 13 shows an example of a 3D image. The 3D image in this example is a 3D image in which images corresponding to two viewpoints of a left eye image and a right eye image are arranged side by side.
The 3D image control information is information such as two viewpoints indicating the characteristics of the 3D image and side-by-side information and information used when controlling the display of the 3D image.
The 3D display is to display a viewpoint image in which the left eye and the right eye of the observer are different using a plurality of viewpoint images so that the image can be observed. On the other hand, 2D display is to display so that the left and right eyes of the observer can observe the same image.
[0046]
The 3D content is content including video data or data broadcasting data including 3D images in the content.
[0047]
The image multiplexing method is information indicating how the viewpoint images constituting the 3D image are arranged. In the present embodiment, three methods of an integration method, a time division method, and a multi-stream method are used as image multiplexing methods. Here, the image multiplexing method will be described with reference to FIG. FIG. 14 is a schematic diagram for explaining an image multiplexing method in the case of two viewpoints. As shown in FIG. 14A, the video data of each viewpoint used for image multiplexing of 3D images is composed of a plurality of frames, and is an independent series.
[0048]
As shown in FIG. 14B, the integration method is a method in which each viewpoint image is transmitted adjacent to each frame. As shown in FIG. 14C, the time division method is a method in which a left eye image and a right eye image are alternately switched and transmitted in a frame cycle. The frame of the right eye image transmitted here is the same time as the frame of the left eye image transmitted earlier. In this example, the left eye image is transmitted first, but the right eye image may be transmitted first. The multi-stream method is a method for transmitting the video data of the left eye image and the right eye image shown in FIG. 14A as separate data strings.
If the scanning method is interlaced, the above frame may be replaced with a field.
Each image multiplexing method can be applied even when the number of viewpoints is three or more.
[0049]
<First Embodiment>
A first embodiment of the present invention will be described. When transmitting 3D content, the transmission apparatus according to the first embodiment stores 3D image control information of a 3D image included in the 3D content in program arrangement information and transmits the 3D image control information. At that time, as shown in FIG. 11, among the 3D image control information, information that is common to 3D content included in the same channel and is not frequently updated (hereinafter referred to as 3D common information) is stored in the PMT, Information that is unique to each 3D content and frequently updated (hereinafter referred to as 3D unique information) is stored in the EIT, multiplexed with the 3D content, and repeatedly transmitted. The PMT and EIT may be transmitted at certain intervals, for example, at a rate of about once per second. For example, when transmitting a key frame of video data, the PMT or EIT may be transmitted. It may be transmitted in synchronization with the type of frame constituting the video data to be transmitted. Details of the 3D common information and the 3D unique information will be described later. In addition, the receiving apparatus according to the present embodiment performs stereoscopic display of a 3D image based on 3D common information and 3D unique information stored in the program arrangement information.
[0050]
First, details of the broadcast data transmitting apparatus according to the present embodiment will be described. FIG. 1 is a block diagram showing a configuration example of a broadcast data transmitting apparatus according to the present embodiment. As shown in FIG. 1, the broadcast data transmitting apparatus 100 includes program sequence information creating means 101, multiplexing means 102, and transmission path encoding means 103.
[0051]
The program sequence information creating unit 101 creates program sequence information such as PMT and EIT including 3D image control information. Details of the program sequence information creating means 101 will be described later.
[0052]
The multiplexing unit 102 includes program sequence information created by the program sequence information creating unit 101, video data including MPEG (Moving Picture Experts Group) -1, MPEG-2, MPEG-4, etc., and AAC (Advanced Audio Coding). ), MP3 (MPeg audio layer 3), audio data including WMA (Windows® Media Audio), etc., and data including JPEG (Joint Picture Experts Group), PNG (Portable Network Graphics), BML (Broadcast Markup Language), etc. Broadcast data and the like are multiplexed in each TS (Transport Stream) packet.
The transmission path encoding means 103 encodes the TS packet according to a predetermined modulation method and transmits it as broadcast data.
[0053]
Here, the details of the program arrangement information creation unit 101 will be described. FIG. 2 is a block diagram showing a configuration example of the program arrangement information creation unit 101. The program sequence information creating unit 101 includes a PMT creating unit 200 that creates a PMT and an EIT creating unit 201 that creates an EIT.
[0054]
First, the PMT creation means 200 will be described. Stream information including a PID for separating a stream such as video data and audio data constituting a channel from broadcast data is input to the PMT creation means 200. When the stream information includes 3D images or is stream information related to video data constituting the 3D images, 3D common information is input in addition to the stream information. The 3D common information is information common to 3D contents included in the same channel in the 3D image control information. Examples of information included in the 3D common information include viewpoint number information, image multiplexing method information, forced 2D flag information, and the like.
[0055]
The viewpoint number information is information indicating the number of viewpoints of the images constituting the 3D image.
The image multiplexing method information is information indicating the above-described image multiplexing method.
The forced 2D flag information is information for forcibly displaying 2D 3D content in the receiving apparatus. The forced 2D flag information will be described later.
[0056]
Next, a configuration example of the PMT created by the PMT creation means 200 is shown in FIG.
The PMT in FIG. 5A includes a PMT identifier 500 that identifies a PMT, PMT control information 501 that includes a PMT version number,

stream information

502 and 504 that includes a PID that identifies a stream constituting a channel, and each stream. The configuration includes descriptors 503 and 505 for storing extended information.
[0057]
In FIG. 5A, when the stream information 502 is stream information regarding video data that includes or constitutes a 3D image, the 3D common information descriptor is stored in the descriptor 503 that follows the stream information 502. .
[0058]
FIG. 5B shows a configuration example of the 3D common information descriptor. The 3D common information descriptor includes a 3D identifier 506 that identifies the descriptor including 3D image control information, a 3D common information identifier 507 that identifies the 3D common information descriptor, the above-described viewpoint number information 508, and image multiplexing. The system information 509, forced 2D flag information 510, and additional information 511 are included. The additional information 511 will be described later.
[0059]
Next, the operation of the PMT creation means 200 when creating the PMT of FIG. 5 will be described using the flowchart of FIG.
First, a PMT identifier indicating that the program arrangement information to be created is a PMT is created (step S300), and then PMT control information including a PMT version number is created (step S301). Next, stream information including PID is created for each stream of video data, audio data, and the like constituting the content (step S302). Next, it is determined whether or not the stream is video data (step S303). If it is video data, a 3D common information descriptor for storing 3D common information is created (step S304). The above operation is repeated until all the stream information is completed. When all the stream information is completed, the creation of the PMT is ended (step S305). When the image multiplexing method is multi-stream, stream information and a 3D common information descriptor are created for each video data constituting the 3D image.
[0060]
Here, the method of creating the 3D common information descriptor in step S304 will be described with reference to the flowchart of FIG. First, a 3D identifier and a 3D common information identifier indicating that the descriptor to be created is a 3D common information descriptor are created (step S400). Next, essential common information is created (step S401). The essential common information refers to information that must be stored in the 3D common information descriptor. For example, the number of viewpoints described above, image multiplexing method information, forced 2D flag information, and the like can be given.
[0061]
Next, additional information of essential common information is created. The additional information of the essential common information is extended information of the essential common information, and is information that varies depending on the value of the essential common information. As an example of creating additional information of essential common information, an example of creating different additional information for each image multiplexing method information will be given.
[0062]
First, it is determined whether the image multiplexing method is an integrated method (step S402). If it is the integration method, additional information specific to the integration method is created (step S403). Examples of additional information specific to the integration method include image arrangement information indicating whether the arrangement of viewpoint images in a frame is horizontal or vertical, and image reduction information indicating the reduction ratio of each viewpoint image in the frame.
[0063]
If the image multiplexing method is not an integrated method, it is determined whether or not it is a time division method (step S404). If the time division method is used, additional information specific to the time division method is created (step S405). As an example of additional information specific to the time division method, for example, in the case of two viewpoints, viewpoint / frame correspondence information indicating which frame corresponds to the left-eye image or the right-eye image can be given.
[0064]
If the image multiplexing method is not the time division method, it is a multi-stream method, so additional information specific to the multi-stream method is created (step S406). As an example of the additional information specific to the multi-stream method, viewpoint position information indicating which viewpoint each video data associated with the 3D common information corresponds to is given. In this way, the 3D common information descriptor is created.
[0065]
The above example describes the case where the 3D common information descriptor is included in the PMT included in all the channels. However, in the channel not including the 3D content, the 3D common information descriptor is not included in the PMT. May be selected.
[0066]
In the above example, the 3D common information descriptor is added when the stream information includes the 3D image or is the stream information related to the video data constituting the 3D image. A 3D common information descriptor may be added even when the stream information is for data broadcasting data that includes or constitutes a 3D image.
[0067]
In addition, only 3D content whose image multiplexing method is an integrated method is transmitted to a certain channel, and only 3D content whose image multiplexing method is a time division method is transmitted to another channel. You may transmit 3D content of a different image multiplexing system.
[0068]
Next, the EIT creation unit 201 will be described. The EIT creating means 201 receives program information including program time information indicating the broadcast time zone of the content. When a 3D image is included in the program, 3D unique information is input in addition to the program information. The 3D unique information is information unique to each 3D content in the 3D image control information. Examples of information included in the 3D specific information include 2D display image information, parallax amount adjustment information, and 3D scene time information.
[0069]
The 2D display image information is information indicating an image of a viewpoint to be selected when the 3D image is displayed in 2D by the receiving device.
Further, the parallax amount adjustment information is information indicating an adjustment value of the degree of popping out when a 3D image is stereoscopically displayed.
[0070]
The 3D scene time information is information for designating the time zone of the 3D scene when the video data is composed of a 3D scene and a 2D scene. As shown in FIG. 6, the 3D scene time information includes a 3D scene start time indicating the time when the 3D scene data starts, and a 3D scene duration time indicating the duration of the 3D scene from the 3D scene start time. Yes. When a plurality of 3D scenes are included in the video data, the 3D scene start time and 3D scene duration time are stored for the number of 3D scenes.
[0071]
Further, the number of 3D scenes included in the video data may be stored in the 3D scene time information. Further, instead of the 3D scene duration, a 3D scene end time indicating a time at which the 3D scene ends may be used. Further, when the video data does not include 2D video data and is composed of only 3D scenes, there is no need for 3D scene time information. In addition, a flag indicating whether or not 3D scene time information is included may be stored in the 3D unique information. Also, instead of the 3D scene time information, 2D scene time information including a 2D scene start time indicating the time when the 2D scene starts and a 2D scene duration time indicating the time that the 2D scene continues from the 2D scene start time is used. Also good.
[0072]
Next, a configuration example of the EIT created by the EIT creation unit 201 is shown in FIG. The EIT in FIG. 9A includes an EIT identifier 900 for identifying the EIT, EIT control information 901 including the EIT version number, and program information 902 including program time information describing the broadcast time zone of the content included in the channel. 904, and descriptors 903 and 905 for storing extended information of each program information.
[0073]
In FIG. 9A, assuming that the program information 902 is information related to a program including a 3D scene, a 3D unique information descriptor is stored in a descriptor 903 following the program information 902.
[0074]
FIG. 9B shows the configuration of the 3D unique information descriptor. The 3D unique information descriptor includes a 3D identifier 906 that identifies the descriptor including 3D image control information, a 3D unique information identifier 907 that identifies the 3D unique information descriptor, the 2D display image information 908, and the parallax described above. The

amount adjustment information

909 and 3D scene time information 910 are included.
[0075]
Next, the operation of the EIT creating unit 201 when creating the EIT of FIG. 9 will be described using the flowchart of FIG.
First, it is specified which program information to create and store in the EIT (step S700). For example, creation of program information for all programs can be designated, or creation of program information for only one program can be designated. Next, an EIT identifier indicating that the program arrangement information to be created is EIT is created (step S701), and then EIT control information including the EIT version number is created (step S702).
[0076]
Next, program information including program time information is created for each program (step S703). Next, it is determined whether or not the program is 3D content (step S704). If the program is 3D content, a 3D unique information descriptor for storing 3D unique information is created (step S705). The above operation is repeated until the program information of the program specified in step S700 is completed. When the program information is completed, creation of the EIT is terminated (step S706).
[0077]
Here, the method of creating the 3D unique information descriptor in step S705 will be described with reference to the flowchart of FIG.
First, a 3D identifier indicating that the descriptor to be created is a 3D unique information descriptor, a 3D unique information identifier, and the like are created (step S800). Next, essential unique information is created (step S801). Here, the essential unique information refers to information that must be stored in the 3D unique information descriptor. For example, the 2D display image information and the parallax amount adjustment information described above can be used. Next, the aforementioned 3D scene time information is created. First, it is determined whether the 2D scene is included in the video data (step S802). If the 2D scene is included, the 3D scene time information described above is created for the number of 3D scenes (step S803). If not included, the video data is composed only of 3D scenes, so 3D scene time information is not created. In this way, the 3D unique information descriptor is created.
[0078]
Next, the storage location of 3D unique information corresponding to the 3D image included in the data broadcasting data will be described.
The 3D unique information corresponding to the 3D image included in the data broadcasting data is stored in a table in which data broadcasting data control information called DII (Download Information Indication) is defined. An example of the configuration of DII is shown in FIG. The DII in FIG. 10 includes a DII identifier 1000 for identifying DII, module information 1001 and 1003 describing control information of modules constituting data for data broadcasting, and a descriptor 1002 storing extension information of each module information. , 1004. Assuming that the module information 1001 is module information relating to a module that includes or constitutes a 3D image, the aforementioned 3D unique information descriptor is stored in a descriptor 1002 that follows the module information 1001.
[0079]
Here, if the module corresponding to the module information 1001 is composed of a plurality of submodules and each submodule includes a 3D image, a 3D unique information descriptor is created for each 3D image of each submodule, Store in the descriptor 1002. At this time, in order to associate the 3D image of each submodule with the 3D unique information descriptor, the order in which the 3D unique information descriptor is stored in the descriptor 1002 may be determined, or index information for identifying each 3D image. May be stored in the 3D unique information descriptor. The DII is repeatedly multiplexed and transmitted in the broadcast data so that it can cope with any channel switching. Further, 3D unique information corresponding to a 3D image included in the data for data broadcasting may be stored in the EIT.
[0080]
As described above, the PMT including the 3D common information created by the PMT creating unit 200, the EIT including the 3D unique information created by the EIT creating unit 201, and the program arrangement information other than the PMT and the EIT are multiplexed. The data is converted into TS packets by means 102 and multiplexed with TS packets such as video data and audio data. The multiplexed TS packet is encoded by the transmission path encoding means 103 according to the modulation method and transmitted as broadcast data.
[0081]
In the above embodiment, the 3D common information is stored in the PMT and the 3D unique information is stored in the EIT. However, the 3D common information and the 3D unique information may be stored together in the PMT or EIT. And program arrangement information other than EIT may be stored. At that time, the 3D common information and the 3D unique information may be stored together in the same descriptor.
[0082]
In the above embodiment, 3D common information and 3D unique information are stored and transmitted in program arrangement information such as PMT and EIT. However, the information is stored in information other than information including a table such as program arrangement information. May be transmitted. Moreover, you may transmit 3D common information and 3D specific information each independently.
[0083]
In the above embodiment, the 3D common information descriptor and the 3D unique information descriptor start with the 3D identifier, but the 3D identifier is omitted, and the 3D common information descriptor starts with the 3D common information identifier and 3D unique information. The head of the descriptor may be a 3D unique information identifier.
[0084]
Next, the broadcast data receiving apparatus in the embodiment of the present invention will be described. FIG. 15 is a block diagram showing a configuration example of a broadcast data receiving apparatus 1500 in the embodiment of the present invention. Broadcast data receiving apparatus 1500 receives broadcast data, transmission path decoding means 1501 for decoding the input broadcast data into TS packet data, separation means 1502 for separating TS packet data, program sequence information analysis means 1503, 3D control means 1504 for controlling 3D display, video decoding means 1505 for decoding video data, data processing means 1506 for processing data for data broadcasting, audio decoding means 1507 for decoding audio data, video decoding A unit 1505 and a synthesizing unit 1508 for synthesizing outputs of the data processing unit 1506 are included.
[0085]
Although not shown in the figure, a tuner is connected to the end of the transmission path decoding means 1501, and broadcast data received from the tuner is input. Further, a display device for displaying screen data is connected to the end of the combining unit 1508. The display device at this time is a display device that can switch whether the input screen data is to be displayed in 2D or 3D by external input. Further, the display device may be connected to 3D control means 1504 for 2D / 3D switching. Further, a speaker or the like is connected to the end of the audio decoding unit 1507.
[0086]
The operation of broadcast data receiving apparatus 1500 configured as described above will be described. Broadcast data received by the tuner is input to the transmission path decoding means 1501.
Transmission path decoding means 1501 performs digital demodulation and error correction on the input broadcast data to obtain TS packet data.
[0087]
The separation unit 1502 refers to the PID attached to the TS packet data and selects necessary TS packet data. Unnecessary TS packet data is discarded. The PID is uniquely assigned to each video data, audio data, and data broadcasting data, and the same PID is assigned to TS packet data including data constituting one video data. A unique PID is also attached to the PMT and EIT described above. Separation means 1502 searches TS packet data including the target PMT or EIT based on the PID, and outputs the TS packet data to program arrangement information analysis means 1503.
[0088]
The program sequence information analyzing unit 1503 analyzes the PMT input from the separating unit 1502, obtains PIDs of video data, audio data, and data broadcasting data constituting the program, and outputs them to the separating unit 1502. When the 3D common information descriptor is included in the PMT, 3D common information obtained as a result of the analysis is output to the 3D control unit 1504.
[0089]
Similarly, the EIT input from the separating means 1502 is analyzed to obtain program information. When the 3D unique information descriptor is included in the EIT, 3D unique information obtained as a result of the analysis is output to the 3D control unit 1504.
[0090]
The 3D control unit 1504 controls the display screen based on the 3D image control information so that 3D display can be performed on the display device. Also, the display mode designation for the display device is determined based on the presence or absence of the 3D image control information. These operations will be described later.
[0091]
Since PMT and EIT are continuously transmitted at a constant cycle, 3D image control information is repeatedly input to the 3D control means 1504. The 3D control unit 1504 holds the input 3D image control information, and when 3D image control information is newly input from the program information analysis unit 1503, the stored 3D image control information and the input Compared with the 3D image control information. As a result, if the 3D image control information is updated, the held 3D image control information is replaced with the input 3D image control information. If some information of the 3D image control information has been updated, only that information is updated. The above operation is referred to as an update operation in the 3D control unit 1504.
[0092]
Separation means 1502 searches for TS packet data including target video data, audio data, and data broadcasting data based on the PID input from program sequence information analysis means 1503. The data is output to the decoding unit 1507 and the data processing unit 1506.
The video decoding unit 1505 decodes the input video data. The decoded video data is output to the synthesizing means 1508.
[0093]
The data processing unit 1506 processes the data broadcasting data and obtains characters, graphics, still image data, and the like. Characters, graphics, and still image data are output to the combining unit 1506. Although not shown in FIG. 15, when the data processing means 1506 and the 3D control means 1504 are connected and 3D specific information is stored in DII which is the control information of the data for data broadcasting, data processing is performed. The 3D unique information read from the DII by the means 1506 is output to the 3D control means 1504. The 3D control unit 1504 performs display control of data for data broadcasting based on the 3D unique information.
[0094]
The audio decoding unit 1507 decodes the input audio data. The decoded audio data is output to a speaker or the like.
The synthesizing unit 1508 has a plurality of display screens for displaying video data, still image data, and characters and graphics, and superimposes them as necessary to synthesize one screen. It is converted according to the display method and output to the display device.
[0095]
Here, the display format of the screen is a format related to the video structure defined by the display device. For example, when the display device is a field sequential method, what is assumed as an input is a format in which left-eye images and right-eye images are alternately arranged every other pixel in the vertical direction as shown in FIG. When the display device is a parallax barrier system, a format in which left-eye images and right-eye images are alternately arranged every other pixel in the horizontal direction as shown in FIG. 26B is assumed as input. Yes.
[0096]
Next, the operation of the 3D control unit 1504 will be described. The 3D control unit 1504 can know the format related to the structure of video data or still image data by referring to the 3D image control information input from the program sequence information analysis unit 1503. In the following description, video data will be described, but similar control is performed for still image data, graphics, and characters.
[0097]
First, it is determined whether the received video data includes a 3D scene. When 3D common information is not input from the program sequence information analysis unit 1503, it is determined that the received video data does not include a 3D scene. When 3D common information is input, it is determined that the received video data includes a 3D scene. When 3D scenes are included in the video data, there is a possibility that 2D scenes and 3D scenes are mixed in the video data.
[0098]
The 3D control means 1504 includes a timer for managing time inside. If the time indicated by the timer is the broadcast time zone of the 3D scene specified by the above-described 3D scene time information, it is determined to be a 3D scene, otherwise it is determined to be a 2D scene. At this time, the time zone of the 3D scene may be displayed in the program guide based on the 3D scene time information.
[0099]
In the case of a 2D scene, the 3D control unit 1504 controls the video data input to the synthesis unit 1508 to be synthesized and displayed in the same format. The display mode is 2D.
[0100]
On the other hand, in the case of a 3D scene, any of the integration method, the time division method, and the multi-stream method is designated by the image multiplexing method information as described above. For example, when the image multiplexing method information indicates an integration method, image arrangement information and image reduction information are further specified.
[0101]
In the case of a 3D scene, display control of video data of the 3D scene may be performed based on forced 2D flag information. When the forced 2D flag information is 1, the video data of the viewpoint specified by the 2D display image information is selected from the video data of the 3D scene, and the enlargement or reduction process is performed so that the pixel aspect ratio becomes 1: 1. Thus, the display control of the synthesizing unit 1508 is performed. Here, the viewpoint frame specified by the 2D display image information is selected. However, the viewpoint frame predetermined by the receiving apparatus may be selected, or the user may be able to select freely. . The same applies to the case where the 2D display image information is not designated. The 3D control unit 1504 sets the display mode to 2D.
[0102]
On the other hand, when the forced 2D flag information is 0, display control is performed on the combining unit 1508 so that 3D display is performed, and the display mode is set to 3D. For example, when the image multiplexing method information indicates the integration method and the image arrangement information indicates side by side, the image frame input as video data has the form shown in FIG. Therefore, if the display device is a parallax barrier system, the compositing unit 1508 is controlled so as to convert the image frame into the format shown in FIG.
[0103]
Note that the 3D control unit 1504 performs display control on the synthesis unit 1508 based on the 3D image control information held therein, but when 3D image control information is newly input, the 3D image control information 3D is displayed. The scene time information is checked, and if the time from the current time to the start time of the 3D scene is shorter than a predetermined time, the above update operation is postponed, and the composing means 1508 is immediately based on the 3D image control information. Display control may be performed.
[0104]
In the case of a 3D scene, the amount by which the 3D image appears to protrude from the display surface of the display device may be adjusted using the parallax amount adjustment information. The pop-out amount will be described with reference to FIG. In FIG. 16, the pixel L1 of the left eye image is displayed at the display position 1601, and the corresponding pixel R1 of the right eye image is displayed at the display position 1602. These pixels are imaged at position 1603.
[0105]
Here, when the display position of the pixel R1 of the right-eye image is moved to the left and changed from the display position 1602 to the display position 1604, an image that has formed an image at the position 1603 becomes visible at the position 1605. Since the position 1605 is in front of the position 1603, the position 1605 appears to protrude from the display surface. Conversely, when the pixel R1 is moved to the right of the display position 1602, the image that has formed an image at the position 1603 becomes visible behind the display surface. Here, the pixel R1 is referred to as a corresponding point of the pixel L1.
[0106]
Thus, in order to realize the pop-out amount specified by the parallax amount adjustment information, the 3D control unit 1504 instructs the synthesizing unit 1508 to shift either the left or right image by a predetermined number of pixels in the horizontal direction. Output control information.
[0107]
FIG. 17 is a diagram illustrating a case where the right eye image is shifted to the left. FIG. 17A shows a state before the shift, and the entire display screen is displayed in 3D. FIG. 17B shows a state after the shift, and as a result of shifting the right eye image, an area 1701 indicated by a dotted line in the right eye image appears outside the display screen, so that the entire image cannot be displayed.
[0108]
FIG. 18 is a diagram showing a display example at this time. FIG. 18A does not display the right-eye image (here, the region 1701 shown in FIG. 17) that has moved out of the display screen due to the shift, and the right-eye image of the left-eye image. This is a case where the region where the corresponding point disappears is displayed in 2D. FIG. 18B shows a case where the left eye image is not displayed while leaving the right eye image, and an area where the corresponding point with the left eye image is lost in the right eye image as in FIG. 18A. Is displayed in 2D. FIG. 18C shows a case where only a region with corresponding points is displayed in 3D.
[0109]
Note that the parallax amount adjustment information may be set in advance in the broadcast data receiving device 1500 or may be changed by user designation.
With the operation as described above, the 3D control unit 1504 performs processing on the received video data.
[0110]
In the above example, the display device connected to the synthesizing unit 1508 can display the input screen data by switching between 2D display and 3D display according to an external instruction. Although the display device is described, this display device may be a display device capable of only 2D display. In this case, as described above, when the display device is connected to the 3D control means 1504 and the input screen data is data for 3D display, the previous screen data is used instead of the input screen data. The screen data for 3D display may not be displayed by holding the screen or displaying specific screen data.
[0111]
Further, the screen data for 3D display may be displayed in 2D as it is.
Further, conversion means for converting screen data for 2D display from screen data for 3D display is provided between the combining means 1508 and the display device to create screen data for 2D display, and the screen data is displayed in 2D. You may make it do.
[0112]
In addition, when displaying screen data for 3D display on a display device capable of only 2D display, a buzzer or light emission is used to inform the observer that the currently displayed screen data is screen data for 3D display. A light source such as a lamp and a transmission means such as a warning message may be provided. At that time, if the screen data is not displayed, it is notified that the screen data is inappropriate and cannot be displayed. If the screen data for 3D display is displayed in 2D as it is, the screen data for 3D display is displayed as it is. Notification means may be provided for notifying or notifying that the information is converted and displayed when it is converted and displayed by the conversion means.
The same operation is performed when data for 2D display is input to a display device capable of only 3D display.
[0113]
As described above, even when broadcast data composed of image data of an inappropriate display method is received by the display device, it is converted into appropriate screen data and displayed, or it is indicated that it is inappropriate. It can be displayed to the observer and the screen data itself can be hidden.
[0114]
In addition, when the image multiplex system information analyzed by the program sequence information analyzing unit 1503 is image multiplex system information not supported by the broadcast data receiving apparatus, the video data received by the program sequence information analyzing unit 1503 cannot be displayed. May be sent to the 3D control means 1504, and the display device may be controlled so that the 3D control means 1504 does not perform display as described above according to the information.
[0115]
In addition, the type of non-compatible image multiplexing method may be displayed.
In the above example, the operation in the case of receiving video data including or constituting a 3D image has been described. However, when data broadcasting data including or constituting a 3D image is received. A similar operation is performed.
[0116]
In the above-described embodiment, 3D image control information is stored in the PMT and EIT in the broadcast data transmitting apparatus, and 2D video data and 3D video data are determined based on the presence and content of the 3D image control information in the broadcast data receiving apparatus. However, flag information indicating the type of 2D video data and 3D video data may be added to the video data.
[0117]
When converting video data into TS packets, a bit string obtained by encoding is divided into predetermined processing units and stored in PES (Packetized Elementary Stream) packets, and the packets are further divided into TS packets of a predetermined size. Therefore, the flag information may be recorded in the header part of the PES packet or the header part of the TS packet, or may be stored in a predetermined position of the encoded bit string. For example, in the case of MPEG-4, it is stored in user data in a VOL (Video Object Layer).
[0118]
<Second Embodiment>
Next, a broadcast data transmitting apparatus and broadcast data receiving apparatus according to a second embodiment of the present invention will be described.
[0119]
The broadcast data transmitting apparatus according to the second embodiment of the present invention separately defines the PID of video data composed only of 2D scenes and the PID of video data composed only of 3D scenes in one PMT. As described above, this is a broadcast data transmitting apparatus that creates and transmits broadcast data including a PMT in which PIDs of different types of video data are defined.
[0120]
A broadcast data receiving apparatus according to the second embodiment of the present invention is a broadcast data receiving apparatus that receives the broadcast data. When the broadcast data is configured as described above, it is possible to distinguish whether the received video data is video data composed only of 2D scenes or video data composed only of 3D scenes based on the difference in PID. .
[0121]
Hereinafter, the broadcast data transmitting apparatus and the broadcast data receiving apparatus of this embodiment will be described in detail.
First, the broadcast data transmitting apparatus according to the present embodiment will be described with reference to the drawings.
[0122]
The configuration of the broadcast data transmitting apparatus according to the present embodiment is the same as that of the broadcast data transmitting apparatus according to the first embodiment described with reference to FIGS. 1 and 2, and the difference is that the video data in the PMT creating means 200 of FIG. This is only the creation part of the stream information.
[0123]
In the broadcast data transmitting apparatus according to the first embodiment described above, an example in which 2D scenes and 3D scenes are mixed in one video data has been described. However, the broadcast data transmitting apparatus according to the present embodiment includes only 2D scenes. Video data composed only of 3D scenes and video data to be created, and a PID is defined for each type of the video data in the PMT. In the following description, it is assumed that video data composed only of 2D scenes is 2D video data, and video data composed only of 3D scenes is 3D video data.
[0124]
Further, when the video data, the audio data, and the data broadcasting data are multiplexed in the multiplexing means 102 of FIG. 1, the TS is associated with the definition of the PID in the PMT created by the program sequence information creating means 101. Create packet data.
[0125]
Next, the PMT created by the PMT creation means 200 of FIG. 2 in the broadcast data receiving apparatus of this embodiment will be described in detail. In the present embodiment, PID definition information is a combination of the stream information described in FIG.
First, PID definition information of 2D video data will be described in detail with reference to the drawings.
[0126]
FIG. 19 is a diagram illustrating an example of a structure of a PMT including PID definition information of 2D video data.
The PMT 1900 includes PID definition information 1901. The PMT 1900 includes a stream type indicating what kind of data the PID definition information 1901 is and a PID. Examples of stream type definitions include “video data using MPEG-4 compression encoding”, “audio data by MPEG-2 AAC encoding”, “data for data broadcasting”, and the like.
[0127]
Here, for example, assuming that the stream type of the PID definition information 1901 is “video data using MPEG-4 compression encoding” and the PID is “0x01”, all data having a PID value of “0x01” are 2D scenes. Only video data using MPEG-4 compression encoding is configured.
[0128]
On the other hand, FIG. 20 is a diagram illustrating an example of a structure of a PMT including PID definition information of 3D video data when the above-described image multiplexing method is an integration method or a time division method.
[0129]
The PMT2000 includes PID definition information 2001. The PID definition information 2001 includes a 3D common information descriptor 2002 indicating that the stream type and the PID and the PID definition information is PID definition information for 3D video data. . The 3D common information descriptor 2002 is the same as the 3D common information descriptor shown in FIG. 5B, and the image multiplexing method information included in the 3D common information descriptor 2002 indicates an integration method or a time division method. Shall.
[0130]
Here, for example, if the stream type of the PID definition information 2001 is described as “video data using MPEG-4 compression encoding” and the PID is described as “0x02”, all the data whose PID value is “0x02” are described. The video data uses MPEG-4 compression encoding that is composed of only 3D scenes.
[0131]
The PID definition information for 2D video data and the PID definition information for 3D video data described above can be stored in the same PMT. In this case, PID definition information for a plurality of video data exists in the PMT. Depending on the presence or absence of the 3D common information descriptor 2002, PID definition information for 3D video data and PID definition information for 2D video data can be distinguished. Is possible.
[0132]
That is, if the 3D common information descriptor 2002 exists in the PID definition information, the PID definition information is PID definition information corresponding to 3D video data, and the 3D common information descriptor 2002 exists in the PID definition information. If not, it can be determined that the PID definition information is PID definition information corresponding to 2D video data.
[0133]
Next, PID definition information when image multiplexing method information indicates a multi-stream method will be described.
[0134]
When the image multiplexing method information is a multi-stream method, there are a plurality of video data streams in the broadcast data. In this case, a plurality of video data streams are required to restore the 3D video data. Therefore, in the PMT, PID definition information for 3D video data is required for the number of streams of video data necessary for 3D display by the broadcast data receiving apparatus.
[0135]
FIG. 21 is a diagram illustrating an example of the structure of a PMT including PID definition information of 3D video data when image multiplexing method information indicates a multi-stream method.
The PMT 2100 includes PID definition information 2101 and PID definition information 2102. The PID definition information 2101 includes a stream type and PID, 3D common information descriptor 2103, and the PID definition information 2102 includes a stream type, PID, and 3D common. Each information descriptor 2104 is included.
[0136]
Here, for example, in the PID definition information 2101, if the stream type is described as “video data using MPEG-4 compression encoding” and the PID is described as “0x03”, the data with the PID value “0x03” is All of the video data uses MPEG-4 compression encoding of the 3D scene, and the PID definition information 2102 describes that the stream type is “video data using MPEG-4 compression encoding” and the PID is “0x04”. If this is the case, data with a PID value of “0x04” is also video data using MPEG-4 compression coding, which is composed entirely of 3D scenes.
[0137]
The 3D common information descriptor 2103 and the 3D common information descriptor 2104 include a 3D identifier, image multiplexing method information, and the like, respectively. Here, it is assumed that both the image multiplexing method information included in the 3D common information descriptor 2103 and the 3D common information descriptor 2104 indicate a multi-stream method.
[0138]
As described above, when the image multiplexing method information indicates the multi-stream method, the PID definition information is defined in the PMT by the number of streams necessary to restore the 3D image.
[0139]
Further, when there are a plurality of PID definition information of video data constituting a 3D image as in the multi-stream method, in order for the broadcast data receiving apparatus to display a 3D image in 3D, the video data corresponding to each PID definition information is In order to distinguish which viewpoint is shown, viewpoint position information indicating which viewpoint each video data is is required.
[0140]
For example, the 3D common information descriptor 2103 includes additional information 2105 that is information specific to the multi-stream scheme, and the 3D common information descriptor 2104 includes additional information 2106 that is also information specific to the multi-stream scheme. Further, the additional information 2105 includes the viewpoint position information 2107, and the additional information 2106 includes the viewpoint position information 2108.
[0141]
As described above, PID definition information for 3D video data can be defined even if the image multiplexing method is a multi-stream method.
[0142]
A transmission method when the broadcast data transmitting apparatus according to the present embodiment as described above transmits broadcast data will be described with reference to the flowchart of FIG.
[0143]
First, in step S2200, information indicating the start of broadcasting is input to the broadcast data transmitting apparatus, and the broadcast data transmitting apparatus starts creating and transmitting broadcast data. Next, in step S2201, video data, audio data, data broadcast data, control information, and the like necessary for creating broadcast data are input to the broadcast data transmitting apparatus. Next, in step S2202, it is determined whether 3D video data is included in the broadcast channel. If 3D video data is not included, the process proceeds to step S2204. If 3D video data is included, the process proceeds to step S2203.
[0144]
In step S2204, the broadcast data transmitting apparatus creates broadcast data including 2D video data using the input video data, audio data, data broadcasting data, control information, etc., and transmits the created data. The process proceeds to step S2207.
[0145]
On the other hand, in step S2203, it is determined from the image multiplexing method information included in the control information whether the image multiplexing method is a multi-stream method. If so, the process proceeds to step S2205; otherwise, the process proceeds to step S2206.
[0146]
In step S2205, broadcast data including 3D video data composed of a plurality of streams is created using the input video data, audio data, data broadcasting data, control information, and the created data is transmitted. Then, the process proceeds to step S2207.
[0147]
On the other hand, in step S2206, broadcast data including 3D video data is created using the input video data, audio data, data broadcasting data, control information, etc., and the created data is transmitted. Advances.
[0148]
In step S2207, it is determined from an external input whether to continue broadcasting. For example, when it is desired to end broadcasting, the fact is input from the outside. If the broadcast is to be continued, the process returns to step S2201, and the creation and transmission of the broadcast data is continued. Otherwise, the process proceeds to step S2208. In step S2208, the broadcast data transmitting apparatus stops the creation and transmission of the broadcast data and ends the broadcast.
[0149]
As described above, the broadcast data transmitting apparatus according to the present embodiment creates broadcast data and transmits the created broadcast data.
[0150]
Next, a broadcast data receiving apparatus in the second embodiment will be described. As described with reference to FIG. 15, the broadcast data receiving apparatus according to the first embodiment performs 2D display of received video data by comparing the 3D scene time information with the current time in the 3D control unit 1504. However, the broadcast data receiving apparatus according to the second embodiment determines whether the video data received by the separating unit 1502 is 2D video data or 3D video data, and the 3D display is switched. In the case of video data, information indicating that the 3D video data has been received is sent to the 3D control means 1504.
[0151]
That is, the program sequence information analyzing unit 1503 analyzes the received PMT, sends the PID of 2D video data and the PID of 3D video data described in the PMT to the separating unit 1502, and the separating unit 1502 also stores those PIDs. In addition, it is determined whether the received video data is 2D video data or 3D video data. If the received video data is 3D video data, information indicating that the 3D video data has been received is sent to the 3D control means 1504. The determination means which performs the process to send is provided.
[0152]
Further, the 3D control unit 1504 may include this determination unit. For example, the program sequence information analysis unit 1503 analyzes the received PMT, sends the PID of 2D video data and the PID of 3D video data described in the PMT to the 3D control unit 1504, and receives the separation unit 1502 The PID of the video data is sent to the 3D control means 1504, and the 3D control means 1504 determines whether the received PID is 2D video data or 3D video data.
[0153]
Further, this determination means is provided separately and connected to the separation means 1502, the program arrangement information analysis means 1503, and the 3D control means 1504, respectively, and the video data is converted into 3D video from the information from the program arrangement information analysis means 1503 and the separation means 1502. If it is determined that the data is data, the 3D control unit 1504 may be configured to transmit information indicating that 3D video data has been input.
[0154]
FIG. 23 is a flowchart of a method for determining the type of received video data from the PID of the video data of the received broadcast data.
In step S2300, the broadcast data receiving apparatus reads the received broadcast data. The PMT of the broadcast data received at this time is sent to the program arrangement information analysis means 1503. In the program arrangement information analysis unit 1503, the information on the PID of the 2D video data and the PID of the 3D video data is analyzed, and these PIDs are sent to the separation unit 1502. Separation means 1502 determines in step S2301 whether the type of the received video data is 2D video data or 3D video data based on the PID of the video data included in the received broadcast data. Only when it is determined to be 3D video data, information indicating that the received video data is 3D video data is sent to the 3D control means 1504, and the broadcast data receiving apparatus is the broadcast data receiving apparatus according to the first embodiment. 3D display is performed in the same manner as described above.
[0155]
As described above, the broadcast data receiving apparatus of the present embodiment can determine the type of received video data from the PID of the video data of the received broadcast data without using the 3D scene time information.
[0156]
Next, each apparatus in the case where 2D video data and 3D video data are mixed in one program using the broadcast data transmitting apparatus according to the second embodiment of the present invention and the broadcast data receiving apparatus described above. Will be described.
[0157]
FIG. 24 is a diagram for explaining the operation of the broadcast data transmitting apparatus and the broadcast data receiving apparatus when 2D video data and 3D video data are mixed in one program. For example, as shown in FIG. 24, it is assumed that one program (referred to as program A) in which 2D video data and 3D video data are mixed is broadcast with the horizontal axis as time t.
[0158]
Table 1 shows the operation of the broadcast data transmitting apparatus and the operation of the broadcast data receiving apparatus at time t in FIG.
[0159]
[Table 1]

[0160]
For example, as shown in FIG. 24, it is assumed that the program A starts broadcasting at time t0 and ends at time t3. In this program A, 2D video data is broadcast from time t0 to time t1, 3D video data is broadcast from time t1 to time t2, and 2D video data is broadcast from time t2 to time t3. .
[0161]
The broadcast data transmitting apparatus transmits 2D video data as video data from time t0 to time t1 and from time t2 to time t3, and 3D as video data from time t1 to time t2. Send video data.
[0162]
On the other hand, the broadcast data receiving device receives the broadcast data transmitted by the broadcast data transmitting device from time t0 ′ to time t3 ′. Here, the time t0 and the time t0 ′, the time t1 and the time t1 ′, the time t2 and the time t2 ′, and the time t3 and the time t3 ′ are almost the same time, and the difference is that the broadcast data transmitting apparatus transmits the broadcast data. It is assumed that there is only a slight time difference between transmission and reception by the broadcast data receiving apparatus.
[0163]
If the PID of the received video data is the PID of 2D video data, the broadcast data receiving apparatus performs 2D display (from time t0 ′ to time t1 ′ and from time t2 ′ to time t3 ′). If it is PID of 3D video data, 3D display is performed (between time t1 ′ and time t2 ′).
[0164]
As described above, the broadcast data transmitting apparatus according to the second embodiment of the present invention separately defines the PID definition information of 2D video data and the PID definition information of 3D video data in the PMT, and the PID definition information thereof. By creating TS packets having different PIDs for 2D video data and 3D video data based on the above, it is possible to broadcast a program in which 2D video data and 3D video data are mixed in one program.
[0165]
Also, the broadcast data receiving apparatus according to the second embodiment of the present invention acquires the PID of 2D video data and the PID of 3D video data from the PID of video data defined in the received PMT, and the received video data By determining the type of video data from the PID of the TS packet, it is possible to receive a program broadcast in which 2D video data and 3D video data are mixed in one program.
[0166]
In this case, even if the 3D scene time information is not included in the broadcast data, a program in which 2D video data and 3D video data are mixed can be viewed in one program. By omitting, it is possible to reduce the ratio of the program arrangement information in the broadcast data.
[0167]
In the above example, the method of determining whether the type of video data received by the broadcast data receiving apparatus using the PID is 2D video data or 3D video data has been described. Time information may be included in the broadcast data.
[0168]
Further, in this case, the 3D scene time information may be included in the 3D common information in the PMT or may be included in the 3D specific information in the EIT.
[0169]
When determining the type of received video data, if the result determined from the PID of the received video data is different from the result determined from the 3D scene time information, either one of the information may be used with priority. Good. Which information is used preferentially may be set in the terminal in advance, or may be changed by the user operating the terminal during the process.
[0170]
In the broadcast data transmitting apparatus of this embodiment, separate PIDs are defined for 2D video data and 3D video data. In addition, 2D video data is converted to 3D video data, or 3D video data is converted to 2D. Video switching time information indicating the time for switching to video data may be inserted into the header portion of the TS packet, the header portion of the PES packet, the header portion of the video data, or the like.
[0171]
In addition, the broadcast data receiving apparatus can distinguish whether it is 2D video data or 3D video data received by PID, and can know the time when the type of video data is switched by the video switching time information. It is possible to prepare for switching in advance. For example, when the broadcast data receiving apparatus is receiving 2D video data, if there is video switching time information in the TS packet of the 2D video data being received, the video data type is then switched to 3D video data. Since the time can be known in advance, the observer can be notified of the time until the video data type is switched.
[0172]
【The invention's effect】
As described above, according to the present invention, 3D image control information used for displaying a 3D image is repeatedly transmitted, so that even when received from the middle of the content, stereoscopic display can be performed appropriately. The advantageous effect that it can be obtained.
In addition, according to the present invention, the 3D common information, which is 3D image control information that is not frequently updated, is stored in a descriptor that is not frequently updated among the descriptors constituting the program sequence information. The advantageous effect that simplification can be performed is obtained.
[0173]
Further, according to the present invention, since 3D image control information is stored for each program arrangement information different for each channel, an advantageous effect that a different 3D image can be set for each channel can be obtained.
[0174]
Further, according to the present invention, 3D unique information, which is 3D image control information that is frequently updated, is stored in a descriptor that is frequently updated among the descriptors constituting the program arrangement information, so that each content is stored. In addition, the advantageous effect that the control parameters of the 3D image can be changed is obtained.
[0175]
Further, according to the present invention, by storing the 3D scene time information in the 3D unique information, it is possible to obtain an advantageous effect that only an arbitrary scene in the 3D content can be designated to be displayed in 3D.
[0176]
Further, according to the present invention, by storing the 3D scene time information in the 3D unique information, it is possible to obtain an advantageous effect that the time zone of the 3D video data can be displayed in the program guide.
[0177]
Further, according to the present invention, the PID of 2D video data and the PID of 3D video data are respectively defined in the PMT, and the type of received video data is determined using the PID, so that one program can be included in one program. Can advantageously broadcast a program in which 2D video data and 3D video data are mixed.
[0178]
According to the present invention, the PID of 2D video data and the PID of 3D video data are acquired from the received PMT, and the type of the received video data is determined from the PID of the TS packet of the received video data by An advantageous effect is obtained that it is possible to receive a program broadcast in which 2D video data and 3D video data are mixed in one program.
[0179]
Further, according to the present invention, since the type of video data is determined based on the PID of the TS packet of video data, 2D video data and 3D are included in one program even if 3D scene time information is not included in the broadcast data. It is possible to view a program in which video data is mixed, and it is possible to obtain an advantageous effect that the proportion of program arrangement information in broadcast data can be reduced by omitting 3D scene time information.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a broadcast data transmitting apparatus according to a first embodiment of the present invention.
FIG. 2 is a block diagram showing program sequence information creating means.
FIG. 3 is a flowchart showing the operation of the PMT creation means.
FIG. 4 is a flowchart showing a method for creating a 3D common information descriptor.
FIG. 5 is a conceptual diagram illustrating a configuration of a PMT and a 3D shared information descriptor.
FIG. 6 is a conceptual diagram showing 3D scene time information.
FIG. 7 is a flowchart showing the operation of the EIT creation means.
FIG. 8 is a flowchart showing a method of creating a 3D unique information descriptor.
FIG. 9 is a conceptual diagram illustrating a configuration of an EIT and a 3D unique information descriptor.
FIG. 10 is a diagram illustrating an example of a configuration of DII.
FIG. 11 is a conceptual diagram showing a broadcast data transmission method in the present embodiment.
FIG. 12 is a conceptual diagram illustrating a broadcast data transmission method for digital broadcasting.
FIG. 13 is a conceptual diagram illustrating an example of a 3D image.
FIG. 14 is a conceptual diagram showing an image multiplexing method.
FIG. 15 is a block diagram showing a broadcast data receiving apparatus according to the first embodiment of the present invention.
FIG. 16 is a diagram for explaining the principle of adjusting the pop-out amount;
FIG. 17 is a diagram for explaining a change in image format when adjusting the pop-out amount;
FIG. 18 is a diagram for explaining a display method when adjusting the pop-out amount;
FIG. 19 is a diagram illustrating an example of a structure of a PMT including PID definition information of 2D video data.
FIG. 20 is a diagram illustrating an example of a structure of a PMT including PID definition information of 3D video data when image multiplexing method information is not a multi-stream method.
FIG. 21 is a diagram illustrating an example of the structure of a PMT including PID definition information of 3D video data when image multiplexing method information is a multi-stream method.
FIG. 22 is a flowchart of the transmission operation of the broadcast data transmitting apparatus according to the second embodiment of the present invention.
FIG. 23 is a flowchart of a method for determining the type of received video data from the PID of the video data of the received broadcast data.
FIG. 24 is a diagram for explaining operations of the broadcast data transmitting apparatus and the broadcast data receiving apparatus when 2D scenes and 3D scenes are mixed in one program.
FIG. 25 is a diagram for explaining a field sequential display method;
FIG. 26 is a diagram for explaining a parallax barrier display method;
[Explanation of symbols]
100 Broadcast data transmitter
101 Program sequence information creation means
102 Multiplexing means
103 Transmission path encoding means
200 PMT creation means
201 EIT creation means

Claims

A broadcast data transmitting apparatus for transmitting content including image data as broadcast data,
Comprising program sequence information creating means for creating program sequence information used for reproducing the content,
The program arrangement information includes 3D control information for controlling display of 3D image data included in the content,
The broadcast data transmitting apparatus, wherein the program sequence information creating means stores information indicating a reproduction time zone of the 3D image data in the 3D control information.

A broadcast data transmitting apparatus for transmitting content including image data as broadcast data,
Comprising program sequence information creating means for creating program sequence information used for reproducing the content,
The program arrangement information includes 3D control information for controlling display of 3D image data included in the content,
The broadcast data transmitting apparatus characterized in that the program sequence information creating means stores in the 3D control information 2D display image information indicating a viewpoint image selected when the 3D image data is displayed in 2D. .

A broadcast data transmission method for transmitting content including image data as broadcast data,
Having a program sequence information creating step for creating program sequence information used for reproducing the content,
The program arrangement information includes 3D control information for controlling display of 3D image data included in the content,
The broadcast data transmission method characterized in that the program sequence information creating step stores information indicating a reproduction time zone of the 3D image data in the 3D control information.

A broadcast data transmission method for transmitting content including image data as broadcast data,
Having a program sequence information creating step for creating program sequence information used for reproducing the content,
The program arrangement information includes 3D control information for controlling display of 3D image data included in the content,
The broadcast data transmission method characterized in that the program sequence information creating step stores, in the 3D control information, 2D display image information indicating a viewpoint image selected when the 3D image data is displayed in 2D. .

A broadcast data receiving device for receiving broadcast data,
Program sequence information analyzing means for analyzing control information for content included in the broadcast data;
Display means capable of switching between two-dimensional display or three-dimensional display of input image data by external input;
Display control means for controlling the display means,
The program arrangement information includes 3D control information for controlling display of 3D image data included in broadcast data,
Further, the 3D control information includes 3D display time information indicating a time zone in which 3D image data exists in the content,
The program sequence information analyzing means sends the three-dimensional control information to the display control means by analyzing the program sequence information,
The display control means includes
It has a timer inside,
According to the input 3D control information, the display means is switched between 2D display and 3D display,
It is determined whether the image data included in the broadcast data received from the 3D display time information and the time of the timer is 2D image data or 3D image data. A broadcast data receiving apparatus which is a display control means for controlling the display means so as to perform a three-dimensional display for a three-dimensional image data.

A broadcast data receiving device for receiving broadcast data,
Program sequence information analyzing means for analyzing control information for content included in the broadcast data;
Display means for two-dimensionally displaying the input image data;
Display control means for controlling the display means,
The program arrangement information includes 3D control information for controlling display of 3D image data included in broadcast data,
The three-dimensional control information includes identifier information that defines an identifier indicating that the received image data included in the received broadcast data is two-dimensional image data, and an identifier indicating that the received image data is three-dimensional image data,
The program sequence information analyzing means sends the three-dimensional control information to the display control means by analyzing the program sequence information,
The display control means includes
Controlling the display means according to the inputted three-dimensional control information;
Determining whether the received image data is two-dimensional image data or three-dimensional image data from the identifier information and the identifier of the received image data;
In the case of two-dimensional image data, the display means is controlled to display,
A broadcast data receiving apparatus which is display control means for notifying an observer that display cannot be performed correctly or cannot be displayed correctly in the case of 3D image data.

A broadcast data receiving device for receiving broadcast data,
Program sequence information analyzing means for analyzing control information for content included in the broadcast data;
Display means for two-dimensionally displaying the input image data;
Display control means for controlling the display means,
The program arrangement information includes 3D control information for controlling display of 3D image data included in broadcast data,
Further, the 3D control information includes 3D display time information indicating a time zone in which 3D image data exists in the content,
The program sequence information analyzing means sends the three-dimensional control information to the display control means by analyzing the program sequence information,
The display control means includes
It has a timer inside,
Controlling the display means according to the inputted three-dimensional control information;
From the 3D display time information and the time of the timer, it is determined whether the received image data included in the received broadcast data is 2D image data or 3D image data, and is 2D image data. Control the display means to display the case,
A broadcast data receiving apparatus which is display control means for notifying an observer that display cannot be performed correctly or cannot be displayed correctly in the case of 3D image data.