JP6141971B2 - 3d放送サービスのための放送信号処理方法及び装置 - Google Patents

3d放送サービスのための放送信号処理方法及び装置 Download PDF

Info

Publication number
JP6141971B2
JP6141971B2 JP2015515949A JP2015515949A JP6141971B2 JP 6141971 B2 JP6141971 B2 JP 6141971B2 JP 2015515949 A JP2015515949 A JP 2015515949A JP 2015515949 A JP2015515949 A JP 2015515949A JP 6141971 B2 JP6141971 B2 JP 6141971B2
Authority
JP
Japan
Prior art keywords
information
viewing
condition information
viewing condition
broadcast signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2015515949A
Other languages
English (en)
Other versions
JP2015524209A (ja
Inventor
チョンヨル ソ
チョンヨル ソ
チヒョン チェ
チヒョン チェ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of JP2015524209A publication Critical patent/JP2015524209A/ja
Application granted granted Critical
Publication of JP6141971B2 publication Critical patent/JP6141971B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/111Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/005Aspects relating to the "3D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、3D(3―Dimensional)放送サービスを提供し、これを受信処理するための方法及び装置に関する。より詳細には、本発明は、それぞれの異なる視聴環境で3Dコンテンツを消費する視聴者に、3Dコンテンツ製作者が意図した3D効果を有する3D放送コンテンツを提供する方法及び装置に関する。
3次元テレビ(3―Dimensional Television、3DTV)の普及が本格化されるにつれて、保存媒体による3次元(3D)映像コンテンツの普及のみならず、デジタル放送による3次元映像コンテンツの伝送が活性化されている。
一般に、3次元映像は、二つの目のステレオ視覚原理を用いて立体感を提供する。人間は、二つの目の視差、言い換えると、約65mmほど離れた二つの目の間の間隔による両眼視差(binocular parallax)を通じて遠近感を感じるので、3D映像は、左眼と右眼のそれぞれが関連した平面映像を見るように映像を提供し、立体感と遠近感を提供することができる。
このような3次元映像ディスプレイ方法としては、ステレオスコピック(stereoscopic)方式、体積表現(volumetric)方式、ホログラフィック(holographic)方式などがある。ステレオスコピック方式の場合、左眼で視聴されるための左映像(left view;レフトビュー)イメージと、右眼で視聴されるための右映像(right view;ライトビュー)イメージとを提供し、偏光眼鏡またはディスプレイ装備自体を通じて左眼と右眼がそれぞれレフトビューイメージとライトビューイメージを視聴することによって3次元映像効果を認知できるようにする。
一方、3Dコンテンツ製作者が意図した立体効果を、放送受信機でそのまま再現できる場合、それが最適の映像になり得るが、ステレオ映像で構成された3Dコンテンツは、視聴条件に応じて実際に放送受信機では他の立体効果を示す。現在、3DTV受信機は、特定の視聴条件に固定された制限的な立体映像のみを提供する。したがって、現在、視聴者は、3Dコンテンツ製作者が意図した立体効果を完全に楽しむことができなく、視聴者の3Dコンテンツに対する満足度が著しく低下していることが現実である。
本発明が達成しようとする技術的課題は、上述した問題を解決するために、各視聴者の視聴条件の変化とは関係なく、3Dコンテンツ製作者が該当のコンテンツの製作時に意図した立体効果を放送受信機で提供することにある。
本発明の一実施例に係る3D放送信号の処理装置は、3D(3―dimensional)コンテンツを含む放送信号を受信するチューナと、前記の受信した放送信号からターゲット視聴条件情報及び一つ以上の基準視聴条件情報をパーシングするサービス情報プロセッサであって、前記ターゲット視聴条件情報は、3Dコンテンツを視聴するための最適のスクリーンサイズを示す情報、前記3Dコンテンツを視聴するための最適の視聴距離を示す情報、及び前記3Dコンテンツを視聴するための最適のIOD(Inter Ocular Distance)を示す情報を含み、前記基準視聴情報は、勧奨されるスクリーンサイズ、勧奨される視聴距離、勧奨されるIOD、及び前記の勧奨されるスクリーンサイズ、勧奨される視聴距離及び勧奨されるIODがどのような要素を基盤にして算出されたのかを示す補償タイプ情報を示す情報を含む、プロセッサと、視聴者の視聴条件情報を受信し、前記の受信した視聴条件情報が前記ターゲット視聴条件情報と一致しない場合、前記の受信した視聴条件情報と最も近似する情報を含む基準視聴条件情報に含まれる補償タイプ情報をパーシングし、前記補償タイプ情報が示す要素を維持するように前記3Dコンテンツをレンダリングする視聴分析モジュールと、前記のレンダリングされた3Dコンテンツをディスプレイするように制御する出力フォーマッターとを含む。
好ましくは、前記サービス情報プロセッサは、前記ターゲット視聴条件情報及び一つ以上の基準視聴条件情報を前記3Dコンテンツのためのビデオエレメントのビデオヘッダに含まれるSEIメッセージからパーシングすることを特徴とする。
好ましくは、前記サービス情報プロセッサは、前記ターゲット視聴条件情報及び一つ以上の基準視聴条件情報をPMT(Program Map Table)に含まれるステレオ3Dレンダリング情報ディスクリプタからパーシングすることを特徴とする。
好ましくは、前記サービス情報プロセッサは、前記ターゲット視聴条件情報及び一つ以上の基準視聴条件情報をVCT(Virtual Channel Table)またはSDT(Service Description Table)に含まれるステレオ3Dレンダリング情報ディスクリプタからパーシングすることを特徴とする。
好ましくは、前記基準視聴条件情報は、前記の勧奨されるスクリーンサイズ、勧奨される視聴距離または勧奨されるIODが有効な情報であるか否かを示す基準パラメータ有効情報をさらに含むことを特徴とする。
好ましくは、前記基準視聴条件情報は、前記基準視聴条件情報を基準にして前記3Dコンテンツをレンダリングするための補償パラメータ情報をさらに含むことを特徴とする。
好ましくは、前記補償パラメータ情報は、前記3Dコンテンツの左映像及び右映像をそれぞれ撮影するカメラの間の距離を示す情報を含むことを特徴とする。
本発明の一実施例に係る3D放送信号の送信処理方法は、3D(3―dimensional)コンテンツを生成するステップと、ターゲット視聴条件情報または一つ以上の基準視聴条件情報を生成するステップであって、前記ターゲット視聴条件情報は、3Dコンテンツを視聴するための最適のスクリーンサイズを示す情報、前記3Dコンテンツを視聴するための最適の視聴距離を示す情報または前記3Dコンテンツを視聴するための最適のIOD(Inter Ocular Distance)を示す情報を含み、前記基準視聴情報は、勧奨されるスクリーンサイズ、勧奨される視聴距離、勧奨されるIOD、または前記の勧奨されるスクリーンサイズ、勧奨される視聴距離または勧奨されるIODがどのような要素を基盤にして算出されたのかを示す補償タイプ情報を示す情報を含む、ステップと、前記3Dコンテンツと、前記ターゲット視聴条件情報または一つ以上の基準視聴条件情報を含む放送信号を生成するステップと、前記の生成した放送信号を伝送するステップとを含む。
好ましくは、放送信号を生成するステップは、前記ターゲット視聴条件情報または一つ以上の基準視聴条件情報を、前記3Dコンテンツのためのビデオエレメントのビデオヘッダに含まれるSEIメッセージに挿入するステップを含むことを特徴とする。
好ましくは、放送信号を生成するステップは、前記ターゲット視聴条件情報または一つ以上の基準視聴条件情報を、ステレオ3Dレンダリング情報ディスクリプタに含ませ、PMT(Program Map Table)に挿入するステップを含むことを特徴とする。
好ましくは、放送信号を生成するステップは、前記ターゲット視聴条件情報または一つ以上の基準視聴条件情報を、ステレオ3Dレンダリング情報ディスクリプタに含ませ、VCT(Virtual Channel Table)またはSDT(Service Description Table)に挿入するステップを含むことを特徴とする。
好ましくは、前記基準視聴条件情報は、前記の勧奨されるスクリーンサイズ、勧奨される視聴距離または勧奨されるIODが有効な情報であるか否かを示す基準パラメータ有効情報をさらに含むことを特徴とする。
好ましくは、前記基準視聴条件情報は、前記基準視聴条件情報を基準にして前記3Dコンテンツをレンダリングするための補償パラメータ情報をさらに含むことを特徴とする。
好ましくは、前記補償パラメータ情報は、前記3Dコンテンツの左映像及び右映像をそれぞれ撮影するカメラの間の距離を示す情報を含むことを特徴とする。
本発明によると、視聴者の視聴条件とは関係なく、3Dコンテンツ製作者が該当のコンテンツの製作時に意図した立体効果を視聴者に提供することができる。
本発明によると、既存の放送システム構造との互換を維持しながら、3Dコンテンツ製作者が該当のコンテンツの製作時に意図した立体効果を視聴者に提供することができる。
本発明によると、受信機が、最小限のデータ処理を通じて、3Dコンテンツ製作者が該当のコンテンツの製作時に意図した立体効果を視聴者に提供することができる。
本発明の一実施例に係る、視聴分析(view synthesis)モジュールを示した図である。 本発明の一実施例に係る、視聴条件に合うステレオ映像を提供する装置を示した図である。 本発明の一実施例に係る、視聴条件に合うステレオ映像の提供のための受信機の動作を示した図である。 本発明の一実施例に係る、スクリーンサイズによる立体効果の差を説明する図である。 本発明の一実施例に係る、スクリーンサイズによる無限大の立体感を示すために必要なピクセル数を示した図である。 本発明の一実施例に係る、IODの長さによる立体効果の差を説明する図である。 本発明の一実施例に係る、視聴距離(viewing distance)が変わる場合、立体感を維持するために、輻輳角(vergence angle;alpha;a)を維持する方法を示した図である。 本発明の一実施例に係る、視差角(parallax angle)を維持する方法を示した図である。 本発明の一実施例に係る、視聴距離を維持する方法を示した図である。 本発明の一実施例に係る、視聴距離を維持するためにディスパリティを調整する方法を示した図である。 本発明の一実施例に係る、受信された基準視聴条件情報または/及びターゲット視聴条件情報が受信端での視聴条件情報と一致しない場合、深さ訂正(depth adjustment)を行う方法を示した図である。 本発明の一実施例に係る、ステレオ3Dレンダリング情報ディスクリプタ(stereo 3D rendering information descriptor)を示した図である。 本発明の一実施例に係る、compensation_typeフィールドの値による定義を示した図である。 本発明の一実施例に係る、映像ペアディスクリプタを示した図である。 本発明の一実施例に係る、PMT(Program Map Table)の一部を示した図である。 本発明の一実施例に係る、VCT(Virtual Channel Table)の一部を示した図である。 本発明の一実施例に係る、SDT(Service Description Table)を示した図である。 本発明の一実施例に係る、user_data_registered_itu_t_t35()を示した図である。 本発明の一実施例に係る、user_identifierとこれによるuser_structure()及びDVB1_data()を示した図である。 本発明の一実施例に係る、ステレオ3Dレンダリング情報SEIメッセージを示した図である。 本発明の一実施例に係る、ステレオ3Dレンダリング情報SEIディスクリプタを示した図である。 本発明の一実施例に係る、スクリーンサイズに合うステレオ映像を提供する方法を示した図である。 本発明の一実施例に係る、視聴条件に合う3D映像を提供するためのシグナリングシナリオを示した図である。 本発明の一実施例に係る、ステレオ3D視聴条件情報ディスクリプタを示した図である。 本発明の一実施例に係る、視聴条件に合う3D映像を提供する受信機を示した図である。 本発明の一実施例に係る、3D放送信号処理方法を示したフローチャートである。
以下、上述した目的を具体的に実現できる本発明の好適な実施例を添付の図面を参照して説明する。このとき、図面に図示され、また、これによって説明される本発明の構成と作用は、少なくとも一つの実施例として説明されるものであって、これによって本発明の技術的思想とその核心構成及び作用が制限されることはない。
本発明で使用される用語としては、本発明での機能を考慮しながら、可能な限り現在広く使用される一般的な用語を選択したが、これは、当分野に携わる技術者の意図、慣例または新たな技術の出現などによって変わり得る。また、特定の場合は、出願人が任意に選定した用語もあり、この場合、該当する発明の説明部分でその意味を詳細に記載する。したがって、本発明で使用される用語は、単純な用語の名称ではなく、その用語が持つ意味と本発明の全般にわたった内容に基づいて定義されるべきものであることを明らかにしておく。
図1は、本発明の一実施例に係る、視聴分析(view synthesis)モジュールを示した図である。
本発明の一実施例に係る視聴分析モジュール1000は、ワーピング(warping)モジュール1100、1200、マージング(merging)モジュール1110、1210、ホールフィリング(hole filling)モジュール1120、1220及び/または境界ノイズ除去(Boundary Noise Removal)モジュール1130、1230を含む。
ワーピングモジュール1100、1200は、カメラパラメータ(camera parameter)情報、深さタイプ(depth type)情報、深さ近点(depth_near)情報及び/または深さ遠点(depth_far)情報を用い、左映像及び右映像に対する深さ(depth)情報を適用し、左映像及び右映像を処理する装置である。カメラパラメータ情報は、3Dコンテンツが製作される場所でのカメラに対する情報を含む。深さタイプ情報は、左映像及び/または右映像に対する深さ情報を提供するタイプを示す。例えば、深さタイプ情報は、左映像及び/または右映像に含まれる各物体に対するディスパリティ値で深さ情報を提供することができる。ここで、ディスパリティとは、3D映像の同一の地点を示すための左映像及び右映像のそれぞれの地点の間の水平的差を示し、このような差はピクセル単位で示すことができる。ワーピングモジュール1100、1200は、左映像及び右映像データを受信し、左映像深さ情報(L_depth)及び右映像深さ情報(R_depth)を受信し、このような情報をそれぞれ左映像及び右映像データに適用する。左映像深さ情報(L_depth)及び右映像深さ情報(R_depth)を深さマップ(depth map)と命名することができる。この過程で、ワーピングモジュール1100、1200は、上述したカメラパラメータ情報、深さタイプ情報、深さ近点情報及び/または深さ遠点情報を用いて左映像及び右映像をレンダリングすることができる。
または、ワーピングモジュール1100、1200は、左映像深さ情報及び右映像深さ情報をそれぞれ左映像データ及び右映像データに適用し、左映像及び右映像をレンダリングすることができる。一方、ワーピングモジュール1100、1200は、左映像深さ情報及び右映像深さ情報のそれぞれにカメラパラメータ情報、深さタイプ情報、深さ近点情報及び/または深さ遠点情報を適用し、映像深さ情報(depth information)及び/または映像ホール情報(hole information)を生成することができる。
マージング(merging)モジュール1110、1210は、ワーピングモジュールで処理された左映像及び右映像を受信し、左映像及び右映像に映像深さ情報を適用してレンダリングし、左映像及び右映像のうち一つの映像を出力する役割をする。例えば、マージング(merging)モジュール1110は左映像を出力し、他のマージング(merging)モジュール1210は右映像を出力することができる。
ホールフィリング(hole filling)モジュール1120、1220は、映像ホール情報を用い、左映像または右映像に存在し得るホール(hole)を補完する処理を行う。
境界ノイズ除去(Boundary Noise Removal)モジュール1130、1230は、左映像または右映像の境界部分で発生し得るノイズを除去する処理を行う。
3Dフォーマッター1300は、視聴分析モジュール1000から出力される左映像及び右映像を結合し、3D映像をフォーマッティングする。
視聴分析モジュール1000で新たな左映像及び右映像を生成し、任意の視点の3D映像を出力する場合、各映像及び深さマップは、図示したような4個のステップを経るようになる。このとき、各映像及び深さマップの処理過程のために、カメラパラメータ情報または深さタイプ情報などの関連情報を提供することができる。
図2は、本発明の一実施例に係る、視聴条件に合うステレオ映像を提供する装置を示した図である。
受信端でそれ自体の任意の視点の映像を選択し、視聴分析(view synthesis)を適用する場合は、視聴分析に必要な情報(例えば、カメラパラメータ情報、深さタイプ情報、深さ近点情報及び/または深さ遠点情報)を用いて各映像に対するレンダリングが可能である。しかし、前記の情報のみでは視聴条件に合う3D映像の提供は不可能であり、これを提供しようとする場合、追加的な情報が必要である。すなわち、現在受信されるステレオ映像がターゲットとする視聴条件及び他の参考視聴条件をサポートしようとする場合のガイドライン情報に対するシグナリングが必要である。
本発明の一実施例では、送信端側から伝送され得るガイドライン情報と受信端で獲得され得る視聴条件(viewing condition)情報は、全て視聴分析モジュールに入力することができ、二つの情報に基づいて新たなステレオ映像(左映像及び右映像を含む映像)を生成することができる。ガイドライン情報には、ターゲット視聴条件(Target viewing condition)情報、基準視聴条件(Reference viewing condition)情報及び/またはこれと関連したパラメータ情報が含まれ得る。
視聴条件に合う視聴分析(viewing condition adaptive view synthesis)は、視聴分析モジュールによって行うことができる。視聴分析モジュールは、第1の視点のためのビデオエレメント、第2の視点のためのビデオエレメント、第1の視点のための深さエレメント(depth element)、第2の視点のための深さエレメント、第1の視点及び第2の視点に対するカメラパラメータ情報、深さタイプ情報、深さ近点情報及び/または深さ遠点情報を受信することができる。視聴分析モジュールは、このような情報に基づいて視聴条件を考慮していない3D映像をレンダリングすることができる。
視聴分析モジュールは、ターゲット視聴条件情報、基準視聴条件情報、視聴条件情報、及び関連するパラメータをさらに受信することができる。
ターゲット視聴条件情報は、3Dコンテンツ製作者または放送送信端でターゲットとする視聴条件を示す情報である。ターゲット視聴条件情報には、ターゲットとなる視聴者の目の間の距離、ターゲットとなるディスプレイ画面と視聴者との間の距離、及び/またはターゲットとなるディスプレイデバイスのサイズ情報が含まれ得る。受信端では、ターゲット視聴条件情報を参照し、受信端の視聴条件との差だけ3D映像をレンダリングすることができる。すなわち、ターゲット視聴条件情報を基準にして変更される視聴条件の内容をカバーするように3D映像をレンダリングすることができる。
基準視聴条件情報は、3Dコンテンツ製作者または放送送信端で基準として提示する視聴条件を示す情報である。基準視聴条件情報には、一つ以上の基準視聴情報が含まれ得る。すなわち、一つ以上の基準視聴条件に対して情報を提供することができ、それぞれの基準視聴条件で3D映像をレンダリングするためのパラメータが送信端から受信端に伝送され得る。基準視聴条件情報は、3Dコンテンツ製作者または放送送信端で意図する立体効果を示すための最適の視聴者の目の間の距離、最適のディスプレイ画面と視聴者との間の距離、及び/または最適のディスプレイデバイスのサイズ情報を含むことができる。受信端では、視聴条件情報と最も類似する情報を有する基準視聴条件情報を参照し、受信端の視聴条件との差だけ3D映像をレンダリングすることができる。すなわち、基準視聴条件情報を基準にして変更される視聴条件の内容をカバーするように3D映像をレンダリングすることができる。
視聴条件情報は、視聴者が3Dコンテンツを消費する視聴環境を示す情報である。視聴条件情報には、3D映像がディスプレイされるスクリーンのサイズ(スクリーンサイズ)、視聴者の両眼の間の距離(IOD;Inter Ocular Distance)、スクリーンと視聴者との間の距離(視聴距離)などの情報が含まれ得る。視聴分析モジュールは、受信機から視聴条件情報を受信し、視聴条件情報と一致するターゲット視聴条件情報が存在する場合、該当のターゲット視聴条件情報と関連した3D映像レンダリングのためのパラメータを用いて3D映像をレンダリングすることができる。視聴分析モジュールは、受信機から視聴条件情報を受信し、視聴条件情報と一致するターゲット視聴条件情報または基準視聴条件情報がない場合、基準視聴条件情報と視聴条件情報とを比較し、両情報の差を補償する3D映像レンダリングを行うことができる。
図3は、本発明の一実施例に係る、視聴条件に合うステレオ映像の提供のための受信機の動作を示した図である。
視聴条件情報とターゲット視聴条件情報とが一致する場合、例えば、受信端に保存または入力された視聴条件情報が、受信したステレオペア(Stereo pair)1のターゲット視聴条件情報と一致する場合、追加的な深さ修正(depth adjustment)を行わず、受けた入力(ステレオペア1;stereo pair 1)をそのまま出力(ステレオペア2;stereo pair 2)する。
視聴条件情報がターゲット視聴条件情報と一致しない場合、例えば、ステレオペア(Stereo pair)1のターゲット視聴条件情報が、受信機が獲得した視聴条件情報と一致しない場合、受信機は、受信した基準視聴条件情報のうち獲得した視聴条件情報と一致する情報があるかどうかを確認する。
一致する基準視聴条件情報が存在する場合、これに対応するパラメータ値を参照して深さ修正(あるいは、3D映像レンダリング)を行うことによって新たなステレオペアを生成し、これを出力する。
一致する基準視聴条件情報が存在しない場合、提供された基準視聴条件情報のうち獲得した視聴条件情報と最も類似する基準視聴条件情報を参照したり、あるいはターゲット視聴条件情報を参照し、獲得した視聴条件情報に適したパラメータ値を算出し、このパラメータ値を用いてステレオペア2を生成することができる。
図4は、本発明の一実施例に係る、スクリーンサイズによる立体効果の差を説明する図である。
同一のステレオコンテンツ(3Dコンテンツ)が互いに異なるスクリーンサイズに出力される場合、対応する視差(parallax)、視聴距離(viewing distance)及びこれによって認知される事物の深さ感は変わる。
スクリーンサイズが小さいほど、同一の立体効果を示すための深さバジェット(depth budget)は大きくなり、その反対に、スクリーンサイズが大きいほど、同一の立体効果を示すための深さバジェット(depth budget)は少なく消耗される。深さバジェット(depth budget)とは、3D映像に含まれた立体感の定量を意味する。
図4を参照すると、スクリーンのサイズがそれぞれW1、W2である場合、同一の深さ感を感じるために視差角(parallax angle)と視聴距離が変わるべきであることが分かる。
図5は、本発明の一実施例に係る、スクリーンサイズによる無限大の立体感を示すために必要なピクセル数を示した図である。
スクリーンサイズ別に立体感が変わる現象を把握するために、IOD(Inter Ocular Distance)に対応するピクセルの個数を比較することができる。ディスプレイ画面上でIOD(=65mm)の視差(parallax)に対応する深さ(立体効果)は、画面の後側に無限大の深さであり、0mmの視差(parallax)に対応する深さは、画面の表面に該当する深さである。視差が0である場合の立体感は、視聴条件とは関係なく、常に画面の直ぐ上であるが、その他の視差は、スクリーンサイズに応じて異なる立体感を示す。図5に示したように、多様なスクリーンサイズ別に65mmの視差に対応するピクセルの個数を比較してみると、同一の立体効果を示すためのディスパリティ(disparity)のピクセル数は非常に異なる。
図6は、本発明の一実施例に係る、IODの長さによる立体効果の差を説明する図である。
IODのサイズに応じてもステレオ立体効果は変わり得る。すなわち、視聴者が子供である場合は、一般にIODが小さく、同一の立体効果を認知するために必要な深さバジェット(depth budget)が小さい一方、子供よりIODが大きい大人の場合は、同一の立体効果を認知するための深さバジェット(depth budget)が子供に比べて大きい。
図6に示したように、IOD値によって同一の視差(parallax)p1に対して認知される深さ感D1は異なる。すなわち、大人の場合、IODの長さが子供より長いので、視聴者からD1距離に事物が存在するのと同じ立体感を感じるが、同一の事物に対してIODの長さが大人より短い子供の場合、視聴者からD1’距離に事物が存在するのと同じ立体感を感じることができる。
図7は、本発明の一実施例に係る、視聴距離(viewing distance)が変わる場合、立体感を維持するために、輻輳角(vergence angle;alpha;a)を維持する方法を示した図である。
2D映像に対する視聴距離としては、各解像度別にITU―Rで定めた勧奨視聴距離が存在するので、送信端及び受信端でこれを基準にすることができる。その一方、ステレオコンテンツ(3Dコンテンツ)の場合、視聴距離によって認知される立体感に差が発生し、視聴距離に対する基準が提示されていない。そのため、送信端で基準とした視聴距離に対する情報を受信端に伝送し、受信端でこれを参照することができる。
上述したように、スクリーンサイズ、IOD、視聴距離などの視聴条件に応じてステレオコンテンツの立体効果は変わるので、3Dコンテンツ製作者または放送局で意図した立体感を完全に伝達するためには、それぞれの視聴条件に応じて立体感を調整できるように3Dコンテンツを提供する方案が必要である。
ステレオ映像の立体感を維持しようとするとき、維持する要素が変わり、これによって立体感を維持するために多くの方法が存在し得る。例えば、輻輳角(Vergence angle)を維持することができる。他の例としては、視差角(Parallax angle)を維持することができる。視差角は、アコモデーション角(accommodation angle)から輻輳角(vergence angle)を引いた値と定義することができる。アコモデーション角は、視聴者がスクリーンの特定の地点を注視する場合、両眼で該当の地点をそれぞれ直線に連結するときの両直線の間の角を示す。他の例としては、視聴距離の範囲(例えば、Dmin、Dmax)を視聴者の基準で維持することができる。更に他の例としては、視聴距離の範囲(例えば、|Dmin Dmax|)をスクリーンの基準で維持することができる。更に他の例としては、相対的な視聴距離範囲を維持する方案があり得る。
3Dコンテンツの立体感(深さ感)を補償する方法は、維持しようとする要素に応じて調整値に差が発生し得るので、提供される基準視聴条件情報、及び対応する基準補償パラメータ(reference compensation parameter)がどのような要素を基盤にして算出されたものであるかに対する情報、すなわち、補償タイプ(compensation type)に対する情報を送信側から受信端に提供すると、受信機でこれを活用することができる。
図7は、輻輳角(Vergence angle)を維持する場合を示した図である。他の視聴条件が同一である場合、視聴距離が大きくなると、これによってディスパリティ(disparity)(あるいは、視差;parallax)の絶対値を増加させなければならない。例えば、図7の(a)において、維持する要素がa(alpha)である場合、図7の(b)のように視聴距離が増加すると、aを維持するために画面上の矢印表示(視差を示す)も大きくなるべきである。
他の視聴条件が同一である場合、スクリーンサイズが大きくなると、これによってディスパリティの絶対値を減少させなければならない。このとき、視差(parallax)は維持されるべきである。
他の視聴条件が同一である場合、IODが大きくなると、これによってディスパリティ(あるいは、視差)の絶対値を減少させなければならない。
図8は、本発明の一実施例に係る、視差角(parallax angle)を維持する方法を示した図である。
視聴距離が大きくなると、これによってディスパリティ(あるいは視差;parallax)の絶対値を増加させなければならない。ただし、視聴距離が4m以上に増加すると、これに対して最小ディスパリティ(maximum disparity)の値に変化がない場合もある。
他の視聴条件が同一である場合、スクリーンサイズが大きくなると、これに比例してディスパリティの絶対値を減少させなければならない。このとき、視差(parallax)は維持され得る。
IODの大きさ変化とは関係なく、ディスパリティ(あるいは、視差)は維持され得る。
視差角は、アコモデーション角(accommodation angle;theta)から輻輳角(vergence angle)を引いた値と定義することができる。アコモデーション角は、視聴者がスクリーンの特定の地点をフォーカスする場合において、視聴者の両眼で該当の地点をつないだそれぞれの直線がなす角と定義することができる。輻輳角は、視聴者が遠い(distant)像をフォーカスするときの輻輳角(beta)と、視聴者が近い(near)像をフォーカスするときの輻輳角(alpha)とを含む。
視差角は、アコモデーション角からbeta角の値を引いた角と、アコモデーション角からalpha角の値を引いた角との間で維持されるべきであることを本発明の一実施例とする。前記の範囲の視差角から逸脱した像を視聴する場合、視聴者に容易に疲労感を与え得る。
図9は、本発明の一実施例に係る、視聴距離を維持する方法を示した図である。
視聴距離を維持する方法は、視聴者を基準にした視聴距離を維持する方法と、スクリーンを基準にした視聴距離を維持する方法とを含む。
図9の(a)を参照すると、視聴者が最も遠い像を眺めるとき、視聴者の両眼と最も遠い像との間の距離を最大距離(maximum distance;Dmax)と定義し、視聴者が最も近い像を眺めるとき、視聴者の両眼と最も近い像との間の距離を最小距離(minimum distance;Dmin)と定義することができる。視聴者を基準にして視聴距離を維持する方法は、前記の最小距離と最大距離との間内で立体感が表れるように維持する方法になり得る。すなわち、視聴条件が変わるとしても、ターゲット最小距離とターゲット最大距離が維持される方法で立体感を維持することができる。
他の視聴条件が同一である場合、視聴距離が大きくなると、これによってディスパリティ(あるいは視差)の絶対値を増加させなければならない。
他の視聴条件が同一である場合、スクリーンサイズが大きくなると、これによってディスパリティの絶対値を減少させなければならない。このとき、視差は維持され得る。
IODが大きくなると、これによってディスパリティ(あるいは、視差)の絶対値を増加させなければならない。
図9の(b)を参照すると、スクリーンを基準にして距離範囲を維持することができる。これは、距離範囲(Distance range)、すなわち、最大距離(Maximum distance)から最小距離(minimum distance)を引いた値の絶対値を維持する方法を意味する。
他の視聴条件が同一である場合、視聴距離が大きくなると、これによってディスパリティ(あるいは視差)の絶対値を増加させなければならない。
他の視聴条件が同一である場合、スクリーンサイズが大きくなると、これによってディスパリティの絶対値を減少させなければならない。このとき、視差は維持され得る。
IODが大きくなると、これによってディスパリティ(あるいは、視差)の絶対値を増加させなければならない。
図10は、本発明の一実施例に係る、視聴距離を維持するためにディスパリティを調整する方法を示した図である。
本発明の一実施例によると、三角形比例式を用いて視聴距離を維持する場合、視聴条件に応じてディスパリティ値を調整することができる。
その他にも、補償タイプ(compensation type)に応じて、レンダリングのための補償パラメータ(compensation parameter)に適用される値が変わり、受信機は、この情報を活用して視聴環境に合う補償タイプ(compensation type)と関連する情報を選択して適用することができる。
図11は、本発明の一実施例に係る、受信された基準視聴条件情報または/及びターゲット視聴条件情報が受信端での視聴条件情報と一致しない場合、深さ訂正(depth adjustment)を行う方法を示した図である。
上述したように、視聴条件が変わることによってディスパリティを調整しなければならない方法は、シグナリングされる深さ訂正(depth adjustment)のためのパラメータが存在しないとき、受信端で適切なベースライン(baseline)値を導出することにも適用され得る。ここで、ベースライン値は、3Dコンテンツを生成する当時、3Dコンテンツに含まれる左映像及び右映像をそれぞれ撮影したカメラの間の距離を意味し得る。
本発明の一実施例では、調整しなければならないパラメータ(すなわち、ベースライン)に対する情報がない場合、受信端では、シグナリングされたターゲット視聴条件情報(あるいは基準視聴条件情報)及びこれに対応するレンダリングパラメータ値を参照し、受信端の視聴条件に適した新たなパラメータを導出することができる。すなわち、視聴距離、スクリーンサイズ及び/またはIODの値が既存の値と変わった場合、これに対応してディスパリティがどのように適用されるべきであるかの関係を把握し、新たなディスパリティ(new disparity)を導出することができ、新たなディスパリティ値に基づいて調整するベースライン値を導出することができる。
図11に示したように、既存のディスパリティ(old disparity)と新たなディスパリティとの関係を基準にして、三角形比例式を用いてベースライン値を導出することができる。導出されたベースライン値は、左映像及び右映像のそれぞれでの特定の像を示すためのピクセルの位置またはピクセルの数を調整するための値として使用することができる。
図12は、本発明の一実施例に係る、ステレオ3Dレンダリング情報ディスクリプタ(stereo 3D rendering information descriptor)を示した図である。
ステレオ3Dレンダリング情報ディスクリプタは、上述したターゲット視聴条件情報、基準視聴条件情報及び/またはこれと関連するパラメータ情報(補償パラメータ)を含むことができる。
ステレオ3Dレンダリング情報ディスクリプタは、view_pair_IDフィールド、target_parameter_valid_flagフィールド、target_display_sizeフィールド、target_IODフィールド、target_viewing_distanceフィールド、rendered_param()フィールド、num_of_referencesフィールド、ref_parameter_valid_flagフィールド、compensation_typeフィールド、ref_display_sizeフィールド、ref_IODフィールド、ref_viewing_distanceフィールド及び/またはref_compensation_param()フィールドを含むことができる。
view_pair_IDフィールドは、現在受信されるステレオ映像(stereo view)を識別できる識別子であり、この値を通じて、ステレオ映像に含まれる左映像及び/または右映像がどのようなエレメントリストリーム(Elementary Stream;ES)で構成されるのかを識別することができる。view_pair_IDフィールドは、後述するview_pair_descriptorと連動して使用することができる。
target_parameter_valid_flagフィールドは、ベース映像ビデオストリーム(base view video stream)及び/または追加映像ビデオストリーム(additional view video stream)と関連する各視聴条件フィールドの有効有無を識別する。
target_display_sizeフィールドは、送信するステレオコンテンツに最適化された勧奨ディスプレイサイズ(あるいは、スクリーンサイズ)を意味する。target_display_sizeフィールドは、画面の比率(aspect ratio)が固定された場合、対角線長さである47インチ、55インチなどの値を使用することもできる。target_display_sizeフィールドは、ディスプレイ幅(display width)の距離で示すこともできる。target_display_sizeフィールドは、target_parameter_valid_flagの1番目のビットが「1」であるときのみに意味があるように処理され得る。
target_IODフィールドは、送信するステレオコンテンツに最適化されたIOD(Inter―Ocular Distance)を意味する。一般に、IODは、40mm〜80mmの範囲に分布する。target_IODフィールドは、target_parameter_valid_flagの2番目のビットが「1」であるときのみに意味があるように処理され得る。
target_viewing_distanceフィールドは、送信するステレオコンテンツを見るのに最適化された勧奨視聴距離(viewing distance)を示す。target_viewing_distanceフィールドは、target_parameter_valid_flagの3番目のビットが「1」であるときのみに意味があるように処理され得る。
rendered_param()フィールドの値は、受信機でステレオコンテンツを新たにレンダリングするときに参照できる値を含むことができる。rendered_param()フィールドに含まれ得る代表的な値としては、送信するステレオコンテンツを製作するときの左映像及び右映像をそれぞれ撮影する二つのカメラの間の距離(baseline)があり、その他にも、ステレオ映像の補償のための他のパラメータを定義することができる。rendered_param()フィールドは、target_parameter_valid_flagの4番目のビットが「1」であるときのみに意味があるように処理され得る。
num_of_referencesフィールドは、仮想ビューを生成するために必要なガイド情報(基準視聴条件情報及びこれに対応するパラメータセット)の個数である。
ref_parameter_valid_flagフィールドは、仮想ビューの生成と関連する基準視聴条件情報の各フィールドの有効性を示すことができる。
compensation_typeフィールドは、提供される基準視聴条件情報及び補償パラメータがどのような要素を基盤にして算出されたものであるかを示す。
ref_display_sizeフィールドは、送信するステレオコンテンツに最適化された値ではないが、受信端の条件に応じて参照可能なディスプレイサイズ(スクリーンサイズ)を示す。ref_display_sizeフィールドは、ref_parameter_valid_flagフィールドの1番目のビットが「1」であるときのみに意味があるように処理され得る。
ref_IODフィールドは、送信するステレオコンテンツに最適化された値ではないが、受信端の条件に応じて参照可能なIODを示す。ref_IODフィールドは、ref_parameter_valid_flagフィールドの2番目のビットが「1」であるときのみに意味があるように処理され得る。
ref_viewing_distanceフィールドは、送信するステレオコンテンツに最適化された値ではないが、受信端の条件に応じて参照可能な視聴距離を示す。ref_viewing_distanceフィールドは、ref_parameter_specified_flagフィールドの3番目のビットが「1」であるときのみに意味があるように処理され得る。
ref_compensation_param()フィールドは、受信機でステレオコンテンツを新たにレンダリングするときに参照できる値であって、該当の基準視聴条件情報に対応する補償パラメータを含む。ref_compensation_param()フィールドは、ref_parameter_valid_flagフィールドの4番目のビットが「1」であるときのみに意味があるように処理され得る。
ref_compensation_param()に含まれる代表的な値としては、送信するステレオコンテンツを製作するときに左映像及び右映像をそれぞれ撮影する二つのカメラの間の距離(baseline)がある。例えば、ref_compensation_param()にはref_baseline_distanceフィールドが含まれ、これは、対応する基準視聴条件情報に最適化された3D映像を分析するためのベースライン情報を示す。その他にも、ref_compensation_param()には、ステレオ映像の補償のための他のパラメータが含まれ得る。
図13は、本発明の一実施例に係る、compensation_typeフィールドの値による定義を示した図である。
compensation_typeフィールドの値が「0x00」にセッティングされると、基準視聴条件情報及びこの条件と関連する補償パラメータが輻輳角(vergence angle)という要素を維持する条件で算出されたものであることを示す。
compensation_typeフィールドの値が「0x01」にセッティングされると、基準視聴条件情報及びこの条件と関連する補償パラメータが視差角(parallax angle)という要素を維持する条件で算出されたものであることを示す。
compensation_typeフィールドの値が「0x02」にセッティングされると、基準視聴条件情報及びこの条件と関連する補償パラメータが視聴者を基準にした視聴距離という要素を維持する条件で算出されたものであることを示す。
compensation_typeフィールドの値が「0x03」にセッティングされると、基準視聴条件情報及びこの条件と関連する補償パラメータがスクリーンを基準にした視聴距離という要素を維持する条件で算出されたものであることを示す。
compensation_typeフィールドの「0x04」〜「0x07」値は、後で使用するために予約された値である。
図14は、本発明の一実施例に係る、映像ペアディスクリプタ(View pair descriptor)を示した図である。
受信機は、view_pair_IDフィールドを用いて、ステレオ3Dレンダリング情報ディスクリプタと映像ペアディスクリプタとを関連させて処理することができる。
映像ペアディスクリプタは、num_of_view_pairsフィールド、view_pair_IDフィールド、left_PIDフィールド及び/またはright_PIDフィールドを含む。
num_of_view_pairsフィールドは、プログラム内に含まれるステレオ映像ペア(pair)の個数を示す。
view_pair_IDフィールドは、各ステレオ映像ペアを識別できる識別子であって、この値を通じて含まれる左映像または右映像がどのようなESストリームで構成されるのかを識別することができる。
left_PIDフィールドは、左映像に該当する映像のPID値を示す。
right_PIDフィールドは、右映像に該当する映像のPID値を示す。
映像ペアディスクリプタは、左映像及び/または右映像のPID情報の他にも、左映像に対する深さ情報及び/または右映像に対する深さ情報を含むストリームを識別できるそれぞれのPID情報をさらに含むことができる。
図15は、本発明の一実施例に係る、PMT(Program Map Table)の一部を示した図である。
上述したステレオ3Dレンダリング情報ディスクリプタはPMTに含まれ、この場合、ステレオ3Dレンダリング情報ディスクリプタは、プログラムレベルのシグナリングを行うことができる(option 1)。この場合、ステレオ3Dレンダリング情報ディスクリプタは、プログラムに含まれるステレオ映像に対するターゲット視聴条件情報、基準視聴条件情報及び/またはこれと関連する補償パラメータを伝送する。図15を参照すると、option 1の場合、PMT内のステレオ3Dレンダリング情報ディスクリプタの位置を知ることができる。
または、ステレオ3Dレンダリング情報ディスクリプタは、深さストリーム(depth stream)に該当するエレメンタリストリーム(elementary stream;ES)レベルで該当の情報をシグナリングすることもできる(option 2)。図15を参照すると、option 2の場合、PMT内のステレオ3Dレンダリング情報ディスクリプタの位置を知ることができる。
または、ステレオ3Dレンダリング情報ディスクリプタは、深さに対応するビデオエレメントリストリーム(video elementary stream)に該当するESレベルループ(loop)で該当の情報をシグナリングすることができる(option 3)。図15を参照すると、option 3の場合、PMT内のステレオ3Dレンダリング情報ディスクリプタの位置を知ることができる。
プログラム内に含まれたステレオ映像を伝送するESは、プログラムレベルのview_pair_descriptorを通じてシグナリングされ得る。この場合、view_pair_descriptorは、PMTに含まれて伝送され得る。
図16は、本発明の一実施例に係る、VCT(Virtual Channel Table)の一部を示した図である。
ステレオ3Dレンダリング情報ディスクリプタは、TVCTに含まれて伝送され得る。この場合、ステレオ3Dレンダリング情報ディスクリプタは、チャンネルレベルディスクリプタループ(channel level descriptor loop)に位置し得る(Option 1)。
または、ステレオ3Dレンダリング情報ディスクリプタは、既存のコンポーネントリストディスクリプタ(component list descriptor)に位置し(Option 2)、または、サービスロケーションディスクリプタ(service location descriptor)を拡張し、ステレオ3Dレンダリング情報ディスクリプタの各フィールドを含ませることができる(Option 3)。
チャンネル内に含まれたステレオ映像を伝送するESは、チャンネルレベルのview_pair_descriptorを通じてシグナリングすることができる。
図17は、本発明の一実施例に係る、SDT(Service Description Table)を示した図である。
SDT(service description table)は、DVB―SIで特定のトランスポートストリームに含まれた各サービスを説明するテーブルである。
本発明の一実施例に係るSDTは、table_idフィールド、section_syntax_indicatorフィールド、section_lengthフィールド、transport_stream_idフィールド、version_numberフィールド、current_next_indicatorフィールド、section_numberフィールド、last_section_numberフィールド、original_network_idフィールド、service_idフィールド、EIT_schedule_flagフィールド、EIT_present_following_flagフィールド、running_statusフィールド、free_CA_modeフィールド、descriptors_loop_lengthフィールド、descriptor()フィールド及び/またはCRC_32フィールドを含む。
table_idフィールドは、8ビットフィールドであって、このセクションがサービスディスクリプションテーブル(Service Description Table)に属することを示す。
section_syntax_indicatorフィールドは、1ビットフィールドであって、1に設定される。
section_lengthフィールドは、12ビットフィールドであって、最初の二つのビットは00に設定される。このフィールドの後からCRCを含むセクションのバイト数を示す。このフィールドは1021を超えることができなく、全体のセクション長さは最大1024bytesになる。
transport_stream_idフィールドは、16ビットフィールドであって、TSを区別するラベルとしての役割をする。
version_numberフィールドは、5ビットフィールドであって、sub_tableのバージョン番号を示す。
current_next_indicatorフィールドは、1ビットであって、sub_tableが現在適用可能なものである場合、値が1に設定される。値が0に設定されている場合、これは、未だに適用することができなく、次のテーブルが有効であることを意味する。
section_numberフィールドは、8ビットであって、セクションの数を示す。1番目のセクションは0x00の値を有し、同一のtable_id、同一のtransport_stream_id及び同一のoriginal_network_idを有する追加セクションごとに値が1ずつ増加する。
last_section_numberフィールドは、8ビットであって、このセクションが一部分である該当のsub_tableの最後のセクション(すなわち、最も高いsection_numberフィールド)の番号を示す。
original_network_idフィールドは、16ビットフィールドであって、伝送システムのnetwork_idを確認するラベルである。
service_idフィールドは、16ビットフィールドであって、TS内に含まれた他のサービスと区別するラベルとしての役割をする。これは、program_map_sectionのprogram_numberと同一である。
EIT_schedule_flagフィールドは、1ビットフィールドであって、これが1に設定されると、現在TS内に該当のサービスのためのEITスケジュール情報が含まれていることを示し、これが0であると、現在TS内に該当のサービスのためのEITスケジュール情報が含まれていないことを示す。
EIT_present_following_flagフィールドは、1ビットフィールドであって、これが1に設定されると、現在TS内に該当のサービスのためのEIT_present_following情報が含まれていることを示し、これが0であると、EIT present/following情報が現在TSに含まれていないことを示す。
running_statusフィールドは、3ビットフィールドであって、サービスの状態を示す。
free_CA_modeフィールドは、1ビットフィールドであって、これが0に設定されると、該当のサービスの全ての要素ストリームがスクランブルされていないことを示し、これが1に設定されると、一つまたはそれ以上のストリームがCAシステムによって制御されていることを意味する。
descriptors_loop_lengthフィールドは、12ビットフィールドであって、付いて来るディスクリプタの全体長さをバイト単位で示す。
Descriptor()フィールドは、サービスに対するディスクリプタを含むことができる。上述したステレオ3Dレンダリング情報ディスクリプタ及び/またはview_pair_descriptorは、前記のdescriptor()フィールドに含まれ得る。
CRC_32フィールドは、32ビットフィールドであって、デコーダでのレジスターのゼロ出力(zero output)のためのCRC値を示す。
図18は、本発明の一実施例に係る、user_data_registered_itu_t_t35()を示した図である。
ステレオ3Dレンダリング情報ディスクリプタに含まれる情報は、ビデオ領域を通じて伝送され得る。
H.264(またはAVC)ビデオの場合は、ステレオ3Dレンダリング情報ディスクリプタに含まれる情報をSEI(Supplemental Enhancement Information)領域に含ませて伝送することができる。この場合、user_data_registered_itu_t_t35()にuser_identifierとuser_structure()を含ませることができる。すなわち、user_data()の代わりに、SEIペイロードで該当の情報を伝送する。SEIは、MPEG―2のピクチャー拡張(picture extension)及びユーザーデータ(user data)としての役割をし、位置も類似する形に設定することができる。
図19は、本発明の一実施例に係る、user_identifierとこれによるuser_structure()及びDVB1_data()を示した図である。
図19の(a)を参照すると、user_identifierが「0x47413934(GA94)」の値を有する場合、user_structure()はDVB1_data()を含む。
図19の(b)を参照すると、DVB1_data()は、user_data_type_code及び/またはuser_data_type_structure()を含むことができる。
user_data_type_codeは、user_data_type_structure()に載せられるデータの種類を示す。
本発明の一実施例によると、user_data_type_structure()は、上述したステレオ3Dレンダリング情報ディスクリプタに含まれる情報を含むことができる。
図20は、本発明の一実施例に係る、ステレオ3Dレンダリング情報SEIメッセージを示した図である。
ステレオ3Dレンダリング情報SEIメッセージは、上述したuser_data_type_structure()に含まれ得る。
ステレオ3Dレンダリング情報SEIメッセージは、stereo_3D_rendering_info_idフィールド、stereo_3D_rendering_info_cancel_flagフィールド、view_pair_idフィールド、target_parameter_valid_flagフィールド、target_display_sizeフィールド、target_IODフィールド、target_viewing_distanceフィールド、rendered_param()フィールド、num_of_referencesフィールド、ref_parameter_valid_flagフィールド、compensation_typeフィールド、ref_display_sizeフィールド、ref_IODフィールド、ref_viewing_distanceフィールド及び/またはref_compensation_param()フィールドを含む。
view_pair_IDフィールドの値は、プログラムレベル、チャンネルレベル及び/またはサービスレベルのview_pair_descriptorに含まれた情報と連結され、view_pair_descriptor内の情報を参照するようにする役割をする。view_pair_IDフィールドの代わりに、左映像及び右映像のそれぞれのESのPIDを直接シグナリングすることもできる。
Stereo_3D_rendering_info_idフィールドは、ステレオ3Dレンダリング情報SEIメッセージに含まれた情報組み合わせを識別するための識別番号を示す。
Stereo_3D_rendering_info_cancel_flagフィールドは、その値が「1」である場合、以前のピクチャー(picture)まで適用されたステレオ3Dレンダリング情報がこれ以上適用されないことを意味する。
ステレオ3Dレンダリング情報SEIメッセージ(Stereo 3D rendering Info SEI message)フィールドは、ビデオレベルでステレオ3Dレンダリング関連情報を知らせるためにstereo_3D_rendering_info_dataを伝送する方法を示す。
残りの各フィールドに対する説明は、図12を参照して説明した各フィールドに対する説明と同一である。
特定の映像のビデオデータあるいは深さ(depth)ストリームにステレオ3Dレンダリング情報SEIメッセージが含まれる場合、stereo_3D_rendering_info_dataを通じて該当のストリームの映像に対する立体情報などをシグナリングすることができる。
stereo_3D_rendering_info_data()は、SEI RBSP(raw byte sequence payload)を通じて受信され得る。受信機は、AVC NALユニットをパーシングし、nal_unit_typeの値が6であるとSEIデータであり、payloadType値が4であるuser_data_registered_itu_t_t35 SEIメッセージを読み、user_identifier値を確認する。受信機は、user_identifier値が0x47413934に該当するuser_structure()を読み、user_data_type_codeが0x12であるデータを抽出する。受信機は、該当のデータからstereo_3D_rendering_info_data()をパーシングし、3D映像視聴条件と関連する情報及び後の仮想3D映像の生成のための情報を獲得する。
図21は、本発明の一実施例に係る、ステレオ3Dレンダリング情報SEIディスクリプタ(stereo 3D rendering info SEI descriptor)を示した図である。
ステレオ3Dレンダリング情報SEIディスクリプタは、PMTのプログラムレベルまたはESレベルなどに位置し、ビデオ内にステレオ3Dレンダリング情報SEIメッセージが含まれたか否かを受信機がシステムレベルで予め知ることができるようにシグナリング情報を提供する。
ステレオ3Dレンダリング情報SEIディスクリプタは、stereo_3D_rendering_info_SEI_message_exist_flagフィールドを含むことができる。
stereo_3D_rendering_info_SEI_message_exist_flagフィールドは、受信されるビデオストリーム内にステレオ3D映像レンダリング関連情報を詳細に知ることができるステレオ3DレンダリングSEIメッセージ(stereo 3D rendering SEI message)が含まれたか否かを示す。
図22は、本発明の一実施例に係る、スクリーンサイズに合うステレオ映像を提供する方法を示した図である。
分布度が高い視聴条件を予め選定し、送信端でそれぞれに合うコンテンツを予め生成する場合、各ケースに対するステレオ映像ペア(Stereo view pair)を全て伝送するときに要求される帯域幅(Bandwidth)などの資源を最小化するために、送信端では一つの映像を固定して伝送し、残りの映像のみをスクリーンサイズに合わせて可変的に伝送することができる。
例えば、2Dチャンネルを介して、受信機のスクリーンサイズとは関係なく、全ての受信機で使用するビデオエレメントを伝送し、3Dチャンネルを介して、各スクリーンサイズに合う映像を含むビデオエレメントを伝送することができる。受信機では、2Dチャンネルを介して伝送される映像と、3Dチャンネルを介して伝送される映像のうち自身のスクリーンサイズに合う映像とを結合し、スクリーンサイズに合う3D映像をレンダリングすることができる。
大きなスクリーンのための映像を含むビデオエレメントは、インターネット網を介して伝送することができる。
例えば、送信端で32インチのスクリーンサイズを有する受信機のための映像を含むビデオエレメントは、放送網を介して伝送し、42インチまたは52インチのスクリーンサイズを有する受信機のための映像を含むビデオエレメントは、インターネット網を介して伝送することができる。
図23は、本発明の一実施例に係る、視聴条件に合う3D映像を提供するためのシグナリングシナリオを示した図である。
放送網を介してステレオ映像を伝送する場合、PMTのプログラムレベル、TVCTのチャンネルレベル、SDTのサービスレベル、EITのイベントレベル、及び/またはビデオエレメントのビデオヘッダを通じてステレオ映像のためのシグナリングを行うことができる。ビデオエレメントのビデオヘッダを通じてシグナリングをする場合、SEIメッセージにシグナリングに必要な情報を含ませることができる。
放送網を介してステレオ映像を伝送する場合、2Dチャンネルは、ベース映像ビデオエレメントを伝送し、3Dチャンネルは、2Dチャンネルで伝送されるベース映像ビデオエレメントと結合して3D映像をレンダリングできる追加映像ビデオエレメントを伝送したり、ベース映像ビデオエレメントと追加映像ビデオエレメントを共に伝送することができる。
放送網を介してステレオ映像を伝送する場合、ベース映像ビデオエレメントと追加映像ビデオエレメントとの組み合わせに対するターゲット視聴条件に関する情報(例えば、視聴距離、スクリーンサイズ、IODなど)をシグナリングを通じて提供することができる。2Dチャンネルの場合、前記の情報が提供されないこともある。シグナリング情報には、ビデオデータはないが、ステレオ映像分析でレンダリング可能な仮想ビューポイント(view point)に対する条件情報が含まれ得る。シグナリング情報には、out―of―band(ブロードバンド(broadband)など)で受信可能な追加映像ビデオエレメントに対する情報(例えば、該当のビデオエレメントを提供するIP住所、ES PID、スケジュール情報など)が含まれ得る。
インターネット網または他のチャンネル(例えば、non―real―timeチャンネル)を介してステレオ映像のための追加映像ビデオエレメントを伝送する場合、インターネット網を用いる場合は、IPレイヤーシグナリング及び/またはビデオレベルシグナリングを行うことができ、他のチャンネルを用いる場合は、PMTのプログラムレベル、TVCTのチャンネルレベル、SDTのサービスレベル、EITのイベントレベル、及び/またはビデオエレメントのビデオヘッダを通じて追加映像ビデオエレメントのためのシグナリングを行うことができる。ビデオエレメントのビデオヘッダを通じてシグナリングをする場合、SEIメッセージにシグナリングに必要な情報を含ませることができる。
インターネット網または他のチャンネルを介してステレオ映像のための追加映像ビデオエレメントを伝送する場合、ベース映像に対するシグナリング情報(例えば、チャンネル情報、PIDなど)を前記のシグナリングを通じて伝送することができる。シグナリング情報には、ビデオデータはないが、ステレオ映像分析でレンダリング可能な仮想ビューポイントに対する条件情報が含まれ得る。この条件情報に対しては、図24及びこれに対する説明を参照することができる。シグナリング情報には、追加映像ビデオエレメントまたはこれと関連するシグナリング情報を既存(レガシー(legacy))の受信機が受信できないようにするフィールドが含まれ得る。このようなフィールドの例としては、隠されたチャンネル(hidden channel)、未知のサービスタイプ(unknown service type)などがあり得る。
図24は、本発明の一実施例に係る、ステレオ3D視聴条件情報ディスクリプタを示した図である。
分布度が高い視聴条件を予め選定し、送信端でそれぞれに合うコンテンツを予め生成する場合、各ケースに対するステレオ映像ペア(Stereo view pair)を全て伝送するときに要求される帯域幅などの資源を最小化するために、送信端では一つの映像を固定して伝送し、残りの映像は、別途の独立的な経路を通じて実時間または非実時間に伝送することができる。
この場合、view pair descriptor()は、追加映像ビデオが伝送されるチャンネルのシグナリングセクション情報に含まれて伝送され、view pair descriptor()には、3D映像ペアの構成情報が含まれ得る。
ステレオ3D視聴条件情報ディスクリプタは、base_channel_numberフィールド、base_program_numberフィールド、base_source_idフィールド、base_network_idフィールド、base_PIDフィールド及び/またはnum_of_view_pairsフィールドを含むことができる。
base_channel_numberフィールドは、現在のチャンネルまたはその他経路を介して追加映像ビデオのみを送信する場合、これと関連するベース映像ビデオを伝送するチャンネル番号を示す。
base_program_numberフィールドは、現在のチャンネルまたはその他経路を介して追加映像ビデオのみを送信する場合、これと関連するベース映像ビデオのプログラム番号を示す。
base_source_idフィールドは、現在のチャンネルまたはその他経路を介して追加映像ビデオのみを送信する場合、これと関連するベース映像ビデオのソースを識別する識別子である。
base_network_idフィールドは、現在のチャンネルまたはその他経路を介して追加映像ビデオのみを送信する場合、これと関連するベース映像ビデオを提供するネットワークを識別する識別子である。
base_PIDフィールドは、現在のチャンネルまたはその他経路を介して追加映像ビデオのみを送信する場合、これと関連するベース映像ビデオを伝送するパケットのPIDを示す。
num_of_view_pairsフィールドは、提供されるステレオ3D映像の個数を示す。
残りの各フィールドに対する説明は、図12を参照して説明した各フィールドに対する説明と同一である。
図25は、本発明の一実施例に係る、視聴条件に合う3D映像を提供する受信機を示した図である。
視聴条件に合う3D映像を提供する受信機は、チューナ及び復調部25010、VSBデコーダ25020、トランスポートパケット逆多重化部25030、第2のデコーダ25040、MVC拡張(extension)レイヤーデコーダ25050、AVCレイヤーデコーダ25060、第1のデコーダ25070、PSI/PSIP/SIプロセッサ25080、視聴分析モジュール25090、第1の仮想映像生成部25100、第2の仮想映像生成部25110及び/または出力フォーマッター25120を含むことができる。
チューナ及び復調部25010は、3D放送チャンネルでチューニングを行い、受信した信号を復調する。
VSBデコーダ25020は、VSBが適用された信号をデコーディングする。本ブロックの名称は、VSBデコーダと命名したが、OFDMが適用された信号をデコーディングするブロックと見なすこともできる。
トランスポートパケット逆多重化部25030は、放送信号からトランスポートパケットを分離し、特に、パケット識別子をフィルタリングする役割をする。
第2のデコーダ25040は、第2の映像のための深さ情報をデコーディングする。
MVC拡張レイヤーデコーダ25050は、第2の映像のためのデータをデコーディングする。
AVCレイヤードデコーダ25060は、第1の映像のためのデータをデコーディングする。
第1のデコーダ25070は、第1の映像のための深さ情報をデコーディングする。
PSI/PSIP/SIプロセッサ25080は、シグナリング信号に対する処理を行う。例えば、PSIPまたはDVB SIに含まれた多くのテーブルを処理したり、シグナリングパケット、シグナリングセグメントなどを処理する役割をする。PSI/PSIP/SIプロセッサ25080は、上述したディスクリプタなどに含まれる情報を処理する役割をすることができる。
視聴分析モジュール25090は、図1または図2を参照して説明した役割をする。視聴分析モジュールに対する詳細な説明は、図1または図2に対する説明と同一である。
第1の仮想映像生成部25100は、映像分析モジュールで分析された情報またはデータに基づいて第1の仮想映像をレンダリングする。例えば、第1の仮想映像は、3D映像に含まれる左映像であり得る。
第2の仮想映像生成部25110は、映像分析モジュールで分析された情報またはデータに基づいて第2の仮想映像をレンダリングする。例えば、第2の仮想映像は、3D映像に含まれる右映像であり得る。
出力フォーマッター25120は、第1の仮想映像及び第2の仮想映像を結合し、3D映像をフォーマッティングする。
図26は、本発明の一実施例に係る、3D放送信号の処理方法を示したフローチャートである。
受信機は、3D(3―dimensional)コンテンツを含む放送信号を受信する(s26010)。
受信機は、受信した放送信号からターゲット視聴条件情報及び一つ以上の基準視聴条件情報をパーシングする(s26020)。ここで、前記ターゲット視聴条件情報は、3Dコンテンツを視聴するための最適のスクリーンサイズを示す情報、前記3Dコンテンツを視聴するための最適の視聴距離を示す情報、及び前記3Dコンテンツを視聴するための最適のIOD(Inter Ocular Distance)を示す情報を含み、前記基準視聴情報は、勧奨されるスクリーンサイズ、勧奨される視聴距離、勧奨されるIOD、及び前記の勧奨されるスクリーンサイズ、勧奨される視聴距離及び勧奨されるIODがどのような要素を基盤にして算出されたのかを示す補償タイプ情報を示す情報を含む。
受信機は、視聴者の視聴条件情報を受信し、前記の受信した視聴条件情報が前記ターゲット視聴条件情報と一致しない場合、前記の受信した視聴条件情報と最も近似する情報を含む基準視聴条件情報に含まれる補償タイプ情報をパーシングし、前記補償タイプ情報が示す要素を維持するように前記3Dコンテンツをレンダリングする(s26030)。
受信機は、レンダリングされた3Dコンテンツをディスプレイするように制御する(s26040)。
説明の便宜上、各図面を分けて説明したが、各図面に敍述されている各実施例を併合し、新たな実施例を具現するように設計することも可能である。そして、当業者の必要に応じて、以前に説明された各実施例を実行するためのプログラムが記録されているコンピューターで判読可能な記録媒体を設計することも本発明の権利範囲に属する。
本発明に係る装置及び方法は、上述したように説明された各実施例の構成と方法が限定されるように適用され得るものではなく、上述した各実施例は、多様な変形がなされるように各実施例の全部または一部が選択的に組み合わされて構成されることも可能である。
一方、本発明の放送プログラムと関連した放送信号処理方法は、ネットワークデバイスに備えられたプロセッサが読み取り可能な記録媒体に、プロセッサが読み取り可能なコードとして具現することが可能である。プロセッサが読み取り可能な記録媒体は、プロセッサによって読まれ得るデータが保存される全ての種類の記録装置を含む。プロセッサが読み取り可能な記録媒体の例としては、ROM、RAM、CD―ROM、磁気テープ、フロッピーディスク、光データ保存装置などがあり、また、インターネットを介した伝送などのキャリアウェーブの形態に具現されることも含む。また、プロセッサが読み取り可能な記録媒体は、ネットワークで連結されたコンピューターシステムに分散され、分散方式でプロセッサが読み取り可能なコードが保存されて実行され得る。
また、以上では、本発明の好ましい実施例を図示して説明したが、本発明は、上述した特定の実施例に限定されるものではなく、特許請求の範囲で請求する本発明の要旨を逸脱することなく、当該発明の属する技術分野で通常の知識を有する者によって多様な変形実施が可能であることは当然であり、このような各変形実施は、本発明の技術的思想や展望から個別的に理解してはならない。
そして、当該明細書では、物件発明と方法発明が全て説明されており、必要に応じて、両発明の説明は補充的に適用され得る。
〔発明を実施するための形態〕
発明を実施するための形態は、上述したように、発明を実施するための最善の形態で詳細に説明された。
本発明は、3DTV放送サービスの提供と関連した一連の産業分野で利用可能である。

Claims (10)

  1. 3D(3―dimensional)コンテンツを含む放送信号を受信するチューナと、
    前記の受信した放送信号からターゲット視聴条件情報及び2つ以上の基準視聴条件情報をパーシングするサービス情報プロセッサであって、
    前記ターゲット視聴条件情報は、3Dコンテンツを視聴するための最適のスクリーンサイズを示す情報、前記3Dコンテンツを視聴するための最適の視聴距離を示す情報、及び前記3Dコンテンツを視聴するための最適のIOD(Inter Ocular Distance)を示す情報を含み、
    前記2つ以上の基準視聴条件情報のそれぞれは、基準スクリーンサイズ、基準視聴距離、基準IO償タイプ情報及償パラメータ情報を含み、
    前記補償タイプ情報は輻輳角、視差角及び視聴距離の中の要素を示し
    前記補償パラメータ情報は、前記基準視聴条件情報に基づいた前記3Dコンテンツをレンダリングするために利用されるパラメータを含み、
    前記基準スクリーンサイズ、前記基準視聴距離、前記基準IOD及び前記補償パラメータ情報はエレメントが固定された条件の下で計算される、サービス情報プロセッサと、
    視聴者の視聴条件情報を受信し、前記2つ以上の基準視聴条件情報の中の前記受信した視聴条件情報に最も関連する情報を含む一つの基準視聴条件情報に含まれる前記補償タイプ情報をパーシング記の受信した視聴条件情報に最も関連する情報を含む前記一つの基準視聴条件情報にしたがって前記3Dコンテンツをレンダリングする視聴分析モジュールと、
    前記のレンダリングされた3Dコンテンツをディスプレイするように制御する出力フォーマッターと、を含む3D放送信号の処理装置。
  2. 前記サービス情報プロセッサは、前記ターゲット視聴条件情報及び一つ以上の基準視聴条件情報をPMT(Program Map Table)に含まれるステレオ3Dレンダリング情報ディスクリプタからパーシングする、請求項1に記載の3D放送信号の処理装置。
  3. 前記サービス情報プロセッサは、前記ターゲット視聴条件情報及び一つ以上の基準視聴条件情報をVCT(Virtual Channel Table)またはSDT(Service Description Table)に含まれるステレオ3Dレンダリング情報ディスクリプタからパーシングする、請求項1に記載の3D放送信号の処理装置。
  4. 前記基準視聴条件情報は、前記基準スクリーンサイズ、前記基準視聴距離または前記基準IODが有効な情報であるか否かを示す基準パラメータ有効情報をさらに含む、請求項1に記載の3D放送信号の処理装置。
  5. 前記サービス情報プロセッサは、前記2つ以上の基準視聴条件情報の数を特定する数情報をさらにパーシングする、請求項1に記載の3D放送信号の処理装置。
  6. 放送信号送信機が、3D(3―dimensional)コンテンツを生成するステップと、
    前記放送信号送信機が、ターゲット視聴条件情報及び2つ以上の基準視聴条件情報を生成するステップであって、
    前記ターゲット視聴条件情報は、3Dコンテンツを視聴するための最適のスクリーンサイズを示す情報、前記3Dコンテンツを視聴するための最適の視聴距離を示す情報及び前記3Dコンテンツを視聴するための最適のIOD(Inter Ocular Distance)を示す情報を含み、
    前記2つ以上の基準視聴条件情報のそれぞれは、基準スクリーンサイズ、基準視聴距離、基準IO償タイプ情報及び補償パラメータ情報を
    前記補償タイプ情報は輻輳角、視差角及び視聴距離の中の要素を示し
    前記補償パラメータ情報は、前記基準視聴条件情報に基づいた前記3Dコンテンツをレンダリングするために利用されるパラメータを含み
    前記基準スクリーンサイズ、前記基準視聴距離、前記基準IOD及び前記補償パラメータ情報はエレメントが固定された条件の下で計算される、ステップと、
    前記放送信号送信機が、前記3Dコンテンツと、前記ターゲット視聴条件情報及び前記2つ以上の基準視聴条件情報を含む放送信号を生成するステップと、
    前記放送信号送信機が、前記の生成した放送信号を伝送するステップと、を含む3D放送信号の送信処理方法。
  7. 前記放送信号送信機が、放送信号を生成するステップは、
    前記放送信号送信機が、前記ターゲット視聴条件情報または一つ以上の基準視聴条件情報を、ステレオ3Dレンダリング情報ディスクリプタに含ませ、PMT(Program Map Table)に挿入するステップを含む、請求項に記載の3D放送信号の送信処理方法。
  8. 前記放送信号送信機が、放送信号を生成するステップは、
    前記放送信号送信機が、前記ターゲット視聴条件情報または一つ以上の基準視聴条件情報を、ステレオ3Dレンダリング情報ディスクリプタに含ませ、VCT(Virtual Channel Table)またはSDT(Service Description Table)に挿入するステップを含む、請求項に記載の3D放送信号の送信処理方法。
  9. 前記基準視聴条件情報は、前記基準スクリーンサイズ、前記基準視聴距離または前記基準IODが有効な情報であるか否かを示す基準パラメータ有効情報をさらに含む、請求項に記載の3D放送信号の送信処理方法。
  10. 前記放送信号送信機が、ターゲット視聴条件情報と、2以上の基準視聴条件情報を生成するステップは、前記放送信号送信機が前記2つ以上の基準視聴条件情報の数を特定する数情報を生成するステップを含む、請求項に記載の3D放送信号の送信処理方法。
JP2015515949A 2012-06-05 2013-06-05 3d放送サービスのための放送信号処理方法及び装置 Expired - Fee Related JP6141971B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261655491P 2012-06-05 2012-06-05
US61/655,491 2012-06-05
PCT/KR2013/004983 WO2013183947A1 (ko) 2012-06-05 2013-06-05 3d 방송 서비스를 위한 방송 신호 처리 방법 및 장치

Publications (2)

Publication Number Publication Date
JP2015524209A JP2015524209A (ja) 2015-08-20
JP6141971B2 true JP6141971B2 (ja) 2017-06-07

Family

ID=49712281

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015515949A Expired - Fee Related JP6141971B2 (ja) 2012-06-05 2013-06-05 3d放送サービスのための放送信号処理方法及び装置

Country Status (6)

Country Link
US (1) US9900578B2 (ja)
EP (1) EP2858363A4 (ja)
JP (1) JP6141971B2 (ja)
KR (1) KR102104898B1 (ja)
CN (1) CN104584547B (ja)
WO (1) WO2013183947A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9292329B2 (en) * 2011-02-10 2016-03-22 Microsoft Technology Licensing, Llc Virtual switch interceptor
CN105075253A (zh) * 2014-02-21 2015-11-18 Lg电子株式会社 用于处理3维广播信号的方法和设备
KR20160092362A (ko) * 2015-01-27 2016-08-04 한국전자통신연구원 3d 방송 서비스 제공 방법 및 상기 방법을 수행하는 3d 방송 제공 장치
US20180048408A1 (en) * 2015-04-27 2018-02-15 Sharp Kabushiki Kaisha Service signaling extensions
WO2016204323A1 (ko) * 2015-06-17 2016-12-22 (주)에프엑스기어 사용자 시점 연동형 영상 처리 장치 및 그 방법
CN114928736B (zh) 2016-10-12 2024-04-19 弗劳恩霍夫应用研究促进协会 空间不均等流媒体化

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2306826A (en) * 1995-10-18 1997-05-07 Sharp Kk Display, method of calibrating an observer tracking display and observer tracking autostereoscopic 3D display
JPH09238367A (ja) 1996-02-29 1997-09-09 Matsushita Electric Ind Co Ltd テレビジョン信号送信方法,テレビジョン信号送信装置,テレビジョン信号受信方法,テレビジョン信号受信装置,テレビジョン信号送信受信方法,テレビジョン信号送信受信装置
US8269822B2 (en) * 2007-04-03 2012-09-18 Sony Computer Entertainment America, LLC Display viewing system and methods for optimizing display view based on active tracking
KR101506219B1 (ko) 2008-03-25 2015-03-27 삼성전자주식회사 3차원 영상 컨텐츠 제공 방법, 재생 방법, 그 장치 및 그기록매체
CA2727569C (en) * 2008-06-09 2017-09-26 Vidyo, Inc. Improved view layout management in scalable video and audio communication systems
JP2010045584A (ja) 2008-08-12 2010-02-25 Sony Corp 立体画像補正装置、立体画像補正方法、立体画像表示装置、立体画像再生装置、立体画像提供システム、プログラム及び記録媒体
CN102388620B (zh) 2009-02-01 2014-10-29 Lg电子株式会社 广播接收机和三维视频数据处理方法
JP4576570B1 (ja) 2009-06-08 2010-11-10 Necカシオモバイルコミュニケーションズ株式会社 端末装置及びプログラム
CA2765570C (en) * 2009-06-16 2016-05-03 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3d video processing method thereof
MX2011003076A (es) 2009-06-17 2011-04-19 Panasonic Corp Medio de grabacion de informacion y dispositivo de reproduccion para reproducir imagenes en tercera dimension.
US8629899B2 (en) * 2009-08-06 2014-01-14 Qualcomm Incorporated Transforming video data in accordance with human visual system feedback metrics
RU2559735C2 (ru) 2009-09-16 2015-08-10 Конинклейке Филипс Электроникс Н.В. Компенсация размера трехмерного экрана
JP2011146828A (ja) 2010-01-13 2011-07-28 Sony Corp データ構造、記録装置および記録方法、再生装置および再生方法、並びにプログラム
JP2011259289A (ja) 2010-06-10 2011-12-22 Fa System Engineering Co Ltd 視聴状況対応3d表示装置および3d表示方法
JP5500645B2 (ja) 2010-06-25 2014-05-21 Kddi株式会社 映像調整装置、テレビ受信装置及びプログラム
EP2586209A1 (en) * 2010-06-28 2013-05-01 Thomson Licensing Method and apparatus for customizing 3-dimensional effects of stereo content
KR20120023268A (ko) 2010-09-01 2012-03-13 삼성전자주식회사 디스플레이 장치 및 그 영상 생성 방법
EP2637412B1 (en) * 2010-11-02 2017-08-23 LG Electronics Inc. Apparatus and method for receiving a digital broadcast signal
US9237331B2 (en) * 2011-01-18 2016-01-12 Disney Enterprises, Inc. Computational stereoscopic camera system
KR101028930B1 (ko) * 2011-01-19 2011-04-12 조용성 화면크기 보다 확장된 크기의 영상을 제공하는 영상신호 출력장치

Also Published As

Publication number Publication date
US9900578B2 (en) 2018-02-20
KR102104898B1 (ko) 2020-04-27
CN104584547A (zh) 2015-04-29
EP2858363A4 (en) 2015-12-09
EP2858363A1 (en) 2015-04-08
US20150116455A1 (en) 2015-04-30
JP2015524209A (ja) 2015-08-20
KR20150023329A (ko) 2015-03-05
CN104584547B (zh) 2017-03-08
WO2013183947A1 (ko) 2013-12-12

Similar Documents

Publication Publication Date Title
CA2810159C (en) Method and apparatus for processing a broadcast signal for 3d (3-dimensional) broadcast service
US9369692B2 (en) Method and apparatus for processing and receiving digital broadcast signal for 3-dimensional display
US20160249112A1 (en) Digital broadcast receiving method providing two-dimensional image and 3d image integration service, and digital broadcast receiving device using the same
JP6141971B2 (ja) 3d放送サービスのための放送信号処理方法及び装置
CA2819141C (en) Receiving device and method for receiving multiview three-dimensional broadcast signal
KR101653319B1 (ko) 3d 영상을 위한 영상 컴포넌트 송수신 처리 방법 및 장치
CA2809143C (en) Digital receiver and method for processing 3d content in the digital receiver
US20130162771A1 (en) Broadcast signal processing method and device for 3-dimensional (3d) broadcasting service
KR20110126101A (ko) 방송 수신기 및 3d 비디오 데이터 처리 방법
KR101844236B1 (ko) 3d (3-dimentional) 방송 서비스를 위한 방송 신호 송수신 방법 및 장치

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151113

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160301

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160906

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170105

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20170116

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170404

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170508

R150 Certificate of patent or registration of utility model

Ref document number: 6141971

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees