JP5575659B2 - ビデオ再生のための三次元モード選択メカニズム - Google Patents

ビデオ再生のための三次元モード選択メカニズム Download PDF

Info

Publication number
JP5575659B2
JP5575659B2 JP2010537576A JP2010537576A JP5575659B2 JP 5575659 B2 JP5575659 B2 JP 5575659B2 JP 2010537576 A JP2010537576 A JP 2010537576A JP 2010537576 A JP2010537576 A JP 2010537576A JP 5575659 B2 JP5575659 B2 JP 5575659B2
Authority
JP
Japan
Prior art keywords
information
video
stream
display
playback
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010537576A
Other languages
English (en)
Other versions
JP2011510527A (ja
Inventor
フィリップ エス ニュートン
ヘンドリク エフ モル
ジョルジュ エス スタン
フランセスコ スカロリ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2011510527A publication Critical patent/JP2011510527A/ja
Application granted granted Critical
Publication of JP5575659B2 publication Critical patent/JP5575659B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/144—Processing image signals for flicker reduction
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359—Switching between monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G11B2020/10537—Audio or video recording
    • G11B2020/10592—Audio or video recording specifically adapted for recording or reproducing multichannel signals
    • G11B2020/10611—3D video data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/002—Eyestrain reduction by processing stereoscopic signals or controlling stereoscopic devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/003—Aspects relating to the "2D+depth" image format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/007—Aspects relating to detection of stereoscopic image format, e.g. for adaptation to the display format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Description

本発明は、二次元(2D)表示及び三次元(3D)表示の両方に適したビデオ情報の再生方法に関する。本発明はさらに、二次元(2D)表示及び三次元(3D)表示の両方に適したビデオ情報の再生のための再生装置に関する。本発明はさらに、ビデオ情報及び関連再生情報を有する信号、並びに、記録された信号を有する記録担体に関する。
新たな三次元ディスプレイの導入によって、三次元ビデオが大量消費者市場を新発見する機会がある。そのような三次元ディスプレイは、三次元表示及び二次元表示の両方を処理することができる。今日、三次元ビデオのための様々なフォーマットが存在し、殆どが単一視点立体表示に基づいており、それによって、ユーザは、単一視点からの立体表示でシーンを見ることができる。しかしながら、三次元ビデオを導入することは、単に三次元表示が可能な新たなディスプレイを導入することに関するのみならず、さらに、コンテンツ製造及びサプライチェーン全体への影響を持つ。第一に、三次元ビデオコンテンツの製造は初期の技術段階にあり、そして様々なフォーマットが、それら自身の利点及び短所を各々伴って、用いられるべく提案される。コンテンツ配布に関して、三次元コンテンツを符号化するために新たな符号化方法が導入され、そして、MPEGストリーム中に三次元ビデオストリームを含めるための新たなフォーマットが提案された。
新たなフォーマットの導入は通常時間を要し、新たなフォーマットを導入する際に要求される特徴は、導入済みのプレーヤー基盤との下位再生互換性(backwards playback compatibility)であることが知られている。失われた領域は、導入されたプレーヤー基盤との下位互換性を維持しつつ、コンテンツ配布又はパブリッシングフォーマット(例えばデジタルビデオ放送(DVB)又はDVD)及び高解像度フォーマット(例えばBlu-ray(登録商標) Disc (BD)又はHD-DVD)における三次元ビデオコンテンツの運搬である。さらに、三次元ディスプレイは、全ての角度方向からのビューであることができる標準的な二次元画像と比較して、わずかな空間領域においてのみ高品質な三次元印象を生成することができる。したがって、観察条件、同時にディスプレイを見ているユーザ数又はユーザの好みに応じて、二次元及び三次元コンテンツを容易に切り替えることができることが望ましい。
本発明の目的は、二次元レガシー装置との下位互換性を維持しつつ、二次元コンテンツと三次元コンテンツとの間の切り替えが容易である、二次元及び三次元表示の両方に適したビデオ情報の再生方法を提供することである。
本発明の目的は、請求項１に記載の方法によって達成される。本発明による方法において、ビデオ情報及び関連再生情報が再生フォーマットに従って構成され、前記ビデオ情報は、二次元(2D)表示のためのプライマリビデオストリーム及び三次元(3D)表示を可能にするための付加情報ストリームを有し、前記関連再生情報は、存在するビデオストリームのタイプを示す表示情報を有し、当該方法は、前記ビデオ情報及び前記関連再生情報を受け取り、可能な二次元(2D)表示及び三次元(3D)表示の両方が、受け取られたビデオ情報に対して可能であることを決定するために前記表示情報を処理し、前記ビデオ情報が二次元(2D)で表示されるべきか又は三次元(3D)で表示されるべきかを示す再生装置の再生設定を決定し、再生装置の前記再生設定に従って、表示のために、前記プライマリビデオストリームか又は前記プライマリビデオストリーム及び前記付加情報ストリームを処理する。ビデオ情報が二次元(2D)表示のためのプライマリビデオストリーム及び三次元(3D)表示を可能にするための付加情報ストリームを有する場合、付加情報ストリームはレガシー装置によって無視され、したがって下位互換性が維持される。ビデオ情報が二次元(2D)で表示されるべきか又は三次元(3D)で表示されるべきかを示す再生装置の検出された再生設定に応じて、二次元表示のためのプライマリビデオストリームか又はプライマリビデオストリーム及び三次元表示のための補助ストリームの両方を処理することによって、二次元コンテンツと三次元コンテンツとの間の切り替えは、再生装置の再生設定を制御することによって、容易に実行されることができる。
二次元から三次元へ遷移する場合及びその逆の場合、再生装置及びビデオ処理ユニットは、一つの表示モードから他の表示モードに変化するように再構成される。この再構成プロセスの間、黒いフレーム又はアーチファクトがスクリーン上に現れる場合があり、これはそれぞれ動画経験を妨害する。ユーザに対する不快感を回避するために、本発明の実施の形態において、二次元から三次元及びその逆の切り替えの継続時間は、シームレスに制御される。
アーチファクト又は黒いフレームを示さずに三次元効果の強度が徐々に増加することを可能にすることは、再生装置及びディスプレイにおける処理段階が、「シームレスな」遷移を達成するように連携することを必要とする。有利な更なる実施の形態において、切り替えは、再生の間の事前に定められた時点においてのみ行われる。例えば、そのような時点は、コンテンツ自体が二次元と三次元との間の切り替えに適している時点に対応し、例えば、シーンの切れ目、新たなショットの開始時である。さらに遷移は、より熱中できる経験(例えばアクションショット) への切り替えが意味をなすコンテンツ及び筋書きの部分において、又は、ユーザがさらに詳細に場面を「探索する」ことができるコンテンツの部分において、発生することができる。シームレスの遷移は、ある期間にわたって、ゼロから所望の値まで連続的に、3D-2D遷移の間は逆に、遷移の間に三次元深さを制御することによって達成されることができる。したがって、ユーザの目及び視覚システムが調整されて三次元観察経験に違和感が無くなることを可能にするために、三次元効果の強度は徐々に増加する。
本発明による方法の実施の形態において、各々のストリームはアイテムを有し、関連再生情報はプレイリストを有し、各々のプレイリストは再生されるべきアイテムのシーケンスを示し、少なくとも１つのプレイリストは、再生されるべきプライマリビデオストリームのビデオアイテムのメインシーケンスを示す主表示経路及び再生されるべき補助シーケンスを示す補助表示経路を有し、補助シーケンスは、プライマリビデオストリームからのビデオアイテム及び付加情報ストリームからの対応する情報アイテムを有する。この実施の形態は、二次元コンテンツと三次元コンテンツとの間の切り替えが、主表示経路と補助表示経路とを切り替えることによって達成されることができるという利点があり、再生フォーマットが実質的にBlu-ray(登録商標)再生フォーマットに対応する場合に用いられるのに適している。
本発明による方法の他の実施の形態において、再生フォーマットが実質的にDVDビデオ再生フォーマットに対応し、再生情報がビデオ属性(Video Attribute)情報を含むビデオタイトルセット情報(Video Title Set Information:VTSI)を有し、ビデオ属性情報が、対応するビデオタイトル情報(VTSI)が三次元(3D)表示を可能にするための付加情報ストリームを有することを示すビデオ属性を有することを特徴とする。これは、三次元コンテンツが利用可能であるとの情報を提供することによって、レガシーDVDプレーヤーとの再生互換性を維持しつつ、DVDビデオ再生フォーマットでの三次元ビデオコンテンツの配布を可能にする。
長所として、プライマリビデオストリーム及び付加情報ストリームは、多重化ビデオストリーム中に一緒に多重化されるMPEGエレメンタリストリームであり、付加情報ストリームは、補助ストリームとして定義される。補助ストリームを復号するための特定のコマンドが受け取られない限り、補助ストリームはプレーヤーによって無視され、したがって、下位再生互換性が達成される。
さらに、消費者市場における三次元ビデオの導入を成功させるには、良いディスプレイだけでなく、三次元ビデオが消費者に新たな説得力のある経験を提供することも必要である。導入の初期段階において、コンテンツ作成者が、ビデオストリームの一部が三次元ビデオである新たな媒体で実験し、主要なビデオは、ほとんどの場合、依然として二次元又は拡張二次元経験において視聴され、コンテンツは二次元であるが、ディスプレイにおいて二次元から"三次元"へとリアルタイムで変換されることが予想される。したがって、二次元コンテンツと三次元コンテンツとの間の容易な切り替えのみが望まれているのではなく、表示の間の二次元から三次元へのこの切り替えが、「シームレスに」行われるべきである。ユーザ側は表示が変化したことに気付くが、遷移は目立たないべきであり、エンドユーザの肯定的な経験に干渉する黒いフレーム又は他のアーチファクトをビデオ中に生じさせるべきでない。
このアプリケーションはさらに、ビデオ情報の再生のための再生装置に関し、当該装置は、再生フォーマットに従って構成されるビデオ情報及び関連再生情報を受け取るための手段であって、前記ビデオ情報は、二次元(2D)表示のためのプライマリビデオストリーム及び三次元(3D)表示を可能にするための付加情報ストリームを有し、前記関連再生情報は、存在するビデオストリームのタイプを示す表示情報を有する手段、可能な二次元(2D)表示及び三次元(3D)表示の両方が、受け取られたビデオ情報に対して可能であることを決定するために前記表示情報を処理するための手段、前記ビデオ情報が二次元(2D)で表示されるべきか又は三次元(3D)で表示されるべきかを示す再生装置の再生設定を記憶するための手段、並びに、再生装置の記憶された前記再生設定に従って、表示のために、前記プライマリビデオストリームか又は前記プライマリビデオストリーム及び前記付加情報ストリームを処理するための手段を有する。
このアプリケーションはさらに、信号及びその上に記録された前記信号を有する記録担体に関し、前記信号は、ビデオ情報及び関連再生情報を有し、ビデオ情報及び関連再生情報は再生フォーマットに従って構成され、ビデオ情報は、二次元(2D)表示のためのプライマリビデオ情報及び三次元(3D)表示を可能にするための付加ビデオ情報を有し、関連再生情報は、可能な表示のタイプを示す表示情報を有する。
本発明のこれらの及び他の態様は、以下に記載される実施の形態から明らかとなり、それらを参照して説明される。
本発明の特徴及び利点は、添付の図面を参照してさらに説明される。
光ディスクを概略的に示す図。 本発明が実施される再生装置を概略的に示す図。 自動立体視マルチビュー表示に関する三次元コンテンツの再生、レンダリング及び表示を概略的に示す図。 二次元-三次元遷移を発生させるための自動立体視表示における利得及びオフセットパラメータの使用を示す図。 インタリーブされた方法で二次元画像上に「深さ」データをオーバーレイするための輝度(luma)キーイングの使用を示す図。
図1は、トラック12及び中央のホール10を持つ光ディスク11を概略的に例示する。(情報を表現する予め記録されたマークの系列の位置である)トラック12は、情報レイヤ上に実質的に平行なトラックを構成する単一のらせんパターンに従って配置される。光ディスクは、記録可能タイプの一つ以上の情報レイヤを有することができる。予め記録された光ディスクの既知の例は、CD-ROM若しくはDVD-ROM、又は高密度ディスク(例えばHD DVD-ROM若しくはBD-ROM)である。例えば、CD-ROM及びDVD-ROM光ディスクのための物理的構造及びアドレス指定情報に関する詳細は、それぞれ、レファレンスECMA-130及びECMA-267(ISO IEC 16449)において見つけることができる。BDシステムの場合、更なる詳細は、Blu-Ray Discアソシエーションによって発行された、公に利用可能なテクニカルホワイトペーパー"Blu-ray Disc Format General August 2004"及び"Blu-ray Disc 1.C Physical Format Specifications for BD-ROM November, 2005"において見つけることができる(http://www.bluraydisc.com)。情報は、トラックに沿った光学的に検出可能なマークによって情報レイヤ上で表現される。光ディスク上のトラック12は、ブランク光ディスクの製造の間に設けられる予めエンボス加工されたトラック構造によって示される。トラック構造は、例えばプレグルーブ(pregroove)によって構成され、読出し/書込みヘッドがスキャンの間にトラックに追従することを可能にする。
光ディスク11は、規格化されたフォーマットに従ってユーザ情報を担持することが意図され、規格化された再生装置上で再生可能である。記録フォーマットは、情報が記録され、符号化されて、トラック12によって設けられた記録空間に論理的にマップされる態様を含む。記録可能空間は、通常、リードイン領域(LI)31、情報を記録するためのデータゾーン(DZ)及びリードアウト領域(LO)32に細分される。リードイン領域(LI)31は、通常、基本的なディスク管理情報及びデータゾーン(DZ)に物理的にアクセスする方法に関する情報を含む。例えば、前記基本的なディスク管理情報は、CDシステムにおけるコンテンツのテーブル又はDVDシステムにおけるフォーマットディスク制御ブロック(FDCB)に対応する。
データゾーン(DZ)に記録されるユーザ情報はさらに、アプリケーションフォーマットに従って配置され、例えばファイル及びディレクトリの定義済み構造を含む。さらに、論理レベルにおいて、データゾーン中のユーザ情報は、ECMA-119として利用可能な、CDシステムにおいて使用されるISO 9660のような、又はECMA-167として利用可能な、DVDシステムにおいて使用されるUDFのような、ファイル管理情報を有するファイルシステムに従って配置される。
図2は、本発明が実施される再生装置を概略的に示す。
記録装置は、光ディスクのトラックをスキャンするためのスキャン手段を備え、スキャン手段は、光ディスク11を回転させるためのドライブユニット16、ヘッド18、トラック上の半径方向にヘッド18の位置を粗く定めるための位置決めユニット21及び制御ユニット17を有する。ヘッド18は、放射ビーム20を発生させるための既知のタイプの光学システムを有し、放射ビーム20は、当該放射ビーム20をフォーカスするための光学素子を通して、光ディスク11のトラック12上の放射スポット19へと導かれる。放射ビーム20は、放射源(例えばレーザダイオード)によって生成される。ヘッドはさらに、前記ビームの光学軸に沿って放射ビーム20の焦点を動かすためのフォーカシングアクチュエータ、及び、トラック中央での半径方向の放射スポット19の微細な位置決めのためのトラッキングアクチュエータを有する(図示せず)。トラッキングアクチュエータは、光学素子を半径方向に動かすためのコイルを有することができるか、あるいは、反射素子の角度を変えるように配置されることができる。
情報を読み出すために、情報レイヤによって反射された放射は、読み出し信号、並びに、前記トラッキングアクチュエータ及びフォーカシングアクチュエータを制御するためのトラッキング誤差信号及びフォーカシング誤差信号のような更なる検出器信号を生成するために、ヘッド18中の通常のタイプの検出器(例えば四象限ダイオード)によって検出される。制御ユニット17は、光ディスク11からの情報の読み出しを制御して、ユーザから又はホストコンピュータからのコマンドを受け取るように配置されることができる。この目的のために、制御ユニット17は、以下に記載される手順を実行するための制御回路(例えばマイクロプロセッサ、プログラムメモリ及び制御ゲート)を有することができる。制御ユニット17はさらに、ロジック回路のステートマシンとして実施されることもできる。
読み出しのために、読み出された信号は、情報を処理して適切な手段(例えばディスプレイ、スピーカ)に前記情報を出力するために、復調器26、デフォーマッタ27及び出力ユニット28を含む読み出し処理ユニットによって処理される。復調器26、デフォーマッタ27及び出力ユニット28の機能は、コントローラ17によって制御される。したがって、情報を読み出すための読み出し手段は、ドライブユニット16、ヘッド18、位置決めユニット21及び読み出し処理ユニットを含む。復調器26は、例えば、US 5,920,272又はUS 5,477,222に開示されるような適切なチャネル復号器を用いることにより、チャネル信号からデータ信号を復調する。デフォーマッタ27は、情報信号をデータ信号から抽出するために誤り訂正符号及び/又はデインターリーブを用いる。出力ユニット28は、制御ユニット17の制御の下で、論理レベルで情報信号を処理する。さらに、情報信号は、管理情報がオーディオビデオ情報に関連づけられることを定めることができる再生フォーマットに従って配列される場合がある。それゆえに、出力ユニットは、オーディオビデオ情報から管理情報を分離し、オーディオ及び/若しくはビデオ情報を逆多重化し並びに/又は復号する。適切な圧縮/伸長手段は、オーディオについてはWO98/16014-A1(PHN 16452)に、ビデオについてはMPEG2規格(ISO-IEC 13818)に記載される。ユーザ情報が記録されることになっている記録フォーマットは、記録されたユーザ情報を管理するための管理情報も光ディスク上へ記録されることを定める。
出力ユニット28によって生成されるビデオ及びオーディオ情報は、適切な手段(例えばビデオ情報のための適切なディスプレイ)に送信される。二次元表示と三次元表示とを切り替えることができる複数の自動立体視装置が知られており、それらのうちの１つはUS 6,069,650に記載される。この表示装置は、能動的に切り替え可能な液晶レンチキュラレンズを有する液晶ディスプレイを有する。画像コンテンツに応じて、ディスプレイにおける定められた場所のセットは、二次元モード又は三次元モードに切り替えられることができる。そのようなディスプレイシステムを利用することを意図するコンテンツプロバイダ(例えば映画スタジオ)にとって、レガシープレイヤーと再生互換性のあるフォーマットで、同一の記録メディア上で二次元コンテンツと三次元コンテンツの両方を配布できることが望ましく、三次元ストリームを表示することができないそのようなレガシープレイヤーがその記録メディアを取り扱うことができなければならない。
図3は、自動立体視マルチビューディスプレイ上での三次元コンテンツの再生、レンダリング及び表示を概略的に示す。自動立体視ディスプレイにおいて、処理ユニット31内における処理は、図2を参照して説明された再生装置20により出力される画像+深さ入力フォーマットをマルチビューに変換し、これらをディスプレイパネル35のサブピクセル上にマップする。レンダリングユニットとしても知られる処理ユニット31は、ディスプレイ35内又は再生装置20中に存在することができる。この処理ユニット31は、再生装置20の出力フォーマットを処理に適したフォーマットに変換し、処理ユニット31において必要な数のビューを生成し、そしてディスプレイの正しいピクセル上へこれらのビューをマッピングすることを取り扱う。処理ユニット31は、出力されたストリームを逆多重化するための逆多重化装置32、多重画像を生成するための画像処理及びレンダリングステージ33、並びに、編成ユニット34を適切に有することができる。
ビデオ情報の符号化に関して、三次元表示のために必要な複数のビューは、Oliver Sheer "3D Video Communication", Wiley, 2005, pages 29-34に記載されているように、二次元画像及び付加画像(いわゆる深さマップ)に基づいて計算されることができる。深さマップは、二次元画像中の対象物の深さに関する情報を伝達する。深さマップのグレースケール値は、二次元画像中の関連ピクセルの深さを示す。ステレオディスプレイは、深さマップからの深さ値を用いることにより、そして必要とされるピクセル変換を計算することによって、立体表示のために必要とされる追加のビューを計算することができる。三次元ビデオ情報を圧縮して送信するためのフォーマットに関して、ソリューションはMPEGストリームを利用することであり、MPEG三次元ビデオストリームは、(一つのプログラム又は基本ビデオトランスポートストリームとしての)二次元ビデオストリーム、及び、この二次元ビデオストリームに多重化された、三次元表示を可能にするための付加情報を含む補助ストリーム(例えば深さマップストリーム)を有する。
なお、上記において、二次元ビデオ+深さマップがこれらの装置のための好ましいフォーマットとして説明されたが、それがサポートされることができる唯一のフォーマットというわけではない。例えば、二次元ビデオ+深さマップは遮蔽及び透明度情報を加えることによって拡張されることができ、又は、ステレオ+深さが入力フォーマットとして用いられることができる。あるいは、複数のビューが入力信号として用いられることができ、ディスプレイ(サブ)ピクセル上に直接マップされることができる。
さらに、コンテンツの一部は三次元表示のために意図され、そしてコンテンツの一部は二次元表示のために意図されることが予想される。観察条件、ディスプレイを同時に観察するユーザの数又はユーザの好みに応じて、二次元コンテンツと三次元コンテンツとを容易に切り替えることができることが好ましい場合がある。
上記の考慮事項に基づいて、発明者らは、エンドユーザが、システムの使用を通して、二次元モードで動画を再生することを望むか又は三次元モードで動画を再生することを望むかを示すことができるような方法が必要であるとの洞察を得た。そのような方法が実現されるためには、以下が必要とされる。
- ビデオ情報が二次元(2D)で表示されるべきか三次元(3D)で表示されるべきかを示す再生装置の再生設定をプレーヤーが記憶することができるべきである。
- 再生装置の再生設定の決定を可能にする方法又はアプリケーションインタフェースが必要とされる。
- プレーヤーは、決定された再生設定に従ってビデオ情報を処理するための手段を備えるべきである。
再生設定に関して、例えば、正しい表示モードを記憶するためにレジスタが定められることができる。加えて、プレーヤーは、二次元又は三次元モードにおける再生を示すために正しい値を読込み及び書込むために、レジスタにアクセスする方法を備えていることができる。再生設定の決定に関して、アプリケーションプログラマインタフェイス(API)は、プレーヤーのデフォルトの設定(すなわち三次元又は二次元)を決定するために、ディスク上のアプリケーションがレジスタに問い合わせることを可能にする。加えて、このレジスタの値がいつ変化するかの通知をアプリケーションが受け取ることができるような更なるアプリケーションプログラマインタフェイス及び関連するコールバック方法が定められることは有利である。
加えて、再生装置が、三次元モードにおける再生のためにどのストリーム(又はサブストリーム)を選択すべきかを決定することができることが望ましい。この方法は言語又はオーディオストリーム選択と似ており、再生の間、再生装置は、ユーザアクションに対応する別々のストリームの再生を選択することができる。上述のような三次元MPEGビデオ(多重化されたプライマリビデオストリームとしての二次元ビデオ及び補助ストリームとして符号化された三次元情報)を用いる場合、付加三次元情報を伝える補助ストリームは、補助ストリームのタイプ(すなわち三次元深さマップデータ)を示す新たな識別子を備えることが必要である。発明者によるソリューションは、下位レベルのMPEGシステム情報を分析することを要せずに、どのタイトルがそのような三次元情報を含む付加補助ストリームを含むかを再生装置が選択することができるように、配布フォーマットのメタデータ定義中に三次元ストリームの識別情報を含めることである。加えて、再生装置は、三次元再生の正しい構成でシステムを準備するために、この情報を用いることができる。
本明細書では以下において、再生フォーマットが実質的にDVDビデオ再生フォーマットに対応する特定の場合について、本発明の実施の形態が詳述される。
その技術において、DVDビデオ情報を再生することが可能な再生装置は、いくつかの事前に決められたプレーヤー構成設定を備え、これらの設定は、オーディオ(例えばオーディオ復号器の選択)及びビデオのための再生設定を決定するために用いられることが知られている。ビデオに関して、これらは、ユーザが表示モード及びアスペクト比を指示することを可能にするビデオ設定用プレーヤー構成(P_CFG)を含む。本発明のこの実施の形態によって、ビデオ設定用プレーヤー構成が修正される。既知のビデオ設定用プレーヤー構成は４バイトレジスタであり、そこから、第２バイトの最初の４ビット(最下位ビット)のみがビデオ設定を定めるために用いられる。本発明によれば、第２バイトの４つの最上位ビットは、表示モード(三次元マルチビュー、ステレオ又は二次元など)を示すために用いられる。これらのビットの使用可能な定義の例:
0000 =二次元
0001 = ステレオ
0010 = マルチビュー
さらに、本発明のこの実施例によれば、既知のメソッドVideo_Presentation_Mode_Change (Mode)は、ビデオ設定(P_CFG)の設定を上に示されるような値のいずれかに変更することをさらに可能にするように適応される。
本発明の他の実施例によれば、新たなシステムパラメータ(SPRM)が、三次元のためのプレーヤー構成を示すために追加されることができる。なお、二次元及び三次元表示に対応する、この目的のために用いられることができる既知のDVDプレーヤーにおけるシステムパラメータのための２つの予約値が存在する。その代りに、新たなシステムパラメータが定められることができる。
さらにまた、DVDシステムにおいて、特定のタイトルの再生に従ってどのストリームを復号し再生すべきかを選択するためにプレーヤーによって必要とされる情報を記述するために、ナビゲーション構想が用いられる。タイトルのビデオストリームの属性を記述するこの情報は、ビデオタイトルセット情報(Video Title Set Information:VTSI)中に記述される。Video Title Set Information(VTSI)は、Video Title Set Information Management Table(VTSI_MAT)と呼ばれるテーブルを有する。このテーブルは、複数のエントリー(例えばオーディオストリームの数及びそれらのオーディオストリームの属性)を記載する。それはさらにサブピクチャストリームのためのエントリーを持つ。それはさらに、DVDにおいて、システムはMPEGプログラムストリームのみを用い、一つのビデオストリームのみがプログラムストリーム中で許容されるので、一つのビデオ属性エントリー(VTS_V_ATR)を有する。このビデオ属性エントリー(VTS_V_ATR)は、どの圧縮が用いられるか、アスペクト比、TVシステムなどを記述する。本発明のこの実施例によれば、ビデオ属性エントリー(VTS_V_ATR)はさらに、タイトルが三次元情報を含むことを示す付加フィールドを有するように拡張される。この拡張は、どのタイトルが三次元情報を有するかを再生装置が決定することを可能にする。
そのような拡張を実現するためのいくつかのオプションが存在する。より詳しくは、ビデオ属性エントリー(VTS_V_ATR)は２バイトワードから構成され、その２番目の最下位ビットは、使用されていない予約ビットである。これは、三次元情報の存在を示すために用いられることができ、0bは三次元無しを示し、1bは三次元情報が存在することを示す。他のフィールド(例えば表示モードフィールド)がこれを示すために用いられることができ、それはこの目的のために用いられることができる予約エントリーを持つ。予約フィールドの使用は、三次元を認識しないレガシー再生装置と互換性のあるソリューションを可能にする。さらにこれは、補助ストリーム中に三次元ビデオ情報を記憶することとの互換性を提供する。レガシー再生装置がこの付加ストリームを無視するからである。
コンテンツが上記のフォーマットで配信される場合、補助ストリームとして符号化される三次元情報によって、本発明による再生装置は、どのタイトルが三次元情報を有するかを決定することができ、そのタイトル内で、三次元表示を提供するために補助ストリームを使用することができる。
以下において、再生フォーマットがBD再生フォーマットに実質的に対応する特定の場合について、本発明の実施の形態が詳述される。
BD再生装置は、再生プリファランス(例えばユーザオーディオ言語プリファランス)を記憶するための設定レジスタを用いる。本発明の実施の形態によれば、これらのレジスタは、ディスク上のアプリケーションがタイトルを二次元で再生するべきか又は三次元で再生するべきかを決定することができるように、再生装置の三次元設定を記憶するためのレジスタを含むように拡張される。好ましい実施の形態は、レジスタを含めて、レジスタ番号に対する予約値を使用することである。例えば、20から28の番号を付けられたプレーヤー設定レジスタ(PSR)は、現在予約されており、再生装置が三次元ビデオ再生モードに設定されるべきか否かを示す新たなレジスタとして用いられることができる。他のオプションは、既存のレジスタ(例えばビデオのためのプレーヤー機能を保持するPSR 29)中の予約ビットを用いることである。このレジスタは、現在、予約された４バイトのうちの２ビットのみを用いる。
なお、BDシステムにおいて、Java(登録商標)アプリケーションが、再生の制御のために用いられることができる。それゆえに、記録媒体に提供されるBD-Javaアプリケーションは、再生装置によって実行されることができ、既知のgetPSR()メソッドによって、又は、既知のBDユーザ設定及びプリファランスアプリケーションインタフェース(API)によって、再生装置設定レジスタの値にアクセスすることができる。ムービーモードアプリケーションは、設定レジスタから汎用レジスタへ値をコピーするために、低水準コマンドを用いることができ、汎用レジスタ上で、それは、プレーヤー三次元モードのステータスを得るためのビットマスキングのような動作を実行することができる。
ナビゲーション及び表示に関して、BDシステムにおいて、プレイリスト及びプレイアイテムの構想が、オーディオ及びビデオコンテンツの表示に関する情報を伝達するために用いられる。プレイアイテムは、動画、閲覧可能なスライドショーなどの表示の要素である。プレイリストは、プレイアイテムの集合で、一般的に表示の長さ全体に及ぶ。プレイリストは、一つの主要な表示を持ち、いくつかの副表示経路を持つことができる。例えば、関連オーディオ及びテキスト字幕トラックを有するビデオストリーム。
以下の副経路がBDシステムにおいて知られている。
0 予約済み
1 ムービーの主経路のためのメイントランスポートストリーム(TS)
2 タイムベースのスライドショーの主経路のためのメインTS
3 閲覧可能なスライドショーの主経路のためのメインTS
4 閲覧可能なスライドショーの副経路のためのサブTS
5 インタラクティブグラフィックメニューの副経路のためのサブTS
6 テキスト字幕の副経路のためのサブTS
7 一つ以上のエレメンタリストリーム経路の副経路のためのサブTS
8 255予約済み
本発明の実施の形態において、三次元情報を含む付加情報ストリームが、プレイリスト中のメイン二次元ビデオストリームの副経路として追加される。これは、メイン二次元ビデオストリームと共に表示されてディスプレイに送信されるべきである三次元ビデオストリームを伝達するエレメンタリストリームをサブプレイアイテムが指すことを示す新たなタイプを含むように副経路タイプを拡張することによって、実現されることができる。例えば、この拡張は、８の副経路タイプ値としてであることができる。
図2を参照して説明された再生装置における本発明の実施に関して、以下が注意される。
本発明によれば、再生装置は、ビデオ情報が二次元(2D)で表示されるべきか又は三次元(3D)で表示されるべきかを示す再生装置の再生設定を記憶するための手段(30)を備える。例えば、そのような手段は、制御ユニット17又は出力ユニット28中に設けられる不揮発性メモリとして提供されることができる。
さらに、本発明の再生装置は、再生フォーマットに従って構成されているビデオ情報及び関連再生情報を受け取るための手段(29)を備え、ビデオ情報は、二次元(2D)表示のためのプライマリビデオストリーム及び三次元(3D)表示を可能にするための付加情報ストリームを有し、関連再生情報は、存在するビデオストリームのタイプを示す表示情報を有し、当該再生装置はさらに、受け取られたビデオ情報に対して二次元(2D)表示及び三次元(3D)表示の両方が可能であることを決定するために表示情報を処理するための手段、並びに、記憶された再生装置の再生設定に従って、プライマリビデオストリームか又はプライマリビデオストリーム及び付加情報ストリームを表示のために処理するための手段を備える。上で参照された手段(29)は、制御ユニット17中で動画表示の一部として動作し、再生設定を問い合わせて、それに応じて表示を調整することができるアプリケーション(29)に対応することができる。ユーザインタフェースの観点から、二次元又は三次元再生の選択は、リモコンの専用の二次元/三次元ボタンと同程度に容易でありえる。
あるいは、再生装置は、アプリケーションが存在しない場合には、ストリーム記述からそれらの部分を特定することによって、三次元情報を含むビデオ情報のその部分を直接選択するように構成されることができる。これはさらに、ユーザが(例えば専用のビデオプレーヤーの代わりにパーソナルコンピュータにおいて)コンテンツを直接ナビゲートする場合に用いられることができ、その場合、プレーヤー又はシステムは、コンテンツのどの部分が三次元で表示されることができるかを示すことができる。
さらに、出力ユニットが、記憶された再生装置の再生設定に従って、表示のために、プライマリビデオストリームか又はプライマリビデオストリーム及び付加情報ストリームを処理するように適応される。
導入の初期段階において、コンテンツ作成者が、ビデオストリームの一部が三次元ビデオである新たな媒体で実験し、主要なビデオは、ほとんどの場合、依然として二次元又は拡張二次元経験において視聴され、コンテンツは二次元であるが、ディスプレイにおいて二次元から"三次元"へとリアルタイムで変換されることが予想される。したがって、二次元コンテンツと三次元コンテンツとの間の容易な切り替えのみが望まれているのではなく、表示の間の二次元から三次元へのこの切り替えが、「シームレスに」行われるべきである。ユーザ側は表示が変化したことに気付くが、遷移は目立つべきではなく、エンドユーザの肯定的な経験に干渉する黒いフレーム又は他のアーチファクトをビデオ中に生じさせるべきでない。
二次元から三次元へと移行するとき、又はその逆のとき、再生装置及びビデオ処理ステージは表示モードから変化するように再構成されなければならない。この再構成プロセスの間、黒いフレーム又はアーチファクトがスクリーン上に現れる場合があり、これはそれぞれ動画経験を阻害する。これ及び観察者の不快感を回避するために、以下の問題のうちの少なくとも１つが本発明の改善された実施の形態において対処されることができる。
好ましくは、コンテンツ自体が二次元と三次元との間の切り替えに適する。これは、コンテンツ作成者が、コンテンツが二次元と三次元との間で切り替えられる可能性があるポイントがショット又はビデオシーンの途中では発生せず、その代わりに、シーンのカットにおいて又は新たなショットの開始時にのみ発生することを保証することを意味する。さらに遷移は、より熱中できる経験(例えばアクションショット)を保証するために切り替えることが意味をなすコンテンツ及び筋書きの部分において、又は、ユーザがさらに詳細に場面を「探索する」ことができるコンテンツの部分において、発生するべきである。
ユーザの目及び視覚システムが調整されて三次元観察経験に違和感が無くなることを可能にするために、三次元効果の強度は徐々に増加すべきである。
好ましくは、ビデオの復号化が中断されず、従って表示中に黒いフレーム又は一時的な中断が存在しない。
好ましくは、二次元から三次元モードへ切り替えるときに、ディスプレイはアーチファクトを示さない。
アーチファクト又は黒いフレームを示さずに三次元効果の強度が徐々に増加することを可能にするために、本発明によるソリューションは、再生装置及び三次元表示における処理ステージは、「シームレスの」遷移を達成するように連携する。これを達成するために、発明者は、遷移の継続時間と共に、遷移がいつ発生するかを正確に示すことができるアプリケーションインタフェース(API)を提供するシステムを設計した。出発点として用いられるのに適した既知のアプリケーションインタフェースは、ブルーレイディスクアプリケーションインタフェース(HD-Movieモード又はBD-Java)である。本発明の実施の形態によると、二次元から三次元(又はその逆)の遷移を実行するためのコマンドに応答して、再生装置のアプリケーションは、ディスプレイにおける深さ設定をディスプレイに変更させるためのコマンドをフレームヘッダに(又はインタフェースに直接)埋め込み、ディスプレイによりサポートされる場合には、ビューの数を制御するためのコマンドを埋め込む。加えて、再生装置は、遷移期間の間に再生のための光ディスク上のコンテンツの適切なセクションを選択し、その後、三次元ビデオコンテンツの再生を開始する。
従って、本発明の更なる実施の形態は、以下の少なくとも一つ又はそれらの任意の組み合わせに関連する。
二次元モードから三次元モードへの遷移がいつか及び所望の遷移期間がどれくらいかを光ディスク上のアプリケーションが示すことを可能にするアプリケーションインタフェース(API)。
深さ設定及びオプションのビュー設定を変更することを三次元ディスプレイに指示するための、フレームヘッダに又は直接ビデオインタフェース(HDMI)に埋め込まれるコマンド。あるいは、二次元と三次元との間で遷移するように、そして好ましくは遷移の継続時間をディスプレイに指示する、フレームヘッダに又はビデオインタフェースに埋め込まれるコマンド。
二次元画像コンテンツと一致するフレームサイズ及び解像度を生成するように「深さ」データが黒いラインによってインタリーブされるように編集され、そして動画の二次元セクションと三次元セクションとの間でコンテンツの観点からシームレスな経験を提供する光ディスク上のビデオコンテンツのフォーマット。
再生装置におけるハードウェア及びソフトウェアの再構成を回避する、二次元画像データを「深さ」データと組み合わせる方法。
上述のように、シームレスな遷移を達成するために克服すべき問題の一つは、深さ効果が徐々に変化すべきであるということである。本明細書において、本発明による２つのソリューションを開示する。
第１のソリューションにおいて、再生装置は、深さが徐々に増減するように深さマップの色を変更することができ、一方、第２のソリューションでは、再生装置又は三次元ディスプレイがレンダリングユニットの設定を変更することが可能である。レンダリングユニットは、新たなビューを生成するために二次元画像からのピクセルを左又は右にシフトすることによって、マルチビューディスプレイ上での表示のための複数のビューを生成する。シフトの量は、深さ又は視差マップ中の対応するピクセルの値によって(視差と深さとの間には近似的な線形関係が存在する)、及びこのステージにおけるオフセット及び利得設定によって決まる。利得値を操作することによって、深さの量を増加させることができ(実際にはこれは、ピクセルシフトの量を増加させる)、オフセットは、深さをスクリーンのより後ろに又はより手前に配置するために用いられることができる。スムーズな遷移のために深さを徐々に変化させるために、プレーヤーは、レンダリングユニットにおけるこれらの利得及びオフセットパラメータを変えることができ、このようにして、深さ又は視差マップストリームのコンテンツを変更することを要せずに、知覚される深さを変えることができる。
既知の自動立体視ディスプレイでは、これらのパラメータは、制御パネルを通してユーザによって設定されることができる。図4は、ディスプレイが表示される対象物の視位置を変えるように、これらのパラメータが時間にわたってどのように変更されることができるかを示す。
垂直軸には相対利得及び深さが表示され、一方、水平軸には時間が表示される。ユーザが表示モードを変更した結果として、二次元と三次元との間の遷移が検出されたときにプレーヤーによって自動的に、又は、特別なAPIを通してディスク上のJavaアプリケーションによって、時点t1において二次元から三次元への変化が開始される。この最後のアプローチは、本出願において後で説明されるように、再生機器のための新たなAPIの定義を必要とするが、コンテンツ作成者にこれらの設定の動的な制御を提供するという利点がある。
ディスプレイが三次元モードで機能する場合、パラメータの変更は、最終的な所望の値へと有限の期間にわたって行われる。時点t3とt4との間に、三次元から二次元への変化が示される。図4から分かるように、利得値は0と63との間で変化する(63は深さの最大量である)。オフセットは0から255で変化することができ、128はスクリーン上、0は後ろ、255は前である。
BDメディア及びBDプレーヤーの場合、そのようなシステムは、Java、特に、org.bluray.mediaパッケージを利用することが知られている。適切なAPIはorg.bluray.mediaパッケージの一部であり、以下で詳述されるjavax.media.Control クラスからメソッドを継承する。
Figure 0005575659
さらに、改善された実施の形態において、アプリケーションがこれらの設定に対する任意の変更を示すためのイベントに登録することができるような適切なインタフェースが提供される。
典型的な自動立体視ディスプレイは、三次元モードで表示するときに若干の解像度を犠牲にすることが知られている。これは、複数のビューを表示するには追加のピクセルが必要であり、ビューの数が多いほど、より多くのピクセルが必要となり、解像度が低下するからである。本発明の実施の形態によると、通常の二次元モードにおける解像度を増加させる一つのソリューションは、ディスプレイの前でレンチキュラレンズのシートをオン/オフすることができる切り替え可能なディスプレイを使用することである。この切り替えは若干の時間(秒)を要するが、ユーザにとって邪魔にはならない。本発明の他の実施の形態によると、レンダリングユニットがビューの数を徐々に増加又は減少させ、それによって、同時に、解像度を徐々に変更することを可能にするシステムが追加される。このシステムは、レンチキュラレンズのオン-オフの切り替えと連動することができる。
現行の最高水準の技術である自動立体視ディスプレイは、集積されたレンダリングユニットを持ち、レンダリングパラメータを変更するためのヘッダ中に埋め込まれたコマンドを用いることが知られている。あるいは、本発明の一つの実施例によると、再生装置は、既知のi2cプロトコルを用いてDVI/HDMIバス上で、三次元ディスプレイ中に設けられるレンダリングユニットに、対応するレンダリングパラメータを送信することを可能にされる。
したがって、本発明によれば、既知のレンダリングパラメータセットは、ビューの数を設定するための付加パラメータを含むように拡張される。既知のものに対するこれらの付加パラメータは、二次元から三次元への（及びその逆の）「シームレスな」遷移を保証するためにプレーヤーによって用いられることができる視差及びオフセットパラメータであることができる。
代わりの実施の形態では、シームレスな遷移は、レンダリングユニット自体によって制御される。この場合、付加パラメータは、二次元から三次元へと徐々に切り替えるための、再生装置からディスプレイ中のレンダリングユニットへのコマンドに対応し、おそらく、遷移をコンテンツに同調させるように、遷移が発生すべき時間を示す付加タイミングパラメータを伴う。好ましくは、コンテンツ作成者によって記述されるディスク上のJavaアプリケーションが全ての再生装置上の遷移パラメータを制御することができるように、これらのパラメータは規格化される。レンズオン/オフの切り替えの間の遷移がディスプレイによってしっかりと制御されることができるので、この代わりの実施の形態はより有利である。
切り替え可能なディスプレイにおける二次元から三次元へのシームレスな遷移をサポートするためのBDシステムの場合における適切なアプリケーションインタフェース(API)は、以下のように定められることができる。
Figure 0005575659
ここで、
dtime = 遷移の継続時間(時間単位又はフレームの数)
framenumber = ディスプレイが遷移を開始すべきフレーム
である。
上述のようにAPIを定義した次に、遷移パラメータがディスプレイに伝達される必要がある。遷移パラメータは、好ましくは、遷移時間パラメータと、モード切り替えがAPIメソッドのフレーム番号によって示されるフレームのヘッダ中に埋め込まれているべきであることを示すコマンドとを有する。あるいは、ヘッダの代わりに、遷移パラメータは、www.vesa.orgで入手可能であるEnhanced Display Data Channel Standard, Version 1 (1999) VESAから知られているi2cコマンドを用いて送信されることができる。HDMI又はwww.vesa.orgで入手可能であるDisplay Port Standard v1.1 March 2007 VESAの二次元ビデオフォーマット規格から知られている他のコマンドも利用可能である。
遷移継続時間パラメータは、ディスク上のビデオコンテンツとのモード間の遷移の位置合わせを可能にするために有利である。シームレスで自然な経験を提供するために、好ましくは、ビデオコンテンツは、遷移の境界がシーンの合間であり、シーンの途中ではないように作成される。加えて、最適な経験を提供するために、ディスクは、遷移が動画経験を中断せずに自然に発生するように作成されるコンテンツの区切りを含むことができる。これは、視差(深さ効果)が徐々に増加し、シーン中の動きが遷移セグメントの間は最小限であることを意味する。好ましくは、他の奥行の手がかり(例えば線形遠近法、遮蔽、ライティング)は、遷移の前と間に、わずかにのみ用いられ、そしてそれらは、コンテンツの三次元パートによって生成される視差による深さの印象と一致する。
漸進的な遷移を提供することに加えて、アーチファクト又は黒いフレームが発生しないことも好ましい。これらが動画経験を妨害する場合があるからである。これを達成するために、いくつかのステップが行われる。
はじめに、再生が二次元と三次元との間で切り替えられるときに、全てのストリームの復号化のためのバッファが、アンダーフロー又はオーバーフローしないことが好ましい。復号化は連続的でなければならない。Blu-rayディスクシステムにおいて、二次元ストリームがビデオパラメータ及びディスク上のアロケーションに関して満たさなければならない条件が定められていることが知られている。例えば、ビデオのセグメント間のシームレスな接続のために、解像度及びフレームレートなどは、セグメント間で同じであるべきである。さらに、セグメントは、読み出しの間に復号化バッファが空にならない(黒いフレームを生じさせない)ようにディスク上に割り当てられるべきである。先述されたような「深さ」ベースフォーマット又はステレオフォーマットに対して、同じ規則が、二次元の場合に関して適用されることができる。これらのフォーマットは、付加ストリームが、トランスポートストリーム中に多重化され、復号されて、同時に示されることを意味する。補助ストリーム輸送方法を用いる三次元ストリームが、MPEG ISO/IEC JTC1/SC29/WG11; WD 1.0 of ISO/IEC 23002-3 Auxiliary Video Dataにおいて定められた。したがって、そのような付加ストリームは、BDシステムの場合において、ビットレート及びディスク上のアロケーションに関して二次元ストリームに対して知られている要求と同じ要求を自動的に満たす。
いくつかの追加の事項が考慮されなければならない。本発明の実施の形態において、付加三次元情報は、BDにおいてセカンダリビデオストリームとして運ばれ、この付加三次元情報は、Picture-in-Picture(PIP)ストリームにおいて示されることができる。発明者によって行われた実験は、本発明によるこのソリューションが機能し、そしてPIP機構の活性化が若干の遅延を引き起こす場合があることを示した。発明者は、遅延の起源が、セカンダリビデオ及び/又はプライマリビデオがスケーリングされるようなシステムの再構成に関連があることを見出した。この再構成プロセスの間、システムは、黒いフレーム又は歪んだ画像のようなアーチファクトを示す場合がある。この問題を解決するために、発明者は、本発明の改善された実施の形態を考え出した。この改善された実施の形態は、セカンダリビデオとのプライマリビデオのインタリーブを用い、そしてさらに輝度キーイングを用いる。図3は、本発明のこの実施例がどのように機能するかという例を示す。図3において、効果が画像中で認識できるように、深さマップデータのラインは、現実と比べて大きく、誇張されている。
図5aにおいて、バックグラウンド又は遮蔽データを運ぶ若干の付加情報(グレー領域)を有する深さマップ画像が示される。実際には、付加情報の量は非常に小さい場合がある。「深さ」データの解像度は、二次元の解像度の４分の１未満である場合があり、WO200213141(この文献は本明細書に参照として組み込まれる)に開示されるCADEのような技術が用いられる改善された実施の形態ではさらに低い。図5bにおいて、「深さ」データは、「深さ」マップデータの全体のサイズが二次元ビデオのサイズと同じであるように、黒いラインでインタリーブされる。これは、再生装置において実行されることができるが、このフォーマットでディスク上に提供されることができる。この形式で、黒いラインによってインタリーブされた「深さ」データは、二次元ビデオ上にオーバーレイされる。そして、黒いラインを透過させるために輝度キーイングが実行され、それにより、バックグラウンドの二次元ビデオの大部分が現れる。これは図5dに示される。
図5に示されるように、二次元ビデオの一部は「深さ」データによって覆われる。しかしながら、深さデータの解像度は小さい場合があるので、垂直解像度におけるこの損失は非常に小さい。さらに、黒いラインによるインタリーブは、ほとんどの場合、二次元ビデオバックグラウンドの最上部及び底のラインがカバーされるように実行されることができる。自動立体視ディスプレイのために用いられる場合、これはそれほど問題ではない。三次元モードのディスプレイは、必要とされる付加ビューを生成することがディスプレイ解像度を犠牲にするので、full HDの解像度を示すことができないからである。
本発明のこの実施の形態によれば、関連するBlu-rayディスクプレイリストは、セカンダリビデオストリームがpicture-in-pictureストリームとして処理され、輝度キーイングが適用されて、好ましくは、upper_limit_luma_key値がゼロに設定されるように構成される。
その代りに、付加エントリーがBDシステムにおいて用いられる拡張データに追加され、三次元ビデオストリームのために定められる付加エントリーは、PIPメタデータ又は三次元メタデータを可能にする。三次元PIPメタデータ及び三次元メタデータの両方の文法は、いくつかの命名規則と厳密に同じであることができる。三次元及びPIPの両方に対して、全てのエントリーが必要とされる。
最終的に、上述の本発明の例示的な実施の形態が、光ディスクからの情報の再生のための再生装置を参照して実行された。情報のソースは重要ではないことが留意されるべきであり、それは、光メディア、ハードディスク又はソリッドステートメモリのような記録メディア上でローカルに提供されることができ、あるいは、インターネットを含む有線又は無線伝送システムを介した放送によって受信されることができる。本発明は、とりわけハードディスクレコーダ、セットトップボックス(STB)及びデジタル(衛星/地上/ケーブル)受信機を含む、ビデオ情報の再生のための任意の装置で実現されることができる。
本発明は以下のように要約されることができる。本発明は、ビデオ情報及び関連再生情報を有する信号に関し、ビデオ情報及び関連再生情報は再生フォーマットに従って構成され、ビデオ情報は、二次元(2D)表示のためのプライマリビデオストリーム及び三次元(3D)表示を可能にするための付加情報ストリームを有し、関連再生情報は、可能な表示のタイプを示す表示情報を有する。本発明はさらに、そのような信号の再生のための方法及び装置に関し、当該方法は、ビデオ情報及び関連再生情報を受け取り、受け取られたビデオ情報に対して二次元(2D)表示及び三次元(3D)表示の両方が可能かを決定するために表示情報を処理し、ビデオ情報が二次元(2D)で表示されるべきか又は三次元(3D)で表示されるべきかを示す再生装置の再生設定を決定し、再生装置の再生設定に従って、プライマリビデオストリームか又はプライマリビデオストリーム及び付加情報ストリームを表示のために処理する。
上述の実施の形態は、本発明を説明するためのものであって、制限するものではないことが留意されるべきである。当業者は、添付の請求の範囲の要旨を逸脱しない範囲で多くの他の実施例を設計することができる。請求項において、括弧間に配置された参照符号は、請求項を制限するものとして解釈されてはならない。請求の範囲において、「有する」及び「含む」などの動詞並びにそれらの活用形の使用は、挙げられたもの以外の要素又はステップの存在を除外しない。単数形で表された要素は、そのような要素が複数存在することを除外しない。本発明は、いくつかの別個の素子から成るハードウェアによって、そして適切にプログラムされたコンピュータによって実現されることができる。コンピュータプログラムは、光学ストレージのような適切な媒体で格納/配布されるか又はハードウェア部品と共に供給されることができるが、他の形式で配布されることもできる(例えば、インターネット又は有線若しくは無線遠隔通信システムを介して配布される)。いくつかの手段を列挙しているシステム/装置/機器の請求項において、これらの手段のいくつかは、ハードウェア又はソフトウェアの全く同一のアイテムによって実施されることができる。特定の手段が相互に異なる従属請求項中に列挙されているからといって、利益を得るためにこれらの手段の組み合わせを用いることができないことは意味しない。

Claims (18)

  1. 二次元表示及び三次元表示の両方に適したビデオ情報の再生方法であって、前記ビデオ情報及び関連再生情報は再生フォーマットに従って構成され、前記ビデオ情報は、二次元表示のためのプライマリビデオストリーム及び三次元表示を可能にするための付加情報ストリームを有し、前記関連再生情報は、存在するビデオストリームのタイプを示す表示情報を有し、当該方法は、
    前記ビデオ情報及び前記関連再生情報を受け取り、
    受け取られたビデオ情報に対して、二次元表示及び三次元表示の両方が可能であることを決定するために、前記表示情報を処理し、
    前記ビデオ情報が二次元で表示されるべきか又は三次元で表示されるべきかを示す再生装置の再生設定を決定し、
    前記再生装置の前記再生設定に従って、前記プライマリビデオストリームか又は前記プライマリビデオストリーム及び前記付加情報ストリームを表示のために処理し、
    各々のストリームがアイテムを有し、前記関連再生情報がプレイリストを有し、各々のプレイリストが再生されるべきアイテムのシーケンスを示し、少なくとも一つのプレイリストが、再生されるべき前記プライマリビデオストリームのビデオアイテムのメインシーケンスを示す主表示経路及び再生されるべき補助シーケンスを示す補助表示経路を有し、前記補助シーケンスは、前記プライマリビデオストリームからのビデオアイテム及び前記付加情報ストリームからの対応する情報アイテムを有することを特徴とする、方法。
  2. 二次元表示から三次元表示へ又は三次元表示から二次元表示へ前記再生設定を切り替えるための要求を受け取り、
    二次元表示から三次元表示へ又は三次元表示から二次元表示へシームレスに切り替えることを特徴とする、請求項１に記載の方法。
  3. シームレスな切り替えの継続時間を制御することを特徴とする請求項２に記載の方法。
  4. 再生の間の予め定められた時点で前記切り替えを実行することを特徴とする請求項３に記載の方法。
  5. シームレスな切り替えが、深さ情報の値を制御することを含むことを特徴とする請求項２に記載の方法。
  6. 前記再生フォーマットがDVDビデオ再生フォーマットに実質的に対応し、前記再生情報が、ビデオ属性情報(Video Attribute Information)を含むビデオタイトルセット情報(Video Title Set Information: VTSI)を有し、前記ビデオ属性情報が、対応するビデオタイトル情報が三次元表示を可能にするための前記付加情報ストリームを含むことを示すビデオ属性を含むことを特徴とする、請求項１に記載の方法。
  7. 二次元表示及び三次元表示の両方に適したビデオ情報の再生のための再生装置であって、当該装置は、
    再生フォーマットに従って構成されるビデオ情報及び関連再生情報を受け取るための手段を有し、前記ビデオ情報は、二次元表示のためのプライマリビデオストリーム及び三次元表示を可能にするための付加情報ストリームを有し、前記関連再生情報は、存在するビデオストリームのタイプを示す表示情報を有し、当該装置はさらに、
    受け取られたビデオ情報に対して、二次元表示及び三次元表示の両方が可能であることを決定するために、前記表示情報を処理するための手段、
    前記ビデオ情報が二次元で表示されるべきか又は三次元で表示されるべきかを示す再生装置の再生設定を記憶するための手段、
    再生装置の記憶された前記再生設定に従って、前記プライマリビデオストリームか又は前記プライマリビデオストリーム及び前記付加情報ストリームを表示のために処理するための手段、
    を有し、
    各々のストリームがアイテムを有し、前記関連再生情報がプレイリストを有し、各々のプレイリストが再生されるべきアイテムのシーケンスを示し、少なくとも一つのプレイリストが、再生されるべき前記プライマリビデオストリームのビデオアイテムのメインシーケンスを示す主表示経路及び再生されるべき補助シーケンスを示す補助表示経路を有し、前記補助シーケンスは、前記プライマリビデオストリームからのビデオアイテム及び前記付加情報ストリームからの対応する情報アイテムを有することを特徴とする、装置。
  8. 前記再生フォーマットがBlu-ray再生フォーマットに対応する請求項７に記載の装置。
  9. 前記再生フォーマットがDVDビデオ再生フォーマットに対応し、前記再生情報が、ビデオ属性情報(Video Attribute Information)を含むビデオタイトルセット情報(Video Title Set Information: VTSI)を有し、前記ビデオ属性情報が、対応するビデオタイトル情報が三次元表示を可能にするための前記付加情報ストリームを含むことを示すビデオ属性を含む、請求項７に記載の装置。
  10. 前記プライマリビデオストリーム及び前記付加情報ストリームが、多重ビデオストリーム中に一緒に多重化されるMPEGエレメンタリストリームであり、前記付加情報ストリームが、MPEG補助ストリームであることを特徴とする、請求項７から請求項９のいずれか一項に記載の装置。
  11. 再生装置の前記再生設定がユーザの入力に基づいて制御可能であることを特徴とする、請求項７から請求項９のいずれか一項に記載の装置。
  12. 再生装置の再生設定がレジスタに記憶される、請求項７から請求項９のいずれか一項に記載の装置。
  13. ビデオ情報及び関連再生情報を有する信号が記録された記録担体であって、前記ビデオ情報及び関連再生情報は再生フォーマットに従って構成され、前記ビデオ情報は二次元表示のためのプライマリビデオストリーム及び三次元表示を可能にするための付加情報ストリームを有し、前記関連再生情報は、可能な表示のタイプを示す表示情報を含み、
    各々のストリームがアイテムを有し、前記関連再生情報がプレイリストを有し、各々のプレイリストが再生されるべきアイテムのシーケンスを示し、少なくとも一つのプレイリストが、再生されるべき前記プライマリビデオストリームのビデオアイテムのメインシーケンスを示す主表示経路及び再生されるべき補助シーケンスを示す補助表示経路を有し、前記補助シーケンスは、前記プライマリビデオストリームからのビデオアイテム及び前記付加情報ストリームからの対応する情報アイテムを有することを特徴とする、記録担体。
  14. 前記再生フォーマットがBlu-ray再生フォーマットに対応する請求項１３に記載の記録担体。
  15. 前記再生フォーマットがDVDビデオ再生フォーマットに対応し、前記再生情報が、ビデオ属性情報(Video Attribute Information)を含むビデオタイトルセット情報(Video Title Set Information: VTSI)を有し、前記ビデオ属性情報が、対応するビデオタイトル情報が三次元表示を可能にするための前記付加情報ストリームを含むことを示すビデオ属性を含む、請求項１３に記載の記録担体。
  16. 前記プライマリビデオストリーム及び前記付加情報ストリームが、多重ビデオストリーム中に一緒に多重化されるMPEGエレメンタリストリームであり、前記付加情報ストリームが、MPEG補助ストリームであることを特徴とする、請求項１３から請求項１５のいずれか一項に記載の記録担体。
  17. 二次元表示及び三次元表示の両方に適したビデオ情報の再生方法であって、前記ビデオ情報及び関連再生情報は再生フォーマットに従って構成され、前記ビデオ情報は、二次元表示のためのプライマリビデオストリーム及び三次元表示を可能にするための付加情報ストリームを有し、前記関連再生情報は、存在するビデオストリームのタイプを示す表示情報を有し、当該方法は、
    前記ビデオ情報及び前記関連再生情報を受け取り、
    受け取られたビデオ情報に対して、二次元表示及び三次元表示の両方が可能であることを決定するために、前記表示情報を処理し、
    前記ビデオ情報が二次元で表示されるべきか又は三次元で表示されるべきかを示す再生装置の再生設定を決定し、
    前記再生装置の前記再生設定に従って、前記プライマリビデオストリームか又は前記プライマリビデオストリーム及び前記付加情報ストリームを表示のために処理し、前記関連再生情報がプレイリストを有し、各々のプレイリストが再生されるべきアイテムのシーケンスを示し、
    前記プライマリビデオストリームが基本ビデオトランスポートストリームであり、
    前記付加情報ストリームが三次元表示を可能にするための補助ストリームであり、
    前記プライマリビデオストリームと前記付加情報ストリームとが多重化され、
    前記プライマリビデオストリームがビデオアイテムを有し、前記付加情報ストリームが情報アイテムを有し、
    少なくとも１つのプレイリストが、再生されるべき前記プライマリビデオストリームのビデオアイテムのメインシーケンスを示す主表示経路、及び、再生されるべき補助シーケンスを示す補助表示経路を有し、
    前記補助シーケンスが、前記プライマリビデオストリームからのビデオアイテム及び前記補助ストリームからの対応する情報アイテムを有し、
    サブプレイアイテムが、前記ビデオアイテムと共に表示されるべき前記補助ストリームからの対応する情報アイテムを指す、方法。
  18. 二次元表示及び三次元表示の両方に適したビデオ情報の再生のための再生装置であって、前記ビデオ情報及び関連再生情報は再生フォーマットに従って構成され、前記ビデオ情報は、二次元表示のためのプライマリビデオストリーム及び三次元表示を可能にするための付加情報ストリームを有し、前記関連再生情報は、存在するビデオストリームのタイプを示す表示情報を有し、当該再生装置は、
    前記ビデオ情報及び前記関連再生情報を受け取る手段、
    受け取られたビデオ情報に対して、二次元表示及び三次元表示の両方が可能であることを決定するために、前記表示情報を処理する手段、
    前記ビデオ情報が二次元で表示されるべきか又は三次元で表示されるべきかを示す前記再生装置の再生設定を記憶する手段、
    前記再生装置の記憶された前記再生設定に従って、前記プライマリビデオストリームか又は前記プライマリビデオストリーム及び前記付加情報ストリームを表示のために処理する手段、
    を有し、
    前記関連再生情報がプレイリストを有し、各々のプレイリストが再生されるべきアイテムのシーケンスを示し、
    前記プライマリビデオストリームが基本ビデオトランスポートストリームであり、
    前記付加情報ストリームが三次元表示を可能にするための補助ストリームであり、
    前記プライマリビデオストリームと前記付加情報ストリームとが多重化され、
    前記プライマリビデオストリームがビデオアイテムを有し、前記付加情報ストリームが情報アイテムを有し、
    少なくとも１つのプレイリストが、再生されるべき前記プライマリビデオストリームのビデオアイテムのメインシーケンスを示す主表示経路、及び、再生されるべき補助シーケンスを示す補助表示経路を有し、
    前記補助シーケンスが、前記プライマリビデオストリームからのビデオアイテム及び前記補助ストリームからの対応する情報アイテムを有し、
    サブプレイアイテムが、前記ビデオアイテムと共に表示されるべき前記補助ストリームからの対応する情報アイテムを指す、再生装置。
JP2010537576A 2007-12-14 2008-12-10 ビデオ再生のための三次元モード選択メカニズム Active JP5575659B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP07123190.6 2007-12-14
EP07123190 2007-12-14
PCT/IB2008/055185 WO2009077929A1 (en) 2007-12-14 2008-12-10 3d mode selection mechanism for video playback

Publications (2)

Publication Number Publication Date
JP2011510527A JP2011510527A (ja) 2011-03-31
JP5575659B2 true JP5575659B2 (ja) 2014-08-20

Family

ID=40456522

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010537576A Active JP5575659B2 (ja) 2007-12-14 2008-12-10 ビデオ再生のための三次元モード選択メカニズム

Country Status (9)

Country Link
US (3) US8660402B2 (ja)
EP (1) EP2232885A1 (ja)
JP (1) JP5575659B2 (ja)
KR (1) KR20100102153A (ja)
CN (1) CN101897195B (ja)
BR (1) BRPI0820739B1 (ja)
RU (1) RU2506708C2 (ja)
TW (1) TWI528825B (ja)
WO (1) WO2009077929A1 (ja)

Families Citing this family (85)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009077929A1 (en) 2007-12-14 2009-06-25 Koninklijke Philips Electronics N.V. 3d mode selection mechanism for video playback
KR101651441B1 (ko) * 2008-10-28 2016-08-26 코닌클리케 필립스 엔.브이. ３차원 디스플레이 시스템
WO2010064472A1 (ja) 2008-12-01 2010-06-10 シャープ株式会社 コンテンツ再生装置、再生方法、プログラム及び記録媒体
US8284236B2 (en) * 2009-02-19 2012-10-09 Sony Corporation Preventing interference between primary and secondary content in a stereoscopic display
EP2399394B1 (en) * 2009-02-19 2020-09-30 InterDigital Madison Patent Holdings 3d video formats
JP4919122B2 (ja) * 2009-04-03 2012-04-18 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP2010245970A (ja) * 2009-04-08 2010-10-28 Sony Corp 再生装置、再生方法、およびプログラム
JP4825321B2 (ja) * 2009-05-25 2011-11-30 パナソニック株式会社 再生装置、再生方法、プログラム
WO2010143820A2 (ko) * 2009-06-08 2010-12-16 엘지전자 주식회사 3차원 pip 영상 제공 장치 및 그 방법
JP5463747B2 (ja) * 2009-06-15 2014-04-09 ソニー株式会社 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
WO2010150976A2 (en) 2009-06-23 2010-12-29 Lg Electronics Inc. Receiving system and method of providing 3d image
KR20120039703A (ko) * 2009-07-07 2012-04-25 엘지전자 주식회사 3차원 사용자 인터페이스 출력 방법
KR20110005205A (ko) * 2009-07-09 2011-01-17 삼성전자주식회사 디스플레이 장치의 화면 사이즈를 이용한 신호 처리 방법 및 장치
JP5336285B2 (ja) * 2009-07-21 2013-11-06 富士フイルム株式会社 立体画像表示装置、方法およびプログラムならびに撮像装置
WO2011013036A1 (en) 2009-07-27 2011-02-03 Koninklijke Philips Electronics N.V. Switching between 3d video and 2d video
JP5604827B2 (ja) * 2009-08-21 2014-10-15 ソニー株式会社 送信装置、受信装置、プログラム、及び通信システム
US10063812B2 (en) * 2009-10-07 2018-08-28 DISH Technologies L.L.C. Systems and methods for media format transcoding
JP5540746B2 (ja) * 2009-11-20 2014-07-02 ソニー株式会社 受信装置、送信装置、通信システム、受信装置の制御方法、及びプログラム
CN102696230A (zh) * 2010-01-07 2012-09-26 汤姆森特许公司 为视频内容显示提供的方法和装置
JP5450118B2 (ja) 2010-01-14 2014-03-26 ソニー株式会社 映像伝送装置、映像表示装置、映像表示システム、映像伝送方法及びコンピュータプログラム
US9491432B2 (en) * 2010-01-27 2016-11-08 Mediatek Inc. Video processing apparatus for generating video output satisfying display capability of display device according to video input and related method thereof
JP5894537B2 (ja) 2010-02-09 2016-03-30 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． ３ｄビデオ・フォーマット検出
US9030536B2 (en) 2010-06-04 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for presenting media content
CN102948154B (zh) * 2010-06-23 2015-01-21 松下电器产业株式会社 内容分发系统、再现装置、分发服务器、再现方法及分发方法
JP5882896B2 (ja) * 2010-06-23 2016-03-09 パナソニック株式会社 コンテンツ配信システム、再生装置、配信サーバ、再生方法及び配信方法
IT1401731B1 (it) * 2010-06-28 2013-08-02 Sisvel Technology Srl Metodo per la decodifica 2d-compatibile di flussi video stereoscopici
US9787974B2 (en) 2010-06-30 2017-10-10 At&T Intellectual Property I, L.P. Method and apparatus for delivering media content
US8640182B2 (en) 2010-06-30 2014-01-28 At&T Intellectual Property I, L.P. Method for detecting a viewing apparatus
US9112310B2 (en) 2010-06-30 2015-08-18 Apple Inc. Spark gap for high-speed cable connectors
US8327536B2 (en) 2010-06-30 2012-12-11 Apple Inc. Method of manufacturing high-speed connector inserts and cables
US8593574B2 (en) * 2010-06-30 2013-11-26 At&T Intellectual Property I, L.P. Apparatus and method for providing dimensional media content based on detected display capability
CN202308695U (zh) 2010-06-30 2012-07-04 苹果公司 电缆装置
US8918831B2 (en) 2010-07-06 2014-12-23 At&T Intellectual Property I, Lp Method and apparatus for managing a presentation of media content
US9049426B2 (en) 2010-07-07 2015-06-02 At&T Intellectual Property I, Lp Apparatus and method for distributing three dimensional media content
US9560406B2 (en) 2010-07-20 2017-01-31 At&T Intellectual Property I, L.P. Method and apparatus for adapting a presentation of media content
US9032470B2 (en) 2010-07-20 2015-05-12 At&T Intellectual Property I, Lp Apparatus for adapting a presentation of media content according to a position of a viewing apparatus
US9232274B2 (en) 2010-07-20 2016-01-05 At&T Intellectual Property I, L.P. Apparatus for adapting a presentation of media content to a requesting device
US8446461B2 (en) * 2010-07-23 2013-05-21 Superd Co. Ltd. Three-dimensional (3D) display method and system
US9237328B2 (en) * 2010-07-27 2016-01-12 Electronics And Telecommunications Research Institute 3D image processing apparatus and method thereof using connection status and glass type selection icons
US8994716B2 (en) 2010-08-02 2015-03-31 At&T Intellectual Property I, Lp Apparatus and method for providing media content
JP2012039476A (ja) * 2010-08-09 2012-02-23 Sony Corp 送受信装置および送受信方法
US8438502B2 (en) 2010-08-25 2013-05-07 At&T Intellectual Property I, L.P. Apparatus for controlling three-dimensional images
US20130169543A1 (en) * 2010-09-20 2013-07-04 Mediatek Singapore Pte. Ltd. Rendering Apparatuses, Display System and Methods for Rendering Multimedia Data Objects with a Function to Avoid Eye Fatigue
US8947511B2 (en) 2010-10-01 2015-02-03 At&T Intellectual Property I, L.P. Apparatus and method for presenting three-dimensional media content
US20120113218A1 (en) * 2010-10-01 2012-05-10 Manabu Sasamoto Receiving apparatus and receiving method
US8537201B2 (en) * 2010-10-18 2013-09-17 Silicon Image, Inc. Combining video data streams of differing dimensionality for concurrent display
JP5699566B2 (ja) * 2010-11-29 2015-04-15 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
EP2464126A1 (en) * 2010-12-10 2012-06-13 Advanced Digital Broadcast S.A. A system and a method for transforming a 3D video sequence to a 2D video sequence
US8860785B2 (en) * 2010-12-17 2014-10-14 Microsoft Corporation Stereo 3D video support in computing devices
EP2472878A1 (en) * 2010-12-31 2012-07-04 Advanced Digital Broadcast S.A. Method and apparatus for combining images of a graphic user interface with a stereoscopic video
US8966134B2 (en) 2011-02-23 2015-02-24 Apple Inc. Cross-over and bypass configurations for high-speed data transmission
WO2012123982A1 (ja) * 2011-03-11 2012-09-20 日立コンシューマエレクトロニクス株式会社 記録装置/方法/媒体、再生装置/方法
US9445046B2 (en) 2011-06-24 2016-09-13 At&T Intellectual Property I, L.P. Apparatus and method for presenting media content with telepresence
US8947497B2 (en) 2011-06-24 2015-02-03 At&T Intellectual Property I, Lp Apparatus and method for managing telepresence sessions
US9030522B2 (en) 2011-06-24 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for providing media content
US9602766B2 (en) 2011-06-24 2017-03-21 At&T Intellectual Property I, L.P. Apparatus and method for presenting three dimensional objects with telepresence
US8587635B2 (en) 2011-07-15 2013-11-19 At&T Intellectual Property I, L.P. Apparatus and method for providing media services with telepresence
JP5100875B1 (ja) * 2011-08-31 2012-12-19 株式会社東芝 視域調整装置、映像処理装置および視域調整方法
US8687470B2 (en) 2011-10-24 2014-04-01 Lsi Corporation Optical disk playback device with three-dimensional playback functionality
BR112013017322A2 (pt) 2011-11-11 2017-03-01 Sony Corp dispositivo e método de transmissão, e, método de recepção
JP6192902B2 (ja) * 2011-11-11 2017-09-06 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
US10275924B2 (en) 2011-12-26 2019-04-30 Intel Corporation Techniques for managing three-dimensional graphics display modes
KR20130076650A (ko) * 2011-12-28 2013-07-08 삼성전자주식회사 영상처리장치 및 그 제어 방법
US9106894B1 (en) * 2012-02-07 2015-08-11 Google Inc. Detection of 3-D videos
TWI476618B (zh) * 2012-03-29 2015-03-11 Chiou Yeong Wu 依據圖形文字（國字）產生地標建築或雕塑
KR20150008408A (ko) * 2012-04-13 2015-01-22 코닌클리케 필립스 엔.브이. 깊이 시그널링 데이터
CN102724536B (zh) * 2012-05-31 2015-08-19 深圳Tcl新技术有限公司 显示3d播放模式的方法和装置
US10129324B2 (en) * 2012-07-03 2018-11-13 Google Llc Contextual, two way remote control
TWI510055B (zh) * 2012-11-13 2015-11-21 Realtek Semiconductor Corp 立體影像格式轉換器及其立體影像格式轉換方法
KR101290409B1 (ko) 2013-01-20 2013-07-26 김용현 고화질 디지털 영상 수득을 위한 3모드 피드백 방법
KR101430985B1 (ko) * 2013-02-20 2014-09-18 주식회사 카몬 2d-3d 복합 차원 콘텐츠 파일을 사용하는 복합 차원 콘텐츠 서비스 제공 시스템, 그 서비스 제공 방법
WO2014165744A1 (en) * 2013-04-05 2014-10-09 Koninklijke Philips N.V. Re-targeting a three-dimensional image signal
KR20170009525A (ko) 2015-07-17 2017-01-25 부산대학교 산학협력단 미더덕껍질과 천연고분자를 이용한 마스크팩 시트의 제조방법
US12063380B2 (en) 2015-09-09 2024-08-13 Vantrix Corporation Method and system for panoramic multimedia streaming enabling view-region selection
US11108670B2 (en) 2015-09-09 2021-08-31 Vantrix Corporation Streaming network adapted to content selection
US10694249B2 (en) * 2015-09-09 2020-06-23 Vantrix Corporation Method and system for selective content processing based on a panoramic camera and a virtual-reality headset
US10419770B2 (en) 2015-09-09 2019-09-17 Vantrix Corporation Method and system for panoramic multimedia streaming
US11287653B2 (en) 2015-09-09 2022-03-29 Vantrix Corporation Method and system for selective content processing based on a panoramic camera and a virtual-reality headset
JP6857251B2 (ja) * 2016-10-25 2021-04-14 イーサー・メディア・インコーポレーテッド ビデオ・コンテンツ切り替えおよび同期システム、ならびに複数のビデオ・フォーマット間における切り替え方法
US11240567B2 (en) 2016-10-25 2022-02-01 Aether Media, Inc. Video content switching and synchronization system and method for switching between multiple video formats
CN106791892B (zh) * 2016-11-10 2020-05-12 广州华多网络科技有限公司 一种轮麦直播的方法、装置和系统
TWI599214B (zh) * 2016-12-29 2017-09-11 三立電視股份有限公司 播放全景影像的切換系統與切換方法
CN110636360A (zh) * 2018-05-31 2019-12-31 晨星半导体股份有限公司 显示设备及其图像处理方法
WO2021085130A1 (ja) * 2019-10-28 2021-05-06 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
EP4072148A1 (en) * 2021-04-07 2022-10-12 Idomoo Ltd A system and method to adapting video size

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5477222A (en) 1993-05-04 1995-12-19 U.S. Philips Corporation Device for encoding/decoding N-bit source words into corresponding M-bit channel words, and vice versa
RO119260B1 (ro) 1994-02-15 2004-06-30 Philipsáelectronicsán.V. Suport de înregistrare, metodă de realizare a acestuia, dispozitiv de înregistrare şi dispozitiv de citire a suportului de înregistrare
DE69736062T2 (de) * 1996-02-28 2007-01-11 Matsushita Electric Industrial Co., Ltd., Kadoma Optische Platte mit verschachtelt aufgezeichneten Digitalvideo-Datenströmen, sowie Vorrichtungen und Verfahren zur Aufzeichnung auf und Wiedergabe von der optischen Platte
JP3231618B2 (ja) * 1996-04-23 2001-11-26 日本電気株式会社 ３次元画像符号化復号方式
US6269338B1 (en) 1996-10-10 2001-07-31 U.S. Philips Corporation Data compression and expansion of an audio signal
GB9623682D0 (en) 1996-11-14 1997-01-08 Philips Electronics Nv Autostereoscopic display apparatus
EP2175659B1 (en) 1996-12-04 2012-11-14 Panasonic Corporation Optical disk for high resolution and three-dimensional video recording, optical disk reproduction apparatus, and optical disk recording apparatus
JP4149037B2 (ja) * 1998-06-04 2008-09-10 オリンパス株式会社 映像システム
US7035451B2 (en) 2000-08-09 2006-04-25 Dynamic Digital Depth Research Pty Ltd. Image conversion and encoding techniques
JP3841630B2 (ja) 2000-08-29 2006-11-01 オリンパス株式会社 画像取り扱い装置
KR101016973B1 (ko) * 2001-10-02 2011-02-25 코닌클리케 필립스 일렉트로닉스 엔.브이. 디지털 정보신호의 기록 방법 및 장치
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
US20040027267A1 (en) 2002-03-22 2004-02-12 Rousso Armand M. 3D entertainment system
AU2003281138A1 (en) 2002-07-16 2004-02-02 Electronics And Telecommunications Research Institute Apparatus and method for adapting 2d and 3d stereoscopic video signal
EP1408505A1 (en) * 2002-10-11 2004-04-14 Deutsche Thomson-Brandt Gmbh Method and apparatus for synchronizing data streams containing audio, video and/or other data
EP1431919B1 (en) * 2002-12-05 2010-03-03 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding three-dimensional object data by using octrees
US9036984B2 (en) 2003-03-07 2015-05-19 Samsung Electronics Co., Ltd. Information storage medium containing multi-path data, and storage apparatus and player thereof
JP4121888B2 (ja) 2003-04-28 2008-07-23 シャープ株式会社 コンテンツ表示装置およびコンテンツ表示プログラム
WO2005079078A1 (ja) * 2004-02-17 2005-08-25 Seijiro Tomita 立体映像記録・再生方法並びにこれを表示する立体映像表示装置
JP2006319690A (ja) * 2005-05-13 2006-11-24 Hitachi Ltd 動画像符号化装置
JP4204003B2 (ja) 2005-11-10 2009-01-07 パイオニア株式会社 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造
US7586495B2 (en) 2006-12-29 2009-09-08 Intel Corporation Rendering multiple clear rectangles using a pre-rendered depth buffer
WO2009077929A1 (en) * 2007-12-14 2009-06-25 Koninklijke Philips Electronics N.V. 3d mode selection mechanism for video playback

Also Published As

Publication number Publication date
US9338428B2 (en) 2016-05-10
RU2010129059A (ru) 2012-01-20
US9219904B2 (en) 2015-12-22
KR20100102153A (ko) 2010-09-20
US20100303442A1 (en) 2010-12-02
TWI528825B (zh) 2016-04-01
BRPI0820739B1 (pt) 2020-10-20
WO2009077929A1 (en) 2009-06-25
US20140294359A1 (en) 2014-10-02
JP2011510527A (ja) 2011-03-31
CN101897195A (zh) 2010-11-24
US8660402B2 (en) 2014-02-25
US20150334383A1 (en) 2015-11-19
TW200935903A (en) 2009-08-16
EP2232885A1 (en) 2010-09-29
RU2506708C2 (ru) 2014-02-10
BRPI0820739A2 (pt) 2015-06-16
CN101897195B (zh) 2013-03-06

Similar Documents

Publication Publication Date Title
JP5575659B2 (ja) ビデオ再生のための三次元モード選択メカニズム
AU2009205250B2 (en) Recording medium on which 3D video is recorded, recording medium for recording 3D video, and reproducing device and method for reproducing 3D video
JP5859309B2 (ja) ３ｄビデオ及び補助データの組み合わせ
JP4588120B2 (ja) 再生装置、記録方法、記録媒体再生システム
JP5647243B2 (ja) ３ｄビデオと２ｄビデオとの間のスイッチング
JP5829604B2 (ja) ３ｄトリックプレイのためのエントリー・ポイント
WO2009083863A1 (en) Playback and overlay of 3d graphics onto 3d video
EP2320667A1 (en) Combining 3D video auxiliary data

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111207

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130711

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130718

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20131018

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20131025

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140501

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140603

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140702

R150 Certificate of patent or registration of utility model

Ref document number: 5575659

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250