WO2005020591A1

WO2005020591A1 - 立体映像再生装置および立体映像再生方法

Info

Publication number: WO2005020591A1
Application number: PCT/JP2004/010203
Authority: WO
Inventors: Ryuji Kitaura; Kazuto Ohhara; Toshio Nomura; Naoki Ishihara
Original assignee: Sharp Kabushiki Kaisha
Priority date: 2003-08-26
Filing date: 2004-07-16
Publication date: 2005-03-03
Also published as: EP1662809A1; CN1864415A; JP2005073049A; CN1864415B; EP1662809A4; KR100820129B1; US20060290778A1; KR20060087511A; US8035683B2

Abstract

　３次元映像を種々の表示装置に表示した場合、表示装置のサイズが大きい場合、又は表示装置の解像度が低くなった場合でも、立体視可能な状態で表示を行う。　３次元映像データを表示した際の表示画面における視差量が、前記３次元映像データの表示に最適な表示装置における視差量よりも大きくなるか否かを、前記制御情報に含まれる基準情報に基づいて判定する判定手段と、視差量を変更するための画像処理を施す画像処理手段とを備えており、３次元映像を表示する上で基準となる表示装置のドット間ピッチと自端末のドット間ピッチの比に応じて、３次元映像の視差量を調節する。

Description

明細書

立体映像再生装置および立体映像再生方法

技術分野

[0001] 本発明は、 3次元映像を立体視できるように再生する立体映像再生装置および立体映像再生方法に関するものである。

背景技術

[0002] 従来、 3次元映像を表示する様々な方法が提案されてきた。その中でも一般的に用いられているのは両眼視差を利用する、 2眼式と呼ばれるものである。すなわち、両眼視差を持った左眼用映像と右眼用映像を用意し、それぞれ独立に左右の眼に投影することにより立体視を行うことができる。このような 3次元映像は、両眼視差の大きさ（以下、視差量と呼ぶ）により得られる立体感が異なる。したがって、同じ 3次元映像であっても、画面に表示される表示サイズが異なると、視差量が変化して見え方が異なってくる。つまり、同一の表示装置を用いる場合でも、映像の表示サイズを拡大した場合に視差量が大きくなる。また、異なる表示装置では、サイズの大きい表示装置で表示すると視差量が大きくなる場合がある。

[0003] 図 7はこれを示したものであり、図において wく Wである。図 7 (a)に示すように、右眼用映像 701と左眼用映像 702の立体像が位置 703に融合している場合に、図 7 (b )に示すように、映像の表示サイズが大きくなると、図 7 (a)に示す状態では wであった視差量が Wへと大きくなる。 Wが大きくなりすぎると両眼による立体視ができなくなる。画像処理により拡大する場合には、端末側の処理により拡大されるため、予め立体視できなくなる可能性について予見することができるが、表示装置の違いにより拡大される場合には、端末側では正確に把握できないという問題があった。

[0004] このような問題を解決するために、特許文献 1では、 3次元映像をそのまま供給しても好適な立体感の得られる表示装置のサイズに関する情報を、 3次元映像データと共に受け取り、ユーザ端末の表示装置においても良好な立体感が得られるように、 3 次元映像の視差量を変更する技術が開示されている。

特許文献 1 :特開平 10 - 150608号公報発明の開示

発明が解決しょうとする課題

[0005] し力しながら、前記従来の技術では、異なる表示装置の間でサイズのみが異なる場合しか考慮しておらず、解像度が異なる場合が考慮されていないという問題がある。

[0006] 図 8はサイズおよび解像度の異なる表示装置の例を示す図である。図 8 (a)に示す表示装置と図 8 (b)に示す表示装置はサイズが異なるが、解像度が同じであり、図 8 ( b)と図 8 (c)に示す表示装置は、サイズは同じだが、解像度が異なる。なお、図中の点線はドットの区切りを表している。また、図 8 (a)と図 8 (b)では映像が全画面に表示されており、図 8 (c)では、中央部分に表示されている状態を表している。

[0007] 図 8 (a)に示す表示装置と図 8 (b)に示す表示装置を比較すると、表示装置のサイズが大きくなり、解像度が変化しない場合には、表示装置のドットの間隔が広くなるため、表示される映像は空間的に引き伸ばされる。しかし、図 8 (a)に示す表示装置と図 8 (c)に示す表示装置のように、サイズに応じて解像度が高くなるような場合には、必ずしも映像の表示サイズが大きくなるとは限らない。

[0008] また、表示装置のサイズが変化しない場合であっても、解像度が低くなつた場合には、映像が拡大されて表示されるため、視差量が大きくなる。以上のように、表示装置のサイズのみを考慮するだけでは不十分である。

[0009] 本発明は、以上のような問題点を解決するためになされたものであって、その目的は、表示装置のサイズと解像度に応じて、 3次元映像を立体視可能に表示することのできる立体映像再生装置および立体映像再生方法を提供することにある。

課題を解決するための手段

[0010] 本発明に係る立体映像再生装置は、 3次元映像データの表示を制御するための制御情報に基づいて、 3次元映像を再生する立体映像再生装置であって、前記 3次元映像データを表示した際の表示画面における視差量が、前記 3次元映像データを基準となる表示装置に表示した際の表示画面における視差量よりも大きくなるか否かを、前記制御情報に基づいて判定する判定手段と、視差量を変更するための画像処理を施す画像処理手段とを備え、前記判定手段により視差量が大きくなると判定された場合に、前記画像処理手段による画像処理を行うことを特徴とする。 [0011] より好ましくは、前記画像処理手段は、前記 3次元映像データを構成する所定の視点の映像を水平方向に移動して視差量を調整する視差量調整手段であることを特徴とする。

[0012] より好ましくは、前記画像処理手段は、映像のサイズを変更するサイズ変更手段を備えることを特徴とする。

[0013] より好ましくは、前記制御情報は、前記基準となる表示装置の分解能に関する情報を含むことを特徴とする。

[0014] より好ましくは、前記制御情報は、前記基準となる表示装置において、前記 3次元映像データを表示した際の表示サイズに関する情報を含むことを特徴とする。

[0015] 本発明に係る立体映像再生装置は、 3次元映像データの表示を制御するための制御情報に基づいて、 3次元映像を再生する立体映像再生装置であって、前記制御情報に応じて、前記 3次元映像データを表示した際の表示画面における視差量が、立体視可能な値であるか否かを判定する判定手段と、前記 3次元映像データの画像サイズを変更するサイズ変更手段とを備え、前記判定手段により立体視可能な値でないと判定された場合に、前記拡大及び縮小率を制限することを特徴とする。

[0016] より好ましくは、前記制御情報は、重要な被写体の視差量を含み前記 3次元映像データの視差量を表す視差情報を含むことを特徴とする。

[0017] 本発明に係る立体映像再生方法は、 3次元映像データの表示を制御するための制御情報に基づいて、 3次元映像を再生する立体映像再生方法であって、前記 3次元映像データを表示した際の表示画面における視差量が、前記 3次元映像データを基準となる表示装置に表示した際の表示画面における視差量よりも大きくなるか否かを、前記制御情報に基づいて判定する判定ステップと、視差量を変更するための画像処理を施す画像処理ステップとを備え、前記判定ステップにより視差量が大きくなると判定された場合に、前記画像処理ステップによる画像処理を行うことを特徴とする。

[0018] より好ましくは、前記画像処理ステップは、前記 3次元映像データを構成する所定の視点の映像を水平方向に移動して視差量を調整することを特徴とする。

[0019] より好ましくは、前記画像処理ステップは、前記 3次元映像データの画像サイズを変更することを特徴とする。 [0020] より好ましくは、前記制御情報は、前記基準となる表示装置の分解能に関する情報を含むことを特徴とする。

[0021] より好ましくは、前記制御情報は、前記基準となる表示装置において、前記 3次元映像データを表示した際の表示サイズを含むことを特徴とする。

[0022] 3次元映像データの表示を制御するための制御情報に基づいて、 3次元映像を再生する立体映像再生方法であって、前記制御情報に応じて、前記 3次元映像データを表示した際の表示画面における視差量が、立体視可能な値となるように拡大及び縮小率を制限して前記 3次元映像データの画像サイズを変更することを特徴とする。

[0023] 本発明に係る立体映像再生方法は、 3次元映像データの表示を制御するための制御情報に基づいて、 3次元映像を再生する立体映像再生方法であって、前記制御情報に応じて、前記 3次元映像データを表示した際の表示画面における視差量が、立体視可能な値であるか否かを判定する判定ステップと、前記 3次元映像データの画像サイズを変更するサイズ変更ステップとを備え、前記判定ステップにより立体視可能な値でないと判定された場合に、前記拡大及び縮小率を制限することを特徴とする。

[0024] より好ましくは、前記制御情報は、重要な被写体の視差量を含み前記 3次元映像データの視差量を表す視差情報を含むことを特徴とする。

発明の効果

[0025] 本発明によれば、 1つの 3次元映像データを異なる表示装置において表示させる場合に、前記 3次元映像データを表示した際の表示画面における視差量が、前記 3次元映像データの表示に最適な表示装置における視差量よりも大きくなる場合に、前記 3次元映像の視差量を調整することにより、 3次元映像を立体視できない状態で表示してしまうといった問題を解決すことができるという有利な効果が得られる。

[0026] また、本発明によれば、表示装置の画面上に表示される視差量や映像の実際の表示サイズに応じて画像の拡大/縮小率を制限することで、視差量が限度を越えて大きくなり、立体視ができない状態で 3次元映像データを表示してしまうという問題を解決することができるという有利な効果が得られる。

図面の簡単な説明 [0027] [図 1]本発明の第 1の実施形態による立体映像再生装置の構成例を示すブロック図である。

[図 2]本発明の第 1の実施形態による立体映像再生装置の画像処理手段の構成例を示すブロック図である。

[図 3]視差バリア方式の表示装置を説明するための図である。

[図 4]本発明の第 1の実施形態による立体映像再生装置の処理の流れを示す図である。

[図 5]視差量調整処理を説明するための図である。

[図 6]本発明の第 2の実施形態による立体映像再生装置の処理の流れを示す図である。

[図 7]拡大による視差量の変化を説明する図である。

[図 8]表示装置の違いによる表示の例を示す図である。

符号の説明

[0028] 10 立体映像再生装置

11 分離手段

12 復号手段

13 制御手段 (判定手段)

14 画像処理手段

15 表示手段

141 サイズ変更手段

142 个見; ^里^整 1¾

143 表示映像生成手段

301 映像表示パネル

302 視差バリア

303 左眼

304 右眼

501 表示位置

502 表示位置 503 位置

504 表示位置

505 位置

701 右眼用映像

702 左眼用映像

703 位置

発明を実施するための最良の形態

[0029] 以下、本発明を実施するための最良の形態について、図面を参照しながら説明する。

<第 1の実施の形態 >

[0030] 図 1は本発明の第 1の実施形態による立体映像再生装置の構成例を示すブロック図である。図 1において、立体映像再生装置 10は、分離手段 11、復号手段 12、制御手段 13 (判定手段）、画像処理手段 14、表示手段 15から構成される。図示しない、分離手段 11は、記録媒体からデータを読み出す手段や、通信路を介してデータを受信する手段に接続される。

[0031] 分離手段 11は、映像データや音声データ、制御情報などの複数種類のデータを所定の方式により多重化した多重化データをそれぞれの構成要素のデータに分離する。多重化の方式としては、 MPEG—2システム規格で定められたトランスポートストリームなどが知られている。なお、分離手段 11を用いずに、映像データと制御情報を別々に入力するようにしてもよい。

[0032] 制御情報には、映像データが 3次元映像であることを示す情報や、基準情報が含まれている。基準情報とは、視差量の変化を判定するための基準となる情報であり、ここでは、 3次元映像をそのまま表示した際に、好適な立体感の得ることのできる基準ディスプレイの分解能に関する情報 (ディスプレイサイズと解像度。以下、それぞれを基準ディスプレイサイズ、基準解像度と呼ぶ）である。

[0033] 復号手段 12は、所定の方式により符号化されている映像データを復号する。一般に映像データを伝送あるいは記録する際には、データ量を圧縮するために符号化されている。動画像の符号化方式としては、 MPEG— 2ビデオ、 MPEG— 4ビデオ、 Mo tion— JPEGなどが、静止画像の符号化方式としては JPEGなどが知られている。

[0034] 制御手段 13は、制御情報等により映像データが適切に再生されるように各手段を制御する。制御手段 13には、表示手段 15のディスプレイサイズと解像度が入力されている。ディスプレイサイズや解像度が異なる表示手段 15に変更された場合における 3次元映像データのサイズの変更や視差量の調整等については、詳細に後述する。このディスプレイサイズと解像度は、表示手段 15が該立体映像再生装置に固定されている場合は予め定められている力外部の表示装置に接続される場合には、ュ一ザにより設定されることあある。

[0035] 画像処理手段 14は、映像データを構成するフレーム単位で画像処理を施す。図 2 に画像処理手段 14の構成例を示す。図 2に示すように、画像処理手段 14は映像データの拡大処理または縮小処理を行うサイズ変更手段 141と、 3次元映像の視差量を調整する視差量調整手段 142と、映像を表示手段 15の表示形式に変換するための表示映像生成手段 143から構成される。

[0036] 表示手段 15は 3次元映像を表示することのできる表示装置であり、フィールドシーケンシャル方式や視差バリア方式などの表示装置が知られている。本実施形態においては、視差バリア方式の表示装置を用いる場合について述べる力本発明はこれに限定されるものではなぐその他の方式の表示装置についても適用することができる。

[0037] 視差バリア方式について、図 3を用いて説明する。図 3 (a)は、視差バリア方式によつて視差が生じる原理を示す図であり、映像表示パネル 301の前面に視差バリア 30 2が置かれている。図 3 (b)は、視差バリア方式で表示される画面の表示形式を示す図であり、左眼用映像と右眼用映像が水平方向 1画素おきに交互に並んだ形に配置されている。

[0038] 視差バリア方式では、図 3 (b)に示すような映像を、映像表示パネル 301に表示し、同一視点の画素の間隔よりも狭い間隔でスリットを持つ視差バリア 302を介することにより、左眼用映像は左眼 303だけで、右眼用映像は右眼 304だけで観察することになり、立体視を行うことができる。

[0039] なお、図 1には図示しないが、多重化データに音声データが含まれている場合には、分離手段 11により分離されて復号処理された後、スピーカから出力される。

[0040] 以上のように構成された立体映像再生装置 10の動作について、図 4を参照しながら説明する。図 4は立体映像再生装置 10に多重化データが供給されてから、映像が表示されるまでの処理の流れを示す図である。

[0041] 分離手段 11には、映像データと音声データと制御情報とが多重化された多重化データが入力される。分離手段 11は入力された多重化データを分離する（ステップ ST 皿）。

[0042] 復号手段 12は、分離手段 11により分離された映像データが所定の符号化方式により符号化されている場合に、該符号化方式により規定されるデータの書式を解釈して、映像データを復号する（ステップ ST102)。一般に符号化された映像データには、映像データのサイズに関する情報（映像 1フレームの画素数である画像サイズ情報 )が符号化されている。復号された映像データの画像サイズ情報が制御手段 13に出力される。なお、前記映像データの画像サイズ情報は必ずしも復号手段 12から取得する必要はなぐ他の手段により別途制御手段 13に入力するようにしてもよい。映像データが符号ィ匕されていない場合には、ステップ ST102は省略される。

[0043] 制御手段 13は、分離手段 11から入力された制御情報を解釈し、このうち基準ディスプレイサイズと基準解像度から基準ドット間ピッチ DPIを算出する。さらに、表示手段 15のディスプレイサイズと解像度から表示手段 15のドット間ピッチ DP2を計算する (ステップ ST103)。

[0044] ドット間ピッチは、例えば、表示手段 15のサイズが 12. 1インチで、解像度が 1024

X 768ドットの場合、約 0. 24mmと計算される。なお、ドット間ピッチを計算する際には、両眼視差に関係するのは水平方向のみであることから、水平方向のドット間ピッチのみを考慮するようにしてもょレ、。

[0045] 次いで、サイズ変更処理の有無に応じて処理が分岐する（ステップ ST104)。サイズ変更処理を行う場合には、処理がステップ ST105に進む。サイズ変更処理を行わない場合には、処理がステップ ST107に進む。ここで、サイズ変更処理とは画像の拡大処理または縮小処理である。例えば、図 8 (a)に示した表示装置が基準ディスプレイであり、図 8 (c)に示した表示装置が表示手段 15であるとする。この場合、表示手段 15のディスプレイサイズが基準ディスプレイサイズよりも大きぐ解像度も基準解像度よりも高くなつており、基準となるディスプレイで画面全体に表示されていた映像が、表示手段 15では画面の所定部分に表示される。このような場合に、映像データを画面全体に表示するには拡大処理が行われる。また、表示手段 15の解像度が基準となるディスプレイの解像度よりも低レ、場合には、基準となるディスプレイで画面全体に表示できていた映像データ力表示部 15では表示画面に収まりきらなレ、。このような場合に、映像データを画面全体に表示するには縮小処理が行われる。サイズ変更処理の有無は内部フラグとして、予め設定されている力 \ユーザにより設定される。サィズ変更処理の有無は制御信号 Aとして画像処理手段 14に入力される。

[0046] ステップ ST105では、次の処理が行われる。まず、制御手段 13は映像データの画像サイズ情報と、表示手段 15の解像度から拡大/縮小率を計算する。ここでは水平方向について、サイズ変更処理を行う前と後の映像データの解像度の比を計算した値を拡大/縮小率とする。拡大/縮小率が画像処理手段 14に入力され、画像処理手段 14のサイズ変更手段 141によりサイズ変更処理が行われる。ステップ ST106では、制御手段 13は表示手段 15のドット間ピッチ DP2に、前記拡大/縮小率を掛けて、ドット間ピッチ DP2を補正する。これは、映像を拡大処理して表示した結果が、ドット間ピッチが大きくなつた場合と等価であると考えられるためである。

[0047] 制御手段 13は、標準ドット間ピッチ DPIと表示手段 15のドット間ピッチ DP2の大小を比較し、 3次元映像を基準ディスプレイに表示した際の視差量よりも、表示手段 15 に表示した際の視差量が大きくなるか否かを判定する（ステップ ST107)。 DP2が D P1以下の場合には、視差量が変わらなレ、か、小さくなるため補正の必要がないので、処理がステップ ST109に進む。 DP2が DPIよりも大きい場合には、視差量が大きくなるため、視差量の調整が必要であると判断され、処理がステップ ST108に進む。視差量調整処理の有無は、制御信号 Bとして画像処理手段 14に入力され、視差量調整手段 142により視差量の調整処理が行われる（ステップ ST108)。ステップ ST1 09では、制御手段 13は、映像データの種別（2次元 /3次元）を、制御信号 Cとして画像処理手段 14と表示手段 15に対して出力する。

映像データが 3次元映像である場合には、画像処理手段 14の表示画像生成手段 1 43により、表示手段 15における 3次元映像の表示形式に変換されて、表示手段 15 に表示される。

[0048] ここで、視差量調整処理について、図 5を用いて説明する。図 5はディスプレイに表示される 3次元映像を観察する様子を上方から見下ろした構図となっている。図 5 (a) において、右眼用映像の画素 R1は表示位置 501に表示され、対応する左眼用映像の画素 L1は表示位置 502に表示される。これらの画素は位置 503に結像するため、ディスプレイ面よりも奥行きをもって観察される。

[0049] 右眼用映像の画素 R1の表示位置を左に移動して位置 501から位置 504に変更した状態が図 5 (b)である。ここで、位置 503に像を結んでいた映像が位置 505に見えるようになる。位置 505は位置 503と比べて手前にあるため、表示面に近づいて見えるようになる。図示しないが、逆に画素 R1を 501よりも右に移動させると、位置 503に像を結んでレ、た映像が表示面よりも奥に見えるようになる。

[0050] 図 7 (b)で示したように、視差量が大きくなりすぎる場合には、右眼用画像を左方向に移動するか、あるいは左眼用画像を右方向に移動させて視差量を調整する。視差量とは、左眼用と右眼用の画像のそれぞれで対応する部分の水平方向の相対距離であり、例えば、図 5の右眼用画像の画素 R1の表示位置と、その対応点である左眼用画像の画素 L1の表示位置の相対距離がそれにあたる。この場合、視差量を小さく調整するには、 R1の表示位置と左眼画像の画素 L1の表示位置を、それらの相対距離が縮まる方向にそれぞれ動かしてやればよい。視差量調整値は、上記位置 501から位置 504までの移動量を指定するものであり、ドット間ピッチ DP1、 DP2の比に応じて、予め決められた値を使用する。また、左右の映像をそれぞれ反対方向に、前記視差量調整値の半分だけ移動するようにしてもよい。

[0051] ここで、上記の処理を具体例により補足する。ここで、基準ディスプレイサイズが 10 インチ、基準解像度力 ¾40 Χ 480ドットである 3次元映像を、 12. 1インチ、 1024 X 7 68ドットのディスプレイを備えた立体映像再生装置で再生する場合を考える。基準ドット間ピッチ DPIと立体映像再生装置の表示装置におけるドット間ピッチ DP2を計算すると、 DPI 0. 32mm, DP2 = 0. 24mmである。サイズ変更処理を行わない場合、 DPI >DP2であるので視差量の調整をせずに表示する。 [0052] サイズ変更処理を行う場合、全画面表示をするために拡大処理をすると、映像データを水平方向、垂直方向とも 1. 6倍にする必要がある。ドット間ピッチ DP2を補正すると、 DP2 = 0. 38となる。この場合、 DPI < DP2であるので視差量の調整を行う。

[0053] このように、表示部 15の分解能に応じて、適応的に視差量を調整することにより、視差量が限度を越えて大きくなり、立体視ができない状態で 3次元映像データを表示してしまうとレ、う問題を解決することができる。

[0054] なお、上記の実施形態では、視差量調整処理を行う際に、視差量調整値は予め定められた値を使用しているが、 3次元映像の最大視差量、または最も重要な被写体の視差量などの視差情報を制御情報に含む力、たちで受け取り、ドット間ピッチ DP1、 DP2の比に応じて前記視差情報を変更するようにしてもょレ、。

[0055] また、上記の実施形態では、基準情報として用いる基準ディスプレイの分解能に関する情報として、ディスプレイサイズと解像度が制御情報に含まれている場合について述べたが、これらの代わりに基準となるドット間ピッチや単位面積当りのドット数が制御情報に含まれる場合にも、同様にして前述の効果が得られる。または、分解能に関する情報の代わりに基準ディスプレイ上における表示サイズが制御情報に含まれていてもよぐこの場合、映像データの画像サイズ情報で割ることにより、ドット間ピッチに変更すればよい。

[0056] また、上記の実施形態では、ステップ ST108において視差量調整処理を行っている力ドット間ピッチ DP2を DPIで割った値を縮小率として、サイズ変更処理を行うようにしてもよい。映像データを縮小することにより、視差量が減少するために、前述の視差量調整処理と同様の効果が得られる。

[0057] また、上記の実施形態では、拡大/縮小率は計算により求めているが、ユーザ指定により、拡大/縮小率を指定できるようにしてもよい。この場合、指定された拡大 Z 縮小率に応じて視差量を補正するようにする。また、この場合に限らず、制御手段 13 におけるサイズ変更処理の有無や視差量調整処理の有無をユーザに通知する手段を別途設けて、ユーザに映像データが拡大または縮小されていることや、視差量が調整されている旨を表示し、合せて基準ディスプレイサイズと基準解像度を表示するようにしてもよい。こうすることで、ユーザがサイズ変更処理の有無や視差量調整処理の有無を知ることができるだけでなぐ例えば、一般に普及しているパーソナルコンビユータのように複数の解像度が選択できる場合に、解像度を切替えることにより所望の視差量で映像データを表示することができるため、利便性を向上させることができる。

ぐ第 2の実施の形態 >

[0058] さらに、本発明による別の実施形態について説明する。本実施形態における立体映像再生装置は、 3次元映像の最大視差量や最も重要な被写体の視差量などの視差情報を制御情報に含むかたちで受け取り、表示手段 15に映し出される 3次元映像の視差量を調整するものである。ここで、視差情報はドット単位でもよぐミリメートノレ単位などの絶対量でもよい。

[0059] 図 6は、このときの処理の流れを示す図である。図 6において、ステップ ST201とステツプ ST202の処理はそれぞれ、前述の実施形態におけるステップ ST101とステツプ ST102と同様であるため、ここでの説明は省略する。

[0060] 制御手段 13は、サイズ変更処理を行う前と後の映像データのサイズから拡大/縮小率を計算し (ステップ ST203)、前記視差情報に乗ずることで実際の視差量を計算する（ステップ ST204)。このとき、入力された前記視差情報がドット単位である場合には、表示手段 15におけるドット間ピッチ DPを計算し、前記視差情報にドット間ピッチ DPを乗ずる。

[0061] 次いで、ステップ ST204の視差量と所定の制限値を比較し、前記視差量が制限値を越える場合には、処理がステップ ST206に進み、それ以外の場合には処理がステップ ST207に進む（ステップ ST205)。ここで前記制限値は、 3次元映像が立体像として融合可能な範囲内に収まるように決定される。視差量が人の両眼の間の距離よりも大きくなると立体視が困難になることが知られており、例えば制限値はおよその両眼の間の距離である 6. 5cm程度としてもよい。

[0062] ステップ ST206では、実際の視差量が制限値を越えないように、拡大/縮小率を制限する。こうして計算した拡大 Z縮小率を画像処理手段 14に出力する。

[0063] 画像処理手段 14において、制限された拡大 Z縮小率を用いてサイズ変更処理を行い (ステップ ST207)、表示手段 15で表示することのできる表示形式に変換する（ステップ ST208)。このように、画像の拡大/縮小率を制限することで、視差量が限度を越えて大きくなり、立体視ができない状態で、 3次元映像データを表示してしまうという問題を解決することができる。

[0064] また、前記視差情報以外に映像データを実際に画面に表示する際のサイズ (ミリメ一トル単位）が制御情報に含まれている映像データを再生するようにしてもよい。この場合にも、指定された表示サイズを守ることで、視差量が限度を越えて大きくなることがなくなり、立体視ができない状態で、 3次元映像データを表示してしまうという問題を解決することができる。

[0065] また、拡大/縮小率が制限されたことをユーザに通知する手段を別途設けて、ユーザに拡大 Z縮小率が制限された旨を表示し、合せて拡大/縮小率を表示することで

、ユーザがこの表示を参考に、所望の拡大 z縮小率で映像データを表示することができるため、利便性を向上させることができる。

[0066] 以上、本発明の実施形態について説明したが、本発明の立体映像再生装置は、上記の実施形態に限定されるものではなぐ本発明の要旨を逸脱しない範囲内において、種々の変更を加えうることは勿論である。

産業上の利用の可能性

[0067] 本発明に係る立体映像再生装置は、基準表示サイズや基準解像度を知ることができ、所望の視差量で映像データを表示できるので、一般に普及しているパーソナルコンピュータのように複数の解像度が選択できる機器に対して広く適用できる。

Claims

請求の範囲

[1] 3次元映像データの表示を制御するための制御情報に基づいて、 3次元映像を再生する立体映像再生装置であって、

前記 3次元映像データを表示した際の表示画面における視差量が、前記 3次元映像データを基準となる表示装置に表示した際の表示画面における視差量よりも大きくなるか否かを、前記制御情報に基づいて判定する判定手段と、

前記視差量を変更するための画像処理を施す画像処理手段とを備え、前記判定手段により前記視差量が大きくなると判定された場合に、前記画像処理手段による画像処理を行うことを特徴とする立体映像再生装置。

[2] 前記画像処理手段は、前記 3次元映像データを構成する所定の視点の映像を水平方向に移動して視差量を調整する視差量調整手段を備えることを特徴とする請求項 1に記載の立体映像再生装置。

[3] 前記画像処理手段は、前記 3次元映像データの画像サイズを変更するサイズ変更手段を備えることを特徴とする請求項 1又は請求項 2に記載の立体映像再生装置。

[4] 前記制御情報は、前記基準となる表示装置の分解能に関する情報を含むことを特徴とする請求項 1から請求項 3のいずれか 1項に記載の立体映像再生装置。

[5] 前記制御情報は、前記基準となる表示装置において、前記 3次元映像データを表示した際の表示サイズに関する情報を含むことを特徴とする請求項 1から請求項 3のいずれか 1項に記載の立体映像再生装置。

[6] 3次元映像データの表示を制御するための制御情報に基づいて、 3次元映像を再生する立体映像再生装置であって、

前記制御情報に応じて、前記 3次元映像データを表示した際の表示画面における視差量が、立体視可能な値であるか否かを判定する判定手段と、

前記 3次元映像データの画像サイズを変更するサイズ変更手段とを備え、前記判定手段により立体視可能な値でないと判定された場合に、前記拡大及び縮小率を制限することを特徴とする立体映像再生装置。

[7] 前記制御情報は、重要な被写体の視差量を含み前記 3次元映像データの視差量を表す視差情報を含むことを特徴とする請求項 6に記載の立体映像再生装置。

[8] 3次元映像データの表示を制御するための制御情報に基づいて、 3次元映像を再生する立体映像再生方法であって、

前記 3次元映像データを表示した際の表示画面における視差量が、前記 3次元映像データを基準となる表示装置に表示した際の表示画面における視差量よりも大きくなるか否かを、前記制御情報に基づレ、て判定する判定ステップと、

視差量を変更するための画像処理を施す画像処理ステップとを備え、

前記判定ステップにより視差量が大きくなると判定された場合に、前記画像処理ステツプによる画像処理を行うことを特徴とする立体映像再生方法。

[9] 前記画像処理ステップは、前記 3次元映像データを構成する所定の視点の映像を水平方向に移動して視差量を調整することを特徴とする請求項 8に記載の立体映像再生方法。

[10] 前記画像処理ステップは、前記 3次元映像データの画像サイズを変更することを特徴とする請求項 8又は請求項 9に記載の立体映像再生方法。

[11] 前記制御情報は、前記基準となる表示装置の分解能に関する情報を含むことを特徴とする請求項 8から請求項 10のいずれか 1項に記載の立体映像再生方法。

[12] 前記制御情報は、前記基準となる表示装置において、前記 3次元映像データを表示した際の表示サイズを含むことを特徴とする請求項 8から請求項 10のいずれ力 1項に記載の立体映像再生方法。

[13] 3次元映像データの表示を制御するための制御情報に基づいて、 3次元映像を再生する立体映像再生方法であって、

前記制御情報に応じて、前記 3次元映像データを表示した際の表示画面における視差量が、立体視可能な値であるか否かを判定する判定ステップと、

前記 3次元映像データの画像サイズを変更するサイズ変更ステップとを備え、前記判定ステップにより立体視可能な値でないと判定された場合に、前記拡大及び縮小率を制限することを特徴とする立体映像再生方法。

[14] 前記制御情報は、重要な被写体の視差量を含み前記 3次元映像データの視差量を表す視差情報を含むことを特徴とする請求項 13に記載の立体映像再生方法。