JP5753439B2 - 視差画像表示装置、視差画像生成方法、及び視差画像プリント - Google Patents

視差画像表示装置、視差画像生成方法、及び視差画像プリント Download PDF

Info

Publication number
JP5753439B2
JP5753439B2 JP2011109217A JP2011109217A JP5753439B2 JP 5753439 B2 JP5753439 B2 JP 5753439B2 JP 2011109217 A JP2011109217 A JP 2011109217A JP 2011109217 A JP2011109217 A JP 2011109217A JP 5753439 B2 JP5753439 B2 JP 5753439B2
Authority
JP
Japan
Prior art keywords
eye
parallax image
image
unit
parallax
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011109217A
Other languages
English (en)
Other versions
JP2012244218A (ja
Inventor
小野 修司
修司 小野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2011109217A priority Critical patent/JP5753439B2/ja
Priority to KR1020137030279A priority patent/KR101592304B1/ko
Priority to CN201280023213.5A priority patent/CN103535030B/zh
Priority to PCT/JP2012/062489 priority patent/WO2012157666A1/ja
Priority to EP12786395.9A priority patent/EP2712197B1/en
Publication of JP2012244218A publication Critical patent/JP2012244218A/ja
Priority to US14/081,333 priority patent/US10171799B2/en
Application granted granted Critical
Publication of JP5753439B2 publication Critical patent/JP5753439B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、右目用画像及び左目用画像を用いて立体視を行うための視差画像表示装置、視差画像生成方法、及び視差画像プリントに関するものである。
従来より、千鳥配列やストライプ格子配列などの所定の配列によって、表示画面を空間分割して、右目用画像及び左目用画像に基づく視差画像を表示することで、立体視を行う視差画像表示装置や視差画像生成方法が知られている。
上述のように、所定の配列によって、表示画面を空間分割し、それに応じた偏光制御板を用いる立体表示装置では、画面の上下方向に立体視に最適な観察高さが生じ、それよりも高い位置又は低い位置から画面を見るにつれて、次第にクロストークが多くなり、ついには、逆立体視の状態となり、立体視表示の性能が著しく劣化してしまっていた。
また、立体視するには観察者が最適な観察高さに目を保持する必要があり、観察者の負担が増大し、疲労の原因になるという欠点があった。
特許文献1では、偏光制御板を用いて3次元画像を表示し観察する際、適切に設定した所定方向に長い開口を有する視差バリア又はレンチキュラレンズ等を用いることによってクロストークの少ない立体視の領域を上下方向に拡大できる装置が開示されている。
また、特許文献2では、パララックスバリア方式(視差バリア方式)を用いて、ディスプレイへの画像表示と空間光変調素子への開口パターンの表示を、それぞれ対応する画像ごと、あるいは対応する走査線ごとに同期して切り替えることにより、左右の視差画像のクロストークを低減し、しかもフリッカー及びモアレ縞も低減する装置が開示されている。
特開平10−221643号公報 特開平9−265056号公報
しかし、特許文献1の装置では、視差バリアの開口の幅が狭くなり、光量が低下して画像が暗くなる、あるいは、レンチキュラレンズを用いることで表示できる画像の情報量が低下する(レンチキュラレンズによって引きのばすため、レンズパワー方向の画素密度が減る)。また、レンチキュラレンズの分、コストが増大するという問題点がある。
また、特許文献2の装置では、ディスプレイと前記空間光変調素子とを対応させてインターレース走査する手段が必要であり、コストが大きく増大するという問題点がある。
例えば、図8(A)〜(C)に示すように、左目用画像と右目用画像とを同一幅のストライプ格子状に空間分割することで視差画像を生成し、偏光制御板を用いて立体視を行う従来型の視差画像表示装置においては、想定された幾何光学的な位置関係が崩れることで、クロストーク信号が観察者に伝達する。
そして、幾何光学的な位置関係の崩れが同程度であっても、空間分割を細かく設定すると、クロストーク信号量は大きく発生する。
すなわち、幾何光学的な位置関係の崩れによるクロストーク信号を抑えるには、無用に空間分割を細かく設定しないことが肝要である。
一方で、空間分割を粗くしてしまうと、立体感を感じるために不可欠な視差画像の情報を十分に観察者に提供できない。
本発明の目的は、表示する画像の局所的な情報量に基づき分割サイズを可変として最適な細かさに設定することで、画像情報の伝達を損なうことなく、かつクロストーク信号の生じにくい高品質な立体視表示を可能とする視差画像表示装置、視差画像生成方法、及び視差画像プリントを提供することにある。
上記課題を解決するために、本発明は、立体視可能な視差画像を生成するための右目用画像と左目用画像とを取得する画像取得部と、前記右目用画像の情報量分布と前記左目用画像の情報量分布とをそれぞれ算出する情報量分布算出部と、前記右目用画像を表示する右目用領域と前記左目用画像を表示する左目用領域とで構成される視差画像表示領域を有する視差画像表示部と、前記右目用画像と前記左目用画像とに基づいて前記視差画像を生成する視差画像生成部とを備え、前記視差画像生成部は、視差画像表示領域分類手段と、領域分割手段とを有し、
前記視差画像表示領域分類手段は、前記情報量分布に基づいて前記視差画像表示領域を複数の部分表示領域に分類し、前記領域分割手段は、前記部分表示領域を前記分類ごとに大きさの異なる、互いに同形の右目用単位領域及び左目用単位領域からなる単位領域セットに分割し、前記視差画像生成部は、前記右目用単位領域によって構成される前記右目用領域に前記右目用画像を表示し、前記左目用単位領域によって構成される前記左目用領域に前記左目用画像をそれぞれ表示することで前記視差画像を生成することを特徴とする視差画像表示装置を提供する。
また、前記情報量分布の情報量は、前記右目用画像及び前記左目用画像における、画素値の変化量、高周波信号成分の量、最大周波数の値、輝度分布の分散値、並びに、前記右目用画像と前記左目用画像との画素値の差分量の少なくとも1つであることが好ましい。
また、前記領域分割手段は、前記部分表示領域を、前記情報量が大きければ大きい程小さい単位領域セットで分割し、前記情報量が小さければ小さい程大きい単位領域セットで分割することが好ましい。
また、前記単位領域セットは、ストライプ格子形状であることが好ましい。
また、前記領域分割手段は、前記部分表示領域の形状に応じて前記部分表示領域の分割方向を決定することが好ましい。
さらに、前記視差画像表示部の前面に設置され、前記視差画像に基づいて、前記左目用領域の偏光状態と前記右目用領域の偏光状態とが異なるように操作可能な偏光フィルタを備えることが好ましい。
さらに、前記視差画像表示部の前面に設置され、前記視差画像に基づいて、前記視差画像表示部から所定間隔離れた観察者に対して、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させるように操作可能な視差バリアを備えることが好ましい。
また、本発明は、立体視可能な視差画像を生成するための右目用画像と左目用画像との情報量分布をそれぞれ算出し、前記情報量分布に基づいて、前記視差画像を表示する視差画像表示領域を複数の部分表示領域に分類し、それぞれの前記部分表示領域を、前記分類ごとに大きさの異なる、互いに同形の右目用単位領域及び左目用単位領域からなる単位領域セットに分割し、前記右目用単位領域及び前記左目用単位領域に前記右目用画像及び前記左目用画像をそれぞれ表示させることで視差画像を生成することを特徴とする視差画像生成方法を提供する。
また、前記情報量分布の情報量は、前記右目用画像及び前記左目用画像における、画素値の変化量、高周波信号成分の量、最大周波数の値、輝度分布の分散値、並びに、前記右目用画像と前記左目用画像との画素値の差分量の少なくとも1つであることが好ましい。
また、前記部分表示領域は、前記情報量が大きければ大きい程小さい単位領域セットで分割され、前記情報量が小さければ小さい程大きい単位領域セットで分割されることが好ましい。
前記単位領域セットは、ストライプ格子形状であることが好ましい。
前記部分表示領域の形状に応じて前記部分表示領域の分割方向を決定することが好ましい。
また、本発明は、上述の視差画像生成方法によって生成された視差画像が印刷されたことを特徴とする視差画像プリントを提供する。
さらに、右目用領域と左目用領域とに偏光状態のそれぞれ異なる偏光フィルムを貼り付けたことが好ましい。
さらに、前記視差画像プリントの前面に設置され、前記視差画像プリントから所定間隔離れた観察者に対して、前記視差画像に基づいて、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させる視差バリアフィルムを設けたことが好ましい。
本発明によれば、クロストークによる画質の劣化を感じることの少ない高品質な視差画像を提供することができ、また、本視差画像は、電気的な駆動が不要であるため、印刷や写真プリントのような視差画像表示手段にも適用することができる。
本発明に係る視差画像表示装置の一実施例を示す外観図である。 本発明に係る視差画像表示装置の一実施例の詳細構成を示すブロック図である。 (A)及び(B)は、視差画像表示のための右目用画像及び左目用画像の一例である。 図3の右目用画像及び左目用画像から生成される視差画像の一例である。 図4の視差画像を部分表示領域に分類した場合の説明図である。 図5の部分表示領域を分類に応じて大きさの異なる単位領域セット(幅の異なる水平ストライプ格子)に分割した場合の説明図である。 本発明に係る視差画像生成のフローを示すフローチャートである。 (A)〜(C)は、ストライプ格子状の視差画像の一例である。 本発明に用いられる視差バリアの説明図である。 視差バリア方式における本発明の視差画像表示装置の一実施例を示す外観図である。 視差バリア方式において、図5の部分表示領域を分類に応じて大きさの異なる単位領域セット(幅の異なる鉛直ストライプ格子)に分割した場合の説明図である。
本発明に係る視差画像表示装置、視差画像生成方法、及び視差画像プリントを、添付の図面に示す好適実施形態に基づいて以下に詳細に説明する。
<視差画像表示装置>
図1は、本発明の視差画像表示装置の構成を表す一実施形態の外観図である。図1に示すとおり、本発明の視差画像表示装置10は、視差画像表示部12と、偏光メガネ14と、指示入力部16と、コンソール20と、画像サーバ32とを備える。
図1に示すように、空間分割型の視差画像を表示する視差画像表示部12は、右目用画像を表示する右目用領域(右目用画像表示領域)18R及び左目用画像を表示する左目用領域(左目用画像表示領域)18Lとからなる。
右目用領域18Rは、右目用単位領域18URによって構成され、また、左目用領域18Lは、左目用単位領域18ULによって構成される。また、一対の右目用単位領域18UR及び左目用単位領域18ULは、単位領域セット18Uを構成する。
単位領域セット18Uとしては、例えば、図1に示すとおり、ストライプ格子の形状が考えられる。もちろん、千鳥格子や、正方格子などの種々の形状が用いられてもよい。
また、視差画像表示部12は、任意の領域の偏光状態を操作可能な偏光フィルタ48を備え、視差画像において、右目用画像が表示されている部分(右目用領域18R)と左目用画像が表示されている部分(左目用領域18L)と偏光状態が異なるように、偏光フィルタ48が操作される。
前述の偏光フィルタ48の具体例としては、視差画像表示用の液晶ディスプレイとは別の、視差画像の偏光状態を独立して操作する液晶パネルなどが考えられる。
液晶パネルを利用した偏光フィルタは、視差画像を表示する液晶ディスプレイの前面に設置され、視差画像の情報を用いて、視差画像の右目用領域18Rと左目用領域18Lとの偏光状態をそれぞれ操作することができる。
よって、観察者は、視差画像表示部12に表示された視差画像を、偏光メガネ14を用いて見ることで、右目では、偏光レンズ14Rを通して右目用画像のみを認識し、左目では、偏光レンズ14Lを通して左目用画像のみを認識する。
これにより、観察者の脳は、右目によって認識した右目用画像と、左目によって認識した左目用画像とに基づいて立体視を行うことが可能となる。
指示入力部16は、コンソール20の後述する制御部26に各種指示を出す。例えば、画像サーバ32からの右目用画像及び左目用画像の取得の指示、視差画像表示部12における立体視表示及び平面表示の切替、生成した視差画像の画像サーバ32への保存などの指示が挙げられる。
<コンソール>
また、図2は、本発明の視差画像表示装置の詳細構成を示すブロック図であり、特にコンソール20の詳細構成を示す。
図2に示すとおり、前述のコンソール20は、画像取得部22と、視差画像生成部24と、制御部26と、表示制御部28と、偏光フィルタ制御部30と、記憶部34と、情報量分布算出部36と、を備え、前述の視差画像生成部24は、視差画像表示領域分類手段42と、領域分割手段44と、画像反映手段46とを有する。
なお、コンソール20は、具体的には、CPU(中央処理装置)、RAM(主記憶装置)、ハードディスク等で構成されるコンピュータによって構成され、実際には、上述のCPU(中央処理装置)、RAM(主記憶装置)、ハードディスク等が連動して、コンソール20内の上述の各部及び各手段を構成する。
画像取得部22は、指示入力部16からの指示により、制御部26を通じて制御され、画像サーバ32に保存された立体視可能な右目用画像と左目用画像とを取得する。
情報量分布算出部36は、画像取得部22が取得した右目用画像と左目用画像とにおいて、それぞれの画像の情報量分布を算出し、算出された右目用画像の情報量分布と左目用画像の情報量分布を視差画像生成部24へ出力する。
ここで情報量とは、例えば、(1)画像の持つ高調波信号成分の量、(2)画像の最大周波数の値、(3)局所領域内での画像の輝度分布の分散値、(4)左右の原画像の画素値の差分量などが挙げられる。
例えば、図3(A)の右目用画像と図3(B)の左目用画像とにおいて、情報量分布算出部36により情報量分布を算出する。情報量としては、例えば、上述の(1)画像の持つ高調波信号成分の量を基準に情報量分布を算出する。
図3(A)及び(B)に示すように、右目用画像及び左目用画像は、例えば、(a)空、(b)雲、(c)山、(d)木などから構成される。
視差画像生成部24は、前述のとおり、右目用領域18R及び左目用領域18Lに右目用画像及び左目用画像を反映させて、前述の視差画像を生成する。
まず、視差画像生成部24は、前述の情報量分布算出部36で算出された右目用画像の情報量分布と左目用画像の情報量分布とに基づいて、視差画像表示領域分類手段42において、視差画像を複数の部分表示領域18Dに分類する。
図4に示すように、視差画像は右目用画像と左目用画像とが重なって表示されたもの(互いに空間分割されて表示されたもの)であるため、右目用画像と左目用画像とで画像が大きく異なる部分と、略同様の部分とがある。
特に、右目用画像と左目用画像とにおいて、(a)〜(d)のエッジ部分の情報は、精度の高い立体視を行うために重要である。
視差画像表示領域分類手段42は、上述のとおり、右目用画像の情報量分布と左目用画像の情報量分布とに基づいて、視差画像を複数の部分表示領域18Dに分類する。
視差画像表示領域分類手段42は、例えば、図5に示すように、(a)〜(d)のエッジ部分周辺を(N)、(b)雲及び(d)木の部分を(M)、(a)空及び(c)山を(W)の3つの部分表示領域18D(18DN、18DM、18DW)に分類する。
なお、エッジ部分周辺とは、例えば、エッジを構成する画素から、一定画素分(例えば、半径10画素分)だけ離れた領域をいう。
次に、領域分割手段44は、上述のとおり分類された(N)、(M)、(W)の部分表示領域18Dを、右目用単位領域18URと左目用単位領域18ULとからなる単位領域セット18Uに分割する。
単位領域セット18Uの大きさは、上述の情報量分布算出部36が算出した視差画像の部分表示領域18Dごとの情報量、及び情報量差(右目用画像の情報量と左目用画像の情報量との差)によって異なる。
例えば、図5の部分表示領域18DNのように、左目用画像及び右目用画像のエッジ部分の情報が載るような場合には、これら部分表示領域18DNをなるべく細かい単位領域セット18UNに分割する必要がある。
また、図5に示す部分表示領域18DWは、(a)空や、(c)山など、それ程大きな変化の無い画像部分であり、これら部分表示領域18DWは、大きな(粗い)単位領域セット18UWに分割してもよい。
また、部分表示領域18DMの(b)雲や、(d)木などのように、部分表示領域18DMの画像自体がある程度細かい場合には、これらの中間の大きさの単位領域セット18UMに分割してもよい。
領域分割手段44は、視差画像表示領域分類手段42によって図5のように分類した視差画像表示領域18を、部分表示領域18Dごとに大きさの異なる単位領域セット18Uに分割する。
ここでは、図6に示すように、単位領域セット18Uを上述のストライプ格子の形状とし、幅の大きいものを単位領域セット18UW、幅の小さいものを単位領域セット18UN、その中間の大きさのものを単位領域セット18UMとしている。
画像反映手段46は、単位領域セット18U(18UN、18UM、18UW)ごとに、右目用単位領域18URに右目用画像が表示され、左目用単位領域18ULに左目用画像が表示されるように、右目用画像と左目用画像とを反映させる。
以上のように、視差画像生成部24は、右目用画像及び左目用画像に基づいて、視差画像を生成する。
制御部26は、指示入力部16からの指示を受け、視差画像表示装置10の各部の動作を制御する。上述のように、画像取得部22に左目用画像及び右目用画像を取得させ、視差画像生成部24に視差画像を生成させ、後述する表示制御部28を通じて、視差画像表示部12に視差画像を表示させ、後述する偏光フィルタ制御部30により視差画像に合わせて視差画像表示部12上に設置された偏光フィルタ48の偏光状態を制御する。また、後述する記憶部34に生成した視差画像を記憶させ、また、記憶部34を通じて、画像サーバ32に生成した視差画像を保存してもよい。
表示制御部28は、上述のとおり視差画像表示部12において視差画像を表示する他、指示入力部16からの指示により、視差画像表示部12上で、左目用画像及び右目用画像を平面表示する。
偏光フィルタ制御部30は、視差画像生成部24からの視差画像(視差画像表示領域18)に基づいて、左目用領域18Lと右目用領域18Rとにそれぞれ異なる偏光状態のフィルタが掛かるにように、偏光フィルタ48を制御する。
記憶部34は、視差画像生成部24によって生成された視差画像を左目用画像及び右目用画像と共に一時的に記憶し、指示入力部16からの指示により、これら画像の画像データを画像サーバ32に保存する。
上述のとおり、コンソール20は、立体視可能な左目用画像と右目用画像とに基づいて視差画像を生成する。生成された視差画像は、左目用領域18Lと右目用領域18Rとからなる視差画像表示領域18を有する視差画像表示部12において表示され、また、必要に応じて画像サーバ32に記憶される。
また、画像サーバ32は、立体視可能な左目用画像及び右目用画像を画像データとして記憶できるものであればよく、画像サーバに限らずその代わりとして、左目用画像及び右目用画像の画像データが記憶された各種記録媒体及び記録媒体読み取り手段を用いることができる。
以上が、本発明の視差画像表示装置10の構成の説明である。
次に、本発明の視差画像表示装置10の動作について簡単に説明する。
指示入力部16からの指示を受け、画像取得部22は、図3(A)及び(B)に示すような、立体視可能な右目用画像と左目用画像とを取得する。取得された右目用画像と左目用画像とは、情報量分布算出部36へ出力され、右目用画像の情報量分布と左目用画像の情報量分布とが算出され、視差画像生成部24へ出力される。
視差画像生成部24の視差画像表示領域分類手段42は、情報量分布算出部36で算出された右目用画像の情報量分布と左目用画像の情報量分布とに基づいて、例えば、視差画像表示領域を、図5に示すように(N)、(M)、(W)の3つの部分表示領域18Dに分類する。
領域分割手段44は、上述のように分類された部分表示領域18Dを分類ごとに大きさの異なる単位領域セット18Uに分割する。
例えば、図5に示すように、情報量が多いと考えられる部分表示領域18DNは、なるべく小さな単位領域セット18UNに分割され、情報量が少ないと考えられる部分表示領域18DWは、なるべく大きな単位領域セット18UWに分割され、その中間の部分表示領域18DMは、それらの中間の大きさの単位領域セット18UMに分割される。
そして、画像反映手段46において、単位領域セット18U(18UN、18UM、18UW)の右目用単位領域18URに、右目用画像を反映させ、左目用単位領域18ULに、左目用画像を反映させて、視差画像を生成する。
上述のとおり、視差画像生成部24で生成された視差画像は、表示制御部28を通して、視差画像表示部12に表示され、また、記憶部34に一時記憶され、指示入力部16からの指示により、画像サーバ32に記憶されてもよい。
また、偏光フィルタ制御部30は、部分表示領域18Dごとに異なる大きさの単位領域セットに分割され、右目用単位領域18URと左目用単位領域18ULとからなる視差画像表示領域18の情報を得て、偏光フィルタ48を制御する。
偏光フィルタ48は、視差画像表示領域18の右目用領域18Rと左目用領域18Lとにおいて、それぞれ偏光状態が異なるように制御され、右目用領域18Rに対応するフィルタ部分と左目用領域18Lに対応するフィルタ部分とからそれぞれ偏光状態の異なる光を透過させる。
こうして、観察者は、本発明の視差画像表示装置10により、偏光メガネ14を通して視差画像表示部12に表示された視差画像を観察することで、立体視を行うことができる。
以上が、本発明の視差画像表示装置10の動作である。
<視差画像生成方法>
次に、本発明の視差画像生成方法について説明する。本発明の視差画像表示装置10は、視差画像生成部24において、本発明の視差画像生成方法を用いて視差画像を生成し、視差画像表示部12に視差画像を表示する。
本発明の視差画像生成部24は、右目用画像と左目用画像とのそれぞれの情報量分布を算出する情報量分布算出部36を備える。
ここで情報量とは、例えば、(1)画像の持つ高調波信号成分の量、(2)画像の最大周波数の値、(3)局所領域内での画像の輝度分布の分散値、(4)左右の原画像の画素値の差分量などが挙げられる。
<視差画像表示領域の分類>
図3(A)及び(B)に示す右目用画像と左目用画像とにおいて、それぞれの画像の情報量分布を算出し、算出された情報量分布から、視差画像表示領域18を、複数の部分表示領域18Dに分類する。
右目用画像及び左目用画像は、視点をずらして撮影された画像であるため、右目用画像及び左目用画像の情報量分布は、例えば、前述の情報量のうち、(1)画像の持つ高調波信号成分の量、つまり画像の細かさを基準とする。
図3(A)及び(B)に示すように、右目用画像及び左目用画像は、例えば、(a)空、(b)雲、(c)山、(d)木などから構成される。
図4に示すように、視差画像は右目用画像と左目用画像とが重なって表示されたもの(互いに空間分割されて表示されたもの)であり、(a)〜(d)のエッジ部分の情報は、精度の高い立体視を行うために重要である。
算出された左目用画像及び右目用画像の情報量分布から、視差画像表示領域18は、視差画像表示領域分類手段42により、例えば、図5に示すように、(N)、(M)、(W)の3つの部分表示領域18D(18DN、18DM、18DW)に分類される。
<部分表示領域の分割>
本発明の視差画像生成部24は、領域分割手段44により、(N)、(M)、(W)の3つの異なる部分表示領域18Dを、分類ごとに大きさの異なる単位領域セット18Uによって分割する。
なお、図5に示す3つの異なる部分表示領域18Dの情報量の大きさは、(N)>(M)>(W)の順であるとすると、部分表示領域18Dの分割の大きさ(つまり、粗さ)は、(N)<(M)<(W)の順となる。
単位領域セット18Uを右目用単位領域18UR及び左目用単位領域18ULからなるストライプ格子とし、分類(N)、(M)、(W)において、そのストライプ幅が異なる(分類(N)は細かく、分類(M)は中間、分類(W)は粗く)とすると、部分表示領域18Dを領域分割手段44で単位領域セット18Uに分割した視差画像表示領域18は、図6に示す表示となる。
情報量が大きい視差画像のエッジ部分18DN、元の画像の情報量が大きい雲や木の部分18DM、情報量の小さい、空や山の部分18DWに対して、それぞれストライプ幅の異なる単位領域セット18Uが割りつけられる。
単位領域セット18Uのストライプ幅は、例えば、情報量が小さい分類(つまり、ストライプ幅が大きい分類)Wのストライプ幅を16ピクセル、中間の分類Mのストライプ幅を8ピクセル、情報量が大きい分類(つまり、ストライプ幅が小さい分類)Nのストライプ幅を4ピクセルとしてもよい。また、もちろん、視差画像のピクセルサイズに応じてストライプ幅を変更してもよく、部分表示領域18Dの大きさや形状に応じて変更してもよい。
また、本発明の領域分割手段44は、分類された部分表示領域18Dの形状ごとに、その分割方向、つまりストライプの方向を変更してもよい。
例えば、部分表示領域18Dが横方向に長い場合には、領域分割手段44は、その部分表示領域18Dを縦方向のストライプ格子(単位領域セット18U)に分割してもよい。
分割の方向、つまりストライプ格子のストライプ方向と、画像の空間周波数との間で干渉(モアレ)が発生するのを防止するためである。
視差画像生成部24は、視差画像表示領域18において、右目用画像を右目用領域18Rに、左目用画像を左目用領域18Lに、それぞれ反映させることで視差画像を生成し、生成された視差画像は、視差画像表示領域18を有する(視差画像表領域18と1対1に対応する)視差画像表示部12において表示される。
<視差画像生成のフロー>
次に、視差画像生成部24における視差画像生成の方法について、図のフローチャートに基づいて簡単に説明する。
視差画像表示装置10は、視差画像生成部24を通じて立体視表示のために撮影された右目用画像と左目用画像とを図示しない画像サーバ等から取得する(S1)。
視差画像生成部24は、右目用画像及び左目用画像のそれぞれにおいて、情報量分布の算出を行う(S3)。
上述のとおり、例えば、(1)画像の持つ高調波信号成分の量、(2)画像の最大周波数の値、(3)局所領域内での画像の輝度分布の分散値、(4)左右の原画像の画素値の差分量などの少なくとも1つを情報量として、情報量分布を算出する。
また、視差画像生成部24は、右目用画像の情報量分布と左目用画像の情報量分布とから、視差画像表示領域18を複数の部分表示領域18Dに分類する。
視差画像表示領域18の分類は、視差画像生成部24の視差画像表示領域分類手段42によって、例えば、右目用画像の情報量分布と左目用画像の情報量分布との差分量から、画像の変化や画像のエッジ情報等に基づいて行う(S5)。
視差画像表示領域18は、例えば、図5に示すように(N)、(M)、(W)の3つの部分表示領域18Dに分類される。エッジ周辺部分(N)、元の画像の情報量が大きい雲や木の部分(M)、情報量の小さい、空や山の部分(W)の3つの部分である。
次に、視差画像生成部24は、領域分割手段44によって、部分表示領域18Dをその分類に応じて大きさの異なる、単位領域セット18U(右目用単位領域18UR及び左目用単位領域18UL)に分割する(S7)。
例えば、右目用単位領域18UR及び左目用単位領域18ULがストライプ格子であるとすると、上述の部分表示領域18Dの分類(N)、(M)、(W)において、そのストライプ幅を小、中、大と分ける。
視差画像表示領域18は、ストライプ格子である右目用単位領域18UR及び左目用単位領域18ULによって、図6に示すように表示される。
また、部分表示領域18D(18DN、18DM、18DW)の形状に応じて、ストライプ格子の方向を、縦、横、斜め等、モアレが起きにくい方向に変更してもよい。
視差画像生成部24において、視差画像表示領域18上の全ての右目用領域18R及び左目用領域18Lに対して、左目用画像及び右目用画像を反映させることで、視差画像が生成される(S9)。表示される空間分割型の視差画像は、クロストークが生じにくく、かつ画像情報の伝達を損なうことのない視差画像である。
視差画像生成部24において、生成された視差画像は、視差画像表示領域18と表示画面が1対1に対応する視差画像表示部12において表示される(S11)。
なお、これら視差画像は視差画像表示部12において、表示されるだけでなく、プリンタ等の出力装置によって出力されてもよい。本発明は空間分割型の立体視表示であり、電気的駆動を必要としないためである。
<視差画像プリント>
上述のとおり、視差画像生成方法で生成された視差画像は、前述の視差画像表示装置10の視差画像表示部12で表示するだけでなく、図示しないプリンタ等によって紙面に印刷することで、視差画像プリントとすることもできる。
この場合、視差画像を視差画像プリントとして紙面に印刷した後、更に、視差画像の左目用領域18Lと右目用領域18Rとに対応する偏光フィルムを視差画像上に貼り付ける。
偏光フィルムとしては、例えば、特開2009−193014号公報に記載の楕円偏光板を用いることができる。
上述の楕円偏光板は、偏光パターンを任意に変更して製造することができるため、偏光パターンが左目用領域18L及び右目用領域18Rに対応する上述の楕円偏光板を製造し、偏光フィルムとして視差画像上に張り付ければよい。
観察者は、偏光メガネ14を用いて、上述の偏光フィルムが貼り付けられた視差画像プリントを見ることで、左目では、偏光レンズ14Lを通して左目用画像のみを認識し、右目では、偏光レンズ14Rを通して右目用画像のみを認識するため、前述と同様、これらに基づいて立体視を行うことが可能となる。
なお、上述のとおり、偏光を用いて視差画像を観察する場合には、視差画像のストライプ状格子の分割方向を図1及び図6に示す横(水平)方向のみならず、縦(鉛直)方向及び斜め方向等、いずれの方向としても、観察者の左目によって左目用画像が認識され、観察者右目によって右目用画像が認識されるため、観察者は立体視表示をすることができる。
<視差バリア(パララックスバリア)方式>
また、本発明の視差画像表示装置10において、視差画像表示部12は、偏光フィルタ48の代わりに後述する視差バリア49を備えても良い。なお、この場合、視差画像は、図8(B)に示す鉛直方向(観察者の目の並ぶ方向に対して垂直な方向)にストライプ格子状に分割された視差画像に限られ、コンソール20は、偏光フィルタ制御部30の代わりに、視差画像生成部24によって生成された視差画像(視差画像表示領域18)に合わせて視差バリア49を制御する視差バリア制御部31を備える。
また、偏光メガネ14は不要となり、裸眼で立体視を行うことができる。
視差バリア49としては、画素単位で任意の領域における光の透過の有無を電気的に切り替えることができるスイッチ液晶等によって構成される。
また、視差バリア制御部31は、スイッチ液晶をそれぞれ電気的に制御することで、視差バリア49を制御する。
視差バリア49は、視差画像表示部12の前面に一定間隔距離を空けて配置されることで、図9に示すように、右目によって右目用画像が観察され、左目によって左目用画像が観察されるため、観察者は右目用画像と左目用画像とによって立体視をすることが可能となる。
この場合、図9に示すとおり、右目用画像の表示面積(情報量)と左目用画像の表示面積とは略同じとなる。
図10に示すように、本発明の視差画像表示装置10は、視差画像表示部12の前面に、上述の視差バリア49を備え、視差画像生成部24によって鉛直方向にストライプ格子状に分割された視差画像が生成されると、視差画像表示部12から所定間隔離れた観察者に対して、観察者の右目によって視差画像の右目用画像が観察され、観察者の左目によって視差画像の左目用画像が観察されるように、視差バリア49が操作される。
なお、視差バリア方式の視差画像表示装置10においては、上述のとおり視差画像は鉛直方向のストライプ格子に限られるため、情報量の比較によって、図5のとおり分類された部分表示領域18Dは、図6に示す水平方向のストライプ格子ではなく、図11に示す鉛直方向のストライプ格子に分割され、視差画像が生成される。
以上より、視差バリア49をとおして上述のように生成された視差画像を観察することで、観察者は、右目によって右目用画像を認識し、左目によって左目用画像を認識することで、左目用画像と右目用画像とに基づいて、裸眼立体視を行うことが可能となる。
また、前述の視差画像プリントにおいても、偏光フィルムの代わりに、視差バリアフィルムを用いることができる。この場合も、前述と同様、偏光メガネ14は不要となり、裸眼で立体視を行うことができる。
なお、視差バリアフィルムとしては、例えば、電気的駆動を必要とせず、光を通さない光不透過性のフィルムと光を通す光透過性フィルムとの組合せが考えられる。
視差画像プリントの前面に、視差画像に応じて構成された視差バリアフィルムを、一定間隔距離を空けて設置する(貼り付ける)ことで、視差画像プリントから所定間隔離れた観察者に対して、観察者の右目によって右目用画像が観察され、観察者の左目によって左目用画像が観察されるため、観察者は、これら右目用画像と左目用画像とに基づいて裸眼立体視を行うことができる。
以上、本発明の視差画像表示装置、視差画像生成方法、及び視差画像プリントについて詳細に説明したが、本発明は、上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、各種の改良や変更を行ってもよい。
10 視差画像表示装置
12 視差画像表示部(視差画像表示手段)
14 偏光メガネ
16 指示入力部
18 視差画像表示領域
18R 右目用領域(右目用画像表示領域)
18L 左目用領域(左目用画像表示領域)
18D 部分表示領域
18U 単位領域セット
18UR 右目用単位領域
18UL 左目用単位領域
20 コンソール
22 画像取得部
24 視差画像生成部
26 制御部
28 表示制御部
30 偏光フィルタ制御部
31 視差バリア制御部
34 記憶部
36 情報量分布算出部
42 視差画像表示領域分類手段
44 領域分割手段
46 画像反映手段
48 偏光フィルタ
49 視差バリア

Claims (15)

  1. 立体視可能な視差画像を生成するための右目用画像と左目用画像とを取得する画像取得部と、
    前記右目用画像の情報量分布と前記左目用画像の情報量分布とをそれぞれ算出する情報量分布算出部と、
    前記右目用画像を表示する右目用領域と前記左目用画像を表示する左目用領域とで構成される視差画像表示領域を有する視差画像表示部と、
    前記右目用画像と前記左目用画像とに基づいて前記視差画像を生成する視差画像生成部と
    を備え、
    前記視差画像生成部は、視差画像表示領域分類手段と、領域分割手段とを有し、
    前記視差画像表示領域分類手段は、前記情報量分布に基づいて前記視差画像表示領域を複数の部分表示領域に分類し、
    前記領域分割手段は、前記部分表示領域を前記分類ごとに大きさの異なる、互いに同形の右目用単位領域及び左目用単位領域からなる単位領域セットに分割し、
    前記視差画像生成部は、前記右目用単位領域によって構成される前記右目用領域に前記右目用画像を表示し、前記左目用単位領域によって構成される前記左目用領域に前記左目用画像をそれぞれ表示することで前記視差画像を生成することを特徴とする視差画像表示装置。
  2. 前記情報量分布の情報量は、前記右目用画像及び前記左目用画像における、画素値の変化量、高周波信号成分の量、最大周波数の値、輝度分布の分散値、並びに、前記右目用画像と前記左目用画像との画素値の差分量の少なくとも1つであることを特徴とする請求項1に記載の視差画像表示装置。
  3. 前記領域分割手段は、前記部分表示領域を、前記情報量が大きければ大きい程小さい単位領域セットで分割し、前記情報量が小さければ小さい程大きい単位領域セットで分割することを特徴とする請求項2に記載の視差画像表示装置。
  4. 前記単位領域セットは、ストライプ格子形状であることを特徴とする請求項1〜3のいずれかに記載の視差画像表示装置。
  5. 前記領域分割手段は、前記部分表示領域の形状に応じて前記部分表示領域の分割方向を決定することを特徴とする請求項1〜4のいずれかに記載の視差画像表示装置。
  6. さらに、前記視差画像表示部の前面に設置され、前記視差画像に基づいて、前記左目用領域の偏光状態と前記右目用領域の偏光状態とが異なるように操作可能な偏光フィルタを備えることを特徴とする請求項1〜5のいずれかに記載の視差画像表示装置。
  7. さらに、前記視差画像表示部の前面に設置され、前記視差画像表示部から所定間隔離れた観察者に対して、前記視差画像に基づいて、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させるように操作可能な視差バリアを備えることを特徴とする請求項1〜5のいずれかに記載の視差画像表示装置。
  8. 立体視可能な視差画像を生成するための右目用画像と左目用画像との情報量分布をそれぞれ算出し、
    前記情報量分布に基づいて、前記視差画像を表示する視差画像表示領域を複数の部分表示領域に分類し、
    それぞれの前記部分表示領域を、前記分類ごとに大きさの異なる、互いに同形の右目用単位領域及び左目用単位領域からなる単位領域セットに分割し、
    前記右目用単位領域及び前記左目用単位領域に前記右目用画像及び前記左目用画像をそれぞれ表示させることで視差画像を生成することを特徴とする視差画像生成方法。
  9. 前記情報量分布の情報量は、前記右目用画像及び前記左目用画像における、画素値の変化量、高周波信号成分の量、最大周波数の値、輝度分布の分散値、並びに、前記右目用画像と前記左目用画像との画素値の差分量の少なくとも1つであることを特徴とする請求項8に記載の視差画像生成方法。
  10. 前記部分表示領域は、前記情報量が大きければ大きい程小さい単位領域セットで分割され、前記情報量が小さければ小さい程大きい単位領域セットで分割されることを特徴とする請求項9に記載の視差画像生成方法。
  11. 前記単位領域セットは、ストライプ格子形状であることを特徴とする請求8〜10のいずれかに記載の視差画像生成方法。
  12. 前記部分表示領域の形状に応じて前記部分表示領域の分割方向を決定することを特徴とする請求項8〜11のいずれかに記載の視差画像生成方法。
  13. 請求項8〜12のいずれかに記載の視差画像生成方法によって生成された視差画像が印刷されたことを特徴とする視差画像プリント。
  14. さらに、右目用領域と左目用領域とに偏光状態のそれぞれ異なる偏光フィルムを貼り付けたことを特徴とする請求項13に記載の視差画像プリント。
  15. さらに、前記視差画像プリントの前面に設置され、前記視差画像プリントから所定間隔離れた観察者に対して、前記視差画像に基づいて、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させる視差バリアフィルムを設けたことを特徴とする請求項14に記載の視差画像プリント。
JP2011109217A 2011-05-16 2011-05-16 視差画像表示装置、視差画像生成方法、及び視差画像プリント Active JP5753439B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2011109217A JP5753439B2 (ja) 2011-05-16 2011-05-16 視差画像表示装置、視差画像生成方法、及び視差画像プリント
KR1020137030279A KR101592304B1 (ko) 2011-05-16 2012-05-16 시차 화상 표시 장치, 시차 화상 생성 방법, 및 시차 화상 프린트
CN201280023213.5A CN103535030B (zh) 2011-05-16 2012-05-16 视差图像显示装置、视差图像生成方法、视差图像打印
PCT/JP2012/062489 WO2012157666A1 (ja) 2011-05-16 2012-05-16 視差画像表示装置、視差画像生成方法、及び視差画像プリント
EP12786395.9A EP2712197B1 (en) 2011-05-16 2012-05-16 Parallax image display device, parallax image generation method, parallax image print
US14/081,333 US10171799B2 (en) 2011-05-16 2013-11-15 Parallax image display device, parallax image generation method, parallax image print

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011109217A JP5753439B2 (ja) 2011-05-16 2011-05-16 視差画像表示装置、視差画像生成方法、及び視差画像プリント

Publications (2)

Publication Number Publication Date
JP2012244218A JP2012244218A (ja) 2012-12-10
JP5753439B2 true JP5753439B2 (ja) 2015-07-22

Family

ID=47465498

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011109217A Active JP5753439B2 (ja) 2011-05-16 2011-05-16 視差画像表示装置、視差画像生成方法、及び視差画像プリント

Country Status (1)

Country Link
JP (1) JP5753439B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115100621A (zh) * 2022-08-25 2022-09-23 北京中科慧眼科技有限公司 基于深度学习网络的地面场景检测方法和系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3182009B2 (ja) * 1992-12-24 2001-07-03 日本電信電話株式会社 両眼立体視装置
JPH10221643A (ja) * 1997-01-31 1998-08-21 Canon Inc 立体画像表示装置
JP4027898B2 (ja) * 2004-01-29 2007-12-26 株式会社有沢製作所 偏光透過スクリーン、及び当該偏光透過スクリーンを用いた立体画像表示装置
JP2009193014A (ja) * 2008-02-18 2009-08-27 Fujifilm Corp パターニング楕円偏光板

Also Published As

Publication number Publication date
JP2012244218A (ja) 2012-12-10

Similar Documents

Publication Publication Date Title
JP5364666B2 (ja) 立体画像表示装置、方法およびプログラム
CN1977544B (zh) 3d显示方法和设备
WO2011118084A1 (ja) 画像処理装置および画像処理方法
KR20080036018A (ko) 오토스테레오스코픽 조망 구역의 각도 범위를 제어하는방법 및 장치
JP5450330B2 (ja) 画像処理装置および方法、ならびに立体画像表示装置
US10171799B2 (en) Parallax image display device, parallax image generation method, parallax image print
JP2013065951A (ja) 表示装置、表示方法、及びプログラム
KR100586221B1 (ko) 평면 표시 장치를 이용한 3차원 영상 표시 장치
KR100662429B1 (ko) 입체 영상 표시 장치
JP4660769B2 (ja) 多視点立体ディスプレイ装置
JP5753439B2 (ja) 視差画像表示装置、視差画像生成方法、及び視差画像プリント
JP6020552B2 (ja) 画像表示装置及び光学装置
KR20050076946A (ko) 입체영상 표시장치 및 방법
JP5603370B2 (ja) 視差画像表示装置、視差画像生成方法、及び視差画像プリント
US20150234196A1 (en) Image display apparatus, lenticular lens, and image display method
JP4481275B2 (ja) 3次元映像情報の伝送方法
KR100730404B1 (ko) 입체 영상 표시 장치
KR20160089860A (ko) 무안경식 시스템
JP5492311B2 (ja) 視点画像生成装置、視点画像生成方法及び立体画像印画装置
KR101345129B1 (ko) 3차원 입체 영상 표시 및 기록 장치
JP5749974B2 (ja) 視差画像表示装置、視差画像生成方法、及び視差画像プリント
US20110279657A1 (en) Adapter plate for display device and method for making of stereo visual visualization in determined visual distance
Park et al. Comparison of perceived resolution between a parallax barrier and a lenticular array
JP2000227577A (ja) 多重液晶パネル立体画像表示装置
JP2011033819A (ja) 3次元画像表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131203

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150310

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150416

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150519

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150522

R150 Certificate of patent or registration of utility model

Ref document number: 5753439

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250