JP7096371B2 - オフアングル分離が強化されたスーパーステレオスコピックディスプレイ - Google Patents

Description

関連出願への相互参照
［０００１］本発明は、２０１８年７月２４日に出願された米国特許出願第１６／０４４，３５５号、２０１８年２月２７日に出願された米国仮出願第６２／６３５，７２８号、および２０１８年４月２３日に出願された米国仮出願第６２／６６１，６０５号の利益を主張するものであり、これらはすべてこの参照によりその全体が組み込まれる。

技術分野
［０００２］本発明は、一般に、画像ディスプレイ分野、より具体的には、オフアングル分離を強化した新規で有用なスーパーステレオスコピックディスプレイに関する。

［０００３］画像ディスプレイは現代生活の不可欠な部分である。テレビからモニター、スマートフォンやタブレットの画面に至るまで、画像ディスプレイは、さまざまな形式で提示された情報を表示および操作する機能をユーザに提供する。

［０００４］３次元ディスプレイの登場により、ユーザは２次元ディスプレイよりもリアルな画像を体験できるようになった。しかしながら、３Ｄディスプレイの大部分では、ヘッドマウントディスプレイ（ＨＭＤ）またはその他の面倒な周辺機器を使用する必要がある。

［０００５］フリースペース３Ｄディスプレイにより、ＨＭＤが不要になり、複数のユーザが共有体験でコンテンツを表示および操作できるようになった。残念ながら、いくつかの既存のフリースペース３Ｄディスプレイは、サイズ、制限された視野角、低解像度と明るさ、シーンの歪み、高コストなど、多くの問題によって妨げられている。したがって、画像ディスプレイ分野では、オフアングル分離が強化された新規で有用なスーパーステレオスコピックディスプレイを作成する必要がある。本発明は、そのような新規で有用なディスプレイを提供するものである。

［０００６］図１は、本発明の実施形態のディスプレイの上面図である。 ［０００７］図２Ａおよび２Ｂは、３次元画像の立体視図である。 ［０００８］図３Ａおよび３Ｂは、本発明の実施形態のディスプレイの断面図である。 ［０００９］図４は、本発明の実施形態のディスプレイの視差発生器の断面図である。 ［００１０］図５Ａは、本発明の実施形態のディスプレイの拡大構成におけるレンチキュラーレンズの断面図である。 ［００１１］図５Ｂは、本発明の実施形態のディスプレイの圧縮構成におけるレンチキュラーレンズの断面図である。 ［００１２］図６Ａは、本発明の実施形態のディスプレイの光源から投影された画像の光路図である。 ［００１３］図６Ｂは、光源から投影され、本発明の実施形態のディスプレイの高屈折率光学ボリュームを通過する画像の光路図である。 ［００１４］図７は、本発明の実施形態のディスプレイの上面図である。 ［００１５］図８は、本発明の実施形態の高屈折率光学ボリュームおよび知覚された追加ボリュームの斜視図である。 ［００１６］図９Ａ、９Ｂ、および９Ｃは、本発明の実施形態のディスプレイの様々な斜視図である。 ［００１７］図１０Ａおよび１０Ｂは、本発明の実施形態のディスプレイの視距離に対する画像ビューの依存性の平面図である。

［００１８］本発明の本発明の実施形態の以下の説明は、本発明をこれらの本発明の実施形態に限定することを意図するのではなく、むしろ当業者が本発明を作成および使用できるようにすることを意図する。

１．オフアングル分離が強化されたスーパーステレオスコピックディスプレイ
［００１９］図１に示すように、オフアングル分離が強化されたスーパーステレオスコピックディスプレイ１００は、光源１１０と、視差発生器１２０と、高屈折率光学ボリューム１４０とを具える。このディスプレイ１００は、追加的または代替的に、ポラライザ１３０、四分の一波長板１３１、光学ボリュームガイド１４１、オンボードコンピュータ１５０、および／またはコンテクスト照明システム１６０を具え得る。

［００２０］図１に示すように、ディスプレイ１００は、複数の視聴者が２次元および／または３次元の画像データを複数の視点から同時に見ることを可能にするように機能する。ディスプレイ１００は、角度に依存した視聴体験を生成し、これを用いて（立体視を介して）３次元視聴体験を提供し、および／または（必ずしも奥行きの知覚を引き起こすことなく）異なる角度の視聴者に視聴角度に応じて異なる画像を提供することができる。一例は、図２Ａおよび２Ｂに示す通りである。ディスプレイ１００は、複数の角度で同じ３Ｄ画像を生成することもできるが（例えば、視聴者１が０度および５度の視点でそれぞれ画像１および２を見て、視聴者２が２０度および２５度の視点でそれぞれ画像１および２を見る）、ディスプレイ１００は、好ましくは、連続的な途切れのないシーン（例えば、０度で画像１、５度で画像２、・・・５（Ｎ－１）度で画像Ｎ、ここでＮは整数）を生成して、没入感の高い視聴体験を提供する。代替的に、ディスプレイ１００は、任意の目的のために任意の画像のセットを用いてもよい。

［００２１］オフアングル分離の強化は、好ましくは、高屈折率光学ボリューム１４０によって実現される。その高い屈折率および形状の性質により、光学ボリューム１４０は、特定の視野角における視聴者に向けられた一次画像を、そうでない場合（光学ボリューム１４０がない場合）よりも視聴者の近くに見えるようにして、光源１１０によって生成された画像が画面から「浮き上がる」という知覚を増大させる。この効果をさらに増強すると、特定の視野角の視聴者に対して軸外の画像の場合、この画像は軸上の画像ほど近くに表示されず、視聴者にとって空間内の軸上画像と軸外画像が分離しているように見える。この現象は、高屈折率光学ボリューム１４０に関する章でより詳細に議論される。

［００２２］光源１１０は、ディスプレイ１００に表示するための画像（すなわち、画像データから生成された光）を生成するように機能する。光源１１０は、好ましくは、個別にアドレス指定可能なピクセルのセットを含む平面２次元ディスプレイであるが、追加的または代替的に、任意の適切なディスプレイであり得る。例えば、光源１１０は、１つまたは複数の可動光源；例えば、複数の光源の外観をシミュレート（つまり、ディスプレイの多重化）するために一連の位置にわたりスキャンされるレーザーを具え得る。

［００２３］光源１１０は、好ましくはＲＧＢカラー光源（例えば、各ピクセルが、赤、緑、および青のサブピクセルを含む）であるが、追加的または代替的に、実質的に単色の光源または任意の他の光源（例えば、白色光源）であってもよい。

［００２４］光源１１０は、好ましくは、プロジェクタまたはプロジェクタライトエンジン（例えば、ＤＬＰ、レーザー、ＬＣｏＳ、および／またはＬＣＤプロジェクタ）であるが、追加的または代替的に、任意の適切なディスプレイ（例えば、ＬＣＤモニタ／ＴＶディスプレイ、ＯＬＥＤディスプレイ、ｅ－ｉｎｋディスプレイ、ＬＥＤアレイ、回転ＬＥＤディスプレイ、ｅ－ｉｎｋディスプレイ、エレクトロルミネセントディスプレイ、ネオンディスプレイなど）であってよい。好ましい実施形態の１つの変形例では、光源１１０は、コリメートされたバックライトを備えた液晶パネルを具える。

［００２５］ディスプレイ１００は、好ましくは単一の光源１１０を有するが、追加的または代替的に複数の光源１１０を有してもよい。例えば、図３Ａおよび図３Ｂにそれぞれ示すように、複数の光源を直列および／または並列に配置することができる。光源１１０、ポラライザ１３０、４分の１波長板３１１、および／または追加の光学系（例えば、ミラー、レンズなど）の任意の組み合わせが、ディスプレイ１００で使用され得ることに留意されたい。複数の光源１１０を利用する構成では、光源１１０は、オフセットされ、角度付けられ、回転され、湾曲され、または他の方法で任意の方法で構成することができる。

［００２６］光源１１０は、光を視差発生器１２０および／または高屈折率光学ボリューム１４０に結合するように機能する光学要素（例えば、レンズ、ミラー、導波路、フィルタ）を具え得る。例えば、光源１１０は、光源１１０出力のコリメートを増加させるように設計されたコリメートレンズを含み得る。第２の例として、光源１１０は、光源１１０の出力をスケーリングする（またはさもなければ歪める）ように設計されたレンズを含み得る（例えば、サイズ縮小またはサイズ増大）。そのようなレンズは、光源１１０の出力を均一に（例えば、両方の画像寸法を１／２にする）または不均一に（例えば、第１の画像寸法を減少させず、他方の画像寸法を１／４にする）スケーリングすることができる。第３の例として、光源１１０は、観察された画像の焦点面を操作するレンズを含んでもよく、そのようなレンズは調整可能であり得る（被写界深度を掃引できる）。そのようなレンズが高速で調整可能である場合、視聴者に拡大された知覚被写界深度を提供することができる。

［００２７］光源１１０は、他の目的のためにディスプレイ１００によって使用される光を用意するために、任意の受動的または能動的光学要素を追加的または代替的に具えることができる。例えば、光源１１０は、フィルタまたはスプリッタを具え得る。より具体的な例として、光源１１０の本来の出力が偏光されていない場合、光源１１０は偏光フィルタを具えてもよい。別の例として、光源１１０は、マイクロレンズアレイおよび／またはフレネルレンズを具え得る。

［００２８］視差発生器１２０は、光源１１０の出力から角度依存ビューを生成するように機能する。視差発生器１２０は、そのような角度依存ビューを生成することができる任意の構造（例えば、レンチキュラーレンズ、マイクロ球形レンズ、視差バリアなど）であり得る。

［００２９］第１の例では、視差発生器１２０はレンチキュラーレンズである。レンチキュラーレンズは、光源１１０上のレンチキュラーレンズの位置に基づいて異なるピクセル（または画像セグメント）を表示する光源１１０と組み合わせて角度依存ビューを生成する。例えば、図４に示すように、３つの角度で視聴者に表示される画像は、それぞれ１、２、および３のラベルが付いたピクセルで構成される。

［００３０］レンチキュラーレンズの特性（例えば、ピッチ、材料、構造、光源１１０に対する向きおよび位置）および所望の視聴特性（例えば、視聴者の数、視距離、所望の視聴数、視聴モードなど）に基づき、ディスプレイ１００は、所望の結果を生成するために光源１１０の出力を変更することができる。

［００３１］一実施例では、ディスプレイ１００によって提供される異なるビューの数は、ある視距離での超立体視に十分である。すなわち、視聴者の両方の目がそれぞれ、ディスプレイ１００から異なる画像を受け取り、視聴者がディスプレイ１００の周りを移動すると、ビューは（視野角とともに）変化する。例えば、角度１の視聴者は、シーン１を右目で、シーン２を左目で見て、ここでシーン１とシーン２は１つまたは複数のオブジェクトの立体３次元ビューを作成する。視聴者が角度１から角度２に移動したら、視聴者は今度はシーン２を右目で、シーン３を左目で見て、これが１つまたは複数のオブジェクトの２番目の立体３次元ビューを生成する。このようにして、（立体効果のおかげで）視聴者は特定の視野角で３次元画像を知覚し、図２Ａ（第１のビューに対応）および図２Ｂ（第２のビューに対応）に示すように、視聴者がディスプレイ１００の周りを移動するときもその知覚は維持される（１つまたは複数のオブジェクトの回転ビューに対応するビューの変化のおかげで）。このようにして複数の立体三次元ビューを生成するディスプレイは、スーパーステレオスコピックディスプレイと呼ばれる。

［００３２］レンチキュラーレンズは、任意の適切な構成および構造を有し、任意の適切な材料で作製され得る。レンチキュラーレンズは、好ましくは一次元（例えば、列配置された円筒レンズ）であるが、追加的または代替的に、二次元レンチキュラーレンズ、フライアイレンズアレイ、または一体型イメージングレンズアレイであり得る。好ましくは、光源１１０のアドレス可能なセグメント（例えば、ピクセル）とレンチキュラーレンズとの間に相関関係があるが、レンチキュラーレンズのレンズ柱は、光源１１０に対して特定の向きである必要はないことに留意されたい。例えば、レンチキュラーレンズの列をピクセルの列に揃えてもよいが、角度を付けてオフセットさせてもよい（これにより、画像スライスによる解像度の低下を、画像のピクセルの列と行の一方だけではなく、両方に配分することができる）。この技術は、米国特許第６，０６４，４２４号にさらに記載されている。（光源１１０出力の）画像のスライスまたは分割は、所望の表示結果を達成するために任意の方法で実行することができる。画像の処理は、好ましくは、オンボードコンピュータ１５０によって実行されるが、追加的または代替的に、任意のコンピュータシステムによって制御してもよい。

［００３３］レンチキュラーレンズは、レンズの光学特性を変更するために再構成できることに留意されたい。例えば、レンチキュラーレンズは、図５Ａ（拡大）および５Ｂ（圧縮）に示すように、レンズを物理的に圧縮または応力をかけてレンズのピッチを変更し、それに応じてピクセルからレンズへのマッピングを変更できるように、可撓性または半可撓性材料で製造してもよい。追加的または代替的に、レンズの光学特性は、別のメカニズムによって（例えば、レンチキュラーレンズの屈折率を変更することによって）変更することができる。別の例として、レンチキュラーレンズは、層状液晶アレイを使用して（レンズ全体として、または固定屈折レンズと組み合わせて）実装し、レンチキュラーレンズの動的設定を可能にするようにしてもよい。

［００３４］ディスプレイ１００は、所望の光学効果を生み出すために、複数のレンチキュラーレンズおよび／または他のレンズを含み得る。例えば、１Ｄレンチキュラーレンズをさまざまな方向に積み重ねて、２Ｄ角度ビュー依存性を作成することができる。

［００３５］第２実施例では、視差発生器１２０は、ピンホールアレイまたは視差バリアである。第３実施例では、視差の生成は、複数の光源１１０によって提供され得る。例えば、異なる角度のプロジェクタのセットと、視野角依存フィルムまたは表面（視差発生器１２０と光源１１０の両方のように一緒に機能する）を使用して、単一の光源１１０およびオーバーレイされた視差発生器１２０と同様の視野効果を生成することができる。

［００３６］ポラライザ１３０および四分の一波長板１３１を使用して、ディスプレイ１００の画像出力の品質を高めることができる。例えば、図１に示されるような構成では、ポラライザ１３０および四分の一波長板１３１は、（誤った反射を抑制することによって）知覚される画像のコントラストまたは明るさを増加させることができる。これと同じ効果を使用して、例えば、視差発生器１２０によって引き起こされる画像ゴーストを低減することができる（この場合、「ゴースト」画像は、意図された／軸上の画像とは異なる偏光であり得る）。

［００３７］ポラライザ１３０および四分の一波長板１３１は光学ボリューム１４０に積層してもよいが、ポラライザ１３０／四分の一波長板１３１は、光学ボリューム１４０と周囲空気との間の屈折率を有する場合があるため、これらの（および他の）光学部品は、ＦＴＩＲ（frustrated total internal reflection）から生じる光学ボリューム１４０からの光損失を防ぐために、ある材料（または空気／真空）によって分離されることが望ましい場合がある。

［００３８］高屈折率光学ボリューム１４０は、オンアングルビュー（すなわち、プライマリビュー）とオフアングルビューとの間の知覚される分離を強化することによって、ディスプレイ１００の表示を強化するように機能する。

［００３９］高屈折率光学ボリューム１４０は、好ましくは、光学的に透明な材料（例えば、アクリル、ガラス、ポリカーボネート）の固体矩形プリズムであるが、追加的または代替的に、光を透過し屈折率が１より大きい任意の三次元ボリューム（任意の構造の任意の材料でなる）であってよい。例えば、高屈折率光学ボリュームは、アクリルであり、そして１．４９の相対屈折率を有し得る。

［００４０］図６Ａに示すように、それ自体で、光源１１０は、視聴者の目に画像を作成することができる。高屈折率光学ボリューム１４０を組み込んだ後、視聴者の目に形成される画像はより小さくなり、光学ボリューム１４０が適所にある知覚画像は、光学ボリュームがない場合よりも、近く（例えば、画像の知覚位置で示すように）またはより大きくなることを示唆する。図６Ｂに示すように、適切な相対的サイズの手がかり（例えば、ディスプレイの物理的境界）が与えられると、視聴者は、画像をより近くに（例えば、光学ボリューム１４０内で「浮いている」ように）知覚しがちである。光学ボリューム１４０は、（光を軸上視の方へ曲げることによって）ディスプレイ１００の視野角を増大させるという追加の利点を有し得る。

［００４１］光学ボリューム１４０のいくつかの構成（例えば、屈折率が均一な長方形プリズム）では、この効果は、図７に示すように、視角の軸外（例えば、光源１１０および光学ボリューム１４０に垂直ではない）ではあまり目立たない。これにより、オンアングルビューとオフアングルビューが分離され、立体画像によって可能になる奥行き効果がさらに向上し得る。

［００４２］ディスプレイ１００は、光学ボリューム１４０内の画像の「浮き上がる」効果を強化するように機能する光学ボリュームガイド１４１をさらに具えることができる。光学ボリュームガイド１４１は、好ましくは、ディスプレイ１００の画像に奥行き感を提供するのを助けるために視聴者の目を引く、光学ボリューム１４０上に（またはそうでなければ光源１１０の光路内に）見えるマーキングである。

［００４３］光学ボリュームガイド１４１は、視聴者によって見られるプライマリ／軸上画像を配置する知覚面とは異なる（そして好ましくは平行な）面に存在する任意の可視の２次元または３次元構造であり得る。例えば、光学ボリュームガイド１４１は、光学ボリューム１４０の表面にエッチング、塗装、接着、または印刷することができる。追加的または代替的に、光学ボリュームガイド１４１は、別個の光ガイド、基板、または任意の他の構成要素上に配置され得る。

［００４４］本発明の実施形態の一実施例では、光学ボリュームガイド１４１は、少なくとも１つの表面で反射する。この実施例では、システム１００は、反射偏光器１３０（または他の反射面または部分反射面）を組み込んで、光学ボリュームガイド１４１の虚像を作成し、図８に示すような光学ボリューム１４０の最初に認識されるサイズよりも大きい（例えば、２倍大きい）ボリュームの知覚を作成する（光学ボリューム１４０の最初に認識されたサイズは、高屈折率材料を使用しているため、実際のサイズよりも小さくなり得る）。

［００４５］また、光学ボリュームガイド１４１を用いると、ディスプレイ１００の三次元効果が他のディスプレイよりも（二次元）映像録画においてよりよく知覚され、フィルム全体でディスプレイ１００の全体インパクトがよりよく伝わることを可能にし得ることに留意されたい。

［００４６］図９Ａに示すように、ディスプレイ１００は、追加的または代替的に、不透明要素（例えば、不透明ハウジングの複数部分）を使用して、光学ボリューム１４０の側面を取り囲むか、または部分的に取り囲み、深さの知覚をさらに高める（および潜在的に望ましくない光の存在を減らす）ようにしてもよい。この実装例の追加の図は、図９Ｂおよび図９Ｃに示す通りである（オプションの光学ボリュームガイド１４１を具える）。

［００４７］同様に、ディスプレイ１００は、他のディスプレイ１００と共に任意の方法で使用することができる（例えば、２×２または３×３アレイで、背中合わせに）。

［００４８］オンボードコンピュータ１５０は、光源１１０による表示の前に、ディスプレイ１００によって受信された画像データの画像処理を実行するように機能する。例えば、オンボードコンピュータは、３Ｄモデル情報を、光源１１０によって投影されるスライスに分離することができる。このオンボードコンピュータ１５０は、追加的または代替的に、任意の方法でボクセル表現のための３Ｄ画像データを準備するように機能し得る。例えば、オンボードコンピュータ１５０は、視差発生器１２０の構造／構成に基づいて２Ｄ立体視ビューを生成することができる。別の例として、光の折り畳みがディスプレイ１００によって実行される場合（すなわち、画像がスライスされ、異方性スケーリングされる）、オンボードコンピュータ１５０は、ピクセル値間の補間を実行して、新しい変換されたピクセル値を決定することができる。別の例として、オンボードコンピュータ１５０は、画像エッジでのぼけをシミュレートするためにディザリングを実行してもよい。第３の例として、オンボードコンピュータは、制御コマンドを（例えば、コンテクスト照明システム１６０に）送信してもよい。

［００４９］オンボードコンピュータ１５０は、追加的または代替的に、光源１１０またはディスプレイ１００の他の態様の一般的な特性を制御するように機能することができる。例えば、オンボードコンピュータ１５０は、表示された画像の不透明度の変化をシミュレートするために、光源１１０ピクセルの明るさを制御することができる。

［００５０］オンボードコンピュータ１５０によって実行されると説明される機能は、追加的または代替的に、別のコンピュータシステム（例えば、クラウド内の分散コンピューティングシステム）によって実行され得ることに留意されたい。

［００５１］本発明の実施形態の一実施形態では、オンボードコンピュータ１５０は、有線および／または無線通信接続を介して別の電子デバイス（例えば、スマートフォン、タブレット、ラップトップコンピュータ、デスクトップコンピュータなど）と通信する。この実装例では、データは、オンボードコンピュータ１５０と他の電子デバイスとの間でストリーミングまたは他の方法で通信され得る。例えば、スマートフォンがビデオ情報をオンボードコンピュータに送信し、そこで、それはオンボードコンピュータ１５０によって深度スライスにスライスされる。追加的または代替的に、深度スライスは、他の電子デバイスによって実行されてもよい。一般に、画像処理のタスクは、オンボードコンピュータ１５０と通信する任意の数の電子デバイス間で実行および／または分割することができる。

［００５２］コンテクスト照明システム１６０は、ディスプレイ１００によって表示されるデジタル画像にプログラムされた照明条件に一致または類似することを意図した光で、ディスプレイ１００の周辺（または近くの領域）を照明するように機能する。そうすることにより、コンテクスト照明システム１６０は、一部のユーザのために現実世界の画像を「ロック」することができる。例えば、ユーザの手を、ユーザの手の近くのデジタルシーンの特定の部分の照明と一致するように照明することができる。これにより、没入感が大幅に向上することができる。

［００５３］コンテクスト照明システム１６０は、デジタル画像内の明示的な指示に基づいて、照明特性（例えば、色、持続時間、強度、方向、焦点の程度、コリメーションなど）を制御することができる。追加的または代替的に、コンテクスト照明システム１６０は、任意の方法で照明特性を制御してもよい。例えば、コンテクスト照明システム１６０は、（明示的なコンテクスト照明指示のないデジタル画像の場合）画像のサブセット全体の色を平均し、この光でディスプレイ１００を照らすことができる。

［００５４］コンテクスト照明システム１６０は、例えば、色制御可能なＬＥＤなど任意の数および／またはタイプの照明装置を具えることができる。コンテクスト照明システム１６０は、好ましくは、オンボードコンピュータ１５０によって制御されるが、追加的または代替的に、任意のコントローラまたはコンピュータシステムによって制御されてもよい。

［００５６］ディスプレイ１００はまた、相互作用トラッキングのための手段を含み得る。例えば、ディスプレイ１００は、ディスプレイ１００とのユーザ相互作用をトラッキングする奥行きカメラを具え、当該奥行きカメラで測定された通りにハンドジェスチャおよび／または視聴者とディスプレイ１００との間の他の相互作用に基づいて、表示される画像の制御および／または操作を実現することができる。別の例として、ディスプレイ１００は、ディスプレイ１００の表面での視聴者のタッチインタラクションをトラッキングする透明なタッチセンサを具え得る。

［００５７］好ましい実施形態の一実施例では、ディスプレイ１００は、超音波触覚フィードバックモジュールおよびヘッドトラッカー（例えば、頭の位置、向き、および／または動きを追跡するカメラまたは他のデバイス）を具える。この実施例では、触覚フィードバックモジュールを介した触覚フィードバックは、頭部追跡データ（または他のデータ、例えば、手追跡データ、身体追跡データ、ビデオ／オーディオキャプチャデータなど）に従って変更され得る。触覚フィードバックはまた、システムの視覚的フィードバックと一致する触覚フィードバックを提供するために、オンボードコンピュータ１５０を介して調整される触覚手袋によって提供され得る。

［００５８］好ましい実施形態の別の実施例では、ディスプレイ１００は、空中ディスプレイと相互作用するための赤外線不透過ワンドを具える（例えば、ワンドは、エアギャップまたは水を含むか、またはＩＲ遮断性であるが可視光透過性のプラスチックまたはガラスである）。このワンドは、（ユーザの素手に加えて）奥行きカメラで読み取ることができるインタラクション機器として機能するが、空中画像の面を超える相互作用の場合に可視光インタラクション機器や手のように空中画像の光を遮らない。追加的または代替的に、ワンドは、よりよいトラッキングのために、赤外線反射器および／または発光体を具え得る。いくつかの例では、ワンドは、６自由度のトラッキングを提供するために内部ジャイロおよび加速度計を具え得る。

［００５９］ディスプレイ１００は、追加的または代替的に、（例えば、ＡｍａｚｏｎのＡｌｅｘａなどの自動化されたアシスタントを介した）音声制御を含み得る。

［００６０］トラッキングと相互作用は、好ましくはオンボードコンピュータ１５０によって制御されるが、追加的または代替的に、任意のコントローラまたはコンピュータシステムによって制御することができる。

［００６１］ディスプレイ１００の構成要素を特定の構成で示しているが、ディスプレイ１００の構成要素は、本出願に記載されるような効果を生み出すために任意の方法で結合／順序付けされ得ることを理解されたい。

２．スーパーステレオスコピックディスプレイ画像処理
［００６２］従来のステレオスコピックディスプレイでは、ディスプレイは通常、設定された距離にいる一定数の視聴者向けに最適化されている。例えば、レンチキュラーレンズを具える従来のステレオスコピックディスプレイでは、視聴者は制限された範囲内に留まる必要がある（視聴軸に沿った視聴距離、および視聴軸に垂直な距離の両方の観点から）。これは、これらのシステムにとって大きな不都合である。ヘッドトラッキング（またはユーザが空間内を移動するときにユーザの目の位置を推測するその他のメカニズム）の出現により、一部のステレオスコピックディスプレイは、投影された画像を変更して視聴範囲を拡大する。

［００６３］ディスプレイ１００は、かなりロバストな方法でこの問題に対処することができる。例えば、ディスプレイ１００は、オンボードコンピュータ１５０（または他の方法）で視差発生器１２０に投影された画像を修正することによって（および／または視差発生器１２０自体の光学特性を変更することによって）、視聴距離（ヘッドトラッカーまたはカメラなどのディスプレイ１００からの視聴者の距離を特定するための他のメカニズムによって決定される）を補償することができる。レンチキュラーレンズによって投影される光は一定の角度に従う（したがって、光線間の横方向スペースが視距離とともに増加する）ため、視距離は重要である。この例が、図１０Ａおよび１０Ｂに示されている。第１の視距離で、ユーザは、一方の目で第１の画像を知覚し（例えば、ピクセル列０、１０、２０などに対応）、他方の目で第２の画像を知覚することができる（例えば、ピクセル列１、１１、２１などに対応）。これは、従来のレンチキュラーレンズベースのステレオスコピックディスプレイを最適な視距離で表示するのと似ている。第２の、より近い距離で、ユーザはそれぞれの目で複数の画像を知覚し得る（視野間の横方向の距離が近いため）。例えば、ユーザは、第１の目で３つの画像（例えば、０、１０、２０．．．；１、１１、２１．．．；２、１２、２２に対応）を知覚し、第２の目で３つの画像（例えば、２、１２、２２．．．；３、１３、２３．．．；４、１４、２２に対応）を知覚し、ここで画像は近い距離で重なる可能性があることに留意されたい。ディスプレイ１００は、１つまたは複数の方法でこの視野角の変化に適応することができる。例えば、ディスプレイ１００は、個々の視聴者の両目に明るく見えるであろうピクセル列を暗くするか、またはオフにすることができる。視野が重なっていない場合でも、近い視聴距離では、それぞれの目がより多くのピクセルを見ることができることに留意されたい。ディスプレイ１００は、いくつかの方法のいずれかでこれに適応することができる。例えば、ディスプレイ１００は、補間によって、より高解像度のソースを選択することによって、または画像がリアルタイムで生成される場合、生成された画像の解像度を変更することによって、画像シーンを変更することなく、表示された画像の解像度を上げることができる。視距離の変更に関する別の問題は、レンチキュラーレンズが視距離に依存する方法で画像を著しく歪ませることである（例えば、画像を水平方向に引き伸ばす、またはアスペクト比を変更する）。ディスプレイ１００は、表示された画像を垂直方向または水平方向に再スケーリングして、設定された距離にいる視聴者によって知覚されるアスペクト比を修正することによって、この問題に適応することができる。

［００６４］また、視距離は知覚される奥行きに影響を与えることにも留意されたい（ステレオスコピック画像の分離の違いによる）。ディスプレイ１００は、所与の深度知覚を維持するために、画像出力を追加的または代替的に変更することができる。

［００６５］視差発生器１２０がビューを水平方向に変化させる範囲で（例えば、柱状レンチキュラーレンズの場合のように）、垂直方向の動きを反映するようにディスプレイ１００によって表示されるビューを変更することが望ましい場合がある（例えば、ユーザがビューの高さを変更する）。ディスプレイ１００は、ｙ軸の視差（例えば、ある基準に対する視線高さ）を検出し、それに応じて表示された画像のパースペクティブを変更することによってこれを行うことができる。例えば、基準より上の視線高さのユーザはわずかに高い角度からシーンを見るが、そのユーザがしゃがむと、ユーザはこのシーンを等しいまたは下がった角度から見る。ディスプレイ１００が３Ｄ光源からリアルタイムでビューを生成している場合、これは、角度の変化を反映するように光源１１０の２Ｄ出力を変更するのと同じくらい簡単であり得る。光源に可能なパースペクティブが制限されている場合、ディスプレイ１００は、追加的または代替的に、光源１１０の２Ｄ出力を歪ませて、ユーザの視線高さに基づいて高さの変化をシミュレートしてもよい。

［００６６］これらは、ディスプレイ１００がユーザの頭をトラッキングするときにできる調節の例である。ディスプレイ１００は、さらに、同時に複数の視聴者をトラッキングしてもよい。ある意味では、これは単一ユーザの場合と似ており、「ビュー」（さまざまな角度で投影された個別の画像）が、見る距離に応じて単一ユーザの目に割り当てられるのと同じように、一般に複数のユーザに割り当てることができる。単一ユーザの場合、一般的に知覚外にあるビューの主な懸念事項はクロストークであり、つまり、ユーザが自分の目に届くことを意図していない画像を見る可能性がある（角度がずれているため）。ゴースト画像は通常、プライマリ画像（ユーザの目に届くように意図されたもの）よりも暗いが、それでもぼやけが生じる可能性がある。単一ユーザの場合、ゴーストが生じるビューを単にオフにする（または視聴者の目に届くビューを時間多重する）ことができる。これは複数ユーザの場合でも可能かもしれないが、ある人にとって「ゴースト」のビューが別の人のプライマリビューである場合があるため、これはより複雑な問題となる。ビューに関するもう１つの主な懸念事項は、「自然な」ビューと「人工的な」ビューの違いである。個人が頭を横方向に動かすと、このユーザは順番に異なるビューを見ることができる（これらのビューは同じでもよい）－これはレンチキュラーレンズの機能である－しかし、ディスプレイ１００の光出力が変化しない限り、最終的にユーザに表示されるビューは繰り返される（レイクロスオーバーと呼ばれる効果による）。これらのビュー（ディスプレイ１００の光出力を変更せずに存在するビュー）は、「自然な」ビューである。さらに、ディスプレイ１００は、ディスプレイ１００の光出力を変更して、「自然なビュー」ゾーンの境界を越えても連続ビューを提供することができる。言い換えれば、ディスプレイ１００は、（ユーザの視聴位置に基づいて）どのビューがユーザに表示されるかをトラッキングし、ユーザがビューの境界に近づくとディスプレイ出力を更新することができる。例えば、１０ピクセル列の周期を有するレンチキュラーレンズでは、ユーザが１０番目のピクセル列に近づくと、ディスプレイ１００は、ピクセル列１の出力を「ピクセル列１１」として表示するように変更する（目標はシーン周りの継続的なビューを維持することとする）。

［００６７］この原則は複数ユーザのシナリオにも当てはまるが、ビューがユーザ間で分割される点で異なる（例えば、異なる視距離、視線高さ、または異なる内容を見るためなど、異なる画像が異なるユーザに表示される必要がある場合）。ディスプレイ１００は、任意の方法で複数のユーザ間でビューを分割することができ、任意の方法でこれらのユーザに提示されるビューに上記説明した様々な画像改良技術を適用することができる。

［００６８］ディスプレイ１００は、追加的または代替的に、これらの画像改良の適用間の移行をスムーズにすることができる。これは、前に違う方法で画像を表示した（例えば、第１の視線高さの知覚を提供するために投影された）１人のユーザが、この画像を異なるパースペクティブで表示している別のユーザの自然なビュー領域（例えば、第２の異なる視線高さの知覚を提供するために投影された）へと移動する場合の「ビュークラッシュ」の場合に特に重要になる。このようなシナリオにおいて、ディスプレイ１００は、ビュークラッシュが発生する可能性があることを検出し、１またはそれ以上のユーザに表示される出力を（理想的に）変更して、異なるユーザに表示されるビューをユーザのビューに「クラッシュ」する（つまり、交わり始める）ように１つにすることができる。

［００６９］移行スムージングの別の例として、ディスプレイ１００が遷移を減衰させることができる。これは、ヘッドトラッキングで誤った値が生成されるシナリオで特に役立つ場合がある。遷移の減衰により、誤った値が発生した場合にビューが急激に変化するのを防ぐことができる。また、ディスプレイ１００が視聴者のヘッドトラッキングロックを失った場合、ディスプレイ１００は、ロックが回復するまでデッドレコニングを実行しようと試みてもよい。

［００７０］追加的または代替的に、表示される画像の態様は、環境要因（例えば、温度、湿度、高度など）に基づいて変更され得る。表示された画像の態様はまた、（例えば、ディスプレイ１００のアレイのように）複数の光源を具えるディスプレイ１００の実装例における画像間の互換性を維持するように変更され得る。

［００７１］図７に示すように、高屈折率ボリュームの軸外ビューは、異なる知覚深度で見える場合があり（少なくとも非放射対称ボリュームの場合、高屈折率ボリューム内で光が角度を持って移動する距離が異なるため）、したがって、上記の画像改良技術（一般にはディスプレイ）は、高屈折率光学ボリューム１４０の形状および光学特性（特に、屈折率）を考慮してさらに修正され得る。

［００７２］当業者が、前述の詳細な説明および図および特許請求の範囲から理解するように、以下の特許請求の範囲で定義される本発明の範囲から逸脱することなく、本発明の好ましい実施形態に修正および変更を加えることができる。

Claims (19)

1. オフアングル分離が強化されたスーパーステレオスコピックディスプレイであって、
   第１の光源と、
   前記第１の光源に光学的に結合され、前記第１の光源と共に、視野角依存性を有する第１の光出力を生成するレンチキュラーレンズと、
   前記レンチキュラーレンズに光学的に結合され、１より大きい屈折率を有する高屈折率光学ボリュームとを具え、
   前記第１の光源は前記第１の光出力を前記高屈折率光学ボリュームに送出し、前記高屈折率光学ボリュームは前記第１の光出力を自由空間に送出し、前記高屈折率光学ボリュームから送出された前記第１の光出力が、第１の視野角における第１の可視画像と、前記第１の視野角から第１の非ゼロ角度だけ隔てられた第２の視野角における、前記第１の可視画像と同一ではない第２の可視画像と、前記第２の視野角から第２の非ゼロ角度だけ隔てられた第３の視野角における、前記第１および第２の可視画像と同一ではない第３の可視画像とを含み、前記第１、第２、および第３の可視画像は第１の三次元画像のビューに対応し、当該第１の三次元画像の超立体視を可能にし、
   前記高屈折率光学ボリュームが、前記第１、第２、および第３の可視画像が前記高屈折率光学ボリューム内に位置するように見えるように、前記第１、第２、および第３の可視画像の知覚される視距離を減少させる、スーパーステレオスコピックディスプレイ。
2. 前記高屈折率光学ボリュームが、１．４より大きい屈折率を有する透明なポリマーからなる長方形のプリズムである、請求項１に記載のスーパーステレオスコピックディスプレイ。
3. 前記高屈折率光学ボリュームの第１の表面に配置された一組の光学ボリュームガイドをさらに具え、当該一組の光学ボリュームガイドは、ディスプレイによって表示される画像の奥行きの知覚を増強する、請求項１に記載のスーパーステレオスコピックディスプレイ。
4. 前記光学ボリュームガイドは前記高屈折率光学ボリュームの表面にエッチングされている、請求項３に記載のスーパーステレオスコピックディスプレイ。
5. 前記高屈折率光学ボリュームの第１の表面の反対側にある第２の表面に配置された反射器をさらに具え、当該反射器は前記光学ボリュームガイドの虚像を生成し、前記高屈折率光学ボリュームが他の方法で表示されるよりも大きいという知覚を生成する、請求項３に記載のスーパーステレオスコピックディスプレイ。
6. 前記レンチキュラーレンズは、前記第１の光源のアドレス可能な列に平行な一次元レンチキュラーレンズであり、この一次元レンチキュラーレンズは、前記第１の光源のアドレス可能な列に垂直である、請求項１に記載のスーパーステレオスコピックディスプレイ。
7. 前記レンチキュラーレンズは、前記第１の光源のアドレス可能な列に対して０度より大きく９０度未満の角度に向けられた一次元レンチキュラーレンズであり、これにより、前記第１の光源のアドレス可能な列とアドレス可能な行の両方に解像度の損失が配分される、請求項６に記載のスーパーステレオスコピックディスプレイ。
8. 前記レンチキュラーレンズは、２つの一次元レンチキュラーレンズを積み重ねて得られる二次元レンチキュラーレンズである、請求項６に記載のスーパーステレオスコピックディスプレイ。
9. さらにトラッキングセンサを具えるとともに、前記第１の光源は、前記トラッキングセンサによってキャプチャされた視聴者に対応する頭または目のトラッキングデータに基づいて、前記視聴者用の前記第１の３次元画像の超立体視を可能にするように前記第１の光出力を修正する、請求項６に記載のスーパーステレオスコピックディスプレイ。
10. 前記第１の光源は、前記視聴者がディスプレイに近づくことに応答して、前記ビューのゴーストを低減するように前記第１の光出力をさらに修正する、請求項９に記載のスーパーステレオスコピックディスプレイ。
11. 前記第１の光源は、前記視聴者がディスプレイに近づくことに応答して、アスペクト比の歪みを補正するように前記第１の光出力をさらに修正する、請求項９に記載のスーパーステレオスコピックディスプレイ。
12. 前記第１の光源は、前記視聴者がディスプレイに近づくことに応答して、ディスプレイによって表示される画像の奥行きの知覚の変化を補正するように前記第１の光出力をさらに修正する、請求項９に記載のスーパーステレオスコピックディスプレイ。
13. 前記第１の光源は、前記トラッキングセンサによってキャプチャされた前記視聴者に対応する頭または目のトラッキングデータに基づいて、第１の視聴者および第２の視聴者の超立体視を実現するように前記第１の光出力を修正する、請求項９に記載のスーパーステレオスコピックディスプレイ。
14. 前記第１の光源は、前記第１の視聴者のために前記第１の三次元画像の超立体視を可能にするように前記第１の光出力を修正するとともに、前記第１の光源は、前記第２の視聴者のために第２の３次元画像の超立体視を可能にするように前記第１の光出力を修正する、請求項１３に記載のスーパーステレオスコピックディスプレイ。
15. 前記第１および第２の三次元画像が同一である、請求項１４に記載のスーパーステレオスコピックディスプレイ。
16. 前記第１の光源は、前記第１の視聴者の視野角、視距離、および視線高さに基づいて、前記第１の三次元画像の第１のパースペクティブを提供するように前記第１の光出力を修正する、請求項１５に記載のスーパーステレオスコピックディスプレイ。
17. 前記第１の光源は、前記第２の視聴者の視野角、視距離、および視線高さに基づいて、前記第１の３次元画像の第２のパースペクティブを提供するように前記第１の光出力を修正し、ここで、前記第１と第２のパースペクティブは同一でない、請求項１６に記載のスーパーステレオスコピックディスプレイ。
18. 前記第１の光源は、前記第１のパースペクティブが前記第１の視聴者の第１の視線高さを反映するように修正されるとともに、前記第２のパースペクティブが前記第２の視聴者の第２の視線高さを反映するように修正されるように、前記第１の光出力を最初に修正し、ここで前記第１および第２の視線高さは同一ではない、請求項１７に記載のスーパーステレオスコピックディスプレイ。
19. 前記第１の光源は、後に、前記第２の視聴者が前記第１の視聴者の方へ移動することに応答して、前記第１および第２のパースペクティブの両方が前記第１の視聴者の第１の視聴高さを反映するように前記第１の光出力を修正する、請求項１８に記載のスーパーステレオスコピックディスプレイ。

Images