JP2023521196A - 中心窩投影と拡大アイボックス領域とを持つニアアイ画像投影システム - Google Patents

中心窩投影と拡大アイボックス領域とを持つニアアイ画像投影システム Download PDF

Info

Publication number
JP2023521196A
JP2023521196A JP2022562255A JP2022562255A JP2023521196A JP 2023521196 A JP2023521196 A JP 2023521196A JP 2022562255 A JP2022562255 A JP 2022562255A JP 2022562255 A JP2022562255 A JP 2022562255A JP 2023521196 A JP2023521196 A JP 2023521196A
Authority
JP
Japan
Prior art keywords
image
projection system
light beam
peripheral
image projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022562255A
Other languages
English (en)
Other versions
JP7506759B2 (ja
JPWO2021209785A5 (ja
Inventor
スルカ・トマシュ
Original Assignee
クリアル・ソシエテ・アノニム
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by クリアル・ソシエテ・アノニム filed Critical クリアル・ソシエテ・アノニム
Publication of JP2023521196A publication Critical patent/JP2023521196A/ja
Publication of JPWO2021209785A5 publication Critical patent/JPWO2021209785A5/ja
Application granted granted Critical
Publication of JP7506759B2 publication Critical patent/JP7506759B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0081Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. enlarging, the entrance or exit pupil
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/09Beam shaping, e.g. changing the cross-sectional area, not otherwise provided for
    • G02B27/0938Using specific optical elements
    • G02B27/0944Diffractive optical elements, e.g. gratings, holograms
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0123Head-up displays characterised by optical features comprising devices increasing the field of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0147Head-up displays characterised by optical features comprising a device modifying the resolution of the displayed image
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • G02B2027/0174Head mounted characterised by optical features holographic
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Eye Examination Apparatus (AREA)
  • Lenses (AREA)

Abstract

【課題】従来、投影像の角度分解能は、投影像の視野角(FoV)とトレードオフだった。【解決手段】ニアアイ画像投影システムは、入射光ビームを変調し、かつ変調光ビーム(110a、110b)を投射するように構成された光変調器(20)を照らす入射光ビーム(10a、100b)を生成するピン光アレイ(10)と、ピン光像(31、39)を形成し、投影された像光ビーム(112a、112b)を投影軸線(170)に沿ってアイボックス領域(121a、121b)を画定するような変調光ビームを投影するように構成された光学要素(32、70、40)とを備える。変調光ビームは、中心窩瞳孔像(31)を形成しかつ周辺アイボックス領域(121a)を画定する中心窩投影像光ビーム(112a)を投影する中心窩変調光ビーム(110a)と、周辺瞳孔像(39)を形成する周辺変調光ビーム(110b)とを備える。出口瞳孔拡張装置(36、38)は、周辺ピン光像(39)のそれぞれに対して瞳孔拡張光ビーム(104)を投影すべく、かつ中心窩アイボックス領域よりも幅広い周辺アイボックス領域(121a)を画定する周辺投影画像光ビーム(112b)を形成すべく構成されている。

Description

本開示は、ニアアイ画像投影に関し、より具体的には、仮想現実、拡張現実、混合現実、又は拡張現実の頭部装着装置及び関連用途のためのニアアイ画像投影に関する。
ピン光に基づいたニアアイシーケンシャルライトフィールド投影装置は、本出願人による特許出願WO2018091984A1(特許文献1)に記載されている。説明されているライトフィールド投影装置は、出口瞳孔に投影された視点の配列のサイズによって定義されるアイボックスにライトフィールドを投影する。出口の瞳孔は、多くの使用事例では小さい。同時に、投影像の角度分解能は、投影像の視野角(FoV)と両立しない(一方を取ると他方を損なう)。
国際出願第2018/091984号明細書
本開示は、ニアアイ画像投影システムに関し、
入射光ビームを変調しかつ複数の変調光ビームを投影するように構成された光変調器を照らす複数の入射光ビームを生成するピン光アレイと
第1ピン光平面にピン光像を形成し、投影軸に沿ってアイボックス領域を画定する複数の投影像光ビームを投影するように、複数の変調光ビームを投影すべく構成された光学要素と
を備える、ニアアイ画像投影システムにおいて、前記複数の変調光ビームは、中心窩瞳孔画像を形成し、かつ中心窩アイボックス領域を画定する複数の中心窩投影画像光ビームと投影する複数の中心窩変調光ビームを備える。
複数の変調光ビームは、周辺瞳孔像を形成する複数の周辺変調光ビームをさらに備える。前述のシステムは、周辺ピン光像のそれぞれに対して複数の瞳孔拡大光ビームを投射するように構成された出射瞳拡張装置をさらに備え、周辺投射画像光ビームは、複数の瞳孔拡大ライトフィールドを形成して、中心窩アイボックス領域よりも幅広い周辺アイボックス領域を画定する。
ここに開示される画像投影システムにおいて、中心窩投影像光ビームは、FoVの狭い中央部におけるライトフィールド画像の形成に寄与する。周辺変調光ビームは、全FoVの周辺部に対応する画像情報によって変調され、出射瞳拡張要素を介して投影される。
前述の画像投影システムは、効果的なFoVを増加させ、知覚される画像解像度を向上させました。後者は、狭いFoVと限られたアイボックス内の高解像度のライトフィールドと、より大きな総FoVの周辺部分を覆い、より大きなアイボックスを通過する非ライトフィールド画像とを組み合わせることによって達成される。
前述の画像投影システムは、視聴者が見ている場所に関する視線追跡情報(アイトラッキング情報)を提供するように構成された視線追跡及び方向変換装置を備えてよい。視線追跡及び方向変換装置は、視線追跡情報に従って周辺投影像光ビーム及びライトフィールド画像を偏向するように構成してよい。
本発明の例示的な実施形態は、説明に開示され、その中で図面によって例示される。
図1aは、一実施形態による中心窩入射光ビームを示す画像投影システムを示す。 図1bは、一実施形態による1本の周辺入射光ビームを示す画像投影システムを示す。 図1cは、一実施形態による2本の周辺入射光ビームを示す画像投影システムを示す。 図1dは、一実施形態による2本の周辺入射光ビーム及び1本の中心窩入射光ビームを示す画像投影システムを示す。 図2aは、一実施形態による導波路の側面図を示す。 図2bは、一実施形態による導波路の正面図を示す。 図3は、一実施形態による構成される視野角(FoV)を表す。 図4は、別の実施形態による画像投影システムを表す。 図5aは、基本的な説明のために瞳孔拡張要素のない視線追跡及び方向変換装置を備える画像投影システムを示す。 図5bは、一実施形態による瞳孔拡張要素を備える画像投影システムを示す。 図6は、別の実施形態によるミラー偏向器、投影光学系、瞳孔膨張要素及びビーム分割器として機能する拡散器を使用して、別々のライトフィールド中心窩及び周辺像投影経路を有する画像投影システムを示す。 図7は、さらに別の実施形態による、ミラー偏向器及び導波路コンバイナを瞳孔拡張要素として使用することにより、別々のライトフィールド中心窩及び周辺像投影経路を有する画像投影システムを示す。
図1aから図1dは、一実施形態に係る画像投影システムを示す。この画像投影システムは、入射光ビーム100a、100bの変調用に構成された光変調器20を照らす複数の入射光ビーム100a、100bを生成し、かつ入射光ビーム100a、100bを投影するピン光アレイ10を備える。光学要素32、70、40は、複数の変調光ビーム110a、110bを投影して第1ピン光面30にピン光像31、39を形成してアイボックス領域121a、121bを投影軸線170に沿って画定する、複数の投影された画像光ビーム112a、112bを投影して第2ピン光像120(又は視点)を第2ピン光面124に形成するように構成されている。
画像投影システムは、観察者が、仮想現実及び複合現実の適用で着用するものである。画像投影システムは、観察者がアイボックス領域121a、121b及び出口瞳孔120を着用したときに、観察者の眼90内にあるように構成してよい。変調光ビーム110a、110bは、観察者眼90の瞳孔130に向けて投影され、その結果、変調光ビーム110a、110bが網膜92に投影される。
光学要素は、第1ピン光像光学要素70を備えてよい。第1ピン光像光学要素70は、各変調光ビーム110a、110bが第1ピン光面30において瞳像31、39を形成し、かつ変調光面115において変調器像114a、114bを形成するように、複数の変調光ビーム110a、110bを投影するように構成されている。
光学要素は、第2光学要素40をさらに備えてよい。第2光学要素40は、複数の変調光ビーム110a、110bと相互作用して、投影軸線170に沿ってアイボックス領域121a、121bを画定する複数の投影画像光ビーム112a、112bを投影するように構成されている。第2光学要素40は、接眼部(アイピース)、湾曲半透明ミラーのような半反射型コンバイナ、ミラーアレイ又はホログラフィック要素のいずれか1つを備えてよい。第2光学要素40は、現実世界190からアイボックス領域121a、121bに向かって自然光を透過するように構成されたコンバイナを備えてよく、その結果、投影された仮想ライトフィールド及び自然光の両方が、コンバイナ40を介して、アイボックス領域121a、121b内に投影される。
図1aで表される一観点では、ピン光アレイ10の中心窩ピン光サブアレイ14によって生成された複数の入射光ビームは、複数の中心窩入射光ビーム100aを備える。中心窩変調光ビーム100aのサブアンサンブルは、第1光学要素50を通過し、光学光変調器20を照らす。第1光学要素50は、導波路を備えてよい。導波路は、コリメートレンズ又は部分的コリメートレンズ、もしくはコリメートされた狭い照明ビームを受け入れ、アウトカップリング要素を介して拡張コリメートビームを出すインカップリング要素を持つ。第1ピン光像光学要素70は、複数の中心窩変調光ビーム110aを投影して第1ピン光面30に中心窩瞳孔像31を形成する。そして一部の実施形態では、第1ピン光像光学要素70は、光学要素32とともに、中心窩変調像像114aを変調像面115に形成する。第2光学要素40は、中心窩変調光ビーム110aと相互作用し、複数の投影中心窩像光ビーム112aを投影して、投影軸線170に沿って中心窩アイボックス領域121aを画定する。
図1b及び図1cに示すように、入射光ビームを生成するピン光アレイ10は、複数の周辺入射光ビーム100bを生成する複数の周辺ピン光サブアレイ13をさらに備える(周辺ピン光13は、典型的には、中心窩ピン光14よりも高強度の照明光を提供する)。周辺入射光ビーム100bの1本を図1bに示し、周辺入射光ビーム100bの2本を図1cに示す。周辺入射光ビーム100bは、第1光学要素50を通過し、(周辺入射光ビーム100bが)変調されるところで光変調器20を照らす。第1ピン光画像光学要素70は、複数の周辺変調光ビーム110bを投射する。周辺変調光ビーム110bは、第1ピン光面30において周辺瞳孔像39を形成する。
画像投影システムは、第1ピン光面30にて偏向要素60をさらに備える。偏向要素60は、周辺変調光ビーム110bを前記投影軸線170に対して偏向するように構成されている。偏向要素60は、変調器像114bを、変調器像面115に沿って空間的にずらして形成するようにさらに構成されている。
偏向要素60は、プリズム又はオフセットレンズなどの任意の他の偏向光学要素を備えてよい。
この画像投影システムは、出口瞳孔拡張装置36をさらに備える。この出口瞳孔拡張装置36は、周辺瞳孔像39を複製するように構成されている(周辺ピン光像39は、出口瞳孔拡張要素36によって複製された瞳孔を表す)。複製された周辺瞳孔像39ごとに、出射瞳孔拡張装置36は、複数の瞳孔拡大ライトフィールド104を投影する。光学要素32及び第2光学要素40は、瞳孔拡大ライトフィールド104と相互作用し、複数の投影された周辺像光ビーム112b(非ライトフィールド周辺像)を投影し、中心窩アイボックス領域121aよりも幅広い周辺アイボックス領域121bを画定する。
画像投影システムは、第1ピン光面30に位置するフーリエフィルタ34を備えてよい。フーリエフィルタ34は、光変調器20上で反射及び回折される変調光ビーム110a、110bから1つの回折成分を除く全てを除去するように構成してよい。
1実施形態では、出口瞳孔拡張装置は、第1ピン光面30に延在する導波路36を備える。導波路36は、周辺瞳孔画像39を入力するように構成されたインカップリング要素35と、複数の瞳孔拡張ライトフィールド104を投影するように構成されたアウトカップリング要素37とを備える。
図1dは、周辺入射光ビーム100bの2本及び入射ライトフィールドビーム100aの1本を示す、第1ピン光面30にて導波路36を備える画像投影システムを表す。
一観点では、インカップリング要素35は、回折格子を備える。周辺瞳孔像39を形成するコリメート画素ビーム103(図2a参照)は、アウトカップリング要素37に向かって全反射により導波路36内を通っていく。アウトカップリング要素37は、別の回折格子を備えてよい。この別の回折格子は、内部反射した瞳孔像39が導波路36から結合され、複数の瞳孔拡張ライトフィールド104を投影するように複製される、複数の瞳孔拡張ライトフィールド104を投影するようにする。
別の観点では、インカップリング要素35とアウトカップリング要素37の少なくとも一方は、ホログラフィック光学要素を備えてよい。図示されていない代替の観点では、インカップリング要素35とアウトカップリング要素37との少なくとも一方は、ミラーアレイ又は部分的に透明なミラー(ビーム分割器)の積み重ねたものを備えてよく、ここでは、コリメートされた画素ビーム103は、各ミラーの界面から部分的に反射するいくつかのミラーを通って進む。別の変形例では、インカップリング要素35及びアウトカップリング要素37は、回折格子、ホログラフィック光学要素、ミラーアレイまたは部分的に透明なミラーの積み重ねたもの、もしくはこれらの要素の組み合わせのいずれか1つを備えてよい。
図2aは、一実施形態に係る導波路36の側面図を示す。図2aの特定の例では、偏向要素60は、周辺瞳孔像39が導波路36に注入され得るように、周辺変調光ビーム110bを結合要素35に向かって偏向させる。図2bは、黒丸で表される4つのインカップリング要素35を備える導波路36の正面図を示す。アウトカップリング要素37は、円盤状の導波路36の略全面を占める。
インカップリング要素35は、インカップリング要素35内に注入された非コリメート周辺変調光ビーム110bをコリメートするように構成してよい。このようなインカップリング要素35は、傾斜回折格子、球面鏡又はコリメートホログラムのいずれかを備える。注入された周辺変調光ビーム110bは、導波路36を導かれて、アウトカップリング要素37との相互作用時に導波路36から徐々に出ていくコリメート画素光ビーム103を運ぶ。小さな周辺瞳孔像39を介して注入された周辺変調光ビーム110bは、アウトカップリング要素37を介して導波路36を出る。アウトカップリング要素37は、複数の瞳孔拡張ライトフィールド104が導波路36を出るように構成してよい。導波路36は、アウトカップリング要素37の種類及び構成に応じて、出口瞳孔拡張要素36の表面に連続的又は離散的に分布されている。
各コリメートされた画素ビーム103は、瞳孔拡張ライトフィールド104の複製投影点から、同じ角度で(平行に)同時に出されてよい。したがって、画素は無限に輝くように見え、複数の投影点(又は投影瞳孔の1つの連続した大きな領域)を通過する。
1実施形態では、導波路36は、導波路36の影響を受けずに中心窩変調光ビーム110を伝送するように構成された少なくとも1つの絞り開口部120aを備えてよく、その結果、変調光ビーム110は変調器像面115において中心窩変調器像114aを形成する。図2bの例では、導波路36は、白丸で表される32個の絞り開口部120aを備える。
画像投影システムがフーリエフィルタ34を備える場合、後者は、1つ又は複数の絞り開口部120aを備えてよい。ここで、中心窩瞳孔画像31のそれぞれは、導波路36に設けられた絞り開口部120aに一致する。また、フーリエフィルタ34に設けられた絞り開口部120aと一致するようにしてよい。
別の実施形態では、画像投影システムは、シフト周辺変調器像114bを形成するような複数の瞳孔拡張光ビーム104を集束するように構成された変調器撮像レンズ32(図1aから図1d参照)を備える。
図3は、視野角(FoV)の構成を表す。中央領域11には、開口120aを通過して中心窩アイボックス領域121aを形成する中心窩変調器像114aが含まれている。4つの周辺領域12aから12dのそれぞれは、(非ライトフィールドの)シフト周辺変調器像114bを備え、周辺アイボックス領域121bを形成する。
図4は、別の実施形態による画像投影システムを表し、ここでは、出口瞳孔拡張装置は、変調器像面115に拡散要素38を備える。このような構成において、周辺入射光ビーム100bは、第1光学要素50を通過し、光変調器20を照らす。光変調器20は、周辺入射光ビーム100bが変調されるところである。第1ピン光画像光学要素70は、複数の周辺変調光ビーム110bを投影する。周辺変調光ビーム110bは、第1ピン光面30にて周辺瞳孔像39を形成する。偏向要素60は、前記周辺変調光ビーム110bを投影軸線170に対して偏向させ、変調器像面115内で空間的にずらした、シフト周辺変調器像114bを形成するように構成されている。拡散要素38は、複数の瞳孔拡大ライトフィールド104を投影して、周辺変調光ビーム110bの各画素の角度発光範囲を拡大する。拡散要素38は、透過的又は反射的であり得る。拡散要素38は、照明時間が短い場合やデューティ比が小さい場合に像発光を延長するために蛍光拡散板にしてよい。拡散要素38は、エミッシブディスプレイ(自己発光ディスプレイ)によって置換可能でもある。
眼窩における眼90の動きは、眼球130(相当の光)が中心窩アイボックス領域121aを出て、像光が眼90に入らない状態を引き起こす場合がある。そのような場合、中心窩画像光ビーム112a(投影画像のライトフィールド部分)によって覆われたFoV内の画像情報が失われることになる。この問題は、周辺アイボックス領域121bを通過する非ライトフィールド画像によるFoVのこの部分の一時的な充填によって低減可能であり、したがって、眼90が動いても失われない。その結果、中心窩画像光ビーム112aを覆う画像の部分が常に存在する。この単純な解決策は、眼瞳孔130がアイボックスのライトフィールド部分、すなわち中心窩画像光ビーム112aの内側に位置するかどうかを識別する二値の視線追跡情報(アイトラッキング情報)を少なくとも必要とする。眼90は、中心窩眼瞼121aの外側でごく一部の時間しかとどまっていない。典型的には5%未満であり、毎回短期間しかとどまっていないので、この解決策は、ほとんどの使用事例にとって十分である。
図5aに例示される実施形態では、画像投影システムは、視線追跡及び方向変換(方向変換)装置を備える。視線追跡及び方向変換装置は、観察者が見ている場所に関する視線追跡情報を提供し、視線追跡情報に従って周辺投影画像光ビーム112bを偏向するように構成されている。
視線追跡及び方向変換装置は、視線追跡情報が、観察者が中心窩アイボックス領域121の外側を見ていることを示している場合に、中心窩アイボックス領域121の外側に周辺投影画像光ビーム112bを提供するようにさらに構成してよい。
より詳細には、視線追跡及び方向変換装置は、眼90、特に瞳孔130の注視の位置及び方向を推定するように構成してよい。視線追跡及び方向変換装置は、さらに、ユーザの眼90と瞳孔130との少なくとも一方の視線の位置及び方向を推定するように構成してよい。
一観点では、視線追跡及び方向変換装置は、視線追跡情報に従って移動可能であるミラー又はレンズを備えてよい。視線追跡情報は、可動ミラー又はレンズを制御して周辺投影像光ビーム112bの角度を調整する図示しない制御部に提供されてもよい。
視線追跡及び方向変換装置は、図5bに例示されるように出口瞳孔拡張要素36を備える画像投影システムと組み合わせてよい。
図6は、別の実施形態による画像投影システムを示していて、ここでは、出射瞳孔拡張要素36は、中心窩及び周辺入射光ビーム100a、100bに平行な入射投影軸線160から外れて位置する軸外光学系150を備える。偏向要素60は、ミラーであり、周辺変調光ビーム110bを入射投影軸線160に略平行に延在する拡散要素38上に投影する軸外光学系150に向かって周辺変調光ビーム110bを偏向させる。拡散要素38は、投影軸線170に沿って複数の瞳孔拡大ライトフィールド104を投影し、入射投影軸線160と略直交する。
画像投影システムは、ビーム分割器140を備える。中心窩変調光ビーム110aは、第1ピン光面30内の絞り開口部120aを通過し、ビーム分割器140に到達し、そこで投影軸線170に沿って反射され、ユーザの眼90に向かう。反射中心窩変調光ビーム110a及び瞳孔拡張ライトフィールド104は、入射投影軸線160に略平行に延在する第2光学要素40において結合される。本実施形態では、光学系150及び拡散要素38が1つの周辺像を広いFoVに展開するため、1つの周辺像を作成するピン光13のみを用いてよい。
図7は、さらに別の実施形態による画像投影システムを示していて、ここで、出口瞳孔拡張要素36は、導光器を備える。偏向要素60は、ミラーであり、単一の周辺変調光ビーム110bを結合要素35内の導光体に向けて偏向させる。導光体36は、単一の周辺変調光ビーム110bを導光し、導光体36に設けられたアウトカップリング要素37から瞳孔拡張ライトフィールド104を投影する。瞳孔拡張ライトフィールド104は、投影軸線170に沿って投影される。投影軸線170は、入射投影軸線160に対して30°から120°の間の角度をなしてよい。
中心窩変調光ビーム110aは、第1ピン光面30内の絞り開口部120aを通過して第2光学要素40に到達し、アウトカップリング要素37に略平行に延在する。中心窩変調光ビーム110aは、投影軸線170に沿って第2光学要素40に反射される。中心窩変調光ビーム110aは、瞳孔拡張ライトフィールド104と結合され、ユーザの眼90に到達する。
10 ピンライトアレイ
11 中央領域
12a、12b、12c、12d 周辺領域
13 周辺ピンライトサブ配列
14 中心窩ピンライトサブアレイ
20 光変調器
30 第1ピンライト平面
31 中心窩瞳孔画像
32 変調器撮像レンズ
34 フーリエフィルタ
35 インカップリング要素
36 出口瞳孔拡張装置(導波路)
37 アウトカップリング要素
38 拡散器
39 周辺瞳孔画像
40 第2光学要素
50 第1光学要素
60 偏向要素
70 第1ピンライト画像光学要素
90 眼
92 網膜
100a 中心窩入射光ビーム
100b 周辺入射光ビーム
104 瞳孔拡張光ビーム
110a 中心窩変調光ビーム
110b 周辺変調光ビーム
112a 中心窩画像光線
112b 周辺像光ビーム
114a 中心窩変調器像
114b 周辺変調器像
115 変調器像平面
120 第2ピンライト画像、視点
120a 絞り開口部
121a 投影された中心窩アイボックス領域
121b 投影された周辺アイボックス領域
124 第2ピンライト平面
130 瞳孔
140 ビーム分割器又は半透明ミラー
150 画像投影光学部材
160 入射投影軸線
170 投影軸線
190 現実世界

Claims (20)

  1. 入射光ビーム(100a、100b)を変調するように構成された光変調器(20)を照らす複数の入射光ビーム(100a、100b)を生成して、かつ複数の変調光ビーム(110a、110b)を投影するピン光アレイ(10)と、
    第1ピン光平面(30)にピン光画像(31、39)を形成するような複数の変調光ビーム(110a、110b)を投影するように構成された光学要素(32、70、40)と、投影軸(170)に沿ってアイボックス領域(121a、121b)を画定する複数の投影画像光ビーム(112a、112b)を投影するように構成された光学要素(32、70、40)と
    を備える、ニアアイ画像投影システムであって、
    前記複数の変調光ビームは、中心窩瞳孔画像(31)を形成する複数の中心窩変調光ビーム(110a)と、中心窩眼球領域(121a)を画定する複数の中心窩投影像光ビーム(112a)とを備える、ニアアイ画像投影システムにおいて、
    前記複数の変調光ビームは、周辺瞳孔画像を形成する複数の周辺変調光ビーム(110b)をさらに備え
    前記システムが、前記周辺ピン光画像(39)の各々に対して複数の瞳孔拡張光ビーム(104)を投影するように構成された出射瞳孔拡張装置(36、38)をさらに備え、前記複数の瞳孔拡張ライトフィールド(104)は、前記中心窩アイボックス領域(121a)よりも幅広い周辺アイボックス領域(121b)を画定する周辺投影画像光ビーム(112b)を形成することを特徴とする、ニアアイ画像投影システム。
  2. 前記第1ピン光画像光学要素(70)は、変調器像面(115)に中心窩変調像(114a)を形成するように前記複数の中心窩変調光ビーム(110a)を投影し、
    前記画像投影システムは、前記第1ピン光平面(30)にて、前記周辺変調光ビーム(110b)を前記投影軸(170)に対して偏向させ、かつ前記変調器像平面(115)に沿って空間的にずらされている、シフト変調器像(114a)を形成するように構成された偏向要素(60)をさらに備える、請求項1に記載の画像投影システム。
  3. 前記出口瞳孔拡張装置は、前記変調器像面において拡散要素(38)をさらに備える(115)、請求項2に記載のニアアイ画像投影システム。
  4. 前記拡張装置は、前記第1ピン光面(30)に延びる導波路(36)と、前記周辺ピン光画像(39)を入力するように構成されたインカップリング要素(35)と、前記複数の瞳孔拡張光ビーム(104)を投射するように構成されたアウトカップリング要素(37)とを備える導波路(36)とを備える、請求項1又は2に記載の画像投影システム。
  5. アウトカップリング要素(37)は、複数の離散瞳孔拡張光ビーム(104)を投影するように構成されている、請求項4に記載の画像投影システム。
  6. アウトカップリング要素(37)は、連続的に分布した瞳孔拡張光ビーム(104)を投影するように構成されている、請求項4に記載の画像投影システム。
  7. 前記シフト変調器像(114a)を形成するような複数の瞳孔拡張光ビーム(104)を集束するように構成されたビーム集束要素(32)をさらに備える、請求項4から6のいずれか一項に記載の画像投影システム。
  8. インカップリング要素(35)は、周辺変調光ビーム(103)をコリメートするように構成されている、請求項7に記載の画像投影システム。
  9. インカップリング要素(35)又はアウトカップリング要素(37)の少なくとも一方がホログラフィック光学要素を備える、請求項4から9のいずれか一項に記載の画像投影システム。
  10. インカップリング要素(35)又はアウトカップリング要素(37)の少なくとも1つは、ミラーアレイ又は部分的に透明なミラーの積み重ねを備える、請求項4から9のいずれか一項に記載の画像投影システム。
  11. インカップリング要素(35)又はアウトカップリング要素(37)の少なくとも一方が回折格子を備える、請求項4から9のいずれか一項に記載の画像投影システム。
  12. 導波路(36)は、開口(120a)を備え、各開口は、ピン光画像(31)を透過するように構成されている、請求項4から11のいずれか一項に記載の画像投影システム。
  13. 前記偏向要素(60)は、プリズムを備える、請求項2又は12に記載の画像投影システム。
  14. 投影軸(170)に沿ってアイボックス領域(121a、121b)を画定する複数の投影画像光ビーム(112a、112b)を投影するような複数の変調光ビーム(110a、110b)と相互作用するように構成された第2光学要素(40)を備える、請求項2又は13に記載の画像投影システム。
  15. 第2光学要素(40)は、現実世界(190)からアイボックス領域(121a、121b)に向かって自然光を透過するように構成されたコンバイナを備える、請求項14に記載の画像投影システム。
  16. 前記出射瞳孔拡張要素(36)は、軸外光学系(150)及び拡散要素(38)を備え、前記軸外光学系(150)は、前記周辺変調光ビーム(110b)を 前記拡散要素(38)に投影すべく構成されていて、前記拡散要素(38)は、前記瞳孔拡張ライトフィールド(104)を投影軸(170)に沿って投影し、前記中心窩及び周辺入射光ビーム(100a、100b)に平行な入射投影軸(160)に略直交し、
    前記画像投影システムは、投影軸(170)に沿って中心窩変調光ビーム(110a)を反射するビーム分割器(140)を備え、
    反射された中心窩変調光ビーム(110a)が、光学要素(40)内の瞳孔拡張ライトフィールド(104)に結合される、請求項1に記載の画像投影システム。
  17. 前記出射瞳拡張要素は、周辺変調光ビーム(110b)を導くべく構成された導波路(36)を備え、前記出射瞳拡張要素は、前記導波路(36)に設けられたアウトカップリング要素(37)から瞳孔拡張ライトフィールド(104)を投影軸線(170)に沿って投影し、投影軸線(170)は、前記中心窩及び周辺入射光ビーム(100a、100b)に平行な入射投影軸線(160)に対して角度をなしていて、
    中心窩変調光ビーム110aは、投影軸線(170)に沿って第2光学要素(40)に反射される、請求項1に記載の画像投影システム。
  18. 観察者が見ている場所に関する視線追跡情報を提供するように構成された視線追跡及びステアリング装置を備えて、ここにおいて、視線追跡及びステアリング装置は、視線追跡情報に従って周辺投影画像光ビーム(112b)を偏向するように構成されている、請求項1から17のいずれか一項に記載の画像投影システム。
  19. 視線追跡及びステアリング装置は、視線追跡情報に応じて移動可能なミラー又はレンズを備える、請求項18に記載の画像投影システム。
  20. 視線追跡及びステアリング装置は、視線追跡情報が、観察者が第1アイボックス領域(121)の外側を見ていることを示しているときに、第1アイボックス領域(121)の外側に非ライトフィールド画像を提供するように構成されている、請求項19に記載のニアアイ画像投影システム。
JP2022562255A 2020-04-14 2020-04-14 中心窩投影と拡大アイボックス領域とを持つニアアイ画像投影システム Active JP7506759B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/IB2020/053484 WO2021209785A1 (en) 2020-04-14 2020-04-14 Near-eye image projection system having foveated projection and expanded eye-box region

Publications (3)

Publication Number Publication Date
JP2023521196A true JP2023521196A (ja) 2023-05-23
JPWO2021209785A5 JPWO2021209785A5 (ja) 2023-11-27
JP7506759B2 JP7506759B2 (ja) 2024-06-26

Family

ID=70334000

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022562255A Active JP7506759B2 (ja) 2020-04-14 2020-04-14 中心窩投影と拡大アイボックス領域とを持つニアアイ画像投影システム

Country Status (9)

Country Link
US (1) US20230168511A1 (ja)
EP (1) EP4136493A1 (ja)
JP (1) JP7506759B2 (ja)
KR (1) KR20220160607A (ja)
CN (1) CN115335750A (ja)
CA (1) CA3172473A1 (ja)
IL (1) IL297235A (ja)
TW (1) TWI788821B (ja)
WO (1) WO2021209785A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11500460B2 (en) 2018-10-22 2022-11-15 Evolution Optiks Limited Light field device, optical aberration compensation or simulation rendering
US11966507B2 (en) 2018-10-22 2024-04-23 Evolution Optiks Limited Light field vision testing device, adjusted pixel rendering method therefor, and vision testing system and method using same
US12112665B2 (en) 2019-11-01 2024-10-08 Evolution Optiks Limited Light field device, variable perception pixel rendering method therefor, and variable perception system and method using same
US11823598B2 (en) 2019-11-01 2023-11-21 Evolution Optiks Limited Light field device, variable perception pixel rendering method therefor, and variable perception system and method using same
WO2022015647A2 (en) * 2020-07-13 2022-01-20 Perdix Systems Llc Optical systems with multiple light engines for foveation
CN114035325B (zh) * 2021-11-10 2023-09-01 西安邮电大学 基于衍射分束器的增强现实方法、装置、电子设备及介质
WO2024121609A1 (en) * 2022-12-09 2024-06-13 Creal Sa Near-eye light-field projection system having active foveation

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07311361A (ja) * 1994-05-16 1995-11-28 Olympus Optical Co Ltd 眼球投影型映像表示装置
US5734359A (en) * 1994-07-01 1998-03-31 B.V. Optische Industrie "De Oude Delft" Display system intended to be attached to the head or to a helmet, and a helmet provided with such a display system
JPH11326816A (ja) * 1998-05-13 1999-11-26 Minolta Co Ltd 走査型映像観察光学系
JP2004145367A (ja) * 2004-01-26 2004-05-20 Nec Corp 画像表示装置
US8189263B1 (en) * 2011-04-01 2012-05-29 Google Inc. Image waveguide with mirror arrays
JP2016517036A (ja) * 2013-03-25 2016-06-09 エコール・ポリテクニーク・フェデラル・ドゥ・ローザンヌ(ウペエフエル)Ecole Polytechnique Federale de Lausanne (EPFL) 多射出瞳頭部装着型ディスプレイのための方法および装置
JP2018205418A (ja) * 2017-05-31 2018-12-27 セイコーエプソン株式会社 表示装置
JP2019113794A (ja) * 2017-12-26 2019-07-11 ソニーセミコンダクタソリューションズ株式会社 画像表示装置及び表示装置
US20190285897A1 (en) * 2016-09-20 2019-09-19 Apple Inc. Display device
JP2019184752A (ja) * 2018-04-06 2019-10-24 セイコーエプソン株式会社 虚像表示装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010062481A1 (en) * 2008-11-02 2010-06-03 David Chaum Near to eye display system and appliance
IL242895B (en) * 2015-12-03 2021-04-29 Eyeway Vision Ltd Image projection system
US11960083B2 (en) 2016-11-15 2024-04-16 Creal Sa Near-eye sequential light-field projector with correct monocular depth cues
AU2017416573A1 (en) * 2017-05-29 2020-01-23 Eyeway Vision Ltd. Image projection system
CN110989166A (zh) * 2019-12-25 2020-04-10 歌尔股份有限公司 一种近眼显示设备的眼球追踪系统及近眼显示设备

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07311361A (ja) * 1994-05-16 1995-11-28 Olympus Optical Co Ltd 眼球投影型映像表示装置
US5734359A (en) * 1994-07-01 1998-03-31 B.V. Optische Industrie "De Oude Delft" Display system intended to be attached to the head or to a helmet, and a helmet provided with such a display system
JPH11326816A (ja) * 1998-05-13 1999-11-26 Minolta Co Ltd 走査型映像観察光学系
JP2004145367A (ja) * 2004-01-26 2004-05-20 Nec Corp 画像表示装置
US8189263B1 (en) * 2011-04-01 2012-05-29 Google Inc. Image waveguide with mirror arrays
JP2016517036A (ja) * 2013-03-25 2016-06-09 エコール・ポリテクニーク・フェデラル・ドゥ・ローザンヌ(ウペエフエル)Ecole Polytechnique Federale de Lausanne (EPFL) 多射出瞳頭部装着型ディスプレイのための方法および装置
US20190285897A1 (en) * 2016-09-20 2019-09-19 Apple Inc. Display device
JP2018205418A (ja) * 2017-05-31 2018-12-27 セイコーエプソン株式会社 表示装置
JP2019113794A (ja) * 2017-12-26 2019-07-11 ソニーセミコンダクタソリューションズ株式会社 画像表示装置及び表示装置
JP2019184752A (ja) * 2018-04-06 2019-10-24 セイコーエプソン株式会社 虚像表示装置

Also Published As

Publication number Publication date
WO2021209785A1 (en) 2021-10-21
TW202138872A (zh) 2021-10-16
JP7506759B2 (ja) 2024-06-26
TWI788821B (zh) 2023-01-01
US20230168511A1 (en) 2023-06-01
KR20220160607A (ko) 2022-12-06
CA3172473A1 (en) 2021-10-21
EP4136493A1 (en) 2023-02-22
CN115335750A (zh) 2022-11-11
IL297235A (en) 2022-12-01

Similar Documents

Publication Publication Date Title
JP7506759B2 (ja) 中心窩投影と拡大アイボックス領域とを持つニアアイ画像投影システム
CN108700751B (zh) 使用空间光调制器生成全息图像的头戴式显示器
US20240134257A1 (en) Image projector using a phase image generator
TWI785677B (zh) 近眼圖像投影系統及包含該近眼圖像投影系統之可穿戴裝置
JP2023067960A5 (ja)
JP7320057B2 (ja) 観察者に対する正しい単眼奥行き手がかりを持つライトフィールド複合現実システム
US20220404689A1 (en) Light-field virtual and mixed reality system having foveated projection
JP7569451B2 (ja) 高解像度ライトフィールド投影装置
JP2000039582A (ja) 映像投影装置
JPWO2021209785A5 (ja)
CN112470059A (zh) 视网膜显示装置和方法
US20210356745A1 (en) Method for producing a holographic optical element (hoe), which is provided for projection in a projection system, a holographic optical element of this kind, projection device, lens for data glasses and data glasses of this kind
JP7183418B2 (ja) 画像を投影するための光結合装置
KR20220149787A (ko) 증강 현실 안경용 투영 장치, 투영 장치를 이용한 이미지 정보 표시 방법 및 제어 장치

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221017

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221110

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230802

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20231030

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20231115

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240417

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240522

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240614

R150 Certificate of patent or registration of utility model

Ref document number: 7506759

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150