JP2023542813A - 光ガイドベースのホログラフィックディスプレイ - Google Patents

光ガイドベースのホログラフィックディスプレイ Download PDF

Info

Publication number
JP2023542813A
JP2023542813A JP2023511839A JP2023511839A JP2023542813A JP 2023542813 A JP2023542813 A JP 2023542813A JP 2023511839 A JP2023511839 A JP 2023511839A JP 2023511839 A JP2023511839 A JP 2023511839A JP 2023542813 A JP2023542813 A JP 2023542813A
Authority
JP
Japan
Prior art keywords
light beam
display
image
slm
eye
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023511839A
Other languages
English (en)
Inventor
チャン、チャンウォン
パン、キスン
イ、ビョンホ
リー、ガン
メイモン、アンドリュー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Meta Platforms Technologies LLC
Original Assignee
Meta Platforms Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Meta Platforms Technologies LLC filed Critical Meta Platforms Technologies LLC
Publication of JP2023542813A publication Critical patent/JP2023542813A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202Reconstruction geometries or arrangements
    • G03H1/2205Reconstruction geometries or arrangements using downstream optical component
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/06Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the phase of light
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2286Particular reconstruction light ; Beam properties
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2294Addressing the hologram to an active spatial light modulator
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0123Head-up displays characterised by optical features comprising devices increasing the field of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0132Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202Reconstruction geometries or arrangements
    • G03H1/2205Reconstruction geometries or arrangements using downstream optical component
    • G03H2001/2207Spatial filter, e.g. for suppressing higher diffraction orders
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202Reconstruction geometries or arrangements
    • G03H1/2205Reconstruction geometries or arrangements using downstream optical component
    • G03H2001/2213Diffusing screen revealing the real holobject, e.g. container filed with gel to reveal the 3D holobject
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202Reconstruction geometries or arrangements
    • G03H2001/2223Particular relationship between light source, hologram and observer
    • G03H2001/2231Reflection reconstruction
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202Reconstruction geometries or arrangements
    • G03H2001/2236Details of the viewing window
    • G03H2001/2239Enlarging the viewing window
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2249Holobject properties
    • G03H2001/2284Superimposing the holobject with other visual information
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/26Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique
    • G03H1/30Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique discrete holograms only
    • G03H2001/306Tiled identical sub-holograms
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2223/00Optical components
    • G03H2223/14Diffuser, e.g. lens array, random phase mask
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2223/00Optical components
    • G03H2223/16Optical waveguide, e.g. optical fibre, rod
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2223/00Optical components
    • G03H2223/23Diffractive element
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2223/00Optical components
    • G03H2223/24Reflector; Mirror
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2226/00Electro-optic or electronic components relating to digital holography
    • G03H2226/05Means for tracking the observer
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2240/00Hologram nature or properties
    • G03H2240/10Physical parameter modulated by the hologram
    • G03H2240/11Phase only modulation

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Diffracting Gratings Or Hologram Optical Elements (AREA)
  • Eyeglasses (AREA)

Abstract

瞳複製ライトガイドに結合された空間光変調器を有するホログラフィックディスプレイが開示される。空間光変調器は、空間的に変調された振幅および/または位相を有する光ビームを提供する。光ビームは、瞳複製ライトガイドによって複数の部分に複製される。複数の部分は、ユーザによる直接観察のための画像を提供するために射出瞳において干渉する。視線追跡システムは、ユーザの瞳孔の位置を決定するために提供され得、光ビームの空間変調は、それに応じて、眼の瞳孔における複数のビーム部分の光学干渉が、要求される画像を提供することを確実にするように調節され得る。

Description

本開示は、光学デバイスに関し、特に、ディスプレイシステムおよびモジュールに関する。
仮想現実(VR:Virtual Reality)コンテンツ、拡張現実(AR:Augmented Reality)コンテンツ、複合現実(MR:Mixed Reality)コンテンツ等を表示するために、ヘッドマウントディスプレイ(HMD:Head Mounted Display)、ヘルメットマウントディスプレイ、ニアアイディスプレイ(NED:Near-Eye Display)などが使用されている。そのようなディスプレイは、ほんの数例を挙げると、娯楽、教育、訓練および科学を含む多様な分野において用途が見出されている。表示されるVR/AR/MRコンテンツは、3次元(3D)であって、体験を向上させ、仮想オブジェクトをユーザが観察する現実のオブジェクトに一致させることができる。
より良好な光学性能を提供するために、ディスプレイシステムおよびモジュールは、レンズ、導波路、ディスプレイパネル、回折格子等の多数の構成要素を含み得る。HMDまたはNEDのディスプレイは、通常、ユーザの頭部に装着されるため、大型で、かさばり、バランスがとれていない、かつ/または重量のあるディスプレイデバイスは、扱いにくく、ユーザが装着するのに不快であり得る。小型、軽量、かつ効率的なヘッドマウントディスプレイデバイスおよびモジュールが望まれる。
本開示の第1の態様によれば、ディスプレイが提供され、ディスプレイは、照明光ビームを提供する照明器と、照明器に動作可能に結合され、照明光ビームを受け取り、照明光ビームの少なくとも位相を空間的に変調して、空間的に変化する波面を有する画像光ビーム(image light beam)を提供する空間光変調器(SLM)と、SLMに動作可能に結合され、画像光ビームを受け取り、画像光ビームの複数の横方向にオフセットされた部分をディスプレイのアイボックス(eyebox)に提供する第1の複製ライトガイドとを備え、画像光ビームの空間的に変化する波面は、画像光ビームの複数の部分がディスプレイの射出瞳(exit pupil)においてコヒーレントに加算または減算されて、ユーザによる直接観察のための画像を形成するような形状を有する。
いくつかの実施形態では、照明器は、コリメート光ビームを提供する光源と、コリメート光ビームを受け取り、SLMに結合するための照明光ビームを形成するように、コリメート光ビームの複数の部分を提供し得るように構成され得る第2の複製ライトガイドとを備え得る。
いくつかの実施形態では、SLMは、空間的に異なる位相遅延を有する照明光ビームを反射することによって画像光ビームを形成するように構成された反射型SLMであり得、反射時に、画像光ビームは、第2の複製ライトガイドを通過して第1の複製ライトガイドに向かって戻るように伝搬し得る。
いくつかの実施形態では、第1の複製ライトガイドは、第1の複製ライトガイドからの画像光ビームの複数の部分を外部結合する回折格子アウトカプラを備え得、回折格子アウトカプラは、画像光ビームの複数の部分のうちの少なくともいくつかの光パワーの最大1%を拡散的に散乱させるように構成され得る。
いくつかの実施形態では、第1の複製ライトガイドは、第1の複製ライトガイドからの画像光ビームの複数の部分を外部結合する回折格子アウトカプラと、画像光ビームの複数の部分の光パワーの少なくとも一部を散乱させる、回折格子アウトカプラの下流にある拡散散乱体とを含み得る。
いくつかの実施形態では、ディスプレイは、SLMに動作可能に結合されたコントローラをさらに備え得、コントローラは、ユーザによる直接観察のための画像を形成するために、画像光ビームの複数の部分がディスプレイの射出瞳においてコヒーレントに加算または減算されるように、空間的に変化する波面の形状を計算し、照明光ビームを空間的に変調して画像光ビームを提供するための制御信号をSLMに提供するように構成され得る。
いくつかの実施形態では、ディスプレイは、ユーザの眼の瞳孔の位置を決定するための視線追跡システムをさらに備え得、コントローラは、視線追跡システムに動作可能に結合され得、コントローラは、視線追跡システムによって決定された眼の瞳孔の位置に基づいて、ディスプレイの射出瞳の位置を設定するように構成され得る。
いくつかの実施形態では、ディスプレイは、ディスプレイの射出瞳において画像光ビームを合焦させる、第1の複製ライトガイドの下流にある合焦要素と、ユーザの眼の瞳孔の位置を決定するための視線追跡システムとをさらに備え得、照明器は、コリメート光ビームを提供する光源と、光源に動作可能に結合され、コリメート光ビームを受け取って可変的に再方向付けする傾斜可能な反射器と、傾斜可能な反射器に動作可能に結合され、コリメート光ビームを受け取り、照明光ビームを形成するように、コリメート光ビームの複数の部分を提供する第2の複製ライトガイドと、を備え得、コントローラは、傾斜可能な反射器および視線追跡システムに動作可能に結合され得、かつディスプレイの射出瞳をユーザの眼の瞳孔に向かってシフトさせるようにコリメート光ビームを再方向付けするように構成され得る。
本開示の第2の態様によれば、ディスプレイが提供され、ディスプレイは、コリメート光ビームを提供する光源と、光源に動作可能に結合され、コリメート光ビームを受け取って可変的に再方向付けする傾斜可能な反射器と、傾斜可能な反射器に動作可能に結合され、コリメート光ビームを受け取ってコリメート光ビームの複数の横方向にオフセットされた平行部分を提供する複製ライトガイドと、複製ライトガイドに動作可能に結合され、コリメート光ビームの複数の部分を受け取り、コリメート光ビームの複数の部分の振幅または位相のうちの少なくとも1つにおいて空間的に変調して画像光ビームを形成する空間光変調器(SLM)と、SLMに動作可能に結合され、ユーザによる直接観察のための画像を形成するように、ディスプレイの射出瞳に画像光ビームを合焦させる合焦要素とを備える。
いくつかの実施形態では、SLMは、空間的に異なる反射率または空間的に異なる位相のうちの少なくとも1つを有するコリメート光ビームを反射することによって画像光ビームを形成するように構成された反射型SLMであり得、反射時に、画像光ビームは、複製ライトガイドを通過して合焦要素に向かって戻るように伝搬し得る。
いくつかの実施形態では、ディスプレイは、ユーザの眼の瞳孔の位置を決定するための視線追跡システムと、視線追跡システムおよび傾斜可能な反射器に動作可能に結合され、ディスプレイの射出瞳をユーザの眼の瞳孔にシフトさせるためにコリメート光ビームを再方向付けするように傾斜可能な反射器を動作させるように構成されたコントローラとをさらに備え得る。
いくつかの実施形態では、合焦要素は、切り替え可能なレンズを含み得、コントローラは、切り替え可能なレンズに動作可能に結合されるとともに、ディスプレイの射出瞳をユーザの眼の瞳孔にシフトさせるように切り替え可能なレンズを切り替えるように構成され得る。
本開示の第3の態様によれば、ディスプレイが提供され、ディスプレイは、コリメート光ビームを提供する照明器と、照明器に動作可能に結合され、コリメート光ビームを受け取ってコリメート光ビームの複数の横方向にオフセットされた平行部分を提供するため複製ライトガイドと、複製ライトガイドに動作可能に結合され、コリメート光ビームの複数の部分を受け取り、コリメート光ビームの複数の部分を振幅または位相のうちの少なくとも1つにおいて空間的に変調する空間光変調器(SLM)と、画像光ビームを可変的に再方向付けする、SLMの下流の光路内にある再方向付け要素と、ユーザによる直接観察のための画像を形成するためにディスプレイの射出瞳において画像光ビームを合焦させる、SLMの下流の光路内にある合焦要素とを備える。
いくつかの実施形態では、SLMは、空間的に異なる反射率または空間的に異なる位相のうちの少なくとも1つを有するコリメート光ビームの複数の部分を反射することによって画像光ビームを形成するように構成された反射型SLMであり得、反射時に、画像光ビームは、複製ライトガイドを通過して再方向付け要素に向かって戻るように伝搬し得る。
いくつかの実施形態では、再方向付け要素は、画像光ビームを切り替え可能に再方向付けするように構成されるパンチャラトナムベリー位相(PBP:Pancharatnam-Berry Phase)回折格子のスタックを備え得る。
いくつかの実施形態では、合焦要素が、回折レンズ、屈折レンズ、フレネルレンズ、またはパンチャラトナムベリー位相(PBP)レンズのうちの少なくとも1つを含み得る。
いくつかの実施形態では、ディスプレイは、SLMの下流の光路内に配置されるとともに、コリメート光ビームの複数の部分の空間変調による高次の回折を遮断するように構成された角度フィルタをさらに備え得る。
いくつかの実施形態では、ディスプレイは、ユーザの眼の瞳孔の位置を決定する視線追跡システムをさらに備え得る。
いくつかの実施形態では、ディスプレイは、SLM、再方向付け要素、および視線追跡システムに動作可能に結合され、視線追跡システムから眼の瞳孔の位置を取得し、再方向付け要素に、画像光ビームを眼の瞳孔の位置に向けて再方向付けさせ、SLMに、コリメート光ビームの複数の部分を空間的に変調させるように構成されたコントローラをさらに備え得る。
いくつかの実施形態では、合焦要素は、コントローラに動作可能に結合された可変焦点要素を備え得、コントローラは、ディスプレイの射出瞳を眼の瞳孔の位置にシフトさせるように、可変焦点要素の焦点距離を調節するように構成され得る。
本開示の1つまたは複数の態様または実施形態への組み込みに好適であるとして本明細書に説明される任意の特徴は、本開示の任意および全ての態様および実施形態にわたって一般化可能であることが意図されることを理解されたい。本開示の他の態様は、本開示の説明、特許請求の範囲、および図面に照らして当業者によって理解され得る。前述の一般的な説明および以下の詳細な説明は、例示的かつ説明的なものにすぎず、特許請求の範囲を限定するものではない。
本開示の複製ライトガイドベースのディスプレイの概略図である。 照明複製導波路を使用するディスプレイの実施形態の断面分解図である。 本開示の全開口光ガイド照明器ディスプレイの断面分解図である。 全開口光ステアリングスタックに基づく本開示のディスプレイの断面分解図である。 眼鏡の形状を有する、本開示の拡張現実(AR)ディスプレイの図である。 本開示の頭部搭載型仮想現実(VR)ディスプレイの等角図である。
次に、例示的な実施形態を図面と併せて説明する。
本教示は、種々の実施形態および実施例とともに説明されるが、本教示がそのような実施形態に限定されることは意図されない。反対に、本教示は、当業者によって理解されるように、種々の代替形態および均等物を包含する。本開示の原理、態様、および実施形態、ならびにそれらの具体例を列挙する本明細書における全ての記述は、それらの構造的均等物および機能的均等物の両方を包含することが意図されている。加えて、そのような均等物は、現在知られている均等物ならびに将来開発される均等物、即ち、構造にかかわらず、同じ機能を実行する開発された任意の要素の両方を含むことが意図される。
本明細書で使用される場合、用語「第1」、「第2」などの用語は、連続的な順序付けを暗示することを意図するものではなく、むしろ、明示的に述べられていない限り、1つの要素を別の要素から区別することを意図するものである。同様に、方法ステップの連続的順序付けは、明示的に述べられていない限り、それらの実行の連続的順序を暗示するものではない。図1~図5において、同様の参照番号は同様の構成要素を示す。
ホログラフィックディスプレイは、ディスプレイの射出瞳において画像の光照射野の波面を再生する光学構成の空間光変調器(SLM)を含む。そのような画像は、ユーザの眼が射出瞳に配置されたときにユーザによって直接観察され得る。ホログラフィックディスプレイ構成の1つの利点は、被写界深度が自然に再現されることである。ホログラフィックディスプレイの課題は、画像を観察するために眼が射出瞳に留まる必要があることである。
本開示は、画像光の平行にシフトされた複数の部分を外部結合しながら、それらの外面からの一連の全内部反射(TIR)によって画像光をガイドする複製ライトガイドを利用することにより、ディスプレイのアイボックス全体に光カバーを提供し、かつ眼の複数の場所で画像が観察されることを可能にする。いくつかの実施形態では、複製ライトガイドは、照明光ビームを複製するために使用され、SLMのための指向性バックライトとして動作する。本明細書に開示されるディスプレイでは、そのような複製ライトガイドは、ホログラフィックディスプレイ構成において使用されて、ホログラフィックディスプレイ構成によってもたらされる被写界深度の利点を、瞳複製(pupil replication)によってもたらされる眼の複数の場所において表示される風景を観察する能力と組み合わせることを可能にする。
空間光変調器(SLM)によって空間的に変調された光ビームは、複製ライトガイドによって複数の部分に複製される。代替的に、複数の照明ビーム部分が複製され、後続の空間変調のためにSLMに方向付けられ得る。変調された複数の部分は、ユーザによる直接観察のための画像を提供するために射出瞳において干渉する。視線追跡システムは、ユーザの瞳孔の位置を決定するために提供され得、光ビームの空間変調は、それに応じて、眼の瞳孔における複数のビーム部分の光学干渉が、要求される画像を提供することを確実にするように調節され得る。
本開示によれば、照明光ビームを提供する照明器を備えるディスプレイが提供される。空間光変調器(SLM)は、照明器に動作可能に結合されており、照明光ビームを受け取り、照明光ビームの少なくとも1つの位相を空間的に変調して、空間的に変化する波面を有する画像光ビームを提供する。第1の複製ライトガイドは、SLMに動作可能に結合されており、画像光ビームを受け取り、ディスプレイのアイボックスにおいて画像光ビームの複数の横方向にオフセットされた部分を提供する。画像光ビームの空間的に変化する波面は、画像光ビームの複数の部分がディスプレイの射出瞳においてコヒーレントに加算または減算されて、ユーザによる直接観察のための画像を形成するような形状を有する。
照明器は、コリメート光ビームを提供する光源と、コリメート光ビームを受け取り、SLMに結合するための照明光ビームを形成するように、コリメート光ビームの複数の部分を提供するように構成された第2の複製ライトガイドとを含み得る。SLMは、例えば、空間的に異なる位相遅延を有する照明光ビームを反射することによって画像光ビームを形成するように構成された反射型SLMであり得、それにより、反射時に、画像光ビームは、第2の複製ライトガイドを通過して第1の複製ライトガイドに向かって戻るように伝搬する。
いくつかの実施形態では、第1の複製ライトガイドは、第1の複製ライトガイドからの画像光ビームの複数の部分を外部結合する回折格子アウトカプラを含む。回折格子アウトカプラは、画像光ビームの複数の部分のうちの少なくともいくつかの光パワーの最大1%を拡散的に散乱させるように構成され得る。いくつかの実施形態では、第1の複製ライトガイドは、第1の複製ライトガイドからの画像光ビームの複数の部分を外部結合する回折格子アウトカプラと、画像光ビームの複数の部分の光パワーの少なくとも一部を散乱させる、回折格子アウトカプラの下流にある拡散散乱体とを含み得る。
ディスプレイは、SLMに動作可能に結合されたコントローラをさらに含み得る。コントローラは、ユーザによる直接観察のための画像を形成するために、画像光ビームの複数の部分がディスプレイの射出瞳においてコヒーレントに加算または減算されるように、空間的に変化する波面の形状を計算し、かつそれに従って照明光ビームを空間的に変調して、画像光ビームを提供するための制御信号をSLMに提供するように構成され得る。ディスプレイは、ユーザの眼の瞳孔の位置を決定する視線追跡システムをさらに含み得る。コントローラは、視線追跡システムに動作可能に結合されており、視線追跡システムによって決定された眼の瞳孔の位置に基づいて、ディスプレイの射出瞳の位置を設定するように構成され得る。
いくつかの実施形態では、ディスプレイは、ディスプレイの射出瞳において画像光ビームを合焦させる、第1の複製導波路の下流にある合焦要素と、ユーザの眼の瞳孔の位置を決定するための視線追跡システムとをさらに含み得る。そのような実施形態では、照明器は、コリメート光ビームを提供する光源と、光源に動作可能に結合され、コリメート光ビームを受け取って可変的に再方向付けする傾斜可能な反射器と、傾斜可能な反射器に動作可能に結合され、コリメート光ビームを受け取り、照明光ビームを形成するように、コリメート光ビームの複数の部分を提供する第2の複製ライトガイドとを含み得る。コントローラは、傾斜可能な反射器および視線追跡システムに動作可能に結合されるとともに、ディスプレイの射出瞳をユーザの眼の瞳孔に向かってシフトさせるようにコリメート光ビームを再方向付けするように構成され得る。
本開示によれば、コリメート光ビームを提供する光源を備えるディスプレイが提供される。傾斜可能な反射器は、光源に動作可能に結合され、コリメート光ビームを受け取って可変的に再方向付けする。複製ライトガイドは、傾斜可能な反射器に動作可能に結合され、コリメート光ビームを受け取って、コリメート光ビームの複数の横方向にオフセットされた平行部分を提供する。SLMは、複製ライトガイドに動作可能に結合され、コリメート光ビームの複数の部分を受け取ってコリメート光ビームの複数の部分を振幅または位相のうちの少なくとも1つにおいて空間的に変調して、画像光ビームを形成する。合焦要素は、SLMに動作可能に結合され、ユーザによる直接観察のための画像を形成するように、ディスプレイの射出瞳において画像光ビームを合焦させる。SLMは、例えば、空間的に異なる反射率または空間的に異なる位相のうちの少なくとも1つを有するコリメート光ビームを反射することによって画像光ビームを形成するように構成された反射型SLMであり得る。反射時に、画像光ビームは、複製ライトガイドを通過して合焦要素に向かって戻るように伝搬する。
ディスプレイは、ユーザの眼の瞳孔の位置を決定するための視線追跡システムと、視線追跡システムおよび傾斜可能な反射器に動作可能に結合され、ディスプレイの射出瞳をユーザの眼の瞳孔にシフトさせるためにコリメート光ビームを再方向付けするように傾斜可能な反射器を動作させるように構成されたコントローラとをさらに含み得る。合焦要素は、切り替え可能なレンズを含み得る。コントローラは、切り替え可能なレンズに動作可能に結合され、ディスプレイの射出瞳をユーザの眼の瞳孔にシフトさせるように切り替え可能なレンズを切り替えるように構成され得る。
本開示によれば、ディスプレイがさらに提供され、ディスプレイは、コリメート光ビームを提供する照明器と、照明器に動作可能に結合され、コリメート光ビームを受け取ってコリメート光ビームの複数の横方向にオフセットされた平行部分を提供する複製ライトガイドと、複製ライトガイドに動作可能に結合され、コリメート光ビームの複数の部分を受け取り、コリメート光ビームの複数の部分を振幅または位相のうちの少なくとも1つにおいて空間的に変調するSLMと、画像光ビームを可変的に再方向付けする、SLMの下流の光路内にある再方向付け要素と、ユーザによる直接観察のための画像を形成するためにディスプレイの射出瞳において画像光ビームを合焦させる、SLMの下流の光路内にある合焦要素と、を備える。SLMは、例えば、空間的に異なる反射率または空間的に異なる位相のうちの少なくとも1つを有するコリメート光ビームの複数の部分を反射することによって画像光ビームを形成するように構成された反射型SLMであり得る。反射時に、画像光ビームは、複製ライトガイドを通過して再方向付け要素に向かって戻るように伝搬する。再方向付け要素は、画像光ビームを切り替え可能に再方向付けするように構成されたパンチャラトナムベリー位相(PBP)回折格子のスタックを含み得る。合焦要素は、回折レンズ、屈折レンズ、フレネルレンズ、またはPBPレンズなどを含み得る。いくつかの実施形態では、ディスプレイは、SLMの下流の光路内に配置されるとともに、コリメート光ビームの複数の部分の空間変調による高次回折を遮断するように構成された角度フィルタをさらに含む。
ディスプレイのユーザの瞳孔の位置を決定する視線追跡システムが提供され得る。コントローラは、SLM、再方向付け要素、および視線追跡システムに動作可能に結合されるとともに、視線追跡システムから眼の瞳孔の位置を取得し、再方向付け要素に、画像光ビームを眼の瞳孔の位置に向けて再方向付けさせ、SLMに、コリメート光ビームの複数の部分を空間的に変調させるように構成され得る。合焦要素は、コントローラに動作可能に結合された可変焦点要素を含み得る。コントローラは、ディスプレイの射出瞳を眼の瞳孔の位置にシフトさせるために可変焦点要素の焦点距離を調節するように構成され得る。
ここで図1を参照すると、ディスプレイ100は、照明光ビーム104を提供するための照明器102を含む。空間光変調器(SLM)106は、照明器102に光学的に結合されており、照明光ビーム104を受け取り、照明光ビーム104の位相、振幅、またはその両方を空間的に変調して、振幅および/または位相の空間変調の結果として複数の山および谷を有する空間的に変化する波面110を有する画像光ビーム108を提供する。複製ライトガイド112は、SLM106に光学的に結合されており、画像光ビーム108を受け取り、かつ画像光ビーム108の複数の横方向にオフセットされた複数の部分108’、または複数の複製を提供する。画像光ビーム108の複数の部分108’は、複数の波面110’を有する。複数の部分108’は、ディスプレイ100のアイボックス114に伝搬して、アイボックス114内のディスプレイ100の射出瞳116において、局所的な相対光位相に応じてコヒーレントに加算または減算される光学干渉を受ける。本明細書では、「アイボックス」という用語は、許容可能な品質の画像がディスプレイ100のユーザによって観察され得る幾何学的領域を意味する。
SLM106は、ディスプレイの画像光ビーム108の複数の部分108’が射出瞳116においてコヒーレントに加算または減算されて、射出瞳116に位置するユーザの眼126による直接観察のための画像を形成するように、画像光ビーム108を予め計算された振幅分布および/または位相分布で変調する。いくつかの実施形態では、振幅分布および位相分布は、射出瞳116における画像光ビーム108の複数の部分108’の複数の波面110’との光学干渉を記述する以下の行列方程式を数値的に解くことによって、表示されるべき画像からコントローラ130によって計算され得る。
H=M・S (1)
ここで、Hは所望の(ターゲット)ホログラムであり、Sは解(照明光ビーム104の振幅および位相変調)であり、Mは射出瞳116における複数の部分108’のコヒーレント干渉を考慮した変換行列である。位相限定変調の場合、方程式は非線形になり得る。反復または符号化ベースの方法を使用して、非線形方程式からホログラムを計算することができる。
SLM106は、透過または反射で動作し得るとともに、液晶(LC)アレイ、微小電気機械システム(MEMS)反射器アレイを含むか、または任意の他の好適な技術に基づき得る。複製ライトガイド112は、例えば、図1に示すように、複数のオフセット位置109において画像光ビーム108を内部結合し(in-coupling)、複数の部分108’を外部結合する(out-coupling)ための入力及び出力回折格子カプラを含む平面平行透明板であり得る。回折格子カプラは、例えば、表面レリーフ回折格子(SRG:surface relief grating)カプラ、体積ブラッグ回折格子(VBG:volume Bragg grating)カプラなどを含み得る。画像光ビーム108は、一連の内部全反射(TIR:total internal reflection)によって平面平行板内を伝搬する。いくつかの実施形態では、平面平行板は、瞳複製の密度を増加させるために、板に平行に延びる埋め込まれた部分反射器を含み得る。
次に、1つまたは複数の複製ライトガイドを有するホログラフィックディスプレイのいくつかの実施形態について検討する。最初に図2を参照すると、ディスプレイ200は、図1のディスプレイ100の実施形態であるとともに、同様の構成要素を含む。図2のディスプレイ200の照明器202は、コリメート光ビーム203を放射する光源218を含む。光源218は、例えば、反射器220を介して、ソース複製ライトガイド222に動作可能に結合される。ソース複製ライトガイド222は、反射型SLM206を照明するための照明光ビーム204を形成するように、コリメート光ビーム203の複数の部分224を提供するように構成される。ソース複製ライトガイド222は、例えば、コリメート光ビーム203を内部結合するとともに、コリメート光ビーム203の複数の部分224を外部結合するための入力及び出力回折格子カプラを含み得る。反射型SLM206は、空間的に異なる位相遅延および/または空間的に変調された振幅係数または反射係数を有する照明光ビーム204を反射することによって画像光ビーム208を形成するように構成される。画像光ビーム208の波面は、210で示される。反射時に、画像光ビーム208は、ソース複製ライトガイド222を通過して図1のディスプレイ100の複製ライトガイド112に類似する画像複製ライトガイド212に向かって戻るように伝搬する。画像光ビーム208は、さらなる多重反射なしに、ソース複製ライトガイド222を通過して戻るように伝搬し、即ち、図2では真っ直ぐ下方に伝搬する。画像複製ライトガイド212は、画像光ビーム208の複数の部分208’を形成する。複数の部分208’は、合焦要素234(例えば、レンズ)によって射出瞳216に合焦され、かつ射出瞳216において光学的に干渉して、射出瞳216(図2)に配置されたユーザの眼126によって観察され得る画像を形成する。
画像複製ライトガイド212及び/又はソース複製ライトガイド222は、照明光又は画像光を内部結合及び外部結合するための回折格子カプラを含み得る。回折格子カプラは、例えば、SRGカプラ、BGカプラ等を含み得る。いくつかの実施形態では、平面平行板は、瞳複製の密度を増加させるために、板に平行に延びる埋め込まれた部分反射器を含み得る。
ディスプレイ200は、SLM206に動作可能に結合されたコントローラ230をさらに含み得る。コントローラ230は、画像光ビーム208の複数の部分208’が、ディスプレイ200の射出瞳216においてコヒーレントに加算または減算されて、ユーザの眼126による直接観察のための画像を形成するように、空間的に変化する波面210の形状を計算するように構成(例えば、プログラム)され得る。次に、コントローラ230は、照明光ビーム204を空間的に変調し、出力において画像光ビーム208を提供するように反射型SLM206に制御信号を提供し得る。画像はホログラフィックに形成されるので、3次元ターゲット画像を表す複雑な光学フィールドが射出瞳216に形成され得る。空間的に変化する波面210の形状は、例えば、近くの仮想オブジェクト228が、眼126から有限距離に存在するかのように眼126に見え、眼126がオブジェクト228に自然に焦点を合わせることを可能にし、それによって、輻輳調節矛盾(vergence-accommodation conflict)を緩和するように、計算され得る。
画像複製ライトガイド212は、画像複製ライトガイド212から画像光ビーム208の複数の部分208’を外部結合するための回折格子アウトカプラ290を含み得る。いくつかの実施形態では、回折格子アウトカプラ290は、特定の散乱角(例えば、3度以下、または10度以下、またはそれ以上)内で、画像光ビーム208の複数の部分208’の少なくともいくつかの強度のごく一部(例えば、最大0.01%、最大0.1%、または最大1%)を散乱させるようにも構成され得る。散乱能力を持たせるために、散乱材料が回折格子アウトカプラ290に添加され得る。いくつかの実施形態では、散乱は、一対の記録ビーム(一方がクリーンな平面波ビームまたは球面波ビームであり、他方がわずかに散乱したビーム)を使用して回折格子カプラを形成することによって実現され得る。表面レリーフ回折格子(SRG)も使用され得る。代替的に、別個の拡散散乱体(diffuse scatterer)292が、画像光ビーム208の複数の部分208’の光パワーの少なくとも一部を散乱させるために、回折格子アウトカプラ290の下流に配置され得る。回折格子アウトカプラ290に、または別個の拡散散乱体292として、拡散散乱体を追加する機能は、画像光ビーム208の個々の部分208’間の空間コヒーレンスまたは相関を低減することであり、これは、空間的に変化する波面210の形状の計算および最適化に、そのような計算の制約を緩和することによって、有益であり得る。いくつかの事例では、拡散散乱体の存在は、ディスプレイ200のエタンデュをさらに向上させ、例えば、ディスプレイ200の視野を拡大することを可能にし得る。そのような拡散散乱体はまた、複製ライトガイド112の下流の別個の散乱体として、または複製ライトガイド112の散乱アウトカプラとして、図1のディスプレイ100に追加され得る。
ディスプレイ200は、ユーザの眼126を感知し、アイボックス214内の眼の瞳孔の位置を決定するように構成される視線追跡システム232をさらに含み得る。コントローラ230は、視線追跡システム232に動作可能に結合されて、視線追跡システム232によって決定された眼126の瞳孔の位置に基づいてディスプレイ200の射出瞳216の位置を設定し得る。射出瞳216の位置が設定されると、コントローラ230は、射出瞳216の位置における画像光ビーム208の複数の部分208’の光学干渉を記述する方程式を数値的に解くことによって、表示されるべき画像から画像光ビーム208の振幅分布および/または位相分布を計算し得る。アイボックス214における他のロケーションは、計算プロセスを高速化するために、この計算において無視され得る。
いくつかの実施形態では、反射器220は、コントローラ230から対応する制御信号を受信すると、コリメート光ビーム203を所望の方向にステアリングすることができる傾斜可能な反射器である。コリメート光ビーム203が反射器220によってステアリングされると、ソース複製導波路222へのコリメート光ビーム203の入射角が変化する。ソース複製導波路222がコリメート光ビーム203の指向角を維持するため、コリメート光ビーム203の複数の部分224は、それに応じてステアリングされる。コリメート光ビーム203の複数の部分224は、コリメート光ビーム203のステアリングを繰り返す照明光ビーム204を形成する。照明光ビーム204の角度は、合焦要素234によって照明光ビーム204の焦点スポットの位置に変換される。これにより、画像光ビーム208の複数の部分208’を、例えば、様々な位置209A、209B、および209Cの間でステアリングすることが可能になる。画像光ビーム208の複数の部分208’をステアリングすることにより、画像光ビーム208のより大きな部分を射出瞳216に向けてステアリングすることが可能となり、それによって、ディスプレイ200の射出瞳216の照明が増加し、最終的に、ディスプレイ200による光の利用が向上する。
ここで図3を参照すると、ディスプレイ300は、コリメート光ビーム303を放射する光源318を含む。光源318は、傾斜可能な反射器320に光学的に結合されており、傾斜可能な反射器320は、傾斜可能な反射器320に動作可能に結合されたコントローラ330から対応するコマンドを受信すると、コリメート光ビーム303をステアリングするか、または可変的に再方向付けすることができる。複製ライトガイド322は、傾斜可能な反射器320に光学的に結合され、コリメート光ビーム303を受け取り、コリメート光ビーム303の複数の横方向にオフセットされた平行部分324(短い上向き矢印で示される)を提供する。これに伴い、複数の横方向にオフセットされた平行部分324は、照明光ビーム304を形成する。
SLM306は、複製ライトガイド322に光学的に結合される。SLM306は、照明光ビーム304を受け取り、振幅、位相、またはその両方において空間的に変調して、波面310を有する画像光ビーム308を生成する。SLM306は、この実施形態では反射型SLMである。合焦要素334は、SLM306に光学的に結合される。合焦要素334は、画像光ビーム308をディスプレイ300の射出瞳316に合焦させて、ユーザの眼126による直接観察のための画像を形成する。
図3において、SLM306は、空間的に異なる反射率または空間的に異なる位相のうちの少なくとも1つを有する照明光ビーム304を反射することによって、画像光ビーム308を形成するように構成される。反射時に、画像光ビーム308は、複製ライトガイド322を通過して合焦要素334に向かって戻るように伝搬する。より一般的には、SLM306は透過または反射で動作し得る。SLM306は、LCアレイ、MEMS反射器アレイなどを含み得る。複製ライトガイド322は、図示されるように、複数のオフセット位置において、コリメート光ビーム303を内部結合し、かつ複数の部分324を外部結合するための入力および出力回折格子カプラを含む平面平行透明板であり得る。回折格子カプラは、例えば、SRGカプラ、VBGカプラ等を含み得る。いくつかの実施形態では、平面平行板は、瞳複製の密度を増加させるために、板に平行に延びる埋め込まれた部分反射器を含み得る。
ディスプレイ300は、ユーザの眼125を感知し、アイボックス314に対する眼の瞳孔の位置を決定するように構成される視線追跡システム332をさらに含み得る。コントローラ330は、視線追跡システム332に動作可能に結合されて、複数の位置309A、309B、および309Cの間で、概して、ユーザの眼126の瞳孔に向かって、照明光ビーム304を再方向付けするためにコリメート光ビーム303を再方向付けするように傾斜可能な反射器320を動作させ得る。コントローラ330は、視線追跡システム332によって決定された眼126の瞳孔の位置に基づいて、ディスプレイ300の射出瞳316の位置を設定するようにさらに構成され得る。射出瞳316の位置が設定されると、コントローラ330は、射出瞳316において表示されるべき画像から画像光ビーム308の振幅分布および位相分布を計算し得る。計算は、使用される光学構成に依存し得る。
いくつかの実施形態では、合焦要素334は、切り替え可能な焦点距離を有するレンズ(例えば、切り替え可能なパンチャラトナムベリー位相(PBP)レンズ、切り替え可能なPBPレンズのスタック、メタレンズ)等の可変焦点要素を含み得る。コントローラ330は、1つまたは複数の切り替え可能なレンズに動作可能に結合されるとともに、ディスプレイ300の射出瞳316を眼126の瞳孔にシフトさせるように、例えば、特定のユーザのアイリリーフ距離(eye relief distance)により良く一致するように、1つまたは複数の切り替え可能なレンズを切り替えるように構成され得る。1つまたは複数の切り替え可能なレンズは、3D空間内の仮想オブジェクトのロケーションを変更するために、例えば、輻輳調節矛盾を緩和するために使用され得る。いくつかの実施形態では、合焦要素334は、例えば、切り替え可能な回折格子等のステアリング要素をさらに含み得る。可変焦点要素および/またはステアリング合焦要素334は、傾斜可能な反射器320と組み合わせて使用されて、焦点変調およびシフト変調を分離するか、または両方を使用してシフト角を拡大し得る。
図4を参照すると、ディスプレイ400は、図3のディスプレイ300と同様であり、かつ同様の構成要素を含む。図4のディスプレイ400は、コリメート光ビーム403を提供するための照明器418を含む。複製ライトガイド422は、例えば反射器420によって照明器418に光学的に結合される。複製ライトガイド422は、コリメート光ビーム403を受け取り、コリメート光ビーム403の複数の横方向にオフセットされた平行部分424を提供する。複数の部分424は、照明光ビーム404を形成し、照明光ビーム404は、任意選択的な角度フィルタ436を通過するように伝搬して、SLM406上に入射する。SLM406は、画像情報を画像光ビーム408の波面410上に符号化するように、照明光ビーム404を受け取って振幅または位相のうちの少なくとも1つにおいて空間的に変調する。図4に示す実施形態では、SLM406は、空間的に異なる反射率または空間的に異なる光位相のうちの少なくとも1つを有する照明光ビーム404を反射することによって画像光ビーム408を形成する反射型SLMである。複数の横方向にオフセットされた平行部分424は、複製ライトガイド422及びSLM406に対して垂直に示されているが、複製ライトガイド422に対して斜角で伝搬してもよいことを理解されたい。さらに、画像光ビーム408は、複製ライトガイド422およびSLM406に対して垂直にコリメートされるように示されているが、発散/収束し得るか、または複雑な形状の波面410を有し得る。
画像光ビーム408は、角度フィルタ436を通過するように伝搬する。角度フィルタ436の目的は、SLM406によって照明光ビーム404を空間的に変調する際に現れ得る高次の回折を遮断することである。角度フィルタ436は、例えば、体積ホログラムを含み得る。次に、画像光ビーム408は、複製ライトガイド422によって実質的に捕捉又は再方向付けされることなく、複製ライトガイド422を通過するように真っ直ぐに伝搬する。再方向付け要素438が、画像光ビーム408を複数の位置409A、409B、および409Cの間で、概してユーザの眼126の瞳孔に向かって可変的に再方向付けするためにSLMの下流の光路内に配置される。そのために、再方向付け要素438は、LCステアリング要素、切り替え可能な回折格子、切り替え可能なPBP回折格子、またはそのような回折格子のバイナリスタック、メタレンズ等を含み得る。合焦要素434が、画像光ビーム408をディスプレイ400の射出瞳416に合焦させて、ユーザの眼126による直接観察のための画像を形成するためにSLM406の下流の光路内に配置される。合焦要素は、例えば、回折レンズ、屈折レンズ、フレネルレンズ、PBPレンズ、またはそのようなレンズの任意の組み合わせもしくはスタックを含み得る。再方向付け要素438及び合焦要素434の順序は逆であってもよく、さらに、いくつかの実施形態では、合焦要素434及び再方向付け要素438は、画像光408の可変のステアリング及び合焦を可能にする単一のスタック及び/又は単一の光学サブアセンブリに組み合わされ得る。
視線追跡システム432が設けられ得る。視線追跡システム432は、ユーザの眼126を感知し、アイボックス414に対するユーザの眼126の瞳孔の位置を決定するように構成され得る。コントローラ430は、SLM406、再方向付け要素438、および視線追跡システム432に動作可能に結合され得る。コントローラ430は、視線追跡システム432から眼の瞳孔の位置を取得し、再方向付け要素438に画像光ビーム408を眼の瞳孔位置に向けて再方向付けさせ、SLMに射出瞳416において所望の画像を生成するように照明光ビーム404を空間的に変調させるように構成され得る。合焦要素434は、コントローラ430に動作可能に結合された可変焦点要素を含み得る。コントローラ430は、ディスプレイ400の射出瞳をユーザの眼126の眼の瞳孔の位置にシフトさせるために可変焦点要素の焦点距離を調節するように構成され得る。
図5を参照すると、AR/VRニアアイディスプレイ500は、眼鏡の形状を有するフレーム501を含む。フレーム501は、各眼に対して、照明器アセンブリ572と、アセンブリ572に結合された光学スタック574と、視線追跡カメラ576と、アイボックス514内の眼を照明するための複数のアイボックス照明器578(黒色ドットとして示される)とを支持する。眼照明器578は、光学スタック574によって支持され得る。拡張現実用途では、光学スタック574は、ユーザが、各眼の中に投影され、かつ外部世界の景色と重畳される画像とともに、外界を視認することが可能となるように、透明または半透明であり得る。各眼に投影される画像は、実際の世界の景色に没入して見えるように、擬似的な視差効果で配置されたオブジェクトを含み得る。
照明器アセンブリ572は、本明細書に開示される照明器/光源のいずれか、例えば、図1のディスプレイ100の照明器102-SLM106スタック、図2のディスプレイ400の照明器202-SLM206スタック、図3のディスプレイ200の光源318、および/または図4のディスプレイ300の照明器418を含み得る。光学スタック574は、本明細書に開示される全開口光学要素またはスタックのいずれかを含み得る。本明細書では、「全開口」という用語は、アイボックス514内に配置されたユーザの眼の視野の大部分にわたって広がっていることを意味する。全開口要素またはスタックの例は、例えば、図1のディスプレイ100の複製ライトガイド112、図2のディスプレイ200の複製ライトガイド212、図3のディスプレイ300のSLM306、複製ライトガイド322、および合焦要素334のスタック、および/または図4のディスプレイ400のSLM406、角度フィルタ436、複製ライトガイド422、再方向付け要素438、および合焦要素434のスタックを含む。
視線追跡カメラ576の目的は、ユーザの両眼の位置および/または向きを決定することである。ユーザの眼の位置および向きが把握されると、眼の瞳孔位置が把握され、AR/VRニアアイディスプレイ500のコントローラ530は、必要とされるSLM位相および/または振幅プロファイルを計算して、眼の瞳孔の場所に画像を形成するとともに、光エネルギーを眼の瞳孔上に入射するように再方向付けし得る。注視輻輳距離および方向も決定され得る。表示される画像は、表示される拡張現実の風景へのユーザの没入のより良好な忠実度のために、および/または拡張現実との対話の特定の機能を提供するために、ユーザの視線を考慮するように動的に調整され得る。
動作中、眼照明器578は、視線追跡カメラ576が眼の画像を取得するとともに、閃光である基準反射を提供することを可能にするために対応するアイボックス514において眼を照明する。閃光は、キャプチャされた眼画像内の基準点として機能し得、閃光画像に対する眼の瞳孔画像の位置を決定することによって、眼の注視方向の決定を可能にする。照明光によりユーザの気を散らすことを回避するために、照明光はユーザに見えないようにされ得る。例えば、赤外線を使用してアイボックス514を照明し得る。
次いで、コントローラ530は、視線追跡カメラ576によって取得された画像を処理して、ユーザの両眼の注視方向をリアルタイムで決定し得る。いくつかの実施形態では、画像処理および眼の位置/向きの決定機能は、AR/VRニアアイディスプレイ500の専用コントローラまたは複数のコントローラによって実行され得る。
本開示の実施形態は、人工現実システムを含み得るか、または人工現実システムとともに実施され得る。人工現実システムは、視覚情報、オーディオ、触覚(体性感覚)情報、加速度、平衡等の感覚を通して得られる外界に関する感覚情報を、ユーザに提示する前に何らかの方法で調整する。非限定的な例として、人工現実は、仮想現実(VR)、拡張現実(AR)、複合現実(MR)、ハイブリッド現実、またはそれらのいくつかの組合せおよび/もしくは派生物を含み得る。人工現実コンテンツは、完全に生成されたコンテンツ、またはキャプチャされた(例えば、現実世界の)コンテンツと組み合わされた生成されたコンテンツを含み得る。人工現実コンテンツは、ビデオ、オーディオ、体性もしくは触覚フィードバック、またはそれらのいくつかの組合せを含み得る。このコンテンツのいずれも、観察者に3次元効果をもたらすステレオビデオにおいてなど、単一のチャネルまたは複数のチャネルにおいて提示され得る。さらに、いくつかの実施形態では、人工現実はまた、例えば、人工現実におけるコンテンツを作成するために使用される、および/または人工現実において別様に使用される(例えば、人工現実におけるアクティビティを実施する)、アプリケーション、製品、アクセサリ、サービス、またはそれらのいくつかの組み合わせにも関連付けられ得る。人工現実コンテンツを提供する人工現実システムは、ホストコンピュータシステムに接続されたHMDなどのウェアラブルディスプレイ、スタンドアロンHMD、眼鏡の形状を有するニアアイディスプレイ、モバイルデバイスまたはコンピューティングシステム、あるいは1人または複数人の観察者に人工現実コンテンツを提供することが可能な任意の他のハードウェアプラットフォームを含む、様々なプラットフォーム上に実装され得る。
図6を参照すると、HMD600は、AR/VR環境へのより大きな没入度のためのユーザの顔を取り囲むAR/VRウェアラブルディスプレイシステムの一例である。本明細書で考慮されるディスプレイのいずれも、HMD600において使用され得る。HMD600の機能は、コンピュータ生成画像で物理的な現実世界の環境のビューを拡張すること、または完全に仮想3D画像を生成することである。HMD600は、前面本体602と、バンド604とを含み得る。前面本体602は、信頼できる快適な方法でユーザの眼の前への配置のために構成され、バンド604は、ユーザの頭部上で前面本体602を固定するために伸張され得る。ディスプレイシステム680は、ユーザにAR/VR画像を提示するために、前面本体602内に配置され得る。ディスプレイシステム680は、例えば、図1のディスプレイ100、図2のディスプレイ200、図3のディスプレイ300、および/または図1のディスプレイ400を含み得る。前面本体602の側面606は、不透明であるか、または透明であり得る。
いくつかの実施形態では、前面本体602は、ロケータ608と、HMD600の加速度を追跡するための慣性測定ユニット(IMU)610と、HMD600の位置を追跡するための位置センサ612とを含む。IMU610は、HMD600の動きに応答して1つまたは複数の測定信号を生成する位置センサ612のうちの1つまたは複数から受信した測定信号に基づいて、HMD600の位置を示すデータを生成する電子デバイスである。位置センサ612の例は、1つまたは複数の加速度計、1つまたは複数のジャイロスコープ、1つまたは複数の磁力計、動きを検出する別の好適なタイプのセンサ、IMU610の誤差補正のために使用されるタイプのセンサ、またはそれらのいくつかの組み合わせを含む。位置センサ612は、IMU610の外部に、IMU610の内部に、またはこれらの組み合わせで配置され得る。
ロケータ608は、仮想現実システムがHMD600全体のロケーションおよび配向を追跡することができるように、仮想現実システムの外部撮像デバイスによって追跡される。IMU610および位置センサ612によって生成された情報は、HMD600の位置および配向の追跡精度を向上させるために、ロケータ608を追跡することによって取得された位置および配向と比較され得る。正確な位置及び配向は、ユーザが3D空間内で移動及び回転する際に適切な仮想風景をユーザに提示するために重要である。
HMD600は、HMD600の一部または全部の周囲の局所領域の深度情報を記述するデータをキャプチャする深度カメラアセンブリ(DCA)611をさらに含み得る。そのために、DCA611は、レーザーレーダ(LIDAR)または類似のデバイスを含み得る。深度情報は、3D空間におけるHMD600の位置および配向の決定のより良好な精度のために、IMU610からの情報と比較され得る。
HMD600は、ユーザの眼の配向および位置をリアルタイムで決定するための視線追跡システム614をさらに含み得る。眼の取得された位置および配向はまた、HMD600が、ユーザの視線方向を決定することと、それに応じてディスプレイシステム680によって生成される画像を調整することとを可能にする。一実施形態では、輻輳、即ち、ユーザの眼の注視の輻輳角が決定される。決定された注視方向および輻輳角はまた、視野角および眼の位置に依存する視覚アーチファクトのリアルタイム補償のために使用され得る。さらに、決定された輻輳角および注視角は、ユーザとの対話、オブジェクトの強調、オブジェクトの前景への移動、追加のオブジェクトまたはポインタの作成などのために使用され得る。例えば、前面本体602に組み込まれた一組の小型スピーカを含むオーディオシステムも提供され得る。
本開示は、本明細書に記載の特定の実施形態によって範囲が限定されるものではない。実際に、本明細書に記載されたものに加えて、他の様々な実施形態および修正形態が、前述の説明および添付の図面から当業者に明らかになるであろう。従って、そのような他の実施形態および修正形態は、本開示の範囲内に含まれることが意図される。さらに、本開示は、特定の目的のための特定の環境における特定の実装形態のコンテキストにおいて、本明細書で説明されているが、当業者は、本開示の有用性がそれに限定されず、本開示が任意の数の目的のための任意の数の環境において有益に実装され得ることを認識するであろう。従って、以下に記載される特許請求の範囲は、本明細書で説明される本開示の全範囲および趣旨を考慮して解釈されるべきである。

Claims (20)

  1. ディスプレイであって、
    照明光ビームを提供するための照明器と、
    前記照明器に動作可能に結合され、前記照明光ビームを受け取って前記照明光ビームの少なくとも位相を空間的に変調して、空間的に変化する波面を有する画像光ビームを提供する空間光変調器(以下、SLMとする)と、
    前記SLMに動作可能に結合され、前記画像光ビームを受け取り、前記ディスプレイのアイボックスにおいて前記画像光ビームの複数の横方向にオフセットされた部分を提供する第1の複製ライトガイドと、を備え、
    前記画像光ビームの前記空間的に変化する波面は、前記画像光ビームの複数の部分が前記ディスプレイの射出瞳においてコヒーレントに加算または減算されて、ユーザによる直接観察のための画像を形成するような形状を有する、ディスプレイ。
  2. 前記照明器は、コリメート光ビームを提供する光源と、前記コリメート光ビームを受け取り、前記SLMに結合するための前記照明光ビームを形成するように、前記コリメート光ビームの複数の部分を提供するように構成された第2の複製ライトガイドとを含む、請求項1に記載のディスプレイ。
  3. 前記SLMは、空間的に異なる位相遅延を有する前記照明光ビームを反射することによって前記画像光ビームを形成するように構成された反射型SLMであり、反射時に、前記画像光ビームは、前記第2の複製ライトガイドを通過して前記第1の複製ライトガイドに戻るように伝搬する、請求項2に記載のディスプレイ。
  4. 前記第1の複製ライトガイドは、前記第1の複製ライトガイドからの前記画像光ビームの前記複数の部分を外部結合する回折格子アウトカプラを含み、前記回折格子アウトカプラは、前記画像光ビームの前記複数の部分のうちの少なくともいくつかの光パワーの最大1%を拡散的に散乱させるように構成される、請求項1乃至3のいずれか一項に記載のディスプレイ。
  5. 前記第1の複製ライトガイドは、
    前記第1の複製ライトガイドからの前記画像光ビームの前記複数の部分を外部結合する回折格子アウトカプラと、
    前記画像光ビームの前記複数の部分の光パワーの少なくとも一部を散乱させる、前記回折格子アウトカプラの下流にある拡散散乱体と、を含む、請求項1乃至4のいずれか一項に記載のディスプレイ。
  6. 前記SLMに動作可能に結合されたコントローラをさらに備え、前記コントローラは、
    前記画像光ビームの前記複数の部分が、ユーザによる直接観察のための前記画像を形成するために前記ディスプレイの前記射出瞳においてコヒーレントに加算または減算されるように、前記空間的に変化する波面の形状を計算し、
    前記照明光ビームを空間的に変調して前記画像光ビームを提供するための制御信号を前記SLMに提供するように構成されている、請求項1乃至5のいずれか一項に記載のディスプレイ。
  7. ユーザの眼の瞳孔の位置を決定するための視線追跡システムをさらに備え、
    前記コントローラは、前記視線追跡システムに動作可能に結合されており、前記コントローラは、前記視線追跡システムによって決定された眼の瞳孔の位置に基づいて前記ディスプレイの前記射出瞳の位置を設定するように構成される、請求項6に記載のディスプレイ。
  8. 前記ディスプレイの前記射出瞳において前記画像光ビームを合焦させる、第1の複製導波路の下流にある合焦要素と、
    ユーザの眼の瞳孔の位置を決定する視線追跡システムと、をさらに備え、
    前記照明器は、
    コリメート光ビームを提供する光源と、
    前記光源に動作可能に結合され、前記コリメート光ビームを受け取って可変的に再方向付けする傾斜可能な反射器と、
    前記傾斜可能な反射器に動作可能に結合され、前記コリメート光ビームを受け取り、前記照明光ビームを形成するように、前記コリメート光ビームの複数の部分を提供する第2の複製ライトガイドと、を含み、
    前記コントローラは、前記傾斜可能な反射器および前記視線追跡システムに動作可能に結合されるとともに、前記ディスプレイの前記射出瞳をユーザの眼の瞳孔に向かってシフトさせるように前記コリメート光ビームを再方向付けするように構成される、請求項6に記載のディスプレイ。
  9. ディスプレイであって、
    コリメート光ビームを提供する光源と、
    前記光源に動作可能に結合され、前記コリメート光ビームを受け取って可変的に再方向付けする傾斜可能な反射器と、
    前記傾斜可能な反射器に動作可能に結合され、前記コリメート光ビームを受け取って、前記コリメート光ビームの複数の横方向にオフセットされた平行部分を提供する複製ライトガイドと、
    前記複製ライトガイドに動作可能に結合され、前記コリメート光ビームの複数の部分を受け取って前記コリメート光ビームの前記複数の部分を振幅または位相のうちの少なくとも1つにおいて空間的に変調して、画像光ビームを形成する空間光変調器(以下、SLMとする)と、
    前記SLMに動作可能に結合され、ユーザによる直接観察のための画像を形成するように、前記ディスプレイの射出瞳において前記画像光ビームを合焦させる合焦要素と、を備えるディスプレイ。
  10. 前記SLMは、空間的に異なる反射率または空間的に異なる位相のうちの少なくとも1つを有する前記コリメート光ビームを反射することによって前記画像光ビームを形成するように構成された反射型SLMであり、反射時に、前記画像光ビームは、前記複製ライトガイドを通過して前記合焦要素に向かって戻るように伝搬する、請求項9に記載のディスプレイ。
  11. ユーザの眼の瞳孔の位置を決定するための視線追跡システムと、
    前記視線追跡システム及び前記傾斜可能な反射器に動作可能に結合され、前記ディスプレイの前記射出瞳をユーザの眼の瞳孔にシフトさせるために前記コリメート光ビームを再方向付けするように前記傾斜可能な反射器を動作させるように構成されたコントローラと、をさらに備える、請求項9または10に記載のディスプレイ。
  12. 前記合焦要素は、切り替え可能なレンズを含み、前記コントローラは、前記切り替え可能なレンズに動作可能に結合されるとともに、前記ディスプレイの前記射出瞳をユーザの眼の瞳孔にシフトさせるように前記切り替え可能なレンズを切り替えるように構成される、請求項11に記載のディスプレイ。
  13. ディスプレイであって、
    コリメート光ビームを提供する照明器と、
    前記照明器に動作可能に結合され、前記コリメート光ビームを受け取って、前記コリメート光ビームの複数の横方向にオフセットされた平行部分を提供する複製ライトガイドと、
    前記複製ライトガイドに動作可能に結合され、前記コリメート光ビームの複数の部分を受け取って前記コリメート光ビームの複数の部分を振幅または位相のうちの少なくとも1つにおいて空間的に変調する空間光変調器(以下、SLMとする)と、
    画像光ビームを可変的に再方向付けする、前記SLMの下流の光路内にある再方向付け要素と、
    前記ディスプレイの射出瞳において画像光ビームを合焦させて、ユーザによる直接観察のための画像を形成する、前記SLMの下流の前記光路内にある合焦要素と、を備えるディスプレイ。
  14. 前記SLMは、空間的に異なる反射率または空間的に異なる位相のうちの少なくとも1つを有する前記コリメート光ビームの前記複数の部分を反射することによって前記画像光ビームを形成するように構成された反射型SLMであり、反射時に、前記画像光ビームは、前記複製ライトガイドを通過して前記再方向付け要素に向かって戻るように伝搬する、請求項13に記載のディスプレイ。
  15. 前記再方向付け要素は、前記画像光ビームを切り替え可能に再方向付けするように構成されるパンチャラトナムベリー位相(PBP)回折格子のスタックを含む、請求項13または14に記載のディスプレイ。
  16. 前記合焦要素が、回折レンズ、屈折レンズ、フレネルレンズ、またはパンチャラトナムベリー位相(PBP)レンズのうちの少なくとも1つを含む、請求項13乃至15のいずれか一項に記載のディスプレイ。
  17. 前記SLMの下流の光路内に配置されるとともに、前記コリメート光ビームの前記複数の部分の空間変調による高次の回折を遮断するように構成された角度フィルタをさらに備える、請求項13乃至16のいずれか一項に記載のディスプレイ。
  18. ユーザの眼の瞳孔の位置を決定するための視線追跡システムをさらに備える、請求項13乃至17のいずれか一項に記載のディスプレイ。
  19. 前記SLM、前記再方向付け要素、および前記視線追跡システムに動作可能に結合されたコントローラをさらに備え、前記コントローラは、
    前記視線追跡システムから眼の瞳孔の位置を取得し、
    前記再方向付け要素に、前記画像光ビームを眼の瞳孔の位置に向けて再方向付けさせ、
    前記SLMに、前記コリメート光ビームの前記複数の部分を空間的に変調させるように構成される、請求項18に記載のディスプレイ。
  20. 前記合焦要素は、前記コントローラに動作可能に結合された可変焦点要素を含み、前記コントローラは、前記ディスプレイの前記射出瞳を眼の瞳孔の位置にシフトさせるように、前記可変焦点要素の焦点距離を調節するように構成される、請求項19に記載のディスプレイ。
JP2023511839A 2020-09-24 2021-09-20 光ガイドベースのホログラフィックディスプレイ Pending JP2023542813A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US17/031,204 US20220091560A1 (en) 2020-09-24 2020-09-24 Lightguide based holographic display
US17/031,204 2020-09-24
PCT/US2021/051155 WO2022066589A2 (en) 2020-09-24 2021-09-20 Lightguide based holographic display

Publications (1)

Publication Number Publication Date
JP2023542813A true JP2023542813A (ja) 2023-10-12

Family

ID=78269681

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023511839A Pending JP2023542813A (ja) 2020-09-24 2021-09-20 光ガイドベースのホログラフィックディスプレイ

Country Status (6)

Country Link
US (1) US20220091560A1 (ja)
EP (1) EP4217784A2 (ja)
JP (1) JP2023542813A (ja)
KR (1) KR20230074208A (ja)
CN (1) CN116249926A (ja)
WO (1) WO2022066589A2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11709411B2 (en) 2021-07-16 2023-07-25 Meta Platforms Technologies, Llc Display with image light steering
CN114706227A (zh) * 2022-06-06 2022-07-05 联创电子科技股份有限公司 光波导显示装置及显示方法
WO2024107926A1 (en) * 2022-11-17 2024-05-23 Meta Platforms Technologies, Llc Holographic vr display

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9297996B2 (en) * 2012-02-15 2016-03-29 Microsoft Technology Licensing, Llc Laser illumination scanning
US10394189B2 (en) * 2014-01-07 2019-08-27 Seereal Technologies S.A. Display device for holographic reconstruction
US10359627B2 (en) * 2015-11-10 2019-07-23 Microsoft Technology Licensing, Llc Waveguide coatings or substrates to improve intensity distributions having adjacent planar optical component separate from an input, output, or intermediate coupler
US10678116B1 (en) * 2017-11-09 2020-06-09 Facebook Technologies, Llc Active multi-color PBP elements
US11423814B2 (en) * 2018-08-02 2022-08-23 Meta Platforms Technologies, Llc Wearable display with coherent replication

Also Published As

Publication number Publication date
WO2022066589A2 (en) 2022-03-31
EP4217784A2 (en) 2023-08-02
US20220091560A1 (en) 2022-03-24
CN116249926A (zh) 2023-06-09
KR20230074208A (ko) 2023-05-26
WO2022066589A3 (en) 2022-05-05

Similar Documents

Publication Publication Date Title
JP7175416B2 (ja) 厚い媒体を含む仮想現実、拡張現実、および複合現実システムならびに関連方法
US10775633B1 (en) Exit pupil steering for near-eye displays
JP2023542813A (ja) 光ガイドベースのホログラフィックディスプレイ
US11407731B2 (en) Holographic in-field illuminator
TW201835636A (zh) 擴增實境成像系統
US11423814B2 (en) Wearable display with coherent replication
US10845761B2 (en) Reduced bandwidth holographic near-eye display
JP2023509295A (ja) 中心窩適応ディスプレイシステム
CN114902112A (zh) 具有全息中继器和全息图像组合器的显示器
EP3688516A1 (en) Near eye 3d display with separate phase and amplitude modulators
JP2023509294A (ja) スイッチ可能なパンチャラトナム-ベリー位相格子積層体
CN115808798A (zh) 全息虚拟现实显示器
EP3864458A1 (en) Holographic display system
US11822086B2 (en) Lightguide based illuminator for reflective display panel
US20240168290A1 (en) Holographic vr display
US11579450B1 (en) Holographic diffuser display
WO2024107926A1 (en) Holographic vr display
TW202331348A (zh) 具有徑向光瞳複製的光導及基於其之視覺顯示器
WO2023039124A1 (en) Lightguide with radial pupil replication and visual display based thereon

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240628