CN111316153A - 具有被配置为捕获眼睛和/或环境的图像的波导的增强现实显示器 - Google Patents

具有被配置为捕获眼睛和/或环境的图像的波导的增强现实显示器 Download PDF

Info

Publication number
CN111316153A
CN111316153A CN201880072523.3A CN201880072523A CN111316153A CN 111316153 A CN111316153 A CN 111316153A CN 201880072523 A CN201880072523 A CN 201880072523A CN 111316153 A CN111316153 A CN 111316153A
Authority
CN
China
Prior art keywords
light
waveguide
eye
optical element
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880072523.3A
Other languages
English (en)
Inventor
A·西奈
B·弗里德曼
M·A·克鲁格
吴哲宇
N·梅塔夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Magic Leap Inc
Original Assignee
Magic Leap Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Magic Leap Inc filed Critical Magic Leap Inc
Publication of CN111316153A publication Critical patent/CN111316153A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0081Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. enlarging, the entrance or exit pupil
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/28Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for polarising
    • G02B27/283Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for polarising used for beam splitting or combining
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0123Head-up displays characterised by optical features comprising devices increasing the field of view
    • G02B2027/0125Field-of-view increase by wavefront division
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0185Displaying image at variable distance

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Optical Couplings Of Light Guides (AREA)
  • Optical Elements Other Than Lenses (AREA)
  • Diffracting Gratings Or Hologram Optical Elements (AREA)

Abstract

头戴式显示系统可包括相机、至少一个波导、被配置为使得光被耦合到所述波导中并在其中被引导的至少一个耦合光学元件、以及至少一个耦出元件。至少一个耦出元件可被配置为将在所述波导内引导的光从所述波导耦出并且将所述光引导至所述相机。相机可以相对于所述至少一个耦出光学元件设置在光路中以接收光的至少一部分,该光的至少一部分经由耦合元件被耦合到所述波导中并在其中被引导并且通过所述耦出耦合元件被从所述波导耦出使得可由所述相机捕获图像。

Description

具有被配置为捕获眼睛和/或环境的图像的波导的增强现实 显示器
相关申请的交叉引用
本申请根据35U.S.C§119(e)要求2017年9月21日提交的名称为“AUGMENTEDREALITY DISPLAY WITH EYEPIECE CONFIGURED TO CAPTURE IMAGES OF EYE ANDENVIRONMENT(具有被配置为捕获眼睛和/或环境的图像的波导的增强现实显示器)”的美国临时申请No.62/561645的优先权益,其公开内容通过引用整体并入本文。
技术领域
本公开涉及包括增强现实成像和可视化系统的光学装置。
背景技术
现代计算和显示技术促进了用于所谓的“虚拟现实”或“增强现实”体验的系统的发展,其中数字再现的图像或其部分以其看起来是真实的或者可被感知为真实的方式呈现给用户。虚拟现实(或者“VR”)场景通常涉及数字或虚拟图像信息的呈现,而对于其他实际的真实世界的视觉输入不透明;增强现实(或者“AR”)场景通常涉及数字或虚拟图像信息的呈现作为对用户周围的实际世界的可视化的增强。混合现实(或者“MR”)场景是一种AR场景并且通常涉及集成到自然世界中并响应于自然世界的虚拟对象。例如,MR场景可以包括AR图像内容,该AR图像内容看起来被真实世界中的对象阻挡或者另外被感知为与该对象交互。
参考图1,示出了增强现实场景10。AR技术的用户看到以人、树木、背景中的建筑物和混凝土平台30为特征的真实世界公园状设置20。用户同样感知到他/她“看到”站在真实世界平台30上的诸如机器人雕像40的“虚拟内容”,以及飞过的卡通式化身角色50,该化身角色看起来是大黄蜂的化身。这些元素50、40是“虚拟的”,因为它们在真实世界中不存在。因为人类的视觉感知系统是复杂的,并且产生有助于连同其他虚拟或真实世界的图像元素一起的虚拟图像元素的舒适、自然、丰富呈现的AR技术是具有挑战性的。
本文公开的系统和方法解决了与AR和VR技术相关的各种挑战。
偏振分束器可用于显示系统中,以将偏振光引导至光调制器,然后将该光引导至观看者。一般地,存在减小显示系统的尺寸的持续要求,由此,也存在减小显示系统的组成部分的尺寸的持续要求,该组成部分包括利用偏振分束器的组成部分。
发明内容
本文描述的各种实现方式包括被配置为向眼睛提供光照和/或映射像投射的显示系统。附加地或可选地,显示系统可以对眼睛和/或环境成像。
在一些实施例中,头戴式显示系统被配置为将光投射到用户的眼睛以在所述用户的视场中显示增强现实图像内容。头戴式显示系统可以包括被配置为支撑在用户的头部上的框架。该显示系统还可以包括图像投影仪,该图像投影仪被配置为将图像投射到用户的眼睛中以在用户的视场中显示图像内容。该显示系统可以包括相机、至少一个波导、被配置为使得光被耦合到所述波导中并在其中被引导的至少一个耦合光学元件、以及至少一个耦出(out-coupling)元件。该至少一个耦出元件可以被配置为将在所述波导内引导的光从所述波导耦出,并且将所述光引导至所述相机。相机可以设置在相对于所述至少一个耦出光学元件的光路中,以接收光的至少一部分,该光经由耦合元件耦入到所述波导中并在其中被引导并且通过所述耦耦出元件使该光从所述波导中耦出,从而可以由所述相机捕获图像。
附图说明
图1示出了通过AR装置的增强现实(AR)的用户视图。
图2示出了可穿戴显示系统的示例。
图3示出了用于为用户模拟三维图像的常规显示系统。
图4示出了使用多个深度平面模拟三维图像的方法的方面。
图5A-5C示出了曲率半径与焦点半径之间的关系。
图6示出了用于将图像信息输出给用户的波导堆叠的示例。
图7示出了由波导输出的出射光束的示例。
图8示出了堆叠波导组件的示例,其中每个深度平面包括使用多种不同分量颜色形成的图像。
图9A示出了堆叠波导组的示例的横截面侧视图,每个堆叠波导包括耦入(incoupling)光学元件。如本文所讨论的,波导堆叠可以包括目镜。
图9B示出了图9A的多个堆叠波导的示例的透视图。
图9C示出了图9A和9B的多个堆叠波导的示例的俯视平面图。
图10示意性地示出了示例成像系统的横截面侧视图,该示例成像系统包括目镜、图像投影仪、用于照射眼睛的光源以及用于捕获眼睛图像的相机。
图11A示意性地示出了用于照射眼睛的光源和用于将图像注入眼睛的图像投影仪,它们均朝着目镜的波导上的耦入光学元件发射光。
图11B示意性地示出了耦合到波导中的来自光源和来自图像投影仪的投射光。
图11C示意性地示出了耦入光如何通过全内反射传播通过波导。
图11D示意性地示出了从目镜耦出的来自光源和来自图像投影仪的光。
图11E示意性地示出了波导和耦合光学元件,其被配置为至少沿耦合光学元件的全尺寸(例如,沿x方向)传播耦入光。进入眼睛的光被示出为来自扩展光源(例如,成像光将捕获视网膜的区域)。
图12A是示意性地示出从眼睛出射的从视网膜反射并入射到目镜上的光的横截面视图。
图12B示意性地示出了耦入到目镜的波导中的示例光。
图12C示意性地示出了来自眼睛的准直的耦入光,该准直的耦入光通过波导朝着成像装置传播。
图12D示意性地示出了传播到一个或多个耦出光学元件的来自眼睛的耦入光。
图12E示意性地示出了来自眼睛的光,该光通过耦出光学元件从波导耦出并被引导至相机,使得可由相机捕获眼睛(例如,视网膜)的图像。
图13A示意性地示出了成像系统如何能够对眼睛(例如,视网膜)的各个部分进行成像,这可以使能要被确定的眼睛的取向和跟踪的眼睛位置。
图13B示出了顺序显示的注视目标的图案,该注视目标用于使眼睛在对视网膜成像的各种不同的方向上定向。所得图像对应于视网膜的不同部分。例如,当将眼睛在各个方向上定向以观看在显示器上不同定位的注视目标时,由相机捕获的图像包括视网膜的不同部分。这些图像可以被组合以形成视网膜的较大映射或合成图像。
图14A示意性地示出了成像系统的横截面图,该成像系统包括目镜和用于收集来自目镜前方的环境的光的相机。来自环境的光被示出为从环境中的一个或多个物理对象反射出或者发射出。来自目镜前方的环境中的对象的光的收集可以使能环境图像被捕获。
图14B示意性地示出了来自环境的光,该光被耦合光学元件耦合到目镜的波导中。
图14C示意性地示出了一种成像系统,该成像系统使用目镜前方的诸如折射光学元件(例如,诸如宽视场透镜的透镜)的有焦度的(powered)光学元件收集来自环境的光。
图15A示意性地示出了示例性成像系统,其包括用于接收来自照射源的光并将光耦合到目镜的波导中的偏振选择耦入光学元件。目镜还包括用于使光从波导耦出的偏振选择光耦合元件。偏振器可以用于使来自照射源的光偏振,以及半波延迟器可以用于使线性偏振光的取向旋转,使得该光通过偏振选择耦入光学元件转入波导。
图15B示意性地示出了来自眼睛的光(例如,来自被来自照射源的红外光照射的视网膜的光),其被耦合回到波导中并被引导到相机用于图像捕获。
图16示意性地示出了被配置为对眼睛的前部(例如,角膜)进行成像的成像系统。成像系统包括如上所述的目镜。该成像系统还包括正透镜,该正透镜用于准直从眼睛的前部收集的光,以经由光学耦合元件耦合到波导中并传播到相机用于图像捕获。该系统还包括负透镜,以抵消由正透镜引入的正焦度并防止以其他方式将由正透镜引起的目镜前方的环境图像倒置。
图17示意性地示出了另一示例成像系统,其被配置为对眼睛的前部(例如,角膜)成像。该成像系统包括弯曲的波长选择反射器,该弯曲的波长选择反射器用于准直来自眼睛的前部的光,以经由光学耦合元件耦合到波导中并传播到相机用于图像捕获。波长选择反射器可以以用于从眼睛反射的红外光的反射方式和以用于来自用户前方环境的可见光的透射方式来操作。
图18示意性地示出了示例成像系统,其也包括弯曲的波长选择反射器,该弯曲的波长选择反射器用于准直来自眼睛的前部的光,以经由光学耦合元件耦合到波导中并传播到相机用于图像捕获。可以采用偏振选择性来辅助控制从眼睛反射的光的路径。眼睛的照射是经由波导提供的,而不是经由位于波导与眼睛之间的多个光源提供,如图18所示。
图19示意性地示出了成像系统,其包括快门以辅助用于减去噪声的过程。
图20A-20E示意性地示出了与弯曲的波长选择反射器结合使用波长调制来减去噪声的可选过程。
图21示出了示例目镜,其可用于同时将光投射到用户的眼睛中以向其提供图像内容并同时接收用户的眼睛或用户前方环境的图像数据。
图22示出了具有多个均匀手性结构的胆甾型液晶衍射光栅(CLCG)的示例的横截面侧视图。
图23示出了成像系统的示例,该成像系统包括被配置为使用胆甾型液晶(CLC)离轴镜对佩戴者的眼睛成像的面向前的相机。
提供附图以示出示例实施例,并且不旨在限制本公开的范围。贯穿全文,相同的参考标号表示相同的部分。
具体实施方式
现在将参考附图,其中相同的附图标记始终表示相同的部件。
图2示出了可穿戴显示系统60的示例。显示系统60包括显示器70、以及支持该显示器70的功能的各种机械和电子模块和系统。显示器70可以与框架80耦接,该框架可以由显示系统用户或观看者90佩戴并且被配置为将显示器70定位在用户90的眼睛前方。在一些实施例中,显示器70可以被认为是眼镜。在一些实施例中,扬声器100被耦接到框架80并且被配置为位于用户90的耳道附近(在一些实施例中,另一扬声器(未示出)可以可选地位于用户的另一耳道附近以提供立体声/可塑形声音控制)。显示系统还可以包括一个或多个麦克风110或其他装置以检测声音。在一些实施例中,麦克风被配置为允许用户向系统60提供输入或命令(例如,语音菜单命令、自然语言问题等的选择)和/或可以允许与其他人(例如,与其他类似显示系统的用户)的音频通信。麦克风还可以被配置为外围传感器以收集音频数据(例如,来自用户和/或环境的声音)。在一些实施例中,显示系统还可以包括外围传感器120a,其可以与框架80分离并且附接到用户90的身体(例如,用户90的头部、躯干、四肢等上)。在一些实施例中,外围传感器120a可以被配置为获取表征用户90的生理状态的数据。例如,传感器120a可以是电极。
继续参考图2,显示器70可操作地通过通信链路130(诸如通过有线引线或无线连接)被耦接到本地数据处理和模块140,本地数据处理和模块140可以以各种配置安装,诸如被固定地附到框架80上、被固定地附到由用户佩戴的头盔或帽子上、被嵌入头戴耳机内、或者其他的可拆卸地附到用户90(例如,以背包式配置、以带耦接式配置)。类似地,传感器120a可以通过通信链路120b(例如通过有线引线或无线连接)可操作地耦接到本地处理和数据模块140。本地处理和数据模块140可以包括硬件处理器以及诸如非易失性存储器(例如,闪速存储器或硬盘驱动器)的数字存储器,这两者都可用于辅助处理、高速缓存和存储数据。该数据包括:a)从传感器(其例如可以可操作地耦接到框架80或者其他的可操作地附到用户90)捕获的数据,所述传感器例如为图像捕获装置(诸如相机)、麦克风、惯性测量单元、加速度计、罗盘、GPS单元、无线电装置、陀螺仪和/或本文公开的其他传感器;和/或b)使用远程处理模块150和/或远程数据储存库160(其包括与虚拟内容相关的数据)获取和/或处理的数据,这些数据可以在这样的处理或检索之后被传送到显示器70。本地处理和数据模块140可以诸如经由有线或无线通信链路可操作地通过通信链路170、180耦接到远程处理模块150和远程数据储存库160,使得这些远程模块150、160可操作地彼此耦接并且可用作本地处理和数据模块140的资源。在一些实施例中,本地处理和数据模块140可以包括图像捕获装置、麦克风、惯性测量单元、加速度计、罗盘、GPS单元、无线电装置和/或陀螺仪中的一个或多个。在一些其他实施例中,这些传感器中的一个或多个可以附到框架80或者可以是通过有线或无线通信路径与本地处理和数据模块140通信的独立结构。
继续参考图2,在一些实施例中,远程处理模块150可以包括一个或多个处理器,这些处理器被配置为分析和处理数据和/或映射像信息。在一些实施例中,远程数据储存库160可以包括数字数据存储设施,该设施可以通过因特网或“云”资源配置中的其他网络配置而可用。在一些实施例中,远程数据储存库160可以包括一个或多个远程服务器,这些远程服务器向本地处理和数据模块140和/或远程处理模块150提供信息,例如,用于生成增强现实内容的信息。在一些实施例中,在本地处理和数据模块中存储所有数据并且执行所有计算,从而允许从远程模块完全自主的使用。
现在参考图3,可以通过向观看者的每只眼睛提供略微不同的图像呈现来实现将图像感知为“三维”或“3-D”。图3示出了用于为用户模拟三维图像的常规的显示系统。将两个不同图像190、200-用于每只眼睛210、220中的一个-输出给用户。图像190、200沿与观看者的眼睛凝视平行的光学轴或z轴与眼睛210、220隔开距离230。图像190、200是平坦的,并且眼睛210、220可以通过呈现单个适应(accommodate)状态而聚焦在图像上。这样的3D显示系统依赖于人类视觉系统来组合图像190、200以提供组合图像的深度感知和/或规模(scale)。
然而,应当理解,人类视觉系统更复杂并且提供对深度的真实感知更具挑战性。例如,常规的“3-D”显示系统的许多观看者发现这样的系统不舒服或者根本不能感知到深度感。不受理论的限制,据信对象的观看者可能由于聚散和适应的组合而将对象感知为“三维的”。两只眼睛相对于彼此的聚散运动(即,眼睛的旋转,使得瞳孔向着彼此或远离彼此运动以会聚眼睛的眼睛凝视来注视对象)与眼睛的晶状体和瞳孔的聚焦(或“适应”)紧密相关。在正常情况下,改变眼睛的晶状体的聚焦或使眼睛适应以改变从一个对象切换到位于不同距离处的另一对象时的聚焦,将会在被称为“适应-聚散度反射(accommodation-vergencereflex)”的关系以及瞳孔扩张或收缩下自动导致使聚散到相同的距离的匹配变化。同样,在正常情况下,聚散度的变化将引发晶状体形状和瞳孔尺寸的适应的匹配变化。如本文所述,许多立体或“3-D”显示系统使用略微不同的呈现(并且因此略微不同的图像)向每只眼睛显示场景,使得人类视觉系统感知到三维透视。然而,这样的系统对于许多观看者来说是不舒服的,因为除了其他的之外,这样的系统简单地提供场景的不同呈现,而且眼睛在单个适应状态下观看所有图像信息,以及违反“适应-聚散度反射”工作。提供适应与聚散度之间的更好匹配的显示系统可以形成更逼真和更舒适的三维图像模拟。
图4示出了使用多个深度平面模拟三维图像的方法的方面。继续参考图4,在z轴上距眼睛210、220的不同距离处的对象由眼睛210、220适应,以使得那些对象对焦(infocus)。眼睛210、220呈现特定的适应状态,以使沿z轴的不同距离处的对象进入焦点。因此,可以说特定的适应状态与深度平面240中的特定一个深度平面相关联,该特定深度平面具有相关联的焦距,以使得当眼睛处于该深度平面的适应状态时,特定深度平面中的对象或对象的部分对焦。在一些实施例中,可以通过为眼睛210、220中的每一者提供图像的不同呈现来模拟三维图像,并且还可以通过提供与深度平面中每一个深度平面对应的图像的不同呈现来模拟三维图像。尽管为了清楚说明而示出为分离的,但应理解的是,例如,随着沿z轴的距离增加,眼睛210、220的视场可以重叠。另外,虽然为了便于说明而示出为平坦的,但应理解的是,深度平面的外形可以在物理空间中是弯曲的,例如以使得深度平面中的所有特征在特定的适应状态下与眼睛对焦。
对象和眼睛210或220之间的距离也可以改变来自该对象的光的发散量,如该眼睛所看到的。图5A-5C示出了距离和光线发散之间的关系。对象与眼睛210之间的距离由距离减小的顺序R1、R2和R3表示。如图5A-5C所示,随着到对象的距离减小,光线变得更发散。随着距离的增加,光线变得更加准直。换句话说,可以说由点(对象或对象的一部分)产生的光场具有球面波前曲率,其是该点离用户眼睛有多远的函数。随着对象与眼睛210之间的距离减小,曲率增加。因此,在不同的深度平面处,光线的发散度也不同,发散度随着深度平面与观看者眼睛210之间的距离的减小而增加。虽然为了清楚地说明在图5A-5C和本文的其他图中仅示出了单个眼睛210,但是应当理解,关于眼睛210的讨论可以应用于观看者的双眼210和220。
不受理论的限制,据信人类眼睛通常可以解释有限数量的深度平面以提供深度感知。因此,通过向眼睛提供与这些有限数量的深度平面中的每一个深度平面对应的图像的不同呈现,可以实现感知深度的高度可信的模拟。不同的呈现可以由观看者的眼睛单独聚焦,从而有助于基于眼睛的适应和/或基于观察位于失焦的不同深度平面上的不同图像特征来为用户提供深度提示,所述眼睛的适应被需要来对位于不同深度平面上的场景的不同图像特征聚焦。
图6示出了用于向用户输出图像信息的波导堆叠的示例。显示系统250包括可以用于采用多个波导270、280、290、300、310向眼睛/大脑提供三维感知的波导堆叠或堆叠波导组件260。在一些实施例中,显示系统250是图2的系统60,其中图6更详细地示意性地示出了该系统60的一些部分。例如,波导组件260可以是图2的显示器70的一部分。应当理解,在一些实施例中,显示系统250可以被认为是光场显示器。另外,波导组件260也可以被称为目镜。
继续参考图6,波导组件260可以还包括位于波导之间的多个特征320、330、340、350。在一些实施例中,特征320、330、340、350可以是一个或多个透镜。波导270、280、290、300、310和/或多个透镜320、330、340、350可以被配置为以各种级别的波前曲率或光线发散向眼睛发送图像信息。每个波导级别可以与特定的深度平面相关联,并且可以被配置为输出与该深度平面对应的图像信息。图像注入装置360、370、380、390、400可以用作波导的光源并且可以用于将图像信息注入到波导270、280、290、300、310中,如本文所述,其中的每个波导可以被配置为分配入射光穿过每个相应的波导,用于向眼睛210输出。光离开图像注入装置360、370、380、390、400的输出表面410、420、430、440、450并被注入到波导270、280、290、300、310的相应输入表面460、470、480、490、500。在一些实施例中,输入表面460、470、480、490、500中的每一个可以是相应波导的边缘,或者可以是相应波导的主表面的一部分(也就是,直接面向世界510或观看者眼睛210的波导表面中的一个)。在一些实施例中,可以将单个光束(例如,准直光束)注入到每个波导中,以便以与特定波导相关联的深度平面对应的特定角度(和发散量)输出朝向眼睛210定向的克隆准直光束的整个视场。在一些实施例中,图像注入装置360、370、380、390、400中的单个图像注入装置可以与波导182、184、186、188、190中的多个(例如,三个)相关联并将光注入到波导270、280、290、300、310中的多个(例如,三个)中。
在一些实施例中,图像注入装置360、370、380、390、400是分立的显示器,每个显示器产生用于分别注入到相应波导270、280、290、300、310中的图像信息。在一些其他实施例中,图像注入装置360、370、380、390、400是单个复用显示器的输出端,其可以例如经由一个或多个光导管(诸如,光纤线缆)向图像注入装置360、370、380、390、400中的每一个图像注入装置用管输送图像信息。可以理解,由图像注入装置360、370、380、390、400提供的图像信息可以包括不同波长或颜色(例如,如本文所讨论的,不同的组分颜色)的光。
在一些实施例中,注入到波导270、280、290、300、310中的光由包括光模块540的光投射器系统520提供,光模块540可包括光发射器,诸如发光二极管(LED)。来自光模块540的光可以导向光调制器530并且经由光分束器550通过光调制器530(例如,空间光调制器)修改。光调制器540可以被配置为改变注入到波导270、280、290、300、310中的光的感知强度。空间光调制器的示例包括液晶显示器(LCD),其包括硅上的液晶(LCOS)显示器。应当理解,图像注入装置360、370、380、390、400被示意性地示出,并且在一些实施例中,这些图像注入装置可以表示公共投射系统中的不同光路和位置,该公共投射系统被配置为将光输出到波导270、280、290、300、310中的相关联的波导中。
在一些实施例中,显示系统250可以是扫描光纤显示器,该扫描光纤显示器包括一个或多个扫描光纤,这些扫描光纤被配置为以各种图案(例如,光栅扫描、螺旋扫描、利萨如(Lissajous)图案等)将光投射到一个或多个波导270、280、290、300、310中并最终投射到观看者的眼睛210中。在一些实施例中,所示图像注入装置360、370、380、390、400可示意性地表示单个扫描光纤或一束扫描光纤,该单个扫描光纤或一束扫描光纤被配置为将光注入到一个或多个波导270、280、290、300、310中。在一些其他实施例中,所示图像注入装置360、370、380、390、400可以示意性地表示多个扫描光纤或多束扫描光纤,多个扫描光纤中的每一者或多束扫描光纤中的每一者被配置为将光注入波导270、280、290、300、310中相关联的一个波导中。应当理解,一个或多个光纤可以被配置为将光从光模块540传输到一个或多个波导270、280、290、300、310。应当理解,可以在一个或多个扫描光纤与一个或多个波导270、280、290、300、310之间提供一个或多个中间光学结构,以例如将从扫描光纤射出的光重定向到一个或多个波导270、280、290、300、310中。
控制器560控制堆叠波导组件260中的一个或多个的操作,包括图像注入装置360、370、380、390、400、光源540和光调制器530的操作。在一些实施例中,控制器560是本地数据处理模块140的一部分。控制器560包括编程(例如,非暂时性介质中的指令),例如,根据本文公开的任何各种方案,该编程调节图像信息到波导270、280、290、300、310的定时和提供。在一些实施例中,控制器可以是单个整体装置,或者是通过有线或无线通信通道连接的分布式系统。在一些实施例中,控制器560可以是处理模块140或150(图2)的部分。
继续参考图6,波导270、280、290、300、310可以被配置为通过全内反射(TIR)在每个相应的波导内传播光。波导270、280、290、300、310可以各自是平面的或具有其他形状(例如,曲面的),其具有顶部主表面和底部主表面以及在这些顶部主表面与底部主表面之间延伸的边缘。在所示的配置中,波导270、280、290、300、310可以各自包括耦出光学元件570、580、590、600、610,这些耦出光学元件被配置为通过将每一个相应波导内传播的光重定向到波导外而将光提取到波导外,以向眼睛210输出图像信息。所提取的光也可以被称为耦出光,并且耦出光学元件光也可以被称为光提取光学元件。所提取的光束可以在波导中传播的光照射到光提取光学元件的位置处被波导输出。耦出光学元件570、580、590、600、610可以例如包括衍射光学特征的光栅,如本文进一步讨论的。虽然为了便于描述和清晰绘图起见而将其图示为设置在波导270、280、290、300、310的底部主表面处,但是在一些实施例中,耦出光学元件570、580、590、600、610可以设置在顶部和/或底部主表面处,和/或可以直接设置在波导270、280、290、300、310的体积中,如本文进一步讨论的。在一些实施例中,耦出光学元件570、580、590、600、610可以形成在被附接到透明基板的材料层中以形成波导270、280、290、300、310。在一些其他实施例中,波导270、280、290、300、310可以是单片材料,并且耦出光学元件570、580、590、600、610可以形成在该片材料的表面上和/或该片材料的内部中。
继续参考图6,如本文所讨论的,每个波导270、280、290、300、310被配置为输出光以形成与特定深度平面对应的图像。例如,最接近眼睛的波导270可以被配置为将准直光(其被注入到这种波导270中)传送到眼睛210。准直光可以代表光学无限远焦平面。下一个上行波导280可以被配置为将穿过第一透镜350(例如,负透镜)的准直光在其可以到达眼睛210之前发送出;这样的第一透镜350可以被配置为产生轻微凸面的波前曲率,使得眼睛/大脑将来自下一个上行波导280的光解释为来自第一焦平面,该第一焦平面从光学无限远处更靠近向内朝向眼睛210。类似地,第三上行波导290使其输出光在到达眼睛210之前穿过第一透镜350和第二透镜340;第一透镜350和第二透镜340的组合光焦度(optical power)可被配置为产生另一增量的波前曲率,以使得眼睛/大脑将来自第三波导290的光解释为来自第二焦平面,该第二焦平面从光学无穷远比来自下一个上行波导280的光更靠近向内朝向人。
其他波导层300、310和透镜330、320被类似地配置,其中堆叠中的最高波导310通过它与眼睛之间的所有透镜发送其输出,用于代表最靠近人的焦平面的聚合焦度(aggregate focal power)。当在堆叠波导组件260的另一侧上观看/解释来自世界510的光时,为了补偿透镜320、330、340、350的堆叠,补偿透镜层620可以设置在堆叠的顶部处以补偿下面的透镜堆叠320、330、340、350的聚合焦度。这种配置提供了与可用波导/透镜配对一样多的感知焦平面。波导的耦出光学元件和透镜的聚焦方面可以是静态的(即,不是动态的或电活性的)。在一些可选实施例中,两者之一或两者都可以是使用电活性特征而动态的。
在一些实施例中,波导270、280、290、300、310中的两个或更多个可具有相同的相关联的深度平面。例如,多个波导270、280、290、300、310可以被配置为输出设置到相同深度平面的图像,或者波导270、280、290、300、310的多个子集可以被配置为输出设置到相同的多个深度平面的图像,每个深度平面有一组。这可以为形成平铺图像提供优势,以在那些深度平面处提供扩展的视场。
继续参考图6,耦出光学元件570、580、590、600、610可以被配置为将光重定向到它们相应的波导之外并且针对与该波导相关联的特定深度平面输出具有适当的发散量或准直量的该光。结果,具有不同相关联深度平面的波导可具有不同的耦出光学元件570、580、590、600、610的配置,这些耦出光学元件依赖于相关联的深度平面而输出具有不同发散量的光。在一些实施例中,光提取光学元件570、580、590、600、610可以是体积或表面特征,其可以被配置为以特定角度输出光。例如,光提取光学元件570、580、590、600、610可以是体积全息图、表面全息图和/或衍射光栅。在一些实施例中,特征320、330、340、350可以不是透镜;相反,它们可以简单地是间隔物(例如,用于形成空气间隙的包覆层和/或结构)。
在一些实施例中,耦出光学元件570、580、590、600、610是形成衍射图案的衍射特征,或者说“衍射光学元件”(在此也称为“DOE”)。优选地,DOE具有足够低的衍射效率,以使得光束的仅一部分光通过DOE的每一个交点而偏转向眼睛210,而其余部分经由TIR而继续移动通过波导。携带图像信息的光因此被分成多个相关的出射光束,这些出射光束在多个位置处离开波导,并且结果对于在波导内反弹的该特定准直光束是朝向眼睛210的相当均匀图案的出射发射。
在一些实施例中,一个或多个DOE可以在它们活跃地衍射的“开”状态与它们不显著衍射的“关”状态之间可切换。例如,可切换的DOE可以包括聚合物分散液晶层,其中微滴在主体介质中包含衍射图案,并且微滴的折射率可以被切换为基本上匹配主体材料的折射率(在这种情况下,图案不会明显地衍射入射光),或者微滴可以被切换为与主体介质的折射率不匹配的折射率(在这种情况下,该图案活跃地衍射入射光)。
在一些实施例中,可提供相机组件630(例如,数码相机,包括可见光和红外光相机)以捕获眼睛210和/或眼睛210周围的组织的图像,从而例如检测用户输入和/或监测用户的生理状态。如本文所使用的,相机可以是任何图像捕获装置。在一些实施例中,相机组件630可以包括图像捕获装置和光源,以将光(例如,红外光)投射到眼睛,然后光可以由眼睛反射并由图像捕获装置检测到。在一些实施例中,相机组件630可以附接到框架80(图2)并且可以与处理模块140和/或150电连通,处理模块140和/或150可以处理来自相机组件630的图像信息。在一些实施例中,可以针对每只眼睛使用一个相机组件630以分别监测每只眼睛。
现在参考图7,其中示出了由波导输出的出射光束的示例。示出了一个波导,但是应该理解,波导组件260(图6)中的其他波导可以类似地起作用,其中波导组件260包括多个波导。光640在波导270的输入表面460处被注入到波导270中,并且通过TIR在波导270内传播。在光640照射(impinge)在DOE 570上的点处,一部分光如出射光束650离开波导。出射光束650被示出为基本上平行,但是如本文所讨论的,依赖于与波导270相关联的深度平面,出射光束650也可以以一角度(例如,形成发散的出射光束)被重定向以传播到眼睛210。应该理解,基本上平行的出射光束可以指示具有耦出光学元件的波导,所述耦出光学元件将光耦出以形成看起来被设置在距眼睛210较大距离(例如,光学无穷远)处的深度平面上的图像。其他波导或者其他耦出光学元件组可以输出更加发散的出射光束图案,这将需要眼睛210适应更近距离以将其聚焦在视网膜上并且将被大脑解释为来自比光学无穷远更接近眼睛210的距离的光。
在一些实施例中,可以通过叠加每个分量颜色(例如,三种或更多种分量颜色)的图像来在每个深度平面处形成全色图像。图8示出了堆叠波导组件的示例,其中每个深度平面包括使用多种不同分量颜色形成的图像。所示实施例示出了深度平面240a-240f,但也可以考虑更多或更少的深度。每个深度平面可以具有与其相关联的三个或更多个分量彩色图像,包括:第一种颜色的第一图像G;第二种颜色的第二图像R;以及第三种颜色的第三图像B。对于字母G、R和B之后的光焦度(dpt),在图中用不同的数字表示不同的深度平面。作为示例,这些字母的每一个后面的数字表示光焦度(1/m)、或者深度平面与观看者的反距离,并且图中的每个框表示单独的分量彩色图像。在一些实施例中,为了解决眼睛对不同波长的光的聚焦的差异,不同分量颜色的深度平面的精确放置可以改变。例如,给定深度平面的不同分量颜色图像可以放置在与用户的不同距离对应的深度平面上。这样的布置可以增加视觉敏度和用户舒适度和/或可以减少色差。
在一些实施例中,每种分量颜色的光可以由单个专用波导输出,因此,每个深度平面可以具有与其相关联的多个波导。在这样的实施例中,图中包括字母G、R或B的每个框可以被理解为表示单独的波导,并且每个深度平面可以提供三个波导,其中每个深度平面提供三个分量颜色图像。虽然为了便于描述,在该图中示出了与每个深度平面相关联的波导彼此相邻,但是应当理解,在物理装置中,波导可以全部布置成每层具有一个波导的堆叠。在一些其他实施例中,多个分量颜色可以由相同的波导输出,使得例如每个深度平面可以仅提供单个波导。
继续参考图8,在一些实施例中,G是绿色、R是红色、B是蓝色。在一些其他实施例中,除了红色、绿色或蓝色之外,可以使用与其他波长的光相关联的其他颜色(包括品红色和青色),或者可以替换红色、绿色或蓝色中的一种或多种。
应当理解,贯穿本公开内容对给定颜色的光的参考将被理解为包括在观看者感知为具有该给定颜色的光的波长范围内的一个或多个波长的光。例如,红光可以包括在约620-780nm范围内的一个或多个波长的光,绿光可以包括在约492-577nm范围内的一个或多个波长的光,以及蓝光可以包括在约435-493nm的范围内的一个或多个波长的光。
在一些实施例中,光源540(图6)可以被配置为发射观看者的视觉感知范围之外的一个或多个波长(例如,红外和/或紫外波长)的光。此外,显示器250的波导的耦入、耦出和其他光重定向结构可以被配置为将该光从显示器引导出并朝着用户的眼睛210发射,例如用于成像和/或用户刺激应用。
现在参考图9A,在一些实施例中,可能需要将照射到波导上的光重定向以将该光耦入到波导中。可以使用耦入光学元件将光重定向并且将光耦入到其相应的波导中。图9A示出了多个堆叠波导或堆叠波导组660的示例的横截面侧视图,每个堆叠波导包括耦入光学元件。每个波导可以被配置为输出一个或多个不同波长的光、或者一个或多个不同波长范围的光。应当理解,堆叠660可以对应于堆叠260(图6),并且所出的堆叠的波导660可以对应于多个波导270、280、290、300、310的一部分,除了来自图像注入装置360、370、380、390、400中的一个或多个光从需要光被重定向以进行耦入的位置注入到波导中。
所示的堆叠波导组660包括波导670、680和690。每个波导包括相关联的耦入光学元件(其也可以被称为波导上的光输入区域),例如,设置在波导670的主表面(例如,上主表面)上的耦入光学元件700、设置在波导680的主表面(例如,上主表面)上的耦入光学元件710、以及设置在波导690的主表面(例如,上主表面)上的耦入光学元件720。在一些实施例中,耦入光学元件700、710、720中的一个或多个可以设置在相应的波导670、680、690的底部主表面上(特别是在一个或多个耦入光学元件是反射的、偏转光学元件的情况下)。如所示出的,耦入光学元件700、710、720可以设置在它们相应的波导670、680、690的上主表面上(或下一个下波导的顶部),特别是在那些耦入光学元件是透射的、偏转的光学元件情况下。在一些实施例中,耦入光学元件700、710、720可以设置在相应波导670、680、690的主体中。在一些实施例中,如本文所讨论的,耦入光学元件700、710、720是波长选择性的,使得它们选择性地重定向一个或多个波长的光,同时透射其他波长的光。虽然在它们相应的波导670、680、690的一侧或角上示出,但是应当理解,在一些实施例中,耦入光学元件700、710、720可以设置在它们相应的波导670、680、690的其他区域中。
如所示出的,耦入光学元件700、710、720可以彼此横向偏移。在一些实施例中,每个耦入光学元件可以偏移,使得它接收光而光不通过另一耦入光学元件。例如,每个耦入光学元件700、710、720可以被配置为从如图6所示的不同的图像注入装置360、370、380、390和400接收光并且可以与其他耦入光学元件700、710、720分离(例如,横向间隔开),使得它基本上不接收来自其他耦入光学元件700、710、720的光。
每个波导还包括相关联的光分布(distribute)元件,例如,设置在波导670的主表面(例如,顶部主表面)上的光分布元件730、设置在波导680的主表面(例如,顶部主表面)上的光分布元件740以及设置在波导690的主表面(例如,顶部主表面)上的光分布元件750。在一些其他实施例中,光分布元件730、740、750可以分别设置在相关联的波导670、680、690的底部主表面上。在一些其他实施例中,光分布元件730、740、750可以分别设置在相关联的波导670、680、690的顶部和底部主表面上;或者光分布元件730、740、750可以分别设置在不同的相关联的波导670、680、690的顶部和底部主表面中的不同的主表面上。
波导670、680、690可以由例如气体、液体和/或固体材料层间隔开并分离。例如,如所示出的,层760a可以分离波导670和680;以及层760b可以分离波导680和690。在一些实施例中,层760a和760b由低折射率材料(也就是,具有比形成波导670、680、690中的紧邻的波导的材料的折射率低的材料)形成。优选地,形成层760a、760b的材料的折射率比形成波导670、680、690的材料的折射率小0.05或更多、或0.10或更少。有利地,低折射率层760a、760b可以用作促进通过波导670、680、690的光的全内反射(TIR)(例如,每个波导的顶部和底部主表面之间的TIR)的包覆(clad)层。在一些实施例中,层760a、760b由空气形成。尽管未示出,但应理解,所示波导组660的顶部和底部可包括紧邻的包覆层。
优选地,为了便于制造和其他的考虑,形成波导670、680、690的材料类似或相同,以及形成层760a、760b的材料类似或相同。在一些实施例中,形成波导670、680、690的材料在一个或多个波导之间可以是不同的,以及和/或者形成层760a、760b的材料可以是不同的,同时仍然保持上述各种折射率关系。
继续参考图9A,光线770、780、790入射到波导组660上。应当理解,光线770、780、790可以通过一个或多个图像注入装置360、370、380、390、400(图6)注入到波导670、680、690中。
在一些实施例中,光线770、780、790具有不同的属性,例如,不同的波长或不同的波长范围,其可以对应于不同的颜色。耦入光学元件700、122、720各自使入射光偏转,使得光通过TIR传播通过波导670、680、690中的相应一个波导。在一些实施例中,耦入光学元件700、710、720每个选择性地偏转一个或多个特定波长的光,同时将其他波长传输到下面的波导和相关联的耦入光学元件。
例如,耦入光学元件700可以被配置为偏转具有第一波长或波长范围的光线770,同时分别传输具有不同的第二和第三波长或波长范围的光线780和790。传输的光线780照射在耦入光学元件710上并被耦入光学元件710偏转,该耦入光学元件710被配置为偏转具有第二波长或波长范围的光。光线790被耦入光学元件720偏转,该耦入光学元件720被配置为选择性地偏转具有第三波长或波长范围的光。
继续参考图9A,偏转的光线770、780、790被偏转,使得它们传播通过相应的波导670、680、690;也就是,每个波导的耦入光学元件700、710、720将光偏转到相应的波导670、680、690中,以将光耦入到相应的波导中。光线770、780、790以一定角度偏转,该角度使光经由TIR传播通过相应的波导670、680、690。光线770、780、790经由TIR传播通过相应的波导670、680、690,直到照射到波导的相应的光分布元件730、740、750上。
现在参考图9B,示出了图9A的多个堆叠波导的示例的透视图。如上所述,耦入光线770、780、790分别被耦入光学元件700、710、720偏转,然后分别在波导670、680、690内通过TIR传播。然后,光线770、780、790分别照射到光分布元件730、740、750上。光分布元件730、740、750使光线770、780、790偏转,使得它们分别朝向耦出光学元件800、810、820传播。
在一些实施例中,光分布元件730、740、750是正交瞳孔扩展器(OPE)。在一些实施例中,OPE将光偏转或分布至耦出光学元件800、810、820,并且在一些实施例中,OPE还在该光传播到耦出光学元件时增加该光的光束或光点尺寸。在一些实施例中,可以省略光分布元件730、740、750,并且可以将耦入光学元件700、710、720配置为将光直接偏转至耦出光学元件800、810、820。例如,参考图9A,光分布元件730、740、750可以分别被耦出光学元件800、810、820代替。在一些实施例中,耦出光学元件800、810、820是出射光瞳(EP)或出射光瞳扩展器(EPE),其引导观看者眼睛210中的光(图7)。应当理解,OPE可以被配置为在至少一个轴上增加眼箱的尺寸,并且EPE可以在例如与OPE的轴正交的轴上增加眼箱。例如,每个OPE可以被配置为将照射到OPE上的光的一部分重定向到相同波导的EPE,同时允许光的剩余部分继续沿波导传播。在再次照射到OPE上时,剩余光的另一部分被重定向到EPE,并且该剩余光的剩余部分继续沿波导进一步传播等等。类似地,在照射到EPE上时,照射的光的一部分被引导出波导朝向用户,并且该光的剩余部分继续传播通过波导直到它再次照射到EP上,此时照射的光的另一部分被引导出波导,等等。因此,每当光的一部分被OPE或EPE重定向时,可以“复制”单束光的耦入光,从而形成克隆光束的场,如图6所示。在一些实施例中,OPE和/或EPE可以被配置为修改光束的尺寸。
因此,参考图9A和9B,在一些实施例中,波导组660包括波导670、680、690;耦入光学元件700、710、720;光分布元件(例如,OPE)730、740、750;以及用于每种分量颜色的耦出光学元件(例如,EP)800、810、820。波导670、680、690可以堆叠,其中每个之间存在的空气隙/包覆层。耦入光学元件700、710、720将入射光(采用接收不同波长的光的不同的耦入光学元件)重定向或偏转到其波导中。然后光以一定角度传播,这将导致相应波导670、680、690内的TIR。在所示的示例中,光线770(例如,蓝光)被第一耦入光学元件700偏转,然后继续跳到波导,以前方描述的方式与光分布元件(例如,OPE)730相互作用,然后与耦出光学元件(例如,EPs)800相互作用。光线780和790(例如,分别为绿光和红光)将穿过波导670,其中光线780照射到耦入光学元件710上并被耦入光学元件710偏转。光线780然后经由TIR跳到波导680,继续进行到达其的光分布元件(例如,OPE)740然后到达耦出光学元件(例如,EP)810。最后,光线790(例如,红光)穿过波导690以照射到波导690的光耦入光学元件720上。光耦入光学元件720偏转光线790,使得光线通过TIR传播到光分布元件(例如,OPE)750,然后通过TIR传播到耦出光学元件(例如,EP)820。然后,耦出光学元件820最终将光线790耦出到观看者,观看者还接收来自其他波导670、680的耦出光。
图9C示出了图9A和9B的多个堆叠波导的示例的俯视平面图。如所示出的,波导670、680、690以及与每个波导相关联的光分布元件730、740、750和相关联的耦出光学元件800、810、820可以垂直对准。然而,如本文所讨论的,耦入光学元件700、710、720不是垂直对准的;相反,耦入光学元件优选地是非重叠的(例如,如在俯视图中所见,横向间隔开)。如本文进一步讨论的,该非重叠空间布置有助于将来自不同源的光一对一地注入到不同波导中,从而允许特定光源唯一地耦接到特定波导。在一些实施例中,包括非重叠的空间分离的耦入光学元件的布置可以被称为移位的瞳孔系统,并且这些布置内的耦入光学元件可以对应于子瞳孔。
眼睛成像和环境成像
如上所述,头戴式显示器可以用于向用户提供图像内容,该图像内容与佩戴者前方的世界的视图集成、结合和/或叠加在佩戴者前方的世界的视图上。这样的头戴式显示系统可以被配置为将光投射到用户的眼睛中以形成增强现实图像内容,以及将来自用户前方的环境的光传输到用户。头戴式显示系统可以包括用于对环境和/或用户的眼睛成像的一个或多个相机。面向外的相机可用于直接对环境成像,例如,以确定相对于环境中的对象将增强现实图像内容放置在何处。例如,对环境进行成像可以提供桌子的位置,使得头戴式显示器可以渲染站立在桌子附近而不是站在桌子上或站在桌子中的人的图像。面向内的相机可用于直接对眼睛成形例如用于眼睛跟踪。本文公开的是头戴式显示系统和/或成像系统的示例,其可以被配置为也对眼睛和/或环境成像。在一些设计中,系统不需要面向内和/或面向外的相机来分别直接对眼睛和/或环境成像。这样的系统可以采用一个或多个相机,该一个或多个相机被配置为经由目镜接收来自眼睛/环境的光,诸如与一个或多个相机光学通信的目镜中的一个或多个波导。通过由一个或多个波导收集的光,一个或多个相机可以生成眼睛的图像或在用户前方的环境的图像。使用波导收集用于对眼睛和/或环境成像的光可以潜在地减小头戴式显示器的形状因子,从而使头戴式显示器可能更紧凑和/或在美学上是期望的。
图10示出了被配置为对眼睛成像的示例成像系统900,其与可以在头戴式显示器中使用的目镜950集成。可以设置在用户眼睛210前方的目镜950可以用于将图像内容注入到眼睛中以及对眼睛进行成像。图10示出了位于一只眼睛210的前方的一个目镜950。诸如图2所示的各种头戴式显示系统可以包括目镜950的对和设置在相应的左眼和右眼210的前方的相关联的组件。在图10中示出单个波导940,但是波导940可以包括一个、两个、三个、四个、六个、七个、八个或更多个波导(例如,一个或多个波导堆叠)。
成像系统900可以包括照射眼睛以促进图像捕获的光源或照射源960、包括被配置为在其中传播光的波导940的目镜950和/或例如用于图像捕获的相机的成像装置920。还示出了用于产生可以经由目镜950注入到眼睛中的图像的图像投影仪930。目镜950可以包括一个或多个波导940,该一个或多个波导940被配置为将来自照射源960和/或图像投影仪930的光传输到眼睛,以及将来自眼睛的光传输到相机920。目镜950可以进一步包括一个或多个耦合光学元件944,其用于将光从波导940耦出并耦合到眼睛用于照射眼睛和用于图像注入,和/或从眼睛耦出光并将该光耦入到波导中用于图像捕获。目镜950可以另外包括用于将来自照射源960和/或图像投影仪930的光耦合到波导940中的一个或多个耦入光学元件942以及一个或多个用于将来自波导的光耦出到相机920的一个或多个耦出光学元件952。
目镜950可以设置在可穿戴在头部上的框架上。目镜950可以被设置在眼睛210的前方。目镜950可以具有更靠近佩戴者的鼻子的内侧或鼻侧以及更靠近太阳穴并且远离佩戴者的鼻子的相对外侧或颞侧。在图10中,耦合光学元件944相对于耦入光学元件942和耦出光学元件952(其在耦合光学元件944的外侧或颞侧)在内侧或鼻侧。照射源960相对于图像投影仪930也更在内侧或鼻侧(或者图像投影仪比照射源930位于外侧或颞侧)。然而,相对位置可以不同。例如,在一些设计中,照射源960可以比图像投影仪930更在外侧或颞侧。
波导940可以包括具有两个主表面(前表面和后表面)的片或层,两个主表面具有最大的表面积且彼此相对设置。当用户佩戴头戴式显示器时,向前表面可以远离用户的眼睛210(更靠近佩戴者前方的环境),向后表面可以更靠近用户的眼睛(并且远离佩戴者前方的环境)。波导940可以包括具有大于1.0的折射率的透明材料(例如,玻璃、塑料),使得可以通过主表面之间的全内反射在其中引导光。对于本文描述的一个或多个实施例,具有相同编号的元件可以具有相同的功能。
用于将光从波导940耦合到眼睛210和/或从波导耦合到眼睛的耦合光学元件944可以设置在波导940之上或之中。如图10所示,耦合光学元件944可以设置在用户的眼睛210和波导940之间的光学路径中,使得经由耦合光学元件944从波导940耦合的光可以入射在用户的眼睛210上(例如,以照射眼睛和/或用于图像注入)。耦合光学元件944可以包括多个转向(turning)特征,该转向特征被配置为将在波导内被引导的光从波导转向出,或者以一定角度将入射到耦合光学元件944上的光转向到波导中以通过全内反射在其中被引导。耦合光学元件944和转向特征可以与波导940物理接合。例如,耦合光学元件944可以包括在波导940之中或之上被图案化(例如,蚀刻)的全息或衍射光学元件(例如,表面浮雕光栅)。耦合光学元件944可以包括设置在波导940上的层,或者可以形成在波导940中。例如,可以通过改变包括波导或设置在其上的层的材料的折射率来形成体全息或其他衍射光学元件。因此,耦合光学元件944可以设置在波导940的体积中或设置为在其上的层。
取决于设计,耦合光学元件944可以是透射的或反射的,并且可以透射或反射的方式操作。例如,耦合光学元件944可以包括分别以透射或反射方式操作的透射或反射衍射光学元件(例如,光栅)或全息光学元件,从而例如,使通过其透射或从其反射的光转向。耦合光学元件944可以包括偏振光学元件,例如偏振选择转向元件(例如,偏振器)。偏振选择转向元件可以包括一个或多个偏振光栅、衍射光学元件和/或全息光学元件,并且可以包括液晶结构,例如液晶偏振光栅。耦合光学元件944可以被配置为以小于(例如,更法向于)临界角的角度将通过全内反射(TIR)在波导940内引导的来自图像投影仪930和/或光源960的光引导到用户的眼睛210,以便从波导中射出到眼睛。附加地或可选地,耦合光学元件944可以被配置为以大于(例如,较少法向于)临界角的角度将来自眼睛210的光耦合到波导940中,以便通过全内反射在其中被引导至相机920。
如图10所示,用于将来自照射源960和/或图像投影仪930的光耦合到波导940中的耦入光学元件942可以设置在波导940之上或之中。耦入光学元件942可以设置在光源960和波导940之间的光路上,使得从光源960经由耦入光学元件942耦合的光在波导940内被引导。耦入光学元件942可以包括例如多个转向特征,该多个转向特征被配置为将入射在其上的光以角度转到波导中,以通过全内反射在波导中被引导。耦入光学元件942可包括液晶结构,例如液晶偏振光栅。附加地或可选地,耦入光学元件942可包括闪耀光栅。耦入光学元件942可以包括设置在波导940上的层,或者可以形成在波导940之上或之中(例如,被图案化),或者可以以其他方式被制造在其中。例如,可以通过对波导的表面或其上的层进行图案化(例如,蚀刻)来制造表面全息或衍射光学元件(例如,表面浮雕光栅)。体积全息或衍射光学元件也可以通过改变包括波导或其上的层的材料的折射率来形成。因此,可以将耦入光学元件942设置在波导940的体积中或设置在其上的层中。取决于设计,耦入光学元件942可以是透射的或反射的,并且可以以透射或反射的方式工作。例如,耦入光学元件942可以包括分别以透射或反射的方式工作的透射或反射的衍射光学元件(例如,光栅)或全息光学元件,例如,从而使通过其透射或从其反射的光转向。
耦入光学元件942可以包括反射光学元件(例如,镜子)。例如,耦入光学元件942可以包括离轴反射器。附加地或可选地,耦入光学元件942和/或耦合光学元件944可包括偏振光学元件,例如偏振选择转向元件(例如,偏振器)。偏振选择转向元件可以包括一个或多个偏振光栅、衍射光学元件和/或全息光学元件,并且可以包括液晶结构,例如液晶偏振光栅。例如,耦入光学元件942和/或耦合光学元件944中的一个或两个可以包括液晶偏振光栅(LCPG)。LCPG可以潜在地在宽波长下提供高效衍射。因此,LCPG可用于耦入光学元件942和/或耦合光学元件944。LCPG可以是偏振相关的。LCPG或其他类型的液晶光栅、衍射光学元件或光学元件可以包括液晶分子的图案或布置,其被配置为提供一种或多种功能,例如将光转到波导中或从波导转出。因此,耦入光学元件942和/或耦合光学元件944可包括偏振光栅。附加地或可选地,耦入光学元件942和/或耦合光学元件944可以包括液晶,并由此在一些实现方式中,一个或两者可以是液晶光栅或液晶衍射光学元件。附加地或可选地,耦入光学元件942和/或耦合光学元件944中的一个或两个可以包括闪耀光栅。在一些设计中,耦入光学元件942包括液晶反射器,例如胆甾型液晶反射透镜(例如,反射液晶衍射透镜、布拉格反射结构、反射液晶衍射光栅等)。在以下公开的申请中讨论了液晶光栅、液晶偏振光栅和其他液晶光学元件的一些非限制性示例,在此通过引用将其全部内容结合于此以用于所有目的:2017年11月16日提交的标题为“MULTILAYER LIQUID CRYSTAL DIFFRACTIVEGRATINGS FOR REDIRECTING LIGHT OF WIDE INCIDENT ANGLE RANGES(用于重定向宽入射角范围的光的多层液晶衍射光栅)”的美国公开No.2018/0143438;2017年11月16日提交的标题为“SPATIALLY VARIABLE LIQUID CRYSTAL DIRRRACTION GRATINGS(空间上可变的液晶衍射光栅)”的美国公开No.2018/0143485;2017年11月16日提交的标题为“WAVEGUIDELIGHT MULTIPLEXER USING CROSSED GRATINGS(使用交叉光栅的波导光复用器)”的美国公开No.2018/0143509;2018年2月22日提交的标题为“DISPLAY SYSTEM WITH VARIABLEPOWER REFLECTOR(具有可变焦度反射器的显示系统)”的美国公开No.2018/0239147;2018年2月22日提交的标题为“VARIABLE-FOCUS VIRTUAL IMAGE DEVICES BASED ONPOLARIZATION CONVERSION(基于偏振变换的可变聚焦的虚拟图像装置)”的美国公开No.2018/0239177;以及2017年12月7日提交的标题为“DIFFRACTIVE DEVICES BASED ONCHOLESTERIC LIQUID CRYSTAL(基于胆甾型液晶的衍射装置)”的美国公开No.2018/0164627。然而,耦入光学元件942和/或耦合光学元件944的设计不限于这些,并且可以包括其他类型的光学元件、衍射光学元件、液晶光学元件、液晶光栅和液晶偏振光栅。有关例如反射器的胆甾型液晶结构的示例的更多信息,也可以在下面标题为“胆甾型液晶镜”的部分中找到。如上所述,可以使用其他液晶光学元件以及其他非液晶光学元件。因此,可以使用许多类型的耦合光学元件(例如,耦入光学元件942和/或耦合光学元件944)、衍射光学元件、光栅、偏振光栅等,通常使用本文所述的那些以及其他类型光栅、衍射光学元件、液晶元件和光学元件。在各种实现方式中,耦入光学元件942可以被配置为以大于临界角的角度将来自图像投影仪930和/或光源960的光耦合到波导中,以便通过全内反射在波导940内被引导到眼睛到用户的眼睛210。
波导940可以包括一个或多个波导。在一些实现方式中,一个或多个波导940包括波导的堆叠。例如,在一些设计中,波导堆叠中的不同波导被配置为输出具有不同波前发散度的光,就像从距用户的眼睛不同的距离投射一样。例如,第一波导或波导组可以被配置为输出被准直的或具有第一发散度的光,就像从第一深度投射一样,第二波导或波导组可以被配置为输出发散的(未被准直的)或处于第二发散度(大于第一发散度)的光,就像从比第一深度近的第二深度投射一样。在一些设计中,不同的波导可以被配置为输出具有不同的相关颜色的光。例如,第一波导可以被配置为输出红光,第二波导可以被配置为输出绿光,第三波导可以被配置为输出蓝光。第四波导可以被配置为输出和/或输入红外光。
例如如图10所示的用于将来自波导940的光耦合到相机920的耦出光学元件952可以包括例如多个转向特征,该转向特征被配置为以角度转向入射在其上的光,使得光未在波导内被引导并使光从波导转出至相机。耦出光学元件952可以设置在波导940的内部,或者可以在波导940的表面(例如,主表面)之中或之上被图案化(例如,蚀刻)。例如,表面全息或衍射光学元件(例如,表面浮雕光栅)可以通过图案化(例如,蚀刻)波导或其上的层的表面来制造。体积全息或衍射光学元件也可以通过改变包括波导或设置于其上的层的材料的折射率来形成。取决于设计,耦出光学元件952可以是透射的或反射的,并且可以以透射或反射的方式操作。例如,耦出光学元件952可以包括分别以透射或反射的方式工作的例如透射或反射衍射光学元件(例如,光栅)或全息光学元件,例如,从而使穿过其透射或从其反射的光转向。
耦出光学元件942可以包括反射光学元件(例如,镜子)。例如,耦出光学元件952可以包括离轴反射器。在一些设计中,耦出光学元件952可包括偏振光学元件,例如偏振选择转向元件(例如,偏振器)。因此,偏振选择转向元件可以包括一个或多个偏振光栅、衍射光学元件和/或全息光学元件,并且可以包括诸如液晶偏振光栅的液晶结构。在一些实现方式中,例如,耦出光学元件952可以包括液晶偏振光栅(LCPG)。LCPG可以潜在地在宽波长下提供高效衍射。同样地,LCPG可用于耦出光学元件952。LCPG可以是偏振相关的。LCPG或其他类型的液晶光栅可以包括液晶分子的图案或布置,其被配置为提供一种或多种功能,例如将光转到波导中或从波导转出。因此,耦出光学元件952可以包括偏振光栅。附加地或可选地,耦出光学元件952可以包括液晶,并由此在一些实现方式中,可以是液晶光栅或例如液晶衍射光学元件的其他液晶光学元件。附加地或可选地,耦出光学元件952可包括闪耀光栅。在一些设计中,耦出光学元件952包括液晶反射器,例如胆甾型液晶反射透镜(例如,反射液晶衍射透镜、布拉格反射结构、反射液晶衍射光栅等)。在以下公开的申请中讨论了液晶光栅、液晶偏振光栅和其他液晶光学元件的一些非限制性示例,在此通过引用将其全部内容结合于此以用于所有目的:2017年11月16日提交的标题为“MULTILAYER LIQUID CRYSTALDIFFRACTIVE GRATINGS FOR REDIRECTING LIGHT OF WIDE INCIDENT ANGLE RANGES(用于重定向宽入射角范围的光的多层液晶衍射光栅)”的美国公开No.2018/0143438;2017年11月16日提交的标题为“SPATIALLY VARIABLE LIQUID CRYSTAL DIRRRACTION GRATINGS(空间上可变的液晶衍射光栅)”的美国公开No.2018/0143485;2017年11月16日提交的标题为“WAVEGUIDE LIGHT MULTIPLEXER USING CROSSED GRATINGS(使用交叉光栅的波导光复用器)”的美国公开No.2018/0143509;2018年2月22日提交的标题为“DISPLAY SYSTEM WITHVARIABLE POWER REFLECTOR(具有可变焦度反射器的显示系统)”的美国公开No.2018/0239147;2018年2月22日提交的标题为“VARIABLE-FOCUS VIRTUAL IMAGE DEVICES BASEDON POLARIZATION CONVERSION(基于偏振变换的可变聚焦的虚拟图像装置)”的美国公开No.2018/0239177;以及2017年12月7日提交的标题为“DIFFRACTIVE DEVICES BASED ONCHOLESTERIC LIQUID CRYSTAL(基于胆甾型液晶的衍射装置)”的美国公开No.2018/0164627。然而,耦出光学元件952的设计不限于这些,并且可以包括其他类型的光学元件、衍射光学元件、液晶光学元件、液晶光栅和液晶偏振光栅。有关例如反射器的胆甾型液晶结构的示例的更多信息,也可以在下面标题为“胆甾型液晶镜”的部分中找到。如上所述,可以使用其他液晶光学元件以及其他非液晶光学元件。因此,可以使用许多类型的耦合光学元件(例如,耦出光学元件952)、衍射光学元件、光栅、偏振光栅等,通常使用本文所述的那些以及其他类型的光栅、衍射光学元件、液晶元件或光学元件。如上所述,耦出光学元件952可以被配置为以小于临界角的角度重定向在波导940内引导的光,以便不通过全内反射被在波导内引导而是被射出到相机920。
在各种设计中,耦合光学元件944在可见光谱中可以是透明的,使得用户可以透过耦合光学元件944和目镜950看到用户前方的环境。例如,如果将耦入光学元件942用于接收来自图像投影仪930的光和/或如果将照射源960配置为输出可见光以使用可见光照射眼睛210,则耦入光学元件942还可使可见光谱中的光转向。在一些实施例中,例如,如果照射源960被配置为输出红外光以用红外光照射眼睛210,则耦入光学元件942被配置为使红外光转向。在诸如图10所示的一些设计中,耦入光学元件942可以比耦出光学元件952更位于内侧或鼻侧。然而,在其他设计中,耦入光学元件942可以比耦出光学元件952更位于外侧或颞侧。在诸如图10中所示的某些实现方式中,尽管非相邻定位是可能的,但是耦出光学元件952可以与内耦入光学元件942相邻。
如图10所示,照射源960可以设置在目镜950的与眼睛210相同的一侧(例如,向后或近侧)。(近端可以指最靠近眼睛210的一侧。)可选地,照射源960可以设置在与眼睛210相反的一侧(例如,向前侧或远侧)。照射源960可以被配置为经由耦入光学元件942将光引导到波导940的主表面中的至少一个中。光源960可以被配置为发射不可见光(例如,红外)。光源960可以包括一个或多个LED。LED可以包括红外LED。光源960可以被配置为发射相干光。在一些设计中,光源960包括激光器(例如,红外激光器)。在一些设计中,光源960发射脉冲光。例如,相机920可以被配置为周期性地捕获图像。因此,可以使照射源960脉冲化以使其与相机获取图像的时间段一致。当相机未获得图像时,可以减小从照射源960输出的强度。通过将照射的总能量集中在短时间内,可以获得增加的信噪比,而不会使眼睛210暴露于不安全的强度水平。在一些情况下,例如,相机920每30毫秒捕获一个图像,并且相机的曝光时间为几毫秒。照射源960可以被配置为输出具有相似的周期和持续时间的脉冲以匹配相机920的脉冲。
在一些实现方式中,具有不同波长的不同光源被交替地脉冲化,以在不同时间提供不同波长的照射,如下所述。
耦入光学元件942可以例如与照射源960和/或图像投影仪930直接光学通信,以便在其中引导来自所述图像投影仪930和/或光源960的光。例如,由光源960发射的光可以在与耦合光学元件944和/或耦合光学元件952光学相互作用之前入射在耦入光学元件942上。
如图11A-11E所示,从图像投影仪930投射的光902可以在视网膜上形成图像。图像投影仪930可以包括光源、调制器和/或投射光学器件。用于图像投影仪930的光源可以包括一个或多个LED、激光器或其他光源,并且可以包括一个或多个可见光源。调制器可以包括空间光调制器,例如液晶空间光调制器。这样的空间光调制器可以被配置为例如调制不同空间位置处的光的强度。投射光学器件可以包括一个或多个透镜。可以采用能够投射和/或形成图像的其他类型的图像投影仪930。例如,图像投影仪930可以包括扫描光纤。
图像投影仪930和耦入光学元件942可以彼此直接光学通信。图像投影仪930可以例如与来自图像投影仪930的光被引导到其中的耦入光学元件942对准。在一些情况下,图像投影仪930邻近于对应的耦入光学元件942和/或波导940设置。图像投影仪930还可以设置在包括耦入光学元件942、耦合光学元件944和眼睛210的光路中。
图像投影仪930可以是与照射源960相比单独的元件,如图10以及图11A-11E所示。然而,在一些情况下,图像投影仪930可以用作照射源。例如,除了将图像注入眼睛210之外,图像投影仪930可以用于将可见光和/或红外光引导到眼睛中以照射眼睛用于图像捕获。然而,可选地,一个或多个单独的光源960可以用于照射眼睛210用于图像捕获。
照射源960发射的光可以包括特定波长范围的光,例如不可见光。照射源960可以被配置为将不可见的(例如,红外)光投射到眼睛210上/中,以对眼睛210的一个或多个部分(例如,角膜、视网膜)成像。在某些示例实现方式中,光源960可以被配置为发射约850nm至940nm范围内的光。光源960可以被配置为发射在至少约20nm的波长范围之上延伸的光。其他范围也是可能的。发射的波长范围可以是5nm、10nm、15nm、50nm、75nm、100nm、150nm、200nm或这些值中的任何值之间的任何范围。光源960可以被配置为发射跨诸如红外光谱内的任何范围的宽带波长的光。
可以包括相机的成像装置920可以包括检测器阵列和可能的成像光学器件。检测器阵列可包括例如CCD或CMOS检测器阵列,并且成像光学器件可包括一个或多个透镜。一个或多个透镜可具有正光焦度和相关联的焦距。在某些设计中,相机920聚焦在无限远处。例如,光学器件可以具有焦距f,并且检测器阵列可以被设置在与焦距对应的远离光学器件的距离处,使得大距离处的对象被成像到检测器阵列上。类似地,被准直的来自眼睛或环境中的对象的光将聚焦在检测器阵列上以在其上形成眼睛或对象的图像。
成像装置920可被设置在波导940的与照射源960和/或眼睛210相反的一侧。在一些设计中,成像装置920可被设置在波导940的与照射源960和/或眼睛210相同的一侧。如图10所示,成像装置920可设置在目镜950的外边缘或颞边缘附近,尽管其他位置也是可能的。
图11A-11E示出了图10的示例成像系统900的操作。图11A示出了照射源960朝向波导940上的耦入光学元件942发射光902。如图所示,可以通常以法向入射将光902引导至目镜950,尽管其他角度也是可能的。在一些设计中,光源960被配置为将准直光发射到目镜950中。如图11B所示,照射光902可以经由耦入光学元件942耦合到波导940中。在一些设计中,耦入光学元件942包括衍射光学元件(例如,光栅、全息元件),入射在其上的光以大于波导的临界角的角度被衍射,以使得被耦入的光904通过全内反射(TIR)在目镜950内被引导。在一些设计中,耦入光学元件942可以被配置为将光引向耦合光学元件944。耦入光学元件942可以是偏振选择的。例如,入耦入光学元件942可以包括偏振选择转向元件,诸如偏振光栅,例如液晶偏振光栅。图11C示出了耦入光904如何通过TIR传播通过波导940。
图11D示出了使光从目镜950耦出的示例性成像系统900。随着耦入光904传播通过波导940,光中的一些可以入射在耦合光学元件944上。耦合光学元件944可以被配置为使耦入光904从目镜950耦出并朝向用户的眼睛210。耦合光学元件944可以被配置为将作为准直光的光耦合朝向眼睛210。耦合光学元件944可以被调谐为具有特定波长范围的光。例如,耦合光学元件944可以被配置为将红外光(例如,在大约700nm和15000nm之间)从波导940耦出。在一些设计中,耦合光学元件944可以被配置为使多个波长的光从目镜950耦出。例如,可以关于红外和可见光两者调谐耦合光学元件944。耦合光学元件944还可以被配置为将光耦合到波导940中,如下面更全面地描述的。
耦合光学元件944可以被配置为为用户增加眼箱的一个或多个尺寸。例如,一个或多个尺寸可以沿第一轴(例如,x轴)测量。目镜950可以进一步包括正交瞳孔扩展器(OPE)。OPE可以具有设置在波导之上或之中(例如,在主表面中的一者上)的至少一个光重定向元件,或者OPE可以设置在波导940内。OPE可以包括与上面关于光分布元件730、740、750所描述的特征相似或相同的特征。在一些实现方式中,光重定向元件可以包括衍射光学元件。OPE可以被配置为沿与第一轴正交的第二轴(例如,y轴)增大眼箱的尺寸。
图11D示出了朝向用户的眼睛210离开目镜950的光中的一些。在一些设计中,耦合光学元件944被配置为使得在沿第一轴(例如,平行于x轴)的耦合光学元件的各个部分处入射在耦合光学元件944上的耦入光904在沿第一轴的耦合光学元件944的每个部分处离开目镜950。这可以为用户提供关于不同的眼睛定位或位置的用于投射图像或照射眼睛的光。
如图11D-11E所示,耦合光学元件944可以被配置为将耦入光904作为准直光从目镜950耦出。该光也可以以相对于目镜950和/或波导940的主表面大致法向被引导。准直光可以被引导到眼睛中并且由眼睛(例如,眼睛的角膜和自然晶状体)聚焦到视网膜上。入射到视网膜上的该光908可以提供照射以对视网膜成像和/或向眼睛提供图像内容。该光908中的一些例如可以被反射或散射离开视网膜、从眼睛出射并提供要被捕获的视网膜图像。光源960可以是扩展光源,使得光将照射视网膜的区域。
图12A-12E示出了图11A-11E的成像系统900如何附加地或可选地用于眼睛210的图像收集。图12A示出了离开眼睛210从视网膜反射的光910。如图所示,从视网膜散射或反射的、穿过眼睛的天然晶状体、眼睛中的瞳孔和角膜的光910可以被准直。该光也可以以法向入射(例如,以与波导940和/或耦合光学元件944的主表面成直角)入射在目镜950上。耦合光学元件944可以被配置为将从视网膜反射的光910耦合到波导940中。
图12B示出了将光耦合到目镜950中的示例性成像系统900。耦合光学元件944可以包括诸如衍射光学元件的转向特征或以大于临界角的角度重定向光的其他结构以便在波导940内引导光。耦合光学元件944可以被配置为将耦入光914大体上朝向光源960和/或成像装置920引导。耦合光学元件944可以被配置为使少于该光的朝向相机920传播的一小部分从波导940耦出。例如,可以在波导940之上或之中设置部分反射元件(例如,半透明镜),使得耦入光914中的部分通过全内反射继续在波导940中传播,同时减少了耦入光914沿波导940的其中设置有耦合光学元件944的部分从波导940的泄漏。未泄漏出的光的部分可以是0到1之间的任何分数。例如,该部分可以是0.90,其中沿耦合光学元件944传播通过波导940的光线的90%在光线的每次反射处被保持在波导内。其他部分也是可能的(例如0.10、0.20、0.30、0.40、0.50、0.60、0.70、0.80或这些值中的任何值之间的范围)。这种部分反射元件可以类似地用于以下描述的实现方式中。
如图12C所示,准直的耦入光914可以继续传播通过波导940朝向成像装置920。图12D示出了耦入光914中的一些如何继续传播直到入射到一个或多个耦出光学元件952上。为了减少耦入光914从耦入光学元件942的泄漏量,耦入光学元件942可被配置成将传播朝向相机920的该光中的极少光从波导耦出。例如,可以将部分反射元件(例如,半透明镜)设置在波导940上或波导940中,使得耦入光914的一部分通过全内反射继续在波导940内传播,同时减少了耦入光914沿波导940的其中设置有耦入光学元件942的部分从波导940的泄漏。未泄漏出的光的部分可以是0到1之间的任何分数。例如,该部分可以是0.90,其中沿耦合光学元件944传播通过波导940的光线的90%在光线的每次反射处被保持在波导内。其他部分也是可能的(例如0.10、0.20、0.30、0.40、0.50、0.60、0.70、0.80或这些值中的任何值之间的范围)。这种部分反射元件可以类似地用于以下描述的实现方式中。
如图12E所示,耦出光学元件952可以被配置为将在波导940中引导的光从波导940耦出并耦合到成像装置920。结果,入射到耦出元件952上的在波导940中传播的光被重定向,以使其从波导940中射出,例如,从波导940的主表面(例如,波导940的前侧或后侧)射出并将其引导至成像装置920。耦出光学元件952可以被配置为引导光926垂直于(例如,法向于)波导940的主表面从波导940出射。在一些设计中,耦出光学元件952被配置为以到成像装置920的感光部分的法向入射将准直光924引导至成像装置920上。如上所述,相机920可以无限远聚焦,例如,成像光学器件可以被配置为将准直光聚焦到检测器阵列上。
因此,波导940可以被配置为将从用户的眼睛210耦合到波导940中的光引导以被成像装置920(例如,相机)接收,以便捕获用户眼睛210中的至少一部分的图像。相同的波导940可以被配置为引导从图像投影仪930耦合的光,使得来自图像投影仪930的光可以被引导到用户的眼睛210,使得来自图像投影仪930的图像位于用户的视场中。在一些实现方式中,相同的波导被配置为引导从照射源960耦合的光,使得来自照射源的光可以被引导到用户的眼睛210以照射眼睛,使得眼睛的图像可以被相机920捕获。
在一些实现方式中,相同的耦合光学元件944可以被配置为(i)将来自用户的眼睛210的光耦合到波导940中以被成像装置920接收,以及(ii)使来自图像投影仪930的光从波导940耦出到用户的眼睛210,以将图像内容投射到用户的视场中。在一些实现方式中,相同的耦合光学元件944可以被配置为将来自照射源960的光从波导耦合出到用户的眼睛210,使得来自照射源的光可以照射眼睛。
在其他设计中,可以使用不同的波导和/或可以使用不同的耦合光学元件944。例如,在一些设计中,第一波导940可以被配置为引导从用户的眼睛210耦合的光以被相机920接收,从而捕获用户眼睛210中的至少一部分的图像,第二波导可以被配置为引导从图像投影仪930耦合的光,使得来自图像投影仪930的光可以被引导到用户的眼睛210。第一波导和第二波导可以彼此堆叠在其顶部。附加地或可选地,另一波导可以被配置为引导从照射源960耦合的光,使得来自照射源的光可以被引导到用户的眼睛210以照射眼睛。
另外,在一些实现方式中,第一耦合光学元件944可被配置为(i)将来自用户眼睛210的光耦合到波导940中以由成像装置920接收,以及(ii)使来自图像投影仪930的光从波导940耦出到用户的眼睛210,以将图像内容投射到用户的视场中。附加地或可选地,另一耦合光学元件可以被配置为将来自照射源960的光从波导耦出至用户的眼睛210,使得来自照射源的光可以照射眼睛。
在一些设计中,耦合光学元件944可以包括多个衍射光学元件(DOE)。例如,第一DOE可以被配置为将来自用户的眼睛210的光耦合到波导940中以由成像装置920接收。第二DOE可以被配置为将来自图像投影仪930的光从波导940中耦出至用户的眼睛210,以将图像内容投射到用户的视场中。可选地,第三DOE可以被配置为将来自光源960的光从波导940耦出到用户的眼睛210以照射眼睛。可以使第一和第二(可能还有第三)DOE堆叠,以例如在一些实现方式中,使得来自用户前方环境的光穿过第一DOE,然后入射到第二DOE,然后入射到第三DOE并入射到用户的眼睛上。然而,顺序可以不同。
在一些设计中,第一DOE和第二DOE被集成在波导940的单个元件或体积中。在一些实现方式中,例如,第一DOE和第二DOE两者在波导2102内彼此叠加(例如,占据相同或近似相同的体积)。例如,第一和第二DOE可以被记录在相同的介质中。
如上所述,例如视网膜的眼睛的图像捕获可以促进眼睛跟踪。例如,图13A示出了成像系统900,其被配置为例如在眼睛处于不同位置时的不同时间对眼睛210的各个部分(例如,视网膜)成像。阶段A和阶段B可以指在眼睛的不同取向期间的眼睛210的图像。图13A示出了在阶段A和阶段B成像两者期间的眼睛210的成像及其结果。
在一些实现方式中,光发射928(例如,来自如上所述的照射源960或来自不同地配置和/或定位的一个或多个照射源)可以用于获得视网膜962的一个或多个图像,如图13A所示。视网膜962的图像可以包括在眼睛210的不同取向期间成像的一个或多个区域964、966。图13A示出了视网膜962的图像的两个区域964、966。例如,在眼睛210以法向于波导940的角度被引导的同时,可以对在阶段A中成像的视网膜的区域964成像。在眼睛210与波导940成锐角定向的同时,可以获得阶段B中成像的视网膜的区域966的图像数据。在成像的一个或多个阶段期间使用眼睛210的一种或多种取向,可以获得视网膜962的合成图像或映射(map)。诸如数据模块140(参见图2)的处理电子器件或处理器可用于查找两个相邻区域之间的重叠图像数据。使用重叠的区域图像数据,可以确定视网膜962的合成图像。可以存储用户视网膜的较大尺寸(例如全尺寸)的合成图像或映射。
如本文所述,头戴式显示器可用于基于用户的眼睛被引导的方向来映射用户的眼睛视网膜。为了使用眼睛注视提供与用户环境中的对象的现实和直观的交互和/或为了识别头戴式显示装置的佩戴者,头戴式显示系统可以使用视网膜映射结合用户的眼睛特征的唯一性和可能对眼睛测量有一些影响的其他条件。例如,可以基于对应视网膜图像中血管的位置来识别图像。
视网膜映射可以涉及使计算装置能够学习如何将用户的眼睛凝视(例如,如在视网膜图像中标识的)与2D或3D空间中的凝视点相关联的过程。眼睛凝视可能与2D或3D空间中的单个点相关联。眼睛凝视还可以与空间中的多个点相关联,这些点可以描述虚拟对象的运动(例如,一系列点、移动图像的位置)。
头戴式显示系统可以基于视网膜图像确定用户的眼睛凝视。头戴式显示系统可以使用传感器(例如,诸如成像装置920的眼睛相机)获得视网膜图像。头戴式显示系统可以在用户改变他或她的眼睛凝视时(例如,当用户环顾四周以跟随移动或转移的校准目标或注视目标时)对用户的一只或两只眼睛成像。为了映射用户的视网膜,头戴式显示系统可以呈现虚拟目标,例如注视目标,以供用户观看。虚拟目标可以与2D或3D空间中的一个或多个已知的凝视点相关联。当用户注视目标时,头戴式显示系统可获取视网膜图像并将图像与凝视点相关联。头戴式显示系统可以基于各个视网膜图像和与目标相关联的凝视点的关联来计算和/或生成映射矩阵。
视网膜映射结果可以反映每个人眼睛中的唯一性。例如,头戴式显示系统可以生成针对特定个体的一只或两只眼睛定制的映射矩阵。例如,响应于特定目标,用户可能具有不同数量的眼睛运动或眼睛凝视。附加地或可选地,用户可以具有视网膜中血管的不同位置、大小、形状和/或取向。结果,通过生成特定于单个用户的校准结果,头戴式显示系统可以允许更准确的用户与眼睛凝视的交互和/或可以允许识别特定用户。
因此,当用户戴上头戴式显示装置时,系统可以检测该用户是先前用户还是新用户。可以计算混淆矩阵,其中将存储在系统存储器中的特定眼睛凝视图像的得分与当前用户的对应图像进行比较。混淆矩阵可以包括针对多个眼睛凝视和相关联的视网膜图像的比较分数。基于比较分数,系统可以能够做出关于用户的身份的确定(例如,用户是否与所存储的视网膜图像或合成图相关联的个人)和/或做出确定的置信度。置信水平可以例如包括同一性(identity)系数。可以将存储的图像(例如合成图像或映射)与后来获得的图像(称为关于当前用户获得的即时或实时图像)进行比较。如果系统检测到用户是新用户,则系统可以提供警报,或者可以采取其他措施。
系统可以将诸如数字滤波或映射像处理的滤波应用于由相机捕获的视网膜的图像。这样的滤波或成像处理可以例如增强可用于识别、拼接、组合合成图像、眼睛跟踪等的特征。这样的滤波或映射像处理可以包括边缘增强。尽管可以使用其他类型的滤波器,但是这种滤波器可以包括例如弗兰吉(Frangi)滤波器。这样的滤波器或处理(例如,边缘增强或弗兰吉滤波器)可用于增强和/或检测诸如视网膜图像中的血管或管状结构或纤维的图像特征。
图13B示出了可以在视网膜映射过程中使用的顺序显示的注视目标的图案。用户的眼睛将要将他们的凝视引导至其上的这些虚拟目标可导致将眼睛凝视重定向到各种不同的方向,其中在各种不同的方向期间可以对视网膜成像。与不同的凝视方向相关联的所得图像对应于视网膜的不同部分。如上所述,当眼睛在不同的方向上凝视以观看显示器上不同位置的注视目标时,由相机捕获的图像包括视网膜的不同部分。这些图像可以被组合以形成较大的视网膜映射或合成图像。
图13B示出了在用户视场(FOV)1200中十六个不同位置处的虚拟目标。在各种实现方式中,虚拟目标将在给定时间在给定位置呈现。在当虚拟目标在该特定位置被呈现给用户时的时间期间,将获得一个或多个视网膜图像。该图像或这些图像可以与该目标位置和/或对应的凝视方向相关联。可以使用更多或更少的目标位置。在图13B所示的示例中,显示了十六个目标位置1202a1202p。可以使用更多或更少的目标位置。目标位置也可不同。目标在不同位置的显示顺序可能不同。例如,目标可以以光栅模式从用户视场的左侧移动到用户视场、从右向左返回、再从左向右移动,从而降低了视场中目标的位置,其中每个横向通道跨越视场。然而,其他图案和方法也是可能的。同样地,可以在不同位置相同或不同地渲染目标。例如,所渲染的目标可以是不同的大小、形状、颜色等。可以在眼睛跟踪校准过程期间顺序地向用户渲染目标。例如,如上所述,头戴式显示系统可以以蛇形图案渲染目标。例如,目标1202a之后可以是1202b,然后是1202c,然后是1202d,然后是1202h,然后是1202g,依此类推。其他图案也是可能的。例如,目标可以以更随机或非顺序图案显示。在一些实施例中,向用户显示单个目标,并且该目标在用户的视场周围移动(例如,在目标运动期间通过或暂时停在位置1202a-1202p处)。头戴式显示系统可以在用户正看向这些目标时获取用户视网膜的图像。例如,当用户在在看向第一位置1202a处的目标时,头戴式显示系统可获取第一图像,而当用户正在看向第二位置1202b处的目标时可获取第二图像,而当用户正在看向第三位置1202c处的目标时可获取第三图像,依此类推。可穿戴系统可以将第一图像与第一位置1202a相关联,将第二图像与第二位置1202b相关联,将第三图像与第三位置1202c相关联,等等。可以在数据库中将相邻图像拼接在一起,以创建完整或部分视网膜映射。例如,可以使用多个图像共有的特征或特征的部分(例如,血管或其部分)以适当的配准将两个图像拼接在一起。在各种实现方式中,相邻的目标位置将产生可以对准并拼接在一起的重叠图像。例如,目标位置1202a和目标位置1202b以及目标位置1202b和目标位置1202c可以产生可彼此拼接的重叠且相邻的视网膜图像。因此,可以在不同的眼睛凝视的情况下获得许多不同的视网膜图像,从而组合视网膜的较大图像(例如,合成图像或映射)。
如上所述,可以使用合成视网膜图像或映射来执行眼睛跟踪。例如,在不再显示目标之后,当用户看向位于用户和头戴式显示器或由头戴式显示器显示的增强现实(虚拟)图像内容前方的不同的真实对象时,用户可以移动眼睛凝视。在这些时间处可以获得一个或多个视网膜图像。术语“瞬时”或“实时”图像在本文中可用于描述在校准之后获得的这些图像,这些图像可用于眼睛跟踪(或其他目的,例如获得生物数据)。这些“瞬时”或“实时”图像可能对应于合成视网膜图像或映射的一部分。系统可以被配置为使该“瞬时”或“实时”视网膜图像与复合视网膜图像或视网膜映射中的一部分充分匹配。这样的匹配可以基于“瞬时”或“实时”视网膜图像以及复合视网膜图像或映射中的一部分共有的特征或特征的部分(血管或其部分)。基于该“瞬时”或“实时”视网膜图像与合成视网膜图像或映射的部分重合的位置,可以推定凝视方向。不同的凝视方向将产生与视网膜映射的不同部分对应的视网膜图像。因此,识别“瞬时”或“实时”视网膜图像在合成视网膜图像或映射上的位置将提供有关用户凝视方向的信息。可以使用这样的或类似的方法来进行眼睛跟踪,例如,跟踪眼睛的运动和眼睛凝视的变化。如上所述,边缘增强、边缘检测或其他数字滤波和/或处理可用于增强不同图像的特征和/或将不同图像的特征与合成视网膜图像或视网膜映射相关联。
在完成其中显示虚拟目标或注视目标(例如,在多个位置处)以组合合成视网膜图像或映射的初始校准过程之后的各种实现方式中,合成视网膜图像或映射仍可以被细化。例如,当获得附加的视网膜图像时,可以使用附加的图像进一步细化或改善合成的视网膜图像或映射。因此,当例如为了提供眼睛跟踪的目的而获得附加的“瞬时”或“实时”视网膜图像时,可以使用“瞬时”或“实时”进一步细化或改善合成视网膜图像或映射。当用户继续看向显示器中的各个位置(借助或不借助校准目标)时,可以使用在其中显示虚拟目标或注视目标的初始校准之后获取的附加图像进一步细化视网膜合成图像或映射。因此,可以增加合成视网膜图像或映射的质量。
如何完成眼睛跟踪和/或如何可以产生合成的视网膜图像或映射以及所使用的视网膜图像的附加非限制性示例在2017年1月17日提交的标题为“EYE IMAGE COLLECTION(眼睛图像收集)”的美国公开No.2017/0205875中有所描述,通过引用将其公开内容整体合并于此。
因此,如上所述,可以通过使用诸如本文所述的成像系统获得眼睛的视网膜图像和/或其他图像来记录和映射视网膜的较大部分,并且这样的图像可以促进眼睛跟踪。例如,当眼睛处于任意位置时,可以捕获图13A所示的眼睛210的图像。然后,处理电子器件或处理器(例如上述与形成合成图像相同或不同的处理电子器件或处理器)可以将用户视网膜的捕获图像实时与所存储的合成或更大尺寸(例如,全尺寸)图像进行比较来跟踪眼睛的运动。实时捕获的用户视网膜的给定图像可能会显示用户视网膜的特定部分。如上所述,通过将这样的捕获图像与用户映射用户视网膜的较大部分的存储图像进行比较,系统可以确定在捕获图像中示出了用户视网膜的哪个部分,从而可以确定将产生这种图像的眼睛的位置/取向。参见图示例13A,其示出了当眼睛处于两个不同的位置和/或取向时产生的两个不同的视网膜部分的图像。因此,可以通过捕获视网膜的不同图像并确定视网膜的哪个部分是可见的来确定眼睛的位置和/或取向。即使没有形成合成图像而是记录了关于不同眼睛位置/取向的视网膜的多个图像并将其存储在数据库中,也可以执行这种确定。当获得视网膜的未来图像时,可以将该图像与存储的图像数据库中的图像进行比较,以确定数据库中的哪个图像类似于最近获得的眼睛的图像。将最近图像与数据库中具有相关联的位置和/或取向的图像中的一个或多个图像进行匹配,可以使能确定较新图像的取向和/或位置。可以基于使用本文描述的设计捕获的图像来使用其他眼睛跟踪方法。
如本文所述,视网膜图像也可以用于其他目的。例如,视网膜图像可以用于验证用户是为其获取了合成视网膜图像或映射的同一用户。可以将当用户佩戴头戴式显示系统时(例如,在校准过程期间和/或以后使用期间)获得的视网膜图像与被存储的先前获得的合成视网膜图像或映射(例如,前一天或当先前启动头戴式显示器时创建的)进行比较。如果近期获得的视网膜图像与合成视网膜图像或映射的一部分不匹配,则可以得出当前用户不同于先前用户(例如,为其创建了合成虚拟图像或映射)的结论。这样的方法可以用于安全性,例如,以验证头戴式显示装置的当前用户是该装置的所有者或典型用户。因此,经由视网膜成像获得的生物数据可以用于安全目的。
视网膜成像也可以用于收集生物数据以监视用户的健康。可以从视网膜图像获得医学上相关的数据。这样的医学数据对于监视用户的健康可能是有用的。
尽管本文在视网膜成像的背景下讨论了眼睛成像的各种应用,例如眼睛跟踪、用于健康监测和安全性的生物数据的收集,但是可以对用户(例如,用户的眼睛)的其他部分进行成像以用于这些和其他目的。
尽管以上描述了目镜950能够被用来促进眼睛的成像,但是目镜也可以用于对用户前方的世界成像。例如,图14A-14B示出了示例成像系统900,其可以用于对位于用户前方的环境中的一部分和/或该环境的一部分中的对象进行成像。所使用的成像系统900可以是与关于图11A-11E和/或关于图12A-12E所描述的系统类似的系统,除了由目镜950收集从环境朝向目镜和用户的光之外。例如,图14A示出了来自环境的光970,该光970被该环境中的一个或多个物理对象972反射和/或发射并且朝向用户和目镜950。如图所示,来自环境的光970可以被近似准直(例如,在无限远处),例如因为环境中的物理对象972可能位于距成像系统900足够大的距离处,以使到达成像系统900的光线被准直或被近似准直。在一些实现方式中,成像系统900可以被配置为对环境和/或环境中的对象成像,而不在成像系统900中使用具有光焦度的任何光学元件(例如,透镜、镜子)。
图14A和14B所示的成像系统900与上述成像系统相似。成像系统包括目镜950,该目镜包括一个或多个波导940,该一个或多个波导940包括耦合光学元件944,该耦合光学元件944被配置为将来自图像投影仪930(未示出)的光引导到眼睛210中以在其中形成图像。一个或多个波导可以包括多个波导(例如,波导的堆叠),其被配置为使多个对应的颜色/波长耦入/耦出。波导堆叠中的每个波导可以被配置为引导特定颜色(例如,红色、绿色、蓝色)的光。例如,最远侧波导(例如,波导的堆叠)可以被配置用于可见光(例如,红色、蓝色、绿色),使得该波导被配置为使相同波长的可见光耦入和耦出。附加地或可选地,可以将被配置为使不可见(例如,红外)光耦入和耦出的波导设置在眼睛210附近。与波导940对应的这样的多个波导可以用于本文所述的任何其他实现方式中。成像系统900还可以包括成像装置(例如,相机)920和被配置为将在波导940内传播的从眼睛210反射的光转向到相机的耦出光学元件952。在图14A和14B中,排除了照射源960,因为可能不需要照射源来对用户前方的环境进行成像。然而,在某些设计中可以使用照射源(例如,上述光源960)。
目镜950、波导940、耦合光学元件944、耦出光学元件952和相机920可以与上述相同或相似。例如,耦合光学元件944可以与波导940物理接合。例如,耦合光学元件944和/或耦出光学元件952可以设置在目镜950前方的环境与相机920之间的光路中,使得来自环境的光经由耦合光学元件944耦合到波导940中,并经由耦出光学元件从波导耦出以入射到相机210上(例如以形成环境的至少一部分的图像)。耦合光学元件944可以包括多个转向特征,该转向特征被配置为将在波导内被引导的光从波导转出或者以一定角度将入射到耦合光学元件944上的光转向到波导中以通过全内反射在其中被引导。耦出光学元件952可以包括多个转向特征,该转向特征被配置为以角度转向在波导内被引导的(来自环境的)光,使得光不通过全内反射在波导中被引导而是被引导出朝向相机。耦合光学元件944、耦出光学元件952以及与它们相关联的转向特征可以与波导940物理接合。例如,耦合光学元件944和/或耦出光学元件952可以包括在波导940之中或之上被图案化(例如,蚀刻)的一个或多个全息或衍射光学元件(例如,表面浮雕光栅)。耦合光学元件944和/或耦出光学元件952可以包括设置在波导940上的层,或者可以形成在波导940中。例如,可以通过改变包括波导或设置在其上的层的材料的折射率来形成体全息或衍射光学元件。因此,耦合光学元件944和/或耦出光学元件952可设置在波导940或设置在其上的层的体积中。取决于设计,耦合光学元件944和/或耦出光学元件952可以是透射的或反射的,并且可以以透射或反射的方式工作。例如,耦合光学元件944和/或耦出光学元件952可以包括分别以透射或反射方式工作的透射或反射衍射光学元件(例如,光栅)或全息光学元件,例如,从而使通过其透射的光或从其反射的光转向。耦合光学元件944和/或耦出光学元件952可包括偏振光学元件,例如偏振选择转向元件(例如,偏振器)。偏振选择转向元件可以包括一个或多个偏振光栅、衍射光学元件和/或全息光学元件,并且可以包括液晶结构,例如液晶偏振光栅。在一些实现方式中,反射光学元件可包含反射器(例如,镜子)。例如波导940的其他元件也可以类似于上面描述的。
图14B示出了图14A所示的成像系统900的操作。来自环境的光970通过耦合光学元件944耦合到波导940中。耦合光学元件944可以被配置为以大于波导940的临界角的角度使准直光转向,使得该准直光的至少一部分通过全内反射在波导内被引导朝向相机920。耦出光学元件952可被配置为接收来自用户前方环境的光的至少一部分,该光的至少一部分经由耦合光学元件944耦合到波导940中并在其中被引导。耦出光学元件952可以被配置为使耦入光从波导940耦出到相机920,使得可由相机920捕获环境的图像。环境图像可以被传递到处理电子器件(例如,一个或多个处理器),例如数据模块140(参见图2)。数据模块140可以被配置为在增强现实背景下再现环境的修改图像。处理电子器件可以经由有线或无线电子信号与相机920通信。附加地或可选地,处理电子器件可以使用一个或多个远程接收器与相机920通信。处理电子器件可以远程地驻留(例如,云计算装置、远程服务器等)。
因此,该成像系统900可以用于直接对环境进行成像,出于多种原因,这可能是有用的。例如,对环境成像可以用于确定相对于环境中的对象将增强现实图像内容放置在何处。例如,对环境成像可以提供桌子的位置,使得头戴式显示器可以渲染站立在桌子附近而不是桌子上或桌子中的人的图像。所描述的用于对环境成像的成像系统900也可以用于对眼睛210进像,例如关于图10、11A-11E和/或12A-12E所描述的。
可能期望使用成像系统900对环境的宽视场成像。图14C示意性地示出了成像系统900,其用于使用位于目镜前方的有焦度的光学元件或透镜(例如折射光学元件980(例如,宽视场透镜))收集来自环境的光。折射光学元件980可以具有正光焦度。折射光学元件980(例如,正透镜)将来自环境的准直光970会聚朝向波导940。可以使用除图14C所示的透镜以外的其他类型的透镜。透射的光(未示出)可以穿过有焦度的光学元件或透镜,例如被配置为具有与折射光学元件980相等且相反的负光焦度的折射光学元件990(例如,负透镜)。负透镜990可以具有与正透镜980相似或相同的光焦度,以补偿或抵消正透镜或其一部分的光焦度。以此方式,来自环境(例如,波导940的远端)的光可以穿过负透镜990、目镜950和正透镜980,其中由这两个透镜引入眼睛的光焦度基本上没有净变化。负透镜990可以被配置为补偿或抵消正透镜980的光焦度,使得当观看目镜950前方的环境时,用户将不会体验到正透镜的光焦度。负透镜990也将抵消正透镜980的影响以使佩戴者前方环境中的对象的图像反转。尽管某些光线会聚,但是来自环境的一些光970可以通过耦合光学元件944耦合到波导940中。入射在耦出光学元件952上的耦入光可以从波导940射出。
可以在增强现实环境之外使用实现方式(例如,图14A-14C所描述的实现方式)。例如,旨在在可穿戴装置(例如,眼镜(包括无焦度眼镜)或双焦点)中实现被配置为对环境成像的成像系统900。这样的成像系统900可能不需要图像投影仪930和/或光源960。附加地或可选地,这样的成像系统900可能不需要被配置用于对应的图像投影仪930和/或光源960的耦合光学元件。
实施这样的成像系统900可能是有利的,该成像系统900用于将环境成像在诸如手持装置(例如,蜂窝电话、平板电脑)的观看屏幕(例如,电视屏幕、计算机屏幕)上。成像系统900可以改善视频聊天能力。例如,看到注视屏幕的聊天伙伴的观看者可能看起来是直接位于观看者处。这将是可能的,因为由成像系统900捕获的光线将在用户正在看向的同一区域中被捕获(例如,与观看屏幕相反,但具有由位于不同位置处的单独的面向外的相机捕获的光线)。
在其中图14C的成像系统900也用于对眼睛210成像的实现方式中,光源960和/或图像投影仪930可配置为将光注入到波导940中。因为被耦入到波导中的从眼睛反射的光将穿过折射光学元件990(例如,负透镜),可以在光源960和/或图像投影仪930与波导940之间设置正焦度折射光学元件。在来自光源和/或光投影仪的耦入光入射到眼睛210上之前,正透镜可以被配置为补偿或抵消由折射光学元件990提供的任何光焦度。可以使用除图14C中所示之外的其他类型的透镜作为光学元件990。可选地或附加地,与光源和/或图像投影仪通信的处理电子器件可以被配置成更改足以在光已经通过折射光学元件990之后为用户呈现未失真图像的图像。在一些设计中,对应的耦入光学元件、耦出光学元件和/或耦合光学元件可以被配置为对非准直光(例如,发散、会聚光)进行操作。
在各种实现方式中,相同的波导940可以用于(i)将来自目镜950和用户前方的环境的光传播到相机940,以及(ii)将来自图像投影仪930的光传播到眼睛210在其中形成图像内容。使用相同的波导940可以简化系统和/或目镜,并且可以使系统和/或目镜更紧凑,从而可能提供减小的形状因子。关于其他原因,通过减少波导940的数量来减小目镜950的厚度也是有利的。较低的成本和更简化的制造过程可能是一些这样的优势。
同样在各种设计中,可以在相同的头戴式显示器中使用相同或不同的成像系统,以通过经由目镜950中的波导将来自眼睛的光传播到相机940例如如上所述。这样的系统还可以使用目镜将来自照射源的光传输到眼睛210以照射眼睛。在一些设计中,目镜可另外得用于将来自图像投影仪930的光传播到眼睛210以在其中形成图像内容。使用目镜来帮助对环境进行成像并且对眼睛成像(并且可能照射眼睛)可以简化系统和/或可以使系统更紧凑,从而可能提供减小的形状因子。
此外,在一些实现方式中,相同的波导940可以用于(i)将来自目镜950前方的环境的光传播到相机940,以及(ii)将来自眼睛210的光传播到相机以捕获眼睛的图像。相同的波导可用于将来自图像投影仪930的光传播到眼睛210以在其中形成图像内容和/或将来自照射源960的光传播到眼睛210以照射眼睛用于图像捕获。使用相同的波导940可以简化系统和/或目镜,并且可以使系统和/或目镜更紧凑,从而可能提供减小的形状因子。关于其他原因,通过减少波导940的数量来减小目镜950的厚度也是有利的。较低的成本和更简化的制造过程可能是一些这样的优势。
类似地,除了将来自环境的光耦合到波导940中之外,相同的耦合光学元件944可以被配置为将来自图像投影仪930的光引导到眼睛210以在其中形成图像内容和/或将来自眼睛的光引导至波导940中以在其中被引导到相机920。附加地或可选地,相同的耦合光学元件944可被配置为将在波导940内被引导的来自照射源960的光从波导940耦出到用户的眼睛210。
如上所述,耦合光学元件944、耦入光学元件942或耦出光学元件952中的一个或多个可以包括偏振选择耦合元件。因此,在各种设计中,输入到目镜950或波导940中的光被偏振,以便由偏振选择转向元件适当地作用。
因此,在一些实施例中,照射源960包括具有适当偏振的偏振光源,以被偏振选择耦合/转向元件适当地作用。
一个或多个偏振特定的滤光器和偏振修改元件可以包括在各种成像系统900中,例如其中将图像投影仪930和/或光源960通过波导940彼此直接相对放置的那些系统。例如,在其中偏振敏感元件在相同侧面位置处在波导940的相对侧上对准的配置中,偏振敏感元件可以有助于减少到成像装置920中的方向光发射和/或减少成像装置920的饱和度。图15A-15B示出了这样的配置。如图15A所示的光源960可被配置为引导光穿过诸如偏振器(例如,线性偏振器)的偏振特定的滤光器982和/或穿过被配置为更改入射光的偏振状态的偏振修改元件986(例如偏振旋转器)。诸如半波延迟器的延迟器可以例如旋转线性偏振。因此,适当定向的半波延迟器或半波片可以将s偏振光旋转为p偏振光,反之亦然。因此,在各种实现方式中,偏振特定的滤光器982和/或偏振修改元件986被设置在光源960和耦入光学元件942之间的光路上,以便向耦入光学元件提供适当取向的偏振。在一些实现方式中,成像系统900不包括偏振修改元件,而是包括诸如偏振器的适当定向的偏振滤光器。
由光源960发射的光可以以特定顺序通过光学元件的布置。例如,如图15A所示,来自光源960的光可以首先穿过偏振特定的滤光器982(例如,偏振器),然后穿过偏振修改元件986(例如,旋转器)。在光已经穿过偏振修改元件986之后,光可以入射在耦入光学元件942上,该耦入光学元件942可以将光引导到波导940中以在其中被引导。
例如,光源960可以被配置为发射混合偏振(例如,s偏振和p偏振)的光。偏振特定的滤光器982可以被配置为仅透射第一偏振状态(例如,p偏振)的光。随着光继续,偏振修改元件986可以被配置为改变光的偏振状态(例如,从p偏振变为s偏振)。耦合光学元件可以被配置为将s偏振光转变成大于波导的临界角的角度,使得s偏振光在波导内被引导。当耦入光904传播通过波导940时,耦入光904可以基本上以第二偏振(s偏振)被偏振。耦合光学元件944可以被配置为仅使第二偏振状态(s偏振)的光转向。耦合光学元件944可以被配置为使耦入光904从波导940耦出,并耦至眼睛210,以提供用于图像捕获的照射。
为了防止成像装置920的直接照射(例如,饱和),可以将偏振修改元件958和/或偏振特定的滤光器984设置在波导940之中或之上,使得仅特定偏振状态(例如,p偏振)的光可以穿过偏振特定的滤光器984并到达成像装置920。偏振修改元件958(例如,半波片)可以被配置为改变偏振的状态(例如,从s偏振到p偏振)。偏振特定的滤光器984可以被配置为仅通过其透射特定偏振的光(例如,p偏振光)。以此方式,穿过偏振特定的滤光器982的光将不会被配置为直接透射通过偏振特定的滤光器984。在上面的例如在图10、11A-11E和12A-12E中的任何实现方式(例如,其中图像投影仪930和/或光源960位于同一光轴上,如图15A所示)中,偏振特定的滤光器982、偏振修改元件986、耦入光学元件942、偏振修改元件958和/或偏振特定的滤光器984可以根据图15A的设计来实现。偏振特定的滤光器984可以是透射反射型偏振器(例如,偏振器分束器),其被配置为透射第一偏振的光并重定向或反射不同于第一偏振的第二偏振的光。
可以包括部分反射元件(例如,半透明镜)以将耦入光904转向至成像装置920。部分反射元件可以设置在耦入光学元件942和偏振改变元件986之间,使得耦入光914的一部分被反射朝向成像装置920,同时减少了耦入光914从波导940中的泄漏。未泄漏的光的部分可以是0至1之间的任何分数。例如,该部分可以是0.90,其中沿耦合光学元件944传播通过波导940的光线的90%在光线的每次反射处被保持在波导940内。其他部分也是可能的(例如,0.10、0.20、0.30、0.40、0.50、0.60、0.70、0.80或这些值中的任何值之间的范围)。
图15B示出了反射或散射离开视网膜的光的传播。被视网膜反射的入射在具有第二偏振(s偏振)的耦合光学元件944上的光910中的一些被耦合光学元件944以大于波导940的临界角的角度转向,由此可以在其中被引导。光中的一些可能不被耦合到波导940中,并且将作为非耦入光912通过其中透射。耦入光904可以传播通过波导940并朝向相机。
其他实现方式可以受益于在光源和相机附近的偏振选择元件的使用。例如,各种系统可以被配置为提供具有第一偏振的照射并且使用具有不同偏振的光通过相机捕获图像。例如,当对视网膜成像时,这种配置可以用于减少不希望的反射,例如来自角膜的反射。来自角膜的反射将是镜面的。因此,如果第一偏振的光入射在角膜上,则从角膜反射的光将保持该第一偏振。相反,视网膜是弥漫性的。如果第一偏振的光入射在视网膜上,则从视网膜反射的光不仅仅保持第一偏振。漫反射更有可能导致产生非偏振光。因此,在反射光中将存在不同于第一偏振的第二偏振。同样地,通过以第一偏振照射并且以第二不同偏振成像,可以在减少的来自角膜的眩光的情况下对视网膜成像。
因此,在各种实现方式中,偏振特定的滤光器982、984可以一起使用以减少来自眼睛210(例如,来自角膜)的不希望的反射光。例如,不希望的光、眩光或闪光可能会从角膜反射,这可能会使由成像装置920捕获的图像饱和。从角膜反射的光可能是镜面的,并保持其偏振。相比之下,从视网膜反射的光可能更会被漫反射,并且可能被较弱地均匀偏振。同样地,可以使用偏振器的组合来去除不希望的反射光中的一些或大部分。最初,偏振光可以用于照射眼睛210。在一些设计中,可以使用偏振照射源(例如,光源960)。附加地或可选地,第一偏振器(例如,偏振特定的滤光器982)可以位于照射源的光路的开始处以提供光的初始偏振。第二偏振器(例如,偏振特定的滤光器984)可以在光进入成像装置920之前被定位在光路处。第二偏振器可以从第一偏振器旋转90°(例如,偏振器982、984可以是“交叉”的)。结果,将用从角膜反射的第一偏振的一些光以第一偏振照射眼睛。该光将不会穿过相机附近的偏振器984。然而,从视网膜反射的光将包括第二偏振。同样地,从视网膜漫反射的光将穿过相机附近的偏振984,并将使相机能够捕获视网膜的图像。由此,在这样的配置中,可以减少或消除从眼睛(例如,从角膜)接收到的可能进入成像装置920的不希望的光。其他配置也是可能的。例如,用于将来自光源960的光耦合到波导940中的偏振选择耦入光学元件942和用于将光从波导中耦出至相机920的偏振选择耦出光学元件可被采用以具有不同的偏振敏感特性。例如,偏振选择耦入光学元件可以选择性地使具有第一偏振的来自照射源的光转向到波导中,而耦出光学元件可以选择性地将具有第二不同偏振的光从波导转向至相机。效果可以再次是减少或去除在进入成像装置920之前从眼睛(例如,从角膜)接收到的不希望的光。
本文讨论了能够使用目镜950收集光以对视网膜成像的各种成像系统900。然而,成像系统900可以被配置为对眼睛的其他部分(诸如眼睛的前部)成像。图16示出了成像系统900如何可以用于对眼睛210的前部(例如,角膜)进行成像。成像系统900可以包括上述示例成像系统900的一个或多个元件。另外,示例性成像系统900可包括一个或多个有焦度的光学元件或透镜,例如具有光焦度的有焦度的折射光学元件980、990。例如,可以将正光焦度透镜或正透镜980设置在眼睛210和目镜之间的目镜950的近侧(例如,更靠近眼睛210)。负光焦度透镜或负透镜990可以设置在目镜和用户前方的环境之间的在目镜950的远侧。透镜980、990中的一个或两个可以是可变焦元件(例如,变焦透镜)和/或可以包括液晶元件。在一些设计中,透镜980、990中的一个或两个包括菲涅耳透镜。透镜980、990可以结合液晶以产生菲涅耳透镜功能。这样的功能可以允许透镜980、990中的一个或两个的可变聚焦。在一些设计中,透镜980、990中的一个或多个可以与目镜950集成和/或制造(例如,形成)在目镜950之上或之中。
在各种实施例中,耦合光学元件944被配置为使从眼睛210反射的准直光转向到光波导中以在其中被引导。因此,正透镜980可以被配置为准直从眼睛210反射的光,诸如眼睛的前部(例如,角膜)。因此,正透镜980可以具有等于或基本上等于透镜到眼睛210要被成像的部分(例如,角膜)的距离的焦距。
负透镜990可以具有与正透镜980相似或相同的光焦度,以补偿或抵消正透镜的光焦度。以此方式,来自环境(例如,波导940的远端)的光可以穿过负透镜990、目镜950和正透镜980,其中由这两个透镜引入的光焦度基本上没有净变化。由此,负透镜990可以被配置为抵消或取消正透镜980的光焦度,使得当观看目镜950前方的环境时用户将不会体验到正透镜的光焦度。负透镜990还将抵消正透镜980的作用,以使佩戴者前方环境中的对象的图像反转。
图16示出了入射在角膜上的从其散射的光928。成像系统900可以被配置为捕获从角膜反射的该光988。例如,正透镜980可以收集从角膜散射的光988的一部分并使该光988准直。由正透镜980准直的该光988入射到耦合光学元件944上,该耦合光学元件被配置为以大于波导的临界角的角度使准直光转向到波导940中,使得光通过TIR在其中被引导。耦合光学元件944、耦出光学元件952和/或波导940可以如上所述。所产生的耦出光906可以由耦出光学元件952从波导940引出到相机(未示出)。
图16示出了诸如准直光的光928,其可以来自如上所述的目镜950。照射源960可以将光耦合到波导940中,并且耦合元件944可以将来自照射源960的从波导耦出。耦合元件944可以被配置为使作为准直光的光从波导940耦出。该光照射眼睛的前部(例如,角膜)并从其散射。如上所述,该散射光988可以由正透镜980和成像系统900收集以形成眼睛210的前部的图像。同样如上所述,被引导至眼睛210上的照射928可能是不可见的(例如红外)光。
图16还示出了用于照射眼睛210的可选布置。在一些设计中,诸如LED或发射器的一个或多个光源934可以相对于眼睛210设置以在其上引导光,而不经由TIR引导通过波导940并引导至眼睛210。在一些实现方式中,目镜950或波导940不在一个或多个光源934和眼睛210之间的光路中。在一些设计中,可以以眼睛附近和/或周围的图案(例如,圆形或环状图案)布置多个这样的光源934。在一些设计中,光源934的图案可以限定与一个或多个透镜980、990的光轴平行(例如,同轴)的照射轴。一个或多个光源934可以类似于上面描述的一个或多个光源960并且可以例如是脉冲化的。类似地,一个或多个光源934可以包括诸如红外LED的红外光源或另一种类型的不可见光。可选地,一个或多个光源可以包括发射可见光的可见光源。或者,一个或多个光源可以发射可见光和不可见光(例如,红外光)。
图17示出了另一示例成像系统900,其被配置为对眼睛210的一部分(例如眼睛的前部(例如角膜))成像。与图16所示的透射光学元件(透镜)980相比,图17所示的成像系统900采用被配置为使来自眼睛的光准直的反射光学元件996。反射光学元件将具有比透射光学元件小的像差,色差通常不适用于反射光学元件,例如图17中所示的反射器996。因此,通过使用反射表面收集来自眼睛210的光,可以在眼睛的捕获到的图像中引入更少(例如,色差)的像差。
图17示出了例如成像系统900,其包括具有波长相关的反射涂层998的弯曲的透射光学元件996。弯曲的透射光学元件996可以设置在波导940的远端(在目镜950的环境侧)。因此,弯曲的透射光学元件996可以设置在佩戴者前方的环境与波导940和/或耦合光学元件944之间。类似地,波导940和/或耦合光学元件944可以设置在弯曲的透射元件996和眼睛210之间。
波长相关的反射涂层998可以被配置为反射特定波长或波长范围的光。在一些实现方式中,例如,波长相关的反射涂层998可以被配置为反射一定波长范围内的不可见光(例如,红外光),而波长相关的反射涂层998可以被配置为透射可见光。在一些情况下,波长相关的反射涂层998可以设置在弯曲的透射光学元件996的表面上。
如上所述,在各种设计中,耦合光学元件944被配置为将从眼睛210反射的准直光转向到波导940中以在其中被引导。因此,反射光学元件996可以被配置为准直从眼睛210(诸如眼睛的前部(例如,角膜))反射的光。因此,弯曲的反射光学元件996可以具有用于从波长相关的反射涂层998反射的入射在弯曲的反射光学元件996的近侧上的光的正光焦度。特别地,在各种设计中,反射光学元件994可以具有焦距,该焦距等于或基本上等于从反射光学元件996到眼睛210要成像的部分(例如角膜、虹膜等)的距离。焦距的示例值可以是例如2cm至8cm。在一些实现方式中,焦距在4cm和6cm之间。在一些设计中,焦距约为5cm。焦距可以在由这些值中的任何值形成的任何范围内或者可以在不同的设计中在此类范围之外。
在各种实现方式中,反射光学元件996被设置在目镜前方的目镜950的远侧。因此,反射光学元件996被设置在目镜950与用户前方的环境之间。类似地,目镜950被设置在反射光学元件996和眼睛210之间。
弯曲的透射光学元件996可以具有弯曲的反射表面,该弯曲的反射表面具有任何形状的曲率。在一些实现方式中,表面是旋转对称的。在一些实现方式中,表面可以是球形或非球形(例如,抛物线形)。非旋转对称形状也是可能的。然而,在各种设计中,反射表面具有正光焦度。反射光学元件996可以包括例如至少用于某些波长和/或偏振的凹面镜。
弯曲的透射光学元件996可以被配置为在传输时具有可忽略的焦度。同样地,弯曲的透射光学元件996可以被配置为透射光而不引入会聚或发散。在一个示例中,弯曲的透射光学元件996可具有与外半径的曲率基本相同的内半径的曲率。薄的光学元件996可以例如对于穿过其透射的光减小光学像差、可以更轻和/或更紧凑。
在各种设计中,反射光学元件996包括透射可见光的材料,使得用户可以看到佩戴者前方的环境。在一些情况下,为了增强透射,弯曲的透射光学元件996可以在外表面(例如,远端表面)上涂覆有抗反射涂层。述抗反射涂层可以被配置为减少例如诸如红色、绿色和/或蓝色光的可见光的反射。然而,反射光学元件996可以被配置为反射从眼睛210散射的光的一部分以形成眼睛的图像。因此,反射光学元件996可以关于不同的光而不同地操作。例如,反射光学元件996可以关于不同的波长而不同地操作。反射光学元件996可以被配置为反射红外光并透射可见光。
如上所述,一个或多个光源934可以被配置为用红外光照射眼睛210。如图17中示意性示出的,从眼睛210(例如,角膜)反射的结果光988可以发散。弯曲的透射光学元件996可以被设置为接收从眼睛(例如,角膜、虹膜)反射的光988。波长相关的反射涂层998可以被配置为反射从眼睛反射的光988,因为用于照射眼睛的波长照射与被弯曲的透射光学元件996上的反射涂层反射的波长相同(例如850nm)。例如,眼睛可以用红外光(例如,850nm)照射,并且弯曲的透射光学元件996可以被配置为反射红外光(例如850nm)并通过可见光。弯曲的透射光学元件996的形状也可以被配置为准直从眼睛反射的光988,并且将光反射到耦合光学元件944,该耦合光学元件944将准直的光转向到波导940中以在其中被TIR引导。
在图17中,如在一些其他设计中一样,可以相对于眼睛210设置例如LED或发射器的一个或多个光源934以在其上引导光,而不经由TIR引导通过波导940并引导到眼睛210上。在一些实现方式中,目镜950或波导940不在一个或多个光源934与眼睛210之间的光路中。在一些设计中,多个这样的光源934可以以眼睛附近和/或周围的图案(例如,圆形或环状图案)布置。在一些设计中,光源934的图案可以限定与一个或多个透镜980、990的光轴平行(例如,同轴)的照射轴。一个或多个光源934可以类似于上面描述的一个或多个光源960并且例如可以是脉冲化的。类似地,一个或多个光源934可以包括诸如红外LED的红外光源或另一种类型的不可见光。然而,可以使用其他类型的光源。
图18示出了另一示例成像系统900,其被配置为对眼睛210的一部分(例如眼睛的前部(例如,角膜))成像。在图18所示的实现方式中,采用偏振选择来帮助控制从眼睛反射的光的路径。特别地,在各种设计中,耦合光学元件944是偏振选择的。例如具有第一偏振的光透射通过耦合光学元件944,而具有第二不同偏振的光通过耦合光学元件944转向至波导940中以通过TIR被耦合在其中。因此,在各种实现方式中,用偏振光照射眼睛210,或者将偏振器(未示出)设置在眼睛与波导940之间,使得入射到波导上的来自眼睛的光被偏振。例如,发射器934可以发射偏振光,或者偏振器可以被设置在发射器934的前方,使得眼睛210被偏振光照射。因此,在各种设计中,由光耦合元件944接收的从眼睛210入射和/或反射的偏振光的偏振可以是第一偏振,使得所述光被引导到反射器996。
同样地,在各种实现方式中,耦合光学元件944(和/或耦出光学元件952)被配置为透射具有第一偏振状态(例如第一线性、圆形或椭圆偏振状态(例如,p-偏振、左旋圆或椭圆偏振等))的光,并将具有第二偏振状态(例如第二线性、圆形或椭圆(例如,s偏振、右旋圆或椭圆偏振等))的光分别转向到波导中和/或从波导转出。在一些实现方式中,眼睛照射器934可以仅或主要发射第一偏振(例如,p偏振)或者进一步包括被配置为仅透射第一偏振状态(例如,p偏振)的光的偏振修改元件(例如,偏振器)。另外,耦合光学元件944和/或耦出光学元件952可以被配置为将第二偏振(例如,s偏振)的光分别转向到波导中和/或从波导转出。
与图17所示的成像系统900相似,图17所示的弯曲反射器998的成像系统900包括具有波长相关的反射涂层998的弯曲的透射光学元件996。波长相关的反射涂层998可以被配置为反射特定波长或波长范围的光。在一些实现方式中,例如,波长相关的反射涂层998可以被配置为反射一定波长范围内的不可见光(例如,红外光),同时波长相关的反射涂层998可以被配置为透射可见光。在一些情况下,波长相关的反射涂层998可以设置在弯曲的透射光学元件996的表面上。
在各种实现方式中,弯曲的透射光学元件996设置在目镜的前方的目镜950的远侧。因此,反射光学元件996设置在目镜950与用户前方的环境之间。类似地,目镜950设置在反射光学元件996和眼睛210之间。
因此,来自眼睛210的具有第一偏振(例如,p偏振)的光入射到耦合光学元件944上,并穿过其中到达弯曲的透射光学元件996。成像系统900还包括偏振修改光学元件978,例如延迟器(例如,四分之一波长延迟器)。该延迟器978是透射性的并且对通过其透射的光赋予四分之一波长的延迟。该光入射到弯曲的透射光学元件996上并从弯曲的透射光学元件996反射。波长相关的反射涂层998可以被配置为反射从眼睛反射的波长的光。因此,该光从弯曲的透射光学元件996的弯曲表面反射并被准直。该准直的光再次穿过延迟器978,从而对通过其透射的光施加另一四分之一波长的延迟。在通过延迟器的这两个光上引入的延迟(例如,全延迟波)使偏振旋转。因此,在第一次穿过上透射通过偏振选择耦合光学元件944的第一偏振(例如,p偏振)被转换成第二偏振(s偏振)并且被转向到波导940中以通过TIR被引导到相机920。如上所述,在各种设计中,耦合光学元件944被配置为将从眼睛210反射的准直光转向到波导940中以在其中被引导。因此,反射光学元件996可以被配置为准直从眼睛210反射的光,诸如眼睛的前部(例如,角膜)。因此,弯曲的反射光学元件996可以具有正光焦度。特别地,在各种设计中,反射光学元件994可以具有等于或基本上等于从反射光学元件996到眼睛210要成像的部分(例如,角膜、虹膜等)的焦距。焦距的示例值可以是例如2cm至8cm。在一些实现方式中,焦距在4cm和6cm之间。在一些设计中,焦距约为5cm。
在各种设计中,反射光学元件996可以包括被配置为反射光的弯曲表面。在某些情况下,弯曲表面可以是球形或旋转对称的。反射光学元件996可以包括至少用于一些波长和/或偏振的凹面镜。
在各种设计中,反射光学元件996包括透射可见光的材料,使得用户可以看到佩戴者前方的环境。因此,设置在弯曲的透射光学元件996的表面上的波长相关的反射涂层998可以透射可见光或可见光的至少特定波长。弯曲的透射光学元件996也可以在外表面(例如,远端表面)上涂覆有抗反射涂层。抗反射涂层可以被配置为减少红色、绿色和/或蓝色光的反射。然而,反射光学元件994可以被配置为反射从眼睛210散射的光的一部分以形成眼睛的图像。因此,反射光学元件996可以关于不同的光而不同地操作。例如,反射光学元件996可以关于不同偏振状态(和/或波长)的光而不同地操作。反射光学元件996可以被配置为透射可见光并且反射红外光。
如图17所示,例如图18中的LED或发射器的一个或多个光源934可以相对于眼睛210设置以在其上引导光,而不经由TIR引导通过波导940并引导到眼睛210上。因此,在一些实现方式中,目镜950或波导940不在一个或多个光源934和眼睛210之间的光路上。在一些设计中,多个这样的光源934可以以眼睛附近和/或周围的图案(例如,圆形或环状图案)布置。一个或多个光源934可类似于上述一个或多个光源960,并且例如可被脉冲化。类似地,一个或多个光源934可以包括诸如红外LED的红外光源或另一种类型的不可见光。特别地,在各种实现方式中,光源934可以发射由波长相关的反射涂层998和/或弯曲的透射光学元件996反射的光。然而,可以使用其他类型的光源。
尽管偏振选择耦合光学元件944被配置为依赖于入射在其上的线性偏振的类型而是偏振选择的,但是其他偏振选择耦合光学元件可以对其他类型的偏振状态(诸如不同类型的圆或椭圆偏振)是偏振选择的。偏振选择耦合光学元件944可以例如被配置为使得诸如第一圆形或椭圆偏振(例如,左旋偏振或LHP偏振)的第一偏振透射通过偏振选择耦合光学元件944、使得例如第二圆形或椭圆偏振(例如,右旋偏振或RHP)的第二偏振被转向到光波导中,反之亦然。这种偏振选择耦合光学元件944可以包括诸如胆甾型液晶的液晶。在以下部分中讨论了一些液晶光学元件的示例:标题为“Cholesteric Liquid Crystal Mirror(胆甾型液晶镜)”的部分;2017年12月7日提交的标题为“DIFFRACTIVE DEVICES BASED ONCHOLESTERIC LIQUID CRYSTAL(基于胆甾型液晶的衍射器件)”美国公开No.2018/0164627;2018年2月22日提交的标题为“DISPLAY SYSTEM WITH VARIABLE POWER REFLECTOR(具有可变焦度反射器的显示系统)”的美国公开No.2018/0239147;2018年2月22日提交的标题为“VARIABLE-FOCUS VIRTUAL IMAGE DEVICES BASED ON POLARIZATION CONVERSION(基于偏振转换的可变焦点虚拟图像装置)”的美国公开No.2018/0239177;处于全部目的,通过引用将其全部内容合并于此。
诸如圆偏振器的偏振修改元件或延迟器可以设置在眼睛与偏振选择耦合光学元件944之间,以将从眼睛反射的光转换为第一偏振(例如,LHP)。LHP光将穿过偏振选择耦合光学元件944、从反射器998反射、将偏振改变为RHP并且被偏振选择耦合光学元件944转向到波导中以到达相机。
在一些实现方式中,反射器996在其反射率上可以是偏振选择的,使得仅反射特定偏振状态的光和/或透射不同偏振状态的光。这样的光学元件可以包括液晶,例如胆甾型液晶。在以下部分中讨论了这种光学元件的示例:标题为“Cholesteric Liquid CrystalMirror(胆甾型液晶镜)”的部分;2017年12月7日提交的标题为“DIFFRACTIVE DEVICESBASED ON CHOLESTERIC LIQUID CRYSTAL(基于胆甾型液晶的衍射器件)”美国公开No.2018/0164627;2018年2月22日提交的标题为“DISPLAY SYSTEM WITH VARIABLE POWERREFLECTOR(具有可变焦度反射器的显示系统)”的美国公开No.2018/0239147;2018年2月22日提交的标题为“VARIABLE-FOCUS VIRTUAL IMAGE DEVICES BASED ON POLARIZATIONCONVERSION(基于偏振转换的可变焦点虚拟图像装置)”的美国公开No.2018/0239177;处于全部目的,通过引用将其全部内容合并于此。这样的光学元件可以反射诸如第一圆形或椭圆偏振状态(左旋圆形或椭圆偏振)的第一偏振状态的光并且透射诸如第二圆形或椭圆偏振状态(例如,右旋圆形或椭圆偏振)的第二偏振状态的光,反之亦然。在一些实施例中,液晶设置在反射器996的弯曲表面上,使得在反射时,反射器具有诸如正光焦度的光焦度。在各种其他实现方式中,液晶光学元件可以是平坦的或平面的。例如,液晶可以设置在平坦或平面的衬底或层上。尽管是平坦的,但是光焦度可以被包括在液晶光学元件中。这样的元件可以被称为胆甾型液晶反射透镜。因此,来自眼睛的光可以被准直并反射到耦合光学元件998。例如,反射器可以反射第一偏振状态(例如,左旋圆形或椭圆形)的光并且透射第二偏振状态(例如,右旋圆形或椭圆偏振)的光。因此,眼睛210被左旋圆偏振光照射,或者从眼睛反射的光透射通过偏振器(例如,圆形或椭圆偏振器),该偏振器透射具有第一偏振的光(例如,左旋圆形或椭圆偏振光)。耦合光学元件944也可以是偏振选择的,并且可以透射LHP光且将RHP光转向到波导中。来自眼睛的LHP光穿过耦合光学元件944。该透射的LHP光也入射在波长选择液晶反射器996上并从其反射。在某些设计中,波长选择的液晶反射器996在反射时将第一偏振状态(例如,LHP)转换为第二偏振状态(例如,RHP)。该第二偏振状态(例如,RHP)的光被引导到耦合光学元件944,该耦合光学元件944将第二偏振状态(RHP)的光转向到波导940中并到达相机920。
在一些设计中,耦合光学元件944不包括液晶光栅,而是例如包括表面浮雕衍射光栅或全息光栅。如上所述,不包括胆甾型液晶的这些耦合光学元件944还可以包括体积衍射或全息光学元件或光栅。
因此,从眼睛散射的光被反射光学元件996反射回波导940,以通过耦合元件944耦合到波导中。然而,相反地,与第二偏振状态(例如,RHP)对应的来自佩戴者前方环境的非偏振光的一部分将透射通过反射光学元件996。由此,佩戴者可以通过反射光学元件996看到对象。
然而,在各种设计中,反射光学元件996在透射时将具有可忽略的焦度。例如,反射光学元件996可以在光学元件的两侧上具有相同曲率的弯曲表面,使得光学元件对于通过其透射的光的总焦度可以忽略不计。
如上所述,在各种实现方式中,反射光学元件996包括诸如在下面部分中讨论的胆甾型液晶反射透镜、胆甾型液晶反射元件:标题为“Cholesteric Liquid Crystal Mirror(胆甾型液晶镜)”的部分;2017年12月7日提交的标题为“DIFFRACTIVE DEVICES BASED ONCHOLESTERIC LIQUID CRYSTAL(基于胆甾型液晶的衍射器件)”美国公开No.2018/0164627;2018年2月22日提交的标题为“DISPLAY SYSTEM WITH VARIABLE POWER REFLECTOR(具有可变焦度反射器的显示系统)”的美国公开No.2018/0239147;2018年2月22日提交的标题为“VARIABLE-FOCUS VIRTUAL IMAGE DEVICES BASED ONPOLARIZATION CONVERSION(基于偏振转换的可变焦点虚拟图像装置)”的美国公开No.2018/0239177;处于全部目的,通过引用将其全部内容合并于此。这样的光学元件可以关于特定的波长或波长范围来操作。因此,可以通过胆甾型液晶反射元件对从眼睛反射的诸如红外光的光作用。然而,诸如来自环境的可见光的不在该波长范围内的光可以穿过胆甾型液晶反射元件而不会被胆甾型液晶反射元件操作。因此,胆甾型液晶反射元件具有对于从其通过的来自环境该可见光可忽略不计的焦度。
如上所述,在某些实现方式中,照射源960将光耦合到波导940中,该光从波导中转出以照射眼睛210。在这样的实施例中,耦合光学元件944可以是偏振选择的。例如,耦合光学元件944可以透射第一偏振(p偏振)并且透射第二偏振(s偏振)。
因此,如果来自照射源906的光传播通过波导940并且被耦合光学元件944转向,则该照射将是s偏振的。偏振修改光学元件(例如,四分之一波长延迟器)可以设置在波导940和眼睛210之间,以引起从眼睛反射的偏振光的旋转。从眼睛210反射的来自光源960的光将两次穿过四分之一波长延迟器,结果,由耦合元件944从波导射出的以照射眼睛的s偏振光将被转换为p偏振光。
该p偏振光将透射穿过耦合光学元件944和波导,并入射在反射光学元件996上。
成像系统900可以进一步包括第二偏振修改元件978,该第二偏振修改元件978可以包括例如如上所述的延迟器或波片。该延迟器可以包括例如四分之一波长延迟器。第二偏振修改元件978可以设置在波导和反射器996之间的波导940的远端。第二偏振修改元件978也可以设置在耦合元件光944和反射器996之间。透射穿过耦合元件944的来自眼睛210的光(p偏振)穿过第二偏振修改元件978而被转换成圆偏振。如果反射器996反射圆偏振光,则该光在再次穿过偏振修改元件978之后将被反射回波导940。两次穿过该偏振修改元件(例如,四分之一波长延迟器)978将使光转换成s偏振光,该s偏振光将被耦合元件944转向到波导中以在其中被引导并到达相机(未示出)。
如图18所示,从眼睛210反射的光988是发散的。该光入射到弯曲的或具有正光焦度的反射器996上,并且可以由此被准直。被配置为使准直转向到波导940中的耦合光学元件944将因此使来自弯曲的反射光学元件996的该准直光引导朝向成像装置920(未示出)。因此,被弯曲的反射光学元件996准直的从眼睛210反射的光被耦合到波导940中并在其中被引导朝向耦出光学元件952。耦出光学元件952可以被配置为将光从目镜950引导出并到达到相机(未示出)。
成像系统的配置可以有各种各样的变型。可以采用不同类型的反射器996和耦合元件944。反射器996和耦合元件944可以例如被配置为关于线性偏振光或圆形或椭圆偏振光来操作。如所讨论的,反射器996具有光焦度。反射器996和耦合元件944可以包括胆甾型液晶光栅反射器和/或具有无光焦度的透镜。诸如延迟器的偏振修改元件978可以被包括在耦合元件944与反射器之间和/或耦合元件944与眼睛之间。在一些实施例中,诸如圆偏振器或线性偏振器的偏振器可以设置在眼睛与耦合元件944之间。如果例如非偏振光从眼睛反射,则偏振器(例如,圆偏振器或线性偏振器)可以设置在眼睛和耦合元件944之间。在一些这样的情况下,耦合元件944是偏振选择的。
在诸如图17和18所示的配置中,其中从眼睛反射的光穿过波导940到达弯曲的反射光学元件996以被准直并重定向回到波导,从而引入背景噪声。该背景噪声是由最初从眼睛通过耦合光学元件944的光产生的。如上所述,耦合光学元件944可以被配置为将准直光转向到波导940中以在其中被引导并到达形成图像的相机920。然而,耦合光学元件944将使入射在其上的一些非准直光转向。因此,在最初穿过耦合光学元件944和波导940到达弯曲的反射光学元件996时,从眼睛反射的非准直(发散)的光中的一些将通过耦合光学元件944耦合到波导中,并且将背景噪声贡献给由相机920形成的眼睛的图像。该噪声将叠加在由弯曲的反射光学元件996逆向反射的准直光形成的图像上,该准直光由耦合光学元件944耦合到波导中并在其中被引导且到达相机920。
在某些设计中,可以从图像中减去该噪声。从信号中减去噪声的过程可能涉及(a)测量在最初穿过耦合光学元件944到达弯曲的反射光学元件996时由耦合光学元件944耦合的被转向且到达相机920光量(称为N)和(b)测量当光穿过耦合光学元件944和波导940到达弯曲的反射光学元件996、被准直并被反射回耦合光学元件且被转向到相机920时的相机920处的总信号。该总信号还将包括一些噪声N,因为从眼睛反射的非准直光将已经穿过耦合光学元件944到达弯曲的反射光学元件996,因此非准直光中的一些将被耦合光学元件944转向到相机920。如果可以将噪声N与包含叠加在眼睛图像上的噪声的总信号T分开测量,则可以从总信号T中减去噪声N,如以下式子所示:
I=T–N
其中I代表去除了噪声分量N的图像。
可以以各种方式获得以上两个测量(a)和(b)。例如,如图19所示,可以在弯曲的反射光学元件996与波导940和耦合光学元件944之间设置快门936。该快门936可以被配置为在快门处于第一状态时阻挡光以及在快门处于第二状态时透射光。该快门936可以包括例如液晶快门。
因此,当快门936处于从眼睛210反射的光入射到耦合光学元件944上并穿过其朝向弯曲的反射光学元件996的第一状态时,可以测量噪声分量N,然而,可以通过闭合的快门防止噪声分量N达到弯曲的反射光学元件。如上所述,从眼睛210反射的光中的一些尽管主要是未被准直的,但是确实耦合到耦合光学元件944中并被转向到波导中且在其中被引导到达相机920。如上所述,该光图像的形成没有贡献,但会产生背景噪声。当快门936关闭时,相机920可以记录该噪声N。
当快门936处于快门打开的第二状态时,可以测量包括噪声N和图像两者的总信号T。从眼睛210反射的光再次入射到耦合光学元件944上。从眼睛210反射的该光中的一些尽管主要是未被准直的,但耦合到耦合光学元件944中并被转向到波导中且在其中被引导到达相机920。然而,从眼睛210反射的该光中的大部分穿过耦合光学元件944、通过打开的快门936并到达弯曲的反射光学元件996。弯曲的反射光学元件996准直该光的至少一部分并使其反射回耦合光学元件944,该耦合光学元件944将准直后的光转向至波导920中并将其引导到相机920,以形成眼睛210的图像。相机920可以捕获眼睛210的图像。
与相机920通信的处理电子器件(例如,处理电子器件140)可以接收当快门936处于第一关闭状态时测量的噪声分量N以及当快门936处于第二打开状态时测量的总信号T并且,可以使两者相减(T-N)。以这种方式,可以从总的图像信号T中减去噪声N,该噪声N由在初次穿过耦合光学元件944时被耦合到耦合光学元件944中的从眼睛210反射的非准直光所贡献的。处理电子器件可以经由有线电子信号与相机920通信。附加地或可选地,处理电子器件可以使用一个或多个远程接收器与相机920通信。处理电子器件可以远程地驻留(例如,云计算装置、远程服务器等)。
可以采用其他方式来执行(a)和(b)的测量以获得N和T并从T中减去N。例如,如果弯曲的反射光学元件996是波长选择性的,如图18所示,可以在不同的时间用不同波长的光照射眼睛。例如,为了执行测量(a)并量化噪声N,可以用未被弯曲的反射光学元件996反射的波长照射眼睛。然而,为了执行测量(b)并量化总信号T,可以用被弯曲的反射光学元件996反射的波长照射眼睛。然后,可以从总T中减去噪声N,如上所述(例如,T-N)。
图20-20E示出了示例成像系统900,如上所述,该成像系统900被配置为使用波长调制来测量和减去噪声分量N。图20A-20E中的成像系统900包括波长选择性的弯曲的透射光学元件996(例如以上参考图17和图18描述的)。例如,弯曲的透射光学元件996在其弯曲表面上具有波长相关的反射涂层998。成像系统900还可包括被配置为照射眼睛210的一个或多个光源或照射源(未示出)。一个或多个光源可被配置为发射红外光。然而,一个或多个光源可以被配置为在不同的时间发射不同的颜色或波长的光。这种波长调制可以使得能够单独地测量N,以便从总信号T中减去N。
在各种实现方式中,例如,一个或多个照射源960、934可以被配置为在第一状态下发射由弯曲的反射光学元件反射的一个或多个波长λ反射,并且在第二状态下发射未被反射的一个或多个波长λ未反射。在第二状态下,发射不超过可忽略的量的波长λ反射,该波长被弯曲的反射光学元件反射。类似地,在第一状态下,发射不超过可忽略的量的未被反射的波长λ未反射
在一些示例中,反射波长λ反射可以在大约800nm与950nm之间。反射波长λ反射可以在约835nm至915nm之间。反射波长λ反射可以在约840nm至870nm之间。在一些设计中,反射波长λ反射约为850nm。来自一个或多个光源960的光发射928可以照射眼睛。
如图20B所示,具有未被弯曲的反射光学元件944反射的波长λ未反射的光988(且不超过可忽略的量的被弯曲的光学元件反射的光λ反射)反射离开眼睛210的一部分(例如,角膜)。因为该光包括未被弯曲的反射光学元件944反射的波长λ未反射,所以光线916被示出传播通过弯曲的反射光学元件996到达用户前方的环境。
尽管入射在耦合光学元件944上的光988未被准直,但是耦合光学元件将至少一些光914耦合到波导940中以被引导到相机920。因此,相机920可以捕获与噪声分量N对应的图像(图像#1),该图像是由非准直光产生的,该非准直光在最初穿过到达弯曲的反射光学元件996时被耦合光学元件944转向。该图像(图像#1)是背景噪声且确实不是可识别的眼睛的图像。处理电子器件140被示为接收该第一图像(图像#1)。
在图20C-20E中,照射源(未示出)发出被弯曲的反射光学元件反射的一个或多个波长λ反射,且不超过可忽略的量的波长λ未反射未被反射。该波长λ反射可以是例如850nm。
如图20C所示,,在第一次穿过耦合光学元件944时入射在耦合光学元件944上的从眼睛210反射的光988中的一些被耦合光学元件944耦合到波导940中(如图20B中所示)并且被引导朝向相机920。另外,选择性地反射波长λ反射的光的弯曲的透射光学元件996反射并准直从眼睛210反射的入射在弯曲的透射光学元件上的非耦入光918。如图20E中所示,耦合光学元件944使该准直的反射光转向并使其耦合到波导940中且朝向相机920。图20E示出到达相机920的两个分量,在第一次穿过耦合光学元件944时入射到耦合光学元件944上的从眼睛210反射的光988(其被耦合光学元件耦合到波导940中),以及被耦合光学元件耦合到波导中的被弯曲的透射光学元件996反射和准直的光。相机920可以捕获与该总图像分量T对应的图像(图像#2)。处理电子器件140被示为接收该第二图像(图像#2)。
如上所述,处理电子器件可以从图像中减去噪声T-N。在此示例中,可以从图像#2中减去图像#1。因此,处理电子器件140可以被配置为基于第一图像来修改第二图像。但是,其他方法也是可能的。例如,处理电子器件140可以被配置为创建新图像,该新图像表示具有减小的光学噪声的第二图像的版本。用于从图像中减去噪声的实现方式可以在上述实现方式中使用。例如,图10、图11A-11E和/或图12A-12E所示的实现方式可以包括快门936和/或具有波长相关的反射涂层998的弯曲的透射光学元件996,该反射涂层998被配置为选择性地反射非耦入光912并将光引导到成像装置920。
如上所述,在以下情况下获得图像#1:照射具有未被弯曲的反射光学元件反射的一种或多种波长λ未反射的光,且不超过可忽略的量的波长λ反射被反射。在以下情况下获得图像#2:照射具有被弯曲的反射光学元件反射的一种或多种波长λ反射的光,且不超过可忽略的量的波长λ未反射未被反射。因此,一个或多个照射源960、934可以被配置为调制波长。例如,在某些设计中,一个或多个照射源960、934可以包括第一照射源,该第一照射源被配置为输出未被弯曲的反射光学元件反射的一种或多种波长λ未反射,且不超过可忽略的量的波长λ反射被反射。一个或多个照射源可以进一步包括第二照射源,该第二照射源被配置为输出被弯曲的反射光学元件反射的一种或多种波长λ反射,且不超过可忽略的量的波长λ未反射未被反射。第一和第二照射源的强度可以交替地增加和减少、打开和关闭、衰减和不衰减、通过和阻挡,以提供照射眼睛的光的波长的调制。例如,在第一时间间隔期间,第一照射源可以被阻挡而第二照射源未被阻挡。在随后的第二时间间隔期间,第二照射源可以被阻挡而第一照射源未被阻挡。可以重复此过程以提供照射眼睛的光的波长的调制。在其他设计中,光源的波长可以被调谐和去调谐以使波长在λ反射和λ未反射之间来回移动。其他布置是可能的。
如上所述,成像系统900可以被包括在诸如增强现实显示器的头戴式显示器中,该显示器还通过用目镜950收集光来提供对眼睛进行成像的能力。这样的成像系统900可以用于眼睛跟踪。可以获得眼睛的视网膜或眼睛的前部的多个图像。可以从这些图像中确定眼睛的移动和/或重新定位以跟踪眼睛的位置和/或取向。这些成像系统也可以用作生物成像和/或用于识别用户。例如,可以获得并记录用户眼睛(例如视网膜或虹膜)的图像。可以在稍后的时间获得佩戴者的眼睛(例如,视网膜或虹膜)的后续图像。可以将两个图像进行比较以确定在随后的实例中的佩戴者是否是在第一实例中的佩戴者。然而,成像系统的其他用途是可能的。
尽管以上可以将照射系统描述为基于波导的并且包括一个或多个波导,但是可以采用其他类型的光转向光学元件代替波导。这种光转向光学元件可以包括转向特征,以将光从光转向光学元件射出,例如,射到空间光调制器上。因此,在本文描述的任何示例以及下文的任何示例中,对波导的任何引用都可以用光转向光学元件代替波导来替换。这种光转向光学元件可以包括例如偏振分束器,例如偏振分束棱镜。
如上所述,本文描述的系统可以允许生物数据的收集和/或生物识别。例如,眼睛或其部分(例如,视网膜)可以被成像以提供这种生物数据和/或生物识别。当用户(大概是同一用户)佩戴头戴式显示系统时,可以在不同时间获得诸如视网膜的眼睛图像。这样的图像的集合可以被记录在例如数据库中。可以分析这些图像以收集生物数据。这样的生物数据可能对监视用户的健康或医疗状况是有用的。可以通过对患者(例如,患者的眼睛(例如,视网膜))进行成像来监视不同的医学参数。可以记录医疗参数并将其与在用户佩戴头戴式显示系统时获得的后续测量进行比较。
另外,如果人开始佩戴头戴式显示系统并且捕获到与数据库中存储的图像不匹配的用户眼睛的图像,则可以得出结论,即,当前佩戴该头戴式显示系统的人与先前的用户不同。这在确定目标用户是佩戴头戴式耳机还是该头戴式耳机由新用户佩戴时是有用的。这样的特征可以允许某些医疗、安全和/或使用便利的应用或功能。例如,头戴式显示器可以被配置为基于佩戴者的眼睛的特性来识别佩戴者。例如,系统可以被配置为基于佩戴者的视网膜(例如,血管)、角膜或其他眼部特征来确定个人。例如,在一些实现方式中,可以为特定佩戴者确定标记的系列。基于标记的系列,系统可能能够确定先前的用户正在佩戴头戴式耳机,或者可选地,确定另一用户正在佩戴头戴式耳机。标记可以包括用户的角膜的形状或中心、用户的视网膜中的血管的配置、来自角膜的光的反射的强度和/或位置、眼睛的方面的形状和/或任何其他生物标记。在某些实现方式中,可以确定混淆矩阵。如上文在例如使用位于各种位置处的虚拟/注视目标开发视网膜映射的讨论中(例如,参见图13B)所讨论的,系统可以具有在一组预定方向上的用户观看或眼睛姿势并且开发与每个方向或眼睛姿势相关联的眼睛或眼睛的部分(例如,角膜、视网膜等)的特征矩阵。使用这样的矩阵,系统可以确定个人的身份。其他方法是可能的。
类似地,如上所述,系统的多种配置是可能的。例如,图21示出了一个示例目镜900,该目镜900可用于在对用户的眼睛成像时同时将光投射到用户的眼睛中。所示的目镜900包括耦合光学元件2104、光分布元件2108和合光(light consolidating)元件2116、以及位于耦合光学元件2112的相对侧上的耦出光学元件2120。这些光学元件中的每一个可以设置在波导2102的内部或之上。波导2102可以对应于例如本文所述的波导670、680、690中的一个(例如,参见图9A-9C)。耦入光学元件2104可以对应于本文所述的耦合光学元件700、710、720中的一个和/或对应于耦入光学元件942(参见例如图10)并且可以被配置为将来自投影仪的图像内容注入到波导中和/或注入来自光源960的照射。光分布元件2108可以对应于本文所述的光分布元件730、740、750中的一个(例如,参见图9A-9C并且可以用于将光分布在给定的方向上以及将来自耦入光学元件2104的光重定向到耦合光学元件2112。耦合光学元件2112可对应于本文所述的耦合光学元件944(例如,参见图10)。在一些设计中,耦合光学元件2112包括本文关于耦出光学元件800、810、820描述的功能(参见图9A-9C)。合光元件2116可被配置为从耦合光学元件2112接收的光的横向空间范围并且将所述光重定向到耦出光学元件2120。耦出光学元件2120可以对应于本文所述的耦出光学元件952(例如,参见图10)。
耦合光学元件2104可以设置在波导2102之内或之上,以便接收诸如来自投影仪(例如,图像投影仪930)和/或照射器(例如,光源960)的光。光可以经由波导2102被传递到相关联的光分布光学元件2108。耦入光学元件2104、光分布光学元件2108或耦合光学元件2112中的任何一个都可以设置在波导的主表面上(例如,在顶部或底部表面上)或设置在波导内。类似地,合光元件2116和/或耦出光学元件2120中的任何一个或组合可以设置在波导2102的主表面(例如,顶表面或两个主表面)上或设置在波导内。
耦合光学元件2112可以接收来自光分布元件2108的光(例如,经由TIR)并扩展光以进入用户的眼睛。由此,耦合光学元件2112可以被设置在用户的眼睛前方并且在其中投射图像内容。附加地或可选地,耦合光学元件2112可以被配置为将照射光提供到用户的眼睛之上和/或之中。
从眼睛反射的光(例如,来自照射源的照射光)可以被耦合光学元件2112反射和捕获。因此,在一些实施例中,耦合光学元件2112可以用于使从光分布元件2108接收的光耦出并且使从眼睛接收的光耦入到波导2102中。
在一些实施例中,耦合光学元件2112可以包括一个或多个衍射光学元件(DOE),使得耦合光学元件2112具有双功能。第一DOE(例如,光栅、全息区域)也可被配置为将光耦出,以及第二DOE可被配置为将来自眼睛的反射光耦入到波导2102中。在一些实施例中,第一和第二DOE在波导2102内叠加(例如,占据相同或近似相同的体积)。
可选地,在一些实施例中,耦合光学元件2112包括至少两个DOE,其堆叠在另一个DOE之上或前方。例如,参考图21,可以将耦合光学元件2112的第一DOE设置在上方,而将第二衍射元件设置在第一DOE的下方。在其他实现方式中,每个DOE的顺序可以颠倒。
胆甾型液晶镜
一些液晶处于称为手性相或胆甾相的相。在胆甾相中,液晶可以沿垂直于指向矢(director)的轴表现出分子的扭曲,其中分子轴平行于指向矢。如本文所述,胆甾型液晶(CLC)层包括处于胆甾相的多个液晶分子,该多个液晶分子在例如垂直于指向矢的方向(例如层深度方向)的方向上延伸,并沿例如顺时针或逆时针的旋转方向依次旋转或扭曲。手性结构中的液晶分子的指向矢可以表征为具有螺距(p)的螺旋,该螺距对应于层深度方向上的长度,其对应于手性结构中的液晶分子沿第一旋转方向通过一次完全旋转的净旋转角。换言之,螺距是指液晶分子经历完全的360°扭曲的距离。显示手征性的液晶也可以描述为具有扭转角或旋转角(φ),其例如可以指层法线方向上连续的液晶分子之间的相对方位角旋转,并且可以具有净扭转角或净旋转角,该净扭转角或净旋转角例如可以指跨指定长度(例如,手性结构的长度或液晶层的厚度)的在最上方的液晶分子和最下方的液晶分子之间的相对方位角旋转。如本文所述,手性结构是指处于胆甾相的多个液晶分子,该多个液晶分子在例如垂直于指向矢的方向(例如,层深度方向)的方向上延伸并在例如顺时针或逆时针的旋转方向上连续旋转或扭曲。一方面,手性结构中的液晶分子的指向矢可以表征为具有螺距的螺旋。
图22示出了根据实施例的包括多个均匀手性结构的胆甾型液晶(CLC)层1004的横截面侧视图。在CLC层1004中,在横向方向(例如,x方向)上相邻的手性结构具有类似排列的液晶分子。在所示的实施例中,手性结构1012-1、1012-2、…1012-i被类似地配置为使得位于大约相同的深度处的不同的手性结构的液晶分子,例如,最接近光入射表面1004S的液晶分子,具有相同的旋转角、位于大约相同深度处的连续液晶分子的连续旋转角、以及每个手性结构的液晶分子的净旋转角。
CLC 1004包括CLC层1008,其包括被布置为多个手性结构1012-1、1012-2、…1012-i的液晶分子,其中每个手性结构包括多个液晶分子,其中i是任何大于2的合适的整数。在操作中,当具有左旋圆偏振光束和右旋圆偏振光束的组合的入射光通过布拉格反射入射在CLC层1008的表面1004S上时,具有圆偏振旋向性中的一者的光被CLC层1004反射,而具有相反偏振旋向性的光透射通过CLC层1008而没有实质性的干涉。如本文和整个公开中所描述的,旋向被定义为沿传播方向观看。根据实施例,当光束1016-L、1016-R的偏振方向或偏振的旋向性匹配使得其具有与手性结构1012-1、1012-2、…1012-i的液晶分子相同的旋转方向时,反射入射光。如图所示,入射到表面1004S上的是具有左旋圆偏振的光束1016-L和具有右旋圆偏振的光束1016-R。在所示的实施例中,手性结构1012-1、1012-2、…1012-i的液晶分子连续地在入射光束1016-L、1016-R行进的方向上在顺时针方向(即,正x方向)上旋转,该方向与具有右旋圆偏振的光束1016-R相同的旋转方向。结果,具有右旋圆偏振的光束1016-R基本上被反射,而具有左旋圆偏振的光束1016-L基本上透射通过CLC层1004。
如上所述,通过将入射的椭圆或圆偏振光的偏振的旋向性与CLC层的手性结构的液晶分子的旋转方向匹配,可以将CLC层配置为布拉格反射器。此外,具有不同螺距的一个或多个CLC层可以被配置为具有高带宽的波长选择性布拉格反射器。基于本文关于各种实施例描述的概念,CLC层可以被配置为离轴或同轴镜,其被配置为选择性地反射例如红外波长(例如,近红外)的第一波长范围,同时透射例如可见波长的另一波长范围。
图23示出了根据各种实施例的采用胆甾型液晶反射器(CLCR)的眼睛跟踪系统2300的示例,该胆甾型液晶反射器(CLCR)例如为被配置为对观看者的眼睛302成像的波长选择性CLCR 1150。与以上关于图22描述的CLC层1004不同,波长选择性CLCR 1150中的在横向方向(例如,x方向)上相邻的手性结构具有不同布置的液晶分子。也就是,手性结构被配置为使得位于大约相同深度处的不同手性结构的液晶分子(例如,最接近光入射表面1004S的液晶分子)具有不同的旋转角。结果,入射在CLCR 1150上的光以相对于层深度方向的角度(θR)反射,如以下在眼睛跟踪系统2300的上下文中进一步描述的。
眼睛跟踪在交互式视觉或控制系统中可以是有用的特征,该交互式视觉或控制系统包括在本说明书的其他地方描述的用于虚拟/增强/混合现实显示应用以及其他应用的可穿戴显示系统。为了实现有效的眼睛跟踪,可能希望获得低视角的眼睛302的图像,为此可能进而需要将眼睛跟踪相机702b放置在观看者眼睛的中心位置附近。然而,相机702b的这种位置可能会干扰用户的观看。可选地,眼睛跟踪相机702b可以设置在较低位置或侧。然而,由于以较陡峭的角度捕获眼睛图像,因此相机的这种位置可能会增加获得稳健的且准确的眼睛跟踪的难度。通过配置CLCR 1150以选择性地反射来自眼睛302的红外(IR)光2308(例如,具有850nm的波长)同时透射来自世界的可见光2304,可以将相机702b放置远离用户的观看同时捕获正常或低视角的眼睛图像。这样的配置不会干扰用户的观看,因为不会反射可见光。如图所示,相同的CLCR 1150还可以通过将来自例如IR LED的IR源的IR光反射到眼睛302中而被配置作为IR照射源2320。IR照射器的低视角可导致更少的遮挡,例如来自眼睫毛的遮挡,该配置允许更稳健地检测镜面反射,这在现代眼睛跟踪系统中可能是有用的特征。
仍然参考图23,根据各种实施例,CLCR 1150包括一个或多个胆甾型液晶(CLC)层,每个胆甾型液晶(CLC)层包括多个手性结构,其中每个手性结构包括在层深度方向(例如,z方向)上延伸且沿第一旋转方向连续旋转的多个液晶分子,如上文所述。手性结构的液晶分子的排列在垂直于层深度方向的横向方向上周期性地变化,使得一个或多个CLC层被配置为基本上布拉格反射具有第一波长(λ1)的第一入射光同时基本上透射具有第二波长(λ2)的第二入射光。如上所述,当在层深度方向上观看时,一个或多个CLC层中的每一个被配置为基本上布拉格反射具有与第一旋转方向匹配的偏振旋向性的椭圆或圆偏振的第一和第二入射光,同时被配置为基本上透射具有与第一旋转方向相反的偏振旋向性的椭圆或圆偏振的第一和第二入射光。根据实施例,在横向方向上周期性变化的液晶分子的排列被布置为在横向方向上具有周期,使得第一波长与周期之间的比率在大约0.5与大约2.0之间。根据实施例,第一波长在约600nm至约1.4μm之间的近红外范围内,例如约850nm,并且第二波长在具有如说明书中其他地方所述的一种或多种颜色的可见范围内。根据各种实施例,手性结构的液晶分子相对于法向于层深度方向的方向预倾斜。如所配置的,一个或多个CLC层被配置为使得第一入射光以相对于层深度方向(z方向)的角度(θR)反射,该角度超过相对于层深度方向约50°、约60°、约70°或约80°。
如此配置,波长选择性CLCR 1150包括一个或多个胆甾型液晶(CLC)层,每个胆甾型液晶层包括在层深度方向上延伸并且在第一旋转方向上连续旋转的多个液晶分子,其中手性结构的液晶分子的排列在垂直于层深度方向的横向方向上周期性地变化,使得一个或多个CLC层被配置为基本上布拉格反射具有例如IR波长的第一波长的第一入射光同时基本上透射具有例如可见波长的第二波长的第二入射光。
类似的液晶层和结构可以用于以上结合图17-20E所述的反射器996和涂层998。涂层998可以例如包括液晶涂层,并且在某些实现方式中可以是波长和/或偏振选择的。然而,可以采用其他类型的涂层998和反射器996。
在前述说明书中,已参考发明的特定实施例描述了发明。然而,显而易见的是,在不脱离本发明的更广泛的精神和范围的情况下,可以对其进行各种变型和改变。因此,说明书和附图应被视为示例性的而非限制性意义的。
实际上,应当理解,本公开的系统和方法各自具有若干创新性方面,这些方面中的任一单个方面不单独负责本文所公开的期望待性或不是本文所公开的期望待性所必需的。上述各种特征和过程可彼此独立使用或可以以各种方式组合使用。所有可能的组合和子组合均旨在落入此公开的范围内。
在单独实施方式的上下文中在此说明书所述的某些特征也能在单个实施方式中组合实现。相反,在单个实施方式的上下文中所述的各种特征也能在多个实施方式中单独地或以任何合适的子组合实现。此外,尽管上文可将特征描述为以某些组合执行,甚至最初这样示例出的,但在一些情况下,来自所示例的组合的一个或多个特征能被从该组合中删除,且所示例的组合可涉及子组合或子组合的变体。任何单个特征或特征组对于每个实施例都不是必需或不可或缺的。
本文中使用的条件语,诸如(除其他项外)“能”、“能够”、“可能”、“可以”、“例如”等一般旨在表达某些实施例包括而其他实施例不包括某些特征、元素和/或步骤,另有具体说明或在上下文中另有理解除外。因此,这样的条件语一般不旨在暗示特征、元素和/或步骤以任何方式对于一个或多个实施例是必需的,或者一个或多个实施例必然包括用于在具有或没有程序设计者输入或提示的情况下决定这些特征、元素和/或步骤是否包括在或者是否将在任何具体实施例中执行的逻辑。术语“包括”、“包含”、“具有”等是同义词,且以开放式的方式包含性地使用,且不排除额外的元素、特征、动作、操作等。此外,术语“或”以其包含性含义(而不是其专有性含义)使用,因此,当被用于例如连接元素列表时,术语“或”意味着列表中的一个、一些或全部元素。另外,本申请和所附例子中使用的冠词“一”、“一个”和“所述”应被解释为意味着“一个或多个”或“至少一个”,另有具体说明除外。类似地,虽然操作在附图中可以以特定顺序描绘,但应认识到,这样的操作不需要以所述特定顺序或以相继顺序执行,或执行所有例示的操作以实现期望的结果。此外,附图可以以流程图的形式示意性地描绘一个或多个示例过程。然而,未示出的其他操作能并入示意性地示出的示例方法和过程中。例如,能在任何所示操作之前、之后、同时或期间执行一个或多个附加操作。另外,在其他实施方式中,操作可被重新排列或重新排序。在某些情况下,多任务和并行处理可具有优势。此外,上述实施方式描述的各种系统组件的分离不应被理解为在所有实施方式中都需要这种分离,且应该理解,所述程序组件和系统一般能被一起集成在单个软件产品中或封装到多个软件产品中。另外,其他实施方式处于以下例子的范围内。在一些情况下,例子中列举的动作能以不同的顺序执行,且仍实现期望的结果。
因此,本公开不旨在限于本文所示的实施例,而是符合与本公开相一致的最宽范围、本文公开的原理和新颖特征。下面提供各种示例系统和方法。
示例
示例部分I
1.一种头戴式显示系统,其被配置为将光投射到用户的眼睛以在所述用户的视场中显示增强现实图像内容,所述头戴式显示系统包括:
框架,其被配置为支撑在所述用户的头部上;
图像投影仪,其被配置为将图像投射到所述用户的眼睛中以在所述用户的所述视场中显示图像内容;
相机;
至少一个波导;
至少一个耦合光学元件,其被配置为使得光被耦合到所述波导中并在其中被引导;以及
至少一个耦出元件,其被配置为将在所述波导中引导的光从所述波导耦出并将所述光引导至所述相机,
其中,所述相机设置在相对于所述至少一个耦出光学元件的光路中以接收所述光中的至少一部分,所述光中的所述至少一部分经由所述耦合元件被耦合到所述波导中并在其中被引导,并且通过所述耦出耦合元件被从所述波导耦出,使得能够由所述相机捕获图像。
2.根据示例1所述的系统,其中,所述至少一个耦合光学元件被配置为使得来自佩戴所述头戴式显示系统的所述用户前方的环境的光被耦合到所述至少一个波导中并且在其中被引导,使得能够由所述相机捕获所述环境的图像。
3.根据以上示例中的任一项所述的系统,其中,所述至少一个耦合光学元件被配置为使得从佩戴所述头戴式显示系统的所述用户的所述眼睛反射的光被耦合到所述至少一个波导中并在其中被引导,使得能够由所述相机捕获所述眼睛的图像。
4.根据以上示例中的任一项所述的系统,其中,所述至少一个耦合光学元件被配置为使得从佩戴所述头戴式显示系统的所述用户的所述眼睛反射的光被耦合到所述波导中并在其中被引导,使得能够由所述相机捕获所述眼睛的图像,所述系统被配置为对所述眼睛的前部成像。
5.根据以上示例中的任一项所述的系统,其中,所述至少一个耦合光学元件被配置为使得从佩戴所述头戴式显示系统的所述用户的所述眼睛反射的光被耦合到所述波导中并在其中被引导,使得能够由所述相机捕获所述眼睛的图像,所述系统被配置为对所述眼睛的角膜表面成像。
6.根据以上示例中的任一项所述的系统,其中,所述至少一个耦合光学元件被配置为使得从佩戴所述头戴式显示系统的所述用户的所述眼睛反射的光被耦合到所述波导中并在其中被引导,使得能够由所述相机捕获所述眼睛的图像,所述系统被配置为对所述用户的眼睛的视网膜成像。
7.根据以上示例中的任一项所述的系统,进一步包括设置在所述框架上的目镜,所述目镜被配置为将光引导到所述用户的眼睛中以向所述用户的视场显示增强现实图像内容,所述目镜的至少一部分是透明的且在所述用户佩戴所述头戴式显示器时被设置在所述用户的眼睛前方的位置处,使得所述透明部分将来自所述用户前方的环境的光透射到所述用户的眼睛以提供所述用户前方的所述环境的视图。
8.根据示例7-8中的任一项所述的系统,其中,所述目镜被配置为接收来自所述图像投影仪的光并将所述光引导到所述用户的眼睛中以向所述用户的视场显示增强现实图像内容。
9.根据示例7-9中的任一项所述的系统,其中,所述目镜包括所述至少一个波导。
10.根据示例7所述的系统,其中,所述图像投影仪被配置为将光引导到所述目镜的边缘中。
11.根据示例9或10所述的系统,其中,所述图像投影仪被配置为将光引导到所述至少一个波导的边缘中。
12.根据以上示例中的任一项所述的系统,进一步包括至少一个耦入光学元件,其被配置为将来自所述图像投影仪的光耦合到所述至少一个波导中,以便引导来自所述图像投影仪的光以将所述图像内容提供给所述用户的眼睛。
13.根据以上示例中的任一项所述的系统,其中,所述至少一个耦合光学元件还被配置为将在所述波导中引导的来自所述图像投影仪的光从所述至少一个波导耦出,使得能够由所述用户的眼睛观看到图像内容。
14.根据以上示例中的任一项所述的系统,其中,相同的耦合光学元件被配置为,将在所述波导内引导的来自所述图像投影仪的光从所述波导耦出使得能够由所述用户的眼睛观看到图像内容,并且将光耦合到所述至少一个波导中以在其中被引导到所述相机。
15.根据以上示例中的任一项所述的系统,还包括至少一个图像内容耦出光学元件,其被配置为将在所述波导内引导的来自所述图像投影仪的光从所述至少一个波导耦出,使得能够由所述用户的眼睛观看到图像内容。
16.根据以上示例中的任一项所述的系统,其中,所述至少一个耦合光学元件面向佩戴所述头戴式成像系统的所述用户的所述眼睛,以接收来自所述眼睛的光。
17.根据以上示例中的任一项所述的系统,其中,所述至少一个耦合光学元件被配置为使得来自佩戴所述头戴式成像系统的所述用户前方的所述环境的光被耦合到所述至少一个波导中并在其中被引导,使得能够由所述相机捕获所述环境的图像。
18.根据以上示例中的任一项所述的系统,其中,所述至少一个耦合光学元件面向佩戴所述头戴式成像系统的所述用户前方的所述环境,以接收来自所述环境的光。
19.根据示例15所述的系统,其中,所述至少一个图像内容耦出光学元件被配置为将在所述波导中引导的来自所述图像投影仪的光从所述至少一个波导耦出,并且所述至少一个耦合光学元件被配置为使得光被耦合到所述波导中并在其中被引导到所述相机,其中所述至少一个图像内容耦出光学元件和所述至少一个耦合光学元件彼此叠加。
20.根据示例15所述的系统,其中,所述至少一个图像内容耦出光学元件被配置为将在所述波导内引导的来自所述图像投影仪的光从所述至少一个波导耦出,并且所述至少一个耦合光学元件被配置为使得光被耦合到所述波导中并在其中被导引到所述相机,其中所述至少一个图像内容耦出光学元件和所述至少一个耦合光学元件彼此堆叠。
21.根据示例15所述的系统,其中,所述至少一个图像内容耦出光学元件被配置为将在所述波导内引导的来自所述图像投影仪的光从所述至少一个波导耦出,并且所述至少一个耦合光学元件被配置为使得光被耦合到所述波导中并在其中被引导到所述相机,其中所述至少一个图像内容耦出光学元件和所述至少一个耦合光学元件被集成在同一衍射光学元件中。
22.根据示例15所述的系统,其中,所述至少一个耦合光学元件被配置为使得光被耦合到第一波导中并且在其中被引导到所述相机,并且所述至少一个图像内容耦出光学元件被配置为将想第二波导内引导的来自所述图像投影仪的光所述第二波导耦出。
23.根据以上示例中的任一项的系统,其中,所述至少一个耦合光学元件被配置为使得光被耦合到第一波导中并且在其中被引导到所述相机,并且所述图像投影仪被配置为将光耦合到第二波导中以向所述眼睛提供图像内容。
24.根据以上示例中的任一项所述的系统,其中,所述图像投影仪包括光源、调制器和投射光学器件。
25.根据以上示例中的任一项所述的系统,其中,图像投影仪包括扫描光纤。
26.根据示例24或25中的任一项所述的系统,其中,调制器包括光调制器。
27.根据示例26所述的系统,其中,光调制器包括空间光调制器。
28.根据以上示例中的任一项所述的系统,其中,所述相机包括检测器阵列和成像光学器件。
29.根据示例28所述的系统,其中,所述成像光学器件被配置为将准直光聚焦到所述检测器阵列上。
30.根据以上示例中的任一项所述的系统,其中,所述至少一个波导包括对可见光透明的材料,该材料具有足以通过全内反射在所述波导中引导光的折射率。
31.根据以上示例中的任一项所述的系统,其中,所述至少一个波导包括波导的堆叠。
32.根据示例31所述的系统,其中,波导堆叠中的不同波导被配置为输出具有不同波前发散的光,就像从距用户眼睛的不同距离处投射一样。
33.根据示例31或32所述的系统,其中,波导堆叠中的不同波导被配置为输出具有不同颜色的光。
34.根据示例31、32或33中的任一项所述的系统,其中,不同的波导包括第一、第二和第三波导,所述系统被配置为使得第一波导用于红色光、第二波导用于绿色光、以及第三是用于蓝色光。
35.根据示例12至34中的任一项所述的系统,其中,耦入光学元件包括衍射光学元件或反射器。
36.根据示例12至34中的任一项所述的系统,其中,耦入光学元件包括衍射光学元件。
37.根据以上示例中的任一项所述的系统,其中,耦合光学元件包括衍射光学元件。
38.根据以上示例中的任一项所述的系统,其中,耦合光学元件包括液晶。
39.根据以上示例中的任一项所述的系统,其中,耦合光学元件包括液晶偏振光栅。
40.根据以上示例中的任一项所述的系统,其中,耦出光学元件包括衍射光学元件。
41.根据以上示例中的任一项所述的系统,其中,耦出光学元件包括液晶。
42.根据以上示例中的任一项所述的系统,其中,耦出光学元件包括液晶偏振光栅。
43.根据以上示例中的任一项所述的系统,其中,耦合元件被配置为沿至少一个轴增大眼箱的尺寸。
44.根据示例43所述的系统,进一步包括正交光瞳扩展器,其包括位于所述至少一个波导之中或之上的至少一个光重定向元件,该至少一个光重定向元件被配置为沿与所述至少一个轴正交的轴增加眼箱的尺寸。
45.根据示例44所述的系统,其中,所述至少一个光重定向元件包括衍射光学元件。
46.根据以上示例中的任一项所述的系统,其中,相同的耦合元件被配置为(a)将光耦合到所述至少一个波导中以被所述相机接收,以及(b)将来自所述图像投影仪的光从所述至少一个波导耦出到所述用户的眼睛。
47.根据以上示例中的任一项所述的系统,其中,相同的耦合元件被配置为(a)将来自所述环境的光耦合到所述至少一个波导中以被所述相机接收,以及(b)时来自所述图像投影仪的光从所述至少一个波导耦出到所述用户的眼睛。
48.根据以上示例中的任一项所述的系统,其中,相同的耦合元件被配置为(a)将来自所述眼睛的光耦合到所述至少一个波导中以被所述相机接收,以及(b)使来自所述图像投影仪的光从所述至少一个波导耦出到所述用户的眼睛。
49.根据以上示例中的任一项所述的系统,进一步包括具有光焦度的反射表面,该反射表面被设置为接收穿过所述目镜的从用户的眼睛反射的光并将所述光导回到所述目镜。
50.根据示例49所述的系统,其中,所述至少一个耦合元件被配置为使得穿过至少一个波导并且从所述反射表面反射回到至少一个波导的来自用户眼睛的光被耦合到所述至少一个波导中并在其中被引导。
51.根据示例49至50中的任一项所述的系统,其中,相机设置在相对于所述至少一个耦出光学元件的光路中,以接收来自用户的眼睛的光的至少一部分,该光的至少一部分从反射表面反射并经由耦合元件耦合到所述波导中并在其中被引导并且通过所述耦出耦合元件从所述波导耦出。
52.根据示例49至51中的任一项所述的系统,其中,反射表面反射红外光但是透射可见光。
53.根据示例49至52中的任一项所述的系统,其中,反射表面是弯曲的。
54.根据示例49至53中的任一项所述的系统,其中,反射表面设置在弯曲的光学元件上。
55.根据示例49至54中的任一项所述的系统,其中,反射表面设置在凹面镜上。
56.根据示例49至55中的任一项所述的系统,其中,反射表面具有关于反射的正光焦度和关于透射的可忽略的光焦度。
57.根据示例49至56中的任一项所述的系统,其中,反射表面被配置为准直来自用户眼睛的光。
58.根据示例49至57中的任一项所述的系统,其中,反射表面被配置为准直来自用户眼睛的视网膜的光。
59.根据示例49至58中的任一项所述的系统,其中,反射表面被配置为准直来自用户的眼睛的前部区域的光。
60.根据示例49至59中的任一项所述的系统,其中,反射表面被配置为准直来自用户眼睛的角膜的光。
61.根据示例49至60中的任一项所述的系统,其中,反射表面形成在弯曲的光学元件上并且包括红外反射涂层。
62.根据示例61所述的系统,其中,弯曲的光学元件具有关于通过其透射的光的可忽略的焦度。
63.根据示例61或62所述的系统,其中,弯曲的光学元件具有位于弯曲的光学元件的相对侧上的第一弯曲表面和第二弯曲表面,所述第一弯曲表面和第二弯曲表面具有相同的曲率。
64.根据示例49至63中的任一项所述的系统,进一步包括相对于反射表面和耦合光学元件设置的延迟器,以使穿过至少一个波导并且从反射表面反射回到至少一个波导和耦合光学元件的光的偏振旋转。
65.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件包括偏振选择转向元件。
66.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件包括偏振光栅。
67.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件被配置为将在至少一个波导内引导的光从波导转出作为指向用户的眼睛的准直光。
68.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件被配置为将来自反射表面的准直光转向到至少一个波导中。
69.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括离轴反射器。
70.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括偏振选择转向元件。
71.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括偏振光栅。
72.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括液晶。
73.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括液晶偏振光栅。
74.根据以上示例中的任一项所述的系统,进一步包括圆偏振器。
75.根据以上示例中的任一项所述的系统,其中,耦入元件包括偏振选择转向元件。
76.根据以上示例中的任一项所述的系统,其中,耦入元件包括偏振光栅。
77.根据以上示例中的任一项所述的系统,其中,至少一个耦入元件包括衍射光学元件。
78.根据以上示例中的任一项所述的系统,其中,至少一个耦入元件包括衍射光栅。
79.根据以上示例中的任一项所述的系统,其中,耦入元件包括离轴反射器。
80.根据示例49至79中的任一项所述的系统,其中,反射表面包括液晶反射器。
81.根据示例49至80中的任一项所述的系统,其中,反射表面包括胆甾型液晶反射透镜。
82.根据以上示例中的任一项所述的系统,其中,相同的波导(a)将从用户的眼睛耦合到到所述至少一个波导中的光引导以被所述相机接收,以便捕获用户眼睛的至少一部分的图像,以及(b)引导从所述图像投影仪耦合的光,使得可以将来自所述投影仪的光引导至所述用户的眼睛以使来自所述图像投影仪的所述图像处于所述用户的视场中。
83.根据以上示例中的任一项所述的系统,其中,相同的耦合元件(a)将来自所述用户的眼睛的光耦合到所述至少一个波导中,以被所述相机接收,以及(b)使来自所述图像投影仪的光从所述至少一个波导耦出到所述用户的眼睛。
84.根据示例49至83中的任一项所述的系统,进一步包括电子器件,其被配置为当从反射表面反射的光被阻挡时使相机捕获第一图像。
85.根据示例84所述的系统,其中,所述电子器件被配置为当从反射表面反射的光未被阻挡时,使相机捕获第二图像。
86.根据示例85所述的系统,其中,所述电子器件被配置为使用第一图像来修改第二图像。
87.根据示例85或86所述的系统,其中,所述电子器件被配置为基于第一图像从第二图像减去。
88.根据以上示例中的任一项所述的系统,其中,所述系统被配置为执行基于所述眼睛的图像的眼睛跟踪。
89.根据示例88所述的系统,其中,基于所述眼睛的所述图像执行眼睛跟踪包括存储所述眼睛的视网膜的图像。
90.根据以上示例中的任一项所述的系统,其中,所述系统被配置为:
使用所述相机获得所述眼睛的所述视网膜的一部分的图像;
将所述视网膜的一个或多个存储的图像与所述视网膜的所述部分的图像进行比较;以及
基于一个或多个存储的图像与从相机获得的视网膜的部分的图像的比较,确定用户的凝视。
91.根据示例90所述的系统,其中,确定用户的凝视包括确定视网膜的哪个部分对应于视网膜的所述部分的图像。
92.根据示例90至91中的任一项所述的系统,其中,确定用户的凝视包括确定眼睛的取向。
93.根据以上示例中的任一项所述的系统,其中,所述系统被配置为基于利用所述相机获得的用户眼睛的一个或多个图像来获得生物数据。
94.根据以上示例中的任一项所述的系统,其中,所述系统被配置为基于利用所述相机获得的所述眼睛的一个或多个图像经由生物感测来识别用户。
95.根据以上示例中的任一项所述的系统,其中,所述系统被配置为提供第一偏振的照射并且使用与所述第一偏振不同的第二偏振的光借助所述相机优先地捕获图像。
96.根据以上示例中的任一项所述的系统,其中,所述系统被配置为使用第一偏振光照射所述用户的眼睛并且使用与所述第一偏振不同的第二偏振的光借助所述相机优先捕获所述用户眼睛的图像。
97.根据示例95或96所述的系统,其中,所述第一偏振和第二偏振是正交的。
98.根据以上示例中的任一项所述的系统,进一步包括光源,其被设置为提供照射以便使用所述相机捕获图像。
99.根据以上示例中的任一项所述的系统,进一步包括光源,其被设置为照射用户的眼睛。
100.根据示例98或99所述的系统,其中,所述光源包括一个或多个红外光源。
101.根据示例98至100中的任一项所述的系统,其中,所述光源包括一个或多个红外发光二极管(LED)。
102.根据示例98至101中的任一项所述的系统,其中,所述光源是脉冲化的。
103.根据示例98到102中的任一项所述的系统,进一步包括离轴反射器,其被设置为接收来自所述光源的光并用所述光照射所述用户的眼睛。
104.根据示例98至103中的任一项所述的系统,其中,所述光源被配置为将光输入到波导中以提供所述照射。
105.根据示例98至104中的任一项所述的系统,其中,所述光源被配置为将光输入到相对于所述眼睛设置的波导中以向所述眼睛提供照射。
106.根据示例104或105所述的系统,进一步包括照射耦入光学元件,其被配置为将来自所述光源的光耦合到所述波导中。
107.根据示例98至103中的任一项所述的系统,其中,所述光源被配置为将光输入到所述至少一个波导中以提供照射。
108.根据示例107所述的系统,进一步包括照射耦入光学元件,其被配置为将来自所述光源的光耦合到所述至少一个波导中以提供照射。
109.根据示例98至103中的任一项所述的系统,其中,所述光源被配置为将光输入到与所使用的波导相同的波导中以向用户的眼睛投射图像内容。
110.根据示例98至104中的任一项所述的系统,其中,所述光源被配置为向用户的眼睛提供照射,以将光输入到与所使用的波导相同的波导中以将光引导至相机。
111.根据示例98至105中的任一项所述的系统,其中,所述光源被配置为将光输入到与所使用的波导相同的波导中以将来自用户的眼睛的光引导至相机。
112.根据示例109至111种的任一项所述的系统,进一步包括照射耦入光学元件,其被配置为将来自所述光源的光耦合到所述波导中。
113.根据示例106、108或112中的任一项所述的系统,其中,所述照射耦入光学元件是偏振选择性的,其耦入具有第一偏振的光。
114.根据示例98至113所述的系统,其中,所述光源是被配置为输出具有第一偏振的偏振光的偏振光源。
115.根据示例98至114中的任一项所述的系统,其中,所述光源被配置为将具有第一偏振的偏振光引导到所述眼睛上。
116.根据示例98至115所述的系统,进一步包括具有第一偏振的照射偏振器,其被设置在所述光源与所述眼睛之间的光路中以使引导至所述眼睛的光偏振。
117.根据示例116所述的系统,其中,照射偏振器设置在所述光源与所述波导之间的光路中并被配置为提供照射。
118.根据示例98至117中的任一项所述的系统,进一步包括位于所述眼睛和所述相机之间的光路上的图像获取偏振器。
119.根据示例118所述的系统,其中,所述图像获取偏振器位于所述相机的近端。
120.根据示例118或119所述的系统,其中,所述图像获取偏振器设置在(a)被配置为将光引导到所述相机的所述至少一个波导与(b)所述相机之间的光路中。
121.根据示例118至120中的任一项所述的系统,其中,所述图像获取偏振器减少到达所述相机的所述第一偏振光的量。
122.根据示例118至121所述的系统,其中,所述图像获取偏振器包括被配置为将具有不同于所述第一偏振的第二偏振的光选择性地耦合到所述相机的偏振器。
123.根据以上示例中的任一项所述的系统,进一步包括至少一个合光元件,其设置在所述至少一个耦合元件与所述至少一个耦出光学元件之间的光路上,以减小在到达所述至少一个耦出光学元件之前来自至少一个耦合元件的光的横向空间范围。
124.根据以上示例中的任一项所述的系统,其中,所述至少一个合光元件包括衍射光学元件。
125.根据以上示例中的任一项所述的系统,其中,所述至少一个合光元件包括全息或衍射光栅。
126.根据以上示例中的任一项所述的系统,其中,所述至少一个波导包括对红外光透明的材料,该材料具有足以通过全内反射在所述波导中引导红外光的折射率。
127.根据以上示例中的任一项所述的系统,其中,所述至少一个耦合光学元件包括出射光瞳扩展器。
128.根据以上示例中的任一项所述的系统,其中,系统包括光焦度以增加被耦合到波导中以被引导到相机的从眼睛反射的光的准直度。
129.根据以上示例中的任一项所述的系统,其中,系统包括光焦度以增加被耦合到波导中以被引导到相机的从眼睛的前部反射的光的准直度。
130.根据以上示例中的任一项所述的系统,其中,系统包括光焦度以增加被耦合到波导中以被引导到相机的从眼睛的角膜反射的光的准直度。
131.根据示例128至130中的任一项所述的系统,其中,光焦度包括正光焦度。
132.根据示例128至131中的任一项所述的系统,其中,光焦度由透镜提供。
133.根据示例88至132中的任一项所述的系统,其中,眼睛的视网膜的一个或多个存储的图像包括使用眼睛的视网膜的不同部分的多个图像生成的眼睛的视网膜的合成图像。
134.根据示例88至133中的任一项所述的系统,其中,视网膜的合成图像包括拼接在一起的视网膜的多个图像。
135.根据示例88至134中的任一项所述的系统,其中,拼接在一起的视网膜的多个图像包括当分别在各个位置处在用户的视场中显示注视目标时获得的图像。
136.根据示例88至135中的任一项所述的系统,其中,视网膜的一个或多个存储的图像包括当分别在各个位置处在用户的视场中显示注视目标时获得的图像。
137.根据示例88至示例136中的任一项所述的系统,其中,系统进一步被配置为使用所获得的眼睛的视网膜中的部分的图像来更新合成图像。
138.根据示例88至137中的任一项所述的系统,其中,使用所获得的视网膜中的部分的图像来更新视网膜的合成图像包括将所获得的图像拼接到合成图像中的与所获得的图像中显示的视网膜中的部分对应的一部分中。
139.根据示例88至138中的任一项所述的系统,其中,系统进一步被配置为将数字滤波器应用于所获得的眼睛的视网膜中的部分的图像,以获得视网膜中的部分的被过滤的图像。
140.根据示例139所述的系统,其中,系统进一步被配置为将视网膜的一个或多个存储的图像与视网膜中的部分的被过滤的图像进行比较。
141.根据示例139至140中的任一项所述的系统,其中,数字滤波器包括弗兰吉滤波器。
142.根据实例88至139中的任一项所述的系统,其中,系统被配置为对所获得的视网膜中的部分的图像应用边缘增强。
143.根据以上示例中的任一项所述的系统,其中,所述系统被配置为使用视网膜的图像来执行用户识别验证。
144.根据以上示例中的任一项所述的系统,其中,所述系统被配置为:
使用所述相机获得所述眼睛的所述视网膜中的部分的图像;
将所述视网膜的一个或多个存储的图像与所述视网膜中的所述部分的图像进行比较。
145.根据示例144所述的系统,其中,眼睛的视网膜的一个或多个存储的图像包括使用眼睛的视网膜的不同部分的多个图像生成的眼睛的视网膜的合成图像。
146.根据示例144至145中的任一项所述的系统,其中,视网膜的合成图像包括拼接在一起的视网膜的多个图像。
147.根据示例144至146中的任一项所述的系统,其中,拼接在一起的视网膜的多个图像包括当分别在各个位置处在用户的视场中显示注视目标时获得的图像。
148.根据示例144至146中的任一项所述的系统,其中,视网膜的一个或多个存储的图像包括当分别在各个位置处在用户的视场中显示注视目标时获得的图像。
149.根据示例144至148中的任一项所述的系统,其中,系统进一步被配置为使用所获得的眼睛的视网膜中的部分的图像来更新合成图像。
150.根据示例144至149中的任一项所述的系统,其中,使用所获得的视网膜中的部分的图像来更新视网膜的合成图像包括将所获得的图像拼接到合成图像中与所获的的图像中显示的视网膜中的部分对应的一部分中。
151.根据示例144至示例150中的任一项所述的系统,其中,系统进一步被配置为将数字滤波器应用于所获得的眼睛的视网膜中的部分的图像,以获得视网膜中的部分的被过滤的图像。
152.根据示例151所述的系统,其中,系统进一步被配置为将视网膜的一个或多个存储的图像与视网膜中的部分的被过滤的图像进行比较。
153.根据示例144至152中的任一项所述的系统,其中,数字滤波器包括弗兰吉滤波器。
154.根据示例144至153中的任一项所述的系统,其中,系统被配置为对所获得的视网膜中的部分的图像应用边缘增强。
示例部分II
1.一种头戴式显示系统,其被配置为将光投射到用户的眼睛以在所述用户的视场中显示增强现实图像内容,以及被配置为对佩戴头戴式显示系统的用户前方的环境中的至少一部分成像,所述头戴式显示系统包括:
框架,其被配置为支撑在所述用户的头部上;
被配置为投射图像的图像投影仪;
相机;
设置在所述框架上的目镜,所述目镜被配置为将光引导到所述用户的眼睛中以向所述用户的视场显示增强现实图像内容,所述目镜的至少一部分是透明的且在所述用户佩戴所述头戴式显示器时被设置在所述用户的眼睛前方的位置处,使得所述透明部分将来自所述用户前方的环境的光透射到所述用户的眼睛以提供所述用户前方的所述环境的视图,所述目镜包括:
(a)至少一个波导;
(b)至少一个耦入光学元件,其被配置为将来自所述图像投影仪的光耦合到所述至少一个波导中,以便在其中引导来自所述图像投影仪的光;
(c)至少一个耦合光学元件,其被配置为将在所述波导中引导的来自所述图像投影仪的光从所述波导耦出并将所述光引导至用户的眼睛;以及
(d)至少一个耦出元件,其被配置为将在所述波导内引导的光从所述波导耦出并且将所述光引导到所述相机,
其中,图像投影仪被设置在相对于所述至少一个耦入光学元件的光路中,以将来自所述图像投影仪的光耦合到所述波导中以在其中被引导,使得通过所述至少一个耦合元件使所述光从所述波导耦出到所述用户的眼睛,以使来自所述投影仪的所述图像位于所述用户的视场内,
其中,所述耦合元件被配置为使得来自佩戴所述头戴式显示器的所述用户前方的所述环境的光被耦合到所述波导中并在其中被引导,
其中,相机设置在相对于所述至少一个耦出光学元件的光路中以接收来自用户前方的环境的光中的至少一部分,所述光中的所述至少一部分经由耦合元件被耦合到所述波导中并在其中被引导,并且通过所述耦出耦合元件被从所述波导耦出使得能够由所述相机捕获图像,以及
其中,相同的波导(a)引导被从所述环境耦合到所述波导的光以被所述相机接收以便捕获用户前方的环境中的至少一部分的图像,以及(b)引导从所述投影仪耦合的光使得来自所述投影仪的光被引导至所述用户的眼睛,以使来自所述投影仪的所述图像位于所述用户的视场内。
2.根据示例1所述的系统,其中,所述图像投影仪包括光源、调制器和投射光学器件。
3.根据示例1或2所述的系统,其中,图像投影仪包括扫描光纤。
4.根据示例2或3所述的系统,其中,调制器包括光调制器。
5.根据示例4所述的系统,其中,光调制器包括空间光调制器。
6.根据以上示例中的任一项所述的系统,其中,所述相机包括检测器阵列和成像光学器件。
7.根据示例6所述的系统,其中,所述成像光学器件被配置为将准直光聚焦到所述检测器阵列上。
8.根据以上示例中的任一项所述的系统,其中,所述至少一个波导包括对可见光透明的材料,该材料具有足以通过全内反射在所述波导中引导光的折射率。
9.根据以上示例中的任一项所述的系统,其中,所述至少一个波导包括波导的堆叠。
10.根据示例9所述的系统,其中,波导堆叠中的不同波导被配置为输出具有不同波前发散的光,就像从距用户眼睛的不同距离处投射一样。
11.根据示例9或10所述的系统,其中,波导堆叠中的不同波导被配置为输出具有不同颜色的光。
12.根据示例9、10或11中的任一项所述的系统,其中,不同的波导包括第一、第二和第三波导,所述系统被配置为使得第一波导用于红色光、第二波导用于绿色光、以及第三是用于蓝色光。
13.根据以上示例中的任一项所述的系统,其中,耦入光学元件包括衍射光学元件或反射器。
14.根据以上示例中的任一项所述的系统,其中,耦合光学元件包括衍射光学元件。
15.根据以上示例中的任一项所述的系统,其中,耦出光学元件包括衍射光学元件。
16.根据以上示例中的任一项所述的系统,其中,耦合元件被配置为沿至少一个轴增大眼箱的尺寸。
17.根据示例16所述的系统,进一步包括正交光瞳扩展器,其包括位于所述至少一个波导之中或之上的至少一个光重定向元件,该至少一个光重定向元件被配置为沿与所述至少一个轴正交的轴增加眼箱的尺寸。
18.根据示例17所述的系统,其中,所述至少一个光重定向元件包括衍射光学元件。
19.根据以上示例中的任一项所述的系统,其中,相同的耦合元件被配置为(a)将来自所述环境的光耦合到所述至少一个波导中以被所述相机接收,以及(b)时来自所述图像投影仪的光从所述至少一个波导耦出到所述用户的眼睛。
20.根据以上示例中的任一项所述的系统,其中,相同的耦合元件被配置为(a)将来自所述环境的光耦合到所述至少一个波导中以被所述相机接收,以及(b)时来自所述图像投影仪的光从所述至少一个波导耦出到所述用户的眼睛。
21.根据示例20所述的系统,其中,所述至少一个耦合元件被配置为使得穿过目镜并且从所述反射表面反射回到目镜的来自用户眼睛的光被耦合到所述波导中并在其中被引导。
22.根据示例20至21中的任一项所述的系统,其中,相机设置在相对于所述至少一个耦出光学元件的光路中,以接收来自用户的眼睛的光的至少一部分,该光的至少一部分从反射表面反射并经由耦合元件耦合到所述波导中并在其中被引导并且通过所述耦出耦合元件从所述波导耦出。
23.根据示例20至22中的任一项所述的系统,其中,反射表面反射红外光但是透射可见光。
24.根据示例20至23中的任一项所述的系统,其中,反射表面是弯曲的。
25.根据示例20至24中的任一项所述的系统,其中,反射表面设置在弯曲的光学元件上。
26.根据示例20至25中的任一项所述的系统,其中,反射表面设置在凹面镜上。
27.根据示例20至26中的任一项所述的系统,其中,反射表面具有关于反射的正光焦度和关于透射的可忽略的光焦度。
28.根据示例20至27中的任一项所述的系统,其中,反射表面被配置为准直来自用户眼睛的光。
29.根据示例20至28中的任一项所述的系统,其中,反射表面被配置为准直来自用户眼睛的视网膜的光。
30.根据示例20至29中的任一项所述的系统,其中,反射表面被配置为准直来自用户的眼睛的前部区域的光。
31.根据示例20至30中的任一项所述的系统,其中,反射表面被配置为准直来自用户眼睛的角膜的光。
32.根据示例20至31中的任一项所述的系统,其中,反射表面形成在弯曲的光学元件上,该弯曲的光学元件具有位于所述反射表面上的红外反射涂层。
33.根据示例33所述的系统,其中,弯曲的光学元件具有关于通过其透射的光的可忽略的焦度。
34.根据示例32或33所述的系统,其中,弯曲的光学元件具有位于弯曲的光学元件的相对侧上的第一弯曲表面和第二弯曲表面,所述第一弯曲表面和第二弯曲表面具有相同的曲率。
35.根据以上示例中的任一项所述的系统,进一步包括相对于反射表面和耦合光学元件设置的延迟器,以使穿过目镜并且从反射表面反射回到目镜和耦合光学元件的光的偏振旋转。
36.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件包括偏振选择转向元件。
37.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件包括偏振光栅。
38.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件被配置为将在至少一个波导内引导的光从波导转出作为指向用户的眼睛的准直光。
39.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件被配置为将来自反射表面的准直光转向到至少一个波导中。
40.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括离轴反射器。
41.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括偏振选择转向元件。
42.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括偏振光栅。
43.根据以上示例中的任一项所述的系统,进一步包括圆偏振器。
44.根据以上示例中的任一项所述的系统,其中,耦入元件包括偏振选择转向元件。
45.根据以上示例中的任一项所述的系统,其中,耦入元件包括偏振光栅。
46.根据以上示例中的任一项所述的系统,其中,耦入元件包括离轴反射器。
47.根据示例20至34中的任一项所述的系统,其中,反射表面包括液晶反射器。
48.根据示例20至34或37中的任一项所述的系统,其中,反射表面包括胆甾型液晶反射透镜。
49.根据以上示例中的任一项所述的系统,其中,相同的波导(a)将从用户的眼睛耦合到到所述至少一个波导中的光引导以被所述相机接收,以便捕获用户眼睛的至少一部分的图像,以及(b)引导从所述图像投影仪耦合的光,使得可以将来自所述投影仪的光引导至所述用户的眼睛以使来自所述图像投影仪的所述图像处于所述用户的视场中。
50.根据以上示例中的任一项所述的系统,其中,相同的耦合元件(a)将来自所述用户的眼睛的光耦合到所述至少一个波导中,以被所述相机接收,以及(b)使来自所述图像投影仪的光从所述至少一个波导耦出到所述用户的眼睛。
51.根据以上示例中的任一项所述的系统,进一步包括电子器件,其被配置为当从反射表面反射的光被阻挡时使相机捕获第一图像。
52.根据示例51所述的系统,其中,所述电子器件被配置为当从反射表面反射的光未被阻挡时,使相机捕获第二图像。
53.根据示例52所述的系统,其中,所述电子器件被配置为使用第一图像来修改第二图像。
54.根据示例53所述的系统,其中,所述电子器件被配置为基于第一图像从第二图像减去。
55.根据以上示例中的任一项所述的系统,其中,所述系统被配置为执行基于所述眼睛的所述图像的眼睛跟踪。
56.根据示例55所述的系统,其中,基于所述眼睛的所述图像执行眼睛跟踪包括存储所述眼睛的视网膜的图像。
57.根据以上示例中的任一项所述的系统,其中,所述系统被配置为:
存储所述眼睛的视网膜的图像;
捕获所述眼睛的所述视网膜的一部分的图像;
将所述视网膜的存储的图像与所述视网膜的所述部分的图像进行比较;以及
基于存储的图像与视网膜中的部分的图像的比较,确定用户的凝视。
58.根据示例57所述的系统,其中,确定用户的凝视包括确定视网膜的哪个部分对应于视网膜的所述部分的图像。
59.根据示例57至58中的任一项所述的系统,其中,确定用户的凝视包括确定眼睛的取向。
60.根据以上示例中的任一项所述的系统,进一步包括光源,其被设置为照射用户的眼睛。
61.根据示例60所述的系统,其中,所述光源包括被配置为将红外光引导至用户的眼睛的一个或多个红外光源。
62.根据示例60或61所述的系统,其中,所述光源包括一个或多个红外发光二极管(LED)。
63.根据示例60至62中的任一项所述的系统,其中,所述光源是脉冲化的。
64.根据以上示例中的任一项所述的系统,进一步包括离轴反射器,其被设置为接收来自所述光源的光并用所述光照射所述用户的眼睛。
65.一种头戴式成像系统,其被配置为对佩戴头戴式成像系统的用户前方的环境中的至少一部分成像,所述头戴式成像系统包括:
框架,其被配置为支撑在所述用户的头部上;
相机;
设置在所述框架上的目镜,所述目镜的至少一部分是透明的且在所述用户佩戴所述头戴式成像系统时被设置在所述用户的眼睛前方的位置处,使得所述透明部分将来自所述用户前方的环境的光透射到所述用户的眼睛以提供所述用户前方的所述环境的视图,所述目镜包括:
(a)至少一个波导;
(b)至少一个耦入光学元件,其被配置使得来自佩戴头戴式成像系统的用户前方的环境的光被耦合到所述波导中并在其中被引导;以及
(c)至少一个耦出元件,其被配置为将在所述波导内引导的光从所述波导耦出并且将所述光引导到所述相机,
其中,相机设置在相对于所述至少一个耦出光学元件的光路中以接收来自用户前方的环境的光中的至少一部分,所述光中的所述至少一部分经由耦合元件被耦合到所述波导中并在其中被引导,并且通过所述耦出耦合元件被从所述波导耦出使得能够由所述相机捕获图像。
66.根据示例65所述的系统,其中,所述相机包括检测器阵列和成像光学器件。
67.根据示例66所述的系统,其中,所述成像光学器件被配置为将准直光聚焦到所述检测器阵列上。
68.根据示例65至67中的任一项所述的系统,其中,所述至少一个波导包括对可见光透明的材料,该材料具有足以通过全内反射在所述波导中引导光的折射率。
69.根据示例65至68中的任一项所述的系统,其中,所述至少一个波导包括波导的堆叠。
70.根据示例69所述的系统,其中,波导堆叠中的不同波导被配置为输出具有不同波前发散的光,就像从距用户眼睛的不同距离处投射一样。
71.根据示例69或70所述的系统,其中,波导堆叠中的不同波导被配置为输出具有不同颜色的光。
72.根据示例69至71中的任一项所述的系统,其中,不同的波导包括第一、第二和第三波导,所述系统被配置为使得第一波导用于红色光、第二波导用于绿色光、以及第三是用于蓝色光。
73.根据示例65至72中的任一项所述的系统,其中,耦入光学元件包括衍射光学元件。
74.根据示例65至73中的任一项所述的系统,其中,耦出光学元件包括衍射光学元件。
75.根据示例65至74中的任一项所述的系统,其中,耦合元件被配置为沿至少一个轴增大眼箱的尺寸。
76.根据示例75所述的系统,进一步包括正交光瞳扩展器,其包括位于所述至少一个波导之中或之上的至少一个光重定向元件,该至少一个光重定向元件被配置为沿与所述至少一个轴正交的轴增加眼箱的尺寸。
77.根据示例76所述的系统,其中,所述至少一个光重定向元件包括衍射光学元件。
示例部分Ⅲ
1.一种头戴式显示系统,其被配置为将光投射到用户的眼睛以在所述用户的视场中显示增强现实图像内容,以及被配置为对佩戴头戴式显示系统的用户的眼睛中的至少一部分成像,所述头戴式显示系统包括:
框架,其被配置为支撑在所述用户的头部上;
被配置为投射图像的图像投影仪;
相机;
设置在所述框架上的目镜,所述目镜被配置为将光引导到所述用户的眼睛中以向所述用户的视场显示增强现实图像内容,所述目镜的至少一部分是透明的且在所述用户佩戴所述头戴式显示器时被设置在所述用户的眼睛前方的位置处,使得所述透明部分将来自所述用户前方的环境的光透射到所述用户的眼睛以提供所述用户前方的所述环境的视图,所述目镜包括:
(a)至少一个波导;
(b)至少一个耦入光学元件,其被配置为将来自所述图像投影仪的光耦合到所述至少一个波导中,以便在其中引导来自所述图像投影仪的光;
(c)至少一个耦合光学元件,其被配置为将在所述波导中引导的来自所述图像投影仪的光从所述波导耦出并将所述光引导至用户的眼睛;以及
(d)至少一个耦出元件,其被配置为将在所述波导内引导的所述光从所述波导耦出并且将所述光引导到所述相机;以及
具有光焦度的反射表面,其被设置为接收穿过所述目镜的从用户的眼睛反射的光并将所述光引导回到所述目镜;
其中,图像投影仪被设置在相对于所述至少一个耦入光学元件的光路中,以将来自所述图像投影仪的光耦入到所述波导中以在其中被引导,使得通过所述至少一个耦合元件使所述光从所述波导耦出到所述用户的眼睛,以使来自所述投影仪的所述图像位于所述用户的视场内,
其中,所述至少一个耦合元件被配置为使得穿过目镜并且从所述反射表面反射回到目镜的来自用户眼睛的光被耦合到所述波导中并在其中被引导,以及
其中,相机设置在相对于所述至少一个耦出光学元件的光路中,以接收来自用户的眼睛的光的至少一部分,该光的至少一部分从反射表面反射并经由耦合元件耦合到所述波导中并在其中被引导并且通过所述耦出耦合元件从所述波导耦出。
2.根据示例1所述的系统,还包括被设置为照射用户的眼睛的光源。
3.根据示例2所述的系统,其中,所述光源包括被配置为将红外光引导到用户的眼睛的一个或多个红外光源。
4.根据示例2或3所述的系统,其中,所述光源包括一个或多个红外发光二极管(LED)。
5.根据示例2至4中的任一项所述的系统,其中,所述光源是脉冲化的。
6.根据以上示例中的任一项所述的系统,还包括离轴反射器,其被设置为接收来自所述光源的光并用所述光照射所述眼睛。
7.根据以上示例中的任一项所述的系统,其中,反射表面反射红外光但是透射可见光。
8.根据以上示例中的任一项所述的系统,其中,反射表面是弯曲的。
9.根据以上示例中的任一项所述的系统,其中,反射表面设置在弯曲的光学元件上。
10.根据以上示例中的任一项所述的系统,其中,反射表面设置在凹面镜上。
11.根据以上示例中的任一项所述的系统,其中,反射表面具有关于反射的正光焦度和关于透射的可忽略的光焦度。
12.根据以上示例中的任一项所述的系统,其中,反射表面被配置为准直来自用户眼睛的光。
13.根据以上示例中的任一项所述的系统,其中,反射表面被配置为准直来自用户眼睛的视网膜的光。
14.根据以上示例中的任一项所述的系统,其中,反射表面被配置为准直来自用户的眼睛的前部区域的光。
15.根据以上示例中的任一项所述的系统,其中,反射表面被配置为准直来自用户眼睛的角膜的光。
16.根据以上示例中的任一项所述的系统,其中,反射表面形成在弯曲的光学元件上,该弯曲的光学元件具有位于所述反射表面上的红外反射涂层。
17.根据示例9或16所述的系统,其中,弯曲的光学元件具有关于通过其透射的光的可忽略的焦度。
18.根据示例9或16或17中任一项所述的系统,其中,弯曲的光学元件具有位于弯曲的光学元件的相对侧上的第一弯曲表面和第二弯曲表面,所述第一弯曲表面和第二弯曲表面具有相同的曲率。
19.根据以上示例中的任一项所述的系统,进一步包括相对于反射表面和耦合光学元件设置的延迟器,以使穿过目镜并且从反射表面反射回到目镜和耦合光学元件的光的偏振旋转。
20.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件包括偏振选择转向元件。
21.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件包括偏振光栅。
22.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件被配置为将在至少一个波导内引导的光从波导转出作为指向用户的眼睛的准直光。
23.根据以上示例中的任一项所述的系统,其中,至少一个耦合元件被配置为将来自反射表面的准直光转向到至少一个波导中。
24.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括离轴反射器。
25.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括偏振选择转向元件。
26.根据以上示例中的任一项所述的系统,其中,至少一个耦出元件包括偏振光栅。
27.根据以上示例中的任一项所述的系统,进一步包括圆偏振器。
28.根据以上示例中的任一项所述的系统,其中,耦入元件包括偏振选择转向元件。
29.根据以上示例中的任一项所述的系统,其中,耦入元件包括偏振光栅。
30.根据以上示例中的任一项所述的系统,其中,耦入元件包括离轴反射器。
31.根据以上示例中的任一项所述的系统,其中,反射表面包括液晶反射器。
32.根据以上示例中的任一项所述的系统,其中,反射表面包括胆甾型液晶反射透镜。
33.根据以上示例中的任一项所述的系统,其中,所述图像投影仪包括光源、调制器和投射光学器件。
34.根据以上示例中的任一项所述的系统,其中,图像投影仪包括扫描光纤。
35.根据以上示例中的任一项所述的系统,其中,调制器包括光调制器。
36.根据示例34所述的系统,其中,光调制器包括空间光调制器。
37.根据以上示例中的任一项所述的系统,其中,所述相机包括检测器阵列和成像光学器件。
38.根据示例36所述的系统,其中,所述成像光学器件被配置为将准直的光聚焦到检测器阵列上。
39.根据以上示例中的任一项所述的系统,其中,所述至少一个波导包括对可见光透明的材料,该材料具有足以通过全内反射在所述波导中引导光的折射率。
40.根据以上示例中的任一项所述的系统,其中,所述至少一个波导包括波导的堆叠。
41.根据示例40所述的系统,其中,波导堆叠中的不同波导被配置为输出具有不同波前发散的光,就像从距用户眼睛的不同距离处投射一样。
42.根据示例40或41所述的系统,其中,波导堆叠中的不同波导被配置为输出具有不同颜色的光。
43.根据示例40、41或42中任一项所述的系统,其中,不同的波导包括第一、第二和第三波导,所述系统被配置为使得所述第一波导用于红色光、第二波导用于绿色光、以及第三波导是用于蓝色光。
44.根据以上示例中的任一项所述的系统,其中,耦入光学元件包括衍射光学元件或反射器。
45.根据以上示例中的任一项所述的系统,其中,耦合光学元件包括衍射光学元件。
46.根据以上示例中的任一项所述的系统,其中,所述耦出光学元件包括衍射光学元件。
47.根据以上示例中的任一项所述的系统,其中,耦合元件被配置为沿至少一个轴增加眼箱的尺寸。
48.根据示例47所述的系统,进一步包括正交光瞳扩展器,其包括位于所述至少一个波导之中或之上的至少一个光重定向元件,所述至少一个光重定向元件被配置为沿与所述至少一轴正交的轴增加眼箱的尺寸。
49.根据示例48所述的系统,其中,所述至少一个光重定向元件包括衍射光学元件。
50.根据以上示例中的任一项所述的系统,其中,相同的波导(a)将从用户的眼睛耦合到到所述至少一个波导中的光引导以被所述相机接收,以便捕获用户眼睛的至少一部分的图像,以及(b)引导从所述图像投影仪耦合的光,使得可以将来自所述投影仪的光引导至所述用户的眼睛以使来自所述图像投影仪的所述图像处于所述用户的视场中。
51.根据以上示例中的任一项所述的系统,其中,相同的耦合元件(a)将来自所述用户的眼睛的光耦合到所述至少一个波导中,以被所述相机接收,以及(b)使来自所述图像投影仪的光从所述至少一个波导耦出到所述用户的眼睛。
52.根据以上示例中的任一项所述的系统,进一步包括电子器件,其被配置为当从反射表面反射的光被阻挡时使相机捕获第一图像。
53.根据示例52所述的系统,其中,所述电子器件被配置为当从反射表面反射的光未被阻挡时,使相机捕获第二图像。
54.根据示例53所述的系统,其中,所述电子器件被配置为使用第一图像来修改第二图像。
55.根据示例54所述的系统,其中,所述电子器件被配置为基于第一图像从第二图像减去。
56.根据以上示例中的任一项所述的系统,其中,所述系统被配置为执行基于所述眼睛的所述图像的眼睛跟踪。
57.根据示例56所述的系统,其中,基于所述眼睛的所述图像执行眼睛跟踪包括存储所述眼睛的视网膜的图像。
58.根据以上示例中的任一项所述的系统,其中,所述系统被配置为:
存储所述眼睛的视网膜的图像;
捕获所述眼睛的所述视网膜的一部分的图像;
将所述视网膜的存储的图像与所述视网膜的所述部分的图像进行比较;以及
基于存储的图像与视网膜中的部分的图像的比较,确定用户的凝视。
59.根据示例58所述的系统,其中,确定用户的凝视包括确定视网膜的哪个部分对应于视网膜的所述部分的图像。
60.根据示例58至59中的任一项所述的系统,其中,确定用户的凝视包括确定眼睛的取向。
61.根据以上示例中的任一项所述的系统,其中,所述耦合元件被配置为使得来自佩戴头戴式显示器的用户前方的环境的光被耦合到所述波导中并在其中被引导。
62.根据以上示例中的任一项所述的系统,其中,相机设置在相对于所述至少一个耦出光学元件的光路中以接收来自用户前方的环境的光中的至少一部分,所述光中的所述至少一部分经由耦合元件被耦合到所述波导中并在其中被引导,并且通过所述耦出耦合元件被从所述波导耦出使得能够由所述相机捕获所述环境的图像。
63.根据以上示例中的任一项所述的系统,其中,相同的波导(a)引导被从所述环境耦合到所述波导的光以被所述相机接收,以便捕获用户前方的环境中的至少一部分的图像,以及(b)引导从所述投影仪耦合的光使得来自所述投影仪的光被引导至所述用户的眼睛,以使来自所述投影仪的所述图像位于所述用户的视场内。
64.根据以上示例中的任一项所述的系统,其中,相同的耦合元件(a)将来自所述环境的光耦合到所述至少一个波导中以被所述相机接收,以及(b)将来自所述图像投影仪的光从所述至少一个波导耦出到所述用户的眼睛。
65.一种头戴式显示系统,其被配置为将光投射到用户的眼睛以在所述用户的视场中显示增强现实图像内容,以及被配置为对佩戴头戴式显示系统的用户的眼睛中的至少一部分成像,所述头戴式显示系统包括:
框架,其被配置为支撑在所述用户的头部上;
被配置为投射图像的图像投影仪;
相机;
设置在所述框架上的目镜,所述目镜被配置为将光引导到所述用户的眼睛中以向所述用户的视场显示增强现实图像内容,所述目镜的至少一部分是透明的且在所述用户佩戴所述头戴式显示器时被设置在所述用户的眼睛前方的位置处,使得所述透明部分将来自所述用户前方的环境的光透射到所述用户的眼睛以提供所述用户前方的所述环境的视图,所述目镜包括:
(a)至少一个波导;
(b)至少一个耦入光学元件,其被配置为将来自所述图像投影仪的光耦合到所述至少一个波导中,以便在其中引导来自所述图像投影仪的光;
(c)至少一个耦合光学元件,其被配置为将在所述波导中引导的来自所述图像投影仪的光从所述波导耦出并将所述光引导至用户的眼睛;以及
(d)至少一个耦出元件,其被配置为将在所述波导内引导的所述光从所述波导耦出并且将所述光引导到所述相机;以及
具有正光焦度的正透镜,其被设置在用户的眼睛和所述目镜之间的光路中,使得从用户的眼睛反射的光通过所述透镜投射到所述目镜;以及
具有负光焦度的负透镜,其被设置在有正透镜的目镜的另一侧,以抵消所述正透镜对来自用户前方的环境的光的光焦度,
其中,图像投影仪被设置在相对于所述至少一个耦入光学元件的光路中,以将来自所述图像投影仪的光耦合到所述波导中以在其中被引导,使得通过所述至少一个耦合元件使所述光从所述波导耦出到所述用户的眼睛,以使来自所述图像投影仪的所述图像位于所述用户的视场内,
其中,所述至少一个耦合元件被配置为使得穿过透镜到达目镜的来自用户眼睛的光被耦合到所述波导中并在其中被引导,以及
其中,相机设置在相对于所述至少一个耦出光学元件的光路中,以接收来自用户的眼睛的光的至少一部分,该光的至少一部分从反射表面反射并经由耦合元件耦合到所述波导中并在其中被引导并且通过所述耦出耦合元件从所述波导耦出。
66.根据示例65所述的系统,其中,所述正透镜包括菲涅耳透镜。
67.根据示例65或66所述的系统,其中,所述正透镜被配置为准直来自所述用户的眼睛的前部区域的光。
68.上面的示例65、66或67中的任一项所述的系统,其中所述正透镜配置为准直来自所述用户眼睛的角膜的光。
69.根据示例65至68中的任一项所述的系统,其中,所述系统被配置为基于所述眼睛的所述图像执行眼睛跟踪。
70.根据示例65至69中的任一项所述的系统,还包括被设置为照射用户的眼睛的光源。
71.根据示例70所述的系统,其中,所述光源包括被配置为将红外光引导到用户的眼睛的一个或多个红外光源。
72.根据示例70或71所述的系统,其中,所述光源包括一个或多个红外发光二极管(LED)。
73.根据以上示例中的任一项所述的系统,其中,所述系统被配置为基于所述眼睛的所述图像经由生物感测来识别用户。

Claims (20)

1.一种头戴式显示系统,其被配置为将光投射到用户的眼睛以在所述用户的视场中显示增强现实图像内容,所述头戴式显示系统包括:
框架,其被配置为支撑在所述用户的头部上;
图像投影仪,其被配置为将图像投射到所述用户的眼睛中以在所述用户的所述视场中显示图像内容;
相机;
至少一个波导;
至少一个耦合光学元件,其被配置为使得光被耦合到所述波导中并在其中被引导;以及
至少一个耦出元件,其被配置为将在所述波导中引导的光从所述波导耦出并将所述光引导至所述相机,
其中,所述相机设置在相对于所述至少一个耦出光学元件的光路中以接收所述光中的至少一部分,所述光中的所述至少一部分经由所述耦合元件被耦合到所述波导中并在其中被引导,并且通过所述耦出耦合元件被从所述波导耦出,使得能够由所述相机捕获图像。
2.根据权利要求1所述的系统,其中,所述至少一个耦合光学元件被配置为使得来自佩戴所述头戴式显示系统的所述用户前方的环境的光被耦合到所述至少一个波导中并且在其中被引导,使得能够由所述相机捕获所述环境的图像。
3.根据权利要求1所述的系统,其中,所述至少一个耦合光学元件被配置为使得从佩戴所述头戴式显示系统的所述用户的所述眼睛反射的光被耦合到所述至少一个波导中并在其中被引导,使得能够由所述相机捕获所述眼睛的图像。
4.根据权利要求1所述的系统,其中,所述至少一个耦合光学元件被配置为使得从佩戴所述头戴式显示系统的所述用户的所述眼睛反射的光被耦合到所述波导中并在其中被引导,使得能够由所述相机捕获所述眼睛的图像,所述系统被配置为对所述眼睛的前部成像。
5.根据权利要求1所述的系统,其中,所述至少一个耦合光学元件被配置为使得从佩戴所述头戴式显示系统的所述用户的所述眼睛反射的光被耦合到所述波导中并在其中被引导,使得能够由所述相机捕获所述眼睛的图像,所述系统被配置为对所述眼睛的角膜表面成像。
6.根据权利要求1所述的系统,其中,所述至少一个耦合光学元件被配置为使得从佩戴所述头戴式显示系统的所述用户的所述眼睛反射的光被耦合到所述波导中并在其中被引导,使得能够由所述相机捕获所述眼睛的图像,所述系统被配置为对所述用户的眼睛的视网膜成像。
7.根据权利要求1所述的系统,进一步包括设置在所述框架上的目镜,所述目镜被配置为将光引导到所述用户的眼睛中以向所述用户的视场显示增强现实图像内容,所述目镜的至少一部分是透明的且在所述用户佩戴所述头戴式显示器时被设置在所述用户的眼睛前方的位置处,使得所述透明部分将来自所述用户前方的环境的光透射到所述用户的眼睛以提供所述用户前方的所述环境的视图。
8.根据权利要求7所述的系统,其中,所述目镜被配置为接收来自所述图像投影仪的光并将所述光引导到所述用户的眼睛中以向所述用户的视场显示增强现实图像内容。
9.根据权利要求7所述的系统,其中,所述目镜包括所述至少一个波导。
10.根据权利要求7所述的系统,其中,所述图像投影仪被配置为将光引导到所述目镜的边缘中。
11.根据权利要求9所述的系统,其中,所述图像投影仪被配置为将光引导到所述至少一个波导的边缘中。
12.根据权利要求1所述的系统,进一步包括至少一个耦入光学元件,其被配置为将来自所述图像投影仪的光耦合到所述至少一个波导中,以便引导来自所述图像投影仪的光以将所述图像内容提供给所述用户的眼睛。
13.根据权利要求1所述的系统,其中,所述至少一个耦合光学元件还被配置为将在所述波导中引导的来自所述图像投影仪的光从所述至少一个波导耦出,使得能够由所述用户的眼睛观看到图像内容。
14.根据权利要求1所述的系统,其中,相同的耦合光学元件被配置为,将在所述波导内引导的来自所述图像投影仪的光从所述波导耦出使得能够由所述用户的眼睛观看到图像内容,并且将光耦合到所述至少一个波导中以在其中被引导到所述相机。
15.根据权利要求1所述的系统,还包括至少一个图像内容耦出光学元件,其被配置为将在所述波导内引导的来自所述图像投影仪的光从所述至少一个波导耦出,使得能够由所述用户的眼睛观看到图像内容。
16.根据权利要求1所述的系统,其中,所述至少一个耦合光学元件面向佩戴所述头戴式成像系统的所述用户的所述眼睛,以接收来自所述眼睛的光。
17.根据权利要求1所述的系统,其中,所述至少一个耦合光学元件被配置为使得来自佩戴所述头戴式成像系统的所述用户前方的所述环境的光被耦合到所述至少一个波导中并在其中被引导,使得能够由所述相机捕获所述环境的图像。
18.根据权利要求1所述的系统,其中,所述至少一个耦合光学元件面向佩戴所述头戴式成像系统的所述用户前方的所述环境,以接收来自所述环境的光。
19.根据权利要求15所述的系统,其中,所述至少一个图像内容耦出光学元件被配置为将在所述波导中引导的来自所述图像投影仪的光从所述至少一个波导耦出,并且所述至少一个耦合光学元件被配置为使得光被耦合到所述波导中并在其中被引导到所述相机,其中所述至少一个图像内容耦出光学元件和所述至少一个耦合光学元件彼此叠加。
20.根据权利要求15所述的系统,其中,所述至少一个图像内容耦出光学元件被配置为将在所述波导内引导的来自所述图像投影仪的光从所述至少一个波导耦出,并且所述至少一个耦合光学元件被配置为使得光被耦合到所述波导中并在其中被导引到所述相机,其中所述至少一个图像内容耦出光学元件和所述至少一个耦合光学元件彼此堆叠。
CN201880072523.3A 2017-09-21 2018-09-21 具有被配置为捕获眼睛和/或环境的图像的波导的增强现实显示器 Pending CN111316153A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762561645P 2017-09-21 2017-09-21
US62/561,645 2017-09-21
PCT/US2018/052241 WO2019060741A1 (en) 2017-09-21 2018-09-21 INCREASED REALITY DISPLAY HAVING A WAVEGUIDE CONFIGURED TO CAPTURE IMAGES OF THE EYE AND / OR THE ENVIRONMENT

Publications (1)

Publication Number Publication Date
CN111316153A true CN111316153A (zh) 2020-06-19

Family

ID=65721054

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880072523.3A Pending CN111316153A (zh) 2017-09-21 2018-09-21 具有被配置为捕获眼睛和/或环境的图像的波导的增强现实显示器

Country Status (9)

Country Link
US (2) US11841481B2 (zh)
EP (2) EP4296753A3 (zh)
JP (3) JP7280250B2 (zh)
KR (1) KR20200057727A (zh)
CN (1) CN111316153A (zh)
AU (1) AU2018338222A1 (zh)
CA (1) CA3075096A1 (zh)
IL (2) IL273397B1 (zh)
WO (1) WO2019060741A1 (zh)

Families Citing this family (102)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2016233280B2 (en) 2015-03-16 2021-03-25 Magic Leap, Inc. Augmented reality pulse oximetry
IL292858B2 (en) 2015-06-15 2023-12-01 Magic Leap Inc Virtual and augmented reality systems and methods
KR102379691B1 (ko) 2016-04-08 2022-03-25 매직 립, 인코포레이티드 가변 포커스 렌즈 엘리먼트들을 가진 증강 현실 시스템들 및 방법들
US10828560B2 (en) * 2016-09-30 2020-11-10 Sony Interactive Entertainment Inc. Systems and methods for stereoscopic vision with head mounted display
IL266677B2 (en) 2016-11-18 2023-11-01 Magic Leap Inc A waveguide light multiplexer using crossed gratings
US11067860B2 (en) 2016-11-18 2021-07-20 Magic Leap, Inc. Liquid crystal diffractive devices with nano-scale pattern and methods of manufacturing the same
CN110192146B (zh) 2016-11-18 2022-09-23 奇跃公司 空间可变液晶衍射光栅
EP3552057B1 (en) 2016-12-08 2022-01-05 Magic Leap, Inc. Diffractive devices based on cholesteric liquid crystal
CN110291453B (zh) 2016-12-14 2022-11-01 奇跃公司 使用具有表面对准图案的软压印复制对液晶图案化
US10371896B2 (en) 2016-12-22 2019-08-06 Magic Leap, Inc. Color separation in planar waveguides using dichroic filters
US20190056600A1 (en) 2016-12-31 2019-02-21 Lumus Ltd Eye tracker based on retinal imaging via light-guide optical element
CA3051239C (en) 2017-01-23 2023-12-19 Magic Leap, Inc. Eyepiece for virtual, augmented, or mixed reality systems
WO2018138714A1 (en) 2017-01-28 2018-08-02 Lumus Ltd. Augmented reality imaging system
US10904514B2 (en) 2017-02-09 2021-01-26 Facebook Technologies, Llc Polarization illumination using acousto-optic structured light in 3D depth sensing
CN110537122B (zh) 2017-02-23 2022-04-29 奇跃公司 基于偏振转换的可变焦虚拟图像设备
US11054581B2 (en) * 2017-03-01 2021-07-06 Akonia Holographics Llc Ducted pupil expansion
WO2018175343A1 (en) 2017-03-21 2018-09-27 Magic Leap, Inc. Eye-imaging apparatus using diffractive optical elements
US11927765B2 (en) * 2017-04-17 2024-03-12 Akonia Holographics Llc Skew mirror auxiliary imaging
US10930710B2 (en) * 2017-05-04 2021-02-23 Apple Inc. Display with nanostructure angle-of-view adjustment structures
US10613413B1 (en) * 2017-05-31 2020-04-07 Facebook Technologies, Llc Ultra-wide field-of-view scanning devices for depth sensing
US11082669B2 (en) * 2017-06-19 2021-08-03 Sony Corporation Image projection apparatus, image processing apparatus, image projection method, image processing method, and image projection system
US10181200B1 (en) 2017-06-28 2019-01-15 Facebook Technologies, Llc Circularly polarized illumination and detection for depth sensing
US10574973B2 (en) 2017-09-06 2020-02-25 Facebook Technologies, Llc Non-mechanical beam steering for depth sensing
IL273397B1 (en) 2017-09-21 2024-05-01 Magic Leap Inc An augmented reality display with a waveguide configured to capture images of an eye and/or environment
EP3701312A4 (en) 2017-10-22 2020-11-11 Lumus Ltd. HEAD-MOUNTED AUGMENTED REALITY DEVICE USING AN OPTICAL BENCH
EP3723580B1 (en) 2017-12-15 2024-01-24 Magic Leap, Inc. Eyepieces for augmented reality display system
CN108459416B (zh) * 2018-04-12 2021-08-06 京东方科技集团股份有限公司 照明装置、显示设备及近眼显示系统
CN108592865A (zh) * 2018-04-28 2018-09-28 京东方科技集团股份有限公司 基于ar设备的几何量测量方法及其装置、ar设备
IL259518B2 (en) 2018-05-22 2023-04-01 Lumus Ltd Optical system and method for improving light field uniformity
US11733523B2 (en) 2018-09-26 2023-08-22 Magic Leap, Inc. Diffractive optical elements with optical power
CN109188700B (zh) * 2018-10-30 2021-05-11 京东方科技集团股份有限公司 光学显示系统及ar/vr显示装置
WO2020106824A1 (en) 2018-11-20 2020-05-28 Magic Leap, Inc. Eyepieces for augmented reality display system
CN113168016B (zh) * 2018-12-11 2023-06-09 富士胶片株式会社 导光元件、图像显示装置及传感装置
US10634907B1 (en) * 2018-12-19 2020-04-28 Facebook Technologies, Llc Eye tracking based on polarization volume grating
CN113260299A (zh) 2019-01-03 2021-08-13 伊梅里斯有限责任公司 用于眼睛追踪的系统和方法
WO2020150753A1 (en) * 2019-01-19 2020-07-23 Ntt Docomo, Inc. An image device with a compact homogenizer
DE102019102604A1 (de) * 2019-02-01 2020-08-06 Carl Zeiss Jena Gmbh Funktionalisierter Wellenleiter für ein Detektorsystem
US10928631B1 (en) * 2019-03-05 2021-02-23 Facebook Technologies, Llc Waveguide display with structured light for eye and face tracking
US10860851B2 (en) * 2019-03-05 2020-12-08 Htc Corporation Head mounted display apparatus and eye-tracking apparatus thereof
WO2020191224A1 (en) * 2019-03-20 2020-09-24 Magic Leap, Inc. System for collecting light
US11846778B2 (en) * 2019-03-20 2023-12-19 Magic Leap, Inc. System for providing illumination of the eye
CN111751987B (zh) * 2019-03-29 2023-04-14 托比股份公司 全息眼睛成像设备
US10659772B1 (en) * 2019-04-23 2020-05-19 Disney Enterprises, Inc. Augmented reality system for layering depth on head-mounted displays using external stereo screens
US20220091420A1 (en) * 2019-04-23 2022-03-24 Directional Systems Tracking Limited Augmented reality system
US10990816B1 (en) * 2019-05-01 2021-04-27 Facebook Technologies, Llc Apparatuses, systems, and methods for mapping corneal curvature
DE102019206364A1 (de) * 2019-05-03 2020-11-05 Audi Ag Erfassungsvorrichtung mit einer Bilderfassungseinrichtung und einem Trägermedium sowie Erfassungssystem mit einer derartigen Erfassungsvorrichtung und einem Gerät mit einem Bildschirm
US11209775B2 (en) * 2019-05-20 2021-12-28 Facebook Technologies, Llc Optical system with polarization volume hologram
KR20200136297A (ko) * 2019-05-27 2020-12-07 삼성전자주식회사 사용자의 시선 방향에 따라 초점 영역을 조절하는 증강 현실 디바이스 및 그 동작 방법
US11467370B2 (en) 2019-05-27 2022-10-11 Samsung Electronics Co., Ltd. Augmented reality device for adjusting focus region according to direction of user's view and operating method of the same
CN114026478B (zh) * 2019-06-14 2023-02-17 奇跃公司 使用光栅耦合器的单侧图案化的光学目镜
CN114286962A (zh) 2019-06-20 2022-04-05 奇跃公司 用于增强现实显示系统的目镜
AU2020301646B2 (en) * 2019-06-27 2024-05-02 Lumus Ltd. Apparatus and methods for eye tracking based on eye imaging via a light-guide optical element
EP3969958A1 (en) * 2019-07-08 2022-03-23 Facebook Technologies, LLC Apodized optical elements for optical artifact reduction
US11099309B2 (en) * 2019-08-23 2021-08-24 Facebook Technologies, Llc Outward coupling suppression in waveguide display
DE102019212989B3 (de) * 2019-08-29 2021-01-14 Audi Ag Kameravorrichtung zum Erzeugen von räumlich darstellenden Bilddaten einer Umgebung
CN112444969B (zh) * 2019-08-30 2022-10-18 成都理想境界科技有限公司 一种大视场双层深度ar波导
US11662581B2 (en) * 2019-11-13 2023-05-30 Google Llc Head mounted display with lightguide and holographic element
CN114730042A (zh) * 2019-11-26 2022-07-08 富士胶片株式会社 光学部件及图像显示装置
WO2021106766A1 (ja) * 2019-11-26 2021-06-03 富士フイルム株式会社 光学部材および画像表示装置
CA3162579C (en) 2019-12-05 2024-01-30 Lumus Ltd Light-guide optical element employing complementary coated partial reflectors, and light-guide optical element having reduced light scattering
JP2023509305A (ja) 2019-12-25 2023-03-08 ルムス エルティーディー. 光ガイド光学素子と関連付けられた光学配置を使用して、眼からの光を方向転換することに基づく、アイトラッキングのための光学システムおよび方法
US11402561B2 (en) * 2020-01-10 2022-08-02 Google Llc Optical elements for displays
CN114766092A (zh) * 2020-01-23 2022-07-19 沃尔沃卡车集团 一种用于使车辆驾驶室中的监视器上显示的图像适应驾驶员位置的方法
WO2021157598A1 (ja) * 2020-02-04 2021-08-12 富士フイルム株式会社 光学素子および画像表示装置
JP7343623B2 (ja) * 2020-02-04 2023-09-12 富士フイルム株式会社 光学素子および画像表示装置
EP4184014A1 (en) 2020-03-04 2023-05-24 LG Electronics, Inc. Blower
US11474358B2 (en) 2020-03-20 2022-10-18 Magic Leap, Inc. Systems and methods for retinal imaging and tracking
EP3935439A1 (en) * 2020-03-27 2022-01-12 Apple Inc. Optical systems with authentication and privacy capabilities
US11740465B2 (en) * 2020-03-27 2023-08-29 Apple Inc. Optical systems with authentication and privacy capabilities
DE102020113579A1 (de) * 2020-05-19 2021-11-25 Audi Aktiengesellschaft Kameravorrichtung zum Erzeugen eines Abbilds einer Umgebung sowie Scheinwerferanordnung
KR102223621B1 (ko) * 2020-07-01 2021-03-05 부경대학교 산학협력단 비가시광선 가시화 자동정합형 증강현실 글래스
GB2600109A (en) * 2020-10-20 2022-04-27 Envisics Ltd Display system and method
TWI831075B (zh) * 2020-11-09 2024-02-01 宏達國際電子股份有限公司 波導裝置及光學引擎
CN116670625A (zh) * 2020-12-17 2023-08-29 鲁姆斯有限公司 基于经由准直元件和光导光学元件对眼睛成像来进行眼睛跟踪的光学系统和方法
KR20220091160A (ko) * 2020-12-23 2022-06-30 삼성전자주식회사 증강 현실 디바이스 및 그 동작 방법
CN114938418A (zh) * 2021-02-04 2022-08-23 佳能株式会社 具有视线检测功能的取景器单元、摄像设备和附接配件
GB2613086B (en) * 2021-02-05 2023-08-23 Envisics Ltd Image projection
IL305555A (en) 2021-03-01 2023-10-01 Lumus Ltd An optical system with a compact coupling from a projector into a waveguide
US20220334392A1 (en) * 2021-04-16 2022-10-20 Nvidia Corporation Holographic virtual reality display
KR20240004595A (ko) * 2021-05-07 2024-01-11 가부시키가이샤 한도오따이 에네루기 켄큐쇼 전자 기기
EP4232868A4 (en) 2021-05-19 2024-04-17 Lumus Ltd. ACTIVE OPTICAL ENGINE
US11853473B2 (en) * 2021-08-18 2023-12-26 Meta Platforms Technologies, Llc Differential illumination for corneal glint detection
CN117651892A (zh) 2021-08-23 2024-03-05 鲁姆斯有限公司 具有嵌入式耦入反射器的复合光导光学元件的制造方法
WO2023044394A1 (en) * 2021-09-16 2023-03-23 Magic Leap, Inc. Uv and visible light exit grating for eyepiece fabrication and operation
US20230091935A1 (en) * 2021-09-22 2023-03-23 GM Global Technology Operations LLC Polarization adaptive waveguide hud
EP4354202A1 (en) * 2021-09-30 2024-04-17 LG Chem, Ltd. Waveguide display device
KR102677544B1 (ko) * 2021-12-06 2024-06-25 고려대학교 세종산학협력단 3차원 물체 표현을 위한 초다시점 증강현실 디스플레이 및 그의 동작 방법
US20230176377A1 (en) * 2021-12-06 2023-06-08 Facebook Technologies, Llc Directional illuminator and display apparatus with switchable diffuser
US11662525B1 (en) 2021-12-09 2023-05-30 Visera Technologies Company Ltd. Optical system
US20230194882A1 (en) * 2021-12-16 2023-06-22 Meta Platforms Technologies, Llc Liquid crystal polarization hologram (lcph) based eye tracking for ar/vr
WO2023122300A1 (en) * 2021-12-23 2023-06-29 Vuzix Corporation Multi-input image light guide system
TW202331357A (zh) * 2021-12-28 2023-08-01 美商元平台技術有限公司 用於眼動追蹤的波導成像系統
US20230204959A1 (en) * 2021-12-28 2023-06-29 Meta Platforms Technologies, Llc Wavelength multiplexed waveguide system for eye tracking
US20230205312A1 (en) * 2021-12-28 2023-06-29 Meta Platforms Technologies, Llc Waveguide imaging system for eye tracking
US11822086B2 (en) * 2022-02-08 2023-11-21 Meta Platforms Technologies, Llc Lightguide based illuminator for reflective display panel
US12002290B2 (en) * 2022-02-25 2024-06-04 Eyetech Digital Systems, Inc. Systems and methods for hybrid edge/cloud processing of eye-tracking image data
WO2023192656A1 (en) * 2022-04-01 2023-10-05 Meta Platforms Technologies, Llc Smart glasses with enhanced optical structures for augmented reality applications
US11912429B2 (en) * 2022-04-05 2024-02-27 Gulfstream Aerospace Corporation System and methodology to provide an augmented view of an environment below an obstructing structure of an aircraft
CN114815035B (zh) * 2022-05-11 2023-10-31 武汉华星光电技术有限公司 显示面板及显示装置
US20230401296A1 (en) * 2022-06-08 2023-12-14 Hewlett-Packard Development Company, L.P. Hologram pattern content deconstruction
WO2024071224A1 (ja) * 2022-09-30 2024-04-04 富士フイルム株式会社 眼画像取得システムおよび虚像表示装置
WO2024073089A1 (en) * 2022-09-30 2024-04-04 Vuzix Corporation Image light guide system with aligned blocking features

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10160843A1 (de) * 2001-12-12 2003-07-10 Daimler Chrysler Ag Biometrisches Erkennungssystem
US20130235191A1 (en) * 2012-03-08 2013-09-12 Google Inc. Near-to-eye display with an integrated out-looking camera
CN104126143A (zh) * 2012-02-15 2014-10-29 谷歌公司 包含眼睛追踪的抬头显示器
US20160018639A1 (en) * 2014-07-17 2016-01-21 Google Inc. Heads-up display with integrated display and imaging system
CN105723697A (zh) * 2013-09-16 2016-06-29 英特尔公司 用于对象跟踪的相机和光源同步
CN105765558A (zh) * 2013-09-03 2016-07-13 醒眸行有限公司 低功率眼睛跟踪系统和方法
WO2016149416A1 (en) * 2015-03-16 2016-09-22 Magic Leap, Inc. Methods and systems for diagnosing and treating health ailments
WO2017134412A1 (en) * 2016-02-04 2017-08-10 Milan Momcilo Popovich Holographic waveguide optical tracker

Family Cites Families (234)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4693544A (en) 1982-12-14 1987-09-15 Nippon Sheet Glass Co., Ltd. Optical branching device with internal waveguide
GB8318863D0 (en) 1983-07-12 1983-08-10 Secr Defence Thermochromic liquid crystal displays
JPS62269174A (ja) 1986-05-18 1987-11-21 Ricoh Co Ltd カラ−複写機における光路分割・色分解光学装置
US4991924A (en) 1989-05-19 1991-02-12 Cornell Research Foundation, Inc. Optical switches using cholesteric or chiral nematic liquid crystals and method of using same
JPH0384516A (ja) 1989-08-29 1991-04-10 Fujitsu Ltd 3次元表示装置
US5082354A (en) 1989-08-29 1992-01-21 Kaiser Aerospace And Electronics Corporation Optical switch and color selection assembly
GB2249387B (en) 1990-10-11 1995-01-25 Holtronic Technologies Ltd Apparatus for and a method of transverse position measurement in proximity lithographic systems
DE69221102T2 (de) 1991-12-20 1998-01-08 Fujitsu Ltd Flüssigkristall-Anzeigevorrichtung mit verschiedenen aufgeteilten Orientierungsbereichen
US6222525B1 (en) 1992-03-05 2001-04-24 Brad A. Armstrong Image controllers with sheet connected sensors
US6219015B1 (en) 1992-04-28 2001-04-17 The Board Of Directors Of The Leland Stanford, Junior University Method and apparatus for using an array of grating light valves to produce multicolor optical images
FR2707781B1 (fr) 1993-07-16 1995-09-01 Idmatic Sa Carte souple équipée d'un dispositif de contrôle de validité.
US5544268A (en) 1994-09-09 1996-08-06 Deacon Research Display panel with electrically-controlled waveguide-routing
WO1996027148A1 (en) 1995-02-28 1996-09-06 Philips Electronics N.V. Electro-optical device
US5825448A (en) 1995-05-19 1998-10-20 Kent State University Reflective optically active diffractive device
US5670988A (en) 1995-09-05 1997-09-23 Interlink Electronics, Inc. Trigger operated electronic device
JP3649818B2 (ja) 1996-09-19 2005-05-18 富士通ディスプレイテクノロジーズ株式会社 液晶表示装置
US5915051A (en) 1997-01-21 1999-06-22 Massascusetts Institute Of Technology Wavelength-selective optical add/drop switch
IL121067A0 (en) 1997-06-12 1997-11-20 Yeda Res & Dev Compact planar optical correlator
US6181393B1 (en) 1997-12-26 2001-01-30 Kabushiki Kaisha Toshiba Liquid crystal display device and method of manufacturing the same
JP3393072B2 (ja) 1998-08-27 2003-04-07 日本電信電話株式会社 表示装置
US6785447B2 (en) 1998-10-09 2004-08-31 Fujitsu Limited Single and multilayer waveguides and fabrication process
US6690845B1 (en) 1998-10-09 2004-02-10 Fujitsu Limited Three-dimensional opto-electronic modules with electrical and optical interconnections and methods for making
US6334960B1 (en) 1999-03-11 2002-01-01 Board Of Regents, The University Of Texas System Step and flash imprint lithography
US6723396B1 (en) 1999-08-17 2004-04-20 Western Washington University Liquid crystal imprinting
JP2001091715A (ja) 1999-09-27 2001-04-06 Nippon Mitsubishi Oil Corp 複合回折素子
US6873087B1 (en) 1999-10-29 2005-03-29 Board Of Regents, The University Of Texas System High precision orientation alignment and gap control stages for imprint lithography processes
GB9928126D0 (en) 1999-11-30 2000-01-26 Secr Defence Bistable nematic liquid crystal device
US7460200B2 (en) 2000-03-27 2008-12-02 Helwett-Packard Development Company, L.P. Liquid crystal alignment
EP1306715B1 (en) 2000-07-05 2008-05-14 Sony Corporation Image display element, and image display device
IL137625A0 (en) 2000-08-01 2001-10-31 Sensis Ltd Detector for an electrophoresis apparatus
WO2002042999A2 (en) 2000-11-03 2002-05-30 Actuality Systems, Inc. Three-dimensional display systems
US6795138B2 (en) 2001-01-11 2004-09-21 Sipix Imaging, Inc. Transmissive or reflective liquid crystal display and novel process for its manufacture
EP1227347A1 (en) 2001-01-29 2002-07-31 Rolic AG Optical device and method for manufacturing same
US6735224B2 (en) 2001-03-01 2004-05-11 Applied Optoelectronics, Inc. Planar lightwave circuit for conditioning tunable laser output
GB2374081B (en) 2001-04-06 2004-06-09 Central Research Lab Ltd A method of forming a liquid crystal polymer layer
KR100701442B1 (ko) 2001-05-10 2007-03-30 엘지.필립스 엘시디 주식회사 잉크젯 방식 액정 도포방법
US6542671B1 (en) 2001-12-12 2003-04-01 Super Light Wave Corp. Integrated 3-dimensional multi-layer thin-film optical couplers and attenuators
US6998196B2 (en) 2001-12-28 2006-02-14 Wavefront Technology Diffractive optical element and method of manufacture
GB0201132D0 (en) 2002-01-18 2002-03-06 Epigem Ltd Method of making patterned retarder
JP3768901B2 (ja) 2002-02-28 2006-04-19 松下電器産業株式会社 立体光導波路の製造方法
GB0215153D0 (en) 2002-07-01 2002-08-07 Univ Hull Luminescent compositions
US6900881B2 (en) 2002-07-11 2005-05-31 Molecular Imprints, Inc. Step and repeat imprint lithography systems
US7070405B2 (en) 2002-08-01 2006-07-04 Molecular Imprints, Inc. Alignment systems for imprint lithography
US6982818B2 (en) 2002-10-10 2006-01-03 Nuonics, Inc. Electronically tunable optical filtering modules
AU2003278314A1 (en) 2002-10-17 2004-05-04 Zbd Displays Ltd. Liquid crystal alignment layer
JP3551187B2 (ja) 2002-11-28 2004-08-04 セイコーエプソン株式会社 光学素子及び照明装置並びに投射型表示装置
TW556031B (en) 2003-01-17 2003-10-01 Chunghwa Picture Tubes Ltd Non-rubbing liquid crystal alignment method
JP2004247947A (ja) 2003-02-13 2004-09-02 Olympus Corp 光学装置
US7341348B2 (en) 2003-03-25 2008-03-11 Bausch & Lomb Incorporated Moiré aberrometer
EP2030562A3 (en) 2003-06-06 2009-03-25 The General Hospital Corporation Process and apparatus for a wavelength tuning source
US7400447B2 (en) 2003-09-03 2008-07-15 Canon Kabushiki Kaisha Stereoscopic image display device
WO2005024469A2 (en) 2003-09-04 2005-03-17 Sioptical, Inc. Interfacing multiple wavelength sources to thin optical waveguides utilizing evanescent coupling
EP1711854A4 (en) 2003-10-17 2009-08-19 Explay Ltd OPTICAL SYSTEM AND METHOD FOR USE IN PROJECTION SYSTEMS
US7122482B2 (en) 2003-10-27 2006-10-17 Molecular Imprints, Inc. Methods for fabricating patterned features utilizing imprint lithography
DE602004023641D1 (de) 2003-11-27 2009-11-26 Asahi Glass Co Ltd Optisches element mit einem flüssigkristall mit optischer isotropie
US7430355B2 (en) 2003-12-08 2008-09-30 University Of Cincinnati Light emissive signage devices based on lightwave coupling
US7385660B2 (en) 2003-12-08 2008-06-10 Sharp Kabushiki Kaisha Liquid crystal display device for transflector having opening in a first electrode for forming a liquid crystal domain and openings at first and second corners of the domain on a second electrode
US8076386B2 (en) 2004-02-23 2011-12-13 Molecular Imprints, Inc. Materials for imprint lithography
GB2411735A (en) 2004-03-06 2005-09-07 Sharp Kk Control of liquid crystal alignment in an optical device
US20050232530A1 (en) 2004-04-01 2005-10-20 Jason Kekas Electronically controlled volume phase grating devices, systems and fabrication methods
US7140861B2 (en) 2004-04-27 2006-11-28 Molecular Imprints, Inc. Compliant hard template for UV imprinting
JP2005316314A (ja) 2004-04-30 2005-11-10 Casio Comput Co Ltd 撮像装置
JP4631308B2 (ja) 2004-04-30 2011-02-16 ソニー株式会社 画像表示装置
WO2005120834A2 (en) 2004-06-03 2005-12-22 Molecular Imprints, Inc. Fluid dispensing and drop-on-demand dispensing for nano-scale manufacturing
USD514570S1 (en) 2004-06-24 2006-02-07 Microsoft Corporation Region of a fingerprint scanning device with an illuminated ring
WO2006017771A1 (en) 2004-08-06 2006-02-16 University Of Washington Variable fixation viewing distance scanned light displays
JP4720424B2 (ja) 2004-12-03 2011-07-13 コニカミノルタホールディングス株式会社 光学デバイスの製造方法
US7206107B2 (en) 2004-12-13 2007-04-17 Nokia Corporation Method and system for beam expansion in a display device
JP4995732B2 (ja) 2004-12-13 2012-08-08 ノキア コーポレイション 表示装置において近焦点で光線拡張するシステム及び方法
US7585424B2 (en) 2005-01-18 2009-09-08 Hewlett-Packard Development Company, L.P. Pattern reversal process for self aligned imprint lithography and device
US8537310B2 (en) 2005-03-01 2013-09-17 North Carolina State University Polarization-independent liquid crystal display devices including multiple polarization grating arrangements and related devices
US7692759B2 (en) 2005-03-01 2010-04-06 Stichting Dutch Polymer Institute Polarization gratings in mesogenic films
US7573640B2 (en) 2005-04-04 2009-08-11 Mirage Innovations Ltd. Multi-plane optical apparatus
US20080043334A1 (en) 2006-08-18 2008-02-21 Mirage Innovations Ltd. Diffractive optical relay and method for manufacturing the same
US11428937B2 (en) 2005-10-07 2022-08-30 Percept Technologies Enhanced optical and perceptual digital eyewear
US20070081123A1 (en) 2005-10-07 2007-04-12 Lewis Scott W Digital eyewear
US8696113B2 (en) 2005-10-07 2014-04-15 Percept Technologies Inc. Enhanced optical and perceptual digital eyewear
JP2007265581A (ja) 2006-03-30 2007-10-11 Fujinon Sano Kk 回折素子
ITTO20060303A1 (it) 2006-04-26 2007-10-27 Consiglio Nazionale Ricerche Lettera di incarico segue
US20080043166A1 (en) 2006-07-28 2008-02-21 Hewlett-Packard Development Company Lp Multi-level layer
EP2095171A4 (en) 2006-12-14 2009-12-30 Nokia Corp DISPLAY DEVICE HAVING TWO OPERATING MODES
WO2008081071A1 (en) 2006-12-28 2008-07-10 Nokia Corporation Light guide plate and a method of manufacturing thereof
US8160411B2 (en) 2006-12-28 2012-04-17 Nokia Corporation Device for expanding an exit pupil in two dimensions
CN101222009A (zh) 2007-01-12 2008-07-16 清华大学 发光二极管
US7394841B1 (en) 2007-01-18 2008-07-01 Epicrystals Oy Light emitting device for visual applications
JP4765962B2 (ja) 2007-02-27 2011-09-07 セイコーエプソン株式会社 液晶装置の製造方法
CN101657741B (zh) 2007-04-16 2012-01-11 北卡罗莱纳州立大学 多层消色差液晶偏振光栅和相关制造方法
CN101688937B (zh) 2007-04-16 2013-10-30 北卡罗莱纳州立大学 低扭曲手性液晶偏振光栅和相关制造方法
WO2008152436A1 (en) 2007-06-14 2008-12-18 Nokia Corporation Displays with integrated backlighting
US20140300695A1 (en) 2007-08-11 2014-10-09 Massachusetts Institute Of Technology Full-Parallax Acousto-Optic/Electro-Optic Holographic Video Display
EP2215513B1 (en) 2007-10-18 2015-05-20 BAE Systems PLC Improvements in or relating to head mounted display systems
JP4395802B2 (ja) 2007-11-29 2010-01-13 ソニー株式会社 画像表示装置
EP2225592B1 (en) 2007-12-18 2015-04-22 Nokia Technologies OY Exit pupil expanders with wide field-of-view
US8757812B2 (en) 2008-05-19 2014-06-24 University of Washington UW TechTransfer—Invention Licensing Scanning laser projection display devices and methods for projecting one or more images onto a surface with a light-scanning optical fiber
JP4518193B2 (ja) 2008-06-10 2010-08-04 ソニー株式会社 光学装置および虚像表示装置
JP5295714B2 (ja) 2008-10-27 2013-09-18 株式会社ソニー・コンピュータエンタテインメント 表示装置、画像処理方法、及びコンピュータプログラム
US10274660B2 (en) 2008-11-17 2019-04-30 Luminit, Llc Holographic substrate-guided wave-based see-through display
US8965152B2 (en) 2008-12-12 2015-02-24 Bae Systems Plc Waveguides
AU2010238336B2 (en) 2009-04-14 2014-02-06 Bae Systems Plc Optical waveguide and display device
JP2010271565A (ja) 2009-05-22 2010-12-02 Seiko Epson Corp 頭部装着型表示装置
US8178011B2 (en) 2009-07-29 2012-05-15 Empire Technology Development Llc Self-assembled nano-lithographic imprint masks
JP2011071500A (ja) 2009-08-31 2011-04-07 Fujifilm Corp パターン転写装置及びパターン形成方法
US8233204B1 (en) 2009-09-30 2012-07-31 Rockwell Collins, Inc. Optical displays
US11320571B2 (en) 2012-11-16 2022-05-03 Rockwell Collins, Inc. Transparent waveguide display providing upper and lower fields of view with uniform light extraction
JP5059079B2 (ja) 2009-10-21 2012-10-24 キヤノン株式会社 積層型回折光学素子および光学系
US8467133B2 (en) 2010-02-28 2013-06-18 Osterhout Group, Inc. See-through display with an optical assembly including a wedge-shaped illumination system
US20120249797A1 (en) 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
US20120206485A1 (en) 2010-02-28 2012-08-16 Osterhout Group, Inc. Ar glasses with event and sensor triggered user movement control of ar eyepiece facilities
US20110213664A1 (en) 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
JP5631776B2 (ja) 2010-03-03 2014-11-26 株式会社東芝 照明装置およびこれを備えた液晶表示装置
US9753297B2 (en) 2010-03-04 2017-09-05 Nokia Corporation Optical apparatus and method for expanding an exit pupil
NL2006747A (en) 2010-07-26 2012-01-30 Asml Netherlands Bv Imprint lithography alignment method and apparatus.
US20120069232A1 (en) 2010-09-16 2012-03-22 Qualcomm Mems Technologies, Inc. Curvilinear camera lens as monitor cover plate
US9406166B2 (en) 2010-11-08 2016-08-02 Seereal Technologies S.A. Display device, in particular a head-mounted display, based on temporal and spatial multiplexing of hologram tiles
US9304319B2 (en) 2010-11-18 2016-04-05 Microsoft Technology Licensing, Llc Automatic focus improvement for augmented reality displays
US10156722B2 (en) 2010-12-24 2018-12-18 Magic Leap, Inc. Methods and systems for displaying stereoscopy with a freeform optical system with addressable focus for virtual and augmented reality
AU2011348122A1 (en) 2010-12-24 2013-07-11 Magic Leap Inc. An ergonomic head mounted display device and optical system
TWI552848B (zh) 2011-01-14 2016-10-11 Jx Nippon Oil & Energy Corp Method for manufacturing a mold for fine pattern transfer and a method for manufacturing a diffraction grating using the same, and a method of manufacturing an organic electroluminescent device having the diffraction grating
US20130321747A1 (en) 2011-02-15 2013-12-05 Sharp Kabushiki Kaisha Liquid crystal display device
US9188778B2 (en) 2011-04-08 2015-11-17 Sharp Kabushiki Kaisha Display device
CA3035118C (en) 2011-05-06 2022-01-04 Magic Leap, Inc. Massive simultaneous remote digital presence world
US8548290B2 (en) 2011-08-23 2013-10-01 Vuzix Corporation Dynamic apertured waveguide for near-eye display
US8998414B2 (en) * 2011-09-26 2015-04-07 Microsoft Technology Licensing, Llc Integrated eye tracking and display system
WO2013049861A1 (en) 2011-09-29 2013-04-04 Magic Leap, Inc. Tactile glove for human-computer interaction
GB201117480D0 (en) 2011-10-10 2011-11-23 Palikaras George Filter
US8885161B2 (en) 2011-10-12 2014-11-11 Spectroclick, Inc. Energy dispersion device
RU2621633C2 (ru) 2011-10-28 2017-06-06 Мэджик Лип, Инк. Система и способ для дополненной и виртуальной реальности
US9170436B2 (en) 2011-10-31 2015-10-27 Hewlett-Packard Development Company, L.P. Luminescent stacked waveguide display
KR102440195B1 (ko) 2011-11-23 2022-09-02 매직 립, 인코포레이티드 3차원 가상 및 증강 현실 디스플레이 시스템
US9575366B2 (en) 2011-12-29 2017-02-21 The Hong Kong University Of Science And Technology Fast switchable and high diffraction efficiency grating ferroelectric liquid crystal cell
US8913789B1 (en) * 2012-01-06 2014-12-16 Google Inc. Input methods and systems for eye positioning using plural glints
JP5957972B2 (ja) 2012-03-07 2016-07-27 セイコーエプソン株式会社 虚像表示装置
US8848289B2 (en) 2012-03-15 2014-09-30 Google Inc. Near-to-eye display with diffractive lens
WO2013144898A2 (en) 2012-03-29 2013-10-03 Ecole Polytechnique Federale De Lausanne (Epfl) Methods and apparatus for imaging with multimode optical fibers
KR102022719B1 (ko) 2012-04-05 2019-11-05 매직 립, 인코포레이티드 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들
CN106125308B (zh) 2012-04-25 2019-10-25 罗克韦尔柯林斯公司 用于显示图像的装置和方法
CN102683803B (zh) 2012-04-28 2015-04-22 深圳光启高等理工研究院 一种基于超材料卫星天线的商业液晶显示屏
US20130314765A1 (en) 2012-05-25 2013-11-28 The Trustees Of Boston College Metamaterial Devices with Environmentally Responsive Materials
US8989535B2 (en) 2012-06-04 2015-03-24 Microsoft Technology Licensing, Llc Multiple waveguide imaging structure
AU2013274359B2 (en) 2012-06-11 2017-05-25 Magic Leap, Inc. Multiple depth plane three-dimensional display using a wave guide reflector array projector
US9671566B2 (en) 2012-06-11 2017-06-06 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US10578946B2 (en) 2012-07-27 2020-03-03 Seereal Technologies S.A. Polarization gratings for oblique incidence angles
US8911080B2 (en) 2012-08-27 2014-12-16 Johnson & Johnson Vision Care, Inc. Usage compliance indicator for contact lenses
US8885997B2 (en) 2012-08-31 2014-11-11 Microsoft Corporation NED polarization system for wavelength pass-through
US9810948B2 (en) 2012-09-05 2017-11-07 Sharp Kabushiki Kaisha Spatial light modulator comprising a liquid crystal device having reduced stray light
IL221863A (en) * 2012-09-10 2014-01-30 Elbit Systems Ltd Digital video photography system when analyzing and displaying
US9345402B2 (en) 2012-09-11 2016-05-24 Augmented Vision, Inc. Compact eye imaging and eye tracking apparatus
CN104813218A (zh) 2012-09-11 2015-07-29 奇跃公司 人机工程学的头戴显示设备和光学系统
US9933684B2 (en) 2012-11-16 2018-04-03 Rockwell Collins, Inc. Transparent waveguide display providing upper and lower fields of view having a specific light output aperture configuration
US9671538B2 (en) 2012-11-19 2017-06-06 The Arizona Board Of Regents On Behalf Of The University Of Arizona Optical elements comprising cholesteric liquid crystal polymers
WO2014080155A1 (en) 2012-11-20 2014-05-30 Milan Momcilo Popovich Waveguide device for homogenizing illumination light
WO2014091204A1 (en) 2012-12-10 2014-06-19 Bae Systems Plc Display comprising an optical waveguide and switchable diffraction gratings and method of producing the same
KR102274413B1 (ko) 2013-01-15 2021-07-07 매직 립, 인코포레이티드 초고해상도 스캐닝 섬유 디스플레이
US8873149B2 (en) 2013-01-28 2014-10-28 David D. Bohn Projection optical system for coupling image light to a near-eye display
KR102067759B1 (ko) 2013-02-15 2020-01-17 삼성전자주식회사 파이버 스캐닝 프로젝터
IL298018B2 (en) 2013-03-11 2024-04-01 Magic Leap Inc System and method for augmentation and virtual reality
EP2973532A4 (en) 2013-03-15 2017-01-18 Magic Leap, Inc. Display system and method
US9392129B2 (en) 2013-03-15 2016-07-12 John Castle Simmons Light management for image and data control
KR20150136601A (ko) 2013-03-25 2015-12-07 에꼴 뽈리떼끄닉 뻬데랄 드 로잔느 (으뻬에프엘) 다수의 출사동을 가진 헤드 착용 디스플레이로부터 투영된 이미지를 디스플레이하기 위한 방법
JP6241762B2 (ja) 2013-03-28 2017-12-06 パナソニックIpマネジメント株式会社 画像表示装置
WO2014172252A1 (en) 2013-04-15 2014-10-23 Kent State University Patterned liquid crystal alignment using ink-jet printed nanoparticles and use thereof to produce patterned, electro-optically addressable devices; ink-jet printable compositions
CN103297702B (zh) * 2013-05-06 2016-04-06 中航华东光电有限公司 用于航空机载头盔定位系统的图像处理装置及其方法
JP2014224846A (ja) 2013-05-15 2014-12-04 セイコーエプソン株式会社 表示装置
WO2014188149A1 (en) 2013-05-20 2014-11-27 Milan Momcilo Popovich Holographic waveguide eye tracker
DE102013105246B4 (de) 2013-05-22 2017-03-23 Leonhard Kurz Stiftung & Co. Kg Optisch variables Element
US9874749B2 (en) 2013-11-27 2018-01-23 Magic Leap, Inc. Virtual and augmented reality systems and methods
US10262462B2 (en) 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US9664905B2 (en) 2013-06-28 2017-05-30 Microsoft Technology Licensing, Llc Display efficiency optimization by color filtering
US10228242B2 (en) 2013-07-12 2019-03-12 Magic Leap, Inc. Method and system for determining user input based on gesture
KR102089661B1 (ko) 2013-08-27 2020-03-17 삼성전자주식회사 와이어 그리드 편광판 및 이를 구비하는 액정 표시패널 및 액정 표시장치
IL295157B2 (en) 2013-10-16 2023-10-01 Magic Leap Inc An augmented or virtual reality head device with intrapupillary distance adjustment
JP6268941B2 (ja) 2013-11-06 2018-01-31 凸版印刷株式会社 偽造防止用デバイスおよびその製造方法
KR102067229B1 (ko) 2013-11-27 2020-02-12 엘지디스플레이 주식회사 액정표시장치 및 그 제조방법
US9857591B2 (en) 2014-05-30 2018-01-02 Magic Leap, Inc. Methods and system for creating focal planes in virtual and augmented reality
AU2014354673B2 (en) 2013-11-27 2019-04-11 Magic Leap, Inc. Virtual and augmented reality systems and methods
KR102360939B1 (ko) 2013-12-19 2022-02-08 배 시스템즈 피엘시 도파관 내부 및 도파관에 관련된 개선
US9459451B2 (en) 2013-12-26 2016-10-04 Microsoft Technology Licensing, Llc Eye tracking apparatus, method and system
US9474902B2 (en) 2013-12-31 2016-10-25 Nano Retina Ltd. Wearable apparatus for delivery of power to a retinal prosthesis
US9836122B2 (en) 2014-01-21 2017-12-05 Osterhout Group, Inc. Eye glint imaging in see-through computer display systems
CA3089749A1 (en) 2014-01-31 2015-08-06 Magic Leap, Inc. Multi-focal display system and method
JP6509883B2 (ja) 2014-01-31 2019-05-08 マジック リープ, インコーポレイテッドMagic Leap,Inc. 多焦点表示システムおよび方法
WO2015125794A1 (ja) * 2014-02-21 2015-08-27 旭硝子株式会社 導光素子および映像表示装置
US10203762B2 (en) * 2014-03-11 2019-02-12 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
US9465215B2 (en) 2014-03-28 2016-10-11 Google Inc. Lightguide with multiple in-coupling holograms for head wearable display
JP2017529128A (ja) 2014-04-16 2017-10-05 ビーム エンジニアリング フォー アドバンスド メジャーメンツ カンパニー 回折波長板レンズを用いてヒトの視力を矯正する方法及び装置
KR102173699B1 (ko) 2014-05-09 2020-11-03 아이플루언스, 인크. 안구 신호들의 인식 및 지속적인 생체 인증을 위한 시스템과 방법들
USD759657S1 (en) 2014-05-19 2016-06-21 Microsoft Corporation Connector with illumination region
WO2015184413A1 (en) 2014-05-30 2015-12-03 Magic Leap, Inc. Methods and systems for generating virtual content display with a virtual or augmented reality apparatus
USD752529S1 (en) 2014-06-09 2016-03-29 Comcast Cable Communications, Llc Electronic housing with illuminated region
JP6726110B2 (ja) 2014-07-31 2020-07-22 イマジンオプティクス・コーポレイション 光学素子、及び回折光学素子
US10746994B2 (en) 2014-08-07 2020-08-18 Microsoft Technology Licensing, Llc Spherical mirror having a decoupled aspheric
KR102213662B1 (ko) 2014-08-22 2021-02-08 삼성전자주식회사 음향광학 소자 어레이
US20160077338A1 (en) 2014-09-16 2016-03-17 Steven John Robbins Compact Projection Light Engine For A Diffractive Waveguide Display
US10067561B2 (en) * 2014-09-22 2018-09-04 Facebook, Inc. Display visibility based on eye convergence
US9494799B2 (en) 2014-09-24 2016-11-15 Microsoft Technology Licensing, Llc Waveguide eye tracking employing switchable diffraction gratings
EP3201686B9 (en) 2014-09-29 2022-01-12 Magic Leap, Inc. Architectures and methods for outputting different wavelength light out of waveguides
US20160097930A1 (en) 2014-10-06 2016-04-07 Steven John Robbins Microdisplay optical system having two microlens arrays
CN107209437B (zh) 2014-11-24 2021-06-22 兰斯维克托公司 具有改进的区域过渡的液晶光束控制装置及其制造方法
WO2016113533A2 (en) 2015-01-12 2016-07-21 Milan Momcilo Popovich Holographic waveguide light field displays
JP2016142887A (ja) 2015-02-02 2016-08-08 セイコーエプソン株式会社 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム
EP3062142B1 (en) 2015-02-26 2018-10-03 Nokia Technologies OY Apparatus for a near-eye display
US10591869B2 (en) 2015-03-24 2020-03-17 Light Field Lab, Inc. Tileable, coplanar, flat-panel 3-D display with tactile and audio interfaces
CA2981652C (en) 2015-04-02 2023-08-22 University Of Rochester Freeform nanostructured surface for virtual and augmented reality near eye display
USD758367S1 (en) 2015-05-14 2016-06-07 Magic Leap, Inc. Virtual reality headset
IL292858B2 (en) 2015-06-15 2023-12-01 Magic Leap Inc Virtual and augmented reality systems and methods
KR102390375B1 (ko) 2015-08-26 2022-04-25 삼성전자주식회사 백라이트 유닛 및 이를 포함한 입체 영상 표시 장치
CN108351527B (zh) 2015-09-23 2024-06-18 奇跃公司 采用离轴成像器的眼睛成像
WO2017059379A1 (en) 2015-09-30 2017-04-06 Daqri, Llc Bidirectional holographic lens
KR102592980B1 (ko) 2015-11-04 2023-10-20 매직 립, 인코포레이티드 광 필드 디스플레이 계측
KR102404944B1 (ko) 2015-11-06 2022-06-08 삼성디스플레이 주식회사 표시 기판 및 이를 포함하는 액정 표시 장치
DE102015122055B4 (de) 2015-12-17 2018-08-30 Carl Zeiss Ag Optisches System sowie Verfahren zum Übertragen eines Quellbildes
KR102567431B1 (ko) 2016-01-19 2023-08-14 매직 립, 인코포레이티드 눈 이미지 수집, 선택 및 결합
USD805734S1 (en) 2016-03-04 2017-12-26 Nike, Inc. Shirt
USD794288S1 (en) 2016-03-11 2017-08-15 Nike, Inc. Shoe with illuminable sole light sequence
US20170373459A1 (en) 2016-06-27 2017-12-28 University Of Central Florida Research Foundation, Inc. Volume polarization grating, methods of making, and applications
JP2018004950A (ja) 2016-07-01 2018-01-11 フォーブ インコーポレーテッド 映像表示システム、映像表示方法、映像表示プログラム
US10551622B2 (en) 2016-10-26 2020-02-04 Microsoft Technology Licensing, Llc Field of view tiling in waveguide-based near-eye displays
IL266677B2 (en) 2016-11-18 2023-11-01 Magic Leap Inc A waveguide light multiplexer using crossed gratings
US11067860B2 (en) 2016-11-18 2021-07-20 Magic Leap, Inc. Liquid crystal diffractive devices with nano-scale pattern and methods of manufacturing the same
CN110192146B (zh) 2016-11-18 2022-09-23 奇跃公司 空间可变液晶衍射光栅
CN110178077B (zh) 2016-11-18 2022-08-30 奇跃公司 用于重定向具有宽入射角范围的光的多层液晶衍射光栅
EP3552057B1 (en) 2016-12-08 2022-01-05 Magic Leap, Inc. Diffractive devices based on cholesteric liquid crystal
CN110291453B (zh) 2016-12-14 2022-11-01 奇跃公司 使用具有表面对准图案的软压印复制对液晶图案化
US10746999B2 (en) 2016-12-28 2020-08-18 Magic Leap, Inc. Dual depth exit pupil expander
US10545346B2 (en) 2017-01-05 2020-01-28 Digilens Inc. Wearable heads up displays
EP3574350A4 (en) 2017-01-27 2020-12-09 Magic Leap, Inc. ANTIREFLEX COATING FOR META SURFACES
US11243450B2 (en) 2017-01-30 2022-02-08 The Charles Stark Draper Laboratory, Inc. Saw modulator having optical power component for extended angular redirection of light
CN110537122B (zh) 2017-02-23 2022-04-29 奇跃公司 基于偏振转换的可变焦虚拟图像设备
CN110462487B (zh) 2017-03-21 2022-07-01 奇跃公司 用于组合视场的具有不同衍射光栅的堆叠波导
WO2018175343A1 (en) 2017-03-21 2018-09-27 Magic Leap, Inc. Eye-imaging apparatus using diffractive optical elements
US10409074B2 (en) * 2017-05-03 2019-09-10 Microsoft Technology Licensing, Llc Near-to-eye display with steerable phased arrays
US10546518B2 (en) * 2017-05-15 2020-01-28 Google Llc Near-eye display with extended effective eyebox via eye tracking
IL273397B1 (en) 2017-09-21 2024-05-01 Magic Leap Inc An augmented reality display with a waveguide configured to capture images of an eye and/or environment
US11733523B2 (en) 2018-09-26 2023-08-22 Magic Leap, Inc. Diffractive optical elements with optical power

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10160843A1 (de) * 2001-12-12 2003-07-10 Daimler Chrysler Ag Biometrisches Erkennungssystem
CN104126143A (zh) * 2012-02-15 2014-10-29 谷歌公司 包含眼睛追踪的抬头显示器
US20130235191A1 (en) * 2012-03-08 2013-09-12 Google Inc. Near-to-eye display with an integrated out-looking camera
CN105765558A (zh) * 2013-09-03 2016-07-13 醒眸行有限公司 低功率眼睛跟踪系统和方法
CN105723697A (zh) * 2013-09-16 2016-06-29 英特尔公司 用于对象跟踪的相机和光源同步
US20160018639A1 (en) * 2014-07-17 2016-01-21 Google Inc. Heads-up display with integrated display and imaging system
WO2016149416A1 (en) * 2015-03-16 2016-09-22 Magic Leap, Inc. Methods and systems for diagnosing and treating health ailments
WO2017134412A1 (en) * 2016-02-04 2017-08-10 Milan Momcilo Popovich Holographic waveguide optical tracker

Also Published As

Publication number Publication date
IL311996A (en) 2024-06-01
EP3685215B1 (en) 2024-01-03
IL273397A (en) 2020-05-31
EP3685215A1 (en) 2020-07-29
EP3685215A4 (en) 2021-06-16
US20240126090A1 (en) 2024-04-18
AU2018338222A1 (en) 2020-03-19
IL273397B1 (en) 2024-05-01
US20190086674A1 (en) 2019-03-21
JP7280250B2 (ja) 2023-05-23
WO2019060741A1 (en) 2019-03-28
US11841481B2 (en) 2023-12-12
JP2020534584A (ja) 2020-11-26
CA3075096A1 (en) 2019-03-28
KR20200057727A (ko) 2020-05-26
EP4296753A2 (en) 2023-12-27
EP4296753A3 (en) 2024-06-12
JP2023011663A (ja) 2023-01-24
JP2024036393A (ja) 2024-03-15

Similar Documents

Publication Publication Date Title
US20240126090A1 (en) Augmented reality display with waveguide configured to capture images of eye and/or environment
US11733523B2 (en) Diffractive optical elements with optical power
JP7485720B2 (ja) 回折光学要素を使用した眼結像装置
US11828946B2 (en) Systems and methods for retinal imaging and tracking
US11846778B2 (en) System for providing illumination of the eye
JP7376578B2 (ja) ピンホールおよびスリットカメラを伴うアイウェア
US20230393398A1 (en) System for collecting light
JPWO2020069037A5 (zh)

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination