CN104067334B - 头戴式显示器的自适应亮度控制 - Google Patents

头戴式显示器的自适应亮度控制 Download PDF

Info

Publication number
CN104067334B
CN104067334B CN201280053495.3A CN201280053495A CN104067334B CN 104067334 B CN104067334 B CN 104067334B CN 201280053495 A CN201280053495 A CN 201280053495A CN 104067334 B CN104067334 B CN 104067334B
Authority
CN
China
Prior art keywords
transparency
brightness value
surrounding
cgi
eyepiece
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280053495.3A
Other languages
English (en)
Other versions
CN104067334A (zh
Inventor
缪潇宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN104067334A publication Critical patent/CN104067334A/zh
Application granted granted Critical
Publication of CN104067334B publication Critical patent/CN104067334B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0118—Head-up displays characterised by optical features comprising devices for improving the contrast of the display / brillance control visibility
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0626—Adjustment of display parameters for control of overall brightness
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0693—Calibration of display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/14—Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/144—Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light being ambient light

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

一种用于头戴式显示器“HMD”的目镜的自适应亮度控制的技术包括从所述HMD的所述目镜的观看区向用户的眼睛显示计算机产生的图像“CGI”。从环绕所述HMD的周围环境捕获图像数据。至少部分地基于所述图像数据而计算所述周围环境的亮度值。至少部分地基于所述亮度值而确定偏置功率设定。将所述偏置功率设定应用于照明源以用于产生所述CGI且以所述偏置功率设定来控制显示给所述用户的所述眼睛的所述CGI的亮度级。

Description

头戴式显示器的自适应亮度控制
技术领域
本发明一股来说涉及光学领域，且特定来说但非排他性地涉及近眼光学系统。
背景技术
头戴式显示器(“HMD”)为佩戴于头部上或周围的显示装置。HMD通常并入有某种近眼光学系统以在人眼的几厘米内发射光图像。单眼显示器称为单眼HMD，而双眼显示器称为双眼HMD。一些HMD仅显示计算机产生的图像(“CGI”)，而其它类型的HMD能够将CGI叠加于真实世界视图上。此后一类型的HMD可用作用于实现增强现实的硬件平台。借助增强现实，世界的观看者的图像以重叠的CGI而增强，也称为平视显示器(“HUD”)。
HMD具有众多实际工作及休闲应用。航空应用准许飞行员在不用使其眼睛脱离飞行路径的情况下看到重要飞行控制信息。公共安全应用包括地图的战术显示及热成像。其它应用领域包括视频游戏、交通运输及电信。随着技术演进必然存在新发现的实际工作及休闲应用；然而，这些应用中的许多应用由于用于实施现有HMD的常规光学系统的成本、大小、重量、视域及效率而受限制。
附图说明
参考以下各图描述本发明的非限制性及非穷尽性实施例，其中除非另有说明，否则贯穿各个视图相似参考编号指代相似部件。
图1是根据本发明的实施例用具有自适应亮度控制的目镜实施的双眼HMD的俯视图。
图2是图解说明根据本发明的实施例供与HMD一起使用的自适应亮度控制系统的功能框图。
图3A是图解说明根据本发明的实施例用于HMD的自适应亮度控制的过程的流程图。
图3B是图解说明根据本发明的实施例用于确定何时调整灯功率对目镜透明度的过程的流程图。
图4是根据本发明的实施例的目镜的横截面图。
图5是根据本发明的实施例的目镜的透视图。
图6是图解说明根据本发明的实施例用以将近眼图像递送到用户的目镜的操作过程的流程图。
具体实施方式
本文中描述一种用于头戴式显示器(“HMD”)的自适应亮度控制的系统、设备及方法的实施例。在以下说明中，为提供对各实施例的透彻理解而列举大量具体细节。然而，所属领域的技术人员将认识到，本文中所描述的技术可在不具有所述具体细节中的一或多者的情况下实践或者可借助其它方法、组件、材料等来实践。在其它实例中，未详细展示或描述众所周知的结构、材料或操作以避免使某些方面模糊。
本说明书通篇所提及的“一个实施例”或“一实施例”意指结合所述实施例描述的特定特征、结构或特性包括于本发明的至少一个实施例中。因此，在本说明书通篇各处出现的片语“在一个实施例中”或“在一实施例中”未必全部指同一实施例。此外，特定特征、结构或特性可以任何适合方式组合于一个或多个实施例中。
图1是根据本发明的实施例使用一对近眼光学目镜101的头戴式显示器(“HMD”)100的俯视图。目镜101安装到框架组合件，所述框架组合件包括鼻梁件105、左耳臂110及右耳臂115。尽管图1图解说明双眼实施例，但HMD100也可实施为其中仅单个目镜101定位于单只眼120前方的单眼HMD。
两个目镜101固定到可佩戴于用户的头部上的眼镜布置中。左耳臂110及右耳臂115沿着用户的脚丝区延伸且剩余部分在用户的耳朵上，而鼻组合件105搁放在用户的鼻子上。框架组合件经定形及大小以将每一目镜101的观看区125定位于用户的对应眼睛120前方。当然，可使用具有其它形状的其它框架组合件(例如，具有耳臂及鼻梁支撑件的护目镜、单个连续头戴式部件、头带、眼珠型眼镜等)。
HMD100的所图解说明实施例能够向用户显示增强现实。每一目镜的观看区125准许用户经由外部周围场景光130看到真实世界图像。左及右(双眼实施例)CGI光135可由耦合到目镜101的相应显示源140的一个或两个CGI引擎(未图解说明)产生。CGI光135由用户见为虚拟图像作为增强现实叠加于真实世界上。在一些实施例中，可阻挡、选择性地阻挡或部分地阻挡周围场景光130以改善图像对比度且在一些情形中提供虚拟现实显示。
HMD100包括可使用包括以下各项的以下组件中的一或多者来实施的自适应亮度控制特征：显示源140、周围光传感器145、可变透明度层150、控制器155及用户接口(例如，图形用户接口(未图解说明)及触摸接口160)。在一个实施例中，自适应亮度控制特征基于周围环境的亮度而实时调整CGI光135的显示亮度。在一个实施例中，自适应亮度控制特征包括可变透明度层150，其安置于观看区125上方以控制穿过目镜101透射到眼睛120的周围场景光130的量。也可基于周围环境的亮度而实时调整可变透明度层150的透明度以实现用户的舒适亮度级且获得周围场景光130与CGI光135之间的所要对比度等级。自适应亮度控制特征可能够调整CGI光135的亮度及目镜101的透明度两者以实现较大动态范围且增加用户舒适性及显示选项。
图2是图解说明根据本发明的实施例供与HMD100一起使用的自适应亮度控制系统200的功能框图。自适应亮度控制系统200的所图解说明实施例包括周围光传感器145、控制器155、照明电源205、显示源140、透镜透明度致动器210、可变透明度层155、用户接口215及亮度查找表220。
在操作期间，控制器155监视周围光传感器145的输出以确定周围环境225的亮度。基于所确定亮度，控制器155可调整从显示源140输出的显示亮度及/或可变透明度层155的透明度。在所图解说明的实施例中，这些调整是至少部分地基于存储于亮度查找表220内的默认校准曲线。在一个实施例中，用户接口215可促进用户依据默认设定应用可选择偏移。用户接口215可使用各种接口机制来实施，例如触摸接口160、由CGI光135再现以提供视觉用户反馈的图形用户接口(“GUI”)、话音命令接口、听觉反馈接口或其它。
控制器155是执行用以实施本文中所揭示的自适应亮度控制功能的逻辑的处理器。控制器155可实施为执行固件/软件指令的专用集成电路(“ASIC”)、现场可编程门阵列(“FPGA”)、通用处理器或其它。可执行指令以及亮度查找表220可存储于耦合到控制器155的存储器单元230中。或者，由控制器155执行的指令可为硬连线逻辑。尽管图1将控制器155图解说明为安置于HMD100的耳臂部件155内，但控制器155可嵌入于框架组合件内的任何地方或甚至安装到目镜101中的一者。
周围光传感器145包括用于获取周围环境225的图像数据的一或多个光敏元件(例如，CMOS图像传感器、光二极管、电荷耦合装置等)。周围光传感器145可实施为单个光敏元件，在此情形中所获取图像数据为所述单个光敏元件的输出。在其它实施例中，周围光传感器145可包括多个光敏元件，例如用于获取周围环境225的低或高分辨率静止图片/视频图片的图像传感器像素阵列。在这些实施例中，图像数据可为静止图片或连续视频串流。
周围光传感器145可安置于HMD100的框架组合件上任何地方或甚至安装到目镜101的一部分。在一个实施例中，周围光传感器145安置于面向前的配置中以使得其测量照射在目镜101上的向前周围环境的亮度。举例来说，周围光传感器145可安置于框架组合件的前左(经图解说明)或右拐角中的一者处，或甚至安置于鼻梁件105内。在一个实施例中，周围光传感器145可安置于与闪光灯相同的电路板(例如，印刷电路板)上，及/或单独相机模块经安置以减少安装到框架组合件的独立组件的数目且共享用于将信号从电路板耦合到控制器155的共用柔性带状信号缆线。
控制器155经耦合以控制显示源140。在一个实施例中，控制器155将控制信号235输出到照明电源205。照明电源205为用于控制施加到显示源140的偏置功率240的功率控制器。举例来说，照明电源205可为用于给背光或灯(例如，LED源)供电的电压控制电流源，所述后部背光或灯照明产生CGI光135的显示面板(例如，LCOS显示器、LCD面板等)。或者，显示源140可为直接发射显示器(例如，OLED、量子点阵列等)且照明电源205控制直接施加到显示面板的偏置功率240。
在所图解说明的实施例中，控制器155经由控制信号245进一步耦合到透镜透明度致动器210，其又经由控制信号250致动或控制可变透明度层155的透明度。可变透明度层155可使用涂覆/安装于观看区125中的目镜101的外部(或周围场景侧)上的电致变色或可切换反射镜层来实施。举例来说，可变透明度层155可为响应于由透镜透明度致动器210输出的控制信号250(例如，偏置电压)而改变其不透明度的LCD层。在其中控制信号250为电压信号的实施例中，透镜透明度致动器210可实施为可控制电压源。在其中控制信号250为偏置电流信号的实施例中，透镜透明度致动器210可实施为可控制电流源。
如上文所论述，用户接口215可使用提供到控制器155的人机接口的各种接口机制来实施，例如触摸接口160、在CGI光135内再现以提供视觉用户反馈的GUI、话音命令接口、听觉反馈接口或其它。在图1的所图解说明的实施例中，用户接口215包括沿着用户的脚丝区处的左耳臂110安置的触摸接口160且包括在CGI光135内再现的反馈GUI。用户可使用触摸接口160的表面上的手指轻击及挥击运动来与自适应亮度控制功能交互作用。在此实施例中，触摸接口160可为电容敏感表面。在CGI光135内再现的反馈GUI可用于确认经由触摸接口160接收的用户输入且以视觉方式向用户指示自适应亮度控制系统的当前设定，包括应用于默认校准曲线的任何用户偏移。
图3A是图解说明根据本发明的实施例用于HMD100的自适应亮度控制的过程300的流程图。过程框中的一些或全部在过程300中出现的次序不应被视为限制性的。而是，受益于本发明的熟习此项技术者将理解，可以未图解说明的各种次序或甚至并行地执行过程框中的一些过程框。
在过程框305中，周围光传感器145从周围环境225捕获图像数据。图像数据可通过单个光敏元件(例如，单个光电二极管或其它亮度传感器)的曝光或多像素阵列图像传感器(例如，静止或视频图像传感器)的曝光来捕获。周围光传感器145可为用于感测周围环境225的亮度的唯一目的的独立光敏装置，或也可用于额外目的。举例来说，在一个实施例中，周围光传感器145还捕获面向前的周围环境225的静止图像或视频图像。
在决策框307中，如果启用外部闪光灯(例如，面向前的LED闪光灯)以用于在低光环境中获取静止或视频图像，那么停用本文中所描述的自适应亮度控制特征(过程框309)。在停用自适应亮度控制的情况下，可维持先前亮度设定，或替代地，可应用灯功率及目镜透明度两者的默认闪光灯设定。在外部闪光灯的操作期间停用自适应亮度控制防止来自外部闪光灯本身的照明干扰自适应亮度设定。在一个实施例中，自适应亮度控制特征可在外部闪光灯被启用时操作，但使用适当偏移/滤光算法以计及来自外部闪光灯光学输出的影响。
如果停用外部闪光灯，那么过程300继续到过程框310。在过程框310中，将图像数据传送到控制器155(或耦合到控制器155的存储器单元230)中以由控制器155进行亮度分析。控制器155分析图像数据以至少部分地基于图像数据(例如，图像数据的亮度)而计算亮度值。在其中周围光传感器145为简单亮度传感器的实施例中，可使亮度值与图像数据的简单强度读数相关。在其中周围光传感器145捕获静止或视频图像的实施例中，亮度值可对应于当捕获图像数据时周围光传感器145的自动曝光值或曝光时间。在后一实施例中，控制器155可包括用于计算曝光时间的数字信号处理(“DSP”)块。
在包括用于控制CGI光的亮度的可变灯功率(决策框315)的HMD100的实施例中，过程300继续到过程框320。在过程框320中，控制器155使用所确定亮度值来确定用于应用于显示源405的偏置功率设定。在所图解说明的实施例中，控制器155使用亮度值来索引到亮度查找表200中以识别与所确定亮度值相关联的对应偏置功率设定。当然，在其它实施例中，与索引到查找表中相反，可通过将亮度值插入到预定亮度对功率方程式中来确定偏置功率设定。
在过程框325中，如果用户已经由用户介面215输入用户调整以改变CGI图像的亮度，那么将用户偏移应用于默认偏置功率设定。最后，在过程框330中，响应于从控制器155输出的控制信号235而经由对应用于显示源140的偏置功率设定(经由照明电源205)的适当调整来调整从目镜101输出的CGI光的照明强度。可响应于用户请求而更新、响应于周围环境225的亮度的阈值改变而自动更新、实时连续更新或以其它方式更新CGI光的亮度设定。
返回到过程框310，在包括目镜101的可变透明度遮蔽以阻挡可变量的周围光通过观看区125(决策框335)的HMD100的实施例中，过程300继续到过程框340。应了解，HMD100的一些实施例可包括可变灯功率及可变目镜透明度两者，在此情形中可与过程框340到350的执行并行或交错地执行过程框320到330。
在过程框340中，控制器155使用所确定亮度值来确定可变透明度层150的透明度设定。在所图解说明的实施例中，控制器155使用亮度值来索引到亮度查找表200(或另一独立表中)以进一步识别对应控制设定从而应用于与所确定亮度值相关联的可变透明度层150。当然，在其它实施例中，与索引到查找表中相反，可通过将亮度值插入到预定亮度对透明度方程式中来确定透明度控制设定。在一个实施例中，查找表存储默认校准设定。
在过程框345中，如果用户已经由用户介面215输入对观看区125的透明度的用户调整，那么将用户偏移应用于默认偏置控制设定。最后，在过程框350中，经由对应用于可变透明度层150的控制设定的适当调整来调整可变透明度层150的透明度，经由透镜透明度致动器210，响应于从控制器155输出的控制信号245。在一个实施例中，可变透明度层150可像在两个透明度状态之间交替的快门那样操作，其中通过调整控制信号250的频率或工作循环来实现可变性。在另一实施例中，可变透明度层150针对控制信号250的给定值具有静态或恒定透明度，但可选择控制信号250的许多不多值。可响应于用户请求而更新、响应于周围环境225的亮度的阈值改变而自动更新、实时连续更新或以其它方式更新目镜100的透明度。
图3A图解说明可如何经由变化灯功率及/或目镜透明度两者来实现亮度控制。然而，图3A仅指示这两个方案可并行或彼此独立地操作，但不论述这两个亮度机制可如何一起操作以实现统一的亮度控制。图3B是图解说明根据本发明的实施例用于确定何时调整灯功率对目镜透明度的过程301的流程图。过程301计及两个情景。第一情景描述当总显示亮度太低(例如，从室内环境走到亮的室外环境)时的控制程序。第二情景描述当总显示亮度太高(例如，从室外环境走到较暗室内环境)时的控制程序。
在过程框355中，控制系统200经由周围光传感器145连续监视周围环境225的亮度。如果所发射CGI光135的总亮度太亮(决策框360)，那么过程301继续到决策框365。总亮度的确定可包括在通过目镜101的周围环境光的强度对从目镜101发射的CGI光135的强度之间是否存在用于用户舒适性的充足对比度的确定。在决策框365中，控制器155确定可变透明度层150的当前透明度设定是否处于透视目镜的最小透明度。如果不是，那么可减小可变透明度层150的透明度。在一个实施例中，可变透明度层150可具有有限数目个透明度设定(例如，两个或两个以上设定)。在这些实施例中，可以多个反复递增地减小可变透明度层150的透明度，或以单个反复减小到其最小设定，以减小来自周围环境225的眩光且增加与CGI光135的对比度。返回到决策框365，如果可变透明度层150的透明度已经处于最小值(即，阻挡所准许的最大外部周围光)，那么增加显示源140的灯功率。可递增地增加灯功率直到在决策框360中实现并确定周围环境225与CGI光135之间的所要对比度。当在亮度太低的情景中操作时，不增加灯功率直到可变透明度层150的透明度已达到阈值最小等级。此技术节约电力消耗，因为与增加灯功率相比，减小可变透明度层150的透明度所消耗的电力较少。
返回到决策框360，如果总显示亮度太高，那么过程301继续到过程框380。在过程框380中，停用可变透明度层150(即，设定为最大透明度)或经由过程301的多个反复在有限步骤中增加其透明度。在过程框385中，减小显示源140的灯功率(例如，以固定有限步骤减小)。过程301接着重新评价周围环境225的亮度(过程框355)且做出目镜101的总亮度的新确定(决策框360)。如果CGI光135与周围环境225之间的对比度使得目镜101的总亮度仍太高或太低，那么过程301如上文所论述重新执行。否则，如果亮度被视为适当，那么控制系统200继续监视周围环境355的亮度。
图4及5图解说明根据本发明的实施例供与HMD一起使用的目镜400。图4图解说明目镜400的的横截面图，而图5图解说明其透视图。目镜400是图1中所图解说明的目镜101的一个可能实施方案。目镜400的所图解说明实施例包括图像源405、输入耦合偏振分束器(“PBS”)410、输出耦合PBS415、末端反射器420、偏振旋转器425及可变透明度层427。目镜400进一步包括照明区430及观看区435。图像源405的所图解说明实施例包括照明源440及显示面板445。末端反射器420的所图解说明实施例包括凸形反射层455。
在一个实施例中，目镜400的组件可经由界定空气腔且将内部组件固持到位的线框架来固持在一起，或可由一或多种固体光学材料(例如，玻璃、石英、丙烯酸、透明塑料、PMMA、ZEONEX-E48R等)制作，外部组件安置到其上且内部组件嵌入于其中。在所图解说明的实施例中，输入耦合PBS410及输出耦合PBS415与正向传播路径403成倾斜角度(例如，45度)安装于目镜400内。正向传播路径403在目镜400内从照明区430到观看区435延伸。
目镜400由观看区435中的透明材料(例如，玻璃、石英、丙烯酸、透明塑料、PMMA、ZEONEX-E48R等)制作以准许周围场景光130通过目镜400的周围场景侧401及朝向眼睛侧402以到达眼睛120。观看区435的半透明性质准许目镜400通过用CGI光增强周围场景光130而向用户提供增强现实。可变透明度层427安置于观看区235中的周围场景侧201上以自动调暗周围场景光130。
可使用发光二极管(“LED”)源(或多色彩LED阵列)来实施照明模块440，其经由输入耦合PBS410照明显示面板445。照明模块440可输出非偏振光(例如，P及S线性偏振分量两者)或输出偏振光(例如，仅P偏振分量)。照明模块440及显示面板445可在目镜400的任一侧上以相反配置安装到照明区430中的目镜400的外部侧。
输入耦合PBS410定位于照明区430内在照明模块440与显示面板445之间。输入耦合PBS440可实施为线网格偏振器、多层薄膜偏振器、PBS立方体或其它。输入耦合PBS410操作以实质上通过第一线性偏振的光，而实质上反射第二偏振的光。两种线性偏振通常为正交线性偏振。显示面板445(例如，LCOS、LCD面板等)将图像数据赋予到由照明模块440输出的照明光上以通过图像像素阵列经由选择性反射输出计算机产生的图像(“CGI”)光。显示面板445的反射使入射灯光的偏振旋转90度。
在入射灯光被反射后，CGI光(其已偏振旋转90度)由输入耦合PBS410重新引导且沿着正向传播路径403沿目镜400向下传播。在一个实施例中，在不需要全内反射(“TIR”)的情况下CGI光沿着正向传播路径403沿目镜400向下引导。换句话说，由CGI光形成的光锥的横截面形状及散度被限制，以使得光线到达末端反射器而无离开目镜400的侧的TIR。在一个实施例中，光锥散度角度(例如，15度)由图案化到照明模块440、显示面板445或目镜400内别处上的遮黑膜控制。
正向传播路径403延伸到末端反射器420。在一个实施例中，目镜400的长度经选择以使得末端反射器420的焦平面与显示面板445的发射孔径实质上一致。为实现与显示面板445的发射孔径的焦平面对准，可结合彼此选择目镜400的长度及反射层455的曲率半径两者。
观看区435的所图解说明实施例包括由输出耦合PBS415形成的反射表面。在一个实施例中，观看区435部分地透明，此准许外部(周围)场景光130通过目镜400的周围场景侧401及朝向眼睛侧402以到达眼睛120。部分透明实施例促进增强现实(“AR”)，其中CGI光叠加于到用户眼睛120的外部场景光130上。通过自适应地控制可变透明度层427的透明度(或不透明度)，可调整观看区435对周围场景光130的总透明度。
输出耦合PBS415可经配置以通过正交线性偏振(例如，S偏振)，而输入耦合PBS210在反射其它线性偏振(例如，P偏振)时通过。或者，通过将半波偏振旋转器插入于两个PBS之间的正向传播路径403中，输出耦合PBS415可与输入耦合PBS415相同。在所图解说明的实施例中，偏振旋转器425为安置于输出耦合PBS415与反射层455之间的四分之一波板偏振旋转器。在由反射层455反射之后，CGI光在其经由正向传播路径403及反向传播路径404两次通过四分之一波板期间偏振旋转90度。在一个实施例中，反射层455既反射CGI光又使其准直以使得沿着反向传播路径404行进的CGI光实质上准直。如前文所陈述，末端反射器的焦平面可经配置而与显示面板445的发射孔径一致或几乎一致。使CGI光準直帮助眼睛120在近眼配置(例如，目镜400放置于眼睛120的10cm且通常小于眼睛120的5cm内)中聚焦于射出朝向眼睛侧402的CGI光。由于输出耦合PBS415的倾斜定向(例如，相对于侧401及402大约45度)，CGI光被朝向眼睛120引导。在其它实施例中，末端反射器减小CGI光的散度而不完全准直CGI光。在又其它实施例中，末端反射器可实施为平坦反射表面。
图6是图解说明根据本发明的实施例用以将近眼图像递送到用户的目镜400的操作过程600的流程图。过程框中的一些或全部在过程600中出现的次序不应被视为限制性的。而是，受益于本发明的熟习此项技术者将理解，可以未图解说明的各种次序或甚至并行地执行过程框中的一些过程框。
在过程框605中，照明模块440发射非偏振或具有经选择以通过输入耦合PBS410的第一线性偏振(例如，图解说明为P偏振)的灯光。在通过输入耦合PBS410(过程框610)后，非偏振光在照明显示面板445之前变为偏振的。显示面板445通过选择性地激活显示面板内的图像像素而将图像数据调制到入射灯光上。当图像像素被激活时，其反射其灯光部分(过程框615)。这样做时，经反射CGI光使其偏振旋转90度到由输入耦合PBS410反射的偏振(例如，图解说明为S偏振)。从显示面板445发射的CGI光反射回到输入耦合PBS410，输入耦合PBS410沿着正向传播路径403重新引导CGI光(过程框620)。应了解，P及S偏振的标记，由此P被透射且S被反射仅为说明性的。可实施其它偏振定向及透射/反射组合。
经重新引导的CGI光沿目镜400向下传播。在一个实施例中，CGI光在无TIR的情况下且在无外部表面反射的情况下沿目镜400向下传递。在过程框625中，CGI光沿着正向传播路径403通过观看区435。输出耦合PBS415可经配置以实质上通过与由输入耦合PBS410反射的相同的偏振分量，或替代地半波偏振旋转器可安置于正向传播403中在输入耦合PBS410与输出耦合PBS415之间，如此，CGI光在实质上不受影响的情况下通过输出耦合PBS415。
在过程框630中，CGI光接着沿着正向传播路径403通过偏振旋转器425。在这样做时，CGI光的偏振由四分之一波板旋转器旋转45度。
在过程框635中，CGI光由反射层455沿着反向传播路径404往回反射。在一个实施例中，反射层455为凹面的且具有实质上准直沿着反向传播路径404反射的CGI光的形状。准直CGI光具有几乎使CGI图像无穷地或接近无穷地位移的效果，从而帮助人眼120聚焦CGI图像。当然，末端反射器可减小散度而不完全准直光，从而使虚拟图像位移到小于无穷的位置处(例如，1到3米)。
在过程框640中，沿着反向传播路径404行进的经反射CGI光再次通过偏振旋转器425，致使CGI光的偏振旋转另一45度，从而致使CGI光线性偏振于正交于正向路径的偏振方向处。因此，在第二次通过偏振旋转器425之后，CGI光具有由输出耦合PBS415实质上反射的偏振(例如，图解说明为P偏振)。在过程框645中，CGI光由输出耦合PBS415反射且经由朝向眼睛侧402从目镜400朝向眼睛120重新引导。
就计算机软件及硬件来描述上文所解释的过程中的一些过程。所描述的技术可构成体现于有形或非暂时性机器(例如，计算机)可读存储媒体内的机器可执行指令，所述机器可执行指令当由机器执行时将致使所述机器执行所描述的操作。另外，所述过程可体现于硬件内，例如专用集成电路(“ASIC”)或其它。
有形机器可读存储媒体包括提供(即，存储)呈可由机器(例如，计算机、网络装置、个人数字助理、制造工具、具有一组一或多个处理器的任何装置等)存取的形式的信息的任何机制。举例来说，机器可读存储媒体包括可记录/不可记录媒体(例如，只读存储器(ROM)、随机存取存储器(RAM)、磁盘存储媒体、光学存储媒体、快闪存储器装置等)。
包括发明摘要中所描述内容的对本发明的所图解说明实施例的以上描述并非打算为穷尽性或将本发明限于所揭示的精确形式。虽然出于说明性目的而在本文中描述本发明的特定实施例及实例，但所属领域的技术人员将认识到，可在本发明的范围内作出各种修改。
可根据以上详细描述对本发明做出这些修改。以上权利要求中所使用的术语不应理解为将本发明限于说明书中所揭示的特定实施例。而是，本发明的范围将完全由以上权利要求书来确定，所述权利要求书将根据权利要求解释所创建的原则来加以理解。

Claims (27)

1.一种用于头戴式显示器“HMD”的目镜的自适应亮度控制的方法，所述方法包含：
从所述HMD的所述目镜的透明观看区显示计算机产生的图像“CGI”；
从环绕所述HMD的周围环境捕获图像数据；
至少部分地基于所述图像数据而计算所述周围环境的亮度值；
至少部分地基于所述亮度值而确定用以应用于照明源以用于产生所述CGI的偏置功率设定；
以至少部分基于所述亮度值的所述偏置功率设定来控制所述CGI的亮度级；
至少部分基于所述亮度值而调整安置于所述透明观看区上方的可变透明度层的透明度；及
经由所述目镜的在所述透明观看区中的周围场景侧及朝向眼睛侧将周围场景光传递到用户的眼睛，
其中所述可变透明度层经安置以影响所述周围场景光的亮度，而不影响透射到所述眼睛的所述CGI的亮度。
2.根据权利要求1所述的方法，其中控制所述CGI的所述亮度级包含响应于与所述周围环境相关联的所述亮度值的改变而实时调整所述亮度级。
3.根据权利要求1所述的方法，其中所述可变透明度层包含电致变色层快门，其中调整所述可变透明度层的所述透明度包含调整控制信号的频率或工作循环中的至少一者以用于在两个透明度设定之间致动所述电致变色层。
4.根据权利要求3所述的方法，其中所述可变透明度层具有两个以上透明度设定且所述透明度对于所述控制信号的给定值是恒定的。
5.根据权利要求1所述的方法，其中从环绕所述HMD的所述周围环境捕获所述图像数据包含：
用面向前安装于所述HMD上的周围光传感器来捕获所述图像数据。
6.根据权利要求1所述的方法，
其中从环绕所述HMD的所述周围环境捕获所述图像数据包含捕获面向前的场景的视频图像，且
其中计算所述周围环境的所述亮度值包含至少部分地基于所述视频图像而计算所述亮度值。
7.根据权利要求6所述的方法，其中所述亮度值包含用于操作捕获所述视频图像的视频相机的自动曝光值。
8.根据权利要求1所述的方法，其中确定用以应用于所述照明源的所述偏置功率设定包含：
使用所述亮度值索引到查找表中以获得所述偏置功率设定，其中所述查找表包含默认亮度值对默认偏置功率设定的校准曲线。
9.根据权利要求8所述的方法，其进一步包含：
依据针对给定默认亮度值的所述默认偏置功率设定提供用户可选择偏移特征以应用用户可选择偏移。
10.根据权利要求9所述的方法，其中提供所述用户可选择偏移特征包含：
提供图形用户接口以用于在经由所述HMD显示给所述用户的所述CGI内显示用户可选择偏移值；及
沿着所述HMD的耳臂部件提供触摸接口以接收触摸命令。
11.一种用于显示计算机产生的图像“CGI”的头戴式显示器“HMD”，所述HMD包含：
显示源，其用于产生所述CGI；
目镜，其具有透明观看区，所述目镜经耦合以从所述显示源输送所述CGI且将所述CGI射出所述目镜的在所述透明观看区中的朝向眼睛侧，其中所述观看区部分地透明以经由所述目镜的在所述透明观看区中的周围场景侧及所述朝向眼睛侧传递周围场景光；
周围光传感器，其用以从环绕所述HMD的周围环境捕获图像数据；及
控制器，其耦合到所述显示源、所述周围光传感器及机器可存取存储媒体，所述机器可存取存储媒体提供当由所述控制器执行时致使所述控制器执行包含以下各项的操作的指令：
至少部分地基于所述图像数据而计算所述周围环境的亮度值；
至少部分地基于所述亮度值而确定用以应用于所述显示源的偏置功率设定；
以至少部分基于所述亮度值的所述偏置功率设定来控制所述CGI的亮度级；及
至少部分基于所述亮度值而调整安置于所述透明观看区上方的可变透明度层的透明度，
其中所述可变透明度层被安置以影响周围场景光的亮度，而不影响透射到所述眼睛的所述CGI的亮度。
12.根据权利要求11所述的头戴式显示器，其进一步包含：
框架组合件，其用以支撑所述显示源、所述目镜、所述周围光传感器及所述控制器，所述框架组合件用于佩戴于用户的头部上，其中所述透明观看区定位于所述用户的眼睛前方。
13.根据权利要求12所述的头戴式显示器，其中所述周围光传感器以面向前的定向安装到所述框架组合件。
14.根据权利要求13所述的头戴式显示器，
其中所述周围光传感器包含视频相机且所述图像数据包含面向前的场景的视频图像，
其中计算所述周围环境的所述亮度值包含至少部分地基于所述视频图像而计算所述亮度值。
15.根据权利要求14所述的头戴式显示器，其中所述亮度值包含用于操作所述视频相机的自动曝光值。
16.根据权利要求13所述的头戴式显示器，其进一步包含：
面向前的相机，其用以捕获面向前的场景图像；及
闪光灯；
其中所述面向前的相机、所述闪光灯及所述周围光传感器全部安置于安装于所述框架组合件中或上的单个电路板上。
17.根据权利要求12所述的头戴式显示器，其中确定用以应用于所述显示源的所述偏置功率设定包含：
使用所述亮度值索引到查找表中以获得所述偏置功率设定，其中所述查找表包含默认亮度值对默认偏置功率设定的校准曲线。
18.根据权利要求17所述的头戴式显示器，其进一步包含：
触摸接口，其沿着所述框架组合件的脚丝区安置，
其中所述机器可存取存储媒体进一步提供当由所述控制器执行时致使所述控制器执行包含以下各项的进一步操作的指令：
依据针对给定默认亮度值的所述默认偏置功率设定提供用户可选择偏移特征以应用用户可选择偏移。
19.根据权利要求11所述的头戴式显示器，其中所述可变透明度层包含电致变色层快门，其中调整所述可变透明度层的所述透明度包含调整控制信号的频率或工作循环中的至少一者以用于在两个透明度设定之间致动所述电致变色层。
20.根据权利要求19所述的头戴式显示器，其中所述可变透明度层具有两个以上透明度设定且所述透明度对于所述控制信号的给定值是恒定的。
21.一种用于头戴式显示器“HMD”的目镜的自适应亮度控制的设备，所述设备包含：
用于从所述HMD的目镜的观看区显示计算机产生的图像“CGI”的装置；
用于从环绕所述HMD的周围环境捕获图像数据的装置；
用于至少部分地基于所述图像数据而计算所述周围环境的亮度值的装置；
用于至少部分地基于所述亮度值而确定用以应用于照明源以用于产生所述CGI的偏置功率设定的装置；及
用于以所述偏置功率设定来控制所述CGI的亮度级的装置；
其中从环绕所述HMD的所述周围环境捕获所述图像数据包含捕获面向前的场景的视频图像，且
其中计算所述周围环境的所述亮度值包含至少部分地基于所述视频图像而计算所述亮度值。
22.根据权利要求21所述的设备，其进一步包含：
用于确定用于选择安置于所述目镜的所述观看区上方的可变透明度层的透明度的控制信号的设备，其中所述控制信号是至少部分地基于所述亮度值而确定；及
用于至少部分地基于所述控制信号而调整所述可变透明度层的所述透明度的设备。
23.根据权利要求22所述的设备，其中所述可变透明度层包含电致变色层快门，其中所述用于调整所述可变透明度层的所述透明度的装置包含用于调整所述控制信号的频率或工作循环中的至少一者以用于在两个透明度设定之间致动所述电致变色层的装置。
24.根据权利要求22所述的设备，其中所述可变透明度层具有两个以上透明度设定且所述透明度对于所述控制信号的给定值是恒定的。
25.根据权利要求22所述的设备，其进一步包含：
用于提供用户可选择偏移特征以将用户可选择偏移应用于所述控制信号以用于调整所述可变透明度层的所述透明度的装置。
26.根据权利要求21所述的设备，其中所述用于确定用以应用于所述照明源的所述偏置功率设定的装置包含：
用于使用所述亮度值索引到查找表中以获得所述偏置功率设定的装置，其中所述查找表包含默认亮度值对默认偏置功率设定的校准曲线。
27.根据权利要求26所述的设备，其进一步包含：
用于依据针对给定默认亮度值的所述默认偏置功率设定提供用户可选择偏移特征以应用用户可选择偏移的装置。
CN201280053495.3A 2011-11-04 2012-09-25 头戴式显示器的自适应亮度控制 Active CN104067334B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/289,656 US9087471B2 (en) 2011-11-04 2011-11-04 Adaptive brightness control of head mounted display
US13/289,656 2011-11-04
PCT/US2012/057016 WO2013066521A1 (en) 2011-11-04 2012-09-25 Adaptive brightness control of head mounted display

Publications (2)

Publication Number Publication Date
CN104067334A CN104067334A (zh) 2014-09-24
CN104067334B true CN104067334B (zh) 2016-10-12

Family

ID=48192579

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280053495.3A Active CN104067334B (zh) 2011-11-04 2012-09-25 头戴式显示器的自适应亮度控制

Country Status (3)

Country Link
US (1) US9087471B2 (zh)
CN (1) CN104067334B (zh)
WO (1) WO2013066521A1 (zh)

Families Citing this family (134)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5119636B2 (ja) * 2006-09-27 2013-01-16 ソニー株式会社 表示装置、表示方法
EP2769376A4 (en) 2011-09-23 2015-07-22 Mri Inc SYSTEM AND METHOD FOR ENVIRONMENTALLY ADAPTING DISPLAY CHARACTERISTICS
GB2499776A (en) * 2011-11-17 2013-09-04 Thermoteknix Systems Ltd Projecting secondary information into an optical system
JP6003903B2 (ja) * 2012-01-24 2016-10-05 ソニー株式会社 表示装置
US9093012B2 (en) * 2012-02-29 2015-07-28 Lenovo (Beijing) Co., Ltd. Operation mode switching method and electronic device
JP5919899B2 (ja) * 2012-03-08 2016-05-18 セイコーエプソン株式会社 虚像表示装置及び虚像表示装置の位置調整方法
US8970571B1 (en) * 2012-03-13 2015-03-03 Google Inc. Apparatus and method for display lighting adjustment
US9116337B1 (en) * 2012-03-21 2015-08-25 Google Inc. Increasing effective eyebox size of an HMD
JP5958689B2 (ja) * 2012-03-22 2016-08-02 セイコーエプソン株式会社 頭部装着型表示装置
JP6145966B2 (ja) 2012-05-09 2017-06-14 ソニー株式会社 表示装置
IL221863A (en) * 2012-09-10 2014-01-30 Elbit Systems Ltd Digital video photography system when analyzing and displaying
ITMI20121842A1 (it) * 2012-10-30 2014-05-01 Glassup S R L A Capitale Ridotto Occhiali per realta' aumentata
JP6123342B2 (ja) 2013-02-20 2017-05-10 ソニー株式会社 表示装置
US9293079B2 (en) * 2013-03-15 2016-03-22 University Of Southern California Control of ambient and stray lighting in a head mounted display
US9628783B2 (en) 2013-03-15 2017-04-18 University Of Southern California Method for interacting with virtual environment using stereoscope attached to computing device and modifying view of virtual environment based on user input in order to be displayed on portion of display
US9645395B2 (en) 2013-03-15 2017-05-09 Mark Bolas Dynamic field of view throttling as a means of improving user experience in head mounted virtual environments
JP6107276B2 (ja) * 2013-03-22 2017-04-05 セイコーエプソン株式会社 頭部装着型表示装置および頭部装着型表示装置の制御方法
GB201305402D0 (en) * 2013-03-25 2013-05-08 Sony Comp Entertainment Europe Head mountable display
TWI486630B (zh) * 2013-03-27 2015-06-01 聚晶半導體股份有限公司 適應性調整頭戴式顯示器的方法與頭戴式顯示器
US9740030B2 (en) * 2013-05-23 2017-08-22 Omnivision Technologies, Inc. Near-eye display systems, devices and methods
JP6232763B2 (ja) * 2013-06-12 2017-11-22 セイコーエプソン株式会社 頭部装着型表示装置および頭部装着型表示装置の制御方法
TWI518368B (zh) * 2013-09-11 2016-01-21 財團法人工業技術研究院 虛像顯示裝置
US10194860B2 (en) 2013-09-11 2019-02-05 Industrial Technology Research Institute Virtual image display system
FR3011090B1 (fr) 2013-09-26 2016-12-23 Valeo Vision Lunettes a affichage de donnees munies d'un ecran anti-eblouissement
FR3011091A1 (fr) * 2013-09-26 2015-03-27 Valeo Vision Lunettes a affichage de donnees munies d'un ecran anti-eblouissement
FR3010938B1 (fr) 2013-09-26 2015-10-30 Valeo Vision Dispositif et procede d'aide a la conduite
FR3011096B1 (fr) 2013-09-26 2015-10-16 Valeo Vision Lunettes anti-eblouissement et de vision a trois dimensions
FR3011095B1 (fr) 2013-09-26 2016-12-23 Valeo Vision Filtre optique adaptatif pour verre de lunettes
FR3011092B1 (fr) * 2013-09-26 2016-12-23 Valeo Vision Lunettes a affichage de donnees munies d'un ecran anti-eblouissement
KR102153599B1 (ko) 2013-11-18 2020-09-08 삼성전자주식회사 머리 착용형 디스플레이 장치 및 머리 착용형 디스플레이 장치의 광 투과율 변경 방법
KR20150057863A (ko) 2013-11-20 2015-05-28 삼성전자주식회사 휴대 장치 및 휴대 장치의 화면 밝기 제어방법
EP3100096A1 (en) * 2014-01-31 2016-12-07 Mack, Corey Augmented reality eyewear and methods for using same
US9389423B2 (en) 2014-03-11 2016-07-12 Google Inc. Head wearable display with adjustable transparency
JP6391952B2 (ja) 2014-03-17 2018-09-19 ソニー株式会社 表示装置及び光学装置
US9915823B1 (en) 2014-05-06 2018-03-13 Google Llc Lightguide optical combiner for head wearable display
US9851575B2 (en) 2014-05-15 2017-12-26 Omnivision Technologies, Inc. Wafer-level liquid-crystal-on-silicon projection assembly, systems and methods
US9507066B2 (en) 2014-06-30 2016-11-29 Microsoft Technology Licensing, Llc Eyepiece for near eye display system
WO2016011367A2 (en) * 2014-07-18 2016-01-21 Vuzix Corporation Near-eye display with self-emitting microdisplay engine
WO2016017966A1 (en) * 2014-07-29 2016-02-04 Samsung Electronics Co., Ltd. Method of displaying image via head mounted display device and head mounted display device therefor
US9626936B2 (en) 2014-08-21 2017-04-18 Microsoft Technology Licensing, Llc Dimming module for augmented and virtual reality
JP6653103B2 (ja) * 2014-09-08 2020-02-26 国立大学法人 東京大学 画像処理装置および画像処理方法
US10210670B2 (en) * 2014-10-15 2019-02-19 Seiko Epson Corporation Head-mounted display device, method of controlling head-mounted display device, and computer program
TWI579590B (zh) * 2014-12-03 2017-04-21 An optical system for displaying motion information images and a display device thereof
GB2533573A (en) * 2014-12-22 2016-06-29 Nokia Technologies Oy Image processing method and device
JP6464729B2 (ja) * 2014-12-24 2019-02-06 セイコーエプソン株式会社 表示装置、及び、表示装置の制御方法
US10101586B2 (en) * 2014-12-24 2018-10-16 Seiko Epson Corporation Display device and control method for display device
US9905052B2 (en) * 2015-01-05 2018-02-27 Worcester Polytechnic Institute System and method for controlling immersiveness of head-worn displays
EP3251098A4 (en) * 2015-01-30 2018-07-11 Ent. Services Development Corporation LP Dynamic modulation for near eye display
US11468639B2 (en) * 2015-02-20 2022-10-11 Microsoft Technology Licensing, Llc Selective occlusion system for augmented reality devices
US20210389590A1 (en) * 2015-03-17 2021-12-16 Raytrx, Llc Wearable image manipulation and control system with high resolution micro-displays and dynamic opacity augmentation in augmented reality glasses
GB2536650A (en) 2015-03-24 2016-09-28 Augmedics Ltd Method and system for combining video-based and optic-based augmented reality in a near eye display
CN104765152B (zh) * 2015-05-06 2017-10-24 京东方科技集团股份有限公司 一种虚拟现实眼镜
US9924583B2 (en) 2015-05-14 2018-03-20 Mnaufacturing Resources International, Inc. Display brightness control based on location data
US10607520B2 (en) 2015-05-14 2020-03-31 Manufacturing Resources International, Inc. Method for environmental adaptation of display characteristics based on location
US10593255B2 (en) 2015-05-14 2020-03-17 Manufacturing Resources International, Inc. Electronic display with environmental adaptation of display characteristics based on location
US10339382B2 (en) * 2015-05-31 2019-07-02 Fieldbit Ltd. Feedback based remote maintenance operations
US9491490B1 (en) 2015-06-12 2016-11-08 Intel Corporation Facilitating environment-based lossy compression of data for efficient rendering of contents at computing devices
TWI587004B (zh) * 2015-06-18 2017-06-11 中強光電股份有限公司 顯示裝置
CN105044914B (zh) * 2015-08-27 2018-05-29 惠州Tcl移动通信有限公司 一种可调节输出图像对比度的穿透式眼镜及方法
CN105044913A (zh) * 2015-08-27 2015-11-11 惠州Tcl移动通信有限公司 一种基于应用环境穿透式眼镜及图像显示方法
US9298283B1 (en) 2015-09-10 2016-03-29 Connectivity Labs Inc. Sedentary virtual reality method and systems
US9927619B2 (en) 2015-11-06 2018-03-27 Omnivision Technologies, Inc. Pupillary adjustable head mounted device
CN105700142B (zh) * 2016-02-18 2018-10-16 广东小天才科技有限公司 虚拟现实装置的显示亮度调节方法和显示亮度调节系统
US10228564B2 (en) * 2016-03-03 2019-03-12 Disney Enterprises, Inc. Increasing returned light in a compact augmented reality/virtual reality display
GB2548150B (en) * 2016-03-11 2020-02-19 Sony Interactive Entertainment Europe Ltd Head-mountable display system
FR3050541B1 (fr) * 2016-04-26 2019-07-12 Valeo Comfort And Driving Assistance Afficheur
CN105974589B (zh) * 2016-06-24 2019-08-16 上海彼茨信息科技有限公司 一种头戴式护目镜的近眼式显示器
US10191541B2 (en) * 2016-06-30 2019-01-29 Sony Interactive Entertainment Inc. Augmenting virtual reality content with real world content
US10067344B2 (en) * 2016-07-01 2018-09-04 Intel Corporation Variable transmissivity virtual image projection system
WO2018009917A1 (en) * 2016-07-08 2018-01-11 Manufacturing Resources International, Inc. Controlling display brightness based on image capture device data
EP3528034A4 (en) 2016-10-11 2019-08-21 Sony Corporation DISPLAY DEVICE
US10757400B2 (en) * 2016-11-10 2020-08-25 Manor Financial, Inc. Near eye wavefront emulating display
US10474230B2 (en) 2016-12-15 2019-11-12 Tectus Corporation Brightness control for an augmented reality eye-mounted display
AU2017382880B2 (en) 2016-12-22 2022-10-27 Magic Leap, Inc. Systems and methods for manipulating light from ambient light sources
US10209520B2 (en) 2016-12-30 2019-02-19 Microsoft Technology Licensing, Llc Near eye display multi-component dimming system
US10302764B2 (en) * 2017-02-03 2019-05-28 Microsoft Technology Licensing, Llc Active illumination management through contextual information
EP3583454A4 (en) * 2017-02-16 2020-03-25 Magic Leap, Inc. METHOD AND SYSTEM FOR A DISPLAY DEVICE WITH INTEGRATED POLARIZER
JP7091605B2 (ja) * 2017-02-27 2022-06-28 セイコーエプソン株式会社 画像表示装置
US10742964B2 (en) * 2017-04-04 2020-08-11 Nextvr Inc. Methods and apparatus for displaying images
CN107223276B (zh) * 2017-04-26 2020-03-20 深圳市汇顶科技股份有限公司 眼球遥控系统及电子装置
RU2665289C1 (ru) * 2017-08-15 2018-08-28 Самсунг Электроникс Ко., Лтд. Система отображения реальной или виртуальной сцены и способ ее функционирования
WO2019046334A1 (en) * 2017-08-29 2019-03-07 Pcms Holdings, Inc. SYSTEM AND METHOD FOR COMPENSATING REAL WORLD LIGHTING CHANGES IN INCREASED REALITY
CN107749289B (zh) * 2017-10-20 2024-04-26 广东虚拟现实科技有限公司 亮度调节方法、装置、亮度调节系统和增强现实设备
KR102591404B1 (ko) * 2017-12-13 2023-10-20 삼성디스플레이 주식회사 헤드 마운트 디스플레이 장치 및 이의 구동 방법
US20190287478A1 (en) * 2018-03-15 2019-09-19 Htc Corporation Head mounted display and control method thereof
TWI677708B (zh) * 2018-03-15 2019-11-21 宏達國際電子股份有限公司 頭戴式顯示器及其控制方法
WO2019209911A1 (en) * 2018-04-24 2019-10-31 Lc-Tec Displays Ab Viewing direction independent single-layer, pixelated light dimming filter
EP3787543A4 (en) 2018-05-02 2022-01-19 Augmedics Ltd. REGISTRATION OF A REFERENCE MARK FOR AN AUGMENTED REALITY SYSTEM
US10578658B2 (en) 2018-05-07 2020-03-03 Manufacturing Resources International, Inc. System and method for measuring power consumption of an electronic display assembly
US10509467B1 (en) * 2018-06-01 2019-12-17 Facebook Technologies, Llc Determining fixation of a user's eyes from images of portions of the user's face enclosed by a head mounted display
EP3582077A1 (en) 2018-06-13 2019-12-18 Tobii AB Eye tracking device and method for manufacturing an eye tracking device
US10782276B2 (en) 2018-06-14 2020-09-22 Manufacturing Resources International, Inc. System and method for detecting gas recirculation or airway occlusion
CN108806627B (zh) * 2018-06-15 2020-12-04 北京小米移动软件有限公司 环境光亮度确定方法、装置及存储介质
US10962783B2 (en) * 2018-06-19 2021-03-30 Apple Inc. Electronic devices having electrically adjustable optical layers
WO2020023266A1 (en) * 2018-07-23 2020-01-30 Magic Leap, Inc. Systems and methods for external light management
US10643548B2 (en) * 2018-08-20 2020-05-05 Dell Products, L.P. Selective dimming of ambient lighting in virtual, augmented, and mixed reality (xR) applications
US11030973B2 (en) * 2018-09-12 2021-06-08 Google Llc Wearable heads-up displays with ambient light detection and adjustable display brightness
KR101975757B1 (ko) * 2018-09-28 2019-05-08 오재환 상태감지 투시 보관함
JP6749981B2 (ja) * 2018-10-01 2020-09-02 本田技研工業株式会社 表示装置、表示制御方法、およびプログラム
KR102554283B1 (ko) * 2018-10-30 2023-07-10 엘지디스플레이 주식회사 표시장치
US11766296B2 (en) 2018-11-26 2023-09-26 Augmedics Ltd. Tracking system for image-guided surgery
US10600352B1 (en) * 2018-12-04 2020-03-24 Facebook Technologies, Llc Display device with a switchable window and see-through pancake lens assembly
US10937193B2 (en) 2018-12-05 2021-03-02 Goodrich Corporation Multi-sensor alignment and real time distortion correction and image registration
US10942565B2 (en) 2018-12-17 2021-03-09 Intel Corporation Virtual reality adaptive display control
WO2020187950A1 (fr) * 2019-03-21 2020-09-24 Orange Dispositif, système et procédé de traitement de données de réalite virtuelle
US10955675B1 (en) 2019-04-30 2021-03-23 Facebook Technologies, Llc Variable resolution display device with switchable window and see-through pancake lens assembly
CN110031978A (zh) * 2019-05-28 2019-07-19 深圳市思坦科技有限公司 一种近眼显示装置
JP2020195105A (ja) * 2019-05-30 2020-12-03 セイコーエプソン株式会社 装着型表示装置
JP2020195106A (ja) * 2019-05-30 2020-12-03 セイコーエプソン株式会社 装着型表示装置
US11980506B2 (en) 2019-07-29 2024-05-14 Augmedics Ltd. Fiducial marker
US11586024B1 (en) * 2019-08-05 2023-02-21 Meta Platforms Technologies, Llc Peripheral see-through pancake lens assembly and display device with same
US11579425B1 (en) 2019-08-05 2023-02-14 Meta Platforms Technologies, Llc Narrow-band peripheral see-through pancake lens assembly and display device with same
CN112396998B (zh) * 2019-08-14 2022-09-16 海信视像科技股份有限公司 车载显示的控制系统、方法及装置
US11726336B2 (en) 2019-09-10 2023-08-15 Meta Platforms Technologies, Llc Active zonal display illumination using a chopped lightguide
US11391948B2 (en) 2019-09-10 2022-07-19 Facebook Technologies, Llc Display illumination using a grating
US11592608B2 (en) 2019-09-10 2023-02-28 Meta Platforms Technologies, Llc Switchable polarization retarder array for active zonal illumination of display
US10989928B2 (en) 2019-09-17 2021-04-27 Facebook Technologies, Llc Thin see-through pancake lens assembly and display device including the same
CN110806669B (zh) * 2019-10-25 2021-03-30 东华大学 一种MOFs电致变色材料的自适应控制系统及方法
US11382712B2 (en) 2019-12-22 2022-07-12 Augmedics Ltd. Mirroring in image guided surgery
US11635802B2 (en) * 2020-01-13 2023-04-25 Sony Interactive Entertainment Inc. Combined light intensity based CMOS and event detection sensor for high speed predictive tracking and latency compensation in virtual and augmented reality HMD systems
US11526044B2 (en) 2020-03-27 2022-12-13 Manufacturing Resources International, Inc. Display unit with orientation based operation
DE102020205937A1 (de) 2020-05-12 2021-11-18 Robert Bosch Gesellschaft mit beschränkter Haftung Brillenvorrichtung und Verfahren zum Einstellen einer Helligkeit des zumindest einen Bilds
US11776503B2 (en) * 2020-05-28 2023-10-03 Apple Inc. Generating display data based on modified ambient light luminance values
CN114078458B (zh) * 2020-08-20 2023-03-24 北京小米移动软件有限公司 亮度调节方法、亮度调节装置及计算机可读存储介质
US11747622B2 (en) * 2021-01-04 2023-09-05 Rovi Guides, Inc. Methods and systems for controlling media content presentation on a smart glasses display
US11906737B2 (en) 2021-01-04 2024-02-20 Rovi Guides, Inc. Methods and systems for controlling media content presentation on a smart glasses display
TWI763391B (zh) * 2021-03-23 2022-05-01 宏碁股份有限公司 頭戴式顯示器、光學穿透式顯示系統及頭戴式顯示器的操作方法
US20220343606A1 (en) * 2021-04-21 2022-10-27 NewSight Reality, Inc. Optical module with active microlens array capable of synchronizing with see-through display to provide multiple modes of functionality
US11896445B2 (en) 2021-07-07 2024-02-13 Augmedics Ltd. Iliac pin and adapter
CN117999510A (zh) * 2021-09-28 2024-05-07 威尔乌集团 用于头戴式显示系统的位置跟踪系统和方法
US20230152587A1 (en) * 2021-11-17 2023-05-18 Meta Platforms Technologies, Llc Ambient light sensors and camera-based display adjustment in smart glasses for immersive reality applications
US11889196B2 (en) * 2021-12-06 2024-01-30 Qualcomm Incorporated Systems and methods for determining image capture settings
US20240027804A1 (en) * 2022-07-22 2024-01-25 Vaibhav Mathur Eyewear with non-polarizing ambient light dimming
WO2024085878A1 (en) * 2022-10-20 2024-04-25 Hewlett-Packard Development Company, L.P. Brightness-based extended reality (xr) lens transparency adjustments

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5739797A (en) * 1994-06-23 1998-04-14 Seiko Epson Corporation Head-mounted virtual image display device having switching means enabling user to select eye to view image
CN101444087A (zh) * 2006-05-09 2009-05-27 株式会社尼康 头戴式显示器
CN101726857A (zh) * 2008-10-23 2010-06-09 索尼株式会社 头戴式显示设备

Family Cites Families (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4711512A (en) 1985-07-12 1987-12-08 Environmental Research Institute Of Michigan Compact head-up display
FR2647556B1 (fr) 1989-05-23 1993-10-29 Thomson Csf Dispositif optique pour l'introduction d'une image collimatee dans le champ visuel d'un observateur et casque comportant au moins un tel dispositif
GB8916206D0 (en) 1989-07-14 1989-11-08 Marconi Gec Ltd Helmet systems
US5303085A (en) 1992-02-07 1994-04-12 Rallison Richard D Optically corrected helmet mounted display
IL103900A (en) 1992-11-26 1998-06-15 Electro Optics Ind Ltd Optical system
US5539422A (en) 1993-04-12 1996-07-23 Virtual Vision, Inc. Head mounted display system
US5485172A (en) * 1993-05-21 1996-01-16 Sony Corporation Automatic image regulating arrangement for head-mounted image display apparatus
US5440197A (en) 1993-10-05 1995-08-08 Tir Technologies, Inc. Backlighting apparatus for uniformly illuminating a display panel
US5815126A (en) 1993-10-22 1998-09-29 Kopin Corporation Monocular portable communication and display system
US7126583B1 (en) * 1999-12-15 2006-10-24 Automotive Technologies International, Inc. Interactive vehicle display system
US5696521A (en) 1994-06-22 1997-12-09 Astounding Technologies (M) Sdn. Bhd. Video headset
WO1996005533A1 (en) 1994-08-10 1996-02-22 Lawrence Vandewalle Method and apparatus for direct retinal projection
TW275590B (en) 1994-12-09 1996-05-11 Sega Enterprises Kk Head mounted display and system for use therefor
TW395121B (en) 1996-02-26 2000-06-21 Seiko Epson Corp Personal wearing information display device and the display method using such device
US5771124A (en) 1996-07-02 1998-06-23 Siliscape Compact display system with two stage magnification and immersed beam splitter
US5715337A (en) 1996-09-19 1998-02-03 The Mirco Optical Corporation Compact display system
US6023372A (en) 1997-10-30 2000-02-08 The Microoptical Corporation Light weight, compact remountable electronic display device for eyeglasses or other head-borne eyewear frames
US5886822A (en) 1996-10-08 1999-03-23 The Microoptical Corporation Image combining system for eyeglasses and face masks
US6204974B1 (en) 1996-10-08 2001-03-20 The Microoptical Corporation Compact image display system for eyeglasses or other head-borne frames
JP3635825B2 (ja) * 1996-11-18 2005-04-06 セイコーエプソン株式会社 頭部装着型表示装置及びそのバックライト駆動方法
US5896232A (en) 1997-08-07 1999-04-20 International Business Machines Corporation Highly efficient and compact frontlighting for polarization-based reflection light valves
US6201629B1 (en) 1997-08-27 2001-03-13 Microoptical Corporation Torsional micro-mechanical mirror system
WO1999023524A1 (en) 1997-10-30 1999-05-14 The Microoptical Corporation Eyeglass interface system
US6008946A (en) 1997-11-07 1999-12-28 Honeywell, Inc. Ambient light display illumination for a head-mounted display
US5943171A (en) 1998-06-03 1999-08-24 International Business Machines Corporation Head mounted displays utilizing reflection light valves
US6335838B1 (en) 1999-02-23 2002-01-01 Minolta Co., Ltd. Image display apparatus
US6222677B1 (en) 1999-04-12 2001-04-24 International Business Machines Corporation Compact optical system for use in virtual display applications
US6724354B1 (en) 1999-06-21 2004-04-20 The Microoptical Corporation Illumination systems for eyeglass and facemask display systems
JP2003502714A (ja) 1999-06-21 2003-01-21 ザ マイクロオプティカル コーポレイション 懸垂アイピースアセンブリを有する頭部取付式小型表示装置
JP2003502711A (ja) 1999-06-21 2003-01-21 ザ マイクロオプティカル コーポレイション 軸から外れている光学設計を使用する接眼レンズ・ディスプレイ・レンズ・システム
US7158096B1 (en) 1999-06-21 2007-01-02 The Microoptical Corporation Compact, head-mountable display device with suspended eyepiece assembly
JP4921634B2 (ja) 2000-01-31 2012-04-25 グーグル インコーポレイテッド 表示装置
DE60142516D1 (de) 2000-06-05 2010-08-19 Lumus Ltd Optischer strahlaufweiter mit substratlichtwellenleitung
US6747611B1 (en) 2000-07-27 2004-06-08 International Business Machines Corporation Compact optical system and packaging for head mounted display
US6693749B2 (en) 2001-01-31 2004-02-17 Raytheon Company Low-observability, wide-field-of-view, situation awareness viewing device
US6738535B2 (en) 2001-01-31 2004-05-18 International Business Machines Corporation Head-mounted display content transformer
US6701038B2 (en) 2001-03-05 2004-03-02 The Microoptical Corporation Micro-electromechanical optical switch assembly for optical data networks
WO2003023756A1 (en) 2001-09-07 2003-03-20 The Microoptical Corporation Light weight, compact, remountable face-supported electronic display
FR2834799B1 (fr) 2002-01-11 2004-04-16 Essilor Int Lentille ophtalmique presentant un insert de projection
IL148804A (en) 2002-03-21 2007-02-11 Yaacov Amitai Optical device
JP4366944B2 (ja) * 2003-01-31 2009-11-18 株式会社ニコン ヘッドマウントディスプレイ
WO2004061519A1 (ja) * 2002-12-24 2004-07-22 Nikon Corporation ヘッドマウントディスプレイ
US6879443B2 (en) 2003-04-25 2005-04-12 The Microoptical Corporation Binocular viewing system
ITTO20030662A1 (it) * 2003-08-29 2005-02-28 Fiat Ricerche Disposizione di visualizzazione virtuale per un quadro
IL157837A (en) 2003-09-10 2012-12-31 Yaakov Amitai Substrate-guided optical device particularly for three-dimensional displays
IL162573A (en) 2004-06-17 2013-05-30 Lumus Ltd Optical component in a large key conductive substrate
IL163361A (en) 2004-08-05 2011-06-30 Lumus Ltd Optical device for light coupling into a guiding substrate
WO2006085309A1 (en) 2005-02-10 2006-08-17 Lumus Ltd. Substrate-guided optical device utilizing thin transparent layer
US20060192306A1 (en) 2005-02-25 2006-08-31 The Microoptical Corporation Manufacturing methods for embedded optical system
KR20070106643A (ko) 2005-02-25 2007-11-02 마이뷰 코포레이션 캐스팅에 의해 고품질 광학 부품을 만들기 위한 방법
CA2601155A1 (en) 2005-03-22 2006-09-28 Myvu Corporation Optical system using total internal reflection images
JP4883271B2 (ja) 2005-12-05 2012-02-22 株式会社島津製作所 頭部装着型表示装置および頭部装着型表示システム
US7900068B2 (en) 2006-09-14 2011-03-01 Hon Hai Precision Industry Co., Ltd. Mobile multi-media interface and power pack for portable entertainment devices
US20080219025A1 (en) 2007-03-07 2008-09-11 Spitzer Mark B Bi-directional backlight assembly
US8323436B2 (en) 2007-03-28 2012-12-04 The United States Of America As Represented By The Secretary Of The Army Transparent, reinforced, composite fiber and articles made therefrom
EP1990674A1 (en) 2007-05-09 2008-11-12 Harman Becker Automotive Systems GmbH Head-mounted display system
US7663805B2 (en) 2007-10-09 2010-02-16 Myvu Corporation Eyewear display and media device interconnection system
US20100149073A1 (en) 2008-11-02 2010-06-17 David Chaum Near to Eye Display System and Appliance
WO2009136393A1 (en) 2008-05-06 2009-11-12 Elbit Systems Ltd. Wide angle helmet mounted display system
JP4858512B2 (ja) 2008-08-21 2012-01-18 ソニー株式会社 頭部装着型ディスプレイ
US8957835B2 (en) 2008-09-30 2015-02-17 Apple Inc. Head-mounted display apparatus for retaining a portable electronic device with display
US9256007B2 (en) 2009-04-21 2016-02-09 Svv Technology Innovations, Inc. Light collection and illumination systems employing planar waveguide
US20110213664A1 (en) 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5739797A (en) * 1994-06-23 1998-04-14 Seiko Epson Corporation Head-mounted virtual image display device having switching means enabling user to select eye to view image
CN101444087A (zh) * 2006-05-09 2009-05-27 株式会社尼康 头戴式显示器
CN101726857A (zh) * 2008-10-23 2010-06-09 索尼株式会社 头戴式显示设备

Also Published As

Publication number Publication date
US9087471B2 (en) 2015-07-21
WO2013066521A1 (en) 2013-05-10
WO2013066521A8 (en) 2014-07-31
US20130113973A1 (en) 2013-05-09
CN104067334A (zh) 2014-09-24

Similar Documents

Publication Publication Date Title
CN104067334B (zh) 头戴式显示器的自适应亮度控制
US11029523B2 (en) Near-eye display with self-emitting microdisplay engine
CN110325891B (zh) 用于操纵来自环境光源的光的系统和方法
EP3330772B1 (en) Display apparatus and method of displaying using projectors
US9507147B2 (en) Wearable display system with detached projector
US11675206B1 (en) Display with a resolution enhanced region
US11726336B2 (en) Active zonal display illumination using a chopped lightguide
US11391948B2 (en) Display illumination using a grating
US11719876B2 (en) Display illumination using a wedge waveguide
TW201725422A (zh) 具有可變驅動電壓之液晶顯示器
US11467332B2 (en) Display with switchable retarder array
CN109997067A (zh) 使用便携式电子设备的显示装置和方法
EP3330773B1 (en) Display apparatus and method of displaying using context display and projectors
US20240164072A1 (en) Micro display thermal management system
TW202025720A (zh) 低光源環境顯示結構

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: American California

Patentee after: Google limited liability company

Address before: American California

Patentee before: Google Inc.

CP01 Change in the name or title of a patent holder