CN110325891A - 用于操纵来自环境光源的光的系统和方法 - Google Patents
用于操纵来自环境光源的光的系统和方法 Download PDFInfo
- Publication number
- CN110325891A CN110325891A CN201780086897.6A CN201780086897A CN110325891A CN 110325891 A CN110325891 A CN 110325891A CN 201780086897 A CN201780086897 A CN 201780086897A CN 110325891 A CN110325891 A CN 110325891A
- Authority
- CN
- China
- Prior art keywords
- user
- display
- light
- lens
- environment light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 31
- 230000003287 optical effect Effects 0.000 claims abstract description 285
- 239000000463 material Substances 0.000 claims abstract description 174
- 230000008859 change Effects 0.000 claims abstract description 130
- 230000000638 stimulation Effects 0.000 claims abstract description 95
- 230000003595 spectral effect Effects 0.000 claims abstract description 66
- 210000001508 eye Anatomy 0.000 claims description 194
- 238000012545 processing Methods 0.000 claims description 108
- 230000004044 response Effects 0.000 claims description 42
- 210000003128 head Anatomy 0.000 claims description 34
- 241001300078 Vitrea Species 0.000 claims description 29
- 230000033001 locomotion Effects 0.000 claims description 23
- 230000003190 augmentative effect Effects 0.000 claims description 16
- 238000001228 spectrum Methods 0.000 claims description 14
- 238000007385 chemical modification Methods 0.000 claims description 9
- 230000007613 environmental effect Effects 0.000 claims description 7
- 230000009123 feedback regulation Effects 0.000 claims description 6
- 238000005259 measurement Methods 0.000 claims description 5
- 230000005855 radiation Effects 0.000 claims description 4
- 230000002441 reversible effect Effects 0.000 claims description 4
- 150000001875 compounds Chemical class 0.000 claims description 3
- 239000002086 nanomaterial Substances 0.000 claims description 3
- 230000001960 triggered effect Effects 0.000 claims description 3
- QCVGEOXPDFCNHA-UHFFFAOYSA-N 5,5-dimethyl-2,4-dioxo-1,3-oxazolidine-3-carboxamide Chemical compound CC1(C)OC(=O)N(C(N)=O)C1=O QCVGEOXPDFCNHA-UHFFFAOYSA-N 0.000 claims description 2
- 102000002322 Egg Proteins Human genes 0.000 claims description 2
- 108010000912 Egg Proteins Proteins 0.000 claims description 2
- 235000014103 egg white Nutrition 0.000 claims description 2
- 210000000969 egg white Anatomy 0.000 claims description 2
- 230000004936 stimulating effect Effects 0.000 claims 1
- 210000000695 crystalline len Anatomy 0.000 description 265
- 230000005540 biological transmission Effects 0.000 description 31
- 230000000007 visual effect Effects 0.000 description 28
- 238000009826 distribution Methods 0.000 description 23
- 210000001747 pupil Anatomy 0.000 description 18
- 238000002347 injection Methods 0.000 description 15
- 239000007924 injection Substances 0.000 description 15
- 230000005611 electricity Effects 0.000 description 12
- 239000013307 optical fiber Substances 0.000 description 12
- 238000005424 photoluminescence Methods 0.000 description 12
- 238000002604 ultrasonography Methods 0.000 description 12
- 230000000712 assembly Effects 0.000 description 10
- 238000000429 assembly Methods 0.000 description 10
- 230000004438 eyesight Effects 0.000 description 8
- 238000012986 modification Methods 0.000 description 8
- 230000004048 modification Effects 0.000 description 8
- 238000011160 research Methods 0.000 description 8
- 238000009738 saturating Methods 0.000 description 8
- 239000000126 substance Substances 0.000 description 8
- 238000010521 absorption reaction Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000000605 extraction Methods 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 230000008447 perception Effects 0.000 description 6
- 230000004913 activation Effects 0.000 description 5
- 210000005252 bulbus oculi Anatomy 0.000 description 5
- 239000003086 colorant Substances 0.000 description 5
- 238000013500 data storage Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 239000011521 glass Substances 0.000 description 5
- 230000004941 influx Effects 0.000 description 5
- 238000012544 monitoring process Methods 0.000 description 5
- 239000011368 organic material Substances 0.000 description 5
- 238000003860 storage Methods 0.000 description 5
- GLUUGHFHXGJENI-UHFFFAOYSA-N Piperazine Chemical compound C1CNCCN1 GLUUGHFHXGJENI-UHFFFAOYSA-N 0.000 description 4
- 210000004556 brain Anatomy 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000006073 displacement reaction Methods 0.000 description 4
- 210000000887 face Anatomy 0.000 description 4
- 230000001976 improved effect Effects 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 230000003213 activating effect Effects 0.000 description 3
- 230000006399 behavior Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 239000011263 electroactive material Substances 0.000 description 3
- 230000002996 emotional effect Effects 0.000 description 3
- 239000004744 fabric Substances 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 230000000704 physical effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 108090000623 proteins and genes Proteins 0.000 description 3
- 102000004169 proteins and genes Human genes 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 239000004332 silver Substances 0.000 description 3
- 229910052709 silver Inorganic materials 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 239000004606 Fillers/Extenders Substances 0.000 description 2
- VCUFZILGIRCDQQ-KRWDZBQOSA-N N-[[(5S)-2-oxo-3-(2-oxo-3H-1,3-benzoxazol-6-yl)-1,3-oxazolidin-5-yl]methyl]-2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidine-5-carboxamide Chemical compound O=C1O[C@H](CN1C1=CC2=C(NC(O2)=O)C=C1)CNC(=O)C=1C=NC(=NC=1)NCC1=CC(=CC=C1)OC(F)(F)F VCUFZILGIRCDQQ-KRWDZBQOSA-N 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 2
- 230000008602 contraction Effects 0.000 description 2
- 238000009792 diffusion process Methods 0.000 description 2
- 208000002173 dizziness Diseases 0.000 description 2
- 210000000613 ear canal Anatomy 0.000 description 2
- 230000002708 enhancing effect Effects 0.000 description 2
- 230000000193 eyeblink Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000003760 hair shine Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 150000002894 organic compounds Chemical class 0.000 description 2
- 238000006303 photolysis reaction Methods 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 229910052710 silicon Inorganic materials 0.000 description 2
- 239000010703 silicon Substances 0.000 description 2
- SDLBJIZEEMKQKY-UHFFFAOYSA-M silver chlorate Chemical compound [Ag+].[O-]Cl(=O)=O SDLBJIZEEMKQKY-UHFFFAOYSA-M 0.000 description 2
- -1 silver halide Chemical class 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000016776 visual perception Effects 0.000 description 2
- 238000005406 washing Methods 0.000 description 2
- 241001502050 Acis Species 0.000 description 1
- PLXMOAALOJOTIY-FPTXNFDTSA-N Aesculin Natural products OC[C@@H]1[C@@H](O)[C@H](O)[C@@H](O)[C@H](O)[C@H]1Oc2cc3C=CC(=O)Oc3cc2O PLXMOAALOJOTIY-FPTXNFDTSA-N 0.000 description 1
- 241001416181 Axis axis Species 0.000 description 1
- 101100117236 Drosophila melanogaster speck gene Proteins 0.000 description 1
- MKYBYDHXWVHEJW-UHFFFAOYSA-N N-[1-oxo-1-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)propan-2-yl]-2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidine-5-carboxamide Chemical compound O=C(C(C)NC(=O)C=1C=NC(=NC=1)NCC1=CC(=CC=C1)OC(F)(F)F)N1CC2=C(CC1)NN=N2 MKYBYDHXWVHEJW-UHFFFAOYSA-N 0.000 description 1
- NIPNSKYNPDTRPC-UHFFFAOYSA-N N-[2-oxo-2-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)ethyl]-2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidine-5-carboxamide Chemical compound O=C(CNC(=O)C=1C=NC(=NC=1)NCC1=CC(=CC=C1)OC(F)(F)F)N1CC2=C(CC1)NN=N2 NIPNSKYNPDTRPC-UHFFFAOYSA-N 0.000 description 1
- AFCARXCZXQIEQB-UHFFFAOYSA-N N-[3-oxo-3-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)propyl]-2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidine-5-carboxamide Chemical compound O=C(CCNC(=O)C=1C=NC(=NC=1)NCC1=CC(=CC=C1)OC(F)(F)F)N1CC2=C(CC1)NN=N2 AFCARXCZXQIEQB-UHFFFAOYSA-N 0.000 description 1
- 239000004983 Polymer Dispersed Liquid Crystal Substances 0.000 description 1
- BQCADISMDOOEFD-UHFFFAOYSA-N Silver Chemical compound [Ag] BQCADISMDOOEFD-UHFFFAOYSA-N 0.000 description 1
- 241000256856 Vespidae Species 0.000 description 1
- 239000011149 active material Substances 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 239000000443 aerosol Substances 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 238000005282 brightening Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000539 dimer Substances 0.000 description 1
- 238000001035 drying Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000010894 electron beam technology Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 239000000416 hydrocolloid Substances 0.000 description 1
- 238000002329 infrared spectrum Methods 0.000 description 1
- 150000002484 inorganic compounds Chemical class 0.000 description 1
- 229910010272 inorganic material Inorganic materials 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000003064 k means clustering Methods 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000003595 mist Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- SFMJNHNUOVADRW-UHFFFAOYSA-N n-[5-[9-[4-(methanesulfonamido)phenyl]-2-oxobenzo[h][1,6]naphthyridin-1-yl]-2-methylphenyl]prop-2-enamide Chemical compound C1=C(NC(=O)C=C)C(C)=CC=C1N1C(=O)C=CC2=C1C1=CC(C=3C=CC(NS(C)(=O)=O)=CC=3)=CC=C1N=C2 SFMJNHNUOVADRW-UHFFFAOYSA-N 0.000 description 1
- 210000004279 orbit Anatomy 0.000 description 1
- 230000000149 penetrating effect Effects 0.000 description 1
- 230000005622 photoelectricity Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 230000010344 pupil dilation Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000025474 response to light stimulus Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 229940100890 silver compound Drugs 0.000 description 1
- 150000003379 silver compounds Chemical class 0.000 description 1
- 239000011343 solid material Substances 0.000 description 1
- 125000006850 spacer group Chemical group 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 238000002211 ultraviolet spectrum Methods 0.000 description 1
- 238000001429 visible spectrum Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
- 239000011800 void material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0081—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. enlarging, the entrance or exit pupil
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B3/00—Simple or compound lenses
- G02B3/12—Fluid-filled or evacuated lenses
- G02B3/14—Fluid-filled or evacuated lenses of variable focal length
-
- G—PHYSICS
- G02—OPTICS
- G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
- G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
- G02F1/0009—Materials therefor
- G02F1/0018—Electro-optical materials
-
- G—PHYSICS
- G02—OPTICS
- G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
- G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
- G02F1/01—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour
- G02F1/0128—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour based on electro-mechanical, magneto-mechanical, elasto-optic effects
-
- G—PHYSICS
- G02—OPTICS
- G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
- G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
- G02F1/29—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the position or the direction of light beams, i.e. deflection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B6/00—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
- G02B6/0001—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
- G02B6/0011—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
- G02B6/0075—Arrangements of multiple light guides
- G02B6/0076—Stacked arrangements of multiple light guides of the same or different cross-sectional area
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Engineering & Computer Science (AREA)
- Nonlinear Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Eyeglasses (AREA)
- User Interface Of Digital Computer (AREA)
- Mechanical Optical Scanning Systems (AREA)
- Optical Filters (AREA)
- Mechanical Light Control Or Optical Switches (AREA)
- Diffracting Gratings Or Hologram Optical Elements (AREA)
- Optical Communication System (AREA)
- Non-Portable Lighting Devices Or Systems Thereof (AREA)
Abstract
一种光学设备包括可变光学材料,该可变光学材料响应于由所述设备提供的刺激改变通过所述光学设备的以下各项中的至少一项:入射环境光、入射环境光的光谱含量或者入射环境光的方向。所述设备可以感测环境光的强度和/或光谱特性并且向所述光学设备的各部分提供适当的刺激以激活所述可变光学材料并且改变以下各项中的至少一项:入射环境光、入射环境光的光谱含量或者入射环境光的方向。
Description
相关申请的交叉引用
本申请要求于2016年12月22日提交的美国临时专利申请号62/438,325的优先权权益,其以整体内容通过引用并入本文。
本申请还涉及于2017年12月13日提交的美国专利申请号15/841,043,其以整体内容通过引用并入本文。
技术领域
本公开涉及光学设备,包括虚拟现实和增强现实成像和可视化系统。
背景技术
现代计算和显示技术已经利于用于所谓的“虚拟现实”或者“增强现实”体验的系统的发展,其中,数字再现图像或其部分以其看起来真实或者可以被感知为真实的方式被呈现给用户。虚拟现实或者“VR”场景典型地涉及数字或者虚拟图像信息的呈现,而对于其他实际现实世界视觉输入不透明;增强现实或者“AR”场景典型地涉及将数字或者虚拟图像信息呈现为对用户周围的实际世界的可视化的增强。混合现实或者“MR”场景是一种类型的AR场景并且典型地涉及被集成到自然界中并且响应于自然界的虚拟对象。例如,在MR场景中,AR图像内容可以由现实世界中的对象阻挡或以其他方式被感知为与现实世界中的对象相互作用。
参考图1,描绘了增强现实场景10,其中,AR技术的用户看到以背景中的人、树、建筑为特征的现实世界公园般的设置20,以及混凝土平台30。除了这些项之外,AR技术的用户还感知到他“看到”“虚拟内容”,诸如站在现实世界平台30上的机器人雕像40,以及飞行的卡通式的化身人物50,其似乎是大黄蜂的拟人化,即使这些元素40、50不存在于现实世界中。由于人类视觉感知系统是复杂的,因而产生利于其他虚拟或现实世界影像元素中间的虚拟图像元素的舒适的、自然感觉的、丰富呈现的AR技术是具挑战性的。
本文所公开的系统和方法解决与AR和VR技术有关的各种挑战。
发明内容
本公开的系统、方法和设备各自具有数个创新方面,其中没有单独一个仅负责本文所公开的期望的属性。
在附图和以下描述中阐述本说明书中所描述的主题的一个或多个实施例的细节。其他特征、方面和优点将从描述、附图和权利要求变得显而易见。注意,以下附图的相对尺寸可能未按比例绘制。
在本文中描述了包括响应于刺激而经历物理和/或化学改变的可变光学材料的光学器件的各种示例,诸如以下列举的示例:
示例1:一种用户可穿戴显示设备,包括:框架,其被配置为安装在用户上;增强现实显示器,其被附接到框架并且被配置为将图像引导到用户的眼睛;传感器,其被配置为获得关于用户周围的环境中的环境光条件的信息;可变光学材料,其响应于刺激而经历物理和/或化学改变;源,其被配置为提供刺激;以及处理电子器件,其被配置为基于由传感器获得的信息触发源以向可变光学材料提供刺激以实现材料中的物理和/或化学改变,使得环境光的强度、环境光的光谱含量或环境光的方向中的至少一种改变。
示例2:根据示例1所述的用户可穿戴设备,其中,增强现实显示器包括波导,该波导被配置为:
允许通过波导观看用户周围的环境;以及
通过引导光离开波导并且到用户的眼睛中形成图像。
示例3:根据示例1-2所述的用户可穿戴设备,其中,波导是波导的堆叠的一部分,其中,堆叠的每个波导被配置为输出与波导的堆叠的一个或多个其他波导相比具有不同的发散量的光。
示例4:根据示例1-3所述的用户可穿戴设备,其中,传感器包括以下各项中的至少一项:光传感器、图像采集设备、全球定位子系统或环境传感器。
示例5:根据示例1-4所述的用户可穿戴设备,还包括:图像采集设备,其被配置为跟踪用户的眼睛的运动。
示例6:根据示例1-5所述的用户可穿戴设备,还包括:光源,其被配置为基于与引导到用户的眼睛的图像相关联的数据生成投影束。
示例7:根据示例1-6所述的用户可穿戴设备,其中,源包括光学源,其被配置为向显示器的一个或多个部分引导可见或不可见光。
示例8:根据示例1-6所述的用户可穿戴设备,其中,源包括电源,其被配置为向显示器的一个或多个部分提供电信号。
示例9:根据示例1-6所述的用户可穿戴设备,其中,源包括热源,其被配置为向显示器的一个或多个部分提供热辐射。
示例10:根据示例1-6所述的用户可穿戴设备,其中,源包括声/超声系统,其被配置为向显示器的一个或多个部分提供声/超声能量。
示例11:根据示例1-10所述的用户可穿戴设备,其中,可变光学材料被嵌入在显示器的表面中。
示例12:根据示例1-10所述的用户可穿戴设备,其中,可变光学材料被设置在显示器的表面上面。
示例13:根据示例1-12所述的用户可穿戴设备,其中,可变光学材料包括有机或无机化合物。
示例14:根据示例1-13所述的用户可穿戴设备,其中,可变光学材料包括电活性蛋白质。
示例15:根据示例1-14所述的用户可穿戴设备,其中,可变光学材料包括响应于刺激而展现出尺寸或形状的改变的分子。
示例16:根据示例1-15所述的用户可穿戴设备,其中,可变光学材料包括响应于刺激而移动、旋转、扭转或移位的分子。
示例17:根据示例1-16所述的用户可穿戴设备,其中,可变光学材料包括响应于刺激而移动到一起和/或粘附到一起的分子。
示例18:根据示例1-16所述的用户可穿戴设备,其中,可变光学材料包括响应于刺激而远离彼此移动的分子。
示例19:根据示例1-18所述的用户可穿戴设备,其中,可变光学材料包括响应于刺激而形成纳米结构的分子。
示例20:根据示例1-19所述的用户可穿戴设备,其中,显示器包括对应于用户的第一眼睛的第一眼区(ocular region)和对应于用户的第二眼睛的第二眼区,并且其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器的一部分提供刺激以实现可变光学材料中的物理和/或化学改变,使得作为由处理电子器件触发的源的刺激的结果,环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种通过第一眼区来改变。
示例21:根据示例1-19所述的用户可穿戴设备,其中,显示器包括对应于用户的第一眼睛的第一眼区和对应于用户的第二眼睛的第二眼区,并且
其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器的一部分提供刺激以实现材料中的物理和/或化学改变,使得与通过第二眼区的环境光的强度、环境光的光谱含量或者环境光的方向相比较,通过第一眼区的环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种不同地改变。
示例22:根据示例1-19所述的用户可穿戴设备,其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现材料中的物理和/或化学改变,使得透射通过显示器的第一部分的环境光的强度的衰减大于透射通过显示器的第二部分的环境光的强度的衰减。
示例23:根据示例22所述的用户可穿戴设备,其中,入射在显示器的第一部分上的环境光的强度大于入射在显示器的第二部分上的环境光的强度。
示例24:根据示例22或23所述的用户可穿戴设备,其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现材料中的物理和/或化学改变,使得透射通过显示器的第二部分的环境光的强度减小。
示例25:根据示例1-19所述的用户可穿戴设备,其中,显示器包括对应于用户的第一眼睛的第一眼区和对应于用户的第二眼睛的第二眼区,并且其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现材料中的物理和/或化学改变,使得透射通过第一眼区的一部分的环境光的强度减小。
示例26:根据示例1-19所述的用户可穿戴设备,其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现材料中的物理和/或化学改变,使得透射通过显示器的第一部分的环境光的光谱与透射通过显示器的第二部分的环境光的光谱不同。
示例27:根据示例1-19所述的用户可穿戴设备,其中,显示器包括对应于用户的第一眼睛的第一透镜和对应于用户的第二眼睛的第二透镜,并且其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现与第一透镜相关联的可变光学材料中的物理和/或化学改变,使得作为来自由处理电子器件触发的源的刺激的结果,仅透射通过第一透镜的环境光的强度减小。
示例28:根据示例1-19所述的用户可穿戴设备,其中,显示器包括对应于用户的第一眼睛的第一透镜和对应于用户的第二眼睛的第二透镜,并且
其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现与第一透镜相关联的可变光学材料中的物理和/或化学改变,使得透射通过第一透镜的一部分的环境光的强度减小的量大于第一透镜的另一部分。
示例29:根据示例28所述的用户可穿戴设备,其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现与第二透镜相关联的可变光学材料中的物理和/或化学改变,使得透射通过第二透镜的一部分的环境光的强度减小。
示例30:根据示例1-19所述的用户可穿戴设备,其中,显示器包括对应于用户的第一眼睛的第一透镜和对应于用户的第二眼睛的第二透镜,并且其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现与第一透镜相关联的可变光学材料中的物理和/或化学改变,使得透射通过第一透镜的环境光的强度比通过第二透镜衰减更多。
示例31:根据示例30所述的用户可穿戴设备,其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现与第二透镜相关联可变光学材料中的物理和/或化学改变,使得透射通过第二透镜的环境光的强度减小。
示例32:根据示例1-19所述的用户可穿戴设备,其中,显示器包括对应于用户的第一眼睛的第一透镜和对应于用户的第二眼睛的第二透镜,并且其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现与第一或第二透镜相关联的可变光学材料中的物理和/或化学改变,使得透射通过第一透镜和第二透镜的环境光的光谱是不同的。
示例33:根据示例1-19所述的用户可穿戴设备,其中,显示器包括对应于用户的第一眼睛的第一透镜和对应于用户的第二眼睛的第二透镜,并且其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现与第一或第二透镜相关联的可变光学材料中的物理和/或化学改变,使得透射通过第一透镜的一部分的环境光的光谱与第一透镜的另一部分不同。
示例34:根据示例33所述的用户可穿戴设备,其中,显示器包括对应于用户的第一眼睛的第一透镜和对应于用户的第二眼睛的第二透镜,并且其中,处理电子器件被配置为基于由传感器获得的信息触发源以向显示器提供刺激以实现与第一或第二透镜相关联的可变光学材料中的物理和/或化学改变,使得透射通过第一透镜的一部分的环境光的光谱与第二透镜的另一部分不同。
示例35:根据示例1-19所述的用户可穿戴设备,其中,如由穿戴者的眼睛通过显示器看到的对象看起来与显示器的至少一部分对准,并且其中,处理电子器件被配置为使得源向看起来与对象对准的显示器的至少一部分提供刺激以实现可变光学材料中的物理和/或化学改变,使得来自所述对象的光的强度、来自所述对象的所述光的光谱含量或者来自所述对象的所述光的方向中的至少一种改变。
示例36:根据示例35所述的用户可穿戴设备,其中,处理电子器件被配置为基于如由所述传感器跟踪的用户的头部的运动确定看起来与对象对准的显示器的至少一部分。
示例37:根据示例35-36中的任一项所述的用户可穿戴设备,其中,处理电子器件被配置为使得源向显示器的至少一部分提供刺激以实现可变光学材料中的物理和/或化学改变,使得环境光的强度减小。
示例38:根据前述示例中的任一个所述的用户可穿戴设备,还包括:头部姿势传感器。
示例39:根据前述示例中的任一个所述的用户可穿戴设备,还被配置为:基于来自用户的反馈调节显示器的至少一部分的位置,通过该显示器的该至少一部分,环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变。
示例40:根据前述示例中的任一个所述的用户可穿戴设备,还被配置为:基于来自用户的反馈调节显示器的至少一部分的尺寸,通过该显示器的该至少一部分,环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变。
示例41:根据前述示例中的任一个所述的用户可穿戴设备,还被配置为:基于来自用户的反馈调节环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变的量。
示例42:一种操纵透射通过用户可穿戴显示设备的光的方法,所述用户可穿戴显示设备包括显示表面,所述显示表面包括响应于刺激而改变透射通过显示表面的环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种的可变光学材料,所述方法包括:使用传感器获得关于用户周围的环境中的环境光条件的测量结果;确定入射在与显示表面的第一部分相关联的第一位置以及与显示表面的第二部分相关联的第二位置上的光的强度,相比所述第二部分,所述第一位置更接近于显示表面的所述第一部分,相比所述第一部分,所述第二位置更接近于显示表面的所述第二部分;控制源以向显示表面的第一部分提供第一刺激以实现材料中的物理和/或化学改变,使得入射在第一部分上的环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变第一量;以及控制源以向显示表面的第二部分提供第二刺激以实现材料中的物理和/或化学改变,使得入射在第二部分上的环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变第二量。
示例43:根据示例42所述的方法,其中,第一量与第二量不同。
附图说明
图1图示了通过AR设备的增强现实(AR)的用户的观察。
图2A和2B图示了可穿戴显示系统的实施例。
图3图示了用于为用户模拟三维影像的常规显示系统。
图4图示了用于使用多个深度平面模拟三维影像的方法的方面。
图5A-5C图示了曲率半径与焦半径之间的关系。
图6图示了用于向用户输出图像信息的波导堆叠的示例。
图7图示了由波导输出的出射束的示例。
图8图示了每个深度平面包括使用多个不同的分量颜色形成的图像的堆叠波导组件的示例。
图9A图示了各自包括耦入光学元件的一组堆叠波导的示例的剖面侧视图。
图9B图示了图9A的多个堆叠波导的示例的透视图。
图9C图示了图9A和图9B的多个堆叠波导的示例的自上而下平面图。
图10图示了包括环境光的一个或多个源的场景。
图11是图示改变通过显示透镜的光的透射的方法的流程图。
图12A是包括具有减小的环境光透射的部分的显示透镜的侧视图。图12B是如从与眼睛侧相对的一侧看到的图12A中所图示的显示透镜的前视图。图12C是图12A中所图示的显示透镜的俯视图。
各附图中的相似附图标记和标号指示相似元件。
具体实施方式
在本文中预期的实施例包括可穿戴显示设备(例如,增强现实和/或虚拟现实眼镜),该可穿戴显示设备包括可以响应于外部刺激(例如,光刺激、电刺激、热刺激、超声/声刺激、辐射压力等)而改变以下各项中的至少一项的至少一种可变光学材料:透射通过显示设备的环境光的强度、透射通过显示设备的环境光的光谱含量或者透射通过显示设备的环境光的光路(例如,通过衍射或者通过改变可变光学元件的折射率)。在各种实施例中,至少一种可变光学材料可以被配置为使一个或多个波长范围内的环境光的强度衰减。在一些实施例中,至少一种可变光学材料可以被配置为反射、折射、散射、衍射或吸收入射光。可穿戴显示设备利用通过外部刺激在至少一种可变光学材料中引起的物理改变/化学改变。作为外部刺激的结果,至少一种可变光学材料可以取决于入射光的强度和/或光谱特性来改变以下各项中的至少一项:透射通过显示设备的环境光的强度、透射通过显示设备的环境光的光谱含量或者透射通过显示设备的环境光的光路,以改进用户体验。可以执行各种研究来表征可变光学材料的光改变特性。还可以针对不同类型的环境光源执行不同的研究来表征将导致期望的用户体验的光改变的类型。可以考虑来自各种研究的反馈来确定显示设备的哪些区域已经改变光透射和将提供期望的用户体验的光改变量。
在一些实施例中,至少一种可变光学材料可以被嵌入在显示设备的显示表面中。在一些其他实施例中,至少一种可变光学材料可以被包括在可以被设置在显示设备上的配件部件中。至少一种可变光学材料可以包括光敏、电活性和/或放射敏感材料中。在一些实施例中,至少一种可变光学材料可以包括有机或无机化合物。在一些实施例中,至少一种可变光学材料可以包括光敏材料,诸如例如基于银的化合物(例如,氯化银或卤化银)。在一些其他实施例中,至少一种可变光学材料可以包括有机化合物,诸如嗪和/或萘并吡喃。在一些实施例中,至少一种可变光学材料可以包括分子的一个或多个层。
至少一种可变光学材料可以由从例如眼镜上或者与眼镜集成的照射源提供的光刺激激活。照射源可以是单色或多色的。在各种实施例中,照射源可以包括LED、扫描光纤投影仪、紫外光源或者被配置为提供电子束的源。照射源可以由电气或者机械设备控制。例如,在一些实施例中,照射源可以由可移动快门或者可变滤波器来控制。作为另一示例,照射源可以由处理器电气控制。
处理器被配置为基于从一个或多个传感器(例如,光传感器、一个或多个照相机、眼睛跟踪照相机、位置感测设备、姿势感测设备、被配置为检测温度的环境传感器、全球定位系统子组件、加速度计、颜色传感器等)获得的信息触发提供光、电、热和/或声/超声刺激的设备。例如,处理器可以被配置为基于从一个或多个传感器获得的信息接通或关断、激活或去激活或以其他方式控制提供光、电、热和/或声/超声刺激的设备,这些刺激将激活或控制显示设备的不同的部分中的至少一个可变材料以改变以下各项中的至少一项:透射通过显示设备的环境光的强度、透射通过显示设备的环境光的光谱含量或者透射通过显示设备的环境光的光路。
响应于刺激,至少一种可变光学材料可以经历物理和/或化学改变。例如,至少一种可变光学材料的分子可以响应于刺激而经历尺寸的改变(例如,收缩或者扩大)。作为另一示例,至少一种可变光学材料的分子可以响应于刺激而经历形状的改变。作为又一示例,至少一种可变光学材料的分子的密度可以响应于刺激而改变。因此,刺激可以改变以下各项中的至少一项:透射通过显示设备的环境光的强度、透射通过显示设备的环境光的光谱含量或者透射通过显示设备的环境光的光路。
在各种实施例中,至少一种可变光学材料的分子可以被配置为在提供刺激时,移动、移位、旋转、扭转或以其他方式改变或响应。在一些实施例中,至少一种可变光学材料的分子的运动、移位、旋转或扭转可以被配置为是随机的。然而,在一些其他实施例中,至少一种可变光学材料的分子的运动、移位、旋转或扭转可以被配置为是沿着特定方向。在一些实施例中,至少一种可变光学材料移动、移位、旋转或扭转的速度可以通过改变提供的刺激的特性来变化。在各种实施例中,至少一种可变光学材料的分子可以响应于刺激而移动更接近一起。在一些其他实施例中,至少一种可变光学材料的分子可以响应于刺激而移动更远离彼此。在一些实施例中,至少一种可变光学材料的分子可以被配置为响应于刺激而形成纳米结构。
至少一种可变光学材料的分子的物理和/或化学改变可以通过控制刺激的特性引起。例如,当刺激是光时,至少一种可变光学材料的分子的物理和/或化学改变可以通过控制光刺激的波长和/或强度引起。作为另一示例,当刺激是电时,至少一种可变光学材料的分子的物理和/或化学改变可以通过控制电刺激的电压和/或电流引起。在各种实施例中,至少一种可变光学材料的分子的物理和/或化学改变可以通过调制提供刺激的源来控制。在一些实施例中,至少一种可变光学材料的分子的物理和/或化学改变可以是可逆的,使得当刺激被移除时,至少一种可变光学材料的分子回到其原始状态。在这样的实施例中,刺激恒定地被提供以维持至少一种可变光学材料的分子的改变状态。在一些其他实施例中,可以在缺少刺激的情况下维持至少一种可变光学材料的分子的物理和/或化学改变,直到提供去激活能量以将至少一种可变光学材料的分子返回到其原始状态。在这样的实施例中,刺激可以被提供短持续时间以发起至少一种可变光学材料的分子的改变。
可穿戴显示设备的各种实施例被配置为使用各种传感器组件和/或成像装置映射用户周围的现实世界中的对象,包括通过显示设备对用户可见的对象。在各种实施例中,从各种传感器组件和/或成像装置获得的信息可以用于创建数据库,该数据库包括例如现实世界中的各种对象相对于显示设备和/或用户的头部/眼睛的位置和潜在地对象的其他特性,诸如其尺寸、形状和/或对象显得多么明亮。当用户移动他或她的头部和/或身体时,由于周围现实世界中的对象看起来相对于显示设备和/或用户的头部/眼睛移动,因而数据库可以实时和/或近实时更新和/或提供更新信息。当用户移动他/她的头部时,数据库可以关于进入用户的视场的来自周围现实世界的新对象的位置实时或近实时更新和/或提供更新信息。显示设备可以被配置为和/或用于定位并且识别通过显示设备对用户可见的现实世界中的不同的环境光源。不同的环境光源可以看起来与显示设备的可视表面的不同部分对准。这些对象可能产生眩光。因此,显示设备可以被配置为改变、更改、调节或操纵以下各项中的至少一项:透射通过不同的环境光源看起来与其对准的显示设备的可视表面的不同部分的环境光的强度、环境光的光路或者环境光的光谱含量,以便减少眩光。
可穿戴显示设备的各种实施例被配置为使入射在显示表面的各部分上的入射环境光衰减。因此,以下各项中的至少一项的变化量可以跨显示设备的表面变化并且不需要是均匀的:透射通过显示设备的环境光的强度、透射通过显示设备的环境光的光谱含量或者透射通过显示设备的环境光的光路。这当显示表面的一个部分比另一部分引入更多眩光时在维持用户体验方面可以是有利的。例如,当用户正观看具有背景中的阳光或强光的场景时,那么透射通过与阳光或强光对准的显示设备的一部分的入射光可以比透射通过显示设备的其他部分的入射光的强度衰减更大的量。此外,当用户正在窗口附近或者使用台灯观看显示设备时,那么透射通过窗口或者台灯附近的显示设备的一部分的入射光可以比透射通过更远离窗口或者台灯的显示设备的一部分的入射光的强度衰减更大的量,因为窗口或者台灯附近的显示设备的一部分可能具有更多眩光。
现在将对附图进行参考,其中相似附图标记自始至终指代相似部件。将理解到,本文所公开的实施例包括光学系统,通常包括显示系统。在一些实施例中,显示系统是可穿戴的,其可以有利地提供更沉浸的VR或AR体验。例如,包含一个或多个波导(例如,波导的堆叠)的显示器可以被配置为穿戴定位在用户或观察者的眼睛的前面。在一些实施例中,波导的两个堆叠(一个用于观察者的一只眼睛)可以用于向每只眼睛提供不同的图像。
示例显示系统
图2A图示了可穿戴显示系统60的示例。显示系统60包括显示器70,以及支持该显示器70的运行的各种机械和电子模块和系统。显示器70可以被耦合到框架80,该框架80是可由显示系统用户或观察者90穿戴的,并且该框架80被配置为将显示器70定位在用户90的眼睛的前面。在一些实施例中,显示器70可以被认为是眼镜。在一些实施例中,扬声器100被耦合到框架80并且被配置为被定位在用户90的耳道附近(在一些实施例中,未示出的另一扬声器被定位在用户的另一耳道附近以提供立体/可成形声音控制)。在一些实施例中,显示系统还可以包括一个或多个麦克风110或者检测声音的其他设备。在一些实施例中,麦克风被配置为允许用户向系统60提供输入或者命令(例如,语音菜单命令、自然语言问题等的选择),和/或可以允许与其他人(例如,与类似显示系统的其他用户)的音频通信。麦克风还可以被配置为采集音频数据(例如,来自用户和/或环境的声音)的外围传感器。在一些实施例中,显示系统还可以包括外围传感器120a,该外围传感器120a可以与框架80分离并且被附接到用户90的身体(例如,在用户90的头部、躯干、肢体等上)。在一些实施例中,外围传感器120a可以被配置为采集表征用户90的生理状态的数据。例如,传感器120a可以是电极。
继续参考图2A,显示器70通过通信链路130(诸如通过有线导线或无线连接)操作性地耦合到本地数据处理模块140,其可以安装在各种配置中,诸如固定地附接到框架80、固定地附接到由用户穿戴的头盔或帽子、被嵌入在耳机中、或者以其他方式可移除地附接到用户90(例如,在背包型配置中、在腰带耦合型配置中)。类似地,传感器120a可以由通信链路120b(例如,有线导线或无线连接)操作性地耦合到本地处理器和数据模块140。本地处理和数据模块140可以包括硬件处理器,以及数字存储器,诸如非易失性存储器(例如,闪存或硬盘驱动器),其二者可以用于辅助数据的处理、高速缓存和存储。数据包括以下数据:a)从传感器(其可以例如操作性地耦合到框架80或以其他方式附接到用户90)采集的数据,诸如图像采集设备(诸如照相机)、麦克风、惯性测量单元、加速度计、指南针、GPS单元、无线电设备、陀螺仪和/或本文所公开的其他传感器;和/或b)使用远程处理模块150和/或远程数据存储库160采集和/或处理的数据(包括与虚拟内容有关的数据),可能地用于在这样的处理或者检索之后传送到显示器70。本地处理和数据模块140可以通过通信链路170、180(诸如经由有线或无线通信链路)操作性地耦合到远程处理模块150和远程数据存储库160,使得这些远程模块150、160操作性地耦合到彼此并且可用作本地处理和数据模块140的资源。在一些实施例中,本地处理和数据模块140可以包括以下各项中的一项或多项:图像采集设备、麦克风、惯性测量单元、加速度计、指南针、GPS单元、无线电设备和/或陀螺仪。在一些其他实施例中,这些传感器中的一个或多个可以附接到框架80,或者可以是通过有线或无线通信路径与本地处理和数据模块14通信的独立结构。
继续参考图2A,在一些实施例中,远程处理模块150可以包括被配置为分析和处理数据和/或图像信息的一个或多个处理器。在一些实施例中,远程数据存储库160可以包括数字数据存储设施,该数字数据存储设施可以是通过因特网或“云”资源配置中的其他网络配置可用的。在一些实施例中,远程数据存储库160可以包括一个或多个远程服务器,该一个或多个远程服务器向本地处理和数据模块140和/或远程处理模块150提供信息,例如,用于生成增强现实内容的信息。在一些实施例中,所有数据被存储并且所有计算在本地处理和数据模块中执行,这允许来自远程模块的完全自主使用。
显示系统60的各种实施例可以包括一个或多个部件(例如,照相机、光传感器、颜色传感器、温度传感器、运动检测器、加速度计、陀螺仪、全球定位子系统等),该一个或多个部件被配置为感测用户90周围的环境。在显示系统60中包括的一个或多个部件还可以被配置为监测头部的位置和/或跟踪用户90的眼睛运动。例如,在显示系统60中包括的一个或多个部件可以被配置为确定响应于强光的瞳孔的收缩、响应于低光的瞳孔的扩张、眨眼反应等。作为另一示例,在显示系统60中包括的一个或多个部件可以被配置为监测和/或跟踪用户的头部的运动。在一些实施例中,在显示系统60中包括的一个或多个部件可以被配置为监测和/或跟踪当用户的头部移动时现实世界对象(例如,树、太阳、环境光源等)相对于用户的眼睛的位置。
图2B图示了显示系统60的实施例中包括的部件中的一些部件。取决于使用系统的应用,其他实施例可以具有附加或更少的部件。然而,图2B提供了可以包括在被配置为感测环境的显示系统60中的各种部件中的一些部件的基本思想。在图2B中所图示的实施例中,显示设备70包括显示透镜106,该显示透镜106可以通过框架80安装到用户的头部或者眼睛。显示透镜106可以被配置为将来自一个或多个光投影系统118的投影光124传播到眼睛122中。显示透镜106还可以被配置为允许来自用户90周围的局部环境的至少一些光的透射。在配置为增强现实设备的显示系统60的各种实施例中,投影光124可以包括可以叠加在由用户的眼睛122观看的现实世界内容上的虚拟内容。
显示系统可以包括一个或多个面向外照相机112,该一个或多个面向外照相机112被配置为对用户90周围的环境进行成像。在一些实施例中,照相机112可以包括宽视场机器视觉照相机。在一些实施例中,照相机112可以是双采集可见光/不可见(例如,红外)光照相机。照相机112可以与如图2B中所描绘的框架80集成。然而,在一些实施例中,照相机112可以定位在其他地方。例如,照相机112可以被配置为附接到用户90的头部、手臂、颈部或身体的一些其他部分。在各种实施例中,照相机112不需要附接到用户90,而是相反可以定位在用户旁边。
继续参考图2B,显示系统60可以包括一个或多个面向内照相机114,该一个或多个面向内照相机114可以被配置为监测用户的眼睛122。在各种实施例中,面向内照相机114可以与红外光源(诸如发光二极管“LED”)配对,红外光源被配置为跟踪用户90的眼睛122。系统60还可以包括一个或多个光传感器128,该一个或多个光传感器128被配置为感测环境光。例如,一个或多个光传感器128可以被配置为感测环境光的强度、波长或颜色温度或范围中的至少一种。在各种实施例中,光传感器128可以包括硅光电检测器、光电晶体管、光电二极管、LCD传感器、使用电阻性质来检测光的强度/光谱特性的改变的传感器、红外(IR)光传感器等。系统60还可以包括传感器组件126,其可以包括一个或多个X、Y和Z轴加速度计以及磁罗盘和一个或多个X、Y和Z轴陀螺仪,优选地以相对高的频率(诸如200Hz)提供数据。在一些实施例中,传感器组件126可以包括全球定位卫星(GPS)子系统以提供关于用户的环境的信息。
本地处理和数据模块140和/或远程处理模块150可以包括处理器,诸如ASIC(专用集成电路)、FPGA(现场可编程门阵列)、和/或ARM处理器(高级精简指令集机器),其可以被配置为根据通过面向内照相机114、面向外照相机112、光传感器118、和/或传感器组件126获得的信息来实时或近实时计算用户头部姿势。处理器可以被配置为根据通过面向内照相机114、面向外照相机112、光传感器128和/或传感器组件126获得的信息来提供关于用户的环境的信息。在各种实施例中,使用从面相外照相机112、光传感器128和/或传感器组件126获得的信息,显示系统60可以被配置为确定环境光条件。例如,从面向外照相机112、光传感器128和/或传感器组件126获得的信息可以使用局部处理和数据模块140和/或远程处理模块150的一个或多个电子处理器处理以确定环境光是否被漫射。如果环境光未被漫射,那么系统60可以使用从面向外照相机112、光传感器128和/或传感器组件126获得的信息来确定环境光入射在显示器70上的方向。系统60可以被配置为确定提供环境光的发光体的类型。例如,系统60可以被配置为确定发光体是否是阳光或者来自人工光源的光。作为另一示例,系统60可以被配置为根据从面向外照相机112、光传感器128和/或传感器组件126获得的信息确定环境光的光谱组成和/或强度。
如上文所讨论的,面向内照相机114可以用于跟踪眼睛。因此,由面向内照相机114提供的信息可以用于确定用户正看的对象或者方向,以及用户的眼睛正聚焦的深度。由面向内照相机114提供的信息也可以用于确定环境光条件。例如,通过光传感器128、传感器组件126、面向外照相机112和可能地一个或多个头部姿势传感器获得的信息可以与由面向内照相机114提供的关于用户的眼睛122的瞳孔的尺寸的信息组合来确定用户的头部(和/或眼睛)的姿势,并且定位和识别通过显示设备对于用户可见的现实世界中的不同的环境光源。系统60可以被配置为确定环境光入射沿着的方向、环境光的强度和/或入射在显示器70上的环境光的光谱特性。通过光传感器128、传感器组件126、面向外照相机112和可能地一个或多个头部姿势传感器所获得的关于对象的位置以及可能地用户的头部的姿势的信息可以与由面向内照相机114所提供的关于用户的眼睛122的瞳孔的尺寸和可能地用户的眼睛正指向的方向的信息组合,来识别与对于用户可见的现实世界的视图中的环境光源重合、对准和/或重叠的显示器70的部分。来自光传感器128、传感器组件126、面向外照相机112和/或面向内照相机114的信息可以结合可能地来自相关联的云计算资源的数据使用,来映射本地世界和对象、其特征或特性和本地世界的对象和特征相对于用户的眼睛的位置。
在如下文所讨论的各种实施例中,显示透镜106可以包括可变光学部件,该可变光学部件具有至少一种材料,该至少一种材料可以被配置为响应于由显示系统60的一个或多个部件提供的刺激,改变以下各项中的至少一项:透射通过显示透镜106的至少一部分的环境光的强度、透射通过显示透镜106的至少一部分的环境光的光谱含量或者透射通过显示透镜106的至少一部分的环境光的光路,以改进用户体验。例如,如果显示系统60基于从光传感器128、传感器组件126、面向外照相机112和/或面向内照相机114获得的信息确定显示透镜106的一部分上的环境光条件是明亮的或者明亮对象在用户的视场中并且与显示的一部分对准,那么显示系统60可以被配置为提供可以改变以下各项中的至少一项的刺激(例如,热、声/超声、光或电刺激):透射通过显示透镜106的该部分的环境光的强度、透射通过显示透镜106的该部分的环境光的光谱含量、或者透射通过显示透镜106的该部分的环境光的光路,以减小透射通过显示透镜106的该部分和/或来自明亮对象的环境光的强度并且改进视觉体验。
因此,显示系统60的各种实施例可以包括:发光模块134,其被配置为发射紫外、红外和/或可见光以向显示透镜106的至少一部分提供光刺激;电气系统132,其可以向显示透镜106的至少一部分提供电刺激;热源136,其可以向显示透镜106的至少一部分提供热刺激;和/或声/超声换能器138,其向显示透镜136的至少一部分提供声/超声刺激。由发光模块134所提供的光刺激可以包括入射在被配置为具有减小的光透射的显示透镜106的一部分上的不可见和/或可见光的定向窄束。在各种实施例中,显示透镜106可以包括电极的布置(例如,电极阵列、电极的二维栅格),该电极的布置电气连接到电气系统132。电气系统132可以向显示透镜106的一部分中的电极提供电信号(例如,电压信号或者电流信号),该显示透镜106的一部分被配置为改变环境光的强度、改变环境光的光谱含量和/或改变入射在显示透镜106上的环境光的方向。发光模块134、热源136、声/超声换能器138和/或电气系统132可以与图2B中所示的框架80集成。可选地,在一些实施例中,一个或全部发光模块134、热源136、声/超声换能器138和电气系统132可以远程于显示器70来定位。
将图像感知为“三维”或“3-D”可以通过向观察者的每只眼睛提供图像的稍微不同的呈现实现。图3图示了用于为用户模拟三维影像的常规显示系统。两个不同的图像190、200-一个用于每只眼睛210、220-被输出给用户。图像190、200沿着平行于观察者的视线的光轴或z轴与眼睛210、220隔开距离230。图像190、200是平面的,并且眼睛210、220可以通过假定单个调节状态聚焦于图像上。这样的3-D显示系统依赖于人类视觉系统来组合图像190、200,以为组合图像提供深度和/或标度感知。
然而,将理解到,人类视觉系统是更复杂的,并且提供现实深度感知是更具挑战性的。例如,常规“3-D”显示系统的许多观察者发现这样的系统是不舒适的或者可能根本感知不到深度感觉。在不由理论限制的情况下,人们相信对象的观察者可以由于辐辏(vergence)和调节的组合将对象感知为“三维的”。两只眼睛相对于彼此的辐辏运动(即,眼睛的旋转,使得瞳孔朝向或远离彼此移动以将眼睛的视线会聚以固定在对象上)与眼睛的晶状体和瞳孔的聚焦(或“调节”)紧密地相关联。在正常情况下,改变眼睛的晶状体的焦点或者调节眼睛以将焦点从一个对象改变到不同的距离处的另一对象将在被称为“调节-辐辏反射”以及瞳孔扩张或者收缩的关系下自动引起对于相同距离的辐辏的匹配改变。同样地,在正常情况下,辐辏的改变将触发晶状体形状和瞳孔大小的调节的匹配改变。如本文指出的,许多立体或者“3-D”显示系统将使用对每只眼睛稍微不同的呈现(并且因此,稍微不同的图像)显示场景,使得三维视角由人类视觉系统感知。然而,这样的系统对于许多观察者是不舒适的,因为除了其他方面,其简单地提供场景的不同的呈现,但是其中,眼睛在单个调节状态处观察所有图像信息,并且与“调节-辐辏反射”相违背。提供调节与辐辏之间的更好匹配的显示系统可以形成三维影像的更现实并且舒适的模拟,其有助于增加的耐久性持续时间以及进而对诊断和治疗协议的符合性。
图4图示了用于使用多个深度平面模拟三维影像的方法的方面。参考图4,在z轴上距眼睛210、220各种距离处的对象由眼睛210、220调节,使得那些对象合焦。眼睛210、220采取特定调节状态以将对象对焦在沿着z轴的不同距离处。因此,特定调节状态可以被说成与深度平面240中的特定一个相关联,并且具有相关联的焦距,使得当眼睛在针对该深度平面的调节状态中时特定深度平面中的对象或者对象的部分合焦。在一些实施例中,三维影像可以通过为眼睛210、220中的每一个提供图像的不同呈现并且还通过提供对应于深度平面中的每一个的图像的不同呈现来模拟。虽然为了说明清晰起见被示出为分离的,但是将理解到,眼睛210、220的视场可以重叠,例如,随着沿着z轴的距离增加。另外,虽然为了便于说明起见被示出为平的,但是将理解到,深度平面的轮廓在物理空间中可以是弯曲的,使得深度平面中的所有特征与特定调节状态中与眼睛合焦。
对象与眼睛210或220之间的距离还可以改变如由该眼睛观察的来自该对象的光的发散量。图5A-5C图示了距离与光线的发散之间的关系。对象与眼睛210之间的距离以减小的距离的次序由R1、R2和R3表示。如在图5A-5C中所示,随着到对象的距离减小,光线变得更发散。随着距离增加,光线变得更准直。换句话说,可以说由点(对象或者对象的一部分)产生的光场具有球面波前曲率,该球面波前曲率是该点距用户的眼睛多么远的函数。曲率随着减小对象与眼睛210之间的距离而增加。因此,在不同的深度平面处,光线的发散度也是不同的,其中,发散度随着深度平面与观察者的眼睛210之间减小的距离而增加。虽然在图5A-5C和本文中的其他附图中为了说明清晰起见仅图示单只眼睛210,但是将理解到,关于眼睛210的讨论可以适用于观察者的两只眼睛210和220。
在不由理论限制的情况下,人们相信人眼通常可以解释有限数目的深度平面以提供深度感知。因此,感知深度的高度可信模拟可以通过向眼睛提供对应于这些有限数目的深度平面中的每一个的图像的不同呈现来实现。不同呈现可以由观察者的眼睛单独聚焦,从而有助于基于使针对位于不同的深度平面的场景的不同的图像特征对焦所要求的眼睛的调节和/或基于观察离焦的不同深度平面上的不同图像特征,给用户提供深度线索。
图6图示了用于向用户输出图像信息的波导堆叠的示例。显示系统250包括波导的堆叠或者堆叠波导组件260,该波导的堆叠或者堆叠波导组件260可以用于使用多个波导270、280、290、300、310向眼睛/大脑提供三维感知。在一些实施例中,显示系统250是图2A和/或图2B的系统60,并且图6示意性地更详细地示出该系统60的一些部分。例如,波导组件260可以是图2A的显示器70的一部分。作为另一示例,波导组件260可以是图2B的显示透镜106的一部分。将理解到,在一些实施例中,显示系统250可以被认为是光场显示器。
继续参考图6,波导组件260还可以包括波导之间的多个特征320、330、340、350。在一些实施例中,特征320、330、340、350可以是一个或多个透镜。波导270、280、290、300、310和/或多个透镜320、330、340、350可以被配置为以不同水平的波前曲率或者光线发散向眼睛发送图像信息。每个波导水平可以与特定深度平面相关联并且可以被配置为输出对应于该深度平面的图像信息。图像注入设备360、370、380、390、400可以用作用于波导的光源并且可以用于将图像信息注入波导270、280、290、300、310中,如本文所描述的,其中的每一个波导可以被配置为跨每个相应波导分布入射光,用于朝向眼睛210输出。光离开图像注入设备360、370、380、390、400的输出表面410、420、430、440、450并且注入波导270、280、290、300、310的对应的输入表面460、470、480、490、500中。在一些实施例中,输入表面460、470、480、490、500中的每一个可以是对应的波导的边缘,或者可以是对应的波导的主要表面的一部分(即,直接面对世界510或者观察者的眼睛210的波导表面之一)。在一些实施例中,单个光束(例如,准直束)可以被注入每个波导中以输出克隆的准直束的整个场,该克隆的准直束以对应于与特定波导相关联的深度平面的特定角(和发散量)朝向眼睛210引导的。在一些实施例中,图像注入设备360、370、380、390、400中的单独一个可以与多个(例如,三个)波导270、280、290、300、310相关联并且将光注入多个(例如,三个)波导270、280、290、300、310中。
在一些实施例中,图像注入设备360、370、380、390、400是分立显示器,该分立显示器各自产生用于分别注入对应的波导270、280、290、300、310中的图像信息。在一些其他实施例中,图像注入设备360、370、380、390、400是单个复用显示器的输出端,该单个复用显示器的输出端可以例如经由一个或多个光学导管(诸如光纤光缆)将图像信息输送到图像注入设备360、370、380、390、400中的每一个。将理解到,由图像注入设备360、370、380、390、400提供的图像信息可以包括不同的波长或者颜色(例如,不同的分量颜色,如本文所讨论的)的光。在一些实施例中,图像注入设备360、370、380、390、400可以是图2B的光投影系统118的一部分。
在一些实施例中,注入波导270、280、290、300、310中的光由光投影仪系统520提供,该光投影仪系统520包括光模块530,该光模块530可以包括光发射器,诸如发光二极管(LED)。来自光模块530的光可以经由分束器550被引导到光调制器540(例如,空间光调制器),并且由光调制器540修改。光调制器540可以被配置为改变注入波导270、280、290、300、310中的光的感知强度。空间光调制器的示例包括液晶显示器(LCD),其包括硅上液晶(LCOS)显示器。在一些实施例中,光投影仪系统520可以是图2B的光投影系统118的一部分。
在一些实施例中,显示系统250可以是扫描光纤显示器,包括被配置为以各种图案(例如,光栅扫描、螺旋扫描、李沙育(Lissajous)图案等)将光投影到一个或多个波导270、280、290、300、310中并且最终到观察者的眼睛310的一个或多个扫描光纤。在一些实施例中,所图示的图像注入设备360、370、380、390、400可以示意性地表示被配置为将光注入一个或多个波导270、280、290、300、310中的单个扫描光纤或一束扫描光纤。在一些其他实施例中,所图示的图像注入设备360、370、380、390、400可以示意性地表示多个扫描光纤或多束扫描光纤,其中的每一个被配置为将光注入波导270、280、290、300、310中的相关联的一个。将理解到,一个或多个光纤可以被配置为将光从光模块530传输到一个或多个波导270、280、290、300、310。将理解到,一个或多个中间光学结构可以在扫描光纤或光纤与一个或多个波导270、280、290、300、310之间提供,以例如将离开扫描光纤的光重定向到一个或多个波导270、280、290、300、310。
控制器560控制堆叠波导组件260中的一个或多个的操作,包括图像注入设备360、370、380、390、400、光源530和光调制器540的操作。在一些实施例中,控制器560是本地数据处理模块140的一部分。控制器560包括根据例如本文所公开的各种方案中的任一个调控到波导270、280、290、300、310的图像信息的时序和提供的编程(例如,非暂态介质中的指令)。在一些实施例中,控制器可以是单个积分设备,或者由有线或无线通信信道连接的分布式系统。在一些实施例中,控制器560可以是处理模块140或150(图2A)的一部分。
继续参考图6,波导270、280、290、300、310可以被配置为通过全内反射(TIR)在每个相应波导内传播光。波导270、280、290、300、310可以各自是平面的或者具有另外的形状(例如,弯曲的),其具有主顶面和主底面以及在那些主顶面与主底面之间延伸的边缘。在所图示的配置中,波导270、280、290、300、310可以各自包括耦出光学元件570、580、590、600、610,该耦出光学元件570、580、590、600、610被配置为通过重定向在每个相应波导内传播的光来将光提取出波导,提取出波导以向眼睛210输出图像信息。提取的光还可以称为耦出光,并且耦出光学元件光还可以称为光提取光学元件。所提取的光束可以由波导在波导中传播的光撞击光提取光学元件的位置处输出。耦出光学元件570、580、590、600、610可以例如是包括衍射光学特征的光栅,如本文进一步讨论的。虽然图示被设置在波导270、280、290、300、310的底主表面处以便于描述和附图清晰,但是在一些实施例中,耦出光学元件570、580、590、600、610可以设置在顶和/或底主表面处,和/或可以直接设置在波导270、280、290、300、310的体积中,如本文进一步讨论的。在一些实施例中,耦出光学元件570、580、590、600、610可以在附接到透明衬底以形成波导270、280、290、300、310的材料层中形成。在一些其他实施例中,波导270、280、290、300、310可以是单片材料,并且耦出光学元件570、580、590、600、610可以在该片材料的表面上和/或内部中形成。
继续参考图6,如本文所讨论的,每个波导270、280、290、300、310被配置为输出光以形成对应于特定深度平面的图像。例如,最靠近眼睛的波导270可以被配置为将准直光(其被注入这样的波导270中)递送给眼睛210。准直光可以代表光学无限远焦平面。下一向上波导280可以被配置为发送出准直光,该准直光在其可以到达眼睛210之前通过第一透镜350(例如,负透镜);这样的第一透镜350可以被配置为产生轻微的凹波前曲率,使得眼睛/大脑将来自该下一向上波导280的光解释为来自从光学无限远朝向眼睛210向内更接近的第一焦平面。类似地,第三向上波导290使其输出光在到达眼睛210之前穿过第一透镜350和第二透镜340;第一透镜350和第二透镜340的组合屈光力可以被配置为产生波前曲率的另一增加量,使得眼睛/大脑将来自第三波导290的光解释为比来自下一向上波导280的光从光学无限远朝向人向内更加接近的第二焦平面。
其他波导层300、310和透镜330、320类似地被配置,其中,该堆叠中的最高波导310通过其与眼睛之间的所有透镜发送其输出,用于代表到人的最近焦平面的总光焦度。为了补偿当观看/解释来自堆叠波导组件260的另一侧的世界510的光时透镜320、330、340、350的堆叠,补偿透镜层620可以被设置在堆叠的顶部以补偿下面透镜堆叠320、330、340、350的总光焦度。这样的配置提供与存在可用的波导/透镜配对一样多的焦平面。波导的耦出光学元件和透镜的聚焦方面二者可以是静态的(即,非动态或电活性的)。在一些可选实施例中,一者或二者可以使用电活性特征是动态的。
在一些实施例中,波导270、280、290、300、310中的两个或两个以上可以具有相同的相关联深度平面。例如,多个波导270、280、290、300、310可以被配置为将图像集输出给相同的深度平面,或者波导270、280、290、300、310的多个子集可以被配置为将图像集输出给相同的多个深度平面,其中,针对每个深度平面具有一个集。这可以提供用于形成拼接图像以在那些深度平面处提供扩展视场的优点。
继续参考图6,耦出光学元件570、580、590、600、610可以被配置为将光重定向到其相应波导之外并且以对于与波导相关联的特定深度平面的适当的发散或准直量输出该光。因此,具有不同的相关联的深度平面的波导可以具有耦出光学元件570、580、590、600、610的不同配置,其取决于相关联的深度平面,输出具有不同的发散量的光。在一些实施例中,光提取光学元件570、580、590、600、610可以是体积或者表面特征,其可以被配置为以特定角输出光。例如,光提取光学元件570、580、590、600、610可以是体积全息图、表面全息图和/或衍射光栅。在一些实施例中,特征320、330、340、350可以不是透镜;相反,其可以简单地是间隔器(例如,包层和/或用于形成空隙的结构)。
在一些实施例中,耦出光学元件570、580、590、600、610是形成衍射图案的衍射特征,或者“衍射光学元件”(在本文中还被称为“DOE”)。优选地,DOE具有足够低的衍射效率,使得光束的仅一部分利用DOE的每个交点朝向眼睛210偏转离开,而剩余部分继续经由TIR移动通过波导。携带图像信息的光因此被分成在许多位置处离开波导的许多相关出射束,并且结果是针对在波导内到处反弹的该特定准直束的朝向眼睛210的出射发射的相当均匀的图案。
在一些实施例中,一个或多个DOE可以是在其主动地衍射的“开启”状态与其不显著地衍射的“关闭”状态之间可切换的。例如,可切换DOE可以包括聚合物分散液晶层,其中,微滴包括主介质中的衍射图案,并且微滴的折射率可以被切换以基本上匹配主材料的折射率(在该情况下,图案未明显地衍射入射光)或者微滴可以被切换到不匹配主介质的折射率的折射率(在该情况下,图案主动地衍射入射光)。
在一些实施例中,照相机组件630(例如,数字照相机,包括可见光和红外光照相机)可以被提供以采集眼睛210和/或眼睛210周围的组织的图像,以例如检测用户输入和/或监测用户的生理状态。在各种实施例中,照相机组件630可以包括任意图像采集设备。如本文所使用的,照相机可以是任何图像采集设备。在一些实施例中,照相机组件630可以包括图像采集设备和向眼睛投影光(例如,红外光)的光源,该光可以然后由眼睛反射并且由图像采集设备检测。在一些实施例中,照相机组件630可以附接到框架80(图2A)并且可以与处理模块140和/或150电气通信,该处理模块140和/或150可以处理来自照相机组件630的图像信息以做出关于例如用户的生理状态的各种确定,如本文所讨论的。将理解到,关于用户的生理状态的信息可以用于确定用户的行为或者情绪状态。这样的信息的示例包括用户的运动和/或用户的面部表情。用户的行为或者情绪状态可以然后利用采集的环境和/或虚拟内容数据进行三角测量以便确定行为或者情绪状态、生理状态与环境或者虚拟内容数据之间的关系。在一些实施例中,可以针对每只眼睛利用一个照相机组件630,以单独监测每只眼睛。
现在参考图7,示出了由波导输出的出射束的示例。图示了一个波导,但是将理解到,在波导组件260包括多个波导的情况下,波导组件260(图6)中的其他波导可以类似地运行。光640在波导270的输入表面460处被注入波导270中并且通过TIR在波导270内传播。在光640入射在DOE 570上的点处,光的一部分离开波导作为出射束650。出射束650被图示为基本上平行的,但是如本文所讨论的,其还可以被重定向以以某个角度传播到眼睛210(例如,形成发散出射束),这取决于与波导270相关联的深度平面。将理解到,基本上平行出射束可以指示包括耦出光学元件的波导,该耦出光学元件耦出光以形成看起来设定在距眼睛210大距离(例如,光学无限远)的深度平面上的图像。其他波导或者其他耦出光学元件集可以输出更发散的出射束图案,该出射束图案将要求眼睛210调节到更近的距离以使其对焦于视网膜并且将由大脑解释为来自比光学无限远更接近于眼睛210的距离的光。在各种实施例中,出射束650可以对应于图2B的投影束124。
在一些实施例中,全色图像可以通过重叠分量颜色(例如,三种或更多种分量颜色)中的每一个的图像在每个深度平面处形成。图8图示了每个深度平面包括使用多个不同的分量颜色形成的图像的堆叠波导组件的示例。所图示的实施例示出深度平面240a–240f,但是还预期了更多或更少的深度。每个深度平面可以具有与其相关联的三个或更多个分量颜色图像,包括:第一颜色G的第一图像;第二颜色R的第二图像;以及第三颜色B的第三图像。通过跟随字母G、R和B的针对屈光度(dpt)的不同的数字在附图中指示不同的深度平面。仅作为示例,跟随这些字母中的每一个的数字指示屈光度(1/m),或者深度平面距观察者的反距离,并且附图中的每个框表示单独的分量颜色图像。在一些实施例中,为了解释不同的波长的光的眼睛聚焦的差异,用于不同的颜色分量的深度平面的确切定位可以变化。例如,对于给定深度平面的不同的分量颜色图像可以被放置在对应于距用户不同距离的深度平面上。这样的布置可以增加视觉灵敏度和用户舒适和/或可以减小色差。
在一些实施例中,每种分量颜色的光可以由单个专用波导输出,并且因此,每个深度平面可以具有与其相关联的多个波导。在这样的实施例中,包括字母G、R或B的图中的每个框可以被理解为表示单独波导,并且每深度平面可以提供三个波导,其中,每深度平面提供三种颜色分量图像。虽然与每个深度平面相关联的波导在该附图中被示出为彼此邻近,但是将理解到,在物理设备中,波导可以全部布置在每层具有一个波导的堆叠中。在一些其他实施例中,多种分量颜色可以由相同波导输出,使得例如,每深度平面可以仅提供单个波导。
继续参考图8,在一些实施例中,G是绿色,R是红色,并且B是蓝色。在一些其他实施例中,与光的其他波长相关联的其他颜色(包括品红和青色)可以另外使用或者可以替换红、绿或蓝中的一个或多个。在一些实施例中,特征320、330、340和350可以是有源或无源光学滤波器,该有源或无源光学滤波器被配置为阻止或选择性地阻止从周围环境到观察者的眼睛的光。
将理解到,贯穿本公开对于光的给定颜色的引用将被理解为涵盖由观察者感知为具有该给定颜色的光的波长的范围内的一个或多个波长的光。例如,红光可以包括大约620–780nm的范围内的一个或多个波长的光,绿光可以包括大约492–577nm的范围内的一个或多个波长的光,并且蓝光可以包括大约435–493nm的范围内的一个或多个波长的光。
在一些实施例中,光源530(图6)可以被配置为发射观察者的视觉感知范围之外的一个或多个波长的光,例如,红外和/或紫外波长。另外,显示器250的波导的耦入、耦出和其他光重定向结构可以被配置为朝向用户的眼睛210将该光引导并且发射到显示器之外,例如,用于成像和/或用户刺激应用。
现在参考图9A,在一些实施例中,入射在波导上的光可能需要重定向以将该光耦入到波导中。耦入光学元件可以用于将光重定向并且耦入到其对应的波导中。图9A图示了各自包括耦入光学元件的多个堆叠波导或堆叠波导集660的示例的剖面侧视图。波导可以各自被配置为输出一个或多个不同波长或者一个或多个不同波长范围的光。将理解到,堆叠660可以对应于堆叠260(图6),并且堆叠660的所图示的波导可以对应于多个波导270、280、290、300、310的一部分,例外的是,来自图像注入设备360、370、380、390、400中的一个或多个的光从要求光重定向用于耦入的位置被注入到波导中。
所图示的堆叠波导集660包括波导670、680和690。每个波导包括相关联的耦入光学元件(其还可以被称为波导上的光输入区),其中例如,在波导670的主表面(例如,上主表面)上设置的耦入光学元件700、在波导680的主表面(例如,上主表面)上设置的耦入光学元件710,以及在波导690的主表面(例如,上主表面)上设置的耦入光学元件720。在一些实施例中,耦入光学元件700、710、720中的一个或多个可以被设置在相应波导670、680、690的底主表面上(特别地其中,一个或多个耦入光学元件是反射偏转光学元件)。如所图示的,耦入光学元件700、710、720可以被设置在其相应波导670、680、690的上主表面上(或在下一个下波导的顶部),特别地其中,那些耦入光学元件是透射偏转光学元件。在一些实施例中,耦入光学元件700、710、720可以被设置在相应波导670、680、690的本体中。在一些实施例中,如本文所讨论的,耦入光学元件700、710、720是波长选择的,使得其选择性地重定向光的一个或多个波长,同时透射光的其他波长。虽然图示在其相应波导670、680、690的一个边或角上,但是将理解到,在一些实施例中,耦入光学元件700、710、720可以设置在其相应波导670、680、690的其他区域中。
如所图示的,耦入光学元件700、710、720可以彼此横向偏移。在一些实施例中,每个耦入光学元件可以偏移,使得其在该光不穿过另一耦入光学元件的情况下接收光。例如,每个耦入光学元件700、710、720可以被配置为从如图6中所示的不同图像注入设备360、370、380、390和400接收光,并且可以与其他耦入光学元件700、710、720分离(例如,横向地隔开),使得其基本上不接收来自耦入光学元件700、710、720中的其他耦入光学元件的光。
每个波导还包括相关联的光分布元件,其中,例如,在波导670的主表面(例如,顶主表面)上设置的光分布元件730、在波导680的主表面(例如,顶主表面)上设置的光分布元件740,以及在波导690的主表面(例如,顶主表面)上设置的光分布元件750。在一些其他实施例中,光分布元件730、740、750可以分别设置在相关联的波导670、680、690的底主表面上。在一些其他实施例中,光分布元件730、740、750可以分别设置在相关联的波导670、680、690的顶和底主表面上;或者光分布元件730、740、750可以分别设置在不同的相关联的波导670、680、690中的顶和底要表面中的不同的主表面上。
波导670、680、690可以通过例如气体、液体和/或固体材料层隔开并且分离。例如,如所图示的,层760a可以将波导670和680分离;并且层760b可以将波导680和690分离。在一些实施例中,层760a和760b由低折射率材料(即,具有比形成波导670、680、690中的直接相邻的一个波导的材料更低的折射率的材料)形成。优选地,形成层760a、760b的材料的折射率小于形成波导670、680、690的材料的折射率0.05或更多,或者0.10或更少。有利地,较低折射率层760a、760b可以用作包层,该包层利于通过波导670、680、690的光的TIR(例如,每个波导的顶主表面与底主表面之间的TIR)。在一些实施例中,层760a、760b由空气形成。虽然未图示,但是将理解到,所图示的波导集660的顶部和底部可以包括直接邻近的包层。
优选地,为了便于制造和其他考虑,形成波导670、680、690的材料类似或者相同,并且形成层760a、760b的材料类似或者相同。在一些实施例中,形成波导670、680、690的材料可以在一个或多个波导之间是不同的,和/或形成层760a、760b的材料可以是不同的,同时仍然保持上文指出的各种折射率关系。
继续参考图9A,光线770、780、790入射在波导集660上。将理解到,可以通过一个或多个图像注入设备360、370、380、390、400将光线770、780、790注入到波导670、680、690中(图6)。
在一些实施例中,光线770、780、790具有不同的性质,例如,不同的波长或不同的波长范围,该不同的波长或不同的波长范围可以对应于不同的颜色。耦入光学元件700、710、720各自偏转入射光,使得光通过TIR传播通过波导670、680、690中的相应一个。
例如,耦入光学元件700可以被配置为使光线770偏转,该光线770具有第一波长或波长范围。类似地,透射光线780入射在耦入光学元件710上并且由耦入光学元件710偏转,该耦入光学元件710被配置为使第二波长或波长范围的光偏转。同样地,光线790由耦入光学元件720偏转,该耦入光学元件720被配置为选择性地使第三波长或波长范围的光偏转。
继续参考图9A,偏转光线770、780、790被偏转,使得其传播通过对应的波导670、680、690;即,每个波导的耦入光学元件700、710、720使光偏转到该对应的波导670、680、690中以将光耦入到该对应的波导中。光线770、780、790以使得光通过TIR传播通过相应波导670、680、690的角度偏转。光线770、780、790通过TIR传播通过相应波导670、680、690,直到入射在波导的对应的光分布元件730、740、750上。
现在参考图9B,图示了图9A的多个堆叠波导的示例的透视图。如上所述,耦入光线770、780、790分别由耦入光学元件700、710、720偏转,并且然后通过TIR分别在波导670、680、690内传播。光线770、780、790然后分别入射在光分布元件730、740、750上。光分布元件730、740、750使光线770、780、790偏转,使得其分别朝向耦出光学元件800、810、820传播。
在一些实施例中,光分布元件730、740、750是正交光瞳扩展器(OPE)。在一些实施例中,OPE使光偏转或分布到耦出光学元件800、810、820并且随着其传播到耦出光学元件还增加该光束或斑尺寸。在一些实施例中,例如,在束尺寸已经具有期望尺寸的情况下,光分布元件730、740、750可以省略并且耦入光学元件700、710、720可以被配置为将光直接偏转到耦出光学元件800、810、820。例如,参考图9A,光分布元件730、740、750可以分别用耦出光学元件800、810、820替换。在一些实施例中,耦出光学元件800、810、820是将光引导到观察者的眼睛210中的出射光瞳(EP)或出射光瞳扩展器(EPE)(图7)。将理解到,OPE可以被配置为在至少一个轴上增加眼盒的尺寸,并且EPE可以在跨越(例如,正交于)OPE的轴的轴上增加眼盒。
因此,参考图9A和9B,在一些实施例中,波导集660包括用于每个分量颜色的波导670、680、690;耦入光学元件700、710、720;光分布元件(例如,OPE)730、740、750;以及耦出光学元件(例如,EPE)800、810、820。波导670、680、690可以以在每一个之间具有空隙/包层来堆叠。耦入光学元件700、710、720将入射光(其中,不同的耦入光学元件接收不同的波长的光)重定向或者偏转到其相应波导中。光然后以将导致相应波导670、680、690内的TIR的角度传播。在示出的示例中,光线770(例如,蓝光)以先前所描述的方式由第一耦入光学元件700偏转,并且然后继续沿波导向下反弹,与光分布元件(例如,OPE)730并且然后耦出光学元件(例如,EP)800相互作用。光线780和790(例如,分别为绿光和红光)将穿过波导670,其中,光线780入射在耦入光学元件710上并且由耦入光学元件710偏转。光线780然后经由TIR沿波导680向下反弹,继续到其光分布元件(例如,OPE)740并且然后耦出光学元件(例如,EP)810。最后,光线790(例如,红光)穿过波导690以入射在波导690的光耦入光学元件720中。光耦入光学元件720偏转光线790,使得光线通过TIR传播到光分布元件(例如,OPE)750,并且然后通过TIR传播到耦出光学元件(例如,EP)820。耦出光学元件820然后最后将光线790耦出到观察者,该观察者还从其他波导670、680接收耦出光。
图9C图示了图9A和图9B的多个堆叠波导的示例的自上而下平面图。如所图示的,波导670、680、690连同每个波导的相关联的光分布元件730、740、750和相关联的耦出光学元件800、810、820可以垂直地对准。然而,如本文所讨论的,耦入光学元件700、710、720未垂直地对准;相反,耦入光学元件优选地是非重叠的(例如,横向隔开,如在自上而下视图中看到的)。如本文进一步讨论的,该非重叠空间布置利于在一对一基础上将来自不同的资源的光注入到不同的波导中,从而允许特定光源唯一地耦合到特定波导。在一些实施例中,包括非重叠的空间分离的耦入光学元件的布置可以被称为偏移光瞳系统,并且这些布置内的耦入光学元件可以对应于子光瞳。
具有可变光透射的区域的显示系统
在配置为增强现实和/或虚拟现实设备的显示系统60的实施例中,可以在暗淡或较暗淡的环境中改进显示的增强现实内容和/或虚拟现实内容的对比度、明度(brightness)和/或清晰度。例如,当配置为增强现实和/或虚拟现实设备的显示系统60的实施例在明亮的阳光中、在明亮照明的房间中、和/或在具有许多眩光的下雨/有雾环境中之外观看时,增强现实内容和/或虚拟现实内容的对比度、明度和/或清晰度可能减小。因此,有利的是,当显示器70的一部分具有眩光和/或当显示器70的该部分上的环境光条件明亮时,可以减小透射通过显示器70的该部分的环境光的强度,以改进视觉的清晰度。在各种实施例中,减小通过在具有明亮的环境光条件的环境中的显示器70的一部分的环境光的强度可以有利地改进用户的视觉体验。
在一些实施例中,显示系统60可以被配置为测量明亮的环境光源(诸如例如但不限于台灯、顶灯、街灯、汽车头灯、太阳或其组合)的光强度,并且使透射通过来自明亮的环境光源的光所入射的显示器70的一个或多个部分的光量衰减。可以通过改变显示器70的一个或多个部分的透射率来减小透射通过显示器70的一个或多个部分的来自明亮的环境光源的光量。例如,显示器70的一个或多个部分可以变暗以减小透射通过该一个或多个部分的来自明亮的环境光源的光量。在一些实施方式中,显示器70可以包括一个或多个光学元件,诸如可以切换以使来自明亮的环境光源的光中的一些光偏转的可切换光偏转器(例如,光学区片、衍射光学元件或折射光学元件)。光可以偏转以便减小入射在眼睛上或在视网膜的中心(例如,中央凹)以及在观察者的视场的中心的光量。作为偏转光的结果,可以减小环境光源对于观察者看起来的明度,并且可以增加虚拟现实内容的对比度。在各种实施方式中,通过显示器70的一个或多个部分的光的透射率不需要减小到明亮的环境光源通过显示器不可见的量。相反,通过显示器70的一个或多个部分的光的透射率可以减小到允许具有足够的视觉锐度的虚拟现实内容的可见性并且还允许明亮的环境光源的可见性的水平。
显示系统60的各种实施例可以包括面向前照相机/环境光传感器,该面向前照相机/环境光传感器被配置为采集视场(FOV)中的场景的图像并且确定场景中的各种明亮光源的位置和强度。面向前照相机可以与显示系统60相关联。例如,面向前照相机可以被安装在显示器70上。可以确定照相机的FOV与通过显示器70用户的FOV之间的关系。可以通过确定由照相机采集的图像的FOV中的一个或多个明亮光源的位置并且识别对应于那些明亮光源的显示器70的位置来确定被配置为具有减小的光透射率的对应于场景中的明亮光源的所确定的位置的显示器70的一个或多个部分。
确定场景中的明亮光源的位置和/或场景中的明亮光源的强度的方法可以类似于在2017年12月13日提交的美国专利申请号15/841,043(其以整体内容通过引用并入本文)中描述的使用自动曝光控制(AEC)更新内容采集设备的一个或多个设置的方法。类似于在图1A中所图示以及在于2017年12月13日提交的美国专利申请号15/841,043(其通过引用并入本文)的段落[0060]–[0065]中所描述的方法,由照相机/环境光传感器采集的图像可以分成多个像素组(例如,96个像素组、120个像素组、144个像素组等)。可以针对每个像素组计算平均亮度值,如在于2017年12月13日提交的美国专利申请号15/841,043(其通过引用并入本文)的段落[0065]中所描述的。在一些示例中,平均亮度像素组值可以通过累加针对像素组的每个像素的亮度值来计算。在这样的示例中,亮度值可以表示图像的明度(例如,图像或者灰度图像的消色差部分)。因此,亮度值可以是图像的表示,而没有颜色分量。作为另一示例,在YUV彩色空间中,亮度值可以是Y。在一些示例中,亮度值是图像的伽玛压缩的RGB分量的加权和。在这样的示例中,亮度值可以被称为伽玛校正亮度。在一些示例中,累加可以通过将针对像素组的每个像素的亮度值加起来通过软件或硬件执行。在一些实施方式中,一旦针对像素组的亮度值被累加,就可以将总数除以像素组中的像素数以计算针对像素组的平均亮度像素组值。该过程可以针对图像中的每个像素组来重复。
如果由照相机采集的图像是灰度图像,那么与灰度图像的多个像素组相关联的像素值对应于平均亮度值。在一些实施方式中,由环境光传感器采集的彩色图像可以转换为YUV图像格式,并且可以确定对应于YUV图像的Y分量的亮度值。
在一些实施方式中,显示器70上的一个或多个亮斑可以被识别以对应于由环境光传感器采集的图像的一个或多个饱和区域。例如,可以基于相邻像素或者相邻像素组之间的最大允许亮度值差来确定对应于场景中的明亮光源的位置的显示器70上的一个或多个亮斑。可以以不同的方式计算相邻像素之间的最大允许亮度值差。例如,在一个方法中,具有在彼此的某个阈值内的相对像素值的像素可以分组在一起。将相对像素值分组的另一方法依赖于自适应k均值聚类算法,其输出具有高于某个阈值水平的亮度值的一组聚类。在一些实施方式中,饱和区域可以对应于具有高于阈值的亮度值的图像的一部分。阈值可以例如针对从对于黑色的0到对于白色的255范围的8位图像是220。对应于具有高于某个阈值的亮度值的图像的部分的显示器70的部分可以选择性地阻塞以减小来自明亮光源的光的透射率。可以采用其他方法。
在一些实施例中,显示系统60可以包括电子处理器(例如,本地处理&数据模块140和/或远程处理模块150),该电子处理器被配置为减小透射通过从具有比周围环境的平均光强度更高的光强度的周围环境的位置接收光的显示器70的部分的光量。以这种方式,可以在接收最多环境光的显示器70的部分中减小透射通过显示器70的光的强度。此外,电子处理器可以被配置为确定显示虚拟现实内容的显示器的部分并且减小透射通过那些部分的环境光量以增加虚拟现实内容的相对亮度。
为了利于选择性地减小通过显示器70的一个或多个部分的光的透射率,显示器70可以被配置为像素化显示器。例如,显示器70的表面可以包括可以被配置为改变透射通过其的光量的多个电子可寻址像素。在一些实施方式中,多个电子可寻址像素可以包括多个空间光调制器。在一些实施方式中,显示器70可以包括多个电子可寻址像素的阻塞掩模。阻塞掩模可以包括多个掩模元件,每个掩模元件与多个可寻址像素中的一个或多个相关联。多个掩模元件可以具有与通过多个电子可寻址像素的透射率的不同值相关联的不同值。电子处理器(例如,本地处理&数据模块140和/或远程处理模块150)可以被配置为选择性地减小透射通过多个像素中的一个或多个的光量以减小环境光源的明度和/或改进虚拟现实内容的对比度。
如上文所讨论的,显示器70可以包括显示透镜106。在各种实施例中,显示透镜106可以是定位在用户90的两只眼睛前面的单一透镜。单一透镜可以具有定位在每只眼睛前面的眼区,通过该眼区,用户可以观看周围环境。在一些实施例中,显示透镜106可以包括两个透镜元件,每个透镜元件定位在用户90的每只眼睛前面。每个透镜元件可以具有眼区,通过该眼区,用户可以观看周围环境。
本文中所描述的各种实施例被配置为减小透射通过显示透镜106的一个或多个部分的光的强度,诸如例如通过吸收入射在显示透镜106的一部分上的环境光中的一些和/或通过将入射在显示透镜106的(一个或多个)部分上的环境光中的一些远离眼睛的瞳孔散射/折射/衍射。此外,在包括分别定位在每只眼睛前面的两个透镜元件的显示透镜106的实施例中,可以减小透射通过透镜元件(或其一个或多个部分)中的仅一个的环境光的强度。作为另一示例,透射通过显示透镜106的一个或两个眼区的一部分的环境光的强度减小,而透射通过显示透镜106的剩余部分的环境光的强度未减小(或者仅减小较少量)。作为又一示例,透射通过显示透镜106的第一部分的环境光的强度减小,而透射通过显示透镜的第二部分的环境光的强度未减小。与在明亮的阳光中均匀变暗和在室内均匀变亮的太阳镜相比,显示透镜106的各种实施例被配置为不均匀地变暗或者变亮。例如,显示透镜106可以部分变暗,例如,透镜106的仅一部分可以变暗。作为另一示例,显示透镜106可以在透镜的不同部分中变暗不同量。此外,在系统60的各种实施例中,结合来自相关联的云计算资源的数据,基于由感测用户的环境的一个或多个部件(诸如例如光传感器128、传感器组件126、面向外照相机112和/或面向内照相机114)获得的信息,显示透镜106的部分的部分变暗可以响应于由显示系统提供的刺激(例如,由发光模块134提供的光刺激、由电气系统132提供的电刺激、由热源136提供的热能和/或由声/超声换能器138提供的声/超声能量)来实现。在显示系统60的各种实施例中,显示透镜106的变暗或变亮不需要响应于环境光条件而自动发生,而是在有/没有来自相关联的云计算资源的数据的情况下,基于由系统60的一个或多个照相机/传感器获得的环境信息响应于由显示系统提供的刺激(例如,由发光模块134提供的光刺激、由电气系统132提供的电刺激、由热源136提供的热能和/或由声/超声换能器138提供的声/超声能量)而发生。在各种实施例中,显示透镜106的至少一部分可以被配置为在入射环境光的大约1%-100%之间透射。例如,显示透镜106的至少一部分可以被配置为在入射环境光的大约5%-90%之间、在入射环境光的大约10%-80%之间、在入射环境光的大约15%-75%之间、在入射环境光的大约20%-70%之间、在入射环境光的大约25%-60%之间、在入射环境光的大约30%-50%之间、或者这些范围和/或子范围中的任何值透射。
显示透镜106可以包括可以使用热、声/超声、光和/或电刺激激活来改变以下各项中的至少一项的至少一种可变光学材料(例如,有机分子、蛋白质、光致变色材料、电致变色材料、银化合物,诸如例如卤化银或氯化银分子、气溶胶、水胶体等):透射通过显示透镜106的环境光的强度、透射通过显示透镜106的环境光的光谱含量或者透射通过显示透镜106的环境光的光路(例如,通过衍射、通过散射、通过折射或者通过改变可变光学元件的折射率)。可变光学材料可以包括一层分子或多层分子。在各种实施例中,至少一种可变光学材料可以包括响应于由显示系统60提供的电刺激(例如,电压信号和/或电流信号)以改变以下各项中的至少一项的基于蛋白质的电活性材料:透射通过显示透镜106的环境光的强度、透射通过显示透镜106的环境光的光谱含量或者透射通过显示透镜106的环境光的光路。例如,响应于由显示系统60提供的电刺激,基于蛋白质的电活性材料可以移动、膨胀、收缩、扭转、旋转、粘附在一起或移动远离彼此来改变以下各项中的至少一项:透射通过显示透镜106的环境光的强度、透射通过显示透镜106的环境光的光谱含量或者透射通过显示透镜106的环境光的光路。在一些实施例中,至少一种可变光学材料可以包括响应于由显示系统60提供的光刺激来改变以下各项中的至少一项的有机材料(例如,嗪和/或萘并吡喃):透射通过显示透镜106的环境光的强度、透射通过显示透镜106的环境光的光谱含量或者透射通过显示透镜106的环境光的光路。有机材料的分子可以被配置为当利用具有某些频率或者波长的光(例如,UV光)照射时,改变其尺寸和/或形状。例如,有机材料可以被配置为当利用具有某些频率的光照射时,膨胀并且吸收更多光(因此减小透射到用户的光的强度)。作为另一示例,有机材料的分子可以被配置为移动、收缩、扭转、旋转、凝结在一起或移动远离彼此以响应于光刺激来改变透射通过显示透镜106的光的强度。有机材料的分子可以通过吸收透射通过显示透镜106的光的一部分、通过改变显示透镜106的颜色和/或通过将透射光的一部分远离显示透镜106衍射/折射/散射来改变透射通过显示透镜106的光的强度。如上文所讨论的,可变光学材料可以包括一层分子或多层分子。
在各种实施例中,至少一种可变光学材料可以包括与可以被配置为响应于由系统60提供的刺激来改变光的透射率的某些化学物质键合的一个或多个分子。键合到一个或多个分子的化学物质可以被配置为当由光的特定波长(例如,UV、红外和/或可见光谱中的一个或多个波长)照射时改变入射环境光的强度、入射环境光的方向和/或入射环境光的光谱含量。
由于至少一种可变光学材料(例如,光活性材料和/或电活性材料)被配置为响应于由显示系统60提供的刺激来改变以下各项中的至少一项:透射通过显示透镜106的环境光的强度、透射通过显示透镜106的环境光的光谱含量或者透射通过显示透镜106的环境光的光路,因而入射环境光的强度、入射环境光的方向和/或入射环境光的光谱含量被改变(例如,通过期望部分中的吸收、通过改变期望部分的颜色和/或衍射/折射/散射环境光远离期望部分)的显示透镜106的期望部分的位置、显示透镜106的期望部分被配置为改变入射环境光的强度、入射环境光的方向和/或入射环境光的光谱含量的持续时间和显示透镜106的期望部分变暗或者变亮的速度可以控制(例如,精确地控制)。
此外,可以定制跨显示透镜106的表面的至少一种可变光学材料的分布以满足某些要求/功能。在一些实施例中,至少一种可变光学材料可以跨显示透镜106的表面均匀分布。在一些其他实施例中,至少一种可变光学材料可以跨显示透镜106的表面不均匀分布,使得与显示透镜106的其他部分相比较,显示透镜106的这些部分可以具有至少一种可变光学材料的更高的密度。在一些实施例中,显示透镜106的眼区的部分中的至少一种可变光学材料的密度可以大于用户不能看透的非眼区(例如,对应于太阳穴、鼻梁、眼眶和用户的面部的其他非眼区的显示透镜的区域)的部分中。在一些实施例中,显示透镜106的某些区域(例如,非眼区)可能缺少至少一种可变光学材料,因为其可能不需要改变以下各项中的至少一项:那些区域中的环境光的强度、环境光的光谱含量或者环境光的光路。
显示透镜106的各种实施例可以包括多个层,每个层包括响应于由显示系统60提供的刺激来改变以下各项中的至少一项的可变光学材料:环境光的强度、环境光的光谱含量或者环境光的光路。多个层的材料可以被配置为对入射环境光的不同波长起作用。例如,多个层的材料可以使入射环境光的不同波长衰减不同量。作为另一示例,多个层的材料可以吸收入射环境光的不同波长的不同量。作为又一示例,多个层的材料可以衍射/散射/折射入射环境光的不同波长的不同量。
因此,显示透镜106的一些实施例可以包括:第一层,其包括被配置为响应于由显示系统60提供的刺激而使红光衰减(例如,通过吸收、衍射、折射、反射或散射)的第一可变光学材料;第二层,其包括被配置为响应于由显示系统60提供的刺激而使绿光衰减(例如,通过吸收、衍射、折射、反射或散射)的第二可变光学材料;第三层,其包括被配置为响应于由显示系统60提供的刺激而使蓝光衰减(例如,通过吸收、衍射、折射、反射或散射)的第三可变光学材料;第四层,其包括被配置为响应于由显示系统60提供的刺激而使紫外光衰减(例如,通过吸收、衍射、折射、反射或散射)的第四可变光学材料;和/或第五层,其包括被配置为响应于由显示系统60提供的刺激而使红外光衰减(例如,通过吸收、衍射、折射、反射或散射)的第五可变光学材料。这些层的子集可以替代地包括在显示透镜或显示系统中。例如,第一层、第二层和第三层分别用于使红光、绿光和蓝光衰减。在这样的实施例中,在有/没有来自相关联的云计算资源的数据的情况下,基于由系统60的一个或多个照相机/传感器获得的环境信息,热、声/超声、光或电刺激可以被提供给多个层中的一个或多个层以使光的特定波长衰减(例如,通过吸收、衍射、折射、反射或散射)。
在各种实施例中,具有相同化学/物理性质的可变光学材料组可以单独地激活以执行各种功能,而不激活具有不同化学/物理性质的其他可变光学材料组。在各种实施例中,改变入射在显示透镜106上的环境光的强度、环境光的光谱含量或者环境光的光路中的至少一项的可变光学材料可以仅提供在显示透镜106的某些部分中(例如,显示透镜106的眼部分、显示透镜106的眼部分的一部分、显示透镜106的眼部分中的仅一个等)。在一些这样的实施例中,包括可变光学材料的显示透镜106的部分可以在存在/缺少阳光的情况下自动地变暗/变亮,而不要求来自显示系统60的任何附加刺激。
在各种实施例中,可变光学材料可以与显示透镜106集成。然而,在一些其他实施例中,可变光学材料可以包括在附加设备中,该附加设备可以附接或者拆卸到显示透镜106。与可变光学材料和/或包括可变光学材料的附加设备集成的显示透镜的实施例可以被配置为通过少量的激活能量(例如,热、声/超声、光和/或电能)激活。在一些情况下,在激活之后,可以发生改变环境光的强度、环境光的光谱含量或者环境光的光路中的至少一项的可变光学材料的分子的物理和/或化学改变,而不要求任何附加能量。可以维持可变光学材料的物理和/或化学变化,直到可变光学材料通过提供去激活能量(例如,热、声/超声、光和/或电能)来去激活。
如上文所讨论的,在一些实施方式中,显示器70可以被配置为像素化显示器。例如,显示器70的表面可以包括可以响应于电刺激或光刺激而改变透射通过其的光量的多个电子可寻址像素。在一些实施方式中,多个电子可寻址像素可以包括多个空间光调制器。在一些实施方式中,显示器70可以包括阻塞掩模,该阻塞掩模包括与多个电子可寻址像素相关联的多个掩模元件。电子处理器(例如,本地处理&数据模块140和/或远程处理模块150)可以被配置为提供电或光信号以选择性地减小透射通过多个像素中的一个或多个的光量以减小环境光源的明度和/或改进虚拟现实内容的对比度。
以下示例图示了显示系统60的实施例的优点和各种操作特性,该显示系统60被配置为改变以下各项中的至少一项:入射在显示器70上的环境光的强度、环境光的光谱含量和/或环境光的方向,如上文所描述的。考虑由用户90穿戴的包括可变光学材料(其或者与显示系统60的显示透镜106集成或者包括在附加设备中)的显示系统60的实施例。当用户从低环境光条件(例如,室内)移动到明亮环境(例如,室外)时,显示系统60的传感器组件(例如,光传感器、面向外照相机、面向内照相机等)将检测环境光条件的改变。传感器组件可以被配置为通过检测环境光的强度的改变以及通过使用具体位置信息(例如,通过GPS、罗盘获得的信息和/或从相关联的云计算资源获得的信息)、关于使用目标识别算法来确定树/公园、建筑、房间等、温度传感器等获得的周围环境的信息检测环境的改变,来检测环境光条件的改变。除了确定环境光条件的强度的改变之外,传感器组件也可以被配置为确定入射光的光谱特性。传感器组件可以被配置为确定入射在显示透镜106的不同部分上的环境光的强度/光谱特性。传感器组件可以包括具有滤波器/特定光谱响应的传感器,以确定环境光或入射光的光谱特性。因此,在某些实施例中,传感器组件可以被配置为定位并且识别通过显示器70对用户可见的现实世界中的各种环境光源的位置,以及识别针对用户的头部的特定位置与环境光源对准的显示器70和/或显示透镜106的部分。一旦已知与现实世界中的环境光源一致的显示透镜106的各部分,系统60就可以向显示透镜106的不同部分提供光、电、热和/或声/超声刺激以使得入射环境光的一部分吸收、偏转、折射、散射和/或反射,使得透射通过与现实世界中的环境光源一致的显示透镜106的该部分的环境光量减小或以其他方式改变。以这种方式,取决于环境条件,透射通过显示透镜106的环境光量可以跨显示透镜106的表面来变化。例如,当阳光从用户的一侧入射在显示透镜上使得入射在显示透镜106的表面上的环境光量是不均匀的时,考虑用户90早晨或傍晚在外面。在这样的实施例中,系统60可以被配置为透射通过显示透镜106的一个部分比透射通过显示透镜106的另一部分的光量更大的光量。在各种实施例中,透射通过显示透镜106的一个部分的光量可以比透射通过显示透镜106的另一部分的光量大约1%-100%(例如,2%-95%、5%-90%、7%-80%、10%-75%、15%-50%、20%-60%、30%-85%等)。
在各种实施例中,从各种传感器和/或照相机组件获得的信息可以发送到本地处理&数据模块140和/或远程处理模块150用于处理。本地处理&数据模块140和/或远程处理模块150可以通过处理从各种传感器和/或照相机组件获得的信息来确定与不同环境光源对准的显示透镜106的一个或多个位置。在一些实施例中,本地处理&数据模块140和/或远程处理模块150可以将现实世界中的各种对象相对于显示设备和/或用户的头部/眼睛的位置存储在数据库中。当用户移动他或她的头部时,由于周围现实世界中的对象看起来相对于显示设备和/或用户的头部/眼睛移动,因而数据库可以实时和/近实时更新或提供信息。数据库可以实时或近实时更新/或提供关于当用户移动他/她的头部时进入用户的视场的来自周围现实世界的新对象相对于显示设备和/或用户的头部/眼睛的位置的信息。在各种实施例中,本地处理&数据模块140和/或远程处理模块150可以被配置为确定当通过显示透镜106观看时看起来与显示透镜106的不同部分对准的环境光源的强度/光谱特性。本地处理&数据模块140和/或远程处理模块150可以被配置为减小透射通过显示透镜106的部分的环境光量,当通过显示透镜106观看时,显示透镜106的部分看起来与环境光源对准。本地处理&数据模块140和/或远程处理模块150可以发送信号,该信号可以触发发光模块134、电气系统132、热源136和/或声/超声换能器138以提供适当的刺激以激活显示透镜106的不同部分中的可变光学元件来使那些部分中的环境光衰减适当量。如上文所讨论的,取决于来自看起来与那些部分对准的环境光源的光的强度/光谱特性,通过显示透镜106的不同部分的光可以衰减相同或者不同量。当光从一侧入射在用户的眼睛上时(诸如例如从定位在用户的一侧的台灯、早晨或者傍晚的阳光、或者产生不同眩光量的通过显示透镜106的不同部分看到的现实世界中的对象),这可能是有利的。
在各种实施例中,系统60可以被配置为连续地或者基本上连续地获得关于环境的信息。例如,系统60可以被配置为以1–30微秒间隔、以100–500微秒间隔、400微秒-1毫秒间隔、以1-30毫秒间隔、以20-100毫秒间隔、以50-500毫秒间隔、以400毫秒-1秒间隔、以1-5秒间隔、或者以这些范围或子范围中的任何值或其任何组合来从各种照相机/传感器组件获得关于环境的信息。本地处理&数据模块140和/或远程处理模块150可以被配置为处理从系统60的各种照相机/传感器组件获得的信息并且发送信号,该信号可以触发发光模块134、电气系统132、热源136和/或声/超声换能器138以提供期望的刺激以实时或近实时激活显示透镜106的不同部分中的可变光学元件,例如,使得用户体验随着环境条件改变被维持。
例如,在各种实施例中,光传感器128可以被配置为感测入射在显示透镜上的环境光的强度和/或光谱特性。此外,面向外照相机、面向内照相机和其他传感器组件可以被配置为获得关于通过显示透镜106对用户可视的周围世界的信息,其可以有助于识别现实世界中的不同的环境光源和/或眩光产生对象以及其相对于显示器70和/或显示透镜106和/或用户的眼睛的位置。在各种实施例中,显示系统60还可以被配置为识别看起来与显示透镜106的不同部分对准的环境光源(例如,阳光、荧光灯、白炽灯、LED灯、蜡烛)的性质。一旦系统60已经识别各种环境光源相对于显示器70和/或显示透镜106和/或用户的眼睛的位置,其就可以确定其光透射特性应当改变以便维持/改进用户的视觉体验的显示器70和/或显示透镜106的部分。系统60可以向显示透镜106的所确定的部分提供刺激以实时或近实时使透射通过那些部分的光衰减和/或改变透射通过那些部分的光的方向或光谱特性,例如以维持/改进用户的视觉体验。以这种方式,基本上不需要损害作为跨显示透镜106的表面的眩光或强度改变的结果的用户的视觉体验。
在各种实施例中,系统60可以被配置为将由用户常常访问的位置的地图存储在可由本地处理&数据模块140和/或远程处理模块150访问的数据存储库中。由用户常常访问的一个或多个位置的存储地图可以包括环境光源(例如,街灯、走廊灯、交通灯等)的位置。关于来自常常访问的一个或多个位置处的环境光源的光的强度和/或光谱含量的信息也可以存储在数据存储库中。关于显示透镜106的各部分的光透射特性应当在一天、夜和/或年的各时间处如何改变的信息可以针对由用户常常访问的一个或多个位置预定并且也存储在时间存储库中。例如,对于由用户常常访问的位置,关于看起来与该位置处的不同环境光源对准的显示透镜106的不同部分的光透射能力在白天应当如何改变的信息可以存储在数据存储库中。作为另一示例,对于由用户常常访问的位置,关于看起来与该位置处的不同环境光源对准的显示透镜106的不同部分的光透射能力在夜晚(或者任何其他时间)应当如何改变的信息可以存储在数据存储库中。作为又一示例,对于由用户常常访问的位置,关于看起来与该位置处的不同环境光源对准的显示透镜106的不同部分的光透射能力在夏季白天应当如何改变的信息可以存储在数据存储库中。作为另一示例,对于由用户常常访问的位置,关于看起来与该位置处的不同环境光源对准的显示透镜106的不同部分的光透射能力在冬季白天应当如何改变的信息可以存储在数据存储库中。不同位置处的不同光源的位置和特性(例如,尺寸、形状、明度、颜色等)也可以记录并且存储用于稍后访问和使用。
本地处理&数据模块140和/或远程处理模块150可以被配置为识别来自传感器信息的位置;从数据存储库访问关于光源的位置和其他特性(例如,尺寸、形状、明度、颜色等)以及潜在地看起来与该位置处的不同环境光源对准的显示透镜106的不同部分的光透射能力针对日及年的特定时间应当如何改变的信息。该信息可以用于引导刺激提供源以激活显示透镜的各部分中的可变光学材料以根据预定信息来改变环境光的强度、光谱含量和/或方向。
这可以有利地节省处理时间。例如,关于用户的家或办公室中的各种环境光源(例如,灯、窗口、头灯等)的信息(例如,位置、强度、光谱含量等)可以存储在数据存储库中。关于一天的各时间太阳的位置、阳光的方向的信息也可以存储在数据存储库中。当系统60从由传感器获得的信息检测到用户在办公室或家中时,本地处理&数据模块140和/或远程处理模块150可以向各种刺激提供源发送适当的信号以基于关于用户的家或办公室中的各种环境光源的存储信息(例如,位置、强度、光谱含量等),使显示透镜70的各部分变暗和/或变亮。
图10图示了通过显示系统的实施例的显示透镜1006在夜间由用户观看的场景1000。显示系统可以具有类似于上文讨论的显示系统60的特征。例如,显示系统可以包括一个或多个传感器,该一个或多个传感器被配置为获得场景的信息,该信息包括各种环境光源相对于显示透镜1006的位置、各种环境光源的明度和/或各种环境光源的类型(例如,荧光灯、LED灯、白炽灯等)。显示系统还可以包括电子处理系统,该电子处理系统被配置为处理由一个或多个传感器获得的信息。处理由一个或多个传感器获得的信息可以包括识别看起来与由用户观看的场景1000中的各种环境光源对准(或一致)的显示透镜1006的部分以及确定显示透镜1006的一个或多个部分的光透射特性以改进/维持用户的视觉体验。显示透镜1006包括一种或多种可变光学材料,该一种或多种可变光学材料被配置为响应于由显示系统提供的光、电、热和/或声/超声刺激改变入射环境光的强度、入射环境光的光谱含量和/或入射环境光的方向。显示透镜1006可以具有类似于显示透镜106的特征。场景1000包括房子1003的前廊和沿着人行道的数个环境光源1005a、1005b、1005c、1005d、1005e和1005f。环境光源1005a-1005f可以包括走廊灯、街灯、室内灯、室外灯、路灯、景观照明等。在没有一种或多种可变光学材料的显示透镜的实施例中,当通过看起来与环境光源1005a–1005f对准的显示透镜的部分观看时,环境光源1005a-1005f可能产生眩光和/或降低视觉的清晰度。相反,显示透镜1006被配置为改变通过看起来与环境光源1005a–1005f对准的显示透镜1006的部分的入射在显示透镜1006上的环境光的强度、环境光的光谱含量和/或环境光的方向,以减小归因于由环境光1005a–1005f造成的眩光对用户体验的干扰。
如上文所讨论的,与显示系统相关联的传感器可以连续地或者间歇地获得场景1000的信息。信息可以包括环境光源1005a–1005f相对于显示透镜1006的位置、来自环境光源1005a–1005f的环境光的方向、强度和光谱含量。电子处理系统可以处理由一个或多个传感器获得的信息,确定跨显示透镜1006的表面的环境光的分布应当如何改变。例如,在一些实施例中,电子处理系统可以确定包括场景(其包括环境光源1005a-1005f)的一部分的显示透镜1006的区域(例如,1010a、1010b、1010c、1010d、1010e和1010f)应当变暗以减小透射通过那些部分的环境光的强度。作为另一示例,在一些实施例中,电子处理系统可以确定在包括场景(其包括环境光源1005a-1005f)的一部分的显示透镜1006的区域(例如,1010a、1010b、1010c、1010d、1010e和1010f)中的入射环境光应当漫射以减少眩光。作为另一示例,在一些实施例中,电子处理系统可以确定包括环境光源1005a-1005f的显示透镜1006的区域(例如,1010a、1010b、1010c、1010d、1010e和1010f)中的入射环境光应当重定向以减少眩光。
基于确定,电子处理系统可以发送信号以激活与显示系统相关联的光源、热源、声/超声源和/或电源并且向包括环境光源1005a-1005f的显示透镜1006的区域(例如,1010a、1010b、1010c、1010d、1010e和1010f)提供期望的光、热、声/超声和/或电刺激,其引起显示透镜的该区域中的可变光学材料的物理和/或化学改变,该物理和/或化学改变进而可以改变入射环境光的强度、入射环境光的光谱含量和/或入射环境光的方向。
在各种实施例中,系统60可以被配置为实时或近实时跟踪用户的眼睛和/或头部的运动并且实时或近实时确定现实世界对象(例如,树、太阳、环境光源等)与用户的眼睛之间的相对位置。在这样的实施例中,系统60可以被配置为当用户的头部和/或眼睛移动时动态地改变通过显示透镜的不同部分的环境光透射特性,例如,以维持/改进用户的视觉体验。例如,考虑用户的头部处于第一位置并且环境光源看起来与用户的左眼瞳孔的左边的显示透镜106的一部分对准。如果用户保持在第一头部位置,则左眼瞳孔的左边的显示透镜106的部分可以变暗或以其他方式改变以减小透射通过该部分的环境光的强度。当用户的头部向左移动到第二位置时,环境光源现在可能看起来与左眼瞳孔的右边的显示透镜106的部分对准。因此,当用户的头部处于第二位置时,左眼瞳孔的右边的显示透镜106的该部分可以变暗或以其他方式改变以减小透射通过该部分的环境光的强度来维持用户的视觉体验。当头部处于第一位置时先前变暗的左眼瞳孔的左边的显示透镜106的部分可以变亮或者保持处于变暗状态。对眼镜前面的场成像并且可以提供包括传感器的视场中的明亮光源的对象相对于透镜和用户眼镜的位置的映射的传感器(诸如面向外照相机)可以用于确定待改变的透镜的部分,例如,以使来自产生眩光的明亮对象的光衰减。包括对象的位置和例如其明度的记录的数据库也可以用于确定待改变的透镜的部分,例如,以使来自产生眩光的明亮对象的光衰减。头部姿势传感器和/或系统可以用于确定头部和/或身体的运动、位置和/或取向。该位置可以结合对象的位置的数据库使用以确定对象相对于用户的眼睛、透镜的位置,并且确定与(一个或多个)对象对准的透镜的(一个或多个)部分以及待改变的透镜的(一个或多个)部分。
图11图示了描绘了当使用显示系统60的实施例时将改进用户的视觉体验的改变通过显示设备的环境光透射特性的方法的流程图1100。方法包括使用一个或多个传感器获得关于由用户通过显示设备观看的场景中的各种环境光源和/或眩光产生对象的位置的信息,如框1105中所示。例如,显示系统60的一个或多个光传感器128、(一个或多个)面向外照相机112和/或其他传感器组件可以被配置为获得关于由用户观看的场景中的各种环境光源和/或眩光产生对象的位置和性质的信息。由显示系统60的一个或多个光传感器128、(一个或多个)面向外照相机112和/或其他传感器组件获得的信息可以包括环境光的光谱特性和/或环境光的其他特性(例如,环境光的强度)。作为另一示例,显示系统60的一个或多个光传感器128、(一个或多个)面向外照相机112和/或其他传感器组件可以被配置为获得关于明亮的前视场的对象、区或区域和黑暗的前视场的一个或多个区或区域的位置的信息。作为又一示例,显示系统60的一个或多个光传感器128、(一个或多个)面向外照相机112和/或其他传感器组件可以被配置为获得一个或多个明亮环境光源的位置和来自明亮环境光源的光的强度和光的强度。由一个或多个传感器组件获得的信息被传送到一个或多个电子处理系统(例如,本地处理&数据模块140和/或远程处理模块150)用于处理。电子处理系统可以是本地或者远程的。一个或多个电子处理系统可以处理由一个或多个传感器组件获得的信息并且确定显示透镜106的一个或多个位置处的环境光的特性,如框1107中所示。所确定的特性可以包括显示透镜106的一个或多个位置处的环境光的强度和/或显示透镜106的一个或多个位置处的环境光的光谱特性。在一些实施例中,一个或多个电子处理系统还可以被配置为确定环境光源是否是太阳、荧光光源、LED光源或者这些光源的组合。此外,如在框1107中所示,一个或多个电子处理系统可以被配置为识别看起来与由用户通过显示透镜观看的场景中的各种环境光源和/或眩光产生对象对准的显示透镜的部分。一个或多个电子处理系统可以基于与各种环境光源和/或眩光产生对象一致的显示透镜106的所确定的部分、各种环境光源和/或眩光产生对象的强度和/或光谱特性来确定将改进用户的视觉体验的显示透镜106的一个或多个位置处的环境光透射特性,如框1109中所示。
例如,一个或多个电子处理系统可以确定显示透镜106的一个或多个位置应当变暗以改进用户的视觉体验的量。作为另一示例,基于环境光来自落日的确定,一个或多个电子处理系统可以确定改变与如由眼睛看到的太阳对准的显示透镜106的部分的透射特性可以减少由太阳引起的眩光。类似地,减小透射通过与如由眼睛看到的太阳对准的显示透镜106的部分的接收光的一个或多个波长(例如,红光波长)中的光量可以减少眩光并且可能地改进用户的视觉体验。
一个或多个电子处理系统可以发送信号以触发或引起与显示系统60相关联的一个或多个刺激提供源以根据由一个或多个电子处理系统做出的确定来改变显示透镜106的一个或多个位置处的环境光透射特性,如框1111中所示。例如,一个或多个电子处理系统可以发送信号,以接通与显示系统60相关联的光、电、热和/或声/超声源中的一个或多个并且提供光、电、热和/或声/超声信号,以改变显示透镜106的至少一部分中的可变光学材料的分子的物理/化学特性以改变该部分的环境光透射特性。作为另一示例,一个或多个电子处理系统可以发送信号以接通或以其他方式引起与显示系统60相关联的光源或系统提供光信号,以改变显示透镜106的至少一部分中的可变光学材料的分子的物理/化学特性以改变该部分的环境光透射特性。光信号可以具有预定强度和波长。例如,光信号可以是一束具有某个波长的可见或不可见光。可变光学材料的分子可以例如响应于由来自与显示系统60相关联的光、电、热和/或声/超声源的信号提供的刺激而膨胀、收缩、移动、扭转或旋转并且提供期望的环境光改变特性(例如,一个或多个波长区域中的衰减、光偏转、漫射等)。
图12A示意性地图示了设置在用户的眼睛1201前面的显示透镜1206的侧视图。图12B示意性地图示了如从与眼睛侧相对的一侧看到的显示透镜1206的前视图。图12C示意性地图示了显示透镜1206的俯视图。由用户通过显示透镜1206观看的场景中的环境光源看起来与显示透镜1206的区域1207对准。如在图12A-12C中所图示的,环境光源1210看起来在x-&y-方向上与显示透镜1206的区域1207对准。类似地,显示透镜1206的区域1207看起来与如在x-&y-方向上由用户的眼睛看到的光源1210对准。如本申请中所讨论的,与显示透镜1206相关联的电子处理系统可以被配置为改变/修改通过显示透镜1206的区域1207的环境光的透射,来改进用户的视觉体验。例如,在一些实施例中,与显示透镜1206的其他部分相比较,区域1207可以变暗,以减小透射通过该区域的环境光的强度。在一些其他实施例中,通过区域1207入射的环境光可以引导远离用户的眼睛1201。可以改变显示器的其他特性。
可以执行各种研究来表征可变光学材料的光改变特性。还可以针对不同类型的环境光源执行不同的研究来表征将导致期望的用户体验的光改变的类型。例如,可以在由用户使用之前测试显示系统60的不同的实施例,以表征可变光学材料的光改变特性。测试可以包括将被期望实现显示器70或显示透镜106的期望部分的某种改变的刺激强度、提供刺激与实现显示器70的期望部分的改变之间的时间间隔、将针对不同环境光源为平均用户提供改进的视觉体验的改变等的分析。各种研究的结果可以存储在可由本地处理&数据模块140和/或远程处理模块150访问的数据库中。当确定显示透镜的某个部分的光改变能力的性质和发送到各种刺激提供源的信号时,本地处理&数据模块140和/或远程处理模块150可以访问各种研究的结果。
在各种实施例中,显示系统60可以被配置为从用户获得关于已经改变光透射能力的显示器70和/或显示透镜60的部分的尺寸和/或位置和光透射应当在显示器70和/或显示透镜106的各部分中改变的程度的反馈,以改进用户的视觉体验。在这样的实施例中,本地处理&数据模块140和/或远程处理模块150可以基于从与系统60相关联的各种传感器和/或成像系统获得的信息来做出已经改变光透射能力的显示器70和/或显示透镜106的部分的尺寸和/或位置的初始确定。本地处理&数据模块140和/或远程处理模块150还可以基于初始测试和研究的结果来做出通过显示器70和/或显示透镜106的各部分的光透射应当改变的程度的初始确定。系统60可以然后使用视觉和/或听觉信号提示用户并且从用户请求关于已经改变环境光透射的显示器70和/或显示透镜106的部分的尺寸和/或位置和光透射通过各部分来改变的程度的反馈。本地处理&数据模块140和/或远程处理模块150可以基于来自用户的反馈来调节已经改变光透射能力的显示器70和/或显示透镜106的部分的尺寸和/或位置和光透射应当在显示器70和/或显示透镜106的各部分中改变的程度。以这种方式,视觉体验可以基于用户的偏好来改进。用户可以以各种方式提供反馈。例如,用户可以使用语音命令提供反馈。作为另一示例,用户可以使用一个或多个按钮或旋钮、操纵杆、触摸板或轨迹球来提供反馈。作为又一示例,用户可以使用姿势(例如,手势、面部姿势、眨眼反应等)来提供反馈。下文讨论了被配置为基于来自用户的反馈来调节已经改变光透射能力的显示器70和/或显示透镜106的部分的尺寸和/或位置和光透射应当在显示器70和/或显示透镜106的各部分中改变的程度的显示设备的示例。
考虑确定看起来与由用户通过显示透镜观看的场景中的一个或多个环境光源对准的显示透镜的一个或多个部分的显示系统的实施例。响应于确定,系统可以被配置为使看起来与场景中的一个或多个环境光源对准的显示透镜的一个或多个部分变暗。系统然后可以从用户请求关于显示透镜的一个或多个变暗部分的尺寸和/或位置和那些部分的变暗量的反馈。用户可以提供系统可以用于调节显示透镜的一个或多个变暗部分的尺寸和/或位置和那些部分的变暗量的反馈。
本文中所讨论的可变光学材料可以被配置为充当过滤掉入射光的特定波长(诸如例如蓝光、红光、绿光或光的某个其他波长)的滤波器以增强用户体验。在各种实施例中,可变光学材料可以被配置为引导入射光朝向或者远离眼睛的特定区域。在这样的实施例中,面向内照相机114可以用于跟踪眼睛的运动,并且可变光学材料的化学/物理性质可以通过提供来自系统60的刺激来控制,使得入射光保持朝向或者远离眼睛的特定区域引导而不管眼睛的运动。在各种实施例中,可变光学材料可以被配置为使来自环境的入射光部分地或者完全地衰减(例如,以防止某些环境中的感觉超载)。
虽然上文讨论了通过显示透镜106的一部分的环境光的衰减、漫射、折射、重定向、过滤和/或散射,但是在任何这样的情况下,在某些实施例中,不同透镜可以衰减、漫射、折射、重定向、过滤和/或散射入射环境光。例如,左透镜和右透镜可以将入射环境光衰减、漫射、折射、重定向、过滤和/或散射不同量。此外,左透镜和右透镜的不同部分可以不同地衰减、漫射、折射、重定向、过滤和/或散射入射环境光。关于衰减程度和透镜的衰减的部分的直接控制使得具有不同形状和/或尺寸的左透镜和右透镜的不同部分能够衰减以及衰减的不同幅度和分布。左透镜和右透镜的其他特性(诸如光谱特性)和其衰减可以是不同的。
应预期到,各种实施例可以实现在各种应用中或者与各种应用相关联,诸如成像系统和设备、显示系统和设备、空间光调制器、基于液晶的设备、偏振器、波导板等。本文中所描述的结构、设备和方法可以特别地发现在诸如可穿戴显示器(例如,头戴式显示器)的显示器中使用,可穿戴显示器(例如,头戴式显示器)可以用于增强现实和/或虚拟现实。更一般地,所描述的实施例可以在可以被配置为显示图像(无论是运动(诸如视频)还是固定(诸如静止图像),以及无论是文本、图形还是绘画)的任何设备、装置或者系统中实现。然而,应预期到,所描述的实施例可以包括在各种电子设备中或者与各种电子设备相关联,诸如但不限于:移动电话、启用多媒体因特网的蜂窝电话、移动电视接收器、无线设备、智能电话、设备、个人数字助理(PDA)、无线电子邮件接收器、手持式或便携式计算机、上网本、笔记本、智能本、平板电脑、打印机、复印机、扫描器、传真设备、全球定位系统(GPS)接收器/导航仪、照相机、数字媒体播放器(诸如MP3播放器)、摄录像机、游戏控制台、手表、时钟、计算器、电视监视器、平板显示器、电子阅读设备(例如,电子阅读器)、计算机监视器、自动显示器(包括里程计和速度计显示器等)、驾驶舱控制和/或显示器、照相机视图显示器(诸如车辆中的后视图照相机的显示器)、电子照片、电子广告牌或标志、投影仪、架构结构、微波、冰箱、立体音响系统、盒式录音机或播放器、DVD播放器、CD播放器、VCR、收音机、便携式存储器芯片、洗衣机、烘干机、洗衣机/烘干机、停车计时器、头戴式显示器和各种成像系统。因此,教导不旨在限于仅在附图中所描绘的实施例,而是相反具有如将对于本领域普通技术人员容易明显的宽适用性。
对于本公开中所描述的实施例的各种修改可以对于本领域的技术人员是容易明显的,并且本文中定义的一般原理可以适用于其他实施例而不脱离本公开的精神或范围。可以对所描述的本发明做出各种改变并且可以代替等效物而不脱离本发明的真实精神和范围。另外,可以做出许多修改以将特定情况、材料、物质的组成、过程、(一个或多个)过程动作或(一个或多个)步骤适于本发明的(一个或多个)目的、精神或范围。所有这样的修改旨在在与本公开相关联的权利要求的范围内。
词语“示例性的”在本文中排外地用于意指“用作示例、实例或者图示”。在本文中描述为“示例性的”的任何实施例并非一定被理解为相对于其他实施例优选的或者有利的。此外,本领域普通技术人员将容易理解到,术语“上”和“下”、“上面”和“下面”等有时用于便于描述附图,并且指示对应于适当取向页面上的图的取向的相对位置,并且可以不反映本文所描述的结构的取向,因为实现了那些结构。
在分离的实施例的上下文中在该说明书中所描述的某些特征还能够组合实现在单个实施例中。相反地,在单个实施例中的上下文中所描述的各种特征还能够单独地或者以任何适合的子组合实现在多个实施例中。而且,尽管上面可以将特征描述为在某些组合中作用并且甚至如此初始地要求保护,但是在一些情况下,可以从组合切除来自所要求保护的组合的一个或多个特征,并且所要求保护的组合可以涉及子组合或子组合的变型。
类似地,虽然操作以特定次序在附图中描绘,但是这不应该被理解为要求这样的操作以所示的特定次序或者以顺序次序执行,或者全部所图示的操作被执行,以实现期望的结果。而且,附图可以示意性地以流程图的形式描绘一个或多个示例过程。然而,未描绘的其他操作可以包含在示意性地图示的示例过程中。例如,一个或多个附加操作可以在任何所图示的操作之前、之后、同时或者之间执行。在某些情况下,多任务和并行处理可以是有利的。而且,上文所描述的实施例中的各种系统部件的分离不应该被理解为要求所有实施例中的这样的分离,并且应该理解的是,所描述的程序部件和系统通常可以一起集成在单个软件产品中或者封装到多个软件产品中。此外,其他实施例在以下权利要求的范围内。在一些情况下,权利要求中所记载的动作能够以不同的次序执行并且仍然实现期望的结果。
本发明包括可以使用主题设备执行的方法。方法可以包括提供这样的适合的设备的动作。这样的提供可以由终端用户执行。换句话说,“提供”动作仅要求终端用户获得、访问、接近、定位、设立、激活、加电或其他动作以提供本方法中的必要设备。本文中记载的方法可以以记载事件的逻辑上可能的任何次序以及以事件的记载次序执行。
上文已经阐述了本发明的示例方面连同关于材料选择和制造的细节。至于本发明的其他细节,这些可以结合上文提到的专利和公开理解并且通常由本领域的技术人员已知或者理解。就如通常或者逻辑上使用的附加动作而言,相对于本发明的基于方法的方面可以同样适用。
另外,虽然已经参考可选地包含各种特征的数个示例描述了本发明,但是本发明将不限于如相对于本发明的每个变型预期的描述或指示的发明。可以对所描述的本发明做出各种改变并且可以代替等效物(无论是记载在本文中还是出于某种简洁的缘故未包括),而不脱离本发明的真实精神和范围。另外,在提供值的范围的情况下,应当理解,该范围的上限与下限之间的每个中间值和该声明的范围中的任何其他声明的或中间值涵盖在本发明中。
而且,应预期到,可以独立地或者组合本文所描述的特征中的任何一个或多个来阐述并且要求保护所描述的发明变型的任何可选特征。对于单数项的引用包括存在多个相同项的可能性。更特别地,如本文所使用的并且在与其相关联的权利要求中,除非特别另外说明,否则单数形式“一(a)”、“一(an)”、“所述(said)”和“该(the)”包括复数指示物。换句话说,冠词的使用允许以上描述以及与本公开相关联的权利要求中的主题项中的“至少一个”。还应注意到,这样的权利要求可以被撰写为不包括任何可选元素。如此,该语句旨在用作用于结合权利要求元素的记载来使用如“仅仅(solely)”、“仅(only)”等这样的专用术语或者使用“否定”限制的先行基础。
在不使用这样的专用术语的情况下,与本公开相关联的权利要求中的术语“包括”应当允许包括任何附加元素—而不管给定数目的元素是否被列举在这样的权利要求中,或者特征的添加可以被认为是转换这样的权利要求中阐述的元素的性质。除了如本文特别定义之外,本文中使用的所有技术和科学术语将被给定为尽可能宽的通常理解的意义,同时维持权利要求有效性。
本发明的宽度将不限于所提供的示例和/或本说明书,而是相反仅通过与本公开相关联的权利要求语言的范围来限定。
Claims (43)
1.一种用户可穿戴显示设备,包括:
框架,其被配置为安装在所述用户上;
增强现实显示器,其被附接到所述框架并且被配置为将图像引导到所述用户的眼睛;
传感器,其被配置为获得关于所述用户周围的环境中的环境光条件的信息;
可变光学材料,其响应于刺激而经历物理和/或化学改变;
源,其被配置为提供所述刺激;以及
处理电子器件,其被配置为:
基于由所述传感器获得的所述信息触发所述源以向所述可变光学材料提供所述刺激以实现所述材料中的物理和/或化学改变,使得环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变。
2.根据权利要求1所述的用户可穿戴设备,其中,所述增强现实显示器包括波导,所述波导被配置为:
允许通过所述波导观看所述用户周围的所述环境;以及
通过引导光离开所述波导并且到所述用户的眼睛中形成图像。
3.根据权利要求1-2所述的用户可穿戴设备,其中,所述波导是波导的堆叠的一部分,其中,所述堆叠的每个波导被配置为输出与波导的所述堆叠的一个或多个其他波导相比具有不同的发散量的光。
4.根据权利要求1-3所述的用户可穿戴设备,其中,所述传感器包括以下各项中的至少一项:光传感器、图像采集设备、全球定位子系统或环境传感器。
5.根据权利要求1-4所述的用户可穿戴设备,还包括:图像采集设备,其被配置为跟踪所述用户的眼睛的运动。
6.根据权利要求1-5所述的用户可穿戴设备,还包括:光源,其被配置为基于与引导到所述用户的所述眼睛的所述图像相关联的数据生成投影束。
7.根据权利要求1-6所述的用户可穿戴设备,其中,所述源包括光学源,其被配置为向所述显示器的一个或多个部分引导可见或不可见光。
8.根据权利要求1-6所述的用户可穿戴设备,其中,所述源包括电源,其被配置为向所述显示器的一个或多个部分提供电信号。
9.根据权利要求1-6所述的用户可穿戴设备,其中,所述源包括热源,其被配置为向所述显示器的一个或多个部分提供热辐射。
10.根据权利要求1-6所述的用户可穿戴设备,其中,所述源包括声/超声系统,其被配置为向所述显示器的一个或多个部分提供声/超声能量。
11.根据权利要求1-10所述的用户可穿戴设备,其中,所述可变光学材料被嵌入在所述显示器的表面中。
12.根据权利要求1-10所述的用户可穿戴设备,其中,所述可变光学材料被设置在所述显示器的表面上面。
13.根据权利要求1-12所述的用户可穿戴设备,其中,所述可变光学材料包括有机或无机化合物。
14.根据权利要求1-13所述的用户可穿戴设备,其中,所述可变光学材料包括电活性蛋白质。
15.根据权利要求1-14所述的用户可穿戴设备,其中,所述可变光学材料包括响应于所述刺激而展现出是尺寸或形状的改变的分子。
16.根据权利要求1-15所述的用户可穿戴设备,其中,所述可变光学材料包括响应于所述刺激而移动、旋转、扭转或移位的分子。
17.根据权利要求1-16所述的用户可穿戴设备,其中,所述可变光学材料包括响应于所述刺激而移动到一起和/或粘附到一起的分子。
18.根据权利要求1-16所述的用户可穿戴设备,其中,所述可变光学材料包括响应于所述刺激而远离彼此移动的分子。
19.根据权利要求1-18所述的用户可穿戴设备,其中,所述可变光学材料包括响应于所述刺激而形成纳米结构的分子。
20.根据权利要求1-19所述的用户可穿戴设备,其中,所述显示器包括对应于所述用户的第一眼睛的第一眼区和对应于所述用户的第二眼睛的第二眼区,并且
其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器的一部分提供所述刺激以实现所述可变光学材料中的物理和/或化学改变,使得作为由所述处理电子器件触发的源的刺激的结果,环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种通过所述第一眼区来改变。
21.根据权利要求1-19所述的用户可穿戴设备,其中,所述显示器包括对应于所述用户的第一眼睛的第一眼区和对应于所述用户的第二眼睛的第二眼区,并且
其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器的一部分提供所述刺激以实现所述材料中的物理和/或化学改变,使得与通过所述第二眼区的环境光的强度、环境光的光谱含量或者环境光的方向相比较,通过所述第一眼区的环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种不同地改变。
22.根据权利要求1-19所述的用户可穿戴设备,其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现所述材料中的物理和/或化学改变,使得透射通过所述显示器的第一部分的环境光的强度的衰减大于透射通过所述显示器的第二部分的环境光的强度的衰减。
23.根据权利要求22所述的用户可穿戴设备,其中,入射在所述显示器的所述第一部分上的环境光的所述强度大于入射在所述显示器的所述第二部分上的环境光的强度。
24.根据权利要求22或23所述的用户可穿戴设备,其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现所述材料中的物理和/或化学改变,使得透射通过所述显示器的所述第二部分的环境光的所述强度减小。
25.根据权利要求1-19所述的用户可穿戴设备,其中,所述显示器包括对应于所述用户的第一眼睛的第一眼区和对应于所述用户的第二眼睛的第二眼区,并且
其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现所述材料中的物理和/或化学改变,使得透射通过所述第一眼区的一部分的环境光的强度减小。
26.根据权利要求1-19所述的用户可穿戴设备,其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现所述材料中的物理和/或化学改变,使得透射通过所述显示器的第一部分的环境光的所述光谱与透射通过所述显示器的第二部分的环境光的所述光谱不同。
27.根据权利要求1-19所述的用户可穿戴设备,其中,所述显示器包括对应于所述用户的第一眼睛的第一透镜和对应于所述用户的第二眼睛的第二透镜,并且
其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现与所述第一透镜相关联的所述可变光学材料中的物理和/或化学改变,使得作为来自由所述处理电子器件触发的源的刺激的结果,仅透射通过所述第一透镜的环境光的强度减小。
28.根据权利要求1-19所述的用户可穿戴设备,其中,所述显示器包括对应于所述用户的第一眼睛的第一透镜和对应于所述用户的第二眼睛的第二透镜,并且
其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现与所述第一透镜相关联的所述可变光学材料中的物理和/或化学改变,使得透射通过所述第一透镜的一部分的环境光的强度减小的量大于所述第一透镜的另一部分。
29.根据权利要求28所述的用户可穿戴设备,其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现与所述第二透镜相关联的所述可变光学材料中的物理和/或化学改变,使得透射通过所述第二透镜的一部分的环境光的强度减小。
30.根据权利要求1-19所述的用户可穿戴设备,其中,所述显示器包括对应于所述用户的第一眼睛的第一透镜和对应于所述用户的第二眼睛的第二透镜,并且
其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现与所述第一透镜相关联的所述可变光学材料中的物理和/或化学改变,使得透射通过所述第一透镜的环境光的强度比通过所述第二透镜衰减更多。
31.根据权利要求30所述的用户可穿戴设备,其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现与所述第二透镜相关联的所述可变光学材料中的物理和/或化学改变,使得透射通过所述第二透镜的环境光的强度减小。
32.根据权利要求1-19所述的用户可穿戴设备,其中,所述显示器包括对应于所述用户的第一眼睛的第一透镜和对应于所述用户的第二眼睛的第二透镜,并且
其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现与所述第一或第二透镜相关联的可变光学材料中的物理和/或化学改变,使得透射通过所述第一透镜和第二透镜的环境光的光谱是不同的。
33.根据权利要求1-19所述的用户可穿戴设备,其中,所述显示器包括对应于所述用户的第一眼睛的第一透镜和对应于所述用户的第二眼睛的第二透镜,并且
其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现与所述第一或第二透镜相关联的所述可变光学材料中的物理和/或化学改变,使得透射通过所述第一透镜的一部分的环境光的所述光谱与所述第一透镜的另一部分不同。
34.根据权利要求33所述的用户可穿戴设备,其中,所述显示器包括对应于所述用户的第一眼睛的第一透镜和对应于所述用户的第二眼睛的第二透镜,并且
其中,所述处理电子器件被配置为基于由所述传感器获得的所述信息触发所述源以向所述显示器提供所述刺激以实现与所述第一或第二透镜相关联的所述可变光学材料中的物理和/或化学改变,使得透射通过所述第一透镜的一部分的环境光的所述光谱与所述第二透镜的另一部分不同。
35.根据权利要求1-19所述的用户可穿戴设备,其中,如由所述穿戴者的眼睛通过所述显示器看到的对象看起来与所述显示器的至少一部分对准,并且
其中,所述处理电子器件被配置为使得所述源向看起来与所述对象对准的所述显示器的所述至少一部分提供所述刺激以实现所述可变光学材料中的物理和/或化学改变,使得来自所述对象的光的强度、来自所述对象的所述光的光谱含量或者来自所述对象的所述光的方向中的至少一种改变。
36.根据权利要求35所述的用户可穿戴设备,其中,所述处理电子器件被配置为基于如由所述传感器跟踪的所述用户的头部的运动,确定看起来与所述对象对准的所述显示器的所述至少一部分。
37.根据权利要求35-36中的任一项所述的用户可穿戴设备,其中,所述处理电子器件被配置为使得所述源向所述显示器的所述至少一部分提供所述刺激以实现所述可变光学材料中的物理和/或化学改变,使得环境光的所述强度减小。
38.根据前述权利要求中的任一项所述的用户可穿戴设备,还包括:头部姿势传感器。
39.根据前述权利要求中的任一项所述的用户可穿戴设备,还被配置为:基于来自所述用户的反馈调节所述显示器的所述至少一部分的所述位置,通过所述显示器的所述至少一部分,环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变。
40.根据前述权利要求中的任一项所述的用户可穿戴设备,还被配置为:基于来自所述用户的反馈调节所述显示器的所述至少一部分的所述尺寸,通过所述显示器的所述至少一部分,环境光的强度、环境光的光谱含量或者环境光的方向中的至少一者改变。
41.根据前述权利要求中的任一项所述的用户可穿戴设备,还被配置为:基于来自所述用户的反馈调节环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变的所述量。
42.一种操纵透射通过用户可穿戴显示设备的光的方法,所述用户可穿戴显示设备包括显示表面,所述显示表面包括响应于刺激而改变透射通过所述显示表面的环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种的可变光学材料,所述方法包括:
使用传感器获得关于所述用户周围的环境中的环境光条件的测量结果;
确定入射在与所述显示表面的第一部分相关联的第一位置以及与所述显示表面的第二部分相关联的第二位置上的光的强度,相比所述第二部分,所述第一位置更接近于所述显示表面的所述第一部分,相比所述第一部分,所述第二位置更接近于所述显示表面的所述第二部分;
控制源以向所述显示表面的所述第一部分提供第一刺激以实现所述材料中的物理和/或化学改变,使得入射在所述第一部分上的环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变第一量;以及
控制所述源以向所述显示表面的所述第二部分提供第二刺激以实现所述材料中的物理和/或化学改变,使得入射在所述第二部分上的环境光的强度、环境光的光谱含量或者环境光的方向中的至少一种改变第二量。
43.根据权利要求42所述的方法,其中,所述第一量与所述第二量不同。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210280466.6A CN114675420A (zh) | 2016-12-22 | 2017-12-21 | 用于操纵来自环境光源的光的系统和方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662438325P | 2016-12-22 | 2016-12-22 | |
US62/438,325 | 2016-12-22 | ||
PCT/US2017/067968 WO2018119276A1 (en) | 2016-12-22 | 2017-12-21 | Systems and methods for manipulating light from ambient light sources |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210280466.6A Division CN114675420A (zh) | 2016-12-22 | 2017-12-21 | 用于操纵来自环境光源的光的系统和方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110325891A true CN110325891A (zh) | 2019-10-11 |
CN110325891B CN110325891B (zh) | 2022-04-08 |
Family
ID=62627526
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780086897.6A Active CN110325891B (zh) | 2016-12-22 | 2017-12-21 | 用于操纵来自环境光源的光的系统和方法 |
CN202210280466.6A Pending CN114675420A (zh) | 2016-12-22 | 2017-12-21 | 用于操纵来自环境光源的光的系统和方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210280466.6A Pending CN114675420A (zh) | 2016-12-22 | 2017-12-21 | 用于操纵来自环境光源的光的系统和方法 |
Country Status (10)
Country | Link |
---|---|
US (3) | US11036049B2 (zh) |
EP (1) | EP3559728A4 (zh) |
JP (2) | JP7143300B2 (zh) |
KR (3) | KR20240009545A (zh) |
CN (2) | CN110325891B (zh) |
AU (3) | AU2017382880B2 (zh) |
CA (1) | CA3046662A1 (zh) |
IL (2) | IL308598A (zh) |
NZ (1) | NZ754406A (zh) |
WO (1) | WO2018119276A1 (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111766709A (zh) * | 2020-01-17 | 2020-10-13 | 光感(上海)科技有限公司 | 一种近眼显示光学系统 |
CN113126300A (zh) * | 2021-04-13 | 2021-07-16 | 维沃移动通信有限公司 | 增强现实眼镜及其显示画面的调节方法 |
CN113325585A (zh) * | 2021-05-27 | 2021-08-31 | 京东方科技集团股份有限公司 | 显示装置、可穿戴显示设备及注视点的位置的确定方法 |
CN114585140A (zh) * | 2022-03-15 | 2022-06-03 | 北京有竹居网络技术有限公司 | 台灯的控制方法、装置、台灯、可读介质和电子设备 |
CN116097151A (zh) * | 2020-11-09 | 2023-05-09 | 鲁姆斯有限公司 | Ar系统中颜色校正的背反射 |
Families Citing this family (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2017382880B2 (en) | 2016-12-22 | 2022-10-27 | Magic Leap, Inc. | Systems and methods for manipulating light from ambient light sources |
US10371896B2 (en) | 2016-12-22 | 2019-08-06 | Magic Leap, Inc. | Color separation in planar waveguides using dichroic filters |
US11733516B2 (en) | 2017-10-11 | 2023-08-22 | Magic Leap, Inc. | Augmented reality display comprising eyepiece having a transparent emissive display |
CN111566723A (zh) | 2017-10-26 | 2020-08-21 | 奇跃公司 | 用于增强现实显示器的宽带自适应透镜组件 |
JP7037860B2 (ja) * | 2017-11-17 | 2022-03-17 | 株式会社トプコン | 測量装置及び測量装置システム |
US10667366B2 (en) * | 2018-06-29 | 2020-05-26 | Osram Sylvania Inc. | Lighting devices with automatic lighting adjustment |
WO2020023404A1 (en) | 2018-07-24 | 2020-01-30 | Magic Leap, Inc. | Flicker mitigation when toggling eyepiece display illumination in augmented reality systems |
WO2020047486A1 (en) | 2018-08-31 | 2020-03-05 | Magic Leap, Inc. | Spatially-resolved dynamic dimming for augmented reality device |
CN111352239A (zh) * | 2018-12-22 | 2020-06-30 | 杭州融梦智能科技有限公司 | 增强现实显示设备及应用增强现实显示设备的交互方法 |
KR102629149B1 (ko) * | 2019-01-03 | 2024-01-26 | 삼성전자주식회사 | 외부 광에 따라 디스플레이의 특성을 변경하는 전자 장치 및 방법 |
WO2020146760A1 (en) | 2019-01-11 | 2020-07-16 | Magic Leap, Inc. | Time-multiplexed display of virtual content at various depths |
KR102648198B1 (ko) * | 2019-01-14 | 2024-03-19 | 삼성디스플레이 주식회사 | 잔상 보상부 및 이를 포함하는 표시 장치 |
US11092324B2 (en) * | 2019-03-28 | 2021-08-17 | GM Global Technology Operations LLC | Semi-transparent sign temperature protection |
EP4045964A4 (en) | 2019-10-17 | 2023-11-08 | Magic Leap, Inc. | ATTENUATION OF LIGHT TRANSMISSION ARTIFACTS IN PORTABLE DISPLAY UNITS |
CN114830637A (zh) * | 2019-12-18 | 2022-07-29 | 科鲁斯股份有限公司 | 基于凝视的显示器照明系统和方法 |
US11662586B2 (en) | 2020-03-06 | 2023-05-30 | Magic Leap, Inc. | Angularly selective attenuation of light transmission artifacts in wearable displays |
US11209676B2 (en) * | 2020-04-15 | 2021-12-28 | Facebook Technologies, Llc | Local dimming in a device |
US11422390B2 (en) | 2020-04-15 | 2022-08-23 | Meta Platforms Technologies, Llc | Digital projector for local dimming in a device |
CN115989448A (zh) | 2020-06-25 | 2023-04-18 | 奇跃公司 | 可穿戴显示器中光透射伪影的可调衰减 |
US20220079242A1 (en) * | 2020-09-11 | 2022-03-17 | Rai Strategic Holdings, Inc. | Device Agnostic PSA for Aerosol Generation Device |
JP7481225B2 (ja) | 2020-10-08 | 2024-05-10 | エルジー ディスプレイ カンパニー リミテッド | ヘッドマウントディスプレイ |
CN112799433B (zh) * | 2021-01-20 | 2022-08-12 | 深圳市达特文化科技股份有限公司 | 一种基于点光源的文字显示系统 |
US11256987B1 (en) | 2021-06-02 | 2022-02-22 | SambaNova Systems, Inc. | Memory efficient dropout, with reordering of dropout mask elements |
US11328209B1 (en) | 2021-06-02 | 2022-05-10 | SambaNova Systems, Inc. | Dual cycle tensor dropout in a neural network |
US20220397483A1 (en) * | 2021-06-11 | 2022-12-15 | Apple Inc. | Methodology and application of acoustic detection of optical integrity |
TWI828397B (zh) | 2021-11-18 | 2024-01-01 | 東陽實業廠股份有限公司 | 智能透明遮光系統 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5781330A (en) * | 1996-04-05 | 1998-07-14 | Lucent Technologies, Inc. | High efficiency optical switching and display devices |
US20120212696A1 (en) * | 2011-01-27 | 2012-08-23 | Pixeloptics, Inc. | Variable optical element comprising a liquid crystal alignment layer |
US20120218172A1 (en) * | 2010-02-28 | 2012-08-30 | Osterhout Group, Inc. | See-through near-eye display glasses with a small scale image source |
US20130208014A1 (en) * | 2012-02-10 | 2013-08-15 | Rod G. Fleck | Display with blocking image generation |
US20130240804A1 (en) * | 2012-03-16 | 2013-09-19 | Canopy Valley LLC | Silicone material having a photochromic additive |
US20150178939A1 (en) * | 2013-11-27 | 2015-06-25 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
Family Cites Families (68)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6222525B1 (en) | 1992-03-05 | 2001-04-24 | Brad A. Armstrong | Image controllers with sheet connected sensors |
JPH07193841A (ja) * | 1993-12-27 | 1995-07-28 | Matsushita Electric Ind Co Ltd | 三次元画像撮像方法および三次元画像表示装置 |
DE69424741T2 (de) | 1993-10-26 | 2000-11-30 | Matsushita Electric Ind Co Ltd | Vorrichtung zur dreidimensionalen Bildanzeige |
US5670988A (en) | 1995-09-05 | 1997-09-23 | Interlink Electronics, Inc. | Trigger operated electronic device |
JPH1031217A (ja) * | 1996-07-16 | 1998-02-03 | Fuji Xerox Co Ltd | 調光素子、調光素子製造方法および反射型表示装置 |
JP2002090660A (ja) * | 2000-09-19 | 2002-03-27 | Sharp Corp | 光変調素子 |
JP2002244074A (ja) | 2001-02-15 | 2002-08-28 | Mixed Reality Systems Laboratory Inc | 画像表示装置 |
JP4029601B2 (ja) | 2001-11-20 | 2008-01-09 | 富士ゼロックス株式会社 | 電気泳動材料、及びそれを用いた光学素子 |
USD514570S1 (en) | 2004-06-24 | 2006-02-07 | Microsoft Corporation | Region of a fingerprint scanning device with an illuminated ring |
ES2434443T3 (es) | 2005-05-18 | 2013-12-16 | Visual Physics, Llc | Sistema de presentación de imágenes y de seguridad micro-óptico |
US8696113B2 (en) | 2005-10-07 | 2014-04-15 | Percept Technologies Inc. | Enhanced optical and perceptual digital eyewear |
US20070081123A1 (en) | 2005-10-07 | 2007-04-12 | Lewis Scott W | Digital eyewear |
US11428937B2 (en) | 2005-10-07 | 2022-08-30 | Percept Technologies | Enhanced optical and perceptual digital eyewear |
US7970172B1 (en) * | 2006-01-24 | 2011-06-28 | James Anthony Hendrickson | Electrically controlled optical shield for eye protection against bright light |
US7893890B2 (en) | 2007-03-05 | 2011-02-22 | The Boeing Company | Electrically dimmable combiner optics for head-up display |
JP5320986B2 (ja) | 2008-11-04 | 2013-10-23 | Tdk株式会社 | 光透過調整装置 |
JP4752911B2 (ja) * | 2008-12-26 | 2011-08-17 | ソニー株式会社 | 照明装置、表示装置、およびエッジライト方式のバックライトに用いる光変調素子の製造方法 |
US9129295B2 (en) * | 2010-02-28 | 2015-09-08 | Microsoft Technology Licensing, Llc | See-through near-eye display glasses with a fast response photochromic film system for quick transition from dark to clear |
US9529424B2 (en) | 2010-11-05 | 2016-12-27 | Microsoft Technology Licensing, Llc | Augmented reality with direct user interaction |
US9304319B2 (en) | 2010-11-18 | 2016-04-05 | Microsoft Technology Licensing, Llc | Automatic focus improvement for augmented reality displays |
AU2011348122A1 (en) | 2010-12-24 | 2013-07-11 | Magic Leap Inc. | An ergonomic head mounted display device and optical system |
US10156722B2 (en) | 2010-12-24 | 2018-12-18 | Magic Leap, Inc. | Methods and systems for displaying stereoscopy with a freeform optical system with addressable focus for virtual and augmented reality |
CA2835120C (en) | 2011-05-06 | 2019-05-28 | Magic Leap, Inc. | Massive simultaneous remote digital presence world |
US10795448B2 (en) | 2011-09-29 | 2020-10-06 | Magic Leap, Inc. | Tactile glove for human-computer interaction |
CA3207408A1 (en) | 2011-10-28 | 2013-06-13 | Magic Leap, Inc. | System and method for augmented and virtual reality |
US8752963B2 (en) | 2011-11-04 | 2014-06-17 | Microsoft Corporation | See-through display brightness control |
US9087471B2 (en) | 2011-11-04 | 2015-07-21 | Google Inc. | Adaptive brightness control of head mounted display |
US8982471B1 (en) * | 2012-01-04 | 2015-03-17 | Google Inc. | HMD image source as dual-purpose projector/near-eye display |
WO2013111471A1 (ja) * | 2012-01-24 | 2013-08-01 | ソニー株式会社 | 表示装置 |
JP5516616B2 (ja) | 2012-02-07 | 2014-06-11 | 日立化成株式会社 | 懸濁粒子装置及びこれを用いた調光装置並びにその駆動方法 |
JP6060512B2 (ja) | 2012-04-02 | 2017-01-18 | セイコーエプソン株式会社 | 頭部装着型表示装置 |
KR102306729B1 (ko) | 2012-04-05 | 2021-09-28 | 매직 립, 인코포레이티드 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
US10629003B2 (en) | 2013-03-11 | 2020-04-21 | Magic Leap, Inc. | System and method for augmented and virtual reality |
US9671566B2 (en) * | 2012-06-11 | 2017-06-06 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
JP5694257B2 (ja) | 2012-08-27 | 2015-04-01 | 株式会社東芝 | 表示装置、表示方法及びプログラム |
US9740006B2 (en) | 2012-09-11 | 2017-08-22 | Magic Leap, Inc. | Ergonomic head mounted display device and optical system |
US9030495B2 (en) * | 2012-11-21 | 2015-05-12 | Microsoft Technology Licensing, Llc | Augmented reality help |
JP6089705B2 (ja) | 2013-01-07 | 2017-03-08 | セイコーエプソン株式会社 | 表示装置、および、表示装置の制御方法 |
JP6434918B2 (ja) | 2013-01-15 | 2018-12-05 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 超高分解能の走査ファイバディスプレイ |
KR102458124B1 (ko) | 2013-03-15 | 2022-10-21 | 매직 립, 인코포레이티드 | 디스플레이 시스템 및 방법 |
JP6341355B2 (ja) | 2013-05-20 | 2018-06-13 | コニカミノルタ株式会社 | 拡張現実空間表示装置 |
US10262462B2 (en) | 2014-04-18 | 2019-04-16 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
JP6364715B2 (ja) | 2013-07-18 | 2018-08-01 | セイコーエプソン株式会社 | 透過型表示装置および透過型表示装置の制御方法 |
KR102341870B1 (ko) | 2013-10-16 | 2021-12-20 | 매직 립, 인코포레이티드 | 조절가능한 동공간 거리를 가지는 가상 또는 증강 현실 헤드셋들 |
EP4220999A3 (en) | 2013-11-27 | 2023-08-09 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
US10677969B2 (en) | 2013-11-27 | 2020-06-09 | Magic Leap, Inc. | Manufacturing for virtual and augmented reality systems and components |
US9857591B2 (en) | 2014-05-30 | 2018-01-02 | Magic Leap, Inc. | Methods and system for creating focal planes in virtual and augmented reality |
JP6731851B2 (ja) | 2013-12-23 | 2020-07-29 | エシロール・アンテルナシオナル | フィルター機能を備えるヘッドマウントディスプレイ |
CN110764267B (zh) * | 2014-01-09 | 2022-04-19 | 三星电子株式会社 | 可穿戴显示装置 |
WO2015109145A1 (en) * | 2014-01-17 | 2015-07-23 | Osterhout Group, Inc. | See-through computer display systems |
CA3089749A1 (en) | 2014-01-31 | 2015-08-06 | Magic Leap, Inc. | Multi-focal display system and method |
KR102177133B1 (ko) | 2014-01-31 | 2020-11-10 | 매직 립, 인코포레이티드 | 멀티-포컬 디스플레이 시스템 및 방법 |
US10203762B2 (en) | 2014-03-11 | 2019-02-12 | Magic Leap, Inc. | Methods and systems for creating virtual and augmented reality |
US9389423B2 (en) | 2014-03-11 | 2016-07-12 | Google Inc. | Head wearable display with adjustable transparency |
JP2017526078A (ja) | 2014-05-09 | 2017-09-07 | グーグル インコーポレイテッド | 実在および仮想のオブジェクトと対話するための生体力学ベースの眼球信号のためのシステムおよび方法 |
USD759657S1 (en) | 2014-05-19 | 2016-06-21 | Microsoft Corporation | Connector with illumination region |
CA3124368C (en) | 2014-05-30 | 2023-04-25 | Magic Leap, Inc. | Methods and systems for generating virtual content display with a virtual or augmented reality apparatus |
USD752529S1 (en) | 2014-06-09 | 2016-03-29 | Comcast Cable Communications, Llc | Electronic housing with illuminated region |
US9576398B1 (en) * | 2014-08-14 | 2017-02-21 | Amazon Technologies, Inc. | Pixelated light shutter mechanisms for improving contrast between computer-generated images and an ambient visible environment |
US9626936B2 (en) | 2014-08-21 | 2017-04-18 | Microsoft Technology Licensing, Llc | Dimming module for augmented and virtual reality |
KR102320737B1 (ko) | 2015-01-14 | 2021-11-03 | 삼성디스플레이 주식회사 | 헤드-장착 전자장치 |
WO2016141372A1 (en) | 2015-03-05 | 2016-09-09 | Magic Leap, Inc. | Improved manufacturing for virtual and augmented reality systems and components |
US9989769B2 (en) | 2015-04-30 | 2018-06-05 | Sony Corporation | Display apparatus |
USD805734S1 (en) | 2016-03-04 | 2017-12-26 | Nike, Inc. | Shirt |
USD794288S1 (en) | 2016-03-11 | 2017-08-15 | Nike, Inc. | Shoe with illuminable sole light sequence |
US10067344B2 (en) * | 2016-07-01 | 2018-09-04 | Intel Corporation | Variable transmissivity virtual image projection system |
US20180088323A1 (en) * | 2016-09-23 | 2018-03-29 | Sheng Bao | Selectably opaque displays |
AU2017382880B2 (en) | 2016-12-22 | 2022-10-27 | Magic Leap, Inc. | Systems and methods for manipulating light from ambient light sources |
-
2017
- 2017-12-21 AU AU2017382880A patent/AU2017382880B2/en active Active
- 2017-12-21 KR KR1020247001620A patent/KR20240009545A/ko active Application Filing
- 2017-12-21 JP JP2019531465A patent/JP7143300B2/ja active Active
- 2017-12-21 IL IL308598A patent/IL308598A/en unknown
- 2017-12-21 KR KR1020237013034A patent/KR102626911B1/ko active IP Right Grant
- 2017-12-21 KR KR1020197020385A patent/KR102524010B1/ko active IP Right Grant
- 2017-12-21 US US15/850,465 patent/US11036049B2/en active Active
- 2017-12-21 CN CN201780086897.6A patent/CN110325891B/zh active Active
- 2017-12-21 EP EP17883527.8A patent/EP3559728A4/en active Pending
- 2017-12-21 IL IL267411A patent/IL267411B2/en unknown
- 2017-12-21 NZ NZ754406A patent/NZ754406A/en unknown
- 2017-12-21 WO PCT/US2017/067968 patent/WO2018119276A1/en unknown
- 2017-12-21 CA CA3046662A patent/CA3046662A1/en active Pending
- 2017-12-21 CN CN202210280466.6A patent/CN114675420A/zh active Pending
-
2021
- 2021-06-14 US US17/347,201 patent/US11520151B2/en active Active
-
2022
- 2022-09-14 JP JP2022146048A patent/JP7404472B2/ja active Active
- 2022-10-17 US US17/967,331 patent/US11971551B2/en active Active
-
2023
- 2023-01-25 AU AU2023200386A patent/AU2023200386B2/en active Active
-
2024
- 2024-02-20 AU AU2024201098A patent/AU2024201098A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5781330A (en) * | 1996-04-05 | 1998-07-14 | Lucent Technologies, Inc. | High efficiency optical switching and display devices |
US20120218172A1 (en) * | 2010-02-28 | 2012-08-30 | Osterhout Group, Inc. | See-through near-eye display glasses with a small scale image source |
US20120212696A1 (en) * | 2011-01-27 | 2012-08-23 | Pixeloptics, Inc. | Variable optical element comprising a liquid crystal alignment layer |
US20130208014A1 (en) * | 2012-02-10 | 2013-08-15 | Rod G. Fleck | Display with blocking image generation |
US20130240804A1 (en) * | 2012-03-16 | 2013-09-19 | Canopy Valley LLC | Silicone material having a photochromic additive |
US20150178939A1 (en) * | 2013-11-27 | 2015-06-25 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111766709A (zh) * | 2020-01-17 | 2020-10-13 | 光感(上海)科技有限公司 | 一种近眼显示光学系统 |
CN111766709B (zh) * | 2020-01-17 | 2022-10-21 | 光感(上海)科技有限公司 | 一种近眼显示光学系统 |
CN116097151A (zh) * | 2020-11-09 | 2023-05-09 | 鲁姆斯有限公司 | Ar系统中颜色校正的背反射 |
CN116097151B (zh) * | 2020-11-09 | 2024-04-09 | 鲁姆斯有限公司 | Ar系统中颜色校正的背反射 |
CN113126300A (zh) * | 2021-04-13 | 2021-07-16 | 维沃移动通信有限公司 | 增强现实眼镜及其显示画面的调节方法 |
CN113126300B (zh) * | 2021-04-13 | 2023-12-05 | 维沃移动通信有限公司 | 增强现实眼镜及其显示画面的调节方法 |
CN113325585A (zh) * | 2021-05-27 | 2021-08-31 | 京东方科技集团股份有限公司 | 显示装置、可穿戴显示设备及注视点的位置的确定方法 |
CN114585140A (zh) * | 2022-03-15 | 2022-06-03 | 北京有竹居网络技术有限公司 | 台灯的控制方法、装置、台灯、可读介质和电子设备 |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110325891A (zh) | 用于操纵来自环境光源的光的系统和方法 | |
US11900554B2 (en) | Modification of peripheral content in world-locked see-through computer display systems | |
US11947120B2 (en) | Image expansion optic for head-worn computer | |
US11567328B2 (en) | See-through computer display systems with adjustable zoom cameras | |
US11619820B2 (en) | See-through computer display systems | |
KR102370445B1 (ko) | Ar/vr 디스플레이 시스템들에서의 전류 드레인 감소 | |
US20160259166A1 (en) | Compact optics with increased color gamut | |
CN110291565A (zh) | 使用检测到的特征的3d对象呈现 | |
CN106662747A (zh) | 用于增强现实和虚拟现实感知的具有电致变色调光模块的头戴式显示器 | |
WO2017066556A1 (en) | Compact optical system for head-worn computer | |
JP7511070B2 (ja) | 周囲光源からの光を操作するためのシステムおよび方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |