KR20180038583A - 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 - Google Patents
상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 Download PDFInfo
- Publication number
- KR20180038583A KR20180038583A KR1020187009709A KR20187009709A KR20180038583A KR 20180038583 A KR20180038583 A KR 20180038583A KR 1020187009709 A KR1020187009709 A KR 1020187009709A KR 20187009709 A KR20187009709 A KR 20187009709A KR 20180038583 A KR20180038583 A KR 20180038583A
- Authority
- KR
- South Korea
- Prior art keywords
- view
- perspective
- path
- eyepiece
- beam splitter
- Prior art date
Links
- 230000003287 optical effect Effects 0.000 title claims abstract description 153
- 210000001747 pupil Anatomy 0.000 claims description 35
- 238000000034 method Methods 0.000 claims description 19
- 230000005540 biological transmission Effects 0.000 claims description 2
- 238000013461 design Methods 0.000 description 34
- 238000005516 engineering process Methods 0.000 description 15
- 208000013057 hereditary mucoepithelial dysplasia Diseases 0.000 description 11
- 230000008901 benefit Effects 0.000 description 8
- 230000004075 alteration Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000013459 approach Methods 0.000 description 5
- 230000003190 augmentative effect Effects 0.000 description 5
- 230000010287 polarization Effects 0.000 description 5
- 238000012546 transfer Methods 0.000 description 5
- 101001050607 Homo sapiens KH domain-containing, RNA-binding, signal transduction-associated protein 3 Proteins 0.000 description 4
- 102100023428 KH domain-containing, RNA-binding, signal transduction-associated protein 3 Human genes 0.000 description 4
- 230000000903 blocking effect Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000002310 reflectometry Methods 0.000 description 4
- 101001050622 Homo sapiens KH domain-containing, RNA-binding, signal transduction-associated protein 2 Proteins 0.000 description 3
- 102100023411 KH domain-containing, RNA-binding, signal transduction-associated protein 2 Human genes 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 210000003128 head Anatomy 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 206010010071 Coma Diseases 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 239000013256 coordination polymer Substances 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/06—Panoramic objectives; So-called "sky lenses" including panoramic objectives having reflecting surfaces
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B25/00—Eyepieces; Magnifying glasses
- G02B25/001—Eyepieces
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B27/0103—Head-up displays characterised by optical features comprising holographic elements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/10—Beam splitting or combining systems
- G02B27/1066—Beam splitting or combining systems for enhancing image performance, like resolution, pixel numbers, dual magnifications or dynamic range, by tiling, slicing or overlapping fields of view
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/10—Beam splitting or combining systems
- G02B27/14—Beam splitting or combining systems operating by reflection only
- G02B27/144—Beam splitting or combining systems operating by reflection only using partially transparent surfaces without spectral selectivity
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/28—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for polarising
- G02B27/283—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for polarising used for beam splitting or combining
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/04—Prisms
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
- G03B37/02—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with scanning movement of lens or cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0118—Head-up displays characterised by optical features comprising devices for improving the contrast of the display / brillance control visibility
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0145—Head-up displays characterised by optical features creating an intermediate image
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0149—Head-up displays characterised by mechanical features
- G02B2027/015—Head-up displays characterised by mechanical features involving arrangement aiming to get less bulky devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Lenses (AREA)
- Studio Devices (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Instrument Panels (AREA)
- Camera Bodies And Camera Details Or Accessories (AREA)
- Cameras In General (AREA)
- Telescopes (AREA)
- Optical Elements Other Than Lenses (AREA)
- Eyeglasses (AREA)
- Liquid Crystal Display Device Control (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
본 발명은 투시 이미지 경로의 불투명도가 변조될 수 있고 가상 이미지가 투시 이미지의 일부를 가리고 또한 상기 투시 뷰가 상기 가상 뷰의 일부를 가릴 수도 있도록, 투시 이미지 경로를 가상 이미지 경로와 결합할 수 있는 컴팩트한 광학적 투시 헤드-장착형 디스플레이(compact optical see-through head-mounted display)를 포함한다.
Description
[0001] 본원은 2012년 4월 5일에 출원된 미국 가출원 번호 제61/620,574호 및 2012년 4월 5일에 출원된 미국 가출원 번호 제61/620,581호에 대한 우선권을 주장하며, 이 문헌들의 개시내용은 그 전체가 본 명세서에 참조로서 포함된다.
[0002] 본 발명은 미국 육군에 의해 수여된 SBIR 계약 번호 W91CRB-12-C-0002 하에서 부분적으로 이루어졌다. 미국 정부는 본 발명에 대한 소정의 권리들을 갖는다.
[0003] 본 발명은 일반적으로 헤드-장착형 디스플레이들에 관한 것이며, 보다 구체적으로, 그러나 배타적인 것은 아닌, 실제의 객체들이 전방에 위치한 컴퓨터에 의해 구현되는 가상 객체들에 의해서 가려질 수 있거나 이와 반대로 될 수 있는, 불투명도 제어 및 상호 가림 능력(mutual occlusion capability)을 갖는 광학적 투시 헤드-장착형 디스플레이들에 관한 것이다.
[0004] 수십년 동안에, 증강 현실(AR) 기술은 의료 및 군사 트레이닝, 엔지니어링 설계 및 프로토타이핑, 원격조작(tele-manipulation)과 텔레프레즌스(tele-presence), 및 개인용 엔터테인먼트 시스템들과 같은 수 많은 애플리케이션들에 적용되어왔다. 투시 헤드-장착형 디스플레이(See-through Head-Mounted DISPLAY: ST-HMD)들은 가상 뷰(virtual view)들을 물리적 장면(physical scene)과 합치기 위한 증강된 현실 시스템의 기술들을 가능하게 하는 것이다. 2개의 타입, 즉 광학적 타입과 비디오 타입의 ST-HMD들이 존재한다(J. Rolland and H. Fuchs, "Optical versus video See-through head mounted Displays," In Fundamentals of Wearable Computers and Augmented Reality, pp.113-157, 2001.). 비디오 투시 방식의 주된 단점들로는 투시 뷰의 이미지 품질의 저하, 입력 비디오 스트림의 프로세싱으로 인한 이미지 래그(image lag), 하드웨어/소프트웨어 오동작으로 인한 투시 뷰의 잠재적 손실을 포함할 수 있다. 이와는 대조적으로, 광학적 투시 HMD(OST-HMT)는 빔스플리터를 통하여 현실 세계의 직접적인 뷰를 제공함으로써 현실 세계의 뷰에 최소한의 영향을 준다. 이는 라이브 환경에 대한 사용자 인식이 중요한 애플리케이션들의 요구에 있어서 매우 바람직하다.
[0005] 그러나, 광학적 투시 HMD들 개발하는 것은 복잡한 기술적 과제들에 직면하게 된다. 이러한 중요한 문제들 중 하나는 OST-HMD에서 가상 뷰들이 가림 능력(occlusion capability) 부족으로 인해 현실 세계에서는 떠있는 "고스트처럼(ghost-like)" 보인다는 것이다. 도 1은 통상적인 OST-HMD을 통해 보여지는 증강된 뷰(도 1a)와 가림 가능한 OST-HMD(OCOST-HMD) 시스템을 통해 보여지는 증강된 뷰(도 1b)의 비교 예시를 도시한 것이다. 이 도면에서는, 가상의 자동차 모델이 실제의 객체를 나타내는 솔리드 플랫폼(solid platform) 상에 중첩된다. 도 1a에 도시된 바와 같이 적절한 가림 관리가 없다면, 통상적인 AR 뷰에서, 자동차는 플랫폼과 믹싱되며(mixed) 자동차와 플랫폼의 깊이 관계를 구별하기 어렵다. 이와는 대조적으로, 도 1b에 도시된 바와 같이, 적절한 가림 관리에 의해서, 자동차는 플랫폼의 일부를 블록킹하고 자동차가 플랫폼의 상단에 안착된 것이 명확하게 식별될 수 있다. AR 디스플레이에 가림 능력을 부가하는 것은 가상 객체들을 실제 환경에 현실감 있게 합치는 것을 가능하게 한다. 이러한 가림에 의해서 가능해지는 능력은 AR 디스플레이 기술에 혁신적인 영향을 줄 수 있으며 수많은 증강 현실 기반 애플리케이션들에서 매우 가치가 있다.
[0006] OCOST-HMD 시스템은 통상적으로 2개의 주요한 하위-시스템들을 포함한다. 제 1 하위-시스템은 마이크로디스플레이 상에 디스플레이되는 확대된 이미지를 사용자가 볼 수 있게 하는 접안렌즈 광학체(eyepiece optics)이며, 제 2 하위-시스템은 현실 세계의 외부 장면으로부터의 광을 수집하고 변조하는 릴레이 광학체(relay optics)로서, 이는 뷰어들에 제공될 때 외부 장면에 대한 불투명도 및 가림 제어를 가능하게 한다. 실제로 휴대가능하고 경량인 OCOST-HMD 시스템을 만드는데 있어서의 핵심 과제들은 3개의 주요한 이슈들, 즉 (1) 시스템에 상당한 중량과 체적을 부가하지 않으면서 2개의 하위시스템들들의 통합을 가능하게는 광학적 설계(optical scheme), (2) 외부 장면의 좌표 시스템의 패리티(parity)를 유지하는 적합한 광학적 방법, (3) HMD 개발자들에게 언제나 꿈이 되어 왔던 엘레겐트한(elegant) 폼 팩터(form factor)로 이러한 광학적 하위시스템들의 설계를 가능하게 하는 광학적 설계 방법을 처리하는 것에 있다. 몇몇 가림 가능한 광학적 ST-HMD 개념들이 개발되었다(미국 특허, 7,639,208 B1, Kiyokawa, K., Kurata, Y., and Ohno, H., "An Optical See-through Display for Mutual Occlusion with a Real-time Stereo Vision System," Elsevier Computer & Graphics, Special Issue on "Mixed Realities - Beyond Conventions," Vol.25, No.5, pp.2765-779, 2001. K. Kiyokawa, M. Billinghurst, b. Campbell, e. Woods, "An Occlusion-Capable Optical See-through Head Mount Display for Supporting Co-located Collaboration." ISMAR 2003, pp. 133-141). 예를 들어, Kiyokawa 등은 통상적인 렌즈들, 프리즘들 및 미러들을 사용하는 ELMO 시리즈 가림 디스플레이(occlusion dispaly)들을 개발하였다. 사용되는 요소들의 수로 인해서 뿐만 아니라, 보다 중요하게는 광학적 시스템들의 회전적으로 대칭성인 성질로 인해서, 기존의 가림-가능한 OST-HMD들은 헬멧형의 부피가 나가는 폼 팩터를 갖는다. 이들은 무거운 중량 및 복잡한 설계로 인하여 오직 실험실 환경에서만 사용되어 왔다. 이러한 크고 무거운 헬멧형의 폼 팩터는 수많은 수요가 있는 현재 출현하고 있는 애플리케이션들을 위한 기술을 받아들이지 못하게 하고 있다.
[0007] 본 발명은 불투명 제어 및 상호 가림 능력을 가진 광학적 투시 헤드-장착형 디스플레이(OST-HMD) 디바이스에 관한 것이다. 이 디스플레이 시스템은 통상적으로 디스플레이된 가상 이미지를 보여주기 위한 가상 뷰 경로(virtual view path) 및 현실 세계의 외부 장면을 보여주기 위한 투시 경로(see-through path)를 포함한다. 본 발명에서, 가상 뷰 경로는 가상 이미지 컨텐츠를 제공하기 위한 미니어처(miniature) 이미지 디스플레이 유닛 및 사용자가 확대된 가상 이미지를 볼 수 있게 하는 접안렌즈를 포함한다. 투시 경로는 외부 장면으로부터 광을 직접 캡처하여 적어도 하나의 중간 이미지를 형성하는 대물렌즈 광학체, 투시 경로 내의 중간 이미지 플레인에 또는 그 근처에 배치되어서 그 투시 경로의 불투명도를 제어 및 변조하는 공간적 광 변조기(SLM), 및 변조된 투시 뷰를 뷰어가 볼 수 있게 하는 접안렌즈 광학체를 포함한다. 투시 경로 내에서, 대물렌즈 광학체 및 접안렌즈는 함께 현실 세계로부터의 광을 뷰어의 눈에 전달하기 위한 릴레이 광학체로서 기능한다. 컴팩트한 폼 팩터를 달성하고 뷰포인트 오프셋을 줄이기 위해서, 투시 경로는 몇 개의 반사성 표면들을 통해서 2개의 층들, 즉 외부 장면으로부터 입사 광을 수용하는 전방 층(front layer) 및 전방 층에 의해서 캡처된 광을 뷰어의 눈에 커플링하는 후방 층(back layer)으로 폴딩(folding)된다. 빔스플리터에 의해서 투시 경로가 가상 이미지 경로와 합쳐지며, 이에 따라 디스플레이된 가상 컨텐츠 및 변조된 투시 이미지를 뷰잉하도록 동일한 접안렌즈가 두 경로들에 의해서 공유된다. 마이크로디스플레이 및 SLM은 빔스플리터를 통해 서로 광학적으로 컨쥬게이트되며(optically conjugate), 이것은 픽셀 레벨 가림 조작을 가능하게 한다. 본 발명에서, 접안렌즈, 대물렌즈 광학체, 또는 이 둘은 회전적으로 대칭인 렌즈들 또는 비-회전적으로(non-rotationally) 대칭인 프리폼(freeform) 광학체일 수 있다. 본 발명의 중요한 양상들 중 하나에서, 본 발명은, 컴팩트하고 경량인 OCOST-HMD 설계를 달성하기 위해, 접안렌즈 광학체, 대물렌즈 광학체, 또는 이 둘다에 프리폼 광학적 기술을 활용할 수 있다.
[0008] 광학적 경로들을 폴딩하기 위한 반사성 표면들은 평면형 미러들, 광학적 능력을 가진 구형의, 비구형의 또는 프리폼의 표면들일 수 있다. 본 발명의 다른 중요한 양상에서, 반사성 표면들 중 일부는 프리폼 광학 기술을 이용할 수 있다. 반사성 표면들 중 일부는 또한 접안렌즈 또는 대물렌즈 광학체의 일체형 부분이 되도록 전략적으로 설계될 수 있으며, 여기서 반사성 표면들은 컴팩트한 디스플레이 설계를 달성하기 위한 광학적 경로의 폴딩을 용이하게 할 뿐만 아니라 광학적 능력에 기여하며 광학적 수차를 보정하기도 한다. 예시적인 구성에서, 본 발명은 접안렌즈 또는 대물렌즈 광학체로서 1회-반사 또는 다회 반사 프리폼 프리즘을 사용할 수 있으며, 여기서 이 프리즘은 굴절성 표면들 그리고 광학적 경로를 폴딩하고 수차들을 보정하기 위한 하나 이상의 반사성 표면들을 포함하는 단일의 광학적 요소이다.
[0009] 본 발명의 다른 중요한 양상에서, 투시 경로 내의 대물렌즈 광학체는 적어도 하나의 액세스 가능한 중간 이미지를 형성하며, 이 이미지 근처에서 SLM이 배치되어서 불투명도 제어 및 투시 뷰 변조를 제공한다. 본 발명에서는, 반사-타입(reflection-type) SLM 또는 투과-타입(transmission-type) SLM이 가림 제어를 위해 투시 뷰를 변조하도록 사용될 수 있다. 대물렌즈 광학체에 있어서의 보다 긴 백 초점 거리(back focal distance)는, 투과-타입 SLM보다는 반사-타입 SLM에서 요구된다. 반사-타입 SLM은 투과-타입 SLM보다 높은 광 효율의 이점을 가질 수 있다.
[0010] 본 발명의 다른 중요한 양상에서, 투시 경로는 홀수 또는 짝수 개의 중간 이미지들을 형성할 수 있다. 홀수 개의 중간 이미지들의 경우에, 투시 경로에서 투시 뷰를 반전(invert) 및/또는 복구(revert)시키는 광학적 방법이 제공된다. 예를 들어, 투시 경로에 관여하는 반사 수에 따라, 가능한 방법들의 예들로는, 추가의 반사 또는 반사들을 삽입하는 것, 루프 미러 표면을 사용하는 것, 또는 직립 프리즘(erection prism) 또는 렌즈를 삽입하는 것을 포함하나, 이에 한정되지 않는다. 짝수 개의 중간 이미지들의 경우에는, 투시 뷰 내에 어떠한 패리티 변화도 없으면, 어떠한 이미지 직립 요소도 필요하지 않다. 예를 들어, 다회 반사 프리폼 프리즘 구조체(통상적으로 2 회보다 많이 반사)가 접안렌즈 또는 대물렌즈 광학체 또는 이 둘로서 사용될 수 있으며, 이것은 대물렌즈 및/또는 접안렌즈 프리즘 안쪽에서 투시 광학 경로를 다수 회 폴딩하는 것을 가능하게 하여서 이 프리즘 안쪽에 중간 이미지(들)를 형성하며, 이는 직립 루프 반사성 표면을 사용할 필요성을 제거한다. 직립 프리즘을 제거하는 것의 잠재적 이점은, 이러한 접근방식이 보다 컴팩트한 설계로 이어질 수 있다는 것이다.
[0011] 전술한 발명의 내용 및 본 발명의 예시적인 실시예들에 대한 다음의 상세한 설명은 첨부 도면들과 함께 독해될 때에 더 이해될 수 있다.
[0012] 도 1은 가림 능력이 없는 광학적 투시 HMD(도 1a) 및 가림 능력을 갖는 광학적 투시 HMD(도 1b)를 통해 보여진 AR 뷰들을 개략적으로 도시한 것이다.
[0013] 도 2는 모노큘러 광학적 모듈(monocular optical module)로서 나타낸 본 발명에 따른 예시적인 광학적 레이아웃을 개략적으로 도시한 것이다.
[0014] 도 3은 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 1회-반사 접안렌즈 프리즘, 1회-반사 대물렌즈 프리즘, 반사-타입 SLM 및 루프 반사성 표면을 포함한다.
[0015] 도 4는 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 다른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 2회-반사 접안렌즈 프리즘, 2회-반사 대물렌즈 프리즘, 4회-반사 대물렌즈 프리즘 및 반사-타입 SLM을 포함한다.
[0016] 도 5는 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 다른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 2회-반사 접안렌즈 프리즘, 1회-반사 대물렌즈 프리즘, 반사-타입 SLM 및 루프 반사성 표면을 포함한다.
[0017] 도 6은 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 다른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 2회-반사 접안렌즈 프리즘, 3회-반사 대물렌즈 프리즘, 및 투과-타입 SLM을 포함한다.
[0018] 도 7은 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 다른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 2회-반사 접안렌즈 프리즘, 2회-반사 대물렌즈 프리즘, 반사-타입 SLM 및 릴레이 렌즈를 포함한다.
[0019] 도 8은 도 3에서의 예시적인 레이아웃에 기초하는 본 발명에 따른 OCOST-HMD 시스템의 예시적인 설계를 개략적으로 도시한 것이다.
[0020] 도 9는 3mm 동공(pupil) 직경을 사용하여서 평가된 컷오프 주파수 40lps/mm(line pairs per millimeter:밀리미터당 라인 쌍들)에서 도 8에서의 설계의 가상 디스플레이 경로의 다색 변조 전달 함수(polychromatic modulation transfer function)들의 필드 맵 플롯을 도시한 것이다.
[0021] 도 10은 동일한 프리폼 구조를 가진 접안렌즈 광학체 및 대물렌즈 광학체를 갖는 도 3에서의 예시적인 레이아웃에 기초한 본 발명에 따른 OCOST-HMD 시스템의 예시적인 설계를 개략적으로 도시한 것이다.
[0022] 도 11은 3mm 동공 직경을 사용하여서 평가된 컷오프 주파수 40lps/mm(line pairs per millimeter)에서 도 10에서의 설계의 가상 디스플레이 경로의 다색 변조 전달 함수들의 필드 맵 플롯을 도시한 것이다.
[0023] 도 12는 본 발명의 실시예에 따른 이미지 처리 파이프라인의 일 예의 블록도를 도시한 것이다.
[0024] 도 13은 표 1: 접안렌즈 프리즘의 표면 1의 광학적 표면 규정(optical surface prescription)을 도시한 것이다.
[0025] 도 14는 표 2: 접안렌즈 프리즘의 표면 2의 광학적 표면 규정을 도시한 것이다.
[0026] 도 15는 표 3: 접안렌즈 프리즘의 표면 3의 광학적 표면 규정을 도시한 것이다.
[0027] 도 16은 표 4: 접안렌즈 프리즘의 위치 및 배향 파라미터들을 도시한 것이다.
[0028] 도 17은 표 5: 대물렌즈 프리즘의 표면 4의 광학적 표면 규정을 도시한 것이다.
[0029] 도 18은 표 6: 대물렌즈 프리즘의 표면 5의 광학적 표면 규정을 도시한 것이다.
[0030] 도 19는 표 7: 대물렌즈 프리즘의 표면 6의 광학적 표면 규정을 도시한 것이다.
[0031] 도 20은 표 8: 대물렌즈 프리즘의 위치 및 배향 파라미터들을 도시한 것이다.
[0032] 도 21은 표 9: DOE 플레이트들(882 및 884)에 대한 표면 파라미터들을 예시한 것이다.
[0033] 도 22는 표 10: 프리폼 프리즘의 표면 1의 광학적 표면 규정을 도시한 것이다.
[0034] 도 23은 표 11: 프리폼 프리즘의 표면 2의 광학적 표면 규정을 도시한 것이다.
[0035] 도 24는 표 12: 프리폼 프리즘의 표면 3의 광학적 표면 규정을 도시한 것이다.
[0036] 도 25는 표 13: 접안렌즈로서의 프리폼 프리즘의 위치 및 배향 파라미터들을 도시한 것이다.
[0012] 도 1은 가림 능력이 없는 광학적 투시 HMD(도 1a) 및 가림 능력을 갖는 광학적 투시 HMD(도 1b)를 통해 보여진 AR 뷰들을 개략적으로 도시한 것이다.
[0013] 도 2는 모노큘러 광학적 모듈(monocular optical module)로서 나타낸 본 발명에 따른 예시적인 광학적 레이아웃을 개략적으로 도시한 것이다.
[0014] 도 3은 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 1회-반사 접안렌즈 프리즘, 1회-반사 대물렌즈 프리즘, 반사-타입 SLM 및 루프 반사성 표면을 포함한다.
[0015] 도 4는 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 다른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 2회-반사 접안렌즈 프리즘, 2회-반사 대물렌즈 프리즘, 4회-반사 대물렌즈 프리즘 및 반사-타입 SLM을 포함한다.
[0016] 도 5는 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 다른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 2회-반사 접안렌즈 프리즘, 1회-반사 대물렌즈 프리즘, 반사-타입 SLM 및 루프 반사성 표면을 포함한다.
[0017] 도 6은 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 다른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 2회-반사 접안렌즈 프리즘, 3회-반사 대물렌즈 프리즘, 및 투과-타입 SLM을 포함한다.
[0018] 도 7은 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 다른 바람직한 실시예를 개략적으로 도시한 것이다. 이 실시예는 2회-반사 접안렌즈 프리즘, 2회-반사 대물렌즈 프리즘, 반사-타입 SLM 및 릴레이 렌즈를 포함한다.
[0019] 도 8은 도 3에서의 예시적인 레이아웃에 기초하는 본 발명에 따른 OCOST-HMD 시스템의 예시적인 설계를 개략적으로 도시한 것이다.
[0020] 도 9는 3mm 동공(pupil) 직경을 사용하여서 평가된 컷오프 주파수 40lps/mm(line pairs per millimeter:밀리미터당 라인 쌍들)에서 도 8에서의 설계의 가상 디스플레이 경로의 다색 변조 전달 함수(polychromatic modulation transfer function)들의 필드 맵 플롯을 도시한 것이다.
[0021] 도 10은 동일한 프리폼 구조를 가진 접안렌즈 광학체 및 대물렌즈 광학체를 갖는 도 3에서의 예시적인 레이아웃에 기초한 본 발명에 따른 OCOST-HMD 시스템의 예시적인 설계를 개략적으로 도시한 것이다.
[0022] 도 11은 3mm 동공 직경을 사용하여서 평가된 컷오프 주파수 40lps/mm(line pairs per millimeter)에서 도 10에서의 설계의 가상 디스플레이 경로의 다색 변조 전달 함수들의 필드 맵 플롯을 도시한 것이다.
[0023] 도 12는 본 발명의 실시예에 따른 이미지 처리 파이프라인의 일 예의 블록도를 도시한 것이다.
[0024] 도 13은 표 1: 접안렌즈 프리즘의 표면 1의 광학적 표면 규정(optical surface prescription)을 도시한 것이다.
[0025] 도 14는 표 2: 접안렌즈 프리즘의 표면 2의 광학적 표면 규정을 도시한 것이다.
[0026] 도 15는 표 3: 접안렌즈 프리즘의 표면 3의 광학적 표면 규정을 도시한 것이다.
[0027] 도 16은 표 4: 접안렌즈 프리즘의 위치 및 배향 파라미터들을 도시한 것이다.
[0028] 도 17은 표 5: 대물렌즈 프리즘의 표면 4의 광학적 표면 규정을 도시한 것이다.
[0029] 도 18은 표 6: 대물렌즈 프리즘의 표면 5의 광학적 표면 규정을 도시한 것이다.
[0030] 도 19는 표 7: 대물렌즈 프리즘의 표면 6의 광학적 표면 규정을 도시한 것이다.
[0031] 도 20은 표 8: 대물렌즈 프리즘의 위치 및 배향 파라미터들을 도시한 것이다.
[0032] 도 21은 표 9: DOE 플레이트들(882 및 884)에 대한 표면 파라미터들을 예시한 것이다.
[0033] 도 22는 표 10: 프리폼 프리즘의 표면 1의 광학적 표면 규정을 도시한 것이다.
[0034] 도 23은 표 11: 프리폼 프리즘의 표면 2의 광학적 표면 규정을 도시한 것이다.
[0035] 도 24는 표 12: 프리폼 프리즘의 표면 3의 광학적 표면 규정을 도시한 것이다.
[0036] 도 25는 표 13: 접안렌즈로서의 프리폼 프리즘의 위치 및 배향 파라미터들을 도시한 것이다.
[0037] 본 발명에 따른 실시예들이 첨부된 도면들을 참조하여 완전하게 기술될 것이다. 다음의 설명은 본 발명의 이해를 제공하기 위해서 제시된다. 그러나, 본 발명은 이러한 세부사항들 없이도 실시될 수 있음이 명백할 것이다. 또한, 본 발명은 다양한 형태들로 구현될 수 있다. 그러나, 이하에서 기술되는 본 발명의 실시예들은 본 명세서에서 제시된 실시예들로만 한정되는 것으로 해석되어서는 안된다. 이보다는, 이러한 실시예들, 도면들 및 실례들은 예시적인 것이며 본 발명을 모호하게 하지 않는 것으로 의도된다.
[0038] 가림가능한(occlusion capable) 광학적 투시 헤드-장착형 디스플레이(optical see-through head-mounted display: OCOST-HMD) 시스템은 통상적으로 디스플레이된 가상 이미지를 보여주기 위한 가상 뷰 경로 및 현실 세계의 외부 장면을 보여주기 위한 투시 경로를 포함한다. 이하에서는, 가상 뷰 경로를 통해서 관찰된 가상 이미지를 가상 뷰로 지칭하고, 투시 경로를 통해서 관찰된 외부 장면을 투시 뷰로 지칭한다. 본 발명의 일부 실시예들에서, 가상 뷰 경로는 가상 이미지 컨텐츠를 공급하기 위한 마이크로디스플레이 유닛(microdisplay unit) 및 그를 통해서 사용자가 확대된 가상 이미지를 보게 하는 접안렌즈(eyepiece)를 포함한다. 투시 경로는, 외부 장면으로부터의 광을 캡처하여 적어도 하나의 중간 이미지를 형성하는 대물렌즈 광학체(objective optics), 투시 뷰의 불투명도를 제어 및 변조하도록 투시 경로 내의 중간 이미지 플레인에 또는 그 근처에 배치된 공간적 광 변조기(spatial light modular: SLM), 및 그를 통해서 상기 변조된 투시 뷰가 관찰자에 의해서 보여지게 되는 접안렌즈를 포함한다. 투시 경로에서, 대물렌즈 광학체 및 접안렌즈는 함께 현실 세계로부터의 광을 관찰자의 눈으로 전달하기 위한 릴레이 광학체 역할을 한다. 투시 경로 내의 중간 이미지는 투시 이미지로 지칭되며, SLM에 의해서 변조된 중간 이미지는 변조된 투시 이미지로 지칭된다. OCOST-HMD는 가상 뷰 및 투시 뷰의 결합된 뷰(combined view)를 생성하며, 여기서 가상 뷰는 투시 뷰의 일 부분들을 가리게 된다.
[0039] 몇몇 실시예들에서, 본 발명은 투시 경로(207)를 가상 뷰 경로(205)와 결합함으로써 투시 경로의 불투명도가 변조될 수 있고 가상 뷰가 투시 뷰의 일부를 가리고 그 반대의 경우도 가능하도록 할 수 있는, 컴팩트한 광학적 투시 헤드-장착형 디스플레이(200)를 포함하며, 이 디스플레이는,
a. 사용자에 의해서 보여질 이미지를 생성하기 위한 마이크로디스플레이(250) ―상기 마이크로디스플레이는 자신과 연관된 가상 뷰 경로(205)를 가짐―;
b. 가려질 투시 뷰의 부분들을 블록킹(blocking)하도록 현실 세계의 외부 장면으로부터의 광을 수정하기 위한 공간적 광 변조기(240) ―상기 광 변조기는 자신과 연관된 투시 경로(207)를 를 가짐―;
c. 외부 장면으로부터 입사되는 광을 수용하고 이 광을 공간적 광 변조기(240)에 포커싱(focusing)하도록 구성된 대물렌즈 광학체(220);
d. 마이크로디스플레이(250)로부터의 가상 이미지와 공간적 광 변조기로부터 전달되는 외부 장면의 변조된 투시 이미지를 서로 합쳐(merge) 결합된 이미지를 생성하도록 구성된 빔스플리터(230);
e. 결합된 이미지를 확대하도록 구성된 접안렌즈(210);
f. 접안렌즈와 대면하도록 구성되며, 가상 뷰가 투시 뷰의 일부를 가리는, 가상 뷰와 투시 뷰의 결합된 뷰를 사용자가 관찰하게 하는 출사 동공(exit pupil)(202);
g. 가상 뷰 경로(205) 및 투시 경로들(207)을 2개의 층들로 폴딩(folding)하도록 구성된 복수의 반사성 표면들을 포함한다.
[0040] 일부 실시예들에서, 적어도 3개의 반사성 표면들이 가상 경로 및 투시 경로를 2개의 층들로 폴딩하는데 사용된다. 제 1 반사성 표면(M1)은 외부 장면으로부터 광을 반사하도록 배향된 디스플레이의 전방 층 상에 배치된다. 대물렌즈 광학체(220)는 디스플레이의 전방 층 상에 배치된다. 제 2 반사성 표면(M2)은 공간적 광 변조기 내로 광을 반사시키도록 배향된 디스플레이의 전방 층 상에 배치된다. 공간적 광 변조기(240)는 투시 경로(207)의 중간 이미지 플레인에 또는 그 근처에 배치되며, 투시 경로(207)를 따라서 빔스플리터(230)를 통해 대물렌즈 광학체(220) 및 접안렌즈(210)와 광학적으로 연통한다. 마이크로디스플레이(250)는 접안렌즈(210)의 초점 플레인(focal plane)에 배치되며, 가상 뷰 경로(205)를 따라서 빔스플리터(230)를 통해 접안렌즈(210)와 광학적으로 연통한다. 빔스플리터(230)는, 투시 경로(207)가 가상 뷰 경로(205)와 합쳐지고 투시 경로 및 가상 뷰 경로 양쪽 모두로부터의 광이 접안렌즈(210)를 향하도록, 배향된다. 접안렌즈(210)는 디스플레이의 후방 층 상에 배치된다. 제 3 반사성 표면(M3)은 디스플레이의 후방 층 상에 배치되며, 접안렌즈로부터의 광을 출사 동공(202)으로 반사하도록 배향된다.
[0041] 일부 실시예들에서, 대물렌즈 광학체(220)는 외부 장면의 광을 수용하고, 그 외부 장면의 광을 포커싱하여서 공간적 광 변조기(240) 상에 투시 이미지를 형성한다. 공간적 광 변조기(240)는 가려질 투시 이미지의 부분을 제거하도록 투시 이미지를 수정한다. 마이크로디스플레이(250)는 빔스플리터(230)로 가상 이미지를 투사한다. 공간적 광 변조기(240)는 변조된 투시 이미지를 빔스플리터(230)로 투과하며, 빔스플리터(230)는 2개의 이미지들을 결합하여, 가상 이미지가 투시 이미지의 일부를 가리는 결합된 이미지를 생성한다. 이어서, 빔스플리터(230)는 결합된 이미지를 접안렌즈(210)에 투사하며, 접안렌즈는 이 이미지를 출사 동공(202)에 투사한다.
[0042] 일부 실시예들에서, 본 발명은 현실 세계의 외부 장면을 가상 뷰와 결합할 수 있고, 여기서 외부 장면의 불투명도가 변조되고, 디지털적으로 생성된 가상 뷰가 외부 장면의 일부를 가리며 그 반대의 경우도 가능한, 광학적 투시 헤드-장착형 디스플레이(200)를 포함한다. 본 발명은 이미지를 투과시키는 마이크로디스플레이(250), 외부 장면으로부터의 광을 수정하기 위한 공간적 광 변조기(240), 외부 장면을 캡처하는 대물렌즈 광학체(220), 마이크로디스플레이(250)로부터 디지털적으로 생성된 가상 이미지를 공간적 광 변조기로부터의 변조된 외부 장면과 결합하도록 구성된 빔스플리터(230), 가상 이미지 및 변조된 외부 장면을 확대하는 접안렌즈(210) 및 사용자가 가상 이미지 및 수정된 외부 장면의 결합된 뷰를 관찰하게 하는 출사 동공(202)을 포함한다.
[0043] 일부 실시예들에서는, 적어도 3개의 반사성 표면들이 사용되어 가상 뷰 경로(205) 및 투시 경로(207)를 2개의 층으로 폴딩한다. 대물렌즈 광학체(220)는 디스플레이의 전방 층 상에 배치되고, 접안렌즈(210)는 디스플레이의 후방 층 상에 배치된다. 일련의 미러들이 사용되어서 광을 공간적 광 변조기, 빔스플리터 및 접안렌즈를 거치는 광학적 경로를 따라서 가이드할 수도 있다. 공간적 광 변조기(240)는 투시 경로 내의 중간 이미지 플레인에 또는 그 근처에서 배치된다. 마이크로디스플레이(250)는 마이크로디스플레이로부터의 광이 빔스플리터(230)로 투과되도록 빔스플리터(230)에 대면한다. 빔스플리터(230)는 마이크로디스플레이 및 공간적 광 변조기로부터의 광들을 결합시키며, 빔스플리터로부터의 광 투과의 방향이 접안렌즈(210)와 대면하도록 배향된다. 접안렌즈(210)는 빔스플리터로부터의 광이 접안렌즈를 거쳐 출사 동공으로 투과되도록 배치된다.
[0044] 일부 실시예들에서, 대물렌즈 광학체(220)는 외부 장면의 이미지를 수용하여서 이 이미지를 공간적 광 변조기(240)에 반사 또는 굴절시킨다. 공간적 광 변조기(240)는 가려질 이미지의 부분을 제거하도록 외부 장면으로부터의 광을 수정하고 광을 빔스플리터로 투과 또는 반사시킨다. 마이크로디스플레이(250)는 빔스플리터(230)로 가상 이미지를 투과하며, 빔스플리터(230)는 2개의 이미지들을 결합하여, 가상 이미지(205)가 외부 장면의 이미지의 일부를 가리는 결합된 이미지를 생성한다. 이어서, 빔스플리터(230)는 결합된 이미지를 접안렌즈(210)에 투사하며, 접안렌즈는 이 이미지를 출사 동공(208)에 전달한다. 이로써, 사용자는 결합된 이미지를 관찰하게 되며, 이 결합된 이미지에서는 가상 이미지가 외부 장면의 일부를 가리게 나타난다.
[0045] 도 2는 컴팩트한 OCOST-HMD 시스템을 달성하기 위한 본 발명에 따른 개략적 레이아웃(200)을 도시한 것이다. 이 예시적인 레이아웃(200)에서, 가상 뷰 경로(205)(파선으로 도시됨)는 가상 뷰의 광 전파 경로를 나타내며, 디스플레이 컨텐츠를 공급하기 위한 마스크로디스플레이(250) 및 디스플레이된 컨텐츠의 확대된 이미지를 사용자가 볼 수 있게 하는 접안렌즈(210)를 포함하며, 투시 경로(207)(실선으로 도시됨)는 투시 뷰의 광 전파 경로를 나타내며, 현실 세계의 외부 장면으로부터의 광을 뷰어의 눈에 전달하기 위한 릴레이 광학체로서 기능하는 대물렌즈 광학체(220) 및 접안렌즈(210) 양쪽 모두를 포함한다. 컴팩트한 폼 팩터를 달성하고 뷰포인트 오프셋을 줄이기 위해서, 투시 경로(207)는 몇 개의 반사성 표면들(M1 내지 M3)을 통해 뷰어의 눈 전방에서 2개의 층들로 폴딩된다. 외부 장면으로부터 입사되는 광을 수용하는 전방 층(215)은 주로 대물렌즈 광학체(220) 및 필수 반사성 표면들(M1 및 M2)을 포함한다. 전방 층에 의해서 캡처된 광을 뷰어의 눈에 커플링하는 후방 층(217)은 주로 접안렌즈(210) 및 다른 필수 광학적 컴포넌트들, 예를 들어 추가의 폴딩 미러(additional folding mirror)(M3)를 포함한다. 전방 층(215)에서, 반사성 표면(M1)은 외부 장면으로부터 입사된 광을 대물렌즈 광학체(220)로 향하게 하며, 대물렌즈 광학체(220)를 통과한 후에, 광은 반사성 표면(M2)을 거쳐 후방 층(217)을 향해서 폴딩된다. 투시 경로(207) 내의 대물렌즈 광학체(220)는 적어도 하나의 액세스 가능한 중간 이미지를 형성한다. 공간적 광 변조기(SLM)(240)는 통상적으로 대물렌즈 광학체의 백 초점 플레인(back focual plane)에 있는 액세스 가능한 중간 이미지의 위치에 또는 그 근처에 배치되어서 투시 뷰의 불투명도 제어 및 투시 뷰 변조를 제공한다. 본 발명에서, SLM은 그를 통과하거나 이에 의해서 반사된 광 빔의 강도를 변조할 수 있는 광 제어 디바이스이다. SLM은 반사-타입 SLM, 예를 들어, LCoS(liquid crystal on silicon) 디스플레이 패널 또는 디지털 미러 디바이스(DMD)이거나 투과-타입 SLM, 예를 들어, 액정 디스플레이(LCD) 패널일 수 있다. 이 두 타입의 SLM 모두는 투시 경로(207) 내의 가림 제어를 위해서 투시 뷰를 변조하도록 사용될 수 있다. 도 2a는 반사-타입 SLM을 사용하는 예시적인 구성을 도시한 것이고, 도 2b는 투과-타입 SLM을 사용하는 예시적인 구성을 도시한 것이다. 대물렌즈 광학체(220)의 초점 플레인 위치에 따라서, SLM(240)은 도 2a의 반사-타입 SLM에서 SLM2의 위치에서 배치되거나, 도 2b의 투과-타입 SLM에서 SLM1의 위치에서 배치될 수 있다. 빔스플리터(230)는 투시 경로(207)를 폴딩하여 이를 가상 뷰 경로(205)와 합치며, 이에 따라 동일한 접안렌즈(210)가 디스플레이된 가상 컨텐츠 및 변조된 투시 뷰를 뷰잉하는데 공유되도록 한다. 반사성 표면(M3)은 가상 뷰 경로(205) 및 투시 경로(207)가 출사 동공(202)을 향하게 하며, 여기서 뷰어의 눈은 믹싱된(mixed) 가상 및 실제 뷰를 관찰하게 된다. 반사성 표면들(M1 내지 M3)은 단독형 요소(예를 들어, 미러)이거나 접안렌즈(210) 또는 대물렌즈 광학체(220)의 일체형 부분이 되도록 전략적으로 설계될 수 있다. 마이크로디스플레이(250) 및 SLM(240) 모두는 대물렌즈 광학체(220)의 초점 플레인에 배치되어, 빔스플리터(230)를 통해 서로 광학적으로 컨쥬게이트되며, 이로 인해 투시 뷰에 대한 픽셀 레벨 불투명도 제어가 가능하게 된다. SLM(240), 마이크로디스플레이(250) 및 빔스플리터(230)를 어셈블리한 유닛이, 예시적인 도면들에서 도시된 바와 같이 후방 층 내에 포함되어 있지만, 접안렌즈의 백 초점 거리가 대물렌즈 광학체의 백 초점 거리보다 커서 이 결합 유닛을 대물렌즈 광학체에 보다 가깝게 배치하는 것이 바람직할 경우에는, 이 유닛을 전방 층 내에 포함시킬 수도 있다. 위에서 기술된 방식은 컴팩트한 OCOST-HDM 솔루션 및 최소의 뷰 축 시프트(view axis shift)를 달성하는 것을 가능하게 한다.
[0046] 그의 이점들 중 하나로서, 광학적 레이아웃(200)은 회전적으로 대칭인 광학체 및 비회전적으로 대칭인 프리폼 광학체를 포함하는 수많은 타입의 HMD 광학체들로의 적용가능성을 가지게 되며, 이에 한정되지 않는다. 광학적 경로들을 폴딩하기 위한 반사성 표면들(M1 내지 M3)은 평면형 미러들, 광학적 능력을 가진 구형의, 비구형의, 또는 프리폼의 표면들일 수 있다. 반사성 표면들 중 일부는 프리폼 광학 기술을 사용할 수도 있다. 반사성 표면들 중 일부는 또한 접안렌즈(210) 또는 대물렌즈 광학체(220)의 일체형 부분이 되도록 전략적으로 설계될 수도 있으며, 여기서 반사성 표면들은 컴팩트한 디스플레이 설계를 달성하기 위한 광학적 경로의 폴딩을 용이하게 할 뿐만 아니라 광학적 능력에 기여하며 광학적 수차를 보정하기도 한다. 도 3에 도시된 예시적인 구성에서, 본 발명은 접안렌즈 또는 대물렌즈 광학체로서 1회-반사 프리폼 프리즘의 사용을 입증하였으며, 이 프리즘은 2개의 굴절성 표면들 및 광학적 경로를 폴딩하고 수차들을 보정하기 위한 하나 이상의 반사성 표면들을 포함하는 단일의 광학적 요소이다. 구성들의 다른 예들에서, 다중-반사 프리폼 프리즘들이 입증되었다.
[0047] 본 발명의 다른 중요한 양상에서, SLM(240)으로 액세스 가능한 중간 이미지 이외에, 투시 경로(207)는 대물렌즈 광학체(220) 또는 접안렌즈(210) 또는 이 둘에 의해서 추가의 중간 이미지들(260)을 형성할 수도 있다. 예를 들어, 다회 반사 프리폼 프리즘 구조(통상적으로 3 회 이상 반사)가 대물렌즈 광학체 또는 접안렌즈 또는 이 둘로서 사용될 수 있으며, 이는 대물렌즈 및/또는 접안렌즈 프리즘 안쪽에서 투시 경로를 다수 회로 폴딩하는 것을 가능하게 하며 이 프리즘 안쪽에서 중간 이미지(들)를 형성할 수 있다. 이로써, 투시 경로(207)는 짝수 개의 또는 홀수 개의 중간 이미지들을 산출할 수 있다. 하나 이상의 중간 이미지 생성의 잠재적 이점은 확장된 광학적 경로 길이, 긴 백 초점 거리 및 실제-뷰 직립 요소(real-view erection element)의 제거의 이점이다.
[0048] 투시 경로(207)에서 생성된 중간 이미지의 총 개수 및 사용된 반사성 표면들의 총 개수에 따라서, 투시 뷰의 좌표 시스템의 패리티를 유지하도록 투시 경로의 투시 뷰를 반전 및/또는 복구시키고, 뷰어가 반전되거나 복구된 뷰를 보는 것을 방지하기 위해서, 투시 뷰 직립 방법이 필요할 수 있다. 구체적으로 투시 뷰 직립 방법에 대해서, 본 발명은 2개의 상이한 이미지 직립 전략들을 고려한다. 총 짝수 회의 반사들이 투시 경로(207)에 관여하고 이것이 투시 뷰의 좌표 시스템의 패리티에 변화를 주지 않는 경우에는, 접안렌즈(210) 및 대물렌즈 광학체(220)의 형태는 짝수 개의 중간 이미지들이 투시 경로(207)에서 생성되도록 설계될 수 있다. 홀수 회의 반사들이 투시 경로(207)에서 관여하고 이것이 투시 뷰의 좌표 시스템의 패리티에 변화를 주는 경우에는, 반사성 표면들(M1 내지 M3) 중 하나가 투시 뷰 직립을 위해서 루프 미러 표면으로 대체될 수 있다. 루프 반사를 사용하여 뷰 직립하는 바람직한 실시예들에 대하여, 도 3 및 도 5를 참조하여 이하에서 설명하도록 한다. 중간 이미지를 사용하여서 뷰 직립하는 바람직한 실시예들에 대하여 도 4, 도 6 및 도 7를 참조하여 이하에서 설명하도록 한다.
[0049] 본 발명의 중요한 양상들 중 하나에서, 본 발명은 컴팩트하고 경량인 OCOST-HMD를 달성하기 위해서 접안렌즈 또는 대물렌즈 광학체 또는 이 둘에서 프리폼 광학 기술을 사용할 수 있다. 도 3은 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 컴팩트한 OCOST-HMD 설계에 대한 예시적인 방식의 블록도(300)를 도시한 것이다. 후방 층(317) 내의 접안렌즈(310)는 3개의 광학적 프리폼 표면들, 즉 굴절성 표면 S1, 반사성 표면 S2 및 굴절성 표면 S3으로 구성되는 1회-반사 프리폼 프리즘이다. 가상 뷰 경로(305)에서, 마이크로디스플레이(350)로부터 방사된 광선은 굴절성 표면 S3를 통해 접안렌즈(310)로 들어가며, 이어서 반사성 표면 S2에 의해서 반사되고, 굴절성 표면 S1를 통해 접안렌즈(310)를 나가고 출사 동공(302)에 도달하며, 여기서 뷰어의 눈은 마이크로디스플레이(350)의 확대된 가상 이미지를 보도록 정렬된다. 전방 층(315) 내의 대물렌즈 광학체(320)도 또한 3개의 광학적 프리폼 표면들, 즉 굴절성 표면 S4, 반사성 표면 S5 및 굴절성 표면 S6으로 구성되는 1회-반사 프리폼 프리즘이다. 투시 경로(307)에서, 대물렌즈 광학체(320)는 접안렌즈(310)와 함께 동작하여 투시 뷰용의 릴레이 광학체 역할을 한다. 미러(325)에 의해 반사된, 외부 장면으로부터 입사된 광은 굴절성 표면 S4를 통해서 대물렌즈 광학체(320)로 들어가고 이어서 반사성 표면 S5에 의해서 반사되고, 굴절성 표면 S6를 통해 대물렌즈 광학체(320)를 나가며, 광 변조를 위해서 SLM(340) 상에서 그의 초점 플레인에서 중간 이미지를 형성한다. 빔스플리터(330)는 투시 경로(307)에서 변조된 광을 가상 뷰 경로(305)의 광과 합치고, 뷰잉을 위해서 접안렌즈(310)를 향해 폴딩한다. 빔스플리터(330)는 와이어 그리드 타입(wire-grid type) 빔스플리터, 편광 큐브(polarized cube) 빔스플리터 또는 다른 유사한 타입의 빔스플리터들일 수 있다. 이 방식에서는, SLM(340)이 반사-타입 SLM이고, 개략적 레이아웃(200)의 SLM2 위치에 배치하며, 빔스플리터(330)를 통해 마이크로디스플레이(350)와 광학적으로 컨쥬게이트된다.
[0050] 이 예시적인 레이아웃(300)에서는, 개략적 레이아웃(200)의 반사성 표면 M2가 프리폼 반사성 표면 S5로서 대물렌즈 프리즘(320)의 일체형 부분이 되도록 전략적으로 설계되며, 개략적 레이아웃(200)의 반사성 표면 M3는 프리폼 반사성 표면 S2로서 접안렌즈 프리즘(310)의 일체형 부분이 되도록 전략적으로 설계되고, 개략적 레이아웃(200)의 반사성 표면 M1은 투시 경로(307)에서의 총 반사 회수들이 5(홀수)이면 뷰 직립(view erection)을 위한 루프 타입 미러(325)로서 설계된다.
[0051] 이 예시적인 레이아웃(300)에서, 접안렌즈(310) 및 대물렌즈 광학체(320)는 동일한 프리폼 프리즘 구조를 가질 수 있다. 접안렌즈 및 대물렌즈 광학체에 대해서 이러한 동일한 구조를 사용하는 것의 이점은 단일 프리즘의 광학적 설계 전략이 다른 것에도 용이하게 적용될 수 있어서, 광학적 설계를 단순화하는 것을 돕는다는 것이다. 접안렌즈 및 대물렌즈 광학체의 대칭적 구조도 또한 코마(coma), 디스토션(distrotion) 및 래터럴 컬러(lateral color)와 같은 홀수 차수 수차(odd oder abberation)를 보정하는 것을 지원할 수 있다.
[0052] 도 4는 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 컴팩트한 OCOST-HMD 설계에 대한 다른 예시적인 방식의 블록도(400)를 도시한 것이다. 일 예시적인 구현예에서, 접안렌즈(410)는 2회-반사 프리즘이며 대물렌즈 광학체(420)는 4회-반사 프리즘이다. 대물렌즈 광학체(420) 안쪽에는, 중간 이미지(460)가 투시 뷰를 직립하도록 형성되며 이는 직립 루프 반사성 표면을 사용할 필요를 제거한다. 직립 프리즘(erection prism)을 제거하는 것의 잠재적 이점은 이 시스템 구조가 대물렌즈 프리즘 안쪽에서 수회 광학적 경로를 폴딩함으로써 보다 컴팩트한 설계로 이어질 수 있다는 것이다. 후방 층(417) 내의 접안렌즈(410)는 4개의 광학적 프리폼 표면들, 즉 굴절성 표면 S1, 반사성 표면 S2, 반사성 표면 S1' 및 굴절성 표면 S3로 구성된다. 가상 뷰 경로(405)에서는, 마이크로디스플레이(450)로부터 방사된 광선이 굴절성 표면 S3를 통해 접안렌즈(410)로 들어가며, 이어서 반사성 표면들 S1' 및 S2에 의해 연속적으로 반사되고, 굴절성 표면 S1을 통해 접안렌즈(410)를 나가서 출사 동공(402)에 도달하며, 여기서 뷰어의 눈은 마이크로디스플레이(450)의 확대된 가상 이미지를 보도록 정렬된다. 굴절성 표면 S1 및 반사성 표면 S1'은 동일한 물리적 표면들일 수 있으며 동일한 세트의 표면 규정들을 가질 수 있다. 전방 층(415) 내의 대물렌즈 광학체(420)는 6개의 광학적 프리폼 표면들, 즉 굴절성 표면 S4, 반사성 표면들 S5, S4', S5', 및 S6 및 굴절성 표면 S7로 구성된다. 투시 경로(407)에서는, 대물렌즈 광학체(420)가 접안렌즈(410)와 함께 동작하여 투시 뷰용의 릴레이 광학체 역할을 한다. 현실 세계의 외부 장면으로부터 입사되는 광은 굴절성 표면 S4를 통해 대물렌즈 광학체(420)로 들어가며 이어서 반사성 표면들 S5, S4', S5' 및 S6에 의해서 연속적으로 반사되고, 굴절성 표면 S7을 통해 대물렌즈 광학체(420)를 나가서 광 변조를 위해 SLM(440) 상의 초점 플레인에서 중간 이미지를 형성한다. 굴절성 표면 S4 및 반사성 표면 S4'는 동일한 물리적 표면들일 수 있으며 동일한 세트의 표면 규정들을 가질 수 있다. 반사성 표면 S5 및 반사성 표면 S5'는 동일한 물리적 표면들일 수 있으며 동일한 세트의 표면 규정들을 가질 수 있다. 빔스플리터(430)는 투시 경로(407)에서 변조된 광을 가상 뷰 경로(405)의 광과 합치고 뷰잉을 위해서 이를 접안렌즈(410)를 향해 폴딩한다. 빔스플리터(430)는 와이어 그리드 타입 빔스플리터, 편광 큐브 빔스플리터 또는 다른 유사한 타입 빔스플리터들일 수 있다. 이 방식에서, SLM(440)는 반사-타입 SLM이고, 개략적 레이아웃(200)의 SLM2 위치에 배치되며, 빔스플리터(430)를 통해 마이크로디스플레이(450)와 광학적으로 컨쥬게이트된다.
[0053] 이 예시적인 레이아웃(400)에서는, 개략적 레이아웃(200)의 반사성 표면 M2이 반사성 표면 S6로서 대물렌즈 광학체(420)의 일체형 부분이 되도록 전략적으로 설계되고, 개략적 레이아웃(200)의 반사성 표면 M3는 반사성 표면 S2로서 접안렌즈(410)의 일체형 부분이 되도록 전략적으로 설계되며, 개략적 레이아웃(200)의 반사성 표면 M1은 반사성 표면 S5로서 대물렌즈 광학체(420)의 일체형 부분이 되도록 설계된다. 중간 이미지(460)는 실제-뷰 직립을 위해서 대물렌즈 광학체(410)의 안쪽에 형성된다. 투시 경로(407)에서의 총 반사 회수들이 8(짝수)이면, 루프 타입 미러는 어떠한 반사성 표면상에서도 요구되지 않는다.
[0054] 도 5는 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 컴팩트한 OCOST-HMD 설계에 대한 다른 예시적인 방식의 블록도(500)를 도시한 것이다. 이 방식은 투과-타입 SLM의 사용을 용이하게 한다. 접안렌즈(510)는 2회-반사 프리즘이며 대물렌즈 광학체(520)는 1회-반사 프리즘이다. 루프 미러(527)가 대물렌즈 광학체(520)의 상단에 배치되어 투시 뷰를 반전하고, 투시 경로(507)를 후방 층(517)을 향해 폴딩한다. 후방 층(517) 내의 접안렌즈(510)는 4개의 광학적 프리폼 표면들, 즉 굴절성 표면(refractive surface) S1, 반사성 표면 S2, 반사성 표면 S1' 및 굴절성 표면 S3으로 구성된다. 가상 뷰 경로(505)에서는, 마이크로디스플레이(550)로부터 방사된 광선이 굴절성 표면 S3를 통해 접안렌즈(510)로 들어가며, 이어서 반사성 표면들 S1' 및 S2에 의해 연속적으로 반사되고, 굴절성 표면 S1을 통해 접안렌즈(510)를 나가서 출사 동공(502)에 도달하며, 여기서 뷰어의 눈은 마이크로디스플레이(550)의 확대된 가상 이미지를 보도록 정렬된다. 굴절성 표면 S1 및 반사성 표면 S1'은 동일한 물리적 표면들일 수 있으며 동일한 세트의 표면 규정들을 가질 수 있다. 전방 층(515) 내의 대물렌즈 광학체(520)는 3개의 광학적 프리폼 표면들, 즉 굴절성 표면 S4, 반사성 표면 S5 및 굴절성 표면 S6로 구성된다. 투시 경로(507)에서는, 대물렌즈 광학체(520)가 접안렌즈(510)와 함께 동작하여 투시 뷰용의 릴레이 광학체 역할을 한다. 현실 세계의 외부 장면으로부터 입사되는 광은 굴절성 표면 S4를 통해 대물렌즈 광학체(520)로 들어가며 이어서 반사성 표면 S5에 의해 반사되고, 굴절성 표면 S6를 통해 대물렌즈 광학체(520)를 나가고, 후방 층(517)을 향해 미러(527)에 의해서 폴딩되어서 광 변조를 위해 SLM(540)의 초점 플레인에서 중간 이미지를 형성한다. 빔스플리터(530)는 투시 경로(507)에서 변조된 광을 가상 뷰 경로(505)의 광과 합치고 뷰잉을 위해서 이를 접안렌즈(510)를 향해 폴딩한다. 빔스플리터(530)는 와이어 그리드 타입 빔스플리터, 편광 큐브 빔스플리터 또는 다른 유사한 타입 빔스플리터들일 수 있다. 이 방식에서, SLM(540)은 투과-타입 SLM이고, 개략적 레이아웃(200)의 SLM1 위치에 배치되며, 빔스플리터(530)를 통해 마이크로디스플레이(550)와 광학적으로 컨쥬게이트된다.
[0055] 이 예시적인 레이아웃(500)에서는, 개략적 레이아웃(200)의 반사성 표면 M1이 반사성 표면 S5로서 대물렌즈 광학체(520)의 일체형 부분이 되도록 전략적으로 설계되고, 개략적 레이아웃(200)의 반사성 표면 M3은 반사성 표면 S2로서 접안렌즈(510)의 일체형 부분이 되도록 전략적으로 설계되고, 개략적 레이아웃(200)의 반사성 표면 M2는, 투시 경로(507)에서의 총 반사 회수들이 5(홀수)인 경우, 뷰 직립을 위해서 루프 타입 미러(527)로서 설계된다.
[0056] 도 6은 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 컴팩트한 OCOST-HMD 설계에 대한 다른 예시적인 방식의 블록도(600)를 도시한 것이다. 이 방식은 또한 투과-타입 SLM의 사용을 용이하게 한다. 일 예시적인 구현예에서, 접안렌즈(610)는 2회-반사 프리폼 프리즘이며, 대물렌즈 광학체(620)는 3회-반사 프리폼 프리즘이다. 대물렌즈 광학체(620) 안쪽에서는, 중간 이미지(660)가 투시 뷰를 직립하도록 형성된다. 후방 층(617) 내의 접안렌즈(610)는 4개의 광학적 프리폼 표면들, 즉 굴절성 표면 S1, 반사성 표면 S2, 반사성 표면 S1' 및 굴절성 표면 S3로 구성된다. 가상 뷰 경로(605)에서는, 마이크로디스플레이(650)로부터 방사된 광선이 굴절성 표면 S3를 통해 접안렌즈(610)로 들어가며, 이어서 반사성 표면들 S1' 및 S2에 의해 연속적으로 반사되고, 굴절성 표면 S1을 통해 접안렌즈(610)를 나가서 출사 동공(602)에 도달하며, 여기서 뷰어의 눈은 마이크로디스플레이(650)의 확대된 가상 이미지를 보도록 정렬된다. 굴절성 표면 S1 및 반사성 표면 S1'은 동일한 물리적 표면들일 수 있으며 동일한 세트의 표면 규정들을 가질 수 있다. 전방 층(615) 내의 대물렌즈 광학체(620)는 5개의 광학적 프리폼 표면들, 즉 굴절성 표면 S4, 반사성 표면들 S5, S4' 및 S6 및 굴절성 표면 S7을 포함한다. 투시 경로(607)에서는, 대물렌즈 광학체(620)가 접안렌즈(610)와 함께 동작하여 투시 뷰용의 릴레이 광학체 역할을 한다. 현실 세계의 외부 장면으로부터 입사되는 광은 굴절성 표면 S4를 통해 대물렌즈 광학체(620)로 들어가며, 이어서 반사성 표면들 S5, S4' 및 S6에 의해 연속적으로 반사되고 굴절성 표면 S7을 통해 대물렌즈 광학체(620)를 나가서 광 변조를 위해 SLM(640)의 초점 플레인에서 중간 이미지를 형성한다. 굴절성 표면 S4 및 반사성 표면 S4'은 동일한 물리적 표면들일 수 있으며 동일한 세트의 표면 규정들을 가질 수 있다. 빔스플리터(630)는 투시 경로(607)에서 변조된 광을 가상 뷰 경로(605)의 광과 합치고 뷰잉을 위해 이를 접안렌즈(610)를 향해서 폴딩한다. 빔스플리터(630)는 와이어 그리드 타입 빔스플리터, 편광 큐브 빔스플리터 또는 다른 유사한 타입 빔스플리터들일 수 있다. 이 방식에서는, SLM(640)이 투과-타입 SLM이고, 개략적 레이아웃(200)의 SLM1 위치에 배치되며, 빔스플리터(630)를 통해 마이크로디스플레이(650)와 광학적으로 컨쥬게이트된다.
[0057] 이 예시적인 레이아웃(600)에서는, 개략적 레이아웃(200)의 반사성 표면 M1이 반사성 표면 S5로서 대물렌즈 광학체(620)의 일체형 부분이 되도록 전략적으로 설계되고, 개략적 레이아웃(200)의 반사성 표면 M2은 반사성 표면 S6로서 대물렌즈 광학체(620)의 일체형 부분이 되도록 전략적으로 설계되며, 개략적 레이아웃(200)의 반사성 표면 M3는 반사성 표면 S2로서 접안렌즈(610)의 일체형 부분이 되도록 설계된다. 중간 이미지(660)는 실제-뷰 직립을 위해서 대물렌즈 광학체(610)의 안쪽에 형성된다. 투시 경로(607)에서의 총 반사 회수들이 6(짝수)인 경우, 어떠한 루프 미러도 임의의 반사성 표면 상에서 요구되지 않는다.
[0058] 도 7은 프리폼 광학적 기술을 기반으로 하는 본 발명에 따른 컴팩트한 OCOST-HMD 설계에 대한 다른 예시적인 방식의 블록도(700)를 도시한 것이다. 일 예시적인 구현예에서, 접안렌즈와 대물렌즈 광학체 모두 2회-반사 프리폼 프리즘이며 거의 동일한 구조를 갖는다. 접안렌즈 및 대물렌즈 광학체에 대해서 이러한 동일한 구조를 사용하는 것의 이점은 단일 프리즘의 광학적 설계 전략이 다른 것에도 용이하게 적용될 수 있어서, 광학적 설계를 단순화하는 것을 돕는다는 것이다. 접안렌즈 및 대물렌즈 광학체의 대칭적 구조도 또한 코마, 디스토션 및 래터럴 컬러와 같은 홀수 차수 수차를 보정하는 것을 지원할 수 있다. 후방 층(717) 내의 접안렌즈(710)는 4개의 광학적 프리폼 표면들, 즉 굴절성 표면 S1, 반사성 표면 S2, 반사성 표면 S1' 및 굴절성 표면 S3로 구성된다. 가상 뷰 경로(705)에서는, 마이크로디스플레이(750)로부터 방사된 광선이 굴절성 표면 S3를 통해 접안렌즈(710)로 들어가며, 이어서 반사성 표면들 S1' 및 S2에 의해 연속적으로 반사되고, 굴절성 표면 S1을 통해 접안렌즈(710)를 나가서 출사 동공(702)에 도달하며, 여기서 뷰어의 눈은 마이크로디스플레이(750)의 확대된 가상 이미지를 보도록 정렬된다. 굴절성 표면 S1 및 반사성 표면 S1'은 동일한 물리적 표면들일 수 있으며 동일한 세트의 표면 규정을 가질 수 있다. 전방 층(715) 내의 대물렌즈 광학체(720)는 4개의 광학적 프리폼 표면들, 즉 굴절성 표면 S4, 반사성 표면들 S5, S4' 및 굴절성 표면 S6로 구성된다. 투시 경로(707)에서는, 대물렌즈 광학체(720)가 접안렌즈(710)와 함께 동작하여 투시 뷰용의 릴레이 광학체 역할을 한다. 현실 세계의 외부 장면으로부터 입사되는 광은 굴절성 표면 S4를 통해 대물렌즈 광학체(720)로 들어가며, 이어서 반사성 표면들 S5, S4'에 의해 연속적으로 반사되고, 굴절성 표면 S6를 통해 대물렌즈 광학체(720)를 나가서 광 변조를 위해 그것의 초점 플레인에서 중간 이미지(760)를 형성한다. 빔스플리터(780)는 대물렌즈 광학체(720)의 초점 플레인에 위치한 미러(790)를 향해서, 후방 층(715)으로부터 투시 경로(707)가 멀어지게 폴딩한다. 투시 경로(707)는 후방 층(715)을 향해서 미러(790)에 의해서 반사된다. 릴레이 렌즈(770)는, 뷰 변조를 위해서 개략적 레이아웃(200)의 SLM2 위치에 중간 이미지(760)의 이미지를 생성하도록 사용된다. 빔스플리터(730)는 투시 경로(707)에서 변조된 광을 가상 뷰 경로(705)의 광과 합치고 뷰잉을 위해 이를 접안렌즈(710)를 향해서 폴딩한다. 이 방식에서는, SLM(740)이 반사-타입 SLM이고, 빔스플리터(730)를 통해 마이크로디스플레이(750)와 광학적으로 컨쥬게이트된다. 중간 이미지(760)가 SLM(740)과 광학적으로 컨쥬게이트된다는 사실로 인하여, SLM(740)과 미러(790)의 위치는 상호교환가능하다.
[0059] 이 예시적인 레이아웃(700)에서는, 개략적 레이아웃(200)의 반사성 표면 M1이 반사성 표면 S5로서 대물렌즈 광학체(720)의 일체형 부분이 되도록 전략적으로 설계되고, 개략적 레이아웃(200)의 반사성 표면 M3는 반사성 표면 S2로서 접안렌즈(710)의 일체형 부분이 되도록 전략적으로 설계되며, 개략적 레이아웃(200)의 반사성 표면 M2는 미러(790)로서 대물렌즈 광학체(710)의 초점 플레인에 위치되어 투시 경로(707)를 가상 뷰 경로(705)를 향해서 폴딩한다. 중간 이미지(760)는 실제-뷰 직립을 위해서 대물렌즈 광학체(720)의 초점 플레인에 형성된다. 투시 경로(707)에서의 총 반사 회수들이 8(짝수)인 경우에는, 어떠한 루프 미러도 임의의 반사성 표면 상에서 요구되지 않는다.
[0060] 도 8은 도 3에 도시된 예시적인 방식에 기초한 예시적인 설계(800)를 개략적으로 도시한 것이다. 이 설계는 40 도(degree)의 사선 FOV를 달성하며, 이 FOV는 수평 방향(X 축 방향)에서 31.7 도이고, 수직 방향(Y 축 방향)에서 25.6 도이며, 이 설계는 또한 8mm의 출사 동공 직경(exit pupil diameter)(EPD)(비네트되지 않음:non-vignetted), 및 18mm의 아이 클리어런스(eye clearance)를 달성하였다. 이 설계는 5:4 종횡비 및 1280x1024 픽셀 해상도를 갖는 0.8" 마이크로디스플레이에 기초한 것이다. 마이크로디스플레이는 15.36mm 및 12.29mm의 유효 면적 및 화소 크기 12㎛를 갖는다. 이 설계는 마이크로디스플레이와 동일한 크기 및 해상도의 SLM을 사용하였다. 편광 큐브(polarized cube) 빔스플리터를 사용하여 가상 뷰 경로와 투시 경로를 결합하였다. DOE 플레이트들(882 및 884)을 사용하여 색수차(chromatic aberration)를 보정하였다. 이 시스템은 43mm(X)x23mm(Y)x 44.5mm(Z)로 측정되었다. 입사 동공(886)과 출사 동공(802) 간의 뷰포인트 시프트는 각기 Y 방향에서 0.6mm이고 z 방향에서 67mm이었다.
[0061] 접안렌즈(810)의 예시적인 광학적 규정에 대하여 표 1 내지 표 4에서 열거되어 있다. 접안렌즈(810)에서의 3개의 모든 광학적 표면들은 AAS(anamorphic aspheric surface)이다. AAS 표면의 새그(sag)는,
로 정의되며, 여기서, z는 로컬 x, y, z 좌표 시스템의 z 축을 따라서 측정된 프리폼 표면의 새그이고, cx 및 cy는 각기 x 축 및 y 축에서 꼭지점 곡률(vertex curvature)이며, Kx 및 Ky는 각기 x 축 및 y 축에서의 코닉 상수(conic constant)이고, AR, BR, CR 및 DR은 각기 코닉으로부터의 4차, 6차, 8차 및 10차 변형의 회전적으로 대칭인 부분이며, AP, BP, CP 및 DP은 각기 코닉으로부터의 4차, 6차, 8차 및 10차 변형의 비회전적으로 대칭인 부분이다.
표 1: 접안렌즈 프리즘의 표면 1의 광학적 표면 규정, 도 13 참조
표 2: 접안렌즈 프리즘의 표면 2의 광학적 표면 규정, 도 14 참조
표 3: 접안렌즈 프리즘의 표면 3의 광학적 표면 규정, 도 15 참조
표 4: 접안렌즈 프리즘의 위치 및 배향 파라미터들, 도 16 참조
[0062] 대물렌즈 광학체(820)의 예시적인 광학적 규정에 대하여 표 5 내지 표 8에서 열거되어 있다. 대물렌즈 광학체(820)에서의 모든 3개의 광학적 표면들은 AAS(anamorphic aspheric surface)이다.
표 5: 대물렌즈 프리즘의 표면 4의 광학적 표면 규정, 도 17 참조
표 6: 대물렌즈 프리즘의 표면 5의 광학적 표면 규정, 도 18 참조
표 7: 대물렌즈 프리즘의 표면 6의 광학적 표면 규정, 도 19 참조
표 8: 대물렌즈 프리즘의 위치 및 배향 파라미터들, 도 20 참조
[0063] DOE 플레이트(882 및 884)의 예시적인 광학적 규정에 대하여 표 9에 열거되어 있다.
표 9: DOE 플레이트들(882 및 884)에 대한 표면 파라미터들, 도 21 참조
[0064] 도 9는 3mm 동공 직경을 사용하여 평가된 컷오프 주파수 40lps/mm(밀리미터당 라인 쌍들)에서의 가상 디스플레이 경로의 다색 변조 전달 함수들의 필드 맵 플롯을 도시한 것이다. 40lps/mm 컷오프 주파수는 마이크로디스플레이의 픽셀 크기로부터 결정된다. 이 플롯은 본 설계가 15 퍼센트보다 약간 작은 컷오프 주파수에의 MTF 값들을 갖는 2개의 상부 디스플레이 코너들을 제외하고, 대부분의 필드들에 있어서 매우 우수한 성능을 가짐을 보인다. 전체 FOV에 걸쳐서, 가상 디스플레이 경로의 디스토션은 2.9%보다 작은 한편, 투시 경로의 디스토션은 0.5%보다 작다. 광학체에 대한 총 추정된 중량은 단독으로 눈당(per eye) 33 그램이다.
[0065] 도 10은 도 3에서 도시된 예시적인 방식에 기초한 예시적인 설계(1000)를 개략적으로 도시한 것이다. 이 설계는 40 도의 사선 FOV를 달성하며, 이 FOV는 수평 방향(X 축 방향)에서 35.2 도이고, 수직 방향(Y 축 방향)에서 20.2 도이며, 이 설계는 또한 8mm의 출사 동공 직경(EPD)(비네트되지 않음: non-vignetted), 및 18mm의 아이 클리어런스를 달성하였다. 이 설계는 16:9 종횡비 및 1280x720 픽셀 해상도를 갖는 0.7" 마이크로디스플레이에 기초한 것이다. 이 설계는 마이크로디스플레이와 동일한 크기 및 해상도의 SLM을 사용하였다. 와이어-그리드 플레이트 빔스플리터를 사용하여 가상 뷰 경로와 투시 경로를 결합하였다. 동일한 프리폼 프리즘이 접안렌즈 및 대물렌즈 광학체로서 사용되었다.
[0066] 프리폼 프리즘의 예시적인 광학적 규정에 대하여 표 10 내지 표 15에 열거되어 있다. 프리즘의 2개의 표면들은 AAS(anamorphic aspheric surface)이며, 한 개의 표면은 ASP(aspheric surface)이다. ASP 표면의 새그는,
로 정의되며, 여기서, z는 로컬 x, y, z 좌표 시스템의 z 축을 따라서 측정된 표면의 새그이고, c는 꼭지점 곡률이고, K는 코닉 상수이고, A 내지 J는 각기 4차, 6차, 8차 및 10차, 12차, 14차, 16차, 18차 및 20차 변형 계수들이다.
표 10: 프리폼 프리즘의 표면 1의 광학적 표면 규정, 도 22 참조
표 11: 프리폼 프리즘의 표면 2의 광학적 표면 규정, 도 23 참조
표 12: 프리폼 프리즘의 표면 3의 광학적 표면 규정, 도 24 참조
*표 13: 접안렌즈로서의 프리폼 프리즘의 위치 및 배향 파라미터들, 도 25 참조
[0068] 도 11은 3mm 동공 직경을 사용하여 평가된 컷오프 주파수 40lps/mm(밀리미터당 라인 쌍들)에서의 가상 디스플레이 경로의 다색 변조 전달 함수들의 필드 맵 플롯을 도시한 것이다. 이 플롯은 본 설계가 대부분의 필드들에 대해서 매우 우수한 성능을 가짐을 보인다.
[0069] 도 12는 본 발명에 필요한 이미지 처리 파이프라인의 일 예의 블록도를 도시한 것이다. 먼저, 적합한 깊이 감지 수단을 사용하여 외부 장면의 깊이 맵(depth map)이 추출된다. 이어서, 가상 객체를 깊이 맵과 비교함으로써, 가림(occlusion)이 발생하는 영역들을 결정한다. 마스크 생성 알고리즘이 사전 결정된 가림 영역들에 따라서 이진 마스크 이미지(binary mask image)를 생성한다. 이어서, 마스크 이미지가 공간적 광 변조기 상에 디스플레이되어서, 외부 장면의 중간 이미지 내의 가려진 영역으로부터 광을 블록킹한다. 가상 객체의 가상 이미지가 렌더링되고 마이크로디스플레이 상에 디스플레이된다. 본 발명의 디스플레이 디바이스를 통해 가상 이미지와 외부 장면의 변조된 투시 이미지가 결합된 이미지를, 뷰어가 관찰한다.
[0070] 종래 기술과 비교할 때, 본 발명은 컴팩트한 형태로 압축되며, 헤드-장착형 디스플레이로서 보다 용이하게 착용될 수 있게 하는, 폴딩된(folded) 이미지 경로를 특징으로 한다. 종래 기술(미국 특허 7,639,208 B1)에서는, 이 광학적 경로가 회전적으로 대칭인 렌즈들을 사용하여 선형으로 배열된다. 그 결과, 종래 기술의 가림 타입 디스플레이는 긴 텔레스코프와 유사한 형상을 가지며, 헤드에 착용하도록 다루는 것이 쉽지 않다. 본 발명은 반사성 표면들을 사용하여 이미지 경로를 2개의 층들로 폴딩함으로써, 공간적 광 변조기, 마이크로디스플레이 및 빔스플리터가 눈의 전방에서 선형적으로 보다는 헤드의 상단에 장착된다.
[0071] 종래 기술은 오직 반사-타입 공간적 광 변조기에 의존하는 반면, 본 발명은 반사-타입 또는 투과-타입 공간적 광 변조기를 사용할 수 있다. 또한, 종래 기술은 외부 장면을 변조하기 위해서 편광 빔스플리터를 요구하지만, 본 발명은 편광을 필요로 하지 않는다.
[0072] 본 발명은 층들로 배열되기 때문에, 접안렌즈 및 대물렌즈 광학체가 반드시 동일선상에 있을 필요는 없지만, 종래 기술에서는 동일선상에 있어야 한다. 또한, 대물렌즈 광학체는 반드시 텔레-센트릭(tele-centric)할 필요가 없다.
[0073] 종래 기술에서는, 시스템의 대물렌즈 광학체로 인하여, 현실 세계의 뷰가 투시 뷰의 미러 반사이다. 본 발명은 사용자의 뷰와 외부 장면 간의 패리티를 유지하도록 루프 미러가 삽입되게 할 수 있는 폴딩된 이미지 경로를 가지고 있다. 이로 인해, 본 발명은 사용자의 관점에서 보다 기능적게 된다.
[0074] 종래 기술과 비교할 때, 본 발명은 시스템이 훨씬 컴팩트하게 될 수 있는 프리폼 광학적 기술을 사용한다. 프리폼 광학적 표면들은 내부에서 광을 다수회 반사하도록 설계될 수 있으며, 이로써 광 경로를 폴딩하는데 미러들이 사용될 필요가 없다.
[0075] 본 발명에서, 광학적 경로들을 폴딩하기 위한 반사성 표면들은 광학적 능력을 갖는 평면형 미러들, 구형의, 비구형의, 또는 프리폼 표면들일 수 있다. 본 발명의 중요한 양상은 반사성 표면들 일부가 프리폼 광학적 기술을 사용하여 광학적 성능 및 컴팩트성을 증진시키는 것을 돕는다는 것에 있다. 본 발명에서는, 반사성 표면들 일부가 접안렌즈 또는 대물렌즈 광학체의 일체형 부분이 되게 전략적으로 설계되며, 반사성 표면들은 컴팩트한 디스플레이 설계을 달성하기 위한 광학적 경로의 폴딩을 용이하게 할 뿐만 아니라 광학적 능력에 기여하며 광학적 수차를 보정할 수 있다. 예를 들어, 도 2에서, 반사성 표면들(M1 내지 M3)은 접안렌즈 및 대물렌즈 광학체와는 별도의 일반적 미러들로서 도시되어 있다. 도 3에서는, 미러들 M1 내지 M3 중 2 개가 프리폼 접안렌즈 프리즘 및 대물렌즈 프리즘 내에 S2 및 S5로서 포함된 프리폼 표면들이다. 도 4에서는, 4개의 반사성 프리폼 표면들이 프리폼 대물렌즈 프리즘 내에 포함되어 있으며 2개의 반사성 프리폼 표면들이 프리폼 접안렌즈 프리즘 내에 포함되어 있다. 도 5에서는, 루프 프리즘 이외에, 1개의 반사성 표면이 대물렌즈 프리즘 내에 있고, 2개의 프리폼 표면들이 접안렌즈 내에 있다. 도 6에서는, 3개의 프리폼 표면들이 대물렌즈 광학체 내에 있고, 2개의 프리폼 표면들이 접안렌즈 내에 있다. 도 7에서는, 미러(790) 및 빔스플리터(780) 이외에, 2개의 반사성 프리폼 미러들이 대물렌즈 광학체 내에 있고, 2개의 프리폼 미러들이 접안렌즈 내에 있다.
[0076] 본 발명은 시스템을 통해 보여지는 투시 뷰가 정확하게 직립되도록(반전 또는 복구되지 않도록) 보장한다. 이를 달성하기 위한 본 실시예들에서는, 투시 경로에 형성된 중간 이미지들의 개수 및 투시 경로에 관여하는 반사 회수에 따라서 2개의 상이한 광학적 방법들이 이용되었다. 홀수 개수의 중간 이미지들의 경우에, 광학적 방법은 투시 경로에서 투시 뷰를 반전 및/또는 복구시키도록 제공된다. 예를 들어, 투시 경로에서 관여한 반사 회수에 따라, 가능한 방법들의 예들은 추가의 반사 또는 반사들을 삽입하는 것, 루프 미러 표면을 사용하는 것, 또는 직립 렌즈를 삽입하는 것을 포함하나, 이에 한정되지 않는다. 짝수 개수의 중간 이미지들의 경우에는, 패리티 변화가 필요하지 않다면, 어떠한 이미지 직립 요소도 필요하지 않다. 예를 들어, 다회 반사 프리폼 프리즘 구조체(통상적으로 2 회보다 많이 반사)는, 접안렌즈 또는 대물렌즈 광학체 또는 이 둘로서 사용될 수 있으며(이는, 대물렌즈 및/또는 접안렌즈 프리즘 안쪽에서 투시 광학적 경로를 다수 회 폴딩하는 것을 가능하게 함), 그리고 투시 뷰를 직립시키기 위해 프리즘 안쪽에 중간 이미지(들)를 형성하며, 이는 직립 루프 반사성 표면을 사용할 필요성을 제거한다.
[0077] 도 3에서는, 오직 1개의 중간 이미지가 투시 경로에 생성된다. 이 구조는 루프 프리즘(325)을 사용하여 직립된 투시 뷰를 적절하게 생성한다.
[0078] 도 4에서는, 4회 반사 프리폼 프리즘이 대물렌즈 광학체로서 사용되며, 이것은 2개의 중간 이미지들(이 프리즘 안쪽에서 하나(460), SLM에 대해서 하나(440))을 생성한다. 또한, 투시 경로 내에서는 총 8 회의 반사가 관여하게 되며, 이것은 패리티 무변화로 이어진다. 따라서, 직립된 뷰가 생성된다. 대물렌즈 광학체 및 접안렌즈의 구조는 동일한 결과들을 위해서 서로 바뀔 수도 있음에 유의한다.
[0079] 도 5에서는, 1개의 중간 이미지가 SLM을 위하여 투시 경로에 생성된다. 이 설계는 루프 프리즘(527)을 사용하여 직립된 투시 뷰를 생성한다.
[0080] 도 6에서는, 3회 반사 프리폼 프리즘이 대물렌즈 광학체로서 사용되며, 이것은 2개의 중간 이미지들(이 프리즘 안쪽에서 하나(660), SLM에 대해서 하나(640))을 생성한다. 또한, 투시 경로 내에서는 총 6 회의 반사가 관여하게 되며, 이것은 패리티 무변화로 이어진다. 따라서, 직립된 뷰가 생성된다. 대물렌즈 광학체 및 접안렌즈의 구조는 동일한 결과들을 위해서 서로 바뀔 수도 있음에 유의한다.
[0081] 도 7에서는, 대물렌즈 광학체(720)가 오직 2회 반사만을 사용하며, 빔스플리터(780)와 미러(790)의 조합이 투시 경로에서 2개의 중간 이미지들(SLM에 대해서 하나(740) 및 추가된 하나(760))을 생성하는 것을 가능하게 한다. 또한, 투시 경로 내에서는 총 8회의 반사가 관여하게 된다. 따라서, 직립된 투시 뷰가 생성된다.
[0082] 투시 헤드-장착형 디스플레이가 외부 장면의 패리티를 유지하여, HMD 없이도 사용자에게 그들의 일반적인 뷰들로서 실감나는 경험을 제공하는 것은 매우 중요하다.
[0083] 본 발명의 바람직한 실시예들이 도시 및 기술되었지만, 수정사항들이 첨부된 청구항들의 범위를 벗어나지 않으면서 이러한 실시예들에 대해 가능하다는 것은 본 기술 분야의 당업자에게 용이하게 명백해질 것이다. 청구항들에서 인용된 참조 번호들은 예시적인 것이고, 특허청이 검토하기 용이하게 제공된 것이며, 어떤 경우에도 한정적이지 않다. 일부 실시예들에서, 본 특허출원에서 제공된 도면들은 각도들, 치수 비들 등을 포함하여 크기대로 도시되지 않았다. 일부 실시예들에서, 도면들은 오직 대표적인 것이며 청구항들은 이 도면들의 치수들로 한정되지 않는다.
[0084] 아래의 청구항들에서 인용된 참조 부호들은 오로지 본 특허출원의 심사의 편의를 위해서만 존재하고, 예시적인 것이며, 어떠한 방식으로도 청구항들의 범위를 도면들에서의 대응하는 참조 번호들을 갖는 특정 특징부들로 한정하는 것으로 의도되지 않는다.
Claims (9)
- 투시 경로의 불투명도가 변조될 수 있고 가상 뷰가 투시 뷰의 일부들을 가릴 수 있고 또한 상기 투시 뷰가 상기 가상 뷰의 일부들을 가릴 수도 있도록, 투시 경로(307)를 가상 뷰 경로(305)와 결합할 수 있는, 컴팩트한 광학적 투시 머리-장착형 디스플레이(300)로서,
a. 사용자에 의해 감상될 이미지를 생성하기 위한 마이크로디스플레이(350) ―상기 마이크로디스플레이는 자신과 연관된 가상 뷰 경로(305)를 가짐―;
b. 가려질 상기 투시 뷰의 일부들을 차단하도록 현실 세계의 외부 장면으로부터의 광을 수정하기 위한 반사-타입 공간적 광 변조기(340) ―상기 공간적 광 변조기는 자신과 연관된 투시 경로(307)를 가짐―;
c. 외부 장면을 향하고, 상기 외부 장면으로부터 입사하는 광을 수용하고 상기 광을 상기 공간적 광 변조기(340) 상으로 집속하도록 구성된 대물 광학체(320) ―상기 대물 광학체는, 굴절성 표면(S4), 반사성 표면(S5) 및 굴절성 표면(S6)의 3개의 광학적 프리폼 표면들을 포함하는 1회-반사 프리폼 프리즘임―;
d. 마이크로디스플레이(350)로부터 디지털방식으로 발생된 가상 이미지와 공간적 광 변조기로부터 전달되는 외부 장면의 변조된 투시 이미지를 합쳐, 결합된 이미지를 생성하도록 구성된 빔 분할기(330);
e. 상기 결합된 이미지를 확대하도록 구성된 아이피스(eyepiece)(310) ―상기 아이피스는, 굴절성 표면(S1), 반사성 표면(S2) 및 굴절성 표면(S3)의 3개의 광학적 프리폼 표면들을 포함하는 1회-반사 프리폼 프리즘임―;
f. 상기 아이피스를 향하도록 구성된 사출 동공(302) ―상기 사출 동공을 통해, 사용자는 상기 가상 뷰가 상기 투시 뷰의 일부들을 가리는 상기 가상 뷰와 투시 뷰의 결합된 뷰를 관찰함―; 및
g. 상기 외부 장면으로부터의 광을 상기 대물 광학체로 반사하도록 구성된 루프 미러(325) ―상기 루프 미러는, 뷰어(viewer)에게 제공되는 투시 뷰와 상기 외부 장면 간의 패리티를 유지하기 위해, 상기 투시 이미지를 복구시키기도록 추가의 반사를 추가로 행함(add)―를 포함하며,
상기 루프 미러(325)는 상기 디스플레이의 전방 층(315) 상에 배치되고, 상기 대물 광학체(320)는 상기 디스플레이의 전방 층(315) 상에 배치되고, 상기 공간적 광 변조기(340)는 상기 디스플레이의 후방 층(317) 상에, 상기 투시 경로의 중간 이미지 평면에 또는 그 근처에서, 상기 빔 분할기(330)의 일측을 향하도록 배치되고,
상기 마이크로디스플레이(350)는 상기 디스플레이의 후방 층(317) 상에서 상기 빔 분할기(330)의 다른 측을 향하도록 배치되고, 상기 빔 분할기(330)는 상기 투시 경로(307)가 상기 가상 뷰 경로(305)와 합쳐지고 합쳐진 경로로부터의 광이 상기 아이피스(310)를 향하도록 배치되고, 상기 아이피스(210)는 상기 디스플레이의 후방 층(317) 상에 배치되며,
상기 미러(325)에 의해 반사된 외부 장면으로부터의 입사하는 광은 상기 굴절성 표면(S4)을 통해 상기 대물 광학체(320)로 들어가고, 이후 상기 반사성 표면(S5)에 의해 반사되고, 상기 굴절성 표면(S6)을 통해 상기 대물 광학체(320)를 나와서 상기 공간적 광 변조기(340) 상의 그의 초점 평면에서 중간 이미지를 형성하며,
상기 공간적 광 변조기(340)는 투시 뷰의 일부들을 가리기 위해 상기 투시 경로 내의 광을 변조하고, 상기 공간적 광 변조기는 변조된 광을 상기 빔 분할기(330)로 반사하고, 상기 마이크로디스플레이(350)로부터의 광이 상기 빔 분할기(330)로 들어가고, 상기 빔 분할기(330)는 상기 투시 경로(307)에서의 변조된 광을 상기 가상 뷰 경로(305)의 광과 합쳐서 감상을 위해 상기 아이피스(310)를 향해서 구부리고, 상기 빔 분할기로부터의 광은 상기 굴절성 표면(S3)을 통해 상기 아이피스(310)로 들어가고, 이후 상기 반사성 표면(S2)에 의해서 반사되고, 상기 굴절성 표면(S1)을 통해 상기 아이피스(310)를 나가서 상기 사출 동공(302)에 도달하며, 뷰어의 눈은 가상 뷰와 변조된 투시 뷰의 결합된 뷰를 보도록 정렬되는, 컴팩트한 광학적 투시 머리-장착형 디스플레이. - 투시 경로의 불투명도가 변조될 수 있고 가상 뷰가 투시 뷰의 일부들을 가릴 수 있고 또한 상기 투시 뷰가 상기 가상 뷰의 일부들을 가릴 수도 있도록, 투시 경로(507)를 가상 뷰 경로(505)와 결합할 수 있는, 컴팩트한 광학적 투시 머리-장착형 디스플레이(500)로서,
a. 사용자에 의해 감상될 이미지를 생성하기 위한 마이크로디스플레이(550) ―상기 마이크로디스플레이는, 자신과 연관된 가상 뷰 경로(505)를 가짐―;
b. 가려질 상기 투시 뷰의 일부들을 차단하도록 외부 장면으로부터의 광을 수정하기 위한 투과-타입 공간적 광 변조기(540) ―상기 공간적 광 변조기는, 자신과 연관된 투시 경로(507)를 가짐―;
c. 외부 장면을 향하고, 상기 외부 장면으로부터 입사되는 광을 수용하고 상기 광을 상기 공간적 광 변조기(540) 상으로 집속하도록 구성된 대물 광학체(520) ―상기 대물 광학체는, 굴절성 표면(S4), 반사성 표면(S5) 및 굴절성 표면(S6)의 3개의 광학적 프리폼 표면들을 포함하는 1회-반사 프리폼 프리즘임―;
d. 마이크로디스플레이(550)로부터 디지털방식으로 생성된 가상 이미지와 상기 공간적 광 변조기로부터 전달되는 외부 장면의 변조된 투시 이미지를 합쳐서, 결합된 이미지를 형성하도록 구성된 빔 분할기(530);
e. 상기 결합된 이미지를 확대하도록 구성된 아이피스(510) ―상기 아이피스는, 굴절성 표면(S1), 반사성 표면(S2), 반사성 표면(S1') 및 굴절성 표면(S3)의 3개의 광학적 프리폼 표면들을 포함하는 2회-반사 프리폼 프리즘임―; 및
f. 상기 아이피스를 향하도록 구성된 사출 동공(502) ―상기 사출 동공을 통해, 사용자는 상기 가상 뷰가 상기 투시 뷰의 일부들을 가리는 상기 가상 뷰와 투시 뷰의 결합된 뷰를 관찰함―; 및
g. 상기 대물 광학체로부터 광을 상기 공간적 광 변조기로 반사하도록 구성된 루프 미러(527) ―상기 루프 미러는 뷰어에게 제공되는 투시 뷰와 상기 외부 장면 간의 패리티를 유지하도록, 상기 투시 뷰를 복구시키기 위해서 추가의 반사를 추가로 행함(add)―을 포함하며,
상기 대물 광학체(520)는 상기 디스플레이의 전방 층(515) 상에 배치되고, 상기 미러(527)는 상기 디스플레이의 전방 층(515) 상에 배치되고, 상기 공간적 광 변조기(540)는 상기 디스플레이의 후방 층(517) 상에, 상기 투시 경로의 중간 이미지 평면에 또는 그 근처에서, 상기 빔 분할기(530)와 상기 미러(527) 사이에 배치되고, 상기 마이크로디스플레이(550)는 상기 디스플레이의 후방 층(517) 상에서 상기 빔 분할기(530)의 다른 측을 향하도록 배치되고, 상기 빔 분할기(530)는 상기 투시 경로(507)가 상기 가상 뷰 경로(505)와 합쳐지고 합쳐진 경로로부터의 광이 상기 아이피스(510)를 향하도록 배치되고, 상기 아이피스(510)는 상기 디스플레이의 후방 층 상에 배치되고,
상기 외부 장면으로부터의 입사하는 광은 상기 굴절성 표면(S4)을 통해 상기 대물 광학체(520)로 들어가고, 이후 상기 반사성 표면(S5)에 의해 반사되고, 상기 굴절성 표면(S6)을 통해 상기 대물 광학체(520)를 나오고, 상기 미러(527)에 의해 상기 후방 층(517)을 향해서 구부려지고, 상기 공간적 광 변조기(540) 상의 그의 초점 평면에서 중간 이미지를 형성하며,
상기 공간적 광 변조기(540)는 투시 뷰의 일부들을 가리기 위해 상기 투시 경로 내의 광을 변조하고, 상기 공간적 광 변조기는 변조된 광을 상기 스플리터(530)로 투과시키고, 상기 마이크로디스플레이(550)로부터의 광이 상기 빔 분할기(530)로 들어가고, 상기 빔 분할기(530)는 상기 투시 경로(507)에서의 변조된 광을 상기 가상 뷰 경로(505)의 광과 합쳐서 감상을 위해 상기 아이피스(310)를 향해서 구부리고, 상기 빔 분할기로부터의 광은 상기 굴절성 표면(S3)을 통해 상기 아이피스(510)로 들어가고, 이후 상기 반사성 표면들(S1', S2)에 의해 연속적으로 반사되고, 상기 굴절성 표면(S1)을 통해 상기 아이피스(510)를 나와서 상기 사출 동공(502)에 도달하며, 뷰어의 눈은 가상 뷰와 변조된 투시 뷰의 결합된 뷰를 보도록 정렬되는, 컴팩트한 광학적 투시 머리-장착형 디스플레이. - 제 1 항에 있어서,
상기 굴절성 표면(S1) 및 상기 반사성 표면(S1')은 동일한 물리적 표면들이며, 동일한 세트의 표면 규정들을 갖는, 컴팩트한 광학적 투시 머리-장착형 디스플레이. - 투시 경로의 불투명도가 변조될 수 있고 가상 뷰가 투시 뷰의 일부들을 가릴 수 있고 또한 상기 투시 뷰가 상기 가상 뷰의 일부들을 가릴 수도 있도록, 투시 경로(407)를 가상 뷰 경로(405)와 결합할 수 있는 컴팩트한 광학적 투시 머리-장착형 디스플레이(400)로서,
a. 사용자에 의해 감상될 이미지를 생성하기 위한 마이크로디스플레이(450) ―상기 마이크로디스플레이는, 자신과 연관된 가상 뷰 경로(405)를 가짐―;
b. 가려질 상기 투시 뷰의 일부들을 차단하도록 외부 장면으로부터의 광을 수정하기 위한 반사-타입 공간적 광 변조기(440) ―상기 공간적 광 변조기는, 자신과 연관된 투시 경로(407)를 가짐―;
c. 외부 장면을 향하며, 상기 외부 장면으로부터 입사되는 광을 수용하고 상기 광을 상기 공간적 광 변조기(440) 상으로 집속하도록 구성된 대물 광학체(420) ―상기 대물 광학체는, 굴절성 표면(S4), 반사성 표면들(S5, S4', S5', S6) 및 굴절성 표면(S7)의 6개의 광학적 프리폼 표면들을 포함하는 4회-반사 프리폼 프리즘임―;
d. 마이크로디스플레이(450)로부터 디지털방식으로 생성된 가상 이미지와 공간적 광 변조기(440)로부터 전달되는 외부 장면의 변조된 투시 이미지를 합쳐서, 결합된 이미지를 형성하도록 구성된 빔 분할기(430);
e. 상기 결합된 이미지를 확대하도록 구성된 아이피스(410) ―상기 아이피스는, 굴절성 표면(S1), 반사성 표면(S2), 반사성 표면(S1') 및 굴절성 표면(S3)인 4개의 광학적 프리폼 표면들을 포함하는 2회-반사 프리폼 프리즘임―; 및
f. 상기 아이피스를 향하도록 구성된 사출 동공(402) ―상기 사출 동공을 통해, 사용자는 상기 가상 뷰가 상기 투시 뷰의 일부들을 가리는 상기 가상 뷰와 투시 뷰의 결합된 뷰를 관찰함―을 포함하며,
상기 대물 광학체(420)는 상기 디스플레이의 전방 층(415) 상에 배치되고, 상기 공간적 광 변조기(440)는 상기 디스플레이의 후방 층(417) 상에, 상기 투시 경로의 중간 이미지 평면에 또는 그 근처에서, 상기 빔 분할기(430)의 일측을 향하도록 배치되고, 상기 마이크로디스플레이(450)는 상기 디스플레이의 후방 층(417) 상에서 상기 빔 분할기(430)의 다른 측을 향하도록 배치되고, 상기 빔 분할기(430)는 상기 투시 경로(407)가 상기 가상 뷰 경로(405)와 합쳐지고 합쳐진 경로로부터의 광이 상기 아이피스(410)를 향하도록 배치되고, 상기 아이피스(410)는 상기 디스플레이의 후방 층(417) 상에 배치되며,
상기 외부 장면으로부터의 입사하는 광은 상기 굴절성 표면(S4)을 통해 상기 대물 광학체(420)로 들어가고, 이후 상기 반사성 표면들(S5,S4',S5',S6)에 의해 연속하여 반사되고, 상기 굴절성 표면(S7)을 통해 상기 대물 광학체(420)를 나오고, 상기 입사하는 광은 상기 공간적 광 변조기(440) 상의 그의 초점 평면에서 중간 이미지를 형성하며,
상기 공간적 광 변조기는 투시 뷰의 일부들을 가리도록 상기 투시 경로 내의 광을 변조하고, 상기 공간적 광 변조기는 변조된 광을 상기 빔 분할기(430)로 반사하고, 상기 마이크로디스플레이(450)로부터의 광이 상기 빔 분할기(430)로 들어가고, 상기 빔 분할기(430)는 상기 투시 경로(407)에서의 변조된 광을 상기 가상 뷰 경로(405)의 광과 합쳐서 감상을 위해 상기 아이피스(410)를 향해서 구부리고, 상기 빔 분할기로부터의 광은 상기 굴절성 표면(S3)을 통해 상기 아이피스(410)로 들어가고, 이후 상기 반사성 표면들(S1' 및 S2)에 의해 연속하여 반사되고, 상기 굴절성 표면(S1)을 통해 상기 아이피스(410)를 나와서 상기 사출 동공(402)에 도달하며, 뷰어의 눈은 가상 뷰와 변조된 투시 뷰의 결합된 뷰를 보도록 정렬되는, 컴팩트한 광학적 투시 머리-장착형 디스플레이. - 제 4 항에 있어서,
상기 굴절성 표면(S4) 및 상기 반사성 표면(S4')은 동일한 물리적 표면들이며, 동일한 세트의 표면 규정들을 갖는, 컴팩트한 광학적 투시 머리-장착형 디스플레이. - 투시 경로의 불투명도가 변조될 수 있고 가상 뷰가 투시 뷰의 일부들을 가릴 수 있고 또한 상기 투시 뷰가 상기 가상 뷰의 일부들을 가릴 수도 있도록, 투시 경로(607)를 가상 뷰 경로(605)와 결합할 수 있는, 컴팩트한 광학적 투시 머리-장착형 디스플레이(600)로서,
a. 사용자에 의해 감상될 이미지를 생성하기 위한 마이크로디스플레이(650) ―상기 마이크로디스플레이는, 자신과 연관된 가상 뷰 경로(605)를 갖는, 상기 마이크로디스플레이(650)―;
b. 가려질 상기 투시 뷰의 일부들을 차단하도록 외부 장면으로부터의 광을 수정하기 위한 투과-타입 공간적 광 변조기(640) ―상기 공간적 광 변조기는 자신과 연관된 투시 경로(607)를 가짐―;
c. 외부 장면을 향하며, 상기 외부 장면으로부터 입사되는 광을 수용하고 상기 광을 상기 공간적 광 변조기(640) 상으로 집속하도록 구성된 대물 광학체(620) ―상기 대물 광학체(620)는, 굴절성 표면(S4), 반사성 표면들(S5, S4', S6) 및 굴절성 표면(S7)의 5개의 광학적 프리폼 표면들을 포함하는 3회-반사 프리폼 프리즘이고, 상기 대물 광학체는 상기 대물 광학체 내에서 중간 이미지를 형성하도록 구성됨―;
d. 마이크로디스플레이(650)로부터 디지털방식으로 생성된 가상 이미지와 상기 공간적 광 변조기(640)로부터 전달되는 외부 장면의 변조된 투시 이미지를 합쳐서, 결합된 이미지를 형성하도록 구성된 빔 분할기(630);
e. 상기 결합된 이미지를 확대하도록 구성된 아이피스(610) ―상기 아이피스(610)는, 굴절성 표면(S1), 반사성 표면(S2), 반사성 표면(S1') 및 굴절성 표면(S3)의 4개의 광학적 프리폼 표면들을 포함하는 2회-반사 프리폼 프리즘임―; 및
f. 상기 아이피스를 향하도록 구성된 사출 동공(602) ―상기 사출 동공을 통해, 사용자는 상기 가상 뷰가 상기 투시 뷰의 일부들을 가리는 상기 가상 뷰와 투시 뷰의 결합된 뷰를 관찰함―을 포함하며,
상기 대물 광학체(620)는 상기 디스플레이의 전방 층(615) 상에 배치되고, 상기 공간적 광 변조기(640)는 상기 디스플레이의 후방 층(617) 상에, 상기 투시 경로의 중간 이미지 평면에 또는 그 근처에서, 상기 빔 분할기(630)의 일측을 향하도록 배치되고, 상기 마이크로디스플레이(650)는 상기 디스플레이의 후방 층(617) 상에서 상기 빔 분할기(630)의 다른 측을 향하도록 배치되고, 상기 빔 분할기(630)는 상기 투시 경로(607)가 상기 가상 뷰 경로(605)와 합쳐지고 합쳐진 경로로부터의 광이 상기 아이피스(610)를 향하도록 배치되고, 상기 아이피스(610)는 상기 디스플레이의 후방 층(617) 상에 배치되고,
상기 외부 장면으로부터의 입사하는 광은 상기 굴절성 표면(S4)을 통해 상기 대물 광학체(620)로 들어가고, 상기 반사성 표면들(S5,S4',S6)에 의해 연속적으로 반사되고, 상기 굴절성 표면(S7)을 통해 상기 대물 광학체(620)를 나오고, 상기 입사하는 광은 상기 공간적 광 변조기(640) 상의 그의 초점 평면에서 중간 이미지를 형성하며,
상기 공간적 광 변조기는 투시 뷰의 일부들을 가리도록 상기 투시 경로 내의 광을 변조하고, 상기 공간적 광 변조기는 변조된 광을 상기 빔 분할기(630)로 투과시키고, 상기 마이크로디스플레이(650)로부터의 광이 상기 빔 분할기(630)로 들어가고, 상기 빔 분할기(630)는 상기 투시 경로(607)에서의 변조된 광을 상기 가상 뷰 경로(605)의 광과 합쳐서 감상을 위해 상기 아이피스(610)를 향해서 구부리고, 상기 빔 분할기로부터의 광은 상기 굴절성 표면(S3)을 통해 상기 아이피스(610)로 들어가고, 이후 상기 반사성 표면들(S1', S2)에 의해 연속적으로 반사되고, 상기 굴절성 표면(S1)을 통해 상기 아이피스(610)를 나와서 상기 사출 동공(602)에 도달하며, 뷰어의 눈은 가상 뷰와 변조된 투시 뷰의 결합된 뷰를 보도록 정렬되는, 컴팩트한 광학적 투시 머리-장착형 디스플레이. - 제 6 항에 있어서,
상기 굴절성 표면(S1) 및 상기 반사성 표면(S1')은 동일한 물리적 표면들일 수 있으며, 동일한 세트의 표면 규정들을 갖는, 컴팩트한 광학적 투시 머리-장착형 디스플레이. - 제 6 항에 있어서,
상기 굴절성 표면(S4) 및 상기 반사성 표면(S4')은 동일한 물리적 표면들이며, 동일한 세트의 표면 규정들을 갖는, 컴팩트한 광학적 투시 머리-장착형 디스플레이. - 투시 경로의 불투명도가 변조될 수 있고 가상 뷰가 투시 뷰의 일부들을 가릴 수 있고 또한 상기 투시 뷰가 상기 가상 뷰의 일부들을 가릴 수도 있도록, 투시 경로(707)를 가상 뷰 경로(705)와 결합할 수 있는, 컴팩트한 광학적 투시 머리-장착형 디스플레이(700)로서,
a. 사용자에 의해 감상될 이미지를 생성하기 위한 마이크로디스플레이(750) ―상기 마이크로디스플레이는, 자신과 연관된 가상 뷰 경로(705)를 가짐―;
b. 가려질 상기 투시 뷰의 일부들을 차단하도록 외부 장면으로부터의 광을 수정하기 위한 반사-타입 공간적 광 변조기(740) ―상기 공간적 광 변조기는, 자신과 연관된 투시 경로(707)를 가짐―;
c. 외부 장면을 향하며, 상기 외부 장면으로부터 입사되는 광을 수용하고 상기 광을 상기 공간적 광 변조기(740) 상으로 집속하도록 구성된 대물 광학체(720) ―상기 대물 광학체(720)는, 굴절성 표면(S4), 반사성 표면들(S5, S4') 및 굴절성 표면(S6)의 4개의 광학적 프리폼 표면들을 포함하는 2회-반사 프리폼 프리즘임―;
d. 미러(790) 상에 상기 투시 경로를 반사하도록 구성된 제 1 빔 분할기(780);
e. 상기 공간적 광 변조기(740) 상에 다른 중간 이미지를 생성하도록 구성된 릴레이 렌즈(770);
f. 마이크로디스플레이(750)로부터의 가상 이미지와 상기 공간적 광 변조기(740)로부터 전달되는 외부 장면의 변조된 투시 이미지를 합쳐서, 결합된 이미지를 형성하도록 구성된 제 2 빔 분할기(730);
g. 상기 결합된 이미지를 확대하도록 구성된 아이피스(710) ―상기 아이피스(710)는, 굴절성 표면(S1), 반사성 표면(S2), 반사성 표면(S1') 및 굴절성 표면(S3)인 4개의 광학적 프리폼 표면들인 포함하는 2회-반사 프리폼 프리즘임―;
h. 상기 아이피스를 향하도록 구성된 사출 동공(702) ―상기 사출 동공을 통해, 사용자는 상기 가상 뷰가 상기 투시 뷰의 일부들을 가리는 상기 가상 뷰와 투시 뷰의 결합된 뷰를 관찰함―;
i. 상기 투시 경로를 접는 미러(790)를 포함하며,
상기 대물 광학체(720)는 상기 디스플레이의 전방 층(715) 상에 배치되고, 상기 제 1 빔 스플리터(780)는 상기 디스플레이의 전방 층 상에 배치되고, 상기 미러(790)는 상기 디스플레이의 전방 층 상에서, 상기 대물 광학체(720)의 초점 평면에서 상기 공간적 광 변조기를 향하게 배치되고, 공간적 광 변조기(740)는 상기 디스플레이의 후방 층(717) 상에, 상기 제 2 빔 분할기(730)를 향하게 배치되며, 상기 릴레이는 상기 제 1 빔 분할기와 상기 제 2 빔 분할기 사이에 배치되고, 상기 마이크로디스플레이(750)는 상기 디스플레이의 후방 층 상에서 상기 제 2 빔 분할기(730)를 향하도록 배치되고, 상기 제 2 빔 분할기(730)는 상기 빔 분할기로부터의 광 투과 방향이 상기 아이피스(710)를 향하게 배치되며, 상기 아이피스(710)는 상기 디스플레이의 후방 층 상에 배치되며,
상기 외부 장면으로부터의 입사하는 광은 상기 굴절성 표면(S4)을 통해 상기 대물 광학체(720)로 들어가고, 상기 반사성 표면들(S5,S4')에 의해 연속적으로 반사되고, 상기 굴절성 표면(S6)을 통해 상기 대물 광학체(720)를 나오고, 상기 입사하는 광은 상기 제 1 빔 분할기(780)에 의해 상기 미러(790) 상으로 반사되고, 상기 입사하는 광은 중간 이미지를 형성하고, 상기 미러는 상기 광을 상기 전방 층으로부터 상기 릴레이 렌즈(770)로 반사하고, 상기 릴레이 렌즈(770)는 상기 공간적 광 변조기(740) 상에 다른 중간 이미지를 형성하고,
상기 공간적 광 변조기는 가려질 광을 제거하기 위해 상기 투시 경로 내의 광을 변조하고, 상기 공간적 광 변조기는 변조된 광을 제 2 빔 분할기(730)로 반사하고, 상기 마이크로디스플레이(750)로부터의 광이 상기 제 2 빔 분할기(730)로 들어가고, 상기 제 2 빔 분할기(730)는 상기 투시 경로(707)에서의 변조된 광을 상기 가상 뷰 경로(705)의 광과 합쳐서 감상을 위해 상기 아이피스(710)를 향해서 구부리고, 상기 제 2 빔 분할기로부터의 광은 상기 굴절성 표면(S3)을 통해 상기 아이피스(710)로 들어가고, 이후 상기 반사성 표면들(S1', S2)에 의해 연속적으로 반사되고, 상기 굴절성 표면(S1)을 통해 상기 아이피스(710)를 나와서 상기 사출 동공(702)에 도달하며, 뷰어의 눈은 가상 뷰와 변조된 투시 뷰의 결합된 뷰를 보도록 정렬되는, 컴팩트한 광학적 투시 머리-장착형 디스플레이.
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201261620581P | 2012-04-05 | 2012-04-05 | |
US201261620574P | 2012-04-05 | 2012-04-05 | |
US61/620,581 | 2012-04-05 | ||
US61/620,574 | 2012-04-05 | ||
PCT/US2013/035486 WO2014011266A2 (en) | 2012-04-05 | 2013-04-05 | Apparatus for optical see-through head mounted display with mutual occlusion and opaqueness control capability |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020147031031A Division KR102188748B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20180038583A true KR20180038583A (ko) | 2018-04-16 |
KR102099156B1 KR102099156B1 (ko) | 2020-04-09 |
Family
ID=49301051
Family Applications (11)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020217005871A KR102306729B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020147031167A KR102022719B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020187009611A KR102028732B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020197028502A KR102095330B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020207008629A KR102223290B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020217030170A KR102404537B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020207034778A KR102345444B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
KR1020187009715A KR102124350B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
KR1020187009709A KR102099156B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
KR1020147031031A KR102188748B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
KR1020187009706A KR102129330B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
Family Applications Before (8)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020217005871A KR102306729B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020147031167A KR102022719B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020187009611A KR102028732B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020197028502A KR102095330B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020207008629A KR102223290B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020217030170A KR102404537B1 (ko) | 2012-04-05 | 2013-04-04 | 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들 |
KR1020207034778A KR102345444B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
KR1020187009715A KR102124350B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020147031031A KR102188748B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
KR1020187009706A KR102129330B1 (ko) | 2012-04-05 | 2013-04-05 | 상호 가림 및 불투명도 제어 능력을 가진 광학적 투시 헤드-장착형 디스플레이를 위한 장치 |
Country Status (12)
Country | Link |
---|---|
US (13) | US9851563B2 (ko) |
EP (5) | EP3608717B1 (ko) |
JP (9) | JP6176747B2 (ko) |
KR (11) | KR102306729B1 (ko) |
CN (5) | CN108391033B (ko) |
AU (4) | AU2013243380B2 (ko) |
BR (2) | BR112014024941A2 (ko) |
CA (4) | CA3111134A1 (ko) |
IL (6) | IL308962A (ko) |
NZ (6) | NZ700887A (ko) |
RU (2) | RU2015156050A (ko) |
WO (2) | WO2013152205A1 (ko) |
Families Citing this family (470)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB0522968D0 (en) | 2005-11-11 | 2005-12-21 | Popovich Milan M | Holographic illumination device |
GB0718706D0 (en) | 2007-09-25 | 2007-11-07 | Creative Physics Ltd | Method and apparatus for reducing laser speckle |
US9158116B1 (en) | 2014-04-25 | 2015-10-13 | Osterhout Group, Inc. | Temple and ear horn assembly for headworn computer |
US9229233B2 (en) | 2014-02-11 | 2016-01-05 | Osterhout Group, Inc. | Micro Doppler presentations in head worn computing |
US9400390B2 (en) | 2014-01-24 | 2016-07-26 | Osterhout Group, Inc. | Peripheral lighting for head worn computing |
US20150277120A1 (en) | 2014-01-21 | 2015-10-01 | Osterhout Group, Inc. | Optical configurations for head worn computing |
US9366867B2 (en) | 2014-07-08 | 2016-06-14 | Osterhout Group, Inc. | Optical systems for see-through displays |
US9298007B2 (en) | 2014-01-21 | 2016-03-29 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9952664B2 (en) | 2014-01-21 | 2018-04-24 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US20150205111A1 (en) | 2014-01-21 | 2015-07-23 | Osterhout Group, Inc. | Optical configurations for head worn computing |
US9965681B2 (en) | 2008-12-16 | 2018-05-08 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9715112B2 (en) | 2014-01-21 | 2017-07-25 | Osterhout Group, Inc. | Suppression of stray light in head worn computing |
US11726332B2 (en) | 2009-04-27 | 2023-08-15 | Digilens Inc. | Diffractive projection apparatus |
US9335604B2 (en) | 2013-12-11 | 2016-05-10 | Milan Momcilo Popovich | Holographic waveguide display |
WO2012136970A1 (en) | 2011-04-07 | 2012-10-11 | Milan Momcilo Popovich | Laser despeckler based on angular diversity |
EP2748670B1 (en) | 2011-08-24 | 2015-11-18 | Rockwell Collins, Inc. | Wearable data display |
WO2016020630A2 (en) | 2014-08-08 | 2016-02-11 | Milan Momcilo Popovich | Waveguide laser illuminator incorporating a despeckler |
US10670876B2 (en) | 2011-08-24 | 2020-06-02 | Digilens Inc. | Waveguide laser illuminator incorporating a despeckler |
WO2013102759A2 (en) | 2012-01-06 | 2013-07-11 | Milan Momcilo Popovich | Contact image sensor using switchable bragg gratings |
NZ700887A (en) * | 2012-04-05 | 2016-11-25 | Magic Leap Inc | Wide-field of view (fov) imaging devices with active foveation capability |
WO2013163347A1 (en) | 2012-04-25 | 2013-10-31 | Rockwell Collins, Inc. | Holographic wide angle display |
US9456744B2 (en) | 2012-05-11 | 2016-10-04 | Digilens, Inc. | Apparatus for eye tracking |
US9933684B2 (en) * | 2012-11-16 | 2018-04-03 | Rockwell Collins, Inc. | Transparent waveguide display providing upper and lower fields of view having a specific light output aperture configuration |
WO2014113455A1 (en) | 2013-01-15 | 2014-07-24 | The University Of North Carolina At Chapel Hill | Methods, systems, and computer readable media for generating an augmented scene display |
WO2014188149A1 (en) | 2013-05-20 | 2014-11-27 | Milan Momcilo Popovich | Holographic waveguide eye tracker |
US10228561B2 (en) * | 2013-06-25 | 2019-03-12 | Microsoft Technology Licensing, Llc | Eye-tracking system using a freeform prism and gaze-detection light |
US9625723B2 (en) * | 2013-06-25 | 2017-04-18 | Microsoft Technology Licensing, Llc | Eye-tracking system using a freeform prism |
WO2015015138A1 (en) | 2013-07-31 | 2015-02-05 | Milan Momcilo Popovich | Method and apparatus for contact image sensing |
WO2015095737A2 (en) | 2013-12-19 | 2015-06-25 | The University Of North Carolina At Chapel Hill | Optical see-through near-eye display using point light source backlight |
US9671613B2 (en) | 2014-09-26 | 2017-06-06 | Osterhout Group, Inc. | See-through computer display systems |
US9448409B2 (en) | 2014-11-26 | 2016-09-20 | Osterhout Group, Inc. | See-through computer display systems |
US9746686B2 (en) | 2014-05-19 | 2017-08-29 | Osterhout Group, Inc. | Content position calibration in head worn computing |
US9594246B2 (en) | 2014-01-21 | 2017-03-14 | Osterhout Group, Inc. | See-through computer display systems |
US9529195B2 (en) | 2014-01-21 | 2016-12-27 | Osterhout Group, Inc. | See-through computer display systems |
US11227294B2 (en) | 2014-04-03 | 2022-01-18 | Mentor Acquisition One, Llc | Sight information collection in head worn computing |
US20150277118A1 (en) | 2014-03-28 | 2015-10-01 | Osterhout Group, Inc. | Sensor dependent content position in head worn computing |
US11103122B2 (en) | 2014-07-15 | 2021-08-31 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
US10684687B2 (en) | 2014-12-03 | 2020-06-16 | Mentor Acquisition One, Llc | See-through computer display systems |
US10254856B2 (en) | 2014-01-17 | 2019-04-09 | Osterhout Group, Inc. | External user interface for head worn computing |
US9841599B2 (en) | 2014-06-05 | 2017-12-12 | Osterhout Group, Inc. | Optical configurations for head-worn see-through displays |
US9366868B2 (en) | 2014-09-26 | 2016-06-14 | Osterhout Group, Inc. | See-through computer display systems |
US9829707B2 (en) | 2014-08-12 | 2017-11-28 | Osterhout Group, Inc. | Measuring content brightness in head worn computing |
US10649220B2 (en) | 2014-06-09 | 2020-05-12 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
US20150228119A1 (en) | 2014-02-11 | 2015-08-13 | Osterhout Group, Inc. | Spatial location presentation in head worn computing |
US10191279B2 (en) | 2014-03-17 | 2019-01-29 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9810906B2 (en) | 2014-06-17 | 2017-11-07 | Osterhout Group, Inc. | External user interface for head worn computing |
US9575321B2 (en) | 2014-06-09 | 2017-02-21 | Osterhout Group, Inc. | Content presentation in head worn computing |
US20160019715A1 (en) | 2014-07-15 | 2016-01-21 | Osterhout Group, Inc. | Content presentation in head worn computing |
US9939934B2 (en) | 2014-01-17 | 2018-04-10 | Osterhout Group, Inc. | External user interface for head worn computing |
US9299194B2 (en) | 2014-02-14 | 2016-03-29 | Osterhout Group, Inc. | Secure sharing in head worn computing |
US9532714B2 (en) | 2014-01-21 | 2017-01-03 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9811152B2 (en) | 2014-01-21 | 2017-11-07 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9740280B2 (en) | 2014-01-21 | 2017-08-22 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US11737666B2 (en) | 2014-01-21 | 2023-08-29 | Mentor Acquisition One, Llc | Eye imaging in head worn computing |
US9310610B2 (en) | 2014-01-21 | 2016-04-12 | Osterhout Group, Inc. | See-through computer display systems |
US11487110B2 (en) | 2014-01-21 | 2022-11-01 | Mentor Acquisition One, Llc | Eye imaging in head worn computing |
US20150205135A1 (en) | 2014-01-21 | 2015-07-23 | Osterhout Group, Inc. | See-through computer display systems |
US9494800B2 (en) | 2014-01-21 | 2016-11-15 | Osterhout Group, Inc. | See-through computer display systems |
US9836122B2 (en) | 2014-01-21 | 2017-12-05 | Osterhout Group, Inc. | Eye glint imaging in see-through computer display systems |
US11892644B2 (en) | 2014-01-21 | 2024-02-06 | Mentor Acquisition One, Llc | See-through computer display systems |
US9753288B2 (en) | 2014-01-21 | 2017-09-05 | Osterhout Group, Inc. | See-through computer display systems |
US9523856B2 (en) | 2014-01-21 | 2016-12-20 | Osterhout Group, Inc. | See-through computer display systems |
US11669163B2 (en) | 2014-01-21 | 2023-06-06 | Mentor Acquisition One, Llc | Eye glint imaging in see-through computer display systems |
US9651784B2 (en) | 2014-01-21 | 2017-05-16 | Osterhout Group, Inc. | See-through computer display systems |
US9766463B2 (en) | 2014-01-21 | 2017-09-19 | Osterhout Group, Inc. | See-through computer display systems |
US9846308B2 (en) | 2014-01-24 | 2017-12-19 | Osterhout Group, Inc. | Haptic systems for head-worn computers |
US9852545B2 (en) | 2014-02-11 | 2017-12-26 | Osterhout Group, Inc. | Spatial location presentation in head worn computing |
US9401540B2 (en) | 2014-02-11 | 2016-07-26 | Osterhout Group, Inc. | Spatial location presentation in head worn computing |
US10430985B2 (en) | 2014-03-14 | 2019-10-01 | Magic Leap, Inc. | Augmented reality systems and methods utilizing reflections |
US11138793B2 (en) | 2014-03-14 | 2021-10-05 | Magic Leap, Inc. | Multi-depth plane display system with reduced switching between depth planes |
CN103901615B (zh) * | 2014-03-14 | 2016-05-25 | 北京理工大学 | 小凹成像光学系统 |
US20160187651A1 (en) | 2014-03-28 | 2016-06-30 | Osterhout Group, Inc. | Safety for a vehicle operator with an hmd |
US10529359B2 (en) | 2014-04-17 | 2020-01-07 | Microsoft Technology Licensing, Llc | Conversation detection |
US9922667B2 (en) | 2014-04-17 | 2018-03-20 | Microsoft Technology Licensing, Llc | Conversation, presence and context detection for hologram suppression |
US10853589B2 (en) | 2014-04-25 | 2020-12-01 | Mentor Acquisition One, Llc | Language translation with head-worn computing |
US9651787B2 (en) | 2014-04-25 | 2017-05-16 | Osterhout Group, Inc. | Speaker assembly for headworn computer |
US20150309534A1 (en) | 2014-04-25 | 2015-10-29 | Osterhout Group, Inc. | Ear horn assembly for headworn computer |
US9423842B2 (en) | 2014-09-18 | 2016-08-23 | Osterhout Group, Inc. | Thermal management for head-worn computer |
US9672210B2 (en) | 2014-04-25 | 2017-06-06 | Osterhout Group, Inc. | Language translation with head-worn computing |
US20160137312A1 (en) | 2014-05-06 | 2016-05-19 | Osterhout Group, Inc. | Unmanned aerial vehicle launch system |
CN104102018B (zh) * | 2014-05-08 | 2016-10-05 | 北京理工大学 | 双小凹局部高分辨率成像系统 |
CN104007559B (zh) * | 2014-05-08 | 2017-05-17 | 北京理工大学 | 含局部超分辨扫描的小凹成像系统 |
US10663740B2 (en) | 2014-06-09 | 2020-05-26 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
US10359736B2 (en) | 2014-08-08 | 2019-07-23 | Digilens Inc. | Method for holographic mastering and replication |
WO2016042283A1 (en) | 2014-09-19 | 2016-03-24 | Milan Momcilo Popovich | Method and apparatus for generating input images for holographic waveguide displays |
US10423222B2 (en) | 2014-09-26 | 2019-09-24 | Digilens Inc. | Holographic waveguide optical tracker |
WO2016054079A1 (en) | 2014-09-29 | 2016-04-07 | Zyomed Corp. | Systems and methods for blood glucose and other analyte detection and measurement using collision computing |
CN107111204B (zh) | 2014-09-29 | 2021-02-09 | 奇跃公司 | 用于从波导中输出不同波长光的架构和方法 |
US9684172B2 (en) | 2014-12-03 | 2017-06-20 | Osterhout Group, Inc. | Head worn computer display systems |
USD743963S1 (en) | 2014-12-22 | 2015-11-24 | Osterhout Group, Inc. | Air mouse |
USD751552S1 (en) | 2014-12-31 | 2016-03-15 | Osterhout Group, Inc. | Computer glasses |
USD753114S1 (en) | 2015-01-05 | 2016-04-05 | Osterhout Group, Inc. | Air mouse |
KR102329295B1 (ko) | 2015-01-09 | 2021-11-19 | 삼성디스플레이 주식회사 | 헤드 마운티드 디스플레이 장치 |
EP3245551B1 (en) | 2015-01-12 | 2019-09-18 | DigiLens Inc. | Waveguide light field displays |
US10437064B2 (en) | 2015-01-12 | 2019-10-08 | Digilens Inc. | Environmentally isolated waveguide display |
US10105049B2 (en) | 2015-01-16 | 2018-10-23 | Massachusetts Institute Of Technology | Methods and apparatus for anterior segment ocular imaging |
JP6867947B2 (ja) | 2015-01-20 | 2021-05-12 | ディジレンズ インコーポレイテッド | ホログラフィック導波路ライダー |
US9632226B2 (en) | 2015-02-12 | 2017-04-25 | Digilens Inc. | Waveguide grating device |
CN105988763B (zh) * | 2015-02-15 | 2019-10-29 | 联想(北京)有限公司 | 一种信息处理方法及装置 |
US10878775B2 (en) | 2015-02-17 | 2020-12-29 | Mentor Acquisition One, Llc | See-through computer display systems |
US20160239985A1 (en) | 2015-02-17 | 2016-08-18 | Osterhout Group, Inc. | See-through computer display systems |
WO2016146963A1 (en) | 2015-03-16 | 2016-09-22 | Popovich, Milan, Momcilo | Waveguide device incorporating a light pipe |
CN107530034A (zh) | 2015-03-16 | 2018-01-02 | 奇跃公司 | 增强现实脉冲血氧定量法 |
GB2536650A (en) | 2015-03-24 | 2016-09-28 | Augmedics Ltd | Method and system for combining video-based and optic-based augmented reality in a near eye display |
JP2016180955A (ja) * | 2015-03-25 | 2016-10-13 | 株式会社ソニー・インタラクティブエンタテインメント | ヘッドマウントディスプレイ、表示制御方法及び位置制御方法 |
US10591756B2 (en) | 2015-03-31 | 2020-03-17 | Digilens Inc. | Method and apparatus for contact image sensing |
CN106154640B (zh) * | 2015-03-31 | 2020-02-21 | 联想(北京)有限公司 | 显示组件和电子设备 |
US10274728B2 (en) * | 2015-05-18 | 2019-04-30 | Facebook Technologies, Llc | Stacked display panels for image enhancement |
KR102359038B1 (ko) | 2015-06-15 | 2022-02-04 | 매직 립, 인코포레이티드 | 멀티플렉싱된 광 스트림들을 인-커플링하기 위한 광학 엘리먼트들을 가진 디스플레이 시스템 |
US9977493B2 (en) | 2015-06-17 | 2018-05-22 | Microsoft Technology Licensing, Llc | Hybrid display system |
US10222619B2 (en) | 2015-07-12 | 2019-03-05 | Steven Sounyoung Yu | Head-worn image display apparatus for stereoscopic microsurgery |
US10139966B2 (en) | 2015-07-22 | 2018-11-27 | Osterhout Group, Inc. | External user interface for head worn computing |
CN108140259B (zh) | 2015-08-18 | 2022-06-14 | 奇跃公司 | 虚拟和增强现实系统和方法 |
US10089526B2 (en) | 2015-08-21 | 2018-10-02 | Magic Leap, Inc. | Eyelid shape estimation |
CN112836664A (zh) | 2015-08-21 | 2021-05-25 | 奇跃公司 | 使用眼睛姿态测量的眼睑形状估计 |
JP6430004B2 (ja) | 2015-09-03 | 2018-11-28 | スリーエム イノベイティブ プロパティズ カンパニー | 光学システム |
EP4254145A3 (en) | 2015-09-16 | 2023-11-01 | Magic Leap, Inc. | Head pose mixing of audio files |
WO2017053874A1 (en) | 2015-09-23 | 2017-03-30 | Datalogic ADC, Inc. | Imaging systems and methods for tracking objects |
CA2999261C (en) | 2015-09-23 | 2022-10-18 | Magic Leap, Inc. | Eye imaging with an off-axis imager |
US10690916B2 (en) | 2015-10-05 | 2020-06-23 | Digilens Inc. | Apparatus for providing waveguide displays with two-dimensional pupil expansion |
CN108369653B (zh) | 2015-10-16 | 2021-12-14 | 奇跃公司 | 使用眼睛特征的眼睛姿态识别 |
EP3862852A1 (en) | 2015-10-20 | 2021-08-11 | Magic Leap, Inc. | Selecting virtual objects in a three-dimensional space |
NZ742518A (en) | 2015-11-04 | 2019-08-30 | Magic Leap Inc | Dynamic display calibration based on eye-tracking |
US11231544B2 (en) | 2015-11-06 | 2022-01-25 | Magic Leap, Inc. | Metasurfaces for redirecting light and methods for fabricating |
CN105404005A (zh) * | 2015-12-10 | 2016-03-16 | 合肥虔视光电科技有限公司 | 用于增强现实的头戴显示器 |
US10466480B2 (en) | 2016-01-07 | 2019-11-05 | Magic Leap, Inc. | Virtual and augmented reality systems and methods having unequal numbers of component color images distributed across depth planes |
JP6952713B2 (ja) | 2016-01-19 | 2021-10-20 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 反射を利用する拡張現実システムおよび方法 |
CA3011637A1 (en) | 2016-01-19 | 2017-07-27 | Magic Leap, Inc. | Eye image collection, selection, and combination |
KR20180104056A (ko) | 2016-01-22 | 2018-09-19 | 코닝 인코포레이티드 | 와이드 필드 개인 디스플레이 |
EP3971874A1 (en) | 2016-01-29 | 2022-03-23 | Magic Leap, Inc. | Display for three-dimensional image |
US10459230B2 (en) | 2016-02-02 | 2019-10-29 | Disney Enterprises, Inc. | Compact augmented reality / virtual reality display |
EP3398007A1 (en) | 2016-02-04 | 2018-11-07 | DigiLens, Inc. | Holographic waveguide optical tracker |
US10850116B2 (en) | 2016-12-30 | 2020-12-01 | Mentor Acquisition One, Llc | Head-worn therapy device |
US10591728B2 (en) | 2016-03-02 | 2020-03-17 | Mentor Acquisition One, Llc | Optical systems for head-worn computers |
CN114137729A (zh) | 2016-02-24 | 2022-03-04 | 奇跃公司 | 具有低光泄漏的偏振分束器 |
CN114898675A (zh) | 2016-02-24 | 2022-08-12 | 奇跃公司 | 用于光发射器的低轮廓互连 |
EP3420601B1 (en) | 2016-02-26 | 2023-08-02 | Magic Leap, Inc. | Optical system |
EP3885803A1 (en) | 2016-02-26 | 2021-09-29 | Magic Leap, Inc. | Display system having a plurality of light pipes for a plurality of light emitters |
CN108700712B (zh) | 2016-02-29 | 2020-10-13 | 奇跃公司 | 虚拟和增强现实系统及方法 |
US10667981B2 (en) | 2016-02-29 | 2020-06-02 | Mentor Acquisition One, Llc | Reading assistance system for visually impaired |
KR20180117181A (ko) | 2016-03-01 | 2018-10-26 | 매직 립, 인코포레이티드 | 상이한 파장들의 광을 도파관들로 입력하기 위한 반사성 스위칭 디바이스 |
US9826299B1 (en) | 2016-08-22 | 2017-11-21 | Osterhout Group, Inc. | Speaker systems for head-worn computer systems |
US9880441B1 (en) | 2016-09-08 | 2018-01-30 | Osterhout Group, Inc. | Electrochromic systems for head-worn computer systems |
NZ756561A (en) | 2016-03-04 | 2023-04-28 | Magic Leap Inc | Current drain reduction in ar/vr display systems |
NZ746021A (en) | 2016-03-07 | 2020-02-28 | Magic Leap Inc | Blue light adjustment for biometric security |
KR102530558B1 (ko) * | 2016-03-16 | 2023-05-09 | 삼성전자주식회사 | 투시형 디스플레이 장치 |
US10867314B2 (en) | 2016-03-22 | 2020-12-15 | Magic Leap, Inc. | Head mounted display system configured to exchange biometric information |
CN105744132B (zh) * | 2016-03-23 | 2020-01-03 | 捷开通讯(深圳)有限公司 | 全景图像拍摄的光学镜头配件 |
CN108780224B (zh) | 2016-03-24 | 2021-08-03 | 迪吉伦斯公司 | 用于提供偏振选择性全息波导装置的方法和设备 |
AU2017238847A1 (en) | 2016-03-25 | 2018-10-04 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
US9554738B1 (en) | 2016-03-30 | 2017-01-31 | Zyomed Corp. | Spectroscopic tomography systems and methods for noninvasive detection and measurement of analytes using collision computing |
CA3018758A1 (en) | 2016-03-31 | 2017-10-05 | Magic Leap, Inc. | Interactions with 3d virtual objects using poses and multiple-dof controllers |
US10539763B2 (en) * | 2016-03-31 | 2020-01-21 | Sony Corporation | Optical system, electronic device, camera, method and computer program |
US10824253B2 (en) | 2016-05-09 | 2020-11-03 | Mentor Acquisition One, Llc | User interface systems for head-worn computers |
US9910284B1 (en) | 2016-09-08 | 2018-03-06 | Osterhout Group, Inc. | Optical systems for head-worn computers |
US10466491B2 (en) | 2016-06-01 | 2019-11-05 | Mentor Acquisition One, Llc | Modular systems for head-worn computers |
US10684478B2 (en) | 2016-05-09 | 2020-06-16 | Mentor Acquisition One, Llc | User interface systems for head-worn computers |
KR20220040511A (ko) | 2016-04-08 | 2022-03-30 | 매직 립, 인코포레이티드 | 가변 포커스 렌즈 엘리먼트들을 가진 증강 현실 시스템들 및 방법들 |
EP3433658B1 (en) | 2016-04-11 | 2023-08-09 | DigiLens, Inc. | Holographic waveguide apparatus for structured light projection |
US10001648B2 (en) | 2016-04-14 | 2018-06-19 | Disney Enterprises, Inc. | Occlusion-capable augmented reality display using cloaking optics |
US9726896B2 (en) | 2016-04-21 | 2017-08-08 | Maximilian Ralph Peter von und zu Liechtenstein | Virtual monitor display technique for augmented reality environments |
KR20240070723A (ko) | 2016-04-21 | 2024-05-21 | 매직 립, 인코포레이티드 | 시야 주위의 시각적 아우라 |
CA3021964A1 (en) | 2016-04-26 | 2017-11-02 | Magic Leap, Inc. | Electromagnetic tracking with augmented reality systems |
JP6961619B2 (ja) | 2016-05-06 | 2021-11-05 | マジック リープ, インコーポレイテッドMagic Leap, Inc. | 光を再指向させるための非対称格子を有するメタ表面および製造方法 |
WO2017196879A1 (en) | 2016-05-09 | 2017-11-16 | Magic Leap, Inc. | Augmented reality systems and methods for user health analysis |
US9922464B2 (en) * | 2016-05-10 | 2018-03-20 | Disney Enterprises, Inc. | Occluded virtual image display |
WO2017196999A1 (en) | 2016-05-12 | 2017-11-16 | Magic Leap, Inc. | Wavelength multiplexing in waveguides |
KR102407111B1 (ko) | 2016-05-20 | 2022-06-08 | 매직 립, 인코포레이티드 | 사용자 인터페이스 메뉴의 콘텍추얼 인식 |
US9959678B2 (en) * | 2016-06-03 | 2018-05-01 | Oculus Vr, Llc | Face and eye tracking using facial sensors within a head-mounted display |
US10534954B2 (en) | 2016-06-03 | 2020-01-14 | Magic Leap, Inc. | Augmented reality identity verification |
US10430988B2 (en) | 2016-06-03 | 2019-10-01 | Facebook Technologies, Llc | Facial animation using facial sensors within a head-mounted display |
CN117028910A (zh) | 2016-06-10 | 2023-11-10 | 奇跃公司 | 纹理投射灯泡的积分点光源 |
EP3472828B1 (en) | 2016-06-20 | 2022-08-10 | Magic Leap, Inc. | Augmented reality display system for evaluation and modification of neurological conditions, including visual processing and perception conditions |
EP3479160A4 (en) | 2016-06-30 | 2020-03-25 | Magic Leap, Inc. | ESTIMATE OF THE POSE IN A 3D SPACE |
US9996984B2 (en) | 2016-07-05 | 2018-06-12 | Disney Enterprises, Inc. | Focus control for virtual objects in augmented reality (AR) and virtual reality (VR) displays |
WO2018013199A1 (en) | 2016-07-14 | 2018-01-18 | Magic Leap, Inc. | Iris boundary estimation using cornea curvature |
JP7001672B2 (ja) | 2016-07-14 | 2022-01-19 | マジック リープ, インコーポレイテッド | 虹彩識別のためのディープニューラルネットワーク |
CN109791295A (zh) | 2016-07-25 | 2019-05-21 | 奇跃公司 | 使用增强和虚拟现实眼镜的成像修改、显示和可视化 |
WO2018022521A1 (en) | 2016-07-25 | 2018-02-01 | Magic Leap, Inc. | Light field processor system |
CA3032282A1 (en) | 2016-07-29 | 2018-02-01 | Magic Leap, Inc. | Secure exchange of cryptographically signed records |
EP3497676A4 (en) | 2016-08-11 | 2020-03-25 | Magic Leap, Inc. | AUTOMATIC POSITIONING OF A VIRTUAL OBJECT IN A THREE-DIMENSIONAL SPACE |
IL292025B2 (en) | 2016-08-12 | 2023-12-01 | Magic Leap Inc | Parosh is a flurry of words |
IL247360B (en) * | 2016-08-18 | 2021-09-30 | Veeride Ltd | A device and method for augmented reality |
WO2018039269A1 (en) | 2016-08-22 | 2018-03-01 | Magic Leap, Inc. | Augmented reality display device with deep learning sensors |
US10108013B2 (en) | 2016-08-22 | 2018-10-23 | Microsoft Technology Licensing, Llc | Indirect-view augmented reality display system |
NZ750551A (en) | 2016-08-22 | 2023-05-26 | Magic Leap Inc | Multi-layer diffractive eyepiece |
US10690936B2 (en) | 2016-08-29 | 2020-06-23 | Mentor Acquisition One, Llc | Adjustable nose bridge assembly for headworn computer |
KR20210060676A (ko) | 2016-09-13 | 2021-05-26 | 매직 립, 인코포레이티드 | 감각 안경류 |
JP6978493B2 (ja) | 2016-09-21 | 2021-12-08 | マジック リープ, インコーポレイテッドMagic Leap, Inc. | 射出瞳エクスパンダを伴う光学システムのためのシステムおよび方法 |
US10330935B2 (en) | 2016-09-22 | 2019-06-25 | Apple Inc. | Predictive, foveated virtual reality system |
EP3516630A4 (en) | 2016-09-22 | 2020-06-03 | Magic Leap, Inc. | SPECTROSCOPY WITH EXTENDED REALITY |
WO2018058063A1 (en) | 2016-09-26 | 2018-03-29 | Magic Leap, Inc. | Calibration of magnetic and optical sensors in a virtual reality or augmented reality display system |
CN114356098A (zh) | 2016-09-28 | 2022-04-15 | 奇跃公司 | 由可穿戴设备进行面部模型捕获 |
RU2016138608A (ru) | 2016-09-29 | 2018-03-30 | Мэджик Лип, Инк. | Нейронная сеть для сегментации изображения глаза и оценки качества изображения |
WO2018064502A1 (en) * | 2016-09-30 | 2018-04-05 | Visbit Inc. | View-optimized light field image and video streaming |
WO2018067603A1 (en) | 2016-10-04 | 2018-04-12 | Magic Leap, Inc. | Efficient data layouts for convolutional neural networks |
KR102402467B1 (ko) | 2016-10-05 | 2022-05-25 | 매직 립, 인코포레이티드 | 혼합 현실 교정을 위한 안구주위 테스트 |
USD840395S1 (en) | 2016-10-17 | 2019-02-12 | Osterhout Group, Inc. | Head-worn computer |
US11231584B2 (en) | 2016-10-21 | 2022-01-25 | Magic Leap, Inc. | System and method for presenting image content on multiple depth planes by providing multiple intra-pupil parallax views |
EP4202840A1 (en) | 2016-11-11 | 2023-06-28 | Magic Leap, Inc. | Periocular and audio synthesis of a full face image |
CA3043352A1 (en) | 2016-11-15 | 2018-05-24 | Magic Leap, Inc. | Deep learning system for cuboid detection |
JP7037561B2 (ja) | 2016-11-16 | 2022-03-16 | マジック リープ, インコーポレイテッド | ウェアラブルコンポーネントのための熱管理システム |
US11067860B2 (en) | 2016-11-18 | 2021-07-20 | Magic Leap, Inc. | Liquid crystal diffractive devices with nano-scale pattern and methods of manufacturing the same |
JP7237830B2 (ja) | 2016-11-18 | 2023-03-13 | マジック リープ, インコーポレイテッド | 交差格子を用いた導波管光マルチプレクサ |
KR102533671B1 (ko) | 2016-11-18 | 2023-05-16 | 매직 립, 인코포레이티드 | 공간 가변적 액정 회절 격자들 |
KR102506485B1 (ko) | 2016-11-18 | 2023-03-03 | 매직 립, 인코포레이티드 | 넓은 입사 각도 범위들의 광을 방향전환시키기 위한 다중층 액정 회절 격자들 |
US11513350B2 (en) | 2016-12-02 | 2022-11-29 | Digilens Inc. | Waveguide device with uniform output illumination |
AU2017370555B2 (en) | 2016-12-05 | 2022-12-15 | Magic Leap, Inc. | Virtual user input controls in a mixed reality environment |
US10531220B2 (en) | 2016-12-05 | 2020-01-07 | Magic Leap, Inc. | Distributed audio capturing techniques for virtual reality (VR), augmented reality (AR), and mixed reality (MR) systems |
KR102656425B1 (ko) * | 2016-12-07 | 2024-04-12 | 삼성전자주식회사 | 영상을 표시하는 전자 장치 및 방법 |
WO2018106963A1 (en) | 2016-12-08 | 2018-06-14 | Magic Leap, Inc. | Diffractive devices based on cholesteric liquid crystal |
US10664049B2 (en) | 2016-12-09 | 2020-05-26 | Nvidia Corporation | Systems and methods for gaze tracking |
CA3046399A1 (en) | 2016-12-13 | 2018-06-21 | Magic Leap, Inc. | 3d object rendering using detected features |
JP7071363B2 (ja) | 2016-12-13 | 2022-05-18 | マジック リープ, インコーポレイテッド | 偏光を送達し、グルコースレベルを決定するための拡張現実および仮想現実アイウェア、システム、および方法 |
CN110291453B (zh) | 2016-12-14 | 2022-11-01 | 奇跃公司 | 使用具有表面对准图案的软压印复制对液晶图案化 |
US10088686B2 (en) | 2016-12-16 | 2018-10-02 | Microsoft Technology Licensing, Llc | MEMS laser scanner having enlarged FOV |
US10371896B2 (en) | 2016-12-22 | 2019-08-06 | Magic Leap, Inc. | Color separation in planar waveguides using dichroic filters |
US11036049B2 (en) | 2016-12-22 | 2021-06-15 | Magic Leap, Inc. | Systems and methods for manipulating light from ambient light sources |
US10746999B2 (en) | 2016-12-28 | 2020-08-18 | Magic Leap, Inc. | Dual depth exit pupil expander |
IL290002B2 (en) | 2016-12-29 | 2023-10-01 | Magic Leap Inc | Automatic control of a wearable display device based on external conditions |
CN106773054A (zh) * | 2016-12-29 | 2017-05-31 | 北京乐动卓越科技有限公司 | 一种实现增强现实互动的装置及方法 |
US10825010B2 (en) | 2016-12-30 | 2020-11-03 | Datalogic Usa, Inc. | Self-checkout with three dimensional scanning |
USD864959S1 (en) | 2017-01-04 | 2019-10-29 | Mentor Acquisition One, Llc | Computer glasses |
WO2018129151A1 (en) | 2017-01-05 | 2018-07-12 | Magic Leap, Inc. | Patterning of high refractive index glasses by plasma etching |
WO2018129398A1 (en) | 2017-01-05 | 2018-07-12 | Digilens, Inc. | Wearable heads up displays |
WO2018136892A1 (en) | 2017-01-23 | 2018-07-26 | Magic Leap, Inc. | Eyepiece for virtual, augmented, or mixed reality systems |
JP7155129B2 (ja) | 2017-01-27 | 2022-10-18 | マジック リープ, インコーポレイテッド | メタ表面のための反射防止コーティング |
CN114200562A (zh) | 2017-01-27 | 2022-03-18 | 奇跃公司 | 由具有不同取向的纳米梁的超表面形成的衍射光栅 |
US10354140B2 (en) | 2017-01-31 | 2019-07-16 | Microsoft Technology Licensing, Llc | Video noise reduction for video augmented reality system |
US11187909B2 (en) | 2017-01-31 | 2021-11-30 | Microsoft Technology Licensing, Llc | Text rendering by microshifting the display in a head mounted display |
US10298840B2 (en) | 2017-01-31 | 2019-05-21 | Microsoft Technology Licensing, Llc | Foveated camera for video augmented reality and head mounted display |
US10504397B2 (en) | 2017-01-31 | 2019-12-10 | Microsoft Technology Licensing, Llc | Curved narrowband illuminant display for head mounted display |
US9983412B1 (en) | 2017-02-02 | 2018-05-29 | The University Of North Carolina At Chapel Hill | Wide field of view augmented reality see through head mountable display with distance accommodation |
US11287292B2 (en) | 2017-02-13 | 2022-03-29 | Lockheed Martin Corporation | Sensor system |
US11347054B2 (en) | 2017-02-16 | 2022-05-31 | Magic Leap, Inc. | Systems and methods for augmented reality |
CN110546549B (zh) | 2017-02-23 | 2022-06-07 | 奇跃公司 | 具有可变屈光力反射器的显示系统 |
IL301886A (en) | 2017-03-14 | 2023-06-01 | Magic Leap Inc | Waveguides with light absorbing layers and processes for their creation |
KR102302725B1 (ko) | 2017-03-17 | 2021-09-14 | 매직 립, 인코포레이티드 | 룸 레이아웃 추정 방법들 및 기술들 |
CN115220156A (zh) | 2017-03-21 | 2022-10-21 | 奇跃公司 | 具有用于分体式光瞳的空间光调制器照射的显示系统 |
US11269144B2 (en) | 2017-03-21 | 2022-03-08 | Magic Leap, Inc. | Stacked waveguides having different diffraction gratings for combined field of view |
US11073695B2 (en) | 2017-03-21 | 2021-07-27 | Magic Leap, Inc. | Eye-imaging apparatus using diffractive optical elements |
KR102579249B1 (ko) | 2017-03-21 | 2023-09-15 | 매직 립, 인코포레이티드 | 공간 광 변조기들을 조명하기 위한 방법들, 디바이스들, 및 시스템들 |
CA3056899C (en) | 2017-03-21 | 2023-09-19 | Magic Leap, Inc. | Low-profile beam splitter |
EP4020982A3 (en) | 2017-03-21 | 2022-09-21 | Magic Leap, Inc. | Depth sensing techniques for virtual, augmented, and mixed reality systems |
KR20240046291A (ko) | 2017-03-22 | 2024-04-08 | 매직 립, 인코포레이티드 | 디스플레이 시스템들을 위한 깊이 기반 포비티드 렌더링 |
US10891488B2 (en) | 2017-03-30 | 2021-01-12 | Hrl Laboratories, Llc | System and method for neuromorphic visual activity classification based on foveated detection and contextual filtering |
US10417975B2 (en) | 2017-04-03 | 2019-09-17 | Microsoft Technology Licensing, Llc | Wide field of view scanning display |
US10921593B2 (en) | 2017-04-06 | 2021-02-16 | Disney Enterprises, Inc. | Compact perspectively correct occlusion capable augmented reality displays |
US10499021B2 (en) | 2017-04-11 | 2019-12-03 | Microsoft Technology Licensing, Llc | Foveated MEMS scanning display |
IL269908B (en) | 2017-04-18 | 2022-07-01 | Magic Leap Inc | Glavo with reflective layers created by flowing reflective materials |
CA3059234A1 (en) | 2017-04-19 | 2018-10-25 | Magic Leap, Inc. | Multimodal task execution and text editing for a wearable system |
IL270146B1 (en) | 2017-04-27 | 2024-03-01 | Magic Leap Inc | Light emitting assembly for illuminating light patterns |
WO2018213801A1 (en) | 2017-05-19 | 2018-11-22 | Magic Leap, Inc. | Keyboards for virtual, augmented, and mixed reality display systems |
KR102532191B1 (ko) | 2017-05-22 | 2023-05-12 | 매직 립, 인코포레이티드 | 컴패니언 디바이스와의 페어링 |
US10871806B2 (en) | 2017-05-30 | 2020-12-22 | Magic Leap, Inc. | Power supply assembly with fan assembly for electronic device |
KR102670987B1 (ko) | 2017-05-31 | 2024-05-30 | 매직 립, 인코포레이티드 | 눈 추적 교정 기술들 |
WO2018231784A1 (en) | 2017-06-12 | 2018-12-20 | Magic Leap, Inc. | Augmented reality display having multi-element adaptive lens for changing depth planes |
US10810773B2 (en) * | 2017-06-14 | 2020-10-20 | Dell Products, L.P. | Headset display control based upon a user's pupil state |
CN107065196B (zh) | 2017-06-16 | 2019-03-15 | 京东方科技集团股份有限公司 | 一种增强现实显示装置及增强现实显示方法 |
KR102314789B1 (ko) | 2017-06-29 | 2021-10-20 | 에스케이텔레콤 주식회사 | 증강현실용 디스플레이 장치 |
US10338400B2 (en) | 2017-07-03 | 2019-07-02 | Holovisions LLC | Augmented reality eyewear with VAPE or wear technology |
US10859834B2 (en) | 2017-07-03 | 2020-12-08 | Holovisions | Space-efficient optical structures for wide field-of-view augmented reality (AR) eyewear |
US10908680B1 (en) | 2017-07-12 | 2021-02-02 | Magic Leap, Inc. | Pose estimation using electromagnetic tracking |
CN107167921B (zh) * | 2017-07-18 | 2020-01-21 | 京东方科技集团股份有限公司 | 显示器 |
US11409105B2 (en) | 2017-07-24 | 2022-08-09 | Mentor Acquisition One, Llc | See-through computer display systems |
US10422995B2 (en) | 2017-07-24 | 2019-09-24 | Mentor Acquisition One, Llc | See-through computer display systems with stray light management |
US10578869B2 (en) | 2017-07-24 | 2020-03-03 | Mentor Acquisition One, Llc | See-through computer display systems with adjustable zoom cameras |
AU2018308418A1 (en) | 2017-07-26 | 2020-01-16 | Magic Leap, Inc. | Training a neural network with representations of user interface devices |
CA3068612A1 (en) | 2017-07-28 | 2019-01-31 | Magic Leap, Inc. | Fan assembly for displaying an image |
US10969584B2 (en) | 2017-08-04 | 2021-04-06 | Mentor Acquisition One, Llc | Image expansion optic for head-worn computer |
US10976551B2 (en) | 2017-08-30 | 2021-04-13 | Corning Incorporated | Wide field personal display device |
US10521661B2 (en) | 2017-09-01 | 2019-12-31 | Magic Leap, Inc. | Detailed eye shape model for robust biometric applications |
KR20200055704A (ko) | 2017-09-20 | 2020-05-21 | 매직 립, 인코포레이티드 | 눈 추적을 위한 개인화된 뉴럴 네트워크 |
EP3685215B1 (en) | 2017-09-21 | 2024-01-03 | Magic Leap, Inc. | Augmented reality display with waveguide configured to capture images of eye and/or environment |
JP7317003B2 (ja) | 2017-09-27 | 2023-07-28 | マジック リープ, インコーポレイテッド | 別個の位相および振幅変調器を伴う接眼3dディスプレイ |
US10867368B1 (en) | 2017-09-29 | 2020-12-15 | Apple Inc. | Foveated image capture for power efficient video see-through |
US11733516B2 (en) | 2017-10-11 | 2023-08-22 | Magic Leap, Inc. | Augmented reality display comprising eyepiece having a transparent emissive display |
JP7399084B2 (ja) | 2017-10-16 | 2023-12-15 | ディジレンズ インコーポレイテッド | ピクセル化されたディスプレイの画像分解能を倍増させるためのシステムおよび方法 |
AU2018355446A1 (en) | 2017-10-26 | 2020-05-14 | Magic Leap, Inc. | Broadband adaptive lens assembly for augmented reality display |
KR20200074172A (ko) | 2017-10-26 | 2020-06-24 | 매직 립, 인코포레이티드 | 액정 가변 초점 엘리먼트를 갖는 증강 현실 디스플레이 그리고 이를 형성하기 위한 롤투롤 방법 및 장치 |
US11537895B2 (en) | 2017-10-26 | 2022-12-27 | Magic Leap, Inc. | Gradient normalization systems and methods for adaptive loss balancing in deep multitask networks |
IL310847A (en) | 2017-10-27 | 2024-04-01 | Magic Leap Inc | A virtual network for augmented reality systems |
WO2019099305A1 (en) | 2017-11-14 | 2019-05-23 | Magic Leap, Inc. | Meta-learning for multi-task learning for neural networks |
CA3083105A1 (en) | 2017-12-11 | 2019-06-20 | Magic Leap, Inc. | Waveguide illuminator |
US11380039B2 (en) | 2017-12-14 | 2022-07-05 | Magic Leap, Inc. | Contextual-based rendering of virtual avatars |
WO2019118886A1 (en) | 2017-12-15 | 2019-06-20 | Magic Leap, Inc. | Enhanced pose determination for display device |
AU2018386296B2 (en) | 2017-12-15 | 2023-11-23 | Magic Leap, Inc. | Eyepieces for augmented reality display system |
CN108072978A (zh) * | 2017-12-21 | 2018-05-25 | 成都理想境界科技有限公司 | 一种增强现实头戴显示设备 |
CN108267856A (zh) * | 2017-12-21 | 2018-07-10 | 成都理想境界科技有限公司 | 一种增强现实头戴显示设备 |
TWI647485B (zh) * | 2018-01-03 | 2019-01-11 | 國立交通大學 | Head-mounted virtual object imaging device |
US11656466B2 (en) * | 2018-01-03 | 2023-05-23 | Sajjad A. Khan | Spatio-temporal multiplexed single panel based mutual occlusion capable head mounted display system and method |
JP7474696B2 (ja) | 2018-01-04 | 2024-04-25 | マジック リープ, インコーポレイテッド | 無機材料を組み込むポリマー構造に基づく光学要素 |
WO2019136476A1 (en) | 2018-01-08 | 2019-07-11 | Digilens, Inc. | Waveguide architectures and related methods of manufacturing |
EP3710893A4 (en) | 2018-01-08 | 2021-09-22 | Digilens Inc. | SYSTEMS AND METHODS FOR HIGH RATE RECORDING OF HOLOGRAPHIC NETWORKS IN WAVEGUIDE CELLS |
WO2019143844A1 (en) | 2018-01-17 | 2019-07-25 | Magic Leap, Inc. | Eye center of rotation determination, depth plane selection, and render camera positioning in display systems |
KR20200108857A (ko) | 2018-01-17 | 2020-09-21 | 매직 립, 인코포레이티드 | 디스플레이와 사용자의 눈들 사이의 정합을 결정하기 위한 디스플레이 시스템들 및 방법들 |
WO2019143688A1 (en) | 2018-01-19 | 2019-07-25 | Pcms Holdings, Inc. | Multi-focal planes with varying positions |
US11567627B2 (en) | 2018-01-30 | 2023-01-31 | Magic Leap, Inc. | Eclipse cursor for virtual content in mixed reality displays |
US10540941B2 (en) | 2018-01-30 | 2020-01-21 | Magic Leap, Inc. | Eclipse cursor for mixed reality displays |
CN111566661B (zh) * | 2018-01-30 | 2023-11-17 | 赫尔实验室有限公司 | 用于视觉活动分类的系统、方法、计算机可读介质 |
US20190250407A1 (en) * | 2018-02-15 | 2019-08-15 | Microsoft Technology Licensing, Llc | See-through relay for a virtual reality and a mixed environment display device |
US10735649B2 (en) | 2018-02-22 | 2020-08-04 | Magic Leap, Inc. | Virtual and augmented reality systems and methods using display system control information embedded in image data |
WO2019168673A1 (en) | 2018-02-27 | 2019-09-06 | Magic Leap, Inc. | Matching meshes for virtual avatars |
WO2019168723A1 (en) | 2018-02-28 | 2019-09-06 | Magic Leap, Inc. | Head scan alignment using ocular registration |
JP7081473B2 (ja) * | 2018-03-02 | 2022-06-07 | 株式会社リコー | 撮像光学系、撮像システム及び撮像装置 |
CN111819487A (zh) | 2018-03-05 | 2020-10-23 | 奇跃公司 | 具有低延迟瞳孔跟踪器的显示系统 |
WO2019173390A1 (en) | 2018-03-07 | 2019-09-12 | Magic Leap, Inc. | Adaptive lens assemblies including polarization-selective lens stacks for augmented reality display |
CA3139648A1 (en) | 2018-03-07 | 2019-09-12 | Magic Leap, Inc. | Visual tracking of peripheral devices |
CN111886533A (zh) | 2018-03-12 | 2020-11-03 | 奇跃公司 | 基于倾斜阵列的显示器 |
US10878620B2 (en) | 2018-03-14 | 2020-12-29 | Magic Leap, Inc. | Display systems and methods for clipping content to increase viewing comfort |
WO2019177870A1 (en) | 2018-03-15 | 2019-09-19 | Magic Leap, Inc. | Animating virtual avatar facial movements |
EP3765897B1 (en) | 2018-03-16 | 2024-01-17 | Digilens Inc. | Holographic waveguides incorporating birefringence control and methods for their fabrication |
US10775618B2 (en) | 2018-03-16 | 2020-09-15 | Magic Leap, Inc. | Facial expressions from eye-tracking cameras |
CN112136094A (zh) | 2018-03-16 | 2020-12-25 | 奇跃公司 | 用于显示系统的基于深度的凹式渲染 |
US11480467B2 (en) | 2018-03-21 | 2022-10-25 | Magic Leap, Inc. | Augmented reality system and method for spectroscopic analysis |
WO2019183211A1 (en) | 2018-03-23 | 2019-09-26 | Pcms Holdings, Inc. | Multifocal plane based method to produce stereoscopic viewpoints in a dibr system (mfp-dibr) |
EP3776027A4 (en) | 2018-04-02 | 2021-12-29 | Magic Leap, Inc. | Waveguides with integrated optical elements and methods of making the same |
US11886000B2 (en) | 2018-04-02 | 2024-01-30 | Magic Leap, Inc. | Waveguides having integrated spacers, waveguides having edge absorbers, and methods for making the same |
CN112041716A (zh) | 2018-04-02 | 2020-12-04 | 奇跃公司 | 混合聚合物波导和用于制造混合聚合物波导的方法 |
WO2019204164A1 (en) | 2018-04-16 | 2019-10-24 | Magic Leap, Inc. | Systems and methods for cross-application authoring, transfer, and evaluation of rigging control systems for virtual characters |
US11067805B2 (en) | 2018-04-19 | 2021-07-20 | Magic Leap, Inc. | Systems and methods for operating a display system based on user perceptibility |
WO2019209431A1 (en) | 2018-04-23 | 2019-10-31 | Magic Leap, Inc. | Avatar facial expression representation in multidimensional space |
WO2019212698A1 (en) | 2018-05-01 | 2019-11-07 | Magic Leap, Inc. | Avatar animation using markov decision process policies |
US11980507B2 (en) | 2018-05-02 | 2024-05-14 | Augmedics Ltd. | Registration of a fiducial marker for an augmented reality system |
WO2019213220A1 (en) | 2018-05-03 | 2019-11-07 | Magic Leap, Inc. | Using 3d scans of a physical subject to determine positions and orientations of joints for a virtual character |
WO2019226494A1 (en) | 2018-05-21 | 2019-11-28 | Magic Leap, Inc. | Generating textured polygon strip hair from strand-based hair for a virtual character |
WO2019226554A1 (en) | 2018-05-22 | 2019-11-28 | Magic Leap, Inc. | Skeletal systems for animating virtual avatars |
WO2019226549A1 (en) | 2018-05-22 | 2019-11-28 | Magic Leap, Inc. | Computer generated hair groom transfer tool |
US10861242B2 (en) | 2018-05-22 | 2020-12-08 | Magic Leap, Inc. | Transmodal input fusion for a wearable system |
US11625864B2 (en) | 2018-05-25 | 2023-04-11 | Magic Leap, Inc. | Compression of dynamic unstructured point clouds |
US11157159B2 (en) | 2018-06-07 | 2021-10-26 | Magic Leap, Inc. | Augmented reality scrollbar |
JP7360405B2 (ja) | 2018-06-15 | 2023-10-12 | マジック リープ, インコーポレイテッド | 広視野偏光スイッチおよびプレチルトを伴う液晶光学要素を加工する方法 |
WO2019241575A1 (en) | 2018-06-15 | 2019-12-19 | Magic Leap, Inc. | Wide field-of-view polarization switches with liquid crystal optical elements with pretilt |
WO2019246157A1 (en) * | 2018-06-18 | 2019-12-26 | Magic Leap, Inc. | Centralized rendering |
WO2019246058A1 (en) | 2018-06-18 | 2019-12-26 | Magic Leap, Inc. | Systems and methods for temporarily disabling user control interfaces during attachment of an electronic device |
WO2019246044A1 (en) | 2018-06-18 | 2019-12-26 | Magic Leap, Inc. | Head-mounted display systems with power saving functionality |
EP3807710B1 (en) | 2018-06-18 | 2024-01-17 | Magic Leap, Inc. | Augmented reality display with frame modulation functionality |
WO2020005757A1 (en) | 2018-06-26 | 2020-01-02 | Magic Leap, Inc. | Waypoint creation in map detection |
US11669726B2 (en) | 2018-07-02 | 2023-06-06 | Magic Leap, Inc. | Methods and systems for interpolation of disparate inputs |
EP3818694A1 (en) | 2018-07-05 | 2021-05-12 | PCMS Holdings, Inc. | Method and system for near-eye focal plane overlays for 3d perception of content on 2d displays |
CN112673298A (zh) | 2018-07-05 | 2021-04-16 | 奇跃公司 | 用于头戴式显示系统的基于波导的照明 |
US11966055B2 (en) | 2018-07-19 | 2024-04-23 | Magic Leap, Inc. | Content interaction driven by eye metrics |
US11320899B2 (en) | 2018-07-23 | 2022-05-03 | Magic Leap, Inc. | Deep predictor recurrent neural network for head pose prediction |
WO2020023303A1 (en) | 2018-07-23 | 2020-01-30 | Magic Leap, Inc. | Coexistence interference avoidance between two different radios operating in the same band |
WO2020023404A1 (en) | 2018-07-24 | 2020-01-30 | Magic Leap, Inc. | Flicker mitigation when toggling eyepiece display illumination in augmented reality systems |
USD918176S1 (en) | 2018-07-24 | 2021-05-04 | Magic Leap, Inc. | Totem controller having an illumination region |
EP3827585A4 (en) | 2018-07-24 | 2022-04-27 | Magic Leap, Inc. | DISPLAY SYSTEMS AND METHODS FOR DETERMINING THE VERTICAL ALIGNMENT BETWEEN LEFT AND RIGHT DISPLAYS AND A USER'S EYES |
JP7418400B2 (ja) | 2018-07-24 | 2024-01-19 | マジック リープ, インコーポレイテッド | 再バウンス誘発光損失の軽減を伴う回折光学要素および関連システムおよび方法 |
USD930614S1 (en) | 2018-07-24 | 2021-09-14 | Magic Leap, Inc. | Totem controller having an illumination region |
USD924204S1 (en) | 2018-07-24 | 2021-07-06 | Magic Leap, Inc. | Totem controller having an illumination region |
CN112689869A (zh) | 2018-07-24 | 2021-04-20 | 奇跃公司 | 用于确定显示器与用户的眼睛之间的配准的显示系统和方法 |
US11402801B2 (en) | 2018-07-25 | 2022-08-02 | Digilens Inc. | Systems and methods for fabricating a multilayer optical structure |
US10950024B2 (en) | 2018-07-27 | 2021-03-16 | Magic Leap, Inc. | Pose space dimensionality reduction for pose space deformation of a virtual character |
EP3830674A4 (en) | 2018-08-03 | 2022-04-20 | Magic Leap, Inc. | DEPTH PLANE SELECTION OF MULTI-DEPTH PLAN DISPLAY SYSTEMS BY USER CATEGORIZATION |
US11002971B1 (en) * | 2018-08-24 | 2021-05-11 | Apple Inc. | Display device with mechanically adjustable optical combiner |
US11103763B2 (en) | 2018-09-11 | 2021-08-31 | Real Shot Inc. | Basketball shooting game using smart glasses |
US11141645B2 (en) | 2018-09-11 | 2021-10-12 | Real Shot Inc. | Athletic ball game using smart glasses |
USD934872S1 (en) | 2018-09-18 | 2021-11-02 | Magic Leap, Inc. | Mobile computing support system having an illumination region |
USD955396S1 (en) | 2018-09-18 | 2022-06-21 | Magic Leap, Inc. | Mobile computing support system having an illumination region |
USD950567S1 (en) | 2018-09-18 | 2022-05-03 | Magic Leap, Inc. | Mobile computing support system having an illumination region |
USD934873S1 (en) | 2018-09-18 | 2021-11-02 | Magic Leap, Inc. | Mobile computing support system having an illumination region |
US10861240B1 (en) * | 2018-09-26 | 2020-12-08 | Facebook Technologies, Llc | Virtual pupil camera in head mounted display |
WO2020069026A1 (en) | 2018-09-26 | 2020-04-02 | Magic Leap, Inc. | Diffractive optical elements with optical power |
US11157090B2 (en) | 2018-10-26 | 2021-10-26 | Magic Leap, Inc. | Ambient electromagnetic distortion correction for electromagnetic tracking |
CN113272821A (zh) | 2018-11-15 | 2021-08-17 | 奇跃公司 | 深度神经网络姿态估计系统 |
EP3884337A4 (en) | 2018-11-20 | 2022-08-17 | Magic Leap, Inc. | EYEPIECES FOR AN AUGMENTED REALITY DISPLAY SYSTEM |
US11766296B2 (en) | 2018-11-26 | 2023-09-26 | Augmedics Ltd. | Tracking system for image-guided surgery |
US10939977B2 (en) | 2018-11-26 | 2021-03-09 | Augmedics Ltd. | Positioning marker |
EP3887925A4 (en) | 2018-11-30 | 2022-08-17 | Magic Leap, Inc. | MULTIMODAL HANDHELD LOCATION AND ORIENTATION TO AVATAR MOVEMENT |
CN113490873A (zh) | 2018-12-28 | 2021-10-08 | 奇跃公司 | 带有机械致动图像投影仪的可变像素密度显示系统 |
JP2022516256A (ja) | 2018-12-28 | 2022-02-25 | マジック リープ, インコーポレイテッド | 左眼および右眼のための共有ディスプレイを伴う拡張および仮想現実ディスプレイシステム |
JP7431246B2 (ja) | 2019-01-25 | 2024-02-14 | マジック リープ, インコーポレイテッド | 異なる露光時間を有する画像を使用した眼追跡 |
JP7268372B2 (ja) * | 2019-01-31 | 2023-05-08 | 株式会社リコー | 撮像装置 |
JP2022520472A (ja) | 2019-02-15 | 2022-03-30 | ディジレンズ インコーポレイテッド | 統合された格子を使用してホログラフィック導波管ディスプレイを提供するための方法および装置 |
JP2022521974A (ja) | 2019-02-28 | 2022-04-13 | マジック リープ, インコーポレイテッド | 光エミッタアレイによって形成される複数の瞳孔内視差ビューを使用して可変遠近調節キューを提供するためのディスプレイシステムおよび方法 |
CN113811803A (zh) | 2019-03-12 | 2021-12-17 | 奇跃公司 | 具有高折射率材料的波导及其制造方法 |
JP2022525165A (ja) | 2019-03-12 | 2022-05-11 | ディジレンズ インコーポレイテッド | ホログラフィック導波管バックライトおよび関連する製造方法 |
US11435584B2 (en) * | 2019-03-13 | 2022-09-06 | Hong Kong Applied Science And Technology Research Institute Co., Ltd. | Large field of view see through head mounted display having magnified curved intermediate image |
WO2020191170A1 (en) | 2019-03-20 | 2020-09-24 | Magic Leap, Inc. | System for providing illumination of the eye |
US11284053B2 (en) | 2019-03-29 | 2022-03-22 | Razmik Ghazaryan | Head-mounted display and projection screen |
US10466489B1 (en) | 2019-03-29 | 2019-11-05 | Razmik Ghazaryan | Methods and apparatus for a variable-resolution screen |
US10554940B1 (en) | 2019-03-29 | 2020-02-04 | Razmik Ghazaryan | Method and apparatus for a variable-resolution screen |
WO2020214272A1 (en) | 2019-04-15 | 2020-10-22 | Magic Leap, Inc. | Sensor fusion for electromagnetic tracking |
US11800205B2 (en) * | 2019-04-18 | 2023-10-24 | University Of Florida Research Foundation, Incorporated | Fast foveation camera and controlling algorithms |
CN110913096A (zh) * | 2019-05-05 | 2020-03-24 | 华为技术有限公司 | 一种摄像模组及电子设备 |
JP7313478B2 (ja) | 2019-05-05 | 2023-07-24 | 華為技術有限公司 | コンパクトカメラモジュール、端末デバイス、画像化方法、及び画像化装置 |
US11315288B2 (en) | 2019-05-20 | 2022-04-26 | Magic Leap, Inc. | Systems and techniques for estimating eye pose |
TWI707193B (zh) * | 2019-05-22 | 2020-10-11 | 財團法人國家實驗研究院 | 遙測衛星的聚焦面組合件及其影像處理方法 |
EP3977182A4 (en) | 2019-05-24 | 2022-08-24 | Magic Leap, Inc. | VARIABLE FOCAL SETS |
CN114174463A (zh) | 2019-05-28 | 2022-03-11 | 奇跃公司 | 用于便携式电子设备的热管理系统 |
USD962981S1 (en) | 2019-05-29 | 2022-09-06 | Magic Leap, Inc. | Display screen or portion thereof with animated scrollbar graphical user interface |
EP3980825A4 (en) | 2019-06-07 | 2023-05-03 | Digilens Inc. | WAVEGUIDES INCORPORATING TRANSPARENT AND REFLECTIVE GRATINGS AND METHODS OF MAKING THEREOF |
WO2020257469A1 (en) | 2019-06-20 | 2020-12-24 | Magic Leap, Inc. | Eyepieces for augmented reality display system |
JP7311643B2 (ja) | 2019-06-21 | 2023-07-19 | マジック リープ, インコーポレイテッド | モード式ウィンドウを介したセキュアな認可 |
EP3987329A4 (en) | 2019-06-24 | 2023-10-11 | Magic Leap, Inc. | WAVEGUIDES WITH INTEGRATED SPACERS AND RELATED SYSTEMS AND METHODS |
US11029805B2 (en) | 2019-07-10 | 2021-06-08 | Magic Leap, Inc. | Real-time preview of connectable objects in a physically-modeled virtual space |
JP2022540675A (ja) | 2019-07-16 | 2022-09-16 | マジック リープ, インコーポレイテッド | 1つ以上の眼追跡カメラを用いた眼回転中心の決定 |
EP3999883A4 (en) | 2019-07-19 | 2023-08-30 | Magic Leap, Inc. | PROCESS FOR THE MANUFACTURE OF DIFFRACTION GRATES |
US11327315B2 (en) | 2019-07-19 | 2022-05-10 | Magic Leap, Inc. | Display device having diffraction gratings with reduced polarization sensitivity |
US11740458B2 (en) | 2019-07-26 | 2023-08-29 | Microsoft Technology Licensing, Llc | Projection device and projection method for head mounted display based on rotary MEMS fast scanner |
EP4004646A4 (en) | 2019-07-29 | 2023-09-06 | Digilens Inc. | METHODS AND APPARATUS FOR MULTIPLYING THE IMAGE RESOLUTION AND FIELD OF VIEW OF A PIXELATED DISPLAY SCREEN |
US11980506B2 (en) | 2019-07-29 | 2024-05-14 | Augmedics Ltd. | Fiducial marker |
US20220276125A1 (en) * | 2019-08-07 | 2022-09-01 | Agilent Technologies, Inc. | Optical imaging performance test system and method |
EP4022370A4 (en) | 2019-08-29 | 2023-08-30 | Digilens Inc. | VACUUM BRAGG GRATINGS AND METHODS OF MANUFACTURING |
JP7420926B2 (ja) | 2019-09-11 | 2024-01-23 | マジック リープ, インコーポレイテッド | 低減された偏光感度を有する回折格子を伴うディスプレイデバイス |
JP2022547579A (ja) * | 2019-09-13 | 2022-11-14 | アリゾナ ボード オブ リージェンツ オン ビハーフ オブ ザ ユニバーシティー オブ アリゾナ | 瞳整合オクルージョン対応光学シースルー頭部搭載型ディスプレイ |
US11610290B2 (en) * | 2019-09-24 | 2023-03-21 | Rockwell Collins, Inc. | Point source detection |
US11933949B2 (en) * | 2019-09-27 | 2024-03-19 | Apple Inc. | Freeform folded optical system |
US11276246B2 (en) | 2019-10-02 | 2022-03-15 | Magic Leap, Inc. | Color space mapping for intuitive surface normal visualization |
US11176757B2 (en) | 2019-10-02 | 2021-11-16 | Magic Leap, Inc. | Mission driven virtual character for user interaction |
JP7483270B2 (ja) | 2019-10-12 | 2024-05-15 | 国立大学法人 奈良先端科学技術大学院大学 | シースルー型ディスプレイ装置 |
USD982593S1 (en) | 2019-11-08 | 2023-04-04 | Magic Leap, Inc. | Portion of a display screen with animated ray |
US11493989B2 (en) | 2019-11-08 | 2022-11-08 | Magic Leap, Inc. | Modes of user interaction |
CN114641713A (zh) | 2019-11-08 | 2022-06-17 | 奇跃公司 | 具有包括多种材料的光重定向结构的超表面以及制造方法 |
CN114945947A (zh) | 2019-11-18 | 2022-08-26 | 奇跃公司 | 可通行世界的映射和定位 |
KR102244445B1 (ko) * | 2019-11-22 | 2021-04-26 | 인하대학교 산학협력단 | 단일 디지털 마이크로미러 장치를 이용한 오클루전 가능 증강현실용 근안 디스플레이 장치 및 방법 |
CN114730111A (zh) | 2019-11-22 | 2022-07-08 | 奇跃公司 | 用于对液晶层进行图案化的方法和系统 |
US11681362B2 (en) | 2019-11-26 | 2023-06-20 | Magic Leap, Inc. | Enhanced eye tracking for augmented or virtual reality display systems |
WO2021113309A1 (en) | 2019-12-06 | 2021-06-10 | Magic Leap, Inc. | Encoding stereo splash screen in static image |
EP4070150A4 (en) | 2019-12-06 | 2023-12-06 | Magic Leap, Inc. | DYNAMIC BROWSER STAGE |
USD940749S1 (en) | 2019-12-09 | 2022-01-11 | Magic Leap, Inc. | Portion of a display screen with transitional graphical user interface for guiding graphics |
USD941307S1 (en) | 2019-12-09 | 2022-01-18 | Magic Leap, Inc. | Portion of a display screen with graphical user interface for guiding graphics |
USD952673S1 (en) | 2019-12-09 | 2022-05-24 | Magic Leap, Inc. | Portion of a display screen with transitional graphical user interface for guiding graphics |
USD940748S1 (en) | 2019-12-09 | 2022-01-11 | Magic Leap, Inc. | Portion of a display screen with transitional graphical user interface for guiding graphics |
USD940189S1 (en) | 2019-12-09 | 2022-01-04 | Magic Leap, Inc. | Portion of a display screen with transitional graphical user interface for guiding graphics |
USD941353S1 (en) | 2019-12-09 | 2022-01-18 | Magic Leap, Inc. | Portion of a display screen with transitional graphical user interface for guiding graphics |
US11288876B2 (en) | 2019-12-13 | 2022-03-29 | Magic Leap, Inc. | Enhanced techniques for volumetric stage mapping based on calibration object |
US11382712B2 (en) | 2019-12-22 | 2022-07-12 | Augmedics Ltd. | Mirroring in image guided surgery |
CN111077679A (zh) * | 2020-01-23 | 2020-04-28 | 福州贝园网络科技有限公司 | 一种智能眼镜显示器及其成像方法 |
US11340695B2 (en) | 2020-01-24 | 2022-05-24 | Magic Leap, Inc. | Converting a 2D positional input into a 3D point in space |
JP7496424B2 (ja) | 2020-01-24 | 2024-06-06 | マジック リープ, インコーポレイテッド | 単一コントローラを使用したコンテンツ移動および相互作用 |
WO2021154646A1 (en) | 2020-01-27 | 2021-08-05 | Magic Leap, Inc. | Neutral avatars |
JP2023511311A (ja) | 2020-01-27 | 2023-03-17 | マジック リープ, インコーポレイテッド | ユーザ入力デバイスの機能性の注視タイマベースの拡張 |
USD948574S1 (en) | 2020-01-27 | 2022-04-12 | Magic Leap, Inc. | Portion of a display screen with a set of avatars |
US11574424B2 (en) | 2020-01-27 | 2023-02-07 | Magic Leap, Inc. | Augmented reality map curation |
USD948562S1 (en) | 2020-01-27 | 2022-04-12 | Magic Leap, Inc. | Portion of a display screen with avatar |
USD949200S1 (en) | 2020-01-27 | 2022-04-19 | Magic Leap, Inc. | Portion of a display screen with a set of avatars |
WO2021154656A1 (en) | 2020-01-27 | 2021-08-05 | Magic Leap, Inc. | Enhanced state control for anchor-based cross reality applications |
USD936704S1 (en) | 2020-01-27 | 2021-11-23 | Magic Leap, Inc. | Portion of a display screen with avatar |
CN115039012A (zh) | 2020-01-31 | 2022-09-09 | 奇跃公司 | 用于测眼评估的增强和虚拟现实显示系统 |
US11709363B1 (en) | 2020-02-10 | 2023-07-25 | Avegant Corp. | Waveguide illumination of a spatial light modulator |
EP4104034A4 (en) | 2020-02-10 | 2024-02-21 | Magic Leap Inc | POSITIONING BODY-CENTRIC CONTENT RELATIVE TO A THREE-DIMENSIONAL CONTAINER IN A MIXED REALITY ENVIRONMENT |
US11726349B2 (en) | 2020-02-14 | 2023-08-15 | Magic Leap, Inc. | Virtual object movement speed curve for virtual and augmented reality display systems |
CN115151784A (zh) | 2020-02-26 | 2022-10-04 | 奇跃公司 | 程序电子束光刻 |
CN115190837A (zh) | 2020-02-28 | 2022-10-14 | 奇跃公司 | 制造用于形成具有一体间隔件的目镜的模具的方法 |
US11262588B2 (en) | 2020-03-10 | 2022-03-01 | Magic Leap, Inc. | Spectator view of virtual and physical objects |
JP2023518421A (ja) | 2020-03-20 | 2023-05-01 | マジック リープ, インコーポレイテッド | 網膜結像および追跡のためのシステムおよび方法 |
WO2021195283A1 (en) | 2020-03-25 | 2021-09-30 | Magic Leap, Inc. | Optical device with one-way mirror |
US11604354B2 (en) | 2020-04-03 | 2023-03-14 | Magic Leap, Inc. | Wearable display systems with nanowire LED micro-displays |
US11348300B2 (en) | 2020-04-03 | 2022-05-31 | Magic Leap, Inc. | Avatar customization for optimal gaze discrimination |
US11994687B2 (en) | 2020-05-13 | 2024-05-28 | President And Fellows Of Harvard College | Meta-optics for virtual reality and augmented reality systems |
EP4154050A4 (en) | 2020-05-22 | 2024-06-05 | Magic Leap Inc | AUGMENTED AND VIRTUAL REALITY DISPLAY SYSTEMS WITH CORRELATED OPTICAL REGIONS |
US11662810B2 (en) | 2020-06-05 | 2023-05-30 | Magic Leap, Inc. | Enhanced eye tracking techniques based on neural network analysis of images |
US11389252B2 (en) | 2020-06-15 | 2022-07-19 | Augmedics Ltd. | Rotating marker for image guided surgery |
CN111580280B (zh) * | 2020-06-16 | 2022-10-28 | 京东方科技集团股份有限公司 | 透视头戴显示器 |
IL299775A (en) | 2020-07-15 | 2023-03-01 | Magic Leap Inc | Eye tracking using an aspheric cornea model |
US11852829B2 (en) | 2020-08-07 | 2023-12-26 | Magic Leap, Inc. | Tunable cylindrical lenses and head-mounted display including the same |
EP4222551A1 (en) | 2020-09-29 | 2023-08-09 | Avegant Corp. | An architecture to illuminate a display panel |
JP2022144057A (ja) * | 2021-03-18 | 2022-10-03 | 株式会社Jvcケンウッド | 表示装置、表示方法およびプログラム |
TWI775392B (zh) * | 2021-04-20 | 2022-08-21 | 宏碁股份有限公司 | 擴增實境眼鏡 |
US11936975B2 (en) | 2021-05-12 | 2024-03-19 | Nio Technology (Anhui) Co., Ltd. | Combined computer vision and human vision camera system |
WO2022269895A1 (ja) * | 2021-06-25 | 2022-12-29 | 株式会社ニコン | 撮像装置、および受光装置 |
US11896445B2 (en) | 2021-07-07 | 2024-02-13 | Augmedics Ltd. | Iliac pin and adapter |
US20230059918A1 (en) * | 2021-08-17 | 2023-02-23 | Texas Instruments Incorporated | Compact near eye display engine |
US20230236420A1 (en) * | 2021-08-17 | 2023-07-27 | Texas Instruments Incorporated | Compact near eye display engine |
WO2023021467A1 (en) * | 2021-08-20 | 2023-02-23 | Immervision Inc. | Dual field of view optical system |
US11417069B1 (en) * | 2021-10-05 | 2022-08-16 | Awe Company Limited | Object and camera localization system and localization method for mapping of the real world |
WO2023133301A1 (en) * | 2022-01-07 | 2023-07-13 | Arizona Board Of Regents On Behalf Of The University Of Arizona | Occlusion-capable optical viewing device and associated method |
US11662591B1 (en) * | 2022-07-01 | 2023-05-30 | Brelyon Inc. | Display systems and imaging systems with dynamically controllable optical path lengths |
US11776206B1 (en) | 2022-12-23 | 2023-10-03 | Awe Company Limited | Extended reality system and extended reality method with two-way digital interactive digital twins |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0792426A (ja) * | 1993-09-24 | 1995-04-07 | Sony Corp | 視覚装置 |
Family Cites Families (100)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3909121A (en) * | 1974-06-25 | 1975-09-30 | Mesquita Cardoso Edgar Antonio | Panoramic photographic methods |
US4026641A (en) * | 1975-12-30 | 1977-05-31 | The United States Of America As Represented By The Secretary Of The Army | Toric reflector display |
JPS54128217A (en) * | 1978-03-29 | 1979-10-04 | Olympus Optical Co Ltd | Pickup device |
JPS57171314A (en) | 1981-04-15 | 1982-10-21 | Mitsubishi Electric Corp | Optical branching and coupling circuit |
KR940010879B1 (ko) * | 1989-07-28 | 1994-11-19 | 캐논 가부시끼가이샤 | 화상형성장치 |
US5136183A (en) | 1990-06-27 | 1992-08-04 | Advanced Micro Devices, Inc. | Integrated comparator circuit |
US5307203A (en) * | 1990-12-06 | 1994-04-26 | Tandem Scanning Corporation | Confocal tandem scanning reflected light microscope |
US5135183A (en) * | 1991-09-23 | 1992-08-04 | Hughes Aircraft Company | Dual-image optoelectronic imaging apparatus including birefringent prism arrangement |
CA2084111A1 (en) * | 1991-12-17 | 1993-06-18 | William E. Nelson | Virtual display device and method of use |
US5406415A (en) | 1992-09-22 | 1995-04-11 | Kelly; Shawn L. | Imaging system for a head-mounted display |
US5386313A (en) | 1993-03-11 | 1995-01-31 | Szegedi; Nicholas J. | Reflective magneto-optic spatial light modulator assembly |
JP3320252B2 (ja) * | 1995-04-24 | 2002-09-03 | キヤノン株式会社 | 反射型の光学系及びそれを用いた撮像装置 |
US6347744B1 (en) * | 1995-10-10 | 2002-02-19 | Symbol Technologies, Inc. | Retroreflective scan module for electro-optical readers |
JPH09166759A (ja) * | 1995-12-18 | 1997-06-24 | Olympus Optical Co Ltd | 画像表示装置 |
JP3222052B2 (ja) * | 1996-01-11 | 2001-10-22 | 株式会社東芝 | 光走査装置 |
JPH1068899A (ja) * | 1996-08-26 | 1998-03-10 | Asahi Optical Co Ltd | カスケード走査光学系 |
US6204974B1 (en) | 1996-10-08 | 2001-03-20 | The Microoptical Corporation | Compact image display system for eyeglasses or other head-borne frames |
JP3924348B2 (ja) * | 1996-11-05 | 2007-06-06 | オリンパス株式会社 | 画像表示装置 |
JPH10197796A (ja) * | 1996-12-27 | 1998-07-31 | Olympus Optical Co Ltd | ファインダー光学系 |
US6377229B1 (en) * | 1998-04-20 | 2002-04-23 | Dimensional Media Associates, Inc. | Multi-planar volumetric display system and method of operation using three-dimensional anti-aliasing |
US6466185B2 (en) | 1998-04-20 | 2002-10-15 | Alan Sullivan | Multi-planar volumetric display system and method of operation using psychological vision cues |
US6215532B1 (en) | 1998-07-27 | 2001-04-10 | Mixed Reality Systems Laboratory Inc. | Image observing apparatus for observing outside information superposed with a display image |
JP2000105348A (ja) * | 1998-07-27 | 2000-04-11 | Mr System Kenkyusho:Kk | 画像観察装置 |
JP4100531B2 (ja) * | 1998-08-11 | 2008-06-11 | 株式会社東京大学Tlo | 情報提示方法及び装置 |
JP2000171750A (ja) * | 1998-12-03 | 2000-06-23 | Sony Corp | ヘッドマウントディスプレイ、表示方法、および提供媒体 |
JP2000227554A (ja) * | 1999-02-05 | 2000-08-15 | Olympus Optical Co Ltd | 結像光学系 |
JP2000330025A (ja) * | 1999-05-19 | 2000-11-30 | Olympus Optical Co Ltd | ルーバーを用いた結像光学系 |
WO2001059507A1 (en) * | 2000-02-11 | 2001-08-16 | Emd Ltd. (Eyeglasses Mounted Display Limited) | Optical beam-splitter unit and binocular display device containing such a unit |
WO2001068540A2 (en) * | 2000-03-16 | 2001-09-20 | Lee Scott Friend | Imaging apparatus |
HU227185B1 (en) * | 2000-06-05 | 2010-10-28 | Lumus Ltd | Substrage-guided optical beam expander |
US20020000951A1 (en) * | 2000-06-26 | 2002-01-03 | Richards Angus Duncan | Display device enhancements |
EP1430349B1 (de) * | 2000-10-07 | 2009-12-09 | Metaio Gmbh | Informationssystem |
US6457834B1 (en) | 2001-01-24 | 2002-10-01 | Scram Technologies, Inc. | Optical system for display panel |
EP1231780A3 (en) * | 2001-02-07 | 2004-01-14 | Sony Corporation | Image pickup apparatus |
JP2002244074A (ja) * | 2001-02-15 | 2002-08-28 | Mixed Reality Systems Laboratory Inc | 画像表示装置 |
FR2826221B1 (fr) | 2001-05-11 | 2003-12-05 | Immervision Internat Pte Ltd | Procede d'obtention et d'affichage d'une image panoramique numerique a resolution variable |
US7009773B2 (en) | 2001-05-23 | 2006-03-07 | Research Foundation Of The University Of Central Florida, Inc. | Compact microlenslet arrays imager |
EP1402304A2 (en) * | 2001-06-21 | 2004-03-31 | Koninklijke Philips Electronics N.V. | Display device |
US6593561B2 (en) * | 2001-06-22 | 2003-07-15 | Litton Systems, Inc. | Method and system for gathering image data using multiple sensors |
US7940299B2 (en) * | 2001-08-09 | 2011-05-10 | Technest Holdings, Inc. | Method and apparatus for an omni-directional video surveillance system |
US6473241B1 (en) * | 2001-11-27 | 2002-10-29 | The United States Of America As Represented By The Secretary Of The Air Force | Wide field-of-view imaging system using a reflective spatial light modulator |
US7084904B2 (en) * | 2002-09-30 | 2006-08-01 | Microsoft Corporation | Foveated wide-angle imaging system and method for capturing and viewing wide-angle images in real time |
US7427996B2 (en) * | 2002-10-16 | 2008-09-23 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
JP2004170386A (ja) * | 2002-10-28 | 2004-06-17 | Seiko Epson Corp | 検査装置及び検査方法、液滴吐出装置及び液滴吐出方法、デバイス及び電子機器 |
JP2004153605A (ja) | 2002-10-31 | 2004-05-27 | Victor Co Of Japan Ltd | 撮像装置及び撮像画像伝送システム |
GB0228089D0 (en) * | 2002-12-02 | 2003-01-08 | Seos Ltd | Dynamic range enhancement of image display apparatus |
JP4288939B2 (ja) * | 2002-12-05 | 2009-07-01 | ソニー株式会社 | 撮像装置 |
JP4304973B2 (ja) * | 2002-12-10 | 2009-07-29 | ソニー株式会社 | 撮像装置 |
US6870653B2 (en) * | 2003-01-31 | 2005-03-22 | Eastman Kodak Company | Decoupled alignment axis for fold mirror adjustment |
US7542090B1 (en) * | 2003-03-21 | 2009-06-02 | Aerodyne Research, Inc. | System and method for high-resolution with a small-format focal-plane array using spatial modulation |
US20050117015A1 (en) * | 2003-06-26 | 2005-06-02 | Microsoft Corp. | Foveated panoramic camera system |
US7336299B2 (en) * | 2003-07-03 | 2008-02-26 | Physical Optics Corporation | Panoramic video system with real-time distortion-free imaging |
JP2005094417A (ja) * | 2003-09-18 | 2005-04-07 | Sony Corp | 撮像装置 |
AU2003297061A1 (en) * | 2003-12-12 | 2005-07-14 | Headplay (Barbados) Inc. | Optical arrangements for head mounted displays |
DE10359691A1 (de) * | 2003-12-18 | 2005-07-14 | Carl Zeiss | Beobachtungssystem und -verfahren |
DE602005007403D1 (de) * | 2004-03-25 | 2008-07-24 | Olympus Corp | Scannendes konfokales Mikroskop |
KR100491271B1 (ko) * | 2004-04-30 | 2005-05-25 | 주식회사 나노포토닉스 | 전방위 거울 및 이를 이용한 영상 시스템 |
US20070182812A1 (en) * | 2004-05-19 | 2007-08-09 | Ritchey Kurtis J | Panoramic image-based virtual reality/telepresence audio-visual system and method |
US7639208B1 (en) | 2004-05-21 | 2009-12-29 | University Of Central Florida Research Foundation, Inc. | Compact optical see-through head-mounted display with occlusion support |
JP2008508621A (ja) * | 2004-08-03 | 2008-03-21 | シルバーブルック リサーチ ピーティワイ リミテッド | ウォークアップ印刷 |
US20060055811A1 (en) * | 2004-09-14 | 2006-03-16 | Frtiz Bernard S | Imaging system having modules with adaptive optical elements |
US7532771B2 (en) * | 2004-11-12 | 2009-05-12 | Microsoft Corporation | Image processing system for digital collage |
JP4689266B2 (ja) * | 2004-12-28 | 2011-05-25 | キヤノン株式会社 | 画像表示装置 |
US7884947B2 (en) | 2005-01-20 | 2011-02-08 | Zygo Corporation | Interferometry for determining characteristics of an object surface, with spatially coherent illumination |
US20070002131A1 (en) * | 2005-02-15 | 2007-01-04 | Ritchey Kurtis J | Dynamic interactive region-of-interest panoramic/three-dimensional immersive communication system and method |
DE102005012763A1 (de) * | 2005-03-19 | 2006-09-21 | Diehl Bgt Defence Gmbh & Co. Kg | Weitwinkeloptik |
US7023628B1 (en) * | 2005-04-05 | 2006-04-04 | Alex Ning | Compact fisheye objective lens |
ES2386724T3 (es) * | 2005-12-15 | 2012-08-28 | Saab Ab | Visualizador de cabeza alta |
ATE434200T1 (de) * | 2005-12-29 | 2009-07-15 | Fiat Ricerche | Optisches system zur bildübertragung, besonders für projektionsgeräte der kopfmontierten art |
CN101021669A (zh) * | 2006-02-13 | 2007-08-22 | 耿忠 | 全视场成像与显示方法与系统 |
US20100045773A1 (en) * | 2007-11-06 | 2010-02-25 | Ritchey Kurtis J | Panoramic adapter system and method with spherical field-of-view coverage |
CN100526936C (zh) * | 2006-03-09 | 2009-08-12 | 比亚迪股份有限公司 | 一种头盔显示器的光学成像系统 |
JP2007248545A (ja) * | 2006-03-14 | 2007-09-27 | Konica Minolta Holdings Inc | 映像表示装置および映像表示システム |
US20080097347A1 (en) | 2006-09-22 | 2008-04-24 | Babak Arvanaghi | Bendable needle assembly |
US8072482B2 (en) * | 2006-11-09 | 2011-12-06 | Innovative Signal Anlysis | Imaging system having a rotatable image-directing device |
CN101029968A (zh) * | 2007-04-06 | 2007-09-05 | 北京理工大学 | 可寻址光线屏蔽机制光学透视式头盔显示器 |
EP2142953B1 (en) * | 2007-04-22 | 2019-06-05 | Lumus Ltd | A collimating optical device and system |
US7589901B2 (en) | 2007-07-10 | 2009-09-15 | Microvision, Inc. | Substrate-guided relays for use with scanned beam light sources |
KR100882011B1 (ko) * | 2007-07-29 | 2009-02-04 | 주식회사 나노포토닉스 | 회전 대칭형의 광각 렌즈를 이용하여 전방위 영상을 얻는 방법 및 장치 |
US7973834B2 (en) | 2007-09-24 | 2011-07-05 | Jianwen Yang | Electro-optical foveated imaging and tracking system |
JP2009122379A (ja) | 2007-11-14 | 2009-06-04 | Canon Inc | 光学装置及びその制御方法、撮像装置、並びにプログラム |
JP5201957B2 (ja) * | 2007-11-21 | 2013-06-05 | キヤノン株式会社 | 撮像装置 |
JP5153351B2 (ja) * | 2008-01-18 | 2013-02-27 | キヤノン株式会社 | ズームレンズ及びそれを有する光学機器 |
US7952783B2 (en) * | 2008-09-22 | 2011-05-31 | Microvision, Inc. | Scanning mirror control |
CN102265124A (zh) * | 2008-11-04 | 2011-11-30 | 威廉马什赖斯大学 | 像映射光谱仪 |
US20110164108A1 (en) * | 2009-12-30 | 2011-07-07 | Fivefocal Llc | System With Selective Narrow FOV and 360 Degree FOV, And Associated Methods |
US20110213664A1 (en) | 2010-02-28 | 2011-09-01 | Osterhout Group, Inc. | Local advertising content on an interactive head-mounted eyepiece |
JP2013521576A (ja) * | 2010-02-28 | 2013-06-10 | オスターハウト グループ インコーポレイテッド | 対話式ヘッド取付け型アイピース上での地域広告コンテンツ |
US8743199B2 (en) * | 2010-03-09 | 2014-06-03 | Physical Optics Corporation | Omnidirectional imaging optics with 360°-seamless telescopic resolution |
WO2012037290A2 (en) | 2010-09-14 | 2012-03-22 | Osterhout Group, Inc. | Eyepiece with uniformly illuminated reflective display |
US8941559B2 (en) | 2010-09-21 | 2015-01-27 | Microsoft Corporation | Opacity filter for display device |
JP2012252091A (ja) | 2011-06-01 | 2012-12-20 | Sony Corp | 表示装置 |
US9071742B2 (en) * | 2011-07-17 | 2015-06-30 | Ziva Corporation | Optical imaging with foveation |
AU2011204946C1 (en) * | 2011-07-22 | 2012-07-26 | Microsoft Technology Licensing, Llc | Automatic text scrolling on a head-mounted display |
US9256117B2 (en) * | 2011-10-07 | 2016-02-09 | L-3 Communications Cincinnati Electronics Corporation | Panoramic imaging systems comprising rotatable mirrors for image stabilization |
NZ700887A (en) * | 2012-04-05 | 2016-11-25 | Magic Leap Inc | Wide-field of view (fov) imaging devices with active foveation capability |
KR20140118770A (ko) | 2013-03-27 | 2014-10-08 | 가부시키가이샤 한도오따이 에네루기 켄큐쇼 | 표시 장치 |
US9494792B2 (en) | 2013-07-30 | 2016-11-15 | Global Oled Technology Llc | Local seal for encapsulation of electro-optical element on a flexible substrate |
US20160077345A1 (en) | 2014-09-17 | 2016-03-17 | Michael Bohan | Eliminating Binocular Rivalry in Monocular Displays |
EP3163379B1 (en) * | 2015-10-28 | 2019-10-16 | Samsung Electronics Co., Ltd. | See-through holographic display apparatus |
-
2013
- 2013-04-04 NZ NZ700887A patent/NZ700887A/en unknown
- 2013-04-04 KR KR1020217005871A patent/KR102306729B1/ko active IP Right Grant
- 2013-04-04 KR KR1020147031167A patent/KR102022719B1/ko active IP Right Grant
- 2013-04-04 CA CA3111134A patent/CA3111134A1/en not_active Abandoned
- 2013-04-04 CN CN201810181619.5A patent/CN108391033B/zh active Active
- 2013-04-04 US US13/856,847 patent/US9851563B2/en active Active
- 2013-04-04 AU AU2013243380A patent/AU2013243380B2/en active Active
- 2013-04-04 WO PCT/US2013/035293 patent/WO2013152205A1/en active Application Filing
- 2013-04-04 KR KR1020187009611A patent/KR102028732B1/ko active Application Filing
- 2013-04-04 NZ NZ725322A patent/NZ725322A/en unknown
- 2013-04-04 EP EP19193685.5A patent/EP3608717B1/en active Active
- 2013-04-04 KR KR1020197028502A patent/KR102095330B1/ko active IP Right Grant
- 2013-04-04 BR BR112014024941A patent/BR112014024941A2/pt not_active IP Right Cessation
- 2013-04-04 EP EP13772991.9A patent/EP2841991B1/en active Active
- 2013-04-04 RU RU2015156050A patent/RU2015156050A/ru not_active Application Discontinuation
- 2013-04-04 JP JP2015504728A patent/JP6176747B2/ja active Active
- 2013-04-04 CN CN201380029492.0A patent/CN104541201B/zh active Active
- 2013-04-04 KR KR1020207008629A patent/KR102223290B1/ko active IP Right Grant
- 2013-04-04 CA CA2869781A patent/CA2869781C/en active Active
- 2013-04-04 KR KR1020217030170A patent/KR102404537B1/ko active IP Right Grant
- 2013-04-05 KR KR1020207034778A patent/KR102345444B1/ko active IP Right Grant
- 2013-04-05 NZ NZ725339A patent/NZ725339A/en unknown
- 2013-04-05 IL IL308962A patent/IL308962A/en unknown
- 2013-04-05 AU AU2013289157A patent/AU2013289157B2/en active Active
- 2013-04-05 CN CN201711317230.0A patent/CN107843988B/zh active Active
- 2013-04-05 EP EP20206176.8A patent/EP3796071B1/en active Active
- 2013-04-05 KR KR1020187009715A patent/KR102124350B1/ko active IP Right Grant
- 2013-04-05 KR KR1020187009709A patent/KR102099156B1/ko active IP Right Grant
- 2013-04-05 KR KR1020147031031A patent/KR102188748B1/ko active IP Right Grant
- 2013-04-05 JP JP2015504750A patent/JP6126682B2/ja active Active
- 2013-04-05 EP EP13817261.4A patent/EP2834699B1/en active Active
- 2013-04-05 IL IL300033A patent/IL300033B2/en unknown
- 2013-04-05 CA CA2874576A patent/CA2874576C/en active Active
- 2013-04-05 NZ NZ700898A patent/NZ700898A/en unknown
- 2013-04-05 CN CN201711317271.XA patent/CN107976818B/zh active Active
- 2013-04-05 BR BR112014024945-8A patent/BR112014024945A2/pt not_active IP Right Cessation
- 2013-04-05 CN CN201380029550.XA patent/CN104937475B/zh active Active
- 2013-04-05 CA CA3138549A patent/CA3138549A1/en active Pending
- 2013-04-05 NZ NZ740631A patent/NZ740631A/en unknown
- 2013-04-05 WO PCT/US2013/035486 patent/WO2014011266A2/en active Application Filing
- 2013-04-05 NZ NZ724344A patent/NZ724344A/en unknown
- 2013-04-05 KR KR1020187009706A patent/KR102129330B1/ko active IP Right Grant
- 2013-04-05 US US13/857,656 patent/US9547174B2/en active Active
- 2013-04-05 EP EP24154095.4A patent/EP4339690A3/en active Pending
-
2015
- 2015-12-22 RU RU2015154980A patent/RU2015154980A/ru not_active Application Discontinuation
-
2016
- 2016-09-27 US US15/277,887 patent/US9726893B2/en active Active
-
2017
- 2017-03-10 AU AU2017201669A patent/AU2017201669B2/en active Active
- 2017-04-07 JP JP2017076771A patent/JP6434076B2/ja active Active
- 2017-05-15 AU AU2017203227A patent/AU2017203227B2/en active Active
- 2017-05-26 US US15/607,335 patent/US9874752B2/en active Active
- 2017-06-20 JP JP2017120476A patent/JP6322753B2/ja active Active
- 2017-11-13 US US15/811,543 patent/US10061130B2/en active Active
- 2017-12-06 US US15/833,945 patent/US10048501B2/en active Active
-
2018
- 2018-04-09 JP JP2018074580A patent/JP2018139421A/ja not_active Withdrawn
- 2018-05-11 US US15/977,593 patent/US10175491B2/en active Active
- 2018-06-12 US US16/006,717 patent/US10162184B2/en active Active
- 2018-08-15 IL IL261165A patent/IL261165B/en active IP Right Grant
- 2018-09-25 US US16/141,730 patent/US20190018249A1/en not_active Abandoned
- 2018-11-07 JP JP2018209499A patent/JP6768046B2/ja active Active
- 2018-11-20 US US16/196,886 patent/US10451883B2/en active Active
-
2019
- 2019-09-02 US US16/558,241 patent/US10901221B2/en active Active
-
2020
- 2020-06-25 IL IL275662A patent/IL275662B/en unknown
- 2020-09-18 JP JP2020157204A patent/JP6944578B2/ja active Active
- 2020-12-18 US US17/127,316 patent/US11656452B2/en active Active
-
2021
- 2021-06-20 IL IL284204A patent/IL284204B/en unknown
- 2021-09-10 JP JP2021147476A patent/JP7216165B2/ja active Active
-
2022
- 2022-04-06 IL IL292007A patent/IL292007B2/en unknown
-
2023
- 2023-01-19 JP JP2023006331A patent/JP2023052497A/ja active Pending
- 2023-04-04 US US18/295,685 patent/US20230244074A1/en active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0792426A (ja) * | 1993-09-24 | 1995-04-07 | Sony Corp | 視覚装置 |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7216165B2 (ja) | 相互遮蔽および不透明度制御能力を有する光学式シースルー型ヘッドマウントディスプレイのための装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right |