KR20220124294A - 3차원 가상 및 증강 현실 디스플레이 시스템 - Google Patents

3차원 가상 및 증강 현실 디스플레이 시스템 Download PDF

Info

Publication number
KR20220124294A
KR20220124294A KR1020227030044A KR20227030044A KR20220124294A KR 20220124294 A KR20220124294 A KR 20220124294A KR 1020227030044 A KR1020227030044 A KR 1020227030044A KR 20227030044 A KR20227030044 A KR 20227030044A KR 20220124294 A KR20220124294 A KR 20220124294A
Authority
KR
South Korea
Prior art keywords
viewer
dimensional image
image
eye
projection device
Prior art date
Application number
KR1020227030044A
Other languages
English (en)
Other versions
KR102513896B1 (ko
Inventor
존 그라함 맥나마라
Original Assignee
매직 립, 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 매직 립, 인코포레이티드 filed Critical 매직 립, 인코포레이티드
Publication of KR20220124294A publication Critical patent/KR20220124294A/ko
Application granted granted Critical
Publication of KR102513896B1 publication Critical patent/KR102513896B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/22—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
    • G02B30/24—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type involving temporal multiplexing, e.g. using sequentially activated left and right shutters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/39—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume the picture elements emitting light at places where a pair of light beams intersect in a transparent material
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/34—Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. 3D slide viewers
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/50—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels
    • G02B30/52—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels the 3D volume being constructed from a stack or sequence of 2D planes, e.g. depth sampling systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/18—Diffraction gratings
    • G02B5/1876—Diffractive Fresnel lenses; Zone plates; Kinoforms
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G03B35/08—Stereoscopic photography by simultaneous recording
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G03B35/18—Stereoscopic photography by simultaneous viewing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/322—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using varifocal lenses or mirrors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/395—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume with depth sampling, i.e. the volume being constructed from a stack or sequence of 2D image planes
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/18—Diffraction gratings
    • G02B5/1828—Diffraction gratings having means for producing variable diffraction

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

시스템은, 뷰어의 눈에 관련하여 공간적으로 투사 디바이스 위치로부터 뷰어의 눈을 향하여 이미지를 투사하기 위한 선택적으로 투명한 투사 디바이스 ― 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 투사 디바이스에 커플링되고, 투사 디바이스에 의해 투사되는 이미지와 상관된 차폐 패턴(occluding pattern)으로, 투사 디바이스의 대향하는 하나 또는 둘 이상의 위치들로부터 눈을 향하여 이동하는 광을, 뷰어의 눈으로부터 선택적으로 블록킹하도록 구성되는 차폐 마스크 디바이스(occlusion mask device); 및 뷰어의 눈과 투사 디바이스 사이에 개재되고, 투사 디바이스로부터의 광이 눈으로 이동할 때, 상기 투사 디바이스로부터의 광이, 선택가능 기하학적 구조를 갖는 회절 패턴을 통과하게 하도록 구성된 존 플레이트 회절 패터닝 디바이스를 포함할 수 있다.

Description

3차원 가상 및 증강 현실 디스플레이 시스템 {THREE DIMENSIONAL VIRTUAL AND AUGMENTED REALITY DISPLAY SYSTEM}
관련된 출원 데이터
본원은 35 U.S.C. §119 하에서, 2011년 11월 23일 출원된 미국 가출원 번호 제 61/563,403호를 우선권으로 주장한다. 상기 미국 가출원은 이로써 그 전체 내용이 인용에 의해 본원에 포함된다.
본 발명은 가상 현실 및 증강 현실 이미징 및 시각화 시스템들에 관한 것이다.
3D 디스플레이가 진짜 깊이 느낌(true sensation of depth), 더욱 구체적으로는 시뮬레이팅된 표면 깊이 느낌을 생성하도록 하기 위해, 디스플레이의 시야(visual field)의 각각의 포인트가 그의 가상 깊이(virtual depth)에 대응하는 조절 반응(accommodative response)을 발생하는 것이 바람직하다. 디스플레이 포인트에 대한 조절 반응이, 수렴(convergence) 및 입체성(stereopsis)의 양안 깊이 단서(binocular depth cue)들에 의해 결정된 바와 같은 그러한 포인트의 가상 깊이에 대응하지 않는 경우, 인간의 눈은 조절 충돌(accommodation conflict)을 경험할 수 있어서, 불안정한 이미징, 해로운 눈 피로감, 두통들, 그리고 조절 정보의 부재시 표면 깊이의 거의 완전한 결여를 초래한다. 도 1을 참조하면, 증강 현실 시나리오(8)는, 공원 환경(park setting)의 콘크리트 스테이지 대상물(concrete stage object)(1120)을 포함하는 조경 아이템(landscaping item)들과 같은, 사용자의 현실 내의 실제 대상물들의 사용자에 대한 뷰들, 및 또한 "증강(augmented)" 현실 뷰를 생성하기 위해 상기 사용자의 뷰들에 부가된 가상의 대상물들의 뷰들을 이용하여 도시되고; 여기서, 스테이지 대상물(1120) 위에 가상으로 서있는 로봇 조각상(1110)이 도시되고, 사용자의 머리 가까이의 공간에서 날고 있는 벌 캐릭터(2)가 도시된다. 바람직하게, 증강 현실 시스템은 3-D 가능하고(3-D capable), 이러한 경우, 상기 증강 현실 시스템은 사용자에게, 조각상(1110)이 스테이지(1120) 위에 서 있다는 지각(perception), 및 벌 캐릭터(2)가 사용자의 머리 가까이 날고 있다는 지각을 제공한다. 이러한 지각은, 가상의 대상물들(2, 1110)이 상이한 초점 깊이들을 갖고, 로봇 조각상(1110)에 대한 초점 반경들 또는 초점 깊이가 스테이지(1120)에 대한 초점 반경들 또는 초점 깊이와 거의 동일하다는, 사용자의 눈 및 뇌에 대한 시각적 조절 단서들을 활용함으로써 매우 향상될 수 있다. 도 2에 도시된 것과 같은 통상의 입체영상 3-D 시뮬레이션 디스플레이 시스템들은 통상적으로, 고정 반경 초점 거리(10)에 있는 2개의 디스플레이들(74, 76) ― 각각의 눈에 대해 하나의 디스플레이 ― 을 갖는다. 상기 명시된 바와 같이, 이러한 통상의 기술은, 눈을 이용하여 상이한 초점 깊이에 도달하기 위해 복잡한 눈 내의 수정체의 눈의 재위치지정(repositioning)과 연관되는 조절 단서를 포함하여, 3차원에서 깊이를 검출 및 해석하기 위해 인간의 눈 및 뇌에 의해 활용되는 많은 귀중한 단서들을 놓친다. 복잡한, 인간의 눈/뇌 이미지 프로세싱의 조절 양상들을 고려하는 조절 정밀 디스플레이 시스템(accommodation accurate display system)에 대한 필요성이 존재한다.
일 실시예는 3-차원 이미지 시각화 시스템에 관한 것으로, 상기 3-차원 이미지 시각화 시스템은, 뷰어의 눈에 관련하여 공간적으로 투사 디바이스 위치로부터 뷰어의 눈을 향하여 이미지를 투사하기 위한 선택적으로 투명한 투사 디바이스 ― 투사 디바이스는 어떠한 이미지도 투사되지 않는 경우 실질적으로 투명한 상태를 나타낼 수 있음 ―; 투사 디바이스에 커플링되고, 투사 디바이스에 의해 투사되는 이미지와 상관된 차폐 패턴(occluding pattern)으로, 투사 디바이스의 대향하는 하나 또는 둘 이상의 위치들로부터 눈을 향하여 이동하는 광을, 뷰어의 눈으로부터 선택적으로 블록킹하도록 구성되는 차폐 마스크 디바이스(occlusion mask device); 및 뷰어의 눈과 투사 디바이스 사이에 개재되고, 투사 디바이스로부터의 광이 눈으로 이동할 때, 상기 투사 디바이스로부터의 광이 선택가능 기하학적 구조(geometry)를 갖는 회절 패턴(diffraction pattern)을 통과하게, 그리고 회절 패턴의 선택가능 기하학적 구조에 적어도 부분적으로 기초하여 눈으로부터의 시뮬레이팅된 초점 거리로 눈에 진입하게 하도록 구성된 존 플레이트 회절 패터닝 디바이스(zone plate diffraction patterning device)를 포함한다. 시스템은 투사 디바이스, 차폐 마스크 디바이스, 및 존 플레이트 회절 패터닝 디바이스에 동작가능하게 커플링되고, 선택가능 기하학적 구조의 회절 패턴의 개재뿐만 아니라 이미지의 투사 및 연관된 차폐 패턴을 조정(coordinate)하도록 구성된 제어기를 더 포함할 수 있다. 제어기는 마이크로프로세서를 포함할 수 있다. 투사 디바이스는 디스플레이 플레인(display plane)을 실질적으로 점유하는 실질적으로 평면형의 투명 디지털 디스플레이를 포함할 수 있다. 디스플레이 플레인은 뷰어의 눈의 시축(visual axis)으로부터 실질적으로 수직으로 배향될 수 있다. 실질적으로 평면형의 투명 디지털 디스플레이는 액정 디스플레이를 포함할 수 있다. 실질적으로 평면형의 투명 디지털 디스플레이는 유기 발광 다이오드 디스플레이를 포함할 수 있다. 투사 디바이스는, 뷰어의 눈에 대한 초점 깊이가 무한 초점 깊이이도록 콜리메이팅(collimate)된 형태로 눈을 향하여 이미지를 투사하도록 구성될 수 있다. 투사 디바이스는, 뷰어의 눈으로의 전달 전에 이미지의 크기를 확대하도록 구성된 기판-가이드 지연 엑시트 동공 익스팬더 디바이스(substrate-guided delay exit pupil expander device)에 커플링된 고속 소형-투사기를 포함할 수 있다. 소형-투사기는 뷰어의 눈의 시축에 실질적으로 수직으로 장착될 수 있고, 기판-가이드 지연 엑시트 동공 익스팬더 디바이스는, 소형-투사기로부터 이미지를 수신하여, 상기 수신된 이미지를 존 플레이트 회절 패터닝 디바이스에 그리고 눈의 시축과 실질적으로 정렬된 배향으로, 확대된 크기로, 뷰어의 눈에 전달하도록 구성된다. 존 플레이트 회절 패터닝 디바이스 및 투사 디바이스는 적어도 하나의 공통 구조를 포함할 수 있다. 투사 디바이스가, 도파관(waveguide)에 커플링되고 이미지가 뷰어의 눈으로 가는 도중에 도파관을 빠져나가기 전에 이미지를 회절 패턴에 통과시키도록 구성된 고속 소형-투사기를 포함하도록, 존 플레이트 회절 패터닝 디바이스가 도파관에 통합될 수 있다. 소형-투사기는 뷰어의 눈의 시축에 실질적으로 수직으로 장착될 수 있고, 도파관은 소형-투사기로부터 이미지를 수신하여, 상기 이미지를, 눈의 시축과 실질적으로 정렬된 배향으로, 확대된 크기로, 뷰어의 눈에 전달하도록 구성될 수 있다. 차폐 마스크 디바이스는, 각각의 부분에서 광을 차폐 또는 통과시키라는 적절한 명령에 따라, 디스플레이의 복수의 부분들 각각에서 광을 차폐 또는 통과시키도록 구성된 디스플레이를 포함할 수 있다. 차폐 마스크 디바이스는 하나 또는 둘 이상의 액정 디스플레이들을 포함할 수 있다. 존 플레이트 회절 패터닝 디바이스는, 각각의 부분에서 광을 차폐 또는 통과시키라는 적절한 명령에 따라, 디스플레이의 복수의 부분들 각각에서 광을 차폐 또는 통과시키도록 구성된 고주파 바이너리 디스플레이(high-frequency binary display)를 포함할 수 있다. 존 플레이트 회절 패터닝 디바이스는 약 500㎐ 내지 약 2,000㎐의 리프레시 레이트(refresh rate)를 가질 수 있다. 존 플레이트 회절 패터닝 디바이스는 약 720㎐의 리프레시 레이트를 가질 수 있다. 제어기는, 초당 약 30 내지 약 60 프레임들에서 투사 디바이스 및 차폐 마스크 디바이스를 동작시키도록, 그리고 투사 디바이스 및 차폐 마스크 디바이스의 각각의 프레임에 대해 약 12개까지의 상이한 회절 패턴들을 디지털로 디스플레이하기 위해 존 플레이트 회절 패터닝 디바이스를 동작시키도록 구성될 수 있다. 투사 디바이스, 차폐 마스크 디바이스, 및 존 플레이트 회절 패터닝 디바이스는 집합적으로, 뷰어의 단일 눈을 위한 이미징 모듈을 포함할 수 있고, 시스템은 뷰어의 다른 눈을 위한 제 2 이미징 모듈을 더 포함할 수 있다.
도 1은 사람에 의해 뷰잉되는 특정 실제 현실 대상물들 및 특정 가상 현실 대상물들을 이용한 증강 현실 시나리오의 예시를 도시한다.
도 2는 사용자를 위해 3차원 이미징을 시뮬레이팅하는 통상의 입체영상(stereoscopy) 시스템을 예시한다.
도 3a 및 도 3b는 조절 정밀 디스플레이 구성의 양상들을 예시한다.
도 4a-도 4c는 곡률 반경과 초점 반경 사이의 관계들을 예시한다.
도 5-도 6c는 대상(subject) 구성들에 적용되는 바와 같은 회절 격자(diffraction grating)들의 양상들을 예시한다.
도 7a-도 7c는 3개의 상이한 초점 메커니즘들을 예시한다.
도 7d는 프레넬 존 플레이트(Fresnel zone plate)를 예시한다.
도 8a-도 8c는 회절 시스템 초점조정(focusing) 이슈들의 다양한 양상들을 예시한다.
도 9는 임베딩된 회절 격자를 갖는 도파관의 일 실시예를 예시한다.
도 10은 하나의 모드가 도파관을 탈출하고, 그리고 다른 모드들은 도파관에 트랩(trap)되어 유지되도록 하기 위해 설계된 임베딩된 회절 격자를 갖는 도파관의 일 실시예를 예시한다.
도 11a 및 도 11b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 12a 및 도 12b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 13a 및 도 13b는 회절 이미징 모듈 실시예의 양상들을 예시한다.
도 3a 및 도 3b를 참조하면, AAD 시스템의 다양한 양상들이 도시된다. 도 3a를 참조하면, 단순 예시는, 입체영상(도 2)에서와 같은 2개의 통상의 디스플레이들의 위치에서, 지각되는 이미지 내에 3차원 깊이 레이어링의 지각을 각각의 눈에 제공하기 위해, 각각의 이미지의 다양한 양상들(14)에 대해 다양한 반경 초점 깊이들(12)을 갖는 2개의 복합 이미지들 ― 각각의 눈에 대해 하나의 복합 이미지 ― 이 활용될 수 있다는 것을 보여준다.
도 3b를 참조하면, 본 발명자들은, 통상의 인간의 눈이, 반경 거리에 기초하여 대략 12개의 깊이의 레이어들(도 3b의 레이어들(L1-L12) - 도면 엘리먼트 16)을 해석(interpret)할 수 있다고 결정하였다. 약 0.25 미터의 근거리 필드 한계(near field limit)(78)는 가장 가까운 초점 깊이에 관한 것이며; 약 3 미터의 원거리-필드 한계(far-field limit)(80)는, 인간의 눈으로부터 약 3 미터보다 더 멀리 있는 임의의 아이템은 무한 초점(infinite focus)을 받는다는 것을 의미한다. 눈에 더 가까워질수록, 초점 레이어들이 더욱더 얇아지는데; 즉, 눈은, 상대적으로 눈에 가까운 초점 거리에서 상당히 작은 차이들을 지각할 수 있고, 도 3b에 도시된 바와 같이, 이러한 효과는 대상물들이 눈으로부터 더 멀어져 갈수록 소멸된다. 엘리먼트(82)는 무한의 대상물 위치에서, 초점 깊이 / 굴절광학 간격 값(depth of focus / dioptric spacing value)이 약 1/3 디옵터(diopters)라는 것을 예시한다. 도 3b의 중요성을 기술하는 하나의 다른 방식은: 사용자의 눈과 무한대(infinity) 사이에 약 12개의 초점 플레인들이 존재한다는 것이다. 이들 초점 플레인들, 및 도시된 관계들 내의 데이터는, 사용자의 뷰잉을 위한 증강 현실 시나리오 내에서 가상 엘리먼트들을 위치지정하기 위해 활용될 수 있는데, 그 이유는, 인간의 눈은 깊이를 지각하기 위해 초점 플레인들을 활용하기 위해 끊임없이 주위를 훑기(sweep) 때문이다.
도 4a-도 4c를 참조하면, K(R)가, 1/R과 동등한 곡률에 대한 동적 파라미터인 경우 ― 여기서, R은 표면에 관한 아이템의 초점 반경임 ―, 반경이 증가함에 따라(R3, R2로, R1까지), K(R)가 감소된다. 포인트에 의해 생성된 광 필드는 구면 곡률을 갖고, 이는 포인트가 사용자의 눈으로부터 얼마나 멀리 떨어져 있는지의 함수이다. 이러한 관계는 또한, AAD 시스템들을 위해 활용될 수 있다.
도 5를 참조하면, 통상의 회절 격자(22)가 도시되고, 이때 광이 각도(세타(theta)-20)에서 격자 간격(18)을 통과하고, 이는 회절 차수(diffraction order)(n), 공간 주파수, 1/d와 동등한 K 팩터와 관련되며, 다음의 식: d*sin(세타)=n*파장(또는 대안적으로 K 팩터를 대체하여, sin(세타)=n*파장*K)을 이용한다. 도 6a-도 6c는 회절 패턴(22, 24, 26)에서 간격(18, 28, 30)이 감소함에 따라, 각도(20, 32, 34)가 더 커진다는 것을 예시한다.
도 7a 내지 도 7c를 참조하면, 3개의 상이한 초점조정(focusing) 메커니즘들 - 렌즈(36)를 통한 굴절, 만곡형 거울(curved mirror)(38)을 이용한 반사, 및 도 7d(40)에 또한 도시된 프레넬 존 플레이트(40)를 이용한 회절이 도시된다.
도 8a를 참조하면, N=-1 모드는 가상 이미지에 대응할 수 있고; N=+1 모드는 실제 이미지에 대응할 수 있고, N=0 모드는 무한에 초점 맞춰진 이미지(focused-at-infinity image)에 대응할 수 있다는 것을 예시하기 위해 단순화된 버전의 회절이 도시된다. 이들 이미지들은 인간의 눈 및 뇌를 혼란시킬 수 있고, 도 8b에 도시된 바와 같이, 모두가 온-축(on-axis) 초점 맞춰지는 경우 특히 문제가 된다. 도 8c를 참조하면, 오프-축(off-axis) 초점 구성은, 원하지 않는 모드들/이미지들의 블록킹을 허용하기 위해 활용될 수 있다. 예를 들어, 시준(collimate)된(r=무한대) 이미지는 N=0 모드에 의해 형성될 수 있고; 분기 가상 이미지(divergent virtual image)는 N=-1 모드에 의해 형성될 수 있고; 수렴 이미지(convergent image)는 N=+1 모드에 의해 형성될 수 있다. 이들 모드들/이미지들의 공간 위치 및 이들의 궤적들에서의 차이는, 오버레잉(overlaying), 고스팅(ghosting), 및 "다중 노출" 지각 영향들과 같은 회절 이미징과 연관된 상술된 문제점들을 방지하기 위해 필터링 제거(filtering out) 또는 분리하는 것을 허용한다.
도 9를 참조하면, 임베딩된 회절 격자를 갖는 도파관이 도시되고; 이러한 도파관들은 예를 들어, 영국 런던의 BAE Systems PLC와 같은 공급자들로부터 입수가능하며, 도시된 바와 같이, 도 9의 좌측으로부터 이미지를 인테이크(intake)하고, 임베딩된 회절 격자(44)를 통해 이미지를 전달하고, 결과적인 이미지를 각도에서 밖으로 전달한다(도 9에서, 예를 들어, 도파관의 측면을 통해). 따라서, 방향수정(redirection) 및 회절의 이중의 사용이 이러한 엘리먼트를 이용하여 달성된다. 실제로, 오프-축 초점 기법들, 이를 테면, 도 8c와 관련하여 기술된 것들은, 도 10에 도시된 것과 같은 구성을 초래하기 위해 도 9에 도시된 것과 같은 회절 도파관 엘리먼트들과 결합될 수 있고, 방향수정 및 회절뿐만 아니라, 필터링도 달성되는데, 그 이유는 도시된 실시예에서, N=-1 모드(가상 이미지라 함)는 도파관으로부터 사용자의 눈으로 전달되고, 다른 2개의 모드들(N=0 및 N=+1)은 반사에 의해 도파관 내부에 트랩되도록, 회절 도파관의 기하학적 구조가 되기 때문이다.
도 11a-도 13c를 참조하면, 상술된 개념들이 다양한 증강 현실 디스플레이 구성들을 이용하여 시연된다.
도 11a를 참조하면, AAD 시스템은 각각의 눈(4, 6) 전방에 이미징 모듈(46, 48)을 포함하고, 이를 통해 사용자가 세계(world)를 본다. 도 11b는, 자신의 연관된(도시된 전자 제어 리드들을 통해 커플링된; 리드들은 또한 무선일 수 있음) 제어기(66) ― 상기 제어기(66)는 마이크로프로세서, 마이크로제어기, FPGA(field programmable gate array), ASIC(application specific integrated circuit) 등일 수 있음 ― 를 갖는 모듈(46)의 확대도를 예시한다. 제어기는 바람직하게 전원 및 또한, 외부 세계와 제어기(66) 사이의 정보의 교환을 허용하기 위해, 정보 교환 디바이스, 이를 테면, 무선 인터넷 또는 블루투스 어댑터에 커플링된다. 시스템은 초당 30 내지 60 프레임들의 레이트와 같은 이미지 리프레시 레이트(image refresh rate)에서 동작하도록 구성될 수 있다. 제어기는, 12개 정도의 깊이 레이어들 각각에 적절한 다양한 존 플레이트 기하학적 구조들을 신속하게 연속적으로 디스플레이하기 위해, 높은-리프레시 레이트 디지털 고해상도 디스플레이(high-refresh rate digital high resolution display)(52), 이를 테면, 페로-리퀴드(ferro-liquid), 블루페이즈(bluephase), 또는 벤트-코어(bent-core) 디스플레이를 동작시키도록 구성될 수 있다. 예를 들어, 초당 60 프레임들의, 전체적인 성능이 요구되는 실시예에서, 존 플레이트 디스플레이(52)는, 도 3b에 도시된 바와 같은 12개의 깊이 레이어들 각각에 대해 시뮬레이팅된 조절을 제공할 수 있도록, 상기 60 프레임의 12배 또는 720㎐로 동작될 수 있다. 차폐 마스크 디스플레이(54)는, 그 전에 투명 투사 레이어(56) 상에 디스플레이된 이미지에 기하학적으로 대응하는 블랙 아웃(black out)된 이미지를 디스플레이하도록 구성된다 ― 차폐 마스크 디스플레이의 다른 측으로부터의 광이, 투사기 레이어(56)에서 원하는 가상 또는 증강 이미지의 디스플레이와 간섭하는 또는 블리딩 스루(bleed through)하는 것을 방지하기 위해 블랙 아웃되었음 ―. 따라서, 증강 현실 구성에서, 도시된 바와 같이, 실제 배경으로부터의 광은 차폐 마스크(54)의 비-마스킹(non-masked) 부분들을 통해, 투명 투사기 레이어(56)의 투명한(즉, 이미지의 부분을 브로드캐스팅하지 않는) 부분들을 통해, 그리고 조절 처리를 위해 존 플레이트 레이어(52)로 전달되며; 투사 레이어(56)에 투사된 이미지들은, 차폐 레이어(54)에서 배경 광으로부터 마스크 블록킹을 받고, 조절 처리를 위해 존 플레이트 레이어(52)로 투사 포워딩된다. 이들의 결합, 또는 사용자에 대한 증강 현실의 연관된 지각은 "진짜 3-D(true 3-D)"에 매우 가깝다.
도 12a-도 12b는 다른 실시예를 도시하고, 여기서 이미징 모듈(58)은, 눈의 시축에 거의 수직하는 각도로 배향된 고해상도 소형 투사기를 포함하고; 기판-가이드 지연 엑시트 동공 익스팬더 디바이스(70)를 포함하는 도파관은 작은 소형 투사기로부터의 이미지를 확대하여, 존 플레이트 레이어(52)로 방향수정하고; 차폐 레이어(54)는, 투사된 이미지들의 지각을 배경 조명으로부터 보호하기 위해 유사한 마스킹 기능들을 제공한다.
도 13a-도 13b는, 존 플레이트 및 투사 레이어가 본질적으로 동일한 통합 모듈(integrated module: 72) 내에 하우징되도록, 엘리먼트들(52 및 70)이 결합되는 다른 실시예를 도시하고, 상기 모듈(72)은, 눈으로의 통과(passage)를 위해, 소형 투사기(68)로부터 작은 이미지를 인테이크(intake)하고, 상기 작은 이미지를 방향수정(redirect) 및 확대하고, 그리고 또한 이를 회절하며; 차폐 레이어(54)는 투사된 이미지들의 지각을 배경 조명으로부터 보호하기 위해 유사한 마스킹 기능들을 제공한다.
본 발명의 다양한 전형적인 실시예들이 본 명세서에서 설명된다. 이들 예들에 대한 참조는 비-제한적인 의미로 이루어진다. 이들은 본 발명의 더욱 광범위하게 적용가능한 양상들을 예시하기 위해 제공된다. 본 발명의 진짜 사상 및 범주로부터 벗어남이 없이, 설명된 본 발명에 대한 다양한 변경들이 이루어질 수 있고, 동등물들이 대체될 수 있다. 부가하여, 특정 상황, 재료, 물질의 조성, 프로세스, 프로세스 동작(들), 또는 단계(들)를 본 발명의 목적(들), 사상, 또는 범주에 적응시키기 위해 많은 수정들이 이루어질 수 있다. 추가로, 당업자들에 의해 이해될 바와 같이, 본 발명들의 범주 또는 사상으로부터 벗어남이 없이, 본 명세서에서 설명 및 예시된 개개의 변형들 각각은, 다른 여러 실시예들 중 임의의 실시예의 피쳐들과 용이하게 분리 또는 결합될 수 있는 개별 컴포넌트들 및 피쳐들을 갖는다. 모든 이러한 수정들은, 본원과 연관된 청구항들의 범주 내에 있도록 의도된다.
본 발명은 대상 디바이스들을 이용하여 수행될 수 있는 방법들을 포함한다. 방법들은 이러한 적합한 디바이스를 제공하는 동작을 포함할 수 있다. 이러한 제공은 최종 사용자에 의해 수행될 수 있다. 다시 말해, 대상 방법에서 필수 디바이스를 제공하기 위해, "제공하는" 동작은 단지, 최종 사용자가 획득, 액세스, 접근, 위치지정, 셋-업, 활성화, 파워-업하거나 또는 다른 방식으로 동작할 것을 요구한다. 본 명세서에서 열거된 방법들은, 열거된 순서의 이벤트들에서뿐만 아니라, 논리적으로 가능한 임의의 순서의 열거된 이벤트들에서 수행될 수 있다.
재료 선택 및 제조에 관한 세부사항들과 함께, 본 발명의 전형적인 양상들이 위에서 전개되었다. 본 발명의 다른 세부사항들에 대해서와 같이, 이들은 당업자들에 의해 이해되거나 또는 일반적으로 알려져 있을 뿐만 아니라, 위에서-인용된 특허들 및 공보들과 관련하여 이해될 수 있다. 동일한 내용이, 공통으로 또는 논리적으로 사용되는 바와 같은 부가의 동작들의 측면에서 본 발명의 방법-기반 양상들에 대해 유효할 수 있다.
부가하여, 본 발명이 다양한 피쳐들을 선택적으로 포함하는 여러 예들을 참조하여 설명되었지만, 본 발명은 본 발명의 각각의 변형에 대하여 고려된 바와 같이 설명되거나 또는 표시된 것으로 제한되지 않을 것이다. 본 발명의 진짜 사상 및 범주로부터 벗어남이 없이, 설명된 본 발명에 대한 다양한 변경들이 이루어질 수 있고, 동등물들(본 명세서에서 열거되든 또는 어떤 간결성을 위해 포함되지 않든)이 대체될 수 있다. 부가하여, 값들의 범위가 제공되는 경우, 그러한 범위 및 임의의 다른 명시된 또는 그러한 명시된 범위의 중간 값의 상한치와 하한치 사이의 모든 각각의 중간 값이 본 발명 내에 포함된다는 것이 이해된다.
또한, 설명된 본 발명의 변형들의 임의의 선택적 피쳐가 본 명세서에서 설명된 피쳐들 중 임의의 하나 또는 둘 이상과 독립적으로 또는 결합하여 전개 및 청구될 수 있다는 것이 고려된다. 단일 아이템에 대한 참조는 복수의 동일한 아이템들이 존재할 가능성을 포함한다. 더욱 구체적으로, 본 명세서에서 그리고 그에 연관된 청구항들에서 사용된 바와 같이, 단수 표현들("하나의","상기", 및 "그")은 구체적으로 달리 명시되지 않는 한, 복수의 지시 대상들을 포함한다. 다시 말해, 관사들의 사용은 상기 설명뿐만 아니라 이러한 기재와 연관된 청구항들에서 대상 아이템 중 "적어도 하나"를 허용한다. 이러한 청구항들이 임의의 선택적 엘리먼트를 배제하도록 드래프트될 수 있음이 추가로 유의된다. 이와 같이, 이러한 서술은, 청구항 엘리먼트들의 열거 또는 "네거티브" 제한의 사용과 관련하여 "오로지", "단지" 등으로서 이러한 배타적 용어의 사용을 위해 선행하는 기초로서 기능하도록 의도된다.
이러한 배타적 용어의 사용 없이, 이러한 기재와 연관된 청구항들에서 용어 "포함하는"은 임의의 부가의 엘리먼트의 포함 ― 주어진 수의 엘리먼트들이 이러한 청구항들에 열거되는지와 무관하게 ― 을 허용하거나, 또는 피쳐의 부가는 이러한 청구항들에서 전개되는 엘리먼트의 특성을 전환하는 것으로서 간주될 수 있다. 본 명세서에서 구체적으로 규정되는 바를 제외하고, 본 명세서에 사용된 모든 기술적 및 과학적 용어들은, 청구항 유효함을 유지하면서, 가능한 한 넓은, 공통으로 이해되는 의미로서 주어질 것이다.
본 발명의 폭넓음은 제공된 예들 및/또는 대상 명세서로 제한되는 것이 아니라, 오히려 이러한 기재와 연관된 청구항 언어의 범위에 의해서만 제한된다.

Claims (20)

  1. 3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법으로서,
    선택적으로 투명한 투사 디바이스로부터의 이미지에 조절 처리(accommodation treatment)를 적용하기 위하여, 상기 이미지를 선택가능 기하학적 구조(geometry)를 갖는 선택적으로 투명한 존 플레이트 회절 패터닝 디바이스(zone plate diffraction patterning device)를 통해 투사하는 단계 ― 상기 선택적으로 투명한 존 플레이트 회절 패터닝 디바이스는 상기 뷰어의 눈과 상기 선택적으로 투명한 투사 디바이스 사이에 배치됨 ―;
    상기 뷰어의 눈에 진입하는 것으로부터 배경 광을 선택적으로 블록킹하기 위하여 선택적으로 투명한 차폐 마스크 디바이스(occlusion mask device)를 동작시키는 단계 ― 상기 배경 광은, 상기 뷰어의 눈으로부터 상기 선택적으로 투명한 투사 디바이스의 반대측의 하나 또는 둘 이상의 위치들로부터 상기 눈을 향하여 상기 선택적으로 투명한 차폐 마스크 디바이스 및 상기 선택적으로 투명한 투사 디바이스를 통해 이어지는 축상에서 이동함 ―; 및
    상기 뷰어의 눈에 수정된 이미지를 전달하는 단계를 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  2. 제 1 항에 있어서,
    상기 배경 광을 선택적으로 블록킹하기 위하여 선택적으로 투명한 차폐 마스크 디바이스를 동작시키는 단계는 상기 선택적으로 투명한 차폐 마스크 디바이스의 적어도 일 부분상에 차폐된 영역을 생성하는 단계를 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  3. 제 2 항에 있어서,
    상기 차폐된 영역을 상기 선택적으로 투명한 투사 디바이스로부터 투사된 상기 이미지와 상관시키는 단계를 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  4. 제 3 항에 있어서,
    상기 상관시키는 단계는 상기 선택적으로 투명한 투사 디바이스로부터 투사된 상기 이미지와 기하학적으로 정렬하도록 상기 차폐된 영역을 선택적으로 제어하는 단계를 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  5. 제 1 항에 있어서,
    상기 선택적으로 투명한 존 플레이트 회절 패터닝 디바이스의 적어도 일부 상에 선택가능 회절 기하학적 구조를 디스플레이하는 단계를 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  6. 제 5 항에 있어서,
    상기 조절 처리를 적용하는 것은, 상기 선택적으로 투명한 투사 디바이스로부터 투사되는 상기 이미지를 상기 선택가능 회절 기하학적 구조를 통해 통과시키는 것을 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  7. 제 5 항에 있어서,
    상기 선택적으로 투명한 투사 디바이스로부터 투사되는 상기 이미지를 상기 디스플레이되는 선택가능 회절 기하학적 구조와 상관시키는 단계를 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  8. 제 7 항에 있어서,
    상기 상관시키는 단계는 상기 선택적으로 투명한 투사 디바이스로부터 투사되는 상기 이미지와 기하학적으로 정렬하기 위하여 상기 선택적으로 투명한 존 플레이트 회절 패터닝 디바이스의 적어도 일부 상의 상기 선택가능 회절 기하학적 구조를 제어하는 단계를 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  9. 제 5 항에 있어서,
    상기 이미지에 조절 처리를 적용하는 것은, 상기 선택가능 회절 기하학적 구조를 이용하여 상기 선택적으로 투명한 투사 디바이스로부터 투사되는 상기 이미지의 초점 거리를 수정하는 것을 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  10. 제 1 항에 있어서,
    상기 선택적으로 투명한 투사 디바이스로부터의 상기 이미지를 투사하는 단계는 상기 뷰어의 눈을 향하여 광을 방향수정(redirecting)하는 단계를 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  11. 제 10 항에 있어서,
    상기 뷰어의 눈을 향하여 광을 방향수정하는 단계는:
    광을 제 1 각도로 도파관 내에 수용하는 단계; 및
    광을 제 2 각도로 출력하는 단계를 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  12. 제 1 항에 있어서,
    상기 조절 처리를 적용하는 것은, 선택된 주파수에서 상기 선택적으로 투명한 존 플레이트 회절 패터닝 디바이스의 적어도 일부 상의 일련의 선택가능 회절 기하학적 구조들을 디스플레이하는 것을 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  13. 제 12 항에 있어서,
    상기 선택된 주파수는 720 Hz인,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  14. 제 1 항에 있어서,
    상기 뷰어의 눈에 진입하는 것으로부터 배경 광을 선택적으로 블록킹하는 것은 상기 선택적으로 투명한 차폐 마스크 디바이스 상에 블랙 아웃(black out)된 이미지를 디스플레이하는 것을 더 포함하고, 상기 블랙 아웃된 이미지는 상기 선택적으로 투명한 투사 디바이스로부터 투사된 이미지와 기하학적으로 상관되는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  15. 제 1 항에 있어서,
    이미징 모듈로붙터 최초 이미지를 방사(emit)하는 단계를 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  16. 제 15 항에 있어서,
    상기 이미징 모듈로부터의 상기 최초 이미지를 상기 선택적으로 투명한 투사 디바이스로 전송하는 단계를 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  17. 제 16 항에 있어서,
    상기 이미징 모듈로부터의 상기 최초 이미지를 상기 선택적으로 투명한 투사 디바이스에서 수신하는 단계를 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  18. 제 17 항에 있어서,
    상기 이미징 모듈로부터의 상기 최초 이미지를 상기 선택적으로 투명한 투사 디바이스로 전송하는 단계는 상기 최초 이미지를 확대 및 회절하는 단계를 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  19. 제 18 항에 있어서,
    상기 최초 이미지를 전송하는 단계는 상기 뷰어의 눈으로 이동하는 상기 수정된 이미지의 수정된 이미지 궤도(trajectory)에 실질적으로 수직인 최초 이미지 궤도로 상기 선택적으로 투명한 투사 디바이스를 향해 상기 최초 이미지를 지향하는 단계를 더 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
  20. 제 1 항에 있어서,
    상기 뷰어의 눈에 수정된 이미지를 전달하는 단계는 상기 뷰어의 눈에 눈 조절 단서(eye accommodation cue)들을 갖는 이미지를 전달하는 단계를 포함하는,
    3차원 이미지 시각화 시스템으로 뷰어에게 3차원 이미지를 제공하는 방법.
KR1020227030044A 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템 KR102513896B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201161563403P 2011-11-23 2011-11-23
US61/563,403 2011-11-23
PCT/US2012/000560 WO2013077895A1 (en) 2011-11-23 2012-11-23 Three dimensional virtual and augmented reality display system
KR1020227008484A KR102440195B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020227008484A Division KR102440195B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Publications (2)

Publication Number Publication Date
KR20220124294A true KR20220124294A (ko) 2022-09-13
KR102513896B1 KR102513896B1 (ko) 2023-03-23

Family

ID=48426562

Family Applications (6)

Application Number Title Priority Date Filing Date
KR1020147017217A KR102116697B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020217006982A KR102376368B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020177030366A KR102095220B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020227030044A KR102513896B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020207014691A KR102227381B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020227008484A KR102440195B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Family Applications Before (3)

Application Number Title Priority Date Filing Date
KR1020147017217A KR102116697B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020217006982A KR102376368B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020177030366A KR102095220B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020207014691A KR102227381B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템
KR1020227008484A KR102440195B1 (ko) 2011-11-23 2012-11-23 3차원 가상 및 증강 현실 디스플레이 시스템

Country Status (11)

Country Link
US (8) US8950867B2 (ko)
EP (3) EP2783352B1 (ko)
JP (5) JP6250547B2 (ko)
KR (6) KR102116697B1 (ko)
CN (2) CN107664847B (ko)
AU (5) AU2012341069B2 (ko)
BR (1) BR112014012615A2 (ko)
CA (2) CA2858208C (ko)
IL (2) IL232746A (ko)
RU (1) RU2628164C2 (ko)
WO (1) WO2013077895A1 (ko)

Families Citing this family (236)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0522968D0 (en) 2005-11-11 2005-12-21 Popovich Milan M Holographic illumination device
GB0718706D0 (en) 2007-09-25 2007-11-07 Creative Physics Ltd Method and apparatus for reducing laser speckle
US9335604B2 (en) 2013-12-11 2016-05-10 Milan Momcilo Popovich Holographic waveguide display
US11726332B2 (en) 2009-04-27 2023-08-15 Digilens Inc. Diffractive projection apparatus
US11204540B2 (en) 2009-10-09 2021-12-21 Digilens Inc. Diffractive waveguide providing a retinal image
US9274349B2 (en) 2011-04-07 2016-03-01 Digilens Inc. Laser despeckler based on angular diversity
WO2013027004A1 (en) 2011-08-24 2013-02-28 Milan Momcilo Popovich Wearable data display
WO2016020630A2 (en) 2014-08-08 2016-02-11 Milan Momcilo Popovich Waveguide laser illuminator incorporating a despeckler
US10670876B2 (en) 2011-08-24 2020-06-02 Digilens Inc. Waveguide laser illuminator incorporating a despeckler
US20150010265A1 (en) 2012-01-06 2015-01-08 Milan, Momcilo POPOVICH Contact image sensor using switchable bragg gratings
CN103562802B (zh) 2012-04-25 2016-08-17 罗克韦尔柯林斯公司 全息广角显示器
WO2013167864A1 (en) 2012-05-11 2013-11-14 Milan Momcilo Popovich Apparatus for eye tracking
US9671566B2 (en) 2012-06-11 2017-06-06 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9933684B2 (en) * 2012-11-16 2018-04-03 Rockwell Collins, Inc. Transparent waveguide display providing upper and lower fields of view having a specific light output aperture configuration
US11490809B2 (en) 2013-01-25 2022-11-08 Wesley W. O. Krueger Ocular parameter-based head impact measurement using a face shield
US11504051B2 (en) 2013-01-25 2022-11-22 Wesley W. O. Krueger Systems and methods for observing eye and head information to measure ocular parameters and determine human health status
US12042294B2 (en) 2013-01-25 2024-07-23 Wesley W. O. Krueger Systems and methods to measure ocular parameters and determine neurologic health status
US10209517B2 (en) 2013-05-20 2019-02-19 Digilens, Inc. Holographic waveguide eye tracker
US10262462B2 (en) 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US9874749B2 (en) 2013-11-27 2018-01-23 Magic Leap, Inc. Virtual and augmented reality systems and methods
WO2015006784A2 (en) 2013-07-12 2015-01-15 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9952042B2 (en) 2013-07-12 2018-04-24 Magic Leap, Inc. Method and system for identifying a user location
US9727772B2 (en) 2013-07-31 2017-08-08 Digilens, Inc. Method and apparatus for contact image sensing
US9701530B2 (en) 2013-11-22 2017-07-11 Michael J. Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
US9527716B2 (en) 2013-11-22 2016-12-27 Michael J. Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
US9633504B2 (en) 2013-11-22 2017-04-25 Michael J Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
CN110542938B (zh) 2013-11-27 2023-04-18 奇跃公司 虚拟和增强现实系统与方法
US9857591B2 (en) 2014-05-30 2018-01-02 Magic Leap, Inc. Methods and system for creating focal planes in virtual and augmented reality
CN103676175A (zh) * 2013-12-26 2014-03-26 无锡锡飞光电科技有限公司 裸眼3d显示方法
NZ722903A (en) * 2014-01-31 2020-05-29 Magic Leap Inc Multi-focal display system and method
CN106461955B (zh) 2014-01-31 2019-08-13 奇跃公司 显示增强现实的方法
US10430985B2 (en) 2014-03-14 2019-10-01 Magic Leap, Inc. Augmented reality systems and methods utilizing reflections
US11138793B2 (en) 2014-03-14 2021-10-05 Magic Leap, Inc. Multi-depth plane display system with reduced switching between depth planes
WO2015161307A1 (en) * 2014-04-18 2015-10-22 Magic Leap, Inc. Systems and methods for augmented and virtual reality
NZ727361A (en) 2014-05-30 2020-05-29 Magic Leap Inc Methods and systems for displaying stereoscopy with a freeform optical system with addressable focus for virtual and augmented reality
NZ764960A (en) * 2014-05-30 2022-05-27 Magic Leap Inc Methods and system for creating focal planes in virtual and augmented reality
WO2016020632A1 (en) 2014-08-08 2016-02-11 Milan Momcilo Popovich Method for holographic mastering and replication
US10241330B2 (en) 2014-09-19 2019-03-26 Digilens, Inc. Method and apparatus for generating input images for holographic waveguide displays
EP3198192A1 (en) 2014-09-26 2017-08-02 Milan Momcilo Popovich Holographic waveguide opticaltracker
KR102295496B1 (ko) 2014-09-29 2021-09-01 매직 립, 인코포레이티드 상이한 파장의 광을 도파관 밖으로 출력하기 위한 아키텍쳐 및 방법
KR102547307B1 (ko) * 2014-12-29 2023-06-22 매직 립, 인코포레이티드 음향-광학 제어 디바이스를 사용하는 광 프로젝터
WO2016113533A2 (en) 2015-01-12 2016-07-21 Milan Momcilo Popovich Holographic waveguide light field displays
CN107873086B (zh) 2015-01-12 2020-03-20 迪吉伦斯公司 环境隔离的波导显示器
CN107533137A (zh) 2015-01-20 2018-01-02 迪吉伦斯公司 全息波导激光雷达
US10657780B1 (en) 2015-01-29 2020-05-19 Transparensee Llc System, method, and apparatus for mixing, blending, dispensing, monitoring, and labeling products
US9632226B2 (en) 2015-02-12 2017-04-25 Digilens Inc. Waveguide grating device
US11468639B2 (en) 2015-02-20 2022-10-11 Microsoft Technology Licensing, Llc Selective occlusion system for augmented reality devices
US10838207B2 (en) 2015-03-05 2020-11-17 Magic Leap, Inc. Systems and methods for augmented reality
WO2016141373A1 (en) 2015-03-05 2016-09-09 Magic Leap, Inc. Systems and methods for augmented reality
US10180734B2 (en) 2015-03-05 2019-01-15 Magic Leap, Inc. Systems and methods for augmented reality
NZ773826A (en) 2015-03-16 2022-07-29 Magic Leap Inc Methods and systems for diagnosing and treating health ailments
WO2016146963A1 (en) 2015-03-16 2016-09-22 Popovich, Milan, Momcilo Waveguide device incorporating a light pipe
US10404975B2 (en) 2015-03-20 2019-09-03 Tilt Five, Inc Retroreflective light field display
US10591756B2 (en) 2015-03-31 2020-03-17 Digilens Inc. Method and apparatus for contact image sensing
CN106293561B (zh) 2015-05-28 2020-02-28 北京智谷睿拓技术服务有限公司 显示控制方法和装置、显示设备
CN106303315B (zh) 2015-05-30 2019-08-16 北京智谷睿拓技术服务有限公司 视频显示控制方法和装置、显示设备
CN106303499B (zh) 2015-05-30 2018-10-16 北京智谷睿拓技术服务有限公司 视频显示控制方法和装置、显示设备
CN106303498B (zh) 2015-05-30 2018-10-16 北京智谷睿拓技术服务有限公司 视频显示控制方法和装置、显示设备
KR20230025933A (ko) 2015-06-15 2023-02-23 매직 립, 인코포레이티드 멀티플렉싱된 광 스트림들을 인-커플링하기 위한 광학 엘리먼트들을 가진 디스플레이 시스템
US10149958B1 (en) 2015-07-17 2018-12-11 Bao Tran Systems and methods for computer assisted operation
US10492981B1 (en) 2015-07-17 2019-12-03 Bao Tran Systems and methods for computer assisted operation
US10335572B1 (en) 2015-07-17 2019-07-02 Naveen Kumar Systems and methods for computer assisted operation
US10176642B2 (en) 2015-07-17 2019-01-08 Bao Tran Systems and methods for computer assisted operation
US10685488B1 (en) 2015-07-17 2020-06-16 Naveen Kumar Systems and methods for computer assisted operation
IL256838B2 (en) 2015-07-20 2023-10-01 Magic Leap Inc Tuning such as a fiber scanner with inward aiming angles in a virtual/augmented reality system
KR102511490B1 (ko) 2015-08-18 2023-03-16 매직 립, 인코포레이티드 가상 및 증강 현실 시스템들 및 방법들
AU2016310452B2 (en) 2015-08-21 2021-04-22 Magic Leap, Inc. Eyelid shape estimation
CN112836664A (zh) 2015-08-21 2021-05-25 奇跃公司 使用眼睛姿态测量的眼睑形状估计
WO2017048713A1 (en) 2015-09-16 2017-03-23 Magic Leap, Inc. Head pose mixing of audio files
CN118584664A (zh) 2015-09-23 2024-09-03 奇跃公司 采用离轴成像器的眼睛成像
US10690916B2 (en) 2015-10-05 2020-06-23 Digilens Inc. Apparatus for providing waveguide displays with two-dimensional pupil expansion
IL257984B (en) 2015-10-05 2022-08-01 Magic Leap Inc Microlens collimator for optical fiber scanning in a virtual/augmented reality system
JP7216547B2 (ja) 2015-10-06 2023-02-01 マジック リープ， インコーポレイテッド 逆角度回折格子を有する仮想／拡張現実システム
CA3170014A1 (en) 2015-10-16 2017-04-20 Magic Leap, Inc. Eye pose identification using eye features
AU2016341196B2 (en) 2015-10-20 2021-09-16 Magic Leap, Inc. Selecting virtual objects in a three-dimensional space
US9709807B2 (en) 2015-11-03 2017-07-18 Motorola Solutions, Inc. Out of focus notifications
US10260864B2 (en) 2015-11-04 2019-04-16 Magic Leap, Inc. Dynamic display calibration based on eye-tracking
US11231544B2 (en) 2015-11-06 2022-01-25 Magic Leap, Inc. Metasurfaces for redirecting light and methods for fabricating
CN108604383A (zh) 2015-12-04 2018-09-28 奇跃公司 重新定位系统和方法
US10877438B2 (en) * 2016-01-07 2020-12-29 Magic Leap, Inc. Dynamic fresnel projector
KR20230134159A (ko) 2016-01-07 2023-09-20 매직 립, 인코포레이티드 깊이 평면들에 걸쳐 분포된 동일하지 않은 수의 컴포넌트 컬러 이미지들을 갖는 가상 및 증강 현실 시스템들 및 방법들
WO2017127366A1 (en) 2016-01-19 2017-07-27 Magic Leap, Inc. Eye image collection, selection, and combination
JP6952713B2 (ja) 2016-01-19 2021-10-20 マジック リープ， インコーポレイテッドＭａｇｉｃ Ｌｅａｐ，Ｉｎｃ． 反射を利用する拡張現実システムおよび方法
CN108474904B (zh) 2016-01-20 2021-07-06 奇跃公司 虚拟/增强现实系统中的偏振保持光纤
US10536690B2 (en) 2016-01-29 2020-01-14 Magic Leap, Inc. Display for three-dimensional image
US10983340B2 (en) 2016-02-04 2021-04-20 Digilens Inc. Holographic waveguide optical tracker
JP6991981B2 (ja) 2016-02-24 2022-01-13 マジック リープ， インコーポレイテッド 光エミッタのための薄型相互接続子
KR102682340B1 (ko) 2016-02-24 2024-07-04 매직 립, 인코포레이티드 낮은 광 누설을 가진 편광 빔 분할기 및 이를 포함하는 디스플레이 시스템
US10775545B2 (en) 2016-02-26 2020-09-15 Magic Leap, Inc. Display system having a plurality of light pipes for a plurality of light emitters
IL261148B2 (en) 2016-02-26 2023-12-01 Magic Leap Inc Light output system with reflector and lenses for high spatially uniform light output
AU2017227598B2 (en) 2016-03-01 2022-03-17 Magic Leap, Inc. Reflective switching device for inputting different wavelengths of light into waveguides
NZ745738A (en) 2016-03-04 2020-01-31 Magic Leap Inc Current drain reduction in ar/vr display systems
EP3427185B1 (en) * 2016-03-07 2024-07-31 Magic Leap, Inc. Blue light adjustment for biometric security
US10867314B2 (en) 2016-03-22 2020-12-15 Magic Leap, Inc. Head mounted display system configured to exchange biometric information
EP3433659B1 (en) 2016-03-24 2024-10-23 DigiLens, Inc. Method and apparatus for providing a polarization selective holographic waveguide device
AU2017238847A1 (en) 2016-03-25 2018-10-04 Magic Leap, Inc. Virtual and augmented reality systems and methods
KR20230098927A (ko) 2016-03-31 2023-07-04 매직 립, 인코포레이티드 포즈들 및 멀티-dof 제어기들을 사용하는 3d 가상 객체들과상호작용들
CA3019946C (en) 2016-04-08 2023-02-28 Magic Leap, Inc. Augmented reality systems and methods with variable focus lens elements
JP6734933B2 (ja) 2016-04-11 2020-08-05 ディジレンズ インコーポレイテッド 構造化光投影のためのホログラフィック導波管装置
KR102548818B1 (ko) 2016-04-21 2023-06-28 매직 립, 인코포레이티드 시야 주위의 시각적 아우라
AU2017257549B2 (en) 2016-04-26 2021-09-09 Magic Leap, Inc. Electromagnetic tracking with augmented reality systems
US10046229B2 (en) 2016-05-02 2018-08-14 Bao Tran Smart device
CN113484944A (zh) 2016-05-06 2021-10-08 奇跃公司 具有用于重定向光的非对称光栅的超表面及其制造方法
CN115177208A (zh) 2016-05-09 2022-10-14 奇跃公司 用于用户健康分析的增强现实系统和方法
US9904058B2 (en) 2016-05-12 2018-02-27 Magic Leap, Inc. Distributed light manipulation over imaging waveguide
US11328484B2 (en) 2016-05-20 2022-05-10 Magic Leap, Inc. Contextual awareness of user interface menus
IL299710A (en) 2016-06-03 2023-03-01 Magic Leap Inc Identity verification in augmented reality
KR102448938B1 (ko) 2016-06-10 2022-09-28 매직 립, 인코포레이티드 텍스처 투사 전구용 적분 점광원
JP7385993B2 (ja) 2016-06-20 2023-11-24 マジック リープ， インコーポレイテッド 視覚的処理および知覚の疾患を含む神経学的疾患の評価および修正のための拡張現実ディスプレイシステム
NZ749449A (en) 2016-06-30 2023-06-30 Magic Leap Inc Estimating pose in 3d space
KR102442569B1 (ko) 2016-07-14 2022-09-08 매직 립, 인코포레이티드 각막 곡률을 이용한 홍채 경계 추정
KR102648770B1 (ko) 2016-07-14 2024-03-15 매직 립, 인코포레이티드 홍채 식별을 위한 딥 뉴럴 네트워크
CN109788901B (zh) 2016-07-25 2024-01-02 奇跃公司 光场处理器系统
KR20230133940A (ko) 2016-07-25 2023-09-19 매직 립, 인코포레이티드 증강 현실 및 가상 현실 안경류를 사용한 이미징 수정, 디스플레이 및 시각화
CA3032282A1 (en) 2016-07-29 2018-02-01 Magic Leap, Inc. Secure exchange of cryptographically signed records
US10649211B2 (en) 2016-08-02 2020-05-12 Magic Leap, Inc. Fixed-distance virtual and augmented reality systems and methods
CA3033344A1 (en) 2016-08-11 2018-02-15 Magic Leap, Inc. Automatic placement of a virtual object in a three-dimensional space
CN117198277A (zh) 2016-08-12 2023-12-08 奇跃公司 单词流注释
JP6813666B2 (ja) 2016-08-22 2021-01-13 マジック リープ， インコーポレイテッドＭａｇｉｃ Ｌｅａｐ，Ｉｎｃ． 多層回折接眼レンズ
KR102529137B1 (ko) 2016-08-22 2023-05-03 매직 립, 인코포레이티드 딥 러닝 센서들을 갖는 증강 현실 디스플레이 디바이스
CN106131541A (zh) * 2016-08-26 2016-11-16 广州巧瞳科技有限公司 基于增强现实的智能显示装置及方法
AU2017328161B2 (en) 2016-09-13 2022-02-17 Magic Leap, Inc. Sensory eyewear
CN112987303A (zh) 2016-09-21 2021-06-18 奇跃公司 用于具有出瞳扩展器的光学系统的系统和方法
KR102266343B1 (ko) 2016-09-22 2021-06-17 매직 립, 인코포레이티드 증강 현실 분광기
KR20240011881A (ko) 2016-09-26 2024-01-26 매직 립, 인코포레이티드 가상 현실 또는 증강 현실 디스플레이 시스템에서 자기 및 광학 센서들의 교정
WO2018064169A1 (en) 2016-09-28 2018-04-05 Magic Leap, Inc. Face model capture by a wearable device
RU2016138608A (ru) 2016-09-29 2018-03-30 Мэджик Лип, Инк. Нейронная сеть для сегментации изображения глаза и оценки качества изображения
US10489680B2 (en) 2016-10-04 2019-11-26 Magic Leap, Inc. Efficient data layouts for convolutional neural networks
IL295059A (en) 2016-10-05 2022-09-01 Magic Leap Inc A blind eye test for mixed reality calibration
KR102603745B1 (ko) 2016-10-21 2023-11-17 매직 립, 인코포레이티드 다수의 동공내 시차 뷰들을 제공함으로써 다수의 깊이평면들 상에 이미지 콘텐츠를 제공하기 위한 시스템 및 방법
CN106657970A (zh) * 2016-10-25 2017-05-10 乐视控股（北京）有限公司 一种深度图成像装置
KR102217797B1 (ko) 2016-11-11 2021-02-18 매직 립, 인코포레이티드 전체 얼굴 이미지의 안구주위 및 오디오 합성
AU2017361061B2 (en) 2016-11-15 2022-02-03 Magic Leap, Inc. Deep learning system for cuboid detection
KR102595171B1 (ko) 2016-11-16 2023-10-26 매직 립, 인코포레이티드 웨어러블 컴포넌트들을 위한 열 관리 시스템들
AU2017361424B2 (en) 2016-11-18 2022-10-27 Magic Leap, Inc. Spatially variable liquid crystal diffraction gratings
JP7019695B2 (ja) 2016-11-18 2022-02-15 マジック リープ， インコーポレイテッド 広入射角範囲の光を再指向するための多層液晶回折格子
US11067860B2 (en) 2016-11-18 2021-07-20 Magic Leap, Inc. Liquid crystal diffractive devices with nano-scale pattern and methods of manufacturing the same
CN110199220B (zh) 2016-11-18 2022-11-01 奇跃公司 使用交叉光栅的波导光复用器
US11513350B2 (en) 2016-12-02 2022-11-29 Digilens Inc. Waveguide device with uniform output illumination
EP3549109B1 (en) 2016-12-05 2023-04-19 Magic Leap, Inc. Virtual user input controls in a mixed reality environment
US10531220B2 (en) 2016-12-05 2020-01-07 Magic Leap, Inc. Distributed audio capturing techniques for virtual reality (VR), augmented reality (AR), and mixed reality (MR) systems
IL304304B2 (en) 2016-12-08 2024-08-01 Magic Leap Inc Light beam breaking devices based on cholesteric liquid crystal
EP3555865B1 (en) 2016-12-13 2024-09-18 Magic Leap, Inc. 3d object rendering using detected features
CN110291453B (zh) 2016-12-14 2022-11-01 奇跃公司 使用具有表面对准图案的软压印复制对液晶图案化
US10371896B2 (en) 2016-12-22 2019-08-06 Magic Leap, Inc. Color separation in planar waveguides using dichroic filters
US10746999B2 (en) 2016-12-28 2020-08-18 Magic Leap, Inc. Dual depth exit pupil expander
CN117251053A (zh) 2016-12-29 2023-12-19 奇跃公司 基于外部条件的可穿戴显示装置的自动控制
US10545346B2 (en) 2017-01-05 2020-01-28 Digilens Inc. Wearable heads up displays
JP7071374B2 (ja) 2017-01-05 2022-05-18 マジック リープ， インコーポレイテッド プラズマエッチングによる高屈折率ガラスのパターン化
EP3568783A4 (en) 2017-01-11 2020-11-11 Magic Leap, Inc. MEDICAL ASSISTANT
IL268135B2 (en) 2017-01-23 2024-03-01 Magic Leap Inc Eyepiece for virtual, augmented or mixed reality systems
US10812936B2 (en) 2017-01-23 2020-10-20 Magic Leap, Inc. Localization determination for mixed reality systems
US10841724B1 (en) 2017-01-24 2020-11-17 Ha Tran Enhanced hearing system
WO2018140502A1 (en) 2017-01-27 2018-08-02 Magic Leap, Inc. Antireflection coatings for metasurfaces
IL307294A (en) 2017-01-27 2023-11-01 Magic Leap Inc Diffraction gratings produced using a surface cell with differently oriented nanobeams
US11347054B2 (en) 2017-02-16 2022-05-31 Magic Leap, Inc. Systems and methods for augmented reality
IL307602A (en) 2017-02-23 2023-12-01 Magic Leap Inc Variable focus virtual imagers based on polarization conversion
IL301886A (en) 2017-03-14 2023-06-01 Magic Leap Inc Waveguides with light absorbing layers and processes for their creation
CA3054619C (en) 2017-03-17 2024-01-30 Magic Leap, Inc. Mixed reality system with virtual content warping and method of generating virtual content using same
AU2018233733B2 (en) 2017-03-17 2021-11-11 Magic Leap, Inc. Mixed reality system with multi-source virtual content compositing and method of generating virtual content using same
US10657376B2 (en) 2017-03-17 2020-05-19 Magic Leap, Inc. Room layout estimation methods and techniques
EP3596705A4 (en) 2017-03-17 2020-01-22 Magic Leap, Inc. COLOR VIRTUAL CONTENT DEFORMATION MIXED REALITY SYSTEM AND VIRTUAL CONTENT GENERATION METHOD USING THE SAME
EP4246214A3 (en) 2017-03-21 2023-12-06 Magic Leap, Inc. Methods, devices, and systems for illuminating spatial light modulators
WO2018175344A1 (en) 2017-03-21 2018-09-27 Magic Leap, Inc. Depth sensing techniques for virtual, augmented, and mixed reality systems
KR20240069826A (ko) 2017-03-21 2024-05-20 매직 립, 인코포레이티드 저-프로파일 빔 스플리터
IL303471B2 (en) 2017-03-21 2024-08-01 Magic Leap Inc An eye imaging device that uses optical refractive elements
WO2018175625A1 (en) 2017-03-22 2018-09-27 Magic Leap, Inc. Depth based foveated rendering for display systems
JP7516048B2 (ja) 2017-04-18 2024-07-16 マジック リープ， インコーポレイテッド 反射性流動可能材料によって形成された反射性層を有する導波管
AU2018256365A1 (en) 2017-04-19 2019-10-31 Magic Leap, Inc. Multimodal task execution and text editing for a wearable system
US10388077B2 (en) 2017-04-25 2019-08-20 Microsoft Technology Licensing, Llc Three-dimensional environment authoring and generation
US11163416B2 (en) 2017-04-27 2021-11-02 Magic Leap, Inc. Light-emitting user input device for calibration or pairing
US10412378B2 (en) 2017-05-08 2019-09-10 Microsoft Technology Licensing, Llc Resonating optical waveguide using multiple diffractive optical elements
US10222615B2 (en) 2017-05-26 2019-03-05 Microsoft Technology Licensing, Llc Optical waveguide with coherent light source
KR102627882B1 (ko) 2017-05-30 2024-01-22 매직 립, 인코포레이티드 전자 디바이스를 위한 팬 조립체를 갖는 전력 공급기 조립체
US10671160B2 (en) 2017-05-31 2020-06-02 Magic Leap, Inc. Eye tracking calibration techniques
US10338400B2 (en) 2017-07-03 2019-07-02 Holovisions LLC Augmented reality eyewear with VAPE or wear technology
US10859834B2 (en) 2017-07-03 2020-12-08 Holovisions Space-efficient optical structures for wide field-of-view augmented reality (AR) eyewear
US10908680B1 (en) 2017-07-12 2021-02-02 Magic Leap, Inc. Pose estimation using electromagnetic tracking
AU2018308418A1 (en) 2017-07-26 2020-01-16 Magic Leap, Inc. Training a neural network with representations of user interface devices
CA3068612A1 (en) 2017-07-28 2019-01-31 Magic Leap, Inc. Fan assembly for displaying an image
US10521661B2 (en) 2017-09-01 2019-12-31 Magic Leap, Inc. Detailed eye shape model for robust biometric applications
US10719951B2 (en) 2017-09-20 2020-07-21 Magic Leap, Inc. Personalized neural network for eye tracking
WO2019060741A1 (en) 2017-09-21 2019-03-28 Magic Leap, Inc. INCREASED REALITY DISPLAY HAVING A WAVEGUIDE CONFIGURED TO CAPTURE IMAGES OF THE EYE AND / OR THE ENVIRONMENT
KR102481884B1 (ko) 2017-09-22 2022-12-28 삼성전자주식회사 가상 영상을 표시하는 방법 및 장치
CN107682686B (zh) * 2017-10-11 2019-03-12 京东方科技集团股份有限公司 一种虚拟现实显示装置、显示设备及显示方法
CN116149058A (zh) 2017-10-16 2023-05-23 迪吉伦斯公司 用于倍增像素化显示器的图像分辨率的系统和方法
KR102695589B1 (ko) 2017-10-22 2024-08-14 루머스 리미티드 광학 벤치를 사용하는 헤드 장착형 증강 현실 장치
CA3078530A1 (en) 2017-10-26 2019-05-02 Magic Leap, Inc. Gradient normalization systems and methods for adaptive loss balancing in deep multitask networks
WO2019118930A1 (en) 2017-12-15 2019-06-20 Magic Leap, Inc. Eyepieces for augmented reality display system
KR20200104402A (ko) 2018-01-08 2020-09-03 디지렌즈 인코포레이티드. 도파관 셀을 제조하기 위한 시스템 및 방법
KR20200108030A (ko) 2018-01-08 2020-09-16 디지렌즈 인코포레이티드. 도파관 셀 내의 홀로그래픽 격자의 높은 처리능력의 레코딩을 위한 시스템 및 방법
WO2019136476A1 (en) 2018-01-08 2019-07-11 Digilens, Inc. Waveguide architectures and related methods of manufacturing
US11567627B2 (en) 2018-01-30 2023-01-31 Magic Leap, Inc. Eclipse cursor for virtual content in mixed reality displays
US10540941B2 (en) 2018-01-30 2020-01-21 Magic Leap, Inc. Eclipse cursor for mixed reality displays
CN108366250B (zh) * 2018-02-06 2020-03-17 深圳市鹰硕技术有限公司 影像显示系统、方法以及数字眼镜
IL312231A (en) 2018-02-06 2024-06-01 Magic Leap Inc Systems and methods for augmented reality
US10735649B2 (en) 2018-02-22 2020-08-04 Magic Leap, Inc. Virtual and augmented reality systems and methods using display system control information embedded in image data
EP4212222A1 (en) 2018-03-07 2023-07-19 Magic Leap, Inc. Visual tracking of peripheral devices
JP7381482B2 (ja) 2018-03-16 2023-11-15 マジック リープ， インコーポレイテッド ディスプレイシステムのための深度ベースの中心窩化レンダリング
US10690851B2 (en) 2018-03-16 2020-06-23 Digilens Inc. Holographic waveguides incorporating birefringence control and methods for their fabrication
US11480467B2 (en) 2018-03-21 2022-10-25 Magic Leap, Inc. Augmented reality system and method for spectroscopic analysis
US11157159B2 (en) 2018-06-07 2021-10-26 Magic Leap, Inc. Augmented reality scrollbar
USD875729S1 (en) 2018-06-27 2020-02-18 Magic Leap, Inc. Portion of an augmented reality headset
WO2020018938A1 (en) 2018-07-19 2020-01-23 Magic Leap, Inc. Content interaction driven by eye metrics
EP3824622A4 (en) 2018-07-20 2021-09-08 Flex-N-gate Advanced Product Development, LLC FLOATING IMAGE GENERATION
WO2020018899A1 (en) * 2018-07-20 2020-01-23 Flex-N-Gate Advanced Product Development, Llc Animated 3d image multiplier
CN112513712B (zh) 2018-07-23 2023-05-09 奇跃公司 具有虚拟内容翘曲的混合现实系统和使用该系统生成虚拟内容的方法
US10943521B2 (en) 2018-07-23 2021-03-09 Magic Leap, Inc. Intra-field sub code timing in field sequential displays
CN112513711B (zh) 2018-07-23 2023-03-07 奇跃公司 用于使用位置向量解析半球模糊度的方法和系统
USD924204S1 (en) 2018-07-24 2021-07-06 Magic Leap, Inc. Totem controller having an illumination region
USD918176S1 (en) 2018-07-24 2021-05-04 Magic Leap, Inc. Totem controller having an illumination region
US11567336B2 (en) 2018-07-24 2023-01-31 Magic Leap, Inc. Display systems and methods for determining registration between display and eyes of user
USD930614S1 (en) 2018-07-24 2021-09-14 Magic Leap, Inc. Totem controller having an illumination region
US11402801B2 (en) 2018-07-25 2022-08-02 Digilens Inc. Systems and methods for fabricating a multilayer optical structure
US11914148B2 (en) 2018-09-07 2024-02-27 Adeia Semiconductor Inc. Stacked optical waveguides
US11141645B2 (en) 2018-09-11 2021-10-12 Real Shot Inc. Athletic ball game using smart glasses
US11103763B2 (en) 2018-09-11 2021-08-31 Real Shot Inc. Basketball shooting game using smart glasses
JP7455121B2 (ja) 2018-10-26 2024-03-25 マジック リープ， インコーポレイテッド 電磁追跡のための周囲電磁歪み補正
EP3877831A4 (en) 2018-11-09 2022-08-03 Beckman Coulter, Inc. MAINTENANCE GOGGLES WITH SELECTIVE DATA SUPPLY
US11237393B2 (en) 2018-11-20 2022-02-01 Magic Leap, Inc. Eyepieces for augmented reality display system
KR20210138609A (ko) 2019-02-15 2021-11-19 디지렌즈 인코포레이티드. 일체형 격자를 이용하여 홀로그래픽 도파관 디스플레이를 제공하기 위한 방법 및 장치
JP7518844B2 (ja) 2019-02-28 2024-07-18 マジック リープ， インコーポレイテッド 光エミッタアレイによって形成される複数の瞳孔内視差ビューを使用して可変遠近調節キューを提供するためのディスプレイシステムおよび方法
JP2022525165A (ja) 2019-03-12 2022-05-11 ディジレンズ インコーポレイテッド ホログラフィック導波管バックライトおよび関連する製造方法
CN114008514A (zh) 2019-04-15 2022-02-01 奇跃公司 用于电磁跟踪的传感器融合
WO2020214897A1 (en) 2019-04-18 2020-10-22 Beckman Coulter, Inc. Securing data of objects in a laboratory environment
USD962981S1 (en) 2019-05-29 2022-09-06 Magic Leap, Inc. Display screen or portion thereof with animated scrollbar graphical user interface
CN114207492A (zh) 2019-06-07 2022-03-18 迪吉伦斯公司 带透射光栅和反射光栅的波导及其生产方法
EP3987343A4 (en) 2019-06-20 2023-07-19 Magic Leap, Inc. EYEWEARS FOR AUGMENTED REALITY DISPLAY SYSTEM
KR20220024410A (ko) 2019-06-27 2022-03-03 루머스 리미티드 도광 광학 소자를 통한 눈 이미징에 기초한 시선 추적 장치 및 방법
KR20220038452A (ko) 2019-07-29 2022-03-28 디지렌즈 인코포레이티드. 픽셀화된 디스플레이의 이미지 해상도와 시야를 증배하는 방법 및 장치
KR20220054386A (ko) 2019-08-29 2022-05-02 디지렌즈 인코포레이티드. 진공 브래그 격자 및 이의 제조 방법
JP2023509305A (ja) 2019-12-25 2023-03-08 ルムス エルティーディー． 光ガイド光学素子と関連付けられた光学配置を使用して、眼からの光を方向転換することに基づく、アイトラッキングのための光学システムおよび方法
JP7545564B2 (ja) 2020-07-15 2024-09-04 マジック リープ， インコーポレイテッド 非球面角膜モデルを使用した眼追跡
WO2023023628A1 (en) * 2021-08-18 2023-02-23 Advanced Neuromodulation Systems, Inc. Systems and methods for providing digital health services
TW202323949A (zh) * 2021-09-30 2023-06-16 以色列商魯姆斯有限公司 用於控制有源遮擋子系統的裝置、方法和電腦可讀存儲裝置
KR20230103379A (ko) 2021-12-31 2023-07-07 삼성전자주식회사 Ar 처리 방법 및 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010014282A (ko) * 1997-06-28 2001-02-26 스켈톤 에스. 알. 자동입체 디스플레이 장치
US20100149611A1 (en) * 2007-05-16 2010-06-17 Seereal Technologies S.A. Method and Apparatus for Reconstructing a Three-Dimensional Scene in a Holographic Display

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2728994B2 (ja) 1991-07-30 1998-03-18 三菱電機株式会社 開閉機器の動作異常検出装置
JP2786352B2 (ja) * 1991-10-02 1998-08-13 シャープ株式会社 焦点可変光学装置
JPH0536327U (ja) * 1991-10-21 1993-05-18 三菱電機株式会社 撮像装置
JPH05328260A (ja) * 1992-05-26 1993-12-10 Olympus Optical Co Ltd 頭部装着式ディスプレイ装置
US5572343A (en) 1992-05-26 1996-11-05 Olympus Optical Co., Ltd. Visual display having see-through function and stacked liquid crystal shutters of opposite viewing angle directions
JP3630746B2 (ja) * 1994-12-05 2005-03-23 キヤノン株式会社 画像観察装置
JP3556389B2 (ja) * 1996-05-01 2004-08-18 日本電信電話株式会社 ヘッドマウントディスプレイ装置
EP1798592A3 (en) 1996-01-17 2007-09-19 Nippon Telegraph And Telephone Corporation Optical device and three-dimensional display device
WO1997035223A1 (en) * 1996-03-15 1997-09-25 Retinal Display Cayman Limited Method of and apparatus for viewing an image
US20040108971A1 (en) * 1998-04-09 2004-06-10 Digilens, Inc. Method of and apparatus for viewing an image
JP2000171750A (ja) * 1998-12-03 2000-06-23 Sony Corp ヘッドマウントディスプレイ、表示方法、および提供媒体
US6546438B1 (en) 1999-06-08 2003-04-08 Siemens Energy & Automation System for interfacing components
US6456438B1 (en) * 1999-08-12 2002-09-24 Honeywell Inc. Variable immersion vignetting display
GB0000589D0 (en) 2000-01-13 2000-03-01 Guiver Matthew Cutting guide
FI114945B (fi) * 2002-09-19 2005-01-31 Nokia Corp Sähköisesti säädettävä diffraktiivinen hilaelementti
EP2482103B1 (en) * 2005-02-22 2020-10-28 Nikon Corporation Method of manufacturing a diffractive optical element
DE102005045174A1 (de) 2005-09-21 2007-03-22 Bayer Cropscience Ag Steigerung der Pathogenabwehr in Pflanzen
JPWO2007037089A1 (ja) * 2005-09-27 2009-04-02 コニカミノルタホールディングス株式会社 頭部装着型映像表示装置
JP4810949B2 (ja) * 2005-09-29 2011-11-09 ソニー株式会社 光学装置及び画像表示装置
US7702468B2 (en) 2006-05-03 2010-04-20 Population Diagnostics, Inc. Evaluating genetic disorders
US7936489B2 (en) * 2007-02-09 2011-05-03 GM Global Technology Operations LLC Holographic information display
CN101029968A (zh) * 2007-04-06 2007-09-05 北京理工大学 可寻址光线屏蔽机制光学透视式头盔显示器
CN101688977B (zh) * 2007-06-04 2011-12-07 诺基亚公司 衍射扩束器和基于衍射扩束器的虚拟显示器
BRPI0701380E2 (pt) 2007-06-29 2009-10-06 Valmor Da Cunha Gravio redutor mecánico de velocidade por correia
EP2170698B1 (en) 2007-07-31 2017-10-11 B/E Aerospace, Inc. Aircraft cargo door
RU2359297C1 (ru) * 2007-12-21 2009-06-20 Олег Леонидович Головков Виртуальный шлем
US20100011368A1 (en) 2008-07-09 2010-01-14 Hiroshi Arakawa Methods, systems and programs for partitioned storage resources and services in dynamically reorganized storage platforms
US20100011036A1 (en) 2008-07-09 2010-01-14 The Go Daddy Group, Inc. Document storage access on a per-approval basis
WO2010062481A1 (en) * 2008-11-02 2010-06-03 David Chaum Near to eye display system and appliance
WO2010067117A1 (en) * 2008-12-12 2010-06-17 Bae Systems Plc Improvements in or relating to waveguides
JP4674634B2 (ja) * 2008-12-19 2011-04-20 ソニー株式会社 頭部装着型ディスプレイ
JP5316391B2 (ja) * 2009-08-31 2013-10-16 ソニー株式会社 画像表示装置及び頭部装着型ディスプレイ
JP5333067B2 (ja) * 2009-08-31 2013-11-06 ソニー株式会社 画像表示装置及び頭部装着型ディスプレイ
KR101099137B1 (ko) 2010-01-29 2011-12-27 주식회사 팬택 이동 통신 시스템에서 증강 현실 정보를 제공하기 위한 장치 및 방법
US20110213664A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
KR101479262B1 (ko) 2010-09-02 2015-01-12 주식회사 팬택 증강현실 정보 이용 권한 부여 방법 및 장치
KR101260576B1 (ko) 2010-10-13 2013-05-06 주식회사 팬택 Ａｒ 서비스를 제공하기 위한 사용자 단말기 및 그 방법
KR101407670B1 (ko) 2011-09-15 2014-06-16 주식회사 팬택 증강현실 기반 모바일 단말과 서버 및 그 통신방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010014282A (ko) * 1997-06-28 2001-02-26 스켈톤 에스. 알. 자동입체 디스플레이 장치
US20100149611A1 (en) * 2007-05-16 2010-06-17 Seereal Technologies S.A. Method and Apparatus for Reconstructing a Three-Dimensional Scene in a Holographic Display

Also Published As

Publication number Publication date
US20170023794A1 (en) 2017-01-26
IL252284B (en) 2018-07-31
US20130128230A1 (en) 2013-05-23
JP2017108444A (ja) 2017-06-15
KR20200061416A (ko) 2020-06-02
CA2858208A1 (en) 2013-05-30
EP4036862A1 (en) 2022-08-03
JP6785277B2 (ja) 2020-11-18
EP3503035A1 (en) 2019-06-26
JP2020181225A (ja) 2020-11-05
AU2022202379A1 (en) 2022-05-05
JP2018207542A (ja) 2018-12-27
AU2018203318B2 (en) 2020-03-12
AU2022202379B2 (en) 2023-08-17
US20190339539A1 (en) 2019-11-07
KR102095220B1 (ko) 2020-03-31
AU2020257062A1 (en) 2020-11-19
KR20140101385A (ko) 2014-08-19
IL252284A0 (en) 2017-07-31
KR20220036997A (ko) 2022-03-23
US20190072775A1 (en) 2019-03-07
JP6646712B2 (ja) 2020-02-14
US11822102B2 (en) 2023-11-21
RU2014125226A (ru) 2015-12-27
US8950867B2 (en) 2015-02-10
US10191294B2 (en) 2019-01-29
KR20170122285A (ko) 2017-11-03
EP2783352A1 (en) 2014-10-01
AU2012341069A1 (en) 2014-06-12
US11474371B2 (en) 2022-10-18
JP6250547B2 (ja) 2017-12-20
EP2783352A4 (en) 2015-07-22
CA3024054C (en) 2020-12-29
CN107664847A (zh) 2018-02-06
KR102440195B1 (ko) 2022-09-02
IL232746A0 (en) 2014-07-31
KR102116697B1 (ko) 2020-05-29
KR102227381B1 (ko) 2021-03-11
AU2020257062B2 (en) 2022-02-03
CN107664847B (zh) 2021-04-06
JP2018151674A (ja) 2018-09-27
US20150124317A1 (en) 2015-05-07
BR112014012615A2 (pt) 2017-06-13
US20200233232A1 (en) 2020-07-23
US10444527B2 (en) 2019-10-15
AU2018203318A1 (en) 2018-05-31
AU2018203315B2 (en) 2020-07-23
IL232746A (en) 2017-06-29
AU2012341069B2 (en) 2018-04-05
WO2013077895A1 (en) 2013-05-30
KR102376368B1 (ko) 2022-03-17
AU2018203315A1 (en) 2018-05-31
CA3024054A1 (en) 2013-05-30
CN104067316B (zh) 2017-10-27
US10670881B2 (en) 2020-06-02
JP2015501101A (ja) 2015-01-08
CA2858208C (en) 2019-01-15
EP3503035B1 (en) 2022-03-23
JP6422518B2 (ja) 2018-11-14
RU2628164C2 (ru) 2017-08-15
CN104067316A (zh) 2014-09-24
US20230004018A1 (en) 2023-01-05
NZ625509A (en) 2015-03-27
US20240027785A1 (en) 2024-01-25
KR102513896B1 (ko) 2023-03-23
KR20210029842A (ko) 2021-03-16
EP2783352B1 (en) 2019-03-27

Similar Documents

Publication Publication Date Title
US11822102B2 (en) Three dimensional virtual and augmented reality display system

Legal Events

Date Code Title Description
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant