KR102309257B1 - 증강 현실을 위한 방법 및 시스템 - Google Patents
증강 현실을 위한 방법 및 시스템 Download PDFInfo
- Publication number
- KR102309257B1 KR102309257B1 KR1020167005451A KR20167005451A KR102309257B1 KR 102309257 B1 KR102309257 B1 KR 102309257B1 KR 1020167005451 A KR1020167005451 A KR 1020167005451A KR 20167005451 A KR20167005451 A KR 20167005451A KR 102309257 B1 KR102309257 B1 KR 102309257B1
- Authority
- KR
- South Korea
- Prior art keywords
- data
- hmd
- wearer
- computer
- holographic image
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 230000003190 augmentative effect Effects 0.000 title description 4
- 238000012800 visualization Methods 0.000 claims abstract description 82
- 238000004891 communication Methods 0.000 claims description 89
- 230000015654 memory Effects 0.000 claims description 31
- 238000005286 illumination Methods 0.000 claims description 19
- 201000009310 astigmatism Diseases 0.000 claims description 16
- 230000035945 sensitivity Effects 0.000 claims description 11
- 239000011521 glass Substances 0.000 claims description 9
- 239000011159 matrix material Substances 0.000 claims description 8
- 239000004973 liquid crystal related substance Substances 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 7
- 239000000654 additive Substances 0.000 claims description 6
- 230000000996 additive effect Effects 0.000 claims description 6
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 claims description 5
- 238000012545 processing Methods 0.000 claims description 5
- 229910052710 silicon Inorganic materials 0.000 claims description 5
- 239000010703 silicon Substances 0.000 claims description 5
- 241001393742 Simian endogenous retrovirus Species 0.000 claims 3
- 238000013461 design Methods 0.000 abstract description 8
- 230000003287 optical effect Effects 0.000 description 21
- 230000004075 alteration Effects 0.000 description 11
- 230000005540 biological transmission Effects 0.000 description 10
- 238000004364 calculation method Methods 0.000 description 9
- 230000000007 visual effect Effects 0.000 description 7
- 230000009977 dual effect Effects 0.000 description 6
- 230000004438 eyesight Effects 0.000 description 6
- 210000003128 head Anatomy 0.000 description 6
- 208000014733 refractive error Diseases 0.000 description 6
- 230000001427 coherent effect Effects 0.000 description 5
- 239000003086 colorant Substances 0.000 description 5
- 201000010041 presbyopia Diseases 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 208000001491 myopia Diseases 0.000 description 4
- 230000005855 radiation Effects 0.000 description 4
- 238000000576 coating method Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000007792 addition Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 239000011248 coating agent Substances 0.000 description 2
- 230000005802 health problem Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 239000004984 smart glass Substances 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 108010010803 Gelatin Proteins 0.000 description 1
- 206010020675 Hypermetropia Diseases 0.000 description 1
- 206010038848 Retinal detachment Diseases 0.000 description 1
- BQCADISMDOOEFD-UHFFFAOYSA-N Silver Chemical compound [Ag] BQCADISMDOOEFD-UHFFFAOYSA-N 0.000 description 1
- 229910021417 amorphous silicon Inorganic materials 0.000 description 1
- 201000007201 aphasia Diseases 0.000 description 1
- 230000004323 axial length Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- SOCTUWSJJQCPFX-UHFFFAOYSA-N dichromate(2-) Chemical compound [O-][Cr](=O)(=O)O[Cr]([O-])(=O)=O SOCTUWSJJQCPFX-UHFFFAOYSA-N 0.000 description 1
- 230000009189 diving Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000839 emulsion Substances 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 229920000159 gelatin Polymers 0.000 description 1
- 235000019322 gelatine Nutrition 0.000 description 1
- 235000011852 gelatine desserts Nutrition 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000012212 insulator Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000036244 malformation Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000004379 myopia Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 230000003071 parasitic effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000004264 retinal detachment Effects 0.000 description 1
- 230000002207 retinal effect Effects 0.000 description 1
- 229910052594 sapphire Inorganic materials 0.000 description 1
- 239000010980 sapphire Substances 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C7/00—Optical parts
- G02C7/02—Lenses; Lens systems ; Methods of designing lenses
- G02C7/024—Methods of designing ophthalmic lenses
- G02C7/027—Methods of designing ophthalmic lenses considering wearer's parameters
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C7/00—Optical parts
- G02C7/02—Lenses; Lens systems ; Methods of designing lenses
- G02C7/08—Auxiliary lenses; Arrangements for varying focal length
- G02C7/086—Auxiliary lenses located directly on a main spectacle lens or in the immediate vicinity of main spectacles
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C7/00—Optical parts
- G02C7/14—Mirrors; Prisms
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/04—Processes or apparatus for producing holograms
- G03H1/08—Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
- G03H1/0808—Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/22—Processes or apparatus for obtaining an optical image from holograms
- G03H1/2286—Particular reconstruction light ; Beam properties
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/22—Processes or apparatus for obtaining an optical image from holograms
- G03H1/2294—Addressing the hologram to an active spatial light modulator
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/011—Head-up displays characterised by optical features comprising device for correcting geometrical aberrations, distortion
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
- G02B2027/0174—Head mounted characterised by optical features holographic
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C2202/00—Generic optical aspects applicable to one or more of the subgroups of G02C7/00
- G02C2202/20—Diffractive and Fresnel lenses or lens portions
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/04—Processes or apparatus for producing holograms
- G03H1/08—Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
- G03H1/0808—Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
- G03H2001/0825—Numerical processing in hologram space, e.g. combination of the CGH [computer generated hologram] with a numerical optical element
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
- G03H1/22—Processes or apparatus for obtaining an optical image from holograms
- G03H1/2249—Holobject properties
- G03H2001/2284—Superimposing the holobject with other visual information
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H2225/00—Active addressable light modulator
- G03H2225/60—Multiple SLMs
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H2226/00—Electro-optic or electronic components relating to digital holography
- G03H2226/04—Transmission or communication means, e.g. internet protocol
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
- G03H2227/00—Mechanical components or mechanical aspects not otherwise provided for
- G03H2227/02—Handheld portable device, e.g. holographic camera, mobile holographic display
Abstract
본 발명은 디스플레이의 맞춤화가 착용자 특정 시각화 파라미터들을 고려함으로써 달성되는 머리 장착 디바이스로의 이미지 디스플레이를 위한 방법들 및 시스템들을 제공한다. 그러한 시각화 파라미터들은 디바이스의 설계와 관련되는 파라미터들 및/또는 착용자 처방 데이터와 같은 착용자 눈 데이터를 포함한다. 바람직한 이미지들은 컴퓨터 생성 홀로그램 이미지들이다.
Description
본 발명은 증강 현실을 위한 방법 및 시스템에 관한 것이다.
보다 상세하게는, 본 발명은 머리 장착 디바이스(HMD)에 의한 이미지, 특히 홀로그램 이미지의 디스플레이에 관한 것이다.
디스플레이 특징을 갖는 머리 장착 디바이스가 관련 분야에 알려져 있다. 그러한 디바이스는 스마트 글래스의 착용자가 증강 현실을 위한 이미지 또는 텍스트를 시각화하는 것을 가능하게 하는 이른바 ‘스마트 글래스’를 포함한다.
착용자의 시각적 편안함을 개선하기 위해, 이미지 및 텍스트가 상세하게는 착용자 및/또는 착용된 디바이스에 적응되는 맞춤형 방식으로 표시되는 방법 및 시스템을 제공하는 것이 바람직하다.
게다가, 착용자 인체 공학적 편안함을 개선하기 위해, 가볍고, 소형이고, 특히 사용되고 있을 때 저에너지 요건들을 갖는 디바이스인 머리 장착 디바이스를 제공하는 것이 바람직하다.
또한 안전성에 대하여, 데이터 교환을 위한 통신에 사용되는 일정 타입의 전자파는 특히, HMD들과 같은 머리에 근접하게 위치되는 디바이스에 대해 건강 문제를 불러 일으킬 수 있다. 따라서, 그 기능이 그러한 전자파에 대한 착용자의 노출을 제한하거나 피하는 머리 장착 디바이스를 제공하는 것이 바람직하다.
본 발명은 일반적으로 디스플레이의 맞춤화가 착용자 특정 시각화 파라미터들을 고려함으로써 달성되는 머리 장착 디바이스로의 이미지 디스플레이를 위한 방법들 및 시스템들을 제공한다. 그러한 시각화 파라미터들은 디바이스의 설계와 관련되는 파라미터들 및/또는 착용자 처방 데이터와 같은 착용자 눈 데이터를 포함한다. 바람직한 이미지들은 컴퓨터 생성 홀로그램 이미지들이다.
본 발명에 따르면, 디스플레이의 품질 및 착용자 시각 경험은 광 수차들로 인한 이미지 왜곡들을 교정함으로써 향상될 수 있다. 그러한 수차들은 디바이스 그 자체의 기하학적 구조 및 설계 및/또는 착용자 굴절 이상 및/또는 노안에 기인할 수 있다.
바람직한 실시예들에서, 본 발명은 위상 공간 광 변조기(SLM)에 의해 이미지 디스플레이를 구현한다. 상기 SLM은 위상 한정 SLM들 및 위상 및 진폭 SLM들로부터 선택될 수 있다. 위상 변조는 등위상면에서 이미지 데이터 및 처방 데이터 둘 다를 코딩할 가능성을 제공하며, 이는 등위상면의 위상에 대한 어떠한 정보도 전달하지 않는 다른 규칙적 디스플레이들로는 가능하지 않다는 점에서 매우 유리하다. 즉, SLM은 이미지에 대한 코딩에 더하여 처방 렌즈의 광 효과에 대해 가상으로 코딩하는 것을 가능하게 한다. 위상 변조는 또한 후술하는 바와 같이 추가 이점들을 제공한다.
본 발명의 방법들
본 발명은 착용자에 의해 착용되는 머리 장착 컴퓨터 생성 이미지 표시 디바이스로의 디스플레이를 위해 컴퓨터 생성 이미지 데이터를 처리하는 컴퓨터 구현 방법으로서:
(i) - 착용자 처방 데이터, 착용자 눈 감도 데이터 및 착용자 눈 생물 계측 데이터를 포함하는 착용자 눈 데이터; 및
- 프레임 데이터 및 렌즈 데이터를 포함하는 머리 장착 디바이스 데이터로부터 선택되는 시각화 파라미터 데이터를 제공하는 단계,
(ii) 컴퓨터 생성 이미지 데이터를 제공하는 단계,
(iii) 단계(i)의 시각화 파라미터 데이터를 고려함으로써 단계(ii)의 컴퓨터 생성 이미지 데이터로부터 변경된 컴퓨터 생성 이미지 데이터를 계산하는 단계, 및
(iv) 디스플레이를 위해 단계(iii)의 변경된 컴퓨터 생성 이미지 데이터를 상기 디바이스로 제공하는 단계를 포함하는 컴퓨터 구현 방법을 제공한다.
상기 이미지는 홀로그램 이미지일 수 있고/있거나, 상기 시각화 파라미터 데이터는 난시 모듈, 난시 축, 배율, 프리즘 및 가법으로부터 선택되는 착용자 처방 데이터일 수 있다.
일 실시예에서, 상기 이미지는 홀로그램 이미지이고, 상기 컴퓨터 생성 이미지 데이터는 컴퓨터 생성 홀로그램 이미지 데이터이고, 상기 변경된 컴퓨터 생성 이미지 데이터는 변경된 컴퓨터 생성 홀로그램 이미지 데이터이고; 상기 방법은:
(v) 상기 디바이스의 조명에 의해 단계(iii)의 변경된 컴퓨터 생성 홀로그램 이미지 데이터로부터 홀로그램 이미지를 표시하는데 적절한(표시하도록 배열되는, 구성되는) 광 빔을 적어도 하나의 광원에 의해 방사하는 단계를 포함하며,
상기 광원은 원격 조명 터미널 상에 제공되고/되거나 상기 디바이스 상에 내장된다.
상기 광원은 원격 조명 터미널 상에 제공될 수 있고, 상기 광원은 데이터를 송신하도록 구성될 수 있고:
- 단계(ii)는 상기 컴퓨터 생성 홀로그램 이미지 데이터를 상기 광원에서 상기 디바이스로 송신하는 단계를 포함할 수 있거나,
- 단계(iv)는 상기 변경된 컴퓨터 생성 홀로그램 이미지 데이터를 상기 광원에서 상기 디바이스로 송신하는 단계를 포함할 수 있다.
일 실시예에서, 단계(i)의 상기 시각화 파라미터 데이터 중 적어도 하나는 상기 디바이스 상의 메모리에 저장된다.
이러한 실시예에서, 단계(i)는:
(i-a) 상기 착용자의 존재를 적어도 하나의 통신 터미널에 의해 검출하는 단계,
(i-b) 단계(i-a)에서의 검출된 존재에 응하여, 상기 시각화 파라미터 데이터를 상기 디바이스에서 상기 통신 터미널로 송신하는 단계를 포함할 수 있고,
단계(iii)는 변경된 컴퓨터 생성 이미지 데이터를 상기 통신 터미널에서 상기 디바이스로 송신하는 단계를 포함할 수 있다.
일 실시예에서, 단계(i)의 상기 시각화 파라미터 데이터 중 적어도 하나는 시각화 파라미터 식별자와 연관지어 통신 네트워크를 통하여 적어도 하나의 통신 터미널에 연결되는 통신 서버 상의 착용자 데이터베이스에 저장된다. 그러한 식별자는 상기 시각화 파라미터 데이터(VPD)의 검색을 가능하게 하는 식별자로서 한정될 수 있다.
이러한 실시예에서, 단계(i)는:
(i-a) 상기 착용자의 존재를 상기 적어도 하나의 통신 터미널에 의해 검출하는 단계,
(i-b) 단계(i-a)에서의 검출된 존재에 응하여, 상기 시각화 파라미터 데이터를 상기 통신 서버에서 상기 통신 터미널로 송신하는 단계, 및
(i-c) 선택적으로, 시각화 파라미터 데이터를 상기 통신 터미널에서 상기 디바이스로 송신하는 추가 단계를 포함할 수 있다.
단계(iii)는:
- 변경된 컴퓨터 생성 이미지 데이터를 상기 통신 터미널에서 상기 디바이스로 송신하는 단계, 및
- 선택적으로, 변경된 컴퓨터 생성 이미지 데이터를 상기 통신 서버에서 상기 통신 터미널로 송신하는 이전 단계를 포함할 수 있다.
일 실시예에서, 상기 컴퓨터 생성 이미지 데이터 또는 상기 변경된 컴퓨터 생성 이미지 데이터는 이미지 데이터베이스에 저장되며,
상기 방법은 착용자 식별자와 상기 착용자 사이의 연관을 상기 데이터베이스에서 미리 등록하는 예비 단계를 포함하고,
단계(ii)의 상기 컴퓨터 생성 이미지 데이터 및/또는 단계(iii)의 상기 변경된 컴퓨터 생성 이미지 데이터는 선택적으로 액세스 권한들에 따라서 상기 착용자 식별자에 따라 결정(한정)된다.
본 발명의 시스템들 및 디바이스들
본 발명은:
- 조명에 의해 홀로그램 이미지를 표시하는데 적절한(표시하도록 배열되는, 구성되는) 광원,
- 선택적으로, 머리 장착 컴퓨터 생성 홀로그램 이미지 표시 디바이스가 구비되는 착용자의 존재를 검출하는데 적절한(검출하도록 배열되는, 구성되는) 센서, 및
- 선택적으로, 상기 터미널로부터 및/또는 상기 터미널로 시각화 파라미터 데이터, 컴퓨터 생성 홀로그램 이미지 데이터 및 변경된 컴퓨터 생성 홀로그램 이미지 데이터로부터 선택되는 데이터를 송신하는데 적절한(송신하도록 배열되는, 구성되는) 통신 인터페이스를 포함하는 조명 터미널을 제공한다.
이러한 조명 터미널은 이미지가 홀로그램 이미지인 발명의 방법의 구현에 적절하다(구현을 위해 배열된다, 구성된다).
일 실시예에서, 상기 광원은 또한 상기 조명 터미널로부터 컴퓨터 생성 홀로그램 이미지 데이터 및/또는 변경된 컴퓨터 생성 홀로그램 이미지 데이터를 송신하는데 적절하다(송신하도록 배열된다, 구성된다).
본 발명은 상기 조명 터미널들 각각이 조명 네트워크를 통하여 조명 서버에 연결되는 본 발명에 설명하는 바와 같은 복수의 조명 터미널을 포함하는 시스템을 제공한다.
이러한 시스템은 이미지가 홀로그램 이미지인 발명의 방법의 구현에 적절하다(구현을 위해 배열된다, 구성된다).
본 발명은 또한:
- 예를 들어, LCoS(실리콘 액정) 또는 유리 투과성 액티브 매트릭스 액정으로 만들어진 위상 및/또는 진폭 공간 광 변조기
- 선택적으로, 조명 시에 이미지를 표시하는데 적절한(표시하도록 배열되는, 구성되는) 광원, 및
- 선택적으로, 상기 디바이스로부터 및/또는 상기 디바이스로 시각화 파라미터 데이터, 컴퓨터 생성 이미지 데이터 및 변경된 컴퓨터 생성 이미지 데이터로부터 선택되는 데이터를 송신하는데 적절한(송신하도록 배열되는, 구성되는) 통신 인터페이스를 포함하는 머리 장착 컴퓨터 생성 이미지 표시를 제공한다.
이러한 디바이스는 발명의 방법의 구현에 적절하다(구현을 위해 배열된다, 구성된다).
본 발명은 또한 착용자 처방-순응 머리 장착 디스플레이 디바이스의 제조를 위한 위상 및/또는 진폭 공간 광 변조기(SLM), 바람직하게는 LCoS SLM 또는 유리 투과성 액티브 매트릭스 LC SLM의 사용과 관련된다.
본 발명은 또한 착용자 처방-순응 머리 장착 디스플레이 디바이스의 굴절 이상을 교정하는데 사용하기 위해 위상 및/또는 진폭 공간 광 변조기(SLM)의 의학적 이용 즉, SLM, 바람직하게는 LCoS SLM 또는 유리 투과성 액티브 매트릭스 LC SLM의 의학적 이용에 관한 것이다.
본 발명의 내용에 포함됨.
도 1 내지 도 8은 본 발명의 방법들의 실시예들을 도시한다.
도 9 내지 도 11은 본 발명의 방법에 유용한 예시적인 데이터베이스들의 구성을 도시한다.
도 12 내지 도 14는 본 발명의 머리 장착 디바이스들에 대한 예시적인 구성들을 도시한다.
도 9 내지 도 11은 본 발명의 방법에 유용한 예시적인 데이터베이스들의 구성을 도시한다.
도 12 내지 도 14는 본 발명의 머리 장착 디바이스들에 대한 예시적인 구성들을 도시한다.
이하의 정의들이 본 발명을 설명하기 위해 제공된다.
“컴퓨터 생성 이미지들”이 관련 분야에 알려져 있다. 본 발명에 따르면, 컴퓨터 생성 이미지들은 컴퓨터 생성 홀로그램 이미지들뿐만 아니라, 2D-회절 이미지들 등과 같은 다른 타입들의 컴퓨터 생성 이미지들도 포함한다. 본 발명에서의 바람직한 컴퓨터 생성 이미지들은 컴퓨터 생성 홀로그램 이미지들이다.
“컴퓨터 생성 홀로그램 이미지들”이 관련 분야에 알려져 있다. 그러한 홀로그램 이미지들은 컴퓨터 생성 홀로그램들을 판독함으로써(조명함으로써) 표시될 수 있다. 컴퓨터 생성 홀로그램은 또한 합성 또는 디지털 홀로그램으로 지칭된다. 컴퓨터 생성 홀로그램들은 일반적으로 2D 또는 3D 이미지를 선택하고, 2D 또는 3D 이미지의 홀로그램을 디지털 방식으로 컴퓨팅함으로써 얻어진다. 홀로그램 이미지는 광 재구성에 의해 즉, 적절한 광 빔(홀로그램 참조 빔)으로 홀로그램을 조명함으로써(판독함으로써) 표시될 수 있다. 이미지는 물리적 스크린 또는 지지대, 또는 (가상의) ‘안테나’ 상에 표시될 수 있다는 점에서 ‘현실적일’ 수 있다. 홀로그램은 홀로그램 지지대에 출력되거나 후술하는 바와 같이 SLM 상에 구현될 수 있다.
“이미지 데이터”(ID)가 관련 분야에 알려져 있다. 그것들은 대상에 의한 시각화를 위해 이미지의 디스플레이를 가능하게 하는 코딩된 데이터(코딩된 데이터의 세트(들))를 일반적으로 포함한다. 이미지는 컴퓨터 생성 홀로그램 이미지와 같은 컴퓨터 생성 이미지일 수 있다. 이미지 데이터는 이미지 그 자체(이미지의 “콘텐츠”)에 대해 코딩하는 데이터를 포함하지만, (예를 들어, 디바이스(HMD)의 프레임을 참조하여) 착용자의 시계에서 이미지의 디스플레이의 위치(장소) 및/또는 시각화될 이미지의 크기(줌 또는 확대) 및/또는 시각화될 이미지 초점 도표의 위치에 대한 데이터 코딩을 더 포함할 수도 있다. 이미지 데이터는 예를 들어, 다중 디스플레이를 위해 표시될 수개의 이미지를 제공할 수 있다. 이미지 데이터는 한가지 색상(예를 들어, 흑색 및 백색), 또는 예를 들어, 적어도 3가지 색상 예를 들어, 3원색을 사용하는 한가지 색상보다 더 많은 색상으로 이미지를 제공할 수 있다. 본 발명에 따르면, 상기 컴퓨터 생성 이미지 데이터(ID)는 변경되거나(변경된 컴퓨터 생성 이미지 데이터(MID)이거나) 변경되지 않을(ID) 수 있다. 데이터(ID 또는 MID)는 디스플레이를 가능하게 하도록 디코딩될 수 있다. 본 발명에 따르면, 상기 데이터는 HMD의 메모리 및/또는 통신 터미널(COM TERM)과 같은 터미널 상의 메모리 및/또는 통신 서버(COM SERV)와 같은 서버를 통하여 액세스 가능한 데이터베이스에 저장될 수 있다. 컴퓨터 생성 이미지 데이터(ID 또는 MID)는 이미지 데이터베이스(IM DB)에 저장될 수 있다. 상기 데이터베이스(IM DB)는 이미지 데이터의 세트들을 저장하고 검색하는데 적절한(저장하고 검색하도록 배열되는, 구성되는) 메모리를 포함하고 통신 서버(COM SERV)와 같은 서버의 일부이거나, 통신 네트워크(COM NETW)를 통하여 서버에 연결될 수 있다.
“컴퓨터 생성 홀로그램 이미지 데이터”(HD)가 관련 분야에 알려져 있다. 그것들은 대상에 의한 시각화를 위해 컴퓨터 생성 홀로그램 이미지의 디스플레이를 가능하게 하는 코딩된 데이터(코딩된 데이터의 세트(들))를 일반적으로 포함한다. 컴퓨터 생성 홀로그램 이미지 데이터는 이미지(2D, 3D)의 각각의 화소에 대해 위상 및 진폭에 대한 정보를 포함하는 컴퓨터 생성 홀로그램 이미지 그 자체(사진, 영숫자 문자 및 이들의 조합들 등일 수 있는 컴퓨터 생성 홀로그램 이미지의 “콘텐츠”)에 대해 코딩하는 데이터를 포함한다. 컴퓨터 생성 홀로그램 이미지 데이터는 (예를 들어, 디바이스(HMD)의 프레임을 참조하여) 착용자의 시계에서 홀로그램 이미지의 디스플레이의 위치(장소) 및/또는 시각화될 홀로그램 이미지의 크기(줌 또는 확대) 및/또는 시각화될 홀로그램 이미지 초점 도표의 위치에 대해 코딩하는 데이터를 더 포함할 수도 있다. 그러한 홀로그램 이미지 위치, 크기 및 초점 도표에 대한 데이터는 내장된 광원이 구비되는 디바이스(HMD) 상에 홀로그램 이미지의 디스플레이에 특히 유용하다. 디바이스(HMD)에 내장된 광원이 구비되지 않을 때, 즉, 광원이 디바이스(HMD)에서 멀리 떨어져 있을 때, 위치 및 초점 도표에 대한 데이터가 컴퓨터 생성 홀로그램 이미지 데이터에 암암리에 포함된다고 고려할 수 있다. 그러나, 상기 데이터는 이미지의 크기에 대한(예를 들어, 줌잉에 대한) 데이터를 더 포함할 수 있다. 컴퓨터 생성 홀로그램 이미지 데이터는 예를 들어, 다중 디스플레이를 위해 표시될 수개의 이미지를 제공할 수도 있다. 컴퓨터 생성 홀로그램 이미지 데이터는 한가지 색상(예를 들어, 흑색 및 백색), 또는 예를 들어, 적어도 3가지 색상 예를 들어, 3원색을 사용하는 한가지 색상보다 더 많은 색상으로 이미지를 제공할 수 있다. 컴퓨터 생성 홀로그램 이미지 그 자체(컴퓨터 생성 홀로그램 이미지의 “콘텐츠”)에 대해 코딩하는 데이터는 유리하게는 위상 코딩된다. 본 발명에 따르면, 상기 컴퓨터 생성 홀로그램 이미지 데이터(HD)는 변경되거나(변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)이거나) 변경되지 않을(HD) 수 있다. 데이터(HD 또는 MHD)는 표시 수단 예를 들어, SLM으로 디코딩되고 송신될 수 있어, 적절한(배열된, 구성된) 조명 시 홀로그램의 판독 및 상응하는 홀로그램 이미지의 디스플레이를 가능하게 한다. 본 발명에 따르면, 상기 데이터(HD 또는 MHD)는 HMD의 메모리 및/또는 통신 터미널(COM TERM)과 같은 터미널 상의 메모리 및/또는 통신 서버(COM SERV)와 같은 서버를 통하여 액세스 가능한 데이터베이스에 저장될 수 있다. 홀로그램 이미지 데이터(HD 또는 MHD)의 세트들은 컴퓨터 생성 홀로그램 이미지 데이터(HOLO DB) 및/또는 변경된 컴퓨터 생성 홀로그램 이미지 데이터(M HOLO DB)의 홀로그램 이미지 데이터베이스에 저장될 수 있다. 상기 데이터베이스(DB)는 홀로그램 이미지 데이터의 세트들을 저장하고 검색하는데 적절한(저장하고 검색하도록 배열되는, 구성되는) 메모리를 포함하고 통신 서버(COM SERV)와 같은 서버의 일부이거나, 통신 네트워크(COM NETW)를 통하여 서버에 연결될 수 있다. 컴퓨터 생성 홀로그램 이미지 데이터베이스들의 구성 예들이 도 10 및 도 11에 도시된다. 도 10은 컴퓨터 생성 홀로그램 이미지 데이터(HD)를 포함하는 데이터베이스(HOLO DB)의 일 예를 도시한다. 홀로그램 이미지들은 영숫자 문자들(글자들 “A”, “B” 등; 숫자들 “1”, “2” 등) 또는 사진들과 같은 보다 복잡한 이미지들일 수 있다. 데이터는 착용자의 시계에서의 이미지의 위치(LOC)를 포함할 수 있다. 게다가, 데이터의 세트들은 액세스 권한들(AC)에 따라 결정될(한정될) 수 있다. 도 11은 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)의 데이터베이스(M HOLO DB)의 일 예를 도시한다. 도 10에 대한 것과 동일한 홀로그램 이미지들이 도시되지만, 굴절 이상 착용자의 처방 데이터를 고려하기 위해 착용자에 대해서 변경되었다. 도 10 및 도 11에서, 변경되지 않거나 변경된 컴퓨터 생성 홀로그램 이미지 데이터(HD 및 MHD)의 각각의 세트는 예를 들어, 식별자(HOLO i, M HOLO i)를 사용하여 데이터베이스로부터 검색될 수 있다. 도 10 및 도 11은 이미지 데이터베이스들(IM DB, M IM DB)에 일반화될 수 있다.
“서버들”(SERV)이 관련 분야에 알려져 있다. 서버(SERV)는 확장된 네트워크(NETW)를 통하여 복수의 터미널(TERM)에 연결될 수 있다. 네트워크(NETW)는 데이터 송신을 가능하게 하고 무선 주파수 통신(Wi-Fi, 블루투스, 3G, 4G 등)과 같은 무선 통신 및/또는 Li-Fi 또는 FSO(적외선 IR, 근적외선 NIR, 단파장 적외선 SWIR, 가시광 등)과 같은 광 통신 및/또는 유선 통신(이더넷, 광 섬유)에 의존할 수 있다. 서버(SERV)는 하나 이상의 데이터베이스(DB)를 포함할 수 있고/있거나 하나 이상의 데이터베이스(DB)에 연결될 수 있다. 서버(SERV)는 통신 서버(COM SERV) 및/또는 조명 서버(LIGHT SERV)일 수 있다.
“데이터를 제공하는 것”은 관련 분야에 알려진 수단에 의해 수행될 수 있다. 데이터는 하나의 엔티티에서 다른 엔티티로 무선 통신(Wi-Fi, 블루투스, 3G, 4G를 포함하는 RF; Li-Fi 또는 FSO, IR, 근적외선, 가시광을 포함하는 광 등) 또는 (예를 들어 이더넷 케이블, USB 포트, 광 섬유 등을 통한) 유선 통신에 의해 제공될 수 있다. 광 통신은 발생 가능한 안전 문제에 대하여 바람직할 수 있다. 실제로, Li-Fi 또는 FSO에 의해서와 같은 광 통신의 이용은 건강 문제들을 일으킬 수 있는 특정 타입들의 파형들(Wi-Fi 등)에 대한 노출을 제한하는 것을 가능하게 한다. 이는 머리 장착 디바이스가 머리의 부근에 착용하기 위한 것이므로, 머리 장착 디바이스와의 데이터의 통신에 특히 적용된다.
데이터는 저장된 데이터를 포함하는 메모리 또는 데이터베이스에 대한 액세스 및 이것들로부터의 검색에 의해 제공될 수 있다(액세스 및 검색은 직접적이거나 간접적이며; 조건부이거나 조건부가 아닐 수 있는 등이다). 데이터는 예를 들어, 디지털 사진을 찍음으로써 획득을 통하여 제공될 수도 있다. 데이터의 획득은 예를 들어, 디지털 영상을 기록함으로써 ‘실황’이거나 실시간 즉, 지속적일 수 있다. 데이터는 예를 들어, ‘수작업’ 설정(햅틱 수단 등에 의한 획득)에 의해 아날로그 방식으로 제공될 수도 있다.
데이터를 제공하는 것은 미리 정해진 액세스 권한들, 및/또는 주어진 터미널(센서/들)의 부근에 검출된 존재에 의존할 수도 있다.
“머리 장착 디스플레이 디바이스들”(HMD)이 관련 분야에 알려져 있다. 헬멧 장착 디스플레이, 광 머리 장착 디스플레이, 머리 착용 디스플레이 등을 포함하는 그러한 디바이스들은 착용자의 머리에 또는 이것의 주변에 착용될 것이다. 그것들은 착용자에 의한 시각화를 위해 이미지를 표시하는 광 수단을 포함한다. HMD는 컴퓨터 생성 이미지의 디스플레이만을, 또는 컴퓨터 생성 이미지 및 ‘실생활의’ 시계의 중첩된 시각화를 제공할 수 있다. HMD는 단안(단일 눈)이거나 양안(눈 둘 다)일 수 있다. 본 발명의 HMD는 안경, 스키 또는 다이빙 마스크와 같은 마스크, 고글 등을 포함하는 다양한 형태를 취할 수 있다. HMD는 하나 이상의 렌즈를 포함할 수 있다. 상기 렌즈들은 처방 렌즈들로부터 선택될 수 있다. 본 발명에 따르면, HMD는 공간 광 변조기(SLM)를 포함한다. 바람직한 실시예들에서, HMD는 렌즈들을 구비한 안경이다. 본 발명의 디바이스들(HMD)의 예들이 도 12 내지 도 14에 도시된다.
“공간 광 변조기들”(SLM)이 관련 분야에 알려져 있다. 상기 SLM은 위상 SLM, 위상 한정 SLM, 진폭 한정 SLM 또는 위상 및 진폭 SLM일 수 있다. 실재하는 경우, 진폭 변조는 바람직하게는 위상 변조와는 별개이고, 이미지 스페클(speckle)의 감소를 가능하게 하여, 그레이(gray)의 레벨의 측면에서 이미지 품질을 개선한다. 바람직한 실시예들에서, SLM은 위상 또는 위상 한정 SLM이다. 본 발명에 따르면, 상기 SLM은:
- 반사성 SLM(디스플레이를 야기하는 광 빔이 SLM 상에서 반사됨)일 수 있다. 이것의 예들은 LCoS 재료(실리콘 액정)로 만들어진 SLM들을 포함한다. 가능한 상업적 소스들은 Holoeye, Boulder Nonlinear Systems, Syndiant, Cambridge technologies를 포함한다. 반사성 SLM을 포함하는 본 발명의 디바이스(HMD)는 홀로그램 미러 또는;
- 투과성 SLM(디스플레이를 야기하는 광 빔이 SLM을 통해 투과됨)을 더 포함한다. 바람직하게는, 투과성 SLM은 “속이 비치거나” “투명한” SLM 즉, 85% 초과 또는 90% 초과의 투과율을 갖는 SLM이다. 그러한 “속이 비치는” SLM은 유리하게는 달리 시력을 손상시키지 않고 착용자 눈 앞에 직접 배치될 수 있다. 이것의 예들은 얇은 실리콘 온 글래스(SOI: 실리콘 온 절연체) 또는 사파이어 기판 또는 유리 투과성 액티브 매트릭스 액정으로 만들어진 투명 액티브 매트릭스들을 포함한다. 그러한 제품들은 Citizen Finetech Miyota에 의해 개발되고 있다. 다른 예들은 비정질 실리콘, IGZO 등과 같은 LCD 타입 투명 액티브 매트릭스들을 포함한다. 가능한 상업적 소스들의 예들은 Boulder Nonlinear Systems를 포함한다. 투과성 SLM을 포함하는 본 발명의 디바이스(HMD)는 홀로그램 미러를 포함할 수 있거나 포함하지 않을 수 있다.
SLM은 바람직하게는 이하의 특징들 중 하나 이상, 바람직하게는 모두를 갖는다:
- 10 ㎛ 미만, 바람직하게는 5 ㎛ 미만 또는 4 ㎛ 미만의 화소 크기. 선택하기/고르기 용이한 일정 간격으로 이격된 회절 차수들을 갖고, 위상의 적절한(배열된, 구성된) 공간적 샘플링을 제공하여, 이미지의 상세들의 더 높은 해상도 및 더 양호한 재생을 갖는 이미지를 산출하기 위해 작은 화소 크기들을 갖는 SLM들을 선택하는 것이 바람직하다. 게다가, 더 작은 화소 크기는 회절 각도들이 더 크므로, 더 넓은 영역의 이미지들의 가능성을 제공한다.
- 85% 초과, 바람직하게는 90% 초과의 회절 효율. 이는 그것이 단일 화소의 위상의 개선된 역학 관계(반응) 및 적절한(배열된, 구성된) 샘플링을 제공하므로, 바람직하다;
- (파일럿 화소들에의) 비가시성 커맨드 매트릭스 및 하드웨어;
- 2 π 초과의 위상 역학 관계;
- 16 레벨 이상(4 비트)의 위상 샘플링;
- 90% 초과, 바람직하게는 95% 초과의 충전율(화소 유용 영역).
본 발명에 따르면, 위상 SLM들은 이미지 데이터가 위상 코딩되는 이미지들의 디스플레이를 위상 SLM들이 가능하게 한다는 점에서 유리하다. 위상 코딩은 이미지의 주어진 디스플레이에 필요한 에너지를 낮춘다(진폭 한정-변조 코딩과 비교하여 강도 손실 없음). 이에 상응하여, HMD의 에너지 소모는 더 적은 계산 리소스 요건으로 인해 유리하게 감소될 수 있다. 그러나, SLM이 또한 진폭 변조를 가능하게 하는 것은 그러한 경우에 계산이 더 많은 리소스를 필요로 하고 따라서 더 많은 에너지를 소모할 수 있더라도, SLM이 개선된 이미지 품질을 제공하므로, 또한 유리하다. 이는 더 작은 배터리들의 사용을 가능하게 하고, 따라서, HMD의 크기를 감소시키고 디바이스의 에너지 자율성을 확장시킨다. 본 발명에 따르면, SLM은‘프로그램 가능’홀로그램 즉, 원하는 홀로그램 이미지의 디스플레이를 가능하게 하는 전자적으로 다룰 수 있는 판독 지지대로서의 역할을 한다.
“시각화 파라미터 데이터”(VPD)는 (프레임 데이터(FD) 및 렌즈 데이터(LD)와 같은) 머리 장착 디바이스(HMD) 데이터 및 착용자 눈 데이터(OD)(OD는 처방 데이터(PD), 눈 감도 데이터(SD) 및 생물 계측 데이터(BD)와 같은 데이터를 포함함) 중 하나 이상을 포함한다. 상기 VPD는 HMD 상에 내장되는 메모리 상에 저장되고/되거나, 서버를 통하여 액세스 가능한 전용 데이터베이스 상에 저장될 수 있다. 시각화 파라미터 데이터(VPD)는 (착용자에 특정한) OD 및 (착용자에 의해 선택되는 디바이스에 특정한) HMDD 데이터를 포함하므로, 착용자 맞춤형인 것으로 고려될 수 있다.
“머리 장착 디바이스 데이터”(HMDD)는 특히, HMD의 설계, 기하학적 구조 또는 구성과 관련되는 HMD 디바이스의 물리적 특징들에 상응하는 하나 이상의 데이터의 세트를 지칭한다. 그러한 HMDD는 프레임 데이터(FD) 및/또는 렌즈 데이터(LD)와 같은 데이터를 포함한다. 상기 HMDD는 HMD 상에 내장되는 메모리 상에 저장되고/되거나, 서버를 통하여 액세스 가능한 전용 데이터베이스 상에 저장될 수 있다. 본 발명에 따르면, 그러한 데이터는 HMD로의 디스플레이를 최적화하고, 특히 HMD의 기하학적 구조에 기인하는 광 수차들을 교정하는데 매우 유용하다. 착용자는 주어진 HMD 디바이스를 선택할 수 있으며, 상기 HMD 디바이스는 상응하는 HMDD 데이터를 갖는다. 그러한 HMDD 데이터는 HMDD 데이터가 착용자에 의해 선택되는 디바이스의 데이터이므로, 착용자 맞춤형 시각화 파라미터 데이터로서 고려될 수 있다.
“프레임 데이터”는 HMD의 구성과 관련되는 하나 이상의 데이터의 세트를 지칭하고, HMD 내에서 HMD의 하나의 요소의 상대 위치와 같은 설계 파라미터들을 포함할 수 있다. 이는 SLM의 위치, 존재한다면 광원의 상대 위치, SLM과 HMD의 렌즈 사이의 거리 등을 포함한다. 이는 또한 SLM의 특징들, 광원의 특징들과 관련되는 데이터를 포함한다.
“렌즈 데이터”(LD)는 눈 렌즈의 특징이 되는 하나 이상의 데이터의 세트를 지칭한다. 상기 데이터는 하나 이상의 기하학적 (표면) 특성 및/또는 렌즈 재료의 광 지수와 같은 렌즈의 하나 이상의 광 특성을 한정하는 데이터를 포함한다. 렌즈 데이터(LD)는 렌즈의 배면 및/또는 렌즈의 전면, 또는 렌즈의 배면 및/또는 렌즈의 전면의 상대 위치들에 상응할 수 있다. 상기 렌즈 데이터(LD)는 렌즈의 일반적 기하학적 구조와 관련되는 데이터, 예를 들어 평균 곡률 반경, 볼록면 데이터 등을 더 포함할 수 있다. 상기 렌즈 데이터(LD)는 렌즈에 존재하는 렌즈의 표면 코팅들 및 그 특성들에 대한 데이터; 렌즈에 존재하는 홀로그램 미러 및 그 특성들와 관련되는 데이터; 또는 렌즈에 존재하는 전기 변색 재료들 및 그 특성들과 관련되는 데이터를 포함할 수도 있다.
“착용자 눈 데이터” 또는 “눈 데이터”(OD)가 관련 분야에 알려져 있다. 착용자 눈 데이터는 착용자 처방 데이터(PD), 착용자 눈 감도 데이터(SD) 및 착용자 눈 생물 계측 데이터(BD), 그리고 일반적으로 예를 들어, 색수차들, 눈 렌즈의 결여(무수정체증) 등과 관련되는 데이터를 포함하는 임의의 착용자 시력 결함과 관련되는 데이터를 포함한다.
“처방 데이터”(PD)가 관련 분야에 알려져 있다. 처방 데이터는 착용자에 대해 획득되고 각각의 눈에 대해 각각의 눈의 굴절 이상 및/또는 노안을 교정하는데 적절한 처방된 원시 평균 굴절력 PFV, 및/또는 처방된 난시값 CYLFV 및/또는 처방된 난시 축 AXEFV 및/또는 처방된 가법 A을 나타내는 하나 이상의 데이터를 지칭한다. 평균 굴절력 PFV은 처방된 난시값 CYLFV의 절반값을 처방된 구체값 SPHFV에 합함으로써 얻어진다: PFV = SPHFV + CYLFV/2. 그 다음, 근접(근거리) 시력에 대해 각각의 눈에 대한 평균 굴절력은 처방된 가법 A을 동일한 눈에 대해 처방된 원시 평균 굴절력 PFV에 합함으로써 얻어진다: PNV = PFV + A. 누진 렌즈들에 대한 처방의 경우에, 처방 데이터는 SPHFV, CYLFV 및 A에 대한 각각의 눈값에 대해 나타내는 착용자 데이터를 포함한다. 바람직한 실시예들에서, 착용자 처방 데이터(PD)는 난시 모듈, 난시 축, 배율, 프리즘 및 가법, 및 보다 일반적으로 임의의 주어진 시력 결함의 교정을 나타내는 임의의 데이터로부터 선택된다. 그러한 결함은 부분적 망막 분리, 망막 또는 홍채 또는 각막 기형에 기인할 수 있다.
“착용자 눈 감도 데이터”(SD)가 관련 분야에 알려져 있다. 착용자 눈 감도 데이터는 (하나 이상의 파장 또는 스펙트럼 대역에의) 스펙트럼 감도; 밝기 감도와 같은 일반적 감도, 예를 들어 야외 밝기 감도에 대한 데이터를 포함한다. 그러한 데이터는 착용자에 의한 이미지의 시각화에 대한 대조를 최적화하는데 중요하다.
“착용자 눈 생물 계측 데이터” 또는 “생물 계측 데이터”(BD)가 관련 분야에 알려져 있다. 생물 계측 데이터는 착용자의 형태학과 관련되는 데이터를 포함하고, 통상적으로 단안의 동공 거리, 동공 사이 거리, 눈의 축 길이, 눈의 회전의 중심의 위치, 근점, 원점 등 중 하나 이상을 포함한다.
“착용자 데이터베이스”(WEAR DB)는 착용자 시각화 파라미터 데이터(VPD)를 저장하고 검색하는데 적절한(저장하고 검색하도록 배열되는, 구성되는) 메모리를 포함하는 데이터베이스이다. 데이터베이스들 및 메모리들이 관련 분야에 알려져 있다. 시각화 파라미터 데이터의 검색은 시각화 파라미터 식별자들(VP ID)과 같은 전용 포인터들의 사용을 통해 달성될 수 있다. 착용자 데이터베이스(WEAR DB)의 일 예의 구성이 도 9에 도시된다. 도 9에서, 식별자들(WEAR ID)은 시각화 파라미터 식별자들(VP ID)의 역할을 할 수 있다. 각각의 착용자 식별자(WEAR ID 1, 2, ... n)는 착용자의 우측 눈(RE) 및 좌측 눈(LE) 각각에 대한 배율(P), 난시(ASTI), 가법(ADD) 등으로 여기서 예시되는 다양한 처방 데이터(PD)의 검색을 가능하게 한다.
“광원들”(LIGHT SOURC)이 관련 분야에 알려져 있다. 본 발명에 따르면, 광원(LIGHT SOURC)은 착용자에 의한 시각화를 위해 이미지를 표시하는데 적절한(표시하도록 배열되는, 구성되는) 광 빔을 방사할 수 있는 임의의 광원이다. 홀로그램 이미지들의 디스플레이에 대하여, 광 빔은 홀로그램에 대한 참조 빔을 포함한다. 이미지는 상기 광원(LIGHT SOURC)에 의한 상기 HMD 디바이스의 조명 시에 변경된 컴퓨터 생성 이미지 데이터(예를 들어, 변경된 컴퓨터 생성 홀로그램 이미지 데이터)로부터 표시될 수 있다. 광원(LIGHT SOURC)은 (공간적으로 및 스펙트럼으로) 적어도 부분적으로 간섭성이거나, 바람직하게는 반간섭성이거나 완전히 간섭성이다. 광의 간섭성은 일반적으로 공진 공동 내에 능동 매질의 유도 방사에 기인한다. 간섭성은 유도 방사에 사용되는 일부 매질의 자연 방사로 인해 부분적으로만 발생할 수 있다. 간섭성 소스들의 예들은 레이저 및 좁은 스펙트럼 레이저 다이오드를 포함한다. 부분적으로 간섭성 소스들의 예들은 일정 레이저 다이오드, 변조된 레이저 다이오드, S-LED, 일부 LED를 포함한다. 추가 예들이 EP 0 421 460 B1에 설명된다. 바람직하게는 본 발명에 따르면, 광원(LIGHT SOURC)은 완전한 간섭성에 기인하여 스페클 효과들을 억제하도록 거의 완전히 간섭성(반-간섭성)일 수 있다.
본 발명에 따르면, 광원(LIGHT SOURC)은 단색이거나 다색 예를 들어, 3색일 수 있다. 단색의 사용의 경우, 이미지 디스플레이를 위해 방사되는 광 빔이 녹색 광(대략 500 내지 560 ㎚의 파장들)을 포함하는 것이 바람직하다. 녹색 광은 사람 망막이 이러한 범위의 파장들에 더 민감하므로, 더 낮은 에너지(예를 들어 1 ㎽ 미만)가 필요하다는 점에서 유리하다. 대략 520 내지 550 ㎚로의 방사를 갖는 단색의 광원들의 예들은 클래스(class) 2 레이저, 532 ㎚의 레이저, (예를 들어, Osram 또는 Nichia의) 520 ㎚의 레이저 다이오드, 대략 550 ㎚로 방사하는 LED 등을 포함한다. 바람직하게는, 단색원의 전력은 10 ㎽ 미만이다. 다른 적절한 단색의 광원들은 적색: 615 내지 645 ㎚; 녹색: 520 내지 550 ㎚; 청색: 435 내지 465 ㎚를 포함한다. 다색의 사용의 경우, 이미지화에 사용되는 표준들(적색: 615 내지 645 ㎚; 녹색: 520 내지 550 ㎚; 청색: 435 내지 465 ㎚)에 근접한 파장들(적색, 녹색, 청색)을 사용하는 것이 바람직하다. 3개의 별개의 소스(적색, 녹색, 청색)가 사용될 때, 상기 소스들 각각은 바람직하게는 1 ㎽ 미만의 전력을 갖는다. 다색의 광원들의 예들은 레이저, 레이저 다이오드, LED 또는 S-LED를 포함한다. 바람직하게는 적어도 3개, 바람직하게는 4개 또는 5개의 상이한 방사 파장이 색채 품질을 개선하기 위해 조합으로 사용될 수 있다.
바람직한 실시예들에서, 일정 외부 광원들(자연광, 착용자 환경에서의 다른 LED들...)에 기인하는 노이즈를 피하기 위해, 본 발명의 광원(LIGHT SOURC)은 동기 검출과 마찬가지로 디바이스와 관련 있는 특정 주파수와 동기화될 수 있다. 상기 주파수는 이미지 변조를 가시적으로 하는 것을 피하기 위해 바람직하게는 점멸 주파수보다 훨씬 더 높다. 그러한 동기화는 그 때 광원(LIGHT SOURC)과 디바이스(HMD)에 의해 표시되는 이미지 사이에서 필요하다. 일부 실시예들에서, 따라서 2개의 동기화 단계: 기생 광원들과의 원하지 않는 상호 작용을 피하는 조명 광원(LIGHT SOURC)의 식별, 및 옳은 색상으로 옳은 이미지를 표시하기 위한 변조가 있다.
조명은 적절한(배열된, 구성된) 광 빔이 원하는 디스플레이를 야기하도록 디바이스(HMD) (및 그것의 SLM)을 조명할 수 있는 한, 지향성일 필요가 없다. 본 발명에 따르면, 상기 광원(LIGHT SOURC)은 조명 터미널(LIGHT TERM) 상에 제공될 수 있고/있거나 상기 HMD 디바이스 상에 내장될 수 있다. 일 실시예에서, 광원(LIGHT SOURC)은 원격 조명 터미널(LIGHT TERM) 즉, HMD와 별개의 터미널 상에 제공된다. 상기 조명 터미널(LIGHT TERM)은 네트워크(NETW)를 통하여 서버(SERV)에 연결되거나 연결되지 않을 수 있다. 조명 터미널(LIGHT TERM) 상에 제공될 때, 광원(LIGHT SOURC)은 분기할 수 있다. 광원(LIGHT SOURC)에 의한 광 빔의 방사는 사람들에게 디바이스(HMD)가 제공되는지 여부와 관계없이, 조명 터미널(LIGHT TERM)의 부근에서 사람들의 시각 환경을 방해하지 않는다. 게다가, 분기하는, 낮은 전력(대략 100 ㎽ 미만) 광원(LIGHT SOURC)의 사용은 HMD 착용자 및 HMD 비착용자가 레이저의 사용에 의해 위태롭게 되지 않으므로, 눈 안전성 측면에서 유리하다.
본 발명에 따르면, 상기 광원(LIGHT SOURC)이 또한 데이터를 송신하는데 적절한(송신하도록 배열되는, 구성되는) 것이 바람직하다. 바람직한 실시예는 조명에 의한 이미지의 디스플레이를 야기하고 데이터를 송신하는 것 둘 다에 적절한(둘 다 이도록 배열되는, 구성되는) 광원(LIGHT SOURC)을 포함한다. 데이터를 송신할 때, 광원(LIGHT SOURC)은 예를 들어, Li-Fi 또는 FSO 통신에 의해 (가시의) 광 통신을 통하여 상기 데이터를 방사할 수 있다. 상기 데이터는 컴퓨터 생성 이미지 데이터(변경되거나 변경되지 않은 ID 또는 MID), 컴퓨터 생성 홀로그램 이미지 데이터(변경되거나 변경되지 않은 MHD 또는 HD) 또는 PD와 같은 VPD일 수 있다. 데이터는 예를 들어, 특히, 75 ㎐ 이상 또는 80 ㎐ 이상의 주파수로의 점멸 주파수보다 더 높은 변조로 순차적으로 방사될 수 있다. 그러한 주파수들은 사람 눈에 의해 감지되지 않고 이미지 디스플레이를 위한 광 빔은 ‘실생활’에서 시야를 방해하지 않는다.
“터미널들”(TERM)이 관련 분야에 알려져 있다. 본 발명에 따르면, 터미널들(TERM)은 조명 터미널들(LIGHT TERM) 및 통신 터미널들(COM TERM)을 포함한다. 터미널(TERM)은 동시에 통신 및 조명 터미널일 수 있다. 이는 유리하게는 본 발명에 따라, 광원(LIGHT SOURC)이 또한 데이터를 HMD로 송신하는데 적절한(송신하도록 배열되는, 구성되는) 경우일 것이다. 터미널들은 고정된 지리학적 좌표들 또는 고정된 GPS 좌표들을 갖는 터미널, 및 고정되지 않은 지리학적 좌표들 또는 고정되지 않은 GPS 좌표들을 갖는 터미널들을 포함한다. 고정된 지리학적 또는 GPS 좌표들을 갖는 터미널들은 기차역, 전철역, 박물관, 공항, 교통 신호등 등에 위치되는 터미널들을 포함한다. 고정되지 않은 GPS를 갖는 터미널들은 스마트폰, 태블릿, 차량에 적재된 박스, TV 셋톱 박스, 인터넷 셋톱 박스, 컴퓨터 등을 포함한다. 일부 실시예들에서, 터미널은 스마트폰 이외이고/이거나 태블릿 이외이다. 터미널은 휴대용이거나 휴대용이 아닐 수 있다. 터미널은 독립형이거나 네트워크에 연결될 수 있다.
본 발명은 머리 장착 디바이스에 의한 이미지들의 맞춤형 디스플레이를 위한 방법들 및 시스템들(터미널들, 디바이스들)을 제공한다.
본 발명의 방법들
일 양태에서, 본 발명은 착용자에 의해 착용되는 머리 장착 컴퓨터 생성 이미지 표시 디바이스(HMD)로의 디스플레이를 위한 컴퓨터 생성 이미지 데이터의 처리에 대한 컴퓨터 구현 방법에 관한 것이다. 방법은:
(i) - 착용자 처방 데이터(PD), 착용자 눈 감도 데이터(SD) 및 착용자 눈 생물 계측 데이터(BD)를 포함하는 착용자 눈 데이터(OD); 및
- 프레임 데이터(FD) 및 렌즈 데이터(LD)를 포함하는 머리 장착 디바이스 데이터(HMDD)로부터 선택되는 시각화 파라미터 데이터(VPD)를 제공하는 단계,
(ii) 컴퓨터 생성 이미지 데이터(ID)를 제공하는 단계,
(iii) 단계(i)의 시각화 파라미터 데이터(VPD)를 고려함으로써 단계(ii)의 컴퓨터 생성 이미지 데이터(ID)로부터 변경된 컴퓨터 생성 이미지 데이터(MID)를 계산하는 단계, 및
(iv) 디스플레이를 위해 단계(iii)의 변경된 컴퓨터 생성 이미지 데이터(MID)를 상기 디바이스(HMD)로 제공하는 단계를 포함한다.
시각화 파라미터 데이터(VPD)를 제공하는 단계(i)는 상기 VPD 데이터를 송신하는 단계일 수 있다. 예를 들어, 송신은 HMD 상의 제어기로의 송신일 수 있다. 송신은 무선 통신 또는 플래시 드라이브(USB 키)를 통한 입력에 의한 것일 수 있다. 단계(i)는 착용자의 시계 내에서 원하는 초점을 얻거나 이미지의 위치를 변경하도록 시각화 파라미터들(VP)을 조정하기 위해 HMD 상의 설정을 수작업으로 제공함으로써 예를 들어, HMD 상의 지동륜을 돌림으로써 수행될 수도 있다. 그러한 경우에, VPD 데이터는 아날로그 기반 상에 제공된다.
계산하는 단계(iii)는 유리하게는 시각화 파라미터 데이터(VPD)를 고려한다. 이는 착용자 눈 데이터(OD) 및/또는 디바이스 데이터(HMDD)에 넣는 이미지 디스플레이의 맞춤화를 제공한다. 특히, 맞춤화는 광 시스템에 의해 생성되는 수차들: HMD에 의해, 그리고 특히 HMD 상에 위치되는 SLM이 착용자에 대한 디바이스의 시각 축에 있지 않을 수 있다는(SLM의 중심을 벗어난 위치) 사실에 의해 생성되는 광 수차들을 제한하거나 적어도 부분적으로 교정하는 것을 가능하게 한다. 이에 상응하여, 교정되지 않은(변경되지 않은) 이미지의 디스플레이는 시각적 편안함 및 이미지 회복에 심하게 영향을 주는 이미지 왜곡들을 야기할 것이다.
단계(iii)는 또한 착용자의 굴절 이상/노안에 맞춤화되는 이미지 디스플레이를 제공하도록 착용자 처방 데이터(PD)를 고려한다. 예를 들어, 주어진 처방 데이터(PD)가 주어진 근시 착용자의 경우, 본 발명에 따라 표시되는 이미지는 상기 착용자에 대해 완전히 선명할 것이지만, 상이한 처방 데이터를 갖는 다른 착용자의 경우는 선명하지 않을 것이다.
단계(iii)는 컴퓨터 생성 이미지 데이터가 그에 부응해서 변경되는 계산을 포함한다. SLM을 갖는 HMD의 경우, 등위상면의 면에서, 이는 (투과 또는 반사에 의해) SLM에 의해 방사되는 광 등위상면이 VPD 데이터를 고려하도록 변경된다는 것을 의미한다. 굴절 이상 착용자의 처방 렌즈들을 통해 알 수 있는 바와 같이 이미지를 코딩하는 것이 가능하다. 그러한 계산들은 푸리에 공간에서 수행하는 것: 푸리에 이미지 홀로그램 및 등위상면 홀로그램의 계산이 실제로 더 용이하다. 등위상면 홀로그램은 관련 분야에 알려진 계산 기법들 예를 들어, 저니케(Zernike) 다항식들로의 분석적 표면으로 설명될 수 있다.
단계(iii)는 예를 들어, 이미지의 동적 시각화를 위해 단일(1회한의) 계산을 포함할 수 있거나, ‘동적이거나’, 지속적이거나, 실시간의 계산들을 포함할 수 있다. 게다가, 단계(iii)는 온/오프 기반 상에서 수행될 수 있다. 예를 들어, 근시 착용자의 경우, 단계(iii)는 원시 이미지 디스플레이를 위해 수행될 수 있는데 반해, 단계(iii)는 근시 이미지 디스플레이에 필요하지 않을 수 있다.
바람직한 실시예들에서, 시각화 파라미터 데이터(VPD)는 착용자 처방 데이터(PD)를 포함한다. 상기 처방 데이터(PD)는 바람직하게는 난시 모듈, 난시 축, 배율, 프리즘 및 가법으로부터 선택된다.
바람직한 실시예들에서, 상기 컴퓨터 생성 이미지는 홀로그램 이미지이다. 따라서, HMD 디바이스는 머리 장착 컴퓨터 생성 홀로그램 이미지 표시 디바이스(HMD)이다. 상응하여 본 발명의 방법에서, 상기 컴퓨터 생성 이미지 데이터(ID)는 컴퓨터 생성 홀로그램 이미지 데이터(HD)이며, 상기 변경된 컴퓨터 생성 이미지 데이터(MID)는 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)이다.
다른 양태에서, 본 발명은 착용자에 의해 착용되는 머리 장착 컴퓨터 생성 홀로그램 이미지 표시 디바이스(HMD)로 컴퓨터 생성 홀로그램 이미지들의 디스플레이를 위한 컴퓨터 구현 방법을 제공한다. 상기 방법은 본원에 설명하는 바와 같은 단계들(i), (ii), (iii) 및 (iv)을 포함하고 (v) 상기 디바이스(HMD)의 조명에 의해 단계(iii)의 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)로부터 홀로그램 이미지를 표시하는데 적절한(표시하도록 배열되는, 구성되는) 광 빔을 적어도 하나의 광원(LIGHT SOURC)에 의해 방사하는 단계를 더 포함할 수 있다. SLM을 갖는 HMD의 경우, 따라서, 단계(v)는 광원(LIGHT SOURC)으로 SLM을 조명하는 단계를 포함한다.
일부 실시예들에서, 상기 광원(LIGHT SOURC)은 원격 조명 터미널(LIGHT TERM) 상에 제공된다. 다른 실시예들에서, 상기 광원(LIGHT SOURC)은 상기 디바이스(HMD) 상에 내장된다. 일부 실시예들에서, 광원(LIGHT SOURC)은 원격 조명 터미널(LIGHT TERM) 상에 제공되고 광원(LIGHT SOURC)은 상기 디바이스(HMD) 상에 내장된다.
유리하게는 본 발명에 따르면, 광원(LIGHT SOURC)에 외부 터미널(TERM)(HMD와는 별개의 원격 터미널)이 제공될 때, 광원은 적어도 순간적으로, 일정한 지리학적 또는 GPS 좌표들을 갖는다는 점에서‘고정된다’. 따라서, 이미지를 ‘설정하는’것이 가능하고, 이미지는 광원(LIGHT SOURC) 예를 들어, 박물관에서의 주어진 그림 근처에 위치되는 터미널(TERM)에 ‘부착되게’남는다. 이는 착용자가 머리를 돌리더라도, 이미지를 그림에‘부착시키는’눈 트래커(tracker) 및 추가 계산들에 대한 어떤 필요 조건도 없다는 점에서 유리하다.
본 발명에 따르면, 광원(LIGHT SOURC)은 다중 모드로 광을 방사할 수 있다. 다중 모드는 공간적이거나 시간적일 수 있다. 다중화는 복수의 디바이스(HMD)에 의한 디스플레이를 위해 광을 방사하는 것을 포함할 수도 있다. 박물관 예에서, 단일 광원(LIGHT SOURC)은 수명의 방문객의 편의를 위해 동시에 방사할 수 있다.
본 발명에 따르면, 상기 광원(LIGHT SOURC)이 원격 조명 터미널(LIGHT TERM) 상에 제공되는 경우, 상기 광원(LIGHT SOURC)은 유리하게는 상기 광 터미널(LIGHT TERM)에서 상기 디바이스(HMD)로 이미지 데이터를 송신하는데 적절할(송신하도록 배열될, 구성될) 수도 있다. 따라서, 광원(LIGHT SOURC)은 디스플레이를 위해 컴퓨터 생성 홀로그램 이미지 (변경되거나 변경되지 않은) 데이터를 제공하고, 홀로그램 이미지 디스플레이를 야기하도록 디바이스(HMD)를 조명하는 이중 역할을 한다. 이러한 이중 역할은 HMD 디바이스들이 HMD 디바이스들 자체의 광원을 포함하지 않더라도, 이러한 이중 역할이 HMD 디바이스들 상에 이미지 디스플레이를 제공한다는 점에서 특히 유리하다. 게다가, 이는 이미지 데이터를 포함하는 데이터를 송신할 수 있고, 유리하게는 즉시 그 후에, 적절한(배열된, 구성된) 광 빔으로 조명을 제공함으로써 이미지의 디스플레이를 야기할 수 있는 통신 터미널(COM TERM)의 이중 역할에 의존한다.
따라서, (변경되거나 변경되지 않은) 상기 홀로그램 이미지 데이터를 제공하는 단계는 예를 들어, Li-Fi 또는 FSO 통신에 의한 원격 광 터미널(LIGHT TERM) 상의 광원(LIGHT SOURC) 사이의 광 통신에 의해 상기 데이터를 송신하는 단계를 포함한다. 그러한 실시예들에서, 단계(ii)는 상기 광원(LIGHT SOURC)에서 디바이스(HMD)로 상기 컴퓨터 생성 홀로그램 이미지 데이터(HD)를 송신하는 단계를 포함할 수 있거나 단계(iv)는 상기 광원(LIGHT SOURC)에서 상기 디바이스(HMD)로 상기 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)를 송신하는 단계를 포함할 수 있다.
본 발명의 일 양태에서, 단계(i)의 시각화 파라미터 데이터(VPD)는 디바이스(HMD) 상의 메모리에 저장될 수 있다. 그러한 경우에, 변경된 데이터를 계산하는 단계(iii)는 디바이스(HMD) 상에 위치되는 프로세서에 의해 (‘국부’계산), 또는 원격 프로세서에 의해(‘원격’ 계산) 수행될 수 있다. 상기 원격 프로세서는 원격 터미널(TERM) 예를 들어, 원격 조명 터미널(LIGHT TERM) 또는 원격 통신 터미널(COM TERM) 상에 위치될 수 있다. 상기 터미널(TERM)(독립형 터미널 또는 네트워크 연결 터미널)은 네트워크(NETW)를 통하여 서버(SERV)에 연결될 수 있거나 연결되지 않을 수 있다. 상기 원격 프로세서는 서버(SERV)에 위치될 수도 있다. 따라서 본 발명에 따르면, 단계(i)는: (i-a) 적어도 하나의 통신 터미널(COM TERM)에 의해 상기 착용자의 존재를 검출하는 단계; 및 (i-b) 단계(i-a)에서의 검출된 존재에 응하여, 상기 디바이스(HMD)에서 상기 통신 터미널(COM TERM)로 상기 시각화 파라미터 데이터(VPD)를 송신하는 단계를 포함할 수 있고, 단계(iv)는 상기 통신 터미널(COM TERM)에서 상기 디바이스(HMD)로 변경된 컴퓨터 생성 이미지 데이터(MID)를 송신하는 단계를 포함할 수 있다. 도 1 내지 도 4는 시각화 파라미터 데이터(VPD)가 디바이스(HMD) 상의 메모리에 저장되는 본 발명의 실시예들을 도시한다:
- 도 1 및 도 2는 컴퓨터 생성 이미지 데이터(ID 또는 HD)가 통신 터미널(COM TERM) 상에 제공되는 실시예들을 도시한다.
- 도 3 및 도 4는 컴퓨터 생성 이미지 데이터(ID 또는 HD)가 통신 데이터베이스(DB)에 연결되는 통신 서버(COM SERV) 상에 제공되는 실시예들을 도시한다.
화살표들은 송신되는 각각의 데이터의 주석을 갖는 데이터를 제공하는 단계들을 나타내고, 별표들(*)은 계산 단계 즉, 단계(iii)가 터미널(TERM) 또는 디바이스(HMD) 상에서 프로세서에 의해 수행될 수 있음을 나타낸다.
본 발명의 다른 양태에서, 단계(i)의 시각화 파라미터 데이터(VPD)는 시각화 파라미터 식별자(VP ID)와 연관지어 통신 네트워크(COM NETW)를 통하여 상기 통신 터미널(COM TERM)에 연결되는 통신 서버(COM SERV) 상의 착용자 데이터베이스(WEAR DB)에 저장되는 메모리에 저장될 수 있다. 이러한 식별자(VP ID)는 상기 시각화 파라미터 데이터(VPD)의 검색을 가능하게 하는 식별자로서 한정될 수 있다. 예를 들어, 이는 OD 또는 HMDD 데이터의 검색을 가능하게 한다. 이러한 실시예는 시각화 파라미터 데이터(VPD)의 업데이트들을 가능하게 한다는 점에서 유리하다. 예를 들어, 주어진 착용자의 경우, 처방 데이터는 시간이 지남에 따라 발전될 수 있고/있거나 착용자는 디바이스(HMD)를 변경할 수 있다. 본 발명의 방법에서 서버의 사용은 디바이스(HMD)에 의한 이미지 디스플레이들을 충실히 맞춤화하는 업데이트 특징들을 제공한다. 시각화 파라미터 식별자(VP ID)는 개개의 것 예를 들어, 주어진 착용자를 식별하는 고유 식별자일 수 있다. 시각화 파라미터 식별자(VP ID)는 예를 들어, 동일한 처방 데이터(PD)를 갖는 착용자의 그룹 예를 들어, 동일한 근시 교정을 갖는 착용자들, 또는 동일한 모델의 디바이스(HMD)를 갖는 착용자의 그룹을 식별하는 포괄적 식별자(그룹 식별자)일 수도 있다. 시각화 파라미터 식별자(VP ID)는 HMD 상에 위치되는 QR 코드 또는 RFID 코드와 같은 코드일 수 있다. 그것은 HMD (및 착용자)에 특정한 변조 주파수일 수도 있다. 그것은 광 시그니처일 수 있다.
시각화 파라미터 데이터(VPD)가 서버(SERV) 상의 데이터베이스(DB)에 저장되는 경우, 시각화 파라미터 데이터(VPD)의 검색은 시각화 파라미터 데이터(VPD)를 데이터베이스(DB)에서 터미널(TERM)로, 그리고 그 다음 선택적으로 상기 터미널(TERM)에서 디바이스(HMD)로 송신함으로써 수행될 수 있다. 따라서, 단계(i)는 (i-a) 상기 통신 터미널(COM TERM)에 의해 상기 착용자 존재를 검출하는 단계, 및 (i-b) 단계(i-a)에서의 검출된 존재에 응하여, 상기 통신 서버(COM SERV)에서 상기 통신 터미널(COM TERM)로 상기 시각화 파라미터 데이터(VPD)를 송신하는 단계를 포함할 수 있다. 단계(i)는 그 다음 (i-c) 상기 통신 터미널(COM TERM)에서 상기 디바이스(HMD)로 시각화 파라미터 데이터(VPD)를 송신하는 추가 단계를 선택적으로 포함할 수 있다. 시각화 파라미터 데이터(VPD)의 업데이트는 눈 전문점에서의 컴퓨터를 통하여, 또는 컴퓨터, 태블릿 또는 스마트폰을 통해 착용자에 의해 수행될 수 있다.
시각화 파라미터 데이터(VPD)가 서버(SERV) 상의 데이터베이스(DB)에 저장되는 경우, 변경된 이미지 데이터(MID)를 계산하는 단계(iii)는 터미널(TERM) 상에 위치되는 프로세서에 의해 또는 서버(SERV)에 위치되는 프로세서에 의해 수행될 수 있다. 따라서, 단계(iii)는 상기 통신 터미널(COM TERM)에서 상기 디바이스(HMD)로 변경된 컴퓨터 생성 이미지 데이터(MID)를 송신하는 단계, 및 선택적으로 상기 통신 서버(COM SERV)에서 상기 통신 터미널(COM TERM)로 변경된 컴퓨터 생성 이미지 데이터(MID)를 송신하는 이전 단계를 포함할 수 있다.
도 5 내지 도 8은 시각화 파라미터 데이터(VPD)가 데이터베이스에 저장되는 본 발명의 실시예들을 도시한다:
- 도 5는 시각화 파라미터 데이터(VPD)가 통신 데이터베이스(DB)로부터 검색되고 통신 터미널(COM TERM)을 통하여 디바이스(HMD)로 송신되는 일 실시예를 도시한다.
- 도 6은 컴퓨터 생성 이미지 데이터(ID, HD)가 통신 터미널(COM TERM) 상에 제공되는 일 실시예를 도시한다.
- 도 7 및 도 8은 컴퓨터 생성 이미지 데이터(ID, HD)가 통신 데이터베이스(DB)에 연결되는 통신 서버(SERV) 상에 제공되는 실시예들을 도시한다.
화살표들은 데이터를 제공하는 단계들을 나타내고, 별표들(*)은 계산 단계 즉, 단계(iii)가 터미널(TERM), 서버(SERV) 또는 디바이스(HMD) 상에서 프로세서에 의해 수행될 수 있음을 나타낸다.
본 발명에 따르면, 이미지 데이터가 서버(SERV) 상의 이미지 데이터베이스(IM DB) 에 저장되는 경우, 일정 이미지들에 대한 액세스 권한들을 한정하는 것이 가능하다. 따라서, 상기 컴퓨터 생성 이미지 데이터(ID) 또는 상기 변경된 컴퓨터 생성 이미지 데이터(MID)가 이미지 데이터베이스(IM DB)에 저장되는 경우, 본 발명의 방법은 상기 데이터베이스에서 착용자 식별자(WEAR ID)와 상기 착용자 사이의 연관을 미리 등록하는 예비 단계를 포함할 수 있고, 단계(ii)의 컴퓨터 생성 이미지 데이터(ID) 및/또는 단계(iii)의 변경된 컴퓨터 생성 이미지 데이터(MID)는 액세스 권한들에 따라서 선택적으로 상기 착용자 식별자(WEAR ID)에 따라 결정된다(한정된다). 따라서, 착용자 식별자는 착용자 프로파일의 한정을 가능하게 한다. 착용자 식별자(WEAR ID)는 시각화 파라미터 식별자(VP ID)와 동일하거나 상이할 수 있다. 착용자 식별자는 디바이스(HMD) 상에 위치되는 코드 예를 들어, QR 코드 또는 RFID 코드일 수 있다. 따라서, 이미지 데이터베이스(IM DB)와 관련지어 하나 이상의 레벨의 액세스 권한들을 한정하는 것이 가능하다.
본 발명의 시스템들 및 디바이스들
다른 양태에서, 본 발명은 조명 터미널들(LIGHT TERM) 및 디바이스들(HMD)을 포함하는 시스템들을 제공한다. 상기 시스템들은 본 발명의 방법을 수행하는데 적절하다(수행하도록 배열된다, 구성된다).
따라서, 본 발명은 조명 터미널(LIGHT TERM)에 관한 것이다. 이러한 터미널은 특히 컴퓨터 생성 이미지가 홀로그램 이미지인 본 발명의 방법의 구현에 적절하다(구현을 위해 배열된다, 구성된다).
본 발명의 광 터미널(LIGHT TERM)은:
- 조명에 의해 홀로그램 이미지를 표시하는데 적절한(표시하도록 배열되는, 구성되는) 광원(LIGHT SOURC),
- 선택적으로, 머리 장착 컴퓨터 생성 홀로그램 이미지 표시 디바이스(HMD)가 구비되는 착용자의 존재를 검출하는데 적절한(검출하도록 배열되는, 구성되는) 센서(SENS), 및
- 선택적으로, 상기 터미널로부터 및/또는 상기 터미널로 시각화 파라미터 데이터(VPD), 컴퓨터 생성 홀로그램 이미지 데이터(HD) 및 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)로부터 선택되는 데이터를 송신하는데 적절한(송신하도록 배열되는, 구성되는) 통신 인터페이스(INT)를 포함한다.
통신 인터페이스(INT)는 USB 포트 및/또는 블루투스, Wi-Fi, 4G, 3G; 광(Li-Fi 또는 FSO) 및/또는 IR 통신과 같은 무선주파수를 포함하는 무선 통신을 위한 임의의 다른 인터페이스; 및/또는 (데이터를 수신하는) 포토다이오드 및/또는 방사체 예를 들어, (데이터를 방사하는) 가시광 또는 근적외선 광원을 포함할 수 있다.
게다가, 광 터미널(LIGHT TERM)은:
- 배터리 또는 임의의 다른 전력 수단,
- GPS 좌표들을 결정하는 GPS,
- 하나의 메모리 또는 복수의 메모리,
- 디지털 카메라,
- 다른 센서들,
- (변경되거나 변경되지 않은) 홀로그램 이미지 데이터를 처리하는데 적절한(처리하도록 배열되는, 구성되는) 제어기(CONT) 중 하나 이상을 포함할 수 있다. 상기 제어기(CONT)는 단계(iii)를 수행하는데 적절하고(수행하도록 배열되고, 구성되고) 프로세서를 포함한다.
바람직한 실시예에서, 본 발명의 조명 터미널(LIGHT TERM)에서, 상기 광원(LIGHT SOURC)은 또한 상기 조명 터미널(LIGHT TERM)로부터 컴퓨터 생성 홀로그램 이미지 데이터(HD) 및/또는 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)를 송신하는데 적절하다(송신하도록 배열된다, 구성된다).
이러한 이중 역할(디스플레이를 위한 조명 및 데이터 송신)은 상기 HMD 디바이스들이 HMD 디바이스들 자체의 광원을 포함하지 않더라도, 이러한 이중 역할이 HMD 디바이스들 상에 이미지 디스플레이를 제공한다는 점에서 특히 유리하다. 게다가, 이는 이미지 데이터를 포함하는 데이터를 송신할 수 있고, 유리하게는 즉시 그 후에, 적절한(배열된, 구성된) 광 빔으로 조명을 제공함으로써 이미지의 디스플레이를 야기할 수 있는 터미널의 이중 역할에 의존한다.
본 발명은 또한 본원에 설명하는 바와 같이 조명 터미널들의 배치된 네트워크와 관련된다. 따라서, 본 발명은 본원에 설명하는 바와 같이 복수의 조명 터미널(LIGHT TERM)을 포함하는 시스템에 관한 것이며, 상기 조명 터미널들(LIGHT TERM) 각각은 조명 네트워크(LIGHT NETW)를 통하여 조명 서버(LIGHT SERV)에 연결된다. 서버들 및 네트워크들이 관련 분야에 알려져 있다. 예를 들어, 통신 목적으로, 복수의 터미널을 네트워크를 통하여 서버와 연결하는 것이 가능하다. 마찬가지로, 터미널들이 조명 터미널들인 경우, 상기 조명 터미널들(LIGHT TERM) 각각은 네트워크(LIGHT NETW)를 통하여 서버(LIGHT SERV)와 통신하도록(연결되도록) 배열될(구성될) 수 있다. 본 발명에 따르면, 조명 터미널은 통신 터미널일 수도 있다. 게다가, 복수의 상기 조명/통신 터미널(TERM)은 네트워크(NETW)를 통하여 서버(SERV)와 통신하도록(연결되도록) 배열될(구성될) 수 있다.
다른 양태에서, 본 발명은 머리 장착 디바이스와 관련된다. 본 발명은:
- 위상 및/또는 진폭 공간 광 변조기(SLM), 및
- 선택적으로, 이미지 조명을 표시하는데 적절한(표시하도록 배열되는, 구성되는) 광원(LIGHT SOURC), 및
- 선택적으로, 상기 디바이스(HMD)로부터 및/또는 상기 디바이스(HMD)로 시각화 파라미터 데이터(VPD), 컴퓨터 생성 이미지 데이터(ID) 및 변경된 컴퓨터 생성 이미지 데이터(MID)로부터 선택되는 데이터를 송신하는데 적절한(송신하도록 배열되는, 구성되는) 통신 인터페이스(?INT)를 포함하는 머리 장착 컴퓨터 생성 이미지 표시 디바이스(HMD)를 제공한다.
이러한 디바이스(HMD)는 본 발명의 방법을 구현하는데 적절하다(구현하도록 배열된다, 구성된다).
바람직한 실시예에서, 상기 디바이스(HMD)는 위상 SLM을 갖는 처방 안경이다.
바람직하게는, 컴퓨터 생성 이미지는 컴퓨터 생성 홀로그램 이미지이다.
SLM은 바람직하게는 위상 SLM 예를 들어, 위상 한정 SLM이고, LCoS; 또는 유리 투과성 액티브 매트릭스 액정으로 만들어질 수 있다. SLM은 착용자 눈 앞에 제공되는 “속이 비치는” SLM일 수도 있으며, 이 경우 홀로그램 미러가 필요 없다. SLM이 착용자 눈 앞이 아닌 다른 곳에 제공될 때, 예를 들어, SLM이 디바이스(HMD)의 측부 상에 또는 착용자 안경 다리 근처에 제공될 때, 그 때 홀로그램 미러가 필요할 수 있다.
본 발명에 따르면, 디바이스(HMD)는:
- 적어도 하나의 렌즈로서, 반사 방지 코팅이 구비되는 렌즈 및 선택적으로 착용자의 측부 상에 또는 착용자의 측부 상의 렌즈 내에 제공되는 홀로그램 미러로서; 바람직하게는 내장된 광원(LIGHT SOURC)이 디바이스(HMD)에 구비될 때, 존재하는 홀로그램 미러,
- 렌즈는 한 쌍의 처방 렌즈의 일부일 수 있는 적어도 하나의 렌즈,
- 배터리,
- GPS,
- 적어도 하나의 메모리,
- 카메라,
- 마이크,
- 센서들 예를 들어, 눈 트래커, 움직임 트래커 또는 햅틱 커맨드 수단을 포함하는 햅틱 수단,
- 이미지 데이터를 처리(디코딩, 복조, 코딩 등)하는데 적절한(처리(디코딩, 복조, 코딩 등)하도록 배열되는, 구성되는) 마이크로제어기(?CONT) 중 하나 이상을 포함할 수 있다. 상기 제어기(CONT)는 단계(iii)를 수행하는데 적절하고(수행하도록 배열되고, 구성되고) 프로세서를 포함할 수 있다.
통신 인터페이스(μINT)는 USB 포트 및/또는 블루투스, Wi-Fi, 4G, 3G와 같은 무선주파수; 광(Li-Fi 또는 FSO) 및/또는 IR 통신을 포함하는 무선 통신을 위한 임의의 다른 인터페이스; 및/또는 (데이터를 수신하는) 포토다이오드 및/또는 방사체 예를 들어, (데이터를 방사하는) 가시광 또는 근적외선 광원을 포함할 수 있다.
디바이스(HMD)는 시각화 파라미터 데이터(VPD), 컴퓨터 생성 이미지 데이터(ID) 및 변경된 컴퓨터 생성 이미지 데이터(MID)로부터 선택되는 데이터를 저장하는데 적절한(저장하도록 배열되는, 구성되는) 메모리를 포함할 수 있다. 디바이스(HMD)의 프로그래밍은 시각화 파라미터 데이터(VPD), 컴퓨터 생성 이미지 데이터(ID) 및 변경된 컴퓨터 생성 이미지 데이터(MID)로부터 선택되는 데이터를 입력하는 것을 포함할 수 있다.
본 발명의 디바이스들(HMD)의 예들이 도 12 내지 도 14에 도시된다. 이러한 예들은 디바이스의 안경 다리(TEMP) 상에 장착되는 광원(LIGHT SOURC)을 포함하는 디바이스들이지만, 상기 광원(LIGHT SOURC)의 존재는 본 발명에 따라 선택적이다.
디바이스(HMD)는 공간 광 변조기(SLM) 및 렌즈(L)를 포함한다.
SLM은 디바이스(HMD)의 안경 다리(TEMP) 상에 위치될 수 있다. SLM은 반사로(도 12) 또는 송신으로(도 13) 기능할 수 있다. 광원(LIGHT SOURC)에 의해 방사되는 광 빔은 렌즈(L)에 이르기 전에, SLM에 의해 각각 반사되거나(도 12) 송신된다(도 13). 본 발명의 디바이스(HMD)가 반사성 SLM을 포함하는 경우, 디바이스(HMD)는 홀로그램 미러를 더 포함한다. 렌즈(L)는 착용자의 눈을 향하는 렌즈(L)의 측부 상에 홀로그램 미러(MIRR)가 구비된다. 렌즈(L)는 또한 반사 방지 코팅이 구비된다. 홀로그램 미러(MIRR)에서 반사된 후에, 광 빔은 착용자 눈으로 향해지므로, 홀로그램 이미지의 시각화를 야기한다. 홀로그램 미러(MIRR)는 중심에서 벗어난다.
홀로그램 미러들이 관련 분야에 알려져 있으며, 광 홀로그래피 요소들의 일부이다. 그것들은 예를 들어, 설정된 주변부들의 회절 격자를 포함할 수 있다. 홀로그램 미러는 중크롬산 젤라틴들의 광중합체들 또는 관련 분야에 알려진 합성 광중합체 또는 표백된 실버 홀로그램 에멀션들로 만들어질 수 있다. 유리하게는, 홀로그램 미러(MIRR)는 렌즈의 기하학적 구조에 영향을 주지 않고 렌즈와 결합될 수 있다. 결과적으로, 렌즈의 광 기능 및 홀로그램 미러의 광 기능은 완전히 상관 제거되고 독립적으로 최적화될 수 있다. 홀로그램 미러는 시스템의 광 수차들 중 일부 또는 모두에 대해 교정하도록 설계될 수 있다(특히, SLM이 도 12 및 도 13에서와 같이 안경 다리(TEMP) 상에 위치되므로, SLM은 중심에서 벗어나며, 이는 착용자에 의해 시각화되는 것으로서 이미지의 광 수차들을 야기한다). 홀로그램 미러는 필드 수차들을 제한하도록 각진 부분씩 제조될 수 있다(감소된 개구부). 그러한 경우에, 미러는 주어진 방향으로의 입사광에 대해서만 원하는 파장(들)의 광을 반사시킨다. 그러한 미러들은 내장된 광원(LIGHT SOURC)이 구비되는 디바이스들(HMD)에 특히 유리하다. 더 큰 개구부를 가진 이미지를 구성하기 위해, 전체 이미지를 세분화하고 빔에 의한 미러의 스캐닝을 진행하는 것이 가능하다.
SLM은 도 14에 도시된 바와 같이 “속이 비치는” 투과성 SLM일 수도 있다. 원격 광원(LIGHT SOURC)은 렌즈(L) 및 SLM을 통해 투과되어 착용자의 눈에 도달하는 빔을 방사한다.
단색의 사용의 경우, 홀로그램 미러는 조명의 그 파장으로 광 기록된다(한정된다). 이러한 파장 이외의 파장의 경우, 미러는 투명하고 따라서 렌즈를 통해 착용자에 의한 시력을 손상시키지 않는다. 3색의 사용(적색, 녹색, 청색)의 경우, 홀로그램 미러는 3개의 파장으로 광 기록되고(한정되고) 홀로그램 이미지는 고려되는 3개의 파장으로 시각화될 수 있다. 홀로그램 미러는 다른 파장들에서 투명하다. 마찬가지로, 3개의 선택된 파장 이외의 파장들의 경우, 미러는 투명하고 따라서 렌즈를 통해 착용자에 의해 시력을 손상시키지 않는다(회절 효율이 0이다). 바람직하게는, 미러는 다양한 조명각(입사광각)에 대해 광 기록된다. 보다 일반적으로, 홀로그램 미러의 설계 및 설정은 당업자에게 통상의 지식이다.
본 발명의 디바이스들(HMD)은 미러가 조명 및 시각화에 사용되는 파장(들)에 특정하므로, 본 발명의 디바이스들(HMD)이 디바이스(HMD)를 착용하는 착용자에 의해 시각화되는 이미지들의 기밀성을 보호한다는 점에서 유리하다.
SLM이 안경/HMD의 안경 다리 상에 제공될 때, SLM은 분명히 중심에서 벗어나고, 따라서 SLM에 의한 홀로그램 이미지의 투영은 시각/광 수차들을 생성하며, 이는 유리하게는 홀로그램 이미지 데이터의 적절한 변경에 의해 적어도 부분적으로 보정될 수 있다. 따라서, SLM은 그에 상응하게 SLM에 의해 방사되는(투과되거나 반사되는) 등위상면을 변경하여, 개선된 시각 경험 및 편안함을 야기한다.
본 발명은 또한 머리 장착 디바이스에서 SLM의 사용과 관련된다. 보다 상세하게는, 본 발명은 처방 안경을 포함하는 안경에서 SLM의 사용과 관련된다. SLM은 위상 및/또는 진폭 공간 광 변조기(SLM), 바람직하게는 위상 또는 위상 한정 SLM 예를 들어, LCoS SLM 또는 유리 투과성 액티브 매트릭스 LC SLM일 수 있다.
본 발명은 이하의 비제한적 실시예들에 의해 예시된다.
실시예들
실시예 1: 지하철 노선의 맵의 디스플레이
근시 착용자에 본 발명의 디바이스(HMD)가 장착된다. 착용자에 처방 데이터(PD)(좌측 및 우측 눈에 대한 배율)를 포함하는 시각화 파라미터 데이터(VPD) 및 상기 디바이스(HMD)에 상응하는 디바이스 데이터(HMDD)가 할당된다. 시각화 파라미터 데이터(VPD)는 상기 디바이스(HMD) 상의 메모리 상에 저장된다.
일 실시예에서, 본 발명의 방법은 도 1에 도시된 바와 같이 이하와 같이 구현될 수 있다. 전철역은 광원(LIGHT SOURC), 메모리 및 프로세서를 포함하는 독립형 터미널(TERM)이 구비된다. 지하철 노선의 맵을 나타내는 컴퓨터 생성 홀로그램 이미지 데이터(HD)가 터미널(TERM)의 메모리에 저장된다. 터미널(TERM)은 디바이스(HMD)를 착용하는 착용자의 존재를 검출한다. 이는 디바이스(HMD)에서 터미널(TERM)로의 시각화 파라미터 데이터(VPD)의 송신을 야기한다. 터미널의 프로세서는 변경된 홀로그램 이미지 데이터(MHD)를 제공하기 위해 계산 단계를 수행하며, 변경된 홀로그램 이미지 데이터(MHD)는 착용자 처방 데이터(PD) 및 디바이스 설계(HMDD)에 적응된다. 상기 변경된 데이터(MHD)는 그 다음 Li-Fi 통신을 이용하여 터미널(TERM)에서 디바이스(HMD)로 송신된다.
다른 실시예에서, 본 발명의 방법은 도 2에 도시된 바와 같이 이하와 같이 구현될 수 있다. 전철역은 광원(LIGHT SOURC), 메모리 및 프로세서를 포함하는 독립형 터미널(TERM)이 구비된다. 지하철 노선의 맵을 나타내는 컴퓨터 생성 홀로그램 이미지 데이터(HD)가 터미널(TERM)의 메모리에 저장된다. 터미널(TERM)은 디바이스(HMD)를 착용하는 착용자의 존재를 검출한다. 이는 Li-Fi에 의한 터미널(TERM)에서 디바이스(HMD)로의 홀로그램 이미지 데이터(HD)의 송신을 야기한다. 디바이스(HMD)는 변경된 홀로그램 이미지 데이터(MHD)를 제공하기 위해 계산 단계를 수행하는 프로세서가 구비되며, 변경된 홀로그램 이미지 데이터(MHD)는 착용자 처방 데이터(PD) 및 디바이스 설계(HMDD)에 적응된다.
실시예들 둘 다에서, 터미널(TERM)의 광원(LIGHT SOURC)은 지하철 노선 맵의 변경된 홀로그램 이미지의 디스플레이를 야기하는데 적절한(야기하도록 배열되는, 구성되는) 광 빔을 방사하여, 따라서 착용자가 지하철에서의 배향을 알아내는 것을 가능하게 한다.
착용자는 디스플레이가 착용자 처방 데이터에 따라 홀로그램 이미지의 교정을 제공하므로, 개인화된 특징을 갖는 증강 현실을 경험한다.
실시예 2: 날짜/시간의 디스플레이
난시 착용자에 본 발명의 디바이스(HMD)가 장착된다. 착용자는 처방 데이터(PD)(좌측 및 우측 눈에 대한 난시 계수 및 축)를 포함하는 시각화 파라미터 데이터(VPD) 및 상기 디바이스에 상응하는 디바이스 데이터(HMDD)를 갖는다. 디바이스(HMD)는 클럭, 메모리 및 내장된 광원(LIGHT SOURC)을 포함한다. 클럭은 날짜 및 시간을 제공하는데 적절하다. 메모리는 착용자의 난시 처방 데이터(PD) 및 디바이스 데이터(HMDD)를 고려한 변경된 홀로그램 이미지 데이터를 포함한다. 홀로그램 이미지 데이터는 숫자들 0, 1, 2, ..., 9 및 슬래시, 대시 등과 같은 다른 영숫자 문자들을 포함한다. 착용자로부터의 햅틱 커맨드 및 광원(LIGHT SOURC)에 의한 조명을 뒤따라, HMD는 이하의 형식으로 착용자 시계의 상부 좌측 코너에서 날짜 및 시간의 홀로그램 이미지의 디스플레이를 야기한다:
dd/mm/yy (일/월/년)
hh:mm (시:분)
HMD는 이하와 같은 폰트들의 크기, (예를 들어, 시계의 우측 하부 코너 상의) 디스플레이의 위치, 및
hh:mm (am 또는 pm) (시:분)과 같은 다른 디스플레이 형식들의 맞춤화를 가능하게 한다.
대안적으로, 홀로그램 이미지 데이터는 손이 갖는 실제 클럭의 이미지에 대한 것들일 수 있다. 시간 및/또는 날짜의 디스플레이는 유리하게는 착용자에게 맞춤화되고, 개인화된 컴퓨터 생성 홀로그램 이미지들을 사용하여 시간의 처방-순응 디스플레이를 제공한다. 이러한 예는 어떠한 터미널도 본 발명의 방법을 수행하는데 필요하지 않은 추가 실시예들에 일반화될 수 있다.
실시예 3: 날의 시간표의 디스플레이
노안 착용자에 본 발명의 디바이스(HMD)가 장착된다. 착용자는 처방 데이터(PD)(좌측 및 우측 눈)를 포함하는 시각화 파라미터 데이터(VPD) 및 상기 디바이스에 상응하는 디바이스 데이터(HMDD)를 갖는다. 디바이스는 광원(LIGHT SOURC)을 포함한다.
착용자는 태블릿 형태의 터미널(TERM)이 구비된다. 태블릿은 데이터를 디바이스(HMD)로 송신하는데 적절하다(송신하도록 배열된다, 구성된다). 태블릿은 Wi-Fi 통신을 통하여 인터넷 및 예를 들어, 클라우드에 연결될 수 있다.
일 실시예에서, 시각화 파라미터 데이터(VPD)는 HMD 상의 메모리 상에 저장된다. 태블릿은 착용자의 날의 시간표를 나타내는 홀로그램 이미지 데이터(HD)의 세트를 디바이스(HMD)로 송신할 수 있다. 태블릿은 착용자의 존재를 검출하며, 이는 디바이스(HMD)로 데이터(HD)의 송신을 야기한다. 데이터(HD)는 이에 따라 (태블릿으로부터 업로딩되는) 디바이스의 메모리에 이후에 저장되고, 시각화 데이터(VPD)를 고려함으로써 변경될 수 있고, 시각화 데이터(VPD)를 고려하도록 변경되면 디바이스의 메모리에 저장될 수도 있다.
대안적으로 다른 실시예에서, 태블릿은 시각화 파라미터 데이터(VPD)를 저장하는 메모리를 포함할 수 있고, 태블릿은 변경되지 않은 홀로그램 이미지 데이터(HD) 대신에 변경된 데이터(MHD)를 디바이스(HMD)로 직접 계산하고 송신하도록 프로그래밍될 수 있다.
실시예들 둘 다의 경우, 날의 나머지 동안, 착용자가 ‘오프 라인’일 때에도, 즉, HMD가 터미널 또는 서버에 연결되지 않더라도, 착용자는 예를 들어, 햅틱 커맨드를 따라 요구 시에 시간표 데이터를 홀로그램 이미지로서 액세스하고 표시할 수 있다. 디스플레이는 HMD의 광원에 의한 조명 시에 가능하다. 디스플레이는 유리하게는 착용자의 노안에 맞춤화된다. 시간표에 대한 데이터의 업데이트들은 관련 있는 서버 또는 클라우드에 연결되는 적절한(배열된, 구성된) 터미널에의 연결에 의해 가능하다.
실시예 4: 원격 광원을 구비한 본 발명의 방법들 및 시스템들의 가능한 응용들
박물관을 방문하는 것
가능한 응용들은 박물관에서이며, 단일 광원(LIGHT SOURC)은 터미널(TERM)의 일부이고 박물관을 방문하는 착용자의 편의를 위해 방사할 수 있다. 게다가, 광원(LIGHT SOURC)은 다중 모드로 방사할 수 있어, 광원(LIGHT SOURC)이 박물관을 동시에 방문하는 복수의 HMD 착용자의 편의를 위해 사용될 수 있다.
차량에서
광원(LIGHT SOURC)이 구비되는 터미널(TERM)은 자동차, 오토바이, 비행기, 트럭과 같은 차량에서 설정될 수 있다. 터미널은 교통, 날씨 등에 대한 정보와 같은 정보의 디스플레이를 위한 것이다. 정보는 (밤중이거나 비 또는 안개와 같은 곤란한 기상 상황에서 항상 매우 가시적이지 않은 도로 표지들과는 대조적으로) 별개의, 여전히 매우 가시적 방식으로 표시된다. 이미지는 차량의 기준 시스템에 ‘설정되어’, 운전자는 신호들을 보기 위해 머리를 돌릴 필요가 없다. 게다가, 광원은 다중 모드로 방사하고 차량에서 다른 운전하지 않는 사람의 편의를 위해 다른 정보를 표시할 수 있다.
빌딩에 들어가는 것
빌딩 보안(출입 제어)이 본 발명에 따라 수행될 수 있다. 입구에서의 터미널은 진입 코드를 입력하는 가상 키보드의 디스플레이를 가능하게 한다. 빌딩에 들어가는 것은 방문객들이 적절한(배열된, 구성된) HMD를 착용하는 것을 필요로 한다.
Claims (21)
- 착용자에 의해 착용되는 머리 장착 컴퓨터 생성 홀로그램 이미지 표시 디바이스(HMD)로의 디스플레이를 위해 컴퓨터 생성 홀로그램 이미지 데이터(HD)를 처리하는 컴퓨터 구현 방법으로서:
(i) - 착용자 처방 데이터(PD), 착용자 눈 감도 데이터(SD) 및 착용자 눈 생물 계측 데이터(BD)를 포함하는 착용자 눈 데이터(OD); 및
- 프레임 데이터(FD) 및 렌즈 데이터(LD)를 포함하는 머리 장착 디바이스 데이터(HMDD)로부터 선택되는 시각화 파라미터 데이터(VPD)를 제공하는 단계,
(ii) 컴퓨터 생성 홀로그램 이미지 데이터(HD)를 제공하는 단계,
(iii) 단계(i)의 상기 시각화 파라미터 데이터(VPD)를 고려함으로써 단계(ii)의 상기 컴퓨터 생성 홀로그램 이미지 데이터(HD)로부터 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)를 계산하는 단계,
(iv) 디스플레이를 위해 단계(iii)의 상기 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)를 상기 디바이스(HMD)로 제공하는 단계, 및
(v) 상기 디바이스(HMD)의 조명에 의해 단계(iii)의 상기 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)로부터 상기 홀로그램 이미지를 표시하도록 구성되는 광 빔을, 원격 조명 터미널 상에 제공되는 적어도 하나의 광원(LIGHT SOURC)에 의해, 방사하는 단계를 포함하며,
상기 적어도 하나의 광원(LIGHT SOURC)은 데이터를 송신하도록 추가로 구성되고,
- 단계(ii)는 상기 컴퓨터 생성 홀로그램 이미지 데이터(HD)를 상기 적어도 하나의 광원(LIGHT SOURC)에서 상기 디바이스(HMD)로 송신하는 단계를 포함하거나,
- 단계(iv)는 상기 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)를 상기 적어도 하나의 광원(LIGHT SOURC)에서 상기 디바이스(HMD)로 송신하는 단계를 포함하는, 컴퓨터 구현 방법. - 제1항에 있어서,
상기 시각화 파라미터 데이터(VPD)는 난시 모듈, 난시 축, 배율, 프리즘 및 가법으로부터 선택되는 착용자 처방 데이터(PD)인, 컴퓨터 구현 방법. - 제1항에 있어서,
단계(i)의 상기 시각화 파라미터 데이터(VPD) 중 적어도 하나는 상기 디바이스(HMD) 상의 메모리에 저장되는, 컴퓨터 구현 방법. - 제3항에 있어서,
단계(i)는:
(i-a) 상기 착용자의 존재를 하나 이상의 통신 터미널(COM TERM)에 의해 검출하는 단계,
(i-b) 단계(i-a)에서의 상기 검출된 존재에 응하여, 상기 시각화 파라미터 데이터(VPD)를 상기 디바이스(HMD)에서 상기 통신 터미널(COM TERM)로 송신하는 단계를 포함하고,
단계(iv)는 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)를 상기 통신 터미널(COM TERM)에서 상기 디바이스(HMD)로 송신하는 단계를 포함하는, 컴퓨터 구현 방법. - 제1항에 있어서,
단계(i)의 상기 시각화 파라미터 데이터(VPD) 중 하나 이상은 상기 시각화 파라미터 데이터(VPD)의 검색을 가능하게 하는 식별자인 시각화 파라미터 식별자(VP ID)와 연관지어 통신 네트워크(COM NETW)를 통하여 하나 이상의 통신 터미널(COM TERM)에 연결되는 통신 서버(COM SERV) 상의 착용자 데이터베이스(WEAR DB)에 저장되는, 컴퓨터 구현 방법. - 제5항에 있어서,
단계(i)는:
(i-a) 상기 착용자의 존재를 상기 하나 이상의 통신 터미널(COM TERM)에 의해 검출하는 단계,
(i-b) 단계(i-a)에서의 상기 검출된 존재에 응하여, 상기 시각화 파라미터 데이터(VPD)를 상기 통신 서버(COM SERV)에서 상기 통신 터미널(COM TERM)로 송신하는 단계를 포함하는, 컴퓨터 구현 방법. - 제6항에 있어서,
단계(i)는:
(i-c) 시각화 파라미터 데이터(VPD)를 상기 통신 터미널(COM TERM)에서 상기 디바이스(HMD)로 송신하는 추가 단계를 포함하는, 컴퓨터 구현 방법. - 제5항에 있어서,
단계(iv)는:
변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)를 상기 통신 터미널(COM TERM)에서 상기 디바이스(HMD)로 송신하는 단계를 포함하는, 컴퓨터 구현 방법. - 제8항에 있어서,
단계(iv)는:
- 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)를 상기 통신 서버(COM SERV)에서 상기 통신 터미널(COM TERM)로 송신하는 이전 단계를 포함하는, 컴퓨터 구현 방법. - 제1항 내지 제9항 중 어느 한 항에 있어서,
상기 컴퓨터 생성 홀로그램 이미지 데이터(HD) 또는 상기 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)는 이미지 데이터베이스(IM DB)에 저장되고,
상기 방법은 착용자 식별자(WEAR ID)와 상기 착용자 사이의 연관을 상기 데이터베이스에서 미리 등록하는 예비 단계를 포함하고,
단계(ii)의 상기 컴퓨터 생성 홀로그램 이미지 데이터(HD) 또는 단계(iii)의 상기 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)는 상기 착용자 식별자(WEAR ID)에 따라 결정되는, 컴퓨터 구현 방법. - 제10항에 있어서,
단계(ii)의 상기 컴퓨터 생성 홀로그램 이미지 데이터(HD) 또는 단계(iii)의 상기 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)는 액세스 권한들에 따라서 상기 착용자 식별자(WEAR ID)에 따라 결정되는, 컴퓨터 구현 방법. - 머리 장착 컴퓨터 생성 홀로그램 이미지 표시 디바이스(HMD)의 착용자를 위해 컴퓨터 생성 홀로그램 이미지를 표시하는 시스템으로서,
상기 시스템은:
- 상기 머리 장착 컴퓨터 생성 홀로그램 이미지 표시 디바이스(HMD), 및
- 상기 디바이스(HMD)와 통신하는 적어도 하나의 조명 터미널을 포함하며,
상기 적어도 하나의 조명 터미널은:
- 광원(LIGHT SOURC),
- 상기 디바이스(HMD)가 구비되는 착용자의 존재를 검출하도록 구성되는 센서(SENS), 및
- 상기 터미널로부터 또는 상기 터미널로, 시각화 파라미터 데이터(VPD), 컴퓨터 생성 홀로그램 이미지 데이터(HD) 및 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)로부터 선택되는 데이터를 송신하도록 구성되는 통신 인터페이스(INT)를 포함하고,
상기 광원(LIGHT SOURC)은 상기 조명 터미널로부터 컴퓨터 생성 홀로그램 이미지 데이터(HD) 또는 변경된 컴퓨터 생성 홀로그램 이미지 데이터(MHD)를 송신하고, 홀로그램 이미지를 표시하기 위해 상기 디바이스(HMD)를 조명하도록 광 빔을 방사하도록 구성되는 시스템. - 제12항에 있어서,
상기 시스템은 조명 네트워크를 통해 조명 서버와 각각 연결되는 복수의 상기 조명 터미널을 포함하는 시스템. - 제12항 또는 제13항에 있어서,
상기 머리 장착 컴퓨터 생성 홀로그램 이미지 표시 디바이스(HMD)는 LCoS(실리콘 액정) 또는 유리 투과성 액티브 매트릭스 액정으로 만들어진 위상 또는 진폭 공간 광 변조기(SLM)를 포함하는 시스템. - 제14항에 있어서,
상기 머리 장착 컴퓨터 생성 홀로그램 이미지 표시 디바이스(HMD)는 착용자 처방-순응형이며 상기 위상 또는 진폭 공간 광 변조기(SLM)를 통해 굴절 이상을 교정하도록 구성되는 시스템. - 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP13306208.3 | 2013-09-04 | ||
| EP13306208 | 2013-09-04 | ||
| PCT/EP2014/068758 WO2015032828A1 (en) | 2013-09-04 | 2014-09-03 | Methods and systems for augmented reality |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20160048800A KR20160048800A (ko) | 2016-05-04 |
| KR102309257B1 true KR102309257B1 (ko) | 2021-10-06 |
Family
ID=49170647
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020167005451A KR102309257B1 (ko) | 2013-09-04 | 2014-09-03 | 증강 현실을 위한 방법 및 시스템 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US10520730B2 (ko) |
| EP (1) | EP3042249B1 (ko) |
| JP (1) | JP6675312B2 (ko) |
| KR (1) | KR102309257B1 (ko) |
| CN (1) | CN105518539A (ko) |
| WO (1) | WO2015032828A1 (ko) |
Families Citing this family (50)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10048647B2 (en) | 2014-03-27 | 2018-08-14 | Microsoft Technology Licensing, Llc | Optical waveguide including spatially-varying volume hologram |
| CA2892113C (en) * | 2014-05-20 | 2022-11-08 | Tyco Safety Products Canada Ltd. | Dual access level security system and method |
| CN113397472A (zh) | 2015-03-16 | 2021-09-17 | 奇跃公司 | 穿戴式增强现实装置和穿戴式虚拟现实装置 |
| CN107466375B (zh) * | 2015-04-03 | 2020-03-10 | 依视路国际公司 | 用于增强现实的方法和系统 |
| US9939644B2 (en) * | 2015-06-25 | 2018-04-10 | Intel Corporation | Technologies for controlling vision correction of a wearable computing device |
| US10210844B2 (en) | 2015-06-29 | 2019-02-19 | Microsoft Technology Licensing, Llc | Holographic near-eye display |
| US9798894B2 (en) * | 2015-07-02 | 2017-10-24 | Xerox Corporation | Secure computer display using inverse computational light field displays |
| JP6930929B2 (ja) | 2015-07-03 | 2021-09-01 | エシロール アンテルナショナルＥｓｓｉｌｏｒ Ｉｎｔｅｒｎａｔｉｏｎａｌ | 拡張現実のための方法とシステム |
| US10852541B2 (en) | 2015-07-03 | 2020-12-01 | Essilor International | Methods and systems for augmented reality |
| US20180224673A1 (en) * | 2015-09-16 | 2018-08-09 | Robert Therrien | Relaxation and meditation eyewear |
| DE102015219859B4 (de) | 2015-10-13 | 2017-07-27 | Carl Zeiss Vision International Gmbh | Vorrichtung und Verfahren für die AR-Darstellung |
| US10338410B1 (en) * | 2015-12-28 | 2019-07-02 | Facebook Technologies, Llc | Eyeglass prescription correction for optics blocks in head-mounted displays |
| WO2017145158A1 (en) | 2016-02-22 | 2017-08-31 | Real View Imaging Ltd. | Zero order blocking and diverging for holographic imaging |
| EP3420413A1 (en) | 2016-02-22 | 2019-01-02 | Real View Imaging Ltd. | A method and system for displaying holographic images within a real object |
| US10795316B2 (en) | 2016-02-22 | 2020-10-06 | Real View Imaging Ltd. | Wide field of view hybrid holographic display |
| US11663937B2 (en) | 2016-02-22 | 2023-05-30 | Real View Imaging Ltd. | Pupil tracking in an image display system |
| US10115205B2 (en) | 2016-03-11 | 2018-10-30 | Facebook Technologies, Llc | Eye tracking system with single point calibration |
| CN108780223B (zh) * | 2016-03-11 | 2019-12-20 | 脸谱科技有限责任公司 | 用于生成眼睛模型的角膜球跟踪 |
| JP6409015B2 (ja) * | 2016-03-29 | 2018-10-17 | 矢崎総業株式会社 | 車両用投影表示装置 |
| NZ747005A (en) | 2016-04-08 | 2020-04-24 | Magic Leap Inc | Augmented reality systems and methods with variable focus lens elements |
| US20170323482A1 (en) * | 2016-05-05 | 2017-11-09 | Universal City Studios Llc | Systems and methods for generating stereoscopic, augmented, and virtual reality images |
| US10108144B2 (en) | 2016-09-16 | 2018-10-23 | Microsoft Technology Licensing, Llc | Holographic wide field of view display |
| EP3296793A1 (en) * | 2016-09-19 | 2018-03-21 | Essilor International | Method of determining a correcting optical function to a virtual image |
| EP3296792A1 (en) * | 2016-09-19 | 2018-03-21 | Essilor International | Method for managing the display of an image to a user of an optical system |
| US10254542B2 (en) | 2016-11-01 | 2019-04-09 | Microsoft Technology Licensing, Llc | Holographic projector for a waveguide display |
| US20180144554A1 (en) | 2016-11-18 | 2018-05-24 | Eyedaptic, LLC | Systems for augmented reality visual aids and tools |
| US11022939B2 (en) | 2017-01-03 | 2021-06-01 | Microsoft Technology Licensing, Llc | Reduced bandwidth holographic near-eye display |
| IL307602A (en) | 2017-02-23 | 2023-12-01 | Magic Leap Inc | Variable focus virtual imagers based on polarization conversion |
| JP7058471B2 (ja) * | 2017-04-17 | 2022-04-22 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
| CN110603476B (zh) | 2017-05-17 | 2021-12-03 | 苹果公司 | 具有视力矫正的头戴式显示设备 |
| US10712567B2 (en) | 2017-06-15 | 2020-07-14 | Microsoft Technology Licensing, Llc | Holographic display system |
| US20190012841A1 (en) | 2017-07-09 | 2019-01-10 | Eyedaptic, Inc. | Artificial intelligence enhanced system for adaptive control driven ar/vr visual aids |
| CN107589562A (zh) * | 2017-09-20 | 2018-01-16 | 厦门云镜视界设计有限公司 | 一种眼镜定制方法 |
| IL273480B2 (en) * | 2017-09-27 | 2024-03-01 | Magic Leap Inc | Near-eye 3D display with separate phase and amplitude modulators |
| US10984508B2 (en) * | 2017-10-31 | 2021-04-20 | Eyedaptic, Inc. | Demonstration devices and methods for enhancement for low vision users and systems improvements |
| EP3502763B1 (en) | 2017-12-22 | 2023-02-01 | Essilor International | Head mounted device comprising a fourier hologram |
| EP3734350A4 (en) * | 2017-12-25 | 2021-04-28 | Goertek Technology Co., Ltd. | LASER BEAM SCAN DISPLAY DEVICE AND AUGMENTED REALITY GLASSES |
| US10441161B2 (en) * | 2018-02-26 | 2019-10-15 | Veyezer LLC | Holographic real space refractive sequence |
| US11614623B2 (en) | 2018-02-26 | 2023-03-28 | Veyezer, Llc | Holographic real space refractive system |
| US11253149B2 (en) | 2018-02-26 | 2022-02-22 | Veyezer, Llc | Holographic real space refractive sequence |
| US11563885B2 (en) | 2018-03-06 | 2023-01-24 | Eyedaptic, Inc. | Adaptive system for autonomous machine learning and control in wearable augmented reality and virtual reality visual aids |
| EP3567419A1 (en) * | 2018-05-11 | 2019-11-13 | Essilor International (Compagnie Generale D'optique) | A system for generating a virtual image for a wearer |
| KR20210043500A (ko) | 2018-05-29 | 2021-04-21 | 아이답틱 인코포레이티드 | 저시력 사용자들을 위한 하이브리드 투시형 증강 현실 시스템들 및 방법들 |
| EP3856098A4 (en) | 2018-09-24 | 2022-05-25 | Eyedaptic, Inc. | IMPROVED AUTONOMOUS HANDS-FREE CONTROL OF ELECTRONIC VISION AIDS |
| DE102018126329A1 (de) * | 2018-10-23 | 2020-04-23 | Valeo Schalter Und Sensoren Gmbh | Verfahren zum Ausrichten eines virtuellen Bildelements und Head-up-Display zum Abbilden eines virtuellen Bildelements |
| US10930183B2 (en) * | 2018-11-22 | 2021-02-23 | Electronics And Telecommunications Research Institute | Hologram content generation apparatus, integrated hologram content control system having the same, and method for operating the hologram content generation apparatus |
| CN109769136B (zh) * | 2018-12-07 | 2021-02-19 | 北京交通大学 | 基于瞬时访问速率值的在线视频缓存管理方法和系统 |
| US20220240772A1 (en) * | 2019-05-09 | 2022-08-04 | Evolution Optiks Limited | Corrective light field display profile management, communication and integration system and method |
| US20220343606A1 (en) * | 2021-04-21 | 2022-10-27 | NewSight Reality, Inc. | Optical module with active microlens array capable of synchronizing with see-through display to provide multiple modes of functionality |
| US11790345B2 (en) * | 2022-02-03 | 2023-10-17 | Bank Of America Corporation | Card to card transaction initiation using light fidelity (“LIFI”) enabled smart glasses |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006208687A (ja) * | 2005-01-27 | 2006-08-10 | Konica Minolta Photo Imaging Inc | ヘッドマウントディスプレイの映像調節システム |
Family Cites Families (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0971247A1 (en) * | 1998-07-07 | 2000-01-12 | Denso Corporation | A hologram screen and a method of producing the same |
| JP3385238B2 (ja) * | 1999-01-12 | 2003-03-10 | シャープ株式会社 | 光送受信モジュール |
| JP3827082B2 (ja) | 2002-10-24 | 2006-09-27 | 株式会社中川研究所 | 放送システム及び電球、照明装置 |
| US7733298B2 (en) * | 2004-10-19 | 2010-06-08 | Hewlett-Packard Development Company, L.P. | Display device |
| DE102006003741B4 (de) * | 2006-01-18 | 2009-08-27 | Seereal Technologies S.A. | Verfahren zum Kodieren eines computergenerierten Hologramms |
| JP2007274566A (ja) | 2006-03-31 | 2007-10-18 | Nakagawa Kenkyusho:Kk | 照明光通信装置 |
| FR2900475B1 (fr) * | 2006-04-26 | 2008-10-31 | Essilor Int | Afficheur comportant une paire de lunettes de type binoculaire et avec un dispositif de reglage de l'image |
| US7595933B2 (en) * | 2006-10-13 | 2009-09-29 | Apple Inc. | Head mounted display system |
| JP4963467B2 (ja) | 2007-12-14 | 2012-06-27 | 独立行政法人情報通信研究機構 | ホログラムパターン発生装置、電子ホログラフィの非点収差補正方法、および、ホログラムパターン発生プログラム |
| US8019233B2 (en) * | 2008-05-30 | 2011-09-13 | Avago Technologies Fiber Ip (Singapore) Pte. Ltd. | Method and apparatus for using a hologram to control the optical field distribution of light generated by a light source and launched into an end of an optical waveguide |
| JP4858512B2 (ja) * | 2008-08-21 | 2012-01-18 | ソニー株式会社 | 頭部装着型ディスプレイ |
| US8436789B2 (en) * | 2009-01-16 | 2013-05-07 | Microsoft Corporation | Surface puck |
| JP5874176B2 (ja) | 2011-03-06 | 2016-03-02 | ソニー株式会社 | 表示装置、並びに中継装置 |
| JP5451670B2 (ja) | 2011-03-15 | 2014-03-26 | 株式会社アウトスタンディングテクノロジー | 可視光通信装置 |
| JP5118266B2 (ja) * | 2011-03-25 | 2013-01-16 | パナソニック株式会社 | 表示装置 |
| US9389421B2 (en) * | 2011-10-20 | 2016-07-12 | Panasonic Intellectual Property Management Co., Ltd. | Display device and display system |
| US9143402B2 (en) * | 2012-02-24 | 2015-09-22 | Qualcomm Incorporated | Sensor based configuration and control of network devices |
| JP5994715B2 (ja) * | 2012-04-10 | 2016-09-21 | パナソニックＩｐマネジメント株式会社 | 計算機ホログラム型表示装置 |
| CN102857299A (zh) * | 2012-08-23 | 2013-01-02 | 中国科学院苏州纳米技术与纳米仿生研究所 | 光通信系统及方法 |
| AU2013370897B2 (en) * | 2012-12-31 | 2017-03-30 | Gentex Corporation | Apparatus and method for fitting head mounted vision augmentation systems |
| WO2014152489A1 (en) * | 2013-03-15 | 2014-09-25 | Brian Bare | System and method for providing secure data for display using augmented reality |
| CN103297888A (zh) * | 2013-04-24 | 2013-09-11 | 青岛海信电器股份有限公司 | 无线耳机装置、移动终端装置以及可调制光源器件 |
| JP6632979B2 (ja) * | 2013-09-04 | 2020-01-22 | エシロール・アンテルナシオナル | 拡張現実感のための方法とシステム |
-
2014
- 2014-09-03 US US14/916,905 patent/US10520730B2/en active Active
- 2014-09-03 JP JP2016539532A patent/JP6675312B2/ja active Active
- 2014-09-03 KR KR1020167005451A patent/KR102309257B1/ko active IP Right Grant
- 2014-09-03 EP EP14758926.1A patent/EP3042249B1/en active Active
- 2014-09-03 WO PCT/EP2014/068758 patent/WO2015032828A1/en active Application Filing
- 2014-09-03 CN CN201480048719.0A patent/CN105518539A/zh active Pending
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006208687A (ja) * | 2005-01-27 | 2006-08-10 | Konica Minolta Photo Imaging Inc | ヘッドマウントディスプレイの映像調節システム |
Also Published As
| Publication number | Publication date |
|---|---|
| US10520730B2 (en) | 2019-12-31 |
| JP6675312B2 (ja) | 2020-04-01 |
| WO2015032828A1 (en) | 2015-03-12 |
| US20160216515A1 (en) | 2016-07-28 |
| JP2016535872A (ja) | 2016-11-17 |
| EP3042249B1 (en) | 2020-03-18 |
| EP3042249A1 (en) | 2016-07-13 |
| KR20160048800A (ko) | 2016-05-04 |
| CN105518539A (zh) | 2016-04-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102309257B1 (ko) | 증강 현실을 위한 방법 및 시스템 | |
| KR102277893B1 (ko) | 증강 현실을 위한 방법 및 시스템 | |
| US10884246B2 (en) | Releasably attachable augmented reality system for eyewear | |
| US10466487B2 (en) | Releasably attachable augmented reality system for eyewear | |
| CN104937476B (zh) | 头戴式显示器的光学组合器中的级联光学器件 | |
| US10534174B2 (en) | Methods and systems for augmented reality | |
| US8873149B2 (en) | Projection optical system for coupling image light to a near-eye display | |
| JP5118266B2 (ja) | 表示装置 | |
| US10429648B2 (en) | Augmented reality head worn device | |
| EP3631564B1 (en) | Releasably attachable augmented reality system for eyewear | |
| CN104903818A (zh) | 眼睛跟踪佩戴式设备和使用方法 | |
| KR20170039294A (ko) | 구면 미러 및 결합 해제된 비구면 엘리먼트를 갖는 근안 디스플레이 | |
| US20180225878A1 (en) | Apparatus and method for augmented reality presentation | |
| WO2021055327A1 (en) | Augmented reality or mixed reality system for eyewear | |
| US20230176383A1 (en) | Eyebox steering and field of view expansion using a beam steering element | |
| JP2016130838A (ja) | 頭部装着型表示装置、表示方法 | |
| KR102226639B1 (ko) | 복수의 핀 미러가 배치된 광학 장치 및 이를 이용한 머리 착용형 디스플레이 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| N231 | Notification of change of applicant | ||
| E902 | Notification of reason for refusal | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |