KR20230096898A - 컴팩트한 헤드-업 디스플레이를 위한 홀로그램 계산 장치 및 방법 - Google Patents

컴팩트한 헤드-업 디스플레이를 위한 홀로그램 계산 장치 및 방법 Download PDF

Info

Publication number
KR20230096898A
KR20230096898A KR1020220182296A KR20220182296A KR20230096898A KR 20230096898 A KR20230096898 A KR 20230096898A KR 1020220182296 A KR1020220182296 A KR 1020220182296A KR 20220182296 A KR20220182296 A KR 20220182296A KR 20230096898 A KR20230096898 A KR 20230096898A
Authority
KR
South Korea
Prior art keywords
hologram
sub
virtual
display device
light
Prior art date
Application number
KR1020220182296A
Other languages
English (en)
Inventor
스미튼 티모시
안토넬로 야코포
크리스마스 제미슨
Original Assignee
엔비직스 엘티디
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엔비직스 엘티디 filed Critical 엔비직스 엘티디
Publication of KR20230096898A publication Critical patent/KR20230096898A/ko

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • G03H1/0808Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/02Details of features involved during the holographic process; Replication of holograms without interference recording
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0012Optical design, e.g. procedures, algorithms, optimisation routines
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B27/0103Head-up displays characterised by optical features comprising holographic elements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/32Holograms used as optical elements
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202Reconstruction geometries or arrangements
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202Reconstruction geometries or arrangements
    • G03H1/2205Reconstruction geometries or arrangements using downstream optical component
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2249Holobject properties
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/26Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B27/0103Head-up displays characterised by optical features comprising holographic elements
    • G02B2027/0105Holograms with particular structures
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B27/0103Head-up displays characterised by optical features comprising holographic elements
    • G02B2027/0105Holograms with particular structures
    • G02B2027/0107Holograms with particular structures with optical power
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B27/0103Head-up displays characterised by optical features comprising holographic elements
    • G02B2027/0109Head-up displays characterised by optical features comprising holographic elements comprising details concerning the making of holograms
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/011Head-up displays characterised by optical features comprising device for correcting geometrical aberrations, distortion
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0123Head-up displays characterised by optical features comprising devices increasing the field of view
    • G02B2027/0125Field-of-view increase by wavefront division
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • G02B2027/0174Head mounted characterised by optical features holographic
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2294Addressing the hologram to an active spatial light modulator
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • G03H1/0808Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
    • G03H2001/0825Numerical processing in hologram space, e.g. combination of the CGH [computer generated hologram] with a numerical optical element
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2202Reconstruction geometries or arrangements
    • G03H2001/2236Details of the viewing window
    • G03H2001/2239Enlarging the viewing window
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2249Holobject properties
    • G03H2001/2284Superimposing the holobject with other visual information
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/40Synthetic representation, i.e. digital or optical object decomposition
    • G03H2210/45Representation of the decomposed object
    • G03H2210/452Representation of the decomposed object into points
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2223/00Optical components
    • G03H2223/16Optical waveguide, e.g. optical fibre, rod

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Holo Graphy (AREA)
  • Diffracting Gratings Or Hologram Optical Elements (AREA)
  • Instrument Panels (AREA)

Abstract

광학시스템 및 광학시스템에 대한 허상이미지의 홀로그램을 계산하는 방법이 개시된다. 광학시스템은 홀로그램을 표시하도록 구성된 디스플레이장치 및 홀로그램을 복제하도록 구성된 도파관을 포함한다. 방법은 상기 허상이미지 포인트로부터 뷰어의 입사동공 주변부까지의 직선 경로에 의해 규정되는 영역 내에서 상기 허상이미지 포인트의 서브홀로그램을 결정하는 과정을 포함한다. 영역은 도파관에 의해 형성된 디스플레이장치의 가상 복제물의 적어도 일부를 포함한다.

Description

컴팩트한 헤드-업 디스플레이를 위한 홀로그램 계산 장치 및 방법{Method and Apparatus for Hologram Calculation for Compact Head-up Display}
본 개시는 동공 확장 또는 복제에 관한 것으로, 특히 발산하는 광선 다발(ray bundles)을 포함하는 회절된 광 필드(diffracted light field)에 대한 동공 확장 또는 복제에 관한 것이다. 보다 구체적으로, 본 개시는 도파관 동공확장기(waveguide pupil expander)를 포함하는 디스플레이 시스템 및 도파관을 사용한 동공 확장 방법에 관한 것이다. 일부 실시예들은 제1 및 제2 도파관 동공확장기를 사용하는 2차원 동공 확장에 관한 것이다. 일부 실시예들은 화상 생성 유닛(picture generating unit) 및 헤드-업 디스플레이(head-up display, HUD)(예를 들어, 자동차 헤드-업 디스플레이)에 관한 것이다.
객체에서 산란된 광은 진폭 및 위상 정보를 포함한다. 이러한 진폭 및 위상 정보는 간섭 줄무늬(interference fringes)를 포함하는 홀로그래픽 레코딩 또는 "홀로그램"을 형성하도록 잘 알려진 간섭 기술에 의해, 예컨대, 감광성 플레이트 상에 캡쳐될 수 있다. 홀로그램은 원래의 객체를 나타내는 2차원 또는 3차원 홀로그램 재구성 또는 재생 이미지(replay image)를 형성하기에 적절한 광을 조사(illumination)함으로써 재구성될 수 있다.
컴퓨터-생성 홀로그래피(computer-generated holography)는 간섭 프로세스를 수치적으로 시뮬레이션할 수 있다. 컴퓨터-생성 홀로그램(computer-generated hologram)은 프레넬(Fresnel) 또는 푸리에(Fourier) 변환과 같은 수학적 변환에 기초한 기술을 이용하여 계산될 수 있다. 이러한 유형의 홀로그램은 프레넬/푸리에 변환 홀로그램 혹은 간단히 프레넬/푸리에 홀로그램으로 지칭될 수 있다. 푸리에 홀로그램은 객체의 푸리에 도메인/평면 표현 또는 객체의 주파수 도메인/평면 표현으로 간주될 수 있다. 컴퓨터-생성 홀로그램은 예컨대 가간섭성 광선 추적(coherent ray tracing) 또는 포인트 클라우드 기술(point cloud technique)에 의해 계산될 수도 있다.
컴퓨터-생성 홀로그램은 입사광의 진폭 및/또는 위상을 변조하도록 구성된 공간 광 변조기(spatial light modulator) 상에 인코딩될 수 있다. 광 변조는, 예컨대, 전기적으로 어드레스 가능한(electrically-addressable) 액정, 광학적으로 어드레스 가능한(optically-addressable) 액정 또는 마이크로 미러를 사용하여 달성될 수 있다.
공간 광 변조기는 셀들(cells) 또는 요소들(elements)로 지칭될 수 있는 복수의 개별적으로 어드레스 가능한 픽셀들을 일반적으로 포함할 수 있다. 광 변조 방식은 이진(binary), 다중 레벨(multilevel) 또는 연속적(continuous)일 수 있다. 이와는 달리, 장치는 연속적일 수 있으며(즉, 픽셀로 구성되지 않은), 이에 따라 광 변조는 장치 전체에 걸쳐서 연속적일 수 있다. 공간 광 변조기는 변조 광이 반사로 출력된다는 점에서 반사형(reflective)일 수 있다. 공간 광 변조기는 변조 광이 투과로 출력된다는 점에서 투과형(transmissive)일 수도 있다.
홀로그래픽 프로젝터는 여기에 설명된 시스템을 사용하여 제공될 수 있다. 이러한 프로젝터는 헤드-업 디스플레이, 즉 "HUD"에 적용될 수 있다.
본 개시의 측면들은 첨부된 독립 청구항들에서 정의된다.
대체로, 본 개시는 이미지 프로젝션(image projection)에 관한 것이다. 이미지 프로젝션 방법 및 디스플레이장치(display device)를 포함하는 이미지 프로젝터(image projector)(또는 광학시스템)에 관한 것이다. 본 개시는 또한 이미지 프로젝터(광학시스템) 및 뷰잉 시스템(viewing system)을 포함하는 프로젝션 시스템에 관한 것으로, 여기서 이미지 프로젝터는 디스플레이장치로부터 뷰잉 시스템으로 광을 투사(project)하거나 중계(relay)한다. 본 개시내용은 단안 및 양안 뷰잉 시스템에 동일하게 적용가능하다. 뷰잉 시스템은 뷰어의 눈 또는 눈들을 포함할 수 있다. 뷰잉 시스템은 광 파워(optical power, 예를 들어, 인간 눈의 수정체) 및 뷰잉 평면(viewing plane, 예를 들어, 인간 눈의 망막)을 갖는 광학 요소를 포함한다. 프로젝터는 '광 엔진(light engine)'이라고 할 수 있다. 디스플레이장치와 디스플레이장치를 이용하여 형성되는(또는 인지되는) 이미지는 공간적으로 분리되어 있다. 이미지는 디스플레이 평면에 형성되거나 뷰어에 의해 감지된다. 일부 예시들에서, 이미지는 허상이미지(virtual image)이고 디스플레이 평면은 허상이미지 평면으로 지칭될 수 있다. 다른 예시들에서, 이미지는 홀로그램 재구성에 의해 형성된 실상 이미지(real image)이고 이미지는 뷰잉 평면에 투사되거나 중계된다. 이미지는 디스플레이장치에 표시되는 회절 패턴(예: 홀로그램)을 조사(illuminate)하여 형성된다.
디스플레이장치는 픽셀들을 포함한다. 디스플레이장치의 픽셀들은 광(light)을 회절시키는 회절 패턴 또는 구조를 표시할 수 있다. 회절된 광은 디스플레이장치와 공간적으로 이격된 평면에 이미지를 형성할 수 있다. 광학에서 잘 알려진 바에 따르면 최대 회절 각도의 크기는 픽셀들의 크기와 광의 파장과 같은 기타 요인들에 의해 결정된다.
프로젝터의 예시들에서, 디스플레이장치는 액정-온-실리콘(liquid crystal on silicon, "LCOS") 공간 광 변조기(spatial light modulator, SLM)와 같은 공간 광 변조기이다. 광은 LCOS에서 카메라 또는 눈과 같은 관찰 개체/시스템 쪽으로 회절 각도 범위(예: 0에서 최대 회절 각도까지)에 걸쳐 전파된다. 일부 실시예들에서, 확대 기술들이 LCOS의 통상적인 최대 회절각을 넘어 이용가능한 회절각의 범위를 증가시키기 위해 사용될 수 있다.
프로젝터의 일부 예시들에서, (디스플레이된 회절 패턴/홀로그램으로부터 형성된) 이미지가 눈으로 전파(propagate)된다. 예를 들어, 디스플레이장치와 뷰어 사이의 자유 공간이나 스크린 또는 다른 수광 표면에 형성된 중간 홀로그램 재구성/이미지의 공간적으로 변조된 광은 뷰어에게 전파될 수 있다.
프로젝터의 예시들에서 이미지는 실상 이미지이다. 다른 예시들에서, 이미지는 인간 눈(또는 눈들)에 의해 인식되는 허상이미지이다. 따라서 프로젝션 시스템 또는 광 엔진은 뷰어가 디스플레이장치를 직접 볼 수 있도록 구성될 수 있다. 그러한 프로젝터의 예시들에서, 홀로그램으로 인코딩된 광은 눈(들)에 직접 전파되며 디스플레이장치와 뷰어 사이의 자유 공간이나 스크린 또는 기타 수광 표면에서 형성된 중간 홀로그램 재구성이 없다. 이러한 예시들에서, 눈의 동공은 뷰잉 시스템의 입사 개구인 것으로 간주될 수 있고 눈의 망막은 뷰잉 시스템의 뷰잉 평면으로 간주될 수 있다. 이러한 구성에서 눈의 수정체는 홀로그램에서 이미지로의 변환을 수행한다고 때때로 말할 수 있다.
프로젝터의 일부 다른 예시들에서, 회절 패턴/홀로그램(회절 패턴/홀로그램의 광) 자체가 눈으로 전파된다. 예를 들어, (아직 홀로그램 재구성, 즉 이미지로 완전히 변환되지 않은) 홀로그램의 공간적으로 변조된 광(비공식적으로는 홀로그램으로/에 의해 "인코딩"되었다고 말할 수 있다)은 뷰어의 눈에 직접 전파된다. 실상 또는 허상이미지가 뷰어에게 인지될 수 있다. 이 실시예들에서, 디스플레이장치와 뷰어 사이에 중간적인 홀로그램 재구성/이미지가 형성되지 않는다. 때때로 이러한 실시예들에서 눈의 수정체가 홀로그램에서 이미지로의 전환 또는 변환을 수행한다고 한다. 프로젝션 시스템 또는 광 엔진은 뷰어가 효과적으로 디스플레이장치를 직접 볼 수 있도록 구성될 수 있다.
"복소 광 필드(complex light field)"인 "광 필드"가 본 명세서에서 참조된다. "광 필드"라는 용어는 단지 적어도 두 개의 직교 공간 방향(예를 들어, x와 y)으로 유한한 크기를 갖는 광의 패턴을 나타낼 뿐이다. 여기에서 "복소(complex)"라는 단어는 단지 광 필드의 각 지점에서 광은 진폭 값과 위상 값에 의해 정의될 수 있고, 따라서 복소수 또는 두 값의 쌍으로 표시될 수 있음을 나타내기 위해 사용되었다. 홀로그램 계산을 위해, 복소 광 필드는 복소수들의 2차원 어레이일 수 있으며, 여기서 복소수들은 광 필드 내의 복수의 개별 위치에서 광의 세기 및 위상을 정의한다.
잘 알려진 광학 원리에 따르면, 눈 또는 다른 뷰잉 개체/시스템(viewing entity/system)에 의해 보여질 수 있는 디스플레이장치에서 전파되는 광의 각도 범위는 디스플레이장치와 뷰잉 개체 사이의 거리에 따라 달라진다. 예를 들어, 눈의 위치가 주어진 경우 1 미터의 뷰잉 거리(viewing distance)에서 LCOS의 좁은 범위의 각도에서만 광이 눈의 동공을 통해 전파되어 망막에 이미지를 형성할 수 있다. 눈의 위치가 주어진 경우 디스플레이장치에서 전파된 광선이 눈의 동공을 지나 성공적으로 망막에 이미지를 형성할 수 있는 광선의 각도 범위는 뷰어가 '볼 수 있는(visible)' 이미지 부분을 결정한다. 다시 말해, 뷰잉 평면의 임의의 한 지점(예를 들어, 아이-모션 박스(eye-motion box)와 같은 뷰잉 윈도우 내 어느 한 눈의 위치)에서 이미지의 모든 부분을 볼 수 있는 것은 아니다.
프로젝터의 일부 예시들에서, 프로젝터의 일부 예시들에서 뷰어가 인식하는 이미지는 디스플레이장치의 업스트림 (upstream)에 나타나는 허상이미지이다. 즉, 뷰어는 이미지가 디스플레이장치보다 그들로부터 더 멀리 있는 것으로 인식한다. 개념적으로 허상이미지의 복수의 상이한 허상이미지 포인트들을 고려하는 것이 가능하다. 허상 포인트에서 뷰어까지의 거리는 본 개시에서 허상이미지 포인트에 대한 허상이미지 거리로 지칭된다. 물론 서로 다른 허상 포인트들은 서로 다른 허상이미지 거리를 가질 수 있다. 각각의 허상 포인트와 연관된 광선 다발(bundles) 내의 개별 광선들은 디스플레이장치를 통해 뷰어까지 각각 다른 광학적 경로를 따라 이동할 수 있다. 그러나 디스플레이장치의 일부만, 따라서 허상이미지의 하나 이상의 허상 포인트들에서 나오는 일부 광선들만 사용자의 시야(field of view) 내에 있을 수 있다. 즉, 허상이미지의 허상 포인트 중 일부에서 나오는 광선들 중 일부만 디스플레이장치를 통해 사용자의 눈(들)으로 전파되어 뷰어가 볼 수 있을 것이다. 따라서 개념적으로는 뷰어가 '디스플레이장치 크기의 창'을 통해 허상이미지를 보고 있는 것으로 간주될 수 있으며, 예를 들어 1 미터와 같이 비교적 먼 거리에서 이는 직경 1 cm와 같이 매우 작을 수 있다. 그리고 사용자는 눈(들)의 동공(들)을 통해 디스플레이장치 크기의 창을 보게 될 것이며, 이는 매우 작을 수 있다. 따라서 시야(field of view)가 좁아지고, 볼 수 있는 특정 각도 범위는 주어진 시간에 눈의 위치에 크게 좌우된다.
동공확장기(pupil expander)는 이미지를 형성하기 위해 디스플레이장치에서 전파된 광선이 눈의 동공을 지나 성공적으로 전파될 수 있는 광선의 각도 범위를 증가시켜야 하는 문제를 해결한다. 일반적으로 디스플레이장치는 (상대적으로) 작고 투영 거리(projection distance)는 (상대적으로) 멀다. 일부 예시들에서, 투영 거리는 디스플레이장치의 입사동공(entrance pupil) 및/또는 개구의 직경 또는 너비(즉, 픽셀들의 어레이의 크기이다)보다 최소한 수십배에서 수백배는 길다. 본 개시의 예시들은 이미지 그 자체가 아닌, 이미지의 홀로그램을 사람의 눈에 전파하는 구성에 관한 것이다. 즉, 이미지의 홀로그램에 따라 (또는 홀로그램에 의해/홀로그램과 함께 인코딩된) 뷰어가 받는 광이 변조된다. 그러나, 본 발명의 다른 예시들은 홀로그램이 아닌 이미지가 인간의 눈에 전파되는 구성에 관한 것일 수 있다. 예를 들어, 간접보기(indirect view)라고 불리는 것으로서, 홀로그램 재구성된 광 또는 스크린에서 (또는 자유공간에서도) 형성된 "재생 이미지(replay image)"가 사람의 눈에 전파될 수 있다.
도파관은 시야를 확장하기 위해 사용되며 따라서 디스플레이장치의 전체 회절 각도가 사용될 수 있는 최대 전파 거리가 증가한다. 도파관을 사용하면 사용자의 아이-박스가 측면으로 증가할 수 있으며 사용자가 이미지를 보면서 눈(들)이 일부 움직일 수 있도록 할 수 있다. 따라서 도파관은 도파관 동공확장기(waveguide pupil expander)로 지칭될 수 있다. 그러나 본 발명자들은 무한하지 않은 허상이미지 거리, 즉 근거리 허상이미지에 대해 소위 '고스트 이미지'가 도파관을 통과하는 다양한 광 전파 경로들로 인해 나타난다는 것을 발견했다. 고스트 이미지는 주 이미지(main image)의 낮은 세기의 복제물이다. 가장 높은 세기의 주 이미지는 1차 이미지(primary image)로 지칭될 수 있다. 각각의 고스트 이미지는 2차 이미지로 지칭될 수 있다. 고스트 이미지의 존재는 인식된 허상이미지의 품질을 크게 저하시킬 수 있다. 고스트 이미지는 1차 이미지가 흐릿해진 것으로 보일 수 있다.
본 발명은 부분적으로, 포인트 클라우드 홀로그램과 같은 홀로그램을 계산하기 위한 개선된 기술로 프로젝터(광학시스템)에서 도파관의 사용으로 인한 고스트 이미지 때문에 발생하는 문제를 해결하는 것에 관한 것이다.
동공확장기의 사용은 뷰잉 영역(viewing area)(즉, 사용자의 아이-박스(eye-box))을 측면으로 확장시켜서 사용자가 이미지를 계속 볼 수 있도록 하면서도 눈의 움직임을 일부 가능하게 한다. 통상의 기술자가 이해할 수 있는 바와 같이, 이미징 시스템(imaging system)에서 뷰잉 영역(사용자의 아이-박스)은 뷰어의 눈이 이미지를 인식할 수 있는 영역이다. 본 개시는 무한하지 않은 허상이미지의 거리들, 즉 근거리 허상이미지들에 관한 것이다.
일반적으로 2차원 동공확장기는 각각 한 쌍의 대향하는 반사 표면을 사용하여 구성된 하나 이상의 1차원 광 도파관을 포함하며, 여기서 표면의 출력광(output light)은 뷰잉 윈도우(예를 들어, 뷰어가 보기 위한 아이-박스 또는 아이 모션 박스(eye motion box))를 형성한다. 디스플레이장치로부터 수신된 광(예를 들어, LCOS에서 방출되는 공간적으로 변조된 광)은 적어도 하나의 차원에서 시야(또는 뷰잉 영역)를 증가시키기 위해 각각의 도파관에서 복제된다. 특히, 도파관은 입사 파면의 진폭을 분할하여 여분의 광선 또는 "복제물(replicas)"을 생성함으로써 뷰잉 윈도우를 확대한다.
광학 도파관의 예시들에서, 제1 도파관 동공확장기의 대향 표면 쌍은 기다랗거나 연장된 표면들로서, 제1 차원을 따라서는 상대적으로 길고 제2 차원을 따라서는 상대적으로 짧다, 예를 들어 각각 서로에 대해 실질적으로 직교하는 차원에 대해서 두 개의 각기 다른 차원을 따라서는 상대적으로 짧다. 제1 표면 쌍의 사이의/로부터의 광의 반사/투과 과정은 광이 제1 도파관 동공확장기 내에서 전파되도록 구성되며, 광 전파의 일반적인 방향은 제1 도파관 동공확장기에서 상대적으로 긴 방향(즉, "연장된" 방향)이다.
회절된 광을 사용하여 이미지를 형성하고 실제 적용(예를 들어, 헤드업 디스플레이로서 자동차 산업)에 적합한 아이-박스 크기 및 시야를 제공하는 이미지 프로젝터(광학시스템)의 예시들이 본 명세서에 개시된다. 회절된 광은 회절 구조로부터 이미지의 홀로그램 재구성(예를 들어, 푸리에(Fourier) 또는 프레넬(Fresnel) 홀로그램 또는 포인트 클라우드 홀로그램과 같은 홀로그램)을 형성하는 광이다. 회절 및 회절 구조를 사용하려면 고밀도의 매우 작은 픽셀들(예: 1 마이크로미터)을 가지는 디스플레이장치가 필요하다 - 이는 실제 사용에서는 작은 디스플레이장치(예: 1 cm)를 의미한다. 본 발명의 발명자들은 회절된 광 필드(예를 들어, 발산하는(시준되지 않은) 광선 다발을 포함하는 회절된 광)를 갖는 2D 동공 확장을 제공하는 방법에 관한 문제를 해결하였다.
실시예들에서, 디스플레이 시스템은 회절된(예: 발산하는) 광을 제공하거나 형성하도록 구성된, 예를 들어 공간 광 변조기(spatial light modulator; SLM) 또는 액정 온 실리콘(Liquid Crystal on Silicon; LCoS) SLM과 같이 픽셀화된 디스플레이장치와 같은 디스플레이장치를 포함한다. 그러한 실시예들에서, 공간 광 변조기(SLM)의 개구는 시스템의 제한 개구(limiting aperture)이다. 즉, 공간 광 변조기의 개구 - 보다 구체적으로 SLM 내에 포함된 광 변조 픽셀의 어레이를 구분하는 영역의 크기 - 는 시스템에서 나갈 수 있는 광선 다발의 크기(예: 공간 범위)를 결정한다. 본 개시에 따르면, 시스템의 사출동공(exit pupil, 광의 회절을 위한 픽셀 크기를 갖는 작은 디스플레이장치로 인해 그 크기가 제한된다)은 적어도 하나의 동공확장기를 사용하여 공간 범위에서 더 넓거나, 더 크게 또는 더 확장되게 만들어진다는 점을 반영하기 위해 시스템의 사출동공이 확장된다고 서술된다.
회절된(예를 들어, 발산하는) 광 필드는 광 필드의 전파 방향과 실질적으로 직교하는 방향으로 정의되는 "광 필드 크기(light field size)"를 갖는다고 말할 수 있다. 광이 회절/발산되기 때문에 전파 거리에 따라 광 필드 크기가 증가한다.
본 개시에서 설명된 프로젝터의 일부 예시들에서, 회절된 광 필드는 홀로그램에 따라 공간적으로 변조된다. 다시 말해서, 그러한 실시예들에서, 회절광 필드는 "홀로그램 광 필드(holographic light field)"를 포함한다. 홀로그램은 픽셀화된 디스플레이장치에 표시될 수 있다. 홀로그램은 컴퓨터-생성 홀로그램(Computer-Generated Hologram, CGH)일 수 있다. 홀로그램은 푸리에 홀로그램(Fourier hologram) 또는 프레넬 홀로그램(Fresnel hologram) 또는 포인트-클라우드 홀로그램(point-cloud hologram) 또는 기타 적합한 유형의 홀로그램일 수 있다. 홀로그램은 선택적으로 홀로그램 광의 채널들을 형성하도록 계산될 수 있으며, 각 채널은 뷰어에 의해 보여지도록 (또는 허상이미지인 경우에는 지각되도록) 의도된 이미지의 서로 다른 각 부분에 대응한다. 픽셀화된 디스플레이장치는 복수의 상이한 홀로그램을 연속적으로 또는 순차적으로 디스플레이하도록 구성될 수 있다. 여기에 개시된 각각의 실시예들은 다중 홀로그램의 디스플레이에 적용될 수 있다.
제1 도파관 동공확장기의 출력 포트는 제2 도파관 동공확장기의 입력 포트에 연결될 수 있다. 제2 도파관 동공확장기는 (제1 도파관 동공확장기에 의해 출력되는 광 필드의 복제물의 일부를, 바람직하게는 대부분을, 바람직하게는 전부를 포함하는) 회절된 광 필드를 제2 도파관 동공확장기의 제3 평행면 쌍 사이의 내부 반사에 의해 입력 포트에서 각각의 출력 포트로 안내하도록 구성될 수 있다.
제1 도파관 동공확장기는 제1 방향으로 동공 확장 또는 복제를 제공하도록 구성될 수 있고, 제2 도파관 동공확장기는 다른 제2 방향으로 동공 확장 또는 복제를 제공하도록 구성될 수 있다. 제2 방향은 제1 방향과 실질적으로 직교할 수 있다. 제2 도파관 동공확장기는 제1 도파관 동공확장기가 제1 방향으로 제공한 동공 확장을 보존하고 제1 도파관 동공확장기로부터 수신하는 복제물의 일부, 바람직하게는 대부분, 바람직하게는 전부를 다른 제2 방향으로 확장(또는 복제)하도록 구성될 수 있다. 제2 도파관 동공확장기는 제1 도파관 동공확장기로부터 직접적 또는 간접적으로 광 필드를 수신하도록 구성될 수 있다. 제1 및 제2 도파관 동공확장기 사이의 광 필드의 전파 경로를 따라 하나 이상의 다른 구성요소가 제공될 수 있다.
제1 도파관 동공확장기는 실질적으로 기다란 형태(예를 들어, 막대(rod) 형태)일 수 있다. 제2 도파관 동공확장기는 실질적으로 평면(예를 들어, 직사각형 형태)일 수 있다. 제1 도파관 동공확장기의 기다란 형상은 제1 차원 방향으로의 길이에 의해 정의될 수 있다. 제2 도파관 동공확장기의 평면 또는 직사각형 형상은 제1 차원 방향으로의 길이 및 제1 차원과 실질적으로 직교하는 제2 차원 방향으로의 너비(width) 또는 폭(breadth)에 의해 정의될 수 있다. 제1 도파관 동공확장기의 제1 차원 방향으로의 크기(size) 또는 길이(length)는 제2 도파관 동공확장기의 제1 또는 제2 차원으로의 길이 또는 폭에 각각 대응하도록 만든다. 입력 포트를 포함하는 제2 도파관 동공확장기의 평행면 쌍의 제1 표면은 제1 도파관 동공확장기의 제1 평행면 쌍의 제1 표면 상의 출력 포트에 의해 정의된 영역에 대응하도록 형태, 크기, 및/또는 위치가 결정될 수 있다. 이로써 제2 도파관 동공확장기는 제1 도파관 동공확장기에 의해 출력된 각각의 복제물들을 전달받도록 구성된다.
제1 및 제2 도파관 동공확장기는 제1 방향 및 제1 방향에 수직인 제2 방향으로 통합적으로 동공 확장을 제공할 수 있고, 선택적으로, 여기서 제1 및 제2 방향을 포함하는 평면은 제2 도파관 동공확장기의 평면과 실질적으로 평행하다. 다시 말해서, 제2 도파관 동공확장기의 길이 및 너비를 각각 정의하는 제1 및 제2 차원은 각각 도파관 동공확장기가 동공 확장을 제공하는 제1 및 제2 방향 (또는 제2 및 제1 방향)에 평행할 수 있다. 제1 도파관 동공확장기와 제2 도파관 동공확장기의 조합은 일반적으로 "동공확장기(pupil expander)"로 지칭될 수 있다.
제1 및 제2 도파관 확장기에 의해 제공되는 확장/복제는 디스플레이 시스템의 사출동공을 두 방향 각각으로 확장시키는 효과가 있다고 말할 수 있다. 확장된 사출동공에 의해 정의된 영역은 결과적으로 확장된 아이-박스 영역(eye-box area)을 정의할 수 있으며, 여기서 뷰어는 회절된 또는 발산하는 광 필드의 입력 광을 수신할 수 있다. 아이-박스 영역은 뷰잉 평면(viewing plane)에 위치하거나 뷰잉 평면을 정의한다고 말할 수 있다.
사출동공(exit pupil)이 확장되는 두 개의 방향은 제1 및 제2 도파관 동공확장기가 복제/확장을 제공하는 제1 및 제2 방향과 동일 평면 상에 있거나 평행할 수 있다. 대안적으로, 광학 결합기(optical combiner), 예를 들어 차량의 윈드스크린(windscreen) (또는 윈드쉴드(windshield))와 같은 다른 구성요소를 포함하는 구성들에서, 사출동공은 윈드스크린과 같은 다른 구성요소로부터의 사출동공으로 간주될 수 있다. 그러한 구성에서, 사출동공은 제1 및 제2 도파관 동공확장기가 복제/확장을 제공하는 제1 및 제2 방향과 동일 평면 상에 있지 않고 평행하지 않을 수 있다. 예를 들어, 사출동공은 제1 및 제2 도파관 동공확장기가 복제/확장을 제공하는 제1 및 제2 방향에 실질적으로 수직일 수 있다.
뷰잉 평면 및/또는 아이-박스 영역은 제1 및 제2 도파관 동공확장기가 복제/확장을 제공하는 제1 및 제2 방향과 동일 평면 상에 있지 않거나 평행하지 않을 수 있다. 예를 들어, 뷰잉 평면은 제1 및 제2 도파관 동공확장기가 복제/확장을 제공하는 제1 및 제2 방향에 실질적으로 수직일 수 있다.
제1 및 제2 도파관 동공확장기 내에서 내부 반사를 달성하기 위한 적절한 전송조건을 제공하기 위해, 제1 도파관 동공확장기의 긴 차원이 제2 도파관 동공확장기의 제1 및 제2 차원에 대해 기울어질 수 있다.
제1 및 제2 도파관 동공확장기 내에서 내부 반사를 달성하기 위한 적절한 전송조건을 제공하기 위해, 제1 도파관 동공확장기의 긴 차원이 제2 도파관 동공확장기의 제1 및 제2 차원에 대해 기울어질 수 있다.
디스플레이장치는 제1 치수가 10 cms 미만(예컨대 5 cms 미만 또는 2 cms 미만)일 수 있는 액티브 영역(active area) 또는 디스플레이 영역을 가질 수 있다. 디스플레이장치와 뷰잉 시스템 사이의 전파 거리는 1 m 초과(예컨대 1.5 m 초과 또는 2 m 초과)일 수 있다. 도파관 내의 광 전파 거리는 최대 2 m(예컨대 최대 1.5 m 또는 최대 1 m)일 수 있다. 본 개시에 따른 방법으로 20 ms 미만(예컨대 15 ms 미만 또는 10 ms 미만)에 이미지를 수신하고 이미지에 대응하는 충분한 품질의 홀로그램을 결정할 수 있다.
일부 예시들은 본 개시에 따른 회절 또는 홀로그램 광 필드의 예시로서만 설명되며, 일부 실시예들에서 홀로그램은 광을 복수의 채널로 전송(route)하도록 구성되며, 각각의 채널은 이미지의 서로 다른 부분(즉, 하위 영역, sub-area)에 대응한다. 홀로그램은 공간 광 변조기와 같은 디스플레이장치에 디스플레이되는 등으로 표시될 수 있다. 적합한 디스플레이장치에서 디스플레이될 때 홀로그램은 광을 뷰잉 시스템에 의해 이미지로 변환 가능하도록 공간적으로 변조할 수 있다. (홀로그램을 포함하는) 회절 구조에 의해 형성된 채널들은 단지 이미지 정보를 포함하는 홀로그램에 의해서 인코딩된 광의 채널들이라는 것을 나타내기 위해 여기에서 "홀로그램 채널(hologram channels)"이라고 지칭한다. 각 채널의 광은 이미지 도메인 또는 공간 도메인이 아닌 홀로그램 도메인에 있다고 할 수 있다. 일부 예시들에서, 홀로그램은 푸리에(Fourier) 또는 푸리에 변환 홀로그램(Fourier transform hologram)이고 따라서 홀로그램 도메인은 푸리에 도메인 또는 주파수 도메인이다. 홀로그램은 프레넬(Fresnel) 또는 프레넬 변환 홀로그램(Fresnel transform hologram)일 수 있다. 단지 홀로그램으로부터 재구성될 수 있는 이미지가 유한한 크기를 갖고 복수의 하위 영역으로 임의로 분할될 수 있다는 것을 나타내기 위해 홀로그램은 광을 복수의 홀로그램 채널로 전송(routing)하는 것으로 여기에서 설명되며, 여기서 각각의 홀로그램 채널은 각각의 이미지 하위 영역에 해당한다. 중요한 점은 본 실시예의 홀로그램은 조사(illuminate)될 때 이미지 콘텐츠(image content)를 분배하는 방식에 특징이 있다는 점이다. 특히 홀로그램은 이미지 콘텐츠를 각도에 따라서 나눈다. 즉, 이미지의 각 점은 홀로그램에 의해 형성되는 공간적으로 변조된 광이 조사될 때 고유한 광선 각도와 관련이 있다. 홀로그램이 2차원이기 때문에 최소한 두 개의 고유한 각도를 가진다. 의심을 피하기 위해 말하자면 본 홀로그램의 동작은 종래와는 다르다. 이 특별한 유형의 홀로그램에 의해 형성된 공간적으로 변조된 광은 조사될 때 복수의 홀로그램 채널들로 임의로 분할될 수 있으며, 여기서 각각의 홀로그램 채널은 (2차원에서) 광선 각도들의 범위에 의해 정의된다. 공간적으로 변조된 광에서 고려될 수 있는 임의의 홀로그램 채널(즉, 광선 각도의 하위 범위)은 이미지의 각 부분 또는 하위 영역과 연관될 것이라는 점을 전술한 내용으로부터 이해할 수 있다. 즉, 이미지의 해당 부분 또는 하위 영역을 재구성하는 데 필요한 모든 정보는 이미지의 홀로그램에서 형성된 공간적으로 변조된 광의 하위 각도 범위 내에 포함되어 있다. 공간적으로 변조된 광이 전체적으로 관찰될 때, 반드시 복수의 개별 광 채널에 대한 어떠한 단서가 존재하는 것은 아니다. 그러나 일부 구성들에서는, 복수의 공간적으로 분리된 홀로그램 채널은 홀로그램이 계산되는 대상 이미지(target image)의 영역을 의도적으로 빈칸 또는 공백(즉, 이미지 콘텐츠가 존재하지 않는다)으로 남겨둠으로써 형성된다.
그럼에도 불구하고 홀로그램은 여전히 식별될 수 있다. 예를 들어, 홀로그램에 의해 형성된 공간적으로 변조된 광의 연속적인 부분 또는 하위 영역만 재구성되는 경우에는 오직 이미지의 하위 영역만 보여야 한다. 공간적으로 변조된 광의 다른 연속적인 부분 또는 하위 영역이 재구성되는 경우에는 이미지의 다른 하위 영역이 표시되어야 한다. 이러한 유형의 홀로그램의 추가적인 식별 가능한 특징은 홀로그램이 계산되는 평면이 정확하게 평면이라면 홀로그램 채널의 단면적 모양과 입사동공(entrance pupil)의 모양이 크기가 다를 수 있어도 실질적으로 일치한다는 점이다(즉, 실질적으로 동일하다). 각각의 광/홀로그램 채널은 다른 각도 또는 각도 범위에서 홀로그램으로부터 전파된다. 이들은 이러한 유형의 홀로그램을 특징짓거나 식별하는 예시적인 방법들이며, 다른 방법이 사용될 수 있다. 요약하면, 본 명세서에 개시된 (특정 유형의) 홀로그램은 이미지 콘텐츠가 홀로그램에 의해 인코딩된 광 내에서 어떻게 분배되는지에 따라 특징지어지며 식별가능하게 된다. 의심의 여지를 피하기 위해, 다시 언급하자면, 복수의 홀로그램 채널로 광을 안내하거나 이미지를 각도에 따라 분할하도록 구성된 홀로그램에 대한 본 개시의 내용은 단지 예로서 이루어지며 본 개시는 모든 유형의 홀로그램 광 필드 또는 나아가 모든 유형의 회절 가능하거나 회절된 광 필드의 동공 확장에 동일하게 적용될 수 있다.
입력광 필드에 대한 동공 확장을 제공하는 시스템이 본 명세서에서 광범위하게 개시되며, 여기서 입력광 필드는 회절된 광 필드 또는 발산 광선 다발을 포함하는 홀로그램 광 필드이다. 일부 실시예에서, 광선 다발이 발산(또는 수렴) 빔을 형성하도록 입력 광 필드의 크기는 전파 거리에 따라 변한다. 이러한 경우 광선 다발의 광선들은 서로 다른 광선 각도/방향을 갖는다. 상술한 바와 같이, 동공 확장("이미지 복제" 또는 "복제" 또는 "동공 복제"라고 지칭되기도 한다)은 하나 이상의 입력광선(또는 광 다발)의 복제물을 생성해서 뷰어가 이미지를 볼 수 있는(또는 뷰어의 눈이 이미지를 형성하는 홀로그램 광을 수신할 수 있는) 영역의 크기를 확장할 수 있도록 한다. 동공 확장은 하나 이상의 차원으로 제공될 수 있다. 예를 들어, 2차원 동공 확장이 제공될 수 있으며, 각 차원은 서로에 대해 실질적으로 직교한다.
시스템은 간결하고 단순한 물리적 형태로 제공될 수 있다. 이를 통해 공간이 제한적이고 공간적 비용이 높은 경우를 포함하는 광범위한 실제 적용들에 본 시스템이 사용 적합해질 수 있게 된다. 예를 들어, 차량이나 자동차의 HUD와 같은 헤드-업 디스플레이(head-up display, HUD)에 구현될 수 있다.
본 개시에 따르면, 발산하는 광선 다발을 포함할 수 있는 회절된 광 또는 회절광에 대해 동공 확장이 제공된다. 회절된 광 또는 회절광은 홀로그램과 같은 회절 구조를 표시하도록 구성된 공간 광 변조기(SLM)와 같은 픽셀화된(pixelated) 디스플레이장치 같은 디스플레이장치에 의해 출력될 수 있다. 회절된 광 필드는 "광원뿔(light cone)"로 정의될 수 있다. 따라서, 발산 광 필드에서, (2차원 평면에서 정의되는) 회절된 광 필드의 크기는 대응하는 회절 구조(즉, 디스플레이장치)로부터의 전파 거리에 따라 증가한다.
공간 광 변조기는 홀로그램(또는 홀로그램을 포함하는 회절 패턴)을 디스플레이하도록 구성될 수 있다. 회절된 또는 발산하는 광은 이미지 또는 홀로그램 재구성의 광과는 대조적으로 홀로그램으로/홀로그램에 의해 인코딩된 광을 포함할 수 있다. 따라서 이러한 프로젝터(광학시스템)의 예시들에서 뷰어에게 전달되는 광이 이미지 자체가 아니라 이미지의 홀로그램에 따라 공간적으로 변조되도록 동공확장기는 홀로그램을 복제하거나 적어도 하나의 홀로그램 복제물을 형성한다고 말할 수 있다. 즉, 회절된 광 필드가 뷰어에게 전파된다.
프로젝터(광학시스템)의 일부 예시에서, 두 개의 1차원 도파관 동공확장기가 제공되며, 각각의 1차원 도파관 동공확장기는 공간 광 변조기의 사출동공(또는 사출동공의 광)의 복수의 복제물 또는 복제물을 형성해서 효과적으로 사출동공의 크기를 확장할 수 있도록 구성된다. 사출동공은 시스템에 의해서 광이 출력되는 물리적 영역으로 이해될 수 있다. 또한 각 도파관 동공확장기는 시스템의 사출동공의 크기를 확장하도록 구성된다고 말할 수 있다. 또한 각 도파관 동공확장기는 시스템에서 출력되는 광을 보고/수신하기 위해 뷰어의 눈이 위치할 수 있는 아이-박스의 크기를 확장/확대하도록 구성된다고 말할 수 있다.
본 발명은 광학시스템에 대한 허상이미지의 홀로그램을 계산하는 방법을 제공한다. 광학시스템은 홀로그램을 디스플레이하도록 구성된 디스플레이장치를 포함한다. 광학시스템은 디스플레이된 홀로그램을 수신하고 복제하도록 구성된 도파관을 더 포함한다. 본 방법은 허상이미지의 각각의 허상이미지 포인트의 서브홀로그램을 결정하는 과정을 포함한다. 각 서브홀로그램은 디스플레이장치의 영역 내에서 제한/규정된다. 디스플레이장치의 영역은 도파관에 의해 형성된 디스플레이장치 및 이의 가상 복제물들을 포함하는 가상 표면의 영역에 대응한다. 가상 표면의 영역은 각 허상이미지 포인트로부터 뷰잉 시스템의 입사동공 주변부(perimeter)까지의 직선 경로들에 의해 규정(defined)/구분(delineated)/경계 지정(bounded)된다. 서브홀로그램을 위한 디스플레이장치의 영역은 직선으로 규정된 가상 복제물 또는 복제물들의 영역에 공간적으로 대응한다. 적어도 하나의 서브홀로그램의 적어도 일 구성요소 - 그렇지 않은 경우, 적어도 하나의 서브홀로그램 전체 - 가, 예컨대 도파관에 의해 형성된 디스플레이장치의 "가상 복제물"에 대응하는 위치(예: 평면)에서 결정되고 계산된다.
본 발명의 일 측면에 따르면, 홀로그램을 계산하는 방법이 제공된다. 홀로그램은 광학시스템에 대한 허상이미지의 홀로그램이다. 광학시스템은 디스플레이장치와 도파관을 포함한다. 도파관은 1차원 도파관일 수 있다. 광학시스템은 디스플레이된 홀로그램의 2차원 복제 및/또는 디스플레이장치의 사출동공의 2차원 확장을 제공하도록 구성된 한 쌍의 직교 1차원 도파관을 포함할 수 있다. 디스플레이장치는 홀로그램을 디스플레이하도록 구성된다. 도파관은 홀로그램을 복제하도록 구성된다. 본 방법은 허상이미지 포인트로부터 뷰어의 입사동공 주변부까지의 직선 경로들에 의해 규정된 영역 내에서 허상이미지 포인트의 서브홀로그램을 결정하는 과정을 포함한다. 허상이미지 포인트는 허상이미지의 복수의 허상이미지 포인트들 중 하나의 허상이미지 포인트일 수 있다. 영역은 도파관에 의해 형성된 디스플레이장치의 가상 복제물의 적어도 일부를 포함한다.
실시예들에서, 본 방법은 허상이미지와 도파관 사이의 가상 표면을 식별하는 과정을 포함한다. 가상 표면은 디스플레이장치 및 도파관에 의해 형성된 디스플레이장치의 복수의 복제물들을 포함한다. 방법은 가상 표면 상의 영역을 식별하는 과정을 더 포함한다.
일부 실시예들에서, 디스플레이장치의 제1 가상 복제물의 제1 영역 내에서 제1 허상이미지 포인트의 제1 서브홀로그램이 결정된다.
다른 실시예들에서, 제1 허상이미지 포인트의 제1 서브홀로그램은 제1 서브홀로그램 구성요소 및 제2 서브홀로그램 구성요소를 포함한다. 일 예시에서, 제1 서브홀로그램 구성요소는 디스플레이장치의 제1 가상 복제물의 제1 영역 내에서 결정되고 제2 서브홀로그램 구성요소는 디스플레이장치의 제2 가상 복제물의 제2 영역 내에서 결정된다. 다른 예시에서, 제1 서브홀로그램 구성요소는 디스플레이장치의 제1 가상 복제물의 제1 영역 내에서 결정되고 제2 서브홀로그램 구성요소는 디스플레이장치의 제2 영역 내에서 결정된다. 이 실시예들의 방법은 제1 허상이미지 포인트의 제1 서브홀로그램을 형성하기 위해 제1 서브홀로그램 구성요소와 제2 서브홀로그램 구성요소를 중첩시키는(superimposing) 과정을 더 포함할 수 있다. 일부 실시예들에서, 서브홀로그램 구성요소는 그 크기가 임계값보다 작은 경우 중첩하는 과정으로부터 제거된다. 일부 실시예들에서, 중첩되는 경우 오버랩(overlap)될 제1 서브홀로그램 구성요소 및 제2 서브홀로그램 구성요소의 임의의 부분들은 중첩 과정으로부터 제거된다.
실시예들에서, 본 방법은 허상이미지의 복수의 허상이미지 포인트들의 각 허상이미지 포인트의 각각의 서브홀로그램을 계산하는 과정을 더 포함한다. 각 서브-홀로그램은 허상이미지의 홀로그램을 형성하기 위해 중첩될 수 있다.
실시예들에서, 각 서브홀로그램은 대응하는 허상이미지 포인트로부터 뷰어를 향해 광파를 전파하고 영역의 대응하는 위치에 도달하는 복소 광 필드를 결정함으로써 결정되는 포인트 클라우드 홀로그램이며, 선택적으로 광파는 구형 광파(spherical light wave) 또는 "웨이블릿(wavelet)"이다. 통상의 기술자가 이해하는 바와 같이, 각 서브홀로그램의 결정은 파면/복소 광 필드를 형성하기 위해 광파(웨이블릿)의 전파를 시뮬레이션함으로써 계산적으로 수행될 수 있다.
구현예시들에서, 도파관에 의해 형성된 디스플레이장치의 각 가상 복제물은 디스플레이장치의 가상 복제물들의 엇갈린(staggered) 가상 표면이 형성되도록 디스플레이장치로부터 상이한 수직(perpendicular) 거리에 있다. 예시들에서, 디스플레이장치의 각각의 가상 복제물은 도파관에 의해 형성된 홀로그램의 각 복제물에 대응한다. 본 방법은 디스플레이장치로부터 도파관에 의해 형성된 홀로그램의 대응하는 복제물까지의 도파관 내의 광학적 경로를 전개함으로써 디스플레이장치의 각 가상 복제물의 위치를 결정하는 과정을 포함할 수 있다.
본 개시의 다른 측면에서, 홀로그램을 계산하는 방법이 제공된다. 홀로그램은 홀로그램을 표시하도록 구성된 디스플레이장치 및 홀로그램을 복제하도록 구성된 도파관을 포함하는 광학시스템에 대한 허상이미지의 홀로그램이다. 본 방법은 허상이미지의 각 허상이미지 포인트의 서브홀로그램을 결정하는 과정을 포함한다. 각 서브홀로그램은, 각각의 허상이미지 포인트로부터 뷰어를 향해 광파를 전파하는 과정; 허상이미지와 뷰어 사이의 가상 표면에서 전파하는 광파의 교차 영역을 규정하고, 가상 표면은 디스플레이장치 및 도파관에 의해 형성된 디스플레이장치의 복수의 가상 복제물을 포함하고, 규정된 영역은 각각의 허상이미지 포인트에서 뷰어의 눈의 입사동공 주변부까지의 직선 경로로 경계가 지정되는 과정; 복소 광 필드의 규정된 영역의 하나 이상의 하위 영역을 식별하고, 각 하위 영역은 디스플레이장치 및 복수의 가상 복제물 중 다른 하나에 대응하는 위치에서 가상 표면과 교차한다. 복소 광 필드의 하나 이상의 하위 영역 각각은 서브홀로그램의 각 구성 요소를 형성한다.
실시예들에서, 디스플레이장치 및 복수의 가상 복제물들을 포함하는 가상 표면은 "엇갈리게 배치(staggered)"된다. 특히, 디스플레이장치의 복제물 각각은 각 복제물과 연관된 도파관에서 상이한 경로 길이로 인해 디스플레이장치로부터 상이한 수직 거리에 있다. 따라서 각 복제물과 연관된 가상 표면의 일부(예: x, y 차원으로)는 디스플레이장치로부터 수직 방향(예: z 차원)으로 오프셋된다.
홀로그램을 표시하도록 구성된 디스플레이장치 및 서브홀로그램을 복제하도록 구성된 도파관을 포함하는 광학시스템에 대한 허상이미지 포인트의 서브홀로그램을 결정하는 방법이 제공된다. 이 방법은 허상이미지 포인트로부터 뷰어의 입사동공 주변부까지의 직선 경로에 의해 규정된 영역 내에서 서브홀로그램을 결정하는 과정을 포함한다. 영역은 도파관에 의해 형성된 디스플레이장치의 복제물의 적어도 일부를 포함한다. 복수의 허상이미지 포인트들을 포함하는 허상이미지의 홀로그램을 결정하는 방법으로서, 허상이미지의 각 허상이미지 포인트에 대해 서브홀로그램을 결정하는 방법을 반복하는 과정을 포함하는 방법이 더 제공된다.
실시예들에서, 포인트 클라우드 홀로그램을 계산하는 방법이 제공된다. 포인트 클라우드 홀로그램은 홀로그램을 표시하도록 구성된 디스플레이장치 및 홀로그램을 복제하도록 구성된 도파관을 포함하는 광학시스템에 대한 허상이미지의 홀로그램이다. 이 방법은 디스플레이장치의 위치에 대응하는 위치에 포인트 클라우드 서브홀로그램을 형성하는 과정을 포함한다. 이 방법은 또한 도파관에 의해 형성된 디스플레이장치의 각 가상 복제물에 대응하는 각각의 위치에 포인트 클라우드 서브홀로그램을 형성하는 과정을 포함한다. 각 포인트 클라우드 서브홀로그램은 뷰어의 입사동공을 통과할 수 있는 허상이미지의 광선들만을 사용하여 형성된다.
실시예들에서, 본 방법은 디스플레이장치로부터 홀로그램의 복제물까지 도파관 내의 대응하는 광학적 경로를 전개함으로써 디스플레이장치의 각 복제물의 위치를 결정하는 과정을 포함한다.
본 개시의 다른 측면에서, 홀로그램 엔진이 제공된다. 홀로그램 엔진은 홀로그램을 표시하도록 구성된 디스플레이장치 및 홀로그램을 복제하도록 구성된 도파관을 포함하는 광학시스템에 대한 허상이미지의 홀로그램을 계산하도록 구성된다. 홀로그램 엔진은 허상이미지 포인트로부터 뷰어의 입사동공 주변까지의 직선 경로에 의해 규정된 영역 내에서 허상이미지 포인트의 서브홀로그램을 결정하도록 구성된다. 영역은 도파관에 의해 형성된 디스플레이장치의 가상 복제물의 적어도 일부를 포함한다.
용어 "허상이미지"는 디스플레이장치의 업스트림에서 형성된 이미지 또는 홀로그램 재구성을 지칭하기 위해 본 명세서에서 사용된다. 즉, 디스플레이장치는 허상이미지와 뷰어 사이에 있다. 즉, 허상이미지에서 뷰어까지의 거리는 디스플레이장치에서 뷰어까지의 거리보다 멀다. 광학 분야의 통상의 기술자는 뷰어가 허상이미지를 디스플레이장치를 통해 효과적으로 본다는 것을 이해할 것이다. 허상이미지는 디스플레이장치 몇 미터 뒤에서 인지될 수 있다. 따라서 통상의 기술자는 허상이미지로부터 디스플레이장치 또는 디스플레이장치를 포함하는 확장된 표면을 통해 디스플레이장치의 다른 측면에 있는 뷰어까지의 광선 경로를 고려할 수 있는 방법을 이해할 것이다.
디스플레이장치에 형성된 복수의 홀로그램의 각 홀로그램 및 그 복제물들과 관련하여 접두사 "서브(sub)"는 전체 허상이미지의 최종적인/결합된 홀로그램과 구별하고 각각이 홀로그램의 구성요소임을 나타내기 위해 사용된다. 홀로그램은 포인트 클라우드 홀로그램일 수 있다. 따라서 서브홀로그램 및 서브홀로그램 구성요소들은 각각 포인트 클라우드 서브홀로그램 또는 포인트 클라우드 서브홀로그램 구성요소들일 수도 있다.
본 명세서에 기술된 바와 같이, 도파관은 디스플레이장치의 복제물(본 명세서에서 "가상 복제물(virtual replicas)"이라고도 함)의 어레이를 효과적으로 형성하며, 각 디스플레이장치 복제물은 홀로그램의 각 복제물에 대응한다. 복제 디스플레이장치의 어레이는 본 명세서에서 "엇갈린 표면(staggered surface)"으로 지칭된다. 복제물이 디스플레이장치의 표면에 수직인 방향(예: z 방향)으로 공간적으로 분리되기 때문에 "표면"은 연속적이지 않다. 표면은 z 방향으로 상이한 디스플레이장치 복제물의 이러한 변화하는 분리를 반영하기 위해 "엇갈린" 것으로 지칭된다. 일반적으로 디스플레이장치 복제물들은 z 방향으로 공간적으로 오프셋된 상이한 x, y 평면들 상에 있다(왜도가 없는 경우). 하나의 도파관을 사용하여 1차원에서 복제하는 경우, 엇갈린 표면은 계단의 라이저(riser)가 없는 일련의 독립형 계단(free-standing steps)과 유사할 수 있다. 동공 확장 분야에서 알려진 바와 같이 두 개의 직교 도파관을 사용하여 두 개의 직교 방향으로 복제하는 경우, 엇갈린 표면은 두 개의 방향(예: x 및 y)으로 효과적으로 엇갈리게 되지만 z 방향으로는 표면 구성 요소가 없다. "가상 표면", "엇갈린 확장변조기" 및 "확장된 표면"이라는 용어들 또한 도파관에 의해 형성된 디스플레이장치의 복제 어레이를 지칭하기 위해 본 명세서에서 사용될 수 있다. 본 발명은 각 허상이미지 포인트로부터 뷰잉 시스템의 입사동공의 주변부까지의 직선 경로에 의해 규정된 엇갈린 또는 가상 표면의 영역에 공간적으로 대응하는 디스플레이장치의 영역 내에서 각각의 서브홀로그램이 어떻게 제한/규정되는지를 설명한다. 엇갈린 표면 또는 가상 표면의 영역은 서브홀로그램에 사용될 디스플레이장치의 "기여 영역(contributory area)"을 효과적으로 규정한다.
도파관 내 광학적 경로를 "전개하는(unfold)" 과정은 출력 포트를 통해 도파관을 나가는 광선(즉, 복제물의 광선)을 도파관 내에서 내부 반사 없이 가상 표면으로 다시 직선 외삽(straight-line extrapolate)하는 과정을 참조하여 설명된다. 복제물의 모든 광선들을 가상 표면으로 다시 외삽함으로써 디스플레이장치의 대응하는 가상 복제물의 장소(location) 또는 위치(position)가 식별된다. 디스플레이장치의 각 가상 복제물은 각 복제물과 연관된 도파관 내의 상이한 광학적 경로 길이로 인해 뷰어로부터 상이한 거리에 있다. 본 발명은 디스플레이장치, 예를 들어 xy 평면 상에서 위치 또는 공간 정보를 보존하는 홀로그램들을 결합하는 과정을 참조하여 서브홀로그램 및 서브홀로그램의 구성요소를 "중첩"하는 과정을 설명한다.
다양한 "위치(positions)"에서 서브홀로그램 또는 서브홀로그램 구성요소를 결정하는 것은 본 개시에서 디스플레이장치의 표면에 수직(normal)인 방향으로의 위치를 참조하여 참조되며, 이는 본 개시에서 전파 또는 투영 축(projection axis)으로도 지칭될 수 있다. 광학 분야의 통상의 기술자에게 익숙하듯이 전파 축은 일반적으로 z축으로 규정된다. 디스플레이장치 및 그의 가상 복제물들은 각각 일반적으로 xy 평면 상에서 규정된다. 일부 실시예들에서, 포인트 클라우드 홀로그램은 설명된 평면 또는 "위치"로 광파를 전파함으로써 결정된다.
본 개시에서 각 서브홀로그램을 직선으로 규정된/경계가 지어진/구분된 영역 또는 영역들로 제한하는 것(또는 내부에서 각 서브홀로그램을 규정하는 것)이 참조된다. 각 영역은 가상 표면의 영역에 의해 규정되거나 그에 상응하는 디스플레이장치의 영역이다. 예를 들어, 직선으로 단일 가상 복제물의 중간에 있는 영역이 규정되는 경우, 서브홀로그램은 디스플레이장치의 해당 중간 영역으로 제한/규정된다. 마찬가지로 직선이 둘 이상의 가상 복제물과 교차하는 경우, 가상 복제물의 각 영역(또는 가상 표면의 윤곽이 지정된(delineated) 영역의 "하위 영역(sub-area)")은 디스플레이장치의 해당 영역(또는 "하위 영역")을 효과적으로 규정한다. 일부 실시예들에서, 중첩 영역들은 상이한 가상 복제물 상에서 규정되며 이러한 영역들은 본 명세서에 개시된 추가 개선 사항에 따라 다르게 취급될 수 있다.
의심의 여지를 없애기 위해 말하자면, 형성되거나 인식되는 이미지는 대상 이미지의 홀로그램 재구성이다. 홀로그램 재구성은 대상 이미지를 기반으로 홀로그램으로부터 형성된다. 일부 실시예들에서, 홀로그램은 대상 이미지로부터 결정(예를 들어, 계산)된다.
본 명세서에 개시된 방법은 주 이미지의 허상이미지 포인트들을 형성하기 위한 기여 광 경로(contributory light paths)를 식별(identify)한다. 기여 광 경로는 허상이미지로부터 뷰어의 입사동공을 통과하여 이미지 형성에 기여하는 광 경로이다. 따라서 이 방법은 1차 이미지의 복사/복제 또는 '고스트' 버전에 기여하는 광 경로를 고려하지 않는다. 따라서 계산된 홀로그램의 모든 "서브홀로그램"은 '주(main)' 대상 이미지에 긍정적으로 기여한다.
본 개시에서, "복제물"이라는 용어는 단지 공간적으로 변조된 광이 분할되어 복소 광 필드가 복수의 상이한 광학적 경로를 따라 안내되는 것을 나타내는 데 사용된다. "복제물"이라는 단어는 동공확장기에 의한 부분 반사-투과와 같은 복제 이벤트 후에 각각의 복소 광 필드의 발생 또는 그 객체(instance)를 나타내는 데 사용된다. 각 복제물은 서로 다른 광학적 경로를 따라 이동한다. 본 개시의 일부 실시예들은 이미지가 아닌 홀로그램으로 인코딩된 광의 전파에 관한 것이다. 즉, 이미지 자체가 아니라 이미지의 홀로그램으로 공간적으로 변조된 광이다. 홀로그래피 기술 분야의 통상의 기술자는 홀로그램으로 인코딩된 광의 전파와 관련된 복소 광 필드가 전파 거리에 따라 변한다는 것을 이해할 것이다. 여기에서 "복제물"이라는 용어의 사용은 전파 거리와 무관하므로 복제 이벤트와 관련된 광의 두 분기(branch) 또는 경로(path)는 복소 광 필드가 각 경로를 따라 다르게 진행하는 것과 같이 분기의 길이가 다른 경우에도 여전히 서로 "복제물"이라고 지칭한다. 즉, 두 개의 복소 광 필드가 동일한 복제 이벤트 또는 일련의 복제 이벤트에서 발생하는 경우에는 서로 다른 전파 거리와 관련되더라도 본 개시에 따라 여전히 "복제물"으로 간주된다.
본 개시에 따른 "회절된 광 필드(diffracted light field)" 또는 "회절광 필드(diffractive light field)"는 회절에 의해 형성된 광 필드이다. 회절된 광 필드는 그에 대응하는 회절 패턴을 조사(illuminate)함으로써 형성될 수 있다. 본 개시에 따르면, 회절 패턴의 예는 홀로그램이고, 회절된 광 필드의 예는 홀로그램 광 필드 또는 이미지의 홀로그램 재구성을 형성하는 광 필드이다. 홀로그램 광 필드는 재생 평면(replay plane)에 이미지의 (홀로그램) 재구성을 형성한다. 홀로그램에서 재생 평면으로 전파되는 홀로그램 광 필드는 홀로그램으로(또는 홀로그램과 함께) 인코딩된 광 또는 홀로그램 도메인의 광을 포함한다고 말할 수 있다. 회절된 광 필드는 회절 구조의 가장 작은 피처 사이즈(feature size)와 (회절된 광 필드의) 광의 파장에 의해 결정되는 회절 각도를 특징으로 가진다. 본 개시에 따르면, "회절된 광 필드"는 또한 그에 대응하는 회절 구조로부터 공간적으로 분리된 평면 상에서 재구성을 형성하는 광 필드라고 말할 수 있다. 회절 구조로부터 뷰어에게 (예: 디스플레이장치로부터 뷰잉 시스템에게) 회절된 광 필드를 전파하기 위한 광학시스템이 여기에서 개시된다. 회절된 광 필드는 이미지를 형성할 수 있다.
용어 "홀로그램(hologram)"은 객체에 대한 진폭 정보 혹은 위상 정보 또는 이들의 일부 조합을 포함하는 레코딩(recording)을 지칭하는 데 사용된다. 용어 "홀로그램 재구성(holographic reconstruction)"은 홀로그램을 조사하여 형성된 객체의 광학적 재구성을 지칭하는 데 사용된다. 본 명세서에 개시된 시스템은, 홀로그램 재구성이 실제 이미지이고 홀로그램으로부터 공간적으로 분리되기 때문에, "홀로그래픽 프로젝터(holographic projector)"로서 설명된다. 용어 "재생 필드(replay field)"는 홀로그램 재구성이 형성되고 완전히 포커스되는 2D 영역(2D area)을 지칭하는 데 사용된다. 홀로그램이 픽셀들을 포함하는 공간 광 변조기 상에 표시되면, 재생 필드는 복수의 회절 차수(diffracted order)의 형태로 반복될 것이며, 여기서 각각의 회절된 차수는 0차 재생 필드(zeroth-order replay field)의 복제물이다. 0차 재생 필드는 가장 밝은 재생 필드이기 때문에 선호 혹은 일차적인 재생 필드에 일반적으로 해당한다. 달리 명시되지 않는 한, "재생 필드"라는 용어는 0차 재생 필드를 가리키는 것으로 간주되어야 한다. 용어 "재생 평면(replay plane)" 는 모든 재생 필드들을 포함하는 공간의 평면을 지칭하는 데 사용된다. 용어 "이미지(image)", "재생 이미지(replay image)" 및 "이미지 영역(image region)"은 홀로그램 재구성의 광(light)에 의해 비춰지는 재생 필드의 영역들을 지칭한다. 일부 실시예에서, "이미지"는 "이미지 스팟들(image spots)" 또는 편의상 "이미지 픽셀들(image pixels)"로 지칭될 수 있는 개별적인 스팟들을 포함할 수 있다.
용어 "인코딩(encoding)", "쓰기(writing)" 또는 "어드레싱(addressing)"은 각각의 픽셀의 변조 레벨을 결정하는 각각의 복수의 제어 값들을 SLM의 복수의 픽셀들에게 제공하는 프로세스를 기술하는 데 사용된다. SLM의 픽셀은 복수의 제어 값을 수신하는 것에 응답하여 광 변조 분포를 "표시(display)"하도록 구성된다고 말할 수 있다. 따라서, SLM은 홀로그램을 "표시"한다고 말할 수 있고 홀로그램은 광 변조 값들 혹은 레벨들의 어레이로 간주될 수 있다.
수용 가능한 품질의 홀로그램 재구성은 원래의 객체의 푸리에 변환과 관련된 위상 정보만을 포함하는 "홀로그램"으로부터 형성될 수 있음이 밝혀졌다. 이러한 홀로그래픽 레코딩은 위상-한정 홀로그램(phase-only hologram)으로 지칭될 수 있다. 실시예들은 위상-한정 홀로그램에 관한 것이지만, 본 개시는 진폭-한정 홀로그래피(amplitude-only holography)에도 동일하게 적용될 수 있다. 실시예들은 포인트 클라우드 홀로그램 - 즉, 포인트 클라우드 방법으로 생성된 홀로그램의 계산에 관한 것이다.
본 개시는 또한 원본 객체의 푸리에 변환과 관련된 진폭 및 위상 정보를 사용하여 홀로그램 재구성을 형성하는 데에도 동일하게 적용될 수 있다. 일부 실시예들에서, 이것은 원래의 객체와 관련된 진폭 및 위상 정보를 모두 포함하는 소위 완전-복소 홀로그램(fully complex hologram)을 이용하는 복소 변조에 의해 달성된다. 이러한 홀로그램은 홀로그램의 각 픽셀에 할당된 값(그레이 레벨)이 진폭 및 위상 성분을 갖기 때문에 완전-복소 홀로그램이라고 지칭될 수 있다. 각 픽셀에 할당된 값(그레이 레벨)은 진폭 및 위상 성분을 모두 갖는 복소수로 표현될 수 있다. 일부 실시예들에서, 완전-복소 컴퓨터-생성 홀로그램(fully-complex computer-generated hologram)이 계산된다.
컴퓨터-생성 홀로그램 또는 공간 광 변조기의 픽셀들의 위상 값, 위상 성분, 위상 정보 또는, 단순히, 위상이 "위상-지연(phase-delay)"의 약어로 참조될 수 있다. 즉, 설명된 모든 위상 값은, 실제로는, 해당 픽셀이 제공하는 위상-지연(phase retardation)의 양을 나타내는 (예컨대, 0 내지 2π 범위의) 숫자이다. 예를 들어, 위상 값이 π/2인 것으로 설명된 공간 광 변조기의 픽셀은 수신된 광의 위상을 π/2 라디안만큼 지연시킨다. 일부 실시예에서, 공간 광 변조기의 각 픽셀은 복수의 가능한 변조 값들(예를 들어, 위상 지연 값들) 중 하나로 작동 가능하다. 용어 "그레이 레벨(grey level)"은 복수의 이용 가능한 변조 레벨들을 지칭하기 위해 사용될 수 있다. 예를 들어, 용어 "그레이 레벨"은 상이한 위상 레벨들이 상이한 그레이 음영들을 제공하지 않더라도 위상-한정 변조기에서 복수의 이용 가능한 위상 레벨들을 지칭하기 위해 편의상 사용될 수 있다. 용어 "그레이 레벨"은 또한 복소 변조기에서 이용 가능한 복수의 복소 변조 레벨들을 지칭하기 위해 편의상 사용될 수 있다.
따라서 홀로그램은 그레이 레벨들의 어레이를 - 즉, 위상-지연 값들 또는 복소 변조 값들의 어레이와 같은 광 변조 값들의 어레이를 - 포함한다. 또한 홀로그램은, 공간 광 변조기에 디스플레이될 때 그리고 공간 광 변조기의 픽셀 피치(pixel pitch)에 필적하는, - 일반적으로 그보다는 작은 - 파장을 갖는 광으로 조사될 때, 회절을 유발하는 패턴이기 때문에, 회절 패턴으로 간주된다. 홀로그램을 렌즈 또는 그레이팅(grating)으로 기능하는 회절 패턴들과 같은 다른 회절 패턴들과 결합하는 것이 본 명세서에 참조된다. 예를 들어, 그레이팅(grating)으로 기능하는 회절 패턴이 재생 평면 상에 재생 필드를 변환하도록 홀로그램과 결합되거나, 렌즈로 기능하는 회절 패턴이 근거리 필드(near field)의 재생 평면 상에 홀로그램 재구성을 포커스하도록 홀로그램과 결합될 수 있다.
다양한 실시예들 및 실시예들의 그룹이 후술되는 상세한 설명에서 개별적으로 개시될 수 있지만, 임의의 실시예 또는 실시예들의 그룹의 임의의 특징은 임의의 실시예 또는 실시예들의 그룹의 임의의 다른 특징 또는 특징들의 조합(combination)과 결합될 수 있다. 즉, 본 개시에 개시된 특징의 모든 가능한 조합 및 순열(permutation)이 고려된다.
특정 실시예는 다음 도면을 참조하여 단지 예로서 설명된다:
도 1은 스크린 상에 홀로그램 재구성을 생성하는 반사 SLM을 도시하는 개략도이다.
도 2는 복수의 이미지 영역들(아래 부분) 및 복수의 홀로그램 구성요소를 포함하는 대응하는 홀로그램(위 부분)을 포함하는 이미지를 도시한다.
도 3은 홀로그램으로 인코딩된 광을 복수의 개별 홀로그램 채널로 안내하거나 채널링하는 것을 특징으로 하는 홀로그램을 도시한다.
도 4는 도 3의 각 홀로그램 채널의 광 콘텐츠를 상이한 광학적 경로를 통해 눈으로 안내하도록 구성된 시스템을 도시한다.
도 5는 빔을 2차원으로 확장하도록 구성된 한 쌍의 적층 이미지 복제기의 사시도를 도시한다.
도 6은 디스플레이장치 및 도파관에 의해 형성된 디스플레이장치의 복수의 복제물을 포함하는 3D 어레이를 포함하는 "확장변조기(extended modulator)" 또는 "가상 표면(virtual surface)"의 예시적인 시각화를 도시한다.
도 7은 홀로그램에 의해 홀로그램으로 재구성될 원하는 허상이미지의 제1 예시 이미지 포인트 및 제2 예시 이미지 포인트로부터 전파되는 파동의 경로를 나타내는, 확장변조기를 사용하여 포인트 클라우드 홀로그램을 계산하기 위한 구성을 도시한다.
도 8은 도 7의 구성의 제1 예시 이미지 포인트에 대한 서브홀로그램의 계산을 도시한다.
도 9는 도 7의 구성의 제2 예시 이미지 포인트에 대한 서브홀로그램의 계산을 도시한다.
도 10은 서브 홀로그램에서 확장변조기와 교차하는 영역에서 예시적인 복소 광 패턴(complex light pattern)의 하위 영역으로부터의 정보를 포함하기 위한 제1 기준을 도시한다.
도 11a는 대응하는 서브 홀로그램에서 확장변조기와 교차하는 영역에서 또 다른 예시적인 복소 광 패턴의 하위 영역으로부터의 정보를 포함하기 위한 제2 기준을 예시한다.
도 11b는 도 11a의 복소 광 패턴 및 제2 기준을 이용하여 형성된 서브홀로그램을 나타낸다.
도면 전체에 걸쳐 동일하거나 유사한 부분을 지칭하기 위해 동일한 참조 번호가 사용된다.
본 발명은 다음에 설명되는 실시예들에 제한되지 않으며, 첨부된 청구 범위의 전체 범위로 연장한다. 즉, 본 발명은 다른 형태들로 실시될 수 있으며 설명의 목적으로 기재된 실시예들에 한정되는 것으로 해석되어서는 안 된다.
단수형의 용어는 달리 명시되지 않는 한 복수형을 포함할 수 있다.
다른 구조물의 상부/하부 또는 상/하에 형성된 구조물이라고 기술된 경우, 구조물들이 서로 접촉하는 경우 및 제3의 구조물이 그 사이에 배치되는 경우를 포함하는 것으로 해석되어야 한다.
시간 관계를 기술함에 있어서, 사건의 시간 순서가 예를 들어 "후(after)", "후속(subsequent)", "다음(next)", "전(before)" 등으로 기술될 때, 본 개시는 별도로 규정하지 않는 한 연속적 및 비연속적인 사건을 포함하는 것으로 간주되어야 한다. 예를 들어, "막(just)", "바로(immediate)" 또는 "직접(direct)"이라는 기재가 사용되지 않는 한, 그 기재는 비연속적 경우를 포함하는 것으로 간주되어야 한다.
본 명세서에서 "제1", "제2" 등의 용어는 다양한 구성요소를 설명하기 위해 사용될 수 있지만, 이러한 구성요소는 이러한 용어에 의해 제한되지 않는다. 이러한 용어는 한 요소를 다른 요소와 구별하는 데만 사용된다. 예를 들어, 첨부된 특허청구범위의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
상이한 실시예들의 특징들은 부분적으로 또는 전체적으로 서로 연결되거나 결합될 수 있으며, 다양한 형태로 서로 상호 작용할 수 있다. 일부 실시예들은 서로 독립적으로 수행될 수도 있고, 서로 연계되어 함께 수행될 수도 있다.
광학 구성
도 1은 컴퓨터-생성 홀로그램이 단일 공간 광 변조기에서 인코딩되는 프로젝터(광학시스템)의 실시예를 도시한다. 컴퓨터-생성 홀로그램은 재구성을 위한 객체의 푸리에 변환이다. 따라서 홀로그램은 객체의 푸리에 도메인 또는 주파수 도메인 또는 스펙트럼 도메인 표현이라고 할 수 있다. 본 실시예에서, 공간 광 변조기는 반사형의 액정-온-실리콘 (liquid crystal on silicon: "LCOS") 장치이다. 홀로그램은 공간 광 변조기에서 인코딩되고 홀로그램 재구성은 재생 필드, 예컨대 스크린 또는 디퓨저(diffuser)와 같은 수광 표면(light receiving surface)에 형성된다.
예컨대 레이저나 레이저 다이오드 같은 광원(110)은 콜리메이팅 렌즈(collimating lens, 111)를 통해 SLM(140)을 조사하도록 배치된다. 콜리메이팅 렌즈는 광이 SLM 상에 전체적으로 평면 파면으로 입사되도록 만든다. 도 1에서, 파면의 방향은 (예컨대, 투과층의 평면에 대해 완전 수직으로부터 2도 또는 3도 정도 어긋난) 비수직(off-normal)하다. 그러나, 다른 예시들에서, 전체적으로 평면인 파면은 법선 방향으로 입사되고, 입력 및 출력 광경로들을 분리하기 위한 빔 스플리터 배치(beam splitter arrangement)가 이용된다. 도 1에 도시된 예시에서, 이러한 배치는, 광원으로부터 오는 광이 SLM의 미러형 후방 표면(mirrored rear surface)에 반사되며 사출 파면(exiting wavefront, 112)을 형성하기 위해 광 변조층과 상호작용하게 한다. 사출 파면(112)은 스크린(125)에 초점이 맞춰진 푸리에 변환 렌즈(120)를 포함하는 광학계에 적용된다. 더욱 상세하게, 푸리에 변환 렌즈(120)는 SLM(140)으로부터 사출되는 변조된 광의 빔을 전달받아 스크린(125)에 홀로그램 재구성을 생성하기 위해 주파수-공간 변환(frequency-space transformation)을 수행한다.
특히, 이러한 유형의 홀로그래피에서 홀로그램의 각 픽셀은 전체 재구성에 관여한다. 재생 필드의 특정 지점들 (또는 이미지 픽셀들)과 특정 광-변조 요소들 (또는 홀로그램 픽셀들) 사이에는 일대일 상관 관계가 없다. 다시 말해, 광-변조 층을 나가는 변조된 광은 재생 필드에 분포된다.
프로젝터의 이러한 실시예들에서, 공간에서 홀로그램 재구성의 위치는 푸리에 변환 렌즈의 굴절(포커싱) 파워(dioptric(focusing) power)에 의해 결정된다. 도 1에 도시된 실시예에서, 푸리에 변환 렌즈는 물리적 렌즈이다. 즉, 푸리에 변환 렌즈는 광학적 푸리에 변환 렌즈이며, 푸리에 변환은 광학적으로 수행된다. 어떤 렌즈라도 푸리에 변환 렌즈 역할을 할 수 있지만, 수행되는 푸리에 변환의 정확도는 렌즈의 성능에 좌우된다. 통상의 기술자라면 렌즈를 사용하여 광학적 푸리에 변환을 수행하는 방법을 이해할 수 있다.
홀로그램 계산
일부 실시예에서, 컴퓨터-생성 홀로그램은 푸리에 변환 홀로그램, 또는 단순히 푸리에 홀로그램 또는 푸리에 기반 홀로그램이며, 여기서 이미지는 포지티브 렌즈의 푸리에 변환 특성을 이용하여 원장(far field)에서 재구성된다. 푸리에 홀로그램은 재생 평면에서 원하는 광 필드(light field)를 푸리에 변환하여 렌즈 평면에 오도록 계산된다. 컴퓨터 생성 푸리에 홀로그램은 푸리에 변환을 이용하여 계산될 수 있다. 실시예들은 단지 예시로서 푸리에 홀로그래피 및 게르흐버그-색스톤(Gerchberg-Saxton) 유형 알고리즘에 관한 것이다. 본 발명은 유사한 방법으로 계산될 수 있는 프레넬 홀로그래피 및 프레넬 홀로그램에 동일하게 적용될 수 있다. 일부 실시예에서, 홀로그램은 위상 또는 위상 전용 홀로그램이다. 그러나, 실시예들은 포인트 클라우드 방식에 기초하여 계산된 홀로그램과 연관된다. 2021년 8월 26일에 출원된 영국 특허출원 제 GB 2112213.0호는 본 명세서에 참조로 포함되어 본 개시 내용과 결합될 수 있는 예시적인 홀로그램 계산 방법을 개시한다. 특히, 이전 특허 출원은 도 2 및 도 3을 참조하여 아래에 설명되는 이미지 콘텐츠를 각도로 분할/채널화하는 (특수한) 홀로그램 유형을 계산하는 방법을 설명한다.
프로젝터의 일부 실시예에서, 이미지 데이터를 수신하고 알고리즘을 이용하여 실시간으로 홀로그램을 계산하도록 구성된 실시간 엔진이 제공된다. 일부 예시에서, 이미지 데이터는 일련의 이미지 프레임을 포함하는 비디오이다. 프로젝터의 다른 실시예에서, 홀로그램은 사전 계산되고, 컴퓨터 메모리에 저장되며, SLM 상에 디스플레이하기 위해 필요에 따라 호출된다. 즉, 일부 실시예에서, 소정의 홀로그램의 저장소가 제공된다.
광 변조
디스플레이 시스템은 디스플레이 시스템의 사출동공(exit pupil)을 정의하는 디스플레이장치를 포함한다. 디스플레이장치는 공간 광 변조기이다. 공간 광 변조기는 위상 변조기일 수 있다. 디스플레이장치는 잘 알려진 바와 같이 액정 온 실리콘, "LCOS", 공간 광 변조기 "SLM"이다. LCOS SLM은 사변형 모양의 LC 픽셀 어레이와 같은 복수의 픽셀을 포함한다. 픽셀은 홀로그램을 포함하는 회절 패턴으로 어드레싱(addressed)되거나 인코딩될 수 있다. LCOS SLM은 홀로그램을 "표시"하도록 구성되어 있다고 말할 수 있다. LCOS SLM은 광으로 조사(illuminate)되고, 홀로그램에 따라 공간적으로 변조된 광을 출력하도록 구성된다. LCOS SLM에 의한 공간적으로 변조된 광 출력은 본 명세서에 기술된 바와 같이 회절된 또는 홀로그램 광 필드를 포함한다.
라이트 채널링
본 명세서에 개시된 광학시스템은 임의의 회절된 광 필드를 갖는 동공 확장에 적용 가능하다. 광학시스템의 일부 실시예들에서, 회절된 광 필드는 홀로그램 광 필드, 즉 이미지 자체가 아니라 이미지의 홀로그램에 대응하여 공간적으로 변조된 복소 광 필드이다. 광학시스템의 일부 실시예들에서, 홀로그램은 이미지 콘텐츠(image content)를 각도에 따라 분할/채널화하는 특수한 유형의 홀로그램이다. 이러한 유형의 홀로그램은 단지 본 개시가 적용될 수 있는 회절된 광 필드의 예로서 여기에서 추가적으로 설명된다. 다른 유형의 홀로그램이 여기에 개시된 디스플레이 시스템 및 광 엔진과 함께 사용될 수 있다.
도파관 동공확장기를 포함하는 디스플레이 시스템 및 방법이 이하에서 개시된다. 통상의 기술자인 독자에게 익숙한 바와 같이 도파관은 '동공확장기(pupil expander)'로 구성될 수 있다. 도파관은 다음과 같이 비교적 작은 발광체(light emitter, 예를 들어, 본 명세서에서 개시하는 구성들에서 사용되는 상대적으로 작은 SLM 또는 그 밖의 픽셀화된 디스플레이장치 등)에 의해 방출되는 (발광체로부터 떨어져서 상대적으로 긴 거리와 같은 거리에 위치한 사람인 뷰어 또는 그 밖의 뷰잉 시스템에 의해 보여지는) 광의 면적을 늘리는 데 사용할 수 있기 때문이다. 도파관은 뷰어를 향해 광이 출력되는 투과점(transmission point)의 수를 증가시켜 이를 달성한다. 그 결과, 광은 복수의 다른 뷰어 위치에서 보일 수 있으며, 예를 들어 뷰어는 머리를 움직일 수 있고 따라서 시선을 움직일 수 있으면서 여전히 발광체로부터의 광을 볼 수 있다. 따라서 도파관 동공확장기를 사용하면 뷰어의 '아이-박스' 또는 '아이-모션 박스'가 확대된다고 할 수 있다. 이는 수많은 유용한 응용을 가지며, 예를 들어 헤드-업 디스플레이에만 국한되지 않고, 예를 들어 자동차 헤드-업 디스플레이에만 국한되지도 않는다.
본 명세서에 개시된 바와 같은 디스플레이 시스템은 적어도 1차원 이상, 예를 들어 2차원에서 동공 확장을 제공하기 위해 도파관 동공확장기를 통해 회절된 광 필드와 같은 광을 안내하도록 구성될 수 있다. 회절된 광 필드는 LCOS SLM과 같은 공간 광 변조기(SLM)에 의해 출력되는 광을 포함할 수 있다. 예를 들어, 이러한 회절된 광 필드는 SLM에 의해 디스플레이되는 홀로그램에 의해 인코딩된 광을 포함할 수 있다. 예를 들어, 회절된 광 필드는 SLM에 의해 디스플레이되는 홀로그램에 대응하여 홀로그램으로 재구성된 이미지의 광을 포함할 수 있다. 홀로그램은 컴퓨터-생성 홀로그램을 포함할 수 있으며, 그러나 포인트-클라우드 홀로그램, 프레넬 홀로그램 또는 푸리에 홀로그램에 국한되지 않는다. 홀로그램은 '회절 구조(diffractive structure)' 또는 '변조 패턴(modulation pattern)'으로 지칭될 수 있다. SLM 또는 그 밖의 디스플레이장치가 통상의 기술자인 독자에게 익숙한 방식으로 홀로그램 및 소프트웨어 렌즈 또는 회절 격자와 같은 하나 이상의 다른 구성요소를 포함하는 회절 패턴(또는 변조 패턴)을 표시하도록 구성될 수 있다.
홀로그램은 회절된 광 필드의 채널링을 제공하도록 고안될 수 있다. 이것은 영국 특허출원 제 GB2101666.2호, 제 GB2101667.0호 및 제 GB2112213.0호 각각에 자세히 설명되어 있으며, 이들 모두는 본 명세서에 참조로 포함된다. 일반적으로, 홀로그램은 홀로그램으로 재구성될 이미지에 대응하도록 고안될 수 있다. 홀로그램에 대응하는 이미지를 '입력 이미지(input image)' 또는 '대상 이미지(target image)'라고 할 수 있다. 홀로그램은 SLM에 디스플레이되고 적절하게 조사(illuminate)될 때 공간적으로 변조된 광의 원뿔(cone)을 포함하는 광 필드(이는 SLM에 의해 출력된다.)를 형성하도록 고안될 수 있다. 일부 실시예들에서 광원뿔은 이미지의 각각의 연속적인 영역에 대응하는 공간적으로 변조된 광의 복수의 연속적인 광 채널을 포함한다. 그러나, 본 개시는 이러한 형태의 홀로그램에 한정되지 않는다.
본 명세서에서는 '홀로그램' 또는 '컴퓨터-생성 홀로그램(CGH)'을 언급하지만, SLM가 복수의 상이한 홀로그램을 연속적으로 또는 순서에 따라서 동적으로 디스플레이하도록 구성될 수 있음이 이해될 수 있을 것이다. 본 명세서에 개시된 시스템들 및 방법들은 복수의 상이한 홀로그램의 동적 디스플레이에 적용 가능하다.
도 2 및 도 3은 본 명세서에 개시된 동공확장기와 함께 사용될 수 있는, SLM과 같은 디스플레이장치 상에 디스플레이될 수 있는 홀로그램 유형의 실시예를 도시한다. 그러나, 본 실시예가 본 개시의 홀로그램 계산 방법과 관련하여 발명을 제한하는 것으로 간주되어서는 안 된다.
도 2는 8개의 이미지 영역들/구성요소들(V1 내지 V8)을 포함하는 프로젝션을 위한 이미지(252)를 도시한다. 도 2는 단지 예로서 8개의 이미지 구성요소들을 도시할 뿐이며 이미지(252)는 임의의 수의 구성요소로 분할될 수 있다. 도 2는 또한 예를 들어 적절한 뷰잉 시스템의 렌즈에 의해 변환될 때 이미지(252)를 재구성할 수 있는 인코딩된 광 패턴(254, 즉, 홀로그램)을 도시한다. 인코딩된 광 패턴(254)은 제1 내지 제8 이미지 구성요소들/영역들(V1 내지 V8)에 대응하는 제1 내지 제8 하위 홀로그램들 또는 구성요소들(H1 내지 H8)을 포함한다. 도 2는 홀로그램이 각도별로 이미지 콘텐츠를 분해할 수 있는 방법을 추가로 보여준다. 따라서 홀로그램은 이를 수행하는 광의 채널링에 의해 특징지어질 수 있다. 이는 도 3에 도시되어 있다. 특히, 본 실시예에서 홀로그램은 광을 복수의 구분된 영역들(discrete areas)로 향하게 한다. 구분된 영역들은 도시된 실시예에서 원판(disc)이지만 그 밖의 형상도 예상된다. 최적의 원판의 크기 및 형상은 도파관을 통해 전파된 후 뷰잉 시스템의 입사동공의 크기 및 형상과 관련될 수 있다.
도 4는 도 2 및 도 3에 도시된 바와 같이 고안된 홀로그램을 디스플레이하는 디스플레이장치를 포함하는 시스템(400)을 도시한다.
시스템(400)은 본 구성에서 LCOS(402)를 포함하는 디스플레이장치를 포함한다. LCOS(402)는 홀로그램을 포함하는 변조 패턴(또는 '회절 패턴')을 디스플레이하고 눈(405)을 향해 홀로그램으로 인코딩된 광을 조사하도록 구성되며, 눈(405)은 개구(404)의 역할을 하는 동공, 렌즈(409), 및 뷰잉 평면의 역할을 하는 망막(미도시)을 포함한다. LCOS(402)를 조사하도록 구성된 광원(미도시)이 존재한다. 눈(405)의 렌즈(409)는 홀로그램-이미지 변환을 수행한다. 광원은 임의의 적합한 종류일 수 있다. 예를 들어, 레이저 광원을 포함할 수 있다.
뷰잉 시스템(400)은 LCOS(402)와 눈(405) 사이에 위치된 도파관(408)을 더 포함한다. 도파관(408)의 존재는 본 도면에 도시된 상대적으로 긴 투영 거리에서도 LCOS(402)로부터의 모든 각도의 콘텐츠가 눈으로 수신될 수 있게 한다. 이는 도파관(408)이 동공확장기(pupil expander)로서 작용하기 때문인 것으로 잘 알려져 있으므로 본 명세서에서는 간략하게만 설명한다.
간단히 말해서, 도 4에 도시된 도파관(408)은 실질적으로 기다란(elongate) 형태를 포함한다. 본 실시예에서, 도파관(408)은 굴절 물질의 광학 슬래브(optical slab)를 포함하지만, 그 밖의 유형의 도파관도 잘 알려져 있으며 사용될 수 있다. 도파관(408)은 LCOS(402)로부터 조사된 광원뿔(즉, 회절된 광 필드)을 교차하도록 위치되며, 예를 들어 비스듬한(oblique) 각도로 교차한다. 본 실시예에서, 도파관(408)의 크기, 위치 및 배치는 광원뿔 내에서 8개의 광선 다발 각각으로부터의 광이 도파관(408)으로 들어가는 것을 보장하도록 구성된다. (LCOS(402)에 가장 가깝게 위치하는) 제1 평면을 통해서 광원뿔로부터의 광이 도파관(408)에 들어가며, 제1 평면과 실질적으로 대향하는 (눈에 가장 가깝게 위치하는) 제2 평면을 통해 방출되기 전에 적어도 부분적으로 도파관(408)의 길이를 따라서 안내된다. 명확히 이해되는 바와 같이, 제2 평면은 부분적으로 반사형이며 부분적으로 투과형이다. 다시 말해서, 각각의 광의 광선이 제1 평면으로부터 도파관(408) 내에서 이동하고 제2 평면에 부딪힐 때 광의 일부는 도파관(408) 밖으로 투과되고 일부는 제2 평면에 의해 반사되어 다시 제1 평면으로 향한다. 제1 평면은 반사형이어서, 도파관(408) 내에서 제1 평면에 부딪히는 모든 광은 제2 평면 표면을 향해 다시 반사된다. 따라서, 광의 일부는 투과되기 전에 도파관(408)의 두 평면 사이에서 단순히 굴절될 수 있는 반면, 다른 광은 반사될 수 있고, 따라서 투과되기 전에 도파관(408)의 평면 표면 사이에서 1회 이상의 반사(또는 '산란(bounce)')를 겪을 수 있다.
도 4는 도파관(408)의 길이를 따라서 총 9개의 "산란(bounce)" 지점(B0 내지 B8)을 도시한다. 도 2에 도시된 바와 같이 이미지(V1 내지 V8)의 모든 지점과 관련된 광은 도파관(408)의 제1 평면에서의 각각의 "산란"에 도파관 밖으로 투과되지만 이미지의 한 각도 부분으로부터의 광(예를 들어, V1에서 V8 중 하나의 광)만이 각각의 "산란" 지점(B0 내지 B8)에서 눈(405)에 도달할 수 있는 궤적을 가지고 있다. 더해서, 이미지의 다른 각도 부분(V1 내지 V8)으로부터의 광은 각각의 "산란" 지점에서 눈(405)에 도달한다. 따라서, 도 4의 실시예에서 인코딩된 광의 각 채널은 도파관(408)으로부터 한 번만 눈에 도달한다.
상술한 방법들 및 구성들은 여러가지 상이한 응용들 및 뷰잉 시스템들에서 구현될 수 있다. 예를 들어, 헤드-업 디스플레이(HUD) 또는 증강현실(AR) HMD와 같은 헤드 또는 헬멧 장착 장치(head or helmet mounted device, HMD)에 구현될 수 있다.
인식된 이미지를 형성하기 위해 눈이 수신된 변조된 광을 변환해야 하는 허상이미지가 본 개시에서 일반적으로 논의되었지만, 위에서 설명된 방법 및 구성은 실상 이미지에 적용될 수 있다.
2차원 동공 확장
도 4에 도시된 구성은 1차원에서 동공 확장을 제공하는 단일 도파관을 포함하지만, 동공 확장은 1차원 이상으로, 예를 들어 2차원으로 제공될 수 있다. 더욱이, 도 4의 실시예는 이미지의 각기 다른 부분에 대응하는 광의 채널을 생성하도록 고안된 홀로그램을 사용하지만, 본 개시 및 이하에서 설명되는 시스템들은 이러한 홀로그램 유형으로 제한되지 않는다.
도 5는 광 빔(502)을 2차원으로 확장하도록 구성된 두 개의 복제기(replicator, 504, 506)를 포함하는 시스템(500)의 사시도를 도시한다.
도 5의 시스템(500)에서, 제1 복제기(504)는 서로 평행하게 적층되고 도 4의 도파관(408)과 유사한 방식으로 복제(또는 동공 확장)를 제공하도록 구성된 제1 표면 쌍을 포함한다. 제1 표면 쌍은 서로 비슷한(일부 경우에는 동일한) 크기 및 모양을 가지고 동일하고 실질적으로 한 방향으로 연장되어 있다. 평행광 빔(502)은 제1 복제기(504)의 입력을 향한다. 통상의 기술자인 독자에게 친숙할, 두 표면 사이의 내부 반사 과정, 및 표면 중 하나(도 5에서 보여지는, 상부 표면)에 있는 복수의 출력 지점 각각에서 광의 부분 투과로 인해, 광 빔(502)의 광은 제1 복제기(504)의 길이를 따라 제1 방향으로 복제된다. 따라서, 제1 복수의 복제 광 빔들(508)이 제1 복제기(504)로부터 제2 복제기(506)를 향해 방출된다.
제2 복제기(506)는 서로 평행하게 적층된 제2 표면 쌍을 포함하며, 제1의 복수의 광 빔들(508)의 평행광 빔 각각을 수신하도록 구성되고, 추가적으로 제1 방향에 실질적으로 직교하는 제2 방향으로 각각의 광 빔을 확장함으로써 복제(또는 동공 확장)를 제공하도록 구성된다. 제1 표명 쌍은 서로 비슷한(일부 경우에는 동일한) 크기 및 형상을 가지며 실질적으로 직사각형이다. 제2 복제기는 제1 복수의 광 빔들(508)을 수신하기 위해 제1 방향을 따라서 길이를 갖고, 제2 방향으로 복제를 제공하기 위해 제1 방향과 직교하는 제2 방향을 따라서 길이를 가지는 직사각형 모양이 제2 복제기에 구현된다. 두 표면 사이의 내부 반사 과정 및 표면 중 하나(도 5에서 보여지는, 상부 표면)에 있는 복수의 출력 지점 각각에서 광의 부분 투과로 인해 제1의 복수의 광 빔들(508)의 각 광 빔의 광은 제2 방향으로 복제된다. 따라서, 제2 복수의 광 빔들(510)이 제2 복제기(506)로부터 방출되고, 여기서 제2 복수의 광 빔들(510)은 제1 방향 및 제2 방향 각각을 따라서 입력 광 빔(502)의 복제물을 포함한다. 따라서, 제2 복수의 광 빔들(510)은 복제 광 빔들의 2차원 그리드(grid) 또는 어레이(array)를 포함하는 것으로 간주될 수 있다.
따라서, 도 5의 제1 및 제2 복제기(504, 505)가 결합하여 2차원 복제기(또는 "2차원 동공확장기(two-dimensional pupil expander)")를 제공한다고 말할 수 있다.
도파관 또는 도파관들에 의해 형성된 디스플레이장치의 가상 복제물
통상적으로, (허상이미지와 같은) 이미지의 포인트 클라우드 홀로그램 계산을 위해, 이미지는 본 명세서에서 '가상 포인트(virtual points)'로 지칭되는 복수의 개별 포인트로 분해(즉, 표현)된다. 광파(예: 구면파(spherical wave)(또는 '웨이블릿(wavelet)'))는 허상이미지 내에서 의도되거나 원하는 위치의 각 가상 포인트로부터 홀로그램의 평면, 예를 들어 위에서 설명한 예시에서 LCOS의 평면과 같은 홀로그램을 표시하는 데 사용되는 디스플레이장치까지 계산적으로(예: 모델 또는 기타 이론적 도구를 이용하여) 전파된다. 복수의 허상이미지 포인트로부터의 웨이블릿은 서로 결합되고 디스플레이장치에서의 진폭 및/또는 위상 분포/패턴이 계산된다. 그 다음 디스플레이장치는 웨이블릿을 재생성하여 이미지의 재구성을 생성하기 위해 홀로그램을 표시하도록 잘 알려진 방식으로 구성될 수 있으므로 본 명세서에서는 설명되지 않을 것이다.
그러나, 본 명세서에 기술된 바와 같이, 특정 디스플레이 시스템에 적용될 때, 동공 확장을 위해 하나 이상의 도파관이 사용된다. 본 발명자들은 광선 복제를 이용한 동공 확장이 2차원 어레이에서 디스플레이장치의 "가상 복제물"를 생성하는 효과를 가지며, 이러한 복제물의 위치는 도파관 내의 복수의 상이한 광 전파 경로로 인해 나타날 수 있는 고스트 이미지를 제거하기 위해 이용될 수 있다는 것을 인지했다. 본 발명자들은, 하나 이상의 도파관을 통한 광학적 경로 거리로 인해, 가상 복제물의 깊이(아이-박스로부터 측정됨)가 상이하고 본 명세서에 개시된 방법이 이러한 차이를 고려해야 한다는 것을 추가로 알아냈다. 의심의 여지를 없애기 위해 말하자면, 디스플레이장치의 이러한 상이한 가상 복제물은 동일한 재구성된 허상이미지에 기여하고 이는 아이-박스 내의 모든 위치에서 뷰어에게 동일한 깊이로 나타난다.
따라서, 본 개시는 디스플레이된 홀로그램이 마치 대상 이미지에 의해 생성된 것처럼 특정 타겟 눈 위치(target eye position)에 대해 동공확장기 이후에 파면을 생성하도록 허상이미지의 홀로그램을 계산하는 새로운 방법을 제안한다.
도 6은 디스플레이장치 상에 형성된 홀로그램 및 도파관에 의해 형성된 복수의 홀로그램 복제물들을 포함하는 3D 어레이를 포함하는 "확장변조기(extended modulator)" 또는 "가상 표면(virtual surface)"의 예시적인 시각화를 도시한다.
도 4를 참조하여 위에서 언급된 바와 같이, 1차원 도파관(408)은 디스플레이 시스템의 사출동공을 확장하도록 구성될 수 있다. 디스플레이 시스템은 도파관(408)의 "산란(bounce)" 포인트 B0에서 출력되는 홀로그램을 표시하는 디스플레이장치(402)를 포함한다. 또한, 도파관(408)은 동공 확장 방향에 대응하는 길이를 따라 각각의 "산란" 지점(B1 내지 B8)에서 홀로그램의 복수의 복제물을 형성한다. 도 4에 도시된 바와 같이, 복수의 복제물은, 대응하는 복수의 복제물 또는 가상 디스플레이장치(402')로 직선으로 다시 외삽될 수 있다. 이 과정은 도파관 내에서 광학적 경로를 "전개하는(unfolding)" 과정에 해당하므로, 복제물의 광선이 도파관 내에서 내부 반사 없이 "가상 표면(virtual surface)"으로 다시 외삽된다. 따라서, 확장된 사출동공의 광은 디스플레이장치(402) 및 복제 디스플레이장치들(402')을 포함하는 가상 표면(본 명세서에서 "확장변조기"라고도 함)에서 발생하는 것으로 간주될 수 있다.
제안된 홀로그램 계산 방법은 소위 "확장변조기"를 정의한다. 여기서 디스플레이장치(예: LCOS SLM)는 하나 이상의 도파관 동공확장기에 의해 형성될 가상 복제 어레이에 의해 "확장"됨으로써 "확장변조기" 또는 "가상 표면"이 형성된다 (예: 도 4에 도시).예를 들어, 디스플레이장치(예를 들어, LCOS SLM)는 도 6에 도시된 확장변조기의 위치(0, 0)에 위치할 수 있고, 두 개의 1차원 동공확장기에 의해 형성될 (가상) 복제물(즉, 복제물 디스플레이장치)는 제1 동공 확장 방향으로 (0, 2)까지, 제2 동공 확장 방향으로 (4, 0)까지 확장되는 위치에 위치한다. 광학적 경로의 방향은 동공 확장의 제1 및 제2 방향에 수직인 화살표(601)로 도시된다.
따라서 확장변조기는 다음을 포함하는 것으로 규정된다. (i) (공간 내) 각도 및 대응하는 동공 확장 방향에 의해 규정되는 제1 도파관 동공확장기(예를 들어, 연장된 도파관)에서 생성된 복제물 사이의 제1 오프셋, (ii) (공간 내) 제2 각도 및 대응하는 동공 확장 방향에 의해 규정되는 제2 도파관 동공확장기(예를 들어, 평면 도파관)에서 생성된 복제물 사이의 오프셋; (iii) 제1 오프셋 방향과 제2 오프셋 방향 사이의 왜도(skew) - 도 6의 일반 평행사변형 모양 생성 및 (iv) 도 6에 도시된 방향(601)으로 디스플레이장치 복제물과 눈 위치 사이의 광학적 경로 길이(차이).
가상 복제물로 구성된 확장변조기를 사용한 홀로그램 계산
도 7은 본 발명의 일 실시예에 따라, 도 6에 도시된 확장변조기와 같은 확장변조기를 사용하여 포인트 클라우드 홀로그램을 계산하기 위한 구성을 도시한다.
본 구성은 공간에서 원하는 허상이미지 위치에 있는 허상이미지(700), 및 뷰잉 시스템의 입사 개구(730)를 형성하는 동공을 갖는 눈(720)을 포함하는 뷰잉 시스템을 포함한다. 본 구성은 아이-박스 내의 눈(720)의 한 위치를 나타낸다. 따라서 포인트 클라우드 홀로그램은 특정 아이-박스 위치와 연관된다. 또한, 본 구성은 허상이미지(700)와 눈(720) 사이에 위치한 확장변조기(또는 가상 표면)(710)를 포함한다. 통상의 기술자가 이해할 수 있는 바와 같이, 도 7에서 광학적 경로는 도파관 내에서 효과적으로 "전개된다".
잘 알려진 포인트 홀로그램을 계산하기 위한 종래기술에 따르면, 구면파(또는 '웨이블릿')는 각 허상이미지 포인트로부터 디스플레이장치의 평면까지의 경로를 따라 전파된다. 포인트 클라우드 홀로그램은 디스플레이장치의 평면과의 각 교차 영역에서 각각의 가상 이미지 포인트로부터 전파되는 웨이블릿에 의해 형성된 복소 광 패턴(즉, 진폭 및 위상 분포를 갖는 복소 광 필드)을 기반으로(예: 결합/중첩함으로써) 결정된다. 각 허상이미지 포인트와 연관된 웨이블릿의 복소 광 패턴은 디스플레이장치의 평면과 교차하는 영역에서 "캡처"된다고 말할 수 있다.
그러나, 본 개시에 따르면, 포인트 클라우드 홀로그램은 각 허상이미지 포인트로부터 전파되는 웨이블릿에 의해 확장변조기 또는 가상 표면과의 각 교차점 영역에 형성된 복소 광 패턴(즉, 진폭 및/또는 위상 분포)에 기초하여(예를 들어, 결합/중첩에 의해) 결정된다. 또한 허상이미지 포인트로부터 전파되는 웨이블릿 중 뷰어의 눈에 도달하는 부분만 고려된다.
도 7은 뷰어의 눈(720)으로부터 원하는 거리에 위치한 허상이미지(700)의 제1 및 제2 예시적인 허상이미지 포인트(701, 702)들을 도시한다. 파선으로 도시된 바와 같이, (확장하는) 구면파 또는 웨이블릿은 각각의 예시적인 허상이미지 포인트(701, 702)로부터 확장변조기(710)를 통해 뷰어의 눈(720)의 입사 개구(730)로 전파된다. 제1 직선 쌍(711)은 제1 허상이미지 포인트(701)로부터 입사 개구(730)의 대향 극단 위치(즉, 도면에서 왼쪽 및 오른쪽 측면)까지 연장되어 연관된 웨이블릿의 (관련된 부분의) 에지/주변부를 나타낸다. 유사하게, 제2 직선 쌍 (721)은 제2 허상이미지 포인트(702)로부터 입사 개구(730)의 대향(opposite) 극단 위치/에지(즉, 도면의 왼쪽 및 오른쪽 측면)까지 연장되어 연관된 웨이블릿의 (관련된 부분의) 에지/주변부를 나타낸다. 제1 및 제2 직선 쌍 (711, 721)은 확장변조기(710)(또는 가상 표면)와의 교차 영역(800, 900)을 각각 갖는다. 따라서, 제1 및 제2 직선 쌍(711, 721)은 특정 아이-박스 위치에서 뷰어의 눈(720)의 입사 개구(730)(즉, 동공)를 통과할 수 있는 제1 및 제2 허상이미지 포인트(701, 702)와 각각 관련된 원하는(웨이블릿의 일부) 웨이블릿을 본 개시 내용에 따라 "윤곽 지정(delineate)"(즉, 주위에 경계를 형성)된다. 이하의 설명에서, 허상이미지 포인트로부터 전파되는 '웨이블릿'에 대한 언급은 전술한 바와 같이 직선으로 표시되는 전파되는 파동의 일부에 관한 것이다.
확장변조기가 본 개시에서 설명된 바와 같이 "엇갈리게 배치(staggered)"되기 때문에 각 허상이미지 포인트로부터 전파되는 웨이블릿의 교차 영역은 상이한 수직 거리(디스플레이장치의 평면까지)에 또는 전파 방향으로 상이한 거리에 있다. 특히, 상이한 허상이미지 포인트들로부터 전파되는 웨이블릿은 확장변조기(710)의 (디스플레이장치의) 상이한 "복제물"을 통과(pass thought)한다. 일부 웨이블릿(예를 들어, 허상이미지 포인트(701)와 관련된 것)은 복수의 복제물을 교차할 수 있고, 다른 웨이블릿(예를 들어, 허상이미지 포인트(702)와 관련된 것)은 아래에서 더 설명되는 바와 같이 단일 복제물만 교차한다. 예를 들어, 도 7은 제1 허상이미지 포인트(701)로부터 눈(720)으로 전파하는, 제1 선 쌍(711)에 의해 윤곽 지정되고/제한된, 제1 웨이블릿의 확장변조기(710)와의 제1 교차 영역(800)을 도시한다. 유사하게, 도 7은 제2 허상이미지 포인트(702)로부터 눈(720)으로 전파하는, 제2 선 쌍(721)에 의해 경계가 그려진/제한된 제2 웨이블릿의 확장변조기(710)와의 제2 교차 영역(900)을 도시한다. 이러한 교차 영역은 아래에서 도 8과 도 9를 참조하여 설명된다.
도 8은 제1 허상이미지 포인트(701)로부터 전파하는 제1 선 쌍(711)에 의해 윤곽이 지정되는 제1 웨이블릿의 확장변조기(710)와의 제1 교차 영역(800)을 더 상세히 도시한다. 특히, 제1 웨이블릿은 확장변조기(710)의 두 개의 인접한 가상 복제물을 포함하는 영역에서 교차한다. 이러한 가상 복제물은 도 7에서 수평선으로, 도 8에서 수직선으로 표시된다. 전술한 바와 같이, 확장변조기의 상이한 가상 복제물들은 서로 다른 수직 거리에서 서로 다른 평면에 있다. 따라서, 확장변조기의 각 가상 복제물과 교차하는 영역의 복소 광 패턴은 별도로 결정된다. 두 개의 인접한 가상 복제물과 교차하는 웨이블릿의 부분들이 허상이미지 포인트(791)로부터 서로 다른 거리로 전파되었을 것이고 따라서 확장변조기에 도달할 때 상이한 복소 광 패턴 또는 파면을 갖기 때문에 이러한 과정이 필요하다.
각 허상이미지 포인트로부터 확장변조기에 도달하는 광 필드를 나타내는 진폭 및 위상 값의 쌍의 공간 분포를 지칭하기 위해 용어 "복소 광 패턴"이 이하에서 사용된다. 즉, "복소 광 패턴"은 확장변조기와 교차하는 지점 또는 지점들에서 웨이블릿의 파면에 대응한다. 실시예들에서, "복소 광 패턴"은 진폭 및 위상 값 쌍의 어레이(array)이다. 일부 예시에서, 디스플레이장치는, 진폭 값이 궁극적으로 무시되거나 폐기될 수 있는 위상 변조기이다. "복소 광 패턴"은 "복소 광 필드"로도 지칭될 수 있다.
따라서, 도 8은 확장변조기(710)의 제1 가상 복제물(도면의 상부에 도시됨)과의 교차점에서 웨이블릿에 의해 형성된 제1 복소 광 패턴(810')을 도시한다. 제1 복소 광 패턴(810')은 제1 가상 복제물의 평면에서 "캡처(captured)"되고 제1 허상이미지 포인트(701)와 연관된 제1 서브홀로그램 구성요소(810)를 형성한다. 또한, 도 8은 확장변조기(710)의 제2 가상 복제물(도면 하단에 도시됨)과의 교차점에서 웨이블릿에 의해 형성된 제2 복소 광 패턴(811')을 도시한다. 제2 복소 광 패턴(811')은 제2 가상 복제물의 평면에서 "캡처"되고 제1 허상이미지 포인트(701)와 연관된 제2 서브홀로그램 구성요소(811)를 형성한다. 확장변조기(710)의 제1 및 제2 가상 복제물 각각에서의 교차 영역은 원(의 일부) 또는 타원으로 도시된다. 이는 뷰잉 시스템의 입사동공을 통과하는 광선에 대응하기 때문에 이 영역은 "주요 기여 영역(primary contributory area)"에 대응한다. 일부 경우에는 이렇게 하면 뷰잉 시스템에 의해 1차 이미지("고스트 이미지"가 아님)가 형성된다. 일부 실시예에서, 주요 기여 영역의 형상은 뷰잉 시스템의 입사동공의 형상에 대응한다(예를 들어, 동일한 일반적인 형상을 갖지만 반드시 동일한 크기는 아님). 웨이블릿에 의해 형성된 복소 광 패턴(810', 811')은 각각의 가상 복제물의 가장자리에 위치하므로, 주요 기여 영역은 허상이미지 포인트(701)의 서브홀로그램(820)의 상단 및 하단 가장자리에 있다.
도 8은 제1 서브홀로그램 구성요소(810) 및 제2 서브홀로그램 구성요소(811)가 조합되어 - 특히 중첩(superimposed)되어 - 제1 허상이미지 포인트(701)와 연관된 서브홀로그램(820)을 형성하는 것을 보여준다. 각 복소 광 패턴(810', 811')과 연관된 (디스플레이장치 상의) 공간 정보(spatial information)는 중첩 과정에서 유지된다. 즉, 제1 복소 광 패턴(810')은 디스플레이장치의 하부 영역에 대응하는 위치에 형성되어 이 허상이미지 포인트(701)의 최종 서브홀로그램(820)의 대응 하부 영역에 나타난다. 마찬가지로, 제2 복소 광 패턴(811')은 디스플레이장치의 상부 영역에 대응하는 위치에 형성되어 이 허상이미지 포인트(701)의 최종 서브홀로그램(820)의 대응 상부 영역에 나타난다. 이 예시에서, 제1 복소 광 패턴(810') 및 제2 복소 광 패턴(811')은 중첩되지 않으므로 추가 처리 과정 없이 이 허상이미지 포인트에 대한 최종 서브홀로그램(820)을 형성하기 위해 중첩될 수 있다.
도 9는 제2 허상이미지 포인트(702)로부터 전파하는, 제2 라인 쌍(721)에 의해 윤곽이 지정되는 제2 웨이블릿의 확장변조기(710)와의 교차 영역(900)을 더 상세히 도시한다. 특히, 웨이블릿은 확장변조기(710)의 단일 가상 복제물의 영역에서 교차한다. 이 가상 복제물은 도 7에서 수평선으로, 도 9에서 수직선으로 표시된다. 따라서 확장변조기(710)의 가상 복제물의 (단일) 평면에 교차 영역에서의 복소 광 패턴(920')이 캡처되고 제2 허상이미지 포인트(702)와 연관된 서브홀로그램(920)을 형성한다. 다시 말하자면, 확장변조기(710)의 가상 복제물에서의 교차 영역은 원 또는 타원으로 표시된다. 이는 제2 허상이미지 포인트(702)에 대한 "주요 기여 영역"에 대응한다. 웨이블릿에 의해 형성된 복소 광 패턴은 가상 복제물의 중심에 위치하므로, 주요 기여 영역은 이 허상이미지 포인트(702)에 대한 서브홀로그램(920)의 중심에 있다.
포인트 클라우드 홀로그램은, 허상이미지(700)의 각 허상이미지 포인트(예: 701, 702)와 연관된 서브 홀로그램(예: 820, 920)을 결합/중첩(예를 들어 벡터 덧셈으로)함으로써 전체 허상이미지(700)에 대해 결정된다.
개선된 포인트 클라우드 홀로그램 계산 방법은 확장변조기를 사용하기 때문에, 이 방법은 (i) 1차원 복제물 간의 제1 오프셋, (ii) 2차원 복제물 간의 제2 오프셋, (iii) 하나 이상의 도파관 동공확장기에 의해 생성된 복제물 사이의 왜도(skew)의 차이, 및 (iv) 위에서 설명한 바와 같이 눈 위치까지의 복제물 사이의 광학적 경로 길이 차이를 자동적으로 고려한다.
또한 포인트 클라우드 홀로그램의 개선된 계산 방법은, 관련 눈 위치에서 뷰어 눈의 입사동공을 통과할 수 있는 허상이미지의 웨이블릿/광선만 고려한다. 따라서 "주 이미지"(고스트 이미지가 아님)에 기여하는 광선만 고려된다. 즉, 확장변조기와 웨이블릿의 교차점에 있는 주요 기여 영역이다. 결과적으로 개선된 방법은 위에서 설명한 대로 "고스트 이미지"의 바람직하지 않은 형성을 자동적으로 방지한다. 또한 대응 눈 위치에서 뷰어의 눈의 입사동공을 통과할 수 있는 허상이미지의 웨이블릿/광선만 전파하므로 계산 복잡성이 감소한다. 이러한 방식으로 포인트 클라우드 홀로그램을 계산하는 속도가 감소하고 컴퓨팅 리소스의 사용도 줄어든다.
추가 개선
전술한 포인트 클라우드 홀로그램 계산 방법은, 뷰어의 입사동공을 통과할 수 있는 허상이미지 포인트로부터 확장변조기 상의 모든 웨이블릿의 교차 영역에 대한 파면 정보(즉, 복소 광 패턴)를 활용하는 방법일 수 있다. 즉, 모든 허상이미지 포인트와 연관된 모든 서브홀로그램(820, 920)(서브홀로그램 구성요소(810, 811) 포함)이 결합/중첩되어 허상이미지(700)에 대한 포인트 클라우드 홀로그램을 형성할 수 있다.
그러나, 일부 실시예들에서, 허상이미지 포인트의 최종 서브홀로그램에 캡처된 파면 정보를 포함할 지 여부를 결정하기 위해 특정 기준이 이용될 수 있다. 이러한 두 가지 기준은 도 10과 도 11을 참조하여 아래에 설명되어 있다.
제1 기준은 확장변조기에서 교차 영역의 임계 최소 크기를 기준으로 최종 서브홀로그램에 파면 정보(캡처된 복소 광 패턴)를 포함하는 것이다. 도 10은 확장변조기와 교차하는 영역에서 캡처된 허상이미지 포인트로부터 전파되는 웨이블릿과 관련된 복소 광 패턴(원으로 표시됨)의 일 예를 도시한다. 복소 파면/광 패턴의 교차 영역은 확장변조기의 제1, 제2, 제3 및 제4 인접 "가상 복제물" R1, R2, R3, R4 상의 각각 제1, 제2, 제3 및 제4 하위 영역(1001, 1002, 1003, 1004)을 포함한다. 전술한 바와 같이, 가상 복제물(R1, R2, R3, R4)은 서로 다른 평면에서 오프셋된다. 각 하위 교차 영역의 크기는 임계값과 비교될 수 있다. 예를 들어, 임계값은 수용 가능한 품질의 파면을 형성하는 데 필요한 복소 광 패턴의 최소 크기를 나타낼 수 있다. 교차하는 하위 영역이 임계값을 초과하지 않는 경우, 복소 정보(complex information)는 폐기되고 최종 서브홀로그램에 포함되지 않을 수 있다. 따라서 이 기준을 이용하면 포인트 클라우드 홀로그램에 긍정적인 영향을 미치지 않는 파면 정보는 제거되고 컴퓨팅 리소스 및/또는 메모리의 소모는 감소할 수 있으며 이미지 품질은 크게 향상될 수 있다.
제2 기준은 확장변조기의 하나의 복제물에서만 "보이는(visible)" 경우에만 최종 서브홀로그램에 파면 정보(캡처된 복소 광 패턴)를 포함하는 것이다. 이 기준에 따라 (허상이미지 포인트의) 최종 서브홀로그램에는 겹치는 교차 영역의 파면 정보가 포함되지 않는다. 겹치는 영역의 파면 정보를 포함하는 것은, 각 홀로그램 복제물과 연관된 동공확장기를 통과하는 상이한 광선 경로로 인해 (최종) 서브홀로그램으로부터 "고스트" 이미지/이미지 포인트가 생성될 수 있으므로 바람직하지 않다. 도 11a는 확장변조기와 교차하는 영역에서 캡처된 허상이미지 포인트로부터 전파되는 웨이블릿과 연관된 복소 광 패턴(원으로 표시됨)의 일 예를 보여준다. 도 11b는 이 기준으로 결정된 최종 서브홀로그램을 보여준다.
도 11a를 참조하면, 복소 파면/광 패턴의 교차 영역은 확장변조기의 제1, 제2 및 제3 "가상 복제물" R1, R2, R3 상의 제1 내지 제5 하위 영역(1101, 1102, 1103, 1104, 1105)을 포함한다. 위에서 설명한 것처럼 가상 복제물 R1, R2, R3은 서로 다른 평면에서 오프셋된다. 제2 가상 복제물(R2)은 제1 가상 복제물(R1)과 제3 가상 복제물(R3) 각각의 사이에 인접하게 위치한다. 복소 광 패턴의 제1 하위 영역(1101)은 제2 가상 복제물(R2)의 중앙에 위치하며, 제1 및 제3 가상 복제물(R1, R3)의 복소 광 패턴 하위 영역(1102, 1103, 1104, 1105)과 겹치지 않는다. 따라서, 이 기준에 따르면, 도 11b에 도시된 바와 같이 제1 하위 영역(1001)의 복소 광 패턴이 서브홀로그램에 포함된다. 그러나 복소 광 패턴의 제2 하위 영역(1102) - 제2/중간 가상 복제물(R2)의 상단에 있는 영역 - 제3 가상 복제물(R3)의 상단에 있는 동등한 영역에서 복소 광 패턴의 제3 하위 영역(1103)과 중첩된다. 유사하게, 복소 광 패턴의 제4 하위 영역(1104) - 제1 가상 복제물(R1)의 하단에 있는 영역에서 - 복소 광 패턴의 제5 하위 영역(1105)과 겹친다 - 제2/중간 가상 복제물(R2)의 하단의 동등한 영역에서 겹친다. 따라서, 이 기준에 따르면, 도 11b에 도시된 바와 같이 겹치는 제2 및 제3 하위 영역(1102, 1103) 및 겹치는 제4 및 제5 하위 영역(1104, 1105)의 복소 광 패턴은 서브홀로그램에 포함되지 않는다. 따라서 이 방법은 디스플레이장치의 동일한 부분과 겹치거나 이를 사용하거나 이에 대응하거나 이를 필요로 하는 폐기된 서브홀로그램 구성 요소 정보를 포함한다.
전술한 실시예들은 포인트 클라우드 홀로그램의 계산에 관한 것이다. 그러나 통상의 기술자는 본 발명이 디스플레이장치 및 도파관을 포함하는 광학시스템에 대한 허상이미지의 홀로그램의 다른 유형의 계산에 사용될 수 있음을 이해할 것이다. 특히, 통상의 기술자는 다른 유형의 홀로그램을 계산하는 방법에서 홀로그램 평면에서 허상이미지 포인트를 포함하는 가상 표면(예를 들어, 가상 복제물의 엇갈린 가상 표면)의 개념을 적용하는 방법을 이해할 것이다.
추가적인 특징들
실시예들에서, 홀로그램 재구성은 색상을 가진다. 일부 실시예들에서는, 공간-분리 색상(spatially-separated colours, “SSC”)으로 알려진 접근 방식은 색상 홀로그램 재구성을 제공하는 데 사용된다. 다른 실시예들에서는, 프레임 순차 컬러(frame sequential colour, “FSC”)로 알려진 접근 방식이 사용된다.
예는 가시광으로 SLM을 조명하는 것을 설명하지만, 통상의 기술자는 광원 및 SLM이 예를 들어 본 명세서에 개시된 바와 같이 적외선 또는 자외선을 지향시키기 위해 동등하게 사용될 수 있음을 이해할 것이다. 예를 들어, 통상의 기술자는 정보를 사용자에게 제공할 목적으로 적외선 및 자외선을 가시광으로 변환하는 기술을 알고 있을 것이다. 예를 들어, 본 개시는 이러한 목적을 위해 형광체 및/또는 양자점 기술을 사용하는 것으로 확장된다.
일부 장치는 단지 예로서 2D 홀로그램 재구성을 설명한다. 다른 구성에서, 홀로그램 재구성은 3D 홀로그램 재구성이다. 즉, 일부 구성에서 각각의 컴퓨터 생성 홀로그램은 3D 홀로그램 재구성을 형성한다.
본 명세서에 설명된 방법 및 프로세스는 컴퓨터 판독가능 매체 상에 구현될 수 있다. 용어 "컴퓨터 판독가능 매체"는 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 버퍼 메모리, 플래시 메모리 및 캐시 메모리와 같이 데이터를 일시적으로 또는 영구적으로 저장하도록 구성된 매체를 포함한다. 또한, "컴퓨터 판독가능 매체"라는 용어는 하나 이상의 프로세서에 의해 실행될 때, 기계가 여기에 기재된 방법론 중 하나 이상을 전체적으로 또는 부분적으로 수행하게 하는 명령들을 기계의 수행 지령으로서 저장할 수 있는 어떤 매체 혹은 다중의 매체의 조합을 포함하는 것으로 간주되어야 한다.
"컴퓨터 판독가능 매체"라는 용어는 또한 클라우드 기반 스토리지 시스템을 포함한다. "컴퓨터 판독가능 매체"라는 용어는 솔리드-스테이트 메모리 칩(solid-state memory chip), 광학 디스크, 자기(magnetic) 메모리의 예시적인 형태의 하나 이상의 유형 및 비 일시적 데이터 저장소(예를 들어, 데이터 볼륨)를 포함하지만, 이에 국한되지 않으며, 디스크 또는 이들의 임의의 적절한 조합을 포함할 수 있다. 일부 예시적인 실시예에서, 실행을 위한 명령어는 캐리어 매체에 의해 전달될 수 있다. 이러한 캐리어 매체의 예는 일시적인 매체(예를 들어, 명령을 전달하는 전파 신호)를 포함한다.
첨부된 청구범위의 범주를 벗어나지 않으면서 다양한 수정 및 변형이 이루어질 수 있음은 통상의 기술자에게 명백할 것이다. 본 개시는 첨부된 청구범위 및 그 균등물의 범위 내의 모든 변경 및 변형을 포함한다.

Claims (18)

  1. 홀로그램을 표시하도록 구성된 디스플레이장치 및 상기 홀로그램을 복제하도록 구성된 도파관을 포함하는 광학시스템에 대한 허상이미지의 상기 홀로그램을 계산하는 방법에 있어서,
    허상이미지 포인트(virtual image point)로부터 뷰어의 입사동공(entrance pupil)의 주변부까지의 직선 경로들에 의해 규정되는 영역 내에서 상기 허상이미지 포인트의 서브홀로그램(sub-hologram)을 결정하는 과정을 포함하되, 상기 영역은 상기 도파관에 의해 형성된 상기 디스플레이장치의 가상 복제물(virtual replica)의 적어도 일부를 포함하는 홀로그램 계산 방법.
  2. 제1 항에 있어서,
    상기 허상이미지 및 상기 도파관 사이의 가상 표면을 식별하는 과정, 상기 가상 표면은 상기 디스플레이장치 및 상기 도파관에 의해 형성된 상기 디스플레이장치의 복수의 가상 복제물들을 포함함; 및
    상기 가상 표면 상에서 상기 영역을 식별하는 과정을 더 포함하는 방법.
  3. 제1 항 또는 제2 항에 있어서,
    제1 허상이미지 포인트의 제1 서브홀로그램은, 상기 디스플레이장치의 제1 가상 복제물의 제1 영역 내에서 결정되는 방법.
  4. 제1 항 또는 제2 항에 있어서,
    제1 허상이미지 포인트의 제1 서브홀로그램은, 제1 서브홀로그램 구성요소 및 제2 서브홀로그램 구성요소를 포함하는 방법.
  5. 제4 항에 있어서,
    상기 제1 서브홀로그램 구성요소는 상기 디스플레이장치의 제1 가상 복제물의 제1 영역 내에서 결정되고 상기 제2 서브홀로그램 구성요소는 상기 디스플레이장치의 제2 가상 복제물의 제2 영역 내에서 결정되는 방법.
  6. 제5 항에 있어서,
    상기 제1 허상이미지 포인트의 상기 제1 서브홀로그램을 형성하기 위해 상기 제1 서브홀로그램 구성요소 및 상기 제2 서브홀로그램 구성요소를 중첩시키는(superimposing) 과정을 더 포함하는 방법.
  7. 제4 항에 있어서,
    상기 제1 서브홀로그램 구성요소는 상기 디스플레이장치의 제1 가상 복제물의 제1 영역 내에서 결정되고 상기 제2 서브홀로그램 구성요소는 상기 디스플레이장치의 제2 영역 내에서 결정되는 방법.
  8. 제6 항에 있어서,
    상기 제1 허상이미지 포인트의 상기 제1 서브홀로그램을 형성하기 위해 상기 제1 서브홀로그램 구성요소 및 상기 제2 서브홀로그램 구성요소를 중첩시키는 과정을 더 포함하는 방법.
  9. 제8 항에 있어서,
    서브홀로그램 구성요소의 크기가 임계값보다 작은 경우 상기 중첩시키는 과정에서 상기 서브홀로그램 구성요소가 폐기되고, 또는
    중첩시킬 경우 오버랩(overlap)될 상기 제1 서브홀로그램 구성요소 및 제2 서브홀로그램 구성요소 중 임의의 부분들이 상기 중첩시키는 과정에서 폐기되는 방법.
  10. 제1 항 또는 제2 항에 있어서,
    상기 허상이미지의 복수의 허상이미지 포인트들의 각 허상이미지 포인트 각각의 서브홀로그램을 계산하는 과정을 더 포함하는 방법.
  11. 제10 항에 있어서,
    상기 허상이미지의 홀로그램을 형성하기 위해 상기 각각의 서브홀로그램들을 중첩시키는 과정을 더 포함하는 방법.
  12. 제1 항 또는 제2 항에 있어서,
    각 서브홀로그램은, 대응 허상이미지 포인트로부터 뷰어를 향해 광파를 전파하고 상기 영역의 대응 위치에 도달하는 복소 광 필드(complex light field)를 결정함으로써 결정되는 포인트 클라우드 홀로그램이고,
    선택적으로, 상기 광파는 구형 광파(spherical light wave)인 방법.
  13. 제1 항에 있어서,
    상기 도파관에 의해 형성된 상기 디스플레이장치의 각 가상 복제물은, 상기 디스플레이장치의 가상 복제물들의 엇갈린(staggered) 가상 표면이 형성되도록 상기 디스플레이장치로부터 상이한 수직 거리에 있는 방법.
  14. 제1 항에 있어서,
    상기 디스플레이장치의 각 가상 복제물은 상기 도파관에 의해 형성된 상기 홀로그램의 각 복제물에 대응하는 방법.
  15. 제13 항 또는 제14 항에 있어서,
    상기 디스플레이장치로부터 상기 도파관에 의해 형성된 상기 홀로그램의 대응 복제물까지 상기 도파관 내의 광학적 경로를 전개함으로써 상기 디스플레이장치의 각 가상 복제물의 위치를 결정하는 과정을 더 포함하는 방법.
  16. 홀로그램을 표시하도록 구성된 디스플레이장치 및 상기 홀로그램을 복제하도록 구성된 도파관을 포함하는 광학시스템에 대한 허상이미지의 홀로그램을 계산하는 방법에 있어서,
    상기 허상이미지의 각 허상이미지 포인트의 서브홀로그램을 결정하는 과정을 포함하되, 각 서브홀로그램은:
    각각의 허상이미지 포인트로부터 뷰어를 향해 광파를 전파하는 과정;
    상기 허상이미지 및 상기 뷰어 사이의 가상 표면에서 전파하는 광파의 교차 영역을 규정하는 과정, 상기 가상 표면은 상기 디스플레이장치 및 상기 도파관에 의해 형성된 상기 디스플레이장치의 복수의 가상 복제물들을 포함하고, 규정된 영역은 상기 각각의 허상이미지 포인트로부터 상기 뷰어의 눈의 입사동공 주변부까지의 직선 경로에 의해 경계가 지정됨;
    복소 광 필드의 상기 규정된 영역의 하나 이상의 하위 영역을 식별하는 과정, 각 하위 영역은 상기 디스플레이장치 및 상기 복수의 가상 복제물들 중 다른 하나에 대응하는 위치에서 상기 가상 표면과 교차하되,
    상기 복소 광 필드의 상기 하나 이상의 하위 영역 각각은 상기 서브홀로그램의 각 구성요소를 형성하는 홀로그램 계산 방법.
  17. 프로세서에 의해 실행될 때 제1 항 또는 제16 항의 방법을 수행하는 명령들을 포함하는 컴퓨터 판독 가능 매체.
  18. 홀로그램을 표시하도록 구성된 디스플레이장치 및 상기 홀로그램을 복제하도록 구성된 도파관을 포함하는 광학시스템에 대한 허상이미지의 홀로그램을 계산하기 위한 홀로그램 엔진으로서,
    상기 홀로그램 엔진은, 허상이미지 포인트로부터 뷰어의 입사동공(entrance pupil) 주변부까지의 직선 경로들에 의해 규정된 영역 내의 상기 허상이미지 포인트의 서브홀로그램을 결정하도록 구성되되,
    상기 영역은 상기 도파관에 의해 형성된 상기 디스플레이장치의 가상 복제물의 적어도 일부를 포함하는 홀로그램 엔진.
KR1020220182296A 2021-12-23 2022-12-22 컴팩트한 헤드-업 디스플레이를 위한 홀로그램 계산 장치 및 방법 KR20230096898A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GB2118911.3 2021-12-23
GB2118911.3A GB2614286B (en) 2021-12-23 2021-12-23 Hologram calculation for compact head-up display

Publications (1)

Publication Number Publication Date
KR20230096898A true KR20230096898A (ko) 2023-06-30

Family

ID=80111846

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220182296A KR20230096898A (ko) 2021-12-23 2022-12-22 컴팩트한 헤드-업 디스플레이를 위한 홀로그램 계산 장치 및 방법

Country Status (5)

Country Link
US (1) US20230204953A1 (ko)
EP (1) EP4202561A1 (ko)
KR (1) KR20230096898A (ko)
CN (1) CN116339099A (ko)
GB (1) GB2614286B (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2618630A (en) * 2022-10-20 2023-11-15 Envisics Ltd Hologram calculation for compact head-up display

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9406166B2 (en) * 2010-11-08 2016-08-02 Seereal Technologies S.A. Display device, in particular a head-mounted display, based on temporal and spatial multiplexing of hologram tiles
EP3807706A1 (de) * 2018-06-15 2021-04-21 Continental Automotive GmbH Gerät zum erzeugen eines virtuellen bildes mit feldpunktabhängiger apertur
US11287655B2 (en) * 2019-06-21 2022-03-29 Samsung Electronics Co.. Ltd. Holographic display apparatus and method for providing expanded viewing window

Also Published As

Publication number Publication date
TW202331430A (zh) 2023-08-01
EP4202561A1 (en) 2023-06-28
GB2614286A (en) 2023-07-05
GB2614286B (en) 2024-01-17
CN116339099A (zh) 2023-06-27
US20230204953A1 (en) 2023-06-29
GB202118911D0 (en) 2022-02-09

Similar Documents

Publication Publication Date Title
KR20230042584A (ko) 컴팩트한 헤드-업 디스플레이
GB2613086A (en) Image projection
KR20230031135A (ko) 홀로그램 계산
KR20230042583A (ko) 컴팩트한 헤드-업 디스플레이
US20230324705A1 (en) Image Projection
US20230204953A1 (en) Hologram Calculation For Compact Head-Up Display
US11853006B2 (en) Light engine
US20230194874A1 (en) Compact Head-Up Display and Waveguide Therefor
TWI843319B (zh) 用於計算光學系統之虛擬影像之全像圖的方法、電腦可讀取媒體及系統
US20230367115A1 (en) Compact head-up display and waveguide therefor
US11966046B2 (en) Compact head-up display and waveguide therefor
US20240134312A1 (en) Hologram calculation for compact head-up display
US20230418053A1 (en) Compact head-up display and pupil expander therefor
US20240045378A1 (en) Projection Assembly
US20240036308A1 (en) Hologram waveguiding
KR20230156259A (ko) 헤드-업 디스플레이

Legal Events

Date Code Title Description
E902 Notification of reason for refusal