CN114815287A - 用于生成投影3d光场的光场图像引擎方法和装置 - Google Patents

用于生成投影3d光场的光场图像引擎方法和装置 Download PDF

Info

Publication number
CN114815287A
CN114815287A CN202210271825.1A CN202210271825A CN114815287A CN 114815287 A CN114815287 A CN 114815287A CN 202210271825 A CN202210271825 A CN 202210271825A CN 114815287 A CN114815287 A CN 114815287A
Authority
CN
China
Prior art keywords
light
mirror
dmd
image
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210271825.1A
Other languages
English (en)
Other versions
CN114815287B (zh
Inventor
朱卡-塔帕尼·马基宁
凯·奥亚拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
InterDigital Madison Patent Holdings SAS
Original Assignee
InterDigital Madison Patent Holdings SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by InterDigital Madison Patent Holdings SAS filed Critical InterDigital Madison Patent Holdings SAS
Priority to CN202210271825.1A priority Critical patent/CN114815287B/zh
Publication of CN114815287A publication Critical patent/CN114815287A/zh
Application granted granted Critical
Publication of CN114815287B publication Critical patent/CN114815287B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0075Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. increasing, the depth of field or depth of focus
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/22Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
    • G02B30/24Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type involving temporal multiplexing, e.g. using sequentially activated left and right shutters
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/08Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
    • G02B26/10Scanning systems
    • G02B26/105Scanning systems with one or more pivoting mirrors or galvano-mirrors
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/10Beam splitting or combining systems
    • G02B27/1066Beam splitting or combining systems for enhancing image performance, like resolution, pixel numbers, dual magnifications or dynamic range, by tiling, slicing or overlapping fields of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/10Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images using integral imaging methods
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/33Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving directional light or back-light sources
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/50Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/60Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images involving reflecting prisms and mirrors only
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/54Accessories
    • G03B21/56Projection screens
    • G03B21/60Projection screens characterised by the nature of the surface
    • G03B21/602Lenticular screens
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/307Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using fly-eye lenses, e.g. arrangements of circular lenses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/322Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using varifocal lenses or mirrors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/349Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/354Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying sequentially
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/363Image reproducers using image projection screens
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/365Image reproducers using digital micromirror devices [DMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/385Image reproducers alternating rapidly the location of the left-right image components on the display screens

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Mechanical Optical Scanning Systems (AREA)
  • Mechanical Light Control Or Optical Switches (AREA)
  • Overhead Projectors And Projection Screens (AREA)
  • Projection Apparatus (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)

Abstract

描述了用于提供三维显示的系统和方法。在示例中,显示设备包括光引擎、空间光调制器、一个或多个可定向反射镜和投影透镜。来自所述光引擎的光由所述空间光调制器调制,由所述可定向反射镜(一个或多个)反射至所述投影透镜,并由所述投影透镜投影(例如,投影到屏幕上)。所述可定向反射镜镜(一个或多个)可以包括可旋转反射镜或数字微镜器件。所述空间光调制器可以是数字微镜器件。所述空间光调制器和所述可定向反射镜(一个或多个)被同步,以便针对所述可定向反射镜(一个或多个)的不同位置生成不同的调制光图案。不同调制光图案在不同方向上的所述投影可产生从不同用户视角可见的不同视图。

Description

用于生成投影3D光场的光场图像引擎方法和装置
本申请为2018年8月21日递交的题为“用于生成投影3D光场的光场图像 引擎方法和装置”的中国专利申请No.201880054833.2的分案申请,该申请 在此通过引用而被整体并入。
相关申请的交叉引用
本申请是以下申请的非临时申请,并根据35U.S.C.§119(e)而要求其权益: 2017年8月23日递交的题为“用于产生投影3D光场的光场图像引擎方法和 装置(LIGHT FIELDIMAGE ENGINE METHOD AND APPARATUS FOR GENERATING PROJECTED 3D LIGHT FIELDS)”的美国临时专利申请序列 号62/549,386、2017年9月1日递交的题为“用于使用双DMD光场图像引 擎生成投影3D光场的系统和方法(SYSTEMS AND METHODS FOR GENERATINGPROJECTED 3D LIGHT FIELDS USING A DOUBLE-DMD LIGHT FIELD IMAGE ENGINE)”的美国临时专利申请序列号62/553,615、以 及2018年1月15日递交的题为“基于微镜器件的3D显示定向背光(3D DISPLAY DIRECTIONAL BACKLIGHT BASED ON MICROMIRRORS)”的 美国临时专利申请序列号62/617,539,其每一个申请在此通过引用而被整体 并入。
背景技术
一些当前类型的3D显示器能够提供用于自然3D图像感知的正确聚焦提 示。人类的大脑部分地通过接收来自用于定向每只眼睛的肌肉的信号来感知 和确定所观察的对象的深度。该大脑将眼睛的相对角取向与所确定的焦深相 关联。正确的聚焦提示引起在观察的焦平面(focal plane)之外的对象上的自然 模糊和自然的动态视差效应。
能够提供正确的聚焦提示的一种类型的3D显示器使用体积显示技术,其 能够在真实3D空间中产生3D图像。3D图像的每个“体素”物理上位于其应 该所处的空间位置,并且从该位置向观察者反射或发射光以在观看者的眼睛 中形成实像。3D体积显示器的主要问题是它们的低分辨率、大的物理尺寸 和昂贵的制造成本。这些问题使得它们太麻烦而不能在特殊情况(例如产品 展示、博物馆、展览等)之外使用。
能够提供正确的视网膜聚焦提示的另一种类型的3D显示设备是全息显 示器。全息显示器的目的在于重建从自然环境中的对象散射的整个光波阵面。 这种技术的主要问题是缺少可以用于产生非常详细的波阵面的适当的空间 光调制器(SLM)组件。
能够提供自然视网膜聚焦提示的另一种类型的3D显示技术被称为光场 (LF)显示。LF显示系统被设计成产生所谓的光场,该光场表示在空间中向所 有方向传播的光线。LF系统旨在控制空间域和角度域中的光发射,而不是 像传统的立体3D显示器那样基本上只能控制具有较高像素密度的空间域。 存在不同的方式来产生光场。
在第一种方法中,在观看者的每只眼睛上产生视差,产生与被观察对象 的3D位置相对应的正确视网膜模糊。这可以通过每单只眼睛呈现多个视图 来完成。
第二种方法是多焦平面方法,其中对象的图像被投影到与其3D位置相对 应的适当焦平面。许多光场显示器使用这两种方法中的一种。所述第一种方 法通常更适合于头戴式单用户设备,因为眼睛瞳孔的位置更容易确定并且眼 睛更靠近显示器,使得可以生成期望的密集光线场。所述第二种方法更适合 于位于距观看者(一个或多个)一定距离处的显示器,并且可以在没有头戴装 备的情况下被使用。
在当前的相对低密度的多视图成像显示器中,当观看者在设备前面移动 时,视图以粗略的步进方式改变。这降低了3D体验的质量,甚至可能导致 3D感知的完全崩溃。为了减轻这个问题(以及聚散度-调节冲突),已经用多 达512个视图测试了一些超多视图(SMV)技术。该思想是产生非常大量的视 图,以便使两个视点之间的任何过渡非常平滑。如果来自至少两个图像的光 从稍微不同的视点同时进入瞳孔,则会产生更加逼真的视觉体验。在这种情 况下,由于大脑无意识地预测由于运动而引起的图像变化,因此运动视差效 果更好地类似于自然条件。
SMV条件可以通过将在正确观看距离处的两个视图之间的间隔减小到比 眼睛瞳孔的尺寸更小的值来满足。在正常照射条件下,人的瞳孔通常被估计 为直径大约4mm。如果环境光水平高(例如,在日光中),则所述直径可以小 至1.5mm,并且在黑暗条件下大至8mm。SMV显示器可以实现的最大角密 度受衍射限制,并且在空间分辨率(像素尺寸)和角分辨率之间存在反比关系。 衍射增加了通过孔径的光束的角展度,并且在设计非常高密度的SMV显示 器时可以考虑这种效应。
不同的现有3D显示器可以基于它们的成型因数被分类成各种不同的 类别。
头戴式设备(HMD)比无护目镜的解决方案占用更少的空间,这也意味 着它们可以用更小的组件和更少的材料制成,使得它们相对低成本。然而, 由于头戴式VR护目镜和智能眼镜是单个用户设备,它们不允许如无护目镜 解决方案那样自然地共享体验。
体积3D显示器从所有三个空间方向占据空间,并且需要大量物理材 料,使得这些系统笨重、制造昂贵并且难以运输。由于大量使用材料,因此 所述体积显示器还往往具有小的“窗口”和有限的视场(FOV)。
基于投影的3D显示器通常具有一个大而平的组件(即,屏幕)和从一 定距离在自由空间上投影图像(一个或多个)的系统。这些系统可以被制造得 更紧凑以便运输,并且它们还覆盖比例如体积显示器大得多的FOV。这些系 统往往复杂且昂贵,因为它们需要投影仪子组件以及例如不同部件之间的精 确对准,使得它们最适用于专业使用情况。
平面成型因数3D显示器可能在两个空间方向上需要大量空间,但是 由于第3方向仅是虚拟的,因此它们相当容易运输和组装到不同的环境。由 于该设备是平的,所以其中使用的至少一些光学组件更可能以片或卷的形式 制造,使得它们在大批量时成本相对较低。
这些问题中的一些问题在移动设备的应用中可能进一步恶化。
发明内容
描述了用于提供三维显示的系统和方法。在示例中,显示设备包括光 引擎、空间光调制器、一个或多个可定向反射镜(mirror)和投影透镜。来自所 述光引擎的光由所述空间光调制器调制,由所述可定向反射镜反射至所述投 影透镜(一个或多个),并由所述投影透镜投影(例如,投影到屏幕上)。所述 可定向反射镜(一个或多个)可以包括可旋转反射镜或数字微镜(micromirror) 器件。所述空间光调制器可以是数字微镜器件。所述空间光调制器和所述(一 个或多个)可定向反射镜被同步,以便针对所述(一个或多个)可定向反射镜的 不同位置生成不同的调制光图案。不同调制光图案在不同方向上的投影可产 生从不同用户视角可见的不同视图。
在一个示例中,显示设备包括光引擎、投影透镜、以及沿着从所述光 引擎到所述投影透镜的光学路径的空间光调制器。在一些实施例中,所述空 间光调制器是数字微镜器件。至少一个可定向反射镜沿着所述光学路径在所 述空间光调制器和所述投影透镜之间被设置。所述显示设备可以包括屏幕, 其中所述投影透镜被配置为将所调制的光投影在所述屏幕上。所述屏幕可以 包括凸镜状(lenticular)片层和光漫射层。
在一些实施例中,所述(一个或多个)可定向反射镜包括可旋转反射镜。 可以提供马达以旋转所述可旋转反射镜。可以提供控制电子设备以使马达与 所述空间光调制器同步。
在一些实施例中,所述(一个或多个)可定向反射镜包括具有多个可单 独定向的微镜的数字微镜器件。在这样的实施例中,成像透镜可以被所述设 置在空间光调制器和所述数字微镜器件之间。在所述空间光调制器包括多个 像素的情况下,所述成像透镜可以被配置成将每个像素成像到相应的微镜上。 多于一个的像素可以被成像到每个微镜上。
在根据一些实施例的方法中,光从光源被引导到空间光调制器。当至 少一个可定向反射镜处于第一位置时,利用所述空间光调制器调制所述光以 生成第一调制光图案,并且该第一调制光图案被从所述(一个或多个)可定向 反射镜朝向投影透镜反射。当所述(一个或多个)可定向反射镜处于第二位置 时,所述光被所述空间光调制器调制以生成第二调制光图案,并且该第二调 制光图案被从所述(一个或多个)可定向反射镜朝向所述投影透镜反射。所述 第一和第二调制光图案被从所述投影透镜投影到例如屏幕上。所述(一个或多个)可定向反射镜可以循环通过包括所述第一位置和所述第二位置的多个 位置。在一些实施例中,这种循环以60Hz或更高的速率进行。
在一些实施例中,所述(一个或多个)可定向反射镜包括可旋转反射镜, 其重复地旋转通过包括所述第一和第二位置的多个位置。
在一些实施例中,所述(一个或多个)可定向反射镜包括具有多个可单 独定向的微镜的数字微镜器件。在这样的实施例中,所述微镜可倾斜通过包 括所述第一和第二位置的多个位置。
在一些实施例中,所述空间光调制器包括多个像素。每个像素可以利 用成像透镜而被成像到相应的微镜上。多于一个的像素可以被成像到每个微 镜上。
附图说明
从以下结合附图以示例方式呈现的描述中可以获得更详细的理解,在 附图中,附图中相同的附图标记指示相同的元素,并且其中:
图1A是示出了可以实现一个或多个所公开的实施例的示例通信系统 的系统图。
图1B是根据实施例的系统图,其示出了可在图1A所示的通信系统 中使用的示例性无线发射/接收单元(WTRU)。
图2A-2D示出了当观看真实世界对象(图2A-2B)和自动立体3D显示 器(图2C-2D)时的各种焦距和眼睛会聚角。
图3A-3C描述了朝向瞳孔的光场的各种遮挡水平。
图4是具有投影仪阵列的LF投影系统的示意图。
图5是根据一些实施例的基于光场图像引擎(LFIE)的LF投影系统的 示意图。
图6是根据一些实施例的LF图像引擎的结构的示意性表示。
图7是根据一些实施例的利用LFIE的彩色图像生成的示意性呈现。
图8示出了根据一些实施例的在多个垂直视图的同时生成中使用的分 面(faceted)旋转反射镜。
图9是根据一些实施例的LF投影仪设备的结构的示意性表示。
图10是根据一些实施例的多用户LF投影系统光学构造的示意性表示, 其中屏幕部分对于观看者可见的。
图11是根据一个实施例的利用包括LFIE的LF投影仪设备的LF投 影系统的示意图。
图12A示出了根据一些实施例的能够向多个观看方向和两个不同焦 面(focalsurface,FS)投影图像的LF图像引擎的组件和结构,其中投影方向 (PD)由处位置1中的旋转反射镜设置。
图12B示出了根据一些实施例的图10的LF图像引擎的组件和结构, 其中投影方向由处于位置2的旋转反射镜设置。
图13A示出了根据一些实施例的基于LFIE的针对多个用户的LF投 影系统。
图13B示出了根据一些实施例的基于LFIE的针对单个用户的LF投 影系统。
图14描绘了根据实施例的使用双DMD光场图像引擎(DDMD-LFIE) 的光场投影系统的概览。
图15描述了根据实施例的DDMD-LFIE的示例结构的示意性表示。
图16A-16B描绘了根据一个实施例的第一DMD与第二DMD之间的 各种示例放大率。
图17示出了根据实施例的具有DDMD-LFIE的光场投影仪设备的示 例结构的示意性表示。
图18示出了根据实施例的采用图17的光场投影仪设备和透射式背投 屏幕的示例光场投影系统的示意性表示。
图19描绘了根据实施例的图18的光场投影系统中的示例颜色组合方 法的示意性表示。
图20A描绘了根据实施例的示例DDMD-LFIE。
图20B描绘了根据一个实施例的图20A的第二DMD的放大视图。
图21描绘了根据一个实施例的图20A的DDMD-LFIE以及对应于各 种第二DMD倾斜量的各种虚像。
图22示出了根据一个实施例的图20A的DDMD-LFIE、投影透镜和 投影屏幕。
图23描绘了根据实施例的图22的投影屏幕的结构和几何形状的示意 性呈现。
图24A-24B示出了根据一个实施例的当图像被投影到图22的投影屏 幕上时引起的衍射。
图25为一结构的示意图,其中光准直静态反射镜与μLED阵列一起 使用以产生不同方向的多个图像。
图26是一结构的示意图,其中光准直倾斜反射镜与μLED阵列一起 用于产生不同方向的多个图像。
图27是一结构的示意图,其中光准直倾斜反射镜与RGBμLED阵列 一起用于产生全色图像。
图28A-28B提供了两种展示情况下的观看几何结构的图示:具有平行 的发射方向角(图28A)和具有会聚的发射方向角(图28B)。
图29A-29B提供了示例实施例的使用情况的示意图,其中从500mm 的距离观看具有10"3D多视图显示器和眼睛跟踪模块的平板设备。
图30是显示设备的一部分的横截面图,其示出了一个示例性实施例 中此设备的物理尺寸(以μm为单位)。
图31A-31B示出了在光线跟踪模拟中使用的几何结构,其中图31A 是两个光源和微镜的特写视图,图31B是具有两个模拟光束的几何结构的总 图。
图32示出了示例用例的观看几何结构。
图33是根据一些实施例的用作LCD屏幕的定向背光(backlight)模块 的结构的示意性横截面图示。
图34示出了根据一些实施例的定向背光的示例性用例的观看条件。
图35是示出根据一些实施例的光学背光结构的示例测量(以μm为单 位)的截面图。
图36示出了示例用例的观看几何结构。
图37为示出根据一些实施例的光学背光结构的示例测量(以μm为单 位)的截面图。
用于实施例的实现的示例网络
图1A是示出了可以实施一个或多个所公开的实施例的示例通信系统 100的示图。该通信系统100可以是为多个无线用户提供语音、数据、视频、 消息传递、广播等内容的多址接入系统。该通信系统100可以通过共享包括 无线带宽在内的系统资源而使多个无线用户能够接入此类内容。举例来说, 通信系统100可以使用一种或多种信道接入方法,例如码分多址(CDMA)、 时分多址(TDMA)、频分多址(FDMA)、正交FDMA(OFDMA)、单载波 FDMA(SC-FDMA)、零尾唯一字DFT-扩展OFDM(ZT UW DTS-s OFDM)、唯 一字OFDM(UW-OFDM)、资源块过滤OFDM以及滤波器组多载波(FBMC) 等等。
如图1A所示,通信系统100可以包括无线发射/接收单元(WTRU)102a、 102b、102c、102d、RAN 104/113、CN 106/115、公共交换电话网络(PSTN)108、 因特网110以及其他网络112,然而应该了解,所公开的实施例设想了任意 数量的WTRU、基站、网络和/或网络部件。每一个WTRU 102a、102b、102c、 102d可以是被配置成在无线环境中工作和/或通信的任何类型的设备。举例 来说,任一WTRU 102a、102b、102c、102d都可被称为“站”和/或“STA”, 其可以被配置成发射和/或接收无线信号,并且可以包括用户设备(UE)、移动 站、固定或移动订户单元、基于签约的单元、寻呼机、蜂窝电话、个人数字 助理(PDA)、智能电话、膝上型计算机、上网本、个人计算机、无线传感器、 热点或Mi-Fi设备、物联网(IoT)设备、手表或其他可穿戴设备、头戴显示器 (HMD)、车辆、无人机、医疗设备和应用(例如远程手术)、工业设备和应用(例 如机器人和/或在工业和/或自动处理链环境中工作的其他无线设备)、消费类电子设备、以及在商业和/或工业无线网络上工作的设备等等。WTRU 102a、 102b、102c、102d中的任意者可被可交换地称为UE。
通信系统100还可以包括基站114a和/或基站114b。每一个基站114a、 114b可以是被配置成通过以无线方式与WTRU 102a、102b、102c、102d中 的至少一个无线对接来促使其接入一个或多个通信网络(例如CN 106/115、 因特网110、和/或其他网络112)的任何类型的设备。举例来说,基站114a、 114b可以是基地收发信台(BTS)、节点B、e节点B、家庭节点B、家庭e节 点B、gNB、NR节点B、站点控制器、接入点(AP)、以及无线路由器等等。 虽然每一个基站114a、114b都被描述成了单个部件,然而应该了解。基站 114a、114b可以包括任何数量的互连基站和/或网络部件。
基站114a可以是RAN 104/113的一部分,并且所述RAN还可以包括 其他基站和/或网络部件(未显示),例如基站控制器(BSC)、无线电网络控制 器(RNC)、中继节点等等。基站114a和/或基站114b可被配置成在名为小区 (未显示)的一个或多个载波频率上发射和/或接收无线信号。这些频率可以处 于授权频谱、无授权频谱或是授权与无授权频谱的组合之中。小区可以为相 对固定或者有可能随时间变化的特定地理区域提供无线服务覆盖。小区可被 进一步分成小区扇区。例如,与基站114a相关联的小区可被分为三个扇区。 由此,在一个实施例中,基站114a可以包括三个收发信机,也就是说,每 一个收发信机都对应于小区的一个扇区。在实施例中,基站114a可以使用 多输入多输出(MIMO)技术,并且可以为小区的每一个扇区使用多个收发信 机。举例来说,通过使用波束成形,可以在期望的空间方向上发射和/或接收 信号。
基站114a、114b可以通过空中接口116来与WTRU 102a、102b、102c、 102d中的一者或多者进行通信,其中所述空中接口可以是任何适当的无线通 信链路(例如射频(RF)、微波、厘米波、微米波、红外线(IR)、紫外线(UV)、 可见光等等)。空中接口116可以使用任何适当的无线电接入技术(RAT)来建 立。
更具体地说,如上所述,通信系统100可以是多址接入系统,并且可 以使用一种或多种信道接入方案,例如CDMA、TDMA、FDMA、OFDMA 以及SC-FDMA等等。例如,RAN 104/113中的基站114a与WTRU 102a、 102b、102c可以实施某种无线电技术,例如通用移动电信系统(UMTS)陆地 无线电接入(UTRA),其中所述技术可以使用宽带CDMA(WCDMA)来建立空 中接口115/116/117。WCDMA可以包括如高速分组接入(HSPA)和/或演进型 HSPA(HSPA+)之类的通信协议。HSPA可以包括高速下行链路(DL)分组接入 (HSDPA)和/或高速UL分组接入(HSUPA)。
在实施例中,基站114a和WTRU 102a、102b、102c可以实施某种无 线电技术,例如演进型UMTS陆地无线电接入(E-UTRA),其中所述技术可 以使用长期演进(LTE)和/或先进LTE(LTE-A)和/或先进LTA Pro(LTE-A Pro) 来建立空中接口116。
在实施例中,基站114a和WTRU 102a、102b、102c可以实施某种无 线电技术,例如NR无线电接入,其中所述无线电技术可以使用新型无线电 (NR)来建立空中接口116。
在实施例中,基站114a和WTRU 102a、102b、102c可以实施多种无 线电接入技术。举例来说,基站114a和WTRU 102a、102b、102c可以共同 实施LTE无线电接入和NR无线电接入(例如使用双连接(DC)原理)。由此, WTRU 102a、102b、102c使用的空中接口可以通过多种类型的无线电接入 技术和/或向/从多种类型的基站(例如eNB和gNB)发送的传输来表征。
在其他实施例中,基站114a和WTRU 102a、102b、102c可以实施以 下的无线电技术,例如IEEE 802.11(即无线高保真(WiFi))、IEEE 802.16(全球 微波接入互操作性(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000 EV-DO、临时标准2000(IS-2000)、临时标准95(IS-95)、临时标准856(IS-856)、 全球移动通信系统(GSM)、用于GSM演进的增强数据速率(EDGE)以及GSM EDGE(GERAN)等等。
图1A中的基站114b可以是无线路由器、家庭节点B、家庭e节点B 或接入点,并且可以使用任何适当的RAT来促成局部区域中的无线连接, 例如营业场所、住宅、车辆、校园、工业设施、空中走廊(例如供无人机使 用)以及道路等等。在一个实施例中,基站114b与WTRU102c、102d可以 通过实施IEEE 802.11之类的无线电技术来建立无线局域网(WLAN)。在实施 例中,基站114b与WTRU 102c、102d可以通过实施IEEE 802.15之类的无 线电技术来建立无线个人局域网(WPAN)。在再一实施例中,基站114b和 WTRU 102c、102d可通过使用基于蜂窝的RAT(例如WCDMA、CDMA2000、 GSM、LTE、LTE-A、LTE-A Pro、NR等等)来建立微微小区或毫微微小区。 如图1A所示,基站114b可以直连到因特网110。由此,基站114b不需要 经由CN106/115来接入因特网110。
RAN 104/113可以与CN 106/115进行通信,其中所述CN可以是被配 置成向一个或多个WTRU 102a、102b、102c、102d提供语音、数据、应用 和/或借助网际协议语音(VoIP)服务的任何类型的网络。该数据可以具有不同 的服务质量(QoS)需求,例如不同的吞吐量需求、延时需求、容错需求、可 靠性需求、数据吞吐量需求、以及移动性需求等等。CN 106/115可以提供呼 叫控制、记账服务、基于移动位置的服务、预付费呼叫、因特网连接、视频 分发等等,和/或可以执行用户验证之类的高级安全功能。虽然在图1A中没 有显示,然而应该了解,RAN 104/113和/或CN 106/115可以直接或间接地 和其他那些与RAN 104/113使用相同RAT或不同RAT的RAN进行通信。 例如,除了与使用NR无线电技术的RAN 104/113相连之外,CN 106/115还 可以与使用GSM、UMTS、CDMA 2000、WiMAX、E-UTRA或WiFi无线 电技术的别的RAN(未显示)通信。
CN 106/115还可以充当供WTRU 102a、102b、102c、102d接入PSTN 108、因特网110和/或其他网络112的网关。PSTN 108可以包括提供简易老 式电话服务(POTS)的电路交换电话网络。因特网110可以包括使用了公共通 信协议(例如TCP/IP网际协议族中的传输控制协议(TCP)、用户数据报协议 (UDP)和/或网际协议(IP))的全球性互联计算机网络设备系统。所述网络112 可以包括由其他服务供应商拥有和/或运营的有线和/或无线通信网络。例如, 所述其他网络112可以包括与一个或多个RAN相连的另一个CN,其中所述 一个或多个RAN可以与RAN 104/113使用相同RAT或不同RAT。
通信系统100中一些或所有WTRU 102a、102b、102c、102d可以包 括多模能力(例如,WTRU 102a、102b、102c、102d可以包括在不同无线链 路上与不同无线网络通信的多个收发信机)。例如,图1A所示的WTRU 102c 可被配置成与可以使用基于蜂窝的无线电技术的基站114a通信,以及与可 以使用IEEE 802无线电技术的基站114b通信。
图1B是示出了例示WTRU 102的系统图示。如图1B所示,WTRU 102 可以包括处理器118、收发信机120、发射/接收部件122、扬声器/麦克风124、 键盘126、显示器/触摸板128、不可移除存储器130、可移除存储器132、电 源134、全球定位系统(GPS)芯片组136以及其他周边设备138。应该了解的 是,在保持符合实施例的同时,WTRU 102还可以包括前述部件的任何子组 合。
处理器118可以是通用处理器、专用处理器、常规处理器、数字信号 处理器(DSP)、多个微处理器、与DSP核心关联的一个或多个微处理器、控 制器、微控制器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、其 他任何类型的集成电路(IC)以及状态机等等。处理器118可以执行信号编码、 数据处理、功率控制、输入/输出处理、和/或其他任何能使WTRU 102在无 线环境中工作的功能。处理器118可以耦合至收发信机120,收发信机120 可以耦合至发射/接收部件122。虽然图1B将处理器118和收发信机120描 述成单独组件,然而应该了解,处理器118和收发信机120也可以集成在一 个电子组件或芯片中。
发射/接收部件122可被配置成经由空中接口116来发射或接收去往或 来自基站(例如基站114a)的信号。举个例子,在一个实施例中,发射/接收部 件122可以是被配置成发射和/或接收RF信号的天线。作为示例,在实施例 中,发射/接收部件122可以是被配置成发射和/或接收IR、UV或可见光信 号的放射器/检测器。在实施例中,发射/接收部件122可被配置成发射和/或 接收RF和光信号。应该了解的是,发射/接收部件122可以被配置成发射和 /或接收无线信号的任何组合。
虽然在图1B中将发射/接收部件122描述成是单个部件,但是WTRU 102可以包括任何数量的发射/接收部件122。更具体地说,WTRU 102可以 使用MIMO技术。由此,在实施例中,WTRU 102可以包括两个或多个通过 空中接口116来发射和接收无线电信号的发射/接收部件122(例如多个天线)。
收发信机120可被配置成对发射/接收部件122所要传送的信号进行调 制,以及对发射/接收部件122接收的信号进行解调。如上所述,WTRU 102 可以具有多模能力。因此,收发信机120可以包括允许WTRU 102借助多种 RAT(例如NR和IEEE 802.11)来进行通信的多个收发信机。
WTRU 102的处理器118可以耦合到扬声器/麦克风124、键盘126和 /或显示器/触摸板128(例如液晶显示器(LCD)显示单元或有机发光二极管 (OLED)显示单元),并且可以接收来自这些部件的用户输入数据。处理器118 还可以向扬声器/麦克风124、键盘126和/或显示器/触摸板128输出用户数 据。此外,处理器118可以从诸如不可移除存储器130和/或可移除存储器 132之类的任何适当的存储器中存取信息,以及将信息存入这些存储器。不 可移除存储器130可以包括随机存取存储器(RAM)、只读存储器(ROM)、硬 盘或是其他任何类型的记忆存储设备。可移除存储器132可以包括订户标识 模块(SIM)卡、记忆棒、安全数字(SD)记忆卡等等。在其他实施例中,处理 器118可以从那些并非实际位于WTRU 102的存储器存取信息,以及将数据 存入这些存储器,作为示例,此类存储器可以位于服务器或家庭计算机(未 显示)。
处理器118可以接收来自电源134的电力,并且可被配置分发和/或控 制用于WTRU102中的其他组件的电力。电源134可以是为WTRU 102供 电的任何适当设备。例如,电源134可以包括一个或多个干电池组(如镍镉 (Ni-Cd)、镍锌(Ni-Zn)、镍氢(NiMH)、锂离子(Li-ion)等等)、太阳能电池以及 燃料电池等等。
处理器118还可以耦合到GPS芯片组136,该芯片组可被配置成提供 与WTRU 102的当前位置相关的位置信息(例如经度和纬度)。作为来自GPS 芯片组136的信息的补充或替换,WTRU 102可以经由空中接口116接收来 自基站(例如基站114a、114b)的位置信息,和/或根据从两个或更多个附近基 站接收的信号定时来确定其位置。应该了解的是,在保持符合实施例的同时, WTRU 102可以借助任何适当的定位方法来获取位置信息。
处理器118还可以耦合到其他周边设备138,其中所述周边设备可以 包括提供附加特征、功能和/或有线或无线连接的一个或多个软件和/或硬件 模块。例如,周边设备138可以包括加速度计、电子指南针、卫星收发信机、 数码相机(用于照片和/或视频)、通用串行总线(USB)端口、振动设备、电视 收发信机、免提耳机、
Figure BDA0003553713880000161
模块、调频(FM)无线电单元、数字音乐播 放器、媒体播放器、视频游戏机模块、因特网浏览器、虚拟现实和/或增强现 实(VR/AR)设备、以及活动跟踪器等等。周边设备138可以包括一个或多个 传感器,所述传感器可以是以下的一个或多个:陀螺仪、加速度计、霍尔效 应传感器、磁力计、方位传感器、邻近传感器、温度传感器、时间传感器、 地理位置传感器、高度计、光传感器、触摸传感器、磁力计、气压计、手势 传感器、生物测定传感器和/或湿度传感器。
WTRU 102可以包括全双工无线电设备,其中对于该无线电设备来说, 一些或所有信号(例如与用于UL(例如对传输而言)和下行链路(例如对接收而 言)的特定子帧相关联)的接收或传输可以是并发和/或同时的。全双工无线电 设备可以包括借助于硬件(例如扼流线圈)或是凭借处理器(例如单独的处理 器(未显示)或是凭借处理器118)的信号处理来减少和/或基本消除自干扰的 干扰管理单元。在实施例中,WTRU 102可以包括传送和接收一些或所有信 号(例如与用于UL(例如对传输而言)或下行链路(例如对接收而言)的特定子 帧相关联)的半双工无线电设备。
具体实施方式
现在将参考各个附图来提供对说明性实施例的详细描述。尽管本说明 书提供了可能实施方式的详细示例,但是应当注意,所提供的细节旨在作为 示例,而绝不限制本申请的范围。
注意,所描述的一个或多个实施例的各种硬件元件被称为“模块”,其 实行(即,执行、运行等)在此结合相应模块描述的各种功能。如本文所使用 的,模块包括相关领域的技术人员认为适合于给定实现的硬件(例如,一个 或多个处理器、一个或多个微处理器、一个或多个微控制器、一个或多个微 芯片、一个或多个专用集成电路(ASIC)、一个或多个现场可编程门阵列 (FPGA)、一个或多个存储器设备)。每个所描述的模块还可以包括可执行用于执行被描述为由相应模块执行的一个或多个功能的指令,并且注意,这些 指令可以采取硬件(即,硬连线的)指令、固件指令、和/或软件指令等的形式 或包括它们,并且可以存储在任何适当的非暂时性计算机可读介质或媒体中, 诸如通常被称为RAM、ROM等的那些。
在继续该详细描述之前,应该注意,在各个附图中描绘并结合各个附 图描述的实体、连接、布置等是作为示例而非作为限制来呈现的。因此,关 于以下的任何和所有陈述或其他指示在孤立且脱离上下文的情况下可被解 读为绝对的且因此是限制性的:特定附图“描绘了什么”、特定附图中的特定 元素或实体“是”或“具有”什么、以及任何和所有类似陈述,其可以仅其前被 建设性冠以诸如“在至少一个实施例中,…”等条款的情况下被正确地解读。 为了简洁和清楚地呈现,这意味着在该详细描述中,并不重复这个隐含的前 导条款。
此外,在随后的段落中以及在本公开中的任何其他地方描述的任何变 化和置换可以相对于任何实施例来实现,这其中包括相对于任何方法实施例 和相对于任何系统实施例。
当前通常用于家庭影院和电影院的立体显示器采用次优技术来产生 3D图像。在人脑中,在眼视网膜上的光敏细胞和感测眼肌运动的细胞之间 存在神经连接。当产生深度感知时,相关区域一起工作。自动立体3D显示 器由于图像信息被限制在显示器的平面内的事实而缺乏正确的视网膜聚焦 提示。当眼睛聚焦到与它们会聚的点不同的点时,大脑中的生理信号变得混 乱。会聚和调节的深度提示不匹配导致例如眼睛疲劳、疲乏、恶心和眼睛对 物距的调节较慢。这种现象被称为聚散-调节冲突(VAC),并且它是人工3D 图像中的非比例深度挤压的结果。
图2A和2B描绘当观看现实世界对象时的焦距和眼睛会聚角,且图 2C和2D描绘当观看自动立体3D显示器时的焦距和眼睛会聚角。人在真实 世界中看到的一些部分可能是模糊的,而在显示器的情况下,所有部分都是 焦点对准的。
图3A-3C描述了朝向瞳孔的光场的各种遮挡水平。LF系统旨在控制 空间域和角度域中的光发射,这不同于传统立体3D显示器,其仅能控制空 间域。存在不同的方式来产生光场。
在第一种方法中,在观看者的每只眼睛上产生视差,从而产生与被观 看对象的3D位置相对应的正确视网膜模糊。在一个实施例中,这通过呈现 每个单眼的多个视图来完成。图3A-3C示出了由瞳孔上的视差引起的遮挡。 所得到的变化图像可表示可以被呈现以产生正确的视网膜模糊的各种视图。 如果来自至少两个图像的光从稍微不同的视点同时进入瞳孔,则会产生更逼 真的视觉体验。在这种情况下,由于大脑无意识地预测由于运动而引起的图 像变化,因此运动视差效果更好地类似于自然条件。SMV条件可以通过将 在正确观看距离处的两个视图之间的间隔减小到比眼睛瞳孔的尺寸更小的 值来满足。
第二种方法是多焦平面方法,其中所述对象的图像被投影到对应于其 3D位置的焦平面。
示例微镜技术。当前数字投影仪系统中通常使用的一种空间光调制器 (SLM)组件是数字微镜器件(DMD),其包含非常小的微镜阵列,这些微镜可 以被单独寻址并在图像生成中用作像素。当用定向光源照射该组件时,一些 反射镜向投影透镜倾斜,在屏幕上形成图像,而一些反射镜向吸收额外光的 光阱倾斜。使DMD组件适合于3D图像投影系统的一个特征是可以实现的 非常快的帧率。以下文献内执行了利用包含基于DMD和RGB LED的光引擎的系统投影的全色图像的可能帧率的一个示例计算:O.Bimber等人,“The VisualComputing of Projector-Camera Systems(投影仪-相机系统的视觉计 算)”,EUROGRAPHICS 2007,STAR–State of The Art Report,(2007)。假设 DMD的反射镜可以以15μs(=67000二进制帧每秒)切换,如果三个(RGB)颜 色LED的强度以非常高的速度在八个不同级别(1,2,4,8,16,32,64, 128,256)之间切换,则理论上可以以大约2800Hz(=67000二进制帧每秒/8 (8位编码)强度级别/3个颜色通道)投影全色图像。一个示例组件是德州仪器 的DLP7000,其具有高达32552Hz的二进制帧率。如果对该组件进行了先 前的计算,则可获得全色图像的1360Hz的帧率。以下文献中给出了:基于 几个DMD组件的一个示例3D图像投影系统:Y.Li等人,“360-degree tabletop electronic holographic display(360度桌面电子全息显示器)”,Optics Express Vol.24,Issue 22,pp.24999-25009,(2016)。
许多DMD设备不是设计用于光在整个角度范围内的平滑扫描,而是 设计为二元(开-关)设备。然而,也有其它类型的微镜器件,其已被特别开发 用于此目的。这种系统在例如以下文献中被描述:K.Jia等人, “High-Fill-Factor Micromirror Array WithHidden Bimorph Actuators and Tip-Tilt-Piston Capability(具有隐藏双晶致动器和尖端倾斜柱塞能力的高填 充系数微镜阵列)”;Journal of MicroelectromechanicalSystems,Vol.20,Iss.3, (2011)以及L.Wu等人,“A large-aperture,piston-tip-tiltmicromirror for optical phase array applications(用于光学相位阵列应用的大孔径、柱塞尖端倾斜微 镜)”;Micro Electro Mechanical Systems,2008.MEMS 2008.IEEE21st International Conference,(2008)。这些资源描述了微镜阵列(MMA)结构,其 可以用于在两个方向上扫描大约±30°的角度范围。在Jia等人的文献中提到 的可单独寻址的微镜具有1.5mm的矩形孔径尺寸,而在Wu等人的文献中提 到的微镜为0.5mm宽。这两种系统都基于双压电晶片致动器,当用电流加 热时,所述双压电晶片致动器改变其形状。电热双晶片致动器具有相对快的 响应时间、低的功耗,并且它们可以用低电压(<5V)驱动。也有几种其它类 型的MEMS(微机电系统)系统可以用于反射镜倾斜致动。一个示例可以从以 下文献中找到:S.Waldis等人,“Uniform tilt-angle micromirror array for multi-object spectroscopy(用于多对象光谱学的均匀倾斜角微镜阵列),” Proceedings ofSPIE,Volume 6466,MOEMS and Miniaturized Systems VI, (2007)。在这种情况下,所述微镜是通过从单晶硅蚀刻而制造的,而悬臂型 悬挂结构是通过表面微机械加工而实现的。所得反射镜具有100μm×200μm 以及200μm×500μm的尺寸,并且它们可以倾斜多达20°。总之,根据反射 镜尺寸,所报道的扫描MMA设计可以达到高达几kHz的频率。利用较小的 反射镜孔径,器件谐振频率较高,并且可以用于光的非常快速的角扫描。
示例光源技术。可用于示例性实施例的一种显示技术是所谓的μLED, 例如在V.W.Lee等人的“Micro-LED Technologies and Applications(微型LED 技术及应用)”;Information Display 6/16,(2016)中描述的那些。这些是用与 当今使用的标准LED芯片相同的基本技术和相同的材料制造的LED芯片。 然而,所述μLED是通常可获得的组件的小型化版本,并且它们可以被制成 小至尺寸为1μm–10μm。F.Templier等人的“A NovelProcess for Fabricating High-Resolution and Very Small Pixel-pitch GaN LEDMicrodisplays(一种用于 制造高分辨率和非常小的像素间距GaN LED微显示器的新颖工艺),”SID 2017Digest,268-271,(2017)描述了具有2μm×2μm芯片的矩阵,该芯片以3μm 间距组装。当与OLED相比时,该μLED是稳定得多的组件,且其可达到非 常高的光强度。
一个裸露的μLED芯片可发射光谱宽度为~20-30nm的特定颜色。通 过用磷光体层覆盖所述芯片,可以产生白光源,该磷光体层将由蓝色或UV LED发射的光转换成更宽的白光发射光谱。也可以通过并排放置单独的红色、 绿色和蓝色LED芯片来产生全色源,因为当人类视觉系统组合单独的颜色 发射时,这三种原色的组合可产生全色像素的感觉。前面提到的非常密集的 矩阵将允许制造具有低于10μm(3×3μm间距)的总宽度的自发射全色像素。
来自半导体芯片的光提取效率是确定LED结构的电-光效率的参数之 一。有几种方法可以用于提高所述提取效率,从而使得可以构建更有效地使 用可用电能的基于LED的光源,这对于具有有限电源的移动设备是有用的。 US7994527中提出的一种方法基于使用直接集成在LED芯片顶部上的成形 塑料光学元件。由于较低的折射率差,与芯片被空气包围的情况相比,塑料 成型的集成从芯片材料提取更多的光。该塑料成型还以增强从塑料件的光提 取并使发射图案更具方向性的方式引导光。US7518149中提出的另一种方法 增强了从μLED芯片的光提取。这通过将芯片本身成型为有利于光发射角度 更垂直于半导体芯片的前小面(facet)并且使光更容易逸出高折射率材料的形 式来完成。这些结构还引导从所述芯片发射的光。在后一种情况下,当与常 规μLED相比时,提取效率被计算为好了两倍,并且与其中光均匀地分布到 周围半球的标准芯片的朗伯分布相比,相当多的光被发射到30°的发射光锥。
根据一些实施例,本文描述了与在多个角度方向上投影多个图像的光 场图像引擎(LFIE)相关的系统和方法。所述LFIE通过以下组合创建不同的 图像:1)数字微镜器件(DMD),其充当像素化空间光调制器;2)旋转反射镜, 其穿过所述角度观看范围而扫描所述图像;以及3)光引擎,其生成所述图像 中可见的光。通过比所述扫描反射镜旋转循环更快地调制所述DMD矩阵, 可以在不同的观看角度投射不同的图像。通过与所述DMD同步地调制所述 光引擎的光输出,可以产生全色图像。在一些实施例中,通过使用单个LFIE 中的多于一个光引擎和DMD,可以在一个或多个方向上同时投影多于一个 图像,这允许虚拟图像在深度方向上投影到不同的焦面,从而实现针对3D 内容的正确视网膜聚焦提示。
所述LFIE可充当图像生成核心模块,其可以以类似于DMD组件当 前如何用于各种现有2D投影系统的方式儿用于各种无护目镜的LF 3D显示 系统。除了所述LFIE之外,LF投影设备具有包括至少一个投影透镜的模块。 该透镜将由所述LFIE产生的图像投影到屏幕上,该屏幕是观看者可见的组 件。通过相应地选择全LF投影系统的其它模块,可以以增强性能将相同的 LFIE用于多用户场景或用于单用户场景。
图4示出了根据本文阐述的一些实施例的具有多个投影仪410的LF 投影系统400的示意性呈现,并且图5示出了使用LFIE的LF投影系统500 的示意性呈现。一个明显的区别是所使用的硬件的数量。一些投影系统(图 4)利用产生不同视图420所需的图像(通过屏幕405)的分离的2D投影仪设备 410的大阵列。这些设备中的每一个都使用它们自己的空间光调制器(SLM)、 控制电子设备、投影光学器件等。
根据一些实施例,基于LFIE的系统(图5)仅具有一个投影仪设备510 和一组投影光学器件520。当旋转反射镜515扫描所述投影仪设备510生成 的图像时,虚拟投影仪525的阵列在所述反射镜515的平面后面被“创建”。 所述投影仪设备510可以包括DMD组件,并且由于该DMD组件可以充当 一足够快的SLM,因此其可以替换投影仪设备的整个阵列(例如,图4中的 投影仪410的阵列)。这样,通过屏幕505并且利用单个投影仪设备510和 单个投影光学器件520,可以生成多个视图525。换句话说,根据一些实施 例,基于LFIE的系统可以利用更多的时间复用而不是空间复用,并且利用 这样的布置实现了随后的小尺寸和相对低的成本。用于这种系统的方法也可 以被扩展到其它小规模SLM,其能够承受高的光强度,并且对于强调时间 复用的方法来说足够快。
根据一些实施例,如以下更详细地讨论的,基于LFIE的系统可以利 用多个DMD组件(参见图14和相关讨论)。例如,根据一些实施例,图5的 旋转反射镜515可以用另一DMD组件来代替,如图14所示。
在这里阐述的各种实施例中,所述LFIE可以使用时间和空间复用的 组合。高质量光场3D图像的生成可要求在创建形成3D视觉内容的感知的 子图像的密集场中进行大量复用。在所述LFIE中,可利用快速调制高像素 计数图像的DMD组件来完成空间复用。时间复用是通过将所述图像顺序扫 描到角空间中的旋转反射镜来实现的。LED/激光二极管组件的极快的切换速 度被用于产生例如彩色图像,其可通过顺序地接通和断开不同的颜色分量来 进行。因此,这里公开的一些方法利用这两种复用方案来充分有利地提高所 公开的LFIE系统/设备的效率。
根据一些实施例,三个光学功能(图像调制、光的生成和在不同观看 方向上的投影)可以被分离成三个单独的光学组件。这可以允许单独地优化 这些功能,因为可以针对每个任务而单独地选择和优化所述组件。因此,具 有所述LFIE的系统可以针对不同的使用情况而被优化,使得这里阐述的方 法是高度通用的。
根据一些实施例,包含所述LFIE的所有所述组件的模块可以被构建 到一小封装中,其可允许将图像引擎与各种设备集成。
根据本文阐述的一些实施例,存在用于能够在多个角度方向上投影多 个图像的LFIE的系统和方法。所述LFIE有效地产生用于3D场景的光场, 其可以从多个方向被观看。每个观看者可以具有他们自己的关于相同3D内 容的立体视图,并且三维图像的感知可被生成。当观看者在投影屏幕周围移 动时,所述图像可以针对每个新的观看角度而被改变。通过适当地选择全 LF投影系统的其它模块,可以以增强的性能将相同的LFIE用于多个用户或 用于单个用户。
根据一些实施例,所述LFIE利用关于以的组合而创建不同的图像: DMD,其充当像素化空间光调制器;旋转反射镜,其穿过所述角度观看范 围而扫描所述图像;以及光引擎,其生成所述图像中可见的光。通过比所述 扫描反射镜旋转循环更快地调制DMD矩阵,多个不同图像可被投影到不同 观看角度。通过与所述DMD同步地调制所述光引擎的光输出,可以产生全 色图像。
图6示出了示例性LFIE 600的结构的示意性表示。光引擎605可以 包括光源607(例如RGB LED或一个或多个激光二极管)和照射光学器件, 并且可以产生被引导到DMD组件610的光束。在所述DMD 610中用作图 像素的微型反射镜根据在特定观看方向上的图像内容而将所述光反射到旋 转反射镜620或光阱615。通过扫掠穿过取决于反射镜旋转角的角范围,所 述旋转反射镜620在不同的角方向上反射所述图像。所述旋转反射镜620可 以是例如进行来回移动的振镜型(galvanometric-type)设备、或者在一个方向 上连续旋转的多角反射镜、或者其它组件。在图6的实施例中,所述反射镜 620可处于第一位置625并沿第一方向627投影图像,而在第二位置630可 沿第二方向632投影图像。
所述光引擎605可通过组合来自发射红、绿和蓝光的单独组件(例如 LED或激光二极管)的输出来支持全色图像。不同颜色的输出可以被同步至 DM610同步,并且通过调制所述光引擎605的输出(例如通过以电的方式接 通和关断所述组件或者通过使用快速机械快门),可以以快速序列显示分离 的有色的(colored)子图像。所述发光组件的切换时间可以根据例如相对于视 图的数量和扫描反射镜角旋转速度设置的图像引擎目标值而被计算。在一些 实施例中,利用白光照射源,可以利用例如色轮在所述光引擎405中产生不 同的颜色。在这种情况下,可以以足够高的精度将有色输出同步到所述DMD 610和所述旋转反射镜620,并且在设计阶段可以考虑不同的颜色抖动方法。 一些实施例可以采用如美国专利No.6642969中公开的为DMD组件开发的 螺旋色轮设计。
当所述旋转反射镜620改变连续的红色子图像、绿色子图像和蓝色子 图像之间的投影角度时,将角度偏移引入到所投影的光场。通过在整个投影 设备/系统的投影透镜或屏幕中使用合适的光学元件,可以将所述有色子图像 组合以形成全色图像。这种元件可以基于例如棱镜效应、色差或衍射,其是 用于选择性地控制不同颜色光束的传播方向的常用光学工具。
单独使用LFIE在相同方向上投影所有有色子图像的一种可能方式是 使用如图7所示的光学配置,其描绘了使用LFIE的彩色图像生成的示意性 呈现。如果发光元件707a、707b、707c(例如,红色LED、绿色LED和蓝 色LED)并排地定位在光引擎705内部且用共同的光学器件投影到DMD 710, 那么空间间隔711可被变换成照射方向之间的角度间隔713。这些角度差可 通过使不同颜色照射光束709a、709b、709c的时序同步到发射镜720的旋 转而被使用。由不同LED位置引起的小角度差会导致在不同颜色投影之间 的时间间隔期间由旋转反射镜720的移动引起的投影子图像中的小角度差。 这要求所述多个LED(或其他发光元件707)按照正确的顺序被激活至反射镜 720旋转速度和方向。来自光引擎705的不同颜色照射光束709a、709b、709c 之间的角展度713将转换成投影方向上的小空间移位711,但是存在一些重 叠空间区域,其中三个颜色子图像被投影到相同方向,从而产生全色组合图像。总之,其取决于整个投影设备/系统的设计和颜色光栅化/抖动方法,在 从LFIE输出的有色子图像之间具有角度偏移或空间偏移是否更好。
在图7的实施例中,所述反射镜720可以相对于每个光束709a、709b、 709c处于第一位置725,并且在第一方向727上投影每个光束的子图像,并 且相对于每个光束709a、709b、709c处于第二位置730可以在第二方向732 上投影每个光束的子图像。
光引擎照射输出可被选择以便满足各种使用情况的预期光照条件。由 于DMD组件可以承受非常高的光强度,所以可以针对特定的使用情况来优 化所述光引擎的最大功率水平。如果环境光照水平高和/或如果需要更大量的 视图,则可以使用较高功率的组件。如果在确定一个或多个观看者的位置时 使用头部或观看者跟踪,则发光光束的切换也可以被同步到反射镜旋转,使 得所述图像仅被投影到适当的方向,潜在地节省了能量。在这种情况下,所 述旋转反射镜和DMD组件可以继续相同的移动,并且当来自光引擎的光不 向用户投射时,可以通过关闭光引擎来执行节能特征的控制。
在一些实施例中,所述LFIE设计仅在水平方向上支持多视图光场。 然而,如果用能够在水平和垂直方向上旋转的扫描反射镜代替所述旋转反射 镜,则可以扫描图像以形成在水平和垂直方向上具有独特视图的光场。这可 以采用极快的扫描组件,并且可以对系统提出更高的要求,例如当发射的光 功率在非常大量的视图上被扩散时,光引擎所要求的光强度。可以利用分面 反射镜创建垂直视图,图8中示出了该分面反射镜的示例性实施例,其在一 个方向上旋转,将所述DMD反射的图像(一个或多个)投影到多于一个的小 面。在这种情况下,单个DMD可以通过将反射镜矩阵分成多个部分来同时 在该反射镜矩阵的不同部分处生成独特的垂直图像。
在一些实施例中,通过使用一个LFIE中的多于一个光引擎和DMD (其一个实施例在图12A-12B中示出),多于一个图像被同时投影到一个或几 个方向。由光引擎产生的光束由DMD调制,并被引导到公共旋转反射镜。 使用公共反射镜确保了正确的同步。在这种结构中,有多于一个的光学路径, 这允许将聚焦光学器件添加到这些光学通道中的一些或全部。这允许虚拟图 像在深度方向上投影到不同的焦平面,从而实现3D内容的正确视网膜聚焦 提示。
根据一些实施例,多个光引擎和DMD可以与单个旋转反射镜一起使 用,该单个旋转反射镜具有一个以上暴露于一个水平观看方向的小面,还可 以同时产生多个垂直观看方向,如图8所示。当分面反射镜805(例如,具 有上部小面806、中间小面807和下部小面808)旋转时,中间小面807将由 中间光引擎(LE 2/830)和DMD(DMD 2/835)产生的图像反射到中间的垂直 投影方向(VPD 2/840),从而扫掠过中间水平投影方向(HPD 2/845)。由于类似的光引擎(LE 1/810&LE 3/850)和DMD(DMD 1/815&DMD 3/855) 同时产生从所述中间小面807之上(806)和之下(808)的小面反射的不同图像, 所以在中心水平面(845)之上(825)和之下(865)形成具有独特视图的两个其它 水平投影平面(例如,分别在垂直投影方向820和860的水平投影方向)。通 过向反射镜添加更多的小面以及附加的光引擎和DMD模块,还可以在垂直 方向上创建多个观看位置,而不需要光引擎的进一步时间复用。
图9示出了包含LFIE 901(具有光引擎905、旋转反射镜920和DMD 910)的光场投影仪设备900的示意性表示。除了LFIE 901之外,设备900 包括投影模块940,其至少包括投影透镜(或其他投影光学器件)945。该透镜 945的目的是将由DMD 910产生的图像投影到屏幕950,该屏幕是设备900 或系统的可见组件。合适的透镜设计类型的一个例子是F-theta透镜,它能 够从以均匀间隔的角度间隔投射的光束提供平坦的图像平面。投影模块940 还可以采用中继透镜,该中继透镜用于将在不同方向上行进的图像组合为中 间虚拟光场图像,该中间虚拟光场图像然后更容易被投影到屏幕950。在反 射镜920处于第一位置的情况下,可在第一方向927上投影图像,且在第二 位置,可在第二方向932上投影图像。
在一些实施例中,包含所述LFIE的LF投影仪设备与观看屏幕一起使 用。图10示出了根据一个实施例的具有相关联的屏幕1055(其是系统对于 观看者1090a、1090b、1090c、1090d、1090e可见的部分)的多用户LF投影 系统1002的示意性呈现。当LF投影系统1002的反射镜1020旋转时,用 DMD 1010产生的一组LF子图像以不同的角度从投影系统1002投影到屏幕 1055。该屏幕1055具有元件1060,其将每个子图像的传播方向转向主观看 方向。该元件1060可以是例如模制的塑料菲涅耳透镜或具有浮雕微棱镜的 箔。单独的聚焦元件1062可以用于使DMD 1010的像素矩阵1070在凸镜状 透镜片1057后面聚焦。该聚焦元件1062可以是例如微透镜的模制阵列或具 有衍射结构的浮雕箔。在一些可选实施例中,可以利用投影系统1002内的 投影透镜实现聚焦,在这种情况下,屏幕1055中的聚焦元件1062可能不是 必需的。屏幕1055还可以包括光漫射元件1064以使成像的虚拟像素矩阵 1070均匀化,这可以隐藏与角度调整和聚焦元件特征(例如,填充因子)有关 的一些或所有图像伪影以及不同投影子图像之间的小的不连续性。如果对于 特定使用情况仅期望水平视图,则屏幕光操纵元件1057、1060、1062、1064、 1070中的一些可以是单向的(例如,凹槽),这可以导致较低的成本,但是如 果创建水平视图和垂直视图这两者,则那些元件中的一个或多个可以是二维 的。在一些实施例中,不同屏幕元件的所有必要光学功能可以被并入一个全 息/衍射片中,该全息/衍射片甚至可以是灵活的,从而允许光场投影仪1002 的与当前存在的常规2D投影仪(例如,家庭影院)类似的使用情况。
观看者可见的屏幕1055的前部(例如,凸镜状透镜片1057)可以以与 现有多视图自动立体系统中使用的凸镜状透镜结构类似的方式起作用。所述 凸镜状透镜片1057后面的像素行(或矩阵)1070的图像可以充当光场像素 (LFP),类似于一组LCD显示像素如何用作标准多视图显示器中的LF子像 素。当凸镜状透镜1057将虚拟像素投影到观看者(一个或多个)前方的观看空 间(一个或多个)时,产生不同的投影方向(PD)(或观看方向)。例如,在图10 中,当旋转反射镜1020处于位置MP1时,像素P1通过系统1000在一个时 间点被成像到LFP1,并且虚拟子像素又被投影在仅对位于屏幕1055前方的 特定角度处的观看者1090A可见的投影方向PD1上。在另一时间点,旋转 反射镜1020已经移动到位置MP2,并且相同的像素被成像到LFP2,并且从 该LFP以相同的投影方向PD1投影,再次对相同的观看者1090A可见,但 是在不同的空间位置处并且在稍后的时间点。以类似的方式,像素P5在两 个不同的时间点首先被成像到LFP1,然后被成像到LFP2,然后被投影到仅 对观看者1090E可见的PD5中。
在当前的多视图系统中,子像素的数目以及随其的投影方向的数目被 固定到显示器(例如,LCD面板)中可用的像素的数目,并且受其限制。在基 于LFIE的投影仪系统中,如本文所公开的,DMD的角扫描和快速调制反射 镜矩阵可以在凸镜状结构后面创建更密集的“虚拟”显示。它也是通用的,因 为时间多路复用(即,旋转反射镜的角度扫描)和空间多路复用(即,DMD像 素的调制)可以以许多不同的方式组合,使得光场系统空间和角度分辨率可 以针对不同的要求(例如,屏幕尺寸、用户数量、亮度水平等,它们都与特 定的使用情况有关)而被优化。例如,相同的投影仪设备可以用于向坐在离 屏幕1m距离处的单个用户或者向站在离大的投影画布(或屏幕)5m距离处 的一组人示出3D光场图像。这两种使用情况之间的改变可以是选择不同尺 寸的屏幕、以及可能(稍微)选择用于特定屏幕尺寸、分辨率目标等的不同渲 染设置。
3D场景呈现布置可根据给定使用情况和硬件的所选参数而变化。例 如,整个微镜矩阵可以被成像到屏幕上的一个光场像素上,使得可以产生与 DMD组件中的像素一样多的单独视图。在这种情况下,当旋转反射镜扫过 其路径时,一个接一个地生成每个LFP,每个LFP具有大量视图。如果DMD 矩阵同时被成像在几个LFP后面,则LFP空间分辨率可以更高,但是以更 少数量的唯一视图为代价。在一些实施例中,由于光学功能被分离到不同的 组件中,因此可以通过改变渲染设置而无需改变硬件来进行这些折衷中的一 些折衷。当旋转反射镜扫过其路径时,DMD还可以以不同的速率被调制, 使得有可能将区域交织或重叠到凸镜状片后面的虚拟显示中。上下文自适应 渲染方法可以用于改进例如图像亮度和/或功耗,如在美国专利No.9405124 中所讨论的。此外,超分辨率算法也可以应用于渲染方案,以便增加空间分 辨率,否则该空间分辨率受到DMD矩阵和成像系统的特性的限制。
从观看者的角度来看,所述LFIE和投影光学器件可以位于屏幕后面 以用于透射的图像,或者位于屏幕前面以用于反射的图像。背照式屏幕可以 产生类似于“投影TV”的设备,其可以使其多个组位于一个封装中,而前光 式屏幕可以导致产品更接近家庭影院系统中的显示布置。所述屏幕还可以扩 大或缩小由LFIE产生的光场的角度范围,以便使3D图像从更大或更小的 角度可观看。这种屏幕可以例如通过具有不同焦距的两个(或更多个)微透镜 或小透镜组件构成。在这种设计中,所述结构以它们之间的距离等于它们的 焦距之和的方式安装(例如在美国专利No.9405124中讨论的)。
当旋转反射镜连续扫过角空间时,可以使用该设备来产生非常密集的 光场。3D场景的感知通常要求至少两个不同的视点被朝向观看者投影-每只 眼睛一个视图。由于DMD设备具有高刷新频率并且反射的图像可以被连续 地投影到观看空间,所以所公开的系统和方法满足了该立体图像条件。如果 观察者足够近并且DMD刷新频率足够高,则还可以将多于一个图像投影到 单个观察者的瞳孔。这可以满足“超多视图”条件并且向观看者提供更自然的 观看体验。如前所述,所述LFIE还可用于产生多于一个焦平面,从而产生 距观看者不同深度距离处的虚像和更自然的视网膜聚焦提示。
图11示出了利用包括LFIE的LF投影仪设备的光场投影系统的示意 性表示。该系统1100可以包括回放设备1105,其向LF投影系统1110提供 3D内容,其又生成投影到屏幕1115的LF图像。所述投影系统可以放置在 例如屏幕1115前面的桌子上。这种屏幕1115可以安装在适当的支撑结构(例 如,墙壁、支架等)上,或者放置在相同的桌子上或者相对于投影系统1110 的不同表面上。所述回放设备1105计算显示信号1107并将其传输到投影系 统1110,该投影系统包含控制电子设备,其激活旋转反射镜的马达并控制所 述DMD与所述反射镜同步。所述反射屏幕在水平方向上保持、扩展或收缩 光场角度结构,使得可以从围绕桌子的不同观看位置看到不同视图。所述屏 幕还可以在垂直方向上漫射反射光,以便使图像对于眼睛位于不同高度的观 看者更均匀。由于眼睛水平定位,所以仅在水平方向上提供不同的视点对于 3D图像感知而言是足够的。
在一些实施例中,例如下面关于图14所讨论的,可以使用第二DMD 组件而不是一旋转反射镜来创建能够分别寻址每个像素的开-关状态和角度 方向的LFIE。在这样的布置中,当第一DMD设备以更快的速率接通和断开 像素时,第二DMD以平滑的运动来扫描角度区域,而不是仅仅接通和断开 所述像素。在这些实施例中,第一DMD中的多于一个镜像素可用于照射第 二DMD的更大像素。通过用诸如衍射结构的微光学特征覆盖所述第一组件 的一些微镜,当微光学特征改变整个投影系统的焦距时,图像可被投影到不 同的焦平面,从而产生具有多个方向和多个虚焦平面的真实光场。使用两个 DMD使得这成为可能,因为第一DMD的像素可以被单独地映射到第二 DMD的像素。
在一些实施例中,可以使用具有光引擎和旋转反射镜(以及可能的 DMD)的LFIE的变型来产生到例如LCD屏幕的非常密集的定向背光。此外, 这里阐述的屏幕设计可以补充使用相同时间/空间复用方案的简化系统。
在一些实施例中,可以使用两个相同的LFIE实现自动立体3D LF显 示投影系统。如果所述两个LFIE的位置彼此相距~65mm,则两个同时投影 的光场适合以人眼的平均瞳距为中心的两个眼箱(eye-box)。如果在多个方向 上反射或折射该两个投影的眼箱时使用如本文所述的屏幕,则为多个用户创 建一组自动立体视图。由于所产生的光场的角度范围被限制在小的眼箱,因 此这种布置可以在水平和垂直方向上产生更密集的光场。有限的角空间对于 渲染和控制系统也具有较低的数据速率要求。另外,眼睛跟踪系统可以用于 辨识用户位置。
图12A-12B示出了示例性LFIE装置的一种可能结构。该示例性LFIE 具有两个单独的光引擎(LE1和LE2)、数字微镜器件(DMD1和DMD2)和聚 焦透镜(FL1和FL2),它们形成通过设备1200的两个不同的光学路径或图像 通道。由LE产生的两个照射光束首先被引导到DMD,DMD执行图像调制 并将所述光束反射到单个多角反射镜(PM)的两个不同小面。图像光束从PM 小面被反射并被引导通过FL,在图12A-12B中,对于两个图像通道,FL是 不同的(但不是必须的),从而能够在相同的投影方向(PD1和PD2)上利用不 同的焦平面(FS1和FS2)同时投影两个不同的图像。当PM旋转时,被照射 的小面和图像光束之间的角度从图12A所示的第一旋转位置改变到图12B 所示的第二旋转位置。当PM的旋转运动使投影方向之间的过渡连续时,随 着两个光学路径的焦点(FP1和FP2)扫过投影空间,产生两个不同且连续的焦面(FS1和FS2)。当DMD以高于被照射的PM小面旋转通过光束路径所花 费的时间的刷新率来调制投影图像光束时,产生具有多个唯一观看方向和两 个焦面的真实3D光场图像。
利用示例LFIE产生的唯一观看方向的数量由在一个PM小面扫过设 计的投影角范围所花费的时间内利用DMD可以进行的图像调制循环的数量 来确定。示例图像引擎可通过使用与DMD同步调制的红色LED、绿色LED 和蓝色LED而用于3×8位全色投影。如果上述示例计算被用作参考,则对 于具有33kHz二进制帧率的微镜元件,可以计算~1360Hz的全色图像刷新 频率。满足该规范的一个现有组件是德州仪器DLP7000。在视觉中心和相当 明亮的环境光照条件下,通常使用的无闪烁图像的阈值是60Hz。从这两个 值,可以确定~23个唯一的和无闪烁的全色视图可以用单个DMD产生。如 果使用小于8位色深或单色图像,或者如果同时使用多于一个DMD并且它 们的投影角度不同,则可以增加视图的数量。在图12A-12B所示的LFIE示 例中,第二DMD用于在深度方向上创建第二焦面,但它也可用于将投影视 图的数量加倍到~46。
如果LFIE的投影角度被设计为±10度,并且具有投影光学器件和屏 幕的整个系统被设计为使得角展度加倍,则两个视图之间的角度差为~1.8 度。这意味着具有65mm的正常瞳孔间距离的观看者可以从2m以下的距离 看到立体3D图像。若干不同的观看者也可以从他们自己的观看方向立体地 看到相同的3D内容。所述观看者在深度方向上也将具有两个不同的焦平面, 这将通过提供自然的视网膜聚焦提示来增强3D效果。图13A中示出了这种 布置。
图13B示出了基于与图13A相同的LFIE的替代系统,但是该系统是 为单个用户设计的,并且其中投影模块将投影光场的角展度压缩一半,导致 两个相邻视图之间的角度差为~0.45度。如果观看者位于~0.5m的距离,则 单视图观看区的宽度为~4mm,这对应于在适度光照条件下的正常眼睛瞳孔 尺寸。这可以允许同时在一个观看者的瞳孔内投影两个不同的图像,这满足 了超多视图条件并且可以提供甚至更逼真的聚焦提示,尤其是对于快速移动 的3D图像内容。图13B的系统也可以与面部跟踪一起使用。
在一些实施例中,可以存在一种利用光场图像引擎显示3D多视图图 像的方法,该方法包括:将光从光引擎输出到数字微镜器件(DMD)上;操作 所述DMD作为像素化空间光调制器,以将来自所述DMD的输出光中的至 少一些反射到旋转反射镜;以一循环速率旋转所述旋转反射镜以穿过一角度 观看范围扫描由从所述DMD反射的光表示的图像;以比所述旋转反射镜循 环速率更快的速率调制所述DMD;以及通过与所述DMD同步地调制来自 所述光引擎的输出光来生成全色图像。
在一些实施例中,可以有一种显示3D多视图图像的方法,该方法包 括:执行多个颜色照射器的同步时间调制,其中每个颜色照射器的输出光入 射在像素化的单独可控的反射元件矩阵上;将入射在所述反射元件矩阵上的 光中的至少一些反射到可移动反射镜组件;以及以与所述颜色照射器调制和 所述可控反射元件矩阵同步的方式使所述反射镜组件扫掠过一个角度。该方 法可以包括其中从所述反射元件矩阵反射的光入射到所述可移动反射镜组 件或光阱上。该方法可以包括其中图像内容以时间调制方式被渲染并被呈现 给显示设备,以提供要在不大于典型人类瞳孔距离的多个窗口上显示的多个 单独视图。该方法可以包括其中以时间调制方式渲染图像内容并且向显示设 备呈现该图像内容,以提供要投影到具有不大于典型人类瞳孔距离的多个窗 口的全息屏幕的多个单独视图。
在一些实施例中,可以存在一种利用光场图像引擎投影系统(其包括 第一和第二光引擎、第一和第二数字微镜器件(DMD)、旋转反射镜以及第一 和第二聚焦透镜)来显示3D多视图图像的方法,该方法包括:在所述第一 DMD处执行图像调制,并且将由所述第一光引擎生成的第一光束的至少一 部分作为第一图像光束反射到所述旋转反射镜的第一小面,所述第一小面被 配置为将所述第一图像光束反射通过所述第一聚焦透镜到第一焦面;在所述 第二DMD处执行图像调制,并且将由所述第二光引擎生成的第二光束的至 少一部分作为第二图像光束反射到所述旋转反射镜的第二小面,所述第二小 面被配置为通过所述第二聚焦透镜将所述第二图像光束反射到与所述第一 焦面不同的第二焦面,使得所述第一图像光束和所述第二图像光束在第一投 影方向上同时被投影;旋转所述旋转反射镜,使得所述第一图像光束和所述 第二图像光束同时在至少第二投影方向上被投影,使得当每个图像光束的焦 点扫过投影空间时,所述第一焦面和所述第二焦面是连续的;以及以高于所 述旋转反射镜的旋转循环速率的刷新速率来调制所述第一和第二DMD,使 得生成具有多个唯一观察方向和两个焦面的3D光场图像。该方法可以包括 其中图像内容被渲染,并且由光场图像引擎投影系统以时间调制方式呈现给 显示设备,以提供用于在不大于典型人类瞳孔距离的多个窗口上显示的多个 单独视图。该方法可以包括其中图像内容被渲染,并且由光场图像引擎投影 系统以时间调制方式呈现给显示设备,以提供用于投影到具有不大于典型人 类瞳孔距离的多个窗口的全息屏幕的多个单独视图。该方法可以包括其中所述旋转反射镜以与所述光引擎和所述DMD这两者同步的方式扫过一角度。 该方法可以包括其中所述第一DMD包含像素化的可独立控制的反射元件矩 阵。
在一些实施例中,可以存在用于显示3D多视图图像的光场图像引擎 投影系统,其包括:光场图像引擎,其包括至少两个光引擎、至少两个数字 微镜器件(DMD)和旋转反射镜;以及投影模块,其包括投影光学器件和角度 扩展元件。该方法可以包括其中第一DMD被配置成执行图像调制,并将由 第一光引擎产生的第一光束的至少一部分作为第一图像光束反射到所述旋 转反射镜的第一小面,所述第一小面被配置成将所述第一图像光束通过第一 聚焦透镜反射到第一焦面。该方法可以包括其中第二DMD被配置为执行图 像调制,并将由第二光引擎产生的第二光束的至少一部分作为第二图像光束 反射到所述旋转反射镜的第二小面,所述第二小面被配置为通过第二聚焦透 镜将所述第二图像光束反射到与所述第一焦面不同的第二焦面。该方法可以 包括其中所述第一和第二图像光束在第一投影方向上同时被投影。所述方法 可以包括其中所述光场图像引擎被配置为利用所述旋转反射镜旋转第一图 像光束和第二图像光束,使得所述第一图像光束和所述第二图像光束跨第一 焦面和第二焦面而被连续地投影。该方法可以包括其中所述DMD被配置成 以高于所述旋转反射镜的旋转循环速率的刷新速率调制第一和第二图像光 束,以便生成具有多个唯一观察方向和两个焦面的3D光场图像。该方法可 以包括其中所述光场图像引擎投影系统被配置为从回放设备接收3D内容并 且在屏幕上生成光场图像。
在一些实施例中,可以存在一种系统,其包括光场图像引擎投影系统、 处理器和存储指令的非暂时性计算机可读存储介质,所述光场图像引擎投影 系统包括第一和第二光引擎、第一和第二数字微镜器件(DMD)、旋转反射镜 以及第一和第二聚焦透镜,所述指令在处理器上执行时可操作以执行包括以 下各项的功能:在所述第一DMD处执行图像调制,并且将由所述第一光引 擎生成的第一光束的至少一部分作为第一图像光束反射到所述旋转反射镜 的第一小面,所述第一小面被配置为将所述第一图像光束通过所述第一聚焦 透镜反射到第一焦面;在所述第二DMD处执行图像调制,并且将由所述第 二光引擎生成的第二光束的至少一部分作为第二图像光束反射到所述旋转 反射镜的第二小面,所述第二小面被配置为通过所述第二聚焦透镜将所述第 二图像光束反射到与所述第一焦面不同的第二焦面,使得所述第一图像光束 和所述第二图像光束在第一投影方向上同时被投影;旋转所述旋转反射镜, 使得所述第一图像光束和所述第二图像光束同时在至少第二投影方向上被 投影,使得当每个图像光束的焦点扫过投影空间时,所述第一焦面和所述第 二焦面是连续的;以及以高于所述旋转反射镜的旋转循环速率的刷新速率调 制所述第一和第二DMD,使得生成具有多个唯一观察方向和两个焦面的3D 光场图像。
根据本文阐述的一些实施例,存在用于使用双DMD光场图像引擎产 生所投影的3D光场的系统和方法。各种实施例采用光学方法的形式。其它 实施例包括能够将多个图像投影到若干角度方向的双DMD光场图像引擎 (DDMD-LFIE)。该DDMD-LFIE使用两个数字微镜器件(DMD)和光引擎的组 合来创建不同的图像,所述DMD充当像素化空间光调制器,所述光引擎产 生所述图像中可见的光。所述DMD被串联地定向,并且第二DMD扫描微 镜倾斜角通过一定范围。这种调制与精确定时相结合可允许控制一些3D内 容的各种2D视图被投影到的角度/FOV。
在许多实施例中,所述第一DMD组件具有比第二DMD高的分辨率 和较小的像素。所述第一DMD还比第二DMD被调制得快得多。由于更快 的调制速度,在第二DMD的角扫描的每个循环期间,第一DMD被多次成 像在第二DMD上。所述DMD的组合可以用于将多于一个图像同时投影到 单个观看角度。这种时间复用允许将虚拟图像投影到不同的焦面,从而能够针对3D内容进行正确的视网膜聚焦提示。每个观看者观察到他/她自己的相 同3D内容的立体视图,并且3D图像的感知被产生。当观看者在投影屏幕 周围移动时,所观察到的图像会对于不同的观看角度而改变。通过与DMD 同步地调制所述光引擎的光输出,可以产生全色图像。
所述DDMD-LFIE是一种核心影像生成模块,且可用于多种不同种类 的无护目镜光场3D显示系统中。在本公开中,一些实施例采用光场投影仪 或光场投影系统的形式。除了所述DDMD-LFIE之外,光场投影系统还包括 包含至少一个投影透镜的模块。该透镜的目的是将所述DDMD-LFIE产生的 图像投影到多个观众可见的屏幕上。在至少一个实施例中,所述光场投影系 统还包括所述屏幕。可以在多用户设备/系统中使用所述DDMD-LFIE,或者在单用户设备/系统中使用所述DDMD-LFIE,其中通过与全LF投影系统的 其他选定模块组合,可获得增强的性能。
这里描述的实施例使用时间和空间复用的组合。高质量光场3D图像 的生成要求在子图像(其形成3D视觉内容的基础)的密集场的创建中进行大 量复用。在所述DDMD-LFIE中,利用能够非常快地调制高像素计数图像的 第一DMD组件来完成空间复用。时间复用是利用第二DMD来实现的,所 述第二DMD将所述图像顺序地扫描到角空间中。所述光引擎中的极快切换 LED/激光二极管组件和/或色轮可通过顺序地接通和关断不同的颜色组件来 提供用于创建例如彩色图像的进一步时间复用。因此,这些实施例能够利用 空间和时间多路复用方案这两者。各种组件(例如,DMD、激光二极管)之间 的精确定时和协调由主控制器协调。一个技术问题涉及第二DMD微镜的控 制。本系统的一个实施例使用多个微镜,与用作开关的DMD器件相比,该 多个微镜以平滑且相对慢的角扫描进行操作。这个问题可以通过使用快速控 制电子器件和/或替代微镜结构来解决。此外,所述问题还可通过在所述两个DMD之间使用高度调谐的定时来解决。可用作示例性实施例中的所述第二 DMD的具有角度控制的微镜器件可包括在标题为“具有连续中间状态的模 拟微镜器件(Analogmicromirror devices with continuous intermediate states)” 的美国专利No.7,782,523和标题为“微镜和用于制造微镜的制造方法 (Micromirror and fabrication methodfor producing micromirror)”的美国专利申 请公开No.2010/0033788A1中描述的那些。
在一个实施例中,所述DDMD-LFIE包括三个单独的光学组件:图像 调制装置,(ii)光生成装置,以及(iii)投影装置,其将调制后的光向各个方向 发送。这种设计使得可以单独优化每个组件的功能,因为可以单独为每个任 务选择和优化组件。可以针对不同的使用情况设计具有所述DDMD-LFIE的 系统。
可以利用例如卤素灯和色轮的系统来生成所述照射光束。LED和激光 二极管也是光引擎的理想组件,因为(i)它们可以被快速调制,并且(ii)由这些 组件发射的光容易被准直并被引导到所述DMD。
图像调制(空间复用)可以用例如LCoS(硅上液晶)组件来执行。除了使 用DMD之外或代替使用DMD,可以通过使用可调透镜、通过旋转衍射光 栅或棱镜、以及通过使用振镜式反射镜和多角反射镜来实现到不同角度的顺 序图像投影。该系统的实施例可以采用基于MEMS的单个扫描组件以用于 相同目的。
多个焦平面的创建可通过将可调透镜(例如,液体透镜)定位于投射光 学路径中,而不是通过微镜表面结构形成两个单独的光学路径来实现。可调 透镜可以与所提出的结构一起使用,作为产生多个焦平面的附加方式,这可 以进一步提高图像质量。
通常,所描述的方法和系统代表可以在实现三个光学功能中使用的可 选光学和光电组件的小子集。
在所述DDMD-LFIE的示例性结构中,如下所述,包含所有所述组件 的模块可以被构建到非常小的封装中,使得可以将图像引擎集成到多种设备 中。所述DDMD-LFIE可以用来例如替代当前在LF系统中使用的投影仪阵 列。由于所述DDMD-LFIE中的组件很小,所以这种模块的成本可以大量降 低。由于只需要很少的组件装配在一起,因此简单的构造也有利于整个系统 的可靠性、设置和校准。
图14描绘了根据一些实施例的使用双DMD光场图像引擎 (DDMD-LFIE)的LF投影系统的概览。如先前关于图5所论述,在一些实施 例中,可用DMD来代替图5的旋转反射镜。与图5的LF投影系统类似, 与诸如图4中所示的当前系统相比,图14的LF投影系统仅具有一个投影仪 设备和一个投影光学器件。
在图14的LF投影系统中,所述DDMD-LFIE产生通过透镜朝向观看 介质的3D光场。图14的LF投影系统包括光引擎1410、第一DMD 1415、 第二DMD 1420、第一DMD虚像阵列1425、透镜1430、全息屏幕1435和 多个生成的视图1440。
当所述第二DMD 1420扫描通过所述角度范围时,虚拟SLM阵列1425 根据第一DMD1415的图像而被创建在第二DMD 1420的平面之后。由于DMD切换足够快,因此其可以用于替换整个投影仪设备阵列(例如,图4中 的阵列410)。换句话说,基于DDMD-LFIE的系统(例如图14中)可以利用更 多的时间复用而不是空间复用,并且利用这样的布置实现了随后的小尺寸和 相对低的成本。用于这种系统的方法也可以被扩展到其它小规模SLM,其 能够承受高的光强度,并且对于强调时间复用的方法来说足够快。
在一些实施例中,所述DDMD-LFIE使用更高级复用,其中所述第二 DMD具有可单独寻址的子像素而不是仅具有一个大规模组件。这种双SLM 结构还可以使得利用新的图像渲染方法成为可能,例如张量方法,这对于单 反射镜系统是不可能的,例如前面所讨论的。
本文所阐述的双DMD设计可向位于投影系统FOV内部的观看者投 影可个别寻址的子像素。在这些系统中,第二DMD的反射镜可以利用单个 平滑运动扫过一角度范围的从LF投影仪设备投影的光束。这要求在反射镜 来回倾斜时控制倾斜角。通过使用具有精确定时和协调的控制电子设备,所 述两个DMD可以彼此同步,使得当第一DMD像素用于调制特定观看方向 时,第二DMD反射镜指向正确的方向。所述光引擎还可以具有极快的切换 速度以用于所述组件之间的精确定时。
所投影的较大像素内的子像素可以用于多种目的。在本详细描述的其 余部分中描述了各种实施例。当光学硬件以及时间和空间分辨率允许时,可 以组合多个实施例。例如,在一个实施例中,第一或第二DMD的反射镜表 面被涂上微光学特征。可以利用微光学调制子像素通过多种光学方法/系统使 各个子光束聚焦在所投影的光场中的不同焦平面处。如果第一组件像素通过 该结构而被修改,则可以单独地对每个微镜进行改变,但是如果对第二组件 进行修改,则在每个微镜表面内部制作不同的微光学部分。可以利用小的和 大的反射镜修改的组合,例如,用滤色器覆盖第一DMD像素以提供色度调 制,并且用一系列偏振膜覆盖每个第二DMD反射镜的子像素部分(控制偏振 并且采用双折射光学器件提供了用于焦平面调制的手段)。任何修改都将改 变所述微镜的机械特性,且这在组件和驱动电子器件的设计中应该被考虑。 例如,如果所述反射镜被薄的电介质层覆盖,则倾斜部分的质量会稍微增加, 并且调制速度会减慢,或者驱动反射镜的电力会升高。然而,如果所述微光学结构被蚀刻(例如,衍射光栅)到所述反射镜的表面,则其质量稍微减小, 并且作用于该部件上的相同的电力将引起更快的移动。
所述第一DMD的一个示例性光学子像素修改是用非常薄的偏振膜来 覆盖所述反射镜。这将使得有可能控制每个子光束的偏振方向,每个子光束 又可以用于生成多个焦平面。如果投影透镜位于所投影的子光束的前面,并 且所述透镜包含折射率取决于所述偏振方向的高度双折射材料(例如,方解 石),则当第二DMD被朝向观看者成像时,可以产生几个不同的光束焦平面。 该不同的焦平面可以具有唯一的图像内容,因为较小的子像素与所述第二 DMD的较大的物理像素被分开地调制。使用较大的像素矩阵作为公共投影 仪源允许所述多个焦平面被投影到相同的方向,这有助于每个深度层的像素 对准。除了偏振特征之外,所述像素可以包含例如全息涂层或衍射凹槽,其 可以改变光束发散度和/或方向,以使得LF投影仪设备的投影透镜能够在所 述深度方向上生成连续焦平面。也可以采用其它光学器件。
图15描述了根据一些实施例的DDMD-LFIE 1500的示例结构的示意 性表示。该DDMD-LFIE 1500的基本结构可包括具有光源1510(例如,RGB LED或一个或多个激光二极管)和照射光学器件的光引擎1505。该光引擎 1505生成被引导到第一DMD组件1515的光束。组成该第一DMD 1515的 微型反射镜可充当图像像素,并且该第一DMD将入射光反射到第二DMD 组件1520或光阱1525,这取决于在该特定时间所需的图像内容。透镜1530 位于两个DMD之间,其将第一DMD 1515的像素成像到第二DMD 1520上, 从而有效地将第一DMD 1515的像素映射到第二DMD 1520的顶部上。当第 二DMD 1520的微镜扫过其角度范围时,其将图像向前反射到略微不同的角 度方向。所述第一DMD 1515具有比第二DMD 1520更多的像素,并且由于 第一反射镜矩阵被成像在第二反射镜矩阵的顶部,所以有可能在第二DMD 1520的较大像素内部生成可单独寻址的像素的子矩阵。所述第一DMD 1515 以比第二DMD 1520更快的速率调制更小的像素,使得当第二DMD 1520像 素被以更慢的速度扫过所投影的图像1535的FOV 1540时,可以将不同的子 矩阵投影到不同的投影方向。
所述第二DMD 1520的物理特性不同于第一DMD 1515的特性。所述 DDMD-LFIE的示例性实施例要求对第二DMD微镜的扫描角度的精确控制, 而不是具有在现今可用的大多数DMD组件中发现的仅仅开关状态。这种控 制可以使用精确的定时电路来协调所述微镜的动态与第一DMD的定时来实 现。可以使用低于1000Hz的相对较慢的刷新速度,因为反射镜倾斜动作仅 需要足够快以用于人POV现象。
高光引擎照射输出对于明亮的光照条件和最一般的使用情况是最佳 的。由于所述DMD组件可以承受非常高的光强度,所以可以单独地针对使 用情况来优化所述光引擎的最大功率水平。如果环境光照水平高和/或如果期 望更大数量的视图,则可能期望更高功率的组件。在一个实施例中,在确定 一个或几个观看者的位置时,可使用头部或眼睛跟踪,所述发光光束的切换 可被同步到所述DMD,使得所述图像仅被投影到必要的方向,从而使得可 以节省能量。所述DMD组件可以继续其标准移动,并且所述光引擎被接通 和关断。在第一DMD像素用于颜色生成的实施例中,可以用单个高能量白 色LED来制造所述光引擎。由于一些发射光被所述滤色器吸收,所以照射 效率较低。
一个示例DDMD-LFIE设计支持仅在水平方向上的多视图光场。然而, 在一些实施例中,一行主DMD被成像在第二DMD的顶部上,而不是仅单 个第一DMD。在这样的实施例中,当多个主DMD的不同空间位置被变换 到不同的角度方向时,有可能也将不同的图像投影到多个垂直方向。在这种 情况下,所述DMD微镜倾斜角和组件尺寸限制了可被并排定位并成像到辅 助DMD上的主DMD的数目。
在利用所述DDMD-LFIE生成垂直视图的另一实施例中,所述第二 DMD的微镜包括微光学结构(例如光栅),其将从第一DMD成像的子像素反 射到不同垂直方向。当第二DMD镜在水平方向上扫过它们的角度范围时, 被投影到不同垂直方向的单独的图像同时扫过不同的垂直平面。除了上述两 种仅基于DDMD-LFIE的方法之外,还可以通过在光学系统级利用如本文所 公开的屏幕来产生二维的唯一视图。下面结合系统级方法描述该实施例。
图16A-16B描绘了根据一个实施例的第一DMD与第二DMD之间的 各种示例放大率。图16A是第一DMD 1605、第二DMD 1610和具有1:1的 放大率的成像透镜1615的图示。第一DMD图像的尺寸与第一DMD组件本 身的尺寸相同。在这种情况下,第一DMD的各个像素具有与第二DMD像 素的尺寸相适合的尺寸。例如,如果第二DMD具有30μm×30μm的像素, 并且第一DMD具有15μm×15μm的像素,则四个较小的子像素将被成像在 第二DMD的一个较大像素的顶部上。而如果第一DMD具有10μm的像素 尺寸,则九个子像素将被成像在第二DMD的一个像素的顶部上。
所述第一DMD可以以不同放大率被成像到所述第二DMD上。图 16B是第一DMD1605、第二DMD 1610和具有不是1:1的放大率的成像透 镜1620的图示。在图16B所示的实施例中,所述放大率不同于1:1,并且不 再需要选择彼此互补的两个DMD的像素尺寸。所述图像像素尺寸可通过成 像透镜放大率来调整。例如,如果第一DMD包括具有20μm像素的4K矩阵(4096×2160),则其可通过使用具有1:0.75的放大率比的成像透镜而被成像 在具有全HD分辨率(1920×1080像素)和30μm的像素尺寸的第二DMD的顶 部上。所述第一DMD的20μm像素将具有15μm(20μm×0.75)的图像尺寸, 由此得出结论,四个较小的像素图像可被映射在第二DMD的全HD矩阵中 的单个像素的顶部上。在一些光学布置中,例如如果光引擎能够产生极其良 好的准直光束且用第一DMD进行的图像调制可一直维持在到第二DMD的 表面的所投影的光束中,那么可完全省略成像透镜。然而,所述DMD之间 的成像透镜增加了有益的设计和组件选择灵活性。
所述第一DMD被成像为沿着成像光学器件轴方向离开第二DMD表 面的精确位置一小的空间偏移。这允许DDMD-LFIE使用第二DMD进行像 素图像位置扫描。如果没有所述小的空间偏移,所述第二DMD倾斜反射镜 将不能产生虚拟像素位置的足够移位。在没有偏移的情况下,所述投影透镜 将把像素重新成像到几乎完全相同的位置,尽管有不同的反射镜倾斜角。合 适的空间偏移取决于所述第二DMD反射镜大小和成像光学器件数值孔径 (NA)。如果所述偏移太大,则所述第一DMD反射镜的图像将在第二DMD 微镜孔径外部模糊,从而引起像素之间的串扰。利用较大的第二DMD像素 和较小的成像光学器件NA,可以使所述偏移距离更长,从而导致当所述第 二DMD反射镜倾斜时,虚拟像素位置存在更大偏移。在图20A-20B中示出 了示例设计,如下所述。
图17描绘了根据一些实施例的LF投影仪设备1700的示例结构的示 意性呈现。所述LF投影仪设备1700可包括DDMD-LFIE 1705和投影模块 1740。所述DDMD-LFIE 1705可以包括光引擎1710、第一DMD1715、第二 DMD 1720和光阱1725。所述投影模块1740可以包括投影光学器件1745(例 如,透镜)和角度扩展元件1750。所述投影光学器件1745可以包括投影透镜, 以将所述DMD所创建的图像投影到观看表面。所述投影光学器件1745还 可以使用中继透镜,该中继透镜用于将不同的LF图像组合成中间虚拟光场 图像,该中间虚拟光场图像然后更容易利用合理的投影透镜设计而投影到观 看表面。所述角度扩展微光学元件1750可以用在投影模块1740中以扩展 FOV(1755),并且从较短距离投影较大的图像。
图18描绘了根据一些实施例的采用LF投影仪设备1805(诸如图17 中描绘的、在图18中部分再现的设备)和透射背投屏幕1820的示例LF投影 系统的示意性表示。为了在整个光学系统中为多个观看者使用包含所述 DDMD-LFIE的所述LF投影仪设备,可以使用投影屏幕1820。该屏幕1820 可以包括角度调整元件1825、聚焦透镜元件1830、光漫射元件1835和透镜 片1860。
由DMD 1810和1815产生的一组LF子图像以稍微不同的角度从所述 投影仪设备1805投影到所述屏幕1820上。所述屏幕1820具有角度调整元 件1825,其将每个子图像的传播方向转向主观看方向。该元件可以是例如模 制的塑料菲涅耳透镜或具有浮雕微棱镜的箔。可以使用单独的聚焦元件1830 来使像素在凸镜状透镜片1860后面聚焦。该聚焦元件1830可以是例如模制 的微透镜阵列或具有衍射结构的浮雕箔。聚焦也可以由所述投影仪设备1805 内的投影透镜来执行(参见图17的相关讨论),并且在一些情况下,可以不需 要屏幕中的聚焦元件1830。光漫射元件1835可以使所成像的虚拟像素矩阵 均匀,并帮助减少(i)与角度调节和聚焦元件特征(例如,填充因数)相关的图 像伪像,以及(ii)不同投影子图像之间的微小不连续性。当对于特定使用情况 仅需要水平视图时,一些屏幕光操纵元件可以是单向的(例如,凹槽)以降低 成本,但是如果要使用水平视图和垂直视图者两者,则所述屏幕结构应当类 似地是二维的。在一个实施例中,所述不同屏幕元件的所有光学功能可以集 成到一个全息/衍射片中。该片可以被制成灵活的,以用于特定的现实世界场 景。
如图18所示,观看者(1880A-1880E)可以看到所述屏幕1820的前部(例 如,凸镜状透镜1860)。所述凸镜状透镜1860可以类似于在标准多视图自动 立体系统中使用的凸镜状透镜结构而起作用。凸镜状透镜片后面的像素行的 图像(例如,DMD像素行1812和1814的图像1840和1845)表现为光场像素 (LFP),其类似于标准多视图设置中的一组LCD显示子像素。当所述透镜片 1860的各个凸镜状透镜(例如1865和1870)将空间上分离的虚拟像素投影到 观看者前方的观看空间时,可创建不同的观看方向。当所述DDMD-LFIE用 于为投影像素产生多于一个焦平面时,该像素焦平面的不同深度位置被变换 到投影光场中的不同虚焦平面(例如,第一虚焦平面1850和第二虚焦平面 1855)。这在图18中被描述,其中在第一DMD 1810顶部上的第一像素行1812 被成像在前微透镜片1860后面作为一行虚拟像素1840,其然后被透镜片 1860朝向观看者(1880A-1880E)投影,从而创建第一虚拟焦平面1850。以类 似的方式,在此示例中与第一DMD 1810上的像素行1812交错的第二像素 行1814被成像(1845)到所述屏幕的前透镜元件1860后面的另一深度位置。 因为第二像素行1814的图像1845的深度位置比第一像素行图像1840更远 离透镜元件1860,所以在第一虚拟焦平面1850和屏幕1820之间的观看者空 间内产生第二虚拟焦平面1855。
图19描绘了根据一些实施例的可以与图18的LF投影系统一起使用 的示例颜色组合方法的示意性表示。该示例颜色组合方法示出了在LF光学 系统级别使用双DMD结构的替代方式。如图19所示,子像素矩阵用于将 不同颜色组合成若干全色图像。光引擎1910仅包含一个高功率白色照射 LED,而第一DMD组件1915具有多个微镜,这些微镜覆盖有仅反射三原色 的红色电介质滤色器、绿色电介质滤色器和蓝色电介质滤色器。由于第一 DMD 1915上的三个相邻的有色“像素”(例如,红色“像素”1920A、绿色“像 素”1920B、和蓝色“像素”1920C)被成像在第二DMD 1925上的单个较大的微 镜的顶部上,所以这些颜色都被第二DMD1925上的共享像素同时投影到相 同的方向。另一组子“像素”1922A-1922C可类似地操作。位于第二DMD 1925 前面的投影透镜将所述子像素准直成在不同位置处击中投影屏幕1930的分 离的光束。所述投影屏幕1930的第一部分(例如,分别为角度调整元件1935、 聚焦元件1940和漫射元件1945)将所述光束聚焦回到一行像素中。在该过程 中,其将各个颜色的光束引导到相同的空间位置,从而在所述透镜片后面形 成一行全色像素1950。通过使用物理光学结构(例如,棱镜、衍射结构等)或 借助于颜色渲染方案,可实现将三个颜色像素组合成一个全色像素,其中以 略微不同的时间间隔激活不同颜色的子像素,并且第二DMD1925微镜的平 衡角运动使得所述子像素图像在屏幕1930附近重叠。然后,这些全色像素图像充当所述前透镜片1955后面的图像生成元件(LFP)。在显示平面的方向 上,每个虚拟像素位置被转换成从所述屏幕投影到一个观看方向的角度。当 第二DMD 1925扫描通过其角度范围时,其也扫描通过不同的投影屏幕位置, 且可形成到多个观看者(1980A-1980E)的全光场图像。
根据一些实施例,图17的LF投影仪设备可以与如关于图11所示的 反射性前投影屏幕一起使用。
在一些现有多视图系统中,子像素的数目以及与其一起的投影方向的 数目被固定到显示器(例如,LCD面板)中可用的像素的数目,并且受其限制。 在这里提出的基于DDMD-LFIE的投影仪系统和方法中,所述DMD的快速 调制反射镜矩阵在凸镜状结构后面产生更密集的“虚拟”显示。可以以多种不 同的方式同时应用时间复用(例如,第二DMD微镜的角度扫描)和空间复用 (例如,第一DMD像素的调制)。LF系统空间和角度分辨率要求对于不同尺 寸的屏幕、用户数量、亮度等级等而言是不同的,并且从根本上与特定的使 用情况相关。例如,相同的投影仪设备可以用于向坐在离屏幕1m距离处的 单个用户或者向站在离大的投影画布5m距离处的一组人示出3D光场图像。 这两种使用情况之间的改变可以涉及选择不同尺寸的屏幕并输入屏幕尺寸、 分辨率目标等的相应设置。
3D LF图像渲染方案取决于针对用例和硬件所选择的参数。可以通过 改变渲染设置(而不需要改变硬件)来进行系统级性能参数之间的一些可能的 折衷。这是因为不同的光学功能由不同的组件执行。一个示例性的折衷情况 是在空间分辨率和唯一视图数量之间。如果更多的第一DMD像素被成像在 第二DMD镜的顶部上,则有可能同时投影更多的唯一视图或焦平面,但是 以降低的空间分辨率为代价-在第一组件中可用的像素总数是有限的。当 第二DMD镜扫过它们的路径时,所述第一DMD可以同时以不同的速率被 调制,允许通过改变用于微镜组件的控制信号来交织。上下文自适应渲染方 法可以用于改进例如图像亮度和/或功耗。此外,各种实施例可将超分辨率算 法应用于所述渲染方案以便增加空间分辨率,否则所述空间分辨率将受 DMD矩阵及成像系统的性质限制。
从观察者的角度来看,所述DDMD-LFIE和投影光学器件可以位于屏 幕后面以用于所透射的图像,或位于屏幕前面以用于所反射的图像。背照式 屏幕使得可以创建“投影TV”式设备,其使得所有必要的组件在一个封装中, 而前照式屏幕使得产品能够更接近家庭影院系统的显示布置。这里阐述的屏 幕设计可以扩大或减小DDMD-LFIE产生的光场的角度范围,以便使3D图 像从更大或更小的角度可观看。这种屏幕可以例如由具有不同焦距的两个微 透镜或小透镜组件构成。该透镜结构可以被安装为使得它们之间的距离等于 它们的焦距之和。
当所述第二DMD微镜连续扫过角空间时,所述DDMD-LFIE产生非 常密集的光场。3D场景的感知可要求至少两个不同的视点被朝向观看者投 影,每只眼睛一个视图。所述示例DMD设备能够具有非常高的刷新频率, 并且所反射的图像可以被连续地投影到观看空间。在一些实施例中,所述系 统将多于一个图像投影到一个观看者的瞳孔。在这样的实施例中,人足够接 近所述屏幕并且DMD刷新频率是足够的。这些实施例满足“超多视图”条件,并且可以向观看者提供更自然的观看体验。如前所述,所述DDMD-LFIE也 可用于产生多于一个焦平面,这将使得能够实现距观看者不同深度距离处的 虚像以及更自然的视网膜聚焦提示。
对第二DMD微镜刷新率的要求是相当低的,因为该组件仅用于在整 个投影屏幕上扫描由第一DMD产生的图像。如果显示器刷新率为~60Hz, 人眼就可以看到无闪烁的图像。该数字可以用作第二DMD刷新率的最小值, 第二DMD每秒扫过显示表面60次以便产生连续视频图像的外观。然而, 在大多数实施例中将采用稍微更快的速率来创建用于颜色渲染的时间。当然, 这可以根据所选择的渲染方案来调整。60Hz是用当前DMD容易实现的。 为了控制微镜角度扫描,在一个实施例中,高频控制电子器件连接到DMD。 在一些实施例中,反射镜倾斜角可以与第一DMD组件同步。在另一实施例 中,可以以步进方式应用所述倾斜,其中第二组件微镜停止在极端倾斜角之 间的中间位置。
所述第一DMD组件可以具有比所述第二DMD更快的刷新速率。所 述第一DMD可以用于调制投影屏幕附近的虚拟像素。唯一的观察方向的数 量和可实现的空间分辨率取决于所述图像相对于所述第二DMD的扫描循环 的周期而被调制的速度。
图20A描绘了根据一些实施例的用于全3D LF投影系统中的示例 DDMD-LFIE。在该示例投影系统中,在该示例中的目标屏幕尺寸对应于26” 监视器(未示出),并且屏幕表面上的目标空间分辨率是HD就绪的(例如, 1280×720像素)。该系统使用两个DMD(2010,2015)组件和产生白光照射的 光引擎2005。所述第一DMD 2010微镜被覆有单独的滤色器,并且像素在 被照射时,反射红、绿和蓝光。透镜2020在第二DMD 2015的顶部上成像 所述第一DMD2010,所述DMD 2015然后穿过一角度范围扫描所述像素图 像。位于第二DMD 2015之后的中继透镜2025产生所述像素矩阵的中间图 像,其然后可以用单独的投影透镜而被成像到屏幕上。该中间图像平面2030 是所述DDMD-LFIE模块和投影模块之间的接口。
单个观看者位于距屏幕1m的距离处。所述屏幕以背投方式将所述 DDMD-LFIE和投影光学器件产生的多视图图像导向所述观看者。相同3D 内容的来自不同观看方向的多个图像被引导到所述单个用户的观看区域,并 且该用户能够看到3D立体图像。示例性渲染方案可以用于创建所述多视图 全色图像。
所述第一DMD 2010可以具有4K微镜矩阵(例如,3840×2160像素)其 具有3μm间距,而所述第二DMD 2015可以具有720p高清晰度(HD)矩阵(例 如,1280×720像素),其具有9μm像素间距。所述第一DMD组件2010的九 个微镜的阵列被成像在第二DMD 2015中的一个单个微镜的顶部上。所述反 射镜矩阵的表面面积相同(11.52mm×6.48mm),因此该示例成像透镜产生1:1 的放大率。这可以例如用焦距为~67.50mm和孔径直径为~40.10mm(f#2.5)的透镜来实现,该透镜位于距两个DMD组件~100mm的距离处。为了 给所述光引擎和光阱提供空间,所述第一DMD相对于所述成像透镜的光轴 倾斜22.5度。所述第二DMD以相同的幅度角倾斜,但是方向相反。这确保 了第一DMD的倾斜图像平面平行于所述第二DMD的表面,并且较小的像 素被精确地映射到较大的像素的顶部上。而且,所述图像平面位于距所述反 射镜矩阵表面~15μm的标称距离处,以便能够利用所述较大反射镜的倾斜 动作来偏移所述较小像素的表观(apparent)位置。这在图20B的即将到来的描 述中进一步讨论。
所述第一DMD被光引擎来照射,该光引擎包括单个高亮度白光LED 和光准直光学器件。所述光引擎产生覆盖整个微镜矩阵表面区域的照射光束, 并且具有至少0.21的NA值,以便能够填充两个DMD之间的成像透镜(f#2.5) 的整个孔径。根据图像内容,±11.25度的微镜倾斜角将反射光束引导到成像 光学器件的孔径或光阱2007。
位于所述第二DMD之后的中继透镜产生所述像素矩阵的中间图像, 然后该中间图像被用投影透镜将其重新成像到屏幕上。在该示例系统中使用 的中继透镜具有~10mm的焦距,所述第二DMD被定位为距所述中继透镜 100mm,并且所述中间图像距所述中继透镜50mm,产生1:0.5的放大率比。 所述中间图像位于现在与中继透镜的光轴倾斜~11.3度的虚拟平面上。这种 倾斜的表现是因为第二DMD表面也倾斜。该图像平面可以用作DDMD-LFIE模块和投影模块之间的接口。相同的DDMD-LFIE可以与不同种类的投影透 镜一起使用,以便创建不同种类的LF投影系统。在一个实施例中,包含所 述DDMD-LFIE模块和投影模块的LF投影设备包括用于适于不同使用情况 的可互换投影透镜的安装选项。这是可能的,因为所述中间图像平面已经包 含了全3D光场图像信息。
图20B描绘了根据一个实施例的图20A的第二DMD的放大视图。它 提供了在距第二DMD 2015表面15μm距离处的第一DMD图像焦点2050 的特写视图。该图像平面位于距所述反射镜矩阵表面~15μm的标称距离处。 这导致较大反射镜的倾斜动作使较小像素的表观位置偏移。没有这个小距离, 第二DMD 2015反射镜倾斜将不会引起第二DMD反射镜2015中心处的第 一DMD镜的镜像虚拟位置的足够移动,因为它们将太靠近旋转轴。所述中 继透镜和投影透镜将所述虚拟像素成像到所述屏幕上完全相同的位置。这不 适用于成像到第二DMD2015反射镜的边缘的第一DMD微镜,因为当较大 反射镜围绕其中心定位的轴倾斜时,在图像和反射镜之间总是存在一些距离。 该距离随着第二DMD发射镜2015倾斜而改变,但是由于反射镜是平坦的 和完全反射的,所以不影响光学质量。所述第一DMD图像2050和第二DMD2015表面之间的距离如此小以至于在第二DMD 2015反射镜顶部上出现的 图像模糊不会过分影响像素映射,只要光引擎照射和成像透镜的数值孔径 (NA)保持足够小。对于该特定实施例,合适的NA在~0.21的范围内。
图21描绘了根据一些实施例的图20A的DDMD-LFIE以及对应于各 种第二DMD 2115倾斜量的虚拟图像。所述DDMD-LFIE被描述为处于光学 功能的三个不同阶段。当第二DMD2115微镜倾斜通过它们的角度范围时, 第一DMD 2102微镜的虚拟位置(2104,2106)改变。在极端位置,倾斜的光束 可填充中继透镜2135的整个孔径。所述中继透镜2135将不同的虚拟位置成 像到图像平面2150,并且图像像素的空间位置与倾斜角(2104,2106)相对应。 这使得可以利用第二微镜2115旋转而通过小的距离来扫描图像像素位置。 在所呈现的示例中,±12度的反射镜倾斜使得(在中间图像平面中)一个子像 素位置扫描通过三个并排子像素的范围。
图22示出了根据一个实施例的图20A的DDMD-LFIE、投影透镜和 投影屏幕。除了所述DDMD-LFIE之外,示例性全3D LF显示系统使用投影 透镜和屏幕。图22示出了一个示例投影系统的示意图和几何结构。 DDMD-LFIE产生一系列图像,这些图像利用投影透镜从中间图像平面而被 向前成像到投影屏幕。当由图像引擎产生的图像平面倾斜时,所述投影透镜的光轴相对于中继透镜光轴倾斜。然而,微图案化漫射器或角度倾斜元件可 以被定位在此成使所述光学路径变直。如果所述投影透镜具有~10mm的焦 距,则从第一DMD到屏幕可实现来自所述DDMD-LFIE和投影透镜组合的 大约50:1的总放大倍数。这意味着从1m的距离,投影图像可覆盖576 mm×324mm的区域,这对应于一26"监视器。图22中的屏幕具有500mm焦距的菲涅耳透镜,其将投影光束重新聚焦到所述屏幕前方1m的距离。位 于该距离的单个观看者将看到跨越~32度的水平FOV的图像。
图23描绘了根据实施例的图22的投影屏幕的结构和几何形状的示意 性呈现。
所述投影屏幕包括三个主要部分:将多视图图像引导到观看者位置的 菲涅耳透镜、在垂直方向而不是水平方向上漫射所投影的图像像素的全息漫 射器、以及在水平方向上将所述像素图像投影到不同角度的凸镜状片。所有 这些组件可以被制成非常平坦的,并且被堆叠以形成可以具有低于10mm的 总厚度的屏幕。该系统仅用于单个用户,因为LF图像被从所述屏幕投影到 该屏幕前面的特定观看窗口。由于本示例中的第二DMD不具有用于垂直方 向的辅助扫描元件,所以仅在水平方向上生成相同3D场景的多个视图。
图24A-24B示出了根据一个实施例的当图像被投影到图22的投影屏 幕上时引起的衍射。在光学系统的总放大倍数为50:1的情况下,单个第一 DMD像素将在几何上作为直径~150μm的光斑(spot)而被成像到所述屏幕上。 然而,衍射稍微模糊了该光斑的边缘(外部尾端),如图24A所示。通过使用 所述的f#2.5成像系统,绿光(550nm)的艾里斑半径为~80μm,并且所成像 的光斑的半高全宽值为~220μm。对于蓝色(450nm)像素,光斑尺寸略小,因为艾里斑半径为~60μm,而对于红色(650nm)像素,光斑尺寸较大,因为 艾里斑半径为~100μm。相邻像素将以150μm的间距而被成像到屏幕上,这 意味着在光斑之间将存在一些重叠,如图24B所示。当第二DMD微镜以±12 度的角度倾斜时,屏幕上单个光斑的中心位置将偏移±150μm。这意味着, 在屏幕上,在~450μm的宽度(相当于三个并排像素的组合宽度)上,单像素 图像是可扫描的。屏幕前面的微透镜(凸镜状片)具有0.45mm的间距,从而 覆盖三个相邻像素的范围。这些透镜形成了能够将像素图像投影到不同方向 的投影仪单元结构(或LF像素)。576mm宽的显示器将在水平方向上并排具 有1280个这样的投影仪单元。这将使所呈现的光学系统对应于具有 1280×720LF像素的26"HD就绪显示器。
在这个现实世界的例子中,像素图像作为~0.004NA和直径~220nm 的良好准直光束而被投影到屏幕微透镜孔。在图23所示的示例屏幕中,微 透镜焦距为4.5mm,并且像素光束以~3度的发散角被从屏幕微透镜孔径中 投射出。在离屏幕1m的距离处,从单个像素产生的光束将具有~57mm的 最大宽度。从凸镜状屏幕后面的单个位置投影的单个像素仅可以在该水平观 看窗内被看到。由于平均人瞳距为~64mm,从屏幕向单个方向投影的单个像素将一次仅对一只眼睛可见。当第二DMD微镜扫描±12度角范围时,所 投影的像素图像将在微透镜后面偏移,并且在屏幕前面1m距离处的单个像 素观看窗口将从中心位置偏移~±30mm。所述单个波束宽度与扫描范围所 涵盖的总角度范围为~6度。这意味着可以在具有~100mm水平宽度的总 观看窗口内观看单个像素的图像。该宽度可以容易地包含单个观看者的双眼, 并且其形成所述总观看窗口。通过将来自相同3D内容的两个不同图像分别投影到两只眼睛来形成立体3D图像。所提出的系统和光学方法通过可以在 双眼的宽度上被扫描的受限单像素观看窗口来实现这一点。
在一个实施例中,使用在第一DMD微镜的顶部上处理的滤色器(例如, 电介质薄膜)来执行用于本系统的全色图像渲染方法。在白色LED照射下, 三种不同的颜色(红、绿和蓝)被从反射镜反射。不同的滤色器在水平矩阵方 向上在并排的连续微镜上被处理。在垂直方向上,所述滤色器具有不同的反 射率值。作为一个示例,可将所述反射率值布置成使得如果第一像素以相对 强度1来反射光,则第二像素以强度5进行反射,而第三像素以强度25进 行反射。这种布置使得可以例如仅使用白色LED的两个不同的照射强度水 平来从具有3×3像素的有色阵列创建1、2、5、10、25和50的相对强度值 系列。以类似的方式,四个不同的LED强度水平(1x,2x,3x,4x)能够用于 创建高达值310(1+5+25=31;1*31+2*31+3*31+4*31=310)的相对强度 序列。这意味着当通过在正确的时间以正确的顺序激活正确的第一DMD像 素来组合这些强度间隔时,屏幕上单个LF像素的出现可以在310个不同的 强度等级和三种不同的颜色之间切换。
这里描述的基于硬件的渲染方案教导了:如果光引擎被配置成与第二 DMD移动同步地背靠背产生四个不同的照射水平,则可以利用四个第二 DMD反射镜扫描(或两个来回扫描)来创建全24位彩色图像。所述第二DMD 的合适扫描频率是120Hz(两个微镜在极值之间来回倾斜)。该频率为人眼创 建无闪烁图像,并且在POV时间框架内组合不同的颜色。如果在第一DMD 有色子像素微镜的连续激活之间引入~2.1ms的时间延迟,则第二DMD反 射镜水平扫掠动作将导致不同颜色的子像素图像在中间图像平面上和在投 影屏幕上重叠,从而产生全色虚拟像素。可以用240Hz的频率在四个强度 级别之间调制所述白色LED,以便使其与第二DMD组件同步。这两个频率 值都在当前可用组件的工作范围内。
在系统使用多视图渲染方案的实施例中,屏幕凸镜状透镜后面的虚拟 像素的扫掠移动被用来生成多个唯一2D图像,该图像被投影到从所述屏幕 的略微不同的观看角度。由于这些2D图像的每个像素都是从单个LF像素 投影的,因此它们都具有与投影仪单元结构(1280x720)相同的空间分辨率。 当在时间上组合三个颜色的子像素时,第一DMD的较高分辨率对于用户是 不可见的。在水平方向和垂直方向,屏幕漫射体表面有助于不同反射子像素 强度值的整合。
当所述微镜倾斜动作使用时间复用时,系统不再受所述DMD的空间 分辨率的限制。考虑到人类视觉系统视觉暂留(POV)现象和用于颜色渲染的 LED强度调制,可以利用所述示例DDMD-LFIE生成的独特视图的数量由可 以利用所述第一DMD进行的图像调制循环的数量确定。一种当前存在的具 有33kHz二进制帧率的DMD组件是德州仪器DLP7000。利用该组件,相 同场景的多达138(33000Hz/(4(扫掠)×60Hz))个不同2D视图可被投影到单 个用户观看窗口,并且其在指定的1m观看距离处可被填充有彼此仅空间偏 移~0.7mm(100mm/138)的视图。这意味着在人类视觉暂留时间框架内,至 少2个不同的视图可以被投影到单眼的瞳孔(最小直径2mm)中,满足单个用 户的SMV条件。
几种不同类型的渲染方案可以与所提出的显示结构和光学方法一起 使用。根据所选择的渲染方案,所实现的显示设备可以是具有非常密集的角 视图网格的多视图显示器或者是具有多个视图和焦平面的真实光场显示器。
在多视图渲染方案中,每个LF像素投射来自相同3D场景的每个2D 视图的一个像素。在这种结构中,LF像素由投影在屏幕的前透镜片中单个 透镜附近的DMD像素图像形成。单个LF像素中的可用子像素的数目(以及 所生成的视图的数目)取决于例如屏幕设计(单个透镜大小)、DMD像素的数 目以及第一DMD可实现的调制速度。在该渲染方案中,一个2D方向图像 中的所有像素都是利用LF像素内的相同相对位置处的虚拟子像素来创建的。 例如,所有右上角LF子像素都被投影到位于显示中心左下角的视图。通过 与第二DMD的角扫描动作同步地调制图像,可以使多视图像场更密集。当 第一DMD以非常快的速率调制较小的像素时,由于由第二DMD投影的像 素行扫过FL像素孔径,所以可以在没有空间限制的情况下创建屏幕LF像 素的虚拟子像素。由于对于每个虚拟子像素深度层将仅存在一个渲染的焦平 面,因此该渲染方案单独将不能为眼睛提供正确的聚焦提示。然而,由于渲 染将仅要求小角度间隔的一系列2D视图,所以该方案将更直接地实现。由 于硬件可以用于创建屏幕附近的多于一个的虚拟子像素深度层,所以还可以 在观看空间中生成多于一个的焦平面,并且利用这种基于硬件的方法来提供 深度提示。
在第二要求更高的真实LF渲染方案中,目标是创建若干焦点或平面, 以供(一个或多个)观看者在物理显示表面的前面或后面除了多个观看方向之 外进行观看。在该实施例中,所述硬件不必能够提供所述多个焦平面,因为 它们是纯粹通过渲染方法而被创建的。这可采用与多视图情况下讨论的方法 相比不同的渲染方法,因为将为每个3D对象点或体素生成至少两个投影光 束。对于显示器和观看者之间的所有体素,会聚光束应当在显示器前面以正 确的体素距离交叉。类似地,比观看者更靠近显示器定位的体素具有在该显示器后面虚拟交叉的波束对。在3D对象像素正好在显示表面处的情况下, 可以仅使用一个光束。(至少)两个光束的交叉能够产生不是仅在显示表面的 焦点(或平面)。换句话说,所述光束可以产生期望的真实光场。
因为真实LF渲染可能涉及繁重的计算,所以3D数据可以被过滤/裁 剪到某些离散深度层,其对于观察者的视觉系统而言足够接近以具有连续 3D深度体验。基于估计的人类视觉系统平均深度分辨率,覆盖从50cm到 无穷大的视觉范围将花费大约~27个不同深度层。这些深度层可以根据距离 而在时间上顺序地被显示,或者它们可以基于图像内容被混合和适配。也可 以在设备中主动地检测观察者位置,并且体素仅被渲染到所述观察者所处的 那些方向。对于这个任务,可以采用通过在显示器结构周围或其中的相机的 近红外(NIR)光的主动观察者眼睛跟踪。在这种渲染方案中,可利用控制软 件创建多个焦平面,并且通过相应地配置软件,可以基于需要而增加或减少 平面的数量。从硬件的角度来看,限制深度平面的数目的主要因素是第一 DMD的刷新率和通过DMD像素尺寸、设备投影透镜、屏幕透镜片单透镜 孔径尺寸和透镜片光学质量的组合可实现的单光束准直的质量。
所提出的光学方法可以应用于具有不同数量的像素的许多不同尺寸 的显示器。关于正确的渲染方案的选择取决于硬件限制和使用情况。例如, 在良好照射区域中的墙壁大小的广告显示器中,高光强度意味着屏幕透镜片 后面的单个虚拟像素可以在延长的时间段内处于打开状态,以便提供更高的 亮度。这可能导致更大的虚拟LF子像素,因为第二DMD扫掠动作将像素 图像散布在更大的区域上,并且从屏幕出来的投影光束可能具有太大的光束 发散,以致于真实的LF渲染方案不能正常工作。显示器可能需要仅从远距 离由多个同时的观看者观看。在这种情况下,多视图渲染方案将更合适,因 为观看者和显示器之间的长距离意味着观看者的深度感知将不太准确,并且 密集多视图显示器可以足够好地创建3D效果。另一个示例是用非常密集的 虚拟像素层创建的用于单个用户的较小显示器。所述虚拟层可以包括大量具 有较低光强度的非常小的像素。在这种情况下,可以利用更复杂的、真实的 LF渲染方案。空间分辨率可能是足够的,并且可以针对单个用户方向和眼 箱计算大量焦平面,而不需要过大量的计算能力和数据传输速度。
关于空间/角度分辨率和深度分辨率,发现了与真实LF渲染方案和光 学硬件这两者相关联的一种性能折衷情形。给定有限数目的DMD像素和切 换速度,必须选择是以较低数目的焦平面为代价来强调高空间/角分辨率,还 是以更像素化的图像为代价来具有更多的焦平面以获得更好的深度效果。相 同的关系适用于系统级的数据处理,因为更多的焦平面需要更多的计算和更 高的数据传输速度。随着对象进一步远离,人类视觉系统自然地压缩深度信 息,因为深度分辨率对数性地降低。同时,随着图像平面进一步远离,眼睛 仅可以分辨更大的细节。这使得可以设计在离观看者的不同距离处产生例如 不同像素分辨率的渲染方案,从而降低了图像渲染的处理要求。所有这些讨 论的与渲染方案有关的折衷方案可以进一步基于所呈现的图像内容、启用例 如较高分辨率或图像亮度而被适配。
为了渲染全彩色图像,可以组合三种不同颜色的像素。如先前章节中 所述,这里所述的光学系统可以用于该目的。然而,在一些情况下,硬件属 性可能对该过程施加限制,并且使用另一颜色渲染方案。一种方案是通过在 彼此略微不同的时间在略微不同的位置激活不同颜色的子像素,将第二 DMD微镜的扫掠移动用作附加的优点。如果正确地选择了红色、绿色和蓝 色像素激活之间的时间间隔,则所述反射镜具有刚好足够的时间倾斜到所有 三个颜色像素都被投影到相同方向的位置。通过空间分离的子像素的同步顺 序激活来抵消/平衡所述反射镜的所述扫掠运动。可以通过时间复用在投影仪 屏幕LF像素中组合所述多种颜色,这在不同颜色图像投影之间引入了小的 和不可忽视的时间间隙。
在一些实施例中,可以存在一种方法,该方法包括:在光引擎处生成 光源,其中所述光源入射在反射元件的第一单独可控像素矩阵上;调制所述 第一单独可控像素矩阵以将入射光重新导向反射元件的第二单独可控像素 矩阵或光阱;调制所述第二单独可控像素矩阵以跨一角度范围扫掠其反射元 件并且以略微不同的角度方向朝向投影模块重新引导入射光;以及经由所述 投影模块将所述入射的调制光朝向各个方向投影。该方法可包括其中所述光 引擎包括RGB LED、激光二极管(一个或多个)和照射光学器件中的一个,并 且被时间调制以渲染各种RGB颜色组合。该方法可包括其中所述光引擎产 生白光源。该方法可以包括其中所述第一像素矩阵被调制以与所述扫掠所述 第二像素矩阵中的反射元件的角取向同步。该方法可包括其中第一像素矩阵 具有比第二像素矩阵更多的像素,并且第一像素矩阵被成像在第二反射镜的 顶部上以在第二像素矩阵的每个较大反射元件内产生可单独寻址的子像素 的子矩阵。该方法可以包括其中第二像素矩阵使用时间和空间复用的组合而 将不同的子矩阵投影到不同的方向。该方法可以包括其中所述第一像素矩阵 以比第二像素矩阵更高的频率被调制。所述方法可以包括其中所述第一和第 二单独可控像素矩阵是数字微镜器件(DMD),并且其中:所述第一DMD具 有比所述第二DMD更大的分辨率和调制频率;并且第二DMD具有对较慢 调制扫掠角的精确时空控制。该方法可以包括,其中当第二像素矩阵的反射 元件以相对较慢的速度扫过所述角度范围时,第二像素矩阵将不同的子矩阵 投影到不同的方向。所述方法可包含其中由所述第一DMD反射的光穿过位 于所述两个DMD之间的成像透镜。所述方法可包含其中所述第一DMD以 距所述第二DMD表面小的空间偏移而被成像,以在调制所述第二DMD时 产生虚拟像素位置的充分移位。该方法可以包括其中所述投影模块包括反射 屏幕。该方法可以包括其中所述投影模块包括透射屏幕。该方法可以包括其 中所述投影模块包括透镜。该方法可以包括其中所述投影模块还包括角度扩 展元件。该方法还可以包括中继透镜,其将来自所述第二像素矩阵的不同 LF图像组合成中间虚拟光场图像,其中该虚拟光场图像充当双DMD光场引 擎与所述投影模块之间的接口。所述方法可包含其中所述第一DMD的所述 反射元件被覆盖有各种偏振膜,调制所述第一DMD进一步包含控制每一子 光束的偏振方向及一双折射投影透镜,其将不同偏振方向成像到不同焦平面。 该方法可以包括其中投影所述入射的调制光包括将所述入射的调制光投影 到屏幕上。该方法可以包括其中所述屏幕包括角度调节元件、聚焦透镜元件、 光漫射元件和凸镜状透镜片。该方法可以包括其中所述子像素矩阵用于将不 同颜色组合成若干全色图像。
在一些实施例中,可以存在一种显示3D多视图图像的方法,该方法 包括:对多个颜色照射器进行同步时间调制,所述多个颜色照射器具有入射 到反射元件的像素化的单独可控矩阵上的输出光,其中所反射的光变为入射 到可移动反射镜组件或光阱上;所述反射镜组件以与颜色照射器调制和反射 元件的所述可控矩阵同步的方式扫掠过一个角度;以及经由投影模块输出从 所述反射镜组件反射的光。该方法可以包括其中图像内容以时间调制方式被 渲染并呈现给所述显示设备,以便提供在多个可视窗口中显示的多个单独视 图,每个窗口不大于典型的人的瞳孔间距。该方法可以包括其中图像内容以 时间调制的方式被渲染并呈现给所述显示设备,以便提供要投影到具有多个 可视窗口的全息屏幕的多个单独视图,每个窗口不大于典型的人类瞳孔间距。
在一些实施例中,可以存在双DMD光场图像引擎,其包括:用于提 供光源的光生成装置;图像调制装置,至少部分地由第一DMD和第二DMD 执行,用于调制所述光源;投影装置,用于将来自所述第二DMD的调制光 朝向各个方向发送;以及同步装置,用于协调执行所述图像调制的所述模块 之间的精确定时。所述双DMD光场图像引擎可包含其中所述图像调制装置 至少部分地通过在所述光生成装置处调制所述光源来实施。
光准直反射镜的光学功能。本公开中呈现的示例实施例利用非常小的 光准直反射镜。用光准直反射镜产生的光束通常对位置误差非常敏感。作为 一般规则,需要的准直质量越好,系统就变得越灵敏。抛物线形状对于准直 点光源通常是理想的,但是它们也具有严格的位置误差容忍度,并且易于出 现非常大的离轴像差,这种像差随着例如扩展光源而发生。在一些情况下, 如果需要准直光束,则可以例如以位置偏移的形式执行一些像差补偿。
可以用许多不同的方法小规模地制造反射镜形状,并且还可以存在执 行相同的基本光学功能的不同的反射镜设计。例如,一些反射镜可以具有遵 循抛物线方程的传统连续形状,其中光学组件在中间比在边缘处薄得多。这 种形状通常通过直接研磨和抛光玻璃或金属基材或模具来制造,所述模具然 后被用于将所述形状复制到玻璃材料的塑料上。一些反射镜可以具有菲涅耳 型设计,其中弯曲形状被分成不同的区域或菲涅耳环。基本思想是使组件更 平坦,这对于通过复制来制造这种形状是有益的。有许多不同的复制技术能够产生光学器件中所需的精细表面质量和形状精度。例如,注塑和UV压印 可用于以塑料片或甚至以辊对辊生产线在塑料箔上大量制造极其精确的光 学形状。一些反射镜在宏观尺度上可以表现为完全平坦,但是可以在表面上 以衍射微结构为特征,以保持相同的光束准直光学功能。存在不同的制造方 法,例如电子光束光刻或反应离子蚀刻,其可以用于制造衍射光学设计中所 需的纳米级结构。这些形状也可以利用例如UV固化材料复制,所述UV固化材料可以沉积在对材料具有足够粘附力的任何表面的顶部上,使得可以利 用非常薄的光学结构覆盖不同的表面。
基于反射镜的3D显示器的概述。本文讨论了基于使用小的光准直反 射镜和非常小的发光元件来创建3D画面的结构和方法。在示例实施例中, 所述发光元件作为稀疏阵列而被接合到透明窗口。它们产生光锥,这些光锥 撞击准直反射镜,并且准直良好的光束被反射回来。由于发光组件(例如, μLED)非常小,它们仅占据所述反射镜顶部的基板表面区域的相对小的部分, 并且所述光束中的大部分光经过发射器并通过所述透明窗口离开所述结构。 通过使用具有静态反射镜的成排光发射器或通过使用具有角度扫描反射镜 的单个发射器,可以产生从单个反射镜朝向不同方向反射的一系列光束。当 所述反射镜的尺寸足够小时,所述发射器(一个或多个)和单个反射镜可以形 成一个多方向显示像素(MDP),其能够将多个良好准直的光束投射到不同的 方向。在一些实施例中,通过用所描述的结构覆盖整个显示表面区域来制造 一全多视图3D显示器。从单个MDP发射的单个光束在任何给定时间仅对 一只眼睛可见。通过根据不同视角方向的图像内容而调制所述光发射器输出,可形成所述3D画面,且可产生一系列独特的立体视图。
示例实施例提供了一种可以适合于移动设备使用的平坦且良好质量 的多视图3D显示器。利用所提出的结构,可以比利用其它现有解决方案更 容易地优化从电力到可用光的能量转换效率,这使得可以节省能量并且延长 移动设备的操作时间。所述光学结构的简单性使得更容易控制在高质量光学 系统中关键的组件制造链和组装公差。示例性结构还可以被制造得非常平坦, 这在需要紧凑的显示器解决方案时是有益的。
在一些示例实施例中,来自小发射器的光直接从反射镜反射向(一个 或多个)观看者,而不是行进通过吸收和反射所发射的光中的一些的多个透 明光学组件。当前多视图显示器中通常使用的多个微透镜、漫射器和凸镜状 片组件可产生光学像差,该光学像差使发射的光束准直恶化,并且随着光束 变得更加发散而降低整体显示质量,并且杂散光会引起相邻像素之间的串扰。 在此描述的示例结构使用反射镜,使得可以利用其中仅一个表面被构造为高 光学精度的结构来产生准直光束。
示例方法还可以用于构建一可以在水平取向和垂直取向这两者上使 用的显示结构。这个特征通常用于当前2D移动显示器中,其可以自由旋转 并且适应用户的需要。所描述的图像扫描功能和渲染方案可以自然地适用于 任何显示取向,而不会损失任何图像质量。此外,所提出的利用扫描微镜的 方法能够产生非常密集的多视图画面,其满足能够实现高质量3D体验的 SMV条件。
示例性的基于反射镜的3D显示器。创建3D画面的一个示例方法是 基于使用小的光准直反射镜和非常小的发光元件。图25描绘了根据一些实 施例的结构的示意图,其中利用μLED行和静态光准直反射镜的组合产生多 个定向光束。在该结构中,所述μLED被接合至透明基板(窗口)作为稀疏阵 列2510,并且用透明导电材料制成电接触,例如目前触摸屏中常用的氧化铟 锡(ITO)。基板材料(例如,窗口2515)可以是光学透明塑料,如聚碳酸酯和PMMA,或者是具有低热膨胀系数的玻璃材料,如硼硅酸盐。基板2515可 以是平坦的或者包含进一步修改所发射的光束发散度、传播方向等的微光学 特征。从单个μLED发射的光会撞击准直反射镜2520,其可例如由UV可固 化材料用模具以辊对辊工艺制造,并覆盖有金属(例如铝或银)镜面。良好准 直的光束从反射镜2520沿光发射器(例如,阵列2510)的方向反射回来。所 述反射镜2520可以利用光吸收分隔壁2525彼此分离,这可以减少光束之间 的串扰。这些壁2525可以被制成例如附接在反射镜阵列2520的顶部上的黑 色塑料材料的穿孔片。
由于所述μLED是非常小的组件,它们仅占据反射镜2520顶部的基 板2515表面区域的相对小的部分,并且光束中的大部分光通过发射器组件 并通过透明基板窗口离开该结构。若激活的μLED2510位于反射镜2520的 光轴上,则光束传播至该光轴的方向。但是如果激活的发光组件2510处于 离轴位置,则所述光束以一定角度离开该结构。对于一行μLED2510,通过 激活上述行中的适当发光组件,有可能生成从单个反射镜2520朝向不同方 向反射的一系列光束。当所述反射镜2520的尺寸足够小时,μLED行2510 和单个反射镜2520可形成一个多方向显示像素(MDP),其能够在不同方向 上投射多个良好准直的光束。
根据一些实施例,图26中示出了可以用于创建不同方向的多个视图 的替代MDP结构。扫描微镜2620的矩阵可与定位在反射镜2620的光轴上 焦距处的单μLED 2610的矩阵一起使用,且每一MDP仅含有一个发射器 2610。光准直反射镜2620可以是直接蚀刻在平坦硅表面的顶部上并且用金 属镜面涂层处理的衍射结构。可提供反射镜致动机构2630以控制每一相应 反射镜的方向。反射镜致动机构2630可以是例如电热双晶片致动器,诸如 先前所讨论的那些。根据一些实施例,致动反射镜结构能够在水平和垂直方 向上将光束从显示表面法线投影到±30度。当微镜2620倾斜时,可根据图像 内容调制所述μLED 2610的强度。当与图25中呈现的先前静态反射镜情况 相比时,此结构的一个益处是除了倾斜之外,有源反射镜2620还可被向上 和向下移动。这使得可以补偿由光源相对于反射镜光轴的大的水平偏移所引 起的任何光学像差。
在一些实施例中,通过用所描述的MDP覆盖整个表面区域,可构造 全多视图3D显示器。离开光学结构的所有光束优选地被良好准直,以便限 制单个光束一次仅对一只眼睛的可见性。成人之间的平均瞳距为~64mm, 这是在指定观看距离处的光束尺寸的上限。当每个单个μLED组件的可见度 限于一次单只眼睛时,可以产生立体效果,因为通过激活适当的μLED(静 态反射镜)或通过在正确的时间激活组件(有源反射镜),可将独特的2D图像 投影到不同的眼睛。如果仅使用两个图像,则它们可以利用仅对单个用户的 面部区域的一半可见的非常宽的光束来产生,但是3D效果将具有较低的质 量。通过利用每个反射镜多于两个发光元件而增加视图的数量和/或通过顺序 地显示多于两个图像,可以提高显示器的质量。在观看窗口内部的视图越多, 3D图像的幻觉就越好,因为视图之间的过渡变得更平滑,并且用户能够通 过移动他/她的头部或显示设备来“环顾”对象。这种运动是可利用手持设备很 自然做出的。在使用两个μLED行在单个反射镜的顶部上形成十字形图案的 实施例中,或者在有源反射镜在两个方向上倾斜的实施例中,也可以在水平 和垂直方向上等同地产生不同视图,使得显示视图能够旋转。
每个显示像素的光强度优选地在一定的动态范围内是可控的,以便使 显示器具有良好的图像质量。有几种不同的方法可用于该目的。一种方法是 连续调节流过每个发光组件的电流,从而根据图像内容来调节所述像素的亮 度。另一种可能性是通过脉宽调制(PWM)数字地调节组件亮度。LED通常是 可以极快地切换的组件,并且利用该方法可以容易地实现无闪烁图像的足够 动态范围。还可以在结构的顶部上使用如LCD的单独光电元件,以用于像 素亮度调节。LCD通过旋转两个偏振元件之间的通过光的偏振方向来调节透 过每个像素的光量。通过将具有偏振器的LCD堆叠放置在基板窗口的顶部, 所述发射器-微镜结构可以与该具有偏振器的LCD堆叠一起使用。所述LCD 将选择性地阻挡或通过从反射镜(其被同步到针对各个观看方向的μLED的 顺序激活)反射的光。LCD的一个缺点是它们的刷新频率相对较低,这限制 了可以生成的定向2D图像的数量。这意味着基于发光元件的直接调整的图 像渲染方法将是具有大量视图的显示器的优选选择。然而,附加的LCD可 以提供适合于一些使用情况的替代方案。
在倾斜微镜结构与单色光发射器一起使用的一些实施例中,可以采用 附加步骤来创建颜色图像。图27为一结构的示意图,该结构可用于组合来 自具有分离的红色芯片(2705)、绿色芯片(2707)和蓝色芯片(2709)的μLED阵 列的颜色的方法中。由于不同颜色的芯片(2705、2707、2709)物理上位于不 同的位置,光将从准直反射镜2720以稍微不同的方向反射。然而,在一些 实施例中,通过利用反射镜2720的倾斜以补偿由空间分离引起的角度偏移, 反射镜倾斜可以与不同颜色的激活同步,并且所述有色LED以小的时间间 隔而被激活。这样,通过在颜色渲染方案中的不同颜色光源激活之间引入小 的时间偏移,可以在所有方向上投影所有三种颜色。对于静态反射镜,不能 使用该方法,而是可以用非常小的红色、绿色和蓝色μLED的簇(cluster)产 生全色图像。在这种情况下,有色光输出被组合到一个RGB可控光源中, 该光源具有例如如上所述的模制在所述簇的顶部的集成塑料元件。
在一些实施例中,可在MDP中使用可小型化的其它光源(例如,OLED) 作为μLED的替代。然而,μLED目前非常小且具有高亮度。小尺寸是有益 的,因为较大的光源可能在所述反射镜的顶部增加更多的遮挡,并且较大的 光源也可能需要较大的反射镜以便实现相同水平的光束准直。更大的反射镜 也可能意味着显示器上更大的像素尺寸,这被看作是更低的空间分辨率。给 定的光源-反射镜对可实现的光学特性将光发射器尺寸直接联系到可实现的 显示器尺寸/分辨率。如果发光元件和准直反射镜具有矩形形状,并且该发光 元件的宽度例如是所述反射镜的宽度的10%,则所述发光元件将仅覆盖所述 反射镜顶部上的1%的面积。作为示例,这意味着如果μLED的尺寸为5μm, 则反射镜尺寸可以是~50μm,而不会使光源阵列过分地阻挡所发射的光。 该~50μm的反射镜具有与5英寸全HD移动电话显示像素大致相同的尺寸。 该示例计算示出了所述μLED是移动设备使用情况的有用选项。如上所述, 三色9片μLED矩阵可构建在10μm×10μm的区域内,使得可以构建例如5″-10″ 尺寸范围内的移动设备显示器。
可实现的光束准直水平是显示器的适当观看距离的重要因素。从单个 像素发射的光束应当仅覆盖大约一只眼睛的区域。如果所述光束具有太大的 发散,则其将同时被双眼看见,从而防止立体图像的形成。光束发散的理论 下限来自眼睛瞳孔尺寸,因为只要少数光束同时撞击瞳孔便足以满足SMV 条件。然而,实际上,所述下限可由光发射器的可实现的尺寸和所述反射镜 的尺寸(其可确定显示器的像素尺寸)来设置。这两个参数定义了可实现的光 束发散度和可行的观看距离。在非常小的光源的情况下,光束发散也会受到 衍射效应的影响,这对在观察距离处可获得的光斑尺寸设置了严格的物理限 制。
Figure BDA0003553713880000671
表1.所计算的不同尺寸显示器的最大可行观看距离
表1列出了仅基于几何分析的、对于不同尺寸的光发射器和显示器可 行的最大观看距离的计算值的集合。为了计算表1中的值,假设微镜尺寸与 显示像素尺寸相同,并且发光元件位于与反射镜孔径尺寸相比离反射镜相同 的距离处,使得系统焦距比数(f-number)为1。假设所述反射镜理想地为抛物 线形,并且所述发光元件被放置在正确的焦距处,使得光束尽可能好地准直。 观察距离被设定为所产生的光束尺寸具有50mm直径的距离。利用这种尺寸, 所述光束一次只舒适地配合在一只眼睛的区域上。例如,从表中可以看出, 如果在5"移动电话显示结构中使用5μm发射器,则可以从~0.5m的距离观 看全HD显示器,这与这种设备的正常观看距离很好地对应。该值表示近似 最大距离,并且由于发散光束尺寸越靠近显示表面越小,所以可以在越近的 范围内使用该设备。类似的,如果发射器尺寸大到20μm,则50"TV屏幕应 该在~1.25m距离处被观看。该距离对于舒适的观看体验来说通常太短,并 且对于发射器尺寸的更好选择将可能在5-10μm之间。可以利用不同的光学焦距比数获得所述最大观看距离的一些其它值,但是由于大多数可能的光发 射器具有相当大的NA,所以从照射效率的观点来看,小的焦距比数是期望 的。如果系统焦距比数和/或发射器NA非常大,则可能浪费大量的光,因为 其错过了反射镜孔径。这也将意味着系统中像素和杂散光之间的更多串扰, 其具有降低图像对比度的效果。
为了进行完全显示,要在有限的显示区域上重复小MDP。由于单个 MDP产生具有非常有限的角范围的有限组的波束,所以它也将具有有限的 总发散角(TDA)。该参数测量了一个MDP的总FOV,并且其仅在该特定角 度范围内可见。如果显示器较大,则位于显示器边缘处的MDP的TDA具有 足够的重叠区域是有益的。没有重叠区域,所述边缘将不会同时可见,使得 整个显示图像仅部分可见。图28A示出了在重叠的TDA在观看者面部区域 周围形成观看窗口的情况下的观看几何结构。另一选择是使位于显示器边缘 处的MDP的发射方向角(EDA)朝向显示器中心线倾斜。图28B中所示的这 种选择对于更密集的视图而言是很有潜力的,因为TDA可以更窄。在示例 实施例中,这可以通过将光源的标称位置在MDP内部稍微移位并且通过朝 向显示器边缘增加该移位的值来实现。在替代实施例中,通过将额外的光学 元件放置在所述窗口的顶部上或通过将这些光束倾斜特征集成到所述窗口 本身来光学地执行此倾斜。
在示例实施例中,3D渲染可以如下实现。在固定反射镜的情况下, 每一MDP具有专用于一些特定观看方向的多个像素。专用于一个特定方向 的多个像素可被激活,以形成一个3D场景的特定方向的2D视图。所有可 能的视图可以同时产生,因为显示器仅基于空间复用。在倾斜有源微镜的情 况下,可以通过与反射镜倾斜角和不同方向上的图像内容同步地激活像素来 顺序地创建投影到不同方向的图像。这种复用方案可以主要基于时间复用。在一些实施例中,硬件可通过在倾斜反射镜的顶部添加多于一个像素来组合 先前两种情况。这使得可以实现先前提出的颜色渲染思想,而且还可以增加 视图的角密度。
基于反射镜的3D显示器的示例使用情况。图29A-29B示出了根据一 些实施例的用于本文所述的显示系统的示例性使用情况。在这种使用情况下, 具有10"多视图3D屏幕的平板设备被放置在距单个观看者500mm的距离处。 该设备具有立体相机对和照射观看者的面部区域的红外(IR)LED。所述相机 用于准确的眼睛跟踪,该眼睛跟踪可操作以确定观看者的眼睛瞳孔的3D位 置,并且在一些实施例中,确定注视方向。该信息可用于仅在眼睛方向投影 立体3D图像,这可节省能量,因为该照射被定向到眼睛瞳孔,而非整个周 围空间。这还可以显著地减小为了图像数据及渲染而计算的信息量。
图30是根据一些实施例的显示设备3000的一部分的截面图,示出了 这种设备的物理尺寸(以μm为单位)。所述显示结构3000基于通过单独控制 的电热双晶致动器3025而被移动的有源倾斜反射镜3020。发光组件(例如 μLED)3002、3004、3006被结合到每个反射镜3020顶部上的薄硼硅酸盐玻 璃窗口基板3010。电接触由透明ITO通过蚀刻制成。所述发光组件(3002、 3004、3006)可形成十字形图案,例如其中一个绿色μLED(3004)在中间,在垂直和水平方向上被两个红色(3002)和蓝色(3006)组件围绕。每个μLED的 尺寸可为5μm×5μm,且该μLED可具有6μm的间距。μLED可定位于距反 射镜100μm距离(d1)处。通过使用上述技术使芯片成形,可以提高μLED的 光提取效率,该技术也可以使发射定向,其中大部分光功率包含在±24°发射 角内。该~0.4的NA值足够大,以覆盖距离100μm的单反射镜孔径的大部 分,并且也足够小,以不在孔径外过度地浪费光。在该示例中的微镜可以具 有衍射图案,该衍射图案使得微镜的光学功能类似于焦距为100μm的抛物 面镜。该图案可通过用UV压印而被复制到反射镜表面,并用纯铝镜面涂层 处理。单反射镜孔径尺寸为90μm×90μm(d2),并且它们处于间距为100μm 的1920×1080矩阵(全HD)中。每个反射镜可以在垂直和水平方向上倾斜 ±15°(α1),使得光束可以在两个方向上投射通过±30°的总范围。所述反射镜 也可以通过所述致动器而被上下移动通过~5μm的总范围,以补偿在反射镜 的极端倾斜角度处发生的光束聚焦光学像差。
为了测试示例性实施例的光学功能,可利用商业光学模拟软件 OpticsStudio15.5执行一组光线跟踪模拟。图31A-31B示出了模拟几何结构。 在该模拟中,将两个小光源被放置在距离两个相同的抛物面镜~100μm的距 离处,所述抛物面镜具有100μm的焦距和矩形的90μm×90μm的孔径。一个 反射镜被留在反射镜顶点表面法线指向光源的方向的标称位置,并且另一个 反射镜倾斜15°,这导致光束被反射到30°的角度。除了倾斜之外,所述第二 反射镜表面从由焦距确定的标称位置移动3μm更靠近源。两个 100mm×100mm的检测器表面被放置在距光源500mm的距离处。所述光源 具有矩形的5μm×5μm孔径。这两个光源的角散度被设定为具有±24°的半高 全宽(FWHM)值的高斯分布。
模拟结果在中心方向和30°扫描角度下被准备。在中心位置,用反射 镜从5μm尺寸的μLED产生的光束具有~3°的发散度,这意味着在500mm 的观看距离处单个像素的光斑尺寸为~25mm。由于系统焦距比数低,衍射 对光束准直角度仅有较小的影响。在最大30°的光束倾斜角下,光学像差使 光束质量变差,并导致~5°的发散值。这是在微镜从标称位置向μLED移近 3μm以补偿由离轴几何形状引起的一些光学像差时实现的。由此可见,当考 虑剩余的光学像差和几何因素时,在FOV的边缘处可获得~50mm的光斑 尺寸。该值仍然在平均人瞳孔间距之下,并且在每个像素的60°总扫描范围 内的任何给定时间,所有显示像素仅对一只眼睛可见。
图32示意性地示出了示例性用例的观看几何结构。在一个实施例中, 200mm宽(D1)的显示器3210可以具有每个像素的高达60°的总扫描范围, 如针对所述模拟结果所讨论的。在500mm(d2)的用户距离处,如图所示,在 没有任何附加的光束倾斜光学器件或布置的情况下,即使在显示器边缘处的 像素的总角度范围也在显示器的中心线处重叠,并且形成376mm宽的观看 窗口3230。该尺寸对于单个观看者是足够的(例如,瞳孔间距为64mm(d3)), 并且可以允许平板设备的相当大的倾斜和使用的容易性。这里所阐述的数字 是该特定示例结构能够产生的最大值。在一些情况下,通过利用例如眼睛跟 踪,可能不需要使用所有呈现的扫描范围,因为光可以仅被引导到两个眼睛 瞳孔。眼睛跟踪可以允许相当大的能量节省,并且还允许在反射镜以较小的 倾斜范围扫描眼睛瞳孔时将更多的视图投影到单个眼睛。
在一些实施例中,通过根据图像内容和镜倾斜角调制μLED强度来执 行图像渲染。在一些实施例中,所有反射镜同时首先朝向一个眼睛瞳孔倾斜, 然后朝向第二眼睛瞳孔倾斜。在这样的实施例中,可以通过仅呈现两个不同 图像来生成立体效果。然而,在其他实施例中,当反射镜扫描通过眼睛瞳孔 并且在60Hz无闪烁图像POV时间框架内向每只眼睛投影多于一个图像时, 可以通过更快地调制所述像素来增强3D画面质量。当反射镜将投影光束扫 描到每只眼睛时,可以通过在红色、绿色和蓝色像素的激活之间引入小的时 间延迟来执行颜色渲染。对于彼此相距6μm的将被投影到相同方向的两个 相邻像素,可以使用~1.7°的反射镜倾斜。这意味着如果绿色μLED在五个 μLED簇的中间,则通过将反射镜倾斜+1.7°,可以使蓝色像素图像与绿色光 斑重叠,并且通过将反射镜倾斜-1.7°,可以实现红色光斑重叠。由于反射镜 是反射组件,所以对于不同的μLED没有色差发生。并且由于μLED被接合 到十字形图案,因此可以在垂直和水平方向上进行颜色组合和3D图像扫描, 从而允许移动显示器的旋转。
如果考虑用于颜色渲染的反射镜倾斜并且反射镜扫描通过两个瞳孔 之间的范围,则像素光束扫描动作的总角度范围为~11°。例如,如果反射 镜来回倾斜频率被设置为60Hz的值,则对于光束扫描,可获得~0.8ms/度 的角速度。这意味着红色、绿色和蓝色μLED激活之间的适当时间延迟为~ 1.3ms,以便使不同颜色的光束重叠。所述μLED可以240Hz刷新频率驱动, 这将允许在每个反射镜单向扫掠期间投射两个不同图像,并且将生成一个完整的反射镜来回循环内的总共四个图像(每只眼睛两个)。此外,可将其他刷 新频率与μLED一起使用,以便向单眼产生不同数量的图像,或者例如,以 便使用不同的μLED占空比用于利用PWM方法的图像强度渲染。
使用定向背光。在一些实施例中,使用小的光准直反射镜和非常小的 发光元件来形成定向背光模块。在一些实施例中,该定向背光模块与诸如 LCD面板之类的空间光调制器(SLM)一起使用,以形成3D多视图显示器。
极小的光源(例如,μLED)可作为稀疏阵列而被接合至透明基板并放置 于准直反射镜的顶部上。良好准直的光束可以从反射镜反射回到光发射器的 方向。由于所述光源非常小,它们仅占据反射镜顶部的基板表面区域的相对 小的部分,并且所述照射光束中的大部分光通过发射器组件并通过透明基板 窗口离开该结构。利用一行光源或一光源矩阵,可以产生一系列光束,并通 过激励适当的发光组件从单个反射镜向不同方向反射。
通过将SLM放置在所述定向背光模块的顶部上,并且通过用所述背 光单元结构覆盖整个显示表面区域,可以构造全多视图3D显示器。在使用 单色μLED的实施例中,可在单色μLED上覆盖将所发射的蓝光或UV光转 换成更连续的白光光谱的薄磷光体层。位于所述背光模块顶部的LCD显示 器可以用于选择性地阻挡在显示表面上方的不同空间位置处的定向光束。在 示例实施例中,通过顺序地示出不同的3D场景角度投影图像并且通过根据图像方向激活所述行中的适当光发射器,可执行3D图像的渲染。由于单个 微镜上的每个光源产生向一个特定方向发射的光,所以单个投影图像仅在一 个单个观看方向上可见,使得可以产生数个立体图像对。
一种示例性方法使用小的光准直反射镜和非常小的发光元件,其形成 定向背光模块。该背光模块可以与SLM(例如,LCD面板)一起使用以形成 3D多视图显示器。在一个实施例中,所述背光结构可以如图25所示,如上 所述,其示出了一个示例性结构,其中利用μLED行和静态光准直反射镜的 组合产生多个定向光束。所述多个μLED以稀疏阵列形式被接合到透明基板 (窗口),且用透明导电材料(例如,氧化铟锡(ITO))制成电触点。所述基底材料可以是光学透明的塑料,如聚碳酸酯和PMMA,或者是具有低热膨胀系 数的玻璃材料,如硼硅酸盐。该基板可以是平坦的,或者可以包含进一步修 改发射的光束发散度、传播方向等的微光学特征。从单个μLED发射的光撞 击准直反射镜,该准直反射镜可以例如由UV可固化材料用模具以辊对辊工 艺制造并且覆盖有金属(例如,铝或银)镜面。良好准直的光束从反射镜反射 回到光发射器的方向。所述反射镜通过光吸收壁而相互分离,所述光吸收壁可减少光束之间的串扰。这些壁可以被制成为例如附着在反射镜阵列顶部的 黑色塑料材料的穿孔片。
由于所述μLED是非常小的组件,它们仅占据反射镜顶部的基板表面 面积的相对小的部分,并且光束中的大部分光通过发射器组件并通过透明基 板窗口离开所述结构。若激活的μLED位于反射镜的光轴上,则光束向光轴 方向传播。但是如果被激活的发光组件处于离轴位置,则光束以一定角度离 开所述结构。对于一行μLED,简单地通过激活上述行中的适当发光组件, 就可以生成从单个反射镜朝向不同方向反射的一系列光束。当反射镜的尺寸 足够小时,所述μLED行和单个反射镜可以形成一个多方向背光像素(MBP), 其能够将多个良好准直的光束投射到不同的方向。
在一些实施例中,通过将SLM 3302放置在所述定向背光模块3301 的顶部上并且通过用所描述的MBP覆盖整个显示表面区域,可构造全多视 图3D显示器3300。图33示出了这种显示系统3300的一个示例结构。光在 小发光元件的密集线性阵列3310中产生。在使用单色μLED的实施例中, 可在单色μLED上覆盖将所发射的蓝光或UV光转换成更连续的白光光谱的 薄磷光体层3312。如果所述层3312足够薄,则有源μLED仍然透过该层可 见,并且白光从微镜3320顶部的一个特定空间位置被发出。抛物面微镜3320 将所述光准直为高度定向的光束,该光束穿过作为背光模块3301的最顶层 的透明窗口3305。SLM 3302(例如,LCD显示器)位于背光模块3301的顶部, 并用于选择性地阻挡在显示表面上的不同空间位置处的定向光束。通过顺序 地显示不同的3D场景角度投影图像并且通过根据图像方向激活所述行中的 适当光发射器,可执行3D图像的渲染。当单个微镜3320上方的所述行中的 每个μLED产生向一个特定方向发射的光时,单个投影图像仅对一个单个观 看方向可见。
在一些实施例中,滤色器3350用于从白色背光生成全色图像,如图 33所示。在替代实施例中,用单独的红色、绿色和蓝色背光组件产生全色图 像,在此情况下,可不需要在LCD结构中使用所述滤色器。如上所述,当 前可实现的μLED尺寸和结合精度使得尺寸小于10μm的三色像素成为可能。 在该方法中,要解决的一个问题是由光发射器的不同空间位置引起的定向照 射光束的颜色分离。集成光学器件可用于解决这个问题,因为光混合光导结构可直接集成在μLED簇的顶部上。
所述背光模块的一个用途是为3D显示SLM提供可控的定向照射,所 述SLM用作图像调制组件。由于这两个模块具有单独的光学功能,它们还 可以针对不同的使用情况和更好的可制造性而被稍微单独地优化。例如, MBP的尺寸可以比显示像素的尺寸大得多。然而,这要求在所有照射方向 上对各个SLM像素进行空间均匀照射。这可能难以实现,因为不同的边缘 效应通常会出现在阵列形式的照射结构中。通过将MBP的尺寸减小到人类 视觉灵敏度的阈值以下或者通过将它们拟合到显示像素的尺寸,可以避免这 种潜在的问题。
关于匹配所述背光模块和SLM模块的一个要解决的问题涉及产生颜 色的方法。如上所述,在不同的实施例中使用不同的方法来产生颜色。例如, 彩色图像可以使用三色背光或使用提供更宽的白光光谱的模块来生成。一个 潜在的问题是当光来自不同角度时,滤色器3350不同地透射光。基于材料 吸收的滤波器由于与层厚度和几何形状有关的不同衰减长度而实现这一点, 而基于电介质层的滤波器由于与入射角有关的光干涉差而产生不同的透射 特性。这两种滤光器类型都可以针对特定的角度范围和波长而被优化,并且 在显示系统的结构中考虑这些滤光器的特性。在白光照射的情况下,通过从 不同方向照射LCD滤色器3350来产生不同的观看方向,并且滤色器材料层 中的吸收长度变得不同。这可能导致在观看方向上出现稍微不同的颜色,并 且可以执行利用LCD像素传输的颜色校准。在一些实施例中,可对被应用 在μLED顶部上的磷光体材料3312进行微调以补偿此效应。由于向不同方 向发射光的μLED位于不同的空间位置,因此可选择性地应用具有略微不同 颜色特性的磷光体材料3312。
离开所述光学结构的所有光束优选地被良好准直,以便限制单个光束 一次仅对一只眼睛的可见性。成人之间的平均瞳距为~64mm,这可作为在 指定观看距离处光束尺寸的上限。当每个显示像素的可视性被限制为一次仅 一只眼睛时,由于独特的2D图像被投影到不同的眼睛,因此可产生立体效 果。在一些示例方法中,这通过与LCD同步地激活适当的μLED来完成。 在一些实施例中,仅使用两个图像,并且它们是利用仅对单个用户的面部区域的一半可见的非常宽的照射光束而被产生的。在其它实施例中,通过利用 每个反射镜具有多于两个发光元件而增加视图的数量和/或通过顺序地显示 多于两个图像,可以提高显示器的质量。在观看窗口内部的视图越多,3D 图像的幻觉就越好,因为视图之间的过渡变得更平滑,并且用户能够通过移 动他/她的头部或显示设备来“环顾”对象。这种运动是可利用手持设备很自然 做出的。在使用两个或更多个μLED行在单个反射镜的顶部上形成十字形或 矩形图案的实施例中,可在水平和垂直方向上同等地生成不同的视图,从而 实现显示视图旋转。
限制这种多视图3D显示器中的视图数量的一个因素是所述SLM的切 换速度。由于现有显示器仅呈现~240Hz的刷新率,因此目前的LCD面板 是用于此目的相对慢的组件。如果对于所有视图方向都期望无闪烁的图像, 则这将仅允许四个唯一的视图,因为对于人眼来说通常接受的阈值是60Hz。 然而,在使用眼睛跟踪的实施例中,这可能是足够的刷新速率,因为自动立 体3D图像所需的视图的最小数量仅为两个,并且眼睛跟踪可以用于确定观看者的精确位置。在这种情况下,LCD将仅产生用于两个眼睛方向的那些图 像。在一些实施例中,四个视图可用于改善所述立体效果,因为它将允许两 个稍微不同的图像用于双眼,并且将满足SMV条件。
每个显示像素的光强度在期望的动态范围内是可控的,以便使显示器 具有良好的图像质量。对于LCD,通过借助于两个偏振器3330、3340和扭 转通过的光的偏振状态的电可控液晶(LC)材料层3335控制通过每个像素的 光量来调节光强度。在一些实施例中,使用背光强度调整与LCD像素吸收 率的组合以便实现较高对比率。在示例背光结构中,这可以通过连续地调节 流过每个发光组件的电流来完成。在替代实施例中,通过脉宽调制(PWM)来数字地调节组件亮度。LED通常是可以极快地切换的组件,从而允许用于 无闪烁图像的足够动态范围。在一些实施例中,所述背光模块MBP的尺寸 与LCD像素的尺寸相同。在此类实施例中,可执行利用背光模块与LCD的 组合进行的像素级强度调整。该方法可以用于更大的动态范围像素。这种方 法还可以允许更快的显示面板切换速度,因为强度调节将部分地由所述背光 模块处理。
可以小型化的任何合适的光源(例如OLED)可以用于MBP中作为 μLED的替代。然而,μLED目前优选用于此目的,因为它们非常小且具有 高亮度。小尺寸是有益的,因为较大的光源将在反射镜的顶部增加更多的遮 挡,并且较大的光源也将需要较大的反射镜以便实现相同水平的光束准直。 更大的反射镜也将导致更厚的更大的MBP,这可以被看作是负面特征,尤 其是在移动设备的情况下。如果发光元件和准直反射镜具有矩形形状,并且 发光元件的宽度例如是反射镜宽度的十分之一,则所述发光元件将仅覆盖所 述反射镜顶部上的1%的面积。作为一个示例,这意味着如果μLED的尺寸 为5μm,则在阵列或光源不会过度地阻挡所发射的光的情况下,反射镜尺寸 可以是~50μm。~50μm的反射镜具有与5″全HD移动电话显示像素大致相 同的尺寸。该示例计算表明,所述μLED是移动设备用例的现实选择,并且 MBP的尺寸可以适合于LCD像素的尺寸,从而实现例如更高动态范围的画 面。如上所述,一三色9片μLED的矩阵可被构建在一10μm x 10μm的区域 内,这使得可以利用所述两个模块的像素级装配而在5"–10"尺寸范围内构 建例如移动设备显示器。
可实现的背光照射光束准直水平与确定显示器的合适观看距离有关。 从单个显示像素发射的光束优选地仅覆盖大约一只眼睛的区域。如果所述光 束具有太大的发散,则其将同时被双眼可见,这样会干扰到立体图像的形成。 光束发散的下限来自眼睛瞳孔尺寸,因为只有少数光束同时撞击瞳孔就足以 满足SMV条件。然而,实际上,所述下限是由所述背光模块光发射器的可 实现尺寸和反射镜元件的尺寸来设定的。这两个参数描述了所述可实现的光 束发散度和可行的观看距离。在非常小的光源的情况下,光束发散也会受到衍射效应的影响,这对在观察距离处可获得的光斑尺寸设置了严格的物理限 制。
Figure BDA0003553713880000781
表2.所计算的不同背光模块下的最大可行观看距离
表2列出了仅基于几何分析的对于不同尺寸的光发射器和小准直反射 镜可行的最大观看距离的计算值的集合。在计算表2的值时,假设发光元件 位于与反射镜孔径尺寸相同的距反射镜的距离处,使得系统焦距比数为1。 假设所述反射镜理想地为抛物线形,并且所述发光元件被放置在正确的焦距 处,使得光束尽可能好地准直。观察距离被设定为一距离,在该距离,所产 生的光束尺寸具有50mm直径。通过利用这种尺寸,光束一次只舒适地配合 在一只眼睛的区域上。例如,从所述表中可以看出,如果5μm发射器与50μm 微镜一起使用,则可以从~0.5m的距离观看显示器,这与移动设备的正常观 看距离很好地对应。该值表示了近似最大距离,并且由于发散光束尺寸越接 近显示表面越小,因此可以在越接近的范围使用该设备。可以利用不同的光 学焦距比数获得最大观看距离的一些其它值,但是由于大多数可能的光发射 器具有相当大的NA,所以从照射效率的观点来看,小的焦距比数是期望的。 如果系统焦距比数和/或发射器NA非常大,则由于其错过反射镜孔径,所以 可能浪费大量的光。这也将意味着系统中的像素与杂散光之间的更多串扰, 其降低图像对比度。
为了进行完全显示,要在有限的显示区域上重复小的MBP结构。由 于单个MBP产生具有非常有限的角范围的有限组的光束,它也将具有有限 的总发散角(TDA)。该参数表示了一个MBP的总FOV,并且它仅在该特定 角度范围内可见。如果显示器很大,则要注意位于显示器边缘的MBP的TDA 将具有足够的重叠区域。没有重叠区域,所述边缘将不会同时可见,使得整 个显示图像仅部分可见。图28A示出了在一实施例中的观看几何结构,其中 重叠的TDA形成围绕观看者面部区域的观看窗口。在一个替代实施例中, 位于显示器边缘处的MBP的发射方向角(EDA)朝向显示器中心线倾斜。图 28B中所示的这种选项对于更密集的视图而言很有潜力,因为所述TDA可 以更窄。在一些实施例中,这是通过将在MBP内稍微移动光源的标称位置 并且通过朝向显示器边缘增加该移动的值来实现的。作为替代,可以通过在 窗口顶部放置额外的光学元件或者通过将这些光束倾斜特征集成到窗口本 身中来光学地执行该倾斜。在用于解决所述重叠问题的另一替代方法中,整 个显示表面可以针对预定观看距离而具有特定曲率。关于下面描述的使用情 况,将更详细地描述最后一个选项。
在示例性渲染方案中,每个MBP具有专用于一些特定观看方向的发 光组件。专用于一个特定方向的发射器矩阵被激活并与所述SLM同步,以 形成一个3D场景的特定方向的2D视图,并且顺序地创建投影到不同方向 的图像。这种复用方案可以仅基于时间复用。在替换实施例中,可以使用更 复杂的渲染方案,例如,利用3D场景中的图像内容的冗余,以便实现更亮 的画面或节省能量。
定向背光的示例用例。关于图34所示的观看条件,描述了定向背光 源实施例的示例性用例,其大致类似于图29A-29B。具有弯曲的10"多视图 3D屏幕的平板设备被放置在距单个观看者500mm的距离处。该设备具有立 体相机对和照射所述观看者的面部区域的IRLED。所述相机用于准确的眼 睛跟踪,该眼睛跟踪能够确定观看者眼睛瞳孔的3D位置,并且在一些实施 例中,能够确定注视方向。该信息可用于仅在所述眼睛方向投影立体3D图 像,这可节省能量,因为该照射被定向到所述眼睛瞳孔,而非整个周围空间。 这还可以显著地减小为了图像数据及渲染而计算的信息量。
图35是示出基于抛物线微镜的光学背光结构3500的示例测量(以μm 为单位)的横截面图。在此特定示例中,总共八十一个μLED 3510被结合到 每一反射镜3525顶部上的薄硼硅酸盐玻璃窗口基板3505。这些组件被覆盖 有将发射的蓝光转换成更宽的白光光谱的薄磷光体层3512。电接触由透明 ITO通过蚀刻制成。每个μLED的尺寸为2μm×2μm,并且它们具有3μm的 间距,这意味着每行和每列中最外面的μLED与矩阵中心的距离为±12μm。 这些组件被定位在距反射镜3525 90μm的距离处。通过如上所述成形所述芯 片,已经增加了μLED 3510的光提取效率。由于所述成形,所述发射是定向 的,并且大部分光功率主要包含在±20°发射角内。该~0.34的NA值足够大, 以覆盖距离90μm的单反射镜孔径的大部分,并且也足够小,以不在孔径外 过度地浪费光。微镜3525具有焦距为95μm的弯曲抛物线形状。这些形状 可通过UV可固化材料(例如,Ormocer(有机改性陶瓷))而被复制到反射镜基 板3520上,并用纯铝镜面涂层进行处理。单反射镜孔径尺寸为96μm×96μm, 并且反射镜是具有间距100μm的1920×1080矩阵(全HD)。所述发光组件3510 是矩形的9×9矩阵,这使得可以利用每个MBP产生总共81个唯一的观看方 向。照射光束从所述窗口3505的顶表面离开所述背光结构,该顶表面覆盖 有由UV可固化材料(例如,Ormocer)制成的光漫射表面微结构。漫射器引起 光束发散的小的1°(FWHM)加宽,并且有助于使远场照射图案更均匀。最外 面的组件产生从表面法线倾斜了~±7.3°的光束。并且由于这些组件是在完整 的矩阵中,所以所述照射可以被对称地定向到水平和垂直方向。
在示例实施例中,通过将具有100μm像素的全HD三色LCD显示器 放置在上述背光模块的顶部上来创建多视图3D显示器。图36示出了这种实 施例的观看几何结构。通过利用眼睛跟踪,不需要使用所有呈现的范围,因 为光可以被主要定向到两个眼睛瞳孔。用反射镜从2μm尺寸的μLED产生的 光束具有~5.2°的发散度,这导致在500mm观看距离处的单个MBP照射光 束的光斑尺寸为~45mm。衍射对光束准直仅有较小的影响,因为背光系统 焦距比数较低。由于偏轴角相对较小并且距反射镜的μLED矩阵距离被优化, 所以光束发散值对于所有的光束角都是相同的。在观看距离处的光斑尺寸远 低于平均的人瞳孔间距,并且在每个MBP的15°总范围内的任何给定时间, 所有单个照射光束仅对一只眼睛可见。当考虑垂直方向时,显示器边缘中的 像素的总角度范围在中心线处重叠,并且不需要附加的光束倾斜特征。然而, 在水平方向上,显示宽度很大,以至于重叠面积不足。为了提供足够大的观看窗口,整个显示器在水平方向上弯曲,并且形成130mm宽的观看窗口。 该尺寸对于单人是足够的,并且允许了平板设备的倾斜和易于使用。
在示例性实施例中,图像渲染是用渲染方案执行的,其中μLED强度 根据图像内容而被调制并与LCD同步。两个不同图像的呈现足以产生立体 效果。然而,在一些实施例中,通过更快地调制LCD像素及μLED并在60Hz 无闪烁图像POV时间框架内将一个以上图像投影到每只眼睛来增强3D画面 质量。如果使用240Hz的LCD,则可以在无闪烁频率内投影用于双眼的两 个图像。光学硬件也允许这一点,因为两个相邻的照射光束具有合理的重叠, 这使得可以几乎同时从两个略微不同的观察方向将两个不同图像投影到眼 睛。这种实施例满足所述SMV条件并可生成良好质量的3D图像。可以通 过利用包含在LCD面板中的滤色器来执行颜色渲染。
图37是示出了根据一些实施例的替代光学背光结构的示例测量结果 (以μm为单位)的截面图。图37的实施例使用离轴自由曲面反射镜3725。总 共七个μLED 3710被结合到含有光学特征的薄聚碳酸酯窗口基板3705上。 所述组件3710被覆盖有将发射的蓝光转换成更宽的白光光谱的薄磷光体层 3712。电接触由透明ITO通过蚀刻制成。每个μLED 3710的尺寸为2μm×2μm, 并且它们具有3.3μm的间距,使得每行和每列中最外面的μLED与行中心相 距±10μm的距离。所述组件位于距反射镜~98μm的距离处,并且组件行法 线从垂直方向倾斜28°。所述μLED的光学性质可与关于图35所论述的相同。 在水平方向上,所述微镜3725具有焦距为70μm的弯曲抛物线形状。所述 反射镜3725也是已经朝向μLED行倾斜~4.4°的离轴抛物线。在垂直方向上, 所述反射镜3725具有半径为280μm的球形形状。这些形状可以用UV可固 化材料(例如,Ormocer)而被复制到反射镜基板3720上,并且用纯铝镜面涂 层处理。单反射镜孔径尺寸为96μm×96μm,并且它们在间距为100μm的 1920×1080矩阵内。在该示例中,聚碳酸酯窗口3705包含影响水平方向上 的光束准直的附加光学形状。圆柱形具有184μm的半径,并且它们在垂直 方向上不具有任何光功率。照射光束从所述窗口3705的顶表面离开所述背 光结构,该窗口可以被覆盖有与图35的实施例中使用的相同的光漫射表面 微结构。
在图37的实施例中使用反射镜和透镜形状的组合的一个原因是避免 MBP孔径处的光吸收。图37的实施例涉及避免光源的中心遮挡的解决方案。 这是通过将μLED行移动到背光像素孔径的边缘并通过利用离轴反射镜形状 来实现的。该布置允许μLED接触垫和电导体不透明。结果,例如,蚀刻的 铜布线可以用于制造所需的电接触而不是透明ITO,使得更容易优化设计的 电特性。在每个MBP中,所述反射镜稍微聚焦所述光束,使其在由μLED行限定的孔径处更小,并且透镜形状以很小的发散光功率补偿了这一点。当 μLED位于单个MBP孔径的边缘时,反射镜和窗口的优化的整体自由形状 允许良好的准直。所述发光组件在水平行中,这使得可以利用每个MBP产 生七个水平的唯一观看方向。如图35的示例中,最外组件产生在水平方向 上从表面法线倾斜约±7.3°的照射光束,而单光束发散度为~5.2°。在垂直方 向上,所述反射镜的球形形状使得所述照射光束以~±8.5°的有意更大的发散 角扩展,以便覆盖该方向上的更大的FOV。
图35和37的示例之间的差异包括μLED相对于反射镜孔径的位置差 异以及它们产生的视图数量的差异。在图37的示例中,所述μLED行位于 反射镜孔径的边缘,以避免来自图35的实施例的位于中心的源矩阵的遮挡 效应。这种遮挡在近场空间照射分布中是明显的,这使得将所有定向光束等 分地映射到小尺度的LCD像素更加困难。在图37的实施例中,没有遮挡, 并且背光模块和LCD之间的装配是更简单的任务。由于图35的实施例具有 位于中心的光源,因此通过将μLED置于矩阵中,可在水平和垂直方向上更 直接地排列视图。在图37的实施例中,使用孔径边缘导致光源被布置成行 而不是矩阵,使得在水平或垂直方向上仅生成一维视图更自然。然而,同样 在此情况下,可采用离轴自由形状,使得可将另一行μLED添加到另一方向, 从而允许垂直方向和水平方向这两者均具有将允许显示器旋转的替代性独 特视图。
诸如图35和37中所示的那些示例背光结构可以在图34中所示的移 动显示器使用情况场景中采用。另外,图36中所示的观看几何结构也可应 用于此类实施例,因为背光设计在水平观看方向上均具有类似的光学性能特 性。然而,由于图35的实施例采用光源矩阵,而图37的实施例采用光源行, 因此垂直方向上的光学特性可能不同。在图35的实施例中,优选使用近似 圆形的照射光斑,以便限制单μLED在两个方向上对仅一只眼睛的可见性。 在图37的实施例中,照射图案可以是在一个方向上窄(水平)而在另一个方向 上宽(垂直)的线,以便限制光斑在一个方向上的可见性,但是同时允许它们 在另一个方向上相当大的FOV上可见。在两种情况下,相对窄的照射光束FOV不仅允许立体视图,而且使得可以节省能量,因为所述照射通常被引导 朝向眼睛。此外,图像的有限可视性使得从隐私视点来看整个设备使用起来 更安全,因为显示内容仅可以在指定的观看窗口内被观看。
定向背光结构的光线跟踪模拟。为了测试图35和37的结构的光学功 能,用商业光学模拟软件OpticsStudio 15.5进行了一组光线跟踪模拟。对于 在光源的所有模拟中使用的光学参数,所述光源的物理宽度被设置为2μm, 并且角发散被设置为具有±20°的半高全宽(FWHM)值的高斯分布。模拟几何 结构根据图35和37所示的定向背光源设计而被设定。在模拟中,将虚拟的 200mm×200mm检测器表面放置在距所述结构500mm的距离处,以便在限定的远场观察距离处获得照射图案的视图。另一个尺寸为0.3mm×0.3mm的 虚拟检测器表面被直接放置在所述背光结构的顶部,以便分析落在LCD面 板像素上的近场照射图案。
获得了这两种设计的远场模拟结果。在图35的所述结构的模拟中, 在光源矩阵的远边和中间使用总共九个光源,以便确定可获得的照射图案的 范围。九个可见的大致圆形的光斑显示出光源矩阵图像的总尺寸为~ 160mm×160mm。单个光斑的发散度为~5°,导致在观看距离处的光斑尺寸 为~45mm。在图37的所述结构的模拟中,在光源行的远边和中心处使用总 共三个光源。三个可见的垂直照射条纹显示出光源行图像的总尺寸在与图35 的结构相同的范围内。在水平方向上,图37的结构中的照射光束具有~5° 的发散度,导致在观看距离处的条纹宽度为~45mm。在垂直方向,所述光 束具有~±8.5°的发散度,这导致在指定的500mm观看距离处~150mm的高 度。
对于图35和37的结构也获得了近场模拟结果。在从用上述相同的九 个光源照射的单个MBP直接落在LCD像素上的光的辐照度分布中,由光源 矩阵在所述MPB孔径中心处引起的遮挡在所述光分布中是清楚可见的。光 强度的这种下降使得更难以使所述背光模块适合像素化显示器,因为像素可 能不同地调制行进到不同方向的照射光束。单个MBP照射光斑的尺寸为~ 100μm,可以看出两个照射的MBP产生了总的照射图案,其中光斑可以彼此清楚地被限定。通过使用图37的结构,具有单个MBP和上述三个光源, 可获得近场图案。在这种图案中,没有可见的中心遮蔽,并且像素可以被堆 叠成具有小得多的边缘效应的矩阵,因为光斑将稍微融合在一起。图35和 37的结构之间的近场差异使得在显示系统中使用图37的结构更直接,其中 背光MBP比LCD面板像素大得多。
第二组光线跟踪模拟被执行,以便展示在立体照射使用中背光照射设 计的性能。当在图35和图37的模拟结构内部激活合适的光源对时,可获得 照射图案。在图35的结构的模拟中,使用了整行的垂直光源,以便表明整 行能够覆盖整个~150mm高的垂直观看窗口。在图37的结构的模拟中,仅 使用两个光源作为MBP产生的条形照射图案,其在垂直方向上高度为 150mm。在两种情况下,用所选的光源对所获得的照射峰在水平方向上彼此 相距~64mm。该距离对应于平均的人瞳孔间距。此外,所述模拟结果示出 了被定向到左眼的图案与被定向到右眼的图案很好地分离,反之亦然,使得 这是在两个立体通道之间具有潜在地非常低的串扰的系统。
通过在单个MBP内使用两对并排的光源,用图37的结构进行进一步 的模拟。结果显示了来自两个相邻光源的照射相重叠,使得可以从稍微不同 的观看角度将两个不同的图像投影到两只眼睛,并且满足SMV条件。这个 特征还可以用于扩展以一只眼睛为中心的眼盒,并且因此提高可用性和/或降 低制造公差,因为眼睛然后可以更自由地围绕中心位置移动而不劣化立体图 像。
在一些实施例中,可以存在一种显示设备,其包括:反射镜阵列,其 包括多个准直反射镜;透明基板,其定位在所述反射镜阵列上方;以及对于 所述反射镜阵列的每个反射镜,安装在所述透明基板上的对应发光元件子阵 列,每个子阵列被定位成使得来自其的光基本上被对应反射镜准直并且被引 导通过所述透明基板。所述显示设备可以包括其中所述准直反射镜是凹面镜。 所述显示设备可以包括其中所述准直反射镜是抛物面镜。所述显示设备可以 包括其中所述准直反射镜是菲涅耳镜。所述显示设备可以包括其中所述准直反射镜是衍射镜。所述显示设备可以包括其中所述准直反射镜具有围绕至少 一个轴的可控倾斜水平。所述显示设备可以包括其中所述准直反射镜具有距 所述对应子阵列的可控距离。所述显示设备还可以包括在所述透明基板上的 透明导体,该透明导体连接到相应的发光元件以驱动该相应的发光元件。所 述显示设备可以包括其中每个子阵列是基本上线性的发光元件阵列。所述显 示设备可以包括其中每个子阵列是基本上十字形的发光元件阵列。所述显示 设备可以包括其中每个子阵列是基本上正方形的发光元件阵列。所述显示设 备可以包括其中每个子阵列基本上以相应反射镜的光轴为中心。所述显示设 备可以包括其中每个子阵列从所述相应反射镜的光轴偏移。所述显示设备可 以包括其中每个发光元件是发光二极管(LED)。所述显示设备可以包括其中 每个发光元件是微发光二极管(μLED)。
在一些实施例中,可以存在一种显示设备,其包括:反射镜阵列,其 包括多个准直反射镜;透明基板,其位于所述反射镜阵列上方;空间光调制 器,其位于所述透明基板上方,所述空间光调制器具有多个像素;以及对于 所述反射镜阵列的每个反射镜,安装在所述透明基板上的对应发光元件子阵 列,每个子阵列被定位成使得来自其的光基本上被对应反射镜准直并且被引 导通过所述透明基板和通过所述空间光调制器的对应像素。所述显示设备可 以包括其中所述空间光调制器是液晶显示器。所述显示设备可以包括其中所述准直反射镜是凹面镜。所述显示设备可以包括其中所述准直反射镜是抛物 面镜。所述显示设备可以包括其中所述准直反射镜是菲涅耳镜。所述显示设 备可以包括其中所述准直反射镜是衍射镜。所述显示设备可以包括其中所述 准直反射镜具有围绕至少一个轴的可控倾斜水平。所述显示设备可以包括其 中所述准直反射镜具有距所述对应子阵列的可控距离。所述显示设备还可以 包括在所述透明基板上的透明导体,该透明导体连接到相应的发光元件以驱 动该相应的发光元件。所述显示设备可以包括其中每个子阵列是基本上线性 的发光元件阵列。所述显示设备可以包括其中每个子阵列是基本上十字形的 发光元件阵列。所述显示设备可以包括其中每个子阵列是基本上正方形的发 光元件阵列。所述显示设备可以包括其中每个子阵列基本上以相应反射镜的 光轴为中心。所述显示设备可以包括其中每个子阵列从所述相应反射镜的光 轴偏移。所述显示设备可以包括其中每个发光元件是发光二极管(LED)。所 述显示设备可以包括其中每个发光元件是微发光二极管(μLED)。
在一些实施例中,可以存在一种操作多视图显示器的方法,该方法包 括:调制从多个子阵列的每一个子阵列中的多个发光元件的每一个发光元件 发射的光,所述发光元件安装在透明基板上;以及对于所述子阵列中的每一 个,由多个准直反射镜中的相应一个准直反射镜反射所发射的光通过所述透 明基板;其中所发射的光被调制,以便至少生成从第一位置可见的第一视图 和从第二位置可见的第二视图。该方法还可以包括用空间光调制器调制所反 射的发射光。该方法可以包括其中所述空间光调制器是液晶显示器,并且其中所反射的发射光作为所述液晶显示器的背光工作。
在一些实施例中,可以存在具有背光的液晶显示器,其中所述背光包 括:反射镜阵列,其包括多个准直反射镜;透明基板,其位于所述反射镜阵 列上方;对于所述反射镜阵列的每个反射镜,安装在所述透明基板上的对应 发光元件子阵列,每个子阵列被定位成使得来自其的光被对应反射镜基本上 准直并且被引导通过所述透明基板。
尽管以上以特定的组合描述了特征和元素,但是本领域的普通技术人 员将理解,每个特征或元素可以单独使用或与其它特征和元素任意组合使用。 另外,本文描述的方法可以在计算机程序、软件或固件中实现,所述计算机 程序、软件或固件并入计算机可读介质中以由计算机或处理器执行。计算机 可读存储媒体的示例包括但不限于只读存储器(ROM)、随机存取存储器 (RAM)、寄存器、缓冲存储器、半导体存储器设备、磁媒体(例如内部硬盘和 可移除磁盘)、磁光媒体和光学媒体(例如CD-ROM盘和数字通用盘(DVD))。 与软件相关联的处理器可用于实施用于WTRU、UE、终端、基站、RNC和 /或任何主计算机的射频收发信机。

Claims (15)

1.一种显示设备,包括:
多方向显示像素阵列,每个多方向显示像素包括:
透明基板(2515,2615,3305);
至少一个光发射器(2510,2610,2705,2707,2709,3310),位于所述透明基板上;以及
反射镜(2520,2620,2720,3320),被配置为将来自所述至少一个光发射器的光反射到所述透明基板;
所述多个多方向显示像素被配置为将至少两个2D图像投影到不同方向。
2.根据权利要求1所述的显示设备,还包括空间光调制器(3330,3335,3340),位于所述多方向显示像素阵列上方。
3.根据权利要求2所述的显示设备,其中,所述空间光调制器为液晶显示器LCD。
4.根据权利要求1所述的显示设备,其中,每个多方向显示像素中的所述光发射器为微发光二极管μLED。
5.根据权利要求1-4中任意一项所述的显示设备,其中,每个多方向显示像素中的所述反射镜为光准直反射镜。
6.根据权利要求1-4中任意一项所述的显示设备,其中,每个多方向显示像素中的所述反射镜为扫描微镜(2620,2720)。
7.根据权利要求6所述的显示设备,其中,每个多方向显示像素还包括:反射镜致动机构(2630,2730),被配置为控制所述扫描微镜的方向。
8.根据权利要求1-4中任意一项所述的显示设备,其中,每个多方向显示像素包括多个光发射器(2510,2505,2507,2509)。
9.根据权利要求1-4中任意一项所述的显示设备,还包括电接触,该电接触连接到所述多方向显示像素的所述光发射器,该电接触由透明导电材料制成。
10.一种具有多个多方向显示像素的显示设备的操作方法,该方法包括通过包含以下步骤的方法将至少两个2D图像投影到不同方向:
从多方向显示像素的至少一个光发射器(2510,2610,2705,2707,2709,3310)发射光,所述至少一个光发射器位于透明基板(2515,2615,3305)上;以及
由反射镜(2520,2620,2720,3320)反射所发射的光,所述反射镜被配置为将来自所述至少一个光发射器的光反射到所述透明基板。
11.根据权利要求10所述的方法,还包括用空间光调制器(3330,3335,3340)调制所反射的光。
12.根据权利要求10或11所述的方法,其中,每个多方向显示像素中的所述反射镜为光准直反射镜。
13.根据权利要求10或11所述的方法,其中,每个多方向显示像素中的所述反射镜为扫描微镜(2620,2720)。
14.根据权利要求13所述的方法,其中,每个多方向显示像素包括具有空间分离的不同颜色的光发射器(2705,2707,2709),该方法还包括:
在所述扫描微镜倾斜过程中,以一时间偏移激活所述不同颜色的光发射器,以补偿所述空间分离引入的角度偏移。
15.根据权利要求10或11所述的方法,其中,每个多方向显示像素包括多个光发射器(2510,2505,2507,2509)。
CN202210271825.1A 2017-08-23 2018-08-21 用于生成投影3d光场的光场图像引擎方法和装置 Active CN114815287B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210271825.1A CN114815287B (zh) 2017-08-23 2018-08-21 用于生成投影3d光场的光场图像引擎方法和装置

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201762549386P 2017-08-23 2017-08-23
US62/549,386 2017-08-23
US201762553615P 2017-09-01 2017-09-01
US62/553,615 2017-09-01
US201862617539P 2018-01-15 2018-01-15
US62/617,539 2018-01-15
CN202210271825.1A CN114815287B (zh) 2017-08-23 2018-08-21 用于生成投影3d光场的光场图像引擎方法和装置
PCT/US2018/047313 WO2019040484A1 (en) 2017-08-23 2018-08-21 METHOD AND APPARATUS FOR GENERATING 3D PROJECTED LIGHT FIELDS USING LIGHT FIELD IMAGE PROJECTION ENGINE
CN201880054833.2A CN111065957B (zh) 2017-08-23 2018-08-21 用于生成投影3d光场的光场图像引擎方法和装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201880054833.2A Division CN111065957B (zh) 2017-08-23 2018-08-21 用于生成投影3d光场的光场图像引擎方法和装置

Publications (2)

Publication Number Publication Date
CN114815287A true CN114815287A (zh) 2022-07-29
CN114815287B CN114815287B (zh) 2024-08-13

Family

ID=63586897

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201880054833.2A Active CN111065957B (zh) 2017-08-23 2018-08-21 用于生成投影3d光场的光场图像引擎方法和装置
CN202210271825.1A Active CN114815287B (zh) 2017-08-23 2018-08-21 用于生成投影3d光场的光场图像引擎方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201880054833.2A Active CN111065957B (zh) 2017-08-23 2018-08-21 用于生成投影3d光场的光场图像引擎方法和装置

Country Status (6)

Country Link
US (1) US20200371378A1 (zh)
EP (2) EP3673319B1 (zh)
JP (2) JP7227224B2 (zh)
KR (2) KR20240008419A (zh)
CN (2) CN111065957B (zh)
WO (1) WO2019040484A1 (zh)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102666265B1 (ko) 2017-11-02 2024-05-14 피씨엠에스 홀딩스, 인크. 라이트 필드 디스플레이에서 조리개 확장을 위한 방법 및 시스템
US11509871B2 (en) * 2017-12-22 2022-11-22 Arizona Board Of Regents On Behalf Of The University Of Arizona Methods and apparatus for angular and spatial modulation of light
EP3844949A1 (en) * 2018-08-29 2021-07-07 PCMS Holdings, Inc. Optical method and system for light field displays based on mosaic periodic layer
EP3861384A4 (en) * 2018-10-01 2022-05-11 LEIA Inc. HOLOGRAPHIC REALITY SYSTEM, MULTI-VIEW DISPLAY DEVICE, AND METHOD
US11300806B2 (en) * 2018-11-08 2022-04-12 Brass Roots Technologies, LLC Multi-image projection method utilizing bit segment rate switching
US11698516B2 (en) * 2018-11-27 2023-07-11 National Taiwan University Head mounted display device and near-eye light field display device thereof
US11927776B2 (en) 2019-03-08 2024-03-12 Interdigital Madison Patent Holdings, Sas Optical method and system for light field displays based on beams with extended depth of focus
JP7424367B2 (ja) * 2019-03-29 2024-01-30 ソニーグループ株式会社 画像処理装置、および画像処理方法、並びにプログラム
US11503274B2 (en) * 2019-05-02 2022-11-15 Disney Enterprises, Inc. High speed binary compressive light field projection system
CN114175627B (zh) * 2019-06-07 2024-04-12 交互数字Vc控股公司 用于基于分布式光孔的光场显示器的光学方法和系统
US11917121B2 (en) 2019-06-28 2024-02-27 Interdigital Madison Patent Holdings, Sas Optical method and system for light field (LF) displays based on tunable liquid crystal (LC) diffusers
WO2021076424A1 (en) 2019-10-15 2021-04-22 Pcms Holdings, Inc. Method for projecting an expanded virtual image with a small light field display
JP7497733B2 (ja) 2019-10-31 2024-06-11 ソニーグループ株式会社 画像表示装置
US12052410B2 (en) * 2019-11-29 2024-07-30 Sony Group Corporation Image processing device, image processing method, and image display system for generating common images and individual images for users with overlapping fields of view
CN111427166B (zh) * 2020-03-31 2022-07-05 京东方科技集团股份有限公司 一种光场显示方法及系统、存储介质和显示面板
CN111885364B (zh) * 2020-06-24 2023-08-15 歌尔微电子有限公司 微投影设备及电子设备
US11079668B1 (en) 2020-07-07 2021-08-03 Mirraviz, Inc. Reflective display
US11722648B2 (en) * 2020-07-07 2023-08-08 Mirraviz, Inc. Reflective display
CN115079435B (zh) * 2020-08-03 2024-09-03 京东方科技集团股份有限公司 显示组件、显示装置和驱动方法
CN112013859B (zh) * 2020-10-19 2021-01-26 四川京炜交通工程技术有限公司 一种快速获取道路标线精准位置的方法
CN112967342B (zh) * 2021-03-18 2022-12-06 深圳大学 一种高精度三维重建方法、系统、计算机设备及存储介质
DE102021206209B3 (de) 2021-06-17 2022-07-07 Gixel GmbH Brillen-Anzeigevorrichtung zum Anzeigen eines virtuellen Bildes in einem Sichtfeld eines Nutzers, Augmented-Reality-Brillen-Anzeigevorrichtung
CN113325601B (zh) * 2021-08-03 2021-10-26 成都工业学院 一种高视点密度光场立体显示装置
CN113687523B (zh) * 2021-08-05 2022-05-17 中山大学 一种基于投射光非对称分布的裸眼光场显示方法
JP2023024054A (ja) * 2021-08-06 2023-02-16 株式会社小糸製作所 画像表示装置および画像表示方法
US20230065240A1 (en) * 2021-08-25 2023-03-02 The United States of America As Represented By The Director Of The National Geospatial-Intelligence Method and apparatus for the display of volumetric solids using distributed photochromic compounds
US11808599B2 (en) 2021-11-24 2023-11-07 GM Global Technology Operations LLC Route recording with real-time annotation and re-display system
US11589017B1 (en) * 2021-12-01 2023-02-21 GM Global Technology Operations LLC Ground line monitoring system
US11898867B2 (en) 2021-12-06 2024-02-13 GM Global Technology Operations LLC Recorded route replay on an augmented reality head-up display application
EP4199377A1 (en) * 2021-12-14 2023-06-21 Airbus Defence and Space GmbH Configurable beacon for the acquisition of covert optical communication links
CN114879469B (zh) * 2022-04-28 2023-05-05 清华大学 基于计算全息的无接触交互设备
CN114815010B (zh) * 2022-05-15 2024-02-09 佛山科学技术学院 一种用于3d悬浮成像的透镜阵列及其装置
CN117234023A (zh) * 2022-06-08 2023-12-15 华为技术有限公司 显示装置及方法、交通工具
TWI799345B (zh) * 2022-09-01 2023-04-11 國立清華大學 反射掃描式同調光繞射顯影方法及系統
DE102023104742A1 (de) 2023-02-27 2024-08-29 VIAHOLO GmbH Verbesserung der wahrgenommenen Auflösung für ein Brillenanzeigegerät

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1405623A (zh) * 2002-10-29 2003-03-26 薛虎玲 一种准波场合成无镜式立体影视光学引擎
WO2004105403A1 (de) * 2003-05-23 2004-12-02 Peter Boll Verfahren und vorrichtung zur dreidimensionalen darstellung von bildern
US20060061846A1 (en) * 2004-09-17 2006-03-23 Microvision, Inc. Scanned light display system using array of collimating elements in conjunction with large numerical aperture light emitter array
CN101006708A (zh) * 2004-09-17 2007-07-25 株式会社尼康 电子设备
CN101855902A (zh) * 2007-09-25 2010-10-06 以克斯普雷有限公司 微投影仪
US20110242150A1 (en) * 2010-03-31 2011-10-06 Samsung Electronics Co., Ltd. Backlight unit, 3d display having the same, and method of forming 3d image
CN103048867A (zh) * 2012-12-31 2013-04-17 中国科学院自动化研究所 多模式混合投影的真三维显示系统
CN103423641A (zh) * 2013-07-23 2013-12-04 杭州杭科光电股份有限公司 一种带反射配光的led光源模组
CN103529554A (zh) * 2008-07-10 2014-01-22 实景成像有限公司 宽视角显示和用户接口
US20150362645A1 (en) * 2014-06-12 2015-12-17 Gentex Corporation Selectively-transparent electro-optic display
WO2016004998A1 (en) * 2014-07-10 2016-01-14 Lusospace, Projectos Engenharia Lda Display device
CN105814626A (zh) * 2013-09-30 2016-07-27 Pcms控股公司 用于提供增强现实显示和/或用户界面的方法、装置、系统、设备和计算机程序产品
WO2016182507A1 (en) * 2015-05-14 2016-11-17 Medha Dharmatilleke Multi purpose mobile device case/cover integrated with a camera system & non electrical 3d/multiple video & still frame viewer for 3d and/or 2d high quality videography, photography and selfie recording
CN106802513A (zh) * 2017-01-23 2017-06-06 京东方科技集团股份有限公司 背光源、背光源的制造方法和背光模组

Family Cites Families (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0650301B1 (en) * 1993-10-26 2000-05-31 Matsushita Electric Industrial Co., Ltd. Three-dimensional picture image display apparatus
GB2284068A (en) * 1993-11-12 1995-05-24 Sharp Kk Three-dimensional projection display apparatus
AUPN003894A0 (en) * 1994-12-13 1995-01-12 Xenotech Research Pty Ltd Head tracking system for stereoscopic display apparatus
JPH11237848A (ja) * 1998-02-24 1999-08-31 Ricoh Co Ltd 画像表示装置
WO1999050702A1 (fr) * 1998-03-27 1999-10-07 Hideyoshi Horimai Afficheur d'images tridimensionnelles
US6587159B1 (en) * 1998-05-29 2003-07-01 Texas Instruments Incorporated Projector for digital cinema
JP2000003611A (ja) 1998-06-15 2000-01-07 Matsushita Electric Ind Co Ltd 照明装置、ビューファインダ、ビデオカメラ、照明装置の製造方法、投射型表示装置、表示パネル、映像表示装置、表示パネルの駆動方法および表示パネルの駆動回路
US6642969B2 (en) 1999-12-30 2003-11-04 Texas Instruments Incorporated Color wheel for a falling raster scan
AU1320502A (en) * 2000-10-12 2002-04-22 Reveo Inc Digital light processing based 3d projection system and method
JP2002162601A (ja) 2000-11-27 2002-06-07 Noritsu Koki Co Ltd 特定視点画像表示装置及び多視点画像表示装置
JP3515539B2 (ja) 2001-04-20 2004-04-05 三洋電機株式会社 微小凹面鏡アレイ及び三次元映像表示装置
JP2003075744A (ja) 2001-09-05 2003-03-12 Ricoh Co Ltd 光マイクロスキャナの製造方法、光マイクロスキャナ、及び光マイクロスキャナアレイ
CA2457773A1 (en) * 2001-10-01 2003-04-17 Matsushita Electric Industrial Co., Ltd. Projection display device and back projection display device using the display device
US6958867B2 (en) * 2002-09-30 2005-10-25 Fuji Photo Film Co., Ltd. Illumination optical system, exposure device using the illumination optical system, and exposure method
DE602004028115D1 (de) 2003-05-02 2010-08-26 Univ College Cork Nat Univ Ie Lichtemittierende mesastrukturen mit hohem höhe-zu-breite-verhältnis und quasi-parabolischen seitenwänden und ihre herstellung
US7782523B2 (en) 2003-11-01 2010-08-24 Fusao Ishii Analog micromirror devices with continuous intermediate states
US7261417B2 (en) * 2004-02-13 2007-08-28 Angstrom, Inc. Three-dimensional integral imaging and display system using variable focal length lens
US7283308B2 (en) * 2004-03-05 2007-10-16 Actuality Systems, Inc. Optical systems for generating three-dimensional images
US20050285027A1 (en) 2004-03-23 2005-12-29 Actuality Systems, Inc. Scanning optical devices and systems
US7994527B2 (en) 2005-11-04 2011-08-09 The Regents Of The University Of California High light extraction efficiency light emitting diode (LED)
KR100636165B1 (ko) 2004-09-01 2006-10-19 삼성전자주식회사 입체 영상 표시장치
KR100580218B1 (ko) * 2004-12-30 2006-05-16 삼성전자주식회사 하나의 프로젝터를 사용한 투사형 3차원 영상 디스플레이장치
JP2007017536A (ja) * 2005-07-05 2007-01-25 Ricoh Co Ltd プロジェクタ装置
JP2007072049A (ja) 2005-09-06 2007-03-22 Seiko Epson Corp 画像表示装置
US7635189B2 (en) * 2005-12-21 2009-12-22 International Business Machines Corporation Method and system for synchronizing opto-mechanical filters to a series of video synchronization pulses and derivatives thereof
US7944465B2 (en) * 2006-01-13 2011-05-17 Zecotek Display Systems Pte. Ltd. Apparatus and system for reproducing 3-dimensional images
JP4605032B2 (ja) * 2006-01-25 2011-01-05 ソニー株式会社 スクリーン及び画像投影装置
WO2007127319A2 (en) * 2006-04-25 2007-11-08 The Board Of Regents Of The University Of Oklahoma Volumetric liquid crystal display for rendering a three- dimensional image
US8542408B2 (en) 2006-12-29 2013-09-24 Texas Instruments Incorporated High dynamic range display systems
KR20080094318A (ko) * 2007-04-20 2008-10-23 삼성전기주식회사 스캐닝 디스플레이 장치 및 스캐닝 디스플레이 구동 방법
KR20090034477A (ko) * 2007-10-04 2009-04-08 삼성전기주식회사 회절형 광변조기의 보상 방법
US20100030627A1 (en) 2008-08-01 2010-02-04 Christopher Lee system and method of managing project templates
US9071834B2 (en) 2009-04-25 2015-06-30 James Yett Array of individually angled mirrors reflecting disparate color sources toward one or more viewing positions to construct images and visual effects
US8724000B2 (en) * 2010-08-27 2014-05-13 Adobe Systems Incorporated Methods and apparatus for super-resolution in integral photography
JP5953311B2 (ja) * 2010-11-08 2016-07-20 シーリアル テクノロジーズ ソシエテ アノニムSeereal Technologies S.A. 表示装置
GB201019181D0 (en) * 2010-11-12 2010-12-29 Univ Leicester Improved optical arrangement
US20130009945A1 (en) 2011-07-07 2013-01-10 Niall Thomas Davidson Electronic Display Method and Apparatus
JP2014130305A (ja) * 2012-03-30 2014-07-10 Nitto Denko Corp 表示装置
KR102207298B1 (ko) * 2012-10-18 2021-01-26 더 아리조나 보드 오브 리전츠 온 비핼프 오브 더 유니버시티 오브 아리조나 어드레스 가능 포커스 큐를 갖는 입체적 디스플레이
WO2014063716A1 (en) * 2012-10-23 2014-05-01 Lusospace Aerospace Technology Ida See-through head or helmet mounted display device
KR20150086497A (ko) * 2012-11-16 2015-07-28 코닌클리케 필립스 엔.브이. 무안경 입체 영상 디스플레이 디바이스
US9405124B2 (en) 2013-04-09 2016-08-02 Massachusetts Institute Of Technology Methods and apparatus for light field projection
JP6270674B2 (ja) * 2014-02-27 2018-01-31 シチズン時計株式会社 投影装置
US10042161B2 (en) * 2014-03-03 2018-08-07 Eyeway Vision Ltd. Eye projection system
US9557466B2 (en) 2014-07-30 2017-01-31 Leia, Inc Multibeam diffraction grating-based color backlighting
JP6437630B2 (ja) 2014-07-30 2018-12-12 レイア、インコーポレイテッドLeia Inc. マルチビーム回折格子ベースのカラー背面照明
US11399164B2 (en) * 2015-03-02 2022-07-26 Disney Enterprises, Inc. System and method for increased spatial resolution
US10070106B2 (en) * 2015-06-17 2018-09-04 Texas Instruments Incorporated Optical system designs for generation of light fields using spatial light modulators
CN106569381B (zh) * 2015-10-08 2021-02-19 松下知识产权经营株式会社 投影式图像显示装置
WO2017062289A1 (en) * 2015-10-08 2017-04-13 Pcms Holdings, Inc. Methods and systems of automatic calibration for dynamic display configurations
US9411167B1 (en) 2016-03-29 2016-08-09 Kedrick F. Brown Auto-multiscopic 3D billboard display system

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1405623A (zh) * 2002-10-29 2003-03-26 薛虎玲 一种准波场合成无镜式立体影视光学引擎
WO2004105403A1 (de) * 2003-05-23 2004-12-02 Peter Boll Verfahren und vorrichtung zur dreidimensionalen darstellung von bildern
US20060061846A1 (en) * 2004-09-17 2006-03-23 Microvision, Inc. Scanned light display system using array of collimating elements in conjunction with large numerical aperture light emitter array
CN101006708A (zh) * 2004-09-17 2007-07-25 株式会社尼康 电子设备
CN101855902A (zh) * 2007-09-25 2010-10-06 以克斯普雷有限公司 微投影仪
CN103529554A (zh) * 2008-07-10 2014-01-22 实景成像有限公司 宽视角显示和用户接口
US20110242150A1 (en) * 2010-03-31 2011-10-06 Samsung Electronics Co., Ltd. Backlight unit, 3d display having the same, and method of forming 3d image
CN103048867A (zh) * 2012-12-31 2013-04-17 中国科学院自动化研究所 多模式混合投影的真三维显示系统
CN103423641A (zh) * 2013-07-23 2013-12-04 杭州杭科光电股份有限公司 一种带反射配光的led光源模组
CN105814626A (zh) * 2013-09-30 2016-07-27 Pcms控股公司 用于提供增强现实显示和/或用户界面的方法、装置、系统、设备和计算机程序产品
US20150362645A1 (en) * 2014-06-12 2015-12-17 Gentex Corporation Selectively-transparent electro-optic display
WO2016004998A1 (en) * 2014-07-10 2016-01-14 Lusospace, Projectos Engenharia Lda Display device
WO2016182507A1 (en) * 2015-05-14 2016-11-17 Medha Dharmatilleke Multi purpose mobile device case/cover integrated with a camera system & non electrical 3d/multiple video & still frame viewer for 3d and/or 2d high quality videography, photography and selfie recording
CN106802513A (zh) * 2017-01-23 2017-06-06 京东方科技集团股份有限公司 背光源、背光源的制造方法和背光模组

Also Published As

Publication number Publication date
CN111065957A (zh) 2020-04-24
EP3673319A1 (en) 2020-07-01
US20200371378A1 (en) 2020-11-26
JP7227224B2 (ja) 2023-02-21
WO2019040484A1 (en) 2019-02-28
KR102625625B1 (ko) 2024-01-15
JP2023075086A (ja) 2023-05-30
KR20200060712A (ko) 2020-06-01
KR20240008419A (ko) 2024-01-18
CN111065957B (zh) 2022-04-05
JP7559103B2 (ja) 2024-10-01
EP4030753A1 (en) 2022-07-20
EP3673319B1 (en) 2022-03-09
JP2020531902A (ja) 2020-11-05
CN114815287B (zh) 2024-08-13

Similar Documents

Publication Publication Date Title
CN111065957B (zh) 用于生成投影3d光场的光场图像引擎方法和装置
US12061350B2 (en) 3D display directional backlight based on diffractive elements
US11991343B2 (en) Optical method and system for light field displays based on distributed apertures
JP7278277B2 (ja) ライトフィールドディスプレイにおける開口拡大のための方法およびシステム
WO2018200417A1 (en) Systems and methods for 3d displays with flexible optical layers
US11917121B2 (en) Optical method and system for light field (LF) displays based on tunable liquid crystal (LC) diffusers
WO2019164745A1 (en) Multifocal optics for light field displays
WO2021076424A1 (en) Method for projecting an expanded virtual image with a small light field display

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant