CN117917595A - 用于紧凑型平视显示器的全息图计算 - Google Patents

Abstract

一种计算光学系统的虚拟图像点的子全息图的方法，该光学系统包括布置成显示子全息图的显示设备和布置成复制子全息图的波导。该方法包括：确定由从虚拟图像点到观察者的入瞳周边的直线路径界定的区域，其中该区域包括显示设备的第一虚拟复本上的第一区域分量和显示设备的第二虚拟复本上的第二区域分量；确定第一区域分量内的虚拟图像点的第一子全息图分量和第二区域分量内的虚拟图像点的第二子全息图分量；叠加第一子全息图分量和第二子全息图分量以形成虚拟图像点的子全息图。该方法还包括：将局部相位斜坡函数应用于第一区域分量和第二区域分量中的至少一个。

Description

用于紧凑型平视显示器的全息图计算

技术领域

本公开涉及光瞳扩展或复制，特别是对于包括发散光线束的衍射光场。更具体地，本公开涉及用于确定衍射结构的方法，例如全息图或相息图，用于由包括波导光瞳扩展器的显示系统显示，并且涉及使用波导的光瞳扩展方法。一些实施例涉及使用第一和第二波导光瞳扩展器的二维光瞳扩展。一些实施例涉及图片生成单元和平视显示器，例如汽车平视显示器(HUD)。

背景技术

从物体散射的光包含振幅和相位信息。可以通过众所周知的干涉技术在例如感光板上捕获该振幅和相位信息，以形成包括干涉条纹的全息记录或“全息图”。可以通过用合适的光照射来重建全息图，以形成代表原始物体的二维或三维全息重建或重放图像。

计算机生成的全息术可以在数值上模拟干涉过程。可以通过基于数学变换比如菲涅耳或傅立叶变换的技术来计算计算机生成的全息图。这些类型的全息图可被称为菲涅耳/傅立叶变换全息图或简称为菲涅耳/傅立叶全息图。傅立叶全息图可被认为是物体的傅立叶域/平面表示或物体的频域/平面表示。例如，还可以通过相干光线跟踪或点云技术来计算计算机生成的全息图。

可以在布置为调制入射光的振幅和/或相位的空间光调制器上对计算机生成的全息图进行编码。例如，可以使用电可寻址液晶、光学可寻址液晶或微镜来实现光调制。

空间光调制器通常包括多个单独可寻址像素，其也可被称为单元或元素。光调制方案可以是二进制、多级或连续的。可替代地，该设备可以是连续的(即不包括像素)，因此光调制可以在设备上是连续的。空间光调制器可以是反射性的，这意味着调制光以反射输出。空间光调制器可以同样是透射性的，这意味着调制光以透射输出。

使用这里描述的系统可以提供全息投影仪。这种投影仪已经在平视显示器“HUD”中得到应用。

发明内容

在所附的独立权利要求中定义了本公开的各方面。

概括地说，本公开涉及图像投影。它涉及图像投影的方法和包括显示设备的图像投影仪。本公开还涉及包括图像投影仪和观察系统的投影系统，其中图像投影仪将来自显示设备的光投影或中继到观察系统。本公开同样适用于单目和双目观察系统。观察系统可以包括观察者的一只或多只眼睛。观察系统包括具有光焦度的光学元件(例如人眼的晶状体)和观察平面(例如人眼的视网膜)。投影仪可被称为“光引擎”。显示设备和使用显示设备形成(或感知)的图像在空间上彼此分离。观察者在显示平面上形成或感知图像。在一些实施例中，图像是虚拟图像，并且显示平面可被称为虚拟图像平面。在其他实施例中，图像是通过全息重建形成的真实图像，并且该图像被投影或中继到观察平面。通过照射显示在显示设备上的衍射图案(例如全息图)来形成图像。

显示设备包括像素。显示设备的像素可以显示衍射光的衍射图案或结构。衍射光可以在与显示设备空间分离的平面上形成图像。根据众所周知的光学原理，最大衍射角的幅度由像素的大小和其他因素比如光的波长决定。

在实施例中，显示设备是空间光调制器，例如硅上液晶(“LCOS”)空间光调制器(SLM)。光在衍射角范围内(例如从零到最大衍射角)从LCOS向观察实体/系统比如相机或眼睛传播。在一些实施例中，可以使用放大技术来增加可用衍射角的范围，使其超过LCOS的传统最大衍射角。

在一些示例中，图像(由显示的衍射图案/全息图形成)传播到眼睛。例如，在显示设备和观察者之间的自由空间中或者在屏幕或其他光接收表面上形成的中间全息重建/图像的空间调制光可以传播到观察者。

在实施例中，图像是实际图像。在其他实施例中，图像是由一只(或多只)人眼感知的虚拟图像。投影系统或光引擎因此可以配置成使得观察者直接看着显示设备。在这样的实施例中，用全息图编码的光直接传播到眼睛，并且在显示设备和观察者之间的自由空间中或者屏幕或其他光接收表面上没有形成中间全息重建。在这样的实施例中，眼睛的瞳孔可被认为是观察系统的入口孔径，眼睛的视网膜可被认为是观察系统的观察平面。有时可以说在这种配置中，眼睛的晶状体执行全息图到图像的转换。

在一些其他示例中，衍射图案/全息图本身(的光)传播到眼睛。例如，全息图(尚未完全转换为全息重建，即图像)—可以非正式地说是用全息图“编码”的—的空间调制光直接传播到观察者的眼睛。观察者可以感知到真实或虚拟图像。在这些实施例中，在显示设备和观察者之间没有形成中间全息重建/图像。有时说，在这些实施例中，眼睛的晶状体执行全息图到图像的转换或变换。投影系统或光引擎可以配置成使得观察者有效地直视显示设备。

这里提到的“光场”是“复合光场”。术语“光场”仅仅表示在至少两个正交的空间方向例如x和y上具有有限大小的光图案。术语“光场”仅仅表示在至少两个正交空间方向(x和y)上具有有限尺寸的光图案。这里使用的“复数”一词仅仅表示光场中每个点处的光可以由振幅值和相位值来定义，因此可以由复数或一对值来表示。出于全息图计算的目的，复合光场可以是复数的二维阵列，其中复数定义光场内多个离散位置处的光强和相位。

根据众所周知的光学原理，眼睛或其他观察实体/系统可以观察到的从显示设备传播的光的角度范围随着显示设备和观察实体之间的距离而变化。例如，在1米的观察距离，来自LCOS的仅小范围角度可以传播通过眼睛的瞳孔，以在给定眼睛位置的视网膜上形成图像。从显示设备传播的光线的角度范围决定了观察者“可见”的图像部分，该光线可以成功地传播通过眼睛的瞳孔以在给定眼睛位置的视网膜上形成图像。换句话说，不是图像的所有部分从观察平面上的任何一点都是可见的(例如诸如眼动盒的观察窗口内的任何一个眼睛位置)。

在一些实施例中，观察者感知的图像是出现在显示设备上游的虚拟图像，也就是说，观察者感知图像比显示设备离他们更远。从概念上讲，可以考虑虚拟图像的多个不同的虚拟图像点。对于该虚拟图像点，从虚拟点到观察者的距离在这里被称为虚拟图像距离。当然，不同的虚拟点可以具有不同的虚拟图像距离。与每个虚拟点相关的光线束内的各个光线可以经由显示设备采取不同的相应光路到达观察者。然而，只有显示设备的一些部分且因此只有来自虚拟图像的一个或多个虚拟点的一些光线可能在用户的视野内。换句话说，只有来自虚拟图像上的一些虚拟点的一些光线将通过显示设备传播到用户的眼睛中，因此将被观察者看到。因此，从概念上讲，可以认为观察者正在通过“显示设备大小的窗口”观察虚拟图像，该窗口可以非常小，例如直径为1cm，处于相对较大的距离，例如1米。并且用户将通过他们眼睛的瞳孔观察显示设备大小的窗口，瞳孔也可以非常小。因此，在任何给定时间，视场变小，并且能够看到的特定角度范围严重依赖于眼睛位置。

光瞳扩展器解决了如何增加从显示设备传播的光线的角度范围，并且该光线可以成功地传播通过眼睛的瞳孔以形成图像。显示设备通常(相对而言)小，投影距离(相对而言)大。在一些实施例中，投影距离比显示设备的入瞳和/或孔径的直径或宽度(即像素阵列的尺寸)大至少一个(比如至少两个)数量级。本公开的实施例涉及一种配置，其中图像的全息图而不是图像本身传播到人眼。换句话说，观察者接收到的光根据图像的全息图进行调制(或者用/通过图像的全息图进行编码)。然而，本公开的其他实施例可以涉及这样的配置，其中图像而不是全息图传播到人眼—例如通过所谓的间接观察，其中在屏幕上(或者甚至在自由空间中)形成的全息重建或者“重放图像”的光传播到人眼。

光瞳扩展器解决了如何增加从显示设备传播的光线的角度范围的问题，光线可以成功地传播通过眼睛的瞳孔以形成图像。显示设备通常(相对而言)较小，而投影距离(相对而言)较大。在一些实施例中，投影距离比显示设备的入瞳和/或孔径的直径或宽度(即像素阵列的尺寸)大至少一个数量级，例如至少两个数量级。本公开的实施例涉及一种配置，其中图像的全息图而不是图像本身被传播到人眼。换句话说，观察者接收到的光根据图像的全息图进行调制(或者用/通过图像的全息图进行编码)。然而，本公开的其他实施例可以涉及这样的配置，其中图像而不是全息图被传播到人眼—例如通过所谓的间接观察，其中在屏幕上(或者甚至在自由空间中)形成的全息重建或者“重放图像”的光被传播到人眼。

使用波导来扩展视场，并因此增加最大传播距离，在该距离上可以使用显示设备的全衍射角。使用波导还可以横向增加用户的眼盒，从而使眼睛能够进行一些运动，同时仍使用户能够看到图像。因此，波导可被称为波导光瞳扩展器。

光瞳扩展器的使用横向增加了观察区域(即用户的眼盒)，从而使得眼睛能够发生一些运动，同时仍使得用户能够看到图像。如技术人员将理解，在成像系统中，观察区域(用户的眼盒)是观察者的眼睛能够感知图像的区域。本公开涉及非无限虚像距离—即近场虚像。

传统上，二维光瞳扩展器包括一个或多个一维光波导，每个使用一对相对的反射表面形成，其中来自表面的输出光形成观察窗—例如供观察者观察的眼盒或眼动盒。从显示设备接收的光(例如来自LCOS的空间调制光)被该或每个波导复制，以便在至少一个维度上增加视场(或观察区域)。特别是，由于通过划分入射波前的振幅产生额外的光线或“复本”，波导扩大了观察窗。

在一些实施例中，波导的第一对相对表面是伸长或延长表面，沿着第一维度相对较长，沿着第二维度相对较短，例如沿着两个其他维度中的每个相对较短，每个维度基本与相应的其他维度中的每个正交。光在第一对表面之间/从其反射/透射的过程布置成使得光在第一波导光瞳扩展器内传播，光传播的大致方向是第一波导光瞳扩展器相对较长的方向(即在其“伸长”方向上)。

这里公开了一种系统，其使用衍射光形成图像，并提供适合于真实世界应用的眼盒尺寸和视场—例如在汽车工业中通过平视显示器。衍射光是从衍射结构形成图像全息重建的光—例如全息图比如傅立叶或菲涅耳全息图或点云全息图。使用衍射和衍射结构需要具有非常小的像素(例如1微米)的高密度的显示设备—这在实践中意味着小显示设备(例如1cm)。发明人已经解决了如何为2D光瞳扩展提供衍射光场的问题(例如包括发散(非准直)光线束的衍射光)。

在一些方面，显示系统包括显示设备—比如像素化显示设备，例如空间光调制器(SLM)或硅上液晶(LCoS)SLM—其布置为提供或形成衍射(例如发散)光。在这些方面，空间光调制器(SLM)的孔径是系统的极限孔径。也就是说，空间光调制器的孔径—更具体地说，界定包含在SLM内的光调制像素阵列的区域的尺寸—决定了可以离开系统的光线束的尺寸(例如空间范围)。根据本公开，陈述了通过使用至少一个光瞳扩展器，系统的出射光瞳被扩展以反映系统的出射光瞳(其受到具有用于光衍射的像素尺寸的小显示设备的限制)在空间延伸上变得更大。

衍射(例如发散)光场可被称为具有“光场尺寸”，其被定义在基本正交于光场传播方向的方向上。因为光被衍射/发散，所以光场尺寸随着传播距离而增加。

在一些实施例中，衍射光场根据全息图被空间调制。换句话说，在这些方面，衍射光场包括“全息光场”。全息图可以显示在像素化显示设备上。全息图可以是计算机生成的全息图(CGH)。它可以是傅立叶全息图或菲涅耳全息图或点云全息图或任何其他合适类型的全息图。可选地，可以计算全息图，以便形成全息光的通道，每个通道对应于观察者想要观察(或者感知，如果是虚拟图像的话)的图像的不同部分。像素化显示设备可以配置成连续或依次显示多个不同的全息图。这里公开的每个方面和实施例可以应用于多个全息图的显示。

第一波导光瞳扩展器的输出端口可以耦合到第二波导光瞳扩展器的输入端口。第二波导光瞳扩展器可以布置成通过第二波导光瞳扩展器的第三对平行表面之间的内反射将衍射光场(包括由第一波导光瞳扩展器输出的光场的一些、优选大部分、优选全部复本)从其输入端口引导到相应的输出端口。

第一波导光瞳扩展器可以布置成在第一方向上提供光瞳扩展或复制，并且第二波导光瞳扩展器可以布置成在不同的第二方向上提供光瞳扩展或复制。第二方向可以基本正交于第一方向。第二波导光瞳扩展器可以布置成保持第一波导光瞳扩展器在第一方向上已经提供的光瞳扩展，并且扩展(或复制)它在不同的第二方向上从第一波导光瞳扩展器接收的一些、优选大多数、优选全部复本。第二波导光瞳扩展器可以布置成直接或间接地从第一波导光瞳扩展器接收光场。可以沿着第一和第二波导光瞳扩展器之间的光场的传播路径提供一个或多个其他元件。

第一波导光瞳扩展器可以是基本伸长的(例如杆状的)，而第二波导光瞳扩展器可以是基本平面的(例如矩形的)。第一波导光瞳扩展器的伸长形状可以由沿着第一维的长度来定义。第二波导光瞳扩展器的平面或矩形形状可以由沿着第一维的长度和沿着基本正交于第一维的第二维的宽度或广度来定义。第一波导光瞳扩展器沿其第一维的尺寸或长度分别对应于第二波导光瞳扩展器沿其第一维或第二维的长度或宽度。包括其输入端口的第二波导光瞳扩展器的一对平行表面中的第一表面可被成形、定尺寸和/或定位成对应于由第一波导光瞳扩展器上的一对平行表面中的第一表面上的输出端口限定的区域，使得第二波导光瞳扩展器布置成接收由第一波导光瞳扩展器输出的每个复本。

第一和第二波导光瞳扩展器可以共同地在第一方向和垂直于第一方向的第二方向上提供光瞳扩展，可选地，其中包含第一和第二方向的平面基本平行于第二波导光瞳扩展器的平面。换句话说，分别限定第二波导光瞳扩展器的长度和宽度的第一和第二维可以分别平行于第一和第二方向(或者分别平行于第二和第一方向)，其中波导光瞳扩展器提供光瞳扩展。第一波导光瞳扩展器和第二波导光瞳扩展器的组合通常可被称为“光瞳扩展器”。

可以说，由第一和第二波导扩展器提供的扩展/复制具有在两个方向中的每个方向上扩展显示系统的出射光瞳的效果。由扩展的出射光瞳定义的区域又可以定义扩展的眼盒区域，观察者可以从该区域接收输入衍射或发散光场的光。可以说眼盒区域位于或定义观察平面。

出射光瞳扩展的两个方向可以与第一和第二波导光瞳扩展器提供复制/扩展的第一和第二方向共面或平行。可替代地，在包括诸如光学组合器的其他元件的布置中，例如车辆的挡风玻璃，出射光瞳可被认为是来自该其他元件例如来自挡风玻璃的出射光瞳。在这种布置中，出射光瞳可以与第一和第二波导光瞳扩展器提供复制/扩展的第一和第二方向不共面且不平行。例如，出射光瞳可以基本垂直于第一和第二方向，其中第一和第二波导光瞳扩展器提供复制/扩展。

观察平面和/或眼盒区域可以与第一和第二波导光瞳扩展器提供复制/扩展的第一和第二方向不共面或不平行。例如，观察平面可以基本垂直于第一和第二方向，其中第一和第二波导光瞳扩展器提供复制/扩展。

为了提供合适的发射条件以实现第一和第二波导光瞳扩展器内的内反射，第一波导光瞳扩展器的细长维度可以相对于第二波导光瞳扩展器的第一和第二维度倾斜。

为了提供合适的发射条件以实现第一和第二波导光瞳扩展器内的内反射，第一波导光瞳扩展器的细长维度可以相对于第二波导光瞳扩展器的第一和第二维度倾斜。

显示设备可以具有有源或像素显示区域，该有效或显示区域具有小于10厘米的第一维度，例如小于5厘米或小于2厘米。显示设备和观察系统之间的传播距离可以大于1m，例如大于1.5m或大于2m。波导内的光学传播距离可以高达2m，例如高达1.5m或高达1m。该方法能够在小于20ms比如小于15ms或小于10ms内接收图像并确定足够质量的相应全息图。

在一些实施例中—仅通过根据本公开的衍射或全息光场的示例来描述—全息图配置成将光路由到多个通道中，每个通道对应于图像的不同部分(即子区域)。全息图可以在诸如空间光调制器的显示设备上展示比如显示。当显示在适当的显示设备上时，全息图可以对可由观察系统转换成图像的光进行空间调制。由衍射结构(包括全息图)形成的通道在这里被称为“全息图通道”,仅仅是为了反映它们是由具有图像信息的全息图编码的光通道。可以说每个通道的光是在全息域中，而不是在图像或空间域中。在一些实施例中，全息图是傅立叶或傅立叶变换全息图，因此全息图域是傅立叶或频域。全息图同样可以是菲涅耳或菲涅耳变换全息图。全息图在本文中被描述为将光路由到多个全息图通道中，仅仅是为了反映可由全息图重建的图像具有有限的大小，并且可被任意划分成多个图像子区域，其中每个全息图通道对应于每个图像子区域。重要的是，本示例的全息图的特征在于它在被照射时如何分布图像内容。具体来说，全息图通过角度来划分图像内容。也就是说，图像上的每个点都与照射时全息图形成的空间调制光中的唯一光线角度相关—至少是唯一的一对角度，因为全息图是二维的。为了避免疑问，这种全息图行为不是常规的。当被照射时，由这种特殊类型的全息图形成的空间调制光可被任意分成多个全息图通道，其中每个全息图通道由一系列光线角度(二维)限定。从上文可以理解，在空间调制光中可以考虑的任何全息图通道(即光线角度的子范围)将与图像的相应部分或子区域相关。也就是说，重建图像的该部分或子区域所需的所有信息都包含在由图像的全息图形成的空间调制光的角度子范围内。当作为整体观察空间调制光时，不一定存在多个离散光通道的任何证据。然而，在一些布置中，通过有意地将计算全息图的目标图像的区域留为空白或空的(即不存在图像内容)来形成多个空间分离的全息图通道。

然而，全息图仍可被识别。例如，如果只有由全息图形成的空间调制光的连续部分或子区域被重建，则只有图像的子区域应该是可见的。如果重建空间调制光的不同的连续部分或子区域，图像的不同子区域应该是可见的。这种类型的全息图的另一个识别特征是，任何全息图通道的横截面区域的形状基本对应于入射光瞳的形状(即基本相同)，尽管尺寸可以不同—至少在计算全息图的正确平面处。每个光/全息图通道以不同的角度或角度范围从全息图传播。虽然这些是表征或识别这种类型全息图的示例方式，但也可以使用其他方式。总之，本文公开的(特定类型的)全息图通过图像内容如何分布在全息图编码的光内来表征和识别。此外，为了避免任何疑问，本文中对配置成引导光或将图像成角度地划分成多个全息图通道的全息图的引用仅作为示例，并且本公开同样适用于任何类型的全息光场或者甚至任何类型的衍射或衍射光场的光瞳扩展。

概括地说，本文公开了一种为输入光场提供光瞳扩展的系统，其中输入光场是包括发散光线束的衍射或全息光场。如上所述，通过创建输入光线(或光线束)的一个或多个复本，光瞳扩展(也可以称为“图像复制”或“复制”或“光瞳复制”)使得观察者可以看到图像(或可以接收全息图的光，观察者的眼睛形成图像)的区域的尺寸增加。可以在一个或多个维度上提供光瞳扩展。例如，可以提供二维光瞳扩展，其中每个维度基本与各自的另一个维度正交。

该系统可以紧凑和流线型的物理形式提供。这使得系统适用于广泛的现实世界应用，包括那些空间有限和不动产价值高的应用。例如，它可以在平视显示器(HUD)中实现，比如车辆或汽车HUD。

根据本公开，为衍射或衍射光提供光瞳扩展，其可以包括发散的光线束。衍射光可以由显示设备输出，比如像素化显示设备，比如布置成显示衍射结构(比如全息图)的空间光调制器(SLM)。衍射光场可以由“光锥”来定义。因此，衍射光场的大小(如在二维平面上定义的)随着距相应衍射结构(即显示设备)的传播距离而增加。

空间光调制器可以布置成显示全息图(或包括衍射图案的全息图)。衍射或发散光可以包括用/由全息图编码的光，而不是图像或全息重建的光。因此，在这样的实施例中，可以说光瞳扩展器复制全息图或形成全息图的至少一个复本，以传达传递给观察者的光是根据图像的全息图而不是图像本身进行空间调制的。也就是说，衍射光场传播到观察者。

在一些实施例中，提供了两个一维波导光瞳扩展器，每个一维波导光瞳扩展器布置成通过形成空间光调制器的出射光瞳(或出射光瞳的光)的多个复本或副本来有效地增加系统的出射光瞳的尺寸。出射光瞳可以理解为系统输出光的物理区域。也可以说，每个波导光瞳扩展器布置成扩展系统的出射光瞳的尺寸。也可以说，每个波导光瞳扩展器布置成扩展/增加观察者的眼睛可以位于其中的眼盒的尺寸，以便看到/接收由系统输出的光。

概括地说，提供了一种计算光学系统的虚拟图像的虚拟图像点的全息图的方法。光学系统包括布置成显示全息图的显示设备。光学系统还包括布置成复制全息图的波导。该方法可以包括确定由从虚拟图像点到观察者的入瞳周边的直线路径界定的区域。该区域包括由波导形成的显示设备的虚拟复本的至少一部分。直线路径可以代表光波。包括从图像点传播光波的计算全息图的方法，例如点云全息术，本身是已知的。然而，涉及将这种计算全息图的方法应用于包括波导(特别是波导光瞳扩展器)的光学系统的方法仍处于起步阶段。在光学系统中包括波导给全息图的计算带来了复杂性，并且在确保由计算的全息图形成的清晰和高质量的图像在入射光瞳处被接收/观察方面存在许多障碍。发明人是致力于解决所述装置中的问题的极少数人之一，所述装置包括将点云全息术应用于光学系统，该光学系统包括配置为将全息图(非图像)传递到眼睛的波导光瞳扩展器。

如上所述，光学系统的出射光瞳可被波导扩展以生成显示设备的多个虚拟复本，每个虚拟复本对应于计算的全息图并且由波导形成。包括第一波导的光学系统可以在第一维度上扩展出瞳。如果第一和第二波导被适当地布置，则包括第一波导和第二波导的光学系统可以在第一维度和与第一维度正交的第二维度上扩展出瞳。如果包括一个或多个波导的光学系统被正确布置，可以产生一维或二维阵列的复本。生成提供清晰和高质量图像的全息图是困难的，所述图像通过这样的复本阵列被观察系统(例如观察者的眼睛)观察。

例如，当波导与非无限虚拟图像距离(即近场虚拟图像)结合时，由于可能不同的光传播路径通过波导，因此会出现所谓的“重影”。重影图像是主图像的低强度复本。主(例如最高强度)图像可被称为主图像。每个重影图像可被称为副图像。重影的存在会显著降低感知到的虚拟图像的质量。重影图像可能会使主图像看起来模糊。此外，对于扩展出射光瞳内的观察系统(例如用户的眼睛)的给定位置，可以从显示设备的多个复本接收与特定虚拟图像点相关的光。但是，由于通过一个或多个波导的光路距离，不同的复本具有不同的光路长度，因此相应虚拟复本的深度(从出射光瞳测量)是不同的。计算要在显示设备上显示并随后复制的全息图的方法应该优选地考虑虚拟复本的该深度差异。

一种计算虚拟图像的虚拟图像点的全息图的方法先前已被专门开发用于光学系统，该光学系统包括布置成显示全息图的显示设备和布置成复制全息图的波导。这种方法消除了重影，并解决了不同虚拟复本的深度差异。所述方法包括在由从虚拟图像点到观察者的入瞳周边的直线路径定义的区域内确定虚拟图像点的子全息图。虚拟图像点可以是虚拟图像的多个虚拟图像点中的一个虚拟图像点。子全息图的区域可以通过从相应虚拟图像点向观察者传播光波来确定。该区域可被定义为在虚拟图像和观察者之间的虚拟表面处传播的光波的相交区域。可以在虚拟图像和波导之间识别虚拟表面。虚拟表面可以包括显示设备和由波导形成的显示设备的多个复本。该方法可以包括识别虚拟表面上的区域。虚拟表面也可被称为扩展调制器。虚拟表面可以是虚拟复本的交错虚拟表面。该区域可以包括由波导形成的显示设备的虚拟复本的至少一部分。在一些实施例中，在虚拟复本的第一虚拟复本的第一区域内确定第一虚拟图像点的第一子全息图。在其他实施例中，第一虚拟图像点的第一子全息图包括第一子全息图分量和第二子全息图分量。在一示例中，在显示设备的第一虚拟复本的第一区域内确定第一子全息图分量，并且在显示设备的第二虚拟复本的第二区域内确定第二子全息图分量。这些实施例的方法可以进一步包括叠加第一子全息图分量和第二子全息图分量，以形成第一虚拟图像点的第一子全息图。

上述方法只考虑了来自虚拟图像的光线，这些光线可以在眼盒内的特定位置穿过观察系统(例如观察者的眼睛)的入瞳。因此，当计算全息图时，仅考虑对“主图像”(而不是重影图像)有贡献的光线。结果，上述计算全息图的方法防止不希望的重影图像的形成。此外，由于该方法仅传播来自虚拟图像的小波/光线，该小波/光线可以在相关眼睛位置穿过观察者眼睛的入瞳，因此计算复杂度降低。这样降低了计算点云全息图的速度，也降低了计算资源的消耗。此外，该方法考虑了复本阵列中不同复本的深度差异。

因此，当光学系统中包括波导时，上述设计的全息图计算方法解决了与提供由计算的全息图形成的清晰和高质量图像相关的许多问题。然而，在模拟和实验以测试上述方法的鲁棒性之后，发明人惊奇地发现了影响在眼盒处接收的全息图/图像的清晰度和质量的另一个问题。特别地，本发明人已经认识到当图像点由用计算的子全息图编码的光形成时的问题，该计算的子全息图在跨越多个复本的区域内确定，例如包括分别在第一和第二虚拟复本的第一和第二区域内确定的第一子全息图分量和第二子全息图分量。发明人意外地发现，即使在考虑了复本之间的任何偏移和不同复本的光路差异之后，所述形成的像点相对于全息图计算所基于的虚拟图像点看起来是伸长的(即伸长是误差)。这降低了由全息图形成的图像的质量和显示设备的分辨率，因为每单位面积可以显示更少的像素，这是不期望的。本公开提供了一种通过消除或减少伸长效应来提高图像质量的方法。

在第一方面，提供了一种计算光学系统的虚拟图像的虚拟图像点的子全息图的方法。该光学系统包括布置成显示全息图的显示设备和布置成复制全息图的波导。该方法包括确定由从虚拟图像点到观察者的入瞳周边的直线路径界定的区域。由直线路径界定的区域包括显示在显示设备上的全息图的第一虚拟复本上的第一区域分量和显示在显示设备上的全息图的第二虚拟复本上的第二区域分量。第一虚拟复本可以与第二虚拟复本相邻。该方法还包括确定第一区域分量内的虚拟图像点的第一子全息图分量和第二区域分量内的虚拟图像点的第二子全息图分量。该方法还包括叠加第一子全息图分量和第二子全息图分量以形成虚拟图像点的子全息图。该方法仅考虑来自虚拟图像的光线，该光线可以在扩展出瞳内的特定位置穿过观察系统(例如观察者的眼睛)的入瞳。因此，当计算全息图时，仅考虑对“主图像”(而不是重影图像)有贡献的光线。因此，上述计算全息图的方法自动避免不希望的重影图像的形成。此外，由于该方法仅传播来自虚拟图像的小波/光线，该小波/光线可以在相关眼睛位置穿过观察者眼睛的入瞳，因此计算复杂度降低。这样降低了计算点云全息图的速度，也降低了计算资源的消耗。此外，该方法自动考虑复本阵列中不同复本的深度差异。

该方法还包括：将局部相位斜坡函数应用于第一区域分量和第二区域分量中的至少一个。所应用的局部相位斜坡函数通过消除或减少由用所计算的全息图编码的光形成的图像点的伸长，有利地提高了图像质量。特别地，可以消除或减少所述图像点相对于为其计算全息图的虚拟图像点的伸长。

发明人已经推断出图像点的伸长类似于由振幅像差效应引起的衍射效应。这种衍射可能导致从显示设备传播的光锥(或复合光场)的光发生位移或偏移。由波导产生的复本的边界处的光可被最大程度地移位。这种效应可被称为振幅畸变。这里公开的振幅像差类似于彗差，但如本领域技术人员将理解，彗差是纯相位像差而不是振幅像差。光锥可以包括多个点扩散函数。衍射可以导致从显示设备的位于或朝向复本边缘的区域发出的一个或多个点扩散函数的主瓣变形或偏移。

当虚拟图像点的子全息图包括在第一虚拟复本上具有第一区域分量的虚拟图像点的第一子全息图分量和在第二虚拟复本上具有第二区域分量的虚拟图像点的第二子全息图分量时，上述振幅像差是一个特别的问题。在这种情况下，由全息图重建的图像点由第一和第二子全息图分量形成(它们叠加以形成子全息图)。理想地，来自第一和第二子全息图分量的光将被对准/组合/叠加，从而形成单个(通常为圆形)图像点，其看起来与计算子全息图的虚拟图像点相同。换句话说，来自第一和第二子全息图分量的光将理想地看起来重叠和/或可能看起来由单个点扩散函数形成。在这种情况下，光可被称为“共定位的”。然而，发明人已经发现了类似于衍射引起的振幅像差的误差。振幅像差可能导致第一和第二子全息图分量之一或两者的光错位。具体而言，与第一子全息图分量相关的点扩散函数可能相对于与第二子全息图分量相关的点扩散函数错位，和/或与第二子全息图分量相关的点扩散函数可能相对于与第二子全息图分量相关的点扩散函数错位。这里提到的点扩散函数的错位是相对于点扩散函数的相应主瓣而言的。

点扩散函数的错位可能意味着来自第一和第二子全息图分量的点扩散函数没有正确地组合/叠加/重叠/共定位。这种由像差型效应引起的误差对所形成的像点的图像质量是有害的。特别地，形成的图像点可能看起来是伸长的(相对于虚拟图像点的预期形状)。

所发现的误差特定于计算全息图的方法，该方法包括从图像点传播光波，例如点云全息术，用于包括用于光瞳扩展的波导的光学系统。发明人在测试这种方法的鲁棒性时意外地遇到了这个问题。通过模拟和实验，发明人已经发现，对第一和/或第二区域分量适当应用局部相位斜坡函数可以有利地补偿误差，从而减少或消除相应图像点的伸长。具体而言，可以选择局部相位斜坡，其使与相应的子全息图分量相关的点扩散函数转向，以减少所引起的误差。因此，在应用局部相位斜坡函数之后，来自第一和第二子全息图分量的光可以组合/叠加/重叠/共定位。如下面更详细解释，局部相位斜坡可以叠加到虚拟图像点的第一和/或第二子全息图分量上。

应用于区域分量(例如第一和/或第二区域分量)的相位斜坡(或光栅函数)可以在出射光瞳处以第一方向将已经应用了相位斜坡的相应子全息图分量的光位移预定量。特别地，当被照射时，由相应的子全息图分量形成的点扩散函数可以在第一方向上位移预定量。预定位移量可以是出射光瞳处的位移量。可以计算相位斜坡(或光栅函数)来提供高精度的位移范围。相位斜坡的梯度可以类似于光栅函数的光栅角。该位移可以是第一方向上的线性位移。第一方向可以是x方向。局部相位斜坡可以通过相加或叠加与相应的子全息图分量相结合。因此，将局部相位斜坡函数应用于第一区域分量和第二区域分量中的至少一个的步骤可以包括将局部相位斜坡函数添加或叠加到相应的第一子全息图分量或第二子全息图分量。在实施例中，相位延迟分布显示在显示设备上，该显示设备可以是相位调制设备，例如硅上液晶空间光调制器，并且相位斜坡通过缠绕(模2p)相位相加被添加到全息图。可以将两个垂直的局部相位斜坡分别添加到子全息图分量，并分别进行修改，以微调用相应的子全息图分量编码的光的位置。

在本公开全文中，仅通过在出射光瞳处提供光的线性平移的函数的示例来提及“相位斜坡”(或“光栅函数”)。也就是说，光调制值阵列，当被添加到全息图上时，以限定的幅度和方向线性地移动重放场。位移可以用像素、毫米或度来测量。相位斜坡也可被称为相位楔。相位斜坡的相位值可被包装(例如模2)。缠绕相位斜坡可被认为是相位光栅。然而，本公开不限于纯相位调制，术语“光栅功能”、“软件光栅”和“闪耀光栅”可以用作光束转向功能的示例，例如缠绕调制斜坡。相位斜坡可以通过其相位梯度来表征。术语“光栅函数”在本公开中是优选的，因为相关的光栅角度是所公开的方法的关键构成。

如本文所用，“局部相位斜坡函数”意味着相位斜坡函数，其仅应用于特定的区域分量/子全息图分量，以使由入射到该子全息图分量上的光形成的点扩散函数转向。局部相位斜坡函数的空间范围(即尺寸)可以与相应的子全息图分量的空间范围相同。换句话说，相位斜坡函数被限制到显示设备(例如空间光调制器)的与对应的子全息图分量相同的子区域。因此，通常，局部相位斜坡函数使从显示设备传播的一部分光转向，而不是所有的光。这里使用单词“局部”来反映相位斜坡分量没有延伸(在像素空间中)超过第一区域分量和/或第二相位斜坡分量。也就是说，在第一/第二区域分量的区域之外，不应用局部相位斜坡函数。换句话说，局部相位斜坡不应用于第一/第二区域分量的区域之外的显示设备的像素。局部相位斜坡函数被限制或限定到第一/第二区域分量的像素区域/区。不同的局部相位斜坡函数可以应用于不同的子全息图分量，使得在一个或多个方向上不同的转向量被应用于不同的子全息图分量。这样，通过叠加第一子全息图分量和第二子全息图分量形成的子全息图可以包括多个不同的局部相位斜坡函数，选择这些函数以解决振幅像差误差。

与局部相位斜坡函数相关的位移可以对准由在被照射时相应子全息图分量形成的点扩散函数。如上所述，相位斜坡函数可以在出射光瞳处将点扩散函数位移预定量。该位移可以相对于没有应用局部相位斜坡函数的点扩散函数的位置。如上所述，对准点扩散函数可以包括使例如第一和第二子全息图分量的点扩散函数重叠、叠加或共定位。

该方法可以包括将第一局部相位斜坡函数应用于第一区域分量，并将第二局部相位斜坡函数应用于第二区域分量。第一局部相位斜坡函数和第二局部相位斜坡函数可以不同。对应于第一局部相位斜坡函数的第一方向可以与对应于第二局部相位斜坡函数的第二方向相反。第一局部相位斜坡函数(光栅函数)的梯度可以不同于第二局部相位斜坡函数的梯度。这样，由第一子全息图分量形成的第一点扩散函数和由第二子全息图分量形成的第二点扩散函数的移位或位移可以是不对称的或相反的或互补的。第一和第二局部相位斜坡函数的梯度的幅度和极性之一或两者可以不同。

可能存在与每个被照射的子全息图分量相关的点扩散函数。为了对准点扩散函数，第一子全息图分量的第一点扩散函数的位移量可以取决于第二子全息图分量的第二点扩散函数的位移量。因此，可以应用局部相位斜坡函数，使第一和第二点扩散以不同的量和不同的方向位移。例如，作为振幅像差的结果，与第一子全息图分量相关的第一点扩散函数可以在第二方向上位移第一量。与第二子全息图分量相关的第二点扩散函数可以在与第二方向相反的第一方向上位移第二量。为了校正振幅像差，可以将第一局部相位斜坡函数应用于第一子全息图，以将第一点扩散函数在第一方向上移位第一量。可以将第二局部相位斜坡函数应用于第二子全息图，以在第二方向上将第二点扩散函数移位第二量。在一些示例中，第一量可以与第二量相同(并且方向相反)，使得第一和第二点扩散函数的移位是对称的。在其他示例中，第一量可以不同于第二量(并且方向相反),使得第一和第二点扩散函数的移位不对称。

虚拟表面或所谓的扩展调制器可以包括显示设备和虚拟复本的一维或二维阵列。每个复本的光路长度可以不同。这可能是因为不同复本的光路可能具有通过波导的不同路径长度，例如在第一和可选的第二波导的表面之间以不同的“反弹”次数反弹。因此，每个复本的展开路径长度可以不同，因此虚拟表面或扩展调制器的复本阵列可以彼此偏移。换句话说，多个复本可以是“交错的”。由于与每个复本相关的波导中不同的路径长度，显示设备的每个复本可以离显示设备不同的垂直距离。对于包括第一波导和第二波导的光学系统，扩展调制器可被定义为包括以下：(i)在第一波导(例如细长波导)中产生的复本之间的第一偏移，由角度(在空间中)和对应的光瞳扩展方向定义，(ii)在第二波导(例如平面波导)中产生的复本之间的第二偏移，由角度(在空间中)和对应的光瞳扩展方向定义；(iii)第一偏移和第二偏移的方向之间的任何偏斜—如果原始显示设备是矩形的，则产生大致的平行四边形，和/或(iv)显示设备复本和眼睛位置之间的光路长度(差)。

虚拟表面的区域可以与虚拟图像的每个虚拟图像点相关。该区域可以例如由从每个虚拟图像点通过虚拟表面传播到观察者的入瞳的直线路径(例如表示球面波或小波)来描绘。虚拟图像的至少一些虚拟图像点可以具有跨越多个复本的相关区域。例如，与第一虚拟图像点相关的区域的第一区域分量可以在第一虚拟复本上，并且与第一虚拟图像点相关的区域分量的第二区域分量可以在第二虚拟复本上。第一和第二虚拟复本可以彼此相邻。计算第一虚拟图像点的第一子全息图的方法可以包括确定第一区域分量内的虚拟图像点的第一子全息图分量和第二区域分量内的虚拟图像点的第二子全息图分量。该方法可以进一步包括叠加第一子全息图分量和第二子全息图分量以形成虚拟图像点的子全息图。

应用局部相位斜坡函数的步骤可以包括基于相应区域分量和/或相关子全息图分量的参数，为第一区域分量和第二区域分量中的至少一个选择相位斜坡函数。该参数可以是或涉及以下中的至少一个：相应区域分量的至少一部分的中心距相应复本的边缘的距离；相应区域分量的尺寸；相应子全息图分量的尺寸；为其选择相位斜坡的区域分量的尺寸与第一或第二区域分量中的另一个的比率，和/或为其选择相位斜坡的子全息图分量的尺寸与第一或第二子全息图分量中的另一个的比率。由子全息图分量形成的点扩散函数的移位量可以取决于子全息图分量/区域分量的相对大小。因此，每个参数可以用作所需的点扩散函数的移位量的代理。

通常，为第一区域分量选择的相位斜坡函数可以具有与为第二区域分量选择的相位斜坡函数相反的极性。在一些示例中，第一区域分量在尺寸和从相应区域的边缘到第二区域分量的距离上不同。这样，为第一区域分量选择的相位斜坡函数可以具有与为第二区域分量选择的相位斜坡函数不同的梯度幅度。换句话说，应用于第一和第二区域分量的相位斜坡函数可以是不对称的。

为第一区域分量和第二区域分量中的至少一个选择相位斜坡函数的步骤可以包括在查找表或数据库中查找相应的子全息图分量的参数。查找表或数据库可以包括数据对或键值对。数据对或键值对可以将参数值与适当的相位斜坡函数相关。查找表或数据库可以包括相位斜坡函数的梯度值。为第一区域分量和第二区域分量中的至少一个选择相位斜坡函数的步骤可以包括将参数输入到查找表或数据库中。然后可以输出局部相位斜坡函数。该方法可以包括为相应的第一区域分量或第二区域分量选择输出局部相位斜坡函数。

该方法可以包括校准由查找表或数据库输出的相位斜坡函数。校准可以包括应用校准因子。校准因子可以考虑光学系统的参数。例如，光学系统的参数可以包括显示设备的尺寸、注入光学系统的波导的光的入射角、入射光的波长和系统中的光路长度。这样，相同的查找表或数据库可以与光学系统的各种不同实施方式结合使用。可替代地，存储在查找表或数据库中的值可能已被校准。

该方法可以包括识别虚拟图像和波导之间的虚拟表面。虚拟表面可以包括显示设备和由波导形成的显示设备的多个虚拟复本。该方法还可以包括识别虚拟表面上的区域。

虚拟表面包括与第二虚拟复本相邻的第一虚拟复本。第一虚拟复本的第一子全息图分量可以与第二虚拟复本的第二子全息图分量相邻。在这样的实施例中，振幅像差可能导致第一子全息图分量在与第二子全息图分量相反的方向上移位。

在实施例中，每个子全息图是点云全息图，通过从对应的虚拟图像点向观察者传播光波并确定到达该区域的对应位置的复合光场来确定，可选地，其中光波是球面光波。如本领域技术人员将理解，可以通过模拟光波的传播来计算执行，以形成波前/复合光场。

在实施方式中，由波导形成的显示设备的每个虚拟复本与显示设备的垂直距离不同，从而形成显示设备的虚拟复本的交错虚拟表面。在示例中，显示设备的每个虚拟复本对应于由波导形成的全息图的相应复本。该方法可以包括通过在波导内展开从显示设备到由波导形成的全息图的相应复本的光路来确定显示设备的每个虚拟复本的位置。显示设备的每个虚拟复本对应于由波导形成的全息图的相应复本。

已经关于这样的方法描述了第一方面的计算虚拟图像点的子全息图的方法：由来自虚拟图像点的直线路径界定的区域包括第一复本上的第一区域分量和第二复本上的第二区域分量且计算第一和第二子全息图分量。然而，第一方面的方法不限于这种布置。该区域可以包括另外复本上的另外区域分量(例如第三复本上的第三区域分量和第四复本上的第四区域分量)。可以计算更多的子全息图分量。例如，可以计算第三区域分量内的第三子全息图分量。可以计算第四区域分量内的第四子全息图分量。形成虚拟图像点的子全息图的步骤可以包括叠加第一子全息图分量、第二子全息图分量和另外的(例如第三和第四)子全息图分量。该方法可以包括将局部相位斜坡函数应用于另外的子全息图分量。

根据第二方面，提供了一种计算全息图的方法。全息图是虚拟图像，并且用于光学系统，其包括布置成显示全息图的显示设备和布置成复制全息图的波导。包括计算虚拟图像的多个虚拟图像点中的每个虚拟图像点的相应子全息图。

根据第一方面中描述的方法计算每个子全息图。例如，通过确定由从虚拟图像点到观察者的入瞳周边的直线路径界定的区域来计算每个子全息图，其中该区域包括显示设备的第一虚拟复本上的第一区域分量和显示设备的第二虚拟复本上的第二区域分量；确定第一区域分量内的虚拟图像点的第一子全息图分量和第二区域分量内的虚拟图像点的第二子全息图分量；叠加第一子全息图分量和第二子全息图分量以形成虚拟图像点的子全息图；以及将局部相位斜坡函数应用于第一区域分量和第二区域分量中的至少一个。如第二方面所定义，关于第一方面的方法描述的任何其他特征可以应用于计算虚拟图像点的相应子全息图的步骤。

该方法可以进一步包括叠加多个虚拟图像点中的每个的相应子全息图，以形成虚拟图像的全息图。

在另一方面，提供了一种计算全息图的方法。该全息图是光学系统的虚拟图像的，该光学系统包括布置成显示全息图的显示设备和布置成复制全息图的波导。该方法包括确定虚拟图像的每个虚拟图像点的子全息图。每个子全息图通过以下确定：从相应的虚拟图像点向观察者传播光波；在虚拟图像和观察者之间的虚拟表面上定义传播光波的交叉区域，其中虚拟表面包括显示设备和由波导形成的显示设备的多个虚拟复本，其中定义的区域由从相应虚拟图像点到观察者眼睛的入瞳周边的直线路径界定；识别复合光场的定义区域的一个或多个子区域，其中每个子区域在对应于显示设备和多个虚拟复本中不同的一个的位置处与虚拟表面相交。复合光场的一个或多个子区域中的每个形成子全息图的相应分量。

在另一方面，提供了一种计算光学系统的虚拟图像点的子全息图的方法，该光学系统包括布置成显示子全息图的显示设备和布置成复制子全息图的波导。该方法包括从相应的虚拟图像点向观察者传播光波。该方法还包括在虚拟图像和观察者之间的虚拟表面上定义传播光波的交叉区域。虚拟表面包括显示设备并且至少包括显示设备的第一虚拟复本和显示设备的第二虚拟复本。每个虚拟复本由波导形成。所定义的区域由从相应的虚拟图像点到观察者眼睛的入瞳周边的直线路径来界定。该方法还包括识别显示设备的第一虚拟复本上的光波的限定区域的至少第一区域分量和显示设备的第二虚拟复本上的光波的限定区域的第二区域分量；其中光波的每个区域分量形成子全息图的相应分量。该方法还包括将局部相位斜坡函数应用于第一区域分量和第二区域分量中的至少一个。

在实施例中，包含显示设备和多个虚拟复本的虚拟表面是“交错的”。特别地，由于与每个复本相关的波导中不同的路径长度，显示设备的每个复本与显示设备的垂直距离不同。因此，与每个复本相关的虚拟表面部分(例如在x,y维度上)在垂直方向上(例如在z维度上)偏离显示设备。

提供了一种计算点云全息图的方法。点云全息图是光学系统的虚拟图像的全息图，该光学系统包括布置成显示全息图的显示设备和布置成复制全息图的波导。该方法包括在对应于显示设备位置的位置形成点云子全息图。该方法还包括在对应于由波导形成的显示设备的相应虚拟复本的每个位置形成点云子全息图。每个点云子全息图仅使用来自虚拟图像的光线形成，该光线可以穿过观察者的入瞳。

在实施例中，该方法包括通过展开波导内从显示设备到全息图复本的相应光路来确定显示设备的每个复本的位置。

这里使用的术语“虚拟图像”是指在显示设备上游形成的图像或全息重建。也就是说，显示设备位于虚拟图像和观察者之间。换句话说，从虚拟图像到观察者的距离大于从显示设备到观察者的距离。光学领域的技术人员将理解，观察者有效地透过显示设备观察虚拟图像。虚拟图像可能在显示设备后面几米处被感知。因此，本领域技术人员将理解，如何可能考虑从虚拟图像通过显示设备或包含显示设备的扩展表面到显示设备另一侧的观察者的光线路径。

与形成在显示设备上的多个全息图中的每个全息图及其复本相关的前缀“子”仅用于与整个虚拟图像的最终/组合全息图相区分，并反映每个是全息图的分量。全息图可以是点云全息图。因此，子全息图和子全息图分量也可以分别是点云子全息图或点云子全息图分量。

如本文所述，波导有效地形成显示设备的复本(本文也称为“虚拟复本”)阵列，其中每个显示设备复本对应于全息图的相应复本。复本显示设备阵列在这里被称为“交错表面”。“表面”不是连续的，因为复本在正交于显示设备表面的方向上例如在z方向上是空间分离的。该表面被称为“交错的”,以反映z方向上不同显示设备复本的这种变化的分离。通常，显示设备复本在不同的x,y平面上，这些平面在z方向上空间偏移(没有任何歪斜)。在使用一个波导进行一维复制的情况下，交错表面可以类似于一系列独立的台阶，其中没有台阶的竖面。在光瞳扩展领域中已知的使用两个正交波导在两个正交方向上复制的情况下，交错表面在两个方向上有效地交错，例如x和y，但在z方向上没有表面分量。术语“虚拟表面”、“交错扩展调制器”和“扩展表面”在本文中也可以用来指由波导形成的显示设备的复本阵列。本公开描述了如何将每个子全息图限制/限定在显示设备的区域内，该区域在空间上对应于由从相应虚拟图像点到观察系统的入瞳周边的直线路径所限定的交错或虚拟表面的区域。交错或虚拟表面的区域有效地定义用于子全息图的显示设备的“贡献区域”。

参考直线外推通过波导的输出端口离开波导的光线(即复本的光线)回到虚拟表面而在波导内没有内反射的过程，描述了在波导内“展开”光路的步骤。通过将复本的所有光线外推回虚拟表面，显示设备的相应虚拟复本的位置或方位被识别。显示设备的每个虚拟复本与观察者的距离不同，因为与每个复本相关的波导内的光路长度不同。

本公开参考组合全息图的过程描述了“叠加”子全息图和子全息图的分量的过程，该过程在显示设备上例如在xy平面上保存位置或空间信息。

这里提到的在各种“位置”确定子全息图或子全息图分量是参照正交于显示设备表面的方向上的位置进行的，该方向在这里也可被称为传播轴或投影轴。如光学领域的技术人员熟知，传播轴通常被定义为z轴。显示设备及其虚拟复本通常都定义在xy平面上。在一些实施例中，通过将光波传播到所描述的“位置”或平面来确定点云全息图。

这里提到将每个子全息图限制到(或在其中定义每个子全息图)由直线定义/界定/描绘的一个或多个区域。每个区域是由虚拟表面的区域定义或对应于虚拟表面的区域的显示设备的区域。例如，如果直线定义单个虚拟复本中间的区域，则子全息图被限制/定义在显示设备的中间区域内。同样，如果直线与两个或更多个虚拟复本相交，则虚拟复本的每个区域(或虚拟表面的描绘区域的“子区域”)有效地定义显示设备的相应区域(或“子区域”)。在一些实施例中，重叠区域被定义在不同的虚拟复本上，并且根据这里公开的进一步改进，这些区域可被不同地对待。

为避免疑问，形成或感知的图像是目标图像的全息重建。全息重建由基于目标图像的全息图形成。在一些实施例中，从目标图像确定(例如计算)全息图。

这里公开的方法识别用于形成主图像的虚拟图像点的贡献光路。贡献光路是来自虚拟图像的光路，其穿过观察者的入瞳，从而有助于成像。因此，该方法不考虑导致主图像的副本/复本或“重影”版本的光路。因此，计算全息图的所有“子全息图”对“主”目标图像有积极的贡献。

在本公开中，术语“复本”仅用于反映空间调制光被分割，使得复合光场沿着多个不同的光路被引导。“复本”一词用于指复制事件后复合光场的每一次出现或实例—比如光瞳扩展器的部分反射-透射。每个复本沿着不同的光路传播。本公开的一些实施例涉及用全息图而不是图像编码的光的传播—即用图像的全息图而不是图像本身进行空间调制的光。全息术领域的技术人员将理解，与用全息图编码的光的传播相关的复合光场将随着传播距离而变化。这里使用的术语“复本”与传播距离无关，因此与复制事件相关的两个光分支或路径仍被称为彼此的“复本”，即使分支具有不同的长度，使得复合光场沿着每条路径不同地演化。也就是说，根据本公开，即使两个复合光场与不同的传播距离相关，它们仍被认为是“复本”—假设它们源自相同的复制事件或一系列复制事件。

根据本公开的“衍射光场”是由衍射形成的光场。可以通过照射相应的衍射图案来形成衍射光场。根据本公开，衍射图案的示例是全息图，衍射光场的示例是全息光场或形成图像的全息重建的光场。全息光场在重放平面上形成图像的(全息)重建。从全息图传播到重放平面的全息光场可以说包括用/通过全息图编码的光或全息域中的光。衍射光场的特征在于由衍射结构的最小特征尺寸和(衍射光场的)光的波长确定的衍射角。根据本公开，也可以说“衍射光场”是在与相应衍射结构空间分离的平面上形成重建的光场。本文公开了一种用于将衍射光场从衍射结构传播到观察者(例如从显示设备到观察系统)的光学系统。衍射光场可以形成图像。

术语“全息图”用于指代包含关于物体的振幅信息或相位信息或其某种组合的记录。术语“全息重建”用于指代通过照射全息图而形成的物体的光学重建。本文中公开的系统被描述为“全息投影仪”，因为全息重建是真实图像并且与全息图在空间上分离。术语“重放场”用于指代在其内形成全息重建并完全聚焦的2D区域。如果将全息图显示在包括像素的空间光调制器上，则重放场将以多个衍射级的形式重复，其中每个衍射级是零级重放场的复本。零级重放场通常对应于优选或主重放场，因为它是最亮重放场。除非另有明确说明，术语“重放场”应被认为是指零级重放场。术语“重放平面”用于指代包含所有重放场的空间中的平面。术语“图像”、“重放图像”和“图像区域”指通过全息重建的光照射的重放场的区域。在一些实施例中，“图像”可包括离散点，其可被称为“图像点”，或仅出于方便起见而被称为“图像像素”。

术语“编码”、“写入”和“寻址”用于描述向SLM的多个像素提供分别确定每个像素的调制水平的相应多个控制值的过程。可以说，SLM的像素配置为响应于接收到多个控制值而“显示”光调制分布。因此，可以说SLM“显示”全息图，并且全息图可被认为是光调制值或水平的阵列。

已经发现，可接受质量的全息重建可以由仅包含与原始物体的傅立叶变换相关的相位信息的“全息图”形成。这样的全息记录可被称为仅相位全息图。实施例涉及仅相位全息图，但本公开同样适用于仅振幅全息术。实施例涉及点云全息图的计算，即使用点云方法构建的全息图。

本公开也同样适用于使用与原始物体的傅立叶变换相关的振幅和相位信息来形成全息重建。在一些实施例中，这是通过使用包含与原始物体有关的振幅和相位信息的所谓全复数全息图的复数调制来实现的。因为分配给全息图的每个像素的值(灰度级)具有振幅和相位分量，所以这种全息图可被称为全复数全息图。分配给每个像素的值(灰度级)可以表示为具有振幅和相位分量的复数。在一些实施例中，计算全复数计算机生成的全息图。

可以参考计算机生成的全息图或空间光调制器的像素的相位值、相位分量、相位信息或者简单地说是相位，作为“相位延迟”的简写。即，所描述的任何相位值实际上是代表该像素提供的相位延迟量的数字(例如在0至2π范围内)。例如，空间光调制器的描述为具有π/2相位值的像素将使接收光的相位延迟π/2弧度。在一些实施例中，空间光调制器的每个像素可在多个可能的调制值(例如相位延迟值)之一中操作。术语“灰度级”可以用来指多个可用的调制水平。例如，术语“灰度级”可以为了方便而用于指代仅相位调制器中的多个可用相位水平，即使不同的相位水平没有提供不同的灰色阴影。为了方便起见，术语“灰度级”也可以用来指复数调制器中的多个可用复数调制水平。

因此，全息图包括灰度级阵列，即光调制值阵列，比如相位延迟值或复数调制值阵列。全息图也被认为是衍射图案，因为它是当在空间光调制器上显示并且用波长相对于(通常小于)空间光调制器的像素间距的光照射时引起衍射的图案。本文中参考将全息图与其他衍射图案比如用作透镜或光栅的衍射图案组合。例如，可以将用作光栅的衍射图案与全息图组合以在重放平面上平移重放场，或者可以将用作透镜的衍射图案与全息图组合以将全息重建聚焦在近场中的重放平面上。

尽管可以在下面的详细描述中分别公开不同的实施例和实施例组，但任何实施例或实施例组的任何特征可以与任何实施例或实施例组的任何其他特征或特征的组合相结合。即，设想了本公开中所公开的特征的所有可能的组合和置换。

附图说明

仅参考以下附图以示例的方式描述特定实施例：

图1是示出在屏幕上产生全息重建的反射型SLM的示意图；

图2示出了包括多个图像区域的图像(底部)和包括多个全息图分量的相应全息图(顶部)；

图3示出了全息图，其中将全息编码光路由或引导到多个离散的全息图通道中；

图4示出了一种系统，该系统布置成通过不同的光路将图3的每个全息图通道的光内容路由到眼睛；

图5示出了布置用于在二维方向上扩展光束的一对堆叠的图像复制器的透视图；

图6示出了包括3D阵列的“扩展调制器”或“虚拟表面”的示例可视化，该3D阵列包括显示设备和由波导形成的显示设备的多个复本；

图7示出了使用扩展调制器计算点云全息图的装置，示出了从将由全息图全息重建的期望虚拟图像的第一和第二示例图像点传播的波的路径；

图8示出了图7装置的第一示例图像点的子全息图的计算；

图9示出了图7装置的第二示例图像点的子全息图的计算；

图10A至10C涉及当用包括单个子全息图分量的子全息图编码光时形成的实际图像点，例如第二示例图像点；

图11A至11C涉及当光用子全息图编码时形成的实际图像点，该子全息图包括在跨越多个复本的区域中形成的多个子全息图分量，例如第一示例图像点；

图12是根据本公开计算图像点的子全息图的方法的流程图；以及

图13示出了在所形成的图像点中的伸长误差的消除。

在所有附图中，相同的附图标记将用于指代相同或相似的部分。

具体实施方式

本发明不限于以下描述的实施例，而是扩展到所附权利要求的全部范围。即，本发明可以不同的形式实施且不应被解释为限于所描述的实施例，实施例出于说明的目的而阐述。

除非另有说明，单数形式的术语可以包括复数形式。

描述为形成在另一结构的上部/下部或者在另一结构之上/之下的结构应被解释为包括结构彼此接触的情况，此外，还包括在它们之间设置第三结构的情况。

在描述时间关系时，例如当事件的时间顺序描述为“之后”、“随后”、“下一个”、“之前”等时，本公开应被认为包括连续和非连续事件，除非另有说明。例如，除非使用诸如“刚好”、“紧邻”或“直接”等措辞，否则描述应被视为包括不连续的情况。

尽管本文可以使用术语“第一”、“第二”等来描述各种元件，但这些元件不受这些术语的限制。这些术语仅用于区分各个元件。例如，在不脱离所附权利要求的范围的情况下，第一元件可被称为第二元件，类似地，第二元件可被称为第一元件。

不同实施例的特征可以部分或整体地彼此耦合或组合，并且可以彼此不同地互操作。一些实施例可以彼此独立地执行，或者可以相互依存的关系一起执行。

光学配置

图1示出了其中计算机生成的全息图被编码在单个空间光调制器上的实施例。计算机生成的全息图是用于重建的物体的傅立叶变换。因此，可以说全息图是物体的傅立叶域或频域或光谱域表示。在该实施例中，空间光调制器是反射型硅上液晶“LCOS”器件。全息图在空间光调制器上编码，并且在重放场例如光接收表面比如屏幕或漫射器处形成全息重建。

光源110例如激光或激光二极管设置成经由准直透镜111照射SLM140。准直透镜使光的大致平面波前入射在SLM上。在图1中，波前的方向是偏离法线的(例如与真正正交于透明层的平面相距两度或三度)。然而，在其他实施例中，大致平面波前以法向入射提供，并且分束器布置用于分离输入和输出光学路径。在图1所示的实施例中，布置使得来自光源的光从SLM的镜面后表面反射并与光调制层相互作用以形成出射波前112。出射波前112被施加到包括傅立叶变换透镜120的光学器件，傅立叶变换透镜120的焦点位于屏幕125处。更具体地，傅立叶变换透镜120接收来自SLM140的调制光束，并执行频率-空间变换以在屏幕125处产生全息重建。

值得注意的是，在这种类型的全息图中，全息图的每个像素都有助于整个重建。重放场上的特定点(或图像像素)与特定的光调制元件(或全息图像素)之间没有一对一的相关性。换句话说，离开光调制层的调制光分布在整个重放场上。

在这些实施例中，全息重建在空间中的位置由傅立叶变换透镜的屈光度(聚焦)确定。在图1所示的实施例中，傅立叶变换透镜是物理透镜。即，傅立叶变换透镜是光学傅立叶变换透镜，并且在光学上执行傅立叶变换。任何透镜都可以充当傅立叶变换透镜，但透镜的性能将限制其执行的傅立叶变换的准确性。技术人员理解如何使用透镜来执行光学傅立叶变换。

全息图计算

在一些实施例中，计算机生成的全息图是傅立叶变换全息图，或者简单地是傅立叶全息图或基于傅立叶的全息图，其中通过利用正透镜的傅立叶变换特性在远场中重建图像。通过将重放平面中的所需光场傅立叶变换回透镜平面来计算傅立叶全息图。可以使用傅立叶变换来计算计算机生成的傅立叶全息图。仅作为示例，实施例涉及傅立叶全息术和Gerchberg-Saxton型算法。本公开同样适用于可以通过类似方法计算的菲涅耳全息术和菲涅耳全息图。在一些实施例中，全息图是相位或纯相位全息图。然而，实施例涉及基于点云方法计算的全息图。2021年8月26日提交的英国专利申请GB2112213.0公开了可以与本公开结合的示例全息图计算方法，该专利申请通过引用结合于此。特别地，该早期专利申请描述了用于计算(特殊)类型全息图的方法，这将在下面参考图2和图3进行描述，其对图像内容进行角度划分/通道化。

在一些实施例中，提供了一种实时引擎，其布置为使用算法接收图像数据并实时计算全息图。在一些实施例中，图像数据是包括图像帧序列的视频。在其他实施例中，全息图被预先计算，存储在计算机存储器中并且根据需要被调出以在SLM上显示。也就是说，在一些实施例中，提供了预定全息图的储存库。

光调制

显示系统包括限定显示系统的出射光瞳的显示设备。显示设备是空间光调制器。空间光调制可以是相位调制器。显示设备可以是本领域公知的硅上液晶“LCOS”空间光调制器。LCOS SLM包括多个像素，例如四边形LC像素阵列。像素可以用包括全息图的衍射图案来寻址或编码。可以说LCOS SLM布置成“显示”全息图。LCOS SLM布置成用光照射，并根据全息图输出空间调制光。LCOS SLM输出的空间调制光包括如本文所述的衍射或全息光场。

光通道

这里公开的光学系统适用于具有任何衍射光场的光瞳扩展。在一些实施例中，衍射光场是全息光场—即，根据图像的全息图而不是图像本身进行空间调制的复合光场。在一些实施例中，全息图是特殊类型的全息图，其成角度地划分/引导图像内容。这种类型的全息图在本文中被进一步描述，仅仅作为与本公开兼容的衍射光场的示例。其他类型的全息图可以与这里公开的显示系统和光引擎结合使用。

下面描述了一种显示系统和方法，其包括波导光瞳扩展器。正如熟练的读者所熟悉的，波导可以配置为“光瞳扩展器”，因为它可以用于增加由相对小的光发射器(比如相对小的SLM或在这里描述的装置中使用的其他像素化显示设备)发射的光可被位于远离光发射器一定距离(比如相对大的距离)的人类观察者或其他观察系统观察到的面积。波导通过增加向观察者输出光的透射点的数量来实现此。结果，可以从多个不同的观察者位置看到光，例如，观察者可以移动他们的头部，从而移动他们的视线，同时仍能够看到来自光发射器的光。因此，可以说，通过使用波导光瞳扩展器，观察者的“眼盒”或“眼动盒”被放大了。这具有许多有用的应用，例如但不限于平视显示器，例如但不限于汽车平视显示器。

这里描述的显示系统可以配置成引导光比如衍射光场通过波导光瞳扩展器，以便在至少一个维度上例如在两个维度上提供光瞳扩展。衍射光场可以包括由空间光调制器(SLM)比如LCOS SLM输出的光。例如，该衍射光场可以包括由SLM显示的全息图编码的光。例如，该衍射光场可以包括全息重建图像的光，对应于由SLM显示的全息图。全息图可以包括计算机生成的全息图(CGH),例如但不限于点云全息图、菲涅耳全息图或傅立叶全息图。全息图可被称为“衍射结构”或“调制图案”。SLM或其他显示设备可以布置成以熟练读者熟悉的方式显示衍射图案(或调制图案)，其包括全息图和一个或多个其他元件，比如软件透镜或衍射光栅。

全息图可被计算以提供衍射光场的引导。这在GB2101666.2、GB2101667.0和GB2112213.0中均有详细描述，所有这些文献在此引入作为参考。一般来说，全息图可被计算成对应于将要全息重建的图像。全息图所对应的该图像可被称为“输入图像”或“目标图像”。可以计算全息图，使得当它显示在SLM上并被适当照射时，它形成包括空间调制光锥的光场(由SLM输出)。在一些实施例中，光锥包括多个空间调制光的连续光通道，其对应于图像的相应连续区域。然而，本公开不限于这种类型的全息图。

尽管我们在这里称之为“全息图”或“计算机生成的全息图(CGH)”，但应当理解，SLM可以配置成连续地或根据序列动态地显示多个不同的全息图。这里描述的系统和方法适用于多个不同全息图的动态显示。

图2和3示出了可以在诸如SLM的显示设备上显示的全息图类型的示例，该显示设备可以与这里公开的光瞳扩展器结合使用。然而，该示例不应被视为对本公开的限制。

图2示出了用于投影的图像252，包括八个图像区域/分量V1到V8。仅作为示例，图2示出了八个图像分量，并且图像252可被分成任意数量的分量。图2还示出了编码光图案254(即全息图),其可以重建图像252—例如，当被合适的观察系统的透镜转换时。编码光图案454包括第一至第八子全息图或分量H1至H8，对应于第一至第八图像分量/区域V1至V8。图2进一步显示了全息图如何通过角度分解图像内容。因此，全息图的特征在于它对光的引导。这在图3中示出。具体而言，本示例中的全息图将光导入多个离散区域。在所示的示例中，离散区域是盘，但也可以设想其他形状。在通过波导传播之后，最佳盘的尺寸和形状可以与观察系统的入射光瞳的尺寸和形状相关。

图4示出了系统400，包括显示如图2和3所示计算的全息图的显示设备。

系统400包括显示设备，该显示设备在该布置中包括LCOS 402。LCOS 402布置成显示包括全息图的调制图案(或“衍射图案”)，并将已经全息编码的光投射到眼睛405，眼睛405包括充当孔径404的瞳孔、晶状体409和充当观察平面的视网膜(未示出)。具有布置成照射LCOS 402的光源(未示出)。眼睛405的晶状体409执行全息图到图像的转换。光源可以是任何合适的类型。例如，它可以包括激光源。

观察系统400还包括位于LCOS 402和眼睛405之间的波导408。波导408的存在使得来自LCOS 402的所有角度内容能够被眼睛接收，即使在所示的相对大的投影距离下。这是因为波导408以众所周知的方式充当光瞳扩展器，因此在此仅简要描述。

简而言之，图4所示的波导408包括基本细长的结构。在该示例中，波导408包括折射材料的光学板，但其他类型的波导也是众所周知的并且可被使用。波导408定位成与从LCOS 402投射的光锥(即衍射光场)相交，例如以斜角相交。在该示例中，波导408的尺寸、位置和定位配置成确保来自光锥内的八个光束中的每个的光进入波导408。来自光锥的光经由波导408的第一平面表面(位置最靠近LCOS 402)进入波导408，并且在经由波导408的与第一表面基本相对的第二平面表面(位置最靠近眼睛)发射之前，至少部分地沿着波导408的长度被引导。很容易理解，第二平面表面是部分反射、部分透射的。换句话说，当每条光线从第一平面表面在波导408内传播并撞击第二平面表面时，一些光将透射出波导408，一些光将被第二平面表面反射回第一平面表面。第一平面表面是反射性的，使得从波导408内撞击它的所有光将被反射回第二平面表面。因此，一些光在被透射之前可以简单地在波导408的两个平面表面之间折射，而其他光可以被反射，因此在被透射之前可以在波导408的平面表面之间经历一次或多次反射(或“反弹”)。

图4示出了沿着波导408长度的总共九个“反弹”点B0到B8。尽管如图2所示，与图像(V1-V8)所有点相关的光在从波导408的第二平面表面的每次“反弹”时被透射出波导，但只有来自图像的一个角度部分的光(例如V1到V8之一的光)具有使其能够从每个相应的“反弹”点B0到B8到达眼睛405的轨迹。此外，来自图像的不同角度部分(V1到V8)的光从每个相应的“反弹”点到达眼睛405。因此，在图4的示例中，编码光的每个角度通道仅从波导408到达眼睛一次。

上述方法和装置可以在各种不同的应用和观察系统中实现。例如，它们可以在平视显示器(HUD)中或者在诸如增强现实(AR)HMD的头部或头盔安装设备(HMD)中实现。

尽管这里已经一般性地讨论了虚像，虚像需要眼睛转换接收的调制光以形成感知图像，但这里描述的方法和装置可以应用于实像。

二维光瞳扩展

虽然图5所示的布置包括在一个维度上提供光瞳扩展的单个波导，但光瞳扩展可以在不止一个维度上提供，例如在两个维度上。此外，虽然图4中的示例使用了已被计算以创建光通道的全息图，每个光通道对应于图像的不同部分，但本公开和下面描述的系统不限于这种全息图类型。

图5示出了系统500的透视图，该系统包括两个复制器504、506，布置用于在二维上扩展光束502。

在图5的系统500中，第一复制器504包括彼此平行堆叠的第一对表面，其布置成以类似于图4的波导408的方式提供复制或者光瞳扩展。第一对表面的尺寸和形状彼此相似(在某些情况下相同),并且在一个方向上基本是细长的。光束502被导向第一复制器504上的输入。由于两个表面之间的内部反射过程，以及来自其中一个表面(上表面，如图5所示)上的多个输出点中的每个的光的部分透射，这对于熟练的读者来说是熟悉的，光束502的光沿着第一复制器504的长度在第一方向上被复制。因此，第一多个复本光束508从第一复制器504朝向第二复制器506发射。

第二复制器506包括彼此平行堆叠的第二对表面，布置成接收第一多个光束508的每个准直光束，并且进一步布置成通过在基本正交于第一方向的第二方向上扩展这些光束中的每个来提供复制或者光瞳扩展。第一对表面的尺寸和形状彼此相似(在某些情况下相同),并且基本为矩形。为第二复制器实现矩形形状，以使其具有沿着第一方向的长度，以便接收第一多个光束508，并且具有沿着第二正交方向的长度，以便在该第二方向上提供复制。由于两个表面之间的内部反射过程，以及来自其中一个表面(如图5所示的上表面)上的多个输出点中的每个的光的部分透射，第一多个光束508内的每个光束的光在第二方向上被复制。因此，第二多个光束510从第二复制器506发射，其中第二多个光束510包括输入光束502沿着第一方向和第二方向中的每个的复本。因此，第二多个光束510可被视为包括复本光束的二维网格或阵列。

因此，可以说图5的第一和第二复制器504、505组合以提供二维复制器(或“二维光瞳扩展器”)。

由一个或多个波导形成的显示设备的虚拟复本

图6示出了包括3D阵列的“扩展调制器”或“虚拟表面”的示例可视化，该3D阵列包括形成在显示设备上的全息图和由波导形成的全息图的多个复本。

如上参考图4所述，一维波导408可以布置成扩展显示系统的出射光瞳。显示系统包括显示全息图的显示设备402，该全息图在波导408的“反弹”点B0输出。此外，波导在沿其长度的相应“反弹”点B1至B8处形成全息图的多个复本，对应于光瞳扩展的方向。如图4所示，多个复本可以直线外推回相应的多个复本或虚拟显示设备402’。该过程对应于在波导内“展开”光路的步骤，使得复本的光线被外推回“虚拟表面”，而在波导内没有内反射。因此，扩展出射光瞳的光可被认为源自包括显示设备402和复制显示设备402’的虚拟表面(这里也称为“扩展调制器”)。

所提出的计算全息图的方法定义所谓的“扩展调制器”，其中显示设备(例如LCOSSLM)被其虚拟复本阵列“扩展”，该阵列将由一个或多个波导光瞳扩展器形成，以形成“扩展调制器”或“虚拟表面”(例如如图4所示)。例如，显示设备(例如LCOS SLM)可以位于图6所示的扩展调制器的位置(0,0),并且由两个一维光瞳扩展器形成的(虚拟)复本(即复本显示设备)位于在光瞳扩展的第一方向上延伸到(0,2)和在光瞳扩展的第二方向上延伸到(4,0)的位置。光路的方向由箭头601示出，其垂直于光瞳扩展的第一和第二方向。

因此，扩展调制器被定义为包括：(i)由角度(在空间中)和对应的光瞳扩展方向定义的在第一波导光瞳扩展器(例如细长波导)中产生的复本之间的第一偏移，(ii)由角度(在空间中)和对应的光瞳扩展方向定义的在第二波导光瞳扩展器(例如平面波导)中产生的复本之间的第二偏移；(iii)第一偏移和第二偏移的方向之间的任何偏斜—产生图6中的大致平行四边形形状，以及(iv)显示设备复本和眼睛位置之间的光路长度(差)—在图6所示的方向601上。

图7示出了根据本发明使用扩展调制器(例如图6所示的扩展调制器)计算点云全息图的装置。

该装置包括在空间中期望的虚拟图像位置处的虚拟图像700，以及包括眼睛720的观察系统，眼睛720具有形成观察系统的入射孔径730的瞳孔。该装置示出了眼睛720在眼盒内的一个位置。因此，点云全息图与特定的眼盒位置相关。此外，该装置包括位于虚拟图像700和眼睛720之间的扩展调制器(或虚拟表面)710。本领域技术人员将理解，在图7中，光路在波导内被有效地“展开”。

根据本领域公知的用于计算点全息图的传统技术，球面波(或“小波”)沿着从每个虚拟图像点到显示设备平面的路径传播。基于(例如通过组合/叠加)由小波形成的复合光图案(即具有振幅和相位分布的复合光场)来确定点云全息图，所述小波从每个虚拟图像点在其与显示设备平面的相应相交区域传播。可以说，与每个虚拟图像点相关的小波的复合光图案是在与显示设备平面相交的相应区域被“捕获”的。

然而，根据本公开，基于(例如通过组合/叠加)由小波形成的复合光图案(即振幅和/或相位分布)来确定点云全息图，该小波从每个虚拟图像点在其与扩展调制器或虚拟表面的相应相交区域传播。此外，仅考虑从虚拟图像点传播的到达观察者眼睛的小波部分。

图7示出了虚拟图像700的第一和第二示例虚拟图像点701、702，它们位于离观察者的眼睛720的期望距离处。如虚线所示，(扩展的)球面波或小波从每个示例虚拟图像点701、702通过扩展调制器710传播到观察者眼睛720的入射孔径730。第一对直线711从第一虚拟图像点701延伸到入口孔径730的相对极端位置(即图中的左手侧和右手侧)，表示相关小波(的相关部分)的边缘/周界。类似地，第二对直线721从第二虚拟图像点702延伸到入口孔径730的相对极端位置/边缘(即图中的左手侧和右手侧),表示相关小波(的相关部分)的边缘/周界。第一和第二对直线711、721分别具有与扩展调制器710(或虚拟表面)相交的区域800、900。因此，根据本公开，第一和第二对直线711、721分别与第一和第二虚拟图像点701、702相关地“描绘”(即形成其周围的边界)期望的小波(的一部分)，该第一和第二虚拟图像点701、702可以在特定眼盒位置穿过观察者的眼睛720的入射孔径730(即瞳孔)。在下面的描述中，对从虚拟图像点传播的“小波”的引用涉及传播波的由直线描绘的部分，如上所述。

由于扩展调制器是“交错的”，如本文所述，从每个虚拟图像点传播的小波的交叉区域处于不同的垂直距离(到显示设备的平面)—或者在传播方向上的不同距离。特别地，从不同虚拟图像点传播的小波穿过扩展调制器710的(显示设备的)不同“复本”。一些小波—例如与虚拟图像点701相关的小波—可以与多个复本相交，而其他小波—例如与虚拟图像点702相关的小波—仅与单个复本相交，如下面进一步描述。例如，图7示出了与第一小波的扩展调制器710相交的第一区域800，由第一对线711描绘/界定，从第一虚拟图像点701传播到眼睛720。类似地，图7示出了与第二小波的扩展调制器710相交的第二区域900，由第二对线721描绘/界定，从第二虚拟图像点702传播到眼睛720。下面参照图8和9描述这些交叉区域。

图8更详细地示出了与第一小波的扩展调制器710相交的第一区域800，由第一对线711描绘，从第一虚拟图像点701传播。特别地，第一小波在包括扩展调制器710的两个相邻虚拟复本的区域中相交—这些虚拟复本在图7中示出为水平线，在图8中示出为竖直线。如上所述，扩展调制器的不同虚拟复本位于不同垂直距离的不同平面中。因此，与扩展调制器的每个虚拟复本相交的区域处的复合光图案被单独确定。这是必要的，因为与两个相邻虚拟复本相交的小波部分将从虚拟图像点791传播不同的距离，因此在到达扩展调制器时具有不同的复合光图案或波前。

下文中提到的“复合光图案”是指表示从每个虚拟图像点到达扩展调制器的光场的振幅和相位值对的空间分布。换句话说,“复合光图案”对应于小波在其与扩展调制器相交的一个或多个点处的波前。在实施例中，“复合光图案”是振幅和相位值对的阵列。在一些实施例中，显示设备是相位调制器，在这种情况下，振幅值可能最终被忽略或丢弃。“复合光图案”也可以称为“复合光场”。

因此，图8示出了由小波在与扩展调制器710的第一虚拟复本(在图的顶部示出)的相交处形成的第一复合光图案810’。第一复合光图案810’被“捕获”在第一虚拟复本的平面上，并形成与第一虚拟图像点701相关的第一子全息图分量810。此外，图8示出了由小波在与扩展调制器710的第二虚拟复本(在图的底部示出)的相交处形成的第二复合光图案811’。第二复合光图案811’被“捕获”在第二虚拟复本的平面上，并形成与第一虚拟图像点701相关的第二子全息图分量811。值得注意的是，扩展调制器710的第一和第二虚拟复本中的每个的相交区域被示为圆形或椭圆形(的一部分)。这对应于“主要贡献区域”，因为它对应于穿过观察系统入瞳的光线。在某些情况下，这确保观察系统形成主图像(而不是“重影图像”)。在一些实施例中，主贡献区域的形状对应于观察系统的入瞳的形状(例如具有相同的总体形状，但不一定具有相同的尺寸)。因为由小波形成的复合光图案810’、811’位于相应虚拟复本的边缘，所以主要贡献区域位于虚拟图像点701的子全息图820的顶部和底部边缘。

图8示出了第一子全息图分量810和第二子全息图分量811被组合，特别是叠加，以形成与第一虚拟图像点701相关的子全息图820。特别地，在叠加步骤中保留了与每个复合光图案810’、811’相关的空间信息(在显示设备上)。也就是说，第一复合光图案810’形成在对应于显示设备的下部区域的位置，因此出现在该虚拟图像点701的最终子全息图820的相应下部区域。同样，第二复合光图案811’形成在对应于显示设备的上部区域的位置，因此出现在该虚拟图像点701的最终子全息图820的相应上部区域。

图9更详细地示出了与第二小波的扩展调制器710的相交区域900，由第二对线721描绘，从第二虚拟图像点702传播。具体而言，小波在扩展调制器710的单个虚拟复本的区域中相交—该虚拟复本在图7中示出为水平线，在图9中示出为竖直线。因此，在扩展调制器710的虚拟复本的(单个)平面处的交叉区域处的复合光图案920’被捕获，并形成与第二虚拟图像点702相关的子全息图920。再次，扩展调制器710的虚拟复本处的相交区域被示为圆形或椭圆形。这对应于第二虚拟图像点702的“主要贡献区域”。因为由小波形成的复合光图案位于虚拟复本的中心，所以对于该虚拟图像点702，主要贡献区域位于子全息图920的中心。

通过组合/叠加(例如通过向量相加)与虚拟图像700的每个虚拟图像点例如701、702相关的子全息图例如820、920，为整个虚拟图像700确定点云全息图。

如上所述，由于计算点云全息图的改进方法使用了扩展调制器，所以它自动考虑了以下差异：(i)第一维度上的复本之间的第一偏移，(ii)第二维度上的复本之间的第二偏移，以及(iii)由一个或多个波导光瞳扩展器生成的复本之间的任何偏斜，以及(iv)复本之间到眼睛位置的光路长度差异。

此外，计算点云全息图的改进方法仅考虑来自虚拟图像的小波/光线，这些小波/光线可以在相关眼睛位置穿过观察者眼睛的入瞳。因此，只考虑对“主图像”(而非重影图像)有贡献的光线，即小波与扩展调制器相交处的主要贡献区域。结果，如上所述，改进的方法自动避免不希望的“重影”的形成。此外，由于该方法仅传播来自虚拟图像的小波/光线，该小波/光线可以在相关眼睛位置穿过观察者眼睛的入瞳，因此计算复杂度降低。这样降低了计算点云全息图的速度，也降低了计算资源的消耗。

伸长虚拟图像点的校正

至此，已经描述了一种用于计算包括波导的光学系统的虚拟图像点的全息图的方法。在测试了由根据该方法计算的全息图形成的图像的质量和清晰度之后，发明人意外地发现，即使在考虑了复本之间的偏移和歪斜之后，当用计算的全息图对光进行编码时，实际形成的图像点看起来相对于计算子全息图所基于的原始虚拟图像点是伸长的。这是由包括不止一个子全息图分量的子全息图形成的图像点的情况，并且具有跨越多个复本的交点。伸长的图像点对根据上述方法计算的全息图形成的图像的质量和清晰度有不利影响。关于图10A至10C和11A至11C更详细地描述了实际图像点的伸长。

图10A至10C涉及当用包括子全息图分量920(如上所述)的子全息图编码光时形成的实际图像点1002。当来自显示子全息图920的显示设备的光用全息图编码并通过波导时，产生全息图的多个复本，即形成类似于图6和7所示的“扩展调制器”。形成图像点1002的相应复合光场1006落在显示设备的单个复本1004内。换句话说，图10A至10C示出了对应于图7的虚拟图像点702的实际图像点1002。图10A示出了单个复本1004内的复合光场1006。图10B示出了与复合光场1006相关的点扩散函数的主瓣1008。图10C示出了由点扩散函数1008产生的实际图像点1002。包括单个主瓣1008的单个点扩散函数对实际图像点1002有贡献。实际图像点1002看起来是圆形的(即没有伸长),因此具有与也是圆形的虚拟图像点702相同的形状。

图11A至11C涉及当用包括第一和第二子全息图分量810、811(如上所述)的子全息图820对光进行编码时形成的实际图像点1102。实际图像点1102包括第一和第二复合光场1106、1107。这些第一和第二复合光场1106、1107形成在各自相邻的第一和第二虚拟复本1104、1105内。图11A示出了第一复本1104内的复合光场1106和第二复本1105内的复合光场1107。尽管在图11A中仅示出了两个复本，但在一些示例中，扩展调制器包括两个以上的复本，如上所述，这些复本可以形成一维或二维阵列，并且复合光场可以与两个以上的复本相交。图11A中仅示出了包括第一和第二复合光场1106、1107的图11A的第一和第二复本1104、1105的部分。图11A到11C表示发明人观察到的实际图像点1102，它对应于图7的虚拟图像点701。重建图像点1102是伸长的，而虚拟图像点702是圆形的。

图11B示出了对应于复合光场1106的第一点扩散函数(实线)的主瓣1108和对应于复合光场1107的第二点扩散函数(虚线)的主瓣1109。第一和第二点扩散函数的主瓣1108、1109部分重叠，但峰值在空间上是分开的。换句话说，两个主瓣1108、1109不是共定位的，并且结果是形成重建图像点1102的组合复合光场包括两个非共定位的点扩散函数。这不同于图10B的单瓣1008，图10B包括具有单个峰值/主瓣1008的单点扩散函数。图11C示出了从图11B的两个点扩散函数得到的实际图像点1102。因为两个主瓣1108、1109在空间上不共定位，所以所得的实际图像点1102具有伸长的圆形形状(即椭圆形)。实际图像点的伸长具有降低所形成的包括实际图像点1102的整个图像的质量和清晰度的效果。

发明人惊讶地发现，重建图像点1102具有相对于用于子全息图计算的虚拟图像点伸长的形状。因为关于图6至9描述的方法考虑了复本之间的偏移、复本的偏斜和复本的光路长度差，所以预期图11A的组合复合光场1106、1107将等效于和等同于图10A的单个复合光场1006。预期(有效地)将产生具有单个主瓣的单点扩散函数。但发明人的模拟和实验表明情况并非如此(例如图11B和11C)。发明人发现主瓣1108、1109的空间分离是由形成扩展调制器/虚拟表面的复本之间的边界处的衍射型效应引起的。这种衍射导致主瓣1108、1109的位移/移位。特别地，第一点扩散函数的主瓣1108在负x方向上移位，第二点扩散函数的主瓣1109在正x方向上移位。发明人已经发现，通过将适当的局部相位斜坡函数应用于第一区域分量和第二区域分量中的至少一个，可以补偿第一和第二点扩散函数的移位，使得主瓣1108、1109对准。对准主瓣1108、1109意味着主瓣1108、1109变得共定位，使得组合的第一和第二点扩散函数类似于图10B的点扩散函数。换句话说，由组合的主瓣1108、1109形成的实际图像点基本是圆形的，而不是伸长的，因此具有与全息图计算形成的相关虚拟图像点相同的形状。这不利地影响了形成的全息图/图像的质量。此外，这降低了显示器的分辨率，因为每单位面积可以显示更少的像素，这是不期望的。

图12示出了表示根据本发明计算虚拟图像点(例如虚拟图像点701)的子全息图的方法的流程图，其中虚拟图像点的伸长基本被消除。

该方法的步骤1202包括确定由从虚拟图像点到观察者的入瞳周边的直线路径界定的区域，其中该区域包括显示设备的第一虚拟复本上的第一区域分量和显示设备的第二虚拟复本上的第二区域分量。在图11的第一区域分量的情况下，该方法的步骤1204包括确定第一区域分量内的虚拟图像点的第一子全息图分量和第二区域分量内的虚拟图像点的第二子全息图分量。该方法的步骤1206包括叠加第一子全息图分量和第二子全息图分量以形成虚拟图像点的子全息图。步骤1202至1206对应于上述关于虚拟图像点701的方法(见图7和8)。

该方法的步骤1208包括将第一局部相位斜坡函数应用于第一区域分量，并将第二局部相位斜坡函数应用于第二区域分量。每个相位斜坡函数可被称为光栅函数。应用第一局部相位斜坡的步骤包括将第一局部相位斜坡函数与所计算的第一子全息图分量叠加(例如相加)。应用第二局部相位斜坡的步骤包括将第二局部相位斜坡函数与所计算的第二子全息图分量叠加(例如相加)。

通过将局部相位斜坡函数叠加到子全息图分量上，用相应的子全息图分量(和相位斜坡函数)编码的光可以在与由复本之间的边界处的衍射引起的位移相反的方向上被转向。通过在不同的局部区域中应用不同的相位斜坡函数(具体地说，在不同的子全息图分量上)，用不同的子全息图分量编码的光可以在不同的方向是转向。知道/估计由衍射效应引起的光的位移允许选择适当的局部相位斜坡函数来对准/共定位从不同的子全息图分量发射的点扩散函数。因此，使用这里描述的至少一个局部相位斜坡函数的转向可以有利地用于基本消除伸长效应。

现在将在图8所示的子全息图和图11B所示的点扩散函数的情况下描述步骤1208。

之前，描述了在第一复本的平面处捕获的第一复合光图案810’如何形成第一子全息图分量810。当执行该方法的步骤1208时，形成第一子全息图分量810还包括将第一局部相位斜坡函数与第一复合光图案810’叠加。选择第一局部相位斜坡函数，以便使用第一子全息图分量编码的光转向，使得第一点扩散函数的主瓣1108在例如正x方向上移位。主瓣1108的这种移动被设计成逆转在复本之间的界面处发生的负x方向上的位移。类似地，形成第二子全息图部件811还包括将第二局部相位斜坡函数与第二复合光图案811’叠加。选择第二局部相位斜坡函数，以便使用第二子全息图分量编码的光转向，使得第二点扩散函数的主瓣1109在负x方向上移位。主瓣1109的这种移动被设计成反转在复制边界处引起的正x方向上的位移。第一和第二局部相位斜坡函数的组合使得主瓣1108、1109对准。结果是图11B的第一和第二点扩散函数被转向成类似于图10B的单点扩散函数，使得由移位的主瓣1108、1109产生的实际图像点不被伸长，并且更好地表示为其计算子全息图的虚拟图像点(即是球形的)。

图13表示应用该方法的步骤1208的效果。图像点1302是没有应用该方法的步骤1208的实际图像点，因此被伸长。图像1304是应用了该方法的步骤1208的实际图像点，因此没有被伸长，并且准确地表示全息图计算要表示的(圆形)虚拟图像点。

在一些实施例中，基于相应复本上的相应区域分量的参数来选择第一和第二局部相位斜坡函数。在一些实施例中，该参数包括以下中的至少一个：相应区域分量的至少一部分的中心距相应复本的边缘的距离；相应区域分量的尺寸；相应子全息图分量的尺寸；为其选择相位斜坡的区域分量的尺寸与第一或第二区域分量中的另一个的比率，和/或为其选择相位斜坡的子全息图分量的尺寸与第一或第二子全息图分量中的另一个的比率。本领域技术人员将理解如何通过包括简单试错法在内的多种不同方法来确定局部相位斜坡函数的参数(例如梯度、形状和/或尺寸)。因此，本公开在任何方面都不限于相位斜坡函数的参数或确定该参数的方法。由子全息图分量形成的点扩散函数的移位量取决于子全息图分量/区域分量的相对大小。因此，每个参数都可以用作所需的点扩散函数的移位量的代理。

在图11所示的示例中，第一区域分量和第二区域分量(以及第一和第二复合光场1106和1107)的尺寸相等。因此，上述每个参数对于第一和第二区域分量都是相等的。以这种方式，主瓣1108、1009中相等但相反的移位导致瓣被共定位。在该示例中，第一和第二局部相位斜坡函数可被描述为对称的。在其他示例中，第一区域分量可以在尺寸和从相应区域的边缘到第二区域分量的距离上不同。这样，为第一区域分量选择的相位斜坡函数将在幅度上不同于为第二区域分量选择的相位斜坡函数。换句话说，应用于第一和第二区域分量的相位斜坡函数可以描述为不对称的。

在一些示例中，为第一区域分量和第二区域分量中的至少一个选择相位斜坡函数的步骤包括在查找表或数据库中查找相应的子全息图分量的参数。查找表或数据库包括数据对或键值对。数据对或键值对将参数值与适当的相位斜坡函数相关。查找表或数据库包括相位斜坡函数的梯度值。为第一区域分量和第二区域分量选择相位斜坡函数的步骤包括将参数输入到查找表或数据库中。然后输出局部相位斜坡函数。这在每次计算子全息图分量时应用。

附加特征

在实施例中，全息重建是彩色的。在一些实施例中，被称为空间分离彩色“SSC”的方法用于提供彩色全息重建。在其他实施例中，使用了被称为帧顺序彩色“FSC”的方法。

示例描述了用可见光照射SLM，但本领域技术人员将理解，光源和SLM同样可以用于引导红外光或紫外光，例如，如本文所公开的。例如，为了向用户提供信息，本领域技术人员将知道用于将红外和紫外光转换成可见光的技术。例如，本公开延伸到为此目的使用磷光体和/或量子点技术。

一些布置仅以举例的方式描述了2D全息重建。在其他布置中，全息重建是3D全息重建。也就是说，在一些布置中，每个计算机生成的全息图形成3D全息重建。

本文描述的方法和过程可以体现在计算机可读介质上。术语“计算机可读介质”包括布置为临时或永久地存储数据的介质，比如随机存取存储器(RAM)、只读存储器(ROM)、缓冲存储器、闪存和高速缓冲存储器。术语“计算机可读介质”也应被认为包括能够存储用于由机器执行的指令的任何介质或多种介质的组合，使得当指令被一个或多个处理器执行时使该机器整体地或部分地执行本文所述的任何一种或多种方法。

术语“计算机可读介质”还涵盖基于云的存储系统。术语“计算机可读介质”包括但不限于以固态存储芯片、光盘、磁盘或其任何合适的组合的示例形式的一个或多个有形和非暂时性数据存储库(例如数据卷)。在一些示例实施例中，用于执行的指令可以由载体介质传递。这样的载体介质的示例包括瞬态介质(例如传递指令的传播信号)。

对于本领域技术人员将显而易见的是，在不脱离所附权利要求的范围的情况下，可以进行各种修改和变型。本公开涵盖所附权利要求及其等同物的范围内的所有修改和变型。

Claims (18)

1.一种计算光学系统的虚拟图像点的子全息图的方法，该光学系统包括布置成显示子全息图的显示设备和布置成复制子全息图的波导，其中该方法包括：

确定由从虚拟图像点到观察者的入瞳周边的直线路径界定的区域，其中该区域包括显示设备的第一虚拟复本上的第一区域分量和显示设备的第二虚拟复本上的第二区域分量；

确定第一区域分量内的虚拟图像点的第一子全息图分量和第二区域分量内的虚拟图像点的第二子全息图分量；

叠加第一子全息图分量和第二子全息图分量以形成虚拟图像点的子全息图，其中该方法还包括：

将局部相位斜坡函数应用于第一区域分量和第二区域分量中的至少一个。

2.如权利要求1所述的方法，其中，与所述局部相位斜坡函数相关的位移对准由被照射时的相应子全息图分量形成的点扩散函数。

3.如权利要求1或2所述的方法，包括将第一局部相位斜坡函数应用于所述第一区域分量，并将第二局部相位斜坡函数应用于所述第二区域分量。

4.如权利要求3所述的方法，其中，所述第一局部相位斜坡函数和第二局部相位斜坡函数是不同的。

5.如权利要求3或4所述的方法，其中，对应于所述第一局部相位斜坡函数的第一方向与对应于所述第二局部相位斜坡函数的第二方向相反。

6.如前述权利要求中任一项所述的方法，其中，应用局部相位斜坡函数的步骤包括基于相应区域分量和/或相关子全息图分量的参数选择相位斜坡函数。

7.如权利要求6所述的方法，其中，所述参数是选自以下中的至少一个：相应区域分量的至少一部分的中心距相应复本的边缘的距离；相应区域分量的尺寸；相应子全息图分量的尺寸；为其选择相位斜坡的区域分量的尺寸与所述第一或第二区域分量中的另一个的比率；和/或为其选择相位斜坡的子全息图分量的尺寸与所述第一或第二子全息图分量中的另一个的比率。

8.如权利要求6或7所述的方法，其中，应用局部相位斜坡函数的步骤包括在查找表或数据库中查找相应子全息图分量的参数，所述查找表或数据库包括将参数值与不同相位斜坡函数相关的数据对或键值对。

9.如前述权利要求中任一项所述的方法，进一步包括：

识别所述虚拟图像和波导之间的虚拟表面，其中虚拟表面包括所述显示设备和由波导形成的显示设备的多个虚拟复本；以及

识别虚拟表面上的区域。

10.如权利要求9所述的方法，其中，所述虚拟表面包括与第二虚拟复本相邻的第一虚拟复本。

11.如权利要求10所述的方法，其中，所述第一虚拟复本的第一子全息图分量与所述第二虚拟复本的第二子全息图分量相邻。

12.如任一前述权利要求所述的方法，其中，每个子全息图是通过从相应的虚拟图像点向观察者传播光波并确定到达区域的相应位置的复合光场来确定的点云全息图，可选地，其中光波是球面光波。

13.如任一前述权利要求所述的方法，其中，由所述波导形成的显示设备的每个虚拟复本距显示设备的垂直距离不同，从而形成显示设备的虚拟复本的交错虚拟表面。

14.如任一前述权利要求所述的方法，其中，所述显示设备的每个虚拟复本对应于由所述波导形成的全息图的相应复本。

15.如权利要求8或9所述的方法，还包括通过在所述波导内展开从显示设备到由波导形成的全息图的相应复本的光路来确定显示设备的每个虚拟复本的位置。

16.一种计算光学系统的虚拟图像的全息图的方法，该光学系统包括布置成显示子全息图的显示设备和布置成复制子全息图的波导，该方法包括计算虚拟图像的多个虚拟图像点中的每个虚拟图像点的相应子全息图，其中每个子全息图根据前述权利要求中任一项所述的方法计算。

17.如权利要求16所述的方法，还包括叠加相应子全息图以形成所述虚拟图像的全息图。

18.一种计算光学系统的虚拟图像点的子全息图的方法，该光学系统包括布置成显示子全息图的显示设备和布置成复制子全息图的波导，其中该方法包括：

从相应虚拟图像点向观察者传播光波；

在虚拟图像和观察者之间的虚拟表面处限定传播光波的相交区域，其中虚拟表面包括显示设备并且至少包括显示设备的第一虚拟复本和显示设备的第二虚拟复本，每个虚拟复本由波导形成，其中限定区域由从相应虚拟图像点到观察者眼睛的入瞳周边的直线路径界定；

至少识别显示设备的第一虚拟复本上的光波的限定区域的第一区域分量和显示设备的第二虚拟复本上的光波的限定区域的第二区域分量；其中光波的每个区域分量形成子全息图的相应分量；以及

将局部相位斜坡函数应用于第一区域分量和第二区域分量中的至少一个。