CN101884222A - 用于支持立体呈现的图像处理 - Google Patents

Abstract

将图像处理共同应用于第一图像的图像数据以及第二图像的图像数据。此外，将第一图像的图像数据与第二图像的图像数据进行比较，以此为基础，匹配用于立体呈现的图像的视觉外观。该视觉外观可以通过相应地调整至少一个图像而在当前图像对中得到匹配，和/或通过调整提供图像数据的至少一个图像捕获组件的参数而在未来图像对中得到匹配。

Description

用于支持立体呈现的图像处理

技术领域

本发明涉及立体呈现，并且更具体地涉及支持立体呈现的图像数据的处理。

背景技术

立体显示器允许呈现由用户感知为三维(3D)图像的图像。为此，立体显示器在不同的方向上引导来自图像的特定子像素的信息，从而使得查看者可以用每只眼睛看到不同的图片。如果图片足够类似，则人脑会假设查看者正在观看单个物体，并且将两个图片上的匹配点融合在一起以创建感知到的单个物体。人脑会根据左眼和右眼输入来匹配相似的邻近点。在这些点的位置上的小的水平差可以被表示为差异，从而允许眼睛会聚于该点，并且相对于在眼睛之间感知到的差异，构建场景中每个物体的深度的感知。这使得大脑能够将图片融合成单个感知到的3D物体。

例如，可以通过拍摄多个二维图像并且通过将图像的像素组合成用于在立体显示器上呈现的单个图像的子像素来获得用于3D图像的数据。

在一种备选方案中，布置在彼此相对小的预先指定的距离处的两个照相机拍摄用于3D呈现的二维图像。

如从常规二维(2D)图像处理得知的，每个照相机通常包括向所捕获的图像应用图像处理的图像链(image chain)。

利用图像边缘裁切的欧几里德图像偏移(image shift)被应用于经处理的图像，以便将零位移平面(zero displacement plane)或零差异平面(ZDP)移动到位于虚拟场景的中间，从而聚合图像。然后通过交织来组合图像以形成3D呈现。

在ZDP的上下文中，差异是在左边图像上所表示的点和在右边图像上所表示的点之间的差的水平线性测量。对于该差异存在不同的测量，例如，眼睛的弧分(arc-min)、屈光度限制、显示器的最大差异、物体所处显示器之外的距离，等等。这些测量都在几何上彼此相关，但是，对于特定的观察几何结构(viewing geometry)来说，利用一个测量如此确定该差异也为任何其它测量定义了差异。当用平行的照相机来拍摄两个图片时，对于在无穷远处的物体，照相机取得图片之间的零角度差异，而对于近处物体，照相机取得图片之间的最大角度差异，也就是，最大数目的像素差异，这取决于物体的接近度和照相机间隔以及其它因素，像照相机分辨率、视场(FOV)、变焦和镜头特性。因此，由两个平行照相机拍摄的两个输入图像之间的水平差异的范围从零到最大差异。在显示器侧，存在特定的观察几何结构，其定义了例如所允许的屈光度失配，这与最大会聚角有关并且因而与该场景上的最大差异有关。

图像裁切移除了图像的非重叠部分，并且由于欧几里德图像偏移，在ZDP中两个图像的剩余像素具有相同的索引。在ZDP中，XY平面中的所有点均位于左图像和右图像上的相同位置处，促成了将要在屏幕的平面中感知物体的效果。ZDP通常被调整到虚拟场景的中间附近，并且表示出现在屏幕的深处的物体的深度。具有正差异的物体出现在屏幕的前面，而具有负差异的物体出现在屏幕的后面。水平的欧几里德偏移移动ZDP并且相应地改变相对其而言的所有物体差异，由此在充裕的虚拟观察空间(CVVS，comfortable virtual viewing space)中就其整体而言向前或向后移动场景。

在显示器侧，差异的范围可以从针对出现在后限制平面(BLP)的物体的负的最大值，到针对出现在前限制平面(FLP)的物体的最大正值。FLP和BLP因而在虚拟空间中提供了关于以下内容的限制：虚拟物体可以出现在屏幕的前面多远处或在屏幕的后面多远处。

由于在立体成像中，同时观察并相互比较左图像和右图像，因此很容易检测到图像之间最细微的差别。这使得立体成像很容易受到对于在标准2D呈现中甚至不会注意到的图像之间的差别进行测定的影响。在人脑假设从一个3D物体导出两个图像的情况下，人脑对图像进行比较，寻找出细微的不同。例如，在2D成像中可能不会注意到造成物体的一个像素偏移的假象，但是在立体视法中，它可以表示物体在无穷远处和在100m远处之间的差别。而且，在gamma(伽马)、对比度、色平衡和/或锐度等上的差别变得很容易被检测到，并且可以造成严重负面的令人厌恶的感觉。例如，虽然在2D摄影中高达一个f制光圈(f-stop)的不正确曝光并不是至关重要的，但是在立体图像对(stereo image pair)中，这样的差别可能造成变化的眼疲劳度和/或对创建得很差的内容的厌恶，从而降低了立体观察体验。

因而，除了由于不同的视点所造成的视差之外，针对左眼和右眼的图像应当理想地不具有任何差别。

为了创建高质量的3D图像，对准所采用的照相机是关键的。进一步地，两个照相机应当具有相同的孔径，也就是，相同的虹膜直径。还很期望的是，两个照相机使用相同的聚焦深度。然而，焦距可能对控制敏感，并且由于制造差别，可能不能直接将一个照相机的焦距复制到另一个照相机。类似地，所采用的电荷耦合器件(CCD)矩阵的敏感度可能变化，并且因而复制由这些矩阵所应用的增益值并不会得到相似的图像。另外，由于不同的照相机特性，在图像之间还会存在其它类型的失配，例如，白平衡、锐度、粒度和各种其它图像因子的失配。

发明内容

描述了一种方法，该方法包括：将图像处理共同应用于第一图像的图像数据以及第二图像的图像数据。该方法进一步包括：基于对第一图像的图像数据与第二图像的图像数据进行比较，匹配用于立体呈现的图像的视觉外观。

此外，描述了一种装置，该装置包括图像处理组件，该图像处理组件被配置以便：将图像处理共同应用于第一图像的图像数据以及第二图像的图像数据。该装置进一步包括图像比较组件，该图像比较组件被配置以便：基于对第一图像的图像数据与第二图像的图像数据进行比较，匹配用于立体呈现的图像的视觉外观。

所描述的装置的组件可以在硬件和/或软件中实现。它们可以例如按照执行用于实现所要求的功能的软件程序代码的处理器的形式来实现。可选地，它们可以按照被设计成实现所要求的功能的一个或多个电路的形式来实现，例如在芯片集或芯片中，诸如集成电路。

所描述的装置可以限于所指示的组件，但是它同样可以包括各种其它组件，例如，两个图像捕获组件和/或立体显示器和/或能够实现以下中的至少一个的无线通信组件：对所捕获的图像数据进行接收，以及对经处理的图像处理进行传送。所述两个图像捕获组件可以例如是以固定间距布置的一对照相机，或者是共享两个图像传感器的同一镜头的单个照相机。

所描述的装置可以进一步例如是电子设备，诸如数字照相机、膝上型计算机或移动电话，或者是用于电子设备的模块。

此外，描述了一种系统，该系统包括所描述的装置以及另外的至少两个图像捕获组件，所述至少两个图像捕获组件被配置以便：捕获图像数据以及将所捕获的图像数据提供给所述装置。在所述装置与所述图像捕获组件之间的数据链路可以是任何种类的，包括有线和无线的链路。

最后，提出了一种计算机程序产品，其中程序代码被存储在计算机可读介质中。该程序代码当由处理器执行时实现所描述的方法。

该计算机程序产品可以例如是单独的存储设备或是要集成在电子设备中的存储器。

本发明应当被理解成还覆盖这样的计算机程序代码，其独立地来自计算机程序产品和计算机可读介质。

应当理解，本发明不限于对两个图像的图像数据的处理，它还可以用于对两个图像的图像数据的共同处理和比较。进一步地，第一图像和第二图像可以是静止图像或属于各自的视频。

图像处理和图像比较可以按照任何顺序来执行。如果图像比较在图像处理之前，则图像比较必须基于原始图像数据。否则，它可以基于原始图像数据或基于共同处理的图像数据。匹配图像的视觉外观不应当被理解成移除由需要用于立体呈现的图像之间的视差所引起的差异。

所描述的对若干图像的图像数据的共同处理允许相比于单独的处理减少了工作量，因为它减少了需要执行的图像处理的量。结果，也缩短了所要求的处理时间。此外，向若干图像共同应用图像处理确保该处理没有向图像引入附加差异。因而，比利用单独的处理链更好地平衡了经处理的图像。当在立体呈现中使用时，图像因此导致针对于左眼和右眼的更少的差别。

所描述的对图像数据的比较允许减少图像之间的原始差异。如果匹配将要基于经处理的图像，则通过对图像数据的在先的共同处理来促进和优化该匹配。例如，通过组合处理可以避免运行时间差，其中，如果图像经历不同的独立算法处理，则可能造成运行时间差。

在示例性实施例中，第一图像的图像数据和第二图像的图像数据被裁切，用于获得第一图像和第二图像的重叠部分的数据。然后，可以仅将共同处理应用于该重叠部分的图像数据。这进一步减少了处理负载。或者，仅将经裁切的图像提供用于进一步的处理，并且丢弃其余的图像数据；或者，将所有的图像数据连同对裁切量的指示一起提供用于进一步的处理。

共同处理可以包括例如：线性化、暗电流补偿、光斑补偿、噪声减少、白平衡调整、去马赛克化(demosaicking)、颜色变换、非线性化、锐化，以及根据常规图像处理链已知的各种其它调整。

在另一示例性实施例中，将共同图像处理应用于图像数据包括：为至少两个图像捕获组件所采用的参数确定全局设置，所述至少两个图像捕获组件分别提供第一图像和第二图像的图像数据。该全局设置可以包括例如用于以下的值：快门时间、虹膜孔径、图像传感器的积分时间和/或增益。

可以根据所确定的全局设置来共同设置由所述至少两个图像捕获组件中的每一个所采用的至少一个参数。所述至少一个参数可以例如是快门时间和/或积分时间。其它所确定的全局设置(如果有的话)可以用作附加的单独设置的依据。

在一个示例性实施例中，同样地，比较图像数据可以包括：仅对第一图像与第二图像的相关部分的图像数据进行比较。所述相关部分可以特别地仅包括在立体呈现中所使用的图像的那些部分。可以基于与应用于第一图像的图像数据和第二图像的图像数据中的至少一个的欧几里德偏移有关的信息来确定所述相关部分。可选地或附加地，可以基于与应用于第一图像的图像数据和第二图像的图像数据中的至少一个的裁切有关的信息来确定所述相关部分。两种备选方案都允许减少所要求的处理量。可选地或附加地，可以基于与至少一个图像相比于相应的其它图像所体验的闭合空间(occlusion space)有关的信息来确定所述相关部分。后者的备选方案也允许减少所要求的处理量。另外，它允许忽视图像的不可比较的部分，因为它们在两个图像中含有不同的物体。代替在该阶段确定所述相关部分，可以首先提供仅用于所述相关部分的图像数据来进行比较。

在一个示例性实施例中，图像数据的比较的结果用于调整第一图像的图像数据和/或第二图像的图像数据，从而匹配用于这些图像的立体呈现的第一图像和第二图像的视觉外观。该比较可以用于例如匹配两个图像的gamma值、对比度、色平衡和/或锐度。

可选地或附加地，图像数据的比较的结果用于为至少一个图像捕获组件确定所采用的参数的单独设置，所述至少一个图像捕获组件提供了第一图像和第二图像之一的图像数据。然后，可以根据所确定的单独设置来设置由所述至少一个图像捕获组件采用的参数。这确保了对利用相同图像捕获组件所捕获的用于立体呈现的未来图像的视觉外观的匹配。所述单独设置可以包括例如用于以下内容的值：增益和/或焦距的偏移。在已经确定了所讨论的参数的全局设置的情况下，可以例如将该全局设置用作一个图像捕获组件的单独设置。另外，全局设置可以基于所述比较来进行调整，并且可以用作另一图像捕获组件的单独设置。

在另一示例性实施例中，对图像数据进行比较包括：确定在第一图像的焦距中的物体，以及确定在第二图像中的同一物体。然后，可以将锐度调整应用于所确定的第二图像中的物体。可选地或附加地，基于所确定的物体，可以将焦距调整应用于提供第二图像的图像捕获组件。结果，将等同的焦距提供用于两个图像捕获组件。

确定在第二图像中的同一物体可以包括：基于提供第一图像的图像捕获组件的焦距来确定所述物体的距离。物体的距离与特定差异相关，所以可以例如使用查找表或预先确定的计算规则来确定与该距离相关联的差异。所述差异允许确定在第二图像中的同一物体，并且因此偏移第二照相机的聚焦区域以便聚焦在同一物体上。

应当理解，所有呈现的示例性实施例以及它们的单独的特征还可以以任何适当的组合来使用。

根据结合附图所考虑的以下详细描述，本发明的其它目的和特征将变得显而易见。然而，应当理解，设计附图仅用于图示的目的，而不作为对本发明的限制的定义，该定义应当参照所附的权利要求。应当进一步理解，附图没有按比例绘制，并且它们仅旨在从概念上图示在此描述的结构和过程。

附图说明

图1是示意性说明了用于立体呈现的常规图像处理的流程图；

图2是示意性说明了根据本发明的实施例用于立体呈现的图像处理的流程图；

图3是根据本发明实施例的设备的示意框图；

图4是说明了图3的装置中的示例性操作的示意图；

图5是说明了在图4中呈现的操作中所使用的图像裁切的示意图；

图6是说明了可能具有非期望的影响的闭合区域的示例性情形的示意图；以及

图7是例示了两个照相机可如何聚焦在同一物体上的示意图。

具体实施方式

图1和图2是示意性说明了用于立体呈现的常规图像处理与根据本发明示例性实施例的处理之间的差别的流程图。

图1的流程图表示使用两个平行图像处理链的常规方法。

左原始图像11的图像数据在第一图像链中被处理。第一图像链使数据经历图像处理流水线，包括：预处理、白平衡调整、去马赛克化(也被称为“滤色器阵列插值”)、颜色变换和后处理(步骤12)。预处理可以包括例如：线性化、暗电流补偿、光斑补偿和噪声减少。后处理可以包括例如：非线性化(gamma校正)、锐化等。右原始图像13的图像数据在相应的图像处理流水线中在第二图像链中单独被处理(步骤14)。

然后，使用透视变换，在考虑左图像的经处理数据的情况下，进一步调整右图像的经处理数据(步骤15)。该调整的目的在于：在组合图像用于在立体呈现中使用之前，仅保留图像之间所期望的偏差。该调整可以包括：通过将经处理的左图像和右图像的数据进行比较，并且通过调整右图像来匹配于左图像，从而应用色平衡和gamma校正。如果在各个图像处理链的末尾应用这样的调整，则结果可能不是最优的。

图2的流程图表示根据本发明的示例性方法，作为替代，其使用单个图像处理链来处理左原始图像21和右原始图像22的图像数据。

该图像处理链同样可以包括与针对图1所呈现的相同的图像处理流水线。但是，在这种情况下，两个图像的数据共同经历同样的流水线，并且因而使用所包括的处理算法的相同的控制参数来处理所有的数据(步骤23)。可以基于两个图像的数据来确定控制参数。由于原始图像因而同时经过相同的处理链，因此它们接收完全相同的全局图像变换。

在至少一个图像中仅单独地补偿左图像和右图像的数据之间的一致性非期望差别，用于改善图像匹配(步骤24)。

图3呈现了根据本发明的设备30的示例性实施例。举例来说，假设设备30是移动电话。

设备30包括左照相机31和右照相机32。可选地，照相机31、32可以在设备30的外部。在任何情况下，照相机31、32彼此以预先确定的距离被布置，并且更具体地，使得它们在捕获用于立体呈现的图像时处于同一高度。设备30进一步包括处理器33，其被配置以便执行各种处理代码。此外，设备30还包括存储器34。

存储器34包括用于存储程序代码的部件35。处理器33可以从存储器34检索用于执行的任何期望的处理代码。

所存储的程序代码包括用于立体图像处理的代码。该代码包括例如以下代码：用于裁切和组合两个图像(特别地，左(L)图像和右(R)图像)的数据，用于对两个图像的数据进行共同图像处理，用于补偿两个图像的数据之间的非期望的偏差，以及用于生成全局和/或单独的照相机设置。存储器34进一步包括用于存储数据(例如经处理的或未处理的图像数据)的部件36。

设备30可以进一步包括立体显示器37和/或收发器38，收发器38使得能够与其它设备或者与无线通信网络的特定接入点进行无线通信。

设备30或者处理器33和存储器34的组合可以例如被认为是根据本发明的装置的实施例。

图4是说明了图3的设备30的示例性进一步细节以及图3的设备30中的示例性处理的示意图。

在左照相机31(在图4中标记为照相机1)内，快门、虹膜和镜头411根据被应用到控制输入的设置来进行操作，从而使得图像传感器412以期望的快门速度、期望的虹膜孔径和期望的焦距来捕获图像。图像传感器412使用经由控制输入所设置的积分时间。所捕获的图像数据由处理组件413在模拟域中处理，特别地，通过根据经由控制输入所指示的增益值来应用增益而在模拟域中进行处理。处理组件413进一步包括模数转换器(ADC)，该模数转换器将经处理的模拟图像数据转换成数字图像数据。所得到的是将要用于立体呈现的左原始图像414的数字图像数据。该左图像414在图4中被标记为图像I。

在右照相机32(在图4中标记为照相机2)内，使用经由对应的控制输入所提供的其自己的设置，按照与第一照相机31的对应组件相同的方式来控制和操作快门、虹膜和镜头421、图像传感器422和处理组件423。所得到的是将要用于立体呈现的第二原始图像424的数字图像数据。该右图像414在图4中被标记为图像II。

积分时间对两个照相机31、32来说应当是完全相同的，从而使得移动物体将展现类似的运动模糊。在可能的时候，照相机积分时钟和快门应当另外被同步。因此，全局控制值被应用于快门411、421和图像传感器412、422。可以通过对组件413、423所指示的各个增益设置来控制图像曝光之间的差。此外，可以通过为虹膜孔径和焦距提供相应的各个设置来分别针对每个图像控制虹膜和镜头411、421。

由处理器33使用用于裁切和组合的程序代码35来裁切和组合两个图像414和424的图像数据(步骤430)。

在图5中较为详细地说明了该裁切和组合。

如在图5的上部所示，利用图像边缘裁切的欧几里德图像偏移被应用于左原始图像414和右原始图像424，从而使得仅两个图像的重叠区域51保留用于进一步的处理。图像的被裁切的区域52不会影响gamma级别。当光源53仅在图像之一424的边缘处可见的情况下，这也可以是有利的。

如图5的下部所示，然后，经裁切的图像431和432被组合用于共同图像处理。组合图像431、432可以意味着两个图像431、432的数据被视为单个较大图像的数据。

如由紧挨着图4中的经裁切的图像431和432的阴影区域所指示的，裁切的步骤不一定暗指非重叠部分被丢弃。还可能的是：连同与欧几里德偏移和裁切量有关的信息一起转发整体图像数据。

由处理器33使用用于共同处理的程序代码35，将共同图像处理(步骤433)应用于经裁切和组合的图像数据。共同处理可以包括各种常规类型的图像处理，包括例如图2的图像处理流水线的任何处理。这导致除了经共同处理的图像数据以外，还有用于未来图像对的全局设置。图像处理的目的是优化在所组合的图像对中的整体图像质量。选择全局设置，使得在未来图像对中的所要求的变化尽可能地小。可以使用标准方法根据所结合的图像对来确定全局图像设置。它们可以包括对用于照相机31和32的快门时间和积分时间的设置。它们还可以包括例如对将由照相机31和32应用的增益的初步全局设置。

共同处理可以包括：将具有可调整的控制参数的算法应用于该数据，其中，基于要被应用算法的数据的特性来确定参数值。存在以下风险：如果基于整体数据选择了参数值，则仅在一个图像中明显的效应会经由所设置的参数值而渗透到另一图像的数据。因此，可以执行对数据的预先选择，所述对数据的预先选择实际上被用作获得控制参数的基础。

通过将一个图像431的红、绿和蓝(RGB)值从另一图像432的RGB中减去(在具有水平图像偏移以补偿特定的深度平面的情况下)而获得的快速比较可以提供关于物体相似性的信息。将该结果与预先确定的门限值相比较提供了这样的掩模(mask)，即该掩模指示哪部分场景对两个图像传感器412、422来说是类似的，以及哪部分场景是仅对传感器412、422之一可见的闭合区域。

图6表示了一种示例性情形，其中，在半闭合空间中的物体和光源可以对一个照相机传感器和另一个传感器进行不同的影响。

在所呈现的情形下，右照相机32的图像传感器422拍摄包括光源61的场景的图片。左照相机31的图像传感器412被布置成刚好在图像传感器422的稍微左边，并且因而拍摄基本上相同的场景的图片。然而，对于图像传感器412来说，光源61隐藏在物体62后面。这造成传感器412、422的自然gamma检测级别上的差别，因此对于一个图像来说偏移了全局gamma。

当使用两个经裁切的图像431、432的整体图像数据来确定共同处理的控制参数时，对一个图像来说全局gamma因此将是偏移的，并且由此造成在立体观察中的问题。因此，通过在确定共同图像处理中所采用的控制参数时使用的掩模，可以排除由右传感器422所拍摄的包括光源61的图像的区域。

因而，当选择将要形成曝光调整、gamma平衡和其它调整算法的控制参数的基础的数据时，可以应用在RGB比较中所获得的掩模，从而排除可能使图像之一的结果产生偏差的闭合区域。

除了共同处理之外，处理器33还应用微调控制，以便使用用于补偿非期望的偏差的程序代码35来使两个图像相似(步骤434)。在该步骤中，一方面，当前图像对中的至少一个经处理的图像被调整成更类似于另一经处理的图像用于立体呈现。另一方面，相对于在步骤433中产生的所确定的全局设置而以如下这样的方式来调整各个照相机设置：使所观察到的后续的左和右图像之间在曝光和焦距方面的差最小化。

为此，通过图像比较将当前可用的左和右图像进行比较。用于该比较的图像可以是原始经裁切的图像431、432，或者是通过图像处理块433输出的经处理的图像。实际的比较仅被应用于相关部分，也就是，应用于将在立体呈现中使用的经裁切的图像，通过所确定的掩模进一步减少实际的比较，以便确保避免由于闭合空间所引起的负面效应。

图像比较可以基于与标准自动聚焦算法类似的爬山优化(hill climbingoptimization)，以便确定照相机31、32之间的增益差和聚焦差，但是将图像中的相关物体的亮度和焦距之间的差的测量用作目标函数。

此外，对两个照相机来说，同样的物体应当处于锐聚焦(sharp focus)。当已知一个照相机的聚焦深度时，该信息可以用于轻易地确定在焦点处的物体对于另一照相机可见的位置。更具体地，可以根据对一个照相机的聚焦来获取关于大致的物体距离的信息。然后，可以使用计算或查找表来找到物体在该距离处的差异。该差异可以用于确定由另一照相机拍摄的图像中的同一物体。然后，用于处理每个图像的聚焦算法可以使锐度测量仅仅基于该区域，从而对于左和右照相机给出等同的焦距。

图7举例图示了两个照相机可如何聚焦在同一物体上。图7包括：在左手侧由左照相机31看到的图像71的呈现，以及在右手侧由右照相机32看到的图像76的呈现。在第一步骤中，左照相机31聚焦到物体72上。所采用的聚焦窗73由虚线的长方形来指示。在第二步骤中，基于焦距设置来确定左照相机31到物体72的距离。在第三步骤中，基于关于到物体72的距离的知识来确定物体在两个图像71、75中的差异。在第四步骤中，通过根据之前计算的差异来水平地偏移右照相机32的聚焦窗77，从而将第二照相机的聚焦窗77固定到同一物体76。在第五步骤中，右照相机32的焦距被调整以便聚焦在位于聚焦窗77中的场景上，从而在两个图像中实现相似的锐度。

除了调整全局增益和焦距设置之外，还使用被应用于每个经共同处理的图像的亮度和锐度的调整的各个量，以便为相关联的照相机31、32获得各个增益和焦距设置。

然后，将所确定的用于快门时间和积分时间的全局设置分别共同应用于两个快门411、421和两个图像传感器412、422的控制输入。用于焦距、虹膜和增益的各个设置被分别独立地应用于虹膜和镜头411、421以及模拟处理组件413、423的控制输入。因而，该系统形成了反馈控制系统。观察并迭代地完善控制参数的变化效果。用于补偿图像中的差别的这种反馈控制将自动地适应在成像组件中的任何制造偏差。

处理器33另外提供经处理的左和右图像用于立体呈现。所捕获和处理的图像可以在立体显示器37上立即呈现给用户。可选地，它们可以被存储在存储器34的数据部件36中以备稍后使用，或者它们可以经由通信组件38被传送到某个其它设备用于呈现。

应当理解，不要求步骤434的比较处理对用于呈现的图像数据进行调整。该步骤还可以仅用于生成和应用设置(假设在若干次迭代之后，所得到的左和右图像将足够类似并且可以在没有进一步的单独处理的情况下使用)。在这种情况下，可以提供在步骤433中所得到的经共同处理的图像数据用于呈现。

进一步地，应当理解，所呈现的过程还可以用于在不生成任何设置的情况下调适图像数据。实现图像处理的处理器可能并不接入照相机的控制输入，例如，如果处理器属于移动电话并且照相机在移动电话的外部。进一步地，移动电话30可以例如经由通信组件38接收用于立体呈现的未处理的左和右图像，并且当在显示器37上呈现图像之前实现所描述的处理而不生成照相机设置。因而，反馈不是强制的。

大体上呈现了一种示例性系统，该示例性系统尤其使用用于多个图像的共同处理，此外，该示例性系统从图像处理过程中移除了所选择的区域以避免图像之间的串扰，并且该示例性系统还修改了焦距调整。这些方面中的每个方面本身及其组合导致减少了图像处理的复杂性和/或导致对图像的更好匹配。

由执行程序代码35的处理器33图示的功能可以被视为：用于将共同图像处理应用于第一图像的图像数据以及第二图像的图像数据的装置；以及用于基于将第一图像的图像数据与第二图像的图像数据进行比较，匹配用于立体呈现的图像的视觉外观的装置。

程序代码35还可以被视为包括具有功能模块形式的这样的装置。

虽然如应用于本发明的优选实施例那样地已经示出和描述并指出了本发明的基本的新颖特征，但是可以理解，在不背离本发明的精神的情况下，本领域的技术人员可以在形式和细节上做出对所描述的设备和方法的各种省略和替换以及改变。例如，清楚地希望，以基本上相同的方式基本上实现相同功能以获得同样的效果的那些元件和/或方法步骤的所有组合均处在本发明的范围之内。此外，应当认识到，结合任何所公开的本发明的形式或实施例而示出和/或描述的结构和/或元件和/或方法步骤都可以按照任何其它公开的或描述的或建议的形式或实施例来合并作为一般情况的设计选择。因此，仅按照由随附于此的权利要求的范围所指示的来限制本发明。此外，在权利要求中，装置加功能的语句旨在涵盖文中描述为实现所记载的功能的结构，不仅是结构等同，而且还有等同结构。

Claims (27)

1.一种方法，其包括：

将图像处理共同应用于第一图像的图像数据以及第二图像的图像数据；以及

基于将第一图像的图像数据与第二图像的图像数据进行比较，匹配用于立体呈现的图像的视觉外观。

2.根据权利要求1所述的方法，其进一步包括：实现对所述第一图像的图像数据和所述第二图像的图像数据的裁切，用于获得第一图像和第二图像的重叠部分的数据，其中，所述图像处理仅被应用于所述重叠部分的图像数据。

3.根据权利要求1或2所述的方法，其中，应用所述图像处理包括：为至少两个图像捕获组件所采用的参数确定全局设置，所述至少两个图像捕获组件分别提供所述第一图像和所述第二图像的图像数据。

4.根据权利要求3所述的方法，其进一步包括：根据所确定的全局设置，设置由所述至少两个图像捕获组件中的每个图像捕获组件所采用的至少一个参数。

5.根据权利要求1至4中任何一项所述的方法，其中，比较所述图像数据包括：仅比较所述第一图像和所述第二图像的相关部分的图像数据，并且其中，基于以下中的至少一个来确定所述相关部分：

与应用于所述第一图像的图像数据和所述第二图像的图像数据中的至少一个的欧几里德偏移有关的信息；

与应用于所述第一图像的图像数据和所述第二图像的图像数据中的至少一个的裁切有关的信息；以及

与至少一个图像相比于相应的其它图像所体验的闭合空间有关的信息。

6.根据权利要求1至5中任何一项所述的方法，其进一步包括：使用所述图像数据的所述比较的结果，以便调整所述第一图像的图像数据和所述第二图像的图像数据中的至少一个，从而匹配用于立体呈现的所述第一图像和所述第二图像的视觉外观。

7.根据权利要求1至6中任何一项所述的方法，其进一步包括：

使用所述图像数据的所述比较的结果，以便为提供所述第一图像和所述第二图像之一的图像数据的至少一个图像捕获组件确定对于所采用的参数的单独设置，从而匹配用于立体呈现的未来图像的视觉外观；以及

根据所确定的单独设置，设置由所述至少一个图像捕获组件所采用的参数。

8.根据权利要求1至7中任何一项所述的方法，其中，比较所述图像数据包括：确定在所述第一图像的焦距中的物体，以及确定在所述第二图像中的同一物体，所述方法进一步包括：对于在所述第二图像中所确定的物体应用锐度调整，和/或基于所确定的物体将焦距调整应用于提供所述第二图像的图像捕获组件。

9.根据权利要求8所述的方法，其中，确定在所述第二图像中的同一物体包括：基于提供所述第一图像的图像捕获组件的焦距来确定所述物体的距离，确定与所述距离相关联的差异，以及基于所述差异来确定在所述第二图像中的所述同一物体。

10.一种装置，其包括：

图像处理组件，所述图像处理组件被配置以便：将图像处理共同应用于第一图像的图像数据以及第二图像的图像数据；以及

图像比较组件，所述图像比较组件被配置以便：基于将第一图像的图像数据与第二图像的图像数据进行比较，匹配用于立体呈现的图像的视觉外观。

11.根据权利要求10所述的装置，其进一步包括裁切组件，所述裁切组件被配置以便：实现对所述第一图像的图像数据和所述第二图像的图像数据的裁切，用于获得第一图像和第二图像的重叠部分的数据，其中，所述图像处理组件被配置以便：仅将图像处理应用于所述重叠部分的图像数据。

12.根据权利要求10或11所述的装置，其中，所述图像处理组件被配置以便：为至少两个图像捕获组件所采用的参数确定全局设置，所述至少两个图像捕获组件分别提供所述第一图像和所述第二图像的图像数据。

13.根据权利要求12所述的装置，其进一步包括参数设置组件，所述参数设置组件被配置以便：根据所确定的全局设置，设置由所述至少两个图像捕获组件中的每个图像捕获组件所采用的至少一个参数。

14.根据权利要求10至13中任何一项所述的装置，其中，所述图像比较组件被配置以便：仅比较所述第一图像和所述第二图像的相关部分的图像数据，并且其中，所述图像比较组件被配置以便基于以下中的至少一个来确定所述相关部分：

与应用于所述第一图像的图像数据和所述第二图像的图像数据中的至少一个的欧几里德偏移有关的信息；

与应用于所述第一图像的图像数据和所述第二图像的图像数据中的至少一个的裁切有关的信息；以及

与至少一个图像相比于相应的其它图像所体验的闭合空间有关的信息。

15.根据权利要求10至14中任何一项所述的装置，其中，所述图像比较组件进一步被配置以便：使用所述图像数据的所述比较的结果，以便调整所述第一图像的图像数据和所述第二图像的图像数据中的至少一个，从而匹配用于立体呈现的所述第一图像和所述第二图像的视觉外观。

16.根据权利要求10至15中任何一项所述的装置，其中，所述图像比较组件被配置以便：使用所述图像数据的所述比较的结果，以便为提供所述第一图像和所述第二图像之一的图像数据的至少一个图像捕获组件确定对于所采用的参数的单独设置，从而匹配用于立体呈现的未来图像的视觉外观；以及所述图像比较组件被配置以便：根据所确定的单独设置，设置由所述至少一个图像捕获组件所采用的参数。

17.根据权利要求10至16中任何一项所述的装置，其中，所述图像比较组件被配置以便：确定在所述第一图像的焦距中的物体，确定在所述第二图像中的同一物体，以及对于在所述第二图像中所确定的物体应用锐度调整，和/或基于所确定的物体将焦距调整应用于提供所述第二图像的图像捕获组件。

18.根据权利要求17所述的装置，其中，所述图像比较组件被配置以便通过以下操作来确定在所述第二图像中的所述同一物体：基于提供所述第一图像的图像捕获组件的焦距来确定所述物体的距离，确定与所述距离相关联的差异，以及基于所述差异来确定在所述第二图像中的所述同一物体。

19.根据权利要求10至18中任何一项所述的装置，其中，所述装置是用于电子设备的模块。

20.根据权利要求10至18中任何一项所述的装置，其中，所述装置是电子设备。

21.根据权利要求10至20中任何一项所述的装置，其中，所述装置进一步包括所述至少两个图像捕获组件。

22.根据权利要求10至21中任何一项所述的装置，其中，所述装置进一步包括立体显示器。

23.根据权利要求10至22中任何一项所述的装置，其中，所述装置进一步包括无线通信组件，所述无线通信组件能够实现以下中的至少一个：

接收所捕获的图像数据；以及

传送经处理的图像数据。

24.一种系统，其包括：

根据权利要求10至23中任何一项所述的装置；以及

至少两个图像捕获组件，所述至少两个图像捕获组件被配置以便：捕获图像数据，以及将所捕获的图像数据提供给所述装置。

25.一种计算机程序代码，所述程序代码当由处理器执行时实现以下操作：

将图像处理共同应用于第一图像的图像数据以及第二图像的图像数据；以及

基于将第一图像的图像数据与第二图像的图像数据进行比较，匹配用于立体呈现的图像的视觉外观。

26.一种存储程序代码的计算机可读介质，所述程序代码当由处理器执行时实现以下操作：

将图像处理共同应用于第一图像的图像数据以及第二图像的图像数据；以及

基于将第一图像的图像数据与第二图像的图像数据进行比较，匹配用于立体呈现的图像的视觉外观。

27.一种设备，其包括：

用于将图像处理共同应用于第一图像的图像数据以及第二图像的图像数据的装置；以及

用于基于将第一图像的图像数据与第二图像的图像数据进行比较，匹配用于立体呈现的图像的视觉外观的装置。

Images