CN105847782A - 一种三维图像生成方法和装置 - Google Patents

Abstract

本发明涉及一种三维图像生成方法和装置，通过获取左视点图像、右视点图像以及左视点深度图像和右视点深度图像，将所述左视点图像配合所述左视点深度图像、所述右视点图像配合所述右视点深度图像分别进行三维图像扭曲，得到左虚拟视点图像以及右虚拟视点图像；获取所述左虚拟视点图像与所述右虚拟视点图像中非整数坐标位置的像素点，对所述非整数坐标位置的像素点二次投影；根据所述二次投影后的所述左虚拟视点图像与右虚拟视点图像，融合成一幅虚拟视点图像，能够不对深度图像进行预处理来生成虚拟视点图像，保证了生成三维图像的真实性。

Description

一种三维图像生成方法和装置

技术领域

本发明涉及图像处理技术领域，具体包括一种三维图像生成方法和装置。

背景技术

三维视频可以另观看者在二维屏幕上观看到三维信息，三维电影和三维电视也在逐步普及。然而，一般的二维视频无法呈现出三维的效果，想要获得三维图像，一般采用以下方式：直接使用三维摄像机拍摄三维图像；利用计算机合成三维图像；通过算法将二维图像转换为三维图像。

然而，利用三维摄像机拍摄三维图像，虽然图像的还原度很好，但是三维摄像机本身成本很高，难以大范围推广；利用计算机合成的三维图像，由于场景是虚拟的，造成观看效果较差；将二维图像转换为三维图像的方式由于成本较低，场景的真实度较好，是一种广泛采用的生成三维图像的方式。但是现有的二维图像转换为三维图像方法由于算法本身的限制，导致在转换图像的过程中会产生很多暴露的区域，而采用平滑处理后生成的三维图像会产生几何扭曲，导致三维图像不真实。

发明内容

技术问题

有鉴于此，本发明要解决的技术问题是，提供一种三维图像生成方法和装置，能够增强得到的三维图像的真实感。

解决方案

为解决以上技术问题，本发明在第一方面提供一种三维图像生成方法，包括：

获取左视点图像、右视点图像以及左视点深度图像和右视点深度图像，将所述左视点图像配合所述左视点深度图像、所述右视点图像配合所述右视点深度图像分别进行三维图像扭曲，得到左虚拟视点图像以及右虚拟视点图像；

获取所述左虚拟视点图像与所述右虚拟视点图像中非整数坐标位置的像素点，对所述非整数坐标位置的像素点二次投影；

根据所述二次投影后的所述左虚拟视点图像与右虚拟视点图像，融合成一幅虚拟视点图像。

在一种可能的实现方式中，所述三维图像扭曲包括：

根据所述左视点深度图像和所述右视点深度图像，将所述左视点图像和所述右视点图像投射到虚拟二维坐标平面中。

在一种可能的实现方式中，所述二次投影包括：

对于每一个非整数位置坐标的像素点，根据所述像素点所在虚拟投影平面中的位置，获取距离所述位置最近的4个整数坐标位置，将所述像素点二次投影到所述距离所述位置最近的4个整数坐标位置。

在一种可能的实现方式中，所述融合成一幅虚拟视点图像包括：

虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像；

其中，a+b＝1，且a>0，b>0。

在一种可能的实现方式中，所述融合成一幅虚拟视点图像，还包括：

判断所述左虚拟视点图像中的所述像素点所在位置在所述右虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域；

若在所述右虚拟视点图像中的所述对应位置是所述空白区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述左虚拟视点图像中所述对应位置的所述像素点；

若在所述右虚拟视点图像中的所述对应位置是所述空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述左虚拟视点图像中所述对应位置的所述像素点；

若在所述右虚拟视点图像中的所述对应位置是所述非空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素按照：虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像，来确定；

其中，a+b＝1，且a>0，b>0。

在一种可能的实现方式中，所述融合成一幅虚拟视点图像，还包括：

判断所述右虚拟视点图像中的所述像素点所在位置在所述左虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域；

若在所述左虚拟视点图像中的所述对应位置是所述空白区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述右虚拟视点图像中所述对应位置的所述像素点；

若在所述左虚拟视点图像中的所述对应位置是所述空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述右虚拟视点图像中所述对应位置的所述像素点；

若在所述左虚拟视点图像中的所述对应位置是所述非空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素按照：虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像，来确定；

其中，a+b＝1，且a>0，b>0。

本发明在另一方面提供一种三维图像生成装置，包括：

三维图像扭曲模块，用于获取左视点图像、右视点图像以及左视点深度图像和右视点深度图像，直接将所述左视点图像配合所述左视点深度图像、所述右视点图像配合所述右视点深度图像分别进行三维图像扭曲，得到左虚拟视点图像以及右虚拟视点图像；

二次投影模块，与所述三维图像扭曲模块连接，用于获取所述左虚拟视点图像与所述右虚拟视点图像中非整数坐标位置的像素点，对所述非整数坐标位置的像素点二次投影；

融合模块，与所述二次投影模块连接，用于根据所述二次投影后的所述左虚拟视点图像与右虚拟视点图像，融合成一幅虚拟视点图像。

在一种可能的实现方式中，所述三维图像扭曲包括：

根据所述左视点深度图像和所述右视点深度图像，将所述左视点图像和所述右视点图像投射到虚拟二维坐标平面中。

在一种可能的实现方式中，所述二次投影模块进一步用于：

对于每一个非整数位置坐标的像素点，根据所述像素点所在虚拟投影平面中的位置，获取距离所述位置最近的4个整数坐标位置，将所述像素点二次投影到所述距离所述位置最近的4个整数坐标位置。

在一种可能的实现方式中，所述融合模块进一步用于：

融合成一幅所述虚拟视点图像，其中，

虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像；

其中，a+b＝1，且a>0，b>0。

在一种可能的实现方式中，所述融合模块，还包括：

第一判断单元，与所述二次投影模块连接，用于判断所述左虚拟视点图像中的所述像素点所在位置在所述右虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域；

第一执行单元，与所述第一判断单元连接，用于若在所述右虚拟视点图像中的所述对应位置是所述空白区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述左虚拟视点图像中所述对应位置的所述像素点；

若在所述右虚拟视点图像中的所述对应位置是所述空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述左虚拟视点图像中所述对应位置的所述像素点；

若在所述右虚拟视点图像中的所述对应位置是所述非空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素按照：虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像，来确定；

其中，a+b＝1，且a>0，b>0。

在一种可能的实现方式中，所述融合模块，还包括：

第二判断单元，与所述二次投影模块连接，用于判断所述右虚拟视点图像中的所述像素点所在位置在所述左虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域；

第二执行单元，与所述第二判断单元连接，用于若在所述左虚拟视点图像中的所述对应位置是所述空白区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述右虚拟视点图像中所述对应位置的所述像素点；

若在所述左虚拟视点图像中的所述对应位置是所述空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述右虚拟视点图像中所述对应位置的所述像素点；

若在所述左虚拟视点图像中的所述对应位置是所述非空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素按照：虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像，来确定；

其中，a+b＝1，且a>0，b>0。

有益效果

本发明提供的一种三维图像生成方法和装置，通过获取左视点图像、右视点图像以及左视点深度图像和右视点深度图像，将所述左视点图像配合所述左视点深度图像、所述右视点图像配合所述右视点深度图像分别进行三维图像扭曲，得到左虚拟视点图像以及右虚拟视点图像；获取所述左虚拟视点图像与所述右虚拟视点图像中非整数坐标位置的像素点，对所述非整数坐标位置的像素点二次投影；根据所述二次投影后的所述左虚拟视点图像与右虚拟视点图像，融合成一幅虚拟视点图像，能够不对深度图像进行预处理来生成虚拟视点图像，保证了生成三维图像的真实性。

根据下面参考附图对示例性实施例的详细说明，本发明的其它特征及方面将变得清楚。

附图说明

包含在说明书中并且构成说明书的一部分的附图与说明书一起示出了本发明的示例性实施例、特征和方面，并且用于解释本发明的原理。

图1示出本发明实施例提供的三维图像生成方法的流程图。

图2示出本发明另一实施例提供的融合方法的流程图。

图3示出本发明另一实施例提供的三维图像生成装置的框图。

图4示出本发明另一实施例提供的融合模块的框图。

具体实施方式

以下将参考附图详细说明本发明的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面，但是除非特别指出，不必按比例绘制附图。

在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。

另外，为了更好的说明本发明，在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解，没有某些具体细节，本发明同样可以实施。在一些实例中，对于本领域技术人员熟知的方法、手段、元件未作详细描述，以便于凸显本发明的主旨。

实施例1

图1示出本发明实施例提供的三维图像生成方法的流程图，如图1所示，该方法包括：

步骤S1、获取左视点图像、右视点图像以及左视点深度图像和右视点深度图像，直接将所述左视点图像配合左视点深度图像、右视点图像配合右视点深度图像分别进行三维图像扭曲，得到左虚拟视点图像以及右虚拟视点图像。

三维图像扭曲的过程，就是利用分别获取到的左视点图像和右视点图像，根据左视点深度图像和右视点深度图像，将实际的二维左右视点图像投射到虚拟的二维坐标平面中，得到参考点在虚拟二维坐标平面中的虚拟坐标。

具体地，将左视点图像根据左视点深度图像进行投影，将左视点图像根据左视点深度图像投影到世界坐标系中，得到左视点图像在世界坐标系中的投影坐标。再根据左视点图像在世界坐标系中的投影坐标，投影到虚拟图像平面中，得到左视点图像在虚拟投影平面中的左虚拟视点图像。

同样，右视点图像也采用与左视点图像相同的方式，得到其在虚拟投影平面中的右虚拟视点图像。

步骤S2、获取所述左虚拟视点图像与右虚拟视点图像中非整数坐标位置的像素点，对所述非整数坐标位置的像素点二次投影。

具体地，获取左虚拟视点图像中所有具有整数坐标位置的像素点，利用左虚拟视点图像所有像素点减去所有具有整数坐标位置的像素点，剩余部分的像素点全部是非整数坐标位置的像素点。或者可以利用识别程序，直接从所有像素点的坐标位置中识别出具有非整数坐标的像素点。

对于每一个非整数位置坐标的像素点，根据其所在虚拟投影平面中的位置，获取距离该位置最近的4个整数坐标位置，将该像素点二次投影到距离最近的4个整数坐标位置。对于每一个整数坐标位置，判断在该位置投影的像素对应的景深信息的大小，选择景深信息小的像素点作为该整数坐标位置的像素点。

例如，在虚拟投影平面中一个非整数坐标位置(1.8,1.1)在三维图像扭曲被投影一个像素点，则获取距离该位置最近的4个整数坐标位置：(1,1)，(1,2)，(2,1)，(2,2)，将投影在(1.8,1.1)的像素点取消，分别投影在(1,1)，(1,2)，(2,1)，(2,2)这4个距离(1.8,1.1)最近的4个整数坐标位置。而对于每一个整数坐标位置，统计投影在该整数坐标位置的所有像素点，选择深度信息小的作为该位置的像素点。

步骤S3、根据所述二次投影后的所述左虚拟视点图像与右虚拟视点图像，融合成一幅虚拟视点图像。

由于左右视点图像来自于左右两个不同角度，场景信息丰富，在左视点图像中处于阻挡的场景在右视点图像中可能处于非阻挡。而在投影的过程中，没有任何像素投影到的位置就是虚拟视点图像的空白位置。因此，投影得到的两幅虚拟视点图像的空白区域会出现不一致，从而可以利用两幅虚拟视点图像的互补信息来填充空白区域，从而融合成一幅基本没有空白区域的虚拟视点图像。

具体地，对左右两幅虚拟视点图像的所有像素进行对应位置的融合，并根据实际应用需求对两幅图像分别设定融合系数，按照以下方式进行融合。

虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像

其中，a，b是左右两幅虚拟视点图像的融合系数，均大于0。为了保证融合后的虚拟视点图像亮度不要太高，一般可以设定a+b＝1。融合系数的选择可以根据实际的融合需求进行选择，例如左虚拟视点图像的图像内容与要恢复的虚拟视点图像的相关度较高，可以设置系数a>b来提高左虚拟视点图像在融合中的占比。

本发明提供的三维图像生成方法，不需要对作为参考的视点图像进行预处理，简化了虚拟视点图像生成步骤，提高了生成三维图像的真实性。

在一种可能的实现方式中，如图2所示，为了进一步消除虚拟视点图像边缘伪影，在融合的过程中对图像空白区域、空白边缘区域及其他非空白区域分别融合。具体地，对于左虚拟视点图像中的像素点，判断该像素点所在位置在右虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域；若在右虚拟视点图像中对应位置是空白区域，则该像素点位置对应的融合后的虚拟视点图像的像素选择左虚拟视点图像中对应位置的像素点；若在右虚拟视点图像中对应位置是空白边缘区域，则该像素点位置对应的融合后的虚拟视点图像的像素选择左虚拟视点图像中对应位置的像素点；若在右虚拟视点图像中对应位置是非空白区域，则按照虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像来确定融合后的照虚拟视点图像对应位置的像素。

对于右虚拟视点图像也采用以上相同的处理方式，将左右两幅虚拟视点图像融合成为一幅虚拟视点图像。

由此，根据左右两幅虚拟视点图像中像素点所在位置的不同来分区域融合，能够消除虚拟视点图像边缘伪影，生成更真实的图像。

实施例2

图3示出根据本发明实施例提供的一种三维图像生成装置1的结构示意图，如图3所示，该装置1包括：三维图像扭曲模块11，二次投影模块12，融合模块13。

三维图像扭曲模块11，用于获取左视点图像、右视点图像以及左视点深度图像和右视点深度图像，直接将所述左视点图像配合左视点深度图像、右视点图像配合右视点深度图像分别进行三维图像扭曲，得到左虚拟视点图像以及右虚拟视点图像。二次投影模块12，与所述三维图像扭曲模块11连接，用于获取所述左虚拟视点图像与右虚拟视点图像中非整数坐标位置的像素点，对所述非整数坐标位置的像素点二次投影。融合模块13，与所述二次投影模块12连接，用于根据所述二次投影后的所述左虚拟视点图像与右虚拟视点图像，融合成一幅虚拟视点图像。

由此，不需要对作为参考的视点图像进行预处理，简化了虚拟视点图像生成步骤，提高了生成三维图像的真实性。

在一种可能的实现方式中，如图4所示，所述融合模块13还包括：第一判断单元131，第二判断单元132，第一执行单元133和第二执行单元134。第一判断单元131，与所述二次投影模块12连接，用于判断左虚拟视点图像中的像素点在右虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域。第一执行单元133，与所述第一判断单元131连接，用于若在右虚拟视点图像中对应位置是空白区域，则该像素点位置对应的融合后的虚拟视点图像的像素选择左虚拟视点图像中对应位置的像素点；若在右虚拟视点图像中对应位置是空白边缘区域，则该像素点位置对应的融合后的虚拟视点图像的像素选择左虚拟视点图像中对应位置的像素点；若在右虚拟视点图像中对应位置是非空白区域，则按照虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像来确定融合后的虚拟视点图像对应位置的像素。

第二判断单元132，与所述二次投影模块12连接，用于判断右虚拟视点图像中的像素点在左虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域。第二执行单元134，与所述第二判断单元132连接，用于若在左虚拟视点图像中对应位置是空白区域，则该像素点位置对应的融合后的虚拟视点图像的像素选择右虚拟视点图像中对应位置的像素点；若在左虚拟视点图像中对应位置是空白边缘区域，则该像素点位置对应的融合后的虚拟视点图像的像素选择右虚拟视点图像中对应位置的像素点；若在左虚拟视点图像中对应位置是非空白区域，则按照虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像来确定融合后的虚拟视点图像对应位置的像素。

由此，根据左右两幅虚拟视点图像中像素点所在位置的不同来分区域融合，能够消除虚拟视点图像边缘伪影，生成更真实的图像。

以上各模块的功能与实施例1中的方法相对应，在此不再赘述。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (12)

1.一种三维图像生成方法，其特征在于，包括：

获取左视点图像、右视点图像以及左视点深度图像和右视点深度图像，将所述左视点图像配合所述左视点深度图像、所述右视点图像配合所述右视点深度图像分别进行三维图像扭曲，得到左虚拟视点图像以及右虚拟视点图像；

获取所述左虚拟视点图像与所述右虚拟视点图像中非整数坐标位置的像素点，对所述非整数坐标位置的像素点二次投影；

根据所述二次投影后的所述左虚拟视点图像与右虚拟视点图像，融合成一幅虚拟视点图像。

2.根据权利要求1所述的三维图像生成方法，其特征在于，所述三维图像扭曲包括：

根据所述左视点深度图像和所述右视点深度图像，将所述左视点图像和所述右视点图像投射到虚拟二维坐标平面中。

3.根据权利要求1或2所述的三维图像生成方法，其特征在于，所述二次投影包括：

对于每一个非整数位置坐标的像素点，根据所述像素点所在虚拟投影平面中的位置，获取距离所述位置最近的4个整数坐标位置，将所述像素点二次投影到所述距离所述位置最近的4个整数坐标位置。

4.根据权利要求1或2所述的三维图像生成方法，其特征在于，所述融合成一幅虚拟视点图像包括：

虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像；

其中，a+b＝1，且a>0，b>0。

5.根据权利要求1或2所述的三维图像生成方法，其特征在于，所述融合成一幅虚拟视点图像，还包括：

判断所述左虚拟视点图像中的所述像素点所在位置在所述右虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域；

若在所述右虚拟视点图像中的所述对应位置是所述空白区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述左虚拟视点图像中所述对应位置的所述像素点；

若在所述右虚拟视点图像中的所述对应位置是所述空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述左虚拟视点图像中所述对应位置的所述像素点；

若在所述右虚拟视点图像中的所述对应位置是所述非空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素按照：虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像，来确定；

其中，a+b＝1，且a>0，b>0。

6.根据权利要求1或2所述的三维图像生成方法，其特征在于，所述融合成一幅虚拟视点图像，还包括：

判断所述右虚拟视点图像中的所述像素点所在位置在所述左虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域；

若在所述左虚拟视点图像中的所述对应位置是所述空白区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述右虚拟视点图像中所述对应位置的所述像素点；

若在所述左虚拟视点图像中的所述对应位置是所述空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述右虚拟视点图像中所述对应位置的所述像素点；

若在所述左虚拟视点图像中的所述对应位置是所述非空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素按照：虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像，来确定；

其中，a+b＝1，且a>0，b>0。

7.一种三维图像生成装置，其特征在于，包括：

三维图像扭曲模块，用于获取左视点图像、右视点图像以及左视点深度图像和右视点深度图像，直接将所述左视点图像配合所述左视点深度图像、所述右视点图像配合所述右视点深度图像分别进行三维图像扭曲，得到左虚拟视点图像以及右虚拟视点图像；

二次投影模块，与所述三维图像扭曲模块连接，用于获取所述左虚拟视点图像与所述右虚拟视点图像中非整数坐标位置的像素点，对所述非整数坐标位置的像素点二次投影；

融合模块，与所述二次投影模块连接，用于根据所述二次投影后的所述左虚拟视点图像与右虚拟视点图像，融合成一幅虚拟视点图像。

8.根据权利要求7所述的三维图像生成装置，其特征在于，所述三维图像扭曲包括：

根据所述左视点深度图像和所述右视点深度图像，将所述左视点图像和所述右视点图像投射到虚拟二维坐标平面中。

9.根据权利要求7或8所述的三维图像生成装置，其特征在于，所述二次投影模块进一步用于：

对于每一个非整数位置坐标的像素点，根据所述像素点所在虚拟投影平面中的位置，获取距离所述位置最近的4个整数坐标位置，将所述像素点二次投影到所述距离所述位置最近的4个整数坐标位置。

10.根据权利要求7或8所述的三维图像生成装置，其特征在于，所述融合模块进一步用于：

融合成一幅所述虚拟视点图像，其中，

虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像；

其中，a+b＝1，且a>0，b>0。

11.根据权利要求7或8所述的三维图像生成装置，其特征在于，所述融合模块，还包括：

第一判断单元，与所述二次投影模块连接，用于判断所述左虚拟视点图像中的所述像素点所在位置在所述右虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域；

第一执行单元，与所述第一判断单元连接，用于若在所述右虚拟视点图像中的所述对应位置是所述空白区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述左虚拟视点图像中所述对应位置的所述像素点；

若在所述右虚拟视点图像中的所述对应位置是所述空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述左虚拟视点图像中所述对应位置的所述像素点；

若在所述右虚拟视点图像中的所述对应位置是所述非空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素按照：虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像，来确定；

其中，a+b＝1，且a>0，b>0。

12.根据权利要求7或8所述的三维图像生成装置，其特征在于，所述融合模块，还包括：

第二判断单元，与所述二次投影模块连接，用于判断所述右虚拟视点图像中的所述像素点所在位置在所述左虚拟视点图像中对应位置是空白区域、空白边缘区域还是非空白区域；

第二执行单元，与所述第二判断单元连接，用于若在所述左虚拟视点图像中的所述对应位置是所述空白区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述右虚拟视点图像中所述对应位置的所述像素点；

若在所述左虚拟视点图像中的所述对应位置是所述空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素选择所述右虚拟视点图像中所述对应位置的所述像素点；

若在所述左虚拟视点图像中的所述对应位置是所述非空白边缘区域，则所述位置对应的融合后的所述虚拟视点图像的像素按照：虚拟视点图像＝a*左虚拟视点图像+b*右虚拟视点图像，来确定；

其中，a+b＝1，且a>0，b>0。