CN108230333B - 图像处理方法、装置、计算机程序、存储介质和电子设备 - Google Patents

Abstract

本发明实施例提供一种图像处理方法、装置、计算机程序、存储介质和电子设备。所述图像处理方法包括：获取待处理图像的深度图像；根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域；对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值；根据所述前背景分割阈值对所述待处理图像进行背景虚化处理。采用本发明的技术方案，可以有效地实现了待处理图像的虚化处理；而且无需对整体深度图像进行前背景分割处理，节省时间，从而提高整体的图像虚化处理效率。

Description

图像处理方法、装置、计算机程序、存储介质和电子设备

技术领域

本发明实施例涉及图像处理技术，尤其涉及一种图像处理方法、装置、计算机程序、存储介质和电子设备。

背景技术

随着智能终端技术的不断发展与普及，使用例如手机的终端进行拍照的用户越来越多，由于拍摄背景虚化的照片需要大光圈、长焦距镜头，而手机的厚度有限，无法安装这类镜头，所以手机无法拍摄出具有背景虚化效果的照片。近期出现的图像背景虚化技术，使得用户可拍摄出模拟单反相机大光圈虚化效果的照片，将照片背景中不必要的元素模糊掉，如路人、垃圾桶等，从而使得用户对照片的注意力集中到场景的主要对象上。

图像前背景分割是图像背景虚化处理技术中的关键步骤，对图像进行的前背景分割处理通常会影响图像背景虚化效果。然而，目前的图像前背景分割技术存在效果不稳定、没有交互性或者速度慢等问题，导致图像背景虚化技术无法在移动终端进行广泛应用。

发明内容

本发明实施例的目的在于，提供一种图像处理技术。

根据本发明实施例的一方面，提供一种图像处理方法，包括：获取待处理图像的深度图像；根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域；对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值；根据所述前背景分割阈值对所述待处理图像进行背景虚化处理。

可选地，所述获取待处理图像的深度图像，包括：通过双目匹配算法或者深度传感器获取待处理图像的深度图像。

可选地，所述根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域，包括：获取待处理图像中的对焦区域，并获取所述待处理图像中包含所述对焦区域的感兴趣区域；根据所述待处理图像中的感兴趣区域确定所述深度图像中对应的感兴趣区域。

可选地，所述获取待处理图像中的对焦区域，包括：根据用户对所述待处理图像的点击操作确定所述待处理图像中的对焦区域；或者，将待处理图像中预设范围内的区域确定为对焦区域。

可选地，所述获取所述待处理图像中包含所述对焦区域的感兴趣区域，包括：将以所述对焦区域的对焦点为中心的矩形区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域；和/或，将以所述矩形区域的长和宽的延长线形成的十字架区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域。

可选地，所述矩形区域的长和宽分别为所述待处理图像的长和宽的预设倍数，或者，所述矩形区域的长和宽与以所述对焦点为中心的预设区域的深度值的大小成函数关系。

可选地，所述根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域，包括：获取所述待处理图像中的对焦区域；根据所述待处理图像中的对焦区域确定所述深度图像中对应的对焦区域，并获取所述深度图像中包含所述对应的对焦区域的感兴趣区域。

可选地，所述根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域，包括：根据所述待处理图像中的对焦区域确定所述深度图像中至少二个包含对焦区域的感兴趣区域。

可选地，所述对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值，包括：对所述深度图像中的所述至少二个感兴趣区域进行前背景分割，获得各感兴趣区域的分割阈值；将所述各感兴趣区域的分割阈值中最小的分割阈值确定为所述深度图像的前背景分割阈值。

可选地，所述获得各感兴趣区域的分割阈值，包括：获取各感兴趣区域的前景和背景的像素值的类间方差最大时的分割阈值。

可选地，所述根据所述前背景分割阈值对所述待处理图像进行背景虚化处理，包括：根据所述前背景分割阈值对所述深度图像进行阈值化，获得所述深度图像的前背景的掩码图像；根据所述掩码图像对所述待处理图像进行背景虚化处理。

可选地，在所述获取待处理图像的深度图像之前，还包括：将所述待处理图像的原始尺寸缩小至预设尺寸；所述获取待处理图像的深度图像，包括：获取预设尺寸的待处理图像的深度图像；所述根据所述前背景分割阈值对所述待处理图像进行背景虚化处理，包括：根据所述前背景分割阈值对所述原始尺寸的所述待处理图像进行背景虚化处理。

根据本发明实施例的第二方面，提供了一种图像处理装置，包括：

获取模块，用于获取待处理图像的深度图像；确定模块，用于根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域；分割模块，用于对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值；虚化模块，用于根据所述前背景分割阈值对所述待处理图像进行背景虚化处理。

可选地，所述获取模块用于：通过双目匹配算法或者深度传感器获取待处理图像的深度图像。

可选地，所述确定模块包括：第一获取单元，用于获取待处理图像中的对焦区域，并获取所述待处理图像中包含所述对焦区域的感兴趣区域；第一确定单元，用于根据所述待处理图像中的感兴趣区域确定所述深度图像中对应的感兴趣区域。

可选地，所述第一获取单元用于：根据用户对所述待处理图像的点击操作确定所述待处理图像中的对焦区域；或者，将待处理图像中预设范围内的区域确定为对焦区域。

可选地，所述第一获取单元还用于：将以所述对焦区域的对焦点为中心的矩形区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域；和/或，将以所述矩形区域的长和宽的延长线形成的十字架区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域。

可选地，所述矩形区域的长和宽分别为所述待处理图像的长和宽的预设倍数，或者，所述矩形区域的长和宽与以所述对焦点为中心的预设区域的深度值的大小成函数关系。

可选地，所述确定模块包括：第二获取单元，用于获取所述待处理图像中的对焦区域；第二确定单元，用于根据所述待处理图像中的对焦区域确定所述深度图像中对应的对焦区域，并获取所述深度图像中包含所述对应的对焦区域的感兴趣区域。

可选地，所述确定模块用于：根据所述待处理图像中的对焦区域确定所述深度图像中至少二个包含对焦区域的感兴趣区域。

可选地，所述分割模块包括：分割单元，用于对所述深度图像中的所述至少二个感兴趣区域进行前背景分割，获得各感兴趣区域的分割阈值；第三确定单元，用于将所述各感兴趣区域的分割阈值中最小的分割阈值确定为所述深度图像的前背景分割阈值。

可选地，所述分割单元用于：获取各感兴趣区域的前景和背景的像素值的类间方差最大时的分割阈值。

可选地，所述虚化模块包括：阈值化单元，用于根据所述前背景分割阈值对所述深度图像进行阈值化，获得所述深度图像的前背景的掩码图像；虚化单元，用于根据所述掩码图像对所述待处理图像进行背景虚化处理。

可选地，所述装置还包括：尺寸调整模块，用于将所述待处理图像的原始尺寸缩小至预设尺寸；所述获取模块用于获取预设尺寸的待处理图像的深度图像；所述虚化模块用于根据所述前背景分割阈值对所述原始尺寸的所述待处理图像进行背景虚化处理。

根据本发明实施例的第三方面，提供了一种计算机程序，其包括有计算机程序指令，所述程序指令被处理器执行时用于实现本发明实施例提供的任一图像处理方法对应的步骤。

根据本发明实施例的第四方面，提供了一种计算机可读存储介质，其上存储有计算机程序指令，所述程序指令被处理器执行时用于实现本发明实施例提供的任一图像处理方法对应的步骤。

根据本发明实施例的第五方面，提供了一种电子设备，包括：处理器、存储器、通信元件和通信总线，所述处理器、所述存储器和所述通信元件通过所述通信总线完成相互间的通信；所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行本发明实施例提供的任一图像处理方法对应的步骤。

根据本发明实施例提供的图像处理方案，通过获取待处理图像的深度图像，并根据待处理图像的对焦区域确定深度图像中的感兴趣区域，从而通过对深度图像中的感兴趣区域进行前背景分割，来获取对应的整体深度图像的前背景分割阈值，用于对待处理图像进行虚化处理，有效地实现了待处理图像的虚化处理；而且无需对整体深度图像进行前背景分割处理，节省时间，从而提高整体的图像虚化处理效率。

附图说明

图1是示出根据本发明实施例一的一种图像处理方法的流程图；

图2是示出根据本发明实施例二的一种图像处理方法的流程图；

图3是示出根据本发明实施例二的一种图像处理方法的待处理图像、深度图像、掩码图像；

图4是示出根据本发明实施例三的一种图像处理装置的结构框图；

图5是示出根据本发明实施例三的另一种图像处理装置的结构框图；

图6是示出根据本发明实施例四的一种电子设备的结构示意图。

具体实施方式

下面结合附图(若干附图中相同的标号表示相同的元素)和实施例，对本发明实施例的具体实施方式作进一步详细说明。以下实施例用于说明本发明，但不用来限制本发明的范围。

本领域技术人员可以理解，本发明实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等，既不代表任何特定技术含义，也不表示它们之间的必然逻辑顺序。

实施例一

图1是示出根据本发明实施例一的图像处理方法的流程图。

参照图1，在步骤S110，获取待处理图像的深度图像。

本发明实施例中，待处理图像可以为任意拍摄装置(例如手机中的相机)在任意场景中拍摄得到的图像。

在获取待处理图像之后，可以为待处理图像生成深度图像，也可以获取已经生成并存储的待处理图像的深度图像，但不限于前述方式。

在步骤S120，根据待处理图像中的对焦区域确定深度图像中的感兴趣区域。

这里，对焦区域可以根据待处理图像中预设的对焦点或者对焦区域进行确定，也可以根据用户对待处理图像的点击操作进行确定。基于深度图像和待处理图像相对应，并具有相同的尺寸，深度图像也具有相应的对焦区域。

可选地，在确定深度图像中的感兴趣区域时，可以先获取待处理图像中包含对焦区域的感兴趣区域，再相应地确定深度图像中对应的感兴趣区域；也可以先确定深度图像中对应的对焦区域，在获取深度图像中包含对应的感兴趣区域，也即包含对应的对焦区域的感兴趣区域。

在步骤S130，对深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值。

根据本发明的总体发明构思，对待处理图像的深度图像中的感兴趣区域的像素值进行前背景分割，获取感兴趣区域的像素分割阈值，以根据感兴趣区域的像素分割阈值，确定对应的整体深度图像的前背景分割阈值，用于对待处理图像进行背景虚化处理。

也即，对深度图像中的部分区域进行前背景分割处理，无需对整个深度图像进行前背景分割处理，节省处理时间，提高前背景分割效率；并且，感兴趣区域是根据对焦区域确定或者包含对焦区域，基于感兴趣区域进行的前背景分割的效果可相当于对整体的深度图像进行的前背景分割，从而保证前背景分割的处理效果。

在步骤S140，根据前背景分割阈值对待处理图像进行背景虚化处理。

在获取深度图像的前背景分割阈值之后，可以根据该前背景分割阈值对待处理图像进行阈值化、模糊滤波、图像合并等处理，使得处理后的图像具有背景虚化后效果。

根据本发明的示例性实施方式，在任意需要对待处理图像进行虚化处理的场景中，均可以采用本发明的图像处理方法对待处理图像进行处理，以获得具有背景虚化效果的图像。例如，在相机拍摄图像的过程中，可以通过相机或者集成在相机中的图像处理模块采用本发明的图像处理方法，对相机拍摄的初始图像进行背景虚化处理的操作，得到具有背景虚化处理效果的图像，这里，经过背景虚化处理后获得的图像为最终拍摄得到的图像。

根据本发明实施例一的图像处理方法，通过获取待处理图像的深度图像，并根据待处理图像的对焦区域确定深度图像中的感兴趣区域，从而通过对深度图像中的感兴趣区域进行前背景分割，来获取整体的深度图像的前背景分割阈值，用于对待处理图像进行虚化处理，有效地实现了待处理图像的虚化处理；而且无需对整体深度图像进行前背景分割处理，节省时间，从而提高整体的图像虚化处理效率。

本实施例的图像处理方法可以由任意适当的具有相应的图像或数据处理能力的设备执行，包括但不限于：终端设备以及集成在终端设备上的计算机程序、处理器等。

实施例二

图2是示出根据本发明实施例二的图像处理方法的流程图。

参照图2，在步骤S210，获取待处理图像的深度图像。

本实施例中，待处理图像为摄像装置拍摄图像过程中拍摄的初始图像，可用于方便用户浏览拍摄效果。

在实际应用中，在获取摄像装置拍摄的待处理图像之后，可以通过双目匹配算法对待处理图像(针对双目摄像装置拍摄的图像)进行深度信息的计算，或者通过深度传感器来直接获得待处理图像的深度信息，从而获取待处理图像的深度图像。

如图3所示，图310B为待处理图像，是相机展示给用户的拍摄到的初始图像；图310A为待处理图像的深度图像，是与待处理图像关联的一个隐藏的图像文件，不展示给用户，但是可以被读取。

在步骤S220，获取待处理图像中的对焦区域，并获取待处理图像中包含对焦区域的至少二个感兴趣区域。

其中，在获取待处理图像中的对焦区域时，可以将待处理图像中的预设范围内的区域确定为对焦区域；这里，在检测到待处理图像中有一个人脸时，预设范围内的区域可以为人脸所在的区域；在检测到待处理图像中有多个人脸时，预设范围内的区域可以为最大人脸所在的区域；在检测到待处理图像中没有人脸时，预设范围内的区域可以为相机拍摄图像时的自动对焦区域。此外，也可以根据用户对待处理图像的点击操作确定待处理图像中的对焦区域。

例如，在用户交互界面中，未检测到用户在图像显示界面上对图310B的点击操作时，将图310B中的预设区域确定为对焦区域；在检测到用户在图像显示界面显示的图310B上点击的对焦点P1或对焦区域，可以将包括对焦点P1或对焦区域的预设范围的区域确定为待处理图像中的对焦区域。

在获取待处理图像中包含对焦区域的感兴趣区域时，获取多个包含对焦区域的至少二个感兴趣区域。例如，参照图3，将以对焦区域的对焦点(例如图310B中的点P1)为中心的矩形区域S1，确定为待处理图像中包含对焦区域的感兴趣区域；和/或，将以该矩形区域S1的长和宽的延长线(延长至图像边缘)形成的十字架区域S2，确定为待处理图像中包含对焦区域的感兴趣区域。在实际应用中，待处理图像中的感兴趣区域可以展示在图像中，也可以不在图像中进行展示。

这里，本实施例对矩形区域的具体尺寸不做限定，矩形区域的长和宽可以分别为待处理图像的长和宽的预设倍数(例如1/20)，矩形区域的长和宽也可以与以对焦区域的对焦点为中心的预设区域的深度值(例如5×5的领域内的平均深度值)的大小成函数关系。例如，d为5×5的领域内的平均深度值，则矩形区域的长或宽可分解f＝k*1/d。其中，k为系数，在计算长和宽时，k的数值不同。

此外，感兴趣区域的形状也不限于前述矩形或十字架性，也可以为包含对焦区域的其他形状，例如，包含对焦区域的圆形区域。

在步骤S230，根据待处理图像中的感兴趣区域确定深度图像中对应的至少二个感兴趣区域。

可选地，基于待处理图像和深度图像的尺寸大小一致，根据待处理图像中的感兴趣区域的位置，获取深度图像中对应位置的区域作为深度图像中的感兴趣区域，进而确定深度图像中的至少二个感兴趣区域。例如，根据图310B中感兴趣区域的S1和S2的位置，获取深度图像中的对应位置的区域S1和S2作为深度图像中的感兴趣区域。

在这里说明，本实施例中是先获取待处理图像中包含对焦区域的感兴趣区域，在确定深度图像中对应的感兴趣区域，在其他实施例中，也可以先确定待处理图像中的对焦区域在深度图像中对应的对焦区域，再获取深度图像中包含对应的对焦区域的感兴趣区域。

在步骤S240，对深度图像中的至少二个感兴趣区域进行前背景分割，获得各感兴趣区域的分割阈值。

一种可选的实施方式中，对深度图像中的感兴趣区域的像素值进行前背景分割时，获得各感兴趣区域的分割阈值，为各感兴趣区域的前景和背景的像素值之间的类间方差最大时的分割阈值。

例如，将每个感兴趣及区域视为L阶的灰度图像，该灰度图像的像素值分布为[0,1,......L-1]。其中，像素值为i的像素个数用xi表示，所有的像素个数X＝x₀+x₁+…+x_L-1，每个像素值出现的频率为

p_i≥0，

将该灰度图像的像素值分为前景C0和背景C1，前景C0和背景C1的像素值被阈值t分开，前景C0的像素值分布为[0,1......t]，背景C1的像素值分布为[t+1,......L-1]；前景C0的像素点数占整体的比例为

背景C1的像素点数占整体的比例为

前景C0的像素值的平均值

背景C1的像素值的平均值

整体像素值的平均值

前背景的像素值两个类的类间方差可以表示为

在获取各感兴趣区域的分割阈值时，获取类间方差最大时的分割阈值，也即，

应当理解，获取各感兴趣区域的分割阈值的方式不限于上述方式，也可以采用其他方法来计算各感兴趣区域的分割阈值。

在步骤S250，将最小的分割阈值确定为深度图像的前背景分割阈值。

在获取深度图像中各感兴趣区域的前背景的分割阈值之后，将各感兴趣区域的分割阈值中最小的分割阈值确定为整体的深度图像的前背景分割阈值。

在步骤S260，根据前背景分割阈值对待处理图像进行背景虚化处理。

可选地，在获取深度图像的前背景分割阈值之后，根据前背景分割阈值对待处理图像进行阈值化处理，例如二值化或者反向二值化等，得到前背景的掩码图像(例如图310C)，并利用掩码图像对待处理图像以及待处理图像的模糊图像进行α混合(AlphaBlending)，即可得到背景虚化后的待处理图像。

在实际应用中，还可以通过将上述步骤中的部分步骤处理尺寸缩放后的图像，以进一步提高图像处理效率。例如，在执行步骤S210之前，将待处理图像的原始尺寸缩小至预设尺寸；从而在执行步骤S210时，获取预设尺寸的待处理图像的深度图像，也即，获取预设尺寸的深度图像；相应地，执行步骤S220至步骤S250时，也可以针对预设尺寸的深度图像进行处理；最后，在执行步骤S260时，根据深度图像的前背景分割阈值，对恢复至原始尺寸的待处理图像进行背景虚化处理。

在这里说明，本实施例仅以图像拍摄过程中对拍摄的初始图像进行虚化处理的场景为例，来说明本发明的图像处理方法，但本领域技术人员应当理解，在任意需要对待处理图像进行虚化处理的场景中，均可以参照本实施例的图像处理方法对待处理图像进行处理，以获取具有背景虚化效果的图像。

根据本发明实施例二的图像处理方法，通过获取待处理图像的深度图像，并根据待处理图像的对焦区域确定待处理图像中的感兴趣区域，确定深度图像中对应的感兴趣区域，从而通过对深度图像中的感兴趣区域进行前背景分割，来获取整体的深度图像的前背景分割阈值，用于对待处理图像进行虚化处理，有效地实现了待处理图像的虚化处理；而且无需对整体深度图像进行前背景分割处理，节省时间，从而提高整体的图像虚化处理效率；以及根据用户对待处理图像的操作确定对焦区域，进而确定包括对焦区域的感兴趣区域，具有用户交互性，能够广泛应用于配备触屏的智能终端。

本实施例的图像处理方法可以由任意适当的具有相应的图像或数据处理能力的设备执行，包括但不限于：终端设备以及集成在终端设备上的计算机程序、处理器等。

实施例三

参照图4，示出了根据本发明实施例三的一种图像处理装置的结构框图。

本发明实施例的图像处理装置包括：获取模块402，用于获取待处理图像的深度图像；确定模块404，用于根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域；分割模块406，用于对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值；虚化模块408，用于根据所述前背景分割阈值对所述待处理图像进行背景虚化处理。

可选地，所述获取模块402用于：通过双目匹配算法或者深度传感器获取待处理图像的深度图像。

可选地，如图5所示，在图4所示装置的基础上，所述确定模块404包括：第一获取单元4042，用于获取待处理图像中的对焦区域，并获取所述待处理图像中包含所述对焦区域的感兴趣区域；第一确定单元4044，用于根据所述待处理图像中的感兴趣区域确定所述深度图像中对应的感兴趣区域。

可选地，所述第一获取单元4042用于：根据用户对所述待处理图像的点击操作确定所述待处理图像中的对焦区域；或者，将待处理图像中预设范围内的区域确定为对焦区域。

可选地，所述第一获取单元4042还用于：将以所述对焦区域的对焦点为中心的矩形区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域；和/或，将以所述矩形区域的长和宽的延长线形成的十字架区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域。

可选地，所述矩形区域的长和宽分别为所述待处理图像的长和宽的预设倍数，或者，所述矩形区域的长和宽与以所述对焦点为中心的预设区域的深度值的大小成函数关系。

可选地，所述确定模块404包括：第二获取单元(图中未示出)，用于获取所述待处理图像中的对焦区域；第二确定单元(图中未示出)，用于根据所述待处理图像中的对焦区域确定所述深度图像中对应的对焦区域，并获取所述深度图像中包含所述对应的对焦区域的感兴趣区域。

可选地，所述确定模块404用于：根据所述待处理图像中的对焦区域确定所述深度图像中至少二个包含对焦区域的感兴趣区域。

可选地，所述分割模块406包括：分割单元4062，用于对所述深度图像中的所述至少二个感兴趣区域进行前背景分割，获得各感兴趣区域的分割阈值；第三确定单元4064，用于将所述各感兴趣区域的分割阈值中最小的分割阈值确定为所述深度图像的前背景分割阈值。

可选地，所述分割单元4062用于：获取各感兴趣区域的前景和背景的像素值的类间方差最大时的分割阈值。

可选地，所述虚化模块408包括：阈值化单元4082，用于根据所述前背景分割阈值对所述深度图像进行阈值化，获得所述深度图像的前背景的掩码图像；虚化单元4084，用于根据所述掩码图像对所述待处理图像进行背景虚化处理。

可选地，本实施例的图像处理装置还包括：尺寸调整模块410，用于将所述待处理图像的原始尺寸缩小至预设尺寸；所述获取模块402用于获取预设尺寸的待处理图像的深度图像；所述虚化模块408用于根据所述前背景分割阈值对所述原始尺寸的所述待处理图像进行背景虚化处理。

本实施例的图像处理装置用于实现前述方法实施例中相应的图像处理方法，并具有相应的方法实施例的有益效果，在此不再赘述。

本实施例还提供一种计算机程序，其包括有计算机程序指令，所述程序指令被处理器执行时用于实现本发明实施例提供的任一图像处理方法的步骤。

本实施例还提供一种计算机可读存储介质，其上存储有计算机程序指令，该程序指令被处理器执行时实现本发明实施例提供的任一图像处理方法的步骤。

实施例四

本发明实施例四提供了一种电子设备，例如可以是移动终端、个人计算机(PC)、平板电脑、服务器等。下面参考图6，其示出了适于用来实现本发明实施例的终端设备或服务器的电子设备600的结构示意图：如图6所示，电子设备600包括一个或多个处理器、通信元件等，所述一个或多个处理器例如：一个或多个中央处理单元(CPU)601，和/或一个或多个图像处理器(GPU)613等，处理器可以根据存储在只读存储器(ROM)602中的可执行指令或者从存储部分608加载到随机访问存储器(RAM)603中的可执行指令而执行各种适当的动作和处理。通信元件包括通信组件612和/或通信接口609。其中，通信组件612可包括但不限于网卡，所述网卡可包括但不限于IB(Infiniband)网卡，通信接口609包括诸如LAN卡、调制解调器等的网络接口卡的通信接口，通信接口609经由诸如因特网的网络执行通信处理。

处理器可与只读存储器602和/或随机访问存储器603中通信以执行可执行指令，通过通信总线604与通信组件612相连、并经通信组件612与其他目标设备通信，从而完成本发明实施例提供的任一项图像处理方特对应的操作，例如，获取待处理图像的深度图像；根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域；对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值；根据所述前背景分割阈值对所述待处理图像进行背景虚化处理。

此外，在RAM 603中，还可存储有装置操作所需的各种程序和数据。CPU601或GPU613、ROM602以及RAM603通过通信总线604彼此相连。在有RAM603的情况下，ROM602为可选模块。RAM603存储可执行指令，或在运行时向ROM602中写入可执行指令，可执行指令使处理器执行上述通信方法对应的操作。输入/输出(I/O)接口605也连接至通信总线604。通信组件612可以集成设置，也可以设置为具有多个子模块(例如多个IB网卡)，并在通信总线链接上。

以下部件连接至I/O接口605：包括键盘、鼠标等的输入部分606；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607；包括硬盘等的存储部分608；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信接口609。驱动器610也根据需要连接至I/O接口605。可拆卸介质611，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器610上，以便于从其上读出的计算机程序根据需要被安装入存储部分608。

需要说明的，如图6所示的架构仅为一种可选实现方式，在具体实践过程中，可根据实际需要对上述图6的部件数量和类型进行选择、删减、增加或替换；在不同功能部件设置上，也可采用分离设置或集成设置等实现方式，例如GPU和CPU可分离设置或者可将GPU集成在CPU上，通信元件可分离设置，也可集成设置在CPU或GPU上，等等。这些可替换的实施方式均落入本发明的保护范围。

特别地，根据本发明实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明实施例包括一种计算机程序产品，其包括有形地包含在机器可读介质上的计算机程序，计算机程序包含用于执行流程图所示的方法的程序代码，程序代码可包括对应执行本发明实施例提供的图像处理方法步骤对应的指令，例如，获取待处理图像的深度图像；根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域；对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值；根据所述前背景分割阈值对所述待处理图像进行背景虚化处理。在这样的实施例中，该计算机程序可以通过通信元件从网络上被下载和安装，和/或从可拆卸介质611被安装。在该计算机程序被处理器执行时，执行本发明实施例的方法中限定的上述功能。

需要指出，根据实施的需要，可将本发明实施例中描述的各个部件/步骤拆分为更多部件/步骤，也可将两个或多个部件/步骤或者部件/步骤的部分操作组合成新的部件/步骤，以实现本发明实施例的目的。

上述根据本发明实施例的方法可在硬件、固件中实现，或者被实现为可存储在记录介质(诸如CD ROM、RAM、软盘、硬盘或磁光盘)中的软件或计算机代码，或者被实现通过网络下载的原始存储在远程记录介质或非暂时机器可读介质中并将被存储在本地记录介质中的计算机代码，从而在此描述的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件(诸如ASIC或FPGA)的记录介质上的这样的软件处理。可以理解，计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储组件(例如，RAM、ROM、闪存等)，当所述软件或计算机代码被计算机、处理器或硬件访问且执行时，实现在此描述的处理方法。此外，当通用计算机访问用于实现在此示出的处理的代码时，代码的执行将通用计算机转换为用于执行在此示出的处理的专用计算机。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及方法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明实施例的范围。

以上所述，仅为本发明实施例的具体实施方式，但本发明实施例的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明实施例揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明实施例的保护范围之内。因此，本发明实施例的保护范围应以所述权利要求的保护范围为准。

Claims (22)

1.一种图像处理方法，包括：

获取待处理图像的深度图像；

根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域；

对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值；

根据所述前背景分割阈值对所述待处理图像进行背景虚化处理，

其中，所述根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域，包括：

根据所述待处理图像中的对焦区域确定所述深度图像中至少二个包含对焦区域的感兴趣区域，

所述对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值，包括：

对所述深度图像中的所述至少二个感兴趣区域进行前背景分割，获得各感兴趣区域的分割阈值；

将所述各感兴趣区域的分割阈值中最小的分割阈值确定为所述深度图像的前背景分割阈值。

2.根据权利要求1所述的方法，其中，所述获取待处理图像的深度图像，包括：

通过双目匹配算法或者深度传感器获取待处理图像的深度图像。

3.根据权利要求1所述的方法，其中，所述根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域，包括：

获取待处理图像中的对焦区域，并获取所述待处理图像中包含所述对焦区域的感兴趣区域；

根据所述待处理图像中的感兴趣区域确定所述深度图像中对应的感兴趣区域。

4.根据权利要求3所述的方法，其中，所述获取待处理图像中的对焦区域，包括：

根据用户对所述待处理图像的点击操作确定所述待处理图像中的对焦区域；或者，

将待处理图像中预设范围内的区域确定为对焦区域。

5.根据权利要求3所述的方法，其中，所述获取所述待处理图像中包含所述对焦区域的感兴趣区域，包括：

将以所述对焦区域的对焦点为中心的矩形区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域；和/或，

将以所述矩形区域的长和宽的延长线形成的十字架区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域。

6.根据权利要求5所述的方法，其中，所述矩形区域的长和宽分别为所述待处理图像的长和宽的预设倍数，或者，所述矩形区域的长和宽与以所述对焦点为中心的预设区域的深度值的大小成函数关系。

7.根据权利要求1所述的方法，其中，所述根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域，包括：

获取所述待处理图像中的对焦区域；

根据所述待处理图像中的对焦区域确定所述深度图像中对应的对焦区域，并获取所述深度图像中包含所述对应的对焦区域的感兴趣区域。

8.根据权利要求1至7中任一项所述的方法，其中，所述获得各感兴趣区域的分割阈值，包括：

获取各感兴趣区域的前景和背景的像素值的类间方差最大时的分割阈值。

9.根据权利要求1至7中任一项所述的方法，其中，所述根据所述前背景分割阈值对所述待处理图像进行背景虚化处理，包括：

根据所述前背景分割阈值对所述深度图像进行阈值化，获得所述深度图像的前背景的掩码图像；

根据所述掩码图像对所述待处理图像进行背景虚化处理。

10.根据权利要求1至7中任一项所述的方法，其中，在所述获取待处理图像的深度图像之前，还包括：

将所述待处理图像的原始尺寸缩小至预设尺寸；

所述获取待处理图像的深度图像，包括：

获取预设尺寸的待处理图像的深度图像；

所述根据所述前背景分割阈值对所述待处理图像进行背景虚化处理，包括：

根据所述前背景分割阈值对所述原始尺寸的所述待处理图像进行背景虚化处理。

11.一种图像处理装置，包括：

获取模块，用于获取待处理图像的深度图像；

确定模块，用于根据所述待处理图像中的对焦区域确定所述深度图像中的感兴趣区域；

分割模块，用于对所述深度图像中的感兴趣区域进行前背景分割，得到对应的前背景分割阈值；

虚化模块，用于根据所述前背景分割阈值对所述待处理图像进行背景虚化处理，

其中，所述确定模块用于：

根据所述待处理图像中的对焦区域确定所述深度图像中至少二个包含对焦区域的感兴趣区域，

其中，所述分割模块包括：

分割单元，用于对所述深度图像中的所述至少二个感兴趣区域进行前背景分割，获得各感兴趣区域的分割阈值；

第三确定单元，用于将所述各感兴趣区域的分割阈值中最小的分割阈值确定为所述深度图像的前背景分割阈值。

12.根据权利要求11所述的装置，其中，所述获取模块用于：

通过双目匹配算法或者深度传感器获取待处理图像的深度图像。

13.根据权利要求11所述的装置，其中，所述确定模块包括：

第一获取单元，用于获取待处理图像中的对焦区域，并获取所述待处理图像中包含所述对焦区域的感兴趣区域；

第一确定单元，用于根据所述待处理图像中的感兴趣区域确定所述深度图像中对应的感兴趣区域。

14.根据权利要求13所述的装置，其中，所述第一获取单元用于：

根据用户对所述待处理图像的点击操作确定所述待处理图像中的对焦区域；或者，

将待处理图像中预设范围内的区域确定为对焦区域。

15.根据权利要求13所述的装置，其中，所述第一获取单元还用于：

将以所述对焦区域的对焦点为中心的矩形区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域；和/或，

将以所述矩形区域的长和宽的延长线形成的十字架区域确定为所述待处理图像中包含所述对焦区域的感兴趣区域。

16.根据权利要求15所述的装置，其中，所述矩形区域的长和宽分别为所述待处理图像的长和宽的预设倍数，或者，所述矩形区域的长和宽与以所述对焦点为中心的预设区域的深度值的大小成函数关系。

17.根据权利要求11所述的装置，其中，所述确定模块包括：

第二获取单元，用于获取所述待处理图像中的对焦区域；

第二确定单元，用于根据所述待处理图像中的对焦区域确定所述深度图像中对应的对焦区域，并获取所述深度图像中包含所述对应的对焦区域的感兴趣区域。

18.根据权利要求11至17中任一项所述的装置，其中，所述分割单元用于：

获取各感兴趣区域的前景和背景的像素值的类间方差最大时的分割阈值。

19.根据权利要求11至17中任一项所述的装置，其中，所述虚化模块包括：

阈值化单元，用于根据所述前背景分割阈值对所述深度图像进行阈值化，获得所述深度图像的前背景的掩码图像；

虚化单元，用于根据所述掩码图像对所述待处理图像进行背景虚化处理。

20.根据权利要求11至17中任一项所述的装置，其中，还包括：

尺寸调整模块，用于将所述待处理图像的原始尺寸缩小至预设尺寸；

所述获取模块用于获取预设尺寸的待处理图像的深度图像；

所述虚化模块用于根据所述前背景分割阈值对所述原始尺寸的所述待处理图像进行背景虚化处理。

21.一种计算机可读存储介质，其上存储有计算机程序指令，其中，所述程序指令被处理器执行时用于实现权利要求1至10中任一项所述的图像处理方法对应的步骤。

22.一种电子设备，包括：处理器、存储器、通信元件和通信总线，所述处理器、所述存储器和所述通信元件通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1至10中任一项所述图像处理方法对应的步骤。

Images