CN113850739A - 图像处理方法及装置 - Google Patents

Abstract

本申请公开了一种图像处理方法及装置，属于图像处理技术领域。该方法包括：获取第一图像和设定光斑模板；对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第一虚化半径图；根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图；根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图；根据所述光斑效果图和所述背景虚化图，得到第二图像。

Description

图像处理方法及装置

技术领域

本申请属于图像处理技术领域，具体涉及一种图像处理方法及装置。

背景技术

近年来，利用手机拍摄背景虚化效果已经是很多手机上最基本的功能，随之虚化背景上的光斑也成为了用户拍照的关注点。

目前，通过算法合成的带有光斑的虚化效果一般都是模拟无口径蚀的理想单反效果，但是对于真实的单反会存在口径蚀和相场扭曲现象，导致光斑方向呈现出仅围绕图像中心旋转，即光斑方向一致的现象。

发明内容

本申请实施例的目的是提供一种图像处理方法，能够解决现有的图像光斑方向一致的问题。

第一方面，本申请实施例提供了一种图像处理方法，该方法包括：

获取第一图像和设定光斑模板；

对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图；

根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图；

根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图；

根据所述光斑效果图和所述背景虚化图，得到第二图像。

第二方面，本申请实施例提供了一种图像处理装置，该装置包括：

第一获取模块，用于获取第一图像和设定光斑模板；

第一处理模块，用于对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图；

第二处理模块，用于根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图；

第二获取模块，用于根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图；

第三处理模块，用于根据所述光斑效果图和所述背景虚化图，得到第二图像。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。

第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。

第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。

在本申请实施例中，其在获取第一图像和设定光斑模板之后，会对第一图像进行处理得到第一图像的高亮点图、该高亮点图对应的第一虚化半径图、第一图像对应的第二虚化半径图和变换亮度图，并根据第二虚化半径图对设定光斑模板进行旋转，以及根据旋转后的设定光斑模板和高亮点图，得到光斑效果图，同时根据第一图像、第一虚化半径图、设定光斑模板和变换亮度图，得到背景虚化图，进而将光斑效果图和背景虚化图融合以得到第二图像。即，其能够通过设定光斑模板生成不同光斑方向不同的虚化效果，提高用户的观感体验。

附图说明

图1是本申请实施例提供的图像处理方法的流程图；

图2是本申请实施例提供的图像处理装置的结构示意图；

图3是本申请实施例提供的电子设备的结构示意图；

图4是本申请另一实施例提供的电子设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。

下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的图像处理方法进行详细地说明。

请参看图1，其是本申请实施例提供的一种图像处理方法的流程图。该方法可以应用于电子设备中，该电子设备可以为手机、平板电脑、笔记本电脑等。如图1所示，该方法可以包括步骤1100～步骤1500，以下予以详细说明。

步骤1100，获取第一图像和设定光斑模板。

第一图像可以是电子设备的拍摄预览界面所显示的预览图像，也可以是电子设备的相册应用中所显示的任意图像。

在第一图像为电子设备的拍摄预览界面所显示的预览图像的情况下，表明用户正在调用电子设备的相机应用程序拍照，则拍照后所生成的图像为第二图像。

在第一图像为电子设备的相册应用中所显示的任意图像的情况下，表明用户需要对已经拍摄好的任意图像进行处理，则处理后所生成的图像为第二图像。

设定光斑模板可以是圆形光斑模板，也可以是五角星光斑模板，还可以是蝴蝶型光斑模板，当然，该设定光斑模板还可以是其他形状的光斑模板，本实施例在此不做赘述。

在获取第一图像和设定光斑模板之后，进入：

步骤1200，对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图。

本实施例中，本步骤1200中对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图可以进一步包括如下步骤1210～步骤1250：

步骤1210，根据所述第一图像，获得与所述第一图像对应的深度图。

深度图中的每个像素点对应的像素值可以称之为深度值，该深度值用于表示电子设备中的摄像装置距离拍摄场景中的各点的真实距离。

本步骤1210中，可以将该第一图像输入至该深度学习网络中的深度估计网络模块，从而能够得到第一图像对应的深度图。

步骤1220，根据所述深度图，得到所述深度图对应的第一虚化半径图。

第一虚化半径图中的每个像素点对应的像素值可以称之为虚化半径值，该虚化半径值用于表示深度图中的各点的虚化程度。

本步骤1220中，可以根据深度图和用户点击的对焦点信息确定景深范围，并计算不同深度图中每个像素点的深度值对应的虚化半径值，得到景深掩膜(Mask)图和第一虚化半径图。

步骤1230，根据所述第一图像和相机响应函数，得到所述变换亮度图。

相机响应函数能够反映拍摄场景中的各点的真实亮度与第一图像中的每个像素点对应的像素值之间的映射关系。其中，第一图像中的像素点对应的像素值为第一图像中的像素点对应的亮度值。

变换亮度图中的每个像素点对应的像素值称之为变换亮度值，该变换亮度值用于表示拍摄场景中的各点的真实亮度。

本步骤1230中，可以将第一图像进行相机响应函数变换，得到对应的变换亮度图。

步骤1240，对所述变换亮度图进行高亮检测，得到所述高亮点图。

高亮点图能够反映拍摄场景中的光源点所在位置，也就是说，高亮点图为将拍摄场景中的光源点所在位置标记出来的图像，该光源点所在位置可以称之为高亮位置。

本步骤1240中，可以按行对变换亮度图进行高亮检测，将大于或等于变换亮度图的平均像素值的像素点对应的像素值设置为255，将小于变换亮度图的平均像素值的像素点对应的像素值设置为0，也就是说，像素值设置为255的像素点为高亮点。

步骤1250，根据所述高亮点图和所述第一虚化半径图，得到所述高亮点图对应的第二虚化半径图。

第二虚化半径图可以反映出高亮点图中的高亮位置对应的虚化半径值，并且，与高亮点图中的高亮位置对应的虚化半径值用于表示高亮点图中的高亮位置的虚化程度。

本步骤1250中，可以根据高亮点图，对第一虚化半径图进行处理，得到处理的第二虚化图作为第二虚化半径图。

具体的，可以先对高亮点图按照对应位置虚化半径值进行膨胀，可以理解的是，对高亮点图按照对应位置虚化半径值进行膨胀处理可以使得高亮点图中的高亮区域扩大。在此，仅保留膨胀后区域对应的虚化半径值，并将其他区域对应的虚化半径值设置为0，得到第二虚化半径图。

在对所述第一图像进行处理，得到所述第一图像的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图之后，进入：

步骤1300，根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图。

第一图像对应的光斑效果图中的光斑方向不同，即，第一图像对应的光斑效果图为旋转方向不同的光斑效果。

本实施例中，本步骤1300中根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图可以进一步包括如下步骤1310～步骤1330：

步骤1310，根据所述第二虚化半径图中每个第一像素点的像素值，调整所述设定光斑模板，得到与每个所述第一像素点对应的光斑模板。

第一像素点可以是第一虚化半径图中的像素点对应的像素值不为零的像素点。

以设定光斑模板为圆形光斑模板为例，可以遍历第二虚化半径图中第一像素点，并根据该第一像素点的像素值调整该圆形光斑模板，得到与每个第一像素点对应的光斑模板。也就是说，得到的不同第一像素点对应的不同光斑模板为大小不同的圆形光斑模板。例如可以是在第一像素点的像素值较大时，将圆形光斑模板调整的较大得到与该第一像素点对应的光斑模板，在第一像素点的像素值较小时，将圆形光斑模板调整的较小得到与该第一像素点对应的光斑模板，即，圆形光斑模板的调整值与第一像素点的像素值成正比。

以设定光斑模板为五角星光斑模板为例，可以遍历第二虚化半径图中第一像素点，并根据该第一像素点的像素值调整该五角星光斑模板，得到与每个第一像素点对应的光斑模板。也就是说，得到的不同第一像素点对应的不同光斑模板为大小不同的五角星光斑模板。

步骤1320，基于第一设定旋转方向对每个所述第一像素点对应的光斑模板进行旋转，得到与每个所述第一像素点对应的目标光斑模板。

第一设定旋转方向可以为旋转中心点与第二虚化半径图中的第一像素点的向量切线方向。其中，旋转中心点可以是第一图像的图像中心，也可以是用户点击的对焦点。

在一个例子中，本步骤1320中基于第一设定旋转方向对每个所述第一像素点对应的光斑模板进行旋转，得到与每个所述第一像素点对应的目标光斑模板可以进一步包括：

基于第一设定旋转方向对每个所述第一像素点对应的光斑模板进行旋转，得到与每个所述第一像素点对应的旋转后的光斑模板，作为每个所述第一像素点对应的目标光斑模板。

继续以设定光斑模板为圆形光斑模板为例，在根据以上步骤1310得到第二虚化半径图中每个第一像素点对应的光斑模板之后，便可基于第一设定旋转方向对每个第一像素点对应的光斑模板进行旋转变换得到旋转后的光斑模板，第一设定旋转方向为旋转中心点和对应的第一像素点的向量切线方向。

继续以设定光斑模型为五角星光斑模板为例，在根据步骤以上1310得到与第二虚化半径图中每个第一像素点对应的光斑模板之后，便可基于第一设定旋转方向对每个第一像素点对应的光斑模板进行旋转变换得到旋转后的光斑模板。

根据本例子，其能够对第一图像基于设定光斑模板生成光斑方向不同的虚化效果，从而能够改善已有光斑方向单一的问题。

在一个例子中，本步骤1320中基于第一设定旋转方向对每个所述第一像素点对应的光斑模板进行旋转，得到与每个所述第一像素点对应的目标光斑模板可以进一步包括如下步骤1321～步骤1322：

步骤1321，基于所述第一设定旋转方向对每个所述第一像素点对应的光斑模板进行旋转，得到与每个所述第一像素点对应的旋转后的光斑模板。

继续以设定光斑模板为圆形光斑模板为例，在根据以上步骤1310得到第一虚化半径图中每个第一像素点对应的光斑模板之后，便可基于第一设定旋转方向对每个第一像素点对应的光斑模板进行旋转变换得到旋转后的光斑模板，第一设定旋转方向为旋转中心点和对应的第一像素点的向量切线方向。

步骤1322，基于第一设定拉伸参数对每个所述第一像素点对应的旋转后的光斑模板进行拉伸，得到与每个所述第一像素点对应的目标光斑模板。

第一设定拉伸参数包括拉伸方向和拉伸比例值，拉伸比例值越大，拉伸的越多。其中，拉伸方向包括第一像素点的x方向和y方向。

继续以设定光斑模板为圆形光斑模板为例，在根据以上步骤1321得到第二虚化半径图中每个第一像素点对应的旋转后的光斑模板之后，便可基于第一设定拉伸参数对每个第一像素点对应的旋转后的光斑模板进行拉伸形变得到拉伸后的光斑模板，作为与每个第一像素点对应的目标光斑模板。可以理解的是，不同第一像素点对应的目标光斑模板为不同的橄榄型光斑模板。

根据本例子，其能够对第一图像基于圆形光斑模板生成不同旋转方向和拉伸形变的橄榄型光斑模板，从而可以模拟出光斑方向不同的虚化效果。

步骤1330，根据每个所述第一像素点对应的目标光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图。

本步骤1330中，可以采用与每个第一像素点对应的目标光斑模板对高亮点图进行滤波，从而得到第一图像对应的光斑效果图。

继续以设定光斑模板为圆形光斑模板为例，在根据步骤1320得到每个第一像素点对应的橄榄型光斑模板之后，便可基于每个第一像素点对应的橄榄型光斑模板，对高亮点图进行过滤，从而得到光斑效果图。

继续以设定光斑模板为五角星光斑模板为例，在根据步骤1320得到每个第一像素点对应的五角星光斑模板之后，便可基于第一像素点对应的五角星光斑模板，对高亮点图进行过滤，从而得到光斑效果图。

在根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图之后，进入：

步骤1400，根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图。

背景虚化图包括第一背景虚化图和第二背景虚化图。其中，第一背景虚化图为亮度通道的具有旋转感的背景虚化效果图。第二背景虚化图为颜色通道的具有旋转感的背景虚化效果图。

本实施例中，本步骤1400中根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图可以进一步包括如下步骤1410～步骤1420：

步骤1410，根据所述第一虚化半径图中每个第二像素点的像素值，调整所述设定光斑模板，得到与每个所述第二像素点的像素值对应的光斑模板。

第二像素点可以是第一虚化半径图中的像素点对应的像素值不为零的像素点。

以设定光斑模板为圆形光斑模板为例，可以遍历第一背景虚化图中第二像素点，并根据该第二像素点的像素值调整该圆形光斑模板，得到与每个第二像素点对应的光斑模板。也就是说，得到的不同第二像素点对应的不同光斑模板为大小不同的圆形光斑模板。例如可以是在第二像素点的像素值较大时，将圆形光斑模板调整的较大得到与该第二像素点对应的光斑模板，在第二像素点的像素值较小时，可以将圆形光斑模板调整的较小得到与该第二像素点对应的光斑模板，即，圆形光斑模板的调整值与第二像素点的像素值成正比。

以设定光斑模板为五角星光斑模板为例，可以遍历第一背景虚化图中第二像素点，并根据该第二像素点的像素值调整该五角星光斑模板，得到与每个第二像素点对应的光斑模板。也就是说，得到的不同第二像素点对应的不同光斑模板为大小不同的五角星光斑模板。

步骤1420，根据每个所述第二像素点对应的光斑模板、所述亮度变换图和所述第一图像，得到第一背景虚化图和第二背景虚化图。

本实施例中，本步骤1420中根据每个所述第二像素点对应的光斑模板、所述亮度变换图和所述第一图像，得到第一背景虚化图和第二背景虚化图可以进一步包括如下步骤1421～步骤1423：

步骤1421，基于第二设定旋转方向对每个所述第二像素点对应的光斑模板进行旋转，得到与每个所述第二像素点对应的目标光斑模板。

第二设定旋转方向可以为旋转中心点与第一虚化半径图中的第二像素点的向量切线方向。其中，旋转中心点可以是第一图像的图像中心，也可以是用户点击的对焦点。

在一个例子中，本步骤1421中基于第二设定旋转方向对每个所述第二像素点对应的光斑模板进行旋转，得到与每个所述第二像素点对应的目标光斑模板可以进一步包括：

基于第二设定旋转方向对每个所述第二像素点对应的光斑模板进行旋转，得到与每个所述第二像素点对应的旋转后的光斑模板，作为每个所述第二像素点对应的目标光斑模板。

继续以设定光斑模板为圆形光斑模板为例，在根据以上步骤1410得到第一虚化半径图中每个第二像素点对应的光斑模板之后，便可基于第二设定旋转方向对每个第二像素点对应的光斑模板进行旋转变换得到旋转后的光斑模板，第二设定旋转方向为旋转中心点和对应的第二像素点的向量切线方向。

继续以设定光斑模型为五角星光斑模板为例，在根据以上步骤1410得到与第一虚化半径图中每个第二像素点对应的光斑模板之后，便可基于第二设定旋转方向对每个第二像素点对应的光斑模板进行旋转变换得到旋转后的光斑模板。

根据本例子，其能够对第一图像基于设定光斑模板生成亮度通道的具有旋转感的背景虚化效果。

在一个例子中，本步骤1421中基于第二设定旋转方向对每个所述第二像素点对应的光斑模板进行旋转，得到与每个所述第二像素点对应的目标光斑模板还可以进一步包括：基于所述第二设定旋转方向对每个所述第二像素点对应的光斑模板进行旋转，得到与每个所述第二像素点对应的旋转后的光斑模板；基于第二设定拉伸参数对每个所述第二像素点对应的旋转后的光斑模板进行拉伸，得到与每个所述第二像素点对应的目标光斑模板。

第二设定拉伸参数包括拉伸方向和拉伸比例值，拉伸比例值越大，拉伸的越多。其中，拉伸方向包括第二像素点的x方向和y方向。

继续以设定光斑模板为圆形光斑模板为例，在根据以上步骤1410得到第一虚化半径图中每个第二像素点对应的旋转后的光斑模板之后，便可基于第二设定拉伸参数对每个第二像素点对应的旋转后的光斑模板进行拉伸形变得到拉伸后的光斑模板，作为与每个第二像素点对应的目标光斑模板。可以理解的是，不同第二像素点对应的目标光斑模板为不同的橄榄型光斑模板。

根据本例子，其能够对第一图像基于圆形光斑模板生成不同旋转方向和拉伸形变的橄榄型光斑模板，从而可以模拟出光斑方向不同的虚化效果。

步骤1422，根据每个所述第二像素点对应的目标光斑模板和所述亮度变换图，得到所述第一背景虚化图。

本步骤1422中，可以采用与每个第二像素点对应的目标光斑模板对亮度变换图进行滤波，从而得到第一图像对应的第一背景虚化图。

继续以设定光斑模板为圆形光斑模板为例，在根据步骤1421得到每个第二像素点对应的橄榄型光斑模板之后，便可基于每个第二像素点对应的橄榄型光斑模板，对亮度变换图进行过滤，从而得到第一背景虚化图。

继续以设定光斑模板为五角星光斑模板为例，在根据步骤1421得到每个第二像素点对应的五角星光斑模板之后，便可基于每个第二像素点对应的五角星光斑模板，对亮度变换图进行过滤，从而得到第一背景虚化图。

步骤1423，根据每个所述第二像素点对应的目标光斑模板和所述第一图像，得到所述第二背景虚化图。

本步骤1423中，可以采用与每个第二像素点对应的目标光斑模板对第一图像进行滤波，从而得到第一图像对应的第二背景虚化图。

继续以设定光斑模板为圆形光斑模板为例，在根据步骤1421得到每个第二像素点对应的橄榄型光斑模板之后，便可基于每个第二像素点对应的橄榄型光斑模板，对第一图像进行过滤，从而得到第二背景虚化图。

继续以设定光斑模板为五角星光斑模板为例，在根据步骤1421得到每个第二像素点对应的五角星光斑模板之后，便可基于每个第二像素点对应的五角星光斑模板，对第一图像进行过滤，从而得到第二背景虚化图。

在根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图之后，进入：

步骤1500，根据所述光斑效果图和所述背景虚化图，得到第二图像。

第二图像为光斑方向不同且虚化背景旋转的焦外旋转虚化结果图。

本实施例中，本步骤1500中根据所述光斑效果图和所述背景虚化图，得到第二图像可以进一步包括如下步骤1510～步骤1530：

步骤1510，根据所述光斑效果图和所述第一背景虚化效果图，得到第三图像。

第三图像为虚化背景旋转和光斑方向不同的亮度通道虚化效果图。

本步骤1510中，可以将光斑效果图和第一背景虚化图叠加，增强光斑的亮度值，并进行相机响应函数的反变换，得到虚化背景旋转和光斑方向不同的亮度通道虚化效果图。

步骤1520，根据所述光斑效果图和所述第二背景虚化效果图，得到第四图像。

第四图像为虚化背景旋转和光斑方向不同的颜色通道虚化效果图

本步骤1520中，可以将光斑效果图和第二背景虚化图叠加，增强光斑区域颜色饱和度信息，得到虚化背景旋转和光斑方向不同的颜色通道虚化效果图。

步骤1530，根据所述第三图像和所述第四图像，得到所述第二图像。

本步骤1530中，将第三图像和第四图像融合得到第二图像。

根据本实施例，其在获取第一图像和设定光斑模板之后，会对第一图像进行处理得到第一图像的高亮点图、该高亮点图对应的第一虚化半径图、第一图像对应的第二虚化半径图和变换亮度图，并根据第二虚化半径图对设定光斑模板进行旋转，以及根据旋转后的设定光斑模板和高亮点图，得到光斑效果图，同时根据第一图像、第一虚化半径图、设定光斑模板和变换亮度图，得到背景虚化图，进而将光斑效果图和背景虚化图融合以得到第二图像。即，其能够通过设定光斑模板生成不同光斑方向不同的虚化效果，提高用户的观感体验。

与上述实施例相对应，参见图2，本申请实施例还提供一种图像处理装置200，包括：

获取模块210，用于获取第一图像和设定光斑模板。

第一处理模块220，用于对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图。

第二处理模块230，用于根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图。

第三获取模块240，用于根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图。

第四处理模块250，用于根据所述光斑效果图和所述背景虚化图，得到第二图像。

在一个实施例中，所述第一处理模块220，具体用于：根据所述第一图像，得到所述第一图像对应的深度图；根据所述深度图，得到所述深度图对应的第一虚化半径图；根据所述第一图像和相机响应函数，得到所述变换亮度图；对所述变换亮度图进行高亮检测，得到所述高亮点图；根据所述高亮点图和所述第一虚化半径图，得到所述高亮点图对应的第二虚化半径图。

在一个实施例中，所述第二处理模块230，具体用于：根据所述第二虚化半径图中每个第一像素点的像素值，调整所述设定光斑模板，得到与每个所述第一像素点对应的光斑模板；基于第一设定旋转方向对每个所述第一像素点对应的光斑模板进行旋转，得到与每个所述第一像素点对应的目标光斑模板；根据每个所述第一像素点对应的目标光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图。

在一个实施例中，所述背景虚化图包括第一背景虚化图和第二背景虚化图。

所述第三处理模块240，具体用于：根据所述第一虚化半径图中每个第二像素点的像素值，调整所述设定光斑模板，得到与每个所述第二像素点对应的光斑模板；根据每个所述第二像素点对应的光斑模板、所述变换亮度图和所述第一图像，得到第一背景虚化图和第二背景虚化图。

在一个实施例中，所述第三处理模块240，具体用于：基于第二设定旋转方向对每个所述第二像素点对应的光斑模板进行旋转，得到与每个所述第二像素点对应的目标光斑模板；根据每个所述第二像素点对应的目标光斑模板和所述亮度变换图，得到所述第一背景虚化图；以及，根据每个所述第二像素点对应的目标光斑模板和所述第一图像，得到所述第二背景虚化图。

本申请实施例中的图像处理装置可以是装置，也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备，也可以为非移动电子设备。示例性的，移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personaldigital assistant，PDA)等，非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。

本申请实施例中的图像处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。

本申请实施例提供的图像处理装置能够实现上述方法实施例实现的各个过程，为避免重复，这里不再赘述。

与上述实施例相对应，可选的，如图3所示，本申请实施例还提供一种电子设备300，包括处理器301，存储器302，存储在存储器302上并可在所述处理器301上运行的程序或指令，该程序或指令被处理器301执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要说明的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。

图4为实现本申请实施例的一种电子设备的硬件结构示意图。

该电子设备400包括但不限于：射频单元401、网络模块402、音频输出单元403、输入单元404、传感器405、显示单元406、用户输入单元407、接口单元408、存储器409、以及处理器410等部件。

本领域技术人员可以理解，电子设备400还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器410逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图4中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。

其中，处理器410，用于获取第一图像和设定光斑模板；对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图；根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图；根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图；根据所述光斑效果图和所述背景虚化图，得到第二图像。

在一个实施例中，处理器410，用于根据所述第一图像，得到所述第一图像对应的深度图；根据所述深度图，得到所述深度图对应的第一虚化半径图；根据所述第一图像和相机响应函数，得到所述变换亮度图；对所述变换亮度图进行高亮检测，得到所述高亮点图；根据所述高亮点图和所述第一虚化半径图，得到所述高亮点图对应的第二虚化半径图。

在一个实施例中，处理器410，还用于根据所述第二虚化半径图中每个第一像素点的像素值，调整所述设定光斑模板，得到与每个所述第一像素点对应的光斑模板；基于第一设定旋转方向对每个所述第一像素点对应的光斑模板进行旋转，得到与每个所述第一像素点对应的目标光斑模板；根据每个所述第一像素点对应的目标光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图。

在一个实施例中，处理器410，还用于根据所述第一虚化半径图中每个第二像素点的像素值，调整所述设定光斑模板，得到与每个所述第二像素点对应的光斑模板；根据每个所述第二像素点对应的光斑模板、所述变换亮度图和所述第一图像，得到第一背景虚化图和第二背景虚化图。

在一个实施例中，处理器410，还用于基于第二设定旋转方向对每个所述第二像素点对应的光斑模板进行旋转，得到与每个所述第二像素点对应的目标光斑模板；根据每个所述第二像素点对应的目标光斑模板和所述亮度变换图，得到所述第一背景虚化图；以及，根据每个所述第二像素点对应的目标光斑模板和所述第一图像，得到所述第二背景虚化图。

应理解的是，本申请实施例中，输入单元404可以包括图形处理器(GraphicsProcessing Unit，GPU)4041和麦克风4042，图形处理器4041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元406可包括显示面板4061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板4061。用户输入单元407包括触控面板4071以及其他输入设备4072。触控面板4071，也称为触摸屏。触控面板4071可包括触摸检测装置和触摸控制器两个部分。其他输入设备4072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。存储器409可用于存储软件程序以及各种数据，包括但不限于应用程序和操作系统。处理器410可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器410中。

本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。

本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述图像处理实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。

上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims (10)

1.一种图像处理方法，其特征在于，所述方法包括：

获取第一图像和设定光斑模板；

对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图；

根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图；

根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图；

根据所述光斑效果图和所述背景虚化图，得到第二图像。

2.根据权利要求1所述的方法，其特征在于，所述对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图，包括：

根据所述第一图像，得到所述第一图像对应的深度图；

根据所述深度图，得到所述深度图对应的第一虚化半径图；

根据所述第一图像和相机响应函数，得到变换亮度图；

对所述变换亮度图进行高亮检测，得到所述高亮点图；

根据所述高亮点图和所述第一虚化半径图，得到所述高亮点图对应的第二虚化半径图。

3.根据权利要求1所述的方法，其特征在于，所述根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图，包括：

根据所述第二虚化半径图中每个第一像素点的像素值，调整所述设定光斑模板，得到与每个所述第一像素点对应的光斑模板；

基于第一设定旋转方向对每个所述第一像素点对应的光斑模板进行旋转，得到与每个所述第一像素点对应的目标光斑模板；

根据每个所述第一像素点对应的目标光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图。

4.根据权利要求1所述的方法，其特征在于，所述背景虚化图包括第一背景虚化图和第二背景虚化图，

所述根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图，包括：

根据所述第一虚化半径图中每个第二像素点的像素值，调整所述设定光斑模板，得到与每个所述第二像素点对应的光斑模板；

根据每个所述第二像素点对应的光斑模板、所述变换亮度图和所述第一图像，得到第一背景虚化图和第二背景虚化图。

5.根据权利要求4所述的方法，其特征在于，所述根据每个所述第二像素点对应的光斑模板、所述变换亮度图和所述第一图像，得到第一背景虚化图和第二背景虚化图，包括：

基于第二设定旋转方向对每个所述第二像素点对应的光斑模板进行旋转，得到与每个所述第二像素点对应的目标光斑模板；

根据每个所述第二像素点对应的目标光斑模板和所述亮度变换图，得到所述第一背景虚化图；以及，

根据每个所述第二像素点对应的目标光斑模板和所述第一图像，得到所述第二背景虚化图。

6.一种图像处理装置，其特征在于，所述装置包括：

获取模块，用于获取第一图像和设定光斑模板；

第一处理模块，用于对所述第一图像进行处理，得到所述第一图像对应的第一虚化半径图、变换亮度图、高亮点图和所述高亮点图对应的第二虚化半径图；

第二处理模块，用于根据所述第二虚化半径图对所述设定光斑模板进行旋转，并根据旋转后的设定光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图；

第三处理模块，用于根据所述第一图像、所述第一虚化半径图、所述设定光斑模板和所述变换亮度图，得到所述第一图像对应的背景虚化图；

第四处理模块，用于根据所述光斑效果图和所述背景虚化图，得到第二图像。

7.根据权利要求6所述的装置，其特征在于，所述第一处理模块，具体用于：

根据所述第一图像，得到所述第一图像对应的深度图；

根据所述深度图，得到所述深度图对应的第一虚化半径图；

根据所述第一图像和相机响应函数，得到所述变换亮度图；

对所述变换亮度图进行高亮检测，得到所述高亮点图；

根据所述高亮点图和所述第一虚化半径图，得到所述高亮点图对应的第二虚化半径图。

8.根据权利要求6所述的装置，其特征在于，所述第二处理模块，具体用于：

根据所述第二虚化半径图中每个第一像素点的像素值，调整所述设定光斑模板，得到与每个所述第一像素点对应的光斑模板；

基于第一设定旋转方向对每个所述第一像素点对应的光斑模板进行旋转，得到与每个所述第一像素点对应的目标光斑模板；

根据每个所述第一像素点对应的目标光斑模板和所述高亮点图，得到所述第一图像对应的光斑效果图。

9.根据权利要求6所述的装置，其特征在于，所述背景虚化图包括第一背景虚化图和第二背景虚化图，

所述第三处理模块，具体用于：

根据所述第一虚化半径图中每个第二像素点的像素值，调整所述设定光斑模板，得到与每个所述第二像素点对应的光斑模板；

根据每个所述第二像素点对应的光斑模板、所述变换亮度图和所述第一图像，得到第一背景虚化图和第二背景虚化图。

10.根据权利要求9所述的装置，其特征在于，所述第三处理模块，具体用于：

基于第二设定旋转方向对每个所述第二像素点对应的光斑模板进行旋转，得到与每个所述第二像素点对应的目标光斑模板；

根据每个所述第二像素点对应的目标光斑模板和所述亮度变换图，得到所述第一背景虚化图；

根据每个所述第二像素点对应的目标光斑模板和所述第一图像，得到所述第二背景虚化图。

Images