CN109741280B - 图像处理方法、装置、存储介质及电子设备 - Google Patents

Abstract

本申请实施例公开了图像处理方法、装置、存储介质及电子设备。其中方法包括：当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓；根据所述人脸轮廓将所述待处理图像分割为至少两个子图像；确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像。本申请实施例通过采用上述技术方案，通过识别人脸轮廓将待处理图像进行分割，得到两个或两个以上的子图像，确定各子图像适合的图像处理方式，进行图像处理，避免了对待处理图像进行整体性的图像处理，提高图像处理效果。

Description

图像处理方法、装置、存储介质及电子设备

技术领域

本申请实施例涉及电子设备技术领域，尤其涉及一种图像处理方法、装置、存储介质及电子设备。

背景技术

随着手机和平板电脑等电子设备的不断发展，越来越多的电子设备的拍照功能被用户广泛使用，并且用户对电子设备的拍照性能的要求也越来越高。

为了满足用户对拍摄图像的不同需求，电子设备以不同的方式对拍摄图像进行处理。在图像处理过程中往往对整个图像进行亮度、饱和度等参数的调节，由于拍摄图像中内容复杂，尤其是在图像中存在人像和其他物体时，不同的物体采用同一种处理方式时，出现不适应部分图像的情况，无法全面提高图像质量。

发明内容

本申请实施例提供图像处理方法、装置、存储介质及电子设备，提高图像质量。

第一方面，本申请实施例提供了一种图像处理方法，包括：

当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓；

根据所述人脸轮廓将所述待处理图像分割为至少两个子图像；

确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像，其中，确定的所述各子图像的图像处理方式为至少两种图像处理方式。

第二方面，本申请实施例提供了一种图像处理装置，包括：

人脸轮廓确定模块，用于当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓；

子图像分割模块，用于根据所述人脸轮廓将所述待处理图像分割为至少两个子图像；

图像处理模块，用于确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像，其中，确定的所述各子图像的图像处理方式为至少两种图像处理方式。

第三方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本申请实施例所述的图像处理方法。

第四方面，本申请实施例提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如本申请实施例所述的图像处理方法。

本申请实施例中提供的图像处理方法，当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓，根据所述人脸轮廓将所述待处理图像分割为至少两个子图像，确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像。通过采用上述方案，通过识别人脸轮廓将待处理图像进行分割，得到两个或两个以上的子图像，确定各子图像适合的图像处理方式，进行图像处理，避免了对待处理图像进行整体性的图像处理，提高图像处理效果。

附图说明

图1为本申请实施例提供的一种图像处理方法的流程示意图；

图2为本申请实施例提供的另一种图像处理方法的流程示意图；

图3为本申请实施例提供的另一种图像处理方法的流程示意图；

图4为本申请实施例提供的一种图像处理装置的结构示意图；

图5为本申请实施例提供的一种电子设备的结构示意图；

图6为本申请实施例提供的另一种电子设备的结构示意图。

具体实施方式

下面结合附图并通过具体实施方式来进一步说明本申请的技术方案。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请，而非对本申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请相关的部分而非全部结构。

在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。

图1为本申请实施例提供的一种图像处理方法的流程示意图，该方法可以由图像处理装置执行，其中该装置可由软件和/或硬件实现，一般可集成在电子设备中。如图1所示，该方法包括：

步骤101、当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓。

步骤102、根据所述人脸轮廓将所述待处理图像分割为至少两个子图像。

步骤103、确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像，其中，确定的所述各子图像的图像处理方式为至少两种图像处理方式。

示例性的，本申请实施例中的电子设备可包括手机和平板电脑等智能设备。

本实施例中，待处理图像可以是通过电子设备的摄像头拍摄的，还可以是电子设备本地存储的图像。对待处理图像进行人脸识别，例如可以是检测待处理图像中是否存在人脸五官，若是，则可以是确定待处理图像中存在人脸。在确定待处理图像中存在人脸时，识别人脸轮廓，示例性的，可以是识别人脸轮廓关键点，基于人脸轮廓关键点确定人脸轮廓。

根据人脸轮廓对待处理图像进行图像分割，示例性的，可以是以人脸轮廓为界，将人脸轮廓范围内的人脸区域分割为人脸子图像，将人脸轮廓范围外的区域分割为背景子图像。其中，当待处理图像中包括多个人脸轮廓时，可以是将每一个人脸轮廓将待处理图像分割为背景子图像和多个人脸子图像。

本实施例中，对每一子图像采用不同的图像处理方式，分别对各个子图像进行图像处理，尤其是将人脸子图像和背景子图像进行不同方式的图像处理，需要说明的是，确定的各子图像的图像处理方式为至少两种图像处理方式，基于不同的图像处理方式对不同的子图像进行处理。具体的，确定各子图像的图像处理方式，可以是确定各子图像的不同类型图像处理，或者是确定各子图像的不同程度的图像处理。可选的，对图像处理可以是包括但不限于提亮处理、对比度增强处理、饱和度增强处理等。示例性的，可以是对人脸子图像进行提亮处理，对背景子图像可以是进行对比度增强处理；或者以对比度增强处理为例，增大背景子图像的对比度增强程度，减小人脸子图像的对比度增强程度，提高背景子图像中进行图像增强，同时避免人脸子图像中增强对比度导致人脸上斑点等问题过于明显的问题。本实施例中，通过将待处理图像分割为多个子图像，对各子图像采用不同的图像处理方式，使得人像和背景均可达到各自适合的效果，提高图像处理效果。

可选的，识别背景子图像的图像场景，根据图像场景确定背景子图像的图像处理方式，图像处理方式包括处理类型和处理程度，其中，背景子图像的图像场景包括但不限于风景场景、夕阳场景、夜景场景、美食场景等。示例性的，可以是基于电子设备中预先训练的图像场景识别模型识别背景子图像的图像场景，该图像场景识别模型可以是分类模型或神经网络模型。

可选的，对于人脸子图像，识别人脸肤色，根据人脸肤色确定人脸子图像的处理方式。示例性的，根据人脸肤色确定对人脸子图像进行提亮处理的程度、进行白皙处理程度以及进行对比度增强的程度。适用于人脸肤色，提高对不同肤色人脸处理的适用性，避免千人一面的问题。

在一些实施例中，在确定待处理图像中包括人脸时，还可以是同时识别待处理图像中的人脸轮廓和五官轮廓。根据五官轮廓将人脸五官进行分割，基于五官和皮肤的特性，分别采用对应的处理方式，相应的，将处理后的五官子图像和皮肤子图像进行融合，得到处理后的处理后人脸子图像。示例性的，对五官子图像的处理方式可以包括提高嘴唇子图像的饱和度、提高眼部子图像的对比度等。本实施例中，采用适用于五官的处理方式，分别对五官进行处理，提高人脸子图像的处理质量。

本申请实施例中提供图像处理方法，当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓，根据所述人脸轮廓将所述待处理图像分割为至少两个子图像，确定各子图像的至少两个图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像。通过采用上述方案，通过识别人脸轮廓将待处理图像进行分割，得到两个或两个以上的子图像，确定各子图像适合的图像处理方式，进行图像处理，避免了对待处理图像进行整体性的图像处理，提高图像处理效果。

图2为本申请实施例提供的另一种图像处理方法的流程示意图，参见图2，本实施例的方法包括如下步骤：

步骤201、当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓。

步骤202、基于预设人脸分割模板对所述待处理图像中各像素点设置权重，其中，所述预设人脸分割模板中包括各图像区域中像素点的标准权重。

步骤203、根据权重划分范围和所述待处理图像的权重分布，对所述待处理图像的各个像素点进行划分。

步骤204、将划分后的像素点组合为至少两个子图像。

步骤205、确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像，其中，确定的所述各子图像的图像处理方式为至少两种图像处理方式。

在本实施例中，电子设备中存储有预设人脸分割模板，该预设人脸分割模板中包括人脸区域和人脸区域以外其他区域的权重分布。示例性的，人脸区域的权重可以是1，用于区分人脸区域，人脸区域以外其他区域的权重可以是0。根据预设人脸分割模板中的权重分布，设置待处理图像中各像素点的权重，具体的，可以是根据预设人脸分割模板中人脸轮廓范围内的权重分布设置待处理图像中人脸轮廓范围内的各像素点的权重，根据预设人脸分割模板中人脸轮廓范围外的权重分布设置待处理图像中人脸轮廓范围外各像素点的权重。

在一些实施例中，在基于预设人脸分割模板对所述待处理图像中各像素点设置权重之前，还包括：根据所述待处理图像中人脸轮廓的大小和位置，调节所述预设人脸分割模板中的权重分布。由于不同拍摄对象的人脸图像存在差异，以及拍摄角度的不同，导致多个拍摄图像中人脸区域存在大小和位置的差异，本实施例中，根据对待处理图像中人脸轮廓的识别，确定人脸轮廓的大小和位置，具体的，可以是确定人脸轮廓所在范围的各像素点的坐标。根据待处理图像中人脸轮廓大小和位置调节预设人脸分割模板中的权重分布，示例性的，设置预设人脸分割模板的分辨率与待处理图像的分辨率一致，调节预设人脸分割模板中人脸轮廓的大小和位置与待处理图像中人脸轮廓的大小和位置，其中，当待处理图像中存在多个人脸时，在预设人脸分割模板中设置相同数量的人脸轮廓区域，需要说明的是，在预设人脸分割模板中人脸轮廓的位置和大小的调节时，预设人脸分割模板中各区域的权重适应性调节，使得各区域的权重分布趋势不变。

相应的，步骤202包括：根据调节后的人脸分割模板对所述待处理图像中各像素点设置权重。调节后的人脸分割模板与待处理图像的像素点一一对应，根据调节后的人脸分割模板的各像素点的权重，设置待处理图像中对应像素点的权重。示例性的，设置待处理图像中坐标值为(a，b)的像素点的权重与调节后的人脸分割模板坐标值为(a，b)的像素点的权重一致，其中，a和b均为大于或等于0的正整数。

本实施例中，根据待处理图像中各像素点的权重对所述待处理图像进行图像分割，得到至少两个子图像。其中，权重范围可以是0-1，可以是将权重范围划分为两个或两个以上的范围，根据权重划分范围对待处理图像进行分割，权重划分范围可以是包括一个权重值，还可以是包括一个权重范围，示例性的，权重划分范围可以是0，大于0且小于0.3，大于0.3且小于等于1等。权重划分范围可以是根据用户需求确定。

在一个实施例中，预设人脸分割模板中可以是包括权重设置为1的人脸区域，权重设置为0的背景区域，以及权重由0至1逐渐变化的过渡区域，其中，该过渡区域可以是分别与背景区域和人脸区域相邻，示例性的，过渡区域可以是人脸轮廓外，沿人脸轮廓分布的预设宽度的图像区域，其中，过渡区域的预设宽度可以是根据人脸轮廓的大小确定，人脸轮廓越大，过渡区域的宽带越大，人脸轮廓越小，过渡区域的宽带越小，例如预设宽度可以是0.1cm-1cm。相应的，权重划分范围可以包括0、大于0小于1、1，根据待处理图像的权重分布，将权重为0的像素点组合形成背景子图像，将权重为1的像素点组合形成人脸子图像，将权重在大于0小于1范围内的像素点组合形成过渡子图像，即待处理图像的至少两个子图像包括人脸子图像、背景子图像和过渡子图像，所述过渡子图像分别与所述人脸子图像和所述背景子图像相邻。

可选的，对过渡子图像进行加权形式的图像处理，例如，过渡子图像的图像处理类型可以是与背景子图像的图像处理类型相同，并对处理参数进行加权处理，示例性的，以提亮处理为例，在确定过渡子图像中各像素点的亮度分量的调节值后，可以是将该调节值乘以该像素点的权重，以得到该像素点的最终的亮度分量调节值，依据最终的亮度分量调节值调节该像素点的亮度分量。通过设置过渡子图像，并对过渡子图像进行加权形式的图像处理，实现人脸子图像和背景子图像之间的柔和过渡，避免处理后的人脸子图像和背景子图像之间的衔接生硬，差异大，导致的图像效果车的问题。本实施例中，分别确定人脸子图像、背景子图像和过渡子图像的图像处理方式，针对性地确定各子图像的合适的处理方式，优化图像处理效果。

本申请实施例中提供的图像方法，通过设置预设人脸分割模板，对待处理图像中的像素点设置权重，以根据权重对待处理图像进行分割，提高图像分割的适用性。同时当图像分割策略变化时，仅需调节预设人脸分割模板中权重分布方式，即可更该图像划分方式，方便快捷，操作简便。

图3为本申请实施例提供的另一种图像处理方法的流程示意图，本实施例是上述实施例的一个可选方案，相应的，如图3所示，本实施例的方法包括如下步骤：

步骤301、当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓。

步骤302、根据所述人脸轮廓将所述待处理图像分割为至少两个子图像，所述至少两个子图像包括人脸子图像、背景子图像和过渡子图像。

步骤303、对所述人脸子图像进行提亮处理。

步骤304、对所述背景子图像进行对比度增强处理。

步骤305、对所述过渡子图像进行加权混合处理，所述加权混合处理包括加权提亮处理和加权对比度增强处理。

步骤306、对处理后的人脸子图像、背景子图像和过渡子图像进行图像融合，得到处理后的图像。

本实施例中，通过将待处理图像分割为人脸子图像、背景子图像和过渡子图像，对人脸子图像进行提亮处理，提高人脸子图像的亮度，对人脸肤色进行保护，对背景子图像进行对比度增强处理，提高背景子图像的色彩对比度，增加图像细节清晰度，对过渡子图像进行加权混合处理，避免人脸子图像和背景子图像衔接生硬的问题。

可选的，所述对所述人脸子图像进行提亮处理，包括：遍历所述人脸子图像中各像素点的亮度分量，根据所述亮度分量的遍历结果生成所述人脸子图像的亮度分布；基于与所述人脸子图像对应的标准亮度分布和所述人脸子图像的亮度分布，生成亮度映射关系；根据所述亮度映射关系对所述人脸子图像中各像素点的亮度分量进行调节，提亮后的人脸子图像。本实施例中，待处理图像为色亮分离模式的图像，例如色亮分离模式可以是YUV颜色模式，若待处理图像为其他颜色模式时，将待处理图像转换为YUV颜色模式，通过对色亮分离模式图像进行处理，便于快速提取亮度分量，且不对色彩参数造成影响，避免色彩失真。遍历图像中每一个像素点的亮度分量，例如，在YUV颜色模式的图像中，提取图像中每一个像素点的Y分量，并对各亮度分量对应的像素点进行统计。亮度分布可以是以直方图、亮度分布曲线或积分图的形式展示。本实施例中，基于人像场景对应的标准亮度分布，对人脸子图像进行亮度分量调节。标准亮度分布中包含0-255各个亮度分量对应的像素点数量占整个人脸子图像像素点数量的标准比例。当人脸子图像的亮度分布情况满足预设的标准亮度分布时，该人脸子图像满足用户对图像的亮度需求。当人脸子图像的亮度分布与预设的标准亮度分布存在差异时，可调节人脸子图像中像素点的亮度分量，以使得的调节后人脸子图像的亮度分布与预设的标准亮度分布一致或在允许误差范围内。在本实施例中，亮度映射关系中包括人脸子图像原始亮度分量与映射亮度分量的对应关系，可用于将人脸子图像中像素点的亮度分量调节为映射亮度分量，且调节后的人脸子图像的亮度分布情况满足预设的标准亮度分布。其中，亮度映射关系可以是以曲线形式或者查询表(LUT，look uptable)形式展示，本实施例对此不做限定。

可选的，基于与人像场景对应的标准亮度分布和所述人脸子图像的亮度分布，生成亮度映射关系，包括：根据所述标准亮度分布中各亮度分量对应的第一像素点比例，以及所述人脸子图像的亮度分布中各亮度分量对应的第二像素点比例，确定需要调节的亮度分量，以及对应的目标亮度分量，将需要调节的亮度分量与所述目标亮度分量建立映射关系；或者，

根据所述标准亮度分布中亮度分量区间对应的第三像素点比例，以及所述人脸子图像的亮度分布中亮度分量区间对应的第四像素点比例，确定需要调节的亮度分量，以及对应的目标亮度分量，将需要调节的亮度分量与所述目标亮度分量建立映射关系。

对人脸子图像进行提亮处理时，遍历人脸子图像中的每一个像素点，获取每一个像素点的亮度分量，基于亮度映射关系确定该亮度分量对应的映射亮度分量，将每一个像素点的亮度分量调节为映射亮度分量，以实现对人脸子图像的亮度调节，得到处理后的人脸子图像。

可选的，所述对所述背景子图像进行对比度增强处理，包括：对所述背景子图像进行低通滤波处理，得到与所述背景子图像对应的低频图像和高频图像；确定所述高频图像的第一增益系数，根据所述第一增益系数对所述高频图像进行增强处理；确定所述低频图像的第二增益系数，根据所述第二增益系数对所述低频图像进行增强处理；将所述增强后的低频图像与增强后的高频图像进行图像融合，得到增强后的背景子图像。

基于低通滤波器对图像进行低通滤波处理，得到与原图像对应的低频图像，将原图像减去低频图像，可得到与原图像对应的高频图像，具体的，对原图像与低频图像进行对应像素点的像素差异值，以得到与原图像对应的高频图像。

高频图像中包含背景子图像中的内容信息，对高频图像进行增强处理，使得增强后的高频图像与低频图像的对比度，调整背景子图像的动态范围，突出背景子图像中对象，提高背景子图像的清晰度。示例性的，对高频图像进行增强处理，可以是设置高频图像中像素点的增强系数，将增强系数分别与像素点的像素值或者亮度值相乘，将增强后的高频图像与低频图像进行图像融合，得到处理后的图像。其中，用于对高频图像进行增强处理的增强系数可以是固定值，即各像素点的增强系数相同。或者用于对高频图像进行增强处理的增强系数还可以是根据每一个像素点计算得到，根据每一个像素点不同而存在差异性，相应的，对高频图像进行增强处理时，对每一个像素点的像素值或者亮度值乘以对应的增强系数，得到高质量的增强图像。相应的，对根据低频图像确定第二增益系数，根据所述第二增益系数对所述低频图像进行增强处理，将增强后的低频图像与增强后的高频图像进行图像融合，得到处理后的图像，同时增强高频图像和低通图像中对比度，避免了图像处理过程中细节的丢失，在图像不失真的基础上，提高图像清晰度。

可选的，根据第二增益系数对低频图像进行增强处理，包括：根据低频图像中各像素点的亮度信息，识别低频图像中的平坦区域和非平坦区域；对低频图像根据平坦区域和非平坦区域进行拆分；根据第二增益系数对拆分后的非平坦区域进行图像增强；相应的，将增强后的低频图像和高频图像进行图像融合，得到处理后的背景子图像，包括：将平坦区域、增强后的非平坦区域以及增强后的高频图像，进行图像融合，得到处理后的背景子图像。

可选的，在对所述背景子图像进行低通滤波处理之前还包括，对背景子图像进行边缘识别，根据边缘识别结果确定低通滤波处理的滤波核的大小。边缘识别结果可以是输出背景子图像中边缘信息，或者基于识别到的边缘信息生成表征边缘信息的特征值。滤波核是对背景子图像进行滤波处理的滤波器的算子核，滤波核的大小不同，滤波效果不同。例如滤波核较小的滤波器进行滤波处理可保留图像中的小细节，滤波核较大的滤波器进行滤波处理可保留图像中的大轮廓。示例性的，滤波核可以是但不限于3×3、5×5、7×7或者9×9等。电子设备在对不同拍摄对象进行拍摄时，采集到的背景子图像内容存在较大差异性，通过对背景子图像进行边缘识别，确定适应于该背景子图像的滤波核，使得在滤波过程中保留背景子图像内容，避免背景子图像中细节信息或轮廓信息的丢失，例如，根据场景识别结果确定所述图像中边缘系数；根据所述边缘系数确定对所述图像进行滤波处理的滤波核的大小，其中，所述滤波核的大小与所述边缘系数正相关。其中，图像的边缘系数为用于表征边缘信息的特征值，示例性的，边缘系数越大，图像中包含的边缘信息越多，边缘系数越小，图像中包含的边缘信息越少。

本申请实施例中提供的图像处理方法，对于摄像头采集的图像，依次对图像进行色彩放大处理以及提高对比度处理，且均是对独立的亮度分量进行处理，不涉及色彩分量，即在不损害色彩的基础上，调节色彩动态范围和虚拟方式，提高图像亮度以及图像细节的清晰度。

对过渡子图像分别进行加权形式的提亮处理和对比度增强处理，用于衔接人脸子图像和过渡子图像，优化图像处理效果。可选的，所述过渡子图像进行提亮处理的权重沿人脸子图像向背景子图像方向依次降低，对所述过渡子图像进行对比度增强处理的权重沿人脸子图像向背景子图像方向依次增加。

在一些实施例中，所述方法还包括：对所述背景子图像进行饱和度增强处理。例如可以是计算背景子图像的最大亮度值、最小亮度值和平均亮度值；根据所述最大亮度值和最小亮度值以及预设的多个色彩饱和度等级建立所述背景子图像的亮度-色彩饱和度对应关系，从所述亮度-色彩饱和度对应关系中查找所述平均亮度值所在的目标亮度值区间；其中，所述亮度-色彩饱和度对应关系包括多个亮度值区间、多个色彩饱和度以及各个亮度值区间与色彩饱和度的关联关系；根据所述关联关系获取所述目标亮度值区间对应的目标色彩饱和度，并将背景子图像的色彩饱和度调整为所述目标色彩饱和度。

其中，根据所述最大亮度值和最小亮度值以及预设的多个色彩饱和度等级建立所述图像的亮度-色彩饱和度对应关系的步骤包括：根据所述预设的色彩饱和度等级确定所述亮度值区间的个数；其中，所述色彩饱和度等级用于表征色彩饱和度的变化范围；根据所述最大亮度值、最小亮度值和所述亮度值区间的个数计算所述亮度值区间的区间长度；根据所述区间长度获取所述亮度-色彩饱和度对应关系。例如可以是根据如下公式计算所述亮度值区间的区间长度：

d＝(L1-L2)/num＝(L1-L2)/val+1；式中，d为所述区间长度，L1和L2分别是所述最大亮度值和最小亮度值，num为所述亮度值区间的个数，val为所述色彩饱和度等级。

根据如下公式获取所述目标亮度值区间对应的目标色彩饱和度：

式中，C₀为背景子图像的当前色彩饱和度，

为背景子图像的平均亮度值，L_max为背景子图像的最大亮度值，L_min为背景子图像的最小亮度值，val为预设的饱和度等级。

若所述背景子图像当前的色彩饱和度大于所述目标色彩饱和度，根据预设的步长降低背景子图像当前的色彩饱和度，直到所述当前色彩饱和度等于所述目标色彩饱和度；若背景子图像当前的色彩饱和度小于所述目标色彩饱和度，根据预设的步长增大背景子图像当前的色彩饱和度，直到所述当前色彩饱和度等于所述目标色彩饱和度。

可选的，还可以是对过渡子图像进行加权形式的饱和度增强处理，权重沿人脸子图像向背景子图像方向依次增加。

本申请实施例中提供的图像处理方法，通过基于人脸轮廓将待处理图像划分为人脸子图像、背景子图像和过渡子图像，分别对人脸子图像、背景子图像和过渡子图像进行提亮处理、对比度增强处理和加权混合处理，兼顾了对人脸的保护和对背景色彩和细节的清晰度，提高了图像质量。

图4为本申请实施例提供的一种图像处理装置的结构框图，该装置可由软件和/或硬件实现，一般集成在电子设备中，可通过执行电子设备的图像处理方法来对图像进行处理。如图4所示，该装置包括：人脸轮廓确定模块401、子图像分割模块402和图像处理模块403。

人脸轮廓确定模块401，用于当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓；

子图像分割模块402，用于根据所述人脸轮廓将所述待处理图像分割为至少两个子图像；

图像处理模块403，用于确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像，其中，确定的所述各子图像的图像处理方式为至少两种图像处理方式。

本申请实施例中提供的图像处理装置，通过识别人脸轮廓将待处理图像进行分割，得到两个或两个以上的子图像，确定各子图像适合的图像处理方式，进行图像处理，避免了对待处理图像进行整体性的图像处理，提高图像处理效果。

在上述实施例的基础上，子图像分割模块402包括：

权重设置单元，用于基于预设人脸分割模板对所述待处理图像中各像素点设置权重，其中，所述预设人脸分割模板中包括各图像区域中像素点的标准权重；

子图像分割单元，用于根据所述权重对所述待处理图像进行图像分割，得到至少两个子图像。

在上述实施例的基础上，子图像分割模块402还包括：

权重分布调节单元，用于在基于预设人脸分割模板对所述待处理图像中各像素点设置权重之前，根据所述待处理图像中人脸轮廓的大小和位置，调节所述预设人脸分割模板中的权重分布；

相应的，权重设置单元用于：

根据调节后的人脸分割模板对所述待处理图像中各像素点设置权重。

在上述实施例的基础上，子图像分割单元用于：

根据权重划分范围和所述待处理图像的权重分布，对所述待处理图像的各个像素点进行划分；

将划分后的像素点组合为至少两个子图像。

在上述实施例的基础上，所述至少两个子图像包括人脸子图像、背景子图像和过渡子图像，所述过渡子图像分别与所述人脸子图像和所述背景子图像相邻。

在上述实施例的基础上，图像处理模块403包括：

第一处理单元，用于对所述人脸子图像进行提亮处理；

第二处理单元，用于对所述背景子图像进行对比度增强处理；

第三处理单元，用于对所述过渡子图像进行加权混合处理，所述加权混合处理包括加权提亮处理和加权对比度增强处理。

在上述实施例的基础上，第一处理单元用于：

遍历所述人脸子图像中各像素点的亮度分量，根据所述亮度分量的遍历结果生成所述人脸子图像的亮度分布；

基于与所述人脸子图像对应的标准亮度分布和所述人脸子图像的亮度分布，生成亮度映射关系；

根据所述亮度映射关系对所述人脸子图像中各像素点的亮度分量进行调节，提亮后的人脸子图像。

在上述实施例的基础上，第二处理单元用于：

对所述背景子图像进行低通滤波处理，得到与所述背景子图像对应的低频图像和高频图像；

确定所述高频图像的第一增益系数，根据所述第一增益系数对所述高频图像进行增强处理；

确定所述低频图像的第二增益系数，根据所述第二增益系数对所述低频图像进行增强处理；

将所述增强后的低频图像与增强后的高频图像进行图像融合，得到增强后的背景子图像。

在上述实施例的基础上，对所述过渡子图像进行提亮处理的权重沿人脸子图像向背景子图像方向依次降低，对所述过渡子图像进行对比度增强处理的权重沿人脸子图像向背景子图像方向依次增加。

在上述实施例的基础上，图像处理模块403还包括：

第四处理单元，用于对所述背景子图像进行饱和度增强处理。

本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行图像处理方法，该方法包括：

当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓；

根据所述人脸轮廓将所述待处理图像分割为至少两个子图像；

确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像。

存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括：安装介质，例如CD-ROM、软盘或磁带装置；计算机系统存储器或随机存取存储器，诸如DRAM、DDRRAM、SRAM、EDORAM，兰巴斯(Rambus)RAM等；非易失性存储器，诸如闪存、磁介质(例如硬盘或光存储)；寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外，存储介质可以位于程序在其中被执行的第一计算机系统中，或者可以位于不同的第二计算机系统中，第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。

当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的图像处理操作，还可以执行本申请任意实施例所提供的图像处理方法中的相关操作。

本申请实施例提供了一种电子设备，该电子设备中可集成本申请实施例提供的图像处理装置。图6为本申请实施例提供的一种电子设备的结构示意图。电子设备600可以包括：存储器601，处理器602及存储在存储器601上并可在处理器602运行的计算机程序，所述处理器602执行所述计算机程序时实现如本申请实施例所述的图像处理方法。

本申请实施例提供的电子设备，通过识别人脸轮廓将待处理图像进行分割，得到两个或两个以上的子图像，确定各子图像适合的图像处理方式，进行图像处理，避免了对待处理图像进行整体性的图像处理，提高图像处理效果。

图6为本申请实施例提供的另一种电子设备的结构示意图。该电子设备可以包括：壳体(图中未示出)、存储器601、中央处理器(central processing unit，CPU)602(又称处理器，以下简称CPU)、电路板(图中未示出)和电源电路(图中未示出)。所述电路板安置在所述壳体围成的空间内部；所述CPU602和所述存储器601设置在所述电路板上；所述电源电路，用于为所述电子设备的各个电路或器件供电；所述存储器601，用于存储可执行程序代码；所述CPU602通过读取所述存储器601中存储的可执行程序代码来运行与所述可执行程序代码对应的计算机程序，以实现以下步骤：

当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓；

根据所述人脸轮廓将所述待处理图像分割为至少两个子图像；

确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，对处理后的至少两个图像进行图像融合，得到处理后的图像。

所述电子设备还包括：外设接口603、RF(Radio Frequency，射频)电路605、音频电路606、扬声器611、电源管理芯片608、输入/输出(I/O)子系统609、其他输入/控制设备610、触摸屏612、其他输入/控制设备610以及外部端口604，这些部件通过一个或多个通信总线或信号线607来通信。

应该理解的是，图示电子设备600仅仅是电子设备的一个范例，并且电子设备600可以具有比图中所示出的更多的或者更少的部件，可以组合两个或更多的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。

下面就本实施例提供的用于对图像处理操作的电子设备进行详细的描述，该电子设备以手机为例。

存储器601，所述存储器601可以被CPU602、外设接口603等访问，所述存储器601可以包括高速随机存取存储器，还可以包括非易失性存储器，例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

外设接口603，所述外设接口603可以将设备的输入和输出外设连接到CPU602和存储器601。

I/O子系统609，所述I/O子系统609可以将设备上的输入输出外设，例如触摸屏612和其他输入/控制设备610，连接到外设接口603。I/O子系统609可以包括显示控制器6091和用于控制其他输入/控制设备610的一个或多个输入控制器6092。其中，一个或多个输入控制器6092从其他输入/控制设备610接收电信号或者向其他输入/控制设备610发送电信号，其他输入/控制设备610可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是，输入控制器6092可以与以下任一个连接：键盘、红外端口、USB接口以及诸如鼠标的指示设备。

触摸屏612，所述触摸屏612是用户电子设备与用户之间的输入接口和输出接口，将可视输出显示给用户，可视输出可以包括图形、文本、图标、视频等。

I/O子系统609中的显示控制器6091从触摸屏612接收电信号或者向触摸屏612发送电信号。触摸屏612检测触摸屏上的接触，显示控制器6091将检测到的接触转换为与显示在触摸屏612上的用户界面对象的交互，即实现人机交互，显示在触摸屏612上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是，设备还可以包括光鼠，光鼠是不显示可视输出的触摸敏感表面，或者是由触摸屏形成的触摸敏感表面的延伸。

RF电路605，主要用于建立手机与无线网络(即网络侧)的通信，实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地，RF电路605接收并发送RF信号，RF信号也称为电磁信号，RF电路605将电信号转换为电磁信号或将电磁信号转换为电信号，并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路605可以包括用于执行这些功能的已知电路，其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(COder-DECoder，编译码器)芯片组、用户标识模块(Subscriber Identity Module，SIM)等等。

音频电路606，主要用于从外设接口603接收音频数据，将该音频数据转换为电信号，并且将该电信号发送给扬声器611。

扬声器611，用于将手机通过RF电路605从无线网络接收的语音信号，还原为声音并向用户播放该声音。

电源管理芯片608，用于为CPU602、I/O子系统及外设接口所连接的硬件进行供电及电源管理。

上述实施例中提供的图像处理装置、存储介质及电子设备可执行本申请任意实施例所提供的图像处理方法，具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节，可参见本申请任意实施例所提供的图像处理方法。

注意，上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解，本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由所附的权利要求范围决定。

Claims (9)

1.一种图像处理方法，其特征在于，包括：

当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓和五官轮廓；

根据所述人脸轮廓将所述待处理图像分割为至少两个子图像，以及根据所述五官轮廓将人脸区域分割为至少两个子图像；所述至少两个子图像包括人脸子图像、背景子图像和过渡子图像，所述过渡子图像分别与所述人脸子图像和所述背景子图像相邻；

确定各子图像的图像处理方式，根据所述各子图像的图像处理方式分别对所述各子图像进行图像处理，对处理后的子图像进行图像融合，得到处理后的图像，其中，确定的所述各子图像的图像处理方式为至少两种图像处理方式；

其中，确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，包括：分别对人脸子图像、背景子图像和过渡子图像进行提亮处理、对比度增强处理和加权混合处理；

其中，对过渡子图像进行加权混合处理，包括：

对过渡子图像分别进行加权形式的提亮处理和对比度增强处理；

所述过渡子图像进行提亮处理的权重沿人脸子图像向背景子图像方向依次降低，对所述过渡子图像进行对比度增强处理的权重沿人脸子图像向背景子图像方向依次增加。

2.根据权利要求1所述的方法，其特征在于，根据所述人脸轮廓将所述待处理图像分割为至少两个子图像，包括：

基于预设人脸分割模板对所述待处理图像中各像素点设置权重，其中，所述预设人脸分割模板中包括各图像区域中像素点的标准权重；

根据所述权重对所述待处理图像进行图像分割，得到至少两个子图像。

3.根据权利要求2所述的方法，其特征在于，在基于预设人脸分割模板对所述待处理图像中各像素点设置权重之前，还包括：

根据所述待处理图像中人脸轮廓的大小和位置，调节所述预设人脸分割模板中的权重分布；

相应的，基于预设人脸分割模板对所述待处理图像中各像素点设置权重，包括：

根据调节后的人脸分割模板对所述待处理图像中各像素点设置权重。

4.根据权利要求2所述的方法，其特征在于，所述根据所述权重对所述待处理图像进行图像分割，包括：

根据权重划分范围和所述待处理图像的权重分布，对所述待处理图像的各个像素点进行划分；

将划分后的像素点组合为至少两个子图像。

5.根据权利要求1所述的方法，其特征在于，所述对所述人脸子图像进行提亮处理，包括：

遍历所述人脸子图像中各像素点的亮度分量，根据所述亮度分量的遍历结果生成所述人脸子图像的亮度分布；

基于与所述人脸子图像对应的标准亮度分布和所述人脸子图像的亮度分布，生成亮度映射关系；

根据所述亮度映射关系对所述人脸子图像中各像素点的亮度分量进行调节，提亮后的人脸子图像。

6.根据权利要求1所述的方法，其特征在于，所述对所述背景子图像进行对比度增强处理，包括：

对所述背景子图像进行低通滤波处理，得到与所述背景子图像对应的低频图像和高频图像；

确定所述高频图像的第一增益系数，根据所述第一增益系数对所述高频图像进行增强处理；

确定所述低频图像的第二增益系数，根据所述第二增益系数对所述低频图像进行增强处理；

将所述增强后的低频图像与增强后的高频图像进行图像融合，得到增强后的背景子图像。

7.一种图像处理装置，其特征在于，包括：

人脸轮廓确定模块，用于当待处理图像中包括人脸时，确定所述待处理图像中人脸轮廓和五官轮廓；

子图像分割模块，用于根据所述人脸轮廓将所述待处理图像分割为至少两个子图像，以及根据所述五官轮廓将人脸区域分割为至少两个子图像；所述至少两个子图像包括人脸子图像、背景子图像和过渡子图像，所述过渡子图像分别与所述人脸子图像和所述背景子图像相邻；

图像处理模块，用于确定各子图像的图像处理方式，根据所述各子图像的图像处理方式分别对所述各子图像进行图像处理，对处理后的子图像进行图像融合，得到处理后的图像，其中，确定的所述各子图像的图像处理方式为至少两种图像处理方式；

其中，确定各子图像的图像处理方式，根据所述各图像处理方式分别对所述至少两个子图像进行图像处理，包括：分别对人脸子图像、背景子图像和过渡子图像进行提亮处理、对比度增强处理和加权混合处理；

其中，对过渡子图像进行加权混合处理，包括：

对过渡子图像分别进行加权形式的提亮处理和对比度增强处理；

所述过渡子图像进行提亮处理的权重沿人脸子图像向背景子图像方向依次降低，对所述过渡子图像进行对比度增强处理的权重沿人脸子图像向背景子图像方向依次增加。

8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-6中任一所述的图像处理方法。

9.一种电子设备，其特征在于，包括存储器，处理器及存储在存储器上并可在处理器运行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1-6任一所述的图像处理方法。

Images