CN110163805B - 一种图像处理方法、装置和存储介质 - Google Patents

Abstract

本发明实施例公开了一种图像处理方法、装置和存储介质；本发明实施例从原始图像的像素点中确定待扩充的肤色像素点；基于肤色像素点进行像素点扩充，得到扩充区域；获取扩充区域中肤色像素点数量与总像素点数量的比值；当比值大于预设阈值时，确定扩充区域为肤色像素区域；根据肤色像素区域对原始图像进行图像处理；该方案可以提升图像的质量。

Description

一种图像处理方法、装置和存储介质

技术领域

本发明涉及图像技术领域，具体涉及一种图像处理方法、装置和存储介质。

背景技术

图像的清晰度是衡量图像质量优劣的重要指标，它较好的与人的主观感受相对应。在一些实际图像业务中，每天存在大量的图像(如千万级图像)，后台需要对这些图像的清晰度自动评分，这样后端工程师便可以根据清晰度分数筛选合适的图像做后续处理。

随着视频如短视频如火如荼的发展，市面上出现越来越多的视频应用。为了满足用户的爱美需求，一些视频应用提供了美颜功能(如磨皮、美白等)，用户在通过视频应用创作自拍照片或者视频的时候可以开启美颜功能，以便照片或视频的人物进行美颜。

目前视频应用采用的美颜方案主要是对整个图像作美颜处理，但是，这种方案会导致皮肤在被美颜的时候周围的环境也会被美颜处理，使得周围的环境变的模糊并且整体变白同时也会带来大量的噪点，进而导致图像的质量下降。

发明内容

本发明实施例提供一种图像处理方法、装置和存储介质，可以提升图像的质量。

本发明实施例提供一种图像处理方法，包括：

从原始图像的像素点中确定待扩充的肤色像素点；

基于所述肤色像素点进行像素点扩充，得到扩充区域；

获取所述扩充区域中肤色像素点数量与总像素点数量的比值；

当所述比值大于预设阈值时，确定所述扩充区域为肤色像素区域；

根据所述肤色像素区域对所述原始图像进行图像处理。

本发明实施例还提供一种图像处理装置，包括：

像素确定单元，用于从原始图像的像素点中确定待扩充的肤色像素点；

扩充单元，用于基于所述肤色像素点进行像素点扩充，得到扩充区域；

比值获取单元，用于获取所述扩充区域中肤色像素点数量与总像素点数量的比值；

区域确定单元，用于当所述比值大于预设阈值时，确定所述扩充区域为肤色像素区域；

处理单元，用于根据所述肤色像素区域对所述原始图像进行图像处理。

此外，本发明实施例还提供一种存储介质，所述存储介质存储有多条指令，所述指令适于处理器进行加载，以执行本发明实施例所提供的任一种图像处理方法中的步骤。

本发明实施例可以从原始图像的像素点中确定待扩充的肤色像素点；基于肤色像素点进行像素点扩充，得到扩充区域；获取扩充区域中肤色像素点数量与总像素点数量的比值；当比值大于预设阈值时，确定扩充区域为肤色像素区域；根据肤色像素区域对原始图像进行图像处理；由于该方案可以识别出图像中的肤色区域，并基于肤色区域对图像进行图像处理如美颜，可以实现仅针对肤色区域美颜，不对周围的环境进行美颜，提升了图像的质量。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1a是本发明实施例提供的图像处理方法的场景示意图；

图1b是本发明实施例提供的图像处理方法的流程示意图；

图1c是本发明实施例提供的像素扩充示意图；

图1d是本发明实施例提供的图像融合示意图

图2a是本发明实施例提供的图像处理方法的另一流程示意图；

图2b是本发明实施例提供的局部美颜的实现流程图；

图2c是本发明实施例提供的图像融合的另一示意图；

图3a是本发明实施例提供的图像处理装置的第一种结构示意图；

图3b是本发明实施例提供的图像处理装置的第二种结构示意图；

图3c是本发明实施例提供的图像处理装置的第三种结构示意图；

图3d是本发明实施例提供的图像处理装置的第四种结构示意图；

图3e是本发明实施例提供的图像处理装置的第五种结构示意图；

图3f是本发明实施例提供的图像处理装置的第六种结构示意图；

图3g是本发明实施例提供的图像处理装置的第七种结构示意图；

图3h是本发明实施例提供的图像处理装置的第八种结构示意图；

图4是本发明实施例提供的终端的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供一种图像处理方法、装置和存储介质。

本发明实施例提供一种图像交互系统，该系统包括本发明实施例任一提供的图像处理装置，该图像处理装置可以集成在终端中，该终端可以为手机、平板电脑等设备此外，该系统还可以包括其他设备，比如，服务器等。

参考图1a，本发明实施例提供了一种图像交互系统，包括：终端10和服务器20，终端10与服务器20通过网络30连接。其中，网络30中包括路由器、网关等等网络实体，图中并为示意出。终端10可以通过有线网络或无线网络与服务器20进行信息交互，比如可以从服务器20下载应用(如视频应用)和/或应用更新数据包和/或与应用相关的数据信息或业务信息。其中，终端10可以为手机、平板电脑、笔记本电脑等设备，图1a是以终端10为手机为例。该终端10中可以安装有各种用户所需的应用，比如具备娱乐功能的应用(如视频应用，音频播放应用，游戏应用，阅读软件)，又如具备服务功能的应用(如地图导航应用、团购应用等)。

基于上述图1a所示的系统，以视频应用(可以为短视频应用)为例，终端10通过网络30从服务器20中按照需求下载视频应用和/或视频应用更新数据包和/或与视频应用相关的数据信息或业务信息(如视频信息)。采用本发明实施例，终端10可以获取原始图像，并从原始图像的像素点中确定待扩充的肤色像素点；基于肤色像素点进行像素点扩充，得到扩充区域；获取扩充区域中肤色像素点数量与总像素点数量的比值；当比值大于预设阈值时，确定扩充区域为肤色像素区域；根据肤色像素区域对原始图像进行图像处理。

其中，终端10可以通过摄像头采集图像，比如，通过摄像头拍摄视频，此时，原始图像可以为视频中某一帧图像，即视频帧。

此外，终端10可以将图像处理得到的美颜图像上传至服务器20.

上述图1a的例子只是实现本发明实施例的一个系统架构实例，本发明实施例并不限于上述图1a的系统结构，基于该系统架构，提出本发明各个实施例。

以下分别进行详细说明。

在本发明实施例中，将图像处理装置的角度进行描述，该图像处理装置具体可以集成在终端中。

在一实施例中，提供了一种图像处理方法，该方法可以由终端的处理器执行，如图1b所示，该图像处理方法的具体流程可以如下：

101、从原始图像的像素点中确定待扩充的肤色像素点。

其中，原始图像可以视频中的某一帧图像，此时，原始图像即视频帧。

其中，原始图像的获取方式有多种，比如，可以通过摄像采集。

例如，终端可以通过摄像头采集连续的多个图像即视频(如拍摄视频)，或者单个图像(如拍照)。

在一实施例中，可以获取视频的视频帧，从视频帧中确定待扩充的肤色像素点。

比如，终端可以通过摄像头采集视频，从视频的视频帧中确定待扩充的肤色像素点。

其中，待扩充的肤色像素点可以之前未被扩充过的肤色像素点，比如某个肤色像素点已经作为基点进行像素扩充，或者已经作为其他像素点的扩充像素点，那么该肤色像素点就不是待扩充的肤色像素点。在一实施例中，为了便于确定肤色像素点，在确肤色像素点之前还可以对原始图像进行格式转换，比如，可以将原始图像转换成YUV格式的原始图像，然后，从YUV格式的原始图像的像素点中确定未被扩充过的肤色像素点。

其中，YUV是被欧洲电视系统所采用的一种颜色编码方法(属于PAL)，是PAL和SECAM模拟彩色电视制式采用的颜色空间。在现代彩色电视系统中，通常采用三管彩色摄影机或彩色CCD摄影机进行取像，然后把取得的彩色图像信号经分色、分别放大校正后得到RGB，再经过矩阵变换电路得到亮度信号Y和两个色差信号B－Y(即U)、R－Y(即V)，最后发送端将亮度和色差三个信号分别进行编码，用同一信道发送出去。这种色彩的表示方法就是所谓的YUV色彩空间表示。采用YUV色彩空间的重要性是它的亮度信号Y和色度信号U、V是分离的。

经过大量研究和测试，肤色像素点的UV通道值即色差值一般在某个范围如椭圆范围内，因此，本发明实施例可以基于像素点的UV通道值来判断该像素点是否是肤色像素点。

也即，步骤“从原始图像的像素点中确定待扩充的肤色像素点”，可以包括：

从原始图像的像素点中选取的待确定像素点；

当待确定像素点的色差值(如UV值)位于预设肤色色差值范围(如椭圆范围)内，且待扩充时，确定待确定像素为待扩充的肤色像素点。

其中，色差值和扩充的判断的时序可以根据需求设定，比如，可以先判断像素点的色差值是否位于预设肤色色差值范围内，若是，再判断该像素点是否被扩充过。

又比如，还可以先判断像素点是否被扩充过，若否，则再判断像素点的色差值是否位于预设肤色色差值范围。

在一实施例中，可以将原始图像转换成YUV格式的原始图像(比如，可以将RGB格式的原始图像转换成YUV格式的原始图像)，然后，从格式转换后图像的像素点中确定待扩充的肤色像素点，具体地，可以基于像素点的色差值(如UV值)确定待扩充的肤色像素点。

在一实施例中，可以采用遍历的方式确定待扩充的肤色像素点，比如，可以遍历原始图像的像素点，并判断当前遍历到的像素点是否为肤色像素点，若是，并且该像素点未被扩充过，则认为该当前遍历到的像素点为待扩充的肤色像素点，可以基于该像素点进行扩充，扩充结束后遍历下一个像素点(直到所有像素点遍历完)。若当前遍历到的像素点不为待扩充的肤色像素点时，可以遍历下一个像素点(直到所有像素点遍历完)。

例如，可以将原始图像(如摄像头采集到的RGB格式的图像)转换成YUV格式的图像，然后，遍历YUV格式的图像的像素点，并判断当前遍历到的像素点是否为肤色像素点(可以基于UV值来判断)，若是，并且该像素点被扩充过，则认为该当前遍历到的像素点为待扩充的肤色像素点，可以基于该像素点进行扩充。

102、基于肤色像素点进行像素点扩充，得到扩充区域。

其中，像素点扩充可以包括：以某个像素点(如肤色像素点)为基点或中心向其周围邻域扩充像素点，具体地，查找满足一定条件的周围领域像素点(比如，查找肤色像素点、或者与基点颜色相差不大的像素点等等)，然后，再以查找到的像素点为基点继续向其周围邻域扩充像素点直到满足终止条件为止。

其中，扩充区域可以为：基点与其扩充的像素点所组成的像素区域，比如，肤色像素点与其扩充的像素点所组成的区域。

在一实施例中，可以以一个肤色像素点为基点，并向其周围邻域扩充像素点，具体地，扩充过程可以如下：

将肤色像素点作为当前扩充的基点；

确定基点相邻的相邻像素点；

根据相邻像素点的色差值或颜色值，确定相邻像素点为可生长节点，并将可生长节点添加到节点集合中；

将基点更新为节点集合中的可生长节点，并将可生长节点从节点集合中删除；

返回执行确定基点的相邻像素点的步骤，直至节点集合的节点数量为零。

其中，可生长节点可以为色差值或者颜色值满足预设条件的相邻像素点，该可生长节点可以作为基点继续进行像素点扩充。

其中，可生长节点的确定方式有多种，比如，在一实施例中，可以将相邻的肤色像素点作为可生长节点，或者，将与基点之间的颜色相差不大的相邻像素点作为可生长节点。也即，步骤“根据相邻像素点的色差值或颜色值，确定相邻像素点为可生长节点”，可以包括：

当相邻像素点的色差值(UV值)在预设肤色色差值范围(如椭圆范围)内时，确定相邻像素点为可生长节点；

当相邻像素点与基点之间的颜色值的差值满足预设颜色渐变条件时，确定相邻像素为可生长节点。

譬如，当相邻像素点的UV值在预设肤色色差值范围时，则认为该相邻像素点为肤色像素点，此时，可以确定该相邻像素点为可生长节点。

其中，像素点的颜色值可以为RGB值，相邻像素点与基点之间的颜色值的差值可以RGB差值(包括R差值、G差值、B差值)。

为了查找与基点颜色相差不大也即颜色渐变的相邻像素点，本发明实施例可以计算相邻像素点与基点之间的颜色值的差值(如RGB差值)，当差值满足预设颜色渐变条件时，可以认为相邻像素点为颜色渐变的像素点，此时，可以确定该相邻像素点为可生长节点。

其中，预设颜色渐变条件为用于表征两个像素点的颜色之间相差不大，或者渐变的条件，该预设颜色渐变条件可以有多种，比如，可以包括：相邻像素点与基点之间的颜色值的差值小于某个值(如三个颜色分量的差值分别小于某值)，例如，相邻像素点与基点之间R差值、G差值、B差值均小于某个阈值。

又比如，预设颜色渐变条件还可以包括：相邻像素点与基点之间的颜色值的差值的绝对值之和小于某个值；比如，相邻像素点与基点之间的RGB三个颜色值的差值的绝对值之和小于预设阈值(也即R差值、G差值、B差值的绝对值之和小于预设阈值)，该预设阈值可以根据实际需求定，比如，可以为25等。

其中，像素点扩充的方式可以有多种，比如，在一实施例中，可以采用8邻域扩充方式，也即，每次扩充时向基点的周围相邻8个像素点进行扩充。

比如，参考图1c，以像素点5为基点或中心，确定像素点5周围的8个相邻像素点分别为：像素点1、2、3、4、6、7、8、9；然后，根据相邻像素点的色差值或颜色值确定相邻像素点是否为可生长节点(具体地确定方式可以参考上述描述)，若是，则将可生长节点添加到节点集合如节点池中，假设像素点2、4、6、8为可生长节点，此时，可以将像素点2、4、6、8添加到节点池中。接着，以节点集合中可生长节点为基点继续进行像素点扩充，比如，以分别像素点2、4、6、8为像素点继续进行像素点扩充，依次类推，可以基于节点池中新加入的节点继续进行像素点扩充，直到节点池中节点数量为0，也即查找不到可生长节点为止。

在一实施例中，为防止对视频的视频帧美颜后，出现闪烁情况，比如，在针对视频的多个视频帧美颜的情况，由于非肤色像素点在各视频帧中的颜色情况不相同，因此，非肤色像素点在个视频帧中是否为可生长节点的确定结果不相同(比如基于颜色值的差值确定是否为可生长节点)，例如在当前视频帧中确定为可生长节点，在历史视频帧确定为不可生长节点。这样后续在美颜时，对于可生长节点会进行图像处理如美颜处理，对于不可生长节点不会进行图像处理如美颜处理，因此，对于整个视频来说，该非肤色像素点在某些视频帧中会美颜，在某些视频中不会美颜，因此，视频画面会出现颜色变化的闪烁。

为避免闪烁情况提升视频画面质量，在像素点扩充的过程中，对于颜色渐变的非肤色像素点是否确定为可生长节点还可以考虑该像素点在历史视频帧中的可生长节点确定结果；当确定结果的变化很大时，对于颜色渐变的非肤色像素点，则不作扩充，也即，不将该像素点作为可生长节点；当确定结果的变化很小时，对于颜色渐变的非肤色像素点进行扩充，也即将该像素点作为可生长节点。

在本发明实施例方法应用到视频中的情况下，即原始图像为视频帧时，步骤“当相邻像素点与基点之间的颜色值的差值满足预设颜色渐变条件时，确定相邻像素为可生长节点”，可以包括：

当相邻像素点与基点之间的颜色值的差值满足预设颜色渐变条件，且相邻像素点不为肤色像素点时，获取相邻像素点在历史视频帧中的历史可生长节点确定结果；

当历史可生长节点确定结果的变化满足预设变化条件时，确定相邻像素点为可生长节点。

其中，历史视频帧为当前视频帧之前的视频帧，在一实施例中，历史视频帧还可以包括当前视频帧。

例如，以某个视频包括5个视频帧为例，假设当前对视频帧5进行图像处理时，具体地，从视频帧5中确定待扩充的肤色像素点；然后，基于该肤色像素点进行扩充，在扩充过程中，如果某个基点相邻的相邻像素点a为非肤色像素点，并且与基点之间的颜色值的差值满足预设颜色渐变条件，也即相邻像素点a为颜色渐变的非肤色像素点，此时，可以获取像素点a在各历史视频帧如视频帧1、视频帧2、视频帧3、视频帧4中的历史可生长结果。

当历史可生长结果的变化满足预设变化条件时，确定该像素点a在当前视频帧5中为可生长节点，可以基于该像素点a作扩充。当历史可生长结果的变化不满足预设变化条件时，确定该像素点a在当前视频帧5中不为可生长节点也即对像素点a不做扩充。

其中，预设变化条件可以根据实际需求设定，比如，在一实施例中，可以包括：相邻像素点在历史视频帧中的历史可生长节点确定结果的变化频率小于预设频率；也即，可以相邻像素点在历史视频帧中的历史可生长节点确定结果的变化频率，当变化频率小于预设频率时，确定相邻像素点为可生长节点；若否，确定相邻像素点为不可生长节点。

本发明实施例在像素点扩充时，对于在多个历史视频帧的颜色变化较大如变化频率较大的像素点不作扩充，该方案可以结合像素点在历史视频帧的颜色变化情况来决定是否对该像素点进行扩充，因此，可以避免视频美颜后画面出现闪烁的情况，提升视频画面质量。

在一实施例中，为了便于图像美颜，还可以对图像中肤色像素点以及作为可生长节点的相邻像素点的颜色值进行设置；比如，本发明实施例图像处理方法还包括：

将肤色像素点的颜色值设置为第一颜色值；

当确定相邻像素点为可生长节点时，将相邻像素点的颜色值设置为第一颜色值；

当确定相邻像素点不为可生长节点时，将相邻像素点的颜色值设置为第二颜色值。

例如，可以将肤色像素点的颜色设置为白色，以及作为可生长节点的相邻像素点的颜色设置为白色，此时，第一颜色值可以为白色的RGB值如255(R＝255、G＝255、B＝255)；另外，还可以将不为可生长节点的相邻像素点的颜色设置为黑色，此时，第二颜色值可以为黑色的RGB值如0(R＝0、G＝0、B＝0)。

本发明实施例中，可以遍历原始图像的每个像素点，并判断当前遍历到的像素点是否为未扩充过的肤色像素点，若否，则遍历下一个像素点(直到所有像素点遍历完)，若是，则可以基于该像素点进行扩充(具体扩充方式可以参考上述的介绍)，并当该像素点的扩充结束后，遍历下一个像素点(直到所有像素点遍历完)。

在遍历完所有的像素点后便可以得到扩充出的像素区域即扩充区域；在一实施例中，如果在扩充过程中对像素点的颜色值设置的情况下，那么在遍历完所有的像素点便可以得到两种颜色的图像；如黑白图像。

103、获取扩充区域中肤色像素点数量与总像素点数量的比值。

在经过上述步骤得到扩充区域之后，本发明实施例可以评估或确定该扩充区域是否为肤色像素区域，以便于后续针对肤色像素区域进行美颜。

为了提升肤色区域的评估准确性，本发明实施例可以基于区域内肤色像素点数量与总像素点数量的比值来确定肤色像素区域。

其中，肤色像素点数量为扩充区域中肤色像素点的数量，总像素点数量为扩充区域所包含的像素点总数量。

在一实施例中，为了提升肤色美颜的准确性，还需要识别扩充的区域是否为噪声，若是噪声，那么对于噪声无需美颜，其中，识别区域是否为噪声的方式有多种，比如，为了提升识别效率，可以基于扩充区域的总像素点数量来识别。

比如，在执行步骤103之前，本发明实施例方法还可以包括：

判断扩充区域的总像素点数量是否大于预设数量；

若是，则执行获取扩充区域中肤色像素点数量与总像素点数量的比值的步骤，即步骤103。

其中，预设数量可以根据实际测试设定，比如，经过实际测试一般噪声区域的总像素点数量一般小于300；此时，预设数量为300。

譬如，当扩充区域的总像素点数量小于300时，认为该扩充区域为噪声，可以删除该扩充区域无需进行美颜操作，也即无需执行后续的步骤；当扩充区域的总像素点数量不小于300时，认为该扩充区域不为噪声，需要进行美颜操作，也即需要执行后续的步骤实现美颜。

104、当比值大于预设阈值时，确定扩充区域为肤色像素区域。

其中，预设阈值可以根据需求设定，比如可以为50％、60％等。实际应用中，预设阈值越高肤色区域的识别精度越高。

例如，当扩充区域中肤色像素点数量与总像素点数量的比值大于50％时，可以确定该扩充区域为肤色像素区域。

105、根据肤色像素区域对原始图像进行图像处理。

其中，图像处理可以包括美颜处理，美颜处理可以包括：磨皮、美白、瘦脸等等。

本发明实施例可以基于识别出的肤色像素区域对原始图像进行图像处理如美颜处理，比如，可以对原始图像中位于肤色像素区域内的像素点进行美颜处理，该方案可以仅针对肤色区域进行美颜，无需。

在一实施例中，可以采用图像融合的方式来实现美颜处理，比如，步骤“根据肤色像素区域对原始图像进行图像处理”，可以包括：

对原始图像进行图像处理，得到初始处理图像；

根据肤色像素区域将原始图像与初始处理图像融合。

例如，可以对原始图像A进行整体图像处理，得到初始处理图像A’(也即整体美颜图像)，然后，可以根据肤色像素区域对原始图像A与初始处理图像A’进行融合。

其中，原始图像与初始处理图像的融合可以包括：原始图像与初始处理图像的像素颜色融合；具体地，像素颜色融合可以包括图像像素点的颜色值融合

比如，在一实施例中，原始图像与初始处理图像融合的过程可以如下：

根据原始图像构建待融合图像，待融合图像中待融合像素点的颜色值为预设颜色值；

对于位于肤色像素区域的待融合像素点，将待融合像素点的颜色值设置为待融合像素点在美颜后处理图像中的颜色值；

对于不位于肤色像素区域的待融合像素点，将待融合像素点的颜色值设置为待融合像素点在原始图像中的颜色值。

其中，待融合图像可以为与原始图像具有相同尺寸，且像素点为预设颜色值的图像。其中，预设颜色值可以根据实际需求设定，比如0等。

比如，可以根据原始图像(如视频帧)的尺寸信息生成相应尺寸(如相同尺寸)的待融合图像，其中，待融合图像的尺寸信息可以由像素来表示，比如，原始图像的尺寸可以为100pix*100pix，此时，可以生成尺寸为100pix*100pix的待融合图像，且该待融合图像中像素点的颜色值可以为零，即构建一个白色的待融合图像。

其中，待融合图像可以包括多个像素点，可以称为待融合像素点。本发明实施例中的图像融合可以为设置待融合像素点的颜色值如RGB值过程。在识别出肤色像素区域之后，本发明实施例对构建的待融合图像中像素点的颜色值进行设置。

比如，参考图1d，可以遍历待融合图像A”中的像素点，当遍历到的待融合像素点b位于肤色像素区域时，将该待融合像素点的颜色值设置为该待融合像素点在初始处理图像A’中的颜色值；当遍历到的待融合像素点b不位于肤色像素区域时，将该待融合像素点的颜色值设置为该待融合像素点在原始图像A中的颜色值；通过前述颜色值设置方式可以得到颜色设置后的A”，也即美颜图像。

其中，确定待融合像素点是否在肤色像素区域内的方式可以有多种，比如，在一实施例中，可以基于待融合像素点在扩充后图像中的颜色值来确定，例如，在扩充过程中对像素的颜色值设置第一颜色值或者第二颜色值的情况下，可以获取待融合像素点在扩充后图像中的颜色值，当颜色值为第一颜色值(如白色颜色值，RGB＝255)时，可以确定该像素位于肤色像素区域，当颜色值为第二颜色值(如黑色颜色值，RGB＝0)时，可以确定该像素点不位于肤色像素区域。

本发明实施例可以基于肤色像素区域将原始图像和初始处理图像进行融合，使得肤色像素区域使用初始处理图像的数据，非肤色像素区域使用原始图像的数据，从而实现仅针对肤色像素区域进行美颜，无需对整体图像进行美颜，保持了非肤色区域的原始颜色，提升了图像质量和清晰度。

在一实施例中，为了提升美颜效果，在得到肤色像素区域后，还需要检测区域内是否有孔洞现象，若有则进行填充，避免美颜的时候有部分区域没有美颜到。其中，孔洞现象可以通过区域内像素点的颜色值来检测。

比如，在扩充过程中对像素的颜色值设置第一颜色值(如白色颜色值)或者第二颜色值(如黑色颜色值)的情况下，假设肤色像素区域存在颜色值为第二颜色值的像素点，那么根据上述介绍的美颜方案可能会对这些像素点美颜不到。

为了提升美颜效果和指令，在一实施例中，可以在根据肤色像素区域对原始图像进行图像处理如美颜处理之前，还可以检测肤色像素区域是否存在颜色值为第二颜色值的目标像素点，若存在，则表明肤色像素区域存在孔洞现象，此时，可以将目标像素点的颜色值设置为第一颜色值；最后，根据颜色设置后的肤色区域对原始图像进行图像处理如美颜处理。

例如，以第一颜色为白色颜色、第二颜色为黑色颜色为例，可以在图像处理如美颜处理之前，检测肤色像素区域内是否存在黑色像素点，若是，则将黑色像素点全部变为白色像素点，即将黑色像素点的颜色值由0变为255；然后，基于肤色像素区域进行图像处理如美颜处理。

在一实施例中，为防止对视频的视频帧美颜后，出现部分区域在肤色边界并且在高频区域情况下导致图像画面闪烁的问题，可以进行多帧融合，也即将扩充后的视频帧(扩充后的原始图像)与扩充后的历史视频帧进行颜色融合，以提升肤色区域的稳定性。

比如，当原始图像为视频的视频帧时，在对原始图像进行图像处理如美颜处理之前，可以将扩充后的视频帧与扩充后的历史视频帧进行颜色融合，得到融合后肤色像素区域，然后，根据融合后肤色像素区域对原始图像进行图像处理如美颜处理。

其中，扩充后的视频帧为针对当前视频基于肤色像素点进行像素点扩充后得到的视频帧；扩充后的历史视频帧可以为针对历史视频帧基于肤色像素点进行像素点扩充后得到的视频帧。在一实施例中，如果扩充过程中设置颜色的情况下，扩充后的视频帧可以包括两种颜色，也即上述第一颜色和第二颜色，如黑色和白色。

譬如，可以将当前扩充后的视频帧与之前扩充后的七个历史视频帧进行颜色融合，也即对前8帧图像做融合。

例如，视频包括8个视频帧，即一个8帧视频，终端可以采用上述介绍的方式依次对视频帧1到视频帧8进行美颜；在对视频帧8进行美颜的情况下，可以对视频帧8基于肤色像素点进行像素扩充，可以得到扩充后的视频帧8以及肤色像素区域；此时，可以将扩充后的视频帧8与扩充后的历史视频帧1、2、3、4、5、6、7进行颜色融合。

其中，扩充后的视频帧与扩充后的历史视频帧的融合过程可以包括：

获取像素点在扩充后的视频帧以及在各扩充后历史视频帧的平均颜色值；然后，将像素点在扩充后视频帧中的颜色值设置为该平均颜色值。比如，可以获取像素点a在扩充后的视频帧8、扩充后的历史视频帧1、2、3、4、5、6、7中的颜色值，然后，将这些颜色值累加得到颜色值之和，并将颜色值之和除以融合视频帧数量即8，便可以得到像素点a的平均颜色值，此时，可以将像素点a在扩充后的视频帧中颜色值设置为该平均颜色值。

本发明实施例可以对扩充后视频帧进行多帧融合处理，以提升肤色像素区域的稳定性，从而可以防止部分区域在肤色边界且为高频变化区域情况下导致的视频画面闪烁的问题，大大提升了视频画面质量。

在一实施例中，为了避免在对肤色区域美颜后出现明显的边界现象影响图像质量，比如，肤色区域与周围环境区域的颜色跳跃很大、颜色过渡不平滑等。还可以对肤色像素区域进行均值滤波。也即，在根据融合后肤色像素区域对原始图像进行图像处理如美颜处理之前，还可以对融合后肤色像素区域内像素点的颜色值进行均值滤波，此时，步骤“根据融合后肤色像素区域对原始图像进行图像处理”，可以包括根据均值滤波后的肤色像素区域对原始图像进行图像处理。

例如，将扩充后的视频帧与扩充后的历史视频帧进行颜色融合，得到融合后肤色像素区域；然后，对融合后肤色像素区域进行均值滤波，根据均值滤波后的肤色像素区域对原始图像进行图像处理。

其中，均值滤波是典型的线性滤波算法，它是指在图像上对目标像素给一个模板，该模板包括了其周围的临近像素(以目标像素为中心的周围像素，构成一个滤波模板，即去掉目标像素本身)，再用模板中全体像素的平均值来代替原来像素值。

本发明实施例通过对肤色像素区域内像素点的颜色值进行均值过滤，可以使得肤色像素区域可以平滑肤色像素区域的边界，避免在对肤色区域美颜后出现明显的边界现象影响图像质量。

由上可知，本发明实施例从原始图像的像素点中确定待扩充的肤色像素点；基于肤色像素点进行像素点扩充，得到扩充区域；获取扩充区域中肤色像素点数量与总像素点数量的比值；当比值大于预设阈值时，确定扩充区域为肤色像素区域；根据肤色像素区域对原始图像进行图像处理；由于该方案可以识别出图像中的肤色区域，并基于肤色区域对图像进行图像处理如美颜，可以实现仅针对肤色区域美颜，不对周围的环境进行美颜，保持了图像中非肤色区域的原始色彩以及降低了图像中非肤色区域的噪点，从而大大提升了图像的质量。

根据上述实施例所描述的方法，以下将举例作进一步详细说明。

在一实施例中将以图像处理方法应用在视频中为例，来进一步说明本发明的图像处理方法。

一种图像处理方法，如图2a和图2b所示，如下：

201、将原始视频帧转换成YUV格式的视频帧。

比如，可以将RGB(如BGRA)格式的视频帧转换成YUV格式的视频帧。

其中，视频是由一系列的视频帧组成，每一个视频帧即为一个图像。

其中，视频帧可以通过摄像头采集，比如，终端可以通过摄像头采集连续的多个图像即视频(如拍摄视频)。

其中，待扩充的肤色像素点可以之前未被扩充过的肤色像素点，比如某个肤色像素点已经作为基点进行像素扩充，或者已经作为其他像素点的扩充像素点，那么该肤色像素点就不是待扩充的肤色像素点。

202、从格式转换后的视频帧中确定待扩充的肤色像素点。

比如，可以遍历视频帧中的像素点，并判断当前遍历到的像素点是否为肤色像素点，若是，并且该像素点未被扩充过，则认为该当前遍历到的像素点为待扩充的肤色像素点，可以基于该像素点进行扩充，扩充结束后遍历下一个像素点(直到所有像素点遍历完)。若当前遍历到的像素点不为待扩充的肤色像素点时，可以遍历下一个像素点(直到所有像素点遍历完)。

其中，肤色像素点的判断可以基于像素点的色差值(如UV值)来判断，比如，当确定像素点的色差值(如UV值)位于预设肤色色差值范围(如椭圆范围)内，则认为该像素点为肤色像素点。

203、基于肤色像素点进行像素点扩充，得到包括扩充区域的扩充后视频帧。

例如，在对视频帧B进行美颜时，可以遍历视频帧B中的像素点，当遍历到的像素点为未扩充过的肤色像素点时，然后，基于该肤色像素点进行扩充，然后继续遍历下一个像素点，重复执行前述步骤直到遍历完所有像素点为止，当遍历完成时便可以得到包含扩充区域的扩充后视频帧B”。

其中，像素点扩充可以包括：以某个像素点(如肤色像素点)为基点或中心向其周围邻域扩充像素点，具体地，查找满足一定条件的周围领域像素点(比如，查找肤色像素点、或者与基点颜色相差不大的像素点等等)，然后，再以查找到的像素点为基点继续向其周围邻域扩充像素点直到满足终止条件为止。

其中，扩充区域可以为：基点与其扩充的像素点所组成的像素区域，比如，肤色像素点与其扩充的像素点所组成的区域。

比如，可以在遍历完视频帧的所有像素点时，可以得到包括扩充区域的扩充后视频帧。

在一实施例中，扩充过程可以如下：

将肤色像素点的颜色值设置为第一颜色值，并将肤色像素点作为当前扩充的基点；

确定基点相邻的相邻像素点(比如可以采用8邻域扩充方式，此时可以确定基点相邻的八个相邻像素点)；

当相邻像素点的色差值(UV值)在预设肤色色差值范围(如椭圆范围)内时，确定相邻像素点为可生长节点，将可生长节点添加到节点集合中，并将相邻像素点的颜色值设置为第一颜色值；

当相邻像素点与基点之间的颜色值的差值满足预设颜色渐变条件时，确定相邻像素为可生长节点，将可生长节点添加到节点集合中，并将相邻像素点的颜色值设置为第一颜色值；

当相邻像素点的色差值(UV值)在预设肤色色差值范围(如椭圆范围)内，且相邻像素点与基点之间的颜色值的差值不满足预设颜色渐变条件时，确定相邻像素不为可生长节点，并将相邻像素点的颜色设置为第二颜色值

将基点更新为节点集合中的可生长节点，并将可生长节点从节点集合中删除；

返回执行确定基点的相邻像素点的步骤，直至节点集合的节点数量为零。

其中，可生长节点可以为色差值或者颜色值满足预设条件的相邻像素点，该可生长节点可以作为基点继续进行像素点扩充。

例如，可以将肤色像素点的颜色设置为白色，以及作为可生长节点的相邻像素点的颜色设置为白色，此时，第一颜色值可以为白色的RGB值如255(R＝255、G＝255、B＝255)；另外，还可以将不为可生长节点的相邻像素点的颜色设置为黑色，此时，第二颜色值可以为黑色的RGB值如0(R＝0、G＝0、B＝0)。

在一实施例中，为防止对视频的视频帧美颜后，出现闪烁情况，还可以当相邻像素点与基点之间的颜色值的差值满足预设颜色渐变条件，且相邻像素点不为肤色像素点时，获取相邻像素点在历史视频帧中的历史可生长节点确定结果；

当历史可生长节点确定结果的变化满足预设变化条件时，确定相邻像素点为可生长节点。

其中，历史视频帧为当前视频帧之前的视频帧，在一实施例中，历史视频帧还可以包括当前视频帧。

例如，以某个视频包括5个视频帧为例，假设当前对视频帧5进行图像处理时，具体地，从视频帧5中确定待扩充的肤色像素点；然后，基于该肤色像素点进行扩充，在扩充过程中，如果某个基点相邻的相邻像素点a为非肤色像素点，并且与基点之间的颜色值的差值满足预设颜色渐变条件，也即相邻像素点a为颜色渐变的非肤色像素点，此时，可以获取像素点a在各历史视频帧如视频帧1、视频帧2、视频帧3、视频帧4中的历史可生长结果。

当历史可生长结果的变化满足预设变化条件时，确定该像素点a在当前视频帧5中为可生长节点，可以基于该像素点a作扩充。当历史可生长结果的变化不满足预设变化条件时，确定该像素点a在当前视频帧5中不为可生长节点也即对像素点a不做扩充。

其中，预设变化条件可以根据实际需求设定，比如，在一实施例中，可以包括：相邻像素点在历史视频帧中的历史可生长节点确定结果的变化频率小于预设频率；也即，可以相邻像素点在历史视频帧中的历史可生长节点确定结果的变化频率，当变化频率小于预设频率时，确定相邻像素点为可生长节点；若否，确定相邻像素点为不可生长节点。

204、当扩充区域的总像素点数量大于预设数量时，获取扩充区域中肤色像素点数量与总像素点数量的比值。

其中，肤色像素点数量为扩充区域中肤色像素点的数量，总像素点数量为扩充区域所包含的像素点总数量。

在经过上述步骤得到扩充区域之后，本发明实施例可以评估或确定该扩充区域是否为肤色像素区域，以便于后续针对肤色像素区域进行美颜。

并且，本发明实施例为了提升肤色美颜的准确性，还可以基于扩充区域的肤色像素点数量与总像素点数量识别扩充的区域是否为噪声，若是噪声，对于噪声无需美颜，可以直接删除该扩充区域。

其中，预设数量可以根据实际测试设定，比如，经过实际测试一般噪声区域的总像素点数量一般小于300；此时，预设数量为300。

譬如，当扩充区域的总像素点数量小于300时，认为该扩充区域为噪声，可以删除该扩充区域无需进行美颜操作(如图2b中删除小区域)，也即无需执行后续的步骤；当扩充区域的总像素点数量不小于300时，认为该扩充区域不为噪声，需要进行美颜操作，也即需要执行后续的步骤实现美颜。

205、当比值大于预设阈值时，确定扩充区域为肤色像素区域。

其中，预设阈值可以根据需求设定，比如可以为55％、60％等。实际应用中，预设阈值越高肤色区域的识别精度越高。

例如，当扩充区域中肤色像素点数量与总像素点数量的比值大于50％时，可以确定该扩充区域为肤色像素区域。

206、当检测到扩充后视频帧的肤色像素区域存在颜色值为第二颜色值的目标像素点时，将目标像素点的颜色值设置为第一颜色值。

本发明实施例为了提升美颜效果，在得到肤色像素区域后，还需要检测区域内是否有孔洞现象，若有则进行填充，避免美颜的时候有部分区域没有美颜到，也即图2b中的孔洞填充。其中，孔洞现象可以通过区域内像素点的颜色值来检测。

比如，在扩充过程中对像素的颜色值设置第一颜色值(如白色颜色值)或者第二颜色值(如黑色颜色值)的情况下，假设肤色像素区域存在颜色值为第二颜色值的像素点，那么根据上述介绍的美颜方案可能会对这些像素点美颜不到。

207、将扩充后视频帧与扩充后历史视频帧进行融合，得到融合后肤色像素区域。

在一实施例中，为防止对视频的视频帧美颜后，出现部分区域在肤色边界并且在高频区域情况下导致图像画面闪烁的问题，可以进行多帧融合，参考图2b中的多帧融合，也即将扩充后的视频帧与扩充后的历史视频帧进行颜色融合，以提升肤色区域的稳定性。

其中，扩充后视频帧为针对当前视频基于肤色像素点进行像素点扩充后得到的视频帧；扩充后历史视频帧可以为针对历史视频帧基于肤色像素点进行像素点扩充后得到的视频帧。

譬如，可以将当前扩充后的视频帧与之前扩充后的七个历史视频帧进行颜色融合，也即对前8帧图像做融合。

例如，视频包括8个视频帧，即一个8帧视频，终端可以采用上述介绍的方式依次对视频帧1到视频帧8进行美颜；在对视频帧8进行美颜的情况下，可以对视频帧8基于肤色像素点进行像素扩充，可以得到扩充后的视频帧8以及肤色像素区域；此时，可以将扩充后的视频帧8与扩充后的历史视频帧1、2、3、4、5、6、7进行颜色融合。

其中，扩充后视频帧与扩充后历史视频帧的融合过程可以包括：

获取像素点在扩充后的视频帧以及在各扩充后历史视频帧的平均颜色值；然后，将像素点在扩充后视频帧中的颜色值设置为该平均颜色值。比如，可以获取像素点a在扩充后的视频帧8、扩充后的历史视频帧1、2、3、4、5、6、7中的颜色值，然后，将这些颜色值累加得到颜色值之和，并将颜色值之和除以融合视频帧数量即8，便可以得到像素点a的平均颜色值，此时，可以将像素点a在扩充后的视频帧中颜色值设置为该平均颜色值。

208、对融合后肤色像素区域内像素点的颜色值进行均值滤波。

为了避免在对肤色区域美颜后出现明显的边界现象影响图像质量，比如，肤色区域与周围环境区域的颜色跳跃很大、颜色过渡不平滑等。还可以对肤色像素区域进行均值滤波。

其中，均值滤波是典型的线性滤波算法，它是指在图像上对目标像素给一个模板，该模板包括了其周围的临近像素(以目标像素为中心的周围像素，构成一个滤波模板，即去掉目标像素本身)，再用模板中全体像素的平均值来代替原来像素值。

209、根据均值滤波后的肤色像素区域将原始视频帧与美颜处理后视频帧融合，得到美颜视频帧。

其中，美颜处理后视频帧可以通过对原始视频帧进行整体美颜处理得到。

例如，可以对原始视频帧B进行整体美颜处理，得到初始处理图像B’，然后，可以根据均值滤波后的肤色像素区域对原始视频帧B与美颜处理后视频帧B’进行融合。

其中，视频帧与美颜处理后视频帧融合的过程可以包括：

根据原始视频帧构建待融合视频帧，待融合视频帧中待融合像素点的颜色值为预设颜色值；

对于位于肤色像素区域的待融合像素点，将待融合像素点的颜色值设置为待融合像素点在美颜处理后视频帧中的颜色值；

对于不位于肤色像素区域的待融合像素点，将待融合像素点的颜色值设置为待融合像素点在原始视频帧中的颜色值。

其中，待融合视频帧可以为与原始视频帧具有相同尺寸，且像素点为预设颜色值的视频帧。其中，预设颜色值可以根据实际需求设定，比如0等。比如，可以根据元素

比如，可以根据原始视频帧(如视频帧)的尺寸信息生成相应尺寸(如相同尺寸)的待融合视频帧，其中，待融合视频帧的尺寸信息可以由像素来表示，比如，原始视频帧的尺寸可以为100pix*100pix，此时，可以生成尺寸为100pix*100pix的待融合视频帧，且该待融合视频帧中像素点的颜色值可以为零，即构建一个白色的待融合视频帧。

比如，参考图2c，可以遍历待融合视频帧B”’中的像素点，当遍历到的待融合像素点b位于肤色像素区域时，将该待融合像素点的颜色值设置为该待融合像素点在美颜处理后视频帧B’中的颜色值；当遍历到的待融合像素点b不位于肤色像素区域时，将该待融合像素点的颜色值设置为该待融合像素点在原始视频帧B中的颜色值；通过前述颜色值设置方式可以得到颜色设置后的B”’，也即美颜视频帧。

在一实施例中，参考图2c，可以基于待融合像素点在扩充后视频帧(如均值滤波后视频帧)内的颜色值来确定待融合像素点是否位于肤色像素区域。比如，当待融合像素点b在扩充后视频帧B”中的颜色值为第一颜色值如RGB＝255时，可以确定该像素点位于肤色像素区域；当待融合像素点b在扩充后视频帧B”中的颜色值为第二颜色值如RGB＝0时，可以确定该像素点不位于肤色像素区域。

在一实施例中，为了便于实现图像融合，提升图像美颜效率，可以将扩充后视频帧(如均值滤波后视频帧)的颜色值转换到0到1之间。

比如，在颜色值为RGB值(RGB值位于0-255之间)的情况下，将扩充后视频帧(如均值滤波后视频帧)除以255使得扩充后视频帧内像素点的RGB值位于0到1之间，以便于后续美颜。

例如，当待融合像素点在扩充后视频帧的RGB＝1时，认为该像素点位于肤色区域，此时，可以将该像素点的RGB值设置为在美颜处理后视频中RGB值；当待融合像素点在扩充后视频帧的RGB＝0时，认为该像素点不位于肤色区域，此时，将该像素点的RGB值设置为在原始视频帧中RGB值。

在一实施例中，为了提升美颜效果，对于不位于肤色像素区域内的待融合像素点，可以基于像素点在扩充后视频帧(如均值滤波后视频帧)的颜色值，对该像素点在原始视频帧以及扩充后视频帧的颜色值进行处理，并将该像素点的颜色值设置为处理后颜色值。

比如，可以基于像素点在扩充后视频帧(如均值滤波后视频帧)的颜色值，获取颜色权重，根据颜色权重对该像素点在原始视频帧以及扩充后视频帧的颜色值加权求和，得加权值，然后，将该像素点的颜色值设置为该加权值。

例如，将扩充后视频帧(如均值滤波后视频帧)的颜色值转换到0到1之间的情况下，融合时，当像素点b的颜色值为1时，认为该像素点位于肤色区域，此时，可以将该像素点的RGB值设置为在美颜处理后视频中RGB值；当像素点b的颜色值为0时，认为该像素点为环境像素点，此时，可以将该像素点的RGB值设置为在原始视频帧中的RGB值；当像素点b的颜色值介于0-1之间时，认为该像素点为其他像素点，此时，可以根据颜色值对b在原始视频帧以及扩充后视频帧的RGB值进行加权求和处理，将b的颜色值设置为加权求和得到的颜色值。

本发明实施例可以基于肤色像素区域将原始图像和初始处理图像进行融合，使得肤色像素区域使用初始处理图像的数据，非肤色像素区域使用原始图像的数据，从而实现仅针对肤色像素区域进行美颜，无需对整体图像进行美颜，保持了非肤色区域的原始颜色，提升了图像质量和清晰度。

为了更好地实施以上方法，本发明实施例还提供一种图像处理装置，该图像处理装置具体可以集成在终端等设备中，该终端可以包括手机、平板电脑、笔记本电脑或PC等设备。

例如，如图3a所示，该图像处理装置可以包括像素确定单元301、扩充单元302、比值获取单元303、区域确定单元304和处理单元305，如下：

像素确定单元301，用于从原始图像的像素点中确定待扩充的肤色像素点；

扩充单元302，用于基于所述肤色像素点进行像素点扩充，得到扩充区域；

比值获取单元303，用于获取所述扩充区域中肤色像素点数量与总像素点数量的比值；

区域确定单元304，用于当所述比值大于预设阈值时，确定所述扩充区域为肤色像素区域；

处理单元305，用于根据所述肤色像素区域对所述原始图像进行图像处理。

在一些实施例中，参考图3b，所述扩充单元302，可以包括：

基点子单元3021，用于将所述肤色像素点作为当前扩充的基点；

相邻像素确定子单元3022，用于确定所述基点相邻的相邻像素点；

节点确定子单元3023，用于根据所述相邻像素点的色差值或颜色值，确定所述相邻像素点为可生长节点，并将所述可生长节点添加到节点集合中；

更新子单元3024，用于将所述基点更新为所述节点集合中的可生长节点，并将所述可生长节点从所述节点集合中删除；触发所述相邻像素确定子单元3022执行确定所述基点的相邻像素点的步骤，直至节点集合的节点数量为零。

在一些实施例中，节点确定子单元3023，可以具体用于：

当所述相邻像素点的色差值在预设肤色色差值范围内时，确定所述相邻像素点为可生长节点；

当所述相邻像素点与所述基点之间的颜色值的差值满足预设颜色渐变条件时，确定所述相邻像素为可生长节点。

在一些实施例中，节点确定子单元3023，可以具体用于：

当所述相邻像素点与所述基点之间的颜色值的差值满足预设颜色渐变条件，且所述相邻像素点不为肤色像素点时，获取所述相邻像素点在历史视频帧中的历史可生长节点确定结果；

当历史可生长节点确定结果的变化满足预设变化条件时，确定所述相邻像素点为可生长节点。

在一些实施例中，参考图3c，图像处理装置还可以包括第一颜色设置单元306；所述第一颜色设置单元306，用于：

将所述肤色像素点的颜色值设置为第一颜色值；

当确定所述相邻像素点为可生长节点时，将所述相邻像素点的颜色值设置为第一颜色值；

当确定所述相邻像素点不为可生长节点时，将所述相邻像素点的颜色值设置为第二颜色值。

在一些实施例中，参考图3d，图像处理装置还包括：第二颜色设置单元307；

所述第二颜色设置单元307，用于在处理单元305根据所述肤色像素区域对所述原始图像进行图像处理之前，检测所述肤色像素区域是否存在颜色值为所述第二颜色值的目标像素点；若存在，则将所述目标像素点的颜色值设置为所述第一颜色值；

其中，处理单元305，可以用于：根据颜色设置后的肤色区域对所述原始图像进行图像处理。

在一些实施例中，参考图3e，图像处理装置还可以包括区域判断单元308；所述区域判断单元308，用于在比值获取单元303获取所述扩充区域中肤色像素点数量与总像素点数量的比值之前，判断所述扩充区域的总像素点数量是否大于预设数量；

所述比值获取单元303，可以用于当所述区域判断单元308判断为是时，获取所述扩充区域中肤色像素点数量与总像素点数量的比值。

在一些实施例中，参考图3f，处理单元305可以包括：

处理子单元3051，用于对所述原始图像进行图像处理，得到初始处理图像；

融合子单元3052，用于根据所述肤色像素区域将所述原始图像与所述初始处理图像融合。

其中，融合子单元3052可以具体用于：

根据所述原始图像构建待融合图像，所述待融合图像中待融合像素点的颜色值为预设颜色值；

对于位于所述肤色像素区域的待融合像素点，将所述待融合像素点的颜色值设置为所述待融合像素点在所述初始处理图像中的颜色值；

对于不位于所述肤色像素区域的待融合像素点，将所述待融合像素点的颜色值设置为所述待融合像素点在所述原始图像中的颜色值。

在一些实施例中，所述原始图像可以为视频帧，参考图3g，图像处理装置还可以包括融合单元309；

融合单元309，用于在处理单元305根据所述肤色像素区域对所述原始图像进行图像处理之前，将扩充后的视频帧与扩充后的历史视频帧进行颜色融合，得到融合后肤色像素区域；

所述处理单元305，可以具体用于：根据所述融合后肤色像素区域对所述原始图像进行图像处理。

在一些实施例中，参考图3h，图像处理装置还可以包括滤波单元310；

所述滤波单元310，用于在处理单元305根据所述融合后肤色像素区域对所述原始图像进行图像处理之前，对融合后肤色像素区域内像素点的颜色值进行均值滤波；

所述处理单元305，可以用于根据均值滤波后的肤色像素区域对所述原始图像进行图像处理。

具体实施时，以上各个单元可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现，以上各个单元的具体实施可参见前面的方法实施例，在此不再赘述。

由上可知，本实施例的图像处理装置通过样本像素确定单元301从原始图像的像素点中确定待扩充的肤色像素点；由扩充单元302基于所述肤色像素点进行像素点扩充，得到扩充区域；比值获取单元303由获取所述扩充区域中肤色像素点数量与总像素点数量的比值；区域确定单元304由当所述比值大于预设阈值时，确定所述扩充区域为肤色像素区域；处理单元305由根据所述肤色像素区域对所述原始图像进行图像处理；由于该方案可以识别出图像中的肤色区域，并基于肤色区域对图像进行美颜，可以实现仅针对肤色区域美颜，不对周围的环境进行美颜，提升了图像的质量。

本发明实施例还提供一种终端。如图4所示，其示出了本发明实施例所涉及的终端的结构示意图，具体来讲：

该终端可以包括一个或者一个以上处理核心的处理器401、一个或一个以上计算机可读存储介质的存储器402、电源403和输入单元404等部件。本领域技术人员可以理解，图4中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：

处理器401是该终端的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器402内的软件程序和/或模块，以及调用存储在存储器402内的数据，执行终端的各种功能和处理数据。可选的，处理器401可包括一个或多个处理核心；优选的，处理器401可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器401中。

存储器402可用于存储软件程序以及模块，处理器401通过运行存储在存储器402的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器402可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器402还可以包括存储器控制器，以提供处理器401对存储器402的访问。

终端还包括给各个部件供电的电源403，优选的，电源403可以通过电源管理系统与处理器401逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源403还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

该终端还可包括输入单元404，该输入单元404可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。

尽管未示出，终端还可以包括显示单元等，在此不再赘述。具体在本实施例中，终端中的处理器401会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器402中，并由处理器401来运行存储在存储器402中的应用程序，从而实现各种功能，如下：

从原始图像的像素点中确定待扩充的肤色像素点；基于所述肤色像素点进行像素点扩充，得到扩充区域；获取所述扩充区域中肤色像素点数量与总像素点数量的比值；当所述比值大于预设阈值时，确定所述扩充区域为肤色像素区域；根据所述肤色像素区域对所述原始图像进行图像处理。

在一实施例中，当基于所述肤色像素点进行像素点扩充时，处理器401可以具体执行以下步骤：

将所述肤色像素点作为当前扩充的基点；

确定所述基点相邻的相邻像素点；

根据所述相邻像素点的色差值或颜色值，确定所述相邻像素点为可生长节点，并将所述可生长节点添加到节点集合中；

将所述基点更新为所述节点集合中的可生长节点，并将所述可生长节点从所述节点集合中删除；

返回执行确定所述基点的相邻像素点的步骤，直至节点集合的节点数量为零。

在一实施例中，当根据所述相邻像素点的色差值或颜色值，确定所述相邻像素点为可生长节点时，处理器401可以具体执行以下步骤：

当所述相邻像素点的色差值在预设肤色色差值范围内时，确定所述相邻像素点为可生长节点；

当所述相邻像素点与所述基点之间的颜色值的差值满足预设颜色渐变条件时，确定所述相邻像素为可生长节点。

在一实施例中，处理器401还可以具体执行以下步骤：

将所述肤色像素点的颜色值设置为第一颜色值；

当确定所述相邻像素点为可生长节点时，将所述相邻像素点的颜色值设置为第一颜色值；

当确定所述相邻像素点不为可生长节点时，将所述相邻像素点的颜色值设置为第二颜色值。

在一实施例中，在根据所述肤色像素区域对所述原始图像进行图像处理之前，处理器401还可以具体执行以下步骤：

检测所述肤色像素区域是否存在颜色值为所述第二颜色值的目标像素点；

若存在，则将所述目标像素点的颜色值设置为所述第一颜色值；

在根据所述肤色像素区域对所述原始图像进行图像处理时，处理器401可以具体执行以下步骤：

根据颜色设置后的肤色区域对所述原始图像进行图像处理。

在一实施例中，在获取所述扩充区域中肤色像素点数量与总像素点数量的比值之前，处理器401还可以具体执行以下步骤：

判断所述扩充区域的总像素点数量是否大于预设数量；

在获取所述扩充区域中肤色像素点数量与总像素点数量的比值时，处理器401可以具体执行以下步骤：

当判断所述扩充区域的总像素点数量大于预设数量时，获取所述扩充区域中肤色像素点数量与总像素点数量的比值。

在一实施例中，根据所述肤色像素区域对所述原始图像进行图像处理时，处理器401可以具体执行以下步骤：

对所述原始图像进行图像处理，得到初始处理图像；

根据所述肤色像素区域将所述原始图像与所述初始处理图像融合。

在一实施例中，根据所述肤色像素区域将所述原始图像与所述初始处理图像融合时，处理器401可以具体执行以下步骤

根据所述原始图像构建待融合图像，所述待融合图像中待融合像素点的颜色值为预设颜色值；

对于位于所述肤色像素区域的待融合像素点，将所述待融合像素点的颜色值设置为所述待融合像素点在所述初始处理图像中的颜色值；

对于不位于所述肤色像素区域的待融合像素点，将所述待融合像素点的颜色值设置为所述待融合像素点在所述原始图像中的颜色值。

以上各个操作的具体实施可参见前面的实施例，在此不再赘述。

由上可知，本实施例的终端可以从原始图像的像素点中确定待扩充的肤色像素点；基于所述肤色像素点进行像素点扩充，得到扩充区域；获取所述扩充区域中肤色像素点数量与总像素点数量的比值；当所述比值大于预设阈值时，确定所述扩充区域为肤色像素区域；根据所述肤色像素区域对所述原始图像进行图像处理；由于该方案可以识别出图像中的肤色区域，并基于肤色区域对图像进行美颜，可以实现仅针对肤色区域美颜，不对周围的环境进行美颜，提升了图像的质量。

本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过指令来完成，或通过指令控制相关的硬件来完成，该指令可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。

为此，本发明实施例提供一种存储介质，其中存储有多条指令，该指令能够被处理器进行加载，以执行本发明实施例所提供的任一种图像处理方法中的步骤。例如，该指令可以执行如下步骤：

从原始图像的像素点中确定待扩充的肤色像素点；基于所述肤色像素点进行像素点扩充，得到扩充区域；获取所述扩充区域中肤色像素点数量与总像素点数量的比值；当所述比值大于预设阈值时，确定所述扩充区域为肤色像素区域；根据所述肤色像素区域对所述原始图像进行图像处理。

具体实施可以参见前面的实施例，在此不再赘述。

其中，该存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)、磁盘或光盘等。

由于该存储介质中所存储的指令，可以执行本发明实施例所提供的任一种图像处理方法中的步骤，因此，可以实现本发明实施例所提供的任一种图像处理方法所能实现的有益效果，详见前面的实施例，在此不再赘述。

以上对本发明实施例所提供的一种图像处理方法、装置和存储介质进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (15)

1.一种图像处理方法，其特征在于，包括：

从原始图像的像素点中确定待扩充的肤色像素点；

将所述肤色像素点作为当前扩充的基点，并根据所述基点的相邻像素点进行像素点扩充，得到扩充区域；

获取所述扩充区域中肤色像素点数量与总像素点数量的比值，所述肤色像素点数量为所述扩充区域中肤色像素点的数量，所述总像素点数量为所述扩充区域所包含的像素点总数量；

当所述比值大于预设阈值时，确定所述扩充区域为肤色像素区域；

根据所述肤色像素区域对所述原始图像进行图像处理。

2.如权利要求1所述的图像处理方法，其特征在于，所述根据所述基点的相邻像素点进行像素点扩充，得到扩充区域，包括：

根据所述基点的相邻像素点的色差值或颜色值，确定所述相邻像素点为可生长节点，并将所述可生长节点添加到节点集合中；

将所述基点更新为所述节点集合中的可生长节点，并将所述可生长节点从所述节点集合中删除；

返回执行确定所述基点的相邻像素点的步骤，直至节点集合的节点数量为零。

3.如权利要求2所述的图像处理方法，其特征在于，根据所述基点的相邻像素点的色差值或颜色值，确定所述相邻像素点为可生长节点，包括：

当所述基点的相邻像素点的色差值在预设肤色色差值范围内时，确定所述相邻像素点为可生长节点；

当所述相邻像素点与所述基点之间的颜色值的差值满足预设颜色渐变条件时，确定所述相邻像素为可生长节点。

4.如权利要求3所述的图像处理方法，其特征在于，所述原始图像为视频帧；当所述相邻像素点与所述基点之间的颜色值的差值满足预设颜色渐变条件时，确定所述相邻像素为可生长节点，包括：

当所述相邻像素点与所述基点之间的颜色值的差值满足预设颜色渐变条件，且所述相邻像素点不为肤色像素点时，获取所述相邻像素点在历史视频帧中的历史可生长节点确定结果；

当历史可生长节点确定结果的变化满足预设变化条件时，确定所述相邻像素点为可生长节点。

5.如权利要求2所述的图像处理方法，其特征在于，所述图像处理方法还包括：

将所述肤色像素点的颜色值设置为第一颜色值；

当确定所述相邻像素点为可生长节点时，将所述相邻像素点的颜色值设置为第一颜色值；

当确定所述相邻像素点不为可生长节点时，将所述相邻像素点的颜色值设置为第二颜色值。

6.如权利要求5所述的图像处理方法，其特征在于，在根据所述肤色像素区域对所述原始图像进行图像处理之前，所述方法还包括：

检测所述肤色像素区域是否存在颜色值为所述第二颜色值的目标像素点；

若存在，则将所述目标像素点的颜色值设置为所述第一颜色值；

根据所述肤色像素区域对所述原始图像进行图像处理，包括：根据颜色设置后的肤色区域对所述原始图像进行图像处理。

7.如权利要求1所述的图像处理方法，其特征在于，在获取所述扩充区域中肤色像素点数量与总像素点数量的比值之前，所述图像处理方法还包括：

判断所述扩充区域的总像素点数量是否大于预设数量；

若是，则执行获取所述扩充区域中肤色像素点数量与总像素点数量的比值的步骤。

8.如权利要求1所述的图像处理方法，其特征在于，根据所述肤色像素区域对所述原始图像进行图像处理，包括：

对所述原始图像进行图像处理，得到初始处理图像；

根据所述肤色像素区域将所述原始图像与所述初始处理图像融合。

9.如权利要求8所述的图像处理方法，其特征在于，根据所述肤色像素区域将所述原始图像与所述初始处理图像融合，包括：

根据所述原始图像构建待融合图像，所述待融合图像中待融合像素点的颜色值为预设颜色值；

对于位于所述肤色像素区域的待融合像素点，将所述待融合像素点的颜色值设置为所述待融合像素点在所述初始处理图像中的颜色值；

对于不位于所述肤色像素区域的待融合像素点，将所述待融合像素点的颜色值设置为所述待融合像素点在所述原始图像中的颜色值。

10.如权利要求1所述的图像处理方法，其特征在于，所述原始图像为视频帧；

在根据所述肤色像素区域对所述原始图像进行图像处理之前，所述图像处理方法还包括：

将扩充后的视频帧与扩充后的历史视频帧进行颜色融合，得到融合后肤色像素区域；

根据所述肤色像素区域对所述原始图像进行图像处理，包括：根据所述融合后肤色像素区域对所述原始图像进行图像处理。

11.如权利要求10所述的图像处理方法，其特征在于，在根据所述融合后肤色像素区域对所述原始图像进行图像处理之前，所述图像处理方法还包括：

对融合后肤色像素区域内像素点的颜色值进行均值滤波；

根据所述融合后肤色像素区域对所述原始图像进行图像处理，包括：根据均值滤波后的肤色像素区域对所述原始图像进行图像处理。

12.一种图像处理装置，其特征在于，包括：

像素确定单元，用于从原始图像的像素点中确定待扩充的肤色像素点；

扩充单元，用于将所述肤色像素点作为当前扩充的基点，并根据所述基点的相邻像素点进行像素点扩充，得到扩充区域；

比值获取单元，用于获取所述扩充区域中肤色像素点数量与总像素点数量的比值，所述肤色像素点数量为所述扩充区域中肤色像素点的数量，所述总像素点数量为所述扩充区域所包含的像素点总数量；

区域确定单元，用于当所述比值大于预设阈值时，确定所述扩充区域为肤色像素区域；

处理单元，用于根据所述肤色像素区域对所述原始图像进行图像处理。

13.如权利要求12所述的图像处理装置，其特征在于，所述扩充单元，包括：

节点确定子单元，用于根据所述基点的相邻像素点的色差值或颜色值，确定所述相邻像素点为可生长节点，并将所述可生长节点添加到节点集合中；

更新子单元，用于将所述基点更新为所述节点集合中的可生长节点，并将所述可生长节点从所述节点集合中删除；触发所述相邻像素确定子单元执行确定所述基点的相邻像素点的步骤，直至节点集合的节点数量为零。

14.如权利要求12所述的图像处理装置，其特征在于，所述处理单元，包括：

处理子单元，用于对所述原始图像进行图像处理，得到初始处理图像；

融合子单元，用于根据所述肤色像素区域将所述原始图像与所述初始处理图像融合。

15.一种存储介质，其特征在于，所述存储介质存储有多条指令，所述指令适于处理器进行加载，以执行权利要求1至11任一项所述的图像处理方法中的步骤。

Images