CN107800966B - 图像处理的方法、装置、计算机可读存储介质和电子设备 - Google Patents
图像处理的方法、装置、计算机可读存储介质和电子设备 Download PDFInfo
- Publication number
- CN107800966B CN107800966B CN201711046223.1A CN201711046223A CN107800966B CN 107800966 B CN107800966 B CN 107800966B CN 201711046223 A CN201711046223 A CN 201711046223A CN 107800966 B CN107800966 B CN 107800966B
- Authority
- CN
- China
- Prior art keywords
- lip
- region
- color
- saturation degree
- mean value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000001514 detection method Methods 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 13
- 230000002902 bimodal effect Effects 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 18
- 238000012545 processing Methods 0.000 description 33
- 238000003384 imaging method Methods 0.000 description 13
- 238000006243 chemical reaction Methods 0.000 description 12
- 239000004615 ingredient Substances 0.000 description 8
- 238000013135 deep learning Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 230000001815 facial effect Effects 0.000 description 7
- 230000003796 beauty Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000002156 mixing Methods 0.000 description 6
- 238000013139 quantization Methods 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000012937 correction Methods 0.000 description 4
- 210000001061 forehead Anatomy 0.000 description 4
- 239000000203 mixture Substances 0.000 description 4
- 210000000056 organ Anatomy 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 235000002918 Fraxinus excelsior Nutrition 0.000 description 2
- 239000002956 ash Substances 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 235000003642 hunger Nutrition 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 229920006395 saturated elastomer Polymers 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 208000003351 Melanosis Diseases 0.000 description 1
- 241000520870 Phoenicurus phoenicurus Species 0.000 description 1
- 241000369592 Platycephalus richardsoni Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003255 anti-acne Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000000872 buffer Substances 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 231100000289 photo-effect Toxicity 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
- 230000002087 whitening effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
Abstract
本申请实施例中图像处理的方法、装置、计算机可读存储介质和电子设备，所述方法包括：获取图像，检测所述图像中是否包含嘴唇区域；若检测到所述图像中包含所述嘴唇区域，获取所述嘴唇区域的唇色像素的饱和度均值；根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色。本申请实施例图像处理的方法，拍摄人像时，只需要拍摄一张照片，若检测到所述照片中包含有人像的嘴唇区域，获取所述嘴唇区域的饱和度均值，根据所述饱和度均值，按照预设规则调整唇色，使拍摄出来的人像看起来美观，实现通过拍摄一张人像照片就可以达到满意的效果，避免由于拍摄的人像效果不满意导致的重复拍摄，提高了人像照片的拍摄效率，节省了拍摄设备的资源。
Description
技术领域
本申请涉及图像处理技术领域，特别是涉及图像处理的方法、装置、计算机可读存储介质和电子设备。
背景技术
在人像拍摄的时候，人脸会呈现不同的颜色特征，如果在气色不好的时候，拍摄出来的照片效果不好，就会导致进行重复的拍摄，直到照片中的人像效果达到用户满意的程度。重复的拍摄导致人像拍摄的效率低下，进而导致拍摄设备资源的浪费。
发明内容
本申请实施例提供一种图像处理的方法、装置、计算机可读存储介质和电子设备，可以实现通过拍摄一张人像就达到较好的人像拍摄效果，从而提高人像拍摄的效率。
一种图像处理的方法，所述方法包括：
获取图像，检测所述图像中是否包含嘴唇区域；
若检测到所述图像中包含所述嘴唇区域，获取所述嘴唇区域的唇色像素的饱和度均值；
根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色。
一种图像处理的装置，所述装置法包括：
检测模块，用于获取图像，检测所述图像中是否包含嘴唇区域；
获取模块，用于若检测到所述图像中包含所述嘴唇区域，获取所述嘴唇区域的唇色像素的饱和度均值；
调整模块，用于根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色。
一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现所述的方法的步骤。
一种电子设备，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行所述的图像处理的方法。
本申请实施例中图像处理的方法、装置、计算机可读存储介质和电子设备，拍摄人像时，只需要拍摄一张照片，若检测到所述照片中包含有人像的嘴唇区域，获取所述嘴唇区域的饱和度均值，根据所述饱和度均值，按照预设规则调整唇色，使拍摄出来的人像看起来美观，实现通过拍摄一张人像照片就可以达到满意的效果，避免由于拍摄的人像效果不满意导致的重复拍摄，提高了人像照片的拍摄效率，节省了拍摄设备的资源。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为一个实施例中电子设备的内部结构示意图；
图2为本申请图像处理的方法一个实施例的流程图；
图3为本申请图像处理的方法另一个具体实施例的流程图；
图4为本申请提供的图像处理的装置一个实施例的程序模块架构图；
图5为本申请实施例提供的图像处理电路的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
图1为一个实施例中电子设备的内部结构示意图。如图1所示，该电子设备包括通过系统总线连接的处理器、存储器和网络接口。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器用于存储数据、程序等，存储器上存储至少一个计算机程序，该计算机程序可被处理器执行，以实现本申请实施例中提供的适用于电子设备的图像处理的方法。存储器可包括磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等非易失性存储介质，或随机存储记忆体(Random-Access-Memory，RAM)等。例如，在一个实施例中，存储器包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种图像处理的方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。网络接口可以是以太网卡或无线网卡等，用于与外部的电子设备进行通信。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。
请参阅图2，图2为本申请图像处理的方法一个实施例的流程图，所述方法包括：
步骤200、获取图像，检测所述图像中是否包含嘴唇区域。
具体地，电子设备获取一张图像，所述图像可以是电子设备拍摄的图像，也可以是电子设备存储的图像，比如存储在电子设备端的数据库、云端数据库，或者电子设备从外部的其他电子设备获取的一张图像。
电子设备获取到一张图像后，检测所述图像是否包含嘴唇区域，也就是检测所述图像中是否包含嘴唇的形状。电子设备检测所述图像中是否包含嘴唇区域，可以通过人脸识别的方式进行嘴唇区域的识别。
所述人脸识别是基于人的脸部特征信息进行识别的一种识别技术，用摄像机或摄像头采集含有人脸的图像，并自动在图像中检测和跟踪人脸，进而对检测到的人脸进行脸部的相关技术，通常也叫做人像识别、面部识别，通过人脸识别技术检测所述图像中是否包含嘴唇。
更进一步地，电子设备进行人脸识别，可以通过深度学习中的卷积方式检测所述图像中是否包含嘴唇。所述深度学习是机器学习中一种基于对数据进行表征学习的方法，观测值(例如一幅图像)可以使用多种方式来表示，如每个像素强度值的向量，或者更抽象地表示成一系列边、特定形状的区域等，而使用某些特定的表示方法更容易从实例中学习任务(例如，人脸识别或面部表情识别)。
深度学习是机器学习研究中的一个领域，在于建立和模拟人脑进行分析学习的神经网络，它模仿人脑的机制来解释数据，例如图像、声音和文本等。卷积是图像处理常用的方法，给定输入图像，在输出图像中每一个像素是输入图像中一个小区域中像素的加权平均，其中权值由一个函数定义，这个函数称为卷积核，比如说卷积公式：R(u，v)＝∑∑G(u-i，v-j)f(i，j)，其中f为输入，G为卷积核。深度学习通过对大量图片中人像的识别，训练出人像识别的模型，进而根据人像识别模型，电子设备判断获取的图像中是否包含嘴唇区域。
步骤220、若检测到所述图像中包含所述嘴唇区域，获取所述嘴唇区域的唇色像素的饱和度均值。
具体地，电子设备若通过人像识别，检测到获取的所述图像中包含嘴唇区域，则获取所述嘴唇区域的唇色像素的饱和度均值。
其中，唇色，是指嘴唇的色彩或者颜色。饱和度，是指色彩的鲜艳程度，也称色彩的纯度，它是HSV色彩属性模式，孟塞尔颜色系统等的描述色彩变量。饱和度取决于该色彩中含色成分和消色成分(灰色)的比例。含色成分越大，饱和度越大；消色成分越大，饱和度越小。纯的颜色都是高度饱和的，如鲜红，鲜绿。混杂上白色，灰色或其他色调的颜色，是不饱和的颜色，如绛紫，粉红，黄褐等。完全不饱和的颜色根本没有色调，如黑白之间的各种灰色。
HSV(Hue,Saturation,Value)是根据颜色的直观特性，创建的一种颜色空间,也称六角锥体模型(Hexcone Model)。这个模型中颜色的参数分别是：色调H，饱和度S，明度V，明度又可以称为亮度。其中，色调H用角度度量，取值范围为0°～360°，红、绿、蓝分别相隔120度，互补色分别相差180度，H参数表示色彩信息，即所处的光谱颜色的位置；饱和度S为一比例值，范围从0到1，它表示成所选颜色的纯度和该颜色最大的纯度之间的比率，S＝0时，只有灰度；V表示色彩的明亮程度，范围从0到1。
在一个实施例中，所述获取所述嘴唇区域的唇色像素的饱和度均值的步骤包括：
获取所述嘴唇区域的唇色像素YUV或者唇色像素红绿蓝RGB的均值；
将所述均值转换到HSV颜色空间，根据所述HSV颜色空间获取所述嘴唇区域的唇色像素的饱和度均值。
具体地，根据获取的唇色像素RGB的均值，获取所述嘴唇区域的唇色像素的饱和度均值为例，电子设备获取所述嘴唇区域的唇色像素的饱和度均值的过程如下：
设唇色像素RGB的均值(r,g,b)分别是一个嘴唇区域的唇色像素中颜色的红、绿和蓝坐标，它们的值是在0到1之间的实数。设max等于r,g和b中的最大者，设min等于r,g和b中的最小者，要获取(r,g,b)在HSV颜色空间中对应的(h,s,v)值，这里的h∈[0,360]是角度的色相角，而s,v∈[0,1]，s是饱和度，v是亮度，则唇色像素RGB向HSV颜色空间的转换公式如下：
v＝max
应当说明的是，上述公式选择的举例仅仅用于解释从RGB向HSV颜色空间转换是如何进行的，并不用于限定本申请的技术方案，可以根据实际需要选择不同的转换公式进行转换，并不影响本技术方案的实施。
在另一个实施例中，根据获取的所述图像的唇色像素YUV的均值，获取所述嘴唇区域的唇色像素的饱和度均值为例，一般需要先从YUV转换成RGB，再由RGB转换到HSV，比如，从YUV转换成RGB，可以采用如下公式进行转换：
R＝Y+1.402(V-128)；
G＝Y-0.34414(U-128)-0.71414(V-128)；
B＝Y+1.772(U-128)。
应当说明的是，上述公式选择的举例仅仅用于解释从YUV转换成RGB是如何进行的，并不用于限定本申请的技术方案，可以根据实际需要选择不同的转换公式进行转换，并不影响本技术方案的实施。
可见，如果先统计完所述嘴唇区域的唇色像素YUV或者唇色像素RGB的均值，将所述YUV或RGB均值再转换到颜色空间，只需要进行一个值的颜色空间转换即可。如果是先统计完所述嘴唇区域的唇色像素YUV或者唇色像素RGB，将所述YUV或RGB转换到HSV空间之后再求均值，则所有像素都要进行颜色空间转换，计算量很大。
步骤240、根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色。
具体地，电子设备根据所述HSV颜色空间获取所述嘴唇区域的唇色像素的饱和度均值后，判断所述饱和度均值，根据所述饱和度均值判断嘴唇色彩的鲜艳程度，根据预设规则，调整所述嘴唇区域的唇色，使人像的嘴唇区域看起来更鲜艳，从而使人像的效果看起来更好。
在一个实施例中，所述根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色的步骤包括：
若所述饱和度均值小于预设阈值，将所述嘴唇区域的唇色的色调调整为预设的目标值，并以预设比值或者固定值增加所述嘴唇区域的唇色像素的饱和度；
若所述饱和度均值大于或者等于所述预设阈值，增加所述嘴唇区域的唇色像素的饱和度。
具体地，电子设备若判断所述嘴唇区域的唇色像素的饱和度均值小于预设阈值，比如预设阈值为0.4，则表明所述嘴唇区域的唇色不够鲜艳，将所述嘴唇区域的唇色的色调H调整为预设的目标值，比如将所述嘴唇区域的唇色的色调H调整为360度，并以预设比值或者固定值增加所述嘴唇区域的唇色像素的饱和度，比如增加所述嘴唇区域的唇色像素的饱和度为原来均值的1.2倍，或者将所述嘴唇区域的唇色像素的饱和度增加到0.4之上。
若电子设备判断所述嘴唇区域的唇色像素的饱和度均值大于或者等于所述预设阈值，比如预设阈值为0.4,饱和度较高时，则不改变色调，只增加饱和度，使所述嘴唇区域的唇色看起来更鲜艳。具体实施时，将美颜前嘴唇饱和度srcS与目标饱和度targetS做alpha混合，resultS＝srcS*alpha+targetS*(1-alpha)。其中，alpha混合，又称α混合，是指Alpha-Blending，是按照“Alpha”混合向量的值来混合源像素和目标像素，是要实现一种半透明效果。假设一种不透明东西的颜色是A，另一种透明的东西的颜色是B，那么透过B去看A，看上去的颜色C就是B和A的混合颜色，可以用公式R(C)＝alpha*R(B)+(1-alpha)*R(A)近似表示，设B物体的透明度为alpha，alpha取值范围为[0,1]，0为完全透明，1为完全不透明。
在一个实施例中，所述检测所述图像中是否包含嘴唇区域的步骤包括：
检测所述图像中是否包含人脸；
若检测到所述图像中包含人脸，根据检测到的所述人脸，检测所述人脸的嘴唇区域。
具体地，电子设备可以通过人脸识别技术中的人脸检测，检测所述图像中是否包含人脸。所述人脸识别技术是基于人的脸部特征，对输入的人脸图像，首先判断其是否存在人脸,如果存在人脸，则进一步检测每个脸部的位置、大小和各个主要面部器官的位置信息，所述主要面部器官包括口、鼻、眼睛、额头、脸颊等。人脸检测可以通过参考模板法、人脸规则法、样品学习法、肤色模型法等方法进行检测，或者上述方法的结合进行检测。
若电子设备检测到所述图像中包含人脸，检测所述人脸的关键点，所述关键点包括脸部的关键特征，所述脸部的关键特征，比如脸部的眼睛、鼻子、口、嘴唇、脸颊、额头或者下巴等部位，在本申请实施例中，尤其指脸部的嘴唇，通过检测脸部的嘴唇的关键点，判断所述图像中是否包含嘴唇区域，进一步获取所述人脸对应的嘴唇区域，若所述图像中不包含人脸，则不用对所述图像做进一步处理。
通过先检测出图像中是否包含人脸，根据检测出的人脸进一步检测所述人脸对应的嘴唇区域，可以避免所述图像中与嘴唇相似的形状被误判断为嘴唇，导致不合适的图像处理，可以进一步提高对嘴唇区域判断的准确性，提高所述图像处理的效率。
更进一步地，电子设备检测所述图像中是否包含人脸，及通过所述人脸检测嘴唇区域，也可以通过深度学习中的卷积进行图像识别，从而进一步提高检测所述图像的准确性，提高检测的效率。
在一个实施例中，所述获取所述嘴唇区域的唇色像素的饱和度均值的步骤包括：
根据所述嘴唇区域的嘴唇关键点生成对应的嘴唇蒙板；
根据所述嘴唇区域的唇色，获取所述嘴唇蒙板内的唇色区域；
根据所述唇色区域，获取所述嘴唇区域的唇色像素的饱和度均值。
具体地，其中，嘴唇关键点，是指包含嘴唇的上唇、下唇、两端的唇角、唇谷、唇峰等特征的关键节点，通过这些关键节点的连线可以勾勒出嘴唇的形状。蒙板，也可称为蒙版，英文为mask，是指“蒙在选区上面的板子”的含义，负责保护选区内容。嘴唇蒙板，可以理解为“蒙在嘴唇区域上的板子”，使嘴唇区域和对应脸部的其他区域区分开来。
若电子设备检测到所述图像中包含嘴唇区域，为了进一步获取更准确的所述嘴唇区域的范围，根据所述嘴唇区域的嘴唇关键点生成对应的嘴唇蒙板，通过所述嘴唇区域的形状周边关键点的连线形成对应的嘴唇蒙板。
根据所述嘴唇区域的唇色判断所述嘴唇蒙板内是否均为所述嘴唇区域的范围，也就是根据唇色判断所述嘴唇蒙板内的像素是否均为所述嘴唇区域内的像素，目的是为了进一步区分所述嘴唇蒙板内的肤色区域和唇色区域，从而实现更精细化的所述嘴唇区域的唇色调整效果。
在一个实施例中，所述根据所述嘴唇区域的嘴唇关键点生成对应的嘴唇蒙板的步骤包括：
根据所述嘴唇区域的上嘴唇的嘴唇关键点和下嘴唇的嘴唇关键点，生成所述嘴唇区域对应的嘴唇蒙板。
具体地，若电子设备检测到人脸处于微笑露出牙齿的状态，为了准确获取所述人脸的嘴唇区域，需要将所述嘴唇区域包含的牙齿部分排除，则通过分别根据所述嘴唇区域的上嘴唇的关键点和下嘴唇的嘴唇关键点分别勾勒出所述嘴唇区域的上嘴唇的蒙板和下嘴唇的蒙板，然后将所述上嘴唇的蒙板和下嘴唇的蒙板合成所述嘴唇区域的嘴唇蒙板，则生成的嘴唇蒙板只包含了所述嘴唇区域的嘴唇部分，去掉了微笑状态下嘴唇中包含的牙齿部分。其中，上唇的关键点包括两端的唇角、唇谷、唇峰、上唇的上下两条弧形的唇线等，下唇的关键点包括两端的唇角、下唇的上下两条弧形的唇线等。
更进一步地，电子设备获取所述嘴唇区域的嘴唇蒙板后，可以进一步获取微笑状态下所述嘴唇区域内的牙齿部分的嘴唇蒙板，根据所述牙齿部分的嘴唇蒙板，将所述牙齿部分的嘴唇蒙板的饱和度均值调整到预设的目标值，使牙齿看起来更白皙，从而使牙齿的颜色和调整后所述嘴唇区域的颜色看起来协调，使最终输出的图像的效果更好，从而避免重复拍摄所述人像，节省拍摄设备的资源。
在一个实施例中，所述根据所述嘴唇区域的唇色，获取所述嘴唇蒙板内的唇色区域的步骤包括：
获取所述嘴唇蒙板内的像素对应的直方图，根据所述直方图获取所述嘴唇蒙板内的唇色区域。
具体地，电子设备可生成所述嘴唇蒙板内的直方图，所述直方图可以是RGB直方图、HSV直方图或是YUV直方图等，并不限于此。所述直方图可用于描述不同色彩在所述嘴唇区域中所占的比例，可将颜色空间划分为多个小的颜色区间，并分别计算所述嘴唇区域中落入各个颜色区间的像素点的数量，从而可得到直方图。
在一个实施例中，电子设备可生成所述嘴唇区域的HSV颜色直方图，可先将嘴唇区域从RGB颜色空间转换至HSV颜色空间，其中，在HSV颜色空间中，分量可包括H(Hue，色调)、S(Saturation，饱和度)及V(Value，明度)，其中，H用角度度量，取值范围为0°～360°，从红色开始按逆时针方向计算，红色为0°，绿色为120°，蓝色为240°；S表示颜色接近光谱色的程度，光谱色所占的比例越大，颜色接近光谱色的程度就越高，颜色的饱和度也越高，饱和度高，颜色一般深而艳；V表示颜色明亮的程度，对于光源色，明度值与发光体的光亮度有关；对于物体色，此值和物体的透射比或反射比有关，V通常取值范围为0％(黑)到100％(白)。
电子设备可分别对HSV中的H、S及V三个分量进行量化，并将量化后的H、S及V三个分量合成一维的特征向量，特征向量的取值可在0～255之间，共256个值，也即，可将HSV颜色空间划分为256个颜色区间，每个颜色区间对应一个特征向量的值。例如，可将H分量量化为16级，将S分量及V分量分别量化为4级，合成一维的特征向量可如式(1)所示：
L＝H*QS*QV+S*QV+V (1)；
其中，L表示量化后的H、S及V三个分量合成的一维的特征向量；QS表示S分量的量化级数，QV表示V分量的量化级数。电子设备可根据所述嘴唇区域中各个像素点在HSV颜色空间中的值，确定在H、S及V三个分量的量化级别，并计算各个像素点的特征向量，再分别统计特征向量在256个值上分布的像素点的数量，生成颜色直方图。
实施时，可以根据所述嘴唇蒙板内的YUV或者RGB像素的直方图来进行判断，如果电子设备判断所述嘴唇蒙板内的YUV或者RGB像素的直方图只存在一个峰值，则可以判断所述嘴唇蒙板内只存在唇色区域，则直接进行处理，如果电子设备判断所述嘴唇蒙板内的YUV或者RGB像素的直方图存在双峰，则可以判断同时存在肤色区域和唇色区域。若电子设备判断同时存在肤色区域和唇色区域，则根据人脸检测时皮肤区域的肤色先验知识，在所述直方图上把所述肤色区域去掉，剩下的就是唇色区域分布。其中，所述肤色先验知识，是指经过预先验证的经验值，当YUV或者RGB在预设取值范围内时，可以判断所述皮肤为肤色区域，比如，当YUV在以下范围内可认为是肤色：((y>＝100)& (y<＝200))&((u>＝100)&(u<＝127))&((v>＝138)&(v<＝170))。
在一个实施例中，所述根据所述直方图获取所述嘴唇蒙板内的唇色区域的步骤包括：
根据所述直方图，获取所述嘴唇蒙板内的唇色区域；
获取所述唇色区域的直方图峰值预设范围内的像素确定所述嘴唇蒙板内的最终的唇色区域。
具体地，电子设备获取所述嘴唇蒙板内的像素对应的直方图的峰值，可先确定所述直方图上包含的波峰，波峰指的是在所述直方图形成的一段波内波幅的最大值，峰值则为波峰上的最大值。电子设备获取所述直方图的峰值后，可获取所述峰值对应的颜色区间，该颜色区间可以是HSV颜色空间中与峰值对应的特征向量的值。
为了获取更准确的所述唇色区域，电子设备可以将像素值(YUV或RGB)分布在唇色区域直方图峰值预设范围内的像素判断为真正的唇色区域的像素，比如可以将像素值(YUV或RGB)分布在唇色区域直方图峰值80％～120％范围内的像素判断为真正的唇色像素，也可以将像素值(YUV或RGB)分布在唇色区域直方图峰值90％～110％范围内的像素判断为真正的唇色像素。
电子设备根据获取的更准确的唇色区域，获取所述嘴唇区域的唇色像素的饱和度均值，根据所述饱和度均值，调整所述嘴唇区域的唇色，从而实现更精细化的所述嘴唇区域的唇色调整效果。
请参阅图3，图3为本申请图像处理的方法另一个具体实施例的流程图，所述处理过程包括以下步骤：
步骤301、电子设备获取一张图像，所述图像可以是电子设备拍摄的图像，也可以是电子设备存储的图像，比如存储在电子设备端的数据库、云端数据库，或者电子设备从外部的其他电子设备获取的一张图像，进入步骤302；
步骤302、电子设备检测所述图像中是否包含人脸，若所述图像中包含人脸，进入步骤303，否则，若所述图像中不包含人脸，进入步骤310；
步骤303、若电子设备判断所述图像中包含人脸，对所述图像进行人脸及人脸关键点检测，判断所述图像中是否包含嘴唇区域，若判断所述图像中包含所述嘴唇区域，进入步骤304进入步骤304，否则，若所述图像中不包含所述嘴唇区域，进入步骤310；
步骤304、电子设备根据检测到的所述图像中包含的嘴唇区域，根据所述嘴唇区域的关键点，生成所述嘴唇区域对应的嘴唇蒙板，进入步骤305；
步骤305、电子设备根据所述嘴唇区域的唇色判断所述嘴唇蒙板内的像素是否属于唇色区域，若是，则进入步骤306，否则，进入步骤307；
步骤306、电子设备根据检测到的所述嘴唇蒙板内属于唇色区域内的像素，以所述唇色区域作为所述嘴唇区域，通过累加求所述嘴唇区域的饱和度平均值，也就是所述嘴唇区域的饱和度均值，进入步骤307；
步骤307、电子设备根据获取的所述嘴唇区域的饱和度均值，判断所述饱和度均值是否小于预设阈值，从而判断人像的所述嘴唇区域呈现的效果是否满足要求，若所述饱和度均值小于预设阈值，进入步骤308，否则，进入步骤309；
步骤308、电子设备增加所述嘴唇区域的色调和饱和度，进入步骤310；
步骤309、电子设备保持所述嘴唇区域的色调，增加所述嘴唇区域的饱和度，进入步骤310；
步骤310、将处理好的图像作为最终图像输出。
综上所述，本申请实施例中图像处理的方法，拍摄人像时，只需要拍摄一张照片，若检测到所述照片中包含有人像的嘴唇区域，获取所述嘴唇区域的饱和度均值，根据所述饱和度均值，按照预设规则调整唇色，使拍摄出来的人像看起来美观，实现通过拍摄一张人像照片就可以达到满意的效果，避免由于拍摄的人像效果不满意导致的重复拍摄，提高了人像照片的拍摄效率，节省了拍摄设备的资源。
请参阅图4，图4为本申请提供的图像处理的装置一个实施例的程序模块架构图，所述装置包括：
检测模块40，用于获取图像，检测所述图像中是否包含嘴唇区域。
具体地，电子设备获取到一张图像后，检测所述图像是否包含嘴唇区域，也就是检测所述图像中是否包含嘴唇的形状。电子设备检测所述图像中是否包含嘴唇区域，可以通过人脸识别的方式进行嘴唇区域的识别。
更进一步地，电子设备进行人脸识别，可以通过深度学习中的卷积方式检测所述图像中是否包含嘴唇。
获取模块42，用于若检测到所述图像中包含所述嘴唇区域，获取所述嘴唇区域的唇色像素的饱和度均值。
具体地，电子设备若通过人像识别，检测到获取的所述图像中包含嘴唇区域，则获取所述嘴唇区域的唇色像素的饱和度均值。
其中，唇色，是指嘴唇的色彩或者颜色。饱和度，是指色彩的鲜艳程度，也称色彩的纯度，它是HSV色彩属性模式，孟塞尔颜色系统等的描述色彩变量。饱和度取决于该色彩中含色成分和消色成分(灰色)的比例。含色成分越大，饱和度越大；消色成分越大，饱和度越小。纯的颜色都是高度饱和的，如鲜红，鲜绿。混杂上白色，灰色或其他色调的颜色，是不饱和的颜色，如绛紫，粉红，黄褐等。完全不饱和的颜色根本没有色调，如黑白之间的各种灰色。
HSV(Hue,Saturation,Value)是根据颜色的直观特性，创建的一种颜色空间,也称六角锥体模型(Hexcone Model)。这个模型中颜色的参数分别是：色调(H)，饱和度(S)，明度(V)，明度又可以称为亮度。其中，色调H用角度度量，取值范围为0°～360°，红、绿、蓝分别相隔120度，互补色分别相差180度，H参数表示色彩信息，即所处的光谱颜色的位置；饱和度S为一比例值，范围从0到1，它表示成所选颜色的纯度和该颜色最大的纯度之间的比率，S＝0时，只有灰度；V表示色彩的明亮程度，范围从0到1。
在一个实施例中，所述获取模块42包括：
均值获取单元，用于获取所述嘴唇区域的唇色像素YUV或者唇色像素红绿蓝RGB的均值；
第一饱和度均值获取单元，用于将所述均值转换到HSV颜色空间，根据所述HSV颜色空间获取所述嘴唇区域的唇色像素的饱和度均值。
具体地，根据获取的唇色像素RGB的均值，获取所述嘴唇区域的唇色像素的饱和度均值为例，电子设备获取所述嘴唇区域的唇色像素的饱和度均值的过程如下：
设唇色像素RGB的均值(r,g,b)分别是一个嘴唇区域的唇色像素中颜色的红、绿和蓝坐标，它们的值是在0到1之间的实数。设max等于r,g和b中的最大者，设min等于r,g和b中的最小者，要获取(r,g,b)在HSV颜色空间中对应的(h,s,v)值，这里的h∈[0,360]是角度的色相角，而s,v∈[0,1]，s是饱和度，v是亮度，则唇色像素RGB向HSV颜色空间的转换公式如下：
v＝max
应当说明的是，上述公式选择的举例仅仅用于解释从RGB向HSV转换是如何进行的，并不用于限定本申请的技术方案，可以根据实际需要选择不同的转换公式进行转换，并不影响本技术方案的实施。
在另一个实施例中，根据获取的所述图像的唇色像素YUV的均值，获取所述嘴唇区域的唇色像素的饱和度均值为例，一般需要先从YUV转换成RGB，再由RGB转换到HSV，比如，从YUV转换成RGB，可以采用如下公式进行转换：R＝Y+1.402(V-128)；
G＝Y-0.34414(U-128)-0.71414(V-128)；
B＝Y+1.772(U-128)。
应当说明的是，上述公式选择的举例仅仅用于解释从YUV转换成RGB是如何进行的，并不用于限定本申请的技术方案，可以根据实际需要选择不同的转换公式进行转换，并不影响本技术方案的实施。
可见，如果先统计完所述嘴唇区域的唇色像素YUV或者唇色像素RGB的均值，将所述YUV或RGB均值再转换到颜色空间，只需要进行一个值的颜色空间转换即可。如果是先统计完所述嘴唇区域的唇色像素YUV或者唇色像素RGB，将所述YUV或RGB转换到HSV空间之后再求均值，则所有像素都要进行颜色空间转换，计算量很大。
调整模块44，用于根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色。
具体地，电子设备根据所述HSV颜色空间获取所述嘴唇区域的唇色像素的饱和度均值后，判断所述饱和度均值，根据所述饱和度均值判断嘴唇色彩的鲜艳程度，根据预设规则，调整所述嘴唇区域的唇色，使人像的嘴唇区域看起来更鲜艳，从而使人像的效果看起来更好。
在一个实施例中，所述调整模块44包括：
第一调整单元，用于若所述饱和度均值小于预设阈值，将所述嘴唇区域的唇色的色调调整为预设的目标值，并以预设比值或者固定值增加所述嘴唇区域的唇色像素的饱和度；
第二调整单元，用于若所述饱和度均值大于或者等于所述预设阈值，增加所述嘴唇区域的唇色像素的饱和度。
具体地，电子设备若判断所述嘴唇区域的唇色像素的饱和度均值小于预设阈值，比如预设阈值为0.4，则表明所述嘴唇区域的唇色不够鲜艳，将所述嘴唇区域的唇色的色调H调整为预设的目标值，比如将所述嘴唇区域的唇色的色调H调整为360度，并以预设比值或者固定值增加所述嘴唇区域的唇色像素的饱和度，比如增加所述嘴唇区域的唇色像素的饱和度为原来均值的1.2倍，或者将所述嘴唇区域的唇色像素的饱和度增加到0.4之上。
若电子设备判断所述嘴唇区域的唇色像素的饱和度均值大于或者等于所述预设阈值，比如预设阈值为0.4,饱和度较高时，则不改变色调，只增加饱和度，使所述嘴唇区域的唇色看起来更鲜艳。具体实施时，将美颜前嘴唇饱和度srcS与目标饱和度targetS做alpha混合，resultS＝srcS*alpha+targetS*(1-alpha)。其中，alpha混合，又称α混合，是指Alpha-Blending，是按照“Alpha”混合向量的值来混合源像素和目标像素，是要实现一种半透明效果。假设一种不透明东西的颜色是A，另一种透明的东西的颜色是B，那么透过B去看A，看上去的颜色C就是B和A的混合颜色，如果用RGB来表示颜色包含的像素值，可以用公式R(C)＝alpha*R(B)+(1-alpha)*R(A)近似表示颜色C中的红色R像素值，其中R(A)表示颜色A中的红色R像素值，R(B)表示颜色B中的红色像素R的像素值，R(C)表示颜色C中红色像素值，设B物体的透明度为alpha(取值为0-1，0为完全透明，1为完全不透明)。
在一个实施例中，所述检测模块40包括：
人脸检测单元，用于检测所述图像中是否包含人脸；
嘴唇区域检测单元，用于若检测到所述图像中包含人脸，根据检测到的所述人脸，检测所述人脸的嘴唇区域。
具体地，电子设备可以通过人脸识别技术中的人脸检测，检测所述图像中是否包含人脸。所述人脸识别技术是基于人的脸部特征，对输入的人脸图像，首先判断其是否存在人脸,如果存在人脸，则进一步检测每个脸部的位置、大小和各个主要面部器官的位置信息，所述主要面部器官包括口、鼻、眼睛、额头、脸颊等。人脸检测可以通过参考模板法、人脸规则法、样品学习法、肤色模型法等方法进行检测，或者上述方法的结合进行检测。
若电子设备检测到所述图像中包含人脸，检测所述人脸的关键点，所述关键点包括脸部的关键特征，所述脸部的关键特征，比如脸部的眼睛、鼻子、口、嘴唇、脸颊、额头或者下巴等部位，在本申请实施例中，尤其指脸部的嘴唇，通过检测脸部的嘴唇的关键点，判断所述图像中是否包含嘴唇区域，进一步获取所述人脸对应的嘴唇区域，若所述图像中不包含人脸，则不用对所述图像做进一步处理。
通过先检测出图像中是否包含人脸，根据检测出的人脸进一步检测所述人脸对应的嘴唇区域，可以避免所述图像中与嘴唇相似的形状被误判断为嘴唇，导致不合适的图像处理，可以进一步提高对嘴唇区域判断的准确性，提高所述图像处理的效率。
更进一步地，电子设备检测所述图像中是否包含人脸，及通过所述人脸检测嘴唇区域，也可以通过深度学习中的卷积进行图像识别，从而进一步提高检测所述图像的准确性，提高检测的效率。
在一个实施例中，所述获取模块42包括：
嘴唇蒙板生成单元，用于根据所述嘴唇区域的嘴唇关键点生成对应的嘴唇蒙板；
唇色区域获取单元，用于根据所述嘴唇区域的唇色，获取所述嘴唇蒙板内的唇色区域；
第二饱和度均值获取单元，用于根据所述唇色区域，获取所述嘴唇区域的唇色像素的饱和度均值。
具体地，其中，蒙板，也可以称为蒙版，英文为mask，是指“蒙在选区上面的板子”的含义，负责保护选区内容。嘴唇蒙板，可以理解为“蒙在嘴唇区域上的板子”，使嘴唇区域和对应脸部的其他区域区分开来。
若电子设备检测到所述图像中包含嘴唇区域，为了进一步获取更准确的所述嘴唇区域的范围，根据所述嘴唇区域的嘴唇关键点生成对应的嘴唇蒙板，通过所述嘴唇区域的形状周边关键点的连线形成对应的嘴唇蒙板。
根据所述嘴唇区域的唇色判断所述嘴唇蒙板内是否均为所述嘴唇区域的范围，也就是根据唇色判断所述嘴唇蒙板内的像素是否均为所述嘴唇区域内的像素，目的是为了进一步区分所述嘴唇蒙板内的肤色区域和唇色区域，从而实现更精细化的所述嘴唇区域的唇色调整效果。
在一个实施例中，所述唇色区域获取单元包括：
直方图获取子单元，用于获取所述嘴唇蒙板内的像素对应的直方图，根据所述直方图获取所述嘴唇蒙板内的唇色区域。
实施时，可以根据所述嘴唇蒙板内的YUV或者RGB像素的直方图来进行判断，如果电子设备判断所述嘴唇蒙板内的YUV或者RGB像素的直方图只存在一个峰值，则可以判断所述嘴唇蒙板内只存在唇色区域，则直接进行处理，如果电子设备判断所述嘴唇蒙板内的YUV或者RGB像素的直方图存在双峰，则可以判断同时存在肤色区域和唇色区域。若电子设备判断同时存在肤色区域和唇色区域，则根据人脸检测时皮肤区域的肤色先验知识，在所述直方图上把所述肤色区域去掉，剩下的就是唇色区域分布。其中，所述肤色先验知识，是指经过预先验证的经验值，当YUV或者RGB在预设取值范围内时，可以判断所述皮肤为肤色区域，比如，当YUV在以下范围内可认为是肤色：((y>＝100)&(y<＝200))&((u>＝100)&(u<＝127))&((v>＝138)&(v<＝170))。
在一个实施例中，所述直方图获取子单元包括：
第一唇色区域获取部件，用于根据所述直方图，获取所述嘴唇蒙板内的唇色区域；
第二唇色区域获取部件，用于获取所述唇色区域的直方图峰值预设范围内的像素确定所述嘴唇蒙板内的最终的唇色区域。
具体地，为了获取更准确的所述唇色区域，可以将像素值(YUV或RGB)分布在唇色区域直方图峰值预设范围内的像素判断为真正的唇色区域的像素，比如可以将像素值(YUV或RGB)分布在唇色区域直方图峰值80％～120％范围内的像素判断为真正的唇色像素。
上述图像处理的装置中各个模块的划分，仅用于举例说明，在其他实施例中，可将图像处理的装置按照需要划分为不同的模块，以完成上述图像处理的装置的全部或部分功能。
上述图像处理的装置可以实现为一种计算机程序的形式，计算机程序可在如图1所示的电子设备上运行。
本申请实施例还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述各实施例中所描述的通话控制的方法的步骤。
具体地，一个或多个包含计算机程序的非易失性计算机可读存储介质，当所述计算机程序被一个或多个处理器执行时，使得所述处理器执行以下步骤：
获取图像，检测所述图像中是否包含嘴唇区域；
若检测到所述图像中包含所述嘴唇区域，获取所述嘴唇区域的唇色像素的饱和度均值；
根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色。
在一个实施例中，所述检测所述图像中是否包含嘴唇区域的步骤包括：
检测所述图像中是否包含人脸；
若检测到所述图像中包含人脸，根据检测到的所述人脸，检测所述人脸的嘴唇区域。
在一个实施例中，所述获取所述嘴唇区域的唇色像素的饱和度均值的步骤包括：
根据所述嘴唇区域的嘴唇关键点生成对应的嘴唇蒙板；
根据所述嘴唇区域的唇色，获取所述嘴唇蒙板内的唇色区域；
根据所述唇色区域，获取所述嘴唇区域的唇色像素的饱和度均值。
在一个实施例中，所述根据所述嘴唇区域的唇色，获取所述嘴唇蒙板内的唇色区域的步骤包括：
获取所述嘴唇蒙板内的像素对应的直方图，根据所述直方图获取所述嘴唇蒙板内的唇色区域。
在一个实施例中，所述根据所述直方图获取所述嘴唇蒙板内的唇色区域的步骤包括：
根据所述直方图，获取所述嘴唇蒙板内的唇色区域；
获取所述唇色区域的直方图峰值预设范围内的像素确定所述嘴唇蒙板内的最终的唇色区域。
在一个实施例中，所述获取所述嘴唇区域的唇色像素的饱和度均值的步骤包括：
获取所述嘴唇区域的唇色像素YUV或者唇色像素红绿蓝RGB的均值；
将所述均值转换到HSV颜色空间，根据所述HSV颜色空间获取所述嘴唇区域的唇色像素的饱和度均值。
在一个实施例中，所述根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色的步骤包括：
若所述饱和度均值小于预设阈值，将所述嘴唇区域的唇色的色调调整为预设的目标值，并以预设比值或者固定值增加所述嘴唇区域的唇色像素的饱和度；
若所述饱和度均值大于或者等于所述预设阈值，增加所述嘴唇区域的唇色像素的饱和度。
本申请实施例还提供了一种计算机程序产品。一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述各实施例中所描述的图像处理的方法。
本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图5为一个实施例中图像处理电路的示意图。如图5所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。
如图5所示，图像处理电路包括ISP处理器540和控制逻辑器550。成像设备510捕捉的图像数据首先由ISP处理器540处理，ISP处理器540对图像数据进行分析以捕捉可用于确定和/或成像设备510的一个或多个控制参数的图像统计信息。成像设备510可包括具有一个或多个透镜512和图像传感器514的照相机。图像传感器514可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器514可获取用图像传感器514的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器540处理的一组原始图像数据。传感器520(如陀螺仪)可基于传感器520接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器540。传感器520接口可以利用SMIA(Standard Mobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外，图像传感器514也可将原始图像数据发送给传感器520，传感器520可基于传感器520接口类型把原始图像数据提供给ISP处理器540，或者传感器520将原始图像数据存储到图像存储器530中。
ISP处理器540按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器540可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。
ISP处理器540还可从图像存储器530接收图像数据。例如，传感器520接口将原始图像数据发送给图像存储器530，图像存储器530中的原始图像数据再提供给ISP处理器540以供处理。图像存储器530可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。
当接收到来自图像传感器514接口或来自传感器520接口或来自图像存储器530的原始图像数据时，ISP处理器540可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器530，以便在被显示之前进行另外的处理。ISP处理器540还可从图像存储器530接收处理数据，对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器580，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器540的输出还可发送给图像存储器530，且显示器580可从图像存储器530读取图像数据。在一个实施例中，图像存储器530可被配置为实现一个或多个帧缓冲器。此外，ISP处理器540的输出可发送给编码器/解码器570，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器580设备上之前解压缩。
ISP处理器540处理图像数据的步骤包括：对图像数据进行VFE(Video Front End，视频前端)处理和CPP(Camera Post Processing，摄像头后处理)处理。对图像数据的VFE处理可包括修正图像数据的对比度或亮度、修改以数字方式记录的光照状态数据、对图像数据进行补偿处理(如白平衡，自动增益控制，γ校正等)、对图像数据进行滤波处理等。对图像数据的CPP处理可包括对图像进行缩放、向每个路径提供预览帧和记录帧。其中，CPP可使用不同的编解码器来处理预览帧和记录帧。ISP处理器540处理后的图像数据可发送给美颜模块560，以便在被显示之前对图像进行美颜处理。美颜模块560对图像数据美颜处理可包括：美白、祛斑、磨皮、瘦脸、祛痘、增大眼睛、唇色调整等。其中，美颜模块560可为移动终端中CPU(Central Processing Unit，中央处理器)、GPU或协处理器等。美颜模块560处理后的数据可发送给编码器/解码器570，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器580设备上之前解压缩。其中，美颜模块560还可位于编码器/解码器570与显示器580之间，即美颜模块对已成像的图像进行美颜处理。上述编码器/解码器570可为移动终端中CPU、GPU或协处理器等。
ISP处理器540确定的统计数据可发送给控制逻辑器550单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜512阴影校正等图像传感器514统计信息。控制逻辑器550可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备510的控制参数以及ISP处理器540的控制参数。例如，成像设备510的控制参数可包括传感器520控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜512控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜512阴影校正参数。
运用图5中图像处理技术可实现如上所述的图像处理方法。
本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。
Claims (7)
1.一种图像处理的方法，所述方法包括：
获取图像，检测所述图像中是否包含嘴唇区域；
若检测到所述图像中包含所述嘴唇区域，获取所述嘴唇区域的唇色像素的饱和度均值；
根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色；
所述获取所述嘴唇区域的唇色像素的饱和度均值的步骤包括：
根据所述嘴唇区域的嘴唇关键点生成对应的嘴唇蒙板；
根据所述嘴唇区域的唇色，获取所述嘴唇蒙板内的唇色区域；
根据所述唇色区域，获取所述嘴唇区域的唇色像素的饱和度均值
所述根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色的步骤包括：
若所述饱和度均值小于预设阈值，将所述嘴唇区域的唇色的色调调整为预设的目标值，并以预设比值或者固定值增加所述嘴唇区域的唇色像素的饱和度；
若所述饱和度均值大于或者等于所述预设阈值，增加所述嘴唇区域的唇色像素的饱和度；
所述根据所述嘴唇区域的唇色，获取所述嘴唇蒙板内的唇色区域的步骤包括：
获取所述嘴唇蒙板内的像素对应的直方图，根据所述直方图获取所述嘴唇蒙板内的唇色区域；
所述根据所述直方图获取所述嘴唇蒙板内的唇色区域包括：
若所述嘴唇蒙板内的直方图只存在一个峰值，则所述嘴唇蒙版内只存在唇色区域；
若所述嘴唇蒙版内的直方图存在双峰，则同时存在肤色区域或唇色区域；
若同时存在肤色区域和唇色区域，则根据人脸检测时皮肤区域的肤色先验知识，在所述直方图上把所述肤色区域去掉，获取唇色区域。
2.根据权利要求1所述的方法，其特征在于，所述检测所述图像中是否包含嘴唇区域的步骤包括：
检测所述图像中是否包含人脸；
若检测到所述图像中包含人脸，根据检测到的所述人脸，检测所述人脸的嘴唇区域。
3.根据权利要求1所述的方法，其特征在于，所述根据所述直方图获取所述嘴唇蒙板内的唇色区域的步骤包括：
根据所述直方图，获取所述嘴唇蒙板内的唇色区域；
获取所述唇色区域的直方图峰值预设范围内的像素确定所述嘴唇蒙板内的最终的唇色区域。
4.根据权利要求1所述的方法，其特征在于，所述获取所述嘴唇区域的唇色像素的饱和度均值的步骤包括：
获取所述嘴唇区域的唇色像素YUV或者唇色像素红绿蓝RGB的均值；
将所述均值转换到HSV颜色空间，根据所述HSV颜色空间获取所述嘴唇区域的唇色像素的饱和度均值。
5.一种图像处理的装置，其特征在于，所述装置法包括：
检测模块，用于获取图像，检测所述图像中是否包含嘴唇区域；
获取模块，用于若检测到所述图像中包含所述嘴唇区域，获取所述嘴唇区域的唇色像素的饱和度均值；
调整模块，用于根据所述饱和度均值，按照预设规则，调整所述嘴唇区域的唇色；
所述获取模块包括：
嘴唇蒙板生成单元，用于根据所述嘴唇区域的嘴唇关键点生成对应的嘴唇蒙板；
唇色区域获取单元，用于根据所述嘴唇区域的唇色，获取所述嘴唇蒙板内的唇色区域；
第二饱和度均值获取单元，用于根据所述唇色区域，获取所述嘴唇区域的唇色像素的饱和度均值；
所述调整模块包括：
第一调整单元，用于若所述饱和度均值小于预设阈值，将所述嘴唇区域的唇色的色调调整为预设的目标值，并以预设比值或者固定值增加所述嘴唇区域的唇色像素的饱和度；
第二调整单元，用于若所述饱和度均值大于或者等于所述预设阈值，增加所述嘴唇区域的唇色像素的饱和度；
所述唇色区域获取单元包括：
直方图获取子单元，用于获取所述嘴唇蒙板内的像素对应的直方图，根据所述直方图获取所述嘴唇蒙板内的唇色区域；
所述根据所述直方图获取所述嘴唇蒙板内的唇色区域包括：
若所述嘴唇蒙板内的直方图只存在一个峰值，则所述嘴唇蒙版内只存在唇色区域；
若所述嘴唇蒙版内的直方图存在双峰，则同时存在肤色区域或唇色区域；
若同时存在肤色区域和唇色区域，则根据人脸检测时皮肤区域的肤色先验知识，在所述直方图上把所述肤色区域去掉，获取唇色区域。
6.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-4中任一项所述的方法的步骤。
7.一种电子设备，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如权利要求1-4中任一项所述的图像处理的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711046223.1A CN107800966B (zh) | 2017-10-31 | 2017-10-31 | 图像处理的方法、装置、计算机可读存储介质和电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711046223.1A CN107800966B (zh) | 2017-10-31 | 2017-10-31 | 图像处理的方法、装置、计算机可读存储介质和电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107800966A CN107800966A (zh) | 2018-03-13 |
| CN107800966B true CN107800966B (zh) | 2019-10-18 |
Family
ID=61546498
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711046223.1A Expired - Fee Related CN107800966B (zh) | 2017-10-31 | 2017-10-31 | 图像处理的方法、装置、计算机可读存储介质和电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107800966B (zh) |
Families Citing this family (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109325972B (zh) * | 2018-07-25 | 2020-10-27 | 深圳市商汤科技有限公司 | 激光雷达稀疏深度图的处理方法、装置、设备及介质 |
| CN109584180A (zh) * | 2018-11-30 | 2019-04-05 | 深圳市脸萌科技有限公司 | 人脸图像处理方法、装置、电子设备及计算机存储介质 |
| CN109754375B (zh) * | 2018-12-25 | 2021-05-14 | 广州方硅信息技术有限公司 | 图像处理方法、系统、计算机设备、存储介质和终端 |
| CN109820491A (zh) * | 2019-01-28 | 2019-05-31 | 中山大学孙逸仙纪念医院 | 预防新生儿窒息感应芯片 |
| CN109784304B (zh) * | 2019-01-29 | 2021-07-06 | 北京字节跳动网络技术有限公司 | 用于标注牙齿图像的方法和装置 |
| CN109902587B (zh) * | 2019-01-29 | 2021-10-08 | 维沃移动通信有限公司 | 一种图像处理方法、装置、移动终端及存储介质 |
| CN110009588B (zh) * | 2019-04-09 | 2022-12-27 | 成都品果科技有限公司 | 一种人像图像色彩增强方法及装置 |
| CN111652793B (zh) * | 2019-07-05 | 2023-09-05 | 广州虎牙科技有限公司 | 牙齿的图像处理、直播方法、装置、电子设备和存储介质 |
| CN111652792B (zh) * | 2019-07-05 | 2024-03-05 | 广州虎牙科技有限公司 | 图像的局部处理、直播方法、装置、设备和存储介质 |
| CN111652023B (zh) * | 2019-07-05 | 2023-09-01 | 广州虎牙科技有限公司 | 嘴型的调整、直播方法、装置、电子设备和存储介质 |
| CN110719407A (zh) * | 2019-10-18 | 2020-01-21 | 北京字节跳动网络技术有限公司 | 图片美化方法、装置、设备及存储介质 |
| CN111556303B (zh) * | 2020-05-14 | 2022-07-15 | 北京字节跳动网络技术有限公司 | 人脸图像处理方法、装置、电子设备及计算机可读介质 |
| CN111583102B (zh) * | 2020-05-14 | 2023-05-16 | 抖音视界有限公司 | 人脸图像处理方法、装置、电子设备及计算机存储介质 |
| CN111583103B (zh) * | 2020-05-14 | 2023-05-16 | 抖音视界有限公司 | 人脸图像处理方法、装置、电子设备及计算机存储介质 |
| CN113674177B (zh) * | 2021-08-25 | 2024-03-26 | 咪咕视讯科技有限公司 | 一种人像唇部的自动上妆方法、装置、设备和存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101383907A (zh) * | 2007-09-04 | 2009-03-11 | 奥林巴斯映像株式会社 | 图像处理装置和图像处理方法 |
| CN103914699A (zh) * | 2014-04-17 | 2014-07-09 | 厦门美图网科技有限公司 | 一种基于色彩空间的自动唇彩的图像增强的方法 |
| CN104298961A (zh) * | 2014-06-30 | 2015-01-21 | 中国传媒大学 | 基于口型识别的视频编排方法 |
| CN104794693A (zh) * | 2015-04-17 | 2015-07-22 | 浙江大学 | 一种人脸关键区域自动检测蒙版的人像优化方法 |
-
2017
- 2017-10-31 CN CN201711046223.1A patent/CN107800966B/zh not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101383907A (zh) * | 2007-09-04 | 2009-03-11 | 奥林巴斯映像株式会社 | 图像处理装置和图像处理方法 |
| CN103914699A (zh) * | 2014-04-17 | 2014-07-09 | 厦门美图网科技有限公司 | 一种基于色彩空间的自动唇彩的图像增强的方法 |
| CN104298961A (zh) * | 2014-06-30 | 2015-01-21 | 中国传媒大学 | 基于口型识别的视频编排方法 |
| CN104794693A (zh) * | 2015-04-17 | 2015-07-22 | 浙江大学 | 一种人脸关键区域自动检测蒙版的人像优化方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107800966A (zh) | 2018-03-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107800966B (zh) | 图像处理的方法、装置、计算机可读存储介质和电子设备 | |
| CN107730446B (zh) | 图像处理方法、装置、计算机设备及计算机可读存储介质 | |
| CN107808136B (zh) | 图像处理方法、装置、可读存储介质和计算机设备 | |
| CN108537749B (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
| US20190130169A1 (en) | Image processing method and device, readable storage medium and electronic device | |
| CN107862657A (zh) | 图像处理方法、装置、计算机设备及计算机可读存储介质 | |
| CN107451969B (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
| CN108537155B (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
| CN107993209B (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
| CN107730445A (zh) | 图像处理方法、装置、存储介质和电子设备 | |
| CN110149482A (zh) | 对焦方法、装置、电子设备和计算机可读存储介质 | |
| CN108009999A (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
| CN107911625A (zh) | 测光方法、装置、可读存储介质和计算机设备 | |
| CN110276767A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
| CN107862653B (zh) | 图像显示方法、装置、存储介质和电子设备 | |
| CN108846807B (zh) | 光效处理方法、装置、终端及计算机可读存储介质 | |
| CN107945107A (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
| CN107800965B (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 | |
| CN107742274A (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
| CN110473185A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
| WO2019105305A1 (zh) | 图像亮度处理方法、计算机可读存储介质和电子设备 | |
| CN110334635A (zh) | 主体追踪方法、装置、电子设备和计算机可读存储介质 | |
| CN107509031A (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
| CN107945135A (zh) | 图像处理方法、装置、存储介质和电子设备 | |
| CN109360254B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. |
|
| CB02 | Change of applicant information | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20191018 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |