CN105719234B - 用于人脸区域的自动去油光方法、系统及拍摄终端 - Google Patents

用于人脸区域的自动去油光方法、系统及拍摄终端 Download PDF

Info

Publication number
CN105719234B
CN105719234B CN201610051147.2A CN201610051147A CN105719234B CN 105719234 B CN105719234 B CN 105719234B CN 201610051147 A CN201610051147 A CN 201610051147A CN 105719234 B CN105719234 B CN 105719234B
Authority
CN
China
Prior art keywords
region
glossy
human face
area
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610051147.2A
Other languages
English (en)
Other versions
CN105719234A (zh
Inventor
张伟
吕仰铭
李志阳
傅松林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiamen Meitu Technology Co Ltd
Original Assignee
Xiamen Meitu Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiamen Meitu Technology Co Ltd filed Critical Xiamen Meitu Technology Co Ltd
Priority to CN201610051147.2A priority Critical patent/CN105719234B/zh
Publication of CN105719234A publication Critical patent/CN105719234A/zh
Application granted granted Critical
Publication of CN105719234B publication Critical patent/CN105719234B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G06T3/04

Abstract

本发明公开了一种用于人脸区域的自动去油光方法、系统及拍摄终端,其通过获取待处理图像的皮肤区域,对所述人脸皮肤区域进行亮度分析得到高光区域,对所述高光区域进行边缘检测,并根据边缘检测结果剔除白色物体的区域得到油光区域,最后对所述油光区域进行去除高光的处理得到修复图像;能够准确进行油光识别,并有效消除油光,处理效果更好。

Description

用于人脸区域的自动去油光方法、系统及拍摄终端
技术领域
本发明涉及图像处理技术领域,特别是一种用于人脸区域的自动去油光方法及其应用该方法的系统、拍摄终端。
背景技术
现有技术中,已有较多消除图像光噪的算法,但鲜有对光噪定位的算法,一个很大的难点是很难确定曝光过度(高光区)和白色物体(白光区)之间的区别,再加上自然图像的复杂性,使得定位光噪区域变得更加困难;现有技术中直接对待处理图像进行高光去除的处理方法,容易对白光区产生误处理,使得不属于皮肤油光的区域也被去除,使得图像失真,用户体验不好。
发明内容
本发明为解决上述问题,提供了一种用于人脸区域的自动去油光方法、系统及拍摄终端,能够准确进行油光识别,并有效消除油光,处理效果更好。
为实现上述目的,本发明采用的技术方案为:
首先,本发明提供一种用于人脸区域的自动去油光方法,其特征在于,包括以下步骤:
10.获取待处理图像的皮肤区域;
20.对所述人脸皮肤区域进行亮度分析,得到高光区域;
30.对所述高光区域进行边缘检测,并根据边缘检测结果剔除白色物体的区域,得到油光区域;
40.对所述油光区域进行去除高光的处理,得到修复图像。
优选的,所述的步骤10中,进一步包括:
11.对待处理图像进行人脸识别,获取人脸区域以及人脸特征点;
12.对所述人脸特征点进行区域填充计算,得到人脸五官区域;
13.剔除所述人脸五官区域,得到人脸皮肤区域。
优选的,所述的步骤20中,对所述人脸皮肤区域进行亮度分析,是分析人脸皮肤区域的RGB三个通道中的暗通道的亮度统计特性,得到所述高光区域。
优选的,所述的步骤30中,对所述高光区域进行边缘检测,是通过计算检测到的边缘与各个高光区域的外缘之间的重合度,当检测到的边缘与当前高光区域的外缘的重合度大于预设阈值时,则判定为当前高光区域为白色物体的区域,并剔除该白色物体的区域,得到油光区域。
优选的,所述的步骤30中,进一步包括对所述的油光区域进行膨胀处理,使其包含过渡区域,得到膨胀后的油光区域。
优选的,所述的步骤40中,进一步包括:
41.对所述油光区域进行减小梯度的调整,得到调整后的梯度图;
42.对调整后的梯度图求解泊松方程进行图像复原,得到所述修复图像。
其次,本发明提供一种用于人脸区域的自动去油光系统,其包括:
人脸识别模块,用于通过人脸识别获取待处理图像的皮肤区域;
亮度分析模块,用于对所述人脸皮肤区域进行亮度分析,得到高光区域;
边缘检测模块,用于对所述高光区域进行边缘检测,并根据边缘检测结果剔除白色物体的区域,得到油光区域;
高光去除模块,用于对所述油光区域进行去除高光的处理,得到修复图像。
优选的,所述高光去除模块进一步包括:
梯度调整单元,用于对所述油光区域进行减小梯度的调整,得到调整后的梯度图;
图像复原单元,用于对调整后的梯度图求解泊松方程进行图像复原,得到所述修复图像。
另外,本发明还提供一种拍摄终端,该拍摄终端包括如上所述的用于人脸区域的自动去油光系统。
优选的,所述拍摄终端包括:手机、数码相机或平板电脑。
本发明的有益效果是:
本发明的一种用于人脸区域的自动去油光方法、系统及拍摄终端,其通过获取待处理图像的皮肤区域,对所述人脸皮肤区域进行亮度分析得到高光区域,对所述高光区域进行边缘检测,并根据边缘检测结果剔除白色物体的区域得到油光区域,最后对所述油光区域进行去除高光的处理得到修复图像;能够准确进行油光识别,并有效消除油光,处理效果更好。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为本发明用于人脸区域的自动去油光方法的流程简图;
图2为本发明用于人脸区域的自动去油光系统的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明是一种专门用于人脸区域的自动去油光算法,其中包括油光识别和油光消除两部分。如图1所示,本发明的一种用于人脸区域的自动去油光方法,具体包括以下步骤:
10.获取待处理图像的皮肤区域;
20.对所述人脸皮肤区域进行亮度分析,得到高光区域;
30.对所述高光区域进行边缘检测,并根据边缘检测结果剔除白色物体的区域,得到油光区域;
40.对所述油光区域进行去除高光的处理,得到修复图像。
所述的步骤10中,进一步包括:
11.对待处理图像进行人脸识别,获取人脸区域以及人脸特征点;
12.对所述人脸特征点进行区域填充计算,得到人脸五官区域;
13.剔除所述人脸五官区域,得到人脸皮肤区域。
通过人脸识别获取到人脸区域,并通过人脸特征点之间的连接和区域填充算法得到人脸五官区域,通过提出人脸五官区域得到只包含人脸轮廓且不包含眼睛,眉毛,嘴巴的人脸皮肤区域,使得去除高光时更具有针对性,避免误处理和图像失真。
所述的步骤20中,对所述人脸皮肤区域进行亮度分析,是分析人脸皮肤区域的RGB三个通道中的暗通道的亮度统计特性,得到所述高光区域,高光识别更准确。
本实施例中,所述高光区域的计算方法为:
pL=min(pLR,min(pLG,pLB));
nEV=min(255,max(Mean+2.5*Var,200));
其中max表示两者间的最大值,min表示两者之间的最小值,pLR,pLG,pLB表示人脸区域某点的RGB值,pL表示这点的亮度值。Mean,Var表示Fmask区域的亮度平均值和方差。nEV是高光的阈值,即pL大于nEV则认为高光。
所述的步骤30中,由于白色物体一般是有明显边缘的,而高光区域是一个渐变的过渡,一般没有明显边缘,例如最常见的黑白相间的眼镜框,白色部分很容易被识别成高光,因此,本发明通过对所述高光区域进行边缘检测来剔除白色物体的区域,使得高光识别更准确,具体是通过计算检测到的边缘与各个高光区域的外缘之间的重合度,当检测到的边缘与当前高光区域的外缘的重合度大于预设阈值时,则判定为当前高光区域为白色物体的区域,例如,当检测到的边缘的重合度大于所述高光区域的外缘的一半以上时,则判定为这块高光区域是白色物体,并剔除该白色物体的区域,得到油光区域;并且,还进一步包括对所述的油光区域进行膨胀处理,使其包含过渡区域,得到膨胀后的油光区域,使得修复效果更自然。
所述的步骤40中,进一步包括:
41.对所述油光区域进行减小梯度的调整,得到调整后的梯度图;
42.对调整后的梯度图求解泊松方程进行图像复原,得到所述修复图像。
所述油光区域的减小梯度的调整方法为:
其中,Gx为水平方向的梯度,求取方式是后一个像素值减去前一个像素值,Gy为竖直方向梯度,求取方式是下一个像素减去上一个像素。
Gy的调整方法与上述类似。
另外,Gx、Gy都为0时不做调整。
本发明选择梯度减小,并且基于梯度图操作再复原,减小高光区周围的梯度,比直接操作原图亮度,效果更自然,优选的,减小的函数选择具有让大梯度减小而小梯度基本保持不变的特性,从而能够更好的保持高光区的纹理细节。
除了采用上述梯度减小的方法,还可以采用大梯度块替换为小梯度块的梯度块替换方法,同样也能够去除高光,并且能够让大梯度变小而小梯度基本不变,因此高光也能去除而且纹理细节也能得到保留。
或者,还可以对所述油光区域进行色阶调整或亮度曲线调整等,在此不一一列举。
如图2所示,本发明提供一种用于人脸区域的自动去油光系统,其包括:
人脸识别模块A,用于通过人脸识别获取待处理图像的皮肤区域;
亮度分析模块B,用于对所述人脸皮肤区域进行亮度分析,得到高光区域;
边缘检测模块C,用于对所述高光区域进行边缘检测,并根据边缘检测结果剔除白色物体的区域,得到油光区域;
高光去除模块D,用于对所述油光区域进行去除高光的处理,得到修复图像。
本实施例中,所述高光去除模块D进一步包括:
梯度调整单元D1,用于对所述油光区域进行减小梯度的调整,得到调整后的梯度图;
图像复原单元D2,用于对调整后的梯度图求解泊松方程进行图像复原,得到所述修复图像。
本发明还提供一种拍摄终端,该拍摄终端包括如上所述的用于人脸区域的自动去油光系统,其中,用于人脸区域的自动去油光系统可以采用图2实施例的结构,其对应地,可以执行图1所示方法实施例的技术方案,其实现原理和技术效果类似,详细可以参见上述实施例中的相关记载,此处不再赘述。
所述拍摄终端包括:手机、数码相机或平板电脑等配置有摄像头的设备。
本发明首先通过人脸识别技术获取到人脸区域,并通过五官区域的特征点检测剔除眉毛,眼睛,嘴巴的影响,即得到基本只包含人脸皮肤的皮肤区域,然后分析亮度曲线得到初始高光区域,并通过边缘检测区分油光区域和白色物体(例如黑白相间的眼镜框),并剔除白色物体,然后对剩下的高光区域(即油光区域)进行膨胀处理使其包含从正常区域到高光区域的过渡区域,最后减小油光区域的梯度,再通过求解泊松方程复原得到最终的消除油光后的修复图像,从而实现快速有效的修复人脸的油光区域,修复效果更好。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于系统实施例和终端实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。并且,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。另外,本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
上述说明示出并描述了本发明的优选实施例,应当理解本发明并非局限于本文所披露的形式,不应看作是对其他实施例的排除,而可用于各种其他组合、修改和环境,并能够在本文发明构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围,则都应在本发明所附权利要求的保护范围内。

Claims (10)

1.一种用于人脸区域的自动去油光方法,其特征在于,包括以下步骤:
10.获取待处理图像的皮肤区域;
20.对所述人脸皮肤区域进行亮度分析,得到高光区域;
30.对所述高光区域进行边缘检测,并根据边缘检测结果剔除白色物体的区域,得到油光区域;
40.对所述油光区域进行去除高光的处理,得到修复图像。
2.根据权利要求1所述的一种用于人脸区域的自动去油光方法,其特征在于:所述的步骤10中,进一步包括:
11.对待处理图像进行人脸识别,获取人脸区域以及人脸特征点;
12.对所述人脸特征点进行区域填充计算,得到人脸五官区域;
13.剔除所述人脸五官区域,得到人脸皮肤区域。
3.根据权利要求1所述的一种用于人脸区域的自动去油光方法,其特征在于:所述的步骤20中,对所述人脸皮肤区域进行亮度分析,是分析人脸皮肤区域的RGB三个通道中的暗通道的亮度统计特性,得到所述高光区域。
4.根据权利要求1所述的一种用于人脸区域的自动去油光方法,其特征在于:所述的步骤30中,对所述高光区域进行边缘检测,是通过计算检测到的边缘与各个高光区域的外缘之间的重合度,当检测到的边缘与当前高光区域的外缘的重合度大于预设阈值时,则判定为当前高光区域为白色物体的区域,并剔除该白色物体的区域,得到油光区域。
5.根据权利要求1所述的一种用于人脸区域的自动去油光方法,其特征在于:所述的步骤30中,进一步包括对所述的油光区域进行膨胀处理,使其包含过渡区域,得到膨胀后的油光区域。
6.根据权利要求1至5任一项所述的一种用于人脸区域的自动去油光方法,其特征在于:所述的步骤40中,进一步包括:
41.对所述油光区域进行减小梯度的调整,得到调整后的梯度图;
42.对调整后的梯度图求解泊松方程进行图像复原,得到所述修复图像。
7.一种用于人脸区域的自动去油光系统,其特征在于,包括:
人脸识别模块,用于通过人脸识别获取待处理图像的皮肤区域;
亮度分析模块,用于对所述人脸皮肤区域进行亮度分析,得到高光区域;
边缘检测模块,用于对所述高光区域进行边缘检测,并根据边缘检测结果剔除白色物体的区域,得到油光区域;
高光去除模块,用于对所述油光区域进行去除高光的处理,得到修复图像。
8.根据权利要求7所述的一种用于人脸区域的自动去油光系统,其特征在于:所述高光去除模块进一步包括:
梯度调整单元,用于对所述油光区域进行减小梯度的调整,得到调整后的梯度图;
图像复原单元,用于对调整后的梯度图求解泊松方程进行图像复原,得到所述修复图像。
9.一种拍摄终端,其特征在于,包括权利要求7至8任一项所述的用于人脸区域的自动去油光系统。
10.根据权利要求9所述的拍摄终端,其特征在于,所述拍摄终端包括:手机、数码相机或平板电脑。
CN201610051147.2A 2016-01-26 2016-01-26 用于人脸区域的自动去油光方法、系统及拍摄终端 Active CN105719234B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610051147.2A CN105719234B (zh) 2016-01-26 2016-01-26 用于人脸区域的自动去油光方法、系统及拍摄终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610051147.2A CN105719234B (zh) 2016-01-26 2016-01-26 用于人脸区域的自动去油光方法、系统及拍摄终端

Publications (2)

Publication Number Publication Date
CN105719234A CN105719234A (zh) 2016-06-29
CN105719234B true CN105719234B (zh) 2018-12-11

Family

ID=56154082

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610051147.2A Active CN105719234B (zh) 2016-01-26 2016-01-26 用于人脸区域的自动去油光方法、系统及拍摄终端

Country Status (1)

Country Link
CN (1) CN105719234B (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106296617B (zh) * 2016-08-22 2019-03-05 腾讯科技(深圳)有限公司 人脸图像的处理方法及装置
CN106327523A (zh) * 2016-08-26 2017-01-11 央视国际网络无锡有限公司 一种视频中污损区域的填充方法
CN108665421B (zh) * 2017-03-31 2021-05-14 北京旷视科技有限公司 人脸图像高光分量去除装置和方法、存储介质产品
CN107392858B (zh) * 2017-06-16 2020-09-29 Oppo广东移动通信有限公司 图像高光区域处理方法、装置和终端设备
CN107194374A (zh) * 2017-06-16 2017-09-22 广东欧珀移动通信有限公司 人脸区域的去油光方法、装置及终端
CN107392841B (zh) * 2017-06-16 2020-04-24 Oppo广东移动通信有限公司 人脸区域中黑眼圈消除方法、装置及终端
CN107610059B (zh) * 2017-08-28 2020-10-16 维沃移动通信有限公司 一种图像处理方法及移动终端
CN107645636B (zh) * 2017-08-31 2019-11-29 维沃移动通信有限公司 一种拍照的方法及移动终端
CN108122212A (zh) * 2017-12-21 2018-06-05 北京小米移动软件有限公司 图像修复方法及装置
CN108288044B (zh) * 2018-01-31 2020-11-20 Oppo广东移动通信有限公司 电子装置、人脸识别方法及相关产品
CN110349165A (zh) * 2018-04-03 2019-10-18 北京京东尚科信息技术有限公司 图像处理方法、装置、电子设备及计算机可读介质
CN108510500B (zh) * 2018-05-14 2021-02-26 深圳市云之梦科技有限公司 一种基于人脸肤色检测的虚拟人物形象的头发图层处理方法及系统
CN108846807B (zh) * 2018-05-23 2021-03-02 Oppo广东移动通信有限公司 光效处理方法、装置、终端及计算机可读存储介质
CN109146893B (zh) * 2018-08-01 2020-10-09 厦门美图之家科技有限公司 油光区域分割方法、装置及移动终端
CN109816601A (zh) * 2018-12-26 2019-05-28 维沃移动通信有限公司 一种图像处理方法和终端设备
CN110910309B (zh) * 2019-12-05 2024-03-19 广州酷狗计算机科技有限公司 图像处理方法、装置、电子设备、存储介质及程序产品
CN111626921A (zh) * 2020-05-09 2020-09-04 北京字节跳动网络技术有限公司 图片处理方法、装置及电子设备
CN114219718A (zh) * 2020-09-04 2022-03-22 广州虎牙科技有限公司 一种皮肤处理、直播方法、计算机设备和存储介质
CN112381737A (zh) * 2020-11-17 2021-02-19 北京达佳互联信息技术有限公司 图像处理方法、装置、电子设备及存储介质
CN113221619B (zh) * 2021-01-28 2024-02-20 深圳市雄帝科技股份有限公司 基于泊松重建的人脸图像去高光方法、系统及其存储介质
CN113221618B (zh) * 2021-01-28 2023-10-17 深圳市雄帝科技股份有限公司 人脸图像去高光的方法、系统及其存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8160398B1 (en) * 2008-07-31 2012-04-17 Adobe Systems Incorporated Independent resizing of multiple image regions
CN103985098A (zh) * 2014-05-27 2014-08-13 广州商景网络科技有限公司 一种证件图像的高光去除方法及系统
CN104952036A (zh) * 2015-06-18 2015-09-30 福州瑞芯微电子有限公司 一种即时视频中的人脸美化方法和电子设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8160398B1 (en) * 2008-07-31 2012-04-17 Adobe Systems Incorporated Independent resizing of multiple image regions
CN103985098A (zh) * 2014-05-27 2014-08-13 广州商景网络科技有限公司 一种证件图像的高光去除方法及系统
CN104952036A (zh) * 2015-06-18 2015-09-30 福州瑞芯微电子有限公司 一种即时视频中的人脸美化方法和电子设备

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
DETECTING SPECULAR HIGHLIGHTS IN DERMATOLOGICAL IMAGES;Ali Madooei et al;《2015 IEEE International Conference on Image Processing (ICIP)》;20151210;第4357-4360页 *
彩色图像人脸高光区域的自动检测与校正方法;陈锻生等;《软件学报》;20031130;第1900-1906页 *
证件照人脸自动偏色校正和高光去除;钟超军;《中国优秀硕士学位论文全文数据库 信息科技辑》;20151215;第I138-414页 *

Also Published As

Publication number Publication date
CN105719234A (zh) 2016-06-29

Similar Documents

Publication Publication Date Title
CN105719234B (zh) 用于人脸区域的自动去油光方法、系统及拍摄终端
CN105243371B (zh) 一种人脸美颜程度的检测方法、系统及拍摄终端
Hussin et al. Digital image processing techniques for object detection from complex background image
KR101715486B1 (ko) 화상 처리 장치 및 화상 처리 방법
CN108345818B (zh) 一种人脸活体检测方法及装置
KR101446975B1 (ko) 얼굴 검출 기능을 사용한 얼굴 및 피부의 자동 미화
CN105550631B (zh) 一种虹膜图像采集方法及装置
JP4893863B1 (ja) 画像処理装置、および画像処理方法
EP1499110A2 (en) Detecting and correcting red-eye in a digital-image
WO2012124142A1 (ja) 画像処理装置、および画像処理方法
CN106683080B (zh) 一种视网膜眼底图像预处理方法
CN104318262A (zh) 通过人脸照片更换皮肤的方法及系统
CN103268475A (zh) 一种基于人脸、肤色检测的皮肤美容方法
WO2021042823A1 (zh) 图片检测方法及装置
Yu et al. A false color image fusion method based on multi-resolution color transfer in normalization YCBCR space
WO2020019286A1 (zh) 眼睑下垂检测方法及系统
JP2018049564A5 (zh)
Yoo et al. Red-eye detection and correction using inpainting in digital photographs
JP2004005384A (ja) 画像処理方法、画像処理装置、プログラム及び記録媒体、自動トリミング装置、並びに肖像写真撮影装置
CN105447827B (zh) 图像降噪方法和系统
JP4076777B2 (ja) 顔領域抽出装置
CN105809128B (zh) 一种眼部图像的眼瞳定位方法、系统及拍摄终端
JP6098133B2 (ja) 顔構成部抽出装置、顔構成部抽出方法及びプログラム
WO2020129176A1 (ja) 画像処理システム、画像処理方法および画像処理プログラム
CN113379623B (zh) 图像处理方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant