CN107730465A - 一种图像中人脸美颜方法及装置 - Google Patents

一种图像中人脸美颜方法及装置 Download PDF

Info

Publication number
CN107730465A
CN107730465A CN201710930575.7A CN201710930575A CN107730465A CN 107730465 A CN107730465 A CN 107730465A CN 201710930575 A CN201710930575 A CN 201710930575A CN 107730465 A CN107730465 A CN 107730465A
Authority
CN
China
Prior art keywords
face
image
region
face region
outer peripheral
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710930575.7A
Other languages
English (en)
Other versions
CN107730465B (zh
Inventor
李亮
张文明
陈少杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bantang Deicing Technology Beijing Co ltd
Original Assignee
Wuhan Douyu Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Douyu Network Technology Co Ltd filed Critical Wuhan Douyu Network Technology Co Ltd
Priority to CN201710930575.7A priority Critical patent/CN107730465B/zh
Publication of CN107730465A publication Critical patent/CN107730465A/zh
Application granted granted Critical
Publication of CN107730465B publication Critical patent/CN107730465B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/77Retouching; Inpainting; Scratch removal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Geometry (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种图像中人脸美颜方法及装置,包括:检测出目标图像中的人脸区域;确定围绕人脸区域的外围区域和人脸区域为待美颜区域;通过美颜处理待美颜区域,以生成对应于目标图像的第一美颜后图像,第一美颜后图像中包含人脸区域对应的美颜后人脸区域、外围区域对应的美颜后外围区域、以及相对于待美颜区域的背景区域;通过平滑处理所述第一美颜后图像中的美颜后外围区域,以生成对应于目标图像的第二美颜后图像,第二美颜后图像中包含美颜后人脸区域、美颜后外围区域对应的平滑后外围区域和背景区域;输出第二美颜后图像,从而本发明解决了图像美颜后失真的技术问题。

Description

一种图像中人脸美颜方法及装置
技术领域
本发明涉及图像处理领域,尤其涉及一种图像中人脸美颜方法及装置。
背景技术
美颜是直播产品中最常见的功能之一,在香港上市的美图公司的主打产品就是美颜相机和美拍,有媒体戏称其会冲击化妆品行业,其实就是美颜效果的功劳,让主播们不化妆也可以自信的直播,而美颜则可以使用户拍出更好的自己。美颜的主要原理是通过磨皮和美白来达到整体美颜的效果。磨皮的技术术语是去噪,即对图像中的噪点进行去除或者模糊化处理,常见的去噪算法有均值模糊、高斯模糊和中值滤波等。美白则实际上是调整图像的色彩,使人的肤色看起来更白,更加靓丽,包括调节色温,亮度,对比度等。
由于美颜是对整张图像进行处理,由于包括了人脸区域和背景区域,背景区域经过美颜处理后会显的失真。
发明内容
本发明实施例通过提供一种图像中人脸美颜方法及装置,解决了图像美颜后失真的技术问题。
第一方面,本发明实施例提供一种图像中人脸美颜方法,包括:
检测出目标图像中的人脸区域;
确定围绕所述人脸区域的外围区域和所述人脸区域为待美颜区域,所述外围区域为相对于所述人脸区域的原始背景区域中靠近所述人脸区域的一部分;
通过美颜处理所述待美颜区域,以生成对应于所述目标图像的第一美颜后图像,所述第一美颜后图像中包含所述人脸区域对应的美颜后人脸区域、所述外围区域对应的美颜后外围区域和相对于所述待美颜区域的背景区域;
通过平滑处理所述第一美颜后图像中的美颜后外围区域,以生成对应于所述目标图像的第二美颜后图像,所述第二美颜后图像中包含所述美颜后人脸区域、所述美颜后外围区域对应的平滑后外围区域和所述背景区域;
输出所述第二美颜后图像。
可选的,所述平滑处理所述第一美颜后图像中的美颜后外围区域,包括:
将所述美颜后外围区域中每个像素点的像素值与所述外围区域中对应像素点的像素值进行加权处理,以得出所述第二美颜后图像中的平滑后外围区域中每个像素点的像素值,其中,加权系数与当前像素点相距人脸区域边界的距离相关。
可选的,所述检测出目标图像中的人脸区域,包括:
从所述目标图像中检测以对角坐标标定人脸区域边界的矩形人脸区域。
可选的,所述确定围绕所述人脸区域的外围区域和所述人脸区域为待美颜区域包括:
基于标定所述矩形人脸区域边界的对角坐标确定出所述矩形人脸区域的矩形宽度和矩形高度;
将所述矩形人脸区域的矩形宽度与预设放大参数的乘积结果确定为所述待美颜区域的矩形宽度;
将所述矩形人脸区域的矩形高度与所述预设放大参数的乘积结果确定为所述待美颜区域的矩形高度;
基于所述待美颜区域的矩形宽度、所述矩形人脸区域的矩形宽度以及所述矩形人脸区域的对角坐标中的横坐标共同确定出所述待美颜区域的对角坐标中的横坐标;
基于所述待美颜区域的矩形高度、所述矩形人脸区域的矩形高度以及所述矩形人脸区域的对角坐标中的纵坐标共同确定出所述待美颜区域的对角坐标中的纵坐标;
基于所述待美颜区域的对角坐标的横坐标和纵坐标确定出以对角坐标标定所述待美颜区域边界的矩形待美颜区域。
可选的,所述美颜处理所述待美颜区域,包括:
将所述矩形人脸区域和围绕所述矩形人脸区域的外围区域输入至同一美颜处理算法中进行美颜处理。
可选的,所述将所述美颜后外围区域中每个像素点的像素值与所述外围区域中对应像素点的像素值进行加权处理,以得出所述第二美颜后图像中的平滑后外围区域中每个像素点的像素值,包括:基于如下公式分别对所述第一美颜后图像中的外围区域中的每个像素点进行平滑处理;
F=D×β1+I×β2
F表示平滑后外围区域中当前像素点的像素值,D为外围区域中对应像素点的像素值,I为美颜后外围区域中对应像素点的像素值,β1为针对外围区域的加权系数,且与当前像素点相距人脸区域边界正向相关,β2为针对美颜后外围区域的加权系数,且与当前像素点相距人脸区域边界反向相关。
可选的,所述目标图像,具体为:
从直播视频中获取的当前视频帧,或者
从存储区域获取的单张照片,或者
摄像头装置当前采集的单个图像。
第二方面,本发明实施例提供一种图像中人脸美颜装置,包括:
人脸检测单元,用于检测出目标图像中的人脸区域;
区域放大单元,用于确定围绕所述人脸区域的外围区域和所述人脸区域为待美颜区域,所述外围区域为相对于所述人脸区域的原始背景区域中靠近所述人脸区域的一部分;
美颜处理单元,用于通过美颜处理所述待美颜区域,以生成对应于所述目标图像的第一美颜后图像,所述第一美颜后图像中包含所述人脸区域对应的美颜后人脸区域、所述外围区域对应的美颜后外围区域和相对于所述待美颜区域的背景区域;
平滑处理单元,用于通过平滑处理所述第一美颜后图像中的美颜后外围区域,以生成对应于所述目标图像的第二美颜后图像,所述第二美颜后图像中包含所述美颜后人脸区域、所述美颜后外围区域对应的平滑后外围区域和所述背景区域;
图像输出单元,用于输出所述第二美颜后图像。
可选的,所述平滑处理单元具体用于:
将所述美颜后外围区域中每个像素点的像素值与所述外围区域中对应像素点的像素值进行加权处理,以得出所述第二美颜后图像中的平滑后外围区域中每个像素点的像素值,其中,加权系数与当前像素点相距人脸区域边界的距离相关。
可选的,所述人脸检测单元,具体用于:
从所述目标图像中检测以对角坐标标定人脸区域边界的矩形人脸区域。
可选的,所述区域放大单元,具体用于:
基于标定所述矩形人脸区域边界的对角坐标确定出所述矩形人脸区域的矩形宽度和矩形高度;
将所述矩形人脸区域的矩形宽度与预设放大参数的乘积结果确定为所述待美颜区域的矩形宽度;
将所述矩形人脸区域的矩形高度与所述预设放大参数的乘积结果确定为所述待美颜区域的矩形高度;
基于所述待美颜区域的矩形宽度、所述矩形人脸区域的矩形宽度以及所述矩形人脸区域的对角坐标中的横坐标共同确定出所述待美颜区域的对角坐标中的横坐标;
基于所述待美颜区域的矩形高度、所述矩形人脸区域的矩形高度以及所述矩形人脸区域的对角坐标中的纵坐标共同确定出所述待美颜区域的对角坐标中的纵坐标;
基于所述待美颜区域的对角坐标的横坐标和纵坐标确定出以对角坐标标定所述待美颜区域边界的矩形待美颜区域。
可选的,所述美颜处理单元,具体用于:
将所述矩形人脸区域和围绕所述矩形人脸区域的外围区域输入至同一美颜处理算法中进行美颜处理。
可选的,所述平滑处理单元,具体用于:基于如下公式分别对所述第一美颜后图像中的外围区域中的每个像素点进行平滑处理;
F=D×β1+I×β2
其中,F表示所述平滑后外围区域中当前像素点的像素值,D为所述外围区域中对应像素点的像素值,I为所述美颜后外围区域中对应像素点的像素值,β1为针对所述外围区域的加权系数,且与当前像素点相距人脸区域边界正向相关,β2为针对所述美颜后外围区域的加权系数,且与当前像素点相距人脸区域边界反向相关。
所述目标图像,具体为:
从直播视频中获取的当前视频帧,或者
从存储区域获取的单张照片,或者
摄像头装置当前采集的单个图像。
第三方面,本发明实施例提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现第一方面中任一实施方式所述的步骤。
第四方面,本发明实施例提供一种计算机设备,其上存储有计算机程序,该程序被处理器执行时实现第一方面中任一实施方式所述的步骤。
本发明实施例提供的一个或多个技术方案,至少实现了如下技术效果或优点:
检测出目标图像中的人脸区域;放大目标图像中人脸区域的区域范围,以确定出围绕所述人脸区域的外围区域和人脸区域为待美颜区域;美颜处理待美颜区域,以生成对应于目标图像的第一美颜后图像,第一美颜后图像中包含人脸区域对应的美颜后人脸区域、外围区域对应的美颜后外围区域、以及相对于待美颜区域的背景区域;对第一美颜后图像中的美颜后外围区域平滑处理,以生成对应于目标图像的第二美颜后图像,第二美颜后图像中包含美颜后人脸区域、美颜后外围区域对应的平滑后外围区域、背景区域;输出第二美颜后图像。从而只对目标图像中的人脸的区域进行美颜处理,过滤掉背景区域,使背景区域不受美颜的影响,从而避免了背景区域的失真现象。并且外围图像的处理使得人脸区域向背景区域有平滑过渡,从而避免了对人脸的美颜与背景区域存在明显差异,提高了美颜效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的图像中人脸美颜方法的流程图;
图2为本发明实施例提供的图像中人脸美颜方法的程序模块图;
图3为本发明实施例提供的计算机可读存储介质的结构示意图;
图4为本发明实施例提供的计算机设备的结构示意图。
具体实施方式
为了解决了现有图像美颜后失真的技术问题,本发明实施例提供了一种图像中人脸美颜方法及装置,总体思路如下:
检测图像中人脸区域,只对人脸区域进行美颜处理,以及对围绕人脸区域的一定比例的外围区域进行美颜和平滑处理,使得外围区域之外的背景区域不受美颜的影响,并且人脸区域美颜后相对于背景区域有过渡,因此避免了背景区域的失真现象,提高了美颜效果。
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参考图1所示,本发明实施例提供的图像中人脸美颜方法,包括如下步骤:
首先执行步骤S101、检测出目标图像中的人脸区域。
具体的,基于统计的人脸检测方法或者深度学习的人脸检测算法从目标图像中检测出人脸区域。基于统计的人脸检测方法具体可以为Adaboost迭代算法、SVM(supportvector machine,支持向量机)、隐马尔可夫模型中的一种,基于深度学习的人脸检测算法可以为R-CNN(Regions with Convolutional Neural Network Features)、Fast R-CNN、Cascade CNN、SSD(Single Shot MultiBox Detector)、YOLO(You Only Look Once)等。CNN表示卷积神经网络,Android系统和iOS系统本身提供了人脸检测的函数,在移动APP中可直接调用,本文不进行赘述。
需要说明的是,本实施例中的目标图像可以为从直播视频中获取的当前视频帧,或者从存储区域中获取的单张照片,或者摄像头装置当前采集的单个图像。如果目标图像为从直播视频中获取的当前视频帧,则在步骤S101中为实时检测,以检测到当前视频帧。
具体的,检测出目标图像中的人脸区域,包括:从目标图像中检测以对角坐标标定人脸区域边界的矩形人脸区域。
在具体实施过程中,矩形人脸区域边界可以由左上角坐标和右下角坐标组成的对角坐标标定,也可以由右上角坐标和左下角坐标组成的对角坐标标定。
在步骤S101之后,接着执行步骤S102:确定围绕所述人脸区域的外围区域和所述人脸区域为待美颜区域,所述外围区域为相对于所述人脸区域的原始背景区域中靠近所述人脸区域的一部分。
需要说明的是,原始背景区域中远离人脸区域的一部分为本实施例中所指的背景区域,原始背景区域为除了人脸所在区域之外均为原始背景区域的范围,外围区域可以为其内边界与矩形人脸区域的边界重合的矩形环区域。
则对应的,为了确定围绕所述人脸区域的外围区域和所述人脸区域为待美颜区域,所述外围区域为相对于所述人脸区域的原始背景区域中靠近所述人脸区域的一部分,则S102具体包括如下步骤S1021~S1026:
S1021、基于标定矩形人脸区域边界的对角坐标确定出矩形人脸区域的矩形宽度和矩形高度。
S1022、将矩形人脸区域的矩形宽度与预设放大参数的乘积结果确定为待美颜区域的矩形宽度;
S1023、将矩形人脸区域的矩形高度与预设放大参数的乘积结果确定为待美颜区域的矩形高度;
S1024、基于待美颜区域的矩形宽度、矩形人脸区域的矩形宽度以及矩形人脸区域的对角坐标中的横坐标共同确定出待美颜区域的对角坐标中的横坐标;
S1025、基于待美颜区域的矩形高度、矩形人脸区域的矩形高度以及矩形人脸区域的对角坐标中的纵坐标共同确定出待美颜区域的对角坐标中的纵坐标;
S1026、基于待美颜区域的对角坐标的横坐标和纵坐标确定出以对角坐标标定待美颜区域边界的矩形待美颜区域。
下面,以矩形人脸区域的边界为左上角坐标A(x1,y1)和右下角坐标B(x2,y2)标定为例,给出步骤S1021~S1026的一具体实施方式:
矩形人脸区域的矩形宽度W0的计算结果为:W0=x1-x2,矩形人脸区域的矩形高度H0的计算结果为:H0=y2-y1。预设放大参数为a,则待美颜区域的矩形宽度W1的计算结果如下:W1=W0Хa。则待美颜区域的矩形高度H0的计算结果为:H1=H0Хa。具体的,通过如下公式计算出待美颜区域的对角坐标中的左上角坐标的横坐标x1′为:x1′=x1-(W1-W0)/2;通过如下公式计算出待美颜区域的对角坐标中的右下角坐标的横坐标x2′为:x2′=x2+(W1-W0)/2;通过如下公式计算出待美颜区域的对角坐标中的左上角坐标的纵坐标y1′:y1′=y1-(H1-H0)/2;通过如下公式计算出待美颜区域的对角坐标中的右下角坐标的纵坐标y2′:y2′=y2+(H1-H0)/2,则待美颜区域边界为左上角坐标A′(x′1,y′1)和右下角坐标B′(x′2,y′2)标定。
在具体实施过程中,预设放大参数的数值可以为1.5,则待美颜区域的矩形宽度为矩形人脸区域的矩形宽度的1.5倍,待美颜区域的矩形高度为矩形人脸区域的矩形高度的1.5倍。
在步骤S102之后,接着执行步骤S103:通过美颜处理所述待美颜区域,以生成对应于所述目标图像的第一美颜后图像,所述第一美颜后图像中包含所述人脸区域对应的美颜后人脸区域、所述外围区域对应的美颜后外围区域和相对于所述待美颜区域的背景区域。
具体的,将所述矩形人脸区域和围绕所述矩形人脸区域的外围区域输入至同一美颜处理算法中进行美颜处理。
美颜处理算法多用实施方式具体为:美白处理和/或磨皮处理待美颜区域的。具体的,基于去噪算法磨皮处理待美颜区域。采用的去噪算法可以为均值模糊、高斯模糊、中值滤波中的一种。通过调整待美颜区域的色彩美白处理待美颜区域。美白处理包括调节色温、亮度、对比度中的一种美白处理或多种美白处理结合。
在步骤S103之后,接着执行步骤S104:通过平滑处理所述第一美颜后图像中的美颜后外围区域,以生成对应于所述目标图像的第二美颜后图像,所述第二美颜后图像中包含所述美颜后人脸区域、所述美颜后外围区域对应的平滑后外围区域和所述背景区域。
具体的,基于如下公式计算出分别对第一美颜后图像的美颜后外围区域中的每个像素点进行平滑处理:
F=D×β1+I×β2
其中,F表示平滑后外围区域中当前像素点的像素值,D为外围区域中对应像素点的像素值,β1为针对外围区域的加权系数,且与当前像素点相距人脸区域边界正向相关,β2为针对美颜后外围区域的加权系数,且与当前像素点相距人脸区域边界反向相关。
在具体实施过程中:β2=1-β1。当前像素点在矩形人脸区域边界时,β1的数值为1,当前像素点在待美颜区域边界时,β1的数值为0。当前像素点在矩形人脸区域边界时,β2为0,当前像素点在待美颜区域边界时,β2的数值为1。
其中,β1的范围为[0,1],β的数值可根据当前像素点的坐标离矩形人脸区域边界的距离计算得出:在[0,1]范围内,越靠近矩形人脸区域边界β1越大,越远离矩形人脸区域边界β1越小。
其中,β2的范围为[0,1],β的数值可根据当前像素点的坐标离矩形人脸区域边界的距离计算得出:在[0,1]范围内,越靠近矩形人脸区域边界β2越小,越远离矩形人脸区域边界β2越大。
在步骤S104之后,接着执行步骤S105:输出第二美颜后图像。
在步骤S105中,针对目标图像分为三块区域:人脸区域、围绕人脸区域的外围区域以及围绕外围区域的背景区域,则输出的第二美颜后图像中:人脸区域需要美颜,因此输出的为美颜后人脸区域,外围区域需要美颜和平滑处理,输出的为美颜并平滑之后所得到的平滑后外围区域,背景区域不需要美颜,直接得到第二美颜后图像中的背景区域。
基于同一发明构思,本发明实施例提供一种图像中人脸美颜装置,参考图2所示,包括:
人脸检测单元201,用于检测出目标图像中的人脸区域;
区域放大单元202,用于确定围绕所述人脸区域的外围区域和所述人脸区域为待美颜区域,所述外围区域为相对于所述人脸区域的原始背景区域中靠近所述人脸区域的一部分;
美颜处理单元203,用于通过美颜处理所述待美颜区域,以生成对应于所述目标图像的第一美颜后图像,所述第一美颜后图像中包含所述人脸区域对应的美颜后人脸区域、所述外围区域对应的美颜后外围区域和相对于所述待美颜区域的背景区域;
平滑处理单元204,用于通过平滑处理所述第一美颜后图像中的美颜后外围区域,以生成对应于所述目标图像的第二美颜后图像,所述第二美颜后图像中包含所述美颜后人脸区域、所述美颜后外围区域对应的平滑后外围区域和所述背景区域;
图像输出单元205,用于输出第二美颜后图像。
在一实施方式中,平滑处理单元204,具体用于:
将美颜后外围区域中每个像素点的像素值与外围区域中对应像素点的像素值进行加权处理,以得出第二美颜后图像中的平滑后外围区域中每个像素点的像素值,其中,加权系数与当前像素点相距人脸区域边界的距离相关。
在一实施方式中,人脸检测单元201,具体用于:
从目标图像中检测以对角坐标标定人脸区域边界的矩形人脸区域。
在一实施方式中,区域放大单元202,具体用于:
基于标定矩形人脸区域边界的对角坐标确定出矩形人脸区域的矩形宽度和矩形高度;
将矩形人脸区域的矩形宽度与预设放大参数的乘积结果确定为待美颜区域的矩形宽度;
将矩形人脸区域的矩形高度与预设放大参数的乘积结果确定为待美颜区域的矩形高度;
基于待美颜区域的矩形宽度、矩形人脸区域的矩形宽度以及矩形人脸区域的对角坐标中的横坐标共同确定出待美颜区域的对角坐标中的横坐标;
基于待美颜区域的矩形高度、矩形人脸区域的矩形高度以及矩形人脸区域的对角坐标中的纵坐标共同确定出待美颜区域的对角坐标中的纵坐标;
基于待美颜区域的对角坐标的横坐标和纵坐标确定出以对角坐标标定待美颜区域边界的矩形待美颜区域。
在一实施方式中,美颜处理单元203,具体用于:
将矩形人脸区域和围绕矩形人脸区域的外围区域输入至同一美颜处理算法中进行美颜处理。
在一实施方式中,平滑处理单元204,具体用于:基于如下公式分别对第一美颜后图像中的外围区域中的每个像素点进行平滑处理;
F=D×β1+I×β2
其中,F表示平滑后外围区域中当前像素点的像素值,D为外围区域中对应像素点的像素值,I为美颜后外围区域中对应像素点的像素值,β1为针对外围区域的加权系数,且与当前像素点相距人脸区域边界正向相关,β2为针对美颜后外围区域的加权系数,且与当前像素点相距人脸区域边界反向相关。
目标图像具体为:从直播视频中获取的当前视频帧,或者从存储区域获取的单张照片,或者摄像头装置当前采集的单个图像。
基于同一发明构思,本发明实施例提供了一种计算机可读存储介质301,参考图3所示,其上存储有计算机程序302,该程序302被处理器执行时实现前述图像中人脸美颜方法实施例中的任一实施方式的步骤。
基于同一发明构思,本发明实施例提供了一种计算机设备400,参考图4所示,包括存储器410、处理器420及存储在存储器410上并可在处理器420上运行的计算机程序411,处理器420执行程序411时实现前述图像中人脸美颜方法实施例中任一实施方式的步骤。
本发明一个或多个实施例,至少实现了如下技术效果或优点:
检测出目标图像中的人脸区域;放大目标图像中人脸区域的区域范围,以确定出围绕人脸区域的外围区域和人脸区域为待美颜区域;美颜处理待美颜区域,以生成对应于目标图像的第一美颜后图像,第一美颜后图像中包含人脸区域对应的美颜后人脸区域、外围区域对应的美颜后外围区域、以及相对于待美颜区域的背景区域;对第一美颜后图像中的美颜后外围区域平滑处理,以生成对应于目标图像的第二美颜后图像,第二美颜后图像中包含美颜后人脸区域、美颜后外围区域对应的平滑后外围区域、背景区域;输出第二美颜后图像。从而只对目标图像中的人脸的区域进行美颜处理,过滤掉背景区域,使背景区域不受美颜的影响,从而避免了背景区域的失真现象。并且外围图像的处理使得人脸区域向背景区域有平滑过渡,从而避免了对人脸的美颜与背景区域存在明显差异,提高了美颜效果。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种图像中人脸美颜方法,其特征在于,包括:
检测出目标图像中的人脸区域;
确定围绕所述人脸区域的外围区域和所述人脸区域为待美颜区域,所述外围区域为相对于所述人脸区域的原始背景区域中靠近所述人脸区域的一部分;
通过美颜处理所述待美颜区域,以生成对应于所述目标图像的第一美颜后图像,所述第一美颜后图像中包含所述人脸区域对应的美颜后人脸区域、所述外围区域对应的美颜后外围区域和相对于所述待美颜区域的背景区域;
通过平滑处理所述第一美颜后图像中的美颜后外围区域,以生成对应于所述目标图像的第二美颜后图像,所述第二美颜后图像中包含所述美颜后人脸区域、所述美颜后外围区域对应的平滑后外围区域和所述背景区域;
输出所述第二美颜后图像。
2.如权利要求1所述的图像中人脸美颜方法,其特征在于,所述平滑处理所述第一美颜后图像中的美颜后外围区域,包括:
将所述美颜后外围区域中每个像素点的像素值与所述外围区域中对应像素点的像素值进行加权处理,以得出所述第二美颜后图像中的平滑后外围区域中每个像素点的像素值,其中,加权系数与当前像素点相距人脸区域边界的距离相关。
3.如权利要求1或2所述的图像中人脸美颜方法,其特征在于,所述检测出目标图像中的人脸区域,包括:
从所述目标图像中检测以对角坐标标定人脸区域边界的矩形人脸区域。
4.如权利要求3所述的图像中人脸美颜方法,其特征在于,所述确定围绕所述人脸区域的外围区域和所述人脸区域为待美颜区域,包括:
基于标定所述矩形人脸区域边界的对角坐标确定出所述矩形人脸区域的矩形宽度和矩形高度;
将所述矩形人脸区域的矩形宽度与预设放大参数的乘积结果确定为所述待美颜区域的矩形宽度;
将所述矩形人脸区域的矩形高度与所述预设放大参数的乘积结果确定为所述待美颜区域的矩形高度;
基于所述待美颜区域的矩形宽度、所述矩形人脸区域的矩形宽度以及所述矩形人脸区域的对角坐标中的横坐标共同确定出所述待美颜区域的对角坐标中的横坐标;
基于所述待美颜区域的矩形高度、所述矩形人脸区域的矩形高度以及所述矩形人脸区域的对角坐标中的纵坐标共同确定出所述待美颜区域的对角坐标中的纵坐标;
基于所述待美颜区域的对角坐标的横坐标和纵坐标确定出以对角坐标标定所述待美颜区域边界的矩形待美颜区域。
5.如权利要求4所述的图像中人脸美颜方法,其特征在于,所述美颜处理所述待美颜区域,包括:
将所述矩形人脸区域和围绕所述矩形人脸区域的外围区域输入至同一美颜处理算法中进行美颜处理。
6.如权利要求2所述的图像中人脸美颜方法,其特征在于,所述将所述美颜后外围区域中每个像素点的像素值与所述外围区域中对应像素点的像素值进行加权处理,以得出所述第二美颜后图像中的平滑后外围区域中每个像素点的像素值,包括:基于如下公式分别对所述第一美颜后图像的美颜后外围区域中的每个像素点进行平滑处理;
F=D×β1+I×β2
其中,F表示所述平滑后外围区域中当前像素点的像素值,D为所述外围区域中对应像素点的像素值,I为所述美颜后外围区域中对应像素点的像素值,β1为针对所述外围区域的加权系数,且与当前像素点相距人脸区域边界正向相关,β2为针对所述美颜后外围区域的加权系数,且与当前像素点相距人脸区域边界反向相关。
7.如权利要求1所述的图像中人脸美颜方法,其特征在于,所述目标图像,具体为:
从直播视频中获取的当前视频帧,或者
从存储区域获取的单张照片,或者
摄像头装置当前采集的单个图像。
8.一种图像中人脸美颜装置,其特征在于,包括:
人脸检测单元,用于检测出目标图像中的人脸区域;
区域放大单元,用于确定围绕所述人脸区域的外围区域和所述人脸区域为待美颜区域,所述外围区域为相对于所述人脸区域的原始背景区域中靠近所述人脸区域的一部分;
美颜处理单元,用于通过美颜处理所述待美颜区域,以生成对应于所述目标图像的第一美颜后图像,所述第一美颜后图像中包含所述人脸区域对应的美颜后人脸区域、所述外围区域对应的美颜后外围区域和相对于所述待美颜区域的背景区域;
平滑处理单元,用于通过平滑处理所述第一美颜后图像中的美颜后外围区域,以生成对应于所述目标图像的第二美颜后图像,所述第二美颜后图像中包含所述美颜后人脸区域、所述美颜后外围区域对应的平滑后外围区域和所述背景区域;
图像输出单元,用于输出所述第二美颜后图像。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-7中任一权利要求所述的步骤。
10.一种计算机设备,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-7中任一权利要求所述的步骤。
CN201710930575.7A 2017-10-09 2017-10-09 一种图像中人脸美颜方法及装置 Active CN107730465B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710930575.7A CN107730465B (zh) 2017-10-09 2017-10-09 一种图像中人脸美颜方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710930575.7A CN107730465B (zh) 2017-10-09 2017-10-09 一种图像中人脸美颜方法及装置

Publications (2)

Publication Number Publication Date
CN107730465A true CN107730465A (zh) 2018-02-23
CN107730465B CN107730465B (zh) 2020-09-04

Family

ID=61209972

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710930575.7A Active CN107730465B (zh) 2017-10-09 2017-10-09 一种图像中人脸美颜方法及装置

Country Status (1)

Country Link
CN (1) CN107730465B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108346130A (zh) * 2018-03-20 2018-07-31 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108389155A (zh) * 2018-03-20 2018-08-10 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108399599A (zh) * 2018-03-20 2018-08-14 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108447023A (zh) * 2018-03-20 2018-08-24 北京奇虎科技有限公司 图像处理方法、装置及电子设备
WO2019227916A1 (zh) * 2018-05-31 2019-12-05 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
CN110895789A (zh) * 2018-09-13 2020-03-20 杭州海康威视数字技术股份有限公司 一种人脸美颜方法及装置
CN110942005A (zh) * 2019-11-21 2020-03-31 网易(杭州)网络有限公司 物体识别方法及装置
CN111145086A (zh) * 2019-12-27 2020-05-12 北京奇艺世纪科技有限公司 一种图像处理方法、装置及电子设备
CN111402154A (zh) * 2020-03-10 2020-07-10 北京字节跳动网络技术有限公司 图像美颜方法、装置、电子设备及计算机可读存储介质
CN112330824A (zh) * 2018-05-31 2021-02-05 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备和存储介质
WO2023165369A1 (zh) * 2022-03-01 2023-09-07 北京沃东天骏信息技术有限公司 图像处理方法和装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104375797A (zh) * 2014-11-17 2015-02-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN105787878A (zh) * 2016-02-25 2016-07-20 杭州格像科技有限公司 一种美颜处理方法及装置
CN105787888A (zh) * 2014-12-23 2016-07-20 联芯科技有限公司 人脸图像美化方法
JP2016148933A (ja) * 2015-02-10 2016-08-18 キヤノン株式会社 画像処理装置および画像処理方法
CN106447638A (zh) * 2016-09-30 2017-02-22 北京奇虎科技有限公司 一种美颜处理方法及装置
CN106600556A (zh) * 2016-12-16 2017-04-26 合网络技术(北京)有限公司 图像处理方法及装置
CN106920211A (zh) * 2017-03-09 2017-07-04 广州四三九九信息科技有限公司 美颜处理方法、装置以及终端设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104375797A (zh) * 2014-11-17 2015-02-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN105787888A (zh) * 2014-12-23 2016-07-20 联芯科技有限公司 人脸图像美化方法
JP2016148933A (ja) * 2015-02-10 2016-08-18 キヤノン株式会社 画像処理装置および画像処理方法
CN105787878A (zh) * 2016-02-25 2016-07-20 杭州格像科技有限公司 一种美颜处理方法及装置
CN106447638A (zh) * 2016-09-30 2017-02-22 北京奇虎科技有限公司 一种美颜处理方法及装置
CN106600556A (zh) * 2016-12-16 2017-04-26 合网络技术(北京)有限公司 图像处理方法及装置
CN106920211A (zh) * 2017-03-09 2017-07-04 广州四三九九信息科技有限公司 美颜处理方法、装置以及终端设备

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108346130B (zh) * 2018-03-20 2021-07-23 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108389155A (zh) * 2018-03-20 2018-08-10 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108399599A (zh) * 2018-03-20 2018-08-14 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108447023A (zh) * 2018-03-20 2018-08-24 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108346130A (zh) * 2018-03-20 2018-07-31 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108399599B (zh) * 2018-03-20 2021-11-26 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108389155B (zh) * 2018-03-20 2021-10-01 北京奇虎科技有限公司 图像处理方法、装置及电子设备
CN108447023B (zh) * 2018-03-20 2021-08-24 北京奇虎科技有限公司 图像处理方法、装置及电子设备
WO2019227916A1 (zh) * 2018-05-31 2019-12-05 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
CN112330824A (zh) * 2018-05-31 2021-02-05 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备和存储介质
CN110555794A (zh) * 2018-05-31 2019-12-10 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
US11216904B2 (en) 2018-05-31 2022-01-04 Beijing Sensetime Technology Development Co., Ltd. Image processing method and apparatus, electronic device, and storage medium
CN110895789A (zh) * 2018-09-13 2020-03-20 杭州海康威视数字技术股份有限公司 一种人脸美颜方法及装置
CN110895789B (zh) * 2018-09-13 2023-05-02 杭州海康威视数字技术股份有限公司 一种人脸美颜方法及装置
CN110942005A (zh) * 2019-11-21 2020-03-31 网易(杭州)网络有限公司 物体识别方法及装置
CN111145086A (zh) * 2019-12-27 2020-05-12 北京奇艺世纪科技有限公司 一种图像处理方法、装置及电子设备
CN111402154A (zh) * 2020-03-10 2020-07-10 北京字节跳动网络技术有限公司 图像美颜方法、装置、电子设备及计算机可读存储介质
WO2023165369A1 (zh) * 2022-03-01 2023-09-07 北京沃东天骏信息技术有限公司 图像处理方法和装置

Also Published As

Publication number Publication date
CN107730465B (zh) 2020-09-04

Similar Documents

Publication Publication Date Title
CN107730465A (zh) 一种图像中人脸美颜方法及装置
Hofmann et al. Background segmentation with feedback: The pixel-based adaptive segmenter
CN108205804A (zh) 图像处理方法、装置及电子设备
Liu et al. Image interpolation via regularized local linear regression
US20100183240A1 (en) Image processing method and imaging apparatus
US20110243428A1 (en) Bi-Affinity Filter: A Bilateral Type Filter for Color Images
CN106570909A (zh) 一种肤色检测方法、装置及终端
Shanmugavadivu et al. Particle swarm optimized bi-histogram equalization for contrast enhancement and brightness preservation of images
CN105243371A (zh) 一种人脸美颜程度的检测方法、系统及拍摄终端
CN103268475A (zh) 一种基于人脸、肤色检测的皮肤美容方法
CN103268594B (zh) 一种红外热像仪系统的盲元替换方法
CN104933679B (zh) 一种放大图像的方法及其对应系统
Wang et al. A quaternion-based switching filter for colour image denoising
CN104376542A (zh) 一种图像增强方法
CN106846281A (zh) 图像美化方法以及终端设备
CN106611415A (zh) 一种皮肤区域的检测方法及装置
CN111145086A (zh) 一种图像处理方法、装置及电子设备
CN107277346A (zh) 一种图像处理方法及终端
CN107767356A (zh) 一种图像处理方法和装置
KR20210145781A (ko) 고운 결로 피부 텍스처를 향상시키는 안면 유연화 시스템 및 방법
WO2022233252A1 (zh) 图像处理方法、装置、计算机设备和存储介质
Feng et al. Low-light image enhancement by refining illumination map with self-guided filtering
CN108230271A (zh) 一种基于人脸检测和五官定位的数字图像中人脸粉底上妆方法
CN111899200A (zh) 一种基于3d滤波的红外图像增强方法
Li et al. Depth map super-resolution via iterative joint-trilateral-upsampling

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20230920

Address after: Room 816, 8th Floor, Building 8, Zone 4, Wangjing Dongyuan, Chaoyang District, Beijing, 100000

Patentee after: Bantang Deicing Technology (Beijing) Co.,Ltd.

Address before: 430000 East Lake Development Zone, Wuhan City, Hubei Province, No. 1 Software Park East Road 4.1 Phase B1 Building 11 Building

Patentee before: WUHAN DOUYU NETWORK TECHNOLOGY Co.,Ltd.

TR01 Transfer of patent right