CN103927719A - 图片处理方法及装置 - Google Patents

图片处理方法及装置 Download PDF

Info

Publication number
CN103927719A
CN103927719A CN201410137069.9A CN201410137069A CN103927719A CN 103927719 A CN103927719 A CN 103927719A CN 201410137069 A CN201410137069 A CN 201410137069A CN 103927719 A CN103927719 A CN 103927719A
Authority
CN
China
Prior art keywords
skin
picture
pending
blemishes
gray
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410137069.9A
Other languages
English (en)
Other versions
CN103927719B (zh
Inventor
徐光圣
马健
李丁盼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kingsoft Internet Science and Technology Co Ltd
Original Assignee
Beijing Kingsoft Internet Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kingsoft Internet Science and Technology Co Ltd filed Critical Beijing Kingsoft Internet Science and Technology Co Ltd
Priority to CN201410137069.9A priority Critical patent/CN103927719B/zh
Publication of CN103927719A publication Critical patent/CN103927719A/zh
Priority to PCT/CN2014/085482 priority patent/WO2015149475A1/zh
Priority to US14/905,762 priority patent/US9959603B2/en
Application granted granted Critical
Publication of CN103927719B publication Critical patent/CN103927719B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G06T5/77
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T5/90
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/162Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了图片处理方法及装置,所述方法包括:在待处理图片中进行人脸识别;根据检测结果,确定人脸区域中的待处理皮肤区域;确定所述待处理皮肤区域中皮肤瑕疵的位置;根据确定出的所述皮肤瑕疵在所述待处理皮肤区域中的位置,去除所述人脸区域中的皮肤瑕疵,得到处理后的图片。能够自动地对照片图像中人的皮肤进行修改,即消除了皮肤中较浅的瑕疵,也消除了皮肤中比较明显的问题。相对于现有的皮肤美化处理的各类APP中手动抹除皮肤瑕疵的方案,本申请所提供的方法给用户提供了更好的用户的体验。

Description

图片处理方法及装置
技术领域
本发明涉及图像处理技术领域,特别涉及图片处理方法及装置。
背景技术
相机已广泛的应用于人们的日常生活中,对照片图像的修改需求也日益普遍。现有技术中通常使用一种“磨皮”技术对照片中人的脸部皮肤进行修改。使用该功能后人脸皮肤中粗糙的地方会变得平滑,比较浅的斑会消失,即人脸皮肤中较小的、相对周围颜色略深的部分颜色会变浅,视觉上跟消失了一样;但是,对于人脸皮肤中比较明显的问题如粉刺、伤疤等,仍能留下明显的痕迹。为了解决这个问题,现有的应用基本上都是需要用户手工指定人脸皮肤瑕疵的位置和大小,然后根据所指定位置和大小,将该区域的颜色替换为与周围肤色接近的颜色,从而达到修改图像,去除瑕疵的目的。
可见,在现有的图像处理过程中,对于计算机自动处理的步骤,只能消除比较浅的瑕疵如比较浅的痘痘、斑痕等,对于人脸皮肤中比较明显的问题如粉刺、伤疤等无法消除,即使处理后也能留下明显的痕迹。而对于这类人脸皮肤中比较明显的问题,只能手动去除。手动去除不但操作繁琐,对用户的要求也较高,只有掌握一定技能的用户才能手动消除人脸皮肤中比较明显的问题,普通用户无法操作。
发明内容
本发明实施例的目的在于提供图片处理方法及装置,以自动对照片中人的脸部皮肤进行修改,消除人脸皮肤中比较明显的问题。
为达到上述目的,本发明实施例公开了图片处理方法,所述方法包括:
在待处理图片中进行人脸识别;
根据检测结果,确定人脸区域中的待处理皮肤区域;
确定所述待处理皮肤区域中皮肤瑕疵的位置;
根据确定出的所述皮肤瑕疵在所述待处理皮肤区域中的位置,去除所述人脸区域中的皮肤瑕疵,得到处理后的图片。
较佳的,所述确定人脸区域中的待处理皮肤区域,包括:
检测人脸区域中的遮盖区域;
根据所述遮盖区域确定出所述人脸区域中的非遮盖区域;
在所述非遮盖区域中检测皮肤区域;
在人脸区域中检测皮肤区域。
较佳的,所述待处理图片,包括:
原始待处理图片或原始待处理图片按照预设的第一比例缩放后得到的图片。
较佳的,所述确定所述待处理皮肤区域中皮肤瑕疵的位置,包括:
获得所述待处理皮肤区域的不同瑕疵突兀度等级图片;
确定所述待处理皮肤区域的颜色值,根据所述颜色值生成所述待处理皮肤区域的皮肤相似度图片;
根据所述不同瑕疵突兀度等级图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
较佳的,所述确定所述待处理皮肤区域的颜色值,根据所述颜色值生成所述待处理皮肤区域的皮肤相似度图片,包括:
对所述待处理皮肤区域内的若干区域分别进行皮肤颜色值采样,获得针对每个区域的若干采样值;
根据所述采样值计算出每个区域的皮肤颜色值;
分别遍历每个区域内的像素点,计算每个像素点的颜色值与其所在区域的皮肤颜色值之间的相似度值;
将计算出的所述相似度值映射为灰度值,生成反映皮肤颜色的皮肤相似度图片。
较佳的,所述获得所述待处理皮肤区域的不同瑕疵突兀度等级图片,包括:
生成具有第一黑白对比度的第一图片;
生成具有第二黑白对比度的第二图片;其中,所述第一黑白对比度大于所述第二黑白对比度;
生成具有第三黑白对比度的第三图片;其中,所述第三黑白对比度与第一黑白对比度相同;
所述根据所述不同瑕疵突兀度等级图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置,包括:
根据所述第一至三图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
较佳的,所述根据所述第一至三图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置,包括:
根据所述第二图片、皮肤相似度图片生成第一皮肤瑕疵集合;
根据所述第一图片、皮肤相似度图片生成第二皮肤瑕疵集合;
根据所述第三图片、皮肤相似度图片生成第三、四皮肤瑕疵集合;
将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
较佳的,根据所述第一至三图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置的步骤包括:
根据所述第二图片、皮肤相似度图片和待处理皮肤区域生成第一皮肤瑕疵集合;
根据所述第一图片、皮肤相似度图片和待处理皮肤区域生成第二皮肤瑕疵集合;
根据所述第三图片、皮肤相似度图片和待处理皮肤区域生成第三、四皮肤瑕疵集合;
将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
较佳的,根据所述第二图片、皮肤相似度图片和待处理皮肤区域生成第一皮肤瑕疵集合的步骤包括:
在所述第二图片中搜索满足第一搜索条件的斑块;其中,所述第一搜索条件为像素点灰度值小于等于第一灰度阈值,且灰度值小于等于第一灰度阈值的相互邻接的像素点的个数小于等于第一邻接阈值;
将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;若所述颜色值在预定的瑕疵颜色阈值范围内;则
从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;
若是,则将搜索到的斑块作为第一皮肤瑕疵集合。
较佳的,根据所述第一图片、皮肤相似度图片和待处理皮肤区域生成第二皮肤瑕疵集合的步骤包括:
在所述第一图片中搜索满足第二搜索条件的斑块;其中,所述第二搜索条件为像素点灰度值小于等于第二灰度阈值,且灰度值小于等于第二灰度阈值的相互邻接的像素点的个数小于等于第二邻接阈值;
将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;若所述颜色值在预定的瑕疵颜色阈值范围内;则
从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;
若是,则将搜索到的斑块作为第二皮肤瑕疵集合。
较佳的,根据所述第三图片、皮肤相似度图片和待处理皮肤区域生成第三、四皮肤瑕疵集合的步骤包括:
在所述第三图片中搜索满足第三搜索条件的斑块;其中,所述第三搜索条件为像素点灰度值小于等于第三灰度阈值,且灰度值小于等于第三灰度阈值的相互邻接的像素点的个数小于等于第三邻接阈值;
在所述第三图片中搜索满足第四搜索条件的斑块;其中,所述第四搜索条件为像素点灰度值小于等于第四灰度阈值,且灰度值小于等于第四灰度阈值的相互邻接的像素点的个数小于等于第四邻接阈值;
将所述满足第三搜索条件和第四搜索条件斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;若所述颜色值在预定的瑕疵颜色阈值范围内;则
从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;
若是,则将搜索到的满足第三搜索条件斑块作为第三皮肤瑕疵集合,将搜索到的满足第四搜索条件斑块作为第四皮肤瑕疵集合。
较佳的,所述生成具有第一黑白对比度的第一图片的步骤包括:对所述待处理皮肤区域进行第一灰度处理,从而生成具有第一黑白对比度的第一图片;
所述生成具有第二黑白对比度的第二图片的步骤包括:对所述待处理皮肤区域进行第二灰度处理,从而生成具有第二黑白对比度的第二图片;其中,所述第二灰度处理与所述第一灰度处理方式不同;
所述生成具有第三黑白对比度的第三图片的步骤包括:对所述待处理皮肤区域先进行磨皮处理,获得磨皮处理后的图片,再对所述磨皮处理后的图片进行第三灰度处理,从而生成具有第三黑白对比度的第三图片,其中,所述第三灰度处理与所述第一灰度处理方式相同。
较佳的,所述根据确定出的所述皮肤瑕疵在所述待处理皮肤区域中的位置,去除所述人脸区域中对应的皮肤瑕疵,得到处理后的图片,包括:
将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片的人脸区域中;
根据映射处理结果,去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
较佳的,在所述将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片的人脸区域中之后,还包括:
在所述待处理图片中,按照预设的第二比例放大所述皮肤瑕疵所在区域,其中,所述预设的第二比例大于1。
较佳的,所述根据映射处理结果,去除所述待处理图片的人脸区域中的皮肤瑕疵,包括:
计算待处理图片中的人脸区域的皮肤瑕疵中位于预设相对位置的像素点所对应的横向皮肤颜色变化函数y=f(x),以及纵向皮肤颜色变化函数y’=f(x’),其中,x表示所述待处理图片中像素点的横向坐标、x’表示所述待处理图片中像素点的纵向坐标,y表示横向坐标为x的像素点对应的颜色值、y’表示纵向坐标为x’的像素点对应的颜色值;
将所述待处理图片的人脸区域中的皮肤瑕疵中每一像素点的横向坐标和纵向坐标分别代入上述横向皮肤颜色变化函数和纵向皮肤颜色变化函数,获得每一像素点在横向及纵向的颜色值;
对所述每一像素点在横向及纵向的颜色值取均值,获得每一像素点对应的正常皮肤颜色值;
依次使用计算出的每一像素点的正常皮肤颜色值替换所述待处理图片的人脸区域中的皮肤瑕疵中每个像素点的颜色值,从而去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
较佳的,所述方法还包括:对所述处理后的图片进行磨皮处理,以获得去除突兀效果的图片。
较佳的,所述皮肤瑕疵,包括以下几种中的任意一种或几种:痘痘、污点、伤疤或痣。
为达到上述目的,本发明实施例公开了图片处理装置,所述装置包括:
人脸识别模块,用于在待处理图片中进行人脸识别;
皮肤区域确定模块,用于根据检测结果,确定人脸区域中的待处理皮肤区域;
皮肤瑕疵确定模块,用于确定所述待处理皮肤区域中皮肤瑕疵的位置;
皮肤瑕疵去除模块,用于根据确定出的所述皮肤瑕疵在所述待处理皮肤区域中的位置,去除所述人脸区域中的皮肤瑕疵,得到处理后的图片。
较佳的,所述皮肤区域确定模块,包括:
遮盖区域检测子模块,用于检测人脸区域中的遮盖区域;
非遮盖区域确定子模块,用于根据所述遮盖区域确定出所述人脸区域中的非遮盖区域;
皮肤区域检测子模块,用于在所述非遮盖区域中检测皮肤区域;或
用于在人脸区域中检测皮肤区域。
较佳的,所述待处理图片,包括:
原始待处理图片或原始待处理图片按照预设的第一比例缩放后得到的图片。
较佳的,所述皮肤瑕疵确定模块,包括:
不同突兀度等级图片获得子模块,用于获得所述待处理皮肤区域的不同瑕疵突兀度等级图片;
皮肤相似度图片生成子模块,用于确定所述待处理皮肤区域的颜色值,根据所述颜色值生成所述待处理皮肤区域的皮肤相似度图片;
皮肤瑕疵确定子模块,用于根据所述不同瑕疵突兀度等级图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
较佳的,所述皮肤相似度图片生成子模块,包括:
采样值获得单元,用于对所述待处理皮肤区域内的若干区域分别进行皮肤颜色值采样,获得针对每个区域的若干采样值;
皮肤颜色值计算单元,用于根据所述采样值计算出每个区域的皮肤颜色值;
相似度计算单元,用于分别遍历每个区域内的像素点,计算每个像素点的颜色值与其所在区域的皮肤颜色值之间的相似度值;
皮肤相似度图片生成单元,用于将计算出的所述相似度值映射为灰度值,生成反映皮肤颜色的皮肤相似度图片。
较佳的,所述不同突兀度等级图片获得子模块,包括:
第一图片生成单元,用于生成具有第一黑白对比度的第一图片;
第二图片生成单元,用于生成具有第二黑白对比度的第二图片;其中,所述第一黑白对比度大于所述第二黑白对比度;
第三图片生成单元,用于生成具有第三黑白对比度的第三图片;其中,所述第三黑白对比度与第一黑白对比度相同;
所述皮肤瑕疵确定子模块,具体用于根据所述第一至三图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
较佳的,所述皮肤瑕疵确定子模块,具体用于根据所述第二图片、皮肤相似度图片生成第一皮肤瑕疵集合;根据所述第一图片、皮肤相似度图片生成第二皮肤瑕疵集合;根据所述第三图片、皮肤相似度图片生成第三、四皮肤瑕疵集合;将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
较佳的,所述皮肤瑕疵确定子模块,包括:
第一皮肤瑕疵集合生成单元,用于根据所述第二图片、皮肤相似度图片和待处理皮肤区域生成第一皮肤瑕疵集合;
第二皮肤瑕疵集合生成单元,用于根据所述第一图片、皮肤相似度图片和待处理皮肤区域生成第二皮肤瑕疵集合;
第三、四皮肤瑕疵集合生成单元,用于根据所述第三图片、皮肤相似度图片和待处理皮肤区域生成第三、四皮肤瑕疵集合;
皮肤瑕疵获得单元,用于将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
较佳的,所述第一皮肤瑕疵集合生成单元,包括:
第一搜索子单元,用于在所述第二图片中搜索满足第一搜索条件的斑块;其中,所述第一搜索条件为像素点灰度值小于等于第一灰度阈值,且灰度值小于等于第一灰度阈值的相互邻接的像素点的个数小于等于第一邻接阈值;
第一映射子单元,用于将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
第一斑块位置和颜色值提取子单元,用于从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;
第一灰度值判断子单元,用于在所述第一斑块位置和颜色值提取子单元提取的颜色值在预定的瑕疵颜色阈值范围内的情况下,从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;若是,则将搜索到的斑块作为第一皮肤瑕疵集合。
较佳的,所述第二皮肤瑕疵集合生成单元,包括:
第二搜索子单元,用于在所述第一图片中搜索满足第二搜索条件的斑块;其中,所述第二搜索条件为像素点灰度值小于等于第二灰度阈值,且灰度值小于等于第二灰度阈值的相互邻接的像素点的个数小于等于第二邻接阈值;
第二映射子单元,用于将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
第二斑块位置和颜色值提取子单元,用于从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;
第二灰度值判断子单元,用于在所述第二斑块位置和颜色提取子单元提取的颜色值在预定的瑕疵颜色阈值范围内的情况下,从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;若是,则将搜索到的斑块作为第二皮肤瑕疵集合。
较佳的,所述第三、四皮肤瑕疵集合生成单元,包括:
第三搜索子单元,用于在所述第三图片中搜索满足第三搜索条件的斑块;其中,所述第三搜索条件为像素点灰度值小于等于第三灰度阈值,且灰度值小于等于第三灰度阈值的相互邻接的像素点的个数小于等于第三邻接阈值;
第四搜索子单元,用于在所述第三图片中搜索满足第四搜索条件的斑块;其中,所述第四搜索条件为像素点灰度值小于等于第四灰度阈值,且灰度值小于等于第四灰度阈值的相互邻接的像素点的个数小于等于第四邻接阈值;
第三映射子单元,用于将所述满足第三搜索条件和第四搜索条件斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
第三斑块位置和颜色值提取子单元,用于从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素的颜色值;
第三灰度值判断子单元,用于在所述颜色值在预定的瑕疵颜色阈值范围内的情况下,从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;若是,则将搜索到的满足第三搜索条件斑块作为第三皮肤瑕疵集合,将搜索到的满足第四搜索条件斑块作为第四皮肤瑕疵集合。
较佳的,所述第一图片生成单元,具体用于对所述待处理皮肤区域进行第一灰度处理,从而生成具有第一黑白对比度的第一图片;
所述第二图片生成单元,具体用于对所述待处理皮肤区域进行第二灰度处理,从而生成具有第二黑白对比度的第二图片;其中,所述第二灰度处理与所述第一灰度处理方式不同;
所述第三图片生成单元,具体用于对所述待处理皮肤区域先进行磨皮处理,获得磨皮处理后的图片,再对所述磨皮处理后的图片进行第三灰度处理,从而生成具有第三黑白对比度的第三图片,其中,所述第三灰度处理与所述第一灰度处理方式相同。
较佳的,所述皮肤瑕疵去除模块,包括:
皮肤瑕疵映射子模块,用于将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片中的人脸区域;
皮肤瑕疵去除子模块,用于根据映射处理结果,去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
较佳的,所述皮肤瑕疵去除模块,还包括:
皮肤瑕疵放大子模块,用于在所述皮肤瑕疵映射子模块将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片的人脸区域中之后,在所述待处理图片中,按照预设的第二比例放大所述皮肤瑕疵所在区域,其中,所述预设的第二比例大于1。
较佳的,所述皮肤瑕疵去除子模块,包括:
函数计算单元,用于计算待处理图片的人脸区域中的皮肤瑕疵中位于预设相对位置的像素点所对应的横向皮肤颜色变化函数y=f(x),以及纵向皮肤颜色变化函数y’=f(x’),其中,x表示所述待处理图片中像素点的横向坐标、x’表示所述待处理图片中像素点的纵向坐标,y表示横向坐标为x的像素点对应的颜色值、y’表示纵向坐标为x’的像素点对应的颜色值;
横纵向颜色值获得单元,用于将所述待处理图片的人脸区域中的皮肤瑕疵中每一像素点的横向坐标和纵向坐标分别代入上述横向皮肤颜色变化函数和纵向皮肤颜色变化函数,获得每一像素点在横向及纵向的颜色值;
正常皮肤颜色值获得单元,用于对所述每一像素点在横向及纵向的颜色值取均值,获得每一像素点对应的正常皮肤颜色值;
颜色值替换单元,用于依次使用计算出的每一像素点的正常皮肤颜色值替换所述待处理图片的人脸区域中的皮肤瑕疵中每个像素点的颜色值,从而去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
较佳的,所述装置还包括:磨皮处理模块;
所述磨皮处理模块,用于对所述处理后的图片进行磨皮处理,以获得去除突兀效果的图片。
较佳的,所述皮肤瑕疵,包括以下几种中的任意一种或几种:痘痘、污点、伤疤或痣。
由上述的技术方案可见,应用本发明实施例提供的图片处理方法及装置,能够自动地对照片图像中人的脸部皮肤进行修改,即消除了人脸皮肤中较浅的瑕疵,也消除了人脸皮肤中比较明显的问题。相对于现有的人脸皮肤美化处理的各类APP中手动抹除人脸皮肤瑕疵的方案,本申请所提供的方法给用户提供了更好的用户的体验。
当然,实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的一种图片处理方法的流程图;
图2是根据本发明实施例的一种在待处理皮肤区域确定皮肤瑕疵位置的方法的流程图;
图3所述为根据本发明实施例的待处理图片的一具体实例;
图4所示为根据本发明实施例的第一图片的一具体实例;
图5所示为根据本发明实施例的第一图片的另一具体实例;
图6所示为根据本发明实施例的第二图片的一具体实例;
图7所示为根据本发明实施例的第三图片的一具体实例;
图8所示为根据本发明实施例的图3所示图片对应的处理后图片的一具体实例;
图9所示为根据本发明实施例的图8所示图片磨皮处理后所得图片的具体实例;
图10是根据本发明实施例的一种图像处理装置的逻辑结构示意图;
图11是根据本发明实施例的一种皮肤瑕疵确定模块的逻辑结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面先对本文中用到术语做一简单介绍。
RGB颜色通道:RGB(R=红,G=绿,B=蓝)是计算机表示颜色的一种方式,任何一个颜色都可用RGB方式表示,即任何一个颜色都可以由R、G、B三个颜色的成分的多少来表示。R颜色通道表示图像当中的单独的红色成分,通常用灰度图像表示,越接近黑色,表示该成分越少,越接近白色,则表示该成分越多。同理G颜色通道、B颜色通道都是类似概念。
磨皮:是对图像执行一遍磨皮后,皮肤中的很多浅的斑会去掉,使皮肤显得光滑细嫩。磨皮算法本身有多种,但是都只能消除比较浅的瑕疵如比较浅的痘痘、斑痕等,不能直接靠磨皮把痘痘、伤疤去掉。
下面通过具体实施例,对本发明进行详细说明。
参见图1,其是根据本发明实施例的一种图片处理方法的流程图,该流程具体包括:
S101:在待处理图片中进行人脸识别。
实际应用中,手机、平板电脑、数码相机等终端设备拍摄的图片较大或者较小,而对这些图片进行处理时,一方面:处理速度与图片的大小成正比;另一方面:若图片太小细节信息不清晰,影响处理效果,因此,在进行图片处理之前可先对原始待处理图片进行缩放,再对缩放后的原始待处理图片进行相应处理。
因此,由上述可知,待处理图片可以是原始待处理图片,也可以是原始待处理图片按照预设的第一比例缩放后得到的图片,例如,原始待处理图片按照1:2的比例缩小后得到的图片,具体的,参见图3,图3为本发明实施例提供的待处理图片的一具体实例。
另外,在待处理图片中进行人脸识别,可以是通过用户手动操作的方式确定待处理图片中的人脸区域,也可以通过人脸识别技术识别出人脸区域,其中,人脸识别技术是基于人的脸部特征,对输入的图片进行分析的技术,首先,可先判断图片中是否存在人脸区域,若存在,可进一步检测出人脸区域在图片中的位置、大小以及各个主要五官器官的位置等,现有技术中已存在多种实现人脸识别技术的方法,这里不再赘述。
S102:根据检测结果,确定人脸区域中的待处理皮肤区域。
实际应用中,在确定待处理皮肤区域时,可以对人脸区域中的一些区域进行遮挡,以避免误将人脸上的非瑕疵区域判断为瑕疵区域。在本发明的一个具体实施例中,提供了一种确定人脸区域中的待处理皮肤区域的方法,具体可以包括:
检测人脸区域中的遮盖区域;
根据所述遮盖区域确定出所述待人脸区域中的非遮盖区域;
在所述非遮盖区域中检测皮肤区域;
在人脸区域中检测皮肤区域。
实际应用中,为避免将五官区域中的某些像素误认为皮肤瑕疵,上述的遮盖区域可以包括人脸中的五官区域。人脸中的五官区域,也可通人脸识别技术获得五官的位置信息,根据该五官的位置信息确定遮盖区域。有时图片中眉毛被头发遮住,所以如果眉毛检测不到,可以不进行检测。检测到五官后,可以用一定的模型标记出大小和位置,如眼睛的位置可以用一个椭圆标记,或者直接用矩形标记,从而获得遮盖区域。如遮盖嘴巴时,使用椭圆形遮盖,遮盖鼻子时,使用“U”形模型遮盖,遮盖住鼻子两侧的阴影和鼻子底部的鼻孔位置,而鼻头部位则空出来,可以作为待处理皮肤,进行皮肤瑕疵的去除。
需要说明的是,在人脸区域中确定出待处理皮肤区域之后,可以将该待处理皮肤区域以图片的形式进行存储,以便于后续进行图片处理,也可以不对该待处理皮肤区域进行单独存储,而是在待处理图片上标记出相应的位置,后续处理中根据该标记位置对待处理皮肤区域进行处理。
S103:确定所述待处理皮肤区域中皮肤瑕疵的位置。
本步骤的具体实现方式,可参照图2本发明实施例的一种在待处理皮肤区域确定皮肤瑕疵位置的方法。
S104:根据确定出的所述皮肤瑕疵在所述待处理皮肤区域中的位置,去除所述人脸区域中的皮肤瑕疵,得到处理后的图片。
在根据S103确定出待处理皮肤区域中皮肤瑕疵的位置后,可以先将皮肤瑕疵映射到待处理图片中的人脸区域,然后再根据映射结果,在待处理图片中的人脸区域去除相应的皮肤瑕疵,得到待处理图片处理后的图片,参见图8,图8为根据本发明实施例的图3所示图片对应的处理后图片的一具体实例。
具体的,根据映射结果,去除待处理图片的人脸区域中的皮肤瑕疵,可以通过以下方式实现:
计算待处理图片的人脸区域中的皮肤瑕疵中位于预设相对位置的像素点所对应的横向皮肤颜色变化函数y=f(x),以及纵向皮肤颜色变化函数y’=f(x’),其中,x表示所述待处理图片中像素点的横向坐标、x’表示所述待处理图片中像素点的纵向坐标,y表示横向坐标为x的像素点对应的颜色值、y’表示纵向坐标为x’的像素点对应的颜色值;
将所述待处理图片的人脸区域中的皮肤瑕疵中每一像素点的横向坐标和纵向坐标分别代入上述横向皮肤颜色变化函数和纵向皮肤颜色变化函数,获得每一像素点在横向及纵向的颜色值;
对所述每一像素点在横向及纵向的颜色值取均值,获得每一像素点对应的正常皮肤颜色值;
依次使用计算出的每一像素点的正常皮肤颜色值替换所述待处理图片的人脸区域中的皮肤瑕疵中每个像素点的颜色值,从而去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
其中,预设相对位置的像素点,可以是皮肤瑕疵中中心位置的像素点,或者皮肤瑕疵中左上角的像素点等等。这里,并不对预设相对位置进行限定,实际应用中可根据具体情况确定预设相对位置的取值。
需要说明的是,计算上述的横向和纵向皮肤颜色变化函数,是在皮肤区域的皮肤颜色值连续变化的前提下进行的。
需要说明的是,上述的颜色值可以是表示像素点颜色的所有颜色分量的值,例如,RGB图片中R颜色通道的灰度值、G颜色通道的灰度值和B颜色通道的灰度值,也可以是表示像素点颜色的某一颜色分量的值,例如,G颜色通道的灰度值。
上述计算待处理图片中的皮肤瑕疵中位于预设相对位置的像素点所对应的横向皮肤颜色变化函数y=f(x),以及纵向皮肤颜色变化函数y’=f(x’)的步骤可以包括:
从横向和纵向两个方向分别对待处理图片的人脸区域中的皮肤瑕疵中位于预设相对位置的像素点两侧的皮肤颜色进行采样,得到若干采样点,然后根据这些采样点的颜色值拟合出该方向上的一个连续变化的函数,即横向皮肤颜色变化函数y=f(x),和纵向皮肤颜色变化函数y’=f(x’)。
需要说明的是,本申请并不对如何计算出正常皮肤颜色值的方法做限定,任何可能的方法都可以应用于本申请中,以上只是一种可能的实施例而已。
由于通常情况下,待处理图片中的皮肤瑕疵区域与其周围的皮肤区域之间的颜色是连续变化的,所以在将所确定的皮肤瑕疵映射到预设的映射图片中之后,还可以在待处理图片中,按照预设的第二比例放大所述皮肤瑕疵所在区域,以更好的去除皮肤瑕疵,其中,预设的第二比例大于1。
在本发明的另一个具体实施例中,该方法还可以包括:对所述处理后的图片进行磨皮处理,以获得去除突兀效果的图片。
对处理后的图片,参见图8,进行磨皮处理可以去除在去除皮肤瑕疵过程中残留的较浅的痕迹,达到更好的效果。参见图9,图9为根据本发明实施例的图8所示图片经磨皮处理的图片。将图9与图3比较,可看到去除皮肤瑕疵的效果非常明显。
另外,由前述可得知,待处理图片可以是原始待处理图片,也可以是原始待处理图片按照预设的第一比例缩放后得到的图片。当待处理图片为原始待处理图片按照预设的第一比例缩放后得到的图片时,在得到待处理图片处理后的图片后,还需将处理后的图片放大至原始待处理图片大小。例如,待处理图片为原始待处理图片按照1:2的比例缩小后得到的图片,则得到待处理图片对应的处理后的图片后,还需将该处理后的图片按照2:1的比例放大至原始待处理图片的大小。
由以上可见,本方案中,通过执行图1所示的方法,自动的对图片中人的脸部皮肤进行了修改,即消除了人脸皮肤中较浅的瑕疵,也消除了人脸皮肤中比较明显的瑕疵。相对于现有的人脸皮肤美化处理的各类APP中手动抹除人脸皮肤瑕疵的方案,本申请所提供的方法给用户提供了更好的用户的体验。
具体的,本发明实施例中还提供了一种在待处理皮肤区域确定皮肤瑕疵位置的具体实现方法,参见图2,图2是根据本发明实施例的一种在待处理皮肤区域确定皮肤瑕疵位置的方法的流程图,该方法包括:
S103A:获得所述待处理皮肤区域的不同瑕疵突兀度等级图片。
具体的,获得不同突兀度等级图片的步骤可以包括:
生成具有第一黑白对比度的第一图片;
生成具有第二黑白对比度的第二图片;其中,所述第一黑白对比度大于所述第二黑白对比度;
生成具有第三黑白对比度的第三图片;其中,所述第三黑白对比度与第一黑白对比度相同。
进一步的,上述步骤可以是,对待处理皮肤区域进行第一灰度处理,从而生成具有第一黑白对比度的第一图片;对待处理皮肤区域进行第二灰度处理,从而生成具有第二黑白对比度的第二图片,其中,第二灰度处理与第一灰度处理方式不同;对待处理皮肤区域先进行磨皮处理,获得磨皮处理后的图片,再对磨皮处理后的图片进行第三灰度处理,从而生成具有第三黑白对比度的第三图片,其中,第三灰度处理与第一灰度处理方式相同。
实际应用中,生成第第一图片的步骤可以包括:对待处理皮肤区域进行一次“高反差保留”和至少三次“亮光”处理,获得第一图片;或者,对待处理皮肤区域进行一次“高反差保留”和至少三次“强光”处理,获得第一图片,该第一图片可参见图4或图5,其中,图4为根据本发明实施例的第一图片的一具体实例,可被称为IMAGE_ALPHA_BIG,图5为根据本发明实施例的第一图片的另一具体实例,可被称为IMAGE_ALPHA_LIGHT。
生成第二图片的步骤可以包括:对待处理皮肤区域进行一次“高反差保留”和至少一次“亮光”处理,获得第二图片;或者,对待处理皮肤区域进行一次“高反差保留”和至少一次“强光”处理,获得第二图片,该第二图片可参见图6,图6为根据本发明实施例的第二图片的一具体实例,可被称为IMAGE_ALPHA_NO_LIGHT。
其中,采用“亮光”或“强光”处理时,生成第二图片时的处理次数少于生成第一图片时的处理次数。
生成第三图片的步骤可以包括:对待处理皮肤区域进行磨皮处理,获得磨皮处理后的图像;之后,对所述磨皮处理后的图像进行一次“高反差保留”和至少三次“亮光”处理,获得第三图片;或者,对待处理皮肤区域进行一次“高反差保留”和至少三次“强光”处理,获得第三图片,该第三图片可参见图7,图7为根据本发明实施例的第三图片的一具体实例,可被称为IMAGE_ALPHA_FINAL。
上述对待处理皮肤区域进行磨皮处理,获得磨皮处理后图像的步骤可以包括:
通过与photoshop软件中“曲线”调节相同的方式,对待处理皮肤区域的绿色通道进行微提亮,提亮后的图片与提亮前的图片以灰度图像对应像素点的灰度值为透明度,进行融合。具体的,设灰度值为alpha,alpha=0表示图像为黑色,alpha=1表示图像为白色,其中,alpha的取值为[0,1]之间的小数;设待处理皮肤区域绿色通道的当前像素点的灰度值为huidu_green,设提亮后的的灰度值为huidu_light,设融合后的灰度值为huidu_final=huidu_green×alpha+huidu_light×(1.0-alpha),则得到一张把绿色通道磨皮处理后的图像。
需要说明的是,上述具体步骤是以采用photoshop软件对图像进行处理为例进行说明的,本申请并不对第一、二、三图片的具体生成方式做限定,可以使用任何已知的、公开的程序对前述待处理皮肤区域进行处理,只要所生成的第一、二、三图片均为黑白图像(即灰度图像),且第一图片的黑白对比度大于所述第三二图像图片的黑白对比度即可。
需要说明的是,在本发明的一个较佳实施例中,在对待处理皮肤区域进行灰度处理时,可以对待处理皮肤区域的绿色通道进行灰度处理,这是因为,红色通道中的皮肤瑕疵通常不明显,而蓝色通道中的杂色太多,绿色通道比较适中,所以选择绿色通道。当然,在其他可能的实施例中,也可以对红、绿、蓝三个分量分别给相同或不同的权重后,求均值,之后对求均值的图像进行灰度处理。
生成第一图片的目的是为了较为恰当的把皮肤区域中如人脸区域中较突兀的、颜色比周围较深的区域找出来,其中越黑的部分表示越突兀,其在待处理皮肤区域中颜色较深,第一图片参见图4或图5。
生成第二图片的目的是为了把非常明显的皮肤瑕疵凸显出来,用于接下来搜索较为明显的皮肤瑕疵,第二图片参见图6。
由于第一图片中凸显了很多颜色只是比周围略深的像素,这些像素同样会变为接近于黑色,如果其附近有皮肤瑕疵如痘痘,则痘痘也会变成黑色,从而有可能连成一片,导致在判断该黑色区域的总像素点个数时偏大,可能超出预先设定的相互邻接的像素点个数的邻接阈值,进而导致误判,有了第三图片,其磨皮操作已经把只是颜色略深的像素抹除,因此避免了这种误判,即,使得一次磨皮后的图像中没有抹掉的仍然比较突兀的区域再次凸显出来,第三图片参见图7。
需要说明的是,上述生成第一第二第三图片三种瑕疵突兀度等级的图片仅为示例,是为了突显不同大小的皮肤瑕疵,但本发明不限于此,本领域技术人员可以根据本发明实施例的设计思想,设置多种瑕疵突兀度等级的图片,例如4种、5种……从而更为精细突显皮肤瑕疵,达到良好的去除皮肤瑕疵的效果。
S103B:确定所述待处理皮肤区域的颜色值,根据所述颜色值生成所述待处理皮肤区域的皮肤相似度图片。
具体的,本步骤可以通过以下方式实现:
对所述待处理皮肤区域内的若干区域分别进行皮肤颜色值采样,获得针对每个区域的若干采样值;
根据所述采样值计算出每个区域的皮肤颜色值;
分别遍历每个区域内的像素点,计算每个像素点的颜色值与其所在区域的皮肤颜色值之间的相似度值;
将计算出的所述相似度值映射为灰度值,生成反映皮肤颜色的皮肤相似度图片。
其中,相似度值越高,越接近白色,反之接近黑色。
上述步骤中,之所以分为若干区域,是因为有时由于光线方向的问题,会使得皮肤的左右或上下呈明显的颜色区别,为了削弱该颜色区别对皮肤颜色判断以及相似度判断的影响,可以将待处理皮肤区域分为若干区域,例如,以人脸为例,可以把人脸简单以鼻子为中心,分为左上、右上、左下、右下4个矩形区域,分别采样和计算相似度。对于无光线明暗影响的图像,此计算方法也不影响计算结果。
S103C:根据所述不同瑕疵突兀度等级图片和皮肤相似度图片确定皮肤瑕疵的位置。
在上述的S103A中,生成的不同瑕疵突兀度等级图片包括第一、二和三图片时,本步骤中,可以根据第一、二、三图片和皮肤相似度图片确定皮肤瑕疵的位置。
具体的,根据第一、二、三图片和皮肤相似度图片确定皮肤瑕疵的位置的步骤可以包括:
根据所述第二图片和皮肤相似度图片生成第一皮肤瑕疵集合,其中,第二图片可参见图6;
根据所述第一图片和皮肤相似度图片生成第二皮肤瑕疵集合,其中,第一图片可参见图5;
根据所述第三图片和皮肤相似度图片生成第三、四皮肤瑕疵集合,其中,第三图片可参见图7;
将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
其中,根据所述第二图片和皮肤相似度图片生成第一皮肤瑕疵集合的步骤可以包括:
在所述第二图片(可参见图6)中搜索满足第一搜索条件的斑块;其中,所述第一搜索条件为像素点灰度值小于等于第一灰度阈值,例如30(0为黑色,255为白色),且灰度值小于等于第一灰度阈值的相互邻接的像素点的个数小于等于第一邻接阈值,如假设人脸的宽度约100像素,则该第一邻接阈值为6比较合适;
将所述斑块的位置映射到所述皮肤相似度图片中;
从所述皮肤相似度图片中,提取斑块所在位置对应像素值点的灰度值,以判断各个像素点的灰度值是否在预设的皮肤瑕疵灰度值范围内,即判断该斑块在待处理皮肤区域中相应像素点的颜色值是否接近皮肤瑕疵如痘痘的颜色值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内,以判断该斑块周围是否有一定的皮肤区域;
若是,则将搜索到的斑块作为第一皮肤瑕疵集合。
上述搜索第一皮肤瑕疵集合的目的是,在第二图片(可参见图6)中把较大块的深色区域中的较为明显的皮肤瑕疵如痘痘找出来。由于大块的阴影在第一图片(可参见图5)和第三图片(可参见图7)中通常为大块黑色区域,其大小超出痘痘所限定的阈值,从而易导致皮肤瑕疵如痘痘无法被检测到,而第二图片(可参见图6)中只能把皮肤瑕疵如痘痘中颜色较深中心很小的区域变为黑色,因此,该步骤可以将较大块深色区域中的较为明显的痘痘找出来。
根据所述第一图片和皮肤相似度图片区域生成第二皮肤瑕疵集合的步骤可以包括:
在所述第一图片(可参见图5)中搜索满足第二搜索条件的斑块;其中,所述第二搜索条件为像素点灰度值小于等于第二灰度阈值,例如30(0为黑色,255为白色),且灰度值小于等于第二灰度阈值的相互邻接的像素点的个数小于等于第二邻接阈值,如假设人脸的宽度约100像素,则该第二邻接阈值为30比较合适;
将所述斑块的位置映射到所述皮肤相似度图片中;
从所述皮肤相似度图片中,提取斑块所在位置对应像素点的灰度值,以判断各个像素点的灰度值是否在预设的皮肤瑕疵灰度值范围内,即判断该斑块在待处理皮肤区域中相应像素点的颜色值是否接近皮肤瑕疵如痘痘的颜色值,并且判断该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内,以判断该斑块周围是否有一定的皮肤区域;
若是,则将搜索到的斑块作为第二皮肤瑕疵集合。
上述搜索第二皮肤瑕疵集合的目的是,将颜色相对较浅且较大块的皮肤瑕疵如痘痘找出来。因为第一图片(可参加图5)中把皮肤瑕疵如痘痘以外,其他的一些杂色和皮肤的细微变化也变黑了,由此会导致皮肤瑕疵如痘痘对应的黑色区域变大,经过该次搜索,可以将颜色相对较浅但实际较大块的皮肤瑕疵如痘痘找出来。
根据所述第三图片和皮肤相似度图片生成第三、四皮肤瑕疵集合的步骤可以包括:
在所述第三图片(可参见图7)中搜索满足第三搜索条件的斑块;其中,所述第三搜索条件为像素点灰度值小于等于第三灰度阈值,例如30(0为黑色,255为白色),且灰度值小于等于第三灰度阈值的相互邻接的像素点的个数小于等于第三邻接阈值,如假设人脸的宽度约100像素,则该第三邻接阈值为15比较合适;
在所述第三图片(可参见图7)中搜索满足第四搜索条件的斑块;其中,所述第四搜索条件为像素点灰度值小于等于第四灰度阈值,例如30(0为黑色,255为白色),且灰度值小于等于第四灰度阈值的相互邻接的像素点的个数小于等于第四邻接阈值,如假设人脸的宽度约100像素,则该第三邻接阈值为30比较合适;
将所述满足第三搜索条件和第四搜索条件斑块的位置映射到所述皮肤相似度图片中;
从所述皮肤相似度图片中,提取斑块所在位置对应像素点的灰度值,以判断各个像素点的灰度值是否在预设的皮肤瑕疵灰度值范围内,即判断该斑块在待处理皮肤区域中相应像素点的颜色值是否接近皮肤瑕疵如痘痘的颜色值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内,以判断该斑块周围是否有一定的皮肤区域;
若是,则将搜索到的满足第三搜索条件斑块作为第三皮肤瑕疵集合,将搜索到的满足第四搜索条件斑块作为第四皮肤瑕疵集合。
上述搜索第三皮肤瑕疵集合的目的是,将大小适中的皮肤瑕疵如痘痘找出来。因为很多杂色在磨皮过程中已经去除,剩余的皮肤瑕疵如痘痘颜色也会变浅,因此痘痘在第三图片(可参见图7)中产生的黑色区域也就相对变得较为适中,因此,经过该次搜索,可以将适中大小的皮肤瑕疵如痘痘找出来。
上述搜索第四皮肤瑕疵集合的目的是,将较大块的皮肤瑕疵如痘痘找出来。有些皮肤瑕疵实际就比较大,这样痘痘在第三图片(可参见图7)中产生的黑色区域也就相对比较大,经过该次搜索,可以将实际较大块的皮肤瑕疵如痘痘找出来。
可以理解的是,在找到这些第一至第四皮肤瑕疵集合后,如果是在缩放后的图片上找到的,那么,还需将在缩放后的图片上找到的皮肤瑕疵集合映射至原始待处理图片中,从而确定出原始待处理图片中皮肤瑕疵的位置进而进行去除。
在上述的S103A中,生成的不同瑕疵突兀度等级图片包括第一、二和三图片时,本步骤中,还可以根据第一、二、三图片、皮肤相似度图片和待处理图片确定皮肤瑕疵的位置。
具体的,根据第一、二、三图片、皮肤相似度图片和待处理图片确定皮肤瑕疵的位置的步骤可以包括:
根据所述第二图片、皮肤相似度图片和待处理皮肤区域生成第一皮肤瑕疵集合,其中,第二图片可参见图6;
根据所述第一图片、皮肤相似度图片和待处理皮肤区域生成第二皮肤瑕疵集合,其中,第一图片可参见图5;
根据所述第三图片、皮肤相似度图片和待处理皮肤区域生成第三、四皮肤瑕疵集合,其中,第三图片可参见图7;
将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
其中,根据所述第二图片、皮肤相似度图片和待处理皮肤区域生成第一皮肤瑕疵集合的步骤可以包括:
在所述第二图片(可参见图6)中搜索满足第一搜索条件的斑块;其中,所述第一搜索条件为像素点灰度值小于等于第一灰度阈值,例如30(0为黑色,255为白色),且相互邻接的像素点中灰度值小于等于第一灰度阈值的像素点的个数小于等于第一邻接阈值,如假设人脸的宽度约100像素,则该第一邻接阈值为6比较合适;
将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;若所述颜色值在预定的瑕疵颜色阈值范围内,说明该斑块在待处理皮肤区域中对应的颜色值接近皮肤瑕疵如痘痘的颜色;则
从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素值点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内,以判断该斑块周围是否有一定的皮肤区域;
若是,则将搜索到的斑块作为第一皮肤瑕疵集合。
上述搜索第一皮肤瑕疵集合的目的是,在第二图片(可参见图6)中把较大块的深色区域中的较为明显的皮肤瑕疵如痘痘找出来。由于大块的阴影在第一图片(可参见图5)和第三图片(可参见图7)中通常为大块黑色区域,其大小超出痘痘所限定的阈值,从而易导致皮肤瑕疵如痘痘无法被检测到,而第二图片(可参见图6)中只能把皮肤瑕疵如痘痘中颜色较深中心很小的区域变为黑色,因此,该步骤可以将较大块深色区域中的较为明显的痘痘找出来。
根据所述第一图片、皮肤相似度图片和待处理皮肤区域生成第二皮肤瑕疵集合的步骤可以包括:
在所述第一图片(可参见图5)中搜索满足第二搜索条件的斑块;其中,所述第二搜索条件为像素点灰度值小于等于第二灰度阈值,例如30(0为黑色,255为白色),且中灰度值小于等于第二灰度阈值的像素点的像素点的个数小于等于第二邻接阈值,如假设人脸的宽度约100像素,则该第二邻接阈值为30比较合适;
将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;若所述颜色值在预定的瑕疵颜色阈值范围内,说明该斑块在待处理皮肤区域中对应的颜色值接近皮肤瑕疵如痘痘的颜色;则
从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内,以判断该斑块周围是否有一定的皮肤区域;
若是,则将搜索到的斑块作为第二皮肤瑕疵集合。
上述搜索第二皮肤瑕疵集合的目的是,将颜色相对较浅且较大块的皮肤瑕疵如痘痘找出来。因为第一图片(可参加图5)中把皮肤瑕疵如痘痘以外,其他的一些杂色和皮肤的细微变化也变黑了,由此会导致皮肤瑕疵如痘痘对应的黑色区域变大,经过该次搜索,可以将颜色相对较浅但实际较大块的皮肤瑕疵如痘痘找出来。
根据所述第三图片、皮肤相似度图片和待处理皮肤区域生成第三、四皮肤瑕疵集合的步骤可以包括:
在所述第三图片(可参见图7)中搜索满足第三搜索条件的斑块;其中,所述第三搜索条件为像素点灰度值小于等于第三灰度阈值,例如30(0为黑色,255为白色),且相互邻接的像素点中灰度值小于等于第三灰度阈值的像素点的个数小于等于第三邻接阈值,如假设人脸的宽度约100像素,则该第三邻接阈值为15比较合适;
在所述第三图片(可参见图7)中搜索满足第四搜索条件的斑块;其中,所述第四搜索条件为像素点灰度值小于等于第四灰度阈值,例如30(0为黑色,255为白色),且相互邻接的像素点中灰度值小于等于第四灰度阈值的像素点的个数小于等于第四邻接阈值,如假设人脸的宽度约100像素,则该第三邻接阈值为30比较合适;
将所述满足第三搜索条件和第四搜索条件斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;若所述颜色值在预定的瑕疵颜色阈值范围内,说明该斑块在待处理皮肤区域中对应的颜色值接近皮肤瑕疵如痘痘的颜色;则
从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内,以判断该斑块周围是否有一定的皮肤区域;
若是,则将搜索到的满足第三搜索条件斑块作为第三皮肤瑕疵集合,将搜索到的满足第四搜索条件斑块作为第四皮肤瑕疵集合。
上述搜索第三皮肤瑕疵集合的目的是,将大小适中的皮肤瑕疵如痘痘找出来。因为很多杂色在磨皮过程中已经去除,剩余的皮肤瑕疵如痘痘颜色也会变浅,因此痘痘在第三图片(可参见图7)中产生的黑色区域也就相对变得较为适中,因此,经过该次搜索,可以将适中大小的皮肤瑕疵如痘痘找出来。
上述搜索第四皮肤瑕疵集合的目的是,将较大块的皮肤瑕疵如痘痘找出来。有些皮肤瑕疵实际就比较大,这样痘痘在第三图片(可参见图7)中产生的黑色区域也就相对比较大,经过该次搜索,可以将实际较大块的皮肤瑕疵如痘痘找出来。
最后,通过将各种特征的皮肤瑕疵合并,即将所述第一至四皮肤瑕疵集合合并,就可获得所有皮肤瑕疵位置及大小。这样,可以在待处理皮肤区域中得到所有皮肤瑕疵的位置。
需要说明的是,前述各种阈值的大小可以根据实际需求确定,各个阈值的具体取值可以相同也可以不同。
需要说明的是,前述皮肤瑕疵可以是痘痘、污点、痣、伤疤等等,本申请并不对皮肤瑕疵的具体表现形式做限定,前述只是以痘痘为例进行说明,通过改变祛痘过程中各种阈值的实际取值,即可实现去污点、伤疤等等。
由以上可见,本方案中,通过获得待处理皮肤区域的不同突兀度等级图片以及皮肤相似度图片,可以准确、全面的检测出皮肤区域的皮肤瑕疵,为去除皮肤瑕疵提供基础。
参见图10,其实根据本发明实施例的一种图片处理装置的逻辑结构示意图,该结构具体包括:人脸识别模块1001、皮肤区域确定模块1002、皮肤瑕疵确定模块1003和皮肤瑕疵去除模块1004。
其中,人脸识别模块1001,用于在待处理图片中进行人脸识别;
皮肤区域确定模块1002,用于确定待处理图片中的待处理皮肤区域;
皮肤瑕疵确定模块1003,用于确定所述待处理皮肤区域中皮肤瑕疵的位置;
皮肤瑕疵去除模块1004,用于根据确定出的所述皮肤瑕疵在所述待处理皮肤区域中的位置,去除所述人脸区域中的皮肤瑕疵,得到处理后的图片。
具体的,皮肤区域确定模块1002可以包括:遮盖区域检测子模块、非遮盖区域确定子模块和皮肤区域检测子模块(图中未示出)。
其中,遮盖区域检测子模块,用于检测人脸区域中的遮盖区域;非遮盖区域确定子模块,用于根据所述遮盖区域确定出所述人脸区域中的非遮盖区域;皮肤区域检测子模块,用于在所述非遮盖区域中检测皮肤区域;或用于在人脸区域中检测皮肤区域。
具体的,所述待处理图片,包括:
原始待处理图片或原始待处理图片按照预设的第一比例缩放后得到的图片。
在本发明的一个具体实施例中,所述皮肤瑕疵去除模块1004可以包括:皮肤瑕疵映射子模块和皮肤瑕疵去除子模块(图中未示出)。
其中,皮肤瑕疵映射子模块,用于将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片中的人脸区域;皮肤瑕疵去除子模块,用于根据映射处理结果,去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
在本发明的另一个具体实施例中,所述皮肤瑕疵去除模块1004,还可以包括:皮肤瑕疵放大子模块(图中未示出)。
皮肤瑕疵放大子模块,用于在所述皮肤瑕疵映射子模块将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片的人脸区域中之后,在所述待处理图片中,按照预设的第二比例放大所述皮肤瑕疵所在区域,其中,所述预设的第二比例大于1。
在本发明的另一个具体实施例中,所述皮肤瑕疵去除子模块可以包括:函数计算单元、横纵向颜色值获得单元、正常皮肤颜色值获得单元和颜色值替换单元(图中未示出)。
其中,函数计算单元,用于计算待处理图片的人脸区域中的皮肤瑕疵中位于预设相对位置的像素点所对应的横向皮肤颜色变化函数y=f(x),以及纵向皮肤颜色变化函数y’=f(x’),其中,x表示所述待处理图片中像素点的横向坐标、x’表示所述待处理图片中像素点的纵向坐标,y表示横向坐标为x的像素点对应的颜色值、y’表示纵向坐标为x’的像素点对应的颜色值;
横纵向颜色值获得单元,用于将所述待处理图片的人脸区域中的皮肤瑕疵中每一像素点的横向坐标和纵向坐标分别代入上述横向皮肤颜色变化函数和纵向皮肤颜色变化函数,获得每一像素点在横向及纵向的颜色值;
正常皮肤颜色值获得单元,用于对所述每一像素点在横向及纵向的颜色值取均值,获得每一像素点对应的正常皮肤颜色值;
颜色值替换单元,用于依次使用计算出的每一像素点的正常皮肤颜色值替换所述待处理图片的人脸区域中的皮肤瑕疵中每个像素点的颜色值,从而去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
在本发明的另一个具体实施例中,所述装置还可以包括:磨皮处理模块(图中未示出)。
其中,所述磨皮处理模块,用于对所述处理后的图片进行磨皮处理,以获得去除突兀效果的图片。
具体的,所述皮肤暇疵可以包括以下几种中的任意一种或几种:痘痘、污点、伤疤或痣。
应用本发明实施例提供的图像处理装置,自动的对照片图像中人的脸部皮肤进行了修改,即消除了人脸皮肤中较浅的瑕疵,也消除了人脸皮肤中比较明显的问题。相对于现有的人脸皮肤美化处理的各类APP中手动抹除皮肤瑕疵的方案,本申请所提供的方法给用户提供了更好的用户的体验。
在本发明的另一个具体实施例中,提供了一种皮肤瑕疵确定模块1003的具体实现方式,具体参见图11,图11是根据本发明实施例的一种皮肤瑕疵确定模块的逻辑结构示意图,该皮肤瑕疵确定模块1003可以包括:不同突兀度等级图片获得子模块10031、皮肤相似度图片生成子模块10032和皮肤瑕疵确定子模块10033。
其中,不同突兀度等级图片获得子模块10031,用于获得所述待处理皮肤区域的不同瑕疵突兀度等级图片;
皮肤相似度图片生成子模块10032,用于确定所述待处理皮肤区域的颜色值,根据所述颜色值生成所述待处理皮肤区域的皮肤相似度图片;
皮肤瑕疵确定子模块10033,用于根据所述不同瑕疵突兀度等级图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
具体的,所述皮肤相似度图片生成子模块10032可以包括:采样值获得单元、皮肤颜色值计算单元、相似度计算单元和皮肤相似度图片生成单元(图中未示出)。
其中,采样值获得单元,用于对所述待处理皮肤区域内的若干区域分别进行皮肤颜色值采样,获得针对每个区域的若干采样值;
皮肤颜色值计算单元,用于根据所述采样值计算出每个区域的皮肤颜色值;
相似度计算单元,用于分别遍历每个区域内的像素点,计算每个像素点的颜色值与其所在区域的皮肤颜色值之间的相似度值;
皮肤相似度图片生成单元,用于将计算出的所述相似度值映射为灰度值,生成反映皮肤颜色的皮肤相似度图片。
具体的,所述不同突兀度等级图片获得子模块10031可以包括:第一图片生成单元、第二图片生成单元和第三图片生成单元(图中未示出)。
其中,第一图片生成单元,用于生成具有第一黑白对比度的第一图片;
第二图片生成单元,用于生成具有第二黑白对比度的第二图片;其中,所述第一黑白对比度大于所述第二黑白对比度;
第三图片生成单元,用于生成具有第三黑白对比度的第三图片;其中,所述第三黑白对比度与第一黑白对比度相同;
所述皮肤瑕疵确定子模块10033,具体用于根据所述第一至三图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
在本发明的一个具体实施例中,所述皮肤瑕疵确定子模块10033,具体还用于根据所述第一至三图片、皮肤相似度图片和待处理皮肤区域确定皮肤瑕疵在所述待处理皮肤区域中的位置。
具体的,所述皮肤瑕疵确定子模块10033可以包括:第一皮肤瑕疵集合生成单元、第二皮肤瑕疵集合生成单元、第三、四皮肤瑕疵集合生成单元和皮肤瑕疵获得单元(图中未示出)。
其中,第一皮肤瑕疵集合生成单元,用于根据所述第二图片、皮肤相似度图片和待处理皮肤区域生成第一皮肤瑕疵集合;
第二皮肤瑕疵集合生成单元,用于根据所述第一图片、皮肤相似度图片和待处理皮肤区域生成第二皮肤瑕疵集合;
第三、四皮肤瑕疵集合生成单元,用于根据所述第三图片、皮肤相似度图片和待处理皮肤区域生成第三、四皮肤瑕疵集合;
皮肤瑕疵获得单元,用于将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
具体的,所述第一皮肤瑕疵集合生成单元可以包括:第一搜索子单元、第一映射子单元、第一斑块位置和颜色值提取子单元和第一灰度值判断子单元(图中未示出)。
其中,第一搜索子单元,用于在所述第二图片中搜索满足第一搜索条件的斑块;其中,所述第一搜索条件为像素点灰度值小于等于第一灰度阈值,且灰度值小于等于第一灰度阈值的相互邻接的像素点的个数小于等于第一邻接阈值;
第一映射子单元,用于将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
第一斑块位置和颜色值提取子单元,用于从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;
第一灰度值判断子单元,用于在所述第一斑块位置和颜色值提取子单元提取的颜色值在预定的瑕疵颜色阈值范围内的情况下,从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;若是,则将搜索到的斑块作为第一皮肤瑕疵集合。
具体的,所述第二皮肤瑕疵集合生成单元可以包括:第二搜索子单元、第二映射子单元、第二斑块位置和颜色值提取子单元和第二灰度值判断子单元。
第二搜索子单元,用于在所述第一图片中搜索满足第二搜索条件的斑块;其中,所述第二搜索条件为像素点灰度值小于等于第二灰度阈值,且灰度值小于等于第二灰度阈值的相互邻接的像素点的个数小于等于第二邻接阈值;
第二映射子单元,用于将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
第二斑块位置和颜色值提取子单元,用于从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;
第二灰度值判断子单元,用于在所述第二斑块位置和颜色提取子单元提取的颜色值在预定的瑕疵颜色阈值范围内的情况下,从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;若是,则将搜索到的斑块作为第二皮肤瑕疵集合。
具体的,所述第三、四皮肤瑕疵集合生成单元可以包括:第三搜索子单元、第四搜索子单元、第三映射子单元、第三斑块位置和颜色值提取子单元和第三灰度值判断子单元(图中未示出)。
其中,第三搜索子单元,用于在所述第三图片中搜索满足第三搜索条件的斑块;其中,所述第三搜索条件为像素点灰度值小于等于第三灰度阈值,且灰度值小于等于第三灰度阈值的相互邻接的像素点的个数小于等于第三邻接阈值;
第四搜索子单元,用于在所述第三图片中搜索满足第四搜索条件的斑块;其中,所述第四搜索条件为像素点灰度值小于等于第四灰度阈值,且灰度值小于等于第四灰度阈值的相互邻接的像素点的个数小于等于第四邻接阈值;
第三映射子单元,用于将所述满足第三搜索条件和第四搜索条件斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
第三斑块位置和颜色值提取子单元,用于从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素的颜色值;
第三灰度值判断子单元,用于在所述颜色值在预定的瑕疵颜色阈值范围内的情况下,从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;若是,则将搜索到的满足第三搜索条件斑块作为第三皮肤瑕疵集合,将搜索到的满足第四搜索条件斑块作为第四皮肤瑕疵集合。
在本发明的一个具体实施例中,所述第一图片生成单元,具体用于对所述待处理皮肤区域进行第一灰度处理,从而生成具有第一黑白对比度的第一图片;
所述第二图片生成单元,具体用于对所述待处理皮肤区域进行第二灰度处理,从而生成具有第二黑白对比度的第二图片;其中,所述第二灰度处理与所述第一灰度处理方式不同;
所述第三图片生成单元,具体用于对所述待处理皮肤区域先进行磨皮处理,获得磨皮处理后的图片,再对所述磨皮处理后的图片进行第三灰度处理,从而生成具有第三黑白对比度的第三图片,其中,所述第三灰度处理与所述第一灰度处理方式相同。
由以上可见,本方案中,通过获得待处理皮肤区域的不同突兀度等级图片以及皮肤相似度图片,可以准确、全面的检测出皮肤区域的皮肤瑕疵,为去除皮肤瑕疵提供基础。
对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
为了描述的方便,描述以上装置是以功能分为各种单元分别描述。当然,在实施本发明时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本发明可用于众多通用或专用的计算系统环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、置顶盒、可编程的消费电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (34)

1.图片处理方法,其特征在于,所述方法包括:
在待处理图片中进行人脸识别;
根据检测结果,确定人脸区域中的待处理皮肤区域;
确定所述待处理皮肤区域中皮肤瑕疵的位置;
根据确定出的所述皮肤瑕疵在所述待处理皮肤区域中的位置,去除所述人脸区域中的皮肤瑕疵,得到处理后的图片。
2.根据权利要求1所述的方法,其特征在于,所述确定人脸区域中的待处理皮肤区域,包括:
检测人脸区域中的遮盖区域;
根据所述遮盖区域确定出所述人脸区域中的非遮盖区域;
在所述非遮盖区域中检测皮肤区域;
在人脸区域中检测皮肤区域。
3.根据权利要求1或2所述的方法,其特征在于,所述待处理图片,包括:
原始待处理图片或原始待处理图片按照预设的第一比例缩放后得到的图片。
4.根据权利要求1所述的方法,其特征在于,所述确定所述待处理皮肤区域中皮肤瑕疵的位置,包括:
获得所述待处理皮肤区域的不同瑕疵突兀度等级图片;
确定所述待处理皮肤区域的颜色值,根据所述颜色值生成所述待处理皮肤区域的皮肤相似度图片;
根据所述不同瑕疵突兀度等级图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
5.根据权利要求4所述的方法,其特征在于,所述确定所述待处理皮肤区域的颜色值,根据所述颜色值生成所述待处理皮肤区域的皮肤相似度图片,包括:
对所述待处理皮肤区域内的若干区域分别进行皮肤颜色值采样,获得针对每个区域的若干采样值;
根据所述采样值计算出每个区域的皮肤颜色值;
分别遍历每个区域内的像素点,计算每个像素点的颜色值与其所在区域的皮肤颜色值之间的相似度值;
将计算出的所述相似度值映射为灰度值,生成反映皮肤颜色的皮肤相似度图片。
6.根据权利要求4或5所述的方法,其特征在于,
所述获得所述待处理皮肤区域的不同瑕疵突兀度等级图片,包括:
生成具有第一黑白对比度的第一图片;
生成具有第二黑白对比度的第二图片;其中,所述第一黑白对比度大于所述第二黑白对比度;
生成具有第三黑白对比度的第三图片;其中,所述第三黑白对比度与第一黑白对比度相同;
所述根据所述不同瑕疵突兀度等级图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置,包括:
根据所述第一至三图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
7.根据权利要求6所述的方法,其特征在于,所述根据所述第一至三图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置,包括:
根据所述第二图片、皮肤相似度图片生成第一皮肤瑕疵集合;
根据所述第一图片、皮肤相似度图片生成第二皮肤瑕疵集合;
根据所述第三图片、皮肤相似度图片生成第三、四皮肤瑕疵集合;
将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
8.根据权利要求6所述的方法,其特征在于,根据所述第一至三图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置的步骤包括:
根据所述第二图片、皮肤相似度图片和待处理皮肤区域生成第一皮肤瑕疵集合;
根据所述第一图片、皮肤相似度图片和待处理皮肤区域生成第二皮肤瑕疵集合;
根据所述第三图片、皮肤相似度图片和待处理皮肤区域生成第三、四皮肤瑕疵集合;
将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
9.根据权利要求8所述的方法,其特征在于,根据所述第二图片、皮肤相似度图片和待处理皮肤区域生成第一皮肤瑕疵集合的步骤包括:
在所述第二图片中搜索满足第一搜索条件的斑块;其中,所述第一搜索条件为像素点灰度值小于等于第一灰度阈值,且灰度值小于等于第一灰度阈值的相互邻接的像素点的个数小于等于第一邻接阈值;
将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;若所述颜色值在预定的瑕疵颜色阈值范围内;则
从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;
若是,则将搜索到的斑块作为第一皮肤瑕疵集合。
10.根据权利要求8所述的方法,其特征在于,根据所述第一图片、皮肤相似度图片和待处理皮肤区域生成第二皮肤瑕疵集合的步骤包括:
在所述第一图片中搜索满足第二搜索条件的斑块;其中,所述第二搜索条件为像素点灰度值小于等于第二灰度阈值,且灰度值小于等于第二灰度阈值的相互邻接的像素点的个数小于等于第二邻接阈值;
将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;若所述颜色值在预定的瑕疵颜色阈值范围内;则
从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;
若是,则将搜索到的斑块作为第二皮肤瑕疵集合。
11.根据权利要求8所述的方法,其特征在于,根据所述第三图片、皮肤相似度图片和待处理皮肤区域生成第三、四皮肤瑕疵集合的步骤包括:
在所述第三图片中搜索满足第三搜索条件的斑块;其中,所述第三搜索条件为像素点灰度值小于等于第三灰度阈值,且灰度值小于等于第三灰度阈值的相互邻接的像素点的个数小于等于第三邻接阈值;
在所述第三图片中搜索满足第四搜索条件的斑块;其中,所述第四搜索条件为像素点灰度值小于等于第四灰度阈值,且灰度值小于等于第四灰度阈值的相互邻接的像素点的个数小于等于第四邻接阈值;
将所述满足第三搜索条件和第四搜索条件斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;若所述颜色值在预定的瑕疵颜色阈值范围内;则
从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;
若是,则将搜索到的满足第三搜索条件斑块作为第三皮肤瑕疵集合,将搜索到的满足第四搜索条件斑块作为第四皮肤瑕疵集合。
12.根据权利要求6所述的方法,其特征在于,
所述生成具有第一黑白对比度的第一图片的步骤包括:对所述待处理皮肤区域进行第一灰度处理,从而生成具有第一黑白对比度的第一图片;
所述生成具有第二黑白对比度的第二图片的步骤包括:对所述待处理皮肤区域进行第二灰度处理,从而生成具有第二黑白对比度的第二图片;其中,所述第二灰度处理与所述第一灰度处理方式不同;
所述生成具有第三黑白对比度的第三图片的步骤包括:对所述待处理皮肤区域先进行磨皮处理,获得磨皮处理后的图片,再对所述磨皮处理后的图片进行第三灰度处理,从而生成具有第三黑白对比度的第三图片,其中,所述第三灰度处理与所述第一灰度处理方式相同。
13.根据权利要求1所述的方法,其特征在于,所述根据确定出的所述皮肤瑕疵在所述待处理皮肤区域中的位置,去除所述人脸区域中对应的皮肤瑕疵,得到处理后的图片,包括:
将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片的人脸区域中;
根据映射处理结果,去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
14.根据权利要求13所述的方法,其特征在于,在所述将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片的人脸区域中之后,还包括:
在所述待处理图片中,按照预设的第二比例放大所述皮肤瑕疵所在区域,其中,所述预设的第二比例大于1。
15.根据权利要求13或14所述的方法,其特征在于,
所述根据映射处理结果,去除所述待处理图片的人脸区域中的皮肤瑕疵,包括:
计算待处理图片的人脸区域中的皮肤瑕疵中位于预设相对位置的像素点所对应的横向皮肤颜色变化函数y=f(x),以及纵向皮肤颜色变化函数y’=f(x’),其中,x表示所述待处理图片中像素点的横向坐标、x’表示所述待处理图片中像素点的纵向坐标,y表示横向坐标为x的像素点对应的颜色值、y’表示纵向坐标为x’的像素点对应的颜色值;
将所述待处理图片的人脸区域中的皮肤瑕疵中每一像素点的横向坐标和纵向坐标分别代入上述横向皮肤颜色变化函数和纵向皮肤颜色变化函数,获得每一像素点在横向及纵向的颜色值;
对所述每一像素点在横向及纵向的颜色值取均值,获得每一像素点对应的正常皮肤颜色值;
依次使用计算出的每一像素点的正常皮肤颜色值替换所述待处理图片的人脸区域中的皮肤瑕疵中每个像素点的颜色值,从而去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
16.根据权利要求1所述的方法,其特征在于,所述方法还包括:对所述处理后的图片进行磨皮处理,以获得去除突兀效果的图片。
17.根据权利要求1所述的方法,其特征在于,所述皮肤瑕疵,包括以下几种中的任意一种或几种:痘痘、污点、伤疤或痣。
18.图片处理装置,其特征在于,所述装置包括:
人脸识别模块,用于在待处理图片中进行人脸识别;
皮肤区域确定模块,用于根据检测结果,确定人脸区域中的待处理皮肤区域;
皮肤瑕疵确定模块,用于确定所述待处理皮肤区域中皮肤瑕疵的位置;
皮肤瑕疵去除模块,用于根据确定出的所述皮肤瑕疵在所述待处理皮肤区域中的位置,去除所述人脸区域中的皮肤瑕疵,得到处理后的图片。
19.根据权利要求18所述的装置,其特征在于,所述皮肤区域确定模块,包括:
遮盖区域检测子模块,用于检测待人脸区域中的遮盖区域;
非遮盖区域确定子模块,用于根据所述遮盖区域确定出所述人脸区域中的非遮盖区域;
皮肤区域检测子模块,用于在所述非遮盖区域中检测皮肤区域;或
用于在人脸区域中检测皮肤区域。
20.根据权利要求18或19所述的装置,其特征在于,所述待处理图片,包括:
原始待处理图片或原始待处理图片按照预设的第一比例缩放后得到的图片。
21.根据权利要求18所述的装置,其特征在于,所述皮肤瑕疵确定模块,包括:
不同突兀度等级图片获得子模块,用于获得所述待处理皮肤区域的不同瑕疵突兀度等级图片;
皮肤相似度图片生成子模块,用于确定所述待处理皮肤区域的颜色值,根据所述颜色值生成所述待处理皮肤区域的皮肤相似度图片;
皮肤瑕疵确定子模块,用于根据所述不同瑕疵突兀度等级图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
22.根据权利要求21所述的装置,其特征在于,所述皮肤相似度图片生成子模块,包括:
采样值获得单元,用于对所述待处理皮肤区域内的若干区域分别进行皮肤颜色值采样,获得针对每个区域的若干采样值;
皮肤颜色值计算单元,用于根据所述采样值计算出每个区域的皮肤颜色值;
相似度计算单元,用于分别遍历每个区域内的像素点,计算每个像素点的颜色值与其所在区域的皮肤颜色值之间的相似度值;
皮肤相似度图片生成单元,用于将计算出的所述相似度值映射为灰度值,生成反映皮肤颜色的皮肤相似度图片。
23.根据权利要求21或22所述的装置,其特征在于,所述不同突兀度等级图片获得子模块,包括:
第一图片生成单元,用于生成具有第一黑白对比度的第一图片;
第二图片生成单元,用于生成具有第二黑白对比度的第二图片;其中,所述第一黑白对比度大于所述第二黑白对比度;
第三图片生成单元,用于生成具有第三黑白对比度的第三图片;其中,所述第三黑白对比度与第一黑白对比度相同;
所述皮肤瑕疵确定子模块,具体用于根据所述第一至三图片和皮肤相似度图片确定皮肤瑕疵在所述待处理皮肤区域中的位置。
24.根据权利要求23所述的装置,其特征在于,所述皮肤瑕疵确定子模块,具体用于:
根据所述第二图片、皮肤相似度图片生成第一皮肤瑕疵集合;根据所述第一图片、皮肤相似度图片生成第二皮肤瑕疵集合;根据所述第三图片、皮肤相似度图片生成第三、四皮肤瑕疵集合;将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
25.根据权利要求23所述的装置,其特征在于,所述皮肤瑕疵确定子模块,包括:
第一皮肤瑕疵集合生成单元,用于根据所述第二图片、皮肤相似度图片和待处理皮肤区域生成第一皮肤瑕疵集合;
第二皮肤瑕疵集合生成单元,用于根据所述第一图片、皮肤相似度图片和待处理皮肤区域生成第二皮肤瑕疵集合;
第三、四皮肤瑕疵集合生成单元,用于根据所述第三图片、皮肤相似度图片和待处理皮肤区域生成第三、四皮肤瑕疵集合;
皮肤瑕疵获得单元,用于将所述第一至四皮肤瑕疵集合合并,获得所有皮肤瑕疵在所述待处理皮肤区域中的位置。
26.根据权利要求25所述的装置,其特征在于,所述第一皮肤瑕疵集合生成单元,包括:
第一搜索子单元,用于在所述第二图片中搜索满足第一搜索条件的斑块;其中,所述第一搜索条件为像素点灰度值小于等于第一灰度阈值,且灰度值小于等于第一灰度阈值的相互邻接的像素点的个数小于等于第一邻接阈值;
第一映射子单元,用于将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
第一斑块位置和颜色值提取子单元,用于从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;
第一灰度值判断子单元,用于在所述第一斑块位置和颜色值提取子单元提取的颜色值在预定的瑕疵颜色阈值范围内的情况下,从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;若是,则将搜索到的斑块作为第一皮肤瑕疵集合。
27.根据权利要求25所述的装置,其特征在于,所述第二皮肤瑕疵集合生成单元,包括:
第二搜索子单元,用于在所述第一图片中搜索满足第二搜索条件的斑块;其中,所述第二搜索条件为像素点灰度值小于等于第二灰度阈值,且灰度值小于等于第二灰度阈值的相互邻接的像素点的个数小于等于第二邻接阈值;
第二映射子单元,用于将所述斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
第二斑块位置和颜色值提取子单元,用于从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素点的颜色值;
第二灰度值判断子单元,用于在所述第二斑块位置和颜色提取子单元提取的颜色值在预定的瑕疵颜色阈值范围内的情况下,从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;若是,则将搜索到的斑块作为第二皮肤瑕疵集合。
28.根据权利要求25所述的装置,其特征在于,所述第三、四皮肤瑕疵集合生成单元,包括:
第三搜索子单元,用于在所述第三图片中搜索满足第三搜索条件的斑块;其中,所述第三搜索条件为像素点灰度值小于等于第三灰度阈值,且灰度值小于等于第三灰度阈值的相互邻接的像素点的个数小于等于第三邻接阈值;
第四搜索子单元,用于在所述第三图片中搜索满足第四搜索条件的斑块;其中,所述第四搜索条件为像素点灰度值小于等于第四灰度阈值,且灰度值小于等于第四灰度阈值的相互邻接的像素点的个数小于等于第四邻接阈值;
第三映射子单元,用于将所述满足第三搜索条件和第四搜索条件斑块的位置映射到所述待处理皮肤区域和皮肤相似度图片中;
第三斑块位置和颜色值提取子单元,用于从所述待处理皮肤区域中提取斑块所在位置及斑块所对应像素的颜色值;
第三灰度值判断子单元,用于在所述颜色值在预定的瑕疵颜色阈值范围内的情况下,从所述皮肤相似度图片中,提取斑块所在位置为中心的预定范围内对应像素点的灰度值,并且判断以该位置为中心的预定范围内像素点对应的灰度值是否在表示皮肤颜色相似的灰度阈值范围内;若是,则将搜索到的满足第三搜索条件斑块作为第三皮肤瑕疵集合,将搜索到的满足第四搜索条件斑块作为第四皮肤瑕疵集合。
29.根据权利要求23所述的装置,其特征在于,
所述第一图片生成单元,具体用于对所述待处理皮肤区域进行第一灰度处理,从而生成具有第一黑白对比度的第一图片;
所述第二图片生成单元,具体用于对所述待处理皮肤区域进行第二灰度处理,从而生成具有第二黑白对比度的第二图片;其中,所述第二灰度处理与所述第一灰度处理方式不同;
所述第三图片生成单元,具体用于对所述待处理皮肤区域先进行磨皮处理,获得磨皮处理后的图片,再对所述磨皮处理后的图片进行第三灰度处理,从而生成具有第三黑白对比度的第三图片,其中,所述第三灰度处理与所述第一灰度处理方式相同。
30.根据权利要求18所述的装置,其特征在于,所述皮肤瑕疵去除模块,包括:
皮肤瑕疵映射子模块,用于将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片中的人脸区域;
皮肤瑕疵去除子模块,用于根据映射处理结果,去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
31.根据权利要求30所述的装置,其特征在于,所述皮肤瑕疵去除模块,还包括:
皮肤瑕疵放大子模块,用于在所述皮肤瑕疵映射子模块将所述待处理皮肤区域中的皮肤瑕疵映射到所述待处理图片的人脸区域中之后,在所述待处理图片中,按照预设的第二比例放大所述皮肤瑕疵所在区域,其中,所述预设的第二比例大于1。
32.根据权利要求30或31所述的装置,其特征在于,所述皮肤瑕疵去除子模块,包括:
函数计算单元,用于计算待处理图片的人脸区域中的皮肤瑕疵中位于预设相对位置的像素点所对应的横向皮肤颜色变化函数y=f(x),以及纵向皮肤颜色变化函数y’=f(x’),其中,x表示所述待处理图片中像素点的横向坐标、x’表示所述待处理图片中像素点的纵向坐标,y表示横向坐标为x的像素点对应的颜色值、y’表示纵向坐标为x’的像素点对应的颜色值;
横纵向颜色值获得单元,用于将所述待处理图片的人脸区域中的皮肤瑕疵中每一像素点的横向坐标和纵向坐标分别代入上述横向皮肤颜色变化函数和纵向皮肤颜色变化函数,获得每一像素点在横向及纵向的颜色值;
正常皮肤颜色值获得单元,用于对所述每一像素点在横向及纵向的颜色值取均值,获得每一像素点对应的正常皮肤颜色值;
颜色值替换单元,用于依次使用计算出的每一像素点的正常皮肤颜色值替换所述待处理图片的人脸区域中的皮肤瑕疵中每个像素点的颜色值,从而去除所述待处理图片的人脸区域中的皮肤瑕疵,得到处理后的图片。
33.根据权利要求18所述的装置,其特征在于,所述装置还包括:磨皮处理模块;
所述磨皮处理模块,用于对所述处理后的图片进行磨皮处理,以获得去除突兀效果的图片。
34.根据权利要求18所述的装置,其特征在于,所述皮肤瑕疵,包括以下几种中的任意一种或几种:痘痘、污点、伤疤或痣。
CN201410137069.9A 2014-04-04 2014-04-04 图片处理方法及装置 Active CN103927719B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201410137069.9A CN103927719B (zh) 2014-04-04 2014-04-04 图片处理方法及装置
PCT/CN2014/085482 WO2015149475A1 (zh) 2014-04-04 2014-08-29 图片处理方法及装置
US14/905,762 US9959603B2 (en) 2014-04-04 2014-08-29 Method and device for image processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410137069.9A CN103927719B (zh) 2014-04-04 2014-04-04 图片处理方法及装置

Publications (2)

Publication Number Publication Date
CN103927719A true CN103927719A (zh) 2014-07-16
CN103927719B CN103927719B (zh) 2017-05-17

Family

ID=51145931

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410137069.9A Active CN103927719B (zh) 2014-04-04 2014-04-04 图片处理方法及装置

Country Status (3)

Country Link
US (1) US9959603B2 (zh)
CN (1) CN103927719B (zh)
WO (1) WO2015149475A1 (zh)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104504668A (zh) * 2014-12-30 2015-04-08 宇龙计算机通信科技(深圳)有限公司 含有人脸的图像加锐方法及装置
WO2015149475A1 (zh) * 2014-04-04 2015-10-08 北京金山网络科技有限公司 图片处理方法及装置
CN105243371A (zh) * 2015-10-23 2016-01-13 厦门美图之家科技有限公司 一种人脸美颜程度的检测方法、系统及拍摄终端
WO2016101883A1 (zh) * 2014-12-24 2016-06-30 掌赢信息科技(上海)有限公司 一种即时视频中的人脸美化方法和电子设备
CN105787888A (zh) * 2014-12-23 2016-07-20 联芯科技有限公司 人脸图像美化方法
WO2016141866A1 (zh) * 2015-03-09 2016-09-15 夏普株式会社 图像处理设备和方法
CN106210522A (zh) * 2016-07-15 2016-12-07 广东欧珀移动通信有限公司 一种图像处理方法、装置及移动终端
WO2017054605A1 (zh) * 2015-09-29 2017-04-06 腾讯科技(深圳)有限公司 一种图片的处理方法和装置
WO2017071219A1 (zh) * 2015-10-26 2017-05-04 腾讯科技(深圳)有限公司 检测皮肤区域的方法和检测皮肤区域的装置
CN106780595A (zh) * 2016-12-15 2017-05-31 歌尔科技有限公司 一种全景图片的识别方法和装置
CN106875332A (zh) * 2017-01-23 2017-06-20 深圳市金立通信设备有限公司 一种图像处理方法及终端
CN107316281A (zh) * 2017-06-16 2017-11-03 广东欧珀移动通信有限公司 图像处理方法、装置和终端设备
CN107464212A (zh) * 2017-07-28 2017-12-12 广东欧珀移动通信有限公司 美颜方法、电子装置和计算机可读存储介质
CN107644159A (zh) * 2017-09-12 2018-01-30 广东欧珀移动通信有限公司 人脸识别方法及相关产品
CN109325924A (zh) * 2018-09-20 2019-02-12 广州酷狗计算机科技有限公司 图像处理方法、装置、终端及存储介质
CN109345480A (zh) * 2018-09-28 2019-02-15 广州云从人工智能技术有限公司 一种基于图像修复模型的人脸自动去痘方法
CN109741272A (zh) * 2018-12-25 2019-05-10 维沃移动通信有限公司 一种图像处理方法及移动终端
CN110111245A (zh) * 2019-05-13 2019-08-09 Oppo广东移动通信有限公司 图像处理方法、装置、终端及计算机可读存储介质
CN110415237A (zh) * 2019-07-31 2019-11-05 Oppo广东移动通信有限公司 皮肤瑕疵检测方法、检测装置、终端设备及可读存储介质
CN111047619A (zh) * 2018-10-11 2020-04-21 展讯通信(上海)有限公司 人脸图像处理方法及装置、可读存储介质
CN112598591A (zh) * 2020-12-18 2021-04-02 北京达佳互联信息技术有限公司 图像处理方法、装置、电子设备及存储介质
WO2021169910A1 (zh) * 2020-02-24 2021-09-02 北京字节跳动网络技术有限公司 图像处理方法、组件、电子设备及存储介质
US11163978B2 (en) 2017-06-30 2021-11-02 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method and device for face image processing, storage medium, and electronic device
CN113808027A (zh) * 2020-06-16 2021-12-17 北京达佳互联信息技术有限公司 一种人体图像处理方法、装置、电子设备及存储介质

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10362984B2 (en) * 2015-01-27 2019-07-30 Healthy.Io Ltd Measuring and monitoring skin feature colors, form and size
US9965881B2 (en) * 2015-08-28 2018-05-08 Panasonic Intellectual Property Corporation Of America Method for generating image and image generation system
CN110163805B (zh) * 2018-06-05 2022-12-20 腾讯科技(深圳)有限公司 一种图像处理方法、装置和存储介质
US20200020173A1 (en) * 2018-07-16 2020-01-16 Zohirul Sharif Methods and systems for constructing an animated 3d facial model from a 2d facial image
US11308618B2 (en) 2019-04-14 2022-04-19 Holovisions LLC Healthy-Selfie(TM): a portable phone-moving device for telemedicine imaging using a mobile phone
CN110852967B (zh) * 2019-11-06 2023-09-12 成都品果科技有限公司 一种人像照片快速祛瑕疵的方法
US11410387B1 (en) 2020-01-17 2022-08-09 Facebook Technologies, Llc. Systems, methods, and media for generating visualization of physical environment in artificial reality
US10950034B1 (en) 2020-01-27 2021-03-16 Facebook Technologies, Llc Systems, methods, and media for generating visualization of physical environment in artificial reality
US11451758B1 (en) * 2020-02-12 2022-09-20 Meta Platforms Technologies, Llc Systems, methods, and media for colorizing grayscale images
CN111784635B (zh) * 2020-05-29 2023-05-30 北京工商大学 一种基于图像颜色空间的皮肤表面荧光点检测与评估方法
CN112221021B (zh) * 2020-11-02 2023-02-07 中南大学湘雅三医院 一种皮肤科智能激光祛斑控制系统
CN116823809B (zh) * 2023-08-23 2023-11-24 威海迈尼生物科技有限公司 一种微针贴片技术淡斑效果视觉检测方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040037460A1 (en) * 2002-08-22 2004-02-26 Eastman Kodak Company Method for detecting objects in digital images
CN103268475A (zh) * 2013-05-10 2013-08-28 中科创达软件股份有限公司 一种基于人脸、肤色检测的皮肤美容方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8265410B1 (en) * 2009-07-11 2012-09-11 Luxand, Inc. Automatic correction and enhancement of facial images
CN101916370B (zh) 2010-08-31 2012-04-25 上海交通大学 人脸检测中非特征区域图像处理的方法
CN103927718B (zh) * 2014-04-04 2017-02-01 北京金山网络科技有限公司 一种图片处理方法及装置
CN103927719B (zh) 2014-04-04 2017-05-17 北京猎豹网络科技有限公司 图片处理方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040037460A1 (en) * 2002-08-22 2004-02-26 Eastman Kodak Company Method for detecting objects in digital images
CN103268475A (zh) * 2013-05-10 2013-08-28 中科创达软件股份有限公司 一种基于人脸、肤色检测的皮肤美容方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
LI JUN-HUI等: "Subcutaneous pedicle Limberg f lap for repairing skin def ects in the face", 《JOURNAL OF MEDICAL COLLEGES OF PLA》, vol. 20, no. 2, 30 April 2005 (2005-04-30), pages 110 - 113 *
宋明黎等: "基于拉普拉斯微分的脸部细节迁移", 《计算机辅助设计与图形学学报》, vol. 20, no. 1, 15 January 2008 (2008-01-15), pages 50 - 54 *

Cited By (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015149475A1 (zh) * 2014-04-04 2015-10-08 北京金山网络科技有限公司 图片处理方法及装置
US9959603B2 (en) 2014-04-04 2018-05-01 Beijing Cheetah Network Technology Co., Ltd. Method and device for image processing
CN105787888A (zh) * 2014-12-23 2016-07-20 联芯科技有限公司 人脸图像美化方法
WO2016101883A1 (zh) * 2014-12-24 2016-06-30 掌赢信息科技(上海)有限公司 一种即时视频中的人脸美化方法和电子设备
CN104504668A (zh) * 2014-12-30 2015-04-08 宇龙计算机通信科技(深圳)有限公司 含有人脸的图像加锐方法及装置
WO2016141866A1 (zh) * 2015-03-09 2016-09-15 夏普株式会社 图像处理设备和方法
WO2017054605A1 (zh) * 2015-09-29 2017-04-06 腾讯科技(深圳)有限公司 一种图片的处理方法和装置
US10438329B2 (en) 2015-09-29 2019-10-08 Tencent Technology (Shenzhen) Company Limited Image processing method and image processing apparatus
CN105243371A (zh) * 2015-10-23 2016-01-13 厦门美图之家科技有限公司 一种人脸美颜程度的检测方法、系统及拍摄终端
CN105243371B (zh) * 2015-10-23 2018-12-11 厦门美图之家科技有限公司 一种人脸美颜程度的检测方法、系统及拍摄终端
WO2017071219A1 (zh) * 2015-10-26 2017-05-04 腾讯科技(深圳)有限公司 检测皮肤区域的方法和检测皮肤区域的装置
US10783353B2 (en) 2015-10-26 2020-09-22 Tencent Technology (Shenzhen) Company Limited Method for detecting skin region and apparatus for detecting skin region
US10489635B2 (en) 2015-10-26 2019-11-26 Tencent Technology (Shenzhen) Company Limited Method for detecting skin region and apparatus for detecting skin region
CN106210522A (zh) * 2016-07-15 2016-12-07 广东欧珀移动通信有限公司 一种图像处理方法、装置及移动终端
CN106780595A (zh) * 2016-12-15 2017-05-31 歌尔科技有限公司 一种全景图片的识别方法和装置
CN106875332A (zh) * 2017-01-23 2017-06-20 深圳市金立通信设备有限公司 一种图像处理方法及终端
CN107316281A (zh) * 2017-06-16 2017-11-03 广东欧珀移动通信有限公司 图像处理方法、装置和终端设备
US11163978B2 (en) 2017-06-30 2021-11-02 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method and device for face image processing, storage medium, and electronic device
CN107464212B (zh) * 2017-07-28 2021-01-01 Oppo广东移动通信有限公司 美颜方法、电子装置和计算机可读存储介质
CN107464212A (zh) * 2017-07-28 2017-12-12 广东欧珀移动通信有限公司 美颜方法、电子装置和计算机可读存储介质
CN107644159A (zh) * 2017-09-12 2018-01-30 广东欧珀移动通信有限公司 人脸识别方法及相关产品
CN109325924B (zh) * 2018-09-20 2020-12-04 广州酷狗计算机科技有限公司 图像处理方法、装置、终端及存储介质
CN109325924A (zh) * 2018-09-20 2019-02-12 广州酷狗计算机科技有限公司 图像处理方法、装置、终端及存储介质
CN109345480B (zh) * 2018-09-28 2020-11-27 广州云从人工智能技术有限公司 一种基于图像修复模型的人脸自动去痘方法
CN109345480A (zh) * 2018-09-28 2019-02-15 广州云从人工智能技术有限公司 一种基于图像修复模型的人脸自动去痘方法
CN111047619A (zh) * 2018-10-11 2020-04-21 展讯通信(上海)有限公司 人脸图像处理方法及装置、可读存储介质
CN111047619B (zh) * 2018-10-11 2022-09-30 展讯通信(上海)有限公司 人脸图像处理方法及装置、可读存储介质
CN109741272A (zh) * 2018-12-25 2019-05-10 维沃移动通信有限公司 一种图像处理方法及移动终端
CN110111245A (zh) * 2019-05-13 2019-08-09 Oppo广东移动通信有限公司 图像处理方法、装置、终端及计算机可读存储介质
CN110111245B (zh) * 2019-05-13 2023-12-08 Oppo广东移动通信有限公司 图像处理方法、装置、终端及计算机可读存储介质
CN110415237A (zh) * 2019-07-31 2019-11-05 Oppo广东移动通信有限公司 皮肤瑕疵检测方法、检测装置、终端设备及可读存储介质
WO2021169910A1 (zh) * 2020-02-24 2021-09-02 北京字节跳动网络技术有限公司 图像处理方法、组件、电子设备及存储介质
US11880556B2 (en) 2020-02-24 2024-01-23 Douyin Vision Co., Ltd. Image processing for implementing multiple graph repairing functions
CN113808027A (zh) * 2020-06-16 2021-12-17 北京达佳互联信息技术有限公司 一种人体图像处理方法、装置、电子设备及存储介质
CN113808027B (zh) * 2020-06-16 2023-10-17 北京达佳互联信息技术有限公司 一种人体图像处理方法、装置、电子设备及存储介质
CN112598591A (zh) * 2020-12-18 2021-04-02 北京达佳互联信息技术有限公司 图像处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
WO2015149475A1 (zh) 2015-10-08
US20160163028A1 (en) 2016-06-09
US9959603B2 (en) 2018-05-01
CN103927719B (zh) 2017-05-17

Similar Documents

Publication Publication Date Title
CN103927719A (zh) 图片处理方法及装置
CN103927718A (zh) 一种图片处理方法及装置
CN109344724B (zh) 一种证件照自动背景替换方法、系统及服务器
US10372226B2 (en) Visual language for human computer interfaces
CN108090511B (zh) 图像分类方法、装置、电子设备及可读存储介质
Ajmal et al. A comparison of RGB and HSV colour spaces for visual attention models
CN104486552A (zh) 一种获取图像的方法及电子设备
EP3772038A1 (en) Augmented reality display method of simulated lip makeup
EP2709063A1 (en) Image processing device, computer-readable recording medium, and image processing method
CN111275645A (zh) 基于人工智能的图像去雾方法、装置、设备及存储介质
CN112396050B (zh) 图像的处理方法、设备以及存储介质
CN108446675A (zh) 面部图像识别方法、装置电子设备及计算机可读介质
CN111222433A (zh) 自动人脸稽核方法、系统、设备及可读存储介质
CN106846271A (zh) 一种去除身份证照片中网纹的方法
CN110909568A (zh) 用于面部识别的图像检测方法、装置、电子设备及介质
CN113658141A (zh) 透明包装袋封口识别方法、装置、存储介质及电子设备
CN113052923A (zh) 色调映射方法、装置、电子设备和存储介质
CN102855025B (zh) 一种基于视觉注意模型的光学多点触控触点检测方法
US10909351B2 (en) Method of improving image analysis
US20130141458A1 (en) Image processing device and method
CN112381737A (zh) 图像处理方法、装置、电子设备及存储介质
US9183454B1 (en) Automated technique for generating a path file of identified and extracted image features for image manipulation
CN113344838A (zh) 图像融合方法、装置、电子设备及可读存储介质
CN113487697A (zh) 简笔画生成方法、装置、电子设备及存储介质
CN112511890A (zh) 视频图像处理方法、装置及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 100041 Beijing, Shijingshan District Xing Xing street, building 30, No. 3, building 2, A-0070

Applicant after: BEIJING LIEBAO NETWORK TECHNOLOGY CO., LTD.

Address before: 100041 room 1592A, building, No. 3 West Road, Badachu hi tech park, Beijing, Shijingshan District, China

Applicant before: Beijing Kingsoft Internet Science and Technology Co., Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant