CN117152099A - 皮肤毛孔或黑头检测方法、系统及计算机可读存储介质 - Google Patents
皮肤毛孔或黑头检测方法、系统及计算机可读存储介质 Download PDFInfo
- Publication number
- CN117152099A CN117152099A CN202311142250.4A CN202311142250A CN117152099A CN 117152099 A CN117152099 A CN 117152099A CN 202311142250 A CN202311142250 A CN 202311142250A CN 117152099 A CN117152099 A CN 117152099A
- Authority
- CN
- China
- Prior art keywords
- skin
- image
- blackhead
- pore
- filtering
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000011148 porous material Substances 0.000 title claims abstract description 202
- 206010000496 acne Diseases 0.000 title claims abstract description 177
- 238000001514 detection method Methods 0.000 title claims abstract description 106
- 238000001914 filtration Methods 0.000 claims abstract description 95
- 238000012545 processing Methods 0.000 claims abstract description 30
- 238000010586 diagram Methods 0.000 claims description 80
- 238000000034 method Methods 0.000 claims description 63
- 238000007405 data analysis Methods 0.000 claims description 14
- 238000007619 statistical method Methods 0.000 claims description 14
- 230000008569 process Effects 0.000 claims description 12
- 238000013135 deep learning Methods 0.000 claims description 10
- 238000004458 analytical method Methods 0.000 claims description 9
- 238000004590 computer program Methods 0.000 claims description 8
- 210000004209 hair Anatomy 0.000 claims description 8
- 230000000694 effects Effects 0.000 abstract description 20
- 230000006870 function Effects 0.000 description 18
- 230000011218 segmentation Effects 0.000 description 11
- 238000000605 extraction Methods 0.000 description 10
- 239000003086 colorant Substances 0.000 description 8
- 238000003708 edge detection Methods 0.000 description 8
- 239000011159 matrix material Substances 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 206010013786 Dry skin Diseases 0.000 description 3
- 210000001061 forehead Anatomy 0.000 description 3
- 239000004519 grease Substances 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 230000004075 alteration Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000036548 skin texture Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 208000020154 Acnes Diseases 0.000 description 1
- 229920000832 Cutin Polymers 0.000 description 1
- 208000005189 Embolism Diseases 0.000 description 1
- 208000007256 Nevus Diseases 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 210000001508 eye Anatomy 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 210000000214 mouth Anatomy 0.000 description 1
- 239000000049 pigment Substances 0.000 description 1
- 210000001732 sebaceous gland Anatomy 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Medical Informatics (AREA)
- Quality & Reliability (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本申请公开了一种皮肤毛孔或黑头检测方法、系统及计算机可读存储介质,本申请涉及图像处理和皮肤检测技术领域,其中,该皮肤毛孔或黑头检测方法包括:获取人脸图片,分割出皮肤区域,得到对应的皮肤图片;选取并模糊处理皮肤图片对应的B通道灰度图,得到模糊图,将B通道灰度图和模糊图相减,得到差值图;过滤差值图,得到二值图,二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图;对二值图进行边缘滤波检测,该皮肤毛孔或黑头检测方法能够很好地检测出毛孔黑头闭合性的边缘,检测效果较好,精准度较高。
Description
技术领域
本申请涉及图像处理和皮肤检测技术领域,尤其涉及皮肤毛孔或黑头检测方法、系统及计算机可读存储介质。
背景技术
人体皮肤表层因年龄、病症以及外界环境等因素的影响,容易导致皮嵴(Peaks)和皮沟(Valleys)的形成且呈现出不同深度和不同走向,从而形成了多种多样的皮肤纹理。皮肤粗糙程度(Skin Roughness)作为一项重要的皮肤纹理分析手段,可以在一定程度上反映出人体机能的健康状况。
现有的皮肤上的毛孔或黑头检测,属于皮肤粗糙度检测的一种。毛孔是指脱除毛根后皮或革的粒面上露出来的孔状结构。黑头其实就是角质栓塞的一种情况,皮脂腺分泌过剩的油脂混杂着老废角质和粉尘等堵塞在毛孔里,油脂硬化就变成硬化的油脂阻塞物,暴露在空气的表面氧化后呈现黑色,所以俗称它为黑头。
在图像处理技术领域中,毛孔或黑头检测主要是检测皮肤中的坑洼、小凹陷或小孔洞等。常见的毛孔或黑头检测一般的会采用边缘滤波进行检测,如高斯滤波、sobel算子滤波和canny算法滤波等,但它们的本质是检测边缘,而非坑洼孔洞,所以在皮肤毛孔或黑头检测的时候,无法严格地检测出毛孔或黑头,并且还会存在烂边的情况,即可能无法针对毛孔或黑头检测出它们闭合的边缘。所以,直接用边缘滤波检测毛孔或黑头的检测效果较差,精准度不高。
发明内容
本申请实施例提供一种皮肤毛孔或黑头检测方法、系统及计算机可读存储介质,以解决或部分解决边缘滤波检测无法严格地检测出毛孔或黑头,导致检测效果较差和精准度不高的问题。
本申请目的一是提供一种皮肤毛孔或黑头检测方法。
一种皮肤毛孔或黑头检测方法,包括:
获取人脸图片,分割出皮肤区域,得到对应的皮肤图片;
选取并模糊处理皮肤图片对应的B通道灰度图,得到模糊图,将B通道灰度图和模糊图相减,得到差值图;
过滤差值图,得到二值图,二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图;
对二值图进行边缘滤波检测。
本申请在一较佳示例中可以进一步配置为:在过滤差值图,得到二值图之后,还包括:
基于二值图,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
本申请在一较佳示例中可以进一步配置为:基于二值图,生成对应的圈点图,包括:
对二值图进行轮廓提取,轮廓包括毛孔轮廓、黑头轮廓或毛黑头轮廓;
使用人脸关键点对二值图进行区域定位,定位出过滤区域;
若提取的轮廓位于过滤区域中,则将轮廓进行过滤去除;
和/或,使用人脸关键点对二值图进行区域圈定,圈定出有效区域;
若提取的轮廓位于有效区域外,则将轮廓进行过滤去除;
基于过滤后的轮廓,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
本申请在一较佳示例中可以进一步配置为:过滤包括带通滤波过滤,过滤差值图,得到二值图,包括:
若差值图上的像素值小于第一阈值,则将小于第一阈值的像素值设置为零;
若差值图上的像素值大于第二阈值,则将大于第二阈值的像素值设置为零,其中,第二阈值大于第一阈值;
在差值图进行第一阈值化处理和第二阈值化处理之后,对差值图进行逆向二值化处理,即,将大于零的像素值设置为零,将等于零的像素值设置为255;
基于逆向二值化处理后的差值图,生成对应的二值图。
本申请在一较佳示例中可以进一步配置为:在将轮廓进行过滤去除之后,还包括:
对过滤后的轮廓进行数据分析,数据分析包括数量统计分析、面积统计分析或面积占比分析。
本申请在一较佳示例中可以进一步配置为:基于过滤后的轮廓,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图,包括:
将过滤后的轮廓标记于人脸图片上,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
本申请在一较佳示例中可以进一步配置为:获取人脸图片,分割出皮肤区域,得到对应的皮肤图片,包括:
获取人脸图片,通过颜色匹配算法分割出皮肤区域,得到对应的皮肤图片;
和/或,获取人脸图片,通过深度学习算法分割出皮肤区域,得到对应的皮肤图片。
本申请在一较佳示例中可以进一步配置为:该皮肤毛孔或黑头检测方法还包括:
选取并模糊处理皮肤图片对应的G通道灰度图,得到模糊图,将G通道灰度图和模糊图相减,得到差值图;
和/或,选取并模糊处理皮肤图片对应的R通道灰度图,得到模糊图,将R通道灰度图和模糊图相减,得到差值图。
本申请目的二是提供一种皮肤毛孔或黑头检测系统。
本申请的上述申请目的二是通过以下技术方案得以实现的:
一种皮肤毛孔或黑头检测系统,包括:
皮肤图片获取模块,用于获取人脸图片,分割出皮肤区域,得到对应的皮肤图片;
差值图获取模块,用于选取并模糊处理皮肤图片对应的B通道灰度图,得到模糊图,将B通道灰度图和模糊图相减,得到差值图;
二值图获取模块,用于过滤差值图,得到二值图,二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图;
皮肤检测模块,用于对二值图进行边缘滤波检测。
本申请目的三是提供一种电子设备。
一种电子设备,包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行计算机程序时实现如上述皮肤毛孔或黑头检测方法。
本申请目的四是提供一种计算机可读存储介质。
一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现上述皮肤毛孔或黑头检测方法。
综上,本申请包括以下有益技术效果:
上述皮肤毛孔或黑头检测方法,通过获取人脸图片,分割出皮肤区域,得到对应的皮肤图片;选取并模糊处理皮肤图片对应的B通道灰度图,得到模糊图,将B通道灰度图和模糊图相减,得到差值图;过滤差值图,得到二值图,二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图;对二值图再进行边缘滤波检测,能够很好地检测出毛孔黑头闭合性的边缘,检测效果较好,精准度较高。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1绘示本申请一实施例中皮肤毛孔或黑头检测方法的应用环境图;
图2绘示本申请一实施例中皮肤毛孔或黑头检测方法的流程图;
图3绘示本申请一实施例中皮肤毛孔或黑头检测方法的人脸图片;
图4绘示本申请一实施例中皮肤毛孔或黑头检测方法的皮肤图片;
图5绘示本申请一实施例中皮肤毛孔或黑头检测方法的B通道灰度图;
图6绘示本申请一实施例中皮肤毛孔或黑头检测方法的模糊图;
图7绘示本申请一实施例中皮肤毛孔或黑头检测方法的差值图;
图8绘示本申请一实施例中皮肤毛孔或黑头检测方法的二值图;
图9绘示本申请一实施例中皮肤毛孔或黑头检测方法的圈点图;
图10绘示本申请一实施例中皮肤毛孔或黑头检测方法的分区域轮廓过滤流程图;
图11绘示本申请一实施例中皮肤毛孔或黑头检测方法的带通滤波阈值化过滤流程图;
图12绘示本申请一实施例中皮肤毛孔或黑头检测系统的模块图;
图13绘示本申请一实施例中电子设备的UI界面的示意图。
具体实施方式
为使本申请的上述目的、特征和优点能够更加明显易懂,下面结合附图对本申请的具体实施方式做详细的说明。在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其他方式来实施,本领域技术人员可以在不违背本申请内涵的情况下做类似改进,因此本申请不受下面公开的具体实施例的限制。
本申请以下实施例中所使用的术语只是为了描述特定实施例的目的,而并非旨在作为对本申请的限制。如在本申请的说明书和所附权利要求书中所使用的那样,单数表达形式“一个”“一种”“所述”“上述”“该”和“这一”旨在也包括复数表达形式,除非其上下文中明确地有相反指示。还应当理解,本申请中使用的术语“和/或”是指并包含一个或多个所列出项目的任何或所有可能组合。
本发明实施例提供的皮肤毛孔或黑头检测方法,可应用在如图1的应用环境中,该皮肤毛孔或黑头检测方法应用在皮肤毛孔或黑头检测系统中,该皮肤毛孔或黑头检测系统包括客户端和服务器,其中,客户端通过网络与服务器进行通信。客户端又称为用户端,是指与服务器相对应,为客户端提供本地服务的程序。进一步地,客户端为计算机端程序、智能设备的APP程序或嵌入其他APP的第三方小程序。该客户端可安装在但不限于各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备等设备上。服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
下面结合说明书附图对本申请实施例作进一步详细描述。另外,本说明书附图中采用的人脸图片和服务器生成的图片,主要与皮肤毛孔检测有关,本实施例也主要从皮肤毛孔检测进行详细描述,但本方法对毛孔、黑头或毛孔黑头检测均适用,下文则不再过多单独描述皮肤黑头检测。
实施例1
本申请实施例提供一种皮肤毛孔或黑头检测方法,如图2所示,该方法应用在图1中的服务器为例进行说明,具体包括如下步骤:
S10.获取人脸图片,分割出皮肤区域,得到对应的皮肤图片。
具体地,本方法通过对人脸进行拍照,并将人脸图片传送至服务器,从而使服务器获取该人脸图片。如图3所示,图3为服务器获取的人脸图片,在人脸图片上具有若干毛孔。在获取人脸图片后,服务器分割出皮肤区域,并将非皮肤区域(如眉毛、眼睛、头发、嘴巴和耳朵等)去除,得到皮肤区域对应的皮肤图片。如图4所示,图4是分割后的皮肤区域,较好地分割出了人脸皮肤区域。
另外,本方法可以通过分割算法进行分割皮肤区域,典型的分割算法有基于颜色匹配的算法和基于深度学习的方法。
1)基于颜色匹配的算法。将人脸图片从RGB颜色空间转换到HSV颜色空间。在HSV颜色空间中设定皮肤的颜色区间,如:lower=[0,20,70],higher=[20,255,255],并使用opencv软件的inRange方法去做区间匹配。其中,RGB颜色空间以R(Red:红)、G(Green:绿)、B(Blue:蓝)三种基本色为基础,进行不同程度的叠加,产生丰富而广泛的颜色,俗称三基色模式。HSV(Hue,Saturation,Value)颜色空间是根据颜色的直观特性由A.R.Smith在1978年创建的一种颜色空间,也称六角锥体模型(Hexcone Model)。这个模型中颜色的参数分别是色调(H)、饱和度(S)和明度(V)。
2)基于深度学习的实例分割法。通过特定训练皮肤的分割模型,然后对人脸图片进行皮肤区域的分割,模型的网络结构可以采用UNet或者YOLO等实例分割模型。
S20.选取并模糊处理皮肤图片对应的B通道灰度图,得到模糊图,将B通道灰度图和模糊图相减,得到差值图。
具体地,如图5和图6所示。图5是皮肤图片对应的B通道灰度图,图6是经过模糊处理后的模糊图(B通道平滑后图)。本方法可通过模糊算法对B通道灰度图做模糊处理。模糊算法可以是中值模糊,也可以是高斯模糊;可以设置模糊度,模糊度越大,得出的图片越模糊,也越平滑;模糊度越大,后续检测出的毛孔或黑头也越多,反之则少。在实际情况下,可以根据实际图片进行调节,甚至动态调节,得到模糊图。调节可通过调节滤波核或卷积核的大小来达到控制模糊度的程度。核越大,越模糊。因为要取更多周边的像素去做平均。选取B通道灰度图片(如图5所示)做后续处理,是因为在多次实验后,发现B通道效果最佳,毛孔(或黑头)与普通皮肤之间的差异性会更大,更易于皮肤检测。当然,其他灰度图也可以做。
其中,中值模糊原型可以采用mediaBlur(src,ksize,dst=None)函数,参数ksize为卷积核的大小。若填入dst,则将图像写入到dst矩阵。medianBlur函数,输入的ksize是一个int型整数,不同于blur中的size。它的卷积核是个ksize*ksize的矩阵。
图像基本是二维的,所以本实施例需要二维的正态分布对图像进行处理。正态分布的密度函数也称“高斯函数”(Gaussian function)。二维高斯函数的公式为:其中,(x,y)为二维坐标点。基于二维高斯函数,构建对应的权重矩阵来进行滤波,并基于该权重矩阵计算高斯模糊度。
另外,差值图又称差别图像。多波段图像不同波段之间和两个时相遥感图像之间减法或加权减法运算生成的图像。前者可检测不同波段间的图像值的差别,根据波段间差值的不同,多用于区分不同的地物;后者主要用于变化检测,即用差值法提取不同时相图像中地物随时间的变化信息。本方法中,差值图本质就是两个二维矩阵相同坐标的数字做差。Python一般使用numpy,直接A-B即可,其中A是图片1(B通道灰度图)的矩阵,B是图片2(模糊图)的矩阵。在MATLAB中,两个图像之间的减法运算用imsubstract和imabsdiff函数就可以完成,其调用格式可以为:Z=imsubstract(a,b)%差值结果小于0的赋值为0;Z=imabsdiff(a,b)%差值结果取绝对值。在opencv中,则可以使用cv2.subtract(A,B)函数运算。
因此,本方法选取并模糊处理皮肤图片对应的B通道灰度图,得到模糊图,将B通道灰度图和模糊图相减,得到差值图(如图7所示的毛孔差值图)。这个时候,本实施例可以看到差值图体现了灰度图和模糊图之间的差异,但并不能较好观测出毛孔效果,所以,需要进一步处理。
S30.过滤差值图,得到二值图,二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图。
具体地,如图7和图8所示,图7的差值图并不能较好观测出毛孔,而图8的毛孔二值图则可以较为清楚地观测出毛孔,且处理效果较好。本实施例根据毛孔和黑头的特性,会发现它们在脸部的差值(差值可以是相减所得到的像素差值)属于中间区域,即在图7中,如果值太小的像素,代表的是皮肤微小的色差,不会是毛孔,如果差值太大的像素,更多又是颜色差异很深的,比如黑痣,深颜色的斑、痘等,所以,差值处于中间区域的,就是毛孔和黑头(黑头的差异还会比毛孔大一些)。因此,本实施例对差值进行带通滤波过滤,从而得到二值图,二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图。
另外,二值图像(Binary Image)是指将图像上的每一个像素只有两种可能的取值或灰度等级状态,人们经常用黑白、B&W、单色图像表示二值图像。二值图像的灰度等级只有两种,也就是说,图像中的任何像素点的灰度值均为0或者255,分别代表黑色和白色。
带通滤波过滤(带通滤波阈值化过滤)的具体方式如下:
1)过滤差异过小的区域。对图7所示的差值图进行第一步阈值化,小于某个阈值(如数值7)的像素置为0;其他像素保持不变。
2)过滤差异过大的区域。对1)中的结果进一步阈值化,大于某个值(如数字170)的置为0;此时,只有[7,170]之间的像素值维持原样,两端的像素都归零了。另外,带通滤波参数可以参照实际情况进行调节。
3)逆向二值化。对2)处理的图片进行逆向二值化,即大于0的都置为0,而原来为0的都置为255;最终得到图8所示的毛孔二值图。
本方法通过带通滤波过滤差值图,得到对应的二值图。如图8所示,图8能够很形象地表达出毛孔和黑头的分布,基本维持了其原有特性,不容易导致边缘检测出现烂边,并检测不准的情况。
S40.对二值图进行边缘滤波检测。
其中,边缘检测(edge detection)是利用计算机视觉技术处理图像的一种具体方法,其原理是标识数字图像中亮度变化明显的像素点。图像中像素的显著变化通常反映了图像的重要特征,如检测目标的形态信息、纹理信息等,因此边缘检测被广泛应用于计算机视觉和图像处理方面的研究中,尤其是对检测目标特征提取的研究。通过边缘检测算法处理图像,能够大幅减少图像的数据量,剔除认为与研究不相关的信息,保留图像重要的结构属性。
在实际情况下,很多边缘滤波算法,例如sobel、canny、高斯等算法,这类边缘算法都无法很好地准确定位出毛孔,核心原因是它们是直接的边缘检测,没有考虑毛孔黑头这种闭合性的边缘,毛孔黑头其实更像一座座山,或者是一个个坑,而正是这种特点,运用等高线的原理去检测才更加适合。因为等高线可以把毛孔黑头的坑圈出一个闭合性的线;本实施例方法和传统边缘滤波最大的区别,就是借鉴了等高线原理,使得本实施例检测毛孔黑头不会被各种色素差异的边缘带偏,不会导致烂边等,而是能够很好地检测出毛孔黑头闭合性的边缘,检测效果较好,精准度也较高。
本方法在步骤S10至S30的前置操作下,对得到二值图再进行边缘滤波检测。这样,就能够很好地检测出毛孔黑头闭合性的边缘,检测效果较好,精准度也较高。
上述皮肤毛孔或黑头检测方法,通过获取人脸图片,分割出皮肤区域,得到对应的皮肤图片。选取并模糊处理皮肤图片对应的B通道灰度图,得到模糊图,将B通道灰度图和模糊图相减,得到差值图。过滤差值图,得到二值图,二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图。对二值图进行边缘滤波检测,以解决或部分解决边缘滤波检测无法严格地检测出毛孔或黑头,导致检测效果较差和精准度不高的问题。
实施例2
在一些实施例中,在步骤S30之后,即在过滤差值图,得到二值图之后,具体还包括如下步骤:
S50.基于二值图,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
其中,圈定图如图9所示。在图9中,可以看到毛孔圈点和毛孔所在位置严格匹配。这样,毛孔在人脸上的分布情况一目了然,且提取的毛孔轮廓也不出现跑偏烂边的情况。
具体地,本方法对二值图进行分区域过滤,并基于人脸图片和二值图的,生成对应的圈点图。
分区域轮廓过滤(以皮肤毛孔检测为例)的具体做法可以包括:
1)对图8所示的二值图使用opencv软件中的findContours进行轮廓提取,因为图8中的黑色点块,都是闭合性的点块,所以提取轮廓不会跑偏,不烂边,所以轮廓提取就是黑点的边缘;另外,本方案基于Opencv库运行,也可以其他图像处理库,只要有相关的同样功能的接口即可。例如PIL(Python Image Library)库。
2)使用人脸关键点进行区域定位,人脸关键点进行区域定位,定位出嘴边区域作为胡子所在区域,如果轮廓落入了嘴边,则进行过滤,这样就不会把胡子圈进去;为了更加保险起见,可以圈定黑头的有效区域,例如T区(额头+鼻柱)、左脸颊、右脸颊和下巴等。因为,本实施例需要排除胡渣等(特别是男性用户的孔洞,他们不是毛孔,但因为有点状色差,也可能会在圈点图中体现出来,所以需要排除掉他们)干扰特征,进而保证毛孔检测的准确性。
3)使用过滤后的轮廓的数量作为毛孔的数量,轮廓的面积作为毛孔的面积,进而计算毛孔面积占比。
4)绘制轮廓(可以直接绘制轮廓,也可以根据轮廓的中心,然后绘制美化后的菱形轮廓,这个按产品需求实施即可),最后得到如图9所示的毛孔圈点图,可以看到毛孔圈点和毛孔所在位置严格匹配,并且只检测T区、左脸颊、右脸颊和下巴区域,其他区域被剔除过滤了。
步骤S50的作用在于,生成的圈点图能够较为直观地展现毛孔或黑头的脸部分布情况。
实施例3
参照图10,在一些实施例中,步骤S50,即基于二值图,生成对应的圈点图,具体包括图下步骤:
S51.对二值图进行轮廓提取,轮廓包括毛孔轮廓、黑头轮廓或毛黑头轮廓。
S52.使用人脸关键点对二值图进行区域定位,定位出过滤区域。
S53.若提取的轮廓位于过滤区域中,则将轮廓进行过滤去除。
S54.和/或,使用人脸关键点对二值图进行区域圈定,圈定出有效区域。
S55.若提取的轮廓位于有效区域外,则将轮廓进行过滤去除。
S56.基于过滤后的轮廓,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
其中,过滤区域可以包括但不限于嘴边区域(胡子所在区域)等。有限区域可以包括但不限于T区(额头+鼻柱)、左脸颊、右脸颊和下巴区域等。轮廓包括毛孔轮廓、黑头轮廓或毛黑头轮廓。轮廓提取可以为毛孔或黑头的黑色边缘的提取。另外,本实施例将人脸分成若干区域,每个区域对应一个关键点,由每个关键点圈起来的合围区域则为整个人脸区域,人脸图片、皮肤图片、二值图和灰度图等均存在若干人脸关键点。这样,就可以使用人脸关键点对二值图进行区域定位,定位出过滤区域;使用人脸关键点对二值图进行区域圈定,圈定出有效区域。
本方法对二值图进行轮廓提取,轮廓包括毛孔轮廓、黑头轮廓或毛黑头轮廓。使用人脸关键点对二值图进行区域定位,定位出过滤区域。若提取的轮廓位于过滤区域中,则将轮廓进行过滤去除。为了皮肤毛孔或黑头检测效果得到更好地保证,也可以同时使用人脸关键点对二值图进行区域圈定,圈定出有效区域。若提取的轮廓位于有效区域中,则对轮廓进行保留;若提取的轮廓位于有效区域外,则将轮廓进行过滤去除。基于过滤后的轮廓和人脸图片,在该人脸图片上进行轮廓标记,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
具体地,分区域轮廓过滤(以皮肤毛孔检测为例)的具体做法可以包括:
1)对图8所示的二值图使用opencv软件中的findContours进行轮廓提取,因为图8中的黑色点块,都是闭合性的点块,所以提取轮廓不会跑偏,不烂边,所以轮廓提取就是黑点的边缘;另外,本方案基于Opencv库运行,也可以其他图像处理库,只要有相关的同样功能的接口即可。例如PIL(Python Image Library)库。
2)使用人脸关键点进行区域定位,人脸关键点进行区域定位,定位出嘴边区域作为胡子所在区域,如果轮廓落入了嘴边,则进行过滤,这样就不会把胡子圈进去;为了更加保险起见,可以圈定黑头的有效区域,例如T区(额头+鼻柱)、左脸颊、右脸颊和下巴等。因为,本实施例需要排除胡渣等(特别是男性用户的孔洞,他们不是毛孔,但因为有点状色差,所以也可能会在圈点图中体现出来,所以需要排除掉他们)干扰特征,进而保证毛孔检测的准确性。
3)绘制轮廓(可以直接绘制轮廓,也可以根据轮廓的中心,然后绘制美化后的菱形轮廓,这个按产品需求实施即可),最后得到如图9所示的毛孔圈点图,可以看到毛孔圈点和毛孔所在位置严格匹配,并且只检测T区、左脸颊、右脸颊和下巴区域,其他区域被剔除过滤了。
步骤S51至S56的作用在于,介绍分区域过滤以及最终生成圈点图的方法步骤,生成的圈点图能够较为直观地展现毛孔或黑头的脸部分布情况。
实施例4
参照图11,在一些实施例中,过滤包括带通滤波过滤,步骤S30中,即过滤差值图,得到二值图中,具体包括如下步骤:
S31.若差值图上的像素值小于第一阈值,则将小于第一阈值的像素值设置为零。
S32.若差值图上的像素值大于第二阈值,则将大于第二阈值的像素值设置为零,其中,第二阈值大于第一阈值。
S33.在差值图进行第一阈值化处理和第二阈值化处理之后,对差值图进行逆向二值化处理,即,将大于零的像素值设置为零,将等于零的像素值设置为255。
S34.基于逆向二值化处理后的差值图,生成对应的二值图。
其中,第一阈值和第二阈值均可通过实际情况进行调节。
具体地,本方法通过带通滤波器对差值图进行过滤,若差值图上的像素值小于(也可以是小于等于)第一阈值,则将小于(也可以是小于等于)第一阈值的像素值设置为零;若差值图上的像素值大于(也可以是大于等于)第二阈值,则将大于(也可以是大于等于)第二阈值的像素值设置为零,其中,第二阈值大于第一阈值。这样,就只有第一阈值与第二阈值之间的像素值维持原样,而两端的像素值都进行了归零处理。在归零处理后,再进行逆向二值化处理,使第一阈值与第二阈值之间的像素值归零,而两端的像素值变成了225。这样,可以使最终得到的二值图更能够清楚表现出毛孔或黑头的分布,且基本维持了其原有特性,不容易导致后续的边缘检测出现烂边,检测不准的情况。
带通滤波过滤(带通滤波阈值化过滤)的具体方式如下示例:
1)过滤差异过小的区域。对图7所示的差值图进行第一步阈值化,小于某个阈值(如数值7)的像素置为0;其他像素保持不变。
2)过滤差异过大的区域。对1)中的结果进一步阈值化,大于某个值(如数字170)的置为0;此时,只有[7,170]之间的像素值维持原样,两端的像素都归零了。另外,带通滤波参数7和170可以参照实际情况进行调节。
3)逆向二值化。对2)处理的图片进行逆向二值化,即大于0的都置为0,而原来为0的都置为255;最终得到图8所示的毛孔二值图。
步骤S31至S34的作用在于,提供一种差值图带通滤波阈值化处理方法或二值图生成方法。
实施例5
在一些实施例中,在步骤S53或步骤S56之后,即将轮廓进行过滤去除之后,具体还包括如下步骤:
S57.对过滤后的轮廓进行数据分析,数据分析包括数量统计分析、面积统计分析或面积占比分析。
其中,数量统计分析可以对过滤后的毛孔或黑头数量的统计;面积统计分析可以为对过滤后的毛孔或黑头面积的统计;面积占比分析可以为对过滤后的毛孔或黑头面积占总皮肤面积的统计分析。例如:本方法使用带通滤波阈值化过滤后的毛孔轮廓的数量作为毛孔的数量,毛孔轮廓的面积作为毛孔的面积,进而计算毛孔面积占比。
具体地,该方法对过滤后的轮廓进行数据分析,数据分析包括数量统计分析、面积统计分析或面积占比分析,获取数据分析结果。该数据分析结果可以和圈点图一起展示于终端界面上,供用户参看。同时,本方法也可根据该数据分析结果,给用户一些适应性的皮肤建议
步骤S57的作用在于,对皮肤毛孔或黑头进行量化统计分析。
实施例6
在一些实施例中,在步骤S56中,即基于过滤后的轮廓,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图,具体包括如下步骤:
S561.将过滤后的轮廓标记于人脸图片上,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
具体地,如图9所示,本方法将带通滤波阈值化过滤后的轮廓标记于人脸图片上,生成对应的圈点图。圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
步骤S561的作用在于,使圈点图能够较为直观地在人脸图片上展现毛孔或黑头的脸部分布情况。圈点图可以为本方法在客户端最终展现给用户的检测结果图片。
实施例7
在一些实施例中,在步骤S10中,即获取人脸图片,分割出皮肤区域,得到对应的皮肤图片中,具体包括如下步骤:
S11.获取人脸图片,通过颜色匹配算法分割出皮肤区域,得到对应的皮肤图片。
S12.获取人脸图片,通过深度学习算法分割出皮肤区域,得到对应的皮肤图片。
具体地,本方法可以通过分割算法进行分割皮肤区域,典型的分割算法有基于颜色匹配的算法和基于深度学习的方法。
1)基于颜色匹配的算法。将人脸图片从RGB颜色空间转换到HSV颜色空间。在HSV颜色空间中设定皮肤的颜色区间,如:lower=[0,20,70],higher=[20,255,255],并使用opencv软件的inRange方法去做区间匹配。其中,RGB颜色空间以R(Red:红)、G(Green:绿)、B(Blue:蓝)三种基本色为基础,进行不同程度的叠加,产生丰富而广泛的颜色,俗称三基色模式。HSV(Hue,Saturation,Value)颜色空间是根据颜色的直观特性由A.R.Smith在1978年创建的一种颜色空间,也称六角锥体模型(Hexcone Model)。这个模型中颜色的参数分别是色调(H)、饱和度(S)和明度(V)。
2)基于深度学习的实例分割法。通过特定训练皮肤的分割模型,然后对人脸图片进行皮肤区域的分割,模型的网络结构可以采用UNet或者YOLO等实例分割模型。
步骤S11至S12的作用在于,本方法可以通过基于颜色匹配的算法和基于深度学习的方法对人脸图片进行分割。
实施例8
在一些实施例中,皮肤毛孔或黑头检测系统,还包括如下步骤:
S201.选取并模糊处理皮肤图片对应的G通道灰度图,得到模糊图,将G通道灰度图和模糊图相减,得到差值图。
S202.选取并模糊处理皮肤图片对应的R通道灰度图,得到模糊图,将R通道灰度图和模糊图相减,得到差值图。
具体地,本方法选取并模糊处理皮肤图片对应的G通道灰度图,得到模糊图,将G通道灰度图和模糊图相减,得到差值图;选取并模糊处理皮肤图片对应的R通道灰度图,得到模糊图,将R通道灰度图和模糊图相减,得到差值图。对G通道灰度图或R通道灰度图与B通道灰度图处理方式一样,最终的皮肤检测效果没有B通道灰度图皮肤检测效果好,比直接进行边缘检测效果较为明显。
步骤S201至S202的作用在于,本方法还可以选取G通道灰度图或R通道灰度图并进行模糊处理。
上述皮肤毛孔或黑头检测方法,通过获取人脸图片,分割出皮肤区域,得到对应的皮肤图片。选取并模糊处理皮肤图片对应的B通道灰度图,得到模糊图,将B通道灰度图和模糊图相减,得到差值图。过滤差值图,得到二值图,二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图。对二值图进行边缘滤波检测,以解决或部分解决边缘滤波检测无法严格地检测出毛孔或黑头,导致检测效果较差和精准度不高的问题。
本申请另一实施例,公开了一种皮肤毛孔或黑头检测系统。
参照图12,皮肤毛孔或黑头检测系统包括:
皮肤图片获取模块10,用于获取人脸图片,分割出皮肤区域,得到对应的皮肤图片。
差值图获取模块20,用于选取并模糊处理皮肤图片对应的B通道灰度图,得到模糊图,将B通道灰度图和模糊图相减,得到差值图。
二值图获取模块30,用于过滤差值图,得到二值图,二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图。
皮肤检测模块40,用于对二值图进行边缘滤波检测。
进一步地,该皮肤毛孔或黑头检测系统还包括:
圈点图生成模块,用于基于二值图,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
进一步地,该皮肤毛孔或黑头检测系统还包括:
轮廓提取模块,用于对二值图进行轮廓提取,轮廓包括毛孔轮廓、黑头轮廓或毛黑头轮廓。
过滤区域定位模块,用于使用人脸关键点对二值图进行区域定位,定位出过滤区域。
第一过滤去除模块,用于若提取的轮廓位于过滤区域中,则将轮廓进行过滤去除。
有效区域圈定模块,用于使用人脸关键点对二值图进行区域圈定,圈定出有效区域。
第二过滤去除模块,若提取的轮廓位于有效区域外,则将轮廓进行过滤去除。
圈点图生成子模块,用于基于过滤后的轮廓,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
进一步地,该皮肤毛孔或黑头检测系统还包括
第一阈值处理模块,用于若差值图上的像素值小于第一阈值,则将小于第一阈值的像素值设置为零。
第二阈值处理模块,若差值图上的像素值大于第二阈值,则将大于第二阈值的像素值设置为零,其中,第二阈值大于第一阈值。
逆向二值化处理模块,用于在差值图进行第一阈值化处理和第二阈值化处理之后,对差值图进行逆向二值化处理,即,将大于零的像素值设置为零,将等于零的像素值设置为255。
二值图生成子模块,用于基于逆向二值化处理后的差值图,生成对应的二值图。
进一步地,该皮肤毛孔或黑头检测系统还包括:
数据分析模块,用于对过滤后的轮廓进行数据分析,数据分析包括数量统计分析、面积统计分析或面积占比分析。
进一步地,该皮肤毛孔或黑头检测系统还包括:
标记生成模块,用于将过滤后的轮廓标记于人脸图片上,生成对应的圈点图,圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
进一步地,该皮肤毛孔或黑头检测系统还包括:
颜色匹配算法分割模块,用于获取人脸图片,通过颜色匹配算法分割出皮肤区域,得到对应的皮肤图片。
深度学习算法分割模块,用于获取人脸图片,通过深度学习算法分割出皮肤区域,得到对应的皮肤图片。
进一步地,该皮肤毛孔或黑头检测系统还包括:
G通道灰度图处理模块,用于选取并模糊处理皮肤图片对应的G通道灰度图,得到模糊图,将G通道灰度图和模糊图相减,得到差值图。
R通道灰度图处理模块,用于选取并模糊处理皮肤图片对应的R通道灰度图,得到模糊图,将R通道灰度图和模糊图相减,得到差值图。
本实施例提供的皮肤毛孔或黑头检测系统,由于其各模块本身的功能及彼此之间的逻辑连接,能实现前述实施例的各个步骤,因此能够达到与前述实施例相同的技术效果,原理分析可参见前述皮肤毛孔或黑头检测方法的步骤的相关描述,在此不再赘述。
关于皮肤毛孔或黑头检测系统的具体限定可以参见上文中对于皮肤毛孔或黑头检测方法的限定,在此不再赘述。上述皮肤毛孔或黑头检测系统中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于设备中的处理器中,也可以以软件形式存储于设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一实施例中,提供一种电子设备。该电子设备可以包括处理器、外部存储器接口、内部存储器、通用串行总线(universal serial bus,USB)接口、充电管理模块、电源管理模块、电池、天线、无线通信模块、音频模块、扬声器、受话器、麦克风、耳机接口、传感器模块、按键、指示器、摄像头,以及显示屏等。其中传感器模块包括环境光传感器。此外,传感器模块还可以包括压力传感器、陀螺仪传感器、气压传感器、磁传感器、加速度传感器、距离传感器、接近光传感器、指纹传感器、温度传感器、触摸传感器、骨传导传感器等。在另一些实施例中,本申请实施例中的电子设备还可以包括移动通信模块,以及用户标识模块(subscriber identification module,SIM)卡接口等。上述模块或器件的功能是现有技术,此处不再赘述。
本申请实施例中的电子设备支持的应用程序可以包括拍照类的应用,例如相机。
本申请实施例中的电子设备支持的应用还可以包括用于皮肤检测的应用。其中,用于皮肤检测的应用是通过对拍摄的人脸图片来检测用户皮肤毛孔或黑头情况,并可以为用户提供分析报告。
本实施例中的用于皮肤检测的应用可以采用本申请其他实施例提供的皮肤毛孔或黑头检测方法,来检测皮肤毛孔或黑头情况。
本实施例以电子设备为手机为例,具体操作时,如图10所示。
如图13的A所示,电子设备检测到对皮肤检测图标的点击操作,电子设备响应于对该图标的操作,在显示屏显示皮肤检测应用的用户界面,如图10的B所示。在该界面中,包括相机图标。
电子设备检测到对相机图标的操作,响应于对相机图标的操作,调用电子设备上的相机应用,以获取待检测的人脸图片。当然,用户也可以选择存储在内部存储器的包含脸部的图片,作为待检测图片。
用于皮肤检测的应用接收到输入的人脸图片之后,可以采用本申请其他实施例提供的皮肤毛孔或黑头检测方法,来皮肤毛孔或黑头情况。同时,为用户提供皮肤检测报告如图10的C所示。
皮肤检测报告可以通过电子设备的用户界面呈现给用户,并提供相关的建议供用户参考。
在一实施例中,提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现上述实施例皮肤毛孔或黑头检测方法,或者,该计算机程序被处理器执行时实现上述系统实施例中皮肤毛孔或黑头检测系统中各模块/单元的功能。为避免重复,此处不再赘述。
所属领域的技术人员可以清楚地了解到本申请实施例可以用硬件实现,或固件实现,或它们的组合方式来实现。当使用软件实现时,可以将上述功能存储在计算机可读介质中或作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质,其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是计算机能够存取的任何可用介质。以此为例但不限于:计算机可读介质可以包括RAM、ROM、电可擦可编程只读存储器(electrically erasableprogrammable read only memory,EEPROM)、只读光盘(compact disc read-Only memory,CD-ROM)或其他光盘存储、磁盘存储介质或者其他磁存储设备,或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质。
此外,任何连接可以适当的成为计算机可读介质。例如,如果软件是使用同轴电缆、光纤光缆、双绞线、数字用户线(digital subscriber line,DSL)或者诸如红外线、无线电和微波之类的无线技术从网站、服务器或者其他远程源传输的,那么同轴电缆、光纤光缆、双绞线、DSL或者诸如红外线、无线和微波之类的无线技术包括在所属介质的定影中。如本申请实施例所使用的,盘(disk)和碟(disc)包括压缩光碟(compact disc,CD)、激光碟、光碟、数字通用光碟(digital video disc,DVD)、软盘和蓝光光碟,其中盘通常磁性的复制数据,而碟则用激光来光学的复制数据。上面的组合也应当包括在计算机可读介质的保护范围之内。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将系统的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (10)
1.一种皮肤毛孔或黑头检测方法,其特征在于,包括:
获取人脸图片,分割出皮肤区域,得到对应的皮肤图片;
选取并模糊处理所述皮肤图片对应的B通道灰度图,得到模糊图,将所述B通道灰度图和所述模糊图相减,得到差值图;
过滤所述差值图,得到二值图,所述二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图;
对所述二值图进行边缘滤波检测。
2.根据权利要求1所述的皮肤毛孔或黑头检测方法,其特征在于,在过滤所述差值图,得到二值图之后,还包括:
基于所述二值图,生成对应的圈点图,所述圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
3.根据权利要求2所述的皮肤毛孔或黑头检测方法,其特征在于,基于所述二值图,生成对应的圈点图,包括:
对所述二值图进行轮廓提取,所述轮廓包括毛孔轮廓、黑头轮廓或毛黑头轮廓;
使用人脸关键点对所述二值图进行区域定位,定位出过滤区域;
若提取的所述轮廓位于所述过滤区域中,则将所述轮廓进行过滤去除;
和/或,使用人脸关键点对所述二值图进行区域圈定,圈定出有效区域;
若提取的所述轮廓位于所述有效区域外,则将所述轮廓进行过滤去除;
基于过滤后的所述轮廓,生成对应的所述圈点图,所述圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
4.根据权利要求1所述的皮肤毛孔或黑头检测方法,其特征在于,所述过滤包括带通滤波过滤,过滤所述差值图,得到二值图,包括:
若所述差值图上的像素值小于第一阈值,则将小于所述第一阈值的像素值设置为零;
若所述差值图上的像素值大于第二阈值,则将大于所述第二阈值的像素值设置为零,其中,所述第二阈值大于所述第一阈值;
在所述差值图进行第一阈值化处理和第二阈值化处理之后,对所述差值图进行逆向二值化处理,即,将大于零的所述像素值设置为零,将等于零的所述像素值设置为255;
基于逆向二值化处理后的所述差值图,生成对应的所述二值图。
5.根据权利要求3所述的皮肤毛孔或黑头检测方法,其特征在于,在将所述轮廓进行过滤去除之后,还包括:
对过滤后的所述轮廓进行数据分析,所述数据分析包括数量统计分析、面积统计分析或面积占比分析。
6.根据权利要求3所述的皮肤毛孔或黑头检测方法,其特征在于,基于过滤后的所述轮廓,生成对应的所述圈点图,所述圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图,包括:
将过滤后的所述轮廓标记于所述人脸图片上,生成对应的所述圈点图,所述圈点图包括毛孔圈点图、黑头圈点图或毛孔黑头圈点图。
7.根据权利要求1所述的皮肤毛孔或黑头检测方法,其特征在于,获取人脸图片,分割出皮肤区域,得到对应的皮肤图片,包括:
获取人脸图片,通过颜色匹配算法分割出皮肤区域,得到对应的皮肤图片;
和/或,获取人脸图片,通过深度学习算法分割出皮肤区域,得到对应的皮肤图片。
8.根据权利要求1所述的皮肤毛孔或黑头检测方法,其特征在于,还包括:
选取并模糊处理所述皮肤图片对应的G通道灰度图,得到模糊图,将所述G通道灰度图和所述模糊图相减,得到差值图;
和/或,选取并模糊处理所述皮肤图片对应的R通道灰度图,得到模糊图,将所述R通道灰度图和所述模糊图相减,得到差值图。
9.一种皮肤毛孔或黑头检测系统,其特征在于,包括:
皮肤图片获取模块,用于获取人脸图片,分割出皮肤区域,得到对应的皮肤图片;
差值图获取模块,用于选取并模糊处理所述皮肤图片对应的B通道灰度图,得到模糊图,将所述B通道灰度图和所述模糊图相减,得到差值图;
二值图获取模块,用于过滤所述差值图,得到二值图,所述二值图包括毛孔二值图、黑头二值图或毛孔黑头二值图;
皮肤检测模块,用于对所述二值图进行边缘滤波检测。
10.一种计算机可读存储介质,其特征在于,计算机可读存储介质有计算机程序,计算机程序被处理器执行时实现如权利要求1至8所述的皮肤毛孔或黑头检测方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311142250.4A CN117152099A (zh) | 2023-09-05 | 2023-09-05 | 皮肤毛孔或黑头检测方法、系统及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311142250.4A CN117152099A (zh) | 2023-09-05 | 2023-09-05 | 皮肤毛孔或黑头检测方法、系统及计算机可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117152099A true CN117152099A (zh) | 2023-12-01 |
Family
ID=88911596
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311142250.4A Pending CN117152099A (zh) | 2023-09-05 | 2023-09-05 | 皮肤毛孔或黑头检测方法、系统及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117152099A (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070223829A1 (en) * | 2006-03-27 | 2007-09-27 | Fujifilm Corporation | Image-processing method and apparatus, and printer |
US20100026833A1 (en) * | 2008-07-30 | 2010-02-04 | Fotonation Ireland Limited | Automatic face and skin beautification using face detection |
CN105869121A (zh) * | 2015-01-21 | 2016-08-17 | 国网吉林省电力有限公司延边供电公司 | 一种基于rgby的阴影消除方法 |
CN106875391A (zh) * | 2017-03-02 | 2017-06-20 | 深圳可思美科技有限公司 | 皮肤图像的识别方法及电子设备 |
CN108921825A (zh) * | 2018-06-12 | 2018-11-30 | 北京羽医甘蓝信息技术有限公司 | 基于深度学习的检测面部皮肤点状缺陷的方法及装置 |
KR101947097B1 (ko) * | 2017-09-26 | 2019-02-12 | (주)참메드 | 스트로보스코프 상에서 토탈 셔터 이미지 센서 모듈 제어를 위한 isp |
CN112215802A (zh) * | 2018-07-16 | 2021-01-12 | 华为技术有限公司 | 一种皮肤检测方法和电子设备 |
CN113592851A (zh) * | 2021-08-12 | 2021-11-02 | 北京滴普科技有限公司 | 一种基于全脸图像的毛孔检测方法 |
CN113808027A (zh) * | 2020-06-16 | 2021-12-17 | 北京达佳互联信息技术有限公司 | 一种人体图像处理方法、装置、电子设备及存储介质 |
US20220230282A1 (en) * | 2021-01-12 | 2022-07-21 | Samsung Electronics Co., Ltd. | Image processing method, image processing apparatus, electronic device and computer-readable storage medium |
-
2023
- 2023-09-05 CN CN202311142250.4A patent/CN117152099A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070223829A1 (en) * | 2006-03-27 | 2007-09-27 | Fujifilm Corporation | Image-processing method and apparatus, and printer |
US20100026833A1 (en) * | 2008-07-30 | 2010-02-04 | Fotonation Ireland Limited | Automatic face and skin beautification using face detection |
CN105869121A (zh) * | 2015-01-21 | 2016-08-17 | 国网吉林省电力有限公司延边供电公司 | 一种基于rgby的阴影消除方法 |
CN106875391A (zh) * | 2017-03-02 | 2017-06-20 | 深圳可思美科技有限公司 | 皮肤图像的识别方法及电子设备 |
KR101947097B1 (ko) * | 2017-09-26 | 2019-02-12 | (주)참메드 | 스트로보스코프 상에서 토탈 셔터 이미지 센서 모듈 제어를 위한 isp |
CN108921825A (zh) * | 2018-06-12 | 2018-11-30 | 北京羽医甘蓝信息技术有限公司 | 基于深度学习的检测面部皮肤点状缺陷的方法及装置 |
CN112215802A (zh) * | 2018-07-16 | 2021-01-12 | 华为技术有限公司 | 一种皮肤检测方法和电子设备 |
US20210279445A1 (en) * | 2018-07-16 | 2021-09-09 | Huawei Technologies Co., Ltd. | Skin Detection Method and Electronic Device |
CN113808027A (zh) * | 2020-06-16 | 2021-12-17 | 北京达佳互联信息技术有限公司 | 一种人体图像处理方法、装置、电子设备及存储介质 |
US20220230282A1 (en) * | 2021-01-12 | 2022-07-21 | Samsung Electronics Co., Ltd. | Image processing method, image processing apparatus, electronic device and computer-readable storage medium |
CN113592851A (zh) * | 2021-08-12 | 2021-11-02 | 北京滴普科技有限公司 | 一种基于全脸图像的毛孔检测方法 |
Non-Patent Citations (5)
Title |
---|
ZHEN WANG 等: "Image-based facial pore detection and visualization in skin health evaluation", SPRINGER, 31 August 2019 (2019-08-31), pages 1039 - 1055, XP036912328, DOI: 10.1007/s12650-019-00581-6 * |
吴娱: "《数字图像处理》", 30 October 2017, 北京邮电大学出版社, pages: 290 - 297 * |
王俊;胡越黎;曹家麟;: "基于马氏距离的皮肤图像症状识别系统的设计", 电视技术, no. 01, 17 January 2006 (2006-01-17), pages 87 - 90 * |
苏锦程;胡勇;巩彩兰;: "一种基于联合特征约束的毛孔检测算法", 传感器与微系统, no. 05, 8 May 2019 (2019-05-08), pages 152 - 154 * |
陈兵旗 等: "《实用数字图像处理与分析》", 28 February 2014, 中国农业大学出版社, pages: 59 - 63 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110443747B (zh) | 图像处理方法、装置、终端及计算机可读存储介质 | |
CN109344724B (zh) | 一种证件照自动背景替换方法、系统及服务器 | |
Jiang et al. | Image dehazing using adaptive bi-channel priors on superpixels | |
CN111524080A (zh) | 脸部皮肤特征的识别方法、终端及计算机设备 | |
US11138695B2 (en) | Method and device for video processing, electronic device, and storage medium | |
CN111814520A (zh) | 肤质检测方法、肤质等级分类方法及肤质检测装置 | |
CN108323204A (zh) | 一种检测人脸瑕疵点的方法和智能终端 | |
CN107204034B (zh) | 一种图像处理方法及终端 | |
CN108323203A (zh) | 一种定量检测人脸肤质参量的方法、装置和智能终端 | |
CN103927719A (zh) | 图片处理方法及装置 | |
CN111062891A (zh) | 图像处理方法、装置、终端及计算机可读存储介质 | |
CN103902958A (zh) | 人脸识别的方法 | |
WO2018082388A1 (zh) | 一种肤色检测方法、装置及终端 | |
CN113222973B (zh) | 图像处理方法及装置、处理器、电子设备及存储介质 | |
CN103927718A (zh) | 一种图片处理方法及装置 | |
CN111860369A (zh) | 一种欺诈识别方法、装置以及存储介质 | |
CN108805838B (zh) | 一种图像处理方法、移动终端及计算机可读存储介质 | |
CN112712054B (zh) | 脸部皱纹检测方法 | |
CN113052923B (zh) | 色调映射方法、装置、电子设备和存储介质 | |
CN103714225A (zh) | 自动彩妆的信息系统及其进行上妆方法 | |
CN111476735B (zh) | 人脸图像处理方法、装置、计算机设备及可读存储介质 | |
CN113128373A (zh) | 基于图像处理的色斑评分方法、色斑评分装置及终端设备 | |
CN113298753A (zh) | 敏感肌的检测方法、图像处理方法、装置及设备 | |
CN112699760B (zh) | 一种脸部目标区域检测方法、装置和设备 | |
CN112381737B (zh) | 图像处理方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |