CN117671037A - 皮肤检测方法、装置、面罩和存储介质 - Google Patents
皮肤检测方法、装置、面罩和存储介质 Download PDFInfo
- Publication number
- CN117671037A CN117671037A CN202311632588.8A CN202311632588A CN117671037A CN 117671037 A CN117671037 A CN 117671037A CN 202311632588 A CN202311632588 A CN 202311632588A CN 117671037 A CN117671037 A CN 117671037A
- Authority
- CN
- China
- Prior art keywords
- color
- matrix
- face
- color matrix
- local
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 34
- 239000011159 matrix material Substances 0.000 claims abstract description 408
- 230000001815 facial effect Effects 0.000 claims abstract description 96
- 238000012937 correction Methods 0.000 claims abstract description 44
- 238000000034 method Methods 0.000 claims abstract description 24
- 238000012545 processing Methods 0.000 claims description 20
- 238000006243 chemical reaction Methods 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 14
- 210000003491 skin Anatomy 0.000 description 89
- 238000004891 communication Methods 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 239000003086 colorant Substances 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000001126 phototherapy Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- BPYKTIZUTYGOLE-IFADSCNNSA-N Bilirubin Chemical compound N1C(=O)C(C)=C(C=C)\C1=C\C1=C(C)C(CCC(O)=O)=C(CC2=C(C(C)=C(\C=C/3C(=C(C=C)C(=O)N\3)C)N2)CCC(O)=O)N1 BPYKTIZUTYGOLE-IFADSCNNSA-N 0.000 description 2
- XUMBMVFBXHLACL-UHFFFAOYSA-N Melanin Chemical compound O=C1C(=O)C(C2=CNC3=C(C(C(=O)C4=C32)=O)C)=C2C4=CNC2=C1C XUMBMVFBXHLACL-UHFFFAOYSA-N 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 210000001061 forehead Anatomy 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000011269 treatment regimen Methods 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 210000002615 epidermis Anatomy 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000019612 pigmentation Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- -1 protoheme Chemical compound 0.000 description 1
- 208000017520 skin disease Diseases 0.000 description 1
- 230000005808 skin problem Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Image Processing (AREA)
Abstract
本申请涉及一种皮肤检测方法、装置、面罩和存储介质。所述方法包括:在检测到人脸佩戴面罩的情况下,获取通过面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵;获取通过面罩中的颜色传感器对完整面部区域中的局部面部区域所测量的第二颜色矩阵;基于第一颜色矩阵和第二颜色矩阵,确定摄像头和颜色传感器在局部面部区域处的局部差异;基于局部差异对第一颜色矩阵进行颜色校正,获得校正颜色矩阵;根据校正颜色矩阵,确定人脸的皮肤颜色。采用本方法能够提高检测的人脸皮肤颜色的准确度。
Description
技术领域
本申请涉及皮肤检测技术领域,特别是涉及一种皮肤检测方法、装置、面罩和存储介质。
背景技术
随着计算机技术的发展,出现了皮肤检测技术。通过皮肤检测技术,可检测人类的皮肤颜色,从而可将皮肤颜色检测结果应用于多个领域,如皮肤问题的判断、皮肤护理、皮肤病诊断等。现有技术中,通常通过摄像机拍摄皮肤图像,进而分析图像颜色确定皮肤颜色。
然而,目前通过摄像机拍摄皮肤图像、分析图像颜色确定皮肤颜色的方式,存在皮肤颜色准确度低的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高准确度的皮肤检测方法、装置、面罩和计算机可读存储介质。
第一方面,本申请提供了一种皮肤检测方法,包括:
在检测到人脸佩戴面罩的情况下,获取通过所述面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵;
获取通过所述面罩中的颜色传感器对所述完整面部区域中的局部面部区域所测量的第二颜色矩阵;
基于所述第一颜色矩阵和所述第二颜色矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异;
基于所述局部差异对所述第一颜色矩阵进行颜色校正,获得校正颜色矩阵;
根据所述校正颜色矩阵,确定所述人脸的皮肤颜色。
第二方面,本申请还提供了一种皮肤检测装置,包括:
获取模块,用于在检测到人脸佩戴面罩的情况下,获取通过所述面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵;获取通过所述面罩中的颜色传感器对所述完整面部区域中的局部面部区域所测量的第二颜色矩阵;
局部差异确定模块,用于基于所述第一颜色矩阵和所述第二颜色矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异;
校正模块,用于基于所述局部差异对所述第一颜色矩阵进行颜色校正,获得校正颜色矩阵;
皮肤颜色确定模块,用于根据所述校正颜色矩阵,确定所述人脸的皮肤颜色。
第三方面,本申请还提供了一种面罩,包括存储器和处理器,还包括用于采集人脸的完整面部区域的摄像头和用于采集人脸的局部面部区域的颜色传感器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
在检测到人脸佩戴面罩的情况下,获取通过所述面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵;
获取通过所述面罩中的颜色传感器对所述完整面部区域中的局部面部区域所测量的第二颜色矩阵;
基于所述第一颜色矩阵和所述第二颜色矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异;
基于所述局部差异对所述第一颜色矩阵进行颜色校正,获得校正颜色矩阵;
根据所述校正颜色矩阵,确定所述人脸的皮肤颜色。
第四方面,本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
在检测到人脸佩戴面罩的情况下,获取通过所述面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵;
获取通过所述面罩中的颜色传感器对所述完整面部区域中的局部面部区域所测量的第二颜色矩阵;
基于所述第一颜色矩阵和所述第二颜色矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异;
基于所述局部差异对所述第一颜色矩阵进行颜色校正,获得校正颜色矩阵;
根据所述校正颜色矩阵,确定所述人脸的皮肤颜色。
上述皮肤检测方法、装置、面罩和存储介质,面罩中设置有摄像头和颜色传感器,由于摄像头的拍摄结果受到环境光照影响较大,通过摄像头对人脸的完整面部区域拍摄后获得的第一颜色矩阵所确定的皮肤颜色,相比真实皮肤颜色可能偏差较大,而颜色传感器专用于测量颜色,颜色传感器的测量准确度相较于摄像头高,因此,在局部面部区域中,第二颜色矩阵比第一颜色矩阵准确度高;由于采用颜色传感器测量时仅测量局部面部区域,说明采用颜色传感器的数量少,可节约硬件资源,同时,通过准确度较高的第二颜色矩阵和准确度较低的第一颜色矩阵确定局部差异,再基于局部差异对第一颜色矩阵进行颜色校正,可提高第一颜色矩阵的准确度,从而可提高检测的人脸皮肤颜色的准确度。
附图说明
为了更清楚地说明本申请实施例或相关技术中的技术方案,下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中皮肤检测方法的流程示意图;
图2为一个实施例中基于所述第一颜色矩阵和所述第二颜色矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异的步骤的流程示意图;
图3为一个实施例中皮肤检测装置的结构框图;
图4为一个实施例中面罩的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
在一个实施例中,如图1所示,提供了一种皮肤检测方法,本实施例以该方法应用于面罩进行举例说明,可以理解的是,该方法也可以应用于包括面罩与计算机设备的系统,并通过面罩和计算机设备的交互实现。计算机设备可以是智能手机、平板电脑、笔记本电脑、台式电脑或服务器。本实施例中,该方法包括以下步骤:
步骤102,在检测到人脸佩戴面罩的情况下,获取通过面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵。
其中,面罩是用于进行皮肤检测的设备。面罩中可设置一个或多个摄像头。完整面部区域是人脸的全脸区域,具体可以是以正视视角呈现人脸时、标识人脸所在区域的面部轮廓线内的区域。面罩可分别与摄像头、颜色传感器电性连接。面罩可配置有显示单元,通过显示单元显示人脸的皮肤颜色。在另一个实施例中,面罩可与具有显示单元的计算机设备建立通信连接,通过该通信连接将人脸的皮肤颜色传输至具有显示单元的计算机设备并显示。摄像头是能够拍摄图像的设备,用于采集人脸的完整面部区域。
第一颜色矩阵是将摄像头对人脸的完整面部区域拍摄得到的人脸图像以矩阵表示得到的。第一颜色矩阵具体可以是RGB颜色模式下的颜色矩阵,颜色矩阵中的每个像素的颜色值可以是该像素中R(Red,红色)通道、G(Green,绿色)通道和B(Blue,蓝色)通道下的通道像素值。RGB颜色模式下的颜色矩阵中每个像素可包括各通道的通道像素值。RGB颜色模式下的颜色矩阵,可包括R通道矩阵、G通道矩阵、B通道矩阵。
在一个实施例中,面罩中可仅配置一个摄像头。本实施例中,在检测到人脸佩戴面罩的情况下,面罩可控制面罩中的摄像头对人脸的完整面部区域进行拍摄,获取摄像头拍摄人脸后得到的第一颜色矩阵。其中,摄像头可设置在面罩中部,当人脸佩戴面罩时,可从正视人脸的视角拍摄人脸,获得正视视角的人脸图像。其中,视角是观察人脸的角度。视角可以是正视视角,即从正面观察人脸;也可以是侧视视角,侧视视角可以是左侧视角、右侧视角。
在一个实施例中,面罩中可配置多个摄像头,多个摄像头分别用于从不同视角对人脸进行拍摄。本实施例中,在检测到人脸佩戴面罩的情况下,面罩可控制面罩中的多个摄像头分别对人脸进行拍摄,获取多个摄像头各自在不同视角对人脸拍摄的人脸图像,将多个摄像头各自所拍摄的人脸图像融合后获得正视视角的融合人脸图像,将融合人脸图像以矩阵表示,获得第一颜色矩阵。
步骤104,获取通过面罩中的颜色传感器对完整面部区域中的局部面部区域所测量的第二颜色矩阵。
其中,颜色传感器可识别物表面颜色。颜色传感器可基于三原色理论和光电效应,通过测量光线的强度和频率来确定物体表面的颜色。局部面部区域是完整面部区域中颜色传感器所测量的区域。局部面部区域是完整面部区域中的局部区域,例如,局部面部区域可以在人脸的脸颊区域中,局部面部区域的尺寸与颜色传感器所能够测量的区域尺寸匹配。
面罩中可仅设置一个颜色传感器,在此情况下,可仅存在一处局部面部区域、一个第二颜色矩阵。面罩中也可以设置多个颜色传感器,在此情况下,可存在多处局部面部区域,多个颜色传感器各自测量不同的局部面部区域,每个颜色传感器均可测得一个第二颜色矩阵。
第二颜色矩阵是RGB颜色模式下的颜色矩阵,颜色矩阵中的每个像素的颜色值可以是该像素中R通道、G通道和B通道下的通道像素值。
在一个实施例中,面罩控制摄像头对人脸的完整面部区域拍摄的同时,控制面罩中的颜色传感器对完整面部区域中的局部面部区域进行测量,获取颜色传感器测量的第二颜色矩阵。
步骤106,基于第一颜色矩阵和第二颜色矩阵,确定摄像头和颜色传感器在局部面部区域处的局部差异。
其中,局部差异表征摄像头和颜色传感器在局部面部区域对颜色识别的精度差异。局部差异具体可以以矩阵的形式表示。
在一个实施例中,面罩可确定第一颜色矩阵中与局部面部区域匹配的子颜色矩阵,基于子颜色矩阵和第二颜色矩阵,确定摄像头和颜色传感器在局部面部区域处的局部差异。其中,子颜色矩阵是第一颜色矩阵在局部面部区域处的颜色矩阵,即子颜色矩阵是第一颜色矩阵中与第二颜色矩阵所测量区域相同的颜色矩阵。
在一个实施例中,面罩可对第二颜色矩阵与子颜色矩阵作矩阵减法运算,获得局部差异矩阵,将局部差异矩阵确定为摄像头和颜色传感器在局部面部区域处的局部差异。
步骤108,基于局部差异对第一颜色矩阵进行颜色校正,获得校正颜色矩阵。
其中,校正颜色矩阵是对第一颜色矩阵校正后得到的颜色矩阵。颜色校正是使得第一颜色矩阵的颜色更接近真实情况的处理。
在一个实施例中,面罩中可仅设置一个颜色传感器,本实施例中,面罩可将局部差异扩展为与完整面部区域匹配的完整差异,根据完整差异对第一颜色矩阵进行颜色校正,获得校正颜色矩阵。
在一个实施例中,面罩中可设置多个颜色传感器,且完整面部区域由多个分区面部区域组成,每个分区面部区域中存在局部面部区域,且分区面部区域的尺寸大于局部面部区域的尺寸,多个颜色传感器各自测量的第二颜色矩阵,可以是各自对完整面部区域中不同分区面部区域中的局部面部区域测量得到的,每个局部面部区域对应的局部差异是根据第一颜色矩阵和该局部面部区域对应的第二颜色矩阵确定的。本实施例中,面罩可针对每个局部面部区域,将所针对局部面部区域对应的局部差异,扩展与所针对局部面部区域所在的分区面部区域对应的分区面部区域差异,根据多个分区面部区域各自对应的分区面部区域差异,对第一颜色矩阵进行颜色校正,获得校正颜色矩阵。其中,分区面部区域是完整面部区域中不同面部部位对应的区域,例如,多个分区面部区域可以是脸颊区域、嘴部区域、额头区域、鼻部区域和眼部区域。
步骤110,根据校正颜色矩阵,确定人脸的皮肤颜色。
其中,皮肤颜色是人类皮肤表皮层因黑色素、原血红素、叶红素等色素沉着所反映出的颜色。皮肤颜色可以是黑色、棕色、黄色和白色等基础皮肤颜色中的一种,皮肤颜色还是可以对基础皮肤颜色继续分级后的颜色,例如,按照皮肤颜色深浅对黄色分级后,皮肤颜色可以是黄一白、黄二白等。
在一个实施例中,校正颜色矩阵可以是RGB颜色模式下的颜色矩阵。本实施例中,面罩可将校正颜色矩阵从RGB颜色模式转换到LAB颜色模式下,获得LAB颜色模式的颜色矩阵,根据LAB颜色模式的颜色矩阵,确定人脸的皮肤颜色。
上述皮肤检测方法中,面罩中设置有摄像头和颜色传感器,由于摄像头的拍摄结果受到环境光照影响较大,通过摄像头对人脸的完整面部区域拍摄后获得的第一颜色矩阵所确定的皮肤颜色,相比真实皮肤颜色可能偏差较大,而颜色传感器专用于测量颜色,颜色传感器的测量准确度相较于摄像头高,因此,在局部面部区域中,第二颜色矩阵比第一颜色矩阵准确度高;由于采用颜色传感器测量时仅测量局部面部区域,说明采用颜色传感器的数量少,可节约硬件资源,同时,通过准确度较高的第二颜色矩阵和准确度较低的第一颜色矩阵确定局部差异,再基于局部差异对第一颜色矩阵进行颜色校正,可提高第一颜色矩阵的准确度,从而可提高检测的人脸皮肤颜色的准确度。
在一个实施例中,如图2所示,步骤106包括步骤202至步骤204。其中:
步骤202,确定第一颜色矩阵中与局部面部区域匹配的子颜色矩阵。
步骤204,基于第二颜色矩阵、子颜色矩阵和针对摄像头和颜色传感器预配置的颜色转换矩阵,确定摄像头和颜色传感器在局部面部区域处的局部差异。
其中,颜色转换矩阵用于将颜色传感器测量的颜色矩阵转换,转换为可与摄像头所拍摄的颜色矩阵进行运算的矩阵。
本实施例中,通过确定第一颜色矩阵中与局部面部区域匹配的子颜色矩阵,即确定摄像头在局部面部区域处的颜色矩阵,进而基于第二颜色矩阵、子颜色矩阵和颜色转换矩阵,便于确定摄像头和颜色传感器在局部面部区域处的局部差异,结合后续步骤,可提高检测的人脸皮肤颜色的准确度。
在一个实施例中,面罩可确定第一颜色矩阵中标记的与局部面部区域匹配的矩阵区域,将第一颜色矩阵在该矩阵区域的矩阵,确定为第一颜色矩阵中与局部面部区域匹配的子颜色矩阵。其中,摄像头与颜色传感器间的相对位置可以是预设的,当获取到摄像头拍摄的第一颜色矩阵,根据摄像头与颜色传感器间的相对位置,可以确定第一颜色矩阵中与颜色传感器所测量的局部面部区域匹配的矩阵区域。
在一个实施例中,面罩可将第二颜色矩阵与针对摄像头和颜色传感器预配置的颜色转换矩阵作矩阵乘法运算,获得转换后的颜色矩阵,将转换后的颜色矩阵与子颜色矩阵作矩阵减法运算,获得局部差异矩阵,将局部差异矩阵确定为摄像头和颜色传感器在局部面部区域处的局部差异。其中,第二颜色矩阵、子颜色矩阵、颜色转换矩阵、转换后的颜色矩阵与局部差异矩阵,可均为RGB颜色模式下的颜色矩阵,RGB颜色模式下的颜色矩阵可包括R通道矩阵乘法运算、矩阵减法运算均是通过不同的颜色矩阵在相同通道下的通道矩阵进行的。
在一个实施例中,步骤202包括:当第一颜色矩阵存在深色像素区域,且子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,对子颜色矩阵和第二颜色矩阵各自的像素的颜色值分别进行颜色均衡处理;深色像素区域的整体像素颜色,比第一颜色矩阵中深色像素区域邻域内的整体像素颜色深;基于针对摄像头和颜色传感器预配置的颜色转换矩阵、颜色均衡处理后的第二颜色矩阵和颜色均衡处理后的子颜色矩阵,确定摄像头和颜色传感器在局部面部区域处的局部差异。
其中,预设占比是预先设置的比例值。预设占比可以是5%、10%、50%或其它。颜色均衡处理是对颜色矩阵的整体颜色做均衡处理,使得颜色矩阵的整体颜色的深浅均衡。
深色像素区域是第一颜色矩阵中相比邻域内的整体像素颜色较深的区域。深色像素区域在人脸中所对应的面部区域的尺寸可大于预设尺寸,预设尺寸例如可以是2平方毫米、3平方毫米等。当面部区域的尺寸小于预设尺寸,可认为该面部区域属于可忽略颜色影响的区域,例如,该面部区域可以是人脸的小痣所在区域。
深色像素区域邻域是第一颜色矩阵中深色像素区域周围的区域。深色像素区域邻域具体可以由深色像素区域之外、深色像素区域中处于边缘的像素位置的邻域内像素位置组成。像素位置的邻域可以是4邻域、8邻域或其它。第一颜色矩阵存在深色像素区域表征人脸的整体皮肤颜色不均匀。子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,可表征人脸的局部面部区域存在颜色不均匀且深色区域达到一定占比的情况。
在对颜色矩阵中不同区域的整体像素颜色进行颜色深浅比较时,可比较不同区域间的整体颜色亮度,具体地,当一个区域的整体颜色亮度比另一个区域的整体颜色亮度暗,即表明该一个区域的整体像素颜色比另一个区域的整体颜色亮度深。颜色矩阵中区域可以是整体像素区域、整体像素区域邻域。
颜色矩阵中区域的整体颜色亮度可以是该区域的代表亮度值。当一区域的代表亮度值小于另一区域的代表亮度值、且该一区域的代表亮度值与另一区域的代表亮度值间的差值绝对值大于预设亮度差异值,可确定该一个区域的整体颜色亮度比另一个区域的整体颜色亮度暗。
代表亮度值可以是该区域所有像素的平均亮度值,可以是该区域所有像素的亮度值中的众数,还可以是该区域所有像素的亮度值中表征在该区域亮度最亮的亮度值。平均亮度值可以是算术平均亮度值,即该区域所有像素的亮度值的算术平均值;平均亮度值也可以是加权平均亮度值,该区域不同位置的像素具有不同权重,可以是越接近区域中心的像素权重越大。
像素的亮度值可以是将像素从RGB颜色模式转换为包括亮度通道的颜色模式后,该像素在亮度通道的通道像素值。包括亮度通道的颜色模式可以是HSV颜色模式,HSV颜色模式包括H(Hue,色调)通道、S(Saturation,饱和度)通道和V(Value,亮度)通道;也可以是LAB颜色模式,LAB颜色模式包括L(Lightness,亮度)通道、A(Green-Red Axis,红绿色度)通道和B(Blue-Yellow Axis,黄蓝色度)通道。在LAB颜色模式下,预设亮度差异值可以是20、30、40或其它。
本实施例中,当第一颜色矩阵存在深色像素区域,且子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,说明局部面部区域存在颜色不均匀且深色区域达到一定占比的情况,此时,对子颜色矩阵和第二颜色矩阵各自的像素的颜色值分别进行颜色均衡处理,后续基于颜色转换矩阵、颜色均衡处理后的第二颜色矩阵和颜色均衡处理后的子颜色矩阵确定局部差异,可避免受到局部面部区域中深色区域引起的误差影响,可提高检测的人脸皮肤颜色的准确度。
在一个实施例中,子颜色矩阵与第二颜色矩阵均是RGB颜色模式下的颜色矩阵,对子颜色矩阵和第二颜色矩阵各自的像素的颜色值分别进行颜色均衡处理包括:确定子颜色矩阵中处于深色像素区域的像素的第一深色数量占比、和未处于深色像素区域的像素的第一浅色数量占比,针对子颜色矩阵在RGB颜色模式下每个通道,确定子颜色矩阵在所针对通道的第一深色通道平均值和第一浅色通道平均值,对第一深色通道平均值与第一深色数量占比的乘积、第一浅色通道平均值与第一浅色数量占比的乘积求和,获得子颜色矩阵在所针对通道的第一通道像素代表值,并将第一通道像素代表值确定为子颜色矩阵中每个像素在所针对通道的通道像素值,以对子颜色矩阵的像素的颜色值进行颜色均衡处理。
其中,所针对通道的第一深色通道平均值,是子颜色矩阵中处于深色像素区域的像素在所针对通道的像素通道值的平均值。所针对通道的第一浅色通道平均值,是子颜色矩阵中未处于深色像素区域的像素在所针对通道的像素通道值的平均值。
在一个实施例中,子颜色矩阵与第二颜色矩阵均是RGB颜色模式下的颜色矩阵,对子颜色矩阵和第二颜色矩阵各自的像素的颜色值分别进行颜色均衡处理包括:确定第二颜色矩阵中与第一颜色矩阵的深色像素区域匹配的局部深色像素区域,确定第二颜色矩阵中处于局部深色像素区域的像素的第二深色数量占比、和未处于局部深色像素区域的像素的第二浅色数量占比,针对第二颜色矩阵在RGB颜色模式下每个通道,确定第二颜色矩阵在所针对通道的第二深色通道平均值和第二浅色通道平均值,对第二深色通道平均值与第二深色数量占比的乘积、第二浅色通道平均值与第二浅色数量占比的乘积求和,获得第二颜色矩阵在所针对通道的第二通道像素代表值,并将第二通道像素代表值确定为第二颜色矩阵中每个像素在所针对通道的通道像素值,以对第二颜色矩阵的像素的颜色值进行颜色均衡处理。
其中,第二颜色矩阵中局部深色像素区域,与第一颜色矩阵中深色像素区域在子颜色矩阵所占像素位置相同。所针对通道的第二深色通道平均值,是第二颜色矩阵中处于局部深色像素区域的像素在所针对通道的像素通道值的平均值。所针对通道的第二浅色通道平均值,是第二颜色矩阵中未处于局部深色像素区域的像素在所针对通道的像素通道值的平均值。
在一个实施例中,上述皮肤检测方法还包括下述步骤:确定第一颜色矩阵中与局部面部区域匹配的子颜色矩阵;当第一颜色矩阵存在深色像素区域,且子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,在保持摄像头与颜色传感器间相对位置不变的情况下,调整摄像头和颜色传感器在面罩中的位置,执行获取通过面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵的步骤,以及获取通过面罩中的颜色传感器对完整面部区域中的局部面部区域所测量的第二颜色矩阵的步骤。
其中,摄像头与颜色传感器间相对位置可以是预先设置的,例如,在对面罩进行校准时,设置摄像头与颜色传感器间的相对位置,并对摄像头与颜色传感器间的相对位置进行标定,并在标定完成后保持摄像头与颜色传感器间相对位置不变。摄像头与颜色传感器可设置为一个完整的颜色检测模块,该颜色检测模块可固定到面罩的可移动的结构滑动组件上,面罩可通过结构滑动组件调整该颜色检测模块的位置,实现在保持摄像头与颜色传感器间相对位置不变的情况下,调整摄像头和颜色传感器在面罩中的位置。
本实施例中,当第一颜色矩阵存在深色像素区域,且子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,说明局部面部区域存在颜色不均匀且深色区域达到一定占比的情况,此时,调整摄像头和颜色传感器在面罩中的位置,从而可更新局部面部区域,后续确定局部差异,可避免受到局部面部区域中深色区域引起的误差影响,可提高检测的人脸皮肤颜色的准确度。
在一个实施例中,当第一颜色矩阵存在深色像素区域,且子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,在保持摄像头与颜色传感器间相对位置不变的情况下,面罩可调整摄像头和颜色传感器在面罩中的位置,执行步骤102和步骤104,并执行步骤106至步骤110。
在一个实施例中,当第一颜色矩阵存在深色像素区域,且子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,在保持摄像头与颜色传感器间相对位置不变的情况下,面罩可调整摄像头和颜色传感器在面罩中的位置,执行步骤102和步骤104后,确定第一颜色矩阵中与局部面部区域匹配的子颜色矩阵,当子颜色矩阵中处于深色像素区域的像素的数量占比不超过预设占比,继续执行步骤106至步骤110。
在一个实施例中,步骤108包括:获取针对摄像头预配置的差异扩展矩阵;基于差异扩展矩阵,将局部差异扩展至与完整面部区域匹配的完整差异;根据完整差异对第一颜色矩阵进行颜色校正,获得校正颜色矩阵。
其中,差异扩展矩阵用于将局部差异扩展至与完整面部区域匹配的完整差异。完整差异表征摄像头和颜色传感器在完整面部区域对颜色识别的精度差异。完整差异具体可以以矩阵的形式表示。
本实施例中,通过差异扩展矩阵,使得可以将局部差异扩展至与完整面部差异,从而便于根据完整差异对第一颜色矩阵进行颜色校正,获得相对第一颜色矩阵准确度较高的校正颜色矩阵,从而可提高检测的人脸皮肤颜色的准确度。
在一个实施例中,局部差异可以是局部差异矩阵。本实施例中,面罩可将局部差异矩阵与差异扩展矩阵作克罗内克积运算(Kronecker积运算),获得与完整面部区域匹配的完整差异矩阵,将完整差异矩阵确定为与完整面部区域匹配的完整差异。
在一个实施例中,面罩可将完整差异矩阵与第一颜色矩阵作矩阵减法运算后,获得中间运算矩阵,对中间运算矩阵中每个像素的颜色值取绝对值,获得校正颜色矩阵。其中,完整差异矩阵与第一颜色矩阵均可以是RGB颜色模式下的颜色矩阵。中间运算矩阵包括完整差异矩阵与第一颜色矩阵在各通道下做矩阵减法运算得到的通道矩阵。对中间运算矩阵中每个像素的颜色值取绝对值,是对中间运算矩阵中每个像素在各通道下的通道像素值取绝对值。
在一个实施例中,校正颜色矩阵是RGB颜色模式下的颜色矩阵,步骤110包括:确定校正颜色矩阵中属于人脸区域的像素;将属于人脸区域的像素,分别从RGB颜色模式转换到LAB颜色模式下,获得属于人脸区域的像素在LAB颜色模式下各通道的通道像素值;基于属于人脸区域的像素在LAB颜色模式下各通道的通道像素值,确定人脸区域的像素分别在每个通道下的代表像素值;确定每个通道下的代表像素值所匹配的预设像素值范围;根据每个通道下的代表像素值所匹配的预设像素值范围,确定人脸的皮肤颜色。
其中,LAB颜色模式是由国际照明委员会组织确定的颜色模式,理论上包括了人眼可视的所有色彩。LAB颜色模式中L通道是亮度通道,通道像素值的取值范围为0到100,数值越大,表征皮肤颜色越亮,可认为人眼视觉上观察到的皮肤颜色越白;A通道是红绿色度通道,通道像素值的取值范围为127到-128,表征从红色到绿色的范围,数值越大,表征皮肤颜色越红;B通道是黄蓝色度通道,通道像素值的取值范围127到-128,表征从黄色到蓝色的范围,数值越大,表征皮肤越红。LAB颜色模式下各通道的通道像素值,可以是对人脸的皮肤颜色的数值化表示。在确定人脸的皮肤颜色后,可通过面罩展示人脸的皮肤颜色,同时展示属于人脸区域的像素在LAB颜色模式下各通道的通道像素值,使得用户可在获取皮肤颜色的同时,通过数值化的表示进一步感知皮肤颜色。
人脸区域的像素分别在每个通道下的代表像素值,可以是人脸区域的像素分别在LAB颜色模式的对应通道下通道像素值的平均值,也可以是对人脸区域的像素排除深色像素区域的像素后、剩余像素分别在LAB颜色模式的对应通道下通道像素值的平均值。该平均值可以是算术平均值,也可以是加权平均值,具体可针对人脸区域中不同分区面部区域的像素,设置不同的权重,例如,对脸颊区域设置较高权重,对嘴部区域、鼻部区域设置中等权重,对额头区域和眼部区域设置较低权重。
人脸的皮肤颜色可以是多种预设皮肤颜色中的一种,每种预设皮肤颜色可对应一组LAB颜色模式下各通道的预设像素值范围。按颜色由深至浅,预设皮肤颜色可以是黑色、棕色、黄三白、黄二白、黄一白或白色。可以理解的是,LAB颜色模式下各通道的取值范围较广,因此预设皮肤颜色还可以划分至更细粒度,通过将预设皮肤颜色对应不同组的预设像素值范围,可以进一步提高检测的人脸皮肤颜色的准确度。
代表像素值所匹配的预设像素值范围,是代表像素值所在的预设像素值范围。例如,预设皮肤颜色为黄一白时,对应一组LAB通道下各通道的预设像素值范围,可以是L通道的预设像素值范围为10到20、A通道的预设像素值范围为0到-20、B通道的预设像素值范围为20到0。
本实施例中,将校正颜色矩阵中属于人脸区域的像素从RGB颜色模式转换到LAB颜色模式,进而确定人脸区域的像素分别在每个通道下的代表像素值,通过每个通道下的代表像素值所匹配的预设像素值范围,确定人脸的皮肤颜色,可以量化地确定人脸的皮肤颜色,使得可以在将皮肤颜色划分粒度较细时,进一步提高检测的人脸皮肤颜色的准确度。
在一个实施例中,当校正颜色矩阵中不存在深色像素区域,面罩可将属于人脸区域的像素在LAB颜色模式下各通道的通道像素值的算术平均值,确定为人脸区域的像素分别在每个通道下的代表像素值。
在一个实施例中,当校正颜色矩阵中存在深色像素区域,且深色像素区域的代表亮度值与深色像素区域邻域内代表亮度值间差值绝对值大于第一预设亮度差异值,面罩可按照不同分区面部区域各自的权重,确定属于人脸区域的像素在LAB颜色模式下各通道的通道像素值的加权平均值,将该加权平均值确定为人脸区域的像素分别在每个通道下的代表像素值。
在一个实施例中,当校正颜色矩阵中存在深色像素区域,且深色像素区域的代表亮度值与深色像素区域邻域内代表亮度值间差值绝对值大于第二预设亮度差异值,面罩确定针对人脸的皮肤治疗策略,使得在该皮肤治疗策略下,对人脸中与深色像素区域匹配的区域采用第一策略进行治疗,对人脸中与深色像素区域不匹配的区域采用第二策略进行治疗。其中,第一预设亮度差异值大于预设亮度差异值,第二预设亮度差异值大于第一预设亮度差异值。第一策略可以是通过面罩中的光疗单元或光疗设备、以第一预设功率进行治疗,第二策略可以是通过面罩中的光疗单元或光疗设备、以第二预设功率进行治疗,第一预设功率大于第二预设功率。
在一个实施例中,上述皮肤检测方法之前,面罩是经过校准的,具体地,面罩可置于预设光源下,面罩控制摄像头对标准色卡(如灰卡、24色卡)进行拍摄得到第一色卡颜色矩阵,控制颜色传感器对标准色卡进行测量得到第二色卡颜色矩阵;获取摄像头对样本人脸的完整面部区域进行拍摄得到第一样本颜色矩阵,获取颜色传感器对样本人脸的完整面部区域中的局部面部区域进行测量得到第二样本颜色矩阵;确定第一样本颜色矩阵中与样本人脸的局部面部区域匹配的子样本颜色矩阵,根据子样本颜色矩阵和第二样本颜色矩阵,确定颜色转换矩阵,使得第二样本颜色矩阵与颜色转换矩阵作矩阵乘法运算可得到子样本颜色矩阵;将该颜色转换矩阵确定为针对摄像头和颜色传感器预配置的颜色转换矩阵;根据第一样本颜色矩阵和子样本颜色矩阵,确定差异扩展矩阵,使得子样本颜色矩阵与差异扩展矩阵作克罗内克积运算可得到第一样本颜色矩阵;将该差异扩展矩阵确定为针对摄像头配置的差异扩展矩阵并存储。
其中,第一样本颜色矩阵,是摄像头拍摄后得到的原始颜色矩阵经过第一色卡颜色矩阵校准得到的,第二样本颜色矩阵,是颜色传感器测量后得到的原色颜色矩阵经过第二色卡颜色矩阵校准的得到的。面罩在经过上述校准后,在进行皮肤检测时,需保持预设光源不变、摄像头与颜色传感器间相对位置不变。
在一个实施例中,上述皮肤检测方法具体可包括以下步骤。
在检测到人脸佩戴面罩的情况下,面罩可获取通过面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵,获取通过面罩中的颜色传感器对完整面部区域中的局部面部区域所测量的第二颜色矩阵。
面罩可确定第一颜色矩阵中与局部面部区域匹配的子颜色矩阵;当第一颜色矩阵不存在深色像素区域,或第一颜色矩阵存在深色像素区域、子颜色矩阵中处于深色像素区域的像素的数量占比不超过预设占比,面罩可将第二颜色矩阵与针对摄像头和颜色传感器预配置的颜色转换矩阵作矩阵乘法运算,获得转换后的颜色矩阵,将转换后的颜色矩阵与子颜色矩阵作矩阵减法运算,获得局部差异矩阵。
当第一颜色矩阵存在深色像素区域,且子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,面罩可对子颜色矩阵和第二颜色矩阵各自的像素的颜色值分别进行颜色均衡处理;面罩可将颜色均衡处理后的第二颜色矩阵与颜色转换矩阵作矩阵乘法运算,获得转换后的颜色矩阵,将转换后的颜色矩阵与颜色均衡处理后的子颜色矩阵作矩阵减法运算,获得局部差异矩阵。
面罩可获取针对摄像头预配置的差异扩展矩阵,将局部差异矩阵与差异扩展矩阵作克罗内克积运算,获得与完整面部区域匹配的完整差异矩阵,将完整差异矩阵与第一颜色矩阵作矩阵减法运算后,获得中间运算矩阵,对中间运算矩阵中每个像素的颜色值取绝对值,获得校正颜色矩阵。
面罩可确定校正颜色矩阵中属于人脸区域的像素;将属于人脸区域的像素,分别从RGB颜色模式转换到LAB颜色模式下,获得属于人脸区域的像素在LAB颜色模式下各通道的通道像素值;基于属于人脸区域的像素在LAB颜色模式下各通道的通道像素值,确定人脸区域的像素分别在每个通道下的代表像素值;确定每个通道下的代表像素值所匹配的预设像素值范围;根据每个通道下的代表像素值所匹配的预设像素值范围,确定人脸的皮肤颜色。
应该理解的是,虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思,本申请实施例还提供了一种用于实现上述所涉及的皮肤检测方法的皮肤检测装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的一个或多个皮肤检测装置实施例中的具体限定可以参见上文中对于皮肤检测方法的限定,在此不再赘述。
在一个实施例中,如图3所示,提供了一种皮肤检测装置300,包括:获取模块310、局部差异确定模块320、校正模块330和皮肤颜色确定模块340,其中:
获取模块310,用于在检测到人脸佩戴面罩的情况下,获取通过面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵;获取通过面罩中的颜色传感器对完整面部区域中的局部面部区域所测量的第二颜色矩阵。
局部差异确定模块320,用于基于第一颜色矩阵和第二颜色矩阵,确定摄像头和颜色传感器在局部面部区域处的局部差异。
校正模块330,用于基于局部差异对第一颜色矩阵进行颜色校正,获得校正颜色矩阵。
皮肤颜色确定模块340,用于根据校正颜色矩阵,确定人脸的皮肤颜色。
在一个实施例中,局部差异确定模块320还用于确定第一颜色矩阵中与局部面部区域匹配的子颜色矩阵;基于第二颜色矩阵、子颜色矩阵和针对摄像头和颜色传感器预配置的颜色转换矩阵,确定摄像头和颜色传感器在局部面部区域处的局部差异。
在一个实施例中,局部差异确定模块320还用于当第一颜色矩阵存在深色像素区域,且子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,对子颜色矩阵和第二颜色矩阵各自的像素的颜色值分别进行颜色均衡处理;深色像素区域的整体像素颜色,比第一颜色矩阵中深色像素区域邻域内的整体像素颜色深;基于针对摄像头和颜色传感器预配置的颜色转换矩阵、颜色均衡处理后的第二颜色矩阵和颜色均衡处理后的子颜色矩阵,确定摄像头和颜色传感器在局部面部区域处的局部差异。
在一个实施例中,上述皮肤检测装置300还包括调整模块,调整模块用于确定第一颜色矩阵中与局部面部区域匹配的子颜色矩阵;当第一颜色矩阵存在深色像素区域,且子颜色矩阵中处于深色像素区域的像素的数量占比超过预设占比,在保持摄像头与颜色传感器间相对位置不变的情况下,调整摄像头和颜色传感器在面罩中的位置,指示执行获取通过面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵的步骤,以及获取通过面罩中的颜色传感器对完整面部区域中的局部面部区域所测量的第二颜色矩阵的步骤。
在一个实施例中,校正模块330还用于获取针对摄像头预配置的差异扩展矩阵;基于差异扩展矩阵,将局部差异扩展至与完整面部区域匹配的完整差异;根据完整差异对第一颜色矩阵进行颜色校正,获得校正颜色矩阵。
在一个实施例中,校正颜色矩阵是RGB颜色模式下的颜色矩阵,皮肤颜色确定模块340还用于确定校正颜色矩阵中属于人脸区域的像素;将属于人脸区域的像素,分别从RGB颜色模式转换到LAB颜色模式下,获得属于人脸区域的像素在LAB颜色模式下各通道的通道像素值;基于属于人脸区域的像素在LAB颜色模式下各通道的通道像素值,确定人脸区域的像素分别在每个通道下的代表像素值;确定每个通道下的代表像素值所匹配的预设像素值范围;根据每个通道下的代表像素值所匹配的预设像素值范围,确定人脸的皮肤颜色。
上述皮肤检测装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于面罩中的处理器中,也可以以软件形式存储于面罩中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种面罩,其内部结构图可以如图4所示。该面罩包括处理器、存储器、输入/输出接口、通信接口、显示单元和输入装置,还包括用于采集人脸的完整面部区域的摄像头和用于采集人脸的局部面部区域的颜色传感器。其中,处理器、存储器和输入/输出接口通过系统总线连接,通信接口、显示单元、输入装置、摄像头和颜色传感器通过输入/输出接口连接到系统总线。其中,该面罩的处理器用于提供计算和控制能力。该面罩的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该面罩的输入/输出接口用于处理器与外部设备之间交换信息。该面罩的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种皮肤检测方法。该面罩的显示单元用于形成视觉可见的画面,可以是显示屏、投影装置或虚拟现实成像装置。显示屏可以是液晶显示屏或者电子墨水显示屏,该面罩的输入装置可以是显示屏上覆盖的触摸层,也可以是面罩外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图4中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的面罩的限定,具体的面罩可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种面罩,包括存储器和处理器,还包括用于采集人脸的完整面部区域的摄像头和用于采集人脸的局部面部区域的颜色传感器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,且相关数据的收集、使用和处理需要符合相关规定。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory,MRAM)、铁电存储器(Ferroelectric Random Access Memory,FRAM)、相变存储器(Phase Change Memory,PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器等。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory,DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等,不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等,不限于此。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请的保护范围应以所附权利要求为准。
Claims (10)
1.一种皮肤检测方法,其特征在于,所述方法包括:
在检测到人脸佩戴面罩的情况下,获取通过所述面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵;
获取通过所述面罩中的颜色传感器对所述完整面部区域中的局部面部区域所测量的第二颜色矩阵;
基于所述第一颜色矩阵和所述第二颜色矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异;
基于所述局部差异对所述第一颜色矩阵进行颜色校正,获得校正颜色矩阵;
根据所述校正颜色矩阵,确定所述人脸的皮肤颜色。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第一颜色矩阵和所述第二颜色矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异,包括:
确定所述第一颜色矩阵中与所述局部面部区域匹配的子颜色矩阵;
基于所述第二颜色矩阵、所述子颜色矩阵和针对所述摄像头和所述颜色传感器预配置的颜色转换矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异。
3.根据权利要求2所述的方法,其特征在于,所述基于所述第二颜色矩阵、所述子颜色矩阵和针对所述摄像头和所述颜色传感器预配置的颜色转换矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异,包括:
当所述第一颜色矩阵存在深色像素区域,且所述子颜色矩阵中处于所述深色像素区域的像素的数量占比超过预设占比,对所述子颜色矩阵和所述第二颜色矩阵各自的像素的颜色值分别进行颜色均衡处理;所述深色像素区域的整体像素颜色,比所述第一颜色矩阵中所述深色像素区域邻域内的整体像素颜色深;
基于针对所述摄像头和所述颜色传感器预配置的所述颜色转换矩阵、颜色均衡处理后的第二颜色矩阵和颜色均衡处理后的子颜色矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定所述第一颜色矩阵中与所述局部面部区域匹配的子颜色矩阵;
当所述第一颜色矩阵存在深色像素区域,且所述子颜色矩阵中处于所述深色像素区域的像素的数量占比超过预设占比,在保持所述摄像头与所述颜色传感器间相对位置不变的情况下,调整所述摄像头和所述颜色传感器在所述面罩中的位置,执行所述获取通过所述面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵的步骤,以及所述获取通过所述面罩中的颜色传感器对所述完整面部区域中的局部面部区域所测量的第二颜色矩阵的步骤。
5.根据权利要求1所述的方法,其特征在于,所述基于所述局部差异对所述第一颜色矩阵进行颜色校正,获得校正颜色矩阵,包括:
获取针对所述摄像头预配置的差异扩展矩阵;
基于所述差异扩展矩阵,将所述局部差异扩展至与所述完整面部区域匹配的完整差异;
根据所述完整差异对所述第一颜色矩阵进行颜色校正,获得校正颜色矩阵。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述校正颜色矩阵是RGB颜色模式下的颜色矩阵,所述根据所述校正颜色矩阵,确定所述人脸的皮肤颜色,包括:
确定所述校正颜色矩阵中属于人脸区域的像素;
将所述属于人脸区域的像素,分别从RGB颜色模式转换到LAB颜色模式下,获得所述属于人脸区域的像素在LAB颜色模式下各通道的通道像素值;
基于所述属于人脸区域的像素在LAB颜色模式下各通道的通道像素值,确定所述人脸区域的像素分别在每个通道下的代表像素值;
确定每个通道下的代表像素值所匹配的预设像素值范围;
根据每个通道下的代表像素值所匹配的预设像素值范围,确定所述人脸的皮肤颜色。
7.一种皮肤检测装置,其特征在于,所述装置包括:
获取模块,用于在检测到人脸佩戴面罩的情况下,获取通过所述面罩中的摄像头对人脸的完整面部区域拍摄后得到的第一颜色矩阵;获取通过所述面罩中的颜色传感器对所述完整面部区域中的局部面部区域所测量的第二颜色矩阵;
局部差异确定模块,用于基于所述第一颜色矩阵和所述第二颜色矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异;
校正模块,用于基于所述局部差异对所述第一颜色矩阵进行颜色校正,获得校正颜色矩阵;
皮肤颜色确定模块,用于根据所述校正颜色矩阵,确定所述人脸的皮肤颜色。
8.根据权利要求7所述的装置,其特征在于,所述局部差异确定模块还用于确定所述第一颜色矩阵中与所述局部面部区域匹配的子颜色矩阵;基于所述第二颜色矩阵、所述子颜色矩阵和针对所述摄像头和所述颜色传感器预配置的颜色转换矩阵,确定所述摄像头和所述颜色传感器在所述局部面部区域处的局部差异。
9.一种面罩,包括存储器和处理器,还包括用于采集人脸的完整面部区域的摄像头和用于采集人脸的局部面部区域的颜色传感器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311632588.8A CN117671037A (zh) | 2023-12-01 | 2023-12-01 | 皮肤检测方法、装置、面罩和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311632588.8A CN117671037A (zh) | 2023-12-01 | 2023-12-01 | 皮肤检测方法、装置、面罩和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117671037A true CN117671037A (zh) | 2024-03-08 |
Family
ID=90069235
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311632588.8A Pending CN117671037A (zh) | 2023-12-01 | 2023-12-01 | 皮肤检测方法、装置、面罩和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117671037A (zh) |
-
2023
- 2023-12-01 CN CN202311632588.8A patent/CN117671037A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Wang et al. | An optimized tongue image color correction scheme | |
US9750326B2 (en) | Transparency evaluation device, transparency evaluation method and transparency evaluation program | |
CN107730446B (zh) | 图像处理方法、装置、计算机设备及计算机可读存储介质 | |
US10638968B2 (en) | Skin gloss evaluation device, skin gloss evaluation method, and skin gloss evaluation program | |
CN107862657A (zh) | 图像处理方法、装置、计算机设备及计算机可读存储介质 | |
CN109152535B (zh) | 皮肤诊断装置和皮肤诊断方法 | |
US20080080766A1 (en) | Apparatus and Method for Analyzing Skin Using L*a*b* Colorspace | |
US20170079599A1 (en) | Moisture feeling evaluation device, moisture feeling evaluation method, and moisture feeling evaluation program | |
CN107911625A (zh) | 测光方法、装置、可读存储介质和计算机设备 | |
CN111062891A (zh) | 图像处理方法、装置、终端及计算机可读存储介质 | |
EP4131065A1 (en) | Skin color detection method and apparatus, terminal and storage medium | |
CN109583330B (zh) | 一种用于人脸照片的毛孔检测方法 | |
CN115065814A (zh) | 屏幕色彩准确度检测方法及装置 | |
Marguier et al. | Assessing human skin color from uncalibrated images | |
CN117671037A (zh) | 皮肤检测方法、装置、面罩和存储介质 | |
WO2023151210A1 (zh) | 图像处理方法、电子设备及计算机可读存储介质 | |
KR101957773B1 (ko) | 영상을 이용한 피부 상태 평가 방법 및 영상을 이용한 피부 상태 평가 장치 | |
TWI729338B (zh) | 皮膚檢測方法及影像處理裝置 | |
US9978144B2 (en) | Biological information measurement apparatus, biological information measurement method, and computer-readable recording medium | |
Benalcazar et al. | Artificial neural networks and digital image processing: An approach for indirect weight measurement | |
CN117392732B (zh) | 肤色检测方法、装置、计算机设备和存储介质 | |
CN116312312B (zh) | 颜色数据的处理方法、光源系统、装置、设备和存储介质 | |
Liu et al. | Preserving image color appearance on non-white projection surfaces | |
US11972632B1 (en) | Apparatus and method of digital enhancement of fingerprint ridges | |
Zhen et al. | Color correction and dynamic range expansion of underwater images based on light field technology |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |