CN114652270A - 皮肤状态检测方法、装置、设备及智能镜、存储介质 - Google Patents
皮肤状态检测方法、装置、设备及智能镜、存储介质 Download PDFInfo
- Publication number
- CN114652270A CN114652270A CN202210265643.3A CN202210265643A CN114652270A CN 114652270 A CN114652270 A CN 114652270A CN 202210265643 A CN202210265643 A CN 202210265643A CN 114652270 A CN114652270 A CN 114652270A
- Authority
- CN
- China
- Prior art keywords
- skin
- detected
- infrared image
- state
- skin state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0062—Arrangements for scanning
- A61B5/0064—Body surface scanning
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10048—Infrared image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Surgery (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Dermatology (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
本申请提供了一种皮肤状态检测方法、装置、设备及智能镜、存储介质,所述皮肤状态检测方法通过获取待检测部位的红外图像,然后对所述红外图像进行分析,基于皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态,再根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。所述皮肤状态检测方法可以检测到所述皮肤具体存在的问题,并且可基于所述红外图像自行分析皮肤状态,无需依赖专业人士,检测方便简单且检测结果更直观。
Description
技术领域
本申请涉及皮肤检测技术领域,尤其涉及一种皮肤状态检测方法、装置、设备及智能镜、存储介质。
背景技术
随着生活水平的提高,人们对自己的皮肤情况越来越关注,对皮肤的了解需求已经完全不满足于肉眼可见的问题,人们希望更加直观明显地看到皮肤更深层的问题,比如长痘的风险、自然光下不可见的斑点,所以诞生了VISIA等类似的多光谱皮肤测试仪器,以帮助人们看到自然光下不可见的、潜在的皮肤问题。
目前主流的皮肤检测途径就是使用多光谱照射面部,但这些方法只能检测到皮肤存在问题,但无法检测到皮肤具体存在的问题,并且仪器的使用需要专业人士操作,用户需要前往专门的机构进行检测,门槛高,不方便日常使用。
发明内容
为解决存在的技术问题,本申请提供了一种操作简单、易于使用的皮肤状态检测方法、装置、设备及智能镜子、存储介质。
一种皮肤状态检测方法,应用于皮肤状态检测设备,包括:
获取待检测部位的红外图像;
对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态;
根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。
一种皮肤状态检测装置,包括:
红外图像获取模块,用于获取待检测部位的红外图像;
皮肤状态分析模块,用于对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态;
可视化处理模块,用于根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。
一种皮肤状态检测设备,包括:
所述处理器在运行所述存储器中存储的计算机程序指令时,执行所述的皮肤状态检测方法的步骤。
一种智能镜,包括:
所述的皮肤状态检测设备;
红外图像模块,用于采集所述待检测部位的红外图像并发送给所述皮肤状态检测设备;
镜面显示模块,用于显示所述皮肤状态可视化的显示数据。
一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程指令;
所述计算机程序指令被处理器执行时,所述的皮肤状态检测方法的步骤。
由上可见,本申请提供的皮肤状态检测方法、装置、设备及智能镜、存储介质,所述皮肤状态检测方法通过获取待检测部位的红外图像,然后对所述红外图像进行分析,基于皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态,再根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。所述皮肤状态检测方法可以检测到所述皮肤具体存在的问题,并且可基于所述红外图像自行分析皮肤状态,无需依赖专业人士,检测方便简单且检测结果更直观。
附图说明
附图仅用于示出实施方式,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1为依据本申请实施例一的皮肤状态检测方法的流程示意图;
图2为依据本申请实施例一的皮肤状态检测方法获得的检测结果示意图;
图3为依据本申请实施例二的皮肤状态检测方法的流程示意图;
图4为依据本申请实施例三的皮肤状态检测方法的流程示意图;
图5为依据本申请实施例四的皮肤状态检测方法的流程示意图;
图6为依据本申请实施例五的皮肤状态检测方法中的皮肤温度与皮肤状态映射模型构建流程示意图;
图7为依据本申请实施例六的皮肤状态检测方法中的皮肤温度与皮肤状态映射模型构建流程示意图;
图8为依据本申请实施例七的皮肤状态检测方法的流程示意图;
图9为依据本申请实施例八的皮肤状态检测方法的流程示意图;
图10为依据本申请实施例八的皮肤状态检测方法获得的检测结果示意图;
图11为依据本申请实施例九的皮肤状态检测装置结构示意图;
图12为依据本申请实施例十的皮肤状态检测设备结构示意图;
图13为依据本申请实施例十一的皮肤状态检测设备结构示意图;
图14为依据本申请实施例十二的智能镜的结构示意图。
具体实施方式
以下结合说明书附图及具体实施例对本申请技术方案做进一步的详细阐述。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中在本申请的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本申请的实现方式。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
在以下的描述中,涉及到“一些实施例”的表述,其描述了可能实施例的子集,但是应当理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
基于现有技术存在的问题,本申请提供了一种应用于皮肤状态检测设备的皮肤状态检测方法,通过皮肤状态检测设备获取待检测部位的红外图像,以对红外图像进行分析,基于红外图像中所包含的所述待检测部位的皮肤温度以及皮肤温度与皮肤状态的映射关系确定所述待检测部位的皮肤状态,并根据皮肤状态和所述待检测部位的皮肤图像,进行可视化处理,最终获得皮肤状态可视化的显示数据。皮肤状态检测方法可以通过待检测部位的成像图像查看皮肤的新陈代谢情况和存在的皮肤问题,如皮肤的易出油区域、色素沉着情况、创口发炎区域等,并可全部由皮肤状态检测设备实现,不需要人的协助,让用户自己就可以完成皮肤的检测。此外,本申请还提供了一种与皮肤状态检测方法对应的皮肤状态检测装置、设备及智能镜、存储介质。下面将结合本申请提供的实施例一至十二以及对应的图1至图14具体阐述本申请提供的皮肤状态检测方法、装置、设备及智能镜、存储介质。
请参阅图1,其为依据本申请实施例一中的皮肤状态检测方法的流程示意图在实施例中,在实施例一中,所述皮肤状态检测方法包括S02、S04及S06。
S02:获取待检测部位的红外图像。
S02可以由图11所示的皮肤状态检测装置中的红外图像获取模块101实现,或者由图12所示的皮肤状态检测设备中的存储器202存储对应的红外图像获取程序,再由图12所示的皮肤状态检测设备中的处理器201在执行所述存储器202存储的红外图像获取程序时实现。
在本申请中,所述待检测部位为人或动物等对象的身体部位,如面部、躯体或其它部位。而所述待检测部位的皮肤是指覆盖在所述待检测部位体表的组织。
红外图像为热红外线图像的简称,又称为热像,是由红外图像模块(如热红外扫描器)接收待检测部位的热辐射而成的图像。因此,红外图像包含了待检测部位的皮肤温度信息,其反应了待检测部位的皮肤温度分布。
所述红外图像可以为集成在皮肤状态检测设备内部的红外图像模块获取,也可以由设置在皮肤状态检测设备外部的红外图像模块获取,然后再将所述红外图像发送至皮肤状态检测设备。所述红外图像模块进一步包括红外采集模块和红外成像模块。在实施例一中,所述待检测部位以人的面部为例,所述红外采集模块用于采集人的红外面部图像信息。所述红外面部图像信息包括原始红外数据,所述原始红外数据为红外采集模块接收人的面部反射的红外辐射并对接收的红外辐射进行处理后获得的红外电信号。所述红外电信号包含了所述面部的皮肤温度信息以及面部的图像信息。所述红外成像模块用于将所述原始红外数据进行成像处理获得所述红外图像。其中,对所述原始红外数据进行成像处理可以但不局限于包括通过温宽拉伸、伪彩映射等图像处理技术生成色彩差异明显的红外图像。在所述红外图像中,不同的温度由不同的色彩呈现。因此,根据所述红外图像的色彩分布便可以获得红外图像的温度分布,所述红外图像的各个色彩分布区即对应为所述待检测部位的皮肤温度分布区。
S04:对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态。
S04可以由图11所示的皮肤状态检测装置中的皮肤状态分析模块102实现,或者由图12所示的皮肤状态检测设备中的存储器202存储对应的皮肤状态分析程序,再由图12所示的皮肤状态检测设备中的处理器201在执行所述存储器202存储的皮肤状态分析程序时实现。
本申请的发明人在研究的过程中认为,皮肤的新陈代谢情况与皮肤温度有直接的必然关联,而所述待检测部位的红外图像实际上为所述待检测部位的皮肤温度分布图像,其包含了所述待检测部位的皮肤温度信息,因此可以对红外图像进行分析,以确定所述红外图像及其所包含的皮肤温度信息,并根据所述皮肤温度与皮肤状态之间的必然关联性,确定所述待检测部位的皮肤状态。在实施例一中,对所述红外图像进行分析是基于皮肤状态检测设备中的数据分析模块实现的,所述数据分析模块包括皮肤状态分析模块。在其它实施例中,所述数据分析模块还用于对所述红外图像进行分析,获得所述待检测部位对应的其它检测结果。如若所述待检测部位的某一个区域对应的皮肤状态为异常皮肤状态时,则根据所述待检测部位的异常皮肤状态确定一个对应的护肤方案。对应的所述护肤方案可以作为检测结果之一。
皮肤温度是皮肤皮层状态的一个具象化反应,通过皮肤温度可以判断皮肤的新陈代谢情况,进而判断皮肤状态的好坏,例如易出油区域容易出现长痘、毛孔粗大等问题,均为皮肤状态的反应,这样就建立了皮肤温度和皮肤问题的映射,通过红外成像图把皮肤温度以图像的形式体现,再将红外成像图建立与皮肤状态的映射,这样就可以通过红外成像图判断皮肤的情况。其中,所述皮肤状态可以如,皮肤新陈代谢情况、易出油区域、色素沉着情况等。所述皮肤温度与皮肤状态之间的映射关系可以为映射表,也可以为皮肤温度与皮肤状态映射模型。
S06:根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。
S06可以由图11所示的皮肤状态检测装置中的可视化处理模块103实现,或者由图12所示的皮肤状态检测设备中的存储器202存储对应的可视化处理程序,再由图12所示的皮肤状态检测设备中的处理器201在执行所述存储器202存储的可视化处理程序时实现。
根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理包括对各个区域的皮肤状态做可视化处理,获得对应的显示数据,根据所述显示数据,用户可以直观知晓待检测部位的皮肤状态信息;以及包括根据所述各个区域的皮肤状态对所述待检测部位的图像进行可视化处理,以获得可以直观显示皮肤状态分布(如异常皮肤状态分布)的图像显示数据。因此,所述皮肤状态检测设备内部还设置有可视化处理模块,所述可视化处理模块用于将上述数据分析模块所获得的分析结果进行可视化处理,以获得供用户直观观察皮肤状态检测结果的显示数据。在一些实施例中,所述显示数据包括图像数据和文字数据。例如,依据实施例一提供的所述皮肤状态检测方法获得的检测结果如图2所示,所述显示数据包括所述待检测部位的图像和所述待检测部位的皮肤状态信息,如图2中显示的代谢情况、肤色均匀度以及水油平衡度等,所述显示数据还包括用于标记所述待检测部位的图像对应的问题皮肤区域的标记信息,如易出油区域或创口区域等。通过依据本申请实施例提供的所述皮肤状态检测方法获得显示数据,用户可以直观的了解自身的皮肤状态。在一些实施例中,图2中的所述待检测部位的图像可以为具有伪彩映射后红外图像,不同的温度区域对应的颜色不同,更能提高直观性。
由上可见,实施例一提供的皮肤状态检测方法通过获取待检测部位的红外图像,然后对所述红外图像进行分析,基于皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态,再根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。所述皮肤状态检测方法可以检测到所述皮肤具体存在的问题,并且可基于所述红外图像自行分析皮肤状态,无需依赖专业人士,检测方便简单且检测结果更直观。
在一些实施例中,S06中的所述待检测部位的图像为S02中的所述红外图像。因此,可以通过红外摄像装置获取所述待检测部位的所述红外图像,不仅可以获得所述待检测部位皮肤的温度分布信息还能获得所述待检测部位的轮廓图像信息,因此可基于温度与皮肤状态的映射关系,直接将所述待检测部位的皮肤状态信息直接映射到所述红外图像上,便于用户直观的感受到自己的皮肤状态。此外,即便是在光线不良的使用情况下,用户也可以通过所述红外图像清楚的获取所述待检测部位的轮廓信息,进而随时随地的了解自身皮肤状态。在其它一些实施例中,S06中的所述待检测部位的图像也可以为可见光图像或红外光图像与可见光图像的融合图像或其它任何可以显示所述待检测部位轮廓的信息。请参阅图3所示,其为依据本申请实施例二的皮肤状态检测方法的流程示意图。实施例二与实施例一基本相同,但是在实施例二中,对S04做了进一步的限定,S04:对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态,包括S041a及S042a。
S041a:对所述红外图像进行分析,确定所述待检测部位中的各个温度分布区域。
S042a:根据各个所述温度分布区域的温度以及所述皮肤温度与皮肤状态的映射关系,确定各个所述温度分布区域对应的皮肤状态。
所述红外图像为包含所述待检测部位的皮肤温度信息和所述待检测部位的图像信息的图像,其实质上是温度图像。根据所述红外图像,可以确定所述待检测部位的各个区域的温度分布,即根据所述红外图像可以确定所述待检测部位的各个温度分布区域的温度大小信息和位置信息。
然后进一步根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位的各个温度分布区域对应的皮肤状态,从而确定待检测部位的皮肤状态分布。所述皮肤状态分布包括皮肤状态类型和各个皮肤状态类型在所述待检测部位上的位置分布。其中,实施例二中所述的皮肤温度与皮肤状态的映射关系可以为映射表也可以为对应的基于深度学习的映射模型。
进一步的,在实施例三中,SO6:根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据,具体为:根据所述各个温度分布区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。
请参阅图4所示,其为依据本申请实施例三的皮肤状态检测方法的流程示意图。实施例三与实施例二基本相同,不同的是,在实施例三中,S04:所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态,包括:将所述红外图像输入至皮肤温度与皮肤状态映射模型,通过所述皮肤温度与皮肤状态映射模型确定所述红外图像中各个温度分布区域对应的皮肤状态。显然,实施例三与实施例二中,对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位的皮肤状态的具体实现方法不同。在实施例二中,是先根据红外图像确定所述待检测部位的皮肤温度分布信息,然后再对皮肤温度分布信息进行分析,如将皮肤温度分布信息输入至皮肤温度与皮肤状态映射模型中,该映射模型根据皮肤温度分布信息中的温度大小信息和位置信息确定所述待检测部位的皮肤状态分布。而在实施例三中,是直接将红外图像输入至皮肤温度与皮肤状态映射模型中,由该映射模型根据红外图像分析所述待检测部位对应的皮肤温度分布,再将皮肤温度与皮肤状态映射,从而确定红外图像对应的皮肤状态,即确定红外图像与皮肤状态之间的映射。
请参阅图5所示,其为依据本申请实施例四的皮肤状态检测方法的流程示意图。在实施例四中与实施例三基本相同,但是实施例四中,对S03做了进一步限定,即在S04:将所述红外图像输入至皮肤温度与皮肤状态映射模型,通过所述皮肤温度与皮肤状态映射模型确定所述红外图像中各个温度分布区域对应的皮肤状态之前,所述皮肤状态检测方法还包括S03:根据标定有皮肤状态的所述待检测部位的红外图像样本确定的样本集对深度学习模型进行训练,获得所述皮肤温度与皮肤状态映射模型。基于标定有对应的皮肤状态的待检测部位红外图像作为深度学习模型的训练样本集,可获得鲁棒性强的皮肤温度与皮肤状态映射模型,有利于提高皮肤状态检测的精准度。
请参阅图6所示,其为依据本申请实施例五的皮肤状态检测方法中的皮肤温度与皮肤状态映射模型构建流程示意图。在实施例五中,S03:根据标定有皮肤状态的所述待检测部位的红外图像样本确定的样本集对深度学习模型进行训练,获得所述皮肤温度与皮肤状态映射模型,进一步包括S032、S034及S036。
S032:获取数据集,所述数据集包括不同对象在各个不同时间阶段、不同地点以及不同环境下对应的所述待检测部位的红外图像样本。
在实施例五中,所述待检测部位以人脸为例。获取所述数据集具体包括获取同一个人在一天中不同时间段的人脸红外图像,以及获取该人在春夏秋冬不同季节的人脸红外图像,如此在不同地区获取不同人的人脸红外图像,并记录获取所述红外图像当天的环境信息,如温度、湿度、天气等,将所有获取的数据构成所述数据集。
S034:对所述数据集中所述红外图像样本的不同温度分布区域对应的皮肤状态进行标定,获得样本集。
将获取的所述数据集中的各数据整理好,在所述数据集中的人脸红外图像上标定出该红外图像上各皮肤区域对应的皮肤状态,包括但不限于新陈代谢、出油程度、色素沉着、创口程度等以及圈定存在皮肤问题的区域,包括但不限于易出油区域、创口区域等,以获得方便机器进行深度学习的样本集。具体的,根据皮肤温度与皮肤状态的映射关系在所述红外图像上标定对应的皮肤状态。
S036:根据所述样本集对深度学习模型进行训练,获得所述皮肤温度与皮肤状态映射模型。
所述样本集中的标定皮肤状态的人脸红外图像中,包括了皮肤温度与对应的皮肤状态,即含皮肤温度与皮肤状态映射信息,因此,深度学习模型在训练的过程中,可以学习标定的人脸红外图像中皮肤温度与皮肤状态之间的映射关系,训练完成后便可获得皮肤温度与皮肤状态映射模型。
请参阅图7所示,其为依据本申请实施例六的皮肤状态检测方法中的皮肤温度与皮肤状态映射模型构建流程示意图。实施例六与实施例五基本相同,不同的是,在实施例六中,S036:根据所述样本集对深度学习模型进行训练,获得所述皮肤温度与皮肤状态映射模型,包括:将所述样本集中的标定由皮肤状态的所述红外图像样本导入至深度学习模型进行训练,所述深度学习模型基于自注意力机制学习策略学习所述待检测部位的皮肤温度与皮肤状态的自相关性,获得所述皮肤温度与皮肤状态映射模型。
在确定所述样本集后,导入标定好的人脸红外图像,通过transformer结构利用自注意力机制策略学习人脸皮肤温度与皮肤状态的自相关性,根据所述数据集中不同时间段不同地点不同对象的人脸红外图像,对所设计的编解码深度学习模型进行泛化能力增强,从而建立一个鲁棒性较强皮肤温度与皮肤状态映射模型。
请参阅图8所示,其为依据本申请实施例七的皮肤状态检测方法的流程示意图。实施例七与实施例一基本相同,但是在实施例七中,对S06进行了进一步限定,即S06:所述根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据,包括:根据所述各个区域的皮肤状态,采用文字、图形或颜色中至少之一对所述待检测部位的图像中对应的区域的进行标注,获得皮肤状态可视化的图像显示数据。
所述皮肤状态检测设备中的可视化数据分析模块用于分析数据分析模块的的分析结果。其中,所述数据分析模块包括皮肤状态分析模块,所述分析结果包括所述待检测部位中各个区域的皮肤状态,所述分析结果还包括与皮肤状态成映射关系的待检测部位的图像。因此,在S06中,所述可视化处理模块对所述待检测部位的皮肤状态和映射有皮肤状态的待检测部位的图像进行可视化处理。通过文字、图像或颜色中的至少一种对所述待检测部位的图像进行标注以及描述所述待检测部位的皮肤状态信息。例如,在所述待检测部位的图像上标注各个区域对应的皮肤状态,或仅标注存在皮肤问题的皮肤状态,如圈出易出油区域,圈出创口正在发炎的区域等。还如,将所述待检测部位的图像所在的显示框内显示所述待检测部位的皮肤状态信息,以直观描述皮肤状态和问题,供用户直观清楚的了解检测的皮肤健康情况。
请参阅图9所示,其为依据本申请实施例八的皮肤状态检测方法的流程示意图。在实施例八基本相同,不同的是,在实施例八中,在S04:对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态之后,所述皮肤状态检测方法还包括S05:对所述红外图像进行分析,根据所述待检测部位各个区域的皮肤状态以及皮肤状态与护肤方案的映射关系,确定所述待检测部位对应的护肤方案。如图10所示,其为依据本申请实施例八提供的所述皮肤状态检测方法所获得检测结果(显示数据),与图2不同的是,图10中还进一步显示了问题皮肤区域的护肤建议,不同的问题皮肤区域对应不同的护肤建议,如易油性区域对应的护肤建议为选择保湿补水型的护肤品,而创口区域的护肤建议则为保持伤口清洁卫生,减少感染。
则进一步的,S06:根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据,包括:根据所述各个区域的皮肤状态、所述对应的护肤方案和所述待检测部位的图像进行可视化处理,得到皮肤状态和护肤方案可视化的显示数据。
通过皮肤温度可以判断皮肤的新陈代谢情况,进而判断皮肤状态的好坏,例如易出油区域容易出现长痘、毛孔粗大等问题,均为皮肤状态的反应,这样就建立了皮肤温度和皮肤问题的映射,由于红外成像图把皮肤温度以图像的形式体现,因而可建立红外成像图与皮肤状态的映射,这样就可以通过待检测部位的红外图像判断皮肤的情况,比如,皮肤新陈代谢情况,易出油区域,色素沉着情况等,用户可以根据皮肤状态有针对性地采取措施,比如皮质分泌旺盛的区域长痘的风险更大可以着重护理,存在炎症的区域可以有针对性的使用舒缓炎症的药物,并且可以通过系统持续观察皮肤情况,掌握皮肤状态变化趋势。
因此,不同的皮肤状态可以对应不同的护肤策略,在确定所述待检测部位的红外图像与皮肤状态之间的映射关系后,可进一步根据皮肤状态与护肤方案之间的映射关系,确定红外图像-皮肤状态-护肤方案之间的映射关系,即根据所述待检测部位的红外图像,便可获得对应的皮肤状态以及护肤方案。则在S06进行可视化处理的过程中,还需要根据对应的护肤方案进行可视化处理,即根据红外图像-皮肤状态-护肤方案之间的映射关系对所述待检测部位的图像进行可视化处理,以在所述待检测部位的图像所显示的框内显示皮肤状态信息和对应的护肤方案信息,以及对所述待检测部位的图像对应的区域标记存在问题皮肤状态。因此,所述数据分析模块还包括根据所述红外图像进行分析,获得所述待检测部位的皮肤状态以及根据所述皮肤状态推荐的护肤方案。
实现所述皮肤状态检测方法的皮肤状态检测设备还设置有显示模块,所述显示模块用于显示可视化的显示数据,包括图像数据和文字数据等,即所述显示模块用于输出分析结果和经过处理的红外图像,通过某种屏幕,皮肤的分析结果可视化直观的显示,比如输出的红外图像上圈出有问题的区域,也可以做文字描述,方便用户理解,并且可以针对用户的皮肤问题推荐相应的护肤方案。所述显示模块也可以为所述皮肤状态检测设备之外的模块,所述皮肤状态检测设备获得所述显示数据后,再发送给所述显示模块,以供所述显示模块显示。
请参阅图11所示,其为依据本申请实施例九的皮肤状态检测装置结构示意图。在实施例九中,所述皮肤状态检测装置包括红外图像获取模块101、皮肤状态分析模块102和可视化处理模块103。其中,红外图像获取模块101,用于获取待检测部位的红外图像;皮肤状态分析模块102,用于对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态;可视化处理模块103,用于根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。
请参阅图12所示,其为依据本申请实施例十的皮肤状态检测设备结构示意图。在实施例十中,皮肤状态检测设备包括存储器202及处理器201。所述处理器201在运行所述存储器202中存储的计算机程序指令时,执行依据本申请任意一实施例中所述的皮肤状态检测方法的步骤。
请参阅图13所示,其为依据本申请实施例十一的皮肤状态检测设备结构示意图。在实施例十一中,皮肤状态检测设备包括:红外采集模块210、红外成像模块220、数据分析模块310、可视化处理模块320以及显示模块400。
所述红外采集模块210,用于采集所述待检测部位的原始红外数据,并发送给所述红外成像模块220。
所述红外成像模块220,用于将所述原始红外图像数据进行温宽拉伸、伪彩映射等获得所述待检测部位的红外图像。
所述数据分析模块310,用于对所述红外图像进行分析,根据所述红外图像确定所述待检测部位的皮肤状态以及所述皮肤状态与所述红外图像的映射关系,还进一步的根据所述皮肤状态与护肤方案之间的映射关系,确定所述红外图像-皮肤状态-护肤方案之间的映射关系。
所述可视化处理模块320,对所述数据分析模块的分析结果进行可视化处理,所述分析结果包括所述红外图像与所述皮肤状态之间的映射关系或所述红外图像-皮肤状态-护肤方案之间的映射关系,对所述待检测部位的图像进行可视化处理,获得皮肤状态或皮肤状态与护肤方案可视化的显示数据,所述显示数据包括图像数据和文字数据。
所述显示模块400,用于显示所述可视化的显示数据,包括可视化的所述待检测部位的图像、皮肤状态信息、护肤方案信息。
所述红外成像模块220、数据分析模块310和所述可视化处理模块320均属于实施例十中的处理器201中的各个处理模块。
在一些实施例中,所述红外采集模块210和/或显示模块400可集成在所述皮肤状态检测设备内部,也可以为与所述皮肤状态检测设备具有通信连接设置在所述皮肤状态检测设备外部的模块。
请参阅图14所示,其为依据本申请实施例十二的智能镜结构示意图。在实施例十二中,所述智能镜包括依据本申请实施例十提供的皮肤状态检测设备300、红外图像模块200和镜面显示模块400。所述红外图像模块200用于采集所述待检测部位的红外图像并发送给所述皮肤状态检测设备300,所述镜面显示模块400,用于显示所述皮肤状态可视化的显示数据。还包括开关模块500,用于控制所述智能镜的开关机状态。在所述智能镜开机时,所述智能镜采集用户的待检测部位红外图像,然后对其进行分析,以确定所述待检测部位的皮肤状态或皮肤状态与对应的护肤方案,并可视化分析结果以及显示可视化的显示数据于所述镜面显示模块400。在所述智能镜关机时,所述镜面显示模块400充当镜子作用。
此外,在所述智能镜中还可以集成其他的多光谱,以及在所述智能镜中嵌入操作系统,这样,所述智能镜还可以当作平板来使用。本申请提供的带有皮肤检测功能的智能镜,解决了人们做皮肤检测只能前往专业机构的问题,使用该产品就可以实现在家随时监控自己的皮肤状态。
此外,本申请还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程指令;所述计算机程序指令被处理器执行时,实现依据本申请任意一实施例提供的项所述的皮肤状态检测方法的步骤。
上述处理器可能是CPU(中央处理器,Central Processing Unit),或者是ASIC(特殊应用集成电路,Application Specific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路。运动目标的检测设备包括的一个或多个处理器,可以是同一类型的处理器,如一个或多个CPU;也可以是不同类型的处理器,如一个或多个CPU以及一个或多个ASIC。
上述存储器可能包含高速RAM(随机存取存储器,Random Access Memory),也可能还包括NVM(非易失性存储器,Non-Volatile Memory),例如至少一个磁盘存储器。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围之内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (13)
1.一种皮肤状态检测方法,应用于皮肤状态检测设备,其特征在于,包括:
获取待检测部位的红外图像;
对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态;
根据所述各个区域的皮肤状态和待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。
2.根据权利要求1所述的皮肤状态检测方法,其特征在于,所述对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态,包括:
对所述红外图像进行分析,确定所述待检测部位中的各个温度分布区域;
根据各个所述温度分布区域的温度以及所述皮肤温度与皮肤状态的映射关系,确定各个所述温度分布区域对应的皮肤状态。
3.根据权利要求1所述的皮肤状态检测方法,其特征在于,所述对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态,包括:
将所述红外图像输入至皮肤温度与皮肤状态映射模型,通过所述皮肤温度与皮肤状态映射模型确定所述红外图像中各个温度分布区域对应的皮肤状态。
4.根据权利要求3所述的皮肤状态检测方法,其特征在于,在所述将所述红外图像输入至皮肤温度与皮肤状态映射模型,通过所述皮肤温度与皮肤状态映射模型确定所述红外图像中各个温度分布区域对应的皮肤状态之前,所述皮肤状态检测方法还包括:
根据由标定有皮肤状态的所述待检测部位的红外图像样本确定的样本集对深度学习模型进行训练,获得所述皮肤温度与皮肤状态映射模型。
5.根据权利要求4所述的皮肤状态检测方法,其特征在于,所述根据标定有皮肤状态的所述待检测部位的红外图像样本确定的样本集对深度学习模型进行训练,获得所述皮肤温度与皮肤状态映射模型,包括:
获取数据集,所述数据集包括不同对象在各个不同时间阶段、不同地点以及不同环境下对应的所述待检测部位的红外图像样本;
对所述数据集中所述红外图像样本的不同温度分布区域对应的皮肤状态进行标定,获得样本集;
根据所述样本集对深度学习模型进行训练,获得所述皮肤温度与皮肤状态映射模型。
6.根据权利要求5所述的皮肤状态检测方法,其特征在于,所述根据所述样本集对深度学习模型进行训练,获得所述皮肤温度与皮肤状态映射模型,包括:
将所述样本集中的标定有皮肤状态的所述红外图像样本导入至深度学习模型进行训练,所述深度学习模型基于自注意力机制学习策略学习所述待检测部位的皮肤温度与皮肤状态的自相关性,获得所述皮肤温度与皮肤状态映射模型。
7.根据权利要求1所述的皮肤状态检测方法,其特征在于,所述根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据,包括:
根据所述各个区域的皮肤状态,采用文字、图形或颜色中至少之一对所述待检测部位的图像中对应的区域进行标注,获得皮肤状态可视化的图像显示数据。
8.根据权利要求1所述的皮肤状态检测方法,其特征在于,在对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态之后,所述皮肤状态检测方法还包括:
对所述红外图像进行分析,根据所述待检测部位各个区域的皮肤状态以及皮肤状态与护肤方案的映射关系,确定所述待检测部位对应的护肤方案;
则所述根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据,包括:
根据所述各个区域的皮肤状态、所述对应的护肤方案和所述待检测部位的图像进行可视化处理,得到皮肤状态和护肤方案可视化的显示数据。
9.根据权利要求1至6中任一项所述的皮肤状态检测方法,其特征在于,根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据,包括:
根据所述各个区域的皮肤状态和所述红外图像进行可视化处理,得到皮肤状态可视化的显示数据。
10.一种皮肤状态检测装置,其特征在于,包括:
红外图像获取模块,用于获取待检测部位的红外图像;
皮肤状态分析模块,用于对所述红外图像进行分析,根据皮肤温度与皮肤状态的映射关系,确定所述待检测部位各个区域的皮肤状态;
可视化处理模块,用于根据所述各个区域的皮肤状态和所述待检测部位的图像进行可视化处理,得到皮肤状态可视化的显示数据。
11.一种皮肤状态检测设备,其特征在于,包括:
所述处理器在运行所述存储器中存储的计算机程序指令时,执行权利要求1至9中任意一项所述的皮肤状态检测方法的步骤。
12.一种智能镜,其特征在于,包括:
如权利要求11所述的皮肤状态检测设备;
红外图像模块,用于采集所述待检测部位的红外图像并发送给所述皮肤状态检测设备;
镜面显示模块,用于显示所述皮肤状态可视化的显示数据。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程指令;
所述计算机程序指令被处理器执行时,实现权利要求1至9中任意一项所述的皮肤状态检测方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210265643.3A CN114652270A (zh) | 2022-03-17 | 2022-03-17 | 皮肤状态检测方法、装置、设备及智能镜、存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210265643.3A CN114652270A (zh) | 2022-03-17 | 2022-03-17 | 皮肤状态检测方法、装置、设备及智能镜、存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114652270A true CN114652270A (zh) | 2022-06-24 |
Family
ID=82029236
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210265643.3A Pending CN114652270A (zh) | 2022-03-17 | 2022-03-17 | 皮肤状态检测方法、装置、设备及智能镜、存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114652270A (zh) |
-
2022
- 2022-03-17 CN CN202210265643.3A patent/CN114652270A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114502061A (zh) | 使用深度学习的基于图像的自动皮肤诊断 | |
US20150223749A1 (en) | Skin condition evaluation apparatus and skin condition evaluation method using the same | |
US20140316235A1 (en) | Skin imaging and applications | |
Everett et al. | Making sense of skin color in clinical care | |
RU2657377C2 (ru) | Интеллектуальная насадка на смартфон для определения чистоты, влажности и фотовозраста кожи | |
CN108597604A (zh) | 一种基于云数据库的色素障碍性皮肤病分类专家系统 | |
TWI452998B (zh) | System and method for establishing and analyzing skin parameters using digital image multi-area analysis | |
KR20090097904A (ko) | 피부 이미징을 위한 시스템, 디바이스 및 방법 | |
Hasan et al. | Smartphone-based human hemoglobin level measurement analyzing pixel intensity of a fingertip video on different color spaces | |
KR102180922B1 (ko) | 멀티모달 센서 어셈블리를 포함하는 분산형 엣지 컴퓨팅 기반 피부 질환 분석 디바이스 | |
KR102036040B1 (ko) | 광학식 피부질환 진단장치 | |
KR102162683B1 (ko) | 비정형 피부질환 영상데이터를 활용한 판독보조장치 | |
Ahmad Fadzil et al. | Objective assessment of psoriasis erythema for PASI scoring | |
JP4071891B2 (ja) | 毛髪診断システム | |
KR20200045679A (ko) | 노화방지 및 피부상태 측정과 미용케어를 위한 통합 플랫폼 관리시스템 | |
Hsu | A customer-oriented skin detection and care system in telemedicine applications | |
US20190371004A1 (en) | System and method for determining skin color, method for generating icc profile, and image capturing device | |
KR20150143063A (ko) | 피부 진단 장치 | |
US11688068B2 (en) | Methods and systems for monitoring skin related metrics | |
Cook et al. | Initial validation of a new device for facial skin analysis | |
Huang et al. | A cloud-based intelligent skin and scalp analysis system | |
US11213256B2 (en) | Biological image processing method and biological information detection device | |
CN114652270A (zh) | 皮肤状态检测方法、装置、设备及智能镜、存储介质 | |
JP2016174728A (ja) | 診断装置並びに当該診断装置における画像処理方法、画像処理システム及びそのプログラム | |
JP3772104B2 (ja) | 皮膚状態測定装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |