CN102479322A - 以具有角度的脸部影像分析脸部缺陷的系统、装置及方法 - Google Patents

以具有角度的脸部影像分析脸部缺陷的系统、装置及方法 Download PDF

Info

Publication number
CN102479322A
CN102479322A CN201010569749XA CN201010569749A CN102479322A CN 102479322 A CN102479322 A CN 102479322A CN 201010569749X A CN201010569749X A CN 201010569749XA CN 201010569749 A CN201010569749 A CN 201010569749A CN 102479322 A CN102479322 A CN 102479322A
Authority
CN
China
Prior art keywords
face
image
angle
skin defect
condition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201010569749XA
Other languages
English (en)
Inventor
张传育
詹宝珠
李尚宸
利佳欣
郭瑞意
廖恒毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute for Information Industry
Original Assignee
Institute for Information Industry
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute for Information Industry filed Critical Institute for Information Industry
Priority to CN201010569749XA priority Critical patent/CN102479322A/zh
Publication of CN102479322A publication Critical patent/CN102479322A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明是有关于一种以具有角度的脸部影像分析脸部缺陷的系统、装置及方法。该系统包括一储存模块、一影像角度侦测模块、一特征界定模块与皮肤分析模块。储存模块储存有至少一具有角度的脸部影像、至少一皮肤缺陷条件与多个多角度的脸部特征条件的至少其一。影像角度侦测模块侦测具有角度的脸部影像的一角度。特征界定模块根据脸部特征条件分析该具有角度的脸部影像,以取得至少一脸皮区域影像。皮肤分析模块则利用一皮肤缺陷条件判定至少一脸皮区域影像是否存在至少一皮肤缺陷影像,当存在时,标记该至少一脸皮区域影像的该至少一皮肤缺陷影像。

Description

以具有角度的脸部影像分析脸部缺陷的系统、装置及方法
技术领域
本发明涉及一种以具有角度的脸部影像进行脸部缺陷分析系统、装置及方法,特别是涉及一种适用于远距离美容医疗系统、使用一般摄影机所拍摄的具有角度的脸部影像、可分析出脸部皮肤缺陷及其位置的脸部缺陷的分析系统、装置及方法。
背景技术
先前技术中,病患欲进行脸部美容时,要前往医疗美容机构,由专业的医师协助医治其脸部皮肤。医疗期间,医师先利用照相机或摄影机等拍摄装置拍摄病患脸部,以取得病患脸部各部位的照片或影像,从中选出呈现皮肤皱纹、斑点与痘疤等皮肤缺陷影像的照片或影像。若为实体的照片,则可利用签字笔或其它有色笔在实体照片上圈选呈现皮肤缺陷影像的部位;若为数字影像,则利用光笔在操作介面上的显示画面上圈选呈现皮肤缺陷影像的部位,或利用相关操作介面的标示功能,直接于显示画面上圈选呈现皮肤缺陷影像的部位。之后医师与病患双方再评估与讨论需要进行皮肤美容与治疗的部位。
然而此模式对医师与病患而言,需花费较多的时间成本与人力成本,包括医师判断皮肤缺陷部位的人工作业及时间,更甚至,医师对病患进行医疗流程建议、术后预测评估与制作预测结果影像的人工作业及时间。因此,医师与病患逐渐利用远距离美容/医疗系统来进行沟通和评估。例如,病患可自行拍摄脸部照片/影像传送到医师端,医师可观看病患的脸部照片/影像后进行评估,以加快脸部美容医疗的判断与治疗流程,降低医师与病患的负担。
再者,现有习知技术中也提出有脸部缺陷分析系统,可自动分析脸部照片/影像,找出脸部照片/影像中的缺陷并进行标示,例如皱纹、斑点、痘疤等,让医师可快速地判断并提出建议。更进一步时,医师还可将建议的美容医疗方式输入,由脸部缺陷分析系统来模拟患者在进行美容医疗之后的脸部状况,以供患者评估是否接受医师建议和进行美容医疗。
然而,现有习知的脸部缺陷分析系统,因其必须事先建立脸部特征资料库,再将患者所上传的脸部照片/影像进行比对。由于现有习知技术多使用正脸照片(亦即脸部上下、或左右斜度未超过15度的照片)来分析,以获得清楚的脸部特征,如完整的眉毛、眼睛、鼻子、嘴唇、脸型等五官形状或特征点。但是,一般患者在拍摄脸部照片时,往往未必拍摄到符合正脸条件的照片/影像,或者是必须转动脸部到某个角度,才能够清楚拍摄出其脸部缺陷之处。由于现有习知的脸部缺陷分析系统,对于具有角度的脸部照片/影像,往往无法辨识出其脸部特征,因此产生判读失败,更无法进行脸部缺陷分析,同时还会产生很多的问题,例如,患者提供脸部照片/影像受到很多限制,当脸部照片/影像有角度时分析结果相当不准确甚至无法进行分析。
由此可见,上述现有的脸部缺陷分析技术在产品结构、方法与使用上,显然仍存在有不便与缺陷,而亟待加以进一步改进。为了解决上述存在的问题,相关厂商莫不费尽心思来谋求解决之道,但长久以来一直未见适用的设计被发展完成,而一般产品及方法又没有适切的结构及方法能够解决上述问题,此显然是相关业者急欲解决的问题。因此如何能创设一种新的以具有角度的脸部影像分析脸部缺陷的系统、装置及方法,实属当前重要研发课题之一,亦成为当前业界极需改进的目标。
发明内容
本发明的目的在于,克服现有的习知技术中脸部缺陷分析技术中,无法辨识和分析具有角度的脸部照片/影像的问题,而提供一种新的以具有角度的脸部影像分析脸部缺陷的系统、装置及方法,所要解决的技术问题是使其通过预存一个以上皮肤缺陷条件与多个多角度的脸部特征条件,可以利用多角度的脸部特征条件迅速的取得相关的脸皮区域影像,并藉由具有角度的脸部影像的角度分析,以进行皮肤缺陷判定作业,从而利用皮肤缺陷条件不但能自动判定出脸皮区域影像是否有皮肤缺陷影像的存在,而且还能够更进一步判定出皮肤缺陷影像所显示的皮肤缺陷种类,有益协助医师进行皮肤缺陷判定作业,并大幅降低皮肤缺陷种类判定的作业时间,非常适于实用。
本发明的目的及解决其技术问题是采用以下技术方案来实现的。依据本发明提出的一种以具有角度的脸部影像分析脸部缺陷的方法,适用于一电子设备,该电子设备至少包含一储存模块以储存多个多角度的脸部特征条件及至少一皮肤缺陷条件,该方法包括以下步骤:取得一具有角度的脸部影像;侦测该具有角度的脸部影像的一角度;依据该角度及该多个多角度的脸部特征条件的至少其一,分析该具有角度的脸部影像以取得至少一脸皮区域影像;利用该至少一皮肤缺陷条件分析该至少一脸皮区域影像;判定是否存在至少一皮肤缺陷影像;以及当存在该至少一皮肤缺陷影像时,标记该至少一脸皮区域影像的该至少一皮肤缺陷影像。
本发明的目的及解决其技术问题还可采用以下技术措施进一步实现。
前述的以具有角度的脸部影像分析脸部缺陷的方法,其中更包括:经由一影像撷取模块,撷取一使用者的脸部以形成该具角度的脸部影像,且电性耦接至该储存模块,以将该具有角度的脸部影像传送到该储存模块储存。
前述的以具有角度的脸部影像分析脸部缺陷的方法,其中更包括:将每一脸皮区域影像,依据该角度,分别将该脸皮区域影像分割成多个侦测区块。
前述的以具有角度的脸部影像分析脸部缺陷的方法,其中该些侦测区块为一额头区块、一右眼尾区块、一鼻梁区块、一左眼尾区块、一右颧骨区块、一鼻头区块、一左颧骨区块、一右脸颊区块及一左脸颊区块的至少其一。
前述的以具有角度的脸部影像分析脸部缺陷的方法,其中所述的皮肤缺陷条件包括一皱纹分析条件、一斑点分析条件及一痘疤分析条件其中的一者。
前述的以具有角度的脸部影像分析脸部缺陷的方法,其中所述的痘疤分析条件是将多个痘疤图案样本导入一类神经网络,以进行样本判定训练所产生。
前述的以具有角度的脸部影像分析脸部缺陷的方法,其中在该侦测该具有角度的脸部影像的一角度的步骤后,更依据该角度将该具有角度的脸部影像划分成多个侦测区块。
前述的以具有角度的脸部影像分析脸部缺陷的方法,其中更包括一显示模块,用以显示该具有角度的脸部影像及标记该皮肤缺陷的影像。
前述的以具有角度的脸部影像分析脸部缺陷的方法,其中所述的储存模块更包括用以储存至少一建议资料以对应该至少一皮肤缺陷条件,且该方法更包括:依据标记的皮肤缺陷影像及其所利用来进行判定的皮肤缺陷条件,产生对应的建议资料。
本发明的目的及解决其技术问题还采用以下技术方案来实现。依据本发明提出的一种以具有角度的脸部影像分析脸部缺陷的系统,其包括:一储存模块,用以储存至少一具有角度的脸部影像、至少一皮肤缺陷条件与多个多角度的脸部特征条件的至少其一;一影像角度侦测模块,电性耦接至该储存模块,用以侦测该具有角度的脸部影像的一角度;一特征界定模块,电性耦接至该储存模块及该影像角度侦测模块,用以根据该些脸部特征条件分析该具有角度的脸部影像,以取得至少一脸皮区域影像;以及一皮肤分析模块,电性耦接至该储存模块及该特征界定模块,用以利用该至少一皮肤缺陷条件判定该至少一脸皮区域影像是否存在至少一皮肤缺陷影像,当存在时,标记该至少一脸皮区域影像的该至少一皮肤缺陷影像。
本发明的目的及解决其技术问题还可采用以下技术措施进一步实现。
前述的以具有角度的脸部影像分析脸部缺陷的系统,更包括提供一影像撷取模块,以撷取一使用者的脸部以形成该具有角度的脸部影像,且电性耦接至该储存模块,以将该具有角度脸部影像传送到该储存模块储存。
前述的以具有角度的脸部影像分析脸部缺陷的系统,其中所述的特征界定模块更包括依据该角度,分别将每一脸皮区域影像分割成多个侦测区块。
前述的以具有角度的脸部影像分析脸部缺陷的系统,其中该些侦测区块为一额头区块、一右眼尾区块、一鼻梁区块、一左眼尾区块、一右颧骨区块、一鼻头区块、一左颧骨区块、一右脸颊区块及一左脸颊区块的至少其一,该特征界定模块是找出该具有角度的脸部影像中相异于该些多角度的脸部特征条件的至少一侦测区块。
前述的以具有角度的脸部影像分析脸部缺陷的系统,其中所述的皮肤缺陷条件包括一皱纹分析条件、一斑点分析条件及一痘疤分析条件其中的一者。
前述的以具有角度的脸部影像分析脸部缺陷的系统,其中所述的痘疤判定法则为多个痘疤图案样本导入一类神经网络,以进行样本判定训练所产生。
前述的以具有角度的脸部影像分析脸部缺陷的系统,更包括一显示模块,以显示该具有角度的脸部影像及标记该皮肤缺陷的影像。
前述的以具有角度的脸部影像分析脸部缺陷的系统,其中所述的特征界定模块更包括用以在该侦测该具有角度的脸部影像的一角度后,依据该角度将该具有角度的脸部影像划分成多个侦测区块。
前述的以具有角度的脸部影像分析脸部缺陷的系统,其中所述的储存模块更包括用以储存至少一建议资料以对应该至少一皮肤缺陷条件,且该系统更包括:一建议模块,用以依据标记的皮肤缺陷影像及其所利用来进行判定的皮肤缺陷条件,产生对应的建议资料。
本发明的目的及解决其技术问题另外再采用以下技术方案来实现。依据本发明提出的一种以具有角度的脸部影像分析脸部缺陷的装置,其包括:一壳体;一影像撷取单元,设置于该壳体外部,用以拍摄一使用者的脸部以形成一具有角度的脸部影像;一显示单元,设置于该壳体外部;一储存单元,设置于壳体内部,电性耦接至该影像撷取单元,储存该具有角度的脸部影像、至少一皮肤缺陷条件与多个多角度的脸部特征条件的至少其一;以及一处理单元,设置于该壳体内部,电性耦接至该影像撷取单元、该储存单元以及该显示单元,根据该些脸部特征条件分析该具有角度的脸部影像,以取得至少一脸皮区域影像,以及利用该至少一皮肤缺陷条件判定该至少一脸皮区域影像是否存在至少一皮肤缺陷影像,且在存在至少一皮肤缺陷影像时,标记至少一脸皮区域影像的至少一皮肤缺陷影像,并在该显示单元,显示该具有角度的脸部影像及标记该皮肤缺陷的影像。
本发明与现有技术相比具有明显的优点和有益效果。借由上述技术方案,本发明以具有角度的脸部影像进行脸部缺陷分析的系统、装置、方法及电脑程序产品至少具有下列优点及有益效果:本发明的特点在于通过预存一个以上皮肤缺陷条件与多个多角度的脸部特征条件,可以利用多角度的脸部特征条件迅速的取得相关的脸皮区域影像,并藉由具有角度的脸部影像的角度分析,以进行皮肤缺陷判定作业。而且本发明利用皮肤缺陷条件不但能自动判定出脸皮区域影像是否有皮肤缺陷影像的存在,而且能更进一步判定出皮肤缺陷影像所显示的皮肤缺陷种类,有益协助医师进行皮肤缺陷判定作业,并大幅降低皮肤缺陷种类判定的作业时间。此外,本发明能提供更正确的皮肤缺陷资讯,有益于医师或专家系统提供病患较适当的美容医疗流程建议与术后预测评估。更甚至,本发明可以配合相关绘图软件以产生美容医疗后的预测结果影像。如此,可以有效降低医师与病患双方的人力成本与时间成本。
综上所述,本发明是有关于一种以具有角度的脸部影像分析脸部缺陷的系统、装置及方法。该系统包括一储存模块、一影像角度侦测模块、一特征界定模块与皮肤分析模块。储存模块储存有至少一具有角度的脸部影像、至少一皮肤缺陷条件与多个多角度的脸部特征条件的至少其一。影像角度侦测模块侦测具有角度的脸部影像的一角度。特征界定模块根据脸部特征条件分析该具有角度的脸部影像,以取得至少一脸皮区域影像。皮肤分析模块则利用一皮肤缺陷条件判定至少一脸皮区域影像是否存在至少一皮肤缺陷影像,当存在时,标记该至少一脸皮区域影像的该至少一皮肤缺陷影像。本发明在技术上有显著的进步,并具有明显的积极效果,诚为一新颖、进步、实用的新设计。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其他目的、特征和优点能够更明显易懂,以下特举较佳实施例,并配合附图,详细说明如下。
附图说明
图1是本发明实施例的以具有角度的脸部影像进行脸部缺陷分析的系统架构示意图。
图2是本发明实施例的以具有角度的脸部影像进行脸部缺陷分析的系统方框示意图。
图3A是本发明一实施例中,以具有角度的脸部影像进行脸部缺陷分析的方法的流程图。
图3B是示本发明另一实施例中,以具有角度的脸部影像进行脸部缺陷分析的方法的流程图。
图4是本发明的实施例的人脸侦测区块的示意图。
图5是本发明的实施例的脸部特征判定的示意图。
图6A是本发明的实施例的皱纹影像的示意图。
图6B是本发明的实施例的皱纹标记影像的示意图。
图7A是本发明的实施例的斑点影像的示意图。
图7B是本发明的实施例的斑点标记影像的示意图。
图8是本发明实施例的以具有角度的脸部影像进行脸部缺陷分析的装置的示意图。
S110~S160:步骤流程          100:影像撷取模块
200:主机                     210:特征界定模块
220:影像角度侦测模块         230:储存模块
231:皱纹分析条件             232:斑点分析条件
233:痘疤分析条件             234:脸部特征条件
240:皮肤分析模块             300:显示模块
S310~S390:步骤流程          400:具角度脸部影像
410:额头区块                 420:右眼尾区块
425:右眼部区块               430:鼻梁区块
440:左眼尾区块               445:左眼部区块
450:右颧骨区块               460:鼻头区块
465:嘴唇区块                 470:左颧骨区块
480:右脸颊区块               490:左脸颊区块
510:嘴唇图样                 520:左眼图样
530:右眼图样                 540:左眉图样
550:右眉图样                 560:鼻子图样
610:前额皮肤区域影像         611:皱纹纹路
612:皱纹纹路标记             720:左脸颊皮肤区域影像
721:斑点图案                 722:皱纹纹路标记
810:壳体                     820:影像撷取单元
830:显示单元                 840:储存单元
850:处理单元
具体实施方式
为更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的以具有角度的脸部影像进行脸部缺陷分析的系统、装置、方法及电脑程序产品其具体实施方式、结构、方法、步骤、特征及其功效,详细说明如后。
为让本发明的上述特征和优点能更明显易懂,下文特举实施例,并配合所附图式,作详细说明如下。以下所述的具有角度的脸部影像,是指经由数字照相机、数字摄影机、录影机所拍摄、脸部面对摄影镜头有偏移角度的数字照片、数字影像、或是从视讯串流中所撷取出来的部分视讯资料等。
首先请同时参阅图1与图2所示,图1是本发明实施例的以具有角度的脸部影像进行脸部缺陷分析的系统架构示意图,图2是本发明实施例的以具有角度的脸部影像进行脸部缺陷分析的系统方框示意图,本实施例适用于一电子设备,此例以主机200进行说明,但不以此为限,在其他实施例中,电子设备也可以是个人电脑、笔记型电脑、小笔电、平板电脑、Kiosk、PDA或智能型手机等。在其他实施例中,本发明的系统也可以分别设置于多个电子设备上,经由电性耦接方式连接。在本实施例中的以具有角度的脸部影像进行脸部缺陷分析的系统主要包括一主机200,主机200包括一储存模块230、一特征界定模块210、一影像角度侦测模块220与一皮肤分析模块240。此外,更进一步时主机200更可电性耦接一显示模块300,在显示模块300上显示各影像或图案,包括具有角度的脸部影像与标记等,显示模块300可以是一显示器、或一电视荧幕。
在其他实施例中,以具有角度的脸部影像进行脸部缺陷分析的系统也可包含一影像撷取模块100用以拍摄使用者的脸部以形成至少一具有角度的脸部影像400,本实施例以具有角度的脸部影像400作说明,脸部影像的左右偏斜角度可以在正副90度内,此影像撷取模块100为数字照像机或数字摄影机,但不以此为限,只要是拍摄景物后可形成数字影像的拍摄装置即可。
储存模块230用以储存至少一皮肤缺陷条件与多个多角度的脸部特征条件234的至少其一。储存模块230可与影像撷取模块100电性耦接,例如经由RS232通讯介面、各种无线/有线通讯方式来进行耦接并传输资料,以取得影像撷取模块100传送来的具有角度的脸部影像并将其储存,也或是经由其他储存媒体/网络连线等方式以取得远方电脑或电子装置所传送来的具有角度的脸部影像。在本实施例中,皮肤缺陷以皱纹纹路、斑点与痘疤为例进行说明,皮肤缺陷条件即包括皱纹分析条件231、斑点分析条件232与痘疤分析条件233,但不以此为限,其它相关皮肤缺陷情形也适用。在本实施例中,多角度的脸部特征条件包括分别对应多个角度的眼睛、眉毛、鼻子与嘴唇的特征资料,请容后说明。
请同时参阅图4所示,是本发明的具有角度的脸部影像的人脸范围侦测示意图。影像角度侦测模块220,电性耦接至储存模块230,可侦测出具有角度的脸部影像400的角度。例如,脸部面对摄影镜头的左右偏移角度和上下偏移角度等。影像角度侦测模块220可采用现有习知技术来实施,例如先经由2D人脸角度侦测与特征点撷取,使用多张2D人脸的多角度照片,建立一多角度的人脸分类器,当欲判断具有角度的脸部影像400的角度时,即可依据多角度的人脸分类器和具有角度的脸部影像400的人脸特征点撷取,判断出具有角度的脸部影像400的角度。
特征界定模块210用以根据这些脸部特征条件分析具有角度的脸部影像,以取得至少一脸皮区域影像。例如,先利用现有习知的人脸侦测技术找出在具有角度的脸部影像400中的人脸范围,并去除无关于使用者的人脸的影像,仅保留人脸范围的所属影像,亦即脸皮区域影像。现有习知的人脸侦测技术例如,先搜集多个人脸,训练成一个稳定的人脸模型,经由此人脸模型来和所输入的脸部影像作搜寻与比对,若输入的脸部影像中有区域符合此人脸模型,代表此影像含有人脸,反之则无。或者使用特定的二维、三维人脸侦测/辨识技术基础演算法,来进行演算和判别。
在其他实施例中,特征界定模块210更可进一步,依据影像角度侦测模块220所侦测出的角度,将脸皮区域影像分割成多个侦测区块,如图4所示,其可包含一额头区块410、一右眼尾区块420、一右眼区块425、一鼻梁区块430、一左眼尾区块440、一左眼区块445、一右颧骨区块450、一鼻头区块460、一嘴唇区块465、一左颧骨区块470、一右脸颊区块480及一左脸颊区块490等。
请同时参阅图5所示,是本发明实施例将脸皮区域影像分割成多个侦测区块的示意图。在此实施例中,将脸部多个角度、多个部位的图样作为多个多角度的脸部特征条件,例如,嘴唇图样、左眼图样、右眼图样、左眉图样、右眉图样及鼻子图样等,储存于储存模块230。特征界定模块210可利用储于储存模块230的各脸部特征条件234进行分析,从具有角度的脸部影像400中所找出的脸皮区域影像,从脸皮区域影像中找出是否有符合各脸部特征条件234的影像作为脸皮区域影像中的图样,例如,在脸皮区域影像中对应于眼睛的位置是否有相似于眼睛的形状、在脸皮区域影像中对应于眉毛的位置是否有相似于眉毛的形状、在脸皮区域影像中对应于嘴唇的位置是否有相似于嘴唇的形状等。一般来说,可先将脸皮区域影像依据一般人脸五官位置,取得多个子区域影像,每个子区域影像以包含完整的五官形状为较佳,且其位于脸皮区域影像的位置即对应五官的位置,例如位于下方中央的子区域影像就对应到嘴唇,然后可对此一子区域影像来进行判别是否有相似于嘴唇的形状。接着,特征界定模块210再利用从脸皮区域影像中所找出符合的嘴唇图样530、左眼图样520、右眼图样510、左眉图样540、右眉图样550及鼻子图样560从影像中,推算出在脸皮区域影像中,嘴唇图样530、左眼图样520、右眼图样510、左眉图样540、右眉图样550及鼻子图样560的位置,再依据各图样位置将脸皮区域影像分割成多个侦测区块。例如,但不以此为限。最后,特征界定模块210将各皮肤区域所属影像视为脸皮区域影像,各侦测区块中可包含嘴唇、眼睛、眉毛等图样的右眼部区块425、左眼部区块445、嘴唇区块465等,或是不包含嘴唇、眼睛、眉毛等图样的额头区块410、右眼尾区块420、鼻梁区块430、左眼尾区块440、右颧骨区块450、鼻头区块460、左颧骨区块470、右脸颊区块480、左脸颊区块490等。在本实施例中,是形成额头区块410、右眼尾区块420、鼻梁区块430、左眼尾区块440、右颧骨区块450、鼻头区块460、左颧骨区块470、右脸颊区块480及左脸颊区块490。
皮肤分析模块240利用预储于储存模块230的皮肤缺陷条件对前述的脸皮区域影像进行分析,以判定脸皮区域影像是否存在一个以上的皮肤缺陷影像。本实施例的皮肤缺陷条件包括皱纹分析条件、斑点分析条件与痘疤分析条件中的至少一者。在其他实施例中,预储在储存模块230的皮肤缺陷条件,还可储存针对不同侦测区块所对应的皮肤缺陷条件,例如在左眼尾区块440、右眼尾区块420中,对应的是皱纹分析条件,而在左脸颊区块490、右脸颊区块480中,对应的是斑点分析条件与痘疤分析条件,部分侦测区如嘴唇区块465可能不具有对应的皮肤缺陷条件,但本发明并不以此为限。进而,皮肤分析模块240则可依据各侦测区块所对应的皮肤缺陷条件,来分别对不同的侦测区块进行缺陷分析。
在其他实施例中,储存模块230更包括用以储存至少一建议资料以对应相关的皮肤缺陷条件,本发明系统更可设置一建议模块(图2中未显示),依据已标记的皮肤缺陷影像、皮肤缺陷影像类型、标记类型及其用以进行判定的皮肤缺陷条件,自动产生对应的建议资料。
如图6A与图6B所示,图6A是本发明的皱纹影像的示意图,图6B是本发明皱纹标记影像的示意图,如皮肤缺陷条件包括皱纹分析条件,皮肤分析模块240即分析各脸皮区域影像的每一个像素资料,判断是否存在多个深色像素,且这些深色像素形成至少一连续线条的情形。更进一步来说,皮肤分析模块240是藉由一贾伯小波转换(Gabor wavelet transform)方法,以加强影像中皱纹的像素,并移除杂讯及细线化皱纹,以判定至少一连续线条为至少一皱纹纹路。以额头区块410作说明,当皮肤分析模块240判定前额皮肤区域影像610存在前述的连续线条,则判定此类连续线条为皱纹纹路611,并对皱纹纹路611作皱纹纹路标记612,其标记方式可以是以模拟线条方式来描绘出所侦测出的皱纹纹路。
如图7A与图7B所示,图7A本发明的斑点影像的示意图图7B是本发明的斑点标记影像的示意图,如皮肤缺陷条件包括斑点分析条件,皮肤分析模块240即分析各脸皮区域影像的每一个像素资料,判断是否存在多个深色像素,且这些深色像素形成至少一深色区块的情形。以左脸颊皮肤区域影像720作说明,当皮肤分析模块240存在前述的深色区块,则判定此类深色区块为斑点图案721,并对斑点图案721作符合斑点形状的图案标记722。
在此说明,深色像素呈现的皮肤色泽比正常肤色呈现的皮肤色泽更深,且色泽度高过一自适应性门槛值。此一自适应性门槛值可以是一系统预设值,或由设备操作人员预先利用系统的人机介面进行设定。
更进一步时,皮肤分析模块240还可调整脸皮区域影像或是各侦测区块的光亮度,使脸皮区域影像或是各侦测区块呈现的肤色符合一皮肤样本影像,避免因使用不同摄影机时,受拍摄环境的光亮度的影响,而使得皮肤分析模块240进行分析时产生误差。
同理,皮肤分析模块240即分析各脸皮区域影像的每一个像素资料,判断是否存在多个异常像素资料,且这些异常像素资料形成至少一疤痕区块。当皮肤分析模块240判定存在前述的疤痕区块,将此类疤痕区块导入一痘疤判定法则,以判定疤痕区块是否为痘疤图案。如果结论为痘疤图案,则对脸皮区域影像上的痘疤图案作标记。
在此说明,异常像素资料包括的颜色资料异于正常像素资料所包括的颜色资料,也就是说异常像素资料呈现的皮肤色泽与正常肤色相异。
此外,痘疤的形状未有特定的形状与色泽,为提升痘疤判定法则的准确率,痘疤判定法则可以由多个痘疤图案样本结合类神经网络所建立。在建立过程中,先从各式各样的痘疤图案样本中撷取多种不同的痘疤特征,将各种痘疤特征导入类神经网络,利用类神经网络的自我学习、归纳推理、平行计算等特性,针对各种不同痘疤特征进行侦测、演算,以产生因应各痘疤特征的痘疤判定网络,并将此痘疤判定网络视为前述的痘疤判定法则。皮肤分析模块240将此疤痕区块导入痘疤判定网络时,即能判定出疤痕区块是否为痘疤图案的结论。
若皮肤分析模块240判定脸皮区域影像或侦测区块皆不具有符合皮肤缺陷条件的图案时,即不对脸皮区域影像作任何标记的行为,判定脸皮区域影像所对应的使用者脸部皮肤没有皮肤缺陷的情形。
请参阅图3A所示,是本发明脸皮缺陷解析方法实施例的流程图,请同时参阅图1、图2、图4至图6B及前述说明以利于理解,此方法适用于一电子设备,其中电子设备包括一储存模块,储存多个多角度的脸部特征条件及至少一皮肤缺陷条件,本实施例中电子设备以主机200进行说明,但不以此为限。此脸皮缺陷解析方法的流程说明如下:
步骤S110,取得一具有角度的脸部影像。例如,具有角度的脸部影像可经由一影像撷取模块拍摄取得、或是由远方电脑或电子装置所传送来。
步骤S120,侦测具有角度的脸部影像的一角度。例如,经由电子设备来对具有角度的脸部影像进行侦测,角度可以是脸部面对摄影镜头的左右偏移角度和上下偏移角度等。
步骤S130,依据角度及多个多角度的脸部特征条件的至少其一,分析具有角度的脸部影像以取得至少一脸皮区域影像。例如,经由电子设备,利用现有习知的人脸侦测技术找出在具有角度的脸部影像400中的人脸范围,并去除无关于使用者的人脸的影像,仅保留人脸范围的所属影像。
步骤S140利用至少一皮肤缺陷条件分析至少一脸皮区域影像。例如,经由电子设备来进行分析,皮肤缺陷条件包括皱纹分析条件、斑点分析条件与痘疤分析条件中的至少一者。
步骤S150,判定是否存在至少一皮肤缺陷影像;例如在皱纹分析时,电子设备分析各脸皮区域影像的每一个像素资料,判断是否存在多个深色像素,且这些深色像素形成至少一连续线条的情形。电子设备在斑点分析时,即分析各脸皮区域影像的每一个像素资料,判断是否存在多个深色像素,且这些深色像素形成至少一深色区块的情形。
步骤S160,当存在至少一皮肤缺陷影像时,标记至少一脸皮区域影像的至少一皮肤缺陷影像。例如,经由显示模块300,以模拟线条方式来显示出所侦测出的皱纹纹路,或是以符合斑点形状的图案来标记斑点。
请参阅图3B所示,是本发明脸皮缺陷解析方法另一实施例的流程图,请同时参阅图1、图2、图4至图6B及前述说明以利于理解,与前述步骤内容相同的步骤,以相同标号标示并不再详细说明,此方法也适用于一电子设备,方法的流程说明如下:
步骤S310,储存多个多角度的脸部特征条件及至少一皮肤缺陷条件于电子设备的一储存模块中。
步骤S320,取得一具有角度的脸部影像。
步骤S330,侦测具有角度的脸部影像的一角度。
步骤S340,依据角度及多个多角度的脸部特征条件的至少其一,分析具有角度的脸部影像以取得至少一脸皮区域影像,并依据将至少一脸皮区域影像分割成多个侦测区块。例如,将脸部多个角度、多个部位的图样作为多个多角度的脸部特征条件,和脸皮区域影像进行比对,找出是否有符合上述脸部特征条件的图样,再依据从脸皮区域影像所找出的图样及位置,分割成多个侦测区块,如额头区块410、右眼尾区块420、右眼区块425、鼻梁区块430、左眼尾区块440、左眼区块445、右颧骨区块450、鼻头区块460、嘴唇区块465、左颧骨区块470、右脸颊区块480及左脸颊区块490等。
步骤S350利用至少一皮肤缺陷条件分析这些侦测区块。例如,经由电子设备来进行分析,皮肤缺陷条件包括皱纹分析条件、斑点分析条件与痘疤分析条件中的至少一者。
步骤S360,判定是否存在至少一皮肤缺陷影像。
步骤S370,当判定结果为是,存在至少一皮肤缺陷影像时,标记至少一脸皮区域影像的至少一皮肤缺陷影像。
步骤S380,当判定结果为否,不存在至少一皮肤缺陷影像时,判定各脸皮区域影像所呈现的皮肤影像为正常。
步骤S390,依据已标记的皮肤缺陷影像、皮肤缺陷影像类型、标记类型及其用以进行判定的皮肤缺陷条件,产生对应的建议资料。
图8是本发明一实施例中,以具有角度的脸部影像进行脸部缺陷分析的装置的示意图,包括:一壳体810;一影像撷取单元820,设置于壳体810外部,用以拍摄一使用者的脸部以形成一具有角度的脸部影像;一显示单元830,设置于壳体810外部;一储存单元840,设置于壳体810内部,电性耦接至影像撷取单元820,储存具有角度的脸部影像、至少一皮肤缺陷条件与多个多角度的脸部特征条件的至少其一;以及一处理单元850,设置于壳体810内部,电性耦接至影像撷取单元820、储存单元840以及显示单元830,根据这些脸部特征条件分析具有角度的脸部影像,以取得至少一脸皮区域影像,以及利用至少一皮肤缺陷条件判定至少一脸皮区域影像是否存在至少一皮肤缺陷影像,且在存在至少一皮肤缺陷影像时,标记至少一脸皮区域影像的至少一皮肤缺陷影像,并在显示单元830,显示具有角度的脸部影像及标记。
在一些实施例中,以具有角度的脸部影像进行脸部缺陷分析的装置可以经由一手机、PDA、平板电脑、笔记型电脑等可携式装置来具体实现。其相关技术内容如前面所述,在此不再赘述。
以上所述,仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,虽然本发明已以较佳实施例揭露如上,然而并非用以限定本发明,任何熟悉本专业的技术人员,在不脱离本发明技术方案范围内,当可利用上述揭示的方法及技术内容作出些许的更动或修饰为等同变化的等效实施例,但凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本发明技术方案的范围内。

Claims (19)

1.一种以具有角度的脸部影像分析脸部缺陷的方法,其特征在于其适用于一电子设备,该电子设备至少包含一储存模块以储存多个多角度的脸部特征条件及至少一皮肤缺陷条件,该方法包括以下步骤:
取得一具有角度的脸部影像;
侦测该具有角度的脸部影像的一角度;
依据该角度及该多个多角度的脸部特征条件的至少其一,分析该具有角度的脸部影像以取得至少一脸皮区域影像;
利用该至少一皮肤缺陷条件分析该至少一脸皮区域影像;
判定是否存在至少一皮肤缺陷影像;以及
当存在该至少一皮肤缺陷影像时,标记该至少一脸皮区域影像的该至少一皮肤缺陷影像。
2.根据权利要求1所述的以具有角度的脸部影像分析脸部缺陷的方法,其特征在于该方法更包括:
经由一影像撷取模块,撷取一使用者的脸部以形成该具角度的脸部影像,且电性耦接至该储存模块,以将该具有角度的脸部影像传送到该储存模块储存。
3.根据权利要求1所述的以具有角度的脸部影像分析脸部缺陷的方法,其特征在于该方法更包括:
将每一脸皮区域影像,依据该角度,分别将该脸皮区域影像分割成多个侦测区块。
4.根据权利要求3所述的以具有角度的脸部影像分析脸部缺陷的方法,其特征在于其中该些侦测区块为一额头区块、一右眼尾区块、一鼻梁区块、一左眼尾区块、一右颧骨区块、一鼻头区块、一左颧骨区块、一右脸颊区块及一左脸颊区块的至少其一。
5.根据权利要求1所述的以具有角度的脸部影像分析脸部缺陷的方法,其特征在于其中所述的皮肤缺陷条件包括一皱纹分析条件、一斑点分析条件及一痘疤分析条件其中的一者。
6.根据权利要求5所述的以具有角度的脸部影像分析脸部缺陷的方法,其特征在于其中所述的痘疤分析条件是将多个痘疤图案样本导入一类神经网络,以进行样本判定训练所产生。
7.根据权利要求1所述的以具有角度的脸部影像分析脸部缺陷的方法,其特征在于其中在该侦测该具有角度的脸部影像的一角度的步骤后,更依据该角度将该具有角度的脸部影像划分成多个侦测区块。
8.根据权利要求1所述的以具有角度的脸部影像分析脸部缺陷的方法,其特征在于更包括一显示模块,用以显示该具有角度的脸部影像及标记该皮肤缺陷的影像。
9.根据权利要求1所述的以具有角度的脸部影像分析脸部缺陷的方法,其特征在于其中所述的储存模块更包括用以储存至少一建议资料以对应该至少一皮肤缺陷条件,且该方法更包括:
依据标记的皮肤缺陷影像及其所利用来进行判定的皮肤缺陷条件,产生对应的建议资料。
10.一种以具有角度的脸部影像分析脸部缺陷的系统,其特征在于其包括:
一储存模块,用以储存至少一具有角度的脸部影像、至少一皮肤缺陷条件与多个多角度的脸部特征条件的至少其一;
一影像角度侦测模块,电性耦接至该储存模块,用以侦测该具有角度的脸部影像的一角度;
一特征界定模块,电性耦接至该储存模块及该影像角度侦测模块,用以根据该些脸部特征条件分析该具有角度的脸部影像,以取得至少一脸皮区域影像;以及
一皮肤分析模块,电性耦接至该储存模块及该特征界定模块,用以利用该至少一皮肤缺陷条件判定该至少一脸皮区域影像是否存在至少一皮肤缺陷影像,当存在时,标记该至少一脸皮区域影像的该至少一皮肤缺陷影像。
11.根据权利要求10所述的以具有角度的脸部影像分析脸部缺陷的系统,其特征在于更包括提供一影像撷取模块,以撷取一使用者的脸部以形成该具有角度的脸部影像,且电性耦接至该储存模块,以将该具有角度脸部影像传送到该储存模块储存。
12.根据权利要求10所述的以具有角度的脸部影像分析脸部缺陷的系统,其特征在于其中所述的特征界定模块更包括依据该角度,分别将每一脸皮区域影像分割成多个侦测区块。
13.根据权利要求12所述的以具有角度的脸部影像分析脸部缺陷的系统,其特征在于其中该些侦测区块为一额头区块、一右眼尾区块、一鼻梁区块、一左眼尾区块、一右颧骨区块、一鼻头区块、一左颧骨区块、一右脸颊区块及一左脸颊区块的至少其一,该特征界定模块是找出该具有角度的脸部影像中相异于该些多角度的脸部特征条件的至少一侦测区块。
14.根据权利要求10所述的以具有角度的脸部影像分析脸部缺陷的系统,其特征在于其中所述的皮肤缺陷条件包括一皱纹分析条件、一斑点分析条件及一痘疤分析条件其中的一者。
15.根据权利要求14所述的以具有角度的脸部影像分析脸部缺陷的系统,其特征在于其中所述的痘疤判定法则为多个痘疤图案样本导入一类神经网络,以进行样本判定训练所产生。
16.根据权利要求10所述的以具有角度的脸部影像分析脸部缺陷的系统,其特征在于其更包括一显示模块,以显示该具有角度的脸部影像及标记该皮肤缺陷的影像。
17.根据权利要求10所述的以具有角度的脸部影像分析脸部缺陷的系统,其特征在于其中所述的特征界定模块更包括用以在该侦测该具有角度的脸部影像的一角度后,依据该角度将该具有角度的脸部影像划分成多个侦测区块。
18.根据权利要求10所述的以具有角度的脸部影像分析脸部缺陷的系统,其特征在于其中所述的储存模块更包括用以储存至少一建议资料以对应该至少一皮肤缺陷条件,且该系统更包括:
一建议模块,用以依据标记的皮肤缺陷影像及其所利用来进行判定的皮肤缺陷条件,产生对应的建议资料。
19.一种以具有角度的脸部影像分析脸部缺陷的装置,其特征在于其包括:
一壳体;
一影像撷取单元,设置于该壳体外部,用以拍摄一使用者的脸部以形成一具有角度的脸部影像;
一显示单元,设置于该壳体外部;
一储存单元,设置于壳体内部,电性耦接至该影像撷取单元,储存该具有角度的脸部影像、至少一皮肤缺陷条件与多个多角度的脸部特征条件的至少其一;以及
一处理单元,设置于该壳体内部,电性耦接至该影像撷取单元、该储存单元以及该显示单元,根据该些脸部特征条件分析该具有角度的脸部影像,以取得至少一脸皮区域影像,以及利用该至少一皮肤缺陷条件判定该至少一脸皮区域影像是否存在至少一皮肤缺陷影像,且在存在至少一皮肤缺陷影像时,标记至少一脸皮区域影像的至少一皮肤缺陷影像,并在该显示单元,显示该具有角度的脸部影像及标记该皮肤缺陷的影像。
CN201010569749XA 2010-11-30 2010-11-30 以具有角度的脸部影像分析脸部缺陷的系统、装置及方法 Pending CN102479322A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201010569749XA CN102479322A (zh) 2010-11-30 2010-11-30 以具有角度的脸部影像分析脸部缺陷的系统、装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201010569749XA CN102479322A (zh) 2010-11-30 2010-11-30 以具有角度的脸部影像分析脸部缺陷的系统、装置及方法

Publications (1)

Publication Number Publication Date
CN102479322A true CN102479322A (zh) 2012-05-30

Family

ID=46091962

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010569749XA Pending CN102479322A (zh) 2010-11-30 2010-11-30 以具有角度的脸部影像分析脸部缺陷的系统、装置及方法

Country Status (1)

Country Link
CN (1) CN102479322A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105761260A (zh) * 2016-02-15 2016-07-13 天津大学 一种皮肤图像患处分割方法
CN106067167A (zh) * 2016-06-06 2016-11-02 广东欧珀移动通信有限公司 图像处理方法及装置
CN106469302A (zh) * 2016-09-07 2017-03-01 成都知识视觉科技有限公司 一种基于人工神经网络的人脸肤质检测方法
CN107106018A (zh) * 2014-11-14 2017-08-29 索尼公司 信息处理装置、信息处理方法和程序
CN107480719A (zh) * 2017-08-17 2017-12-15 广东工业大学 一种基于皮肤特性评价的护肤产品的推荐方法及系统
CN108596076A (zh) * 2018-04-20 2018-09-28 盎锐(上海)信息科技有限公司 基于3d成像技术的皱纹信息获取装置及信息获取方法
CN108846311A (zh) * 2018-04-28 2018-11-20 北京羽医甘蓝信息技术有限公司 基于深度学习的检测面部皮肤片状缺陷的方法及装置
CN109033935A (zh) * 2018-05-31 2018-12-18 深圳和而泰数据资源与云技术有限公司 抬头纹检测方法及装置
CN109544515A (zh) * 2018-11-05 2019-03-29 深圳和而泰数据资源与云技术有限公司 一种趋势确定方法及装置
CN109614900A (zh) * 2018-11-29 2019-04-12 深圳和而泰数据资源与云技术有限公司 图像检测方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1811793A (zh) * 2006-03-02 2006-08-02 复旦大学 一种人脸特征点自动定位方法
CN1961820A (zh) * 2005-11-08 2007-05-16 株式会社资生堂 肌肤状态分析方法以及肌肤状态分析装置
TW200832282A (en) * 2007-01-17 2008-08-01 Asustek Comp Inc Method for calculating straightness of facial area and computer system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1961820A (zh) * 2005-11-08 2007-05-16 株式会社资生堂 肌肤状态分析方法以及肌肤状态分析装置
CN1811793A (zh) * 2006-03-02 2006-08-02 复旦大学 一种人脸特征点自动定位方法
TW200832282A (en) * 2007-01-17 2008-08-01 Asustek Comp Inc Method for calculating straightness of facial area and computer system

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107106018A (zh) * 2014-11-14 2017-08-29 索尼公司 信息处理装置、信息处理方法和程序
CN105761260B (zh) * 2016-02-15 2018-09-28 天津大学 一种皮肤图像患处分割方法
CN105761260A (zh) * 2016-02-15 2016-07-13 天津大学 一种皮肤图像患处分割方法
CN106067167A (zh) * 2016-06-06 2016-11-02 广东欧珀移动通信有限公司 图像处理方法及装置
CN106469302B (zh) * 2016-09-07 2019-05-28 成都知识视觉科技有限公司 一种基于人工神经网络的人脸肤质检测方法
CN106469302A (zh) * 2016-09-07 2017-03-01 成都知识视觉科技有限公司 一种基于人工神经网络的人脸肤质检测方法
CN107480719A (zh) * 2017-08-17 2017-12-15 广东工业大学 一种基于皮肤特性评价的护肤产品的推荐方法及系统
CN107480719B (zh) * 2017-08-17 2020-08-07 广东工业大学 一种基于皮肤特性评价的护肤产品的推荐方法及系统
CN108596076A (zh) * 2018-04-20 2018-09-28 盎锐(上海)信息科技有限公司 基于3d成像技术的皱纹信息获取装置及信息获取方法
CN108846311A (zh) * 2018-04-28 2018-11-20 北京羽医甘蓝信息技术有限公司 基于深度学习的检测面部皮肤片状缺陷的方法及装置
CN109033935A (zh) * 2018-05-31 2018-12-18 深圳和而泰数据资源与云技术有限公司 抬头纹检测方法及装置
CN109033935B (zh) * 2018-05-31 2021-09-28 深圳和而泰数据资源与云技术有限公司 抬头纹检测方法及装置
CN109544515A (zh) * 2018-11-05 2019-03-29 深圳和而泰数据资源与云技术有限公司 一种趋势确定方法及装置
CN109614900A (zh) * 2018-11-29 2019-04-12 深圳和而泰数据资源与云技术有限公司 图像检测方法及装置

Similar Documents

Publication Publication Date Title
CN102479322A (zh) 以具有角度的脸部影像分析脸部缺陷的系统、装置及方法
WO2020207423A1 (zh) 肤质检测方法、肤质等级分类方法及肤质检测装置
CN105243386B (zh) 人脸活体判断方法以及系统
US20120133753A1 (en) System, device, method, and computer program product for facial defect analysis using angular facial image
TWI754887B (zh) 活體檢測方法和裝置、電子設備及儲存介質
US20110116691A1 (en) Facial skin defect resolution system, method and computer program product
CN109598242B (zh) 一种活体检测方法
CN107370942A (zh) 拍照方法、装置、存储介质及终端
JP6799525B2 (ja) 生体情報解析装置及び手肌解析方法
CN110083202A (zh) 与近眼显示器的多模交互
CN102004906A (zh) 人脸识别系统及方法
JP7286208B2 (ja) 生体顔検出方法、生体顔検出装置、電子機器、及びコンピュータプログラム
CN111507592B (zh) 一种面向服刑人员的主动改造行为的评估方法
CN106886216A (zh) 基于rgbd人脸检测的机器人自动跟踪方法和系统
CN109427075A (zh) 身体信息分析装置及其眼影分析方法
CN109583263A (zh) 结合扩增实境的身体信息分析装置及其眉型预览方法
CN110765924A (zh) 一种活体检测方法、装置以及计算机可读存储介质
CN114550027A (zh) 基于视觉的运动视频精细分析方法和装置
CN112560649A (zh) 一种行为动作检测方法、系统、设备及介质
CN115937928A (zh) 基于多视觉特征融合的学习状态监测方法及系统
CN109712065A (zh) 身体信息分析装置及其脸形模拟方法
CN103870814A (zh) 基于智能相机的非接触式实时眼动识别方法
CN112818733B (zh) 信息处理方法、装置、存储介质及终端
CN115410240A (zh) 智能人脸的痘痘和色斑分析方法、装置及存储介质
CN104063041B (zh) 一种信息处理方法及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120530