CN109034052A - 人脸检测方法及装置 - Google Patents

人脸检测方法及装置 Download PDF

Info

Publication number
CN109034052A
CN109034052A CN201810817652.2A CN201810817652A CN109034052A CN 109034052 A CN109034052 A CN 109034052A CN 201810817652 A CN201810817652 A CN 201810817652A CN 109034052 A CN109034052 A CN 109034052A
Authority
CN
China
Prior art keywords
classifier
detected
face
classifiers
human eye
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810817652.2A
Other languages
English (en)
Other versions
CN109034052B (zh
Inventor
陈伟平
曾昭志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Kemai Technology Co Ltd
Original Assignee
Shenzhen Kemai Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Kemai Technology Co Ltd filed Critical Shenzhen Kemai Technology Co Ltd
Priority to CN201810817652.2A priority Critical patent/CN109034052B/zh
Publication of CN109034052A publication Critical patent/CN109034052A/zh
Application granted granted Critical
Publication of CN109034052B publication Critical patent/CN109034052B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)

Abstract

本发明实施例提供了一种人脸检测方法及装置,所述方法包括:获取待检测图像;通过预设的多个分类器并行对所述待检测图像进行检测;在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。通过本发明实施例可以融合多个分类器的优势,对一个图像进行人脸检测,可以提升人脸检测效率。

Description

人脸检测方法及装置
技术领域
本发明涉及图像处理技术领域,具体涉及一种人脸检测方法及装置。
背景技术
当前人脸检测主流的技术是基于统计学习理论,主要有Adaboost,SVM和深度学习等方法。Adaboost+Haar-Like,Adaboost+HOG,SVM+HOG特征,分为两个步骤,首先收集人脸正负样本数据进行训练,得到分类器,然后通过分类器,计算待检测的样本的图像特征,送入分类器进行检测。训练时间和准确度与样本量和样本质量有关系,理论上,样本量越多,训练得到的分类器更加准确,但是训练样本量大的情况下,训练时间相当长,可能超过一周,甚至一个月,限于硬件条件和时间限制,样本量不可能无限大,不同角度,姿态,光照和表情的人脸检测存在检测率低的问题,重新训练又浪费了很大的资源,而且训练出来的分类器又可能无法识别某种姿态或者状态的人脸,可以采用分批训练得到不同的强分类器,如此,如何提升人脸检测效率的问题亟待解决。
发明内容
本发明实施例提供了一种人脸检测方法及装置,可以提升人脸识别效率。
第一方面,本发明实施例提供了一种人脸检测方法,包括:
获取待检测图像;
通过预设的多个分类器并行对所述待检测图像进行检测;
在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。
第二方面,本申请实施例提供了一种人脸检测装置,包括:
第一获取单元,用于获取待检测图像;
第一检测单元,用于通过预设的多个分类器并行对所述待检测图像进行检测;
控制单元,用于在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。
第三方面,本申请实施例提供一种人脸检测装置,包括处理器、存储器以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行本申请实施例第一方面中的步骤的指令。
第四方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。
第五方面,本申请实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
实施本发明实施例,具有如下有益效果:
通过本发明实施例所描述的人脸检测方法及装置,获取待检测图像,通过预设的多个分类器并行对待检测图像进行检测,在多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将目标分类器检测到的区域作为人脸区域,如此,可以融合多个分类器的优势,对一个图像进行人脸检测,可以提升人脸检测效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1A是本发明实施例提供的一种人脸检测方法的实施例流程示意图;
图1B是本发明实施例提供的一种人脸检测方法的实施例另一流程示意图;
图1C是本发明实施例提供的一种人脸检测方法的实施例另一流程示意图;
图1D是本发明实施例提供的一种人脸检测方法的实施例另一流程示意图;
图2是本发明实施例提供的一种人脸检测方法的实施例流程示意图;
图3A是本发明实施例提供的一种人脸检测装置的实施例结构示意图;
图3B是本发明实施例提供的图3A所描述的人脸检测装置的又一结构示意图;
图3C是本发明实施例提供的图3A所描述的人脸检测装置的又一结构示意图;
图3D是本发明实施例提供的图3A所描述的人脸检测装置的又一结构示意图;
图4是本发明实施例提供的一种人脸检测装置的实施例结构示意图;
图5是本发明实施例提供的一种人脸检测装置的实施例结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的说明书和权利要求书及所述附图中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本发明的至少一个实施例中。在说明书中的各个位置展示该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
本发明实施例所描述的人脸检测装置可以包括智能手机(如Android手机、iOS手机、Windows Phone手机等)、平板电脑、掌上电脑、笔记本电脑、移动互联网设备(MID,Mobile Internet Devices)或穿戴式设备(例如,蓝牙耳机、VR设备或者IR设备)等,上述仅是举例,而非穷举,包含但不限于上述人脸检测装置。
请参阅图1A,为本发明实施例提供的一种人脸检测方法的实施例流程示意图。本实施例中所描述的人脸检测方法,包括以下步骤:
101、获取待检测图像。
其中,人脸识别装置可以通过摄像头获取待检测图像,待检测图像可为用户的脸部图像。
可选地,上述步骤101,获取待检测图像,可以包括如下步骤:
11、获取目标环境参数;
12、确定与所述目标环境参数对应的目标拍摄参数;
13、依据所述目标拍摄参数进行拍照,得到所述待检测图像。
其中,环境参数可以为以下至少一种:环境光亮度、环境色温、环境温度、环境湿度、环境电磁干扰强度等等,在此不做限定。拍摄参数可以包括以下至少一种:焦距、曝光时长、感光度、光圈大小等等,在此不作限定。人脸识别装置可以通过传感器获取目标环境参数,传感器可以为以下至少一种:环境光传感器、温度传感器、湿度传感器、电磁干扰检测传感器等等,在此不作限定,人脸识别装置中可以预先存储环境参数与拍摄参数之间的映射关系,进而,可以依据该映射关系确定目标环境参数对应的目标拍摄参数,并依据目标拍摄参数进行拍照,得到待检测图像。
102、通过预设的多个分类器并行对所述待检测图像进行检测。
其中,本申请实施例中可以对待检测图像进行特征提取,得到一个特征集,再将该特征集送入预设的多个分类器中进行检测,上述特征提取的方式可以为以下至少一种:HOG特征提取、尺度不变特征提取(scale invariant feature transform,SIFT)、harr特征等等,在此不做限定。
具体应用中,由于现有技术中存在以下问题:
1、单个训练的人脸强分类器级联分类器存在不足,某些情况下没有检测到人脸,为了更准确的分类器需要重新训练的问题;
2、多个训练的强分类器无法在同一个检测步骤中使用;
3、人脸在遮挡情况下容易导致检测不到人脸,这种情况可能检测到人眼,在可以检测到人眼的图像中检测不到人脸;
4、不同的分类器可以独立训练。
基于上述分析,本申请实施例中,通过预设的多个分类器并行对待检测图像进行检测,例如,有多少个分类器,就采用多少个线程或者进程,每一分类器对应一个线程或者进程,这些线程或者进程并行执行对待检测图像进行检测,如此,由于每一种分类器针对特定场景有其自身的优势,可以结合多个分类器中每一分类器的优势实现对待检测图像进行检测,不仅可以提升检测精度,还可以提升检测效率。上述预设的分类器可以包括以下至少一种:支持向量机(support vector machine,SVM)分类器、神经网络分类器、遗传算法分类器、SVM+神经网络分类器等等,在此不做限定。
可选地,在上述步骤101与步骤102之间,还可以包括如下步骤:
通过预设肤色模型对所述待检测图像进行检测,得到第一目标区域;
上述步骤102,通过预设的多个分类器并行对所述待检测图像进行检测,可按照如下方式实施:
通过预设的多个分类器并行对所述第一目标区域进行检测。
其中,上述预设肤色模型可以包括以下至少一种:椭圆肤色模型、高斯肤色模型等等,在此不做限定。针对不同的人种,肤色模型可以具备一定的差异性,例如,针对黄种人的肤色模型、针对黑种人的肤色模型、针对白种人的肤色模型等等,在此不做限定。本申请实施例中,人脸识别装置可以通过预设肤色模型对待检测图像进行检测,得到第一目标区域,即人脸很可能存在的区域,再通过预设的多个分类器并行对第一目标区域进行检测,由于待检测图像中不仅包含人脸,还包含非人脸区域,倘若对整个图像进行检测,则在一定程度上降低了人脸检测效率,因此,倘若采用预设肤色模型,实现人脸初步定位,再在该基础上实现检测,则可以缩小分类器的检测范围,提升了人脸检测效率以及精度。
可选地,在上述步骤101与步骤102之间,还可以包括如下步骤:
A1、通过预设的人眼分类器对所述待检测图像进行人眼检测,得到第一目标人眼;
A2、依据所述第一目标人眼的位置进行模板匹配,得到第二目标人眼;
A3、依据所述第一目标人眼、所述第二目标人眼确定人脸所在的第二目标区域;
则,上述步骤102,通过预设的多个分类器并行对所述待检测图像进行检测,可按照如下方式实施:
通过预设的多个分类器并行对所述第二目标区域进行检测。
其中,上述预设的人眼分类器可以为以下至少一种:Adaboost分类器、Haar分类器、SVM分类器、遗传算法分类器、SVM+神经网络分类器等等,在此不做限定。人脸识别装置通过预设的人眼分类器对待检测图像进行人眼检测,得到第一目标人眼,在得到了第一目标人眼,则可以依据人眼位置进行模板匹配,得到第二目标人眼,依据第一目标人眼、第二目标人眼则可以初步确定人脸所在的第二目标区域,例如,可以确定第一目标人眼的第一中点、第二目标人眼的第二中点,确定第一中点、第二中点之间的第三中点、以第三中点为原点,预设半径范围作圆,将园内的区域作为第二目标区域,并通过预设的多个分类器并行对第二目标区域进行检测,如此,可以在人脸被遮挡的情况下,先检测人眼,基于人眼定位,最终尽可能地确定人脸,实现人脸检测。
可选地,人脸识别装置检测时可先通过肤色模型检索人脸可能存在的区域,然后进行区域分割,避免全图搜索。
可选地,根据人脸人眼比例位置,通过人眼分类器得到人脸;
可选地,对于现实场景的人脸检测,排除素描,艺术画的人脸,可以结合基于肤色模型进行启发式检测,避免进行全图检测,本申请实施例采用的人脸检测分类器的步骤都是基于不同尺度的移动窗口进行遍历。
其中,上述步骤A2中,如果检测不到人脸,而检测到人眼,根据检测到的人眼位置(left,top,width,height),使用模板匹配,模板匹配的话,可以以第一目标人眼为模板,由于人的双眼具备对称性,具体地,在左右上下各30度的范围内,距离当前人眼1.8width到2.2width的范围内遍历搜索另一只人眼,根据搜索到的另一只人眼位置,可以确定当前人脸位置及大小。
103、在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。
其中,在多个分类器中的任一目标分类器在检测到人脸的情况下,可以立刻停止人脸检测,即所有的目标分类器停止人脸检测,并将目标分类器检测到的区域作为人脸区域。由于一个分类器存在局限性,多个分类器则可以适应不同的情况,本申请实施例主要融合多个分类器,避免重复训练,采用分批训练,然后在检测环节提取图像特征的时候统一提取,送入多个分批训练得到的强分类器进行检测,如此,可以提升检测效率,实现精准检测到人脸。
可选地,在上述步骤101之前,还可以包括如下步骤:
B1、获取多个正样本集和负样本集,每一正样本集对应一个类别标签,每一正样本集包括多张人脸图像,所述负样本集包括多张不包括人脸的图像;
B2、对所述多个正样本集和所述负样本集进行特征提取,得到多个正样本特征集和负样本特征集;
B3、分别通过多种分类器算法对所述多个正样本特征集和所述负样本特征集进行训练,得到所述预设的多个分类器,每一中分类器算法对应一分类器。
其中,人脸识别装置可以获取多个正样本集和负样本集,每一正样本集对应一个类别标签,每一正样本集可以包括多张人脸图像,负样本集则为多张不包括人脸的图像,类别标签可以包括以下至少一种:光照强度、姿态、人脸角度、人脸表情等等。
举例说明下,对人脸在不同光照,不同姿态,不同表情,进行分类,每一类正样本量控制在10000个以内,负样本即非人脸图像30000个左右,使用HOG特征或者LBP特征对样本提取特征值,分别使用boosting和SVM算法进行训练,每一类样本的训练可以独立进行,最终得到boost_classifier1,boost_classifier2,boost_classifier 3...和SVM_classifier 1,SVM_classifier 2,SVM_classifier 3...等一系列分类器,在检测时通过配置,可动态加载训练出来的强分类器,只要其中一个强分类器检测到人脸即可终止检测。举例说明下,如图1B所示,选取的分类器为boos_1,boost_i,boost_n,svm_1,svm_2,svm_i,dnn_1,dnn_i,这些分类器中每一分类器可分别对人脸进行检测。
可选地,本申请实施例中,可以为每个分类器设置检测时间,例如,以n个分类器为例,每个分类器的检测时间依次为:t1,t2,…,ti,…,tn,用户可以自行设置或者系统默认可根据能接受的检测时间为AcceptTime,从多个分类器中选择需要进行人脸检测的检测分类器,例如,从t1~tn中选择了t1~ti,则t1+t2+…+ti<AcceptTime。
可选地,具体实现中,如果分类器使用Adaboost+Haar-Like的方法训练,在检测的时候需要先进行积分图的计算,移动窗口得步骤依然可以共用,但是特征需要独立判断,即针对不同的分类器,使用的特征也不同。如此,检测的准确率,实时性可以根据检测环境的情况等进行平衡。
可选地,如果每个检测算法检测并行检测,然后再综合计算哪些是同一个人脸,Face1.X-Face.X<Face1.Width/2,Face1.Y-Face2.Y<Face1.Height/2,其中,Face1.Width表示脸部宽度,Face1.Height表示脸部高度,Face1.X、Face.X分别表示不同人脸的横坐标,Face1.Y、Face2.Y分别表示不同人脸的纵坐标,那么是同个人脸,根据这个,这种算法下,可以采用多线程等技术,进行并发检测,提高检测速度。
可选地,在上述步骤102与步骤103之间还可以包括如下步骤:
在所述多个分类器中的分类器i出现漏检的次数超过预设阈值时,则控制所述分类器i停止人脸检测,所述分类器i为所述多个分类器中的任一分类器。
其中,上述预设阈值可以由用户自行设置或者系统默认,具体地,退出机制,简而言之,即设置一个退出阈值,如果一个分类器出现漏检的次数,所占比例超出了阈值e,则该分类器自动退出。
可选地,本申请实施例中,人脸识别装置可包括配置模块,配置模块用于配置各种分类器,启动检测模块时先读取配置文件,从配置文件中读取分类器,然后生成分类器,分类器配置文件结构如下:
model是训练好的模型文件,feature是训练使用的图像特征,start表示是否启动该分类器,使用bool值,true表示启动,false表示不启动。
<Config>
<classifier>
<model>cascade.xml</model>
<feature>LBP</feature>
<start>false</start>
</classifier>
<classifier>
<model>net.bin</model>
<feature>HOG</feature>
<start>true</start>
</classifier>
</Config>
如此,可以实现选择需要进行人脸检测的分类器。
举例说明下,如图1C,针对相同人脸特征情况,待检测图像Image,可以分为三个区域,分别为rect1、rect2、rect3,提取待检测图像的人脸特征,采用boost分类器、svm分类器、dnn分类器分别对这三个区域对应的待检测图像的人脸特征进行检测,每类分类器有其独特的优势,不同的分类器,适应的范围不一样,如此,可以增加人脸检测适用范围。
再举例说明下,如图1D,针对不同人脸特征情况,例如,Hog特征,Adaboost特征,两者为不同的特征,待检测图像Image,可以分为三个区域,分别为rect1、rect2、rect3,可以提取待检测图像的不同人脸特征,得到boost分类器对应的人脸特征集A,svm分类器对应的人脸特征集B,dnn分类器对应的人脸特征集C,分配三个线程或者进程,一个线程或者进程采用boost分类器对这三个区域对应的人脸特征集A进行检测、一个线程或者进程采用svm分类器对这三个区域对应的人脸特征集B进行检测、一个线程或者进程采用dnn分类器对这三个区域对应的人脸特征集C进行检测,每类分类器有其独特的优势,不同的分类器,适应的范围不一样,如此,可以增加人脸检测适用范围。
通过本发明实施例所描述的人脸检测方法,获取待检测图像,通过预设的多个分类器并行对待检测图像进行检测,在多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将目标分类器检测到的区域作为人脸区域,如此,可以融合多个分类器的优势,对一个图像进行人脸检测,可以提升人脸检测效率。
与上述一致地,请参阅图2,为本发明实施例提供的一种人脸检测方法的第二实施例流程示意图。本实施例中所描述的人脸检测方法,包括以下步骤:
201、获取多个正样本集和负样本集,每一正样本集对应一个类别标签,每一正样本集包括多张人脸图像,所述负样本集包括多张不包括人脸的图像。
202、对所述多个正样本集和所述负样本集进行特征提取,得到多个正样本特征集和负样本特征集。
203、分别通过多种分类器算法对所述多个正样本特征集和所述负样本特征集进行训练,得到预设的多个分类器,每一中分类器算法对应一分类器。
204、获取待检测图像。
205、通过预设的多个分类器并行对所述待检测图像进行检测。
206、在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。
其中,上述步骤201-206的具体描述可以参照图1A所描述的人脸检测方法的相应描述,在此不再赘述。
通过本发明实施例所描述的人脸检测方法,获取多个正样本集和负样本集,每一正样本集对应一个类别标签,每一正样本集包括多张人脸图像,负样本集包括多张不包括人脸的图像,对多个正样本集和负样本集进行特征提取,得到多个正样本特征集和负样本特征集,分别通过多种分类器算法对多个正样本特征集和负样本特征集进行训练,得到预设的多个分类器,每一中分类器算法对应一分类器,获取待检测图像,通过预设的多个分类器并行对待检测图像进行检测,在多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将目标分类器检测到的区域作为人脸区域,如此,可以融合多个分类器的优势,对一个图像进行人脸检测,可以提升人脸检测效率。
与上述一致地,以下为实施上述人脸检测方法的装置,具体如下:
请参阅图3A,为本发明实施例提供的一种人脸检测装置的实施例结构示意图。本实施例中所描述的人脸检测装置,包括:第一获取单元301、第一检测单元302和控制单元303,具体如下:
第一获取单元301,用于获取待检测图像;
第一检测单元302,用于通过预设的多个分类器并行对所述待检测图像进行检测;
控制单元303,用于在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。
可选地,如图3B,图3B为图3A所描述的人脸检测装置的又一变型结构,其与图3A相比较,还可以包括:第二检测单元304,具体如下:
第二检测单元304,用于通过预设肤色模型对所述待检测图像进行检测,得到第一目标区域;
在所述通过预设的多个分类器并行对所述待检测图像进行检测方面,所述第一检测单元302具体用于:
通过预设的多个分类器并行对所述第一目标区域进行检测。
可选地,如图3C,图3C为图3A所描述的人脸检测装置的又一变型结构,其与图3A相比较,还可以包括:第三检测单元305、匹配单元306和确定单元307,具体如下:
第三检测单元305,用于过预设的人眼分类器对所述待检测图像进行人眼检测,得到第一目标人眼;
匹配单元306,用于依据所述第一目标人眼的位置进行模板匹配,得到第二目标人眼;
确定单元307,用于依据所述第一目标人眼、所述第二目标人眼确定人脸所在的第二目标区域;
在所述通过预设的多个分类器并行对所述待检测图像进行检测方面,所述第一检测单元302具体用于:
通过预设的多个分类器并行对所述第二目标区域进行检测。
可选地,所述控制单元303还具体用于:
在所述多个分类器中的分类器i出现漏检的次数超过预设阈值时,则控制所述分类器i停止人脸检测,所述分类器i为所述多个分类器中的任一分类器。
可选地,如图3D,图3D为图3A所描述的人脸检测装置的又一变型结构,其与图3A相比较,还可以包括:第二获取单元308和训练单元309,具体如下:
第二获取单元308,用于获取多个正样本集和负样本集,每一正样本集对应一个类别标签,每一正样本集包括多张人脸图像,所述负样本集包括多张不包括人脸的图像;以及对所述多个正样本集和所述负样本集进行特征提取,得到多个正样本特征集和负样本特征集;
训练单元309,用于分别通过多种分类器算法对所述多个正样本特征集和所述负样本特征集进行训练,得到所述预设的多个分类器,每一中分类器算法对应一分类器。
通过本发明实施例所描述的人脸检测装置,获取待检测图像,通过预设的多个分类器并行对待检测图像进行检测,在多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将目标分类器检测到的区域作为人脸区域,如此,可以融合多个分类器的优势,对一个图像进行人脸检测,可以提升人脸检测效率。
与上述一致地,请参阅图4,为本发明实施例提供的一种人脸检测装置的实施例结构示意图。本实施例中所描述的人脸检测装置,包括:至少一个输入设备1000;至少一个输出设备2000;至少一个处理器3000,例如CPU;和存储器4000,上述输入设备1000、输出设备2000、处理器3000和存储器4000通过总线5000连接。
其中,上述输入设备1000具体可为触控面板、物理按键或者鼠标。
上述输出设备2000具体可为显示屏。
上述存储器4000可以是高速RAM存储器,也可为非易失存储器(non-volatilememory),例如磁盘存储器。上述存储器4000用于存储一组程序代码,上述输入设备1000、输出设备2000和处理器3000用于调用存储器4000中存储的程序代码,执行如下操作:
上述处理器3000,用于:
获取待检测图像;
通过预设的多个分类器并行对所述待检测图像进行检测;
在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。
可选地,上述处理器3000还具体用于:
通过预设肤色模型对所述待检测图像进行检测,得到第一目标区域;
在所述通过预设的多个分类器并行对所述待检测图像进行检测方面,上述处理器3000具体用于:
通过预设的多个分类器并行对所述第一目标区域进行检测。
可选地,上述处理器3000还具体用于:
通过预设的人眼分类器对所述待检测图像进行人眼检测,得到第一目标人眼;
依据所述第一目标人眼的位置进行模板匹配,得到第二目标人眼;
依据所述第一目标人眼、所述第二目标人眼确定人脸所在的第二目标区域;
所述通过预设的多个分类器并行对所述待检测图像进行检测,包括:
通过预设的多个分类器并行对所述第二目标区域进行检测。
可选地,上述处理器3000还具体用于:
在所述多个分类器中的分类器i出现漏检的次数超过预设阈值时,则控制所述分类器i停止人脸检测,所述分类器i为所述多个分类器中的任一分类器。
可选地,上述处理器3000还具体用于:
获取多个正样本集和负样本集,每一正样本集对应一个类别标签,每一正样本集包括多张人脸图像,所述负样本集包括多张不包括人脸的图像;
对所述多个正样本集和所述负样本集进行特征提取,得到多个正样本特征集和负样本特征集;
分别通过多种分类器算法对所述多个正样本特征集和所述负样本特征集进行训练,得到所述预设的多个分类器,每一中分类器算法对应一分类器。
本申请实施例还提供了另一种人脸检测装置,如图5所示,为了便于说明,仅示出了与本申请实施例相关的部分,具体技术细节未揭示的,请参照本申请实施例方法部分。该人脸检测装置可以为包括手机、平板电脑、PDA(personal digital assistant,个人数字助理)、POS(point of sales,销售终端)、车载电脑等任意终端设备,以人脸检测装置为手机为例:
图5示出的是与本申请实施例提供的人脸检测装置相关的手机的部分结构的框图。参考图5,手机包括:射频(radio frequency,RF)电路910、存储器920、输入单元930、传感器950、音频电路960、无线保真(wireless fidelity,WiFi)模块970、应用处理器AP980、以及电源990等部件。本领域技术人员可以理解,图5中示出的手机结构并不构成对手机的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图5对手机的各个构成部件进行具体的介绍:
输入单元930可用于接收输入的数字或字符信息,以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地,输入单元930可包括触控显示屏933、人脸检测装置931以及其他输入设备932。人脸检测装置931可以为摄像头,例如,红外摄像头,可见光摄像头或者双摄像头等等。输入单元930还可以包括其他输入设备932。具体地,其他输入设备932可以包括但不限于物理按键、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
其中,所述AP980,用于执行如下步骤:
获取待检测图像;
通过预设的多个分类器并行对所述待检测图像进行检测;
在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。
AP980是手机的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器920内的软件程序和/或模块,以及调用存储在存储器920内的数据,执行手机的各种功能和处理数据,从而对手机进行整体监控。可选的,AP980可包括一个或多个处理单元;优选的,AP980可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到AP980中。
此外,存储器920可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
RF电路910可用于信息的接收和发送。通常,RF电路910包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(low noise amplifier,LNA)、双工器等。此外,RF电路910还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(global system of mobilecommunication,GSM)、通用分组无线服务(general packet radio service,GPRS)、码分多址(code division multiple access,CDMA)、宽带码分多址(wideband code divisionmultiple access,WCDMA)、长期演进(long term evolution,LTE)、电子邮件、短消息服务(short messaging service,SMS)等。
手机还可包括至少一种传感器950,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节触控显示屏的亮度,接近传感器可在手机移动到耳边时,关闭触控显示屏和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路960、扬声器961,传声器962可提供用户与手机之间的音频接口。音频电路960可将接收到的音频数据转换后的电信号,传输到扬声器961,由扬声器961转换为声音信号播放;另一方面,传声器962将收集的声音信号转换为电信号,由音频电路960接收后转换为音频数据,再将音频数据播放AP980处理后,经RF电路910以发送给比如另一手机,或者将音频数据播放至存储器920以便进一步处理。
WiFi属于短距离无线传输技术,手机通过WiFi模块970可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图5示出了WiFi模块970,但是可以理解的是,其并不属于手机的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
手机还包括给各个部件供电的电源990(比如电池),优选的,电源可以通过电源管理系统与AP980逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管未示出,手机还可以包括摄像头、蓝牙模块等,在此不再赘述。
前述图1A、图2所示的实施例中,各步骤方法流程可以基于该手机的结构实现。
前述图3A~图3D、图4所示的实施例中,各单元功能可以基于该手机的结构实现。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。
本申请实施例还提供一种计算机程序产品,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
尽管在此结合各实施例对本发明进行了描述,然而,在实施所要求保护的本发明过程中,本领域技术人员通过查看所述附图、公开内容、以及所附权利要求书,可理解并实现所述公开实施例的其他变化。在权利要求中,“包括”(comprising)一词不排除其他组成部分或步骤,“一”或“一个”不排除多个的情况。单个处理器或其他单元可以实现权利要求中列举的若干项功能。相互不同的从属权利要求中记载了某些措施,但这并不表示这些措施不能组合起来产生良好的效果。
本领域技术人员应明白,本发明的实施例可提供为方法、装置(设备)、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。计算机程序存储/分布在合适的介质中,与其它硬件一起提供或作为硬件的一部分,也可以采用其他分布形式,如通过Internet或其它有线或无线电信系统。
本发明是参照本发明实施例的方法、装置(设备)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管结合具体特征及其实施例对本发明进行了描述,显而易见的,在不脱离本发明的精神和范围的情况下,可对其进行各种修改和组合。相应地,本说明书和附图仅仅是所附权利要求所界定的本发明的示例性说明,且视为已覆盖本发明范围内的任意和所有修改、变化、组合或等同物。显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种人脸检测方法,其特征在于,包括:
获取待检测图像;
通过预设的多个分类器并行对所述待检测图像进行检测;
在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
通过预设肤色模型对所述待检测图像进行检测,得到第一目标区域;
所述通过预设的多个分类器并行对所述待检测图像进行检测,包括:
通过预设的多个分类器并行对所述第一目标区域进行检测。
3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
通过预设的人眼分类器对所述待检测图像进行人眼检测,得到第一目标人眼;
依据所述第一目标人眼的位置进行模板匹配,得到第二目标人眼;
依据所述第一目标人眼、所述第二目标人眼确定人脸所在的第二目标区域;
所述通过预设的多个分类器并行对所述待检测图像进行检测,包括:
通过预设的多个分类器并行对所述第二目标区域进行检测。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述方法还包括:
在所述多个分类器中的分类器i出现漏检的次数超过预设阈值时,则控制所述分类器i停止人脸检测,所述分类器i为所述多个分类器中的任一分类器。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
获取多个正样本集和负样本集,每一正样本集对应一个类别标签,每一正样本集包括多张人脸图像,所述负样本集包括多张不包括人脸的图像;
对所述多个正样本集和所述负样本集进行特征提取,得到多个正样本特征集和负样本特征集;
分别通过多种分类器算法对所述多个正样本特征集和所述负样本特征集进行训练,得到所述预设的多个分类器,每一中分类器算法对应一分类器。
6.一种人脸检测装置,其特征在于,包括:
第一获取单元,用于获取待检测图像;
第一检测单元,用于通过预设的多个分类器并行对所述待检测图像进行检测;
控制单元,用于在所述多个分类器中的任一目标分类器在检测到人脸的情况下,停止人脸检测,并将所述目标分类器检测到的区域作为人脸区域。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第二检测单元,用于通过预设肤色模型对所述待检测图像进行检测,得到第一目标区域;
在所述通过预设的多个分类器并行对所述待检测图像进行检测方面,所述第一检测单元具体用于:
通过预设的多个分类器并行对所述第一目标区域进行检测。
8.根据权利要求6或7所述的装置,其特征在于,所述装置还包括:
通第三检测单元,用于过预设的人眼分类器对所述待检测图像进行人眼检测,得到第一目标人眼;
匹配单元,用于依据所述第一目标人眼的位置进行模板匹配,得到第二目标人眼;
确定单元,用于依据所述第一目标人眼、所述第二目标人眼确定人脸所在的第二目标区域;
在所述通过预设的多个分类器并行对所述待检测图像进行检测方面,所述第一检测单元具体用于:
通过预设的多个分类器并行对所述第二目标区域进行检测。
9.根据权利要求6-8任一项所述的装置,其特征在于,所述控制单元还具体用于:
在所述多个分类器中的分类器i出现漏检的次数超过预设阈值时,则控制所述分类器i停止人脸检测,所述分类器i为所述多个分类器中的任一分类器。
10.根据权利要求6-9任一项所述的装置,其特征在于,所述装置还包括:
第二获取单元,用于获取多个正样本集和负样本集,每一正样本集对应一个类别标签,每一正样本集包括多张人脸图像,所述负样本集包括多张不包括人脸的图像;以及对所述多个正样本集和所述负样本集进行特征提取,得到多个正样本特征集和负样本特征集;
训练单元,用于分别通过多种分类器算法对所述多个正样本特征集和所述负样本特征集进行训练,得到所述预设的多个分类器,每一中分类器算法对应一分类器。
CN201810817652.2A 2018-07-24 2018-07-24 人脸检测方法及装置 Active CN109034052B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810817652.2A CN109034052B (zh) 2018-07-24 2018-07-24 人脸检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810817652.2A CN109034052B (zh) 2018-07-24 2018-07-24 人脸检测方法及装置

Publications (2)

Publication Number Publication Date
CN109034052A true CN109034052A (zh) 2018-12-18
CN109034052B CN109034052B (zh) 2021-04-02

Family

ID=64644604

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810817652.2A Active CN109034052B (zh) 2018-07-24 2018-07-24 人脸检测方法及装置

Country Status (1)

Country Link
CN (1) CN109034052B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111310630A (zh) * 2020-02-10 2020-06-19 支付宝实验室(新加坡)有限公司 活体检测方法及装置
CN112380965A (zh) * 2020-11-11 2021-02-19 浙江大华技术股份有限公司 进行人脸识别的方法及多目摄像机
JPWO2021106187A1 (zh) * 2019-11-29 2021-06-03

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050180627A1 (en) * 2004-02-13 2005-08-18 Ming-Hsuan Yang Face recognition system
CN101178773A (zh) * 2007-12-13 2008-05-14 北京中星微电子有限公司 基于特征提取和分类器的图像识别系统及方法
CN101226591A (zh) * 2008-01-31 2008-07-23 上海交通大学 基于手机摄像头结合人脸识别技术的身份识别方法
CN102136075A (zh) * 2011-03-04 2011-07-27 杭州海康威视软件有限公司 复杂场景下的多视角人脸检测方法及其装置
CN102339384A (zh) * 2011-09-16 2012-02-01 北京交通大学 一种人脸识别方法
CN102831413A (zh) * 2012-09-11 2012-12-19 上海中原电子技术工程有限公司 基于多分类器融合的人脸识别方法及系统
CN106407878A (zh) * 2016-06-28 2017-02-15 北京智芯原动科技有限公司 基于多分类器的人脸检测方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050180627A1 (en) * 2004-02-13 2005-08-18 Ming-Hsuan Yang Face recognition system
CN101178773A (zh) * 2007-12-13 2008-05-14 北京中星微电子有限公司 基于特征提取和分类器的图像识别系统及方法
CN101226591A (zh) * 2008-01-31 2008-07-23 上海交通大学 基于手机摄像头结合人脸识别技术的身份识别方法
CN102136075A (zh) * 2011-03-04 2011-07-27 杭州海康威视软件有限公司 复杂场景下的多视角人脸检测方法及其装置
CN102339384A (zh) * 2011-09-16 2012-02-01 北京交通大学 一种人脸识别方法
CN102831413A (zh) * 2012-09-11 2012-12-19 上海中原电子技术工程有限公司 基于多分类器融合的人脸识别方法及系统
CN106407878A (zh) * 2016-06-28 2017-02-15 北京智芯原动科技有限公司 基于多分类器的人脸检测方法及装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2021106187A1 (zh) * 2019-11-29 2021-06-03
WO2021106187A1 (ja) * 2019-11-29 2021-06-03 日本電気株式会社 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び非一時的なコンピュータ可読媒体
JP7315024B2 (ja) 2019-11-29 2023-07-26 日本電気株式会社 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び顔認証環境判定プログラム
JP7477021B2 (ja) 2019-11-29 2024-05-01 日本電気株式会社 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、顔認証環境判定プログラム、肌色チャート、及び肌色チャートの製造方法
CN111310630A (zh) * 2020-02-10 2020-06-19 支付宝实验室(新加坡)有限公司 活体检测方法及装置
CN112380965A (zh) * 2020-11-11 2021-02-19 浙江大华技术股份有限公司 进行人脸识别的方法及多目摄像机
CN112380965B (zh) * 2020-11-11 2024-04-09 浙江大华技术股份有限公司 进行人脸识别的方法及多目摄像机

Also Published As

Publication number Publication date
CN109034052B (zh) 2021-04-02

Similar Documents

Publication Publication Date Title
CN106295567B (zh) 一种关键点的定位方法及终端
TWI714834B (zh) 人臉活體檢測方法、裝置以及電子設備
CN109697416B (zh) 一种视频数据处理方法和相关装置
CN106295566B (zh) 人脸表情识别方法及装置
US8792722B2 (en) Hand gesture detection
US8750573B2 (en) Hand gesture detection
WO2019024717A1 (zh) 防伪处理方法及相关产品
CN108875781A (zh) 一种标签分类方法、装置、电子设备及存储介质
CN109346061B (zh) 音频检测方法、装置及存储介质
CN106548145A (zh) 图像识别方法及装置
CN112052186B (zh) 目标检测方法、装置、设备以及存储介质
CN105426867A (zh) 人脸识别验证方法及装置
CN108259758B (zh) 图像处理方法、装置、存储介质和电子设备
WO2012063560A1 (ja) 画像処理システム、画像処理方法、及び画像処理プログラムを記憶した記憶媒体
CN108875540A (zh) 图像处理方法、装置和系统及存储介质
CN109117725A (zh) 人脸识别方法及装置
CN105528078B (zh) 控制电子设备的方法及装置
CN109034052A (zh) 人脸检测方法及装置
US11151398B2 (en) Anti-counterfeiting processing method, electronic device, and non-transitory computer-readable storage medium
CN106169075A (zh) 身份验证方法及装置
CN108198130A (zh) 图像处理方法、装置、存储介质及电子设备
CN104077597B (zh) 图像分类方法及装置
CN109146498A (zh) 人脸支付方法及相关装置
CN108197585A (zh) 脸部识别方法和装置
CN110443769A (zh) 图像处理方法、图像处理装置及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: Face detection method and device

Effective date of registration: 20220329

Granted publication date: 20210402

Pledgee: Shenzhen small and medium sized small loan Co.,Ltd.

Pledgor: Shenzhen Kemai Technology Co.,Ltd.

Registration number: Y2022440020036

PE01 Entry into force of the registration of the contract for pledge of patent right
PC01 Cancellation of the registration of the contract for pledge of patent right

Date of cancellation: 20230421

Granted publication date: 20210402

Pledgee: Shenzhen small and medium sized small loan Co.,Ltd.

Pledgor: Shenzhen Kemai Technology Co.,Ltd.

Registration number: Y2022440020036

PC01 Cancellation of the registration of the contract for pledge of patent right