CN103136533B - 基于动态阈值的人脸识别方法及装置 - Google Patents

基于动态阈值的人脸识别方法及装置 Download PDF

Info

Publication number
CN103136533B
CN103136533B CN201110385373.1A CN201110385373A CN103136533B CN 103136533 B CN103136533 B CN 103136533B CN 201110385373 A CN201110385373 A CN 201110385373A CN 103136533 B CN103136533 B CN 103136533B
Authority
CN
China
Prior art keywords
face
face picture
scene
picture
scene type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110385373.1A
Other languages
English (en)
Other versions
CN103136533A (zh
Inventor
黄磊
任智杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hanwang Technology Co Ltd
Original Assignee
Hanwang Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hanwang Technology Co Ltd filed Critical Hanwang Technology Co Ltd
Priority to CN201110385373.1A priority Critical patent/CN103136533B/zh
Publication of CN103136533A publication Critical patent/CN103136533A/zh
Application granted granted Critical
Publication of CN103136533B publication Critical patent/CN103136533B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本发明提供一种基于动态阈值的人脸识别方法及装置,该方法包括:人脸识别步骤,用于将待识别人脸图片与预先设置的模板人脸图片进行匹配,以确定与待识别人脸图片相似度最高的模板人脸图片和相似度得分;聚类特征获取步骤,用于分别提取待识别的人脸图片的场景特征和与待识别人脸图片相似度最高的模板人脸图片的场景特征,并结合上述相似度得分,生成聚类特征;类别确定步骤,用于将所述聚类特征输入预先确定的场景类别模型中,以确定聚类特征的场景类别;判断步骤,用于选择预先确定的与所述场景类别相对应的阈值,并在所述相似度得分高于阈值时判断为人脸识别通过。本发明在解决无约束场景下阈值确定问题的同时,提升了人脸识别的通过率。

Description

基于动态阈值的人脸识别方法及装置
技术领域
本发明涉及计算机图像处理和模式识别领域,特别涉及一种基于动态阈值的人脸识别方法及装置。
背景技术
作为身份识别的有效技术,近年来人脸识别技术得到迅速发展和广泛应用。在过去的几十年里,人脸识别已在商业和执法部门得到广泛应用,例如刑事鉴定、信用卡识别、安全系统、现场监控、门禁考勤等。
随着在实际中应用的推广,人脸识别存在的问题和难点也逐渐凸显出来。应用场景的变化,如光照、姿态和表情的变化,可能会导致一个人在不同环境下的差异性大于不同人在相同环境下的差异性。此外,化妆、遮挡及年龄等因素也会增加人脸识别的困难。在无约束场景应用中,作为主要的影响因素,光照变化、姿态变化和表情变化在增加识别难度的同时,也会影响不同场景中识别的通过阈值的设定。注册图片和识别图片在同一光照环境以及不同光照环境下、同一姿态和不同姿态下、相同表情和不同表情下识别的通过阈值会有较大差异,因此在无约束场景应用下,面临的难题是:人脸识别的通过阈值在控制误识的情况下要尽可能地提升各种应用场景下的人脸识别通过率。
发明内容
本发明提供一种基于动态阈值的人脸识别方法和装置,能够在有效控制误识的情况下提升人脸的识别通过率。
本发明的人脸识别方法,包括:人脸识别步骤,用于将待识别人脸图片与预先设置的模板人脸图片进行匹配,以确定与待识别人脸图片相似度最高的模板人脸图片和相似度得分;聚类特征获取步骤,用于分别提取待识别的人脸图片的场景特征和与待识别人脸图片相似度最高的模板人脸图片的场景特征,并结合上述相似度得分,生成聚类特征;类别确定步骤,用于将所述聚类特征输入预先确定的场景类别模型中,以确定所述聚类特征的场景类别;判断步骤,用于选择预先确定的与所述场景类别相对应的阈值,并在所述相似度得分高于所述阈值时判断为人脸识别通过。
本发明的基于动态阈值的人脸识别装置,包括:人脸识别单元,用于将待识别人脸图片与预先设置的模板人脸图片进行匹配,以确定与待识别人脸图片相似度最高的模板人脸图片和相似度得分;聚类特征获取单元,用于分别提取待识别的人脸图片的场景特征和与待识别人脸图片相似度最高的模板人脸图片的场景特征,并结合上述相似度得分,生成聚类特征;类别确定单元,用于将所述聚类特征输入预先确定的场景类别模型中,以确定所述聚类特征的场景类别;判断单元,用于选择预先确定的与所述场景类别相对应的阈值,并在所述相似度得分高于所述阈值时判断为人脸识别通过。
本发明所述的人脸识别方法和装置中提出的光照特征,可以鲁棒地反映图片采集环境的光照条件,基于聚类的思想来确定动态阈值,在解决无约束场景下阈值确定问题的同时,提升了识别通过率,实现了在控制误识的同时,自适应地选择阈值进行通过判断,有效地提高了识别通过率。
附图说明
图1是示出本发明实施例的人脸识别方法的示意图。
图2是示出本发明实施例的训练过程和识别过程的示意图。
图3是示出本发明实施例的人脸识别装置的示意图。
具体实施方式
本发明的目的在于提供一种基于动态阈值的人脸识别方法及装置。该方法根据采集到的不同应用场景下的测试人脸图片集合和注册人脸图片集合,分别将每种场景条件下的测试人脸图片与注册人脸图片进行匹配识别,将注册人脸图片中与所述测试人脸图片相似度最高的图片与所述测试人脸图片组成注册-识别对;分别提取获得的注册-识别对中的注册人脸图片和测试人脸图片的场景特征,结合构造注册-识别对步骤获得的该注册-识别对对应的相似度得分,生成聚类特征;进行聚类,得到聚类类别模型;然后针对每种聚类类别分别计算指定误识下的通过阈值,进而设定多个阈值。
在识别时,首先将待识别人脸图片与预先设置的模板人脸图片进行匹配,以确定与待识别人脸图片相似度最高的模板人脸图片和相似度得分;分别提取待识别的人脸图片的场景特征和与待识别人脸图片相似度最高的模板人脸图片的场景特征,并结合上述相似度得分,生成聚类特征;将所述聚类特征输入预先确定的场景类别模型中,以确定所述聚类特征的场景类别;最后,选择与所述场景类别相对应的阈值,并在所述相似度得分高于所述阈值时判断人脸识别通过。实现了在不同应用场景下的人脸识别阈值的动态选择从而实现识别通过率的提升。
本发明所述的场景包括:光照、姿态、表情等。根据不同的应用,选择对识别率影响较大的场景,能够使本发明的方法达到最佳效果。在选择不同的场景时,要相应地采集该场景的各种变化情况下的人脸图片,以构造测试图片集和注册图片集。
本发明提供一种人脸识别方法,如图1所示,包括:
人脸识别步骤(S101),用于将待识别人脸图片与预先设置的模板人脸图片进行匹配,以确定与待识别人脸图片相似度最高的模板人脸图片和相似度得分;
聚类特征获取步骤(S102),用于分别提取待识别的人脸图片的场景特征和与待识别人脸图片相似度最高的模板人脸图片的场景特征,并结合上述相似度得分,生成聚类特征;
类别确定步骤(S103),用于将所述聚类特征输入预先确定的场景类别模型中,以确定所述聚类特征的场景类别;以及
判断步骤(S104),用于选择预先确定的与所述场景类别相对应的阈值,并在所述相似度得分高于所述阈值时判断为人脸识别通过。
在本发明的人脸识别方法的一实施例中,以光照作为选择的场景,适用于人脸识别应用与光照变化比较大的情况下。对于待识别的人脸图片,本发明首先进行识别以获得待识别人脸图片的识别结果;提取所述待识别人脸图片和与所述待识别人脸图片相似度最高的模板人脸图片的光照特征,然后结合识别结果,构造出聚类特征;判断所述聚类特征在预先训练的光照类别模型中的所属类别,根据该所属类别对应的阈值判断是否识别通过。其中,所述识别结果包括相似度得分。
在进行人脸识别之前,首先要训练场景类别模型,本实施例以训练光照类别模型为例。为保证聚类学习的泛化性,本发明的实施例在训练光照类别模型的过程中,需要采集不同光照条件下的人脸图片,并构造出不同光照条件的测试人脸图片集合和注册人脸图片集合。如,基于配置相同的图像采集设备,在室内外不同光照条件下,分别采集人脸图片,标记整理,分成K种光照条件,对于测试人脸图片集合和注册人脸图片集合,分别建立K个光照类别样本。然后利用人脸识别算法进行不同组合的注册和识别实验,记录识别结果。
图2示出的是包括本发明图1所示的人脸识别方法的识别过程和与该识别过程相关的训练过程的整体技术流程图。下面将通过方法举例来详细介绍本发明的技术方案。
在本发明的实施例中,训练过程包括图2左侧所示的六个步骤,具体说明如下。
首先,如步骤S1(采集步骤)所示,采集多种光照条件下的人脸图片,以获得测试人脸图片集合和注册人脸图片集合。由于在不同光照条件下,人脸识别通过阈值的设定不同。为解决无约束光照条件下的动态阈值选择问题,训练样本集需要涵盖各种光照条件下的样本。在本发明的实施例中,利用测光计得到的光照值来衡量场景中光照环境的变化。根据实测,室内环境下,面部光照值范围在3000LUX以内。室外环境中,面部光照值范围可达到100000LUX。
根据室内外光照值范围以及采集到的图片效果,可以将光照值范围进行分段划分,保证每个光照值范围中都有相对应的人脸图片集,并且图片数目相一致。此外,为构造后述的注册-识别对,在采集不同光照条件的人脸图片时,需要保证每个光照范围段中包含同一批人的注册图片和测试图片。
当聚类方法采用有监督学习时,需要根据采集时的光照值范围对人脸图片进行类别标记,如光照值范围共分为K段,则测试人脸图片集合和注册人脸图片集合可分别标记为K类。若聚类方法采用无监督学习,则无需标记每张人脸图片采集时的光照类别。
若采集的测试人脸图片集合和注册人脸图片集合的光照条件不确定,则需要分别提取测试人脸图片集合和注册人脸图片集合中的图片的光照特征,根据提取到的光照特征分别将测试人脸图片集合和注册人脸图片集合分成K类,并将测试人脸图片集合和注册人脸图片集合中的图片进行类别标记。
接下来,如步骤S2(构造注册-识别对步骤)所示,分别将每种光照条件下的测试人脸图片与注册人脸图片进行匹配识别,将注册人脸图片中与所述测试人脸图片相似度最高的图片与所述测试人脸图片组成注册-识别对。
在步骤S2中,将同一批人不同光照类别(光照值范围)下的测试人脸图片和注册人脸图片分别进行匹配识别。假设采集到的测试人脸图片集和注册人脸图片集共有K个光照类别,K为大于1的自然数,则可得到K*K种识别组合。针对每一种注册-识别组合,分别对其中的注册人脸图片和测试人脸图片进行人脸定位、图片归一化、提取特征;然后通过计算每一张注册人脸图片的特征和测试人脸图片的特征的相似度,确定与测试人脸图片相似度最高的注册人脸图片,并将该测试人脸图片和与其相似度最高的注册人脸图片组成一个注册-识别对。保存每一个注册-识别对的测试人脸图片和注册人脸图片,以及相似度得分。分别对K*K种识别组合进行上述的识别操作,得到K*K种注册-识别对。在构造注册-识别对的过程中,根据后续聚类方法和聚类特征的不同,需要保存的识别结果不同。在本发明中,对于无监督学习,需要保存识别对应的注册人脸图片、识别相似度得分;而对于有监督学习,在记录识别对应的注册人脸图片的同时,需要记录注册人脸图片的光照标签。
然后,如步骤S3(构造场景类别训练集步骤)所示,分别提取获得的注册-识别对中的注册人脸图片和测试人脸图片的光照特征,结合构造注册-识别对步骤获得的该注册-识别对的相似度得分,生成聚类特征,所有注册-识别对的聚类特征构成场景类别训练集。
在无约束光照场景应用中,即光源多变的场景中,光照特征无法直接获取,只能通过分析采集到人脸图片特征来提取环境的光照特征。因此采集到各种光照条件下的人脸图片后,需要从人脸图片中提取出与采集环境相关的光照特征,进而得到图片的光照特征。
图片本身的统计信息如灰度均值、方差等在一定程度上可以反映图片的亮度信息,可以作为简单的光照特征,但由于图片本身受阴影和噪声等的影响,图片本身的统计信息不能准确的反映出环境光信息。而在人脸识别应用中,如何消除光照变化对识别的影响一直是主要研究课题之一。现有的光照处理研究中,有一类方法是通过提取图片的光照不变量来实现光照处理,即去光照方法(参见CN102214292A2-人脸图片的光照处理方法),在此类方法中,研究方向之一是提取光照特征,进而获取光照不变信息。在本实施例基于此类去光照处理方法,来获取图片的光照特征。
通过提取光照特征来实现光照处理的典型方法之一是Retinex(SSR、MSR、SQI等)方法,Retinex方法使用高斯滤波核,对图像进行平滑来估计光照特征。在本实施例中,以单尺度Retinex光照处理方法为例,对归一化后的人脸图片进行平滑计算,将得到的光照特征进行PCA降维处理后作为图片的光照特征,参与光照类别训练。本实施例采用的光照特征估计方法已为本领域的技术人员所熟知,本发明在此不再赘述。
在提取出所有图片的光照特征后,根据注册人脸图片和测试人脸图片的光照特征,结合构造注册-识别对步骤获得的该注册-识别对的相似度得分,生成聚类特征,构造聚类特征,进行聚类学习。构造聚类特征的方法有很多种,如将注册人脸图片的光照特征做为前m维,将测试人脸图片的光照特征做为第m+1至第2*m维,将相似度得分作为第2*m+1维,共同组成聚类特征;或者将注册人脸图片的光照特征和测试人脸图片的光照特征进行矢量计算,然后再结合相似度得分生成聚类特征。本发明对生成聚类特征的具体方法不作限定。所有注册-识别对的聚类特征构成光照类别训练集。
然后,如步骤S4(场景类别模型生成步骤)所示,利用聚类方法,包括有监督的聚类方法LVQ方法、SVM方法、BP神经网络方法等以及无监督聚类方法K-均值方法、ISODATA方法、竞争学习方法等,对光照类别训练集进行聚类学习,得到光照类别模型。针对每种光照类别,基于其对应的注册-识别对的识别相似度得分来分别确定特征误识下的阈值,与光照类别模型结合构成无约束光照条件下的人脸识别的多阈值方案。
本发明利用注册-识别对所对应的光照特征和识别相似度得分,来构造聚类特征。根据实际应用不同,可以构造出不同的包含注册信息和识别信息的聚类特征。以SSR光照特征为例,聚类特征可由三部分信息组成,测试图片光照特征、对应的注册图片光照特征以及识别相似度得分。在有监督聚类中,对于一个注册-识别对,还要进行类别标记。若有K种光照条件下的图片集,在聚类特征中,共有K*K种类别标签。
所有的注册-识别对的聚类特征放在一起,构成光照类别训练集。然后采用聚类方法,对训练集进行聚类学习,得到光照相关的光照类别模型,该模型同时反应了测试图片和其对应的注册图片的光照条件。在本发明中,聚类方法既可使用无监督聚类,如K-均值,SODATA、竞争学习等方法,也可使用有监督聚类,如LVQ、SVM、BP神经网络等方法。以LVQ方法为例,下面将简单介绍聚类过程。
假设有M种光照类别标签,每个实例的聚类特征有d维,共有N个训练实例(注册-识别对),则LVQ方法对应的网络结构包含d个输入神经元,M个输出神经元。LVQ方法的目的是计算大小为d*M的网络权值矩阵W,从而正确预测提供给网络的测试例的分类,在本发明中对应于测试样本的光照类别。LVQ聚类过程如下:
1)针对每个输出神经元j,初始化权向量Wj,设置初始学习率α=α(0);
2)从训练集中任选一注册-识别对实例,输入其聚类特征X,找出与X具有最小距离的权向量Wk,其中k=argminj‖X-Wj‖;
3)调整神经元k的权向量:
若k所代表的类别与输入实例类别一致,则 W k new = W k old + α ( X - W k old ) ;
若k所代表的类别与输入实例类别不一致,则 W k new = W k old - α ( X - W k old ) ;
4)从训练集中选择新的输入实例提供给LVQ网络,返回2),直到所有实例都提供一遍;
5)减小学习率,判断聚类停止条件,若满足则停止训练,否则返回步骤2)。
LVQ聚类结束后,M个权向量Wj,构成M种注册-识别光照类别模型。对于新的注册-识别对特征X,找出与X具有最小距离的第k个权向量,其中k=argminj‖X-Wj‖,则X的光照类别为k。
在聚类完成后,执行步骤S5(阈值确定步骤),将所有注册-识别对按照光照类别模型重新分成M个样本集,根据每个样本集中的识别结果设定在人脸识别过程中的给定误识下的阈值。所述识别结果包括:相似度的分和制定误识率。例如,设定误识率为1%,若第M个样本机内有10000张样本(注册-识别对),则将识别相似度较低的第100个样本的相似度得分作为给定误识下的阈值,从而得到与不同光照类别对应的M个阈值。
最后,执行步骤S6,保存注册-识别光照类别模型和对应的阈值。
以下将结合图1和图2说明本发明的人脸识别过程,如图2右侧所示。
首先,执行步骤S7,预先设置模板人脸图片集,通常,每张人脸要拍摄多张人脸图片,做为模板人脸图片。
接下来,执行步骤S8(人脸识别步骤),将待识别人脸图片与预先设置的模板人脸图片进行匹配,以确定与待识别人脸图片相似度最高的模板人脸图片和相似度得分。本步骤计算两个人脸图片相似度的方法与步骤S2中计算相似度的方法相同。对待识别人脸图片同样要进行人脸定位、归一化、特征提取。值得说明的是,模板人脸图片通常在预先设置时就已经经过了人脸定位、归一化、特征提取处理,然后计算提取的待识别的人脸图片的人脸特征与模板人脸图片的特征的相似度。确定识别比对相似度最高的模板人脸图片为待识别人脸图片对应的注册图片,保存所述注册图片以及对应的相似度得分。模板库中保存的通常是模板人脸图片中提取的特征。本发明对从人脸图片中提取的特征的种类和提取特征的方法不作限定,只要现有技术中能够用与人脸识别的人脸特征提取方法都可以,只要在步骤S2和S7和本步骤采用相同的人脸特征提取方法,并提取相同的人脸特征即可。
然后,执行步骤S9(聚类特征获取步骤),分别提取待识别人脸图片和与待识别人脸图片相似度最高的模板人脸图片的光照特征,并结合上述相似度得分,生成聚类特征。提取光照特征的方法与步骤S3中提取测试人脸图片和注册人脸图片的光照特征的方法相同,此处不再赘述。然后,将待识别人脸图片做为测试人脸图片,将模板人脸图片做为注册人脸图片,结合步骤S8获得的待识别人脸图片相似度最高的模板人脸图片的相似度得分,参照步骤S3中的方法,生成聚类特征。
再执行步骤S10(类别确定步骤),将获得的聚类特征输入步骤S4得到的光照类别模型W中,计算出该组聚类特征所属的类别k。最后执行步骤S11(判断步骤),选择与类别k对应的阈值,按照第k个类别所对应的阈值来判断该待识别人脸图片是否识别通过,若高于获得的阈值则判断为识别通过,否则判断为拒绝通过。
本实施例选择的变化场景为光照,同理,在姿态或者表情的变化对识别通过率影响较大的情况下,可以选择姿态或表情做为变化的场景。例如,选择姿态作为变化场景时,在步骤S1中采集不同姿态的人脸图片集;步骤S3和S9中提取姿态特征和识别相似度得分构造聚类特征;步骤S3中生成的模型可以成为姿态特征模型。其中,姿态特征可以为人脸图片中鼻尖和嘴角的坐标等任何能代表不同人脸姿态的特征。本发明不再赘述以姿态做为场景特征的场景类别模型确定步骤,和识别过程的各步骤。
本发明提供一种基于动态阈值的人脸识别方法,这种方法涵盖了不同场景条件下人脸识别的阈值设定。对于待识别人脸图片,通过判断其注册-识别对的场景类别来自适应地选择通过阈值。经过一次训练,本发明提出的阈值设定规则可应用于变化场景条件下的人脸识别的通过判断,相对单一阈值,在不提升误识情况的同时有效地提高识别通过率。
另外,本发明还提供一种基于动态阈值的人脸识别装置。图3是示出本发明实施例的人脸识别装置的示意图。图3中的人脸识别装置包括人脸识别单元301、聚类特征获取单元302、类别确定单元303及判断单元304。人脸识别单元301参考图1中的步骤S101,将待识别人脸图片与预先设置的模板人脸图片进行匹配,以确定与待识别人脸图片相似度最高的模板人脸图片和相似度得分;聚类特征获取单元302参考图1中的步骤S102,分别提取待识别的人脸图片的场景特征和与待识别人脸图片相似度最高的模板人脸图片的场景特征,并结合上述相似度得分,生成聚类特征;类别确定单元303参考图1中的步骤S103,将所述聚类特征输入预先确定的场景类别模型中,以确定所述聚类特征的场景类别;判断单元304参考图1中的步骤S104,选择预先确定的与所述场景类别相对应的阈值,并在所述相似度得分高于所述阈值时判断为人脸识别通过。当变化场景为光照时,人脸识别单元301、聚类特征获取单元302、类别确定单元303及判断单元304分别参考图2中的步骤S8、S9、S10及S11进行相应操作。
上述人脸识别装置还包括采集单元、构造注册-识别对单元、构造场景类别训练集单元、场景类别模型生成单元及阈值确定单元。所述采集单元用于参考步骤S1,采集多种场景条件下的人脸图片,以获得测试人脸图片集合和注册人脸图片集合;所述构造注册-识别对单元用于参考步骤S2,分别将每种场景条件下的测试人脸图片与注册人脸图片进行匹配识别,将注册人脸图片中与所述测试人脸图片相似度最高的图片与所述测试人脸图片组成注册-识别对;所述构造场景类别训练集单元用于参考步骤S3,分别提取获得的注册-识别对中的注册人脸图片和测试人脸图片的场景特征,结合构造注册-识别对步骤获得的该注册-识别对的相似度得分,生成聚类特征,所有注册-识别对的聚类特征构成场景类别训练集;所述场景类别模型生成单元用于参考步骤S4,采用聚类方法,对场景类别训练集进行聚类学习,得到场景类别模型;所述阈值确定单元用于参考步骤S5,根据所述场景类别模型将所述注册-识别对划分为多个样本集,并根据每个样本集中的识别结果设定在人脸识别过程中的给定误识下的阈值。所述识别结果包括:相似度的分和制定误识率。
上述人脸识别装置还包括存储单元及样本分类单元,所述存储单元用于参考步骤S6,保存所述场景类别模型和在所述阈值确定单元中设定的阈值,所述样本分类单元用于在所述采集单元采集的人脸图片没有场景类别标签的情况下,分别获得由采集单元采集的测试人脸图片集合和注册人脸图片集合中的人脸图片的场景特征,按照场景特征将测试人脸图片集合和注册人脸图片集合分成多个场景条件以提供给所述构造注册-识别对单元。
为实现动态地设定阈值,本发明利用采集到的各种光照条件下的注册测试集建立光照类别模型,该光照类别模型实现了对各种应用场景下光照特征的分类建模,然后针对每种光照应用环境,分别计算给定误识下的通过阈值,自适应的解决了不同光照条件下阈值不一致问题。
总的来说,本发明通过建立光照类别模型,提出了一种动态阈值方案。该方案充分考虑了各种光照应用场景,在光照变化的人脸识别应用中,可以动态地选择与光照环境相关的阈值进行通过判断,在降低误识的同时提高人脸识别的通过率。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁盘、光盘、只读存储器或随机存取存储器等。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (12)

1.一种基于动态阈值的人脸识别方法,其特征在于,包括:
人脸识别步骤,用于将待识别人脸图片与预先设置的模板人脸图片进行匹配,以确定与待识别人脸图片相似度最高的模板人脸图片和相似度得分;
聚类特征获取步骤,用于分别提取待识别的人脸图片的场景特征和与待识别人脸图片相似度最高的模板人脸图片的场景特征,并结合上述相似度得分,生成聚类特征;
类别确定步骤,用于将所述聚类特征输入预先确定的场景类别模型中,以确定所述聚类特征的场景类别;以及
判断步骤,用于选择预先确定的与所述场景类别相对应的阈值,并在所述相似度得分高于所述阈值时判断为人脸识别通过。
2.根据权利要求1所述的人脸识别方法,其特征在于,在所述人脸识别步骤之前还包括场景类别模型确定步骤,其中所述场景类别模型确定步骤进一步包括:
采集步骤,用于采集多种场景条件下的人脸图片,以获得测试人脸图片集合和注册人脸图片集合;
构造注册-识别对步骤,用于分别将每种场景条件下的测试人脸图片与注册人脸图片进行匹配识别,将注册人脸图片中与所述测试人脸图片相似度最高的图片与所述测试人脸图片组成注册-识别对;
构造场景类别训练集步骤,用于分别提取获得的注册-识别对中的注册人脸图片和测试人脸图片的场景特征,结合构造注册-识别对步骤获得的该注册-识别对对应的相似度得分,生成聚类特征,所有注册-识别对的聚类特征构成场景类别训练集;
场景类别模型生成步骤,用于采用聚类方法,对场景类别训练集进行聚类学习,得到场景类别模型;
阈值确定步骤,用于根据所述场景类别模型将所述注册-识别对划分为多个样本集,并根据每个样本集中的识别结果设定在人脸识别过程中的给定误识下的阈值。
3.根据权利要求2所述的人脸识别方法,其特征在于,还包括:存储步骤,用于保存所述场景类别模型和在所述阈值确定步骤中设定的阈值。
4.根据权利要求2所述的人脸识别方法,其特征在于,若所述采集步骤采集的人脸图片没有场景类别标签,则在所述采集步骤和所述构造注册-识别对步骤之间还包括样本分类步骤,用于分别获得测试人脸图片集合和注册人脸图片集合中的人脸图片的场景特征,并按照场景特征将测试人脸图片集合和注册人脸图片集合中的人脸图片分成多个场景条件。
5.根据权利要求2所述的人脸识别方法,其特征在于,当所述聚类方法为有监督聚类方法时,所述聚类特征还包括场景类别标签。
6.根据权利要求1-5任一项所述的人脸识别方法,其特征在于,所述场景为光照或姿态或表情。
7.一种基于动态阈值的人脸识别装置,其特征在于,包括:
人脸识别单元,用于将待识别人脸图片与预先设置的模板人脸图片进行匹配,以确定与待识别人脸图片相似度最高的模板人脸图片和相似度得分;
聚类特征获取单元,用于分别提取待识别的人脸图片的场景特征和与待识别人脸图片相似度最高的模板人脸图片的场景特征,并结合上述相似度得分,生成聚类特征;
类别确定单元,用于将所述聚类特征输入预先确定的场景类别模型中,以确定所述聚类特征的场景类别;以及
判断单元,用于选择预先确定的与所述场景类别相对应的阈值,并在所述相似度得分高于所述阈值时判断为人脸识别通过。
8.根据权利要求7所述的人脸识别装置,其特征在于,还包括:
采集单元,用于采集多种场景条件下的人脸图片,以获得测试人脸图片集合和注册人脸图片集合;
构造注册-识别对单元,用于分别将每种场景条件下的测试人脸图片与注册人脸图片进行匹配识别,将注册人脸图片中与所述测试人脸图片相似度最高的图片与所述测试人脸图片组成注册-识别对;
构造场景类别训练集单元,用于分别提取获得的注册-识别对中的注册人脸图片和测试人脸图片的场景特征,结合构造注册-识别对步骤获得的该注册-识别对对应的相似度得分,生成聚类特征,所有注册-识别对的聚类特征构成场景类别训练集;
场景类别模型生成单元,用于采用聚类方法,对场景类别训练集进行聚类学习,得到场景类别模型;
阈值确定单元,用于根据所述场景类别模型将所述注册-识别对划分为多个样本集,并根据每个样本集中的识别结果设定在人脸识别过程中的给定误识下的阈值。
9.根据权利要求8所述的人脸识别装置,其特征在于,还包括:存储单元,用于保存所述场景类别模型和在所述阈值确定单元中设定的阈值。
10.根据权利要求8所述的人脸识别装置,其特征在于,还包括样本分类单元,用于在所述采集单元采集的人脸图片没有场景类别标签的情况下,分别获得由采集单元采集的测试人脸图片集合和注册人脸图片集合中的人脸图片的场景特征,按照场景特征将测试人脸图片集合和注册人脸图片集合中的人脸图片分成多个场景条件以提供给所述构造注册-识别对单元。
11.根据权利要求8所述的人脸识别装置,其特征在于,当所述聚类方法为有监督聚类方法时,所述聚类特征还包括场景类别标签。
12.根据权利要求7-11任一项所述的人脸识别装置,其特征在于,所述场景为光照或姿态或表情。
CN201110385373.1A 2011-11-28 2011-11-28 基于动态阈值的人脸识别方法及装置 Active CN103136533B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110385373.1A CN103136533B (zh) 2011-11-28 2011-11-28 基于动态阈值的人脸识别方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110385373.1A CN103136533B (zh) 2011-11-28 2011-11-28 基于动态阈值的人脸识别方法及装置

Publications (2)

Publication Number Publication Date
CN103136533A CN103136533A (zh) 2013-06-05
CN103136533B true CN103136533B (zh) 2015-11-25

Family

ID=48496340

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110385373.1A Active CN103136533B (zh) 2011-11-28 2011-11-28 基于动态阈值的人脸识别方法及装置

Country Status (1)

Country Link
CN (1) CN103136533B (zh)

Families Citing this family (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015088095A (ja) * 2013-11-01 2015-05-07 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および情報処理方法
CN104077563B (zh) * 2014-05-30 2018-02-02 小米科技有限责任公司 人脸识别方法和装置
CN110489952A (zh) 2014-09-30 2019-11-22 华为技术有限公司 身份认证的方法、装置及用户设备
CN105654101B (zh) * 2014-11-11 2019-04-26 联想(北京)有限公司 一种信息处理方法及电子设备
CN105243357A (zh) * 2015-09-15 2016-01-13 深圳市环阳通信息技术有限公司 一种基于身份证件的人脸识别方法及人脸识别装置
US11017066B2 (en) 2015-12-29 2021-05-25 Huawei Technologies Co., Ltd. Method for associating application program with biometric feature, apparatus, and mobile terminal
CN106067195B (zh) * 2016-06-08 2019-10-15 北京国杰科技有限公司 学生考勤监控方法
CN106295571B (zh) * 2016-08-11 2020-03-24 深圳市赛为智能股份有限公司 光照自适应的人脸识别方法及系统
CN106446802A (zh) * 2016-09-07 2017-02-22 深圳市金立通信设备有限公司 一种指纹识别方法及终端
CN108353099B (zh) 2016-11-23 2020-09-04 华为技术有限公司 一种ppg认证的方法和设备
CN108604251A (zh) 2016-11-25 2018-09-28 华为技术有限公司 一种多媒体文件的分享方法及终端设备
CN108241836A (zh) * 2016-12-23 2018-07-03 同方威视技术股份有限公司 用于安检的方法及装置
CN109389019B (zh) * 2017-08-14 2021-11-05 杭州海康威视数字技术股份有限公司 人脸图像选择方法、装置及计算机设备
CN108052864B (zh) * 2017-11-17 2019-04-26 平安科技(深圳)有限公司 人脸识别方法、应用服务器及计算机可读存储介质
CN108228792B (zh) * 2017-12-29 2020-06-16 深圳云天励飞技术有限公司 图片检索方法、电子设备及存储介质
CN108229420B (zh) * 2018-01-22 2020-10-16 维沃移动通信有限公司 一种人脸识别方法、移动终端
CN108734145B (zh) * 2018-02-27 2022-03-29 北京紫睛科技有限公司 一种基于密度自适应人脸表征模型的人脸识别方法
CN108596112A (zh) * 2018-04-27 2018-09-28 北京万里红科技股份有限公司 一种大规模虹膜特征识别匹配阈值的动态选取方法
CN108875341A (zh) * 2018-05-24 2018-11-23 北京旷视科技有限公司 一种人脸解锁方法、装置、系统及计算机存储介质
CN108985152A (zh) * 2018-06-04 2018-12-11 珠海格力电器股份有限公司 一种动态面部表情的识别方法及装置
CN109034004A (zh) * 2018-07-05 2018-12-18 广东军缆信息技术有限公司 一种基于人脸识别的身份核验方法及装置
CN109101947B (zh) * 2018-08-27 2021-03-26 Oppo广东移动通信有限公司 人像识别方法、人像识别装置及终端设备
CN109165599A (zh) * 2018-08-27 2019-01-08 北京洛必达科技有限公司 大数据教育辅助方法、系统、存储介质及计算机设备
JP7107598B2 (ja) 2018-09-06 2022-07-27 Necソリューションイノベータ株式会社 認証用顔画像候補判定装置、認証用顔画像候補判定方法、プログラム、および記録媒体
CN109359689B (zh) * 2018-10-19 2021-06-04 科大讯飞股份有限公司 一种数据识别方法及装置
CN109635647B (zh) * 2018-11-05 2022-06-10 南京航空航天大学 一种基于约束条件下的多图片多人脸的聚类方法
CN109583326A (zh) * 2018-11-12 2019-04-05 平安科技(深圳)有限公司 基于人脸识别验证外包员工的方法、装置和计算机设备
CN109688372A (zh) * 2018-11-16 2019-04-26 万翼科技有限公司 一种智能穿戴设备的管理方法
CN111401112B (zh) * 2019-01-03 2024-06-18 北京京东尚科信息技术有限公司 人脸识别方法和装置
CN109872406B (zh) * 2019-01-23 2021-07-09 北京影谱科技股份有限公司 一种渐进式的判断更新方法、装置和人脸打卡系统
CN109977765A (zh) * 2019-02-13 2019-07-05 平安科技(深圳)有限公司 人脸图像识别方法、装置及计算机设备
CN110162462A (zh) * 2019-04-16 2019-08-23 深圳壹账通智能科技有限公司 基于场景的人脸识别系统的测试方法、系统和计算机设备
CN110069928A (zh) * 2019-04-17 2019-07-30 Oppo广东移动通信有限公司 应用于安卓系统的安全模式进入方法及相关产品
CN110472504A (zh) * 2019-07-11 2019-11-19 华为技术有限公司 一种人脸识别的方法和装置
CN112241666A (zh) * 2019-07-18 2021-01-19 佳能株式会社 目标识别方法、装置及存储介质
CN110428017B (zh) * 2019-08-09 2023-05-12 上海天诚比集科技有限公司 一种相似度阈值动态设定的物体识别方法
CN110781809A (zh) * 2019-10-23 2020-02-11 杭州宇泛智能科技有限公司 基于注册特征更新的识别方法、装置及电子设备
CN111414803A (zh) * 2020-02-24 2020-07-14 北京三快在线科技有限公司 人脸识别方法、装置、电子设备
CN111488943A (zh) * 2020-04-16 2020-08-04 上海芯翌智能科技有限公司 人脸识别的方法及设备
CN111738059B (zh) * 2020-05-07 2024-03-29 中山大学 一种面向无感场景的人脸识别方法
CN111814690B (zh) * 2020-07-09 2023-09-01 浙江大华技术股份有限公司 一种目标重识别方法、装置和计算机可读存储介质
CN111898495B (zh) * 2020-07-16 2021-04-16 云从科技集团股份有限公司 一种动态阈值管理方法、系统、设备及介质
CN112347842B (zh) * 2020-09-11 2024-05-24 博云视觉(北京)科技有限公司 一种基于关联图的离线人脸聚类方法
CN112417184B (zh) * 2020-11-23 2021-05-25 上海点泽智能科技有限公司 多场景特征信息存储结构及其比对方法、设备和存储介质
CN112613360A (zh) * 2020-12-09 2021-04-06 珠海格力电器股份有限公司 一种图片分享方法、装置、智能终端及存储介质
TWI795724B (zh) * 2021-02-02 2023-03-11 神達數位股份有限公司 身分驗證方法及身分驗證系統
CN112883946A (zh) * 2021-04-29 2021-06-01 南京视察者智能科技有限公司 一种自适应阈值的选取方法及人脸识别方法
CN113762106B (zh) * 2021-08-23 2024-07-02 深圳云天励飞技术股份有限公司 人脸识别方法、装置、电子设备及存储介质
CN113807319B (zh) * 2021-10-15 2024-09-24 云从科技集团股份有限公司 人脸识别优化方法、装置、设备和介质
CN114038047A (zh) * 2021-11-26 2022-02-11 华中科技大学鄂州工业技术研究院 一种人脸验证方法、装置及存储介质
CN115569851B (zh) * 2022-10-11 2023-06-20 广东飞流智能科技有限公司 一种基于物联网的交叉带智能货物分拣系统及方法
CN117173642B (zh) * 2023-11-03 2024-02-02 昊金海建设管理有限公司 一种基于大数据的建筑施工视频实时监测预警方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101739428A (zh) * 2008-11-10 2010-06-16 中国科学院计算技术研究所 一种对多媒体创建索引的方法
US7809722B2 (en) * 2005-05-09 2010-10-05 Like.Com System and method for enabling search and retrieval from image files based on recognized information
CN102063607A (zh) * 2009-11-16 2011-05-18 日电(中国)有限公司 一种用于采集人脸图像的方法和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7809722B2 (en) * 2005-05-09 2010-10-05 Like.Com System and method for enabling search and retrieval from image files based on recognized information
CN101739428A (zh) * 2008-11-10 2010-06-16 中国科学院计算技术研究所 一种对多媒体创建索引的方法
CN102063607A (zh) * 2009-11-16 2011-05-18 日电(中国)有限公司 一种用于采集人脸图像的方法和系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于多姿态脸和小波变换的动态人脸识别;杜艳明等;《计算机应用》;20071231;第83-84页 *

Also Published As

Publication number Publication date
CN103136533A (zh) 2013-06-05

Similar Documents

Publication Publication Date Title
CN103136533B (zh) 基于动态阈值的人脸识别方法及装置
CN102682309B (zh) 一种基于模板学习的人脸注册方法及装置
CN104732601B (zh) 一种基于人脸识别技术的高识别率自动考勤装置及方法
JP2022141931A (ja) 生体検出モデルのトレーニング方法及び装置、生体検出の方法及び装置、電子機器、記憶媒体、並びにコンピュータプログラム
CN106529499A (zh) 基于傅里叶描述子和步态能量图融合特征的步态识别方法
CN106919921B (zh) 结合子空间学习与张量神经网络的步态识别方法及系统
CN103902961A (zh) 一种人脸识别方法及装置
CN106447625A (zh) 基于人脸图像序列的属性识别方法及装置
CN109919093A (zh) 一种人脸识别方法、装置、设备及可读存储介质
CN106407911A (zh) 基于图像的眼镜识别方法及装置
CN103136504A (zh) 人脸识别方法及装置
CN101216884A (zh) 一种人脸认证的方法及系统
CN105740808B (zh) 人脸识别方法和装置
CN105590097A (zh) 暗视觉条件下双摄像头协同实时人脸识别安防系统及方法
CN109977887A (zh) 一种抗年龄干扰的人脸识别方法
CN111178136A (zh) 一种基于大数据的智慧校园身份识别方法及系统
CN103839033A (zh) 一种基于模糊规则的人脸识别方法
CN104751143A (zh) 一种基于深度学习的人证核验系统及方法
CN103824090A (zh) 一种自适应的人脸低层特征选择方法及人脸属性识别方法
CN109145720A (zh) 一种人脸识别方法和装置
CN103593648A (zh) 一个面向开放环境的人脸识别方法
CN105160285A (zh) 基于立体视觉的自动人体跌倒识别方法及系统
CN117095436A (zh) 企业员工信息智能管理系统及其方法
CN115188031A (zh) 指纹识别方法、计算机程序产品、存储介质及电子设备
CN114639152A (zh) 基于人脸识别的多模态语音交互方法、装置、设备及介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant