CN102004899B - 一种人脸认证系统及方法 - Google Patents

一种人脸认证系统及方法 Download PDF

Info

Publication number
CN102004899B
CN102004899B CN201010531502A CN201010531502A CN102004899B CN 102004899 B CN102004899 B CN 102004899B CN 201010531502 A CN201010531502 A CN 201010531502A CN 201010531502 A CN201010531502 A CN 201010531502A CN 102004899 B CN102004899 B CN 102004899B
Authority
CN
China
Prior art keywords
face
vector
people
face characteristic
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201010531502A
Other languages
English (en)
Other versions
CN102004899A (zh
Inventor
邓亚峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuxi Zhonggan Microelectronics Co Ltd
Original Assignee
Wuxi Vimicro Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuxi Vimicro Corp filed Critical Wuxi Vimicro Corp
Priority to CN201010531502A priority Critical patent/CN102004899B/zh
Publication of CN102004899A publication Critical patent/CN102004899A/zh
Application granted granted Critical
Publication of CN102004899B publication Critical patent/CN102004899B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Collating Specific Patterns (AREA)

Abstract

本发明揭露了一种人脸认证系统,其包括:采集图像序列的图像采集模块;在采集到的图像序列中检测和跟踪人脸并得到多张人脸图像的人脸检测跟踪模块;将得到的多张人脸图像进行平均得到平均人脸图像的平均人脸获取模块;从平均人脸图像中提取人脸特征向量的人脸特征提取模块;为多个合法用户存储有人脸特征向量的人脸特征数据库;人脸认证模块,利用人脸特征数据库中的申明合法用户的人脸特征向量对人脸特征提取模块提供的待认证目标的人脸特征向量进行人脸认证。这样能够减少单张人脸姿态表情对于认证结果的影响。

Description

一种人脸认证系统及方法
【技术领域】
本发明涉及领域人脸处理领域,特别涉及一种人脸认证系统及方法。
【背景技术】
随着当前计算机技术的迅速发展,计算机处理能力得到大幅度的提升;与此同时,模式识别、计算机视觉等领域的相关技术也取得了快速发展,人脸认证作为相关领域研究和应用的热点,在安全、娱乐、人机交互等许多领域都具有重要的实用价值并得到了广泛应用。
人脸认证是人脸识别的一个分支,人脸认证首先需要利用待认证的人的脸部图像对分类器进行训练,建立该人的分类器模型。当一个人进行人脸认证时,通常先声明自己的身份信息,认证系统根据声明的信息从验证数据库中找到该信息对应的分类器模型,采用该分类器模型对该人进行人脸认证,若认证的结果与此人声明的身份信息吻合,则表示认证通过,否则表示认证未通过。虽然人脸认证对同一个人是一个区分是否是库中所申明身份人的两类分类问题,但是由于库中保存了多个合法用户,因而现有方法需要为每个人训练一个分类模型。
此外,在应用中视频采集的多张人脸一般都具有不同的姿态和表情,而查询数据库里的人脸也具有不同的姿态和表情,如果采用一对一的单张匹配方式,由于光照,姿态和表情的影响会产生比较大的偏差,造成投票方式的不准确。
因此,有必要提出一种改进的人脸认证方案来解决上述问题。
【发明内容】
本发明的目的在于提供一种人脸认证系统和方法,其可以减少人脸姿态表情对于认证结果的影响。
为了达到本发明的目的,根据本发明的一个方面,本发明提供一种人脸认证系统,其包括:采集图像序列的图像采集模块;在采集到的图像序列中检测和跟踪人脸并得到多张人脸图像的人脸检测跟踪模块;将得到的多张人脸图像进行平均得到平均人脸图像的平均人脸获取模块;从平均人脸图像中提取人脸特征向量的人脸特征提取模块;为多个合法用户存储有人脸特征向量的人脸特征数据库;人脸认证模块,利用人脸特征数据库中的申明合法用户的人脸特征向量对人脸特征提取模块提供的待认证目标的人脸特征向量进行人脸认证。
进一步的,其还包括有在得到的多张人脸图像上进行特征点定位的特征点定位模块,所述平均人脸获取模块根据每张人脸图像中定位出的人脸特征点将多张人脸图像对齐并归一化尺寸,求取对齐且尺寸归一化后的多张人脸图像的亮度均值得到平均人脸图像。
进一步的,所述人脸特征向量为LBP直方图特征向量,所述人脸认证模块将人脸特征数据库中的申明合法用户的人脸特征向量与人脸特征提取模块提供的待认证目标的人脸特征向量作差得到人脸特征向量差,采用支持向量机模型对所述人脸特征向量差进行认证,如果待认证目标与申明合法用户为同一人,则认证通过,如果待认证目标与申明合法用户不为同一人,则认证拒绝。
进一步的,所述人脸特征数据库中的合法用户的人脸特征向量为从根据该合法用户的多张人脸图像得到的平均人脸图像中提取的LBP直方图特征向量。
进一步的,所述支持向量机模型系通过训练得到,所述训练过程为:采集M个合法用户的人脸图像,第m个人有Nm张人脸图像,需要满足Nm≥2*Navg,Navg为平均人脸数;则从第m个人的Nm张人脸图像中任意选取Navg张,并从剩余的Nm-Navg张图像中任意选取Navg张,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,并作为正样本特征向量;从M个人中任意取出两个人,假定当前的两个人分别为第p个人和第q个人,从第p个人的Np张人脸图像中任意选取Navg张,从第q个人的Nq张图像中任意选取Navg张,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,并将所述差值向量作为反样本特征向量;对于上述得到的正样本和反样本特征向量,选择其中分类能力强的前M个作为最终使用的特征向量;对于M个特征向量,采用支持向量机训练人脸认证模型,得到最终的人脸认证模型。
根据本发明的另一个方面,本发明提供一种人脸认证方法,其包括:采集图像序列;在采集到的图像序列中检测和跟踪人脸并得到多张人脸图像;将得到的多张人脸图像进行平均得到平均人脸图像;从平均人脸图像中提取人脸特征向量;人脸特征数据库为多个合法用户存储有人脸特征向量;利用人脸特征数据库中的申明合法用户的人脸特征向量对人脸特征提取模块提供的待认证目标的人脸特征向量进行人脸认证。
进一步的,所述人脸认证方法还包括:在得到的多张人脸图像上进行特征点定位,那么所述将得到的多张人脸图像进行平均得到平均人脸图像包括:根据每张人脸图像中定位出的人脸特征点将多张人脸图像对齐并归一化尺寸,求取对齐且尺寸归一化后的多张人脸图像的亮度均值得到平均人脸图像。
进一步的,所述人脸特征向量为LBP直方图特征向量,那么所述利用人脸特征数据库中的申明合法用户的人脸特征向量对人脸特征提取模块提供的待认证目标的人脸特征向量进行人脸认证包括:将人脸特征数据库中的申明合法用户的人脸特征向量与人脸特征提取模块提供的待认证目标的人脸特征向量作差得到人脸特征向量差,采用支持向量机模型对所述人脸特征向量差进行认证,如果待认证目标与申明合法用户为同一人,则认证通过,如果待认证目标与申明合法用户不为同一人,则认证拒绝。
进一步的,所述人脸特征数据库中的合法用户的人脸特征向量为从根据该合法用户的多张人脸图像得到的平均人脸图像中提取的LBP直方图特征向量。
进一步的,所述支持向量机模型系通过训练得到,所述训练过程为:采集M个合法用户的人脸图像,第m个人有Nm张人脸图像,需要满足Nm≥2*Navg,Navg为平均人脸数;则从第m个人的Nm张人脸图像中任意选取Navg张,并从剩余的Nm-Navg张图像中任意选取Navg张,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,并作为正样本特征向量;从M个人中任意取出两个人,假定当前的两个人分别为第p个人和第q个人,从第p个人的Np张人脸图像中任意选取Navg张,从第q个人的Nq张图像中任意选取Navg张,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,并将所述差值向量作为反样本特征向量;对于上述得到的正样本和反样本特征向量,选择其中分类能力强的前M个作为最终使用的特征向量;对于M个特征向量,采用支持向量机训练人脸认证模型,得到最终的人脸认证模型。
与现有技术相比,本发明在人脸认证模型的训练、人脸特征向量的提取以及人脸认证过程中均采用不同姿态表情下多张人脸的平均人脸进行处理,这样能够减少单张人脸姿态表情对于认证结果的影响。
【附图说明】
结合参考附图及接下来的详细描述,本发明将更容易理解,其中同样的附图标记对应同样的结构部件,其中:
图1为本发明中人脸认证系统在一个实施例中的结构方框图;
图2为标准人脸模型;和
图3为本发明中人脸认证方法在一个实施例中的方法流程图。
【具体实施方式】
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
请参考图1所示,其示出了本发明中的人脸认证系统100在一个实施例中的结构方框图。所述人脸认证系统100包括图像采集模块110、人脸检测跟踪模块120、特征点定位模块130、平均人脸获取模块140、人脸特征提取模块150、人脸特征数据库160和人脸认证模块150。在训练过程和认证过程中,所述图像采集模块110、人脸检测跟踪模块120、特征点定位模块130、平均人脸获取模块140、人脸特征提取模块150可以共用。
所述图像采集模块110可以用来采集图像序列。在一个实施例中,所述图像采集模块110可以为摄像头,当用户面对摄像头时,所述摄像头可以采集用户的正面人脸图像。
所述人脸检测跟踪模块120可以在采集到的图像序列中进行人脸检测,在检测到人脸时进行人脸跟踪,并最后得到多张人脸图像,这些人脸图像可以被称为待处理人脸图像。在一个实施例中,所述人脸检测跟踪模块120中的人脸检测与跟踪方法包括以下步骤:采用实时人脸检测算法对输入的视频图像进行人脸检测;再采用粗细两级人脸检测算法对检测到的人脸进行检测验证;采用物体跟踪算法跟踪验证后的人脸;通过对跟踪区域的验证对跟踪的人脸进行验证处理。具体的,可以采用2006年6月28日公开的申请号为200510135668.8的专利申请中公开的人脸检测与跟踪方案来实现所述人脸检测跟踪模块120。
所述特征点定位模块130可以对得到的每一张待处理人脸图像中进行特征点定位以得到其内的人脸特征点,比如定位人脸的左眼、右眼和嘴巴等特征点。在一个实施例中,所述特征点定位模块130中的特征点定位方法包括以下步骤:采用预先训练得到的双眼区域检测器,检测得到输入图像上的双眼区域;确定所述双眼区域上的左眼搜索区域和右眼搜索区域;并且,采用左眼局部特征检测器对所述左眼搜索区域进行检测,得到左眼候选位置;采用右眼局部特征检测器对所述右眼搜索区域进行检测,得到右眼候选位置;选择若干左眼候选位置和右眼候选位置进行配对;并且,采用双眼区域验证器对所述若干对左眼候选位置和右眼候选位置进行验证,确定左眼位置和右眼位置。具体的,可以采用2008年4月9日公开的申请号为200710177541.1的专利申请中公开的人脸特征点定位方案来实现所述特征点定位模块130。
所述平均人脸获取模块140根据每张待处理人脸图像中定位出的人脸特征点将多张待处理人脸图像对齐并归一化尺寸,求取对齐且尺寸归一化后的多张待处理人脸图像的亮度均值得到平均人脸图像。在一个实施例中,所述平均人脸获取模块140根据标准人脸模型将每张待处理人脸图像进行对齐,并将每张对齐后的待处理人脸图像分割缩放到归一化大小。下面介绍有关所述平均人脸获取模块140的一种具体实现方式。
图2是出了一种标准人脸模型,对于标准人脸模型,标定该图像中左眼中心点(xsle,ysle),右眼中心点(xsre,ysre)的位置,根据上述左眼中心点和右眼中心点定义人脸区域为以点(xsc,ysc)为中心、宽度为Wf的正方形区域。对于待处理人脸图像,定位得到的左眼中心点(xle,yle)和右眼中心点(xre,yre)。为了能够得到对齐后的当前待处理人脸图像,需要找到使得标准人脸特征点经过该彷射变换后得到的位置最接近当前待处理人脸图像中的特征点位置,下面将推导变换的数学模型。
假设标准人脸模型上的某特征点为(x,y),经过仿射变换到当前待处理人脸图像上对应特征点为(x′,y′),可以表示为下式:
x ′ y ′ = s cos θ - s sin θ s sin θ s cos θ · x y + t x t y = c - d t x d c t y · x y 1 - - - ( 1 )
当采用左眼中心点和右眼中心点作为特征点时,上式可以进一步写成:
x sle - y sle 1 0 y sle x le 0 1 x sre - y sre 1 0 y sre x sre 0 1 c d t x t y = x le y le x re y re - - - ( 2 )
记M=(c d tx ty)T
Figure BDA0000030707960000064
当xle≠xre或者yle≠yre时,A必然为可逆矩阵,则存在:
M=A-1B            (3)
对于标准人脸模型中定义的人脸区域,对于该区域中的每一点,根据式(3)得到其在待处理人脸图像上的对应点坐标,采用该点像素亮度作为标准人脸模型中的人脸区域中该点像素亮度,从而得到一副人脸图像,该图像为当前待处理人脸图像对齐后的人脸图像。将上述图像归一化到宽度为Wf,高度为Hf的固定尺度的标准人脸模型的尺度。
假定得到N张待处理人脸图像,采用上述方式分别得到对齐并归一化大小后的待处理人脸图像分别为F1,F2,...FN,则得到平均人脸图像为:
Figure BDA0000030707960000065
其中Ft(i,j)表示第t幅图像第(i,j)像素的亮度值。
平均会降低图像采集过程中,由于姿态表情光照引起的照片间的个性化差异,同时保留主体人本身的脸部特征。因而,平均人脸能够一定程度上克服光照表情姿态变化对于认证结果的影响。
所述人脸特征提取模块150可以从平均人脸图像中提取人脸特征向量。在一个实施例中,所述人脸特征向量为LBP直方图特征向量,采用LBP(Localbinary pattern,局部二值模式)特征作为基本识别特征,该特征通过对像素与邻域像素的大小关系进行编码,获得图像区域的纹理特征。LBP在纹理识别和人脸识别应用中取得了较好的效果。在一个具体实施例中,人脸特征提取模块150提取局部二值模式(LBP,Local Binary Pattern)直方图特征的具体步骤如下:
假定图像中像素坐标为(j,i)的点对应的亮度为lj,i,以点(j,i)为中心取3x3邻域,则各点像素亮度如下:
Figure BDA0000030707960000071
定义点(j,i)的LBP特征如公式(4)所示:
LBP ( j , i ) = Σ 0 ≤ n ≤ 2 ; 0 ≤ m ≤ 2 B ( j , i , n , m ) * 2 m * 3 + n - - - ( 4 )
其中, B ( j , i , n , m ) = 1 ifl ( j + n - 1 , i + m - 1 ) ≥ l ( j , i ) 0 else .
则对于人脸图像上的某个矩形区域而言,计算矩形区域上LBP直方图的方法如下:
假设矩形区域为R(l,t,r,b),其在人脸图像上的四个方向边缘坐标分别为左边缘横坐标l,上边缘纵坐标t,右边缘横坐标r,下边缘纵坐标b。
Figure BDA0000030707960000074
其中
Figure BDA0000030707960000075
N为LBP特征的最大取值数。对于3x3邻域而言,为256。
获取LBP特征的直方图的方法除了上述方法外,更好的方式是采用基于一致性LBP(Uniform LBP)的方法,具体定义请参考相关文献,这里不再赘述。一致性LBP方法相对普通LBP的优点是,采用较少的特征,保持了大部分的信息,使得特征表示更加有效率。而且,从技术上讲,由于降低了特征数目,在进行直方图表示时,使得较小的图像区域就也能够提取LBP直方图特征。
定义LBP直方图特征向量为,在人脸图像上设计不同位置的矩形框,并在各矩形框上求取LBP直方图,将上述LBP直方图按顺序首位相接,组成一个人脸图像的LBP直方图特征向量。
所述人脸特征数据库160为多个合法用户存储有人脸特征向量。在一个实施例中,所述人脸特征数据库160中的合法用户的人脸特征向量为从根据该合法用户的多张人脸图像得到的平均人脸图像中提取的LBP直方图特征向量。在具体实现时,假定采集到一合法用户的共Ne张人脸图像,利用平均人脸获取模块140可以提取上述Ne张人脸的平均人脸,利用所述人脸特征提取模块150提取选择得到的M维LBP直方图特征向量,并加入人脸特征数据库160中。
所述人脸认证模块170将人脸特征数据库160中的申明合法用户的人脸特征向量与人脸特征提取模块150提供的待认证目标(待认证用户)的人脸特征向量作差得到人脸特征向量差,采用支持向量机模型(support vectormachine Model,SVM)对所述人脸特征向量差进行认证,如果待认证目标与申明合法用户为同一人,则认证通过,如果待认证目标与申明合法用户不为同一人,则认证拒绝。
所述支持向量机模型系通过事先训练得到。在一个实施例中,所述支持向量机模型的训练过程如下。采集多个合法用户的人脸图像,假定存在M个人,第m个人有Nm张人脸图像,假定平均人脸数为Navg,需要满足Nm≥2*Navg
则从第m个人的Nm张人脸图像中任意选取Navg张,并从剩余的Nm-Navg张图像中任意选取Navg,共得到
Figure BDA0000030707960000081
个组合,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,共得到个独立的平均人脸差值向量;上述差值向量作为正样本特征向量。
从上述M个人中任意取出两个,得到
Figure BDA0000030707960000092
个组合。假定选取的两个人分别为第p个人和第q个人,从第p个人的Np张人脸图像中任意选取Navg张,从第q个人的Nq张图像中任意选取Navg,共得到
Figure BDA0000030707960000093
个组合,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,共得到
Figure BDA0000030707960000094
个独立的平均人脸差值图像;上述差值向量作为反样本特征向量。
对于上述得到的正样本和反样本特征向量,采用adaboost选择算法,选择其中分类能力强的前M个作为最终使用的特征向量。然后,对上述M个特征向量,采用支持向量机(SVM)训练人脸认证模型,得到最终的认证模型。该模型能够识别两幅图像的LBP直方图特征向量的差值是否来自同一个人。上述采用特征选择方式,减少了特征,同时,挑选出表示能力强的特征,因而提高了最终分类器的分类能力。
此外,直观上看,上述的差值向量,每个位置差值的大小反应了两幅人脸的差异。差值越小,则二者的差异应该越小,因而采用线性SVM模型就能够得到较好的分类效果。
在一个进一步的实施例中,可以采用姿态判定和表情识别的方式,在特征入人脸特征数据库和人脸认证过程中,从采集的人脸中选择其中姿态最正面,表情最中性的Navg张人脸求取均值人脸并提取特征,进行认证。
综上所述,采用平均脸,能够减少单张人脸姿态表情对于识别结果的影响,进一步,采用adaboost选择过的LBP直方图特征,并采用支持向量机分类器,提高了识别结果。进一步,对姿态表情进行限定,挑选接近正面和中性表情的人脸,用来识别,提高了识别精度。
请参考图3所示,其示出了本发明中的人脸认证方法300在一个实施例中的结构方框图。所述人脸认证方法300包括如下步骤。
步骤310,采集图像序列。
步骤320,在采集到的图像序列中进行人脸检测,在检测到人脸时进行人脸跟踪,并最后得到多张人脸图像,这些人脸图像可以被称为待处理人脸图像。
步骤330,对得到的每一张待处理人脸图像中进行特征点定位以得到其内的人脸特征点。
步骤340,根据每张待处理人脸图像中定位出的人脸特征点将多张待处理人脸图像对齐并归一化尺寸,求取对齐且尺寸归一化后的多张待处理人脸图像的亮度均值得到平均人脸图像。在一个实施例中,根据标准人脸模型将每张待处理人脸图像进行对齐,并将每张对齐后的待处理人脸图像分割缩放到归一化大小。具体实现参见系统100的相应描述。
步骤350,从平均人脸图像中提取人脸特征向量。在一个实施例中,所述人脸特征向量为LBP直方图特征向量,采用LBP(Local binary pattern,局部二值模式)特征作为基本识别特征。具体的局部二值模式直方图特征的提取方案请参考系统100的相应描述。
所述人脸特征数据库为多个合法用户存储有人脸特征向量。在一个实施例中,所述人脸特征数据库中的合法用户的人脸特征向量为从根据该合法用户的多张人脸图像得到的平均人脸图像中提取的LBP直方图特征向量。
步骤360,将人脸特征数据库中的申明合法用户的人脸特征向量与待认证目标(待认证用户)的人脸特征向量作差得到人脸特征向量差,采用支持向量机模型(support vector machine Model,SVM)对所述人脸特征向量差进行认证,如果待认证目标与申明合法用户为同一人,则认证通过,如果待认证目标与申明合法用户不为同一人,则认证拒绝。
所述支持向量机模型系通过事先训练得到,具体训练过程请参考系统100的相应描述。
上述说明已经充分揭露了本发明的具体实施方式。需要指出的是,熟悉该领域的技术人员对本发明的具体实施方式所做的任何改动均不脱离本发明的权利要求书的范围。相应地,本发明的权利要求的范围也并不仅仅局限于所述具体实施方式。

Claims (4)

1.一种人脸认证系统,其特征在于,其包括:
采集图像序列的图像采集模块;
在采集到的图像序列中检测和跟踪人脸并得到多张人脸图像的人脸检测跟踪模块;
将得到的多张人脸图像进行平均得到平均人脸图像的平均人脸获取模块;
从平均人脸图像中提取人脸特征向量的人脸特征提取模块;
为多个合法用户存储有人脸特征向量的人脸特征数据库;
人脸认证模块,利用人脸特征数据库中的申明合法用户的人脸特征向量对人脸特征提取模块提供的待认证目标的人脸特征向量进行人脸认证,
所述人脸特征向量为LBP直方图特征向量,
所述人脸认证模块将人脸特征数据库中的申明合法用户的人脸特征向量与人脸特征提取模块提供的待认证目标的人脸特征向量作差得到人脸特征向量差,采用支持向量机模型对所述人脸特征向量差进行认证,如果待认证目标与申明合法用户为同一人,则认证通过,如果待认证目标与申明合法用户不为同一人,则认证拒绝,
所述人脸特征数据库中的合法用户的人脸特征向量为从根据该合法用户的多张人脸图像得到的平均人脸图像中提取的LBP直方图特征向量,
所述支持向量机模型系通过训练得到,所述训练过程为:
采集M个合法用户的人脸图像,第m个人有Nm张人脸图像,需要满足Nm≥2*Navg,Navg为平均人脸数;
则从第m个人的Nm张人脸图像中任意选取Navg张,并从剩余的Nm-Navg张图像中任意选取Navg张,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,并作为正样本特征向量;
从M个人中任意取出两个人,假定当前的两个人分别为第p个人和第q个人,从第p个人的Np张人脸图像中任意选取Navg张,从第q个人的Nq张图像中任意选取Navg张,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,并将所述差值向量作为反样本特征向量;
对于上述得到的正样本和反样本特征向量,选择其中分类能力强的前M个作为最终使用的特征向量;
对于M个特征向量,采用支持向量机训练人脸认证模型,得到最终的人脸认证模型。
2.根据权利要求1所述的人脸认证系统,其特征在于,其还包括有在得到的多张人脸图像上进行特征点定位的特征点定位模块,
所述平均人脸获取模块根据每张人脸图像中定位出的人脸特征点将多张人脸图像对齐并归一化尺寸,求取对齐且尺寸归一化后的多张人脸图像的亮度均值得到平均人脸图像。
3.一种人脸认证方法,其特征在于,其包括:
采集图像序列;
在采集到的图像序列中检测和跟踪人脸并得到多张人脸图像;
将得到的多张人脸图像进行平均得到平均人脸图像;
从平均人脸图像中提取人脸特征向量;
利用人脸特征数据库中的申明合法用户的人脸特征向量对待认证目标的人脸特征向量进行人脸认证,其中人脸特征数据库为多个合法用户存储有人脸特征向量,
所述人脸特征向量为LBP直方图特征向量,
所述利用人脸特征数据库中的申明合法用户的人脸特征向量对人脸特征提取模块提供的待认证目标的人脸特征向量进行人脸认证包括:
将人脸特征数据库中的申明合法用户的人脸特征向量与人脸特征提取模块提供的待认证目标的人脸特征向量作差得到人脸特征向量差,采用支持向量机模型对所述人脸特征向量差进行认证,如果待认证目标与申明合法用户为同一人,则认证通过,如果待认证目标与申明合法用户不为同一人,则认证拒绝,
所述人脸特征数据库中的合法用户的人脸特征向量为从根据该合法用户的多张人脸图像得到的平均人脸图像中提取的LBP直方图特征向量,
所述支持向量机模型系通过训练得到,所述训练过程为:
采集M个合法用户的人脸图像,第m个人有Nm张人脸图像,需要满足Nm≥2*Navg,Navg为平均人脸数;
则从第m个人的Nm张人脸图像中任意选取Navg张,并从剩余的Nm-Navg张图像中任意选取Navg张,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,并作为正样本特征向量;
从M个人中任意取出两个人,假定当前的两个人分别为第p个人和第q个人,从第p个人的Np张人脸图像中任意选取Navg张,从第q个人的Nq张图像中任意选取Navg张,对齐归一化后分别求取平均人脸,并计算平均人脸的LBP直方图特征向量的差值,并将所述差值向量作为反样本特征向量;
对于上述得到的正样本和反样本特征向量,选择其中分类能力强的前M个作为最终使用的特征向量;
对于M个特征向量,采用支持向量机训练人脸认证模型,得到最终的人脸认证模型。
4.根据权利要求3所述的人脸认证方法,其特征在于,其还包括:在得到的多张人脸图像上进行特征点定位,
所述将得到的多张人脸图像进行平均得到平均人脸图像包括:根据每张人脸图像中定位出的人脸特征点将多张人脸图像对齐并归一化尺寸,求取对齐且尺寸归一化后的多张人脸图像的亮度均值得到平均人脸图像。
CN201010531502A 2010-11-03 2010-11-03 一种人脸认证系统及方法 Active CN102004899B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201010531502A CN102004899B (zh) 2010-11-03 2010-11-03 一种人脸认证系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201010531502A CN102004899B (zh) 2010-11-03 2010-11-03 一种人脸认证系统及方法

Publications (2)

Publication Number Publication Date
CN102004899A CN102004899A (zh) 2011-04-06
CN102004899B true CN102004899B (zh) 2012-09-26

Family

ID=43812252

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010531502A Active CN102004899B (zh) 2010-11-03 2010-11-03 一种人脸认证系统及方法

Country Status (1)

Country Link
CN (1) CN102004899B (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102194106B (zh) * 2011-05-11 2013-01-16 西安理工大学 一种用于门禁系统中的人脸识别方法
CN102609680B (zh) * 2011-12-22 2013-12-04 中国科学院自动化研究所 一种基于三维深度图像信息的并行统计学习人体部位检测方法
CN102750526A (zh) * 2012-06-25 2012-10-24 黑龙江科技学院 基于人脸图像的身份验证识别方法
CN102867173B (zh) * 2012-08-28 2015-01-28 华南理工大学 一种人脸识别方法及其系统
CN103051909B (zh) * 2012-12-28 2015-08-12 北京邮电大学 用于裸眼3d显示的蒙版变换人眼跟踪方法
CN103632138B (zh) * 2013-11-20 2016-09-28 南京信息工程大学 一种低秩分块稀疏表示的人脸识别方法
CN103605969B (zh) * 2013-11-28 2018-10-09 Tcl集团股份有限公司 一种人脸录入的方法及装置
CN105825163A (zh) * 2015-01-09 2016-08-03 杭州海康威视数字技术股份有限公司 一种人脸图像的检索系统及方法
CN106156702A (zh) * 2015-04-01 2016-11-23 北京市商汤科技开发有限公司 身份认证方法及设备
CN104966046B (zh) 2015-05-20 2017-07-21 腾讯科技(深圳)有限公司 一种人脸关键点位定位结果的评估方法,及评估装置
CN105590089A (zh) * 2015-10-22 2016-05-18 广州视源电子科技股份有限公司 一种人脸识别方法及装置
CN106803054B (zh) * 2015-11-26 2019-04-23 腾讯科技(深圳)有限公司 人脸模型矩阵训练方法和装置
CN105654033B (zh) * 2015-12-21 2020-08-04 北京小米移动软件有限公司 人脸图像验证方法和装置
CN107315984B (zh) * 2016-04-26 2020-04-28 杭州华为企业通信技术有限公司 一种行人检索的方法及装置
CN106022215B (zh) * 2016-05-05 2019-05-03 北京海鑫科金高科技股份有限公司 人脸特征点定位方法及装置
CN106599837A (zh) * 2016-12-13 2017-04-26 北京智慧眼科技股份有限公司 基于多图像输入的人脸识别方法及装置
CN106845357B (zh) * 2016-12-26 2019-11-05 银江股份有限公司 一种基于多通道网络的视频人脸检测和识别方法
CN107967461B (zh) * 2017-12-08 2020-07-24 深圳云天励飞技术有限公司 Svm差分模型训练及人脸验证方法、装置、终端及存储介质
CN109255337B (zh) * 2018-09-29 2020-04-28 北京字节跳动网络技术有限公司 人脸关键点检测方法和装置
CN113327332A (zh) * 2018-09-29 2021-08-31 爱笔(北京)智能科技有限公司 基于生物信息的票务处理方法及系统、服务端、客户端
CN111126159A (zh) * 2019-11-28 2020-05-08 重庆中星微人工智能芯片技术有限公司 用于实时跟踪行人的方法、装置、电子设备和介质
CN114638018A (zh) * 2022-03-29 2022-06-17 润芯微科技(江苏)有限公司 一种基于面部识别保护车主行车记录仪隐私的方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1794264A (zh) * 2005-12-31 2006-06-28 北京中星微电子有限公司 视频序列中人脸的实时检测与持续跟踪的方法及系统
CN101405744A (zh) * 2006-03-23 2009-04-08 冲电气工业株式会社 脸部识别系统
CN101694691A (zh) * 2009-07-07 2010-04-14 北京中星微电子有限公司 一种人脸图像合成方法及装置
CN101706872A (zh) * 2009-11-26 2010-05-12 上海交通大学 通用的开放式人脸识别系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007016936A1 (en) * 2005-07-29 2007-02-15 Telecom Italia, S.P.A. Automatic biometric identification based on face recognition and support vector machines

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1794264A (zh) * 2005-12-31 2006-06-28 北京中星微电子有限公司 视频序列中人脸的实时检测与持续跟踪的方法及系统
CN101405744A (zh) * 2006-03-23 2009-04-08 冲电气工业株式会社 脸部识别系统
CN101694691A (zh) * 2009-07-07 2010-04-14 北京中星微电子有限公司 一种人脸图像合成方法及装置
CN101706872A (zh) * 2009-11-26 2010-05-12 上海交通大学 通用的开放式人脸识别系统

Also Published As

Publication number Publication date
CN102004899A (zh) 2011-04-06

Similar Documents

Publication Publication Date Title
CN102004899B (zh) 一种人脸认证系统及方法
Galdámez et al. A brief review of the ear recognition process using deep neural networks
Islam et al. Efficient detection and recognition of 3D ears
JP5715833B2 (ja) 姿勢状態推定装置および姿勢状態推定方法
US10127439B2 (en) Object recognition method and apparatus
CN101989326B (zh) 人体姿态识别方法和装置
Merino-Gracia et al. A head-mounted device for recognizing text in natural scenes
US9480417B2 (en) Posture estimation device, posture estimation system, and posture estimation method
CN105631430A (zh) 一种人脸图像的匹配方法和装置
CN102938065A (zh) 基于大规模图像数据的人脸特征提取方法及人脸识别方法
CN111639616A (zh) 一种基于深度学习的重身份识别方法
EP2629241A1 (en) Control of a wearable device
CN101620673A (zh) 一种鲁棒的人脸检测及跟踪方法
CN104915656A (zh) 一种基于双目视觉测量技术的快速人脸识别方法
CN104050448A (zh) 一种人眼定位、人眼区域定位方法及装置
Zhou et al. Hierarchical context-aware hand detection algorithm for naturalistic driving
CN102867172A (zh) 一种人眼定位方法、系统及电子设备
CN104573628A (zh) 一种三维人脸识别方法
CN107742112A (zh) 一种基于图像的人脸防伪方法及装置
KR20160042646A (ko) 얼굴 인식 방법
Kalsi et al. A classification of emotion and gender using approximation image Gabor local binary pattern
CN202472689U (zh) 一种人脸姿态检测系统
CN114359646A (zh) 一种视频分析方法、装置、系统、电子设备和介质
Ismaila et al. A study of features extraction algorithms for human face recognition
Kamarol et al. Spatio-temporal texture-based feature extraction for spontaneous facial expression recognition

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: 214028 10-storey Building 530 Qingjia Road, Taihu International Science Park, Wuxi New District, Jiangsu Province

Patentee after: WUXI ZHONGGAN MICROELECTRONIC CO., LTD.

Address before: 214028 10-storey Building 530 Qingjia Road, Taihu International Science Park, Wuxi New District, Jiangsu Province

Patentee before: Wuxi Vimicro Co., Ltd.