CN101710383B - 一种身份认证的方法及认证装置 - Google Patents

一种身份认证的方法及认证装置 Download PDF

Info

Publication number
CN101710383B
CN101710383B CN200910236557.4A CN200910236557A CN101710383B CN 101710383 B CN101710383 B CN 101710383B CN 200910236557 A CN200910236557 A CN 200910236557A CN 101710383 B CN101710383 B CN 101710383B
Authority
CN
China
Prior art keywords
eye
user
image
unique point
sorter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200910236557.4A
Other languages
English (en)
Other versions
CN101710383A (zh
Inventor
邓亚峰
黄英
邱嵩
王俊艳
王浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mid Star Technology Ltd By Share Ltd
Original Assignee
Vimicro Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vimicro Corp filed Critical Vimicro Corp
Priority to CN200910236557.4A priority Critical patent/CN101710383B/zh
Publication of CN101710383A publication Critical patent/CN101710383A/zh
Application granted granted Critical
Publication of CN101710383B publication Critical patent/CN101710383B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明提供一种身份认证的方法及认证装置,方法包括:采集包含所述用户人脸的图像,对所述图像进行人脸检测,得到其中存在的人脸区域;采用人脸认证技术获取所述人脸区域对应的用户身份;要求所述用户调整视线方向到至少一个限定方向,从而确认为一活体;当确定所述用户通过人脸认证并且判定为活体时,认为所述用户为一合法用户。本发明实施例具有以下的有益效果:在确定存在一人脸的图像之后,采用视线判定来确认是一活体的用户提供了所述图像,从而避免了通过仅提供照片骗取系统认证为合法用户的缺陷,提高了身份认证技术的可靠性。

Description

一种身份认证的方法及认证装置
技术领域
本发明涉及图像处理技术,特别是一种身份认证的方法及认证装置。
背景技术
人脸认证系统在安全监控领域已经取得了很多应用,具有十分重要的价值。
现有的人脸认证系统,通常是采用人脸认证技术,确定两张人脸或多张人脸的相似程度;即通常基于采集到的图像,从该图像中获取到表征人脸特征的图像信息,比对采集到的人脸图像信息与预先存储的人脸特征信息,若比对结果表示所验证的人脸与预先存储的人脸特征信息相符合,则认为用户为合法用户。或者采用表情识别方法认证活体人脸,但是这要求用户做出各种表情的方式有局限性,用户可能由于心情不佳无法做出笑的表情,或者有些用户存在疾患,根本无法笑,再加上表情识别方法一般要求用户笑得程度比较夸张,更降低了技术的实用性。
发明人在实现本发明的过程中,发现现有技术存在至少以下技术问题:一些场景下,若非法用户获取到合法用户的照片,以现有技术难以甚至无法区分被验证的对象是否为真实的合法用户。
发明内容
本发明实施例提供一种身份认证的方法及认证装置,以解决在现有技术中,若非法用户获取到合法用户的照片,以现有技术难以根据所述照片区分被验证的对象是否为真实的合法用户的缺陷。
一种对用户进行身份认证的方法,包括:采集包含所述用户人脸的图像,对所述图像进行人脸检测,得到其中存在的人脸区域;采用人脸认证技术获取所述人脸区域对应的用户身份;要求所述用户调整视线方向到至少一个限定方向,从而确认为一活体;当确定所述用户通过人脸认证并且判定为活体时,认为所述用户为一合法用户。
上述方法中,采用人脸认证技术获取所述人脸区域对应的用户身份进一步包括:在所述人脸区域上定位脸部特征点,所述脸部特征点为左眼特征点和右眼特征点,根据左眼特征点和右眼特征点,确定人脸认证所需的所述人脸区域的范围,将割取的所述人脸区域放缩到一预定大小并提取人脸特征;根据提取的所述人脸特征,确认所述用户身份。
上述方法中,要求所述用户调整视线方向到至少一个限定方向之后还包括:在所述图像上定位至少一个脸部特征点;根据所述脸部特征点,得到眼睛区域图像,根据预先设置的视线方向分类器判定所述眼睛区域图像的视线方向符合所述限定方向。
上述方法中,所述脸部特征点为眼睛的内外眼角点;所述得到眼睛区域图像进一步包括:以所述内外眼角点之间的距离的第一倍数为宽度,以所述距离的第二倍数为高度,确定眼睛区域的范围,并割取得到眼睛区域图像并放缩到所述视线方向分类器所需的预定尺寸。
上述方法中,所述脸部特征点为左眼和右眼特征点,根据左眼特征点和右眼特征点,确定左眼区域和右眼区域作为所述眼睛区域,并放缩到所述视线方向分类器所需的预定尺寸。
上述方法中,还包括:所述用户需要调整视线到不少于两个限定方向;并且,在视线调整过程中,用户姿态保持始终不变。
上述方法中,所述视线方向分类器对应的各子方向分类器均采用连续型自适应增强算法训练得到。
上述方法中,还包括:提取当前的眼睛区域图像并送入所述视线方向分类器之后;将所述眼睛区域图像送入各所述子方向分类器,找到分类器分类置信度最大的子方向作为视线分类结果;如果所述视线分类结果对应的分类置信度大于该方向的阈值,并且该方向为所述限定方向之一,则认为用户当前的视线符合所述限定方向,否则认为不符合所述限定方向。
一种对用户进行身份认证的装置,包括:摄像单元,用于采集包含所述用户人脸的图像;人脸检测单元,用于对所述图像进行人脸检测,得到其中存在的人脸区域;身份验证单元,用于采用人脸认证技术获取所述人脸区域对应的用户身份;视线验证单元,用于要求所述用户调整视线方向到至少一个限定方向,从而确认为一活体;当确定所述用户通过人脸认证并且判定为活体时,认为所述用户为一合法用户。
上述认证装置中,还包括:特征点定位单元,用于根据在所述人脸区域上定位至少一个脸部特征点;根据所述脸部特征点,得到一眼睛区域图像,将所述眼睛区域图像放缩到一预定大小,发送给所述身份验证单元和/或所述视线验证单元。
上述认证装置中,特征点定位单元还包括:特征点第一提取单元,用于定位左眼特征点和右眼特征点,根据左眼特征点和右眼特征点,确定人脸认证所需的所述人脸区域的范围;发送给所述身份验证单元。
上述认证装置中,特征点定位单元还包括:特征点第二提取单元,用于当所述特征点为内外眼角点时,以所述内外眼角点之间的距离的第一倍数为宽度,以所述距离的第二倍数为高度,确定眼睛区域的范围,割取所确定的眼睛区域图像并放缩到视线方向分类器的预定尺寸。
上述认证装置中,特征点定位单元还包括:特征点第三提取单元,用于当所述特征点为左眼特征点和右眼特征点时,根据左眼特征点和右眼特征点,确定左眼区域和右眼区域并放缩到视线方向分类器的预定尺寸。
上述认证装置中,视线验证辅助单元,用于要求至少提供两种或两种以上的视线方向所对应的所述眼睛区域图像,并且,在视线调整过程中,用户姿态保持始终不变。
本发明实施例具有以下的有益效果:在确定存在一人脸的图像之后,采用视线判定来确认是一活体的用户提供了所述图像,从而避免了通过仅提供照片骗取系统认证为合法用户的缺陷,提高了身份认证技术的可靠性。
附图说明
图1为本发明实施例方法流程示意图;
图2为本发明实施例判定视线方向的流程示意图;
图3为本发明实施例训练向下视线方向对应的视线方向分类器的流程示意图;
图4为本发明实施例仅进行一次特征点定位的方法流程示意图;
图5为本发明实施例认证装置结构示意图一;
图6为本发明实施例认证装置结构示意图二。
具体实施方式
为使本发明的目的、技术特征和实施效果更加清楚,下面将结合附图及具体实施例对本发明的技术方案进行详细描述。本发明提供的实施例中,对其中存在的人脸进行跟踪检测,然后,采用人脸认证技术确认用户身份,再次,要求用户调整视线方向到至少一个限定方向,确认用户为活体。
本实施例提出一种对用户进行身份认证的方法,如图1所示,包括:
步骤101,采集包含所述用户人脸的图像,对所述图像进行人脸检测,得到其中存在的人脸区域;
步骤102,采用人脸认证技术获取所述人脸区域对应的用户身份;
步骤103,要求所述用户调整视线方向到至少一个限定方向,从而确认为一活体;
步骤104,当确定所述用户通过人脸认证并且判定为活体时,认为所述用户为一合法用户。
本发明实施例具有以下的有益效果:在确定存在一人脸的图像之后,采用视线判定来确认是一活体的用户提供了所述图像,从而避免了通过仅提供照片骗取系统认证为合法用户的缺陷,提高了身份认证技术的可靠性。
在本实施例中,对上述技术方案进行细化,以提供不同的实现方式:
对步骤101,可以采用人脸检测跟踪技术获得人脸图像中的人脸区域的具体范围。
对步骤102,人脸认证技术,一种实施方案如下,包括:
步骤1021.根据人脸区域范围,定位脸部特征点。其中,脸部特征点定位为现有技术,可以采用各种技术实现特征点定位,并且人脸图像上的脸部特征点有若干种选择。对于人脸认证而言,比较简单的方式是选择左眼球中心点和右眼球中心点作为人脸认证时所采用的脸部特征点。
步骤1022,根据上述得到的脸部特征点,割取人脸图像,将割取后的图像放缩到一预定大小,并提取所述脸部特征点。其中,根据脸部特征点割取人脸区域,可以参考现有技术。一种方式是,根据左眼和右眼中心点的横、纵坐标,确定人脸中心点,根据左眼和右眼中心点间距离,确定人脸区域的宽度和高度,从而得到人脸区域的范围。
步骤1023.根据提取后的至少一个脸部特征点,确认该图像对应一合法身份。其中,人脸认证模型可以参考现有技术,例如,一种实施方案为,提取割取归一化固定尺度的人脸图像在多个方向多个尺度上的Gabor特征,采用AdaBoost进行特征挑选,然后采用支持向量机训练人脸认证模型。训练时,将合法用户的人脸区域特征作为正样本特征,将其它不是这些合法用户的人脸区域特征作为反样本特征,训练支持向量机模型。完成对人脸认证模型的训练之后,使用该人脸认证模型时,将当前用户的人脸区域特征输入人脸认证模型,判定当前用户是否为合法用户。
在步骤103中,一种实施例如下,包括:
步骤1031.在人脸图像上定位至少一个脸部特征点;
步骤1032.根据所述脸部特征点,得到一眼睛区域图像,根据预先设置的视线方向分类器判定所述眼睛区域图像的视线方向符合所述限定方向。具体包括:所述脸部特征点为内外眼角点;所述得到一眼睛区域图像进一步包括:以所述内外眼角点之间的距离的第一倍数为宽度,以所述距离的第二倍数为高度,确定眼睛区域的范围,割取所确定的眼睛区域图像并放缩到视线方向分类器规定的预定尺寸。
或者,定位左眼特征点和右眼特征点,根据左眼特征点和右眼特征点,确定人脸认证所需的人脸区域的范围;即根据左眼特征点和右眼特征点,确定左眼区域和右眼区域,并分别根据所述左眼和所述右眼区域判定左眼和右眼的视线方向;根据预先设置的视线方向分类器判定所述左眼和右眼的视线方向符合所述限定方向。
上述实施例中,如何定位脸部特征点为现有技术,可以采用各种技术实现脸部特征点定位,并且图像上的脸部特征点有若干种选择。
对于人脸认证而言,比较简单的方式是选择左眼球中心点和右眼球中心点作为人脸认证时所采用的脸部特征点。根据脸部特征点割取人脸区域,可以参考现有技术。一种方式是,根据左眼和右眼中心点的横、纵坐标,确定人脸中心点,根据左眼和右眼中心点间距离,确定人脸区域的宽度和高度,从而得到人脸区域的范围。
判定视线方向采用如下技术:本实施例中设定用户的视线方向为:
A.向上,B.向下,C.正视,D.向左,E.向右。
可以仅采用其中的一种或者多种,也可以在上述五种基础上增加其它方向。本发明实施例中将上述每一个方向称为一个子方向,并进行训练以得到一子方向分类器,如图2所示,包括:
步骤201,定位所需要的脸部特征点;脸部特征点定位方法可以参考现有技术。例如定位左眼,以及确定左眼的内外眼角点;或者,定位右眼以及确定右眼的中心点。
步骤202,根据定位的脸部特征点的结果确定眼睛区域。以下以左眼为例说明;以左眼眼球中心点作为中心,以左眼内外眼角点距离的P倍为Width,以所述宽度Width的Q倍为高度Height,所确定的范围为眼睛区域;其中,P优选取1.2,Q优选取为0.6。按照所确定的眼睛区域提取眼睛区域并归一化到预定大小FW*FH,其中FW可以取24,FH可以取12。
步骤203,采用眼睛区域图像训练各个视线方向的子方向分类器。具体包括:
提取该眼睛区域图像对应的Gabor特征,采用一子方向的眼睛区域图像对应的所述Gabor特征作为正样本,采用其它子方向和其它非上述方向的眼睛区域图像作为反样本,训练一个该子方向的子方向分类器。
所有所述子方向分类器构成一所述视线方向分类器。
步骤204,在验证用户的视线方向时,将割取的眼睛区域图像放缩到视线方向分类器规定尺寸,送入训练好的视线方向分类器,如果符合,则认为当前用户的视线方向满足限定方向,否则认为不满足。
进而,可以采用多帧结果进行判定,比如,当用户在预定的T时间段内,如果满足限定方向的视线方向帧数大于设定阈值,则认为用户为合法用户。综合多帧,能够更好的克服噪声干扰,得到更稳定的效果。
其中步骤203中,一种优选实施例是,采用Gabor滤波器提取眼睛区域图像在多个方向多个尺度上的Gabor特征。本实施例中根据如下方法提取眼睛区域图像在多个方向多个尺度上的Gabor特征,Gabor特征由一系列不同尺度、不同方向的Gabor滤波器与所述眼睛区域图像进行二维卷积得到。包括:
采用m个尺度和n个方向所构成的所有Gabor滤波器来获取每一个Gabor特征,这些Gabor滤波器统称为:全局滤波器组,用G(m×n)表示,具体可以取m=5,n=8。如此,得到一个由m*n*FW*FH个特征组成的特征向量。将尺度为m,方向为n的Gabor滤波器对像素中心位置为(j,i)的所述眼睛区域图像进行滤波,得到Gabor特征如下表示:Gabor(m,n,j,i)。
其中实施例中,以训练向下视线对应的子方向分类器为例,如图3所示,其训练过程如下:
采用上述提取的向下子方向的眼睛区域图像作为正样本,采用除向下方向之外其它子方向的眼睛区域图像作为反样本,并采集其它不是眼睛区域图像的图像放缩到M*N作为反样本,采用上述样本的所述Gabor特征作为特征向量。所得到的Gabor特征依然有可能很多,为了提高速度,本实施例采用带有特征选择功能的自适应增强算法(Adaboost,Adaptive Adaboost)对上述子区域内的Gabor特征进行特征选择,并进行训练最终训练得到一个子方向分类器,作为该向下视线方向的子方向分类器。
以连续型自适应增强算法(Real AdaBoost)算法为例,Real AdaBoost算法的强分类器训练过程如下,包括:
步骤301.给定训练集L={(xi,yi)},i=1,...,n;其中,yi∈{+1,-1}是样本标号,xi∈X是样本特征,n表示n个方向;
步骤302.确定样本的初始权重 D 1 ( i ) = 1 n , i=1,...,n;
步骤303.迭代次数为t=1,...,T:在特定的一轮分布Dt上,采用以下将要描述的弱分类器构造选择算法,获取此轮最佳的弱分类器,得到:ht:X→{+∝,-∝};
步骤304.更新样本的权重为 D t + 1 ( i ) = D t ( t ) exp ( - y i h t ( x i ) ) Z t
其中 Z t = Σ i D t ( i ) exp ( - y i h t ( x i ) ) 是归一化因子;
步骤305.输出最终的强视线方向分类器: H ( x ) = sign ( Σ t = 1 T h t ( x ) - b ) .
则上述特征xi为该子区域对应的Gabor特征。
需要说明的是,在步骤303中的每轮迭代过程里,对于弱分类器构造算法,为采用更少的弱分类器构造强分类器以减少阈值搜索的次数、加快训练过程,具体可以采用区域分割弱分类器构造方法(Domain-partitioning weak hypotheses)来构造弱分类器,并从中选取使得分类误差上界最小的弱分类器作为本轮迭代的输出。其中弱分类器构造算法如下所示:
步骤3031.首先,在分布Dt上,对于候选特征空间H中的每个特征构造其对应的弱分类器如下:
将样本空间分为n个不同的区间X1,...,Xn,X1∪X2∪...∪Xn=X且 X i ∩ i ≠ j X j = Φ ;
步骤3032.在分布Dt上,计算:
其中l=±1;
步骤3033.对于Xj中的每个X,设定其对应弱分类器输出为
∀ x ∈ X j , h ( x ) = 1 2 ln ( W + 1 j + ϵ W - 1 j + ϵ ) ,
其中ε<<1/2N,引入ε是为避免分母为零时引起的数字溢出;
步骤3034.计算 Z = 2 Σ j W + 1 j W - 1 j ;
然后,从构造的所有弱分类器中,选择使得Z最小的h作为此轮最终选择输出的弱分类器,即 h t = arg min h ∈ H Z .
此时,为每个子方向分类器都训练得到一个 H ( x ) = sign ( Σ t = 1 T h t ( x ) - b ) . 定义为该子方向分类器的分类置信度,该分类置信度的数值能够很好的衡量图像区域属于子方向分类器的程度。
依次训练得到所有的子方向分类器,所有所述子方向分类器构成一所述视线方向分类器。
上述只是给出了构造视线方向分类器中各个子方向分类器的较优实施例,也可以采用局部二值模式(LBP)作为特征,采用支持向量机进行训练,训练得到限定方向的子方向分类器以构成最终的视线方向分类器。还可以采用其它特征和分类器训练方法得到最终的视线方向分类器。
与步骤201~步骤204所提供的实施例相比,一种判定视线方向是否满足限定方向的更优方法为,当采用连续型自适应增强算法(Real adaboost)训练得到的视线方向分类器进行判定时,将放缩到预定尺度的眼睛区域图像送入上述所有子方向分类器,并找到分类置信度为最大的方向,如果分类置信度超过了一个预先设置的阈值,则该眼睛区域图像通过了所述视线方向的分类器,并且由于该方向为系统中预先所设置的用户视线的限定方向,则认为当前用户的视线方向已满足了限定方向,否则,认为用户视线未满足限定方向。
为了提高认证方法的可靠性,可以让用户提供两种或两种以上的不同视线方向。进一步地,判定用户姿态,在用户做出两种不同的视线方向时,限定其身体的姿态保持一致,即要求用户只控制瞳孔改变视线方向而不改变身体的姿势。
在跟踪过程中,如果跟踪出现中断,则停止前述处理,重新开始,防止用户采用多张照片冒认。
本实施例中,当采集到的原始图像中存在多个人脸时,可以检测和跟踪图像中存在的最大尺寸的人脸,并进行后续处理。
上述实施例将人脸认证和视线方向分别处理,在脸部特征点定位上会产生额外的操作。一种较优的实施例还提供了仅进行一次脸部特征点定位的方案,如图4所示,包括:
步骤401,采集包含有人脸的图像,并进行人脸检测跟踪,得到其中存在的人脸区域。
步骤402,对人脸区域进行脸部特征点定位;
为了使得所得到的脸部特征点既能满足人脸认证的要求,同时也能满足得到视线方向所需要的眼睛区域的要求,一种较优方式为选择左眼特征点和右眼特征点作为脸部特征点。
步骤403,根据脸部特征点定位结果得到人脸区域并割取,放缩人脸区域到预定大小,提取人脸特征送入人脸认证模型,确定当前用户的身份。
步骤404,根据脸部特征点定位结果得到眼睛区域,并割取眼睛区域,并判定其视线的方向符合限定方向。
当用户通过人脸认证并且判定为活体时,认为其为合法用户,否则认为不是合法用户。
在步骤201的具体实施例中,脸部特征点可以选择为左眼特征点和嘴巴特征点,也可以选择为右眼特征点和脸颊轮廓特征点等。而在步骤402中,对于左眼和右眼特征点而言,一种精度较高的方法为设定左眼特征点为左眼内角点和左眼外角点,右眼特征点为右眼内角点和右眼外角点。其中,采用左右眼内外角点得到左眼或右眼眼睛区域的方法同上述实施例。
一种通过左右眼内外角点得到人脸区域以及眼睛区域优选实施例,包括:
步骤a,得到标准人脸的左右眼的内外角点,根据标准人脸的内外角点坐标定义标准人脸区域范围;
左/右眼特征点还可以取为眼睛中心点和内/外眼角点,也可以取为左眼和右眼区域内的其它的特征点定义方式,比如眼睛轮廓特征点。
步骤b,计算得到当前标准人脸的内外角点坐标到当前人脸左右眼的内外角点坐标的仿射变换模型,计算标准人脸区域范围内各点经过所述仿射变换模型变换后对应的在当前人脸区域的点的坐标,并采用当前人脸区域内对应点的亮度值替换标准人脸区域内对应点的亮度,从而得到当前人脸的人脸图像。将其放缩到预定尺度,得到人脸认证所需的预定尺度的人脸图像。
步骤c,由于已经得到了左眼特征点和右眼特征点,从而可以同时得到左眼和右眼的眼睛区域。根据左眼眼睛区域的视线是否符合限定方向以及右眼眼睛区域是否符合视线方向,判定用户的视线方向是否符合限定方向。一种优选方式为,只有当左眼和右眼区域的视线均符合限定方向时才认为用户为合法用户。
本发明实施例具有以下的有益效果:在确定存在一人脸的图像之后,采用视线判定来确认是一活体的用户提供了所述图像,从而避免了通过仅提供照片骗取系统认证为合法用户的缺陷,提高了身份认证技术的可靠性。
与一种基于图像提取脸部特征点进行认证的方法对应地,本发明还提供了一种基于图像提取特征点进行认证的认证装置,如图5所示,包括:
摄像单元501,用于采集包含所述用户人脸的图像;
人脸检测单元502,用于对所述人脸图像进行人脸检测,得到其中存在的人脸区域;
身份验证单元503,与人脸检测单元502连接,用于采用人脸认证技术获取所述人脸区域对应的用户身份;
视线验证单元504,与人脸检测单元502和身份验证单元503连接,用于要求所述用户调整视线方向到至少一个限定方向,从而确认为一活体;当确定所述用户通过人脸认证并且判定为活体时,认为所述用户为一合法用户。
本发明实施例具有以下的有益效果:在确定存在一人脸图像之后,采用视线判定来确认提供所述人脸图像的为一活体使用者的人脸,从而据除了通过仅提供照片骗取系统认证为正确使用者的缺陷,提高了人脸认证技术的可靠性。
本实施例中,对上述技术方案进行细化,以提供不同的实现方式:如图6所示,认证装置还包括:
特征点定位单元505,用于根据在所述人脸区域上定位至少一个特征点;根据所述特征点,得到一眼睛区域图像,将所述眼睛区域图像放缩到一预定大小,发送给所述身份验证单元503和/或视线验证单元504。
其中,脸部的特征点定位为现有技术,可以采用各种技术实现特征点定位,并且人脸图像上的特征点有若干种选择。对于人脸认证而言,比较简单的方式是选择左眼球中心点和右眼球中心点作为人脸认证时所采用的特征点。
其中,身份验证单元503可以具体是:人脸特征身份验证单元,用于在人脸区域上定位脸部特征点;根据所述脸部特征点割取所述人脸区域,将割取的所述人脸区域放缩到一预定大小并提取脸部特征点;根据提取的至少一个所述人脸特征,确认对应的用户身份。
特征点定位单元505还包括:
特征点第一提取单元506,用于定位左眼特征点和右眼特征点,根据左眼特征点和右眼特征点,确定人脸认证所需的所述人脸区域的范围;发送给所述身份验证单元503。
当所述特征点为内外眼角点时,以所述内外眼角点之间的距离的第一倍数为宽度,以所述距离的第二倍数为高度,确定眼睛区域的范围,割取所确定的眼睛区域图像并放缩到视线方向分类器规定的预定尺寸;根据预先设置的视线方向分类器判定所述眼睛区域图像中的视线方向符合所述限定方向。
特征点第二提取单元507,用于当所述特征点为内外眼角点时,以所述内外眼角点之间的距离的第一倍数为宽度,以所述距离的第二倍数为高度,确定眼睛区域的范围,割取所确定的眼睛区域图像并放缩到视线方向分类器的预定尺寸。具体为:当定位左眼特征点和右眼特征点时,根据左眼特征点和右眼特征点,确定人脸认证所需的所述人脸区域的范围;根据左眼特征点和右眼特征点,确定左眼区域和右眼区域,并分别根据所述左眼和所述右眼区域判定左眼和右眼的视线方向;根据预先设置的视线方向分类器判定所述左眼和右眼的视线方向符合所述限定方向。
特征点第三提取单元508,用于当所述特征点为左眼特征点和右眼特征点时,根据左眼特征点和右眼特征点,确定左眼区域和右眼区域,并放缩到视线方向分类器的预定尺寸。
上述实施例将人脸认证和视线方向判定分别处理,在特征点定位上会产生额外的操作。一种较优的实施例还提供了仅采集一次特征点的方案,为了使得所得到的脸部特征点既能满足人脸认证的要求,同时也能满足得到视线方向判定所需要的眼睛区域的要求,一种较优方式为选择脸部特征点为左眼特征点和右眼特征点。对于左眼和右眼特征点而言,一种精度较高的方法为设定左眼特征点为左眼内角点和左眼外角点,右眼特征点为右眼内角点和右眼外角点。其中,采用左右眼内外角点得到左眼或右眼眼睛区域的方法同上述实施例。
特征点定位单元505得到标准人脸的左右眼的内外角点,根据标准人脸的内外角点坐标定义标准人脸区域的范围;左/右眼特征点还可以取为眼睛中心点和内/外眼角点,当然也可以取为其它的左眼和右眼区域内的特征点定义方式,比如眼睛轮廓特征点。通知给人脸检测单元502的一子单元,即仿射变换模型单元。
仿射变换模型单元计算得到当前标准人脸的内外角点坐标到当前人脸左右眼的内外角点坐标的仿射变换模型,计算标准人脸区域范围内各点经过所述仿射变换模型变换后对应的在当前人脸区域的点的坐标,并采用当前人脸区域内对应点的亮度值替换标准人脸区域内对应点的亮度,从而得到当前人脸的图像。
人脸特征身份验证单元根据特征点定位结果,得到人脸认证所需的预定尺度的人脸区域图像并放缩到预定大小,提取人脸认证特征,并通知送入人脸认证模型,判定当前用户是否为合法用户。
由于已经得到了左眼和右眼的特征点,从而可以同时得到左眼和右眼的眼睛区域。
视线验证单元504根据左眼眼睛区域中的视线是否符合限定方向以及右眼眼睛区域中的视线是否符合限定方向,以判定用户的视线方向是否符合限定方向。一种方式为,只有当左眼和右眼区域中的视线均符合限定方向时才认为视线满足限定方向。
还可以包括:
视线验证辅助单元,与视线验证单元504连接,用于设置所述视线方向分类器要求至少提供两种或两种以上的视线方向所对应的所述眼睛区域图像,并且,在视线调整过程中,用户姿态保持始终不变。
本发明实施例具有以下的有益效果:在确定存在一人脸的图像之后,采用视线判定来确认是一活体的用户提供了所述图像,从而避免了通过仅提供照片骗取系统认证为合法用户的缺陷,提高了身份认证技术的可靠性。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (12)

1.一种对用户进行身份认证的方法,其特征在于,包括:
采集包含所述用户人脸的图像,对所述图像进行人脸检测,得到其中存在的人脸区域;
采用人脸认证技术获取所述人脸区域对应的用户身份;
要求所述用户调整视线方向到至少一个限定方向,在所述图像上定位至少一个脸部特征点,根据所述脸部特征点确定眼睛区域;
按照所确定的眼睛区域提取眼睛区域图像并归一化到预定大小;
提取眼睛区域图像在多个方向多个尺度上的Gabor特征,Gabor特征由一系列不同尺度、不同方向的Gabor滤波器与所述眼睛区域图像进行二维卷积得到;
根据预先设置的视线方向分类器判定所述眼睛区域图像的视线方向符合所述限定方向,从而确认为一活体;所述视线方向分类器对应的各子方向分类器均是采用连续型自适应增强算法对Gabor特征进行特征选择,并进行训练得到的;
当确定所述用户通过人脸认证并且判定为活体时,认为所述用户为一合法用户。
2.根据权利要求1所述的方法,其特征在于,采用人脸认证技术获取所述人脸区域对应的用户身份进一步包括:
在所述人脸区域上定位脸部特征点,所述脸部特征点为左眼特征点和右眼特征点,
根据左眼特征点和右眼特征点,确定人脸认证所需的所述人脸区域的范围,将割取的所述人脸区域放缩到一预定大小并提取人脸特征;
根据提取的所述人脸特征,确认所述用户身份。
3.根据权利要求1所述的方法,其特征在于,所述脸部特征点为眼睛的内外眼角点;所述得到眼睛区域图像进一步包括:
以所述内外眼角点之间的距离的第一倍数为宽度,以所述距离的第二倍数为高度,确定眼睛区域的范围,并割取得到眼睛区域图像并放缩到所述视线方向分类器所需的预定尺寸。
4.根据权利要求1所述的方法,其特征在于,所述脸部特征点为左眼和右眼特征点,
根据左眼特征点和右眼特征点,确定左眼区域和右眼区域作为所述眼睛区域,并放缩到所述视线方向分类器所需的预定尺寸。
5.根据权利要求1所述的方法,其特征在于,还包括:
所述用户需要调整视线到不少于两个限定方向;
并且,在视线调整过程中,用户姿态保持始终不变。
6.根据权利要求1所述的方法,其特征在于,还包括:
提取当前的眼睛区域图像并送入所述视线方向分类器之后;
将所述眼睛区域图像送入各所述子方向分类器,找到分类器分类置信度最大的子方向作为视线分类结果;
如果所述视线分类结果对应的分类置信度大于该方向的阈值,并且该方向为所述限定方向之一,则认为用户当前的视线符合所述限定方向,否则认为不符合所述限定方向。
7.一种对用户进行身份认证的装置,其特征在于,包括:
摄像单元,用于采集包含所述用户人脸的图像;
人脸检测单元,用于对所述图像进行人脸检测,得到其中存在的人脸区域;
身份验证单元,用于采用人脸认证技术获取所述人脸区域对应的用户身份;
视线验证单元,用于要求所述用户调整视线方向到至少一个限定方向,在所述图像上定位至少一个脸部特征点,根据所述脸部特征点确定眼睛区域,按照所确定的眼睛区域提取眼睛区域图像并归一化到预定大小;
提取眼睛区域图像在多个方向多个尺度上的Gabor特征,Gabor特征由一系列不同尺度、不同方向的Gabor滤波器与所述眼睛区域图像进行二维卷积得到;
根据预先设置的视线方向分类器判定所述眼睛区域图像的视线方向符合所述限定方向,从而确认为一活体;所述视线方向分类器对应的各子方向分类器均是采用连续型自适应增强算法对Gabor特征进行特征选择,并进行训练得到的;
当确定所述用户通过人脸认证并且判定为活体时,认为所述用户为一合法用户。
8.根据权利要求7所述的进行身份认证的装置,其特征在于,还包括:
特征点定位单元,用于根据在所述人脸区域上定位至少一个脸部特征点;根据所述脸部特征点,得到一眼睛区域图像,将所述眼睛区域图像放缩到一预定大小,发送给所述身份验证单元和/或所述视线验证单元。
9.根据权利要求8所述的进行身份认证的装置,其特征在于,特征点定位单元还包括:
特征点第一提取单元,用于定位左眼特征点和右眼特征点,根据左眼特征点和右眼特征点,确定人脸认证所需的所述人脸区域的范围;发送给所述身份验证单元。
10.根据权利要求8所述的进行身份认证的装置,其特征在于,特征点定位单元还包括:
特征点第二提取单元,用于当所述特征点为内外眼角点时,
以所述内外眼角点之间的距离的第一倍数为宽度,以所述距离的第二倍数为高度,确定眼睛区域的范围,割取所确定的眼睛区域图像并放缩到视线方向分类器的预定尺寸。
11.根据权利要求8所述的进行身份认证的装置,其特征在于,特征点定位单元还包括:
特征点第三提取单元,用于当所述特征点为左眼特征点和右眼特征点时,根据左眼特征点和右眼特征点,确定左眼区域和右眼区域并放缩到视线方向分类器的预定尺寸。
12.根据权利要求7所述的进行身份认证的装置,其特征在于,
视线验证辅助单元,用于要求至少提供两种或两种以上的视线方向所对应的所述眼睛区域图像,并且,在视线调整过程中,用户姿态保持始终不变。
CN200910236557.4A 2009-10-26 2009-10-26 一种身份认证的方法及认证装置 Active CN101710383B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN200910236557.4A CN101710383B (zh) 2009-10-26 2009-10-26 一种身份认证的方法及认证装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200910236557.4A CN101710383B (zh) 2009-10-26 2009-10-26 一种身份认证的方法及认证装置

Publications (2)

Publication Number Publication Date
CN101710383A CN101710383A (zh) 2010-05-19
CN101710383B true CN101710383B (zh) 2015-06-10

Family

ID=42403168

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910236557.4A Active CN101710383B (zh) 2009-10-26 2009-10-26 一种身份认证的方法及认证装置

Country Status (1)

Country Link
CN (1) CN101710383B (zh)

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102375970B (zh) * 2010-08-13 2016-03-30 北京中星微电子有限公司 一种基于人脸的身份认证方法和认证装置
CN102385703B (zh) * 2010-08-27 2015-09-02 北京中星微电子有限公司 一种基于人脸的身份认证方法及系统
CN102509053A (zh) * 2011-11-23 2012-06-20 唐辉 用于验证授权的方法、处理器、设备和移动终端
US8457367B1 (en) * 2012-06-26 2013-06-04 Google Inc. Facial recognition
US8542879B1 (en) * 2012-06-26 2013-09-24 Google Inc. Facial recognition
CN103116403A (zh) * 2013-02-16 2013-05-22 广东欧珀移动通信有限公司 一种屏幕切换方法及移动智能终端
JP2014206932A (ja) * 2013-04-15 2014-10-30 オムロン株式会社 認証装置、認証方法、制御プログラムおよび記録媒体
CN104219488B (zh) * 2013-05-31 2019-01-11 索尼公司 目标图像的生成方法和装置、以及视频监控系统
CN103618918A (zh) * 2013-11-27 2014-03-05 青岛海信电器股份有限公司 一种智能电视的显示控制方法及装置
CN103634680B (zh) * 2013-11-27 2017-09-15 青岛海信电器股份有限公司 一种智能电视的播放控制方法及装置
CN104751110B (zh) * 2013-12-31 2018-12-04 汉王科技股份有限公司 一种活体检测方法和装置
CN103810410A (zh) * 2014-03-10 2014-05-21 辽宁科技大学 一种物联网信息取证方法
US9679212B2 (en) * 2014-05-09 2017-06-13 Samsung Electronics Co., Ltd. Liveness testing methods and apparatuses and image processing methods and apparatuses
DE102014211823A1 (de) * 2014-06-20 2015-12-24 Robert Bosch Gmbh Verfahren zur Personenidentifizierung
CN105407069B (zh) * 2014-06-30 2019-02-15 阿里巴巴集团控股有限公司 活体认证方法、装置、客户端设备及服务器
CN105243386B (zh) * 2014-07-10 2019-02-05 汉王科技股份有限公司 人脸活体判断方法以及系统
CN104091160B (zh) * 2014-07-14 2017-12-08 成都万维图新信息技术有限公司 一种人脸检测方法
US9602490B2 (en) * 2014-11-10 2017-03-21 Intel Corporation User authentication confidence based on multiple devices
CN107995979B (zh) * 2015-04-16 2021-12-07 托比股份公司 用于对用户进行认证的系统、方法和机器可读介质
CN104994057A (zh) * 2015-05-12 2015-10-21 深圳市思迪信息技术有限公司 基于身份验证的数据处理方法和系统
CN104966070B (zh) * 2015-06-30 2018-04-10 北京汉王智远科技有限公司 基于人脸识别的活体检测方法和装置
CN105184246B (zh) * 2015-08-28 2020-05-19 北京旷视科技有限公司 活体检测方法和活体检测系统
CN105184277B (zh) * 2015-09-29 2020-02-21 杨晴虹 活体人脸识别方法以及装置
CN107004073B (zh) * 2015-10-31 2021-03-05 华为技术有限公司 一种面部验证的方法和电子设备
CN106778454B (zh) * 2015-11-25 2019-09-20 腾讯科技(深圳)有限公司 人脸识别的方法和装置
CN105975611A (zh) * 2016-05-18 2016-09-28 天津大学 自适应组合降采样增强学习机
CN106203297B (zh) * 2016-06-30 2019-11-08 北京七鑫易维信息技术有限公司 一种身份识别方法及装置
CN106228133B (zh) * 2016-07-21 2020-04-10 北京旷视科技有限公司 用户验证方法及装置
CN106384237A (zh) * 2016-08-31 2017-02-08 北京志光伯元科技有限公司 基于人脸识别的会员认证和管理方法、装置及系统
WO2018125563A1 (en) * 2016-12-30 2018-07-05 Tobii Ab Identification, authentication, and/or guiding of a user using gaze information
CN111310630A (zh) * 2020-02-10 2020-06-19 支付宝实验室(新加坡)有限公司 活体检测方法及装置
CN110929705A (zh) * 2020-02-17 2020-03-27 京东数字科技控股有限公司 活体检测方法和装置、身份认证方法和系统、存储介质
CN116309031B (zh) * 2023-05-16 2023-08-29 中国科学技术大学 人脸伪造主动干扰方法、系统、设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1520161A (zh) * 2002-12-12 2004-08-11 富士胶片株式会社 面部识别方法、面部提取方法及摄像装置
CN101216887A (zh) * 2008-01-04 2008-07-09 浙江大学 照片人脸与活体人脸的计算机自动鉴别方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1520161A (zh) * 2002-12-12 2004-08-11 富士胶片株式会社 面部识别方法、面部提取方法及摄像装置
CN101216887A (zh) * 2008-01-04 2008-07-09 浙江大学 照片人脸与活体人脸的计算机自动鉴别方法

Also Published As

Publication number Publication date
CN101710383A (zh) 2010-05-19

Similar Documents

Publication Publication Date Title
CN101710383B (zh) 一种身份认证的方法及认证装置
CN108520216B (zh) 一种基于步态图像的身份识别方法
CN104008370B (zh) 一种视频人脸识别方法
CN108229427A (zh) 一种基于身份证件和人脸识别的身份安全验证方法及系统
Sun et al. Improving iris recognition accuracy via cascaded classifiers
CN102419819B (zh) 人脸图像识别方法和系统
CN103530599B (zh) 一种真实人脸和图片人脸的区别方法和系统
CN103942577B (zh) 视频监控中基于自建立样本库及混合特征的身份识别方法
CN103902978B (zh) 人脸检测及识别方法
CN105956578A (zh) 一种基于身份证件信息的人脸验证方法
CN102542281B (zh) 非接触式生物特征识别方法和系统
Dagnes et al. Occlusion detection and restoration techniques for 3D face recognition: a literature review
CN106980852B (zh) 基于角点检测与匹配的药品识别系统及其识别方法
CN106446754A (zh) 图像识别方法、度量学习方法、图像来源识别方法及装置
CN105469076B (zh) 基于多示例学习的人脸比对验证方法
KR20050025927A (ko) 홍채인식을 위한 동공 검출 방법 및 형상기술자 추출방법과 그를 이용한 홍채 특징 추출 장치 및 그 방법과홍채인식 시스템 및 그 방법
CN105138972A (zh) 人脸认证方法和装置
CN101996308A (zh) 人脸认证方法及系统、人脸模型训练方法及系统
CN101216884A (zh) 一种人脸认证的方法及系统
Alheeti Biometric iris recognition based on hybrid technique
CN103679118A (zh) 一种人脸活体检测方法及系统
CN103679136A (zh) 基于局部宏观特征和微观特征结合的手背静脉身份识别方法
CN105279492A (zh) 虹膜识别的方法和装置
CN101533466B (zh) 一种眼睛定位图像处理方法
CN106529377A (zh) 一种基于图像的年龄估计方法、装置及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20171221

Address after: 100083 Haidian District, Xueyuan Road, No. 35, the world building, the second floor of the building on the ground floor, No. 16

Patentee after: Zhongxing Technology Co., Ltd.

Address before: 100083, Haidian District, Xueyuan Road, Beijing No. 35, Nanjing Ning building, 15 Floor

Patentee before: Beijing Vimicro Corporation

CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: 100083 Haidian District, Xueyuan Road, No. 35, the world building, the second floor of the building on the ground floor, No. 16

Patentee after: Mid Star Technology Limited by Share Ltd

Address before: 100083 Haidian District, Xueyuan Road, No. 35, the world building, the second floor of the building on the ground floor, No. 16

Patentee before: Zhongxing Technology Co., Ltd.