CN102004911A - 提高人脸识别正确率的方法 - Google Patents

提高人脸识别正确率的方法 Download PDF

Info

Publication number
CN102004911A
CN102004911A CN 201010618691 CN201010618691A CN102004911A CN 102004911 A CN102004911 A CN 102004911A CN 201010618691 CN201010618691 CN 201010618691 CN 201010618691 A CN201010618691 A CN 201010618691A CN 102004911 A CN102004911 A CN 102004911A
Authority
CN
China
Prior art keywords
image
matched
face
point
match point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 201010618691
Other languages
English (en)
Other versions
CN102004911B (zh
Inventor
孙宏明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANGHAI DIGIVISION TECHNOLOGY Co Ltd
Original Assignee
SHANGHAI DIGIVISION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHANGHAI DIGIVISION TECHNOLOGY Co Ltd filed Critical SHANGHAI DIGIVISION TECHNOLOGY Co Ltd
Priority to CN 201010618691 priority Critical patent/CN102004911B/zh
Publication of CN102004911A publication Critical patent/CN102004911A/zh
Application granted granted Critical
Publication of CN102004911B publication Critical patent/CN102004911B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明涉及一种提高人脸识别正确率的方法,包括以下步骤:a)从一参考图片中得到人脸部分,作为目标匹配图像;b)计算该目标匹配图像的三个中心点位置;c)计算该目标匹配图像的SIFT特征点集;d)对一待匹配图像,计算该待匹配图像的三个中心点位置和SIFT特征点集;e)使用SIFT匹配算法找出该待匹配图像与该目标匹配图像的匹配点;以及f)判定每一对匹配点是否位于人脸的相同区域,如果是,接受该对匹配点,否则拒绝该对匹配点。

Description

提高人脸识别正确率的方法
技术领域
本发明涉及图像处理领域,尤其是涉及一种提高人脸识别正确率的方法。
背景技术
SIFT算法由D.G.Lowe在1999年提出,并在2004年进行了完善总结。该算法通过提取局部特征,在尺度空间寻找极值点,提取位置,尺度,旋转等不变量,得出基本特征参数。SIFT特征参数是图像的局部特征,其对旋转、尺度缩放保持不变,对亮度变化、视角变化、仿射变换、噪声也保持一定程度的稳定性。
目前有人成功地利用SIFT特征进行人脸识别。这类方法的核心是SIFT特征匹配算法,它是获取待匹配的两幅图像中的SIFT特征点后,对其中一图像的特征点逐个考虑。找出在某个点上欧式距离最近的前两个关键点。在这两个关键点中,如果最近的距离除以次近的距离少于某个比例阈值,则接受这一对匹配点。由此,通过控制这个比例阈值,可以调整SIFT匹配点数目进而控制匹配的稳定性。
但由于这种匹配算法仅仅考虑了SIFT特征,在实际使用中可以发现这种匹配还是具有一定的盲目性。采用这种匹配方法,得到的匹配点中经常会在不同脸部区域内的点之间形成的匹配点对。
根据SIFT特征的计算原理,一副二维图像的尺度空间可以由不同尺度的高斯核与图像的卷积得到,如下式所示:
L(x,y,σ)=G(x,yσ)*I(x,y)
G ( x , y , σ ) = 1 2 π σ 2 e - ( x 2 + y 2 ) / 2 σ 2
其中G(x,y,σ)是尺度可变高斯函数,I是每个点上的亮度,(x,y)是空间坐标,σ是尺度坐标。
为了有效的在尺度空间检测到稳定的关键点,可以使用高斯差分尺度空间(DOG scale-space)。
D(x,y,σ)=(G(x,y,kσ)-G(x,y,σ))*I(x,y)=L(x,y,kσ)-L(x,y,σ)
DoG算子的特点是计算简单,与尺度归一化的LoG算子的近似。Lowe的论文提供了这种快速计算DoG算子的方法[3]。通过该方法可以得到所需尺度空间的DoG算子。之后根据得到的DoG算子通过和领域比较得出在尺度空间和二维图像空间都具有局部极值的特定点以及其所处的尺度。这些点就是SIFT特征点。得到了特征点之后可以计算这些特征点的属性。
利用关键点领域象素的梯度方向分布特性为每个关键点计算方向参数和模值。每个具体点的方向和大小的计算公式如下:
m ( x , y ) = ( L ( x + 1 , y ) - L ( x - 1 , y ) ) 2 + ( L ( x , y + 1 ) - L ( x , y - 1 ) ) 2
θ(x,y)=tan-1((L(x,y+1)-L(x,y-1))/(L(x+1,y)-L(x-1,y)))
其中L所用尺度为每个关键点各自所在的尺度。
根据计算所得到的领域内象素点的方向性,并结合领域象素和关键点的距离设置权值对这些信息进行方向直方图统计。以直方图的峰值作为关键点的主方向。这样,每4x4个象素可以形成一个种子点,利用方向直方图的方法可以得到每一个种子点在8个方向上的方向向量。然后,对每个关键点计算16个种子点,就可以得到一个描述该关键点局部信息的128维SIFT特征向量。该向量就是特征点匹配的关键信息。实际上,SIFT特征向量采用了领域方向性信息联合的思想,增强了算法抗噪声的能力,同时对于含有定位误差的特征匹配也提供了较好的容错性。
发明内容
本发明所要解决的技术问题是提供一种提高人脸识别正确率的方法,它结合人脸区域划分来去除不正确匹配的点。
本发明为解决上述技术问题而采用的技术方案是一种提高人脸识别正确率的方法,包括以下步骤:
a)从一参考图片中得到人脸部分,作为目标匹配图像;
b)计算该目标匹配图像的三个中心点位置;
c)计算该目标匹配图像的SIFT特征点集;
d)对一待匹配图像,计算该待匹配图像的三个中心点位置和SIFT特征点集;
e)使用SIFT匹配算法找出该待匹配图像与该目标匹配图像的匹配点;以及
f)判定每一对匹配点是否位于人脸的相同区域,如果是,接受该对匹配点,否则拒绝该对匹配点。
在本发明的一实施例中,判定每一对匹配点是否位于人脸的相同区域的方法包括:对该对匹配点位于该目标匹配图像的第一点,计算该第一点到该目标匹配图像的三个中心点的距离之和,与该目标匹配图像的三个中心点组成的三角形周长的比值r1;对该对匹配点位于该待匹配图像的第二点,计算该第二点到该待匹配图像的三个中心点的距离之和,与该待匹配图像的三个中心点组成的三角形周长的比值r2;计算该对匹配点到各自图像中的三个中心的距离的比值的平均值ar。当满足以下条件时,判定该对匹配点位于人脸的相同区域:r1,r2的比值在区间[0.90,1.1]内;且ar在区间[0.90,1.1]内。
在本发明的一实施例中,所述三个中心为人脸的左眼中心、右眼中心和嘴部中心。
在本发明的一实施例中,计算该目标匹配图像和/或该待匹配图像的三个中心点位置的方法为Harr识别算法。
在本发明的一实施例中,上述方法包括遍历多个待匹配图像,执行步骤d)-f)以找到与目标匹配图像匹配的图像。
本发明由于采用以上技术方案,使之与现有技术相比,通过对传统SIFT算法中的匹配点对进行筛选,去除了不在人脸相同区域的那些匹配点,从而提高了人脸识别的正确率。
附图说明
为让本发明的上述目的、特征和优点能更明显易懂,以下结合附图对本发明的具体实施方式作详细说明,其中:
图1示出本发明一实施例的提高人脸识别正确率的方法流程。
图2示出根据现有SIFT匹配算法的错误匹配结果。
具体实施方式
根据本发明实施例的构思,提出了一种可以量化一个特征点是否在人的脸部区域的算法,并以此来改善人脸识别的结果。
本发明实施例的人脸识别方法是基于匹配算法,同时结合特征点的空间位置进行了联合考虑。可以理解,有效匹配的两个特征点,应当在人脸的相同部位。因此在符合特征向量欧式距离最近的基础上,还必须保证匹配的两个特征点需要在人脸相同部位。
在一实施例中,人脸区域可以分成眼部、鼻子、嘴部、脸颊、额头等区域。对分别位于相应人脸图像中对应区域内的相应位置处匹配点进行计算,如果匹配的点对是来自于同一人脸的相同点,那么匹配点对到各自图像上三个中心点的距离之和与各自图像上三个中心点组成的三角形的周长的比值会大致上接近于1。因此可以通过判断这一比值是否接近于1来判断匹配点对是否来自于同一人脸的相同点。
从几何学考虑,某一平面P1内的线段AB在另外一个平面P2内的投影A′B′的长度之和AB的长度是与P1与P2之间的夹角成正比的。利用人脸上两眼和嘴形成的三角形,就有三条线段,可以减少中心定位误差,计算误差。
首先分别计算出两张图中对应的一对匹配点l1,l2各自到左眼中心、右眼中心、嘴部中心的距离ll1,lr1,lm1以及ll2,lr2,lm2。再分别计算两张特征匹配图中左眼中心、右眼中心、嘴部中心三者之间的相互距离lrl1,lrm1,llm1以及lrl2,lrm2,llm2。然后计算比值:
r1=(ll1+lr1+lm1)/(lrl1+lrm1+llm1)    (1)
r2=(ll2+lr2+lm2)/(lrl2+lrm2+llm2)    (2)
进一步地,计算出r1/r2:
r1/r2=(lrl2+lrm2+llm2)*(ll1+lr1+lm1)/((ll1+lr2+lm2)*(lrl1+lrm1+llm1))    (3)
接着计算两个匹配点到各自图像中的三个中心的距离的比值的平均值:
ar=(lr1/lr2+ll1/ll2+lm1/lm2)/3    (4)
如果r1/r2和ar都处于范围[0.90,1.1]内,可以认为该对匹配点l1,l2处于同一区域,就可以接收该匹配点对,否则放弃。
图1示出一实施例的人脸识别方法流程。参照图1所示,方法包括以下步骤。
在步骤S1,从一参考图片中得到人脸部分,作为目标匹配图像target。
在一个实例中,参考图片是由人脸识别系统的摄像机拍摄获得,作为之后比对的基础。
在步骤S2,计算图像target中的左眼、右眼、嘴部位置,并且由此计算其中心位置lrl1,lrm1,llm1。
作为举例,该步骤可通过Harr识别算法来实现。
在步骤S3,计算图像target的SIFT特征点集Features_target。
在步骤S4,遍历系统中预设的待匹配图片集,针对每一图片执行步骤S2,S3的计算,得到相应图片的右眼、左眼、以及嘴部中心lrln,lrmn,llmn及SIFT特征点集Features_n。
在步骤S5,对于每一Features_n,先用Lowe的SIFT匹配算法找出匹配的点。
在步骤S6,针对每一对匹配点,参照公式(1)-(4)计算r1/r2,ar。如果r1/r2,ar处于[0.90,1.1],认为匹配点对位于人脸的相同区域,接受这对匹配点,否则就拒绝。
图2是一个人脸识别的实验结果,同一列的上图和下图的匹配点对用匹配线连接,以最左侧的两个图来说,位于上图右耳(对观察者而言)处的匹配点A,和位于下图右脸颊处的匹配点B,用匹配线连接。图2中所示的匹配线在常用的SIFT匹配方法中依然是正确的匹配线,然而这些匹配点对实际上位于人脸的不同区域。使用本发明实施例的人脸识别方法,这些错误的匹配线是可以去除的,从而提高了人脸识别的正确率。
虽然本发明已以较佳实施例揭示如上,然其并非用以限定本发明,任何本领域技术人员,在不脱离本发明的精神和范围内,当可作些许的修改和完善,因此本发明的保护范围当以权利要求书所界定的为准。

Claims (5)

1.一种提高人脸识别正确率的方法,包括以下步骤:
a)从一参考图片中得到人脸部分,作为目标匹配图像;
b)计算该目标匹配图像的三个中心点位置;
c)计算该目标匹配图像的SIFT特征点集;
d)对一待匹配图像,计算该待匹配图像的三个中心点位置和SIFT特征点集;
e)使用SIFT匹配算法找出该待匹配图像与该目标匹配图像的匹配点;以及
f)判定每一对匹配点是否位于人脸的相同区域,如果是,接受该对匹配点,否则拒绝该对匹配点。
2.如权利要求1所述的方法,其特征在于,判定每一对匹配点是否位于人脸的相同区域的方法包括:
对该对匹配点位于该目标匹配图像的第一点,计算该第一点到该目标匹配图像的三个中心点的距离之和,与该目标匹配图像的三个中心点组成的三角形周长的比值r1;
对该对匹配点位于该待匹配图像的第二点,计算该第二点到该待匹配图像的三个中心点的距离之和,与该待匹配图像的三个中心点组成的三角形周长的比值r2;
计算该对匹配点到各自图像中的三个中心的距离的比值的平均值ar;
当满足以下条件时,判定该对匹配点位于人脸的相同区域:
r1,r2的比值在区间[0.90,1.1]内;且
ar在区间[0.90,1.1]内。
3.如权利要求1所述的方法,其特征在于,所述三个中心为人脸的左眼中心、右眼中心和嘴部中心。
4.如权利要求1所述的方法,其特征在于,计算该目标匹配图像和/或该待匹配图像的三个中心点位置的方法为Harr识别算法。
5.如权利要求1所述的方法,其特征在于,包括遍历多个待匹配图像,执行步骤d)-f)以找到与目标匹配图像匹配的图像。
CN 201010618691 2010-12-31 2010-12-31 提高人脸识别正确率的方法 Expired - Fee Related CN102004911B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010618691 CN102004911B (zh) 2010-12-31 2010-12-31 提高人脸识别正确率的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010618691 CN102004911B (zh) 2010-12-31 2010-12-31 提高人脸识别正确率的方法

Publications (2)

Publication Number Publication Date
CN102004911A true CN102004911A (zh) 2011-04-06
CN102004911B CN102004911B (zh) 2013-04-03

Family

ID=43812264

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010618691 Expired - Fee Related CN102004911B (zh) 2010-12-31 2010-12-31 提高人脸识别正确率的方法

Country Status (1)

Country Link
CN (1) CN102004911B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102184388A (zh) * 2011-05-16 2011-09-14 苏州两江科技有限公司 人脸和车辆自适应快速检测系统及检测方法
CN102521581A (zh) * 2011-12-22 2012-06-27 刘翔 结合生物特征与局部图像特征的并行人脸识别方法
CN103679159A (zh) * 2013-12-31 2014-03-26 海信集团有限公司 人脸识别方法
CN103714544A (zh) * 2013-12-27 2014-04-09 苏州盛景空间信息技术有限公司 一种基于sift特征点匹配的优化方法
CN103988228A (zh) * 2011-09-27 2014-08-13 英特尔公司 脸部识别方法、设备和用于执行该方法的计算机可读记录介质
CN104252614A (zh) * 2013-06-27 2014-12-31 南京理工大学常熟研究院有限公司 基于sift算法的二代身份证人脸比对方法
CN107463864A (zh) * 2016-06-02 2017-12-12 国家计算机网络与信息安全管理中心 一种结合序列图像超分辨率重建的人脸识别系统

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI508001B (zh) * 2013-10-30 2015-11-11 Wistron Corp 路人偵測方法、裝置與電腦程式產品

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008075359A2 (en) * 2006-12-21 2008-06-26 Yeda Research And Development Co. Ltd. Method and apparatus for matching local self-similarities
CN101320485A (zh) * 2008-06-03 2008-12-10 东南大学 一种基于立体匹配的人脸三维模型获取方法
CN101510257A (zh) * 2009-03-31 2009-08-19 华为技术有限公司 一种人脸相似度匹配方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008075359A2 (en) * 2006-12-21 2008-06-26 Yeda Research And Development Co. Ltd. Method and apparatus for matching local self-similarities
CN101320485A (zh) * 2008-06-03 2008-12-10 东南大学 一种基于立体匹配的人脸三维模型获取方法
CN101510257A (zh) * 2009-03-31 2009-08-19 华为技术有限公司 一种人脸相似度匹配方法及装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
《BMVC2002》 20021231 Matthew Brown et al Invariant Features from Interest Point Groups 253-262 , *
《信息工程大学学报》 20080630 许广毅 等 基于SIFT特征的单样本人脸识别研究 164-167 第9卷, 第2期 *
《计算机工程》 20100731 罗佳 等 基于SIFT 特征的人脸识别方法 173、174、177 第36卷, 第13期 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102184388A (zh) * 2011-05-16 2011-09-14 苏州两江科技有限公司 人脸和车辆自适应快速检测系统及检测方法
CN103988228A (zh) * 2011-09-27 2014-08-13 英特尔公司 脸部识别方法、设备和用于执行该方法的计算机可读记录介质
CN103988228B (zh) * 2011-09-27 2018-11-30 英特尔公司 脸部识别方法、设备和用于执行该方法的计算机可读记录介质
CN102521581A (zh) * 2011-12-22 2012-06-27 刘翔 结合生物特征与局部图像特征的并行人脸识别方法
CN102521581B (zh) * 2011-12-22 2014-02-19 刘翔 结合生物特征与局部图像特征的并行人脸识别方法
CN104252614A (zh) * 2013-06-27 2014-12-31 南京理工大学常熟研究院有限公司 基于sift算法的二代身份证人脸比对方法
CN103714544A (zh) * 2013-12-27 2014-04-09 苏州盛景空间信息技术有限公司 一种基于sift特征点匹配的优化方法
CN103714544B (zh) * 2013-12-27 2016-08-17 苏州盛景空间信息技术有限公司 一种基于sift特征点匹配的优化方法
CN103679159A (zh) * 2013-12-31 2014-03-26 海信集团有限公司 人脸识别方法
CN107463864A (zh) * 2016-06-02 2017-12-12 国家计算机网络与信息安全管理中心 一种结合序列图像超分辨率重建的人脸识别系统

Also Published As

Publication number Publication date
CN102004911B (zh) 2013-04-03

Similar Documents

Publication Publication Date Title
CN102004911B (zh) 提高人脸识别正确率的方法
US10970566B2 (en) Lane line detection method and apparatus
CN107844750B (zh) 一种水面全景图像目标检测识别方法
CN110363047B (zh) 人脸识别的方法、装置、电子设备和存储介质
CN107240124B (zh) 基于时空约束的跨镜头多目标跟踪方法及装置
WO2015010451A1 (zh) 一种从单幅图像检测道路的方法
CN100494886C (zh) 三维扫描系统中圆形标志点的检测方法
CN109711268B (zh) 一种人脸图像筛选方法及设备
US20090010544A1 (en) Method, apparatus, and program for detecting facial characteristic points
CN110490913B (zh) 基于角点与单线段编组的特征描述算子进行影像匹配方法
CN104463899A (zh) 一种目标对象检测、监控方法及其装置
CN104636724B (zh) 一种基于目标一致性的车载相机快速行人车辆检测方法
US20050002559A1 (en) Depth measuring method and depth measuring apparatus
CN107895375A (zh) 基于视觉多特征的复杂道路线提取方法
CN111340701A (zh) 一种基于聚类法筛选匹配点的电路板图像拼接方法
CN103902953B (zh) 一种屏幕检测系统及方法
CN105574838A (zh) 多目相机的图像配准和拼接方法及其装置
CN111192194A (zh) 一种针对幕墙建筑立面的全景图像拼接方法
TW201824859A (zh) 運用變焦影像資訊以改善原視差影像匹配錯誤之方法
CN110348307B (zh) 一种起重机金属结构攀爬机器人的路径边缘识别方法及系统
JP3576654B2 (ja) 露光量決定方法、図形抽出方法及び顔領域判断方法
CN105809657A (zh) 一种角点检测方法和装置
CN114463720B (zh) 一种基于线段交并比损失函数的车道线检测方法
CN111444777B (zh) 一种同时标记阴影的前视声呐目标检测标记方法
CN113780421B (zh) 基于人工智能的脑部pet影像识别方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130403

Termination date: 20171231