CN102073843B - 非接触式快速人手多模态信息融合识别方法 - Google Patents

非接触式快速人手多模态信息融合识别方法 Download PDF

Info

Publication number
CN102073843B
CN102073843B CN 201010533446 CN201010533446A CN102073843B CN 102073843 B CN102073843 B CN 102073843B CN 201010533446 CN201010533446 CN 201010533446 CN 201010533446 A CN201010533446 A CN 201010533446A CN 102073843 B CN102073843 B CN 102073843B
Authority
CN
China
Prior art keywords
finger
length
hand
point
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN 201010533446
Other languages
English (en)
Other versions
CN102073843A (zh
Inventor
桑海峰
黄静
赵云
李雅红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenyang University of Technology
Original Assignee
Shenyang University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenyang University of Technology filed Critical Shenyang University of Technology
Priority to CN 201010533446 priority Critical patent/CN102073843B/zh
Publication of CN102073843A publication Critical patent/CN102073843A/zh
Application granted granted Critical
Publication of CN102073843B publication Critical patent/CN102073843B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明提供一种非接触式快速人手多模态信息融合识别方法,其特征在于:所述方法的具体步骤如下:(1)人手图像采集;(2)手形关键特征点定位;(3)手形特征向量提取;(4)掌纹ROI区域定位与特征向量提取;(5)设定阈值进行手形特征一次匹配,获得被选人员;(6)使用掌纹识别的方法对备选人员的掌纹图像进行一次匹配,给出最终判断;本发明是一种使用方便的、快速的、对人体无伤害、无疾病传播、识别速度快的、能够提高系统识别率和稳定的性的基于手形和掌纹的多模态生物特征的个人身份识别方法。

Description

非接触式快速人手多模态信息融合识别方法
技术领域
本发明属于生物特征身份识别技术领域,具体涉及一种非接触式手形、掌纹和手掌静脉图像采集和多模态识别技术,也就是非接触式快速人手多模态信息融合识别方法。
背景技术
安全可靠的个人身份认证是避免和抑制公共安全事件发生的一个重要环节,而当今社会,银行金库巨额现金频频被盗、被冒领;防盗门难以阻挡窃贼的到访;恐怖分子持假护照蒙骗海关以及网络窃密等事件的发生,都体现了钥匙、证件、密码作为个人身份代码,容易被窃取、伪造和盗用,不安全,所以,公共安全迫切需要安全可靠的个人身份认证。另外,生产生活需要安全可靠的个人身份认证,如自动考勤系统提高管理效率。
生物特征信息能够唯一表示个人身份。在《2006-2020年国家中长期科学和技术发展规划纲要》中,生物特征识别分别被列为公共安全专题和前沿技术专题中的一项重要研究内容。起初的研究者都是专注于人类的某一种生物特征,无论是当前可用的生物特征,例如脸像、指纹、虹膜、手形、视网膜、语音等还是目前正处于研究状态的生物特征,例如步态、耳廓、气味、脸部温谱、手的静脉结构等以及未来可能要研究的生物特征,例如,DNA,在出生时进行注册。但是,在开始以多模态生物特征作为研究对象来识别身份的研究之前,似乎一直被忽略的是,人类自身区分认识或不认识的人、熟悉或不熟悉的人,并不是依靠某个单一特征的判断,而是对多个特征进行的综合判断,与对象相处的次数越多,识别越准确,甚至不需要观察对象的头部正面人暴露在外的特征最集中的部位。
其实现有的研究和实际应用表明,无论是基于指纹、虹膜、脸像,还是基于掌纹、手形、声音的生物特征识别技术,都已经在一些特定的或具体的领域得到了使用,并且因为其各自独特的生物特性,在某些方面甚至表现出及其出色的性能。但是同样不可否认的是,这些基于单一生物特征的身份识别由于各种各样因素的限制(部分是因为现有的技术条件,部分是因为生物特征本身固有的性质),在实际应用中都面临现实的问题,使得各种生物特征识别技术的优点和缺点同样突出,也就使得目前的识别技术识别不够准确且效果不是很好,且原始的识别技术需要直接接触识别设备,容易造成疾病的传播以及对人体的损害,而且原始的识别技术识别速度慢,识别率不是很高,稳定性也较差。
发明内容
发明目的:本发明提供一种非接触式快速人手多模态信息融合识别方法,其目的是解决现有的识别技术速度慢、识别率不是很高、稳定性较差以及效果不是很好的问题。
技术方案:本发明是通过以下技术方案来实现的:
一种非接触式快速人手多模态信息融合识别方法,其特征在于:所述方法的具体步骤如下:
(1)人手图像采集;
将人手自然张开,放在摄像头前一个可变的范围内;
(2)手形关键特征点定位;
对除大拇指以外的其余四个手指提取指尖及指根点;
(3)手形特征向量提取;
取每个手指指跟两侧点连线的中点作为每个手指的指跟点,然后计算它们到相应指尖点的长度作为四个手指的绝对长度,计算各个手指绝对长度之间的相对长度,构成特征向量;
(4)掌纹ROI区域定位与特征向量提取;
获取掌纹ROI图像区域,生成0°、45°、90°、135°四个方向的2D-Gabor滤波器组,将尺寸和灰度归一化后的掌纹ROI图像(F)分别与4个方向的Gabor滤波器的实部Gr与虚部Gi分别作卷积运算,将卷积运算后的计算结果形成0-1编码作为掌纹特征向量; 
(5)设定阈值进行手形特征一次匹配,获得被选人员;
所述的进行手形特征一次匹配是用所提取的特征,计算欧式距离进行匹配,采用最近邻分类方法分类;获得满足某个阈值下的多个被选人员;
(6)使用掌纹识别的方法对备选人员的掌纹图像进行一次匹配,给出最终判断;
根据2D-Gabor滤波器获得的掌纹特征向量,通过匹配算法对有手形匹配后所得到的被选人员进行最终的鉴别。
 “(3)”步骤中所述的相对长度为六个,分别是食指长度与中指长度;食指长度与无名指长度;食指长度与小指长度;中指长度与无名指长度;中指长度与小指长度;无名指长度与小指长度。
 “(5)”步骤中的具体操作为:用手形识别的方法对待识别人员的手掌图像进行一次匹配,得到手指相对长度的欧氏距离Mi(i=1,2,…n),根据手形的等误率曲线设定阈值Thand,当Mi<Thand时,将Mi所对应的已注册人员姓名存入备选人员姓名数组中。
所述的人手图像采集是在人手自然张开、非接触、非固定位置的采集条件下进行的。
 “(2)”步骤中的所述的指尖及指根点为食指、中指、无名指和小指的四个指尖点;食指、中指、无名指和小指之间的三个指跟点以及四个手指的指根两侧的八个点。
获取掌纹ROI图像区域的具体步骤为:利用食指与中指之间的指跟点和中指与无名指之间的指跟点两点的连线及其中点垂线为坐标轴建立新的坐标系,采用相对长度L截取方形掌纹有效区域,根据新坐标系及原坐标系之间的角度关系将图像旋转,经过缩放归一化大小为128*128的图像。
步骤“(6)”中使用掌纹识别的方法对备选人员的掌纹图像进行一次匹配,得到掌纹图像经过2D-Gabor方向滤波的汉明距离Hi(i=1,2,…l),求出最小距离Hmin,根据手形的等误率曲线设定阈值Tpalm,当Hmin<Tpalm时,则匹配成功,否则待识别人员即为非注册人员。
优点及效果:本发明提供一种非接触式快速人手多模态信息融合识别方法,其特征在于:所述方法的具体步骤如下:
(1)人手图像采集
将人手自然张开,放在摄像头前一个可变的范围内;
(2)手形关键特征点定位
对除大拇指以外的其余四个手指提取指尖及指根点;
(3)手形特征向量提取
取每个手指指跟两侧点连线的中点作为每个手指的指跟点,然后计算它们到相应指尖点的长度作为四个手指的绝对长度,计算各个手指绝对长度之间的相对长度,构成特征向量
(4)掌纹ROI区域定位与特征向量提取
获取掌纹ROI图像区域,生成0°、45°、90°、135°四个方向的2D-Gabor滤波器组,将尺寸和灰度归一化后的掌纹ROI图像(F)分别与4个方向的Gabor滤波器的实部Gr与虚部Gi分别作卷积运算,将卷积运算后的计算结果形成0-1编码作为掌纹特征向量;
(5)设定阈值进行手形特征一次匹配,获得被选人员
所述的进行手形特征一次匹配是用所提取的特征,计算欧式距离进行匹配,采用最近邻分类方法分类;获得满足某个阈值下的多个被选人员。
(6)使用掌纹识别的方法对备选人员的掌纹图像进行一次匹配,给出最终判断;
根据2D-Gabor滤波器获得的掌纹特征向量,通过匹配算法对有手形匹配后所得到的被选人员进行最终的鉴别。
本发明为一种多模态生物特征识别技术,多模态生物特征识别成为目前生物特征识别研究的主要方向,本发明正是为了解决在生物特征识别的研究中遇到的困难以及在推向实际应用的过程中面临的问题和需要而作出的自然的选择。本发明给身份识别提供了更加丰富的特征信息,能够在提高识别准确性与可靠性的同时增加识别的鲁棒性。不仅如此,嵌入数据融合的多生物特征识别依靠其更高的数据容量和更好的抗伪性,作为安全且可以信任的身份等价物,将推动生物特征识别技术在社会安全方面的不断发展和应用。
人手掌上的掌纹特征非常丰富,可用于身份识别的基本特征包括:1)主线特征,掌纹上的三条主线,分别称为生命线、感情线和智慧线;2)褶皱特征,指比主线细、浅的褶皱线;3)细节点特征,指手掌上布满的和指纹一样的乳突纹;4)三角点特征,指乳突纹在手掌上形成的三角区域的中心点。
以上这些都是掌纹的基本特征,通过选择合适的方法提取出来,就可以进行身份鉴别了。而且与其他的生物识别技术相比具有很多的特点,1)手掌区域比较大,比指纹含有更丰富的信息;2)主线和褶皱线特征明显,可以在低分辨率的掌纹图像中提取出来;3)采集设备简单易行,识别速度快,且成本远低于虹膜识别的采集设备;4)与手形、签名相比掌纹特征唯一性更强、更稳定。因此,掌纹识别是一种很有发展潜力的身份识别方法
手形识别技术中手形识别系统所利用的特征为手指或手掌的三维立体形状,如长度、宽度、厚度和手掌表面区域等。手形特征稳定性高,不易随外在环境或生理的变化而改变,使用方便,所以广泛应可用于门禁、考勤和身份认证领域。
手形识别所用的识别特征简单,装置占用空间小,可以在低分辨率图像中提取出来,所需的计算量很小,同时,手形识别系统的用户接受率很高。
如上所述,本发明考虑到掌纹和手形的生理结构,可以通过单一采集设备进行非接触式采集,从而可以进行多生物特征识别。它的优势在于,1)与其它多生物特征识别相比,基于人手的多生物特征识别不用进行多次采样,降低了采集设备的成本,也减少了用户的麻烦,而且采用非接触式方式进行图像采集,将不会对身体产生伤害,包括疾病的传播,大大提高了用户的接受程度;2)与单一的生物识别技术相比,具有更丰富的生物特征信息,将这些特征融合起来势必会提高识别率,而且稳定性和鲁棒性也会相应提高。
本发明是一种使用方便的、快速的、对人体无伤害、无疾病传播、识别速度快的、能够提高系统识别率和稳定的性的基于手形和掌纹的多模态生物特征的个人身份识别方法。本发明的优点在于能够更好的利用手形和掌纹识别的优点,即手形识别速度快,掌纹识别率高;克服原有技术的缺点。这样,首先通过手形识别快速的选出少数被选人员,然后再从这少数被选人员中利用掌纹识别准确的识别出最终结果,从而有效的提高身份识别系统的速度和识别率。
附图说明:
图1是本发明的方法步骤的流程框图;
图2是本发明的手形特征点定位过程图;其中图2-1为指尖点区域粗定位图;图2-2为指根点区域粗定位图;图2-3为曲率的计算图;图2-4为指尖点区域定位图;图2-5为指根点区域定位图;图2-6为定位指尖点和指根点示意图;图2-7为寻找指跟内侧点过程示意图;图2-8为四指内侧指跟点示意图;图2-9为全部指跟点示意图;
图3是本发明的手形与掌纹特征提取示意图;其中图3-1为手形特征提取图;图3-2为掌纹特征提取图;
图4是本发明的手形匹配分布图和等错误率曲线图;其中图4-1为手形匹配分布图;图4-2为等错误率曲线图;
图5是本发明的掌纹匹配分布图和等错误率曲线图;其中图5-1是掌纹匹配分布图;图5-2是等错误率曲线图。
具体实施方式:下面结合附图对本发明做进一步的说明:
本发明提供一种非接触式快速人手多模态信息融合识别方法,其特征在于:所述方法的具体步骤如下:
(1)人手图像采集;
将人手自然张开,放在摄像头前一个可变的范围内;所述的人手图像采集是在人手自然张开、非接触、非固定位置的采集条件下进行的。
(2)手形关键特征点定位;
对除大拇指以外的其余四个手指提取指尖及指根点;指尖及指根点为食指、中指、无名指和小指的四个指尖点和它们之间的三个指跟点以及四个手指的指根两侧的八个点。
(3)手形特征向量提取;
取每个手指指跟两侧点连线的中点作为每个手指的指跟点,然后计算它们到相应指尖点的长度作为四个手指的绝对长度,计算各个手指绝对长度之间的相对长度,构成特征向量;所述的相对长度为六个,分别是食指长度与中指长度;食指长度与无名指长度;食指长度与小指长度;中指长度与无名指长度;中指长度与小指长度;无名指长度与小指长度。
(4)掌纹ROI区域定位与特征向量提取;
获取掌纹ROI图像区域,生成0°、45°、90°、135°四个方向的2D-Gabor滤波器组,将尺寸和灰度归一化后的掌纹ROI图像F分别与4个方向的Gabor滤波器的实部Gr与虚部Gi分别作卷积运算,将卷积运算后的计算结果形成0-1编码作为掌纹特征向量;如图3-2所示,获取掌纹ROI图像区域时,利用食指与中指之间的指跟点和中指与无名指之间的指跟点两点的连线及其中点垂线为坐标轴建立新的坐标系,采用相对长度L截取方形掌纹有效区域,根据新坐标系及原坐标系之间的角度关系将图像旋转,经过缩放归一化大小为128*128的图像。
(5)设定阈值进行手形特征一次匹配,获得被选人员;
所述的进行手形特征一次匹配是用所提取的特征,计算欧式距离进行匹配,采用最近邻分类方法分类;获得满足某个阈值下的多个被选人员;也就是说用手形识别的方法对待识别人员的手掌图像进行一次匹配,得到手指相对长度的欧氏距离Mi(i=1,2,…n),根据手形的等误率曲线设定阈值Thand,当Mi<Thand时,将Mi所对应的已注册人员姓名存入备选人员姓名数组中。
(6)使用掌纹识别的方法对备选人员的掌纹图像进行一次匹配,给出最终判断;
根据2D-Gabor滤波器获得的掌纹特征向量,通过匹配算法对有手形匹配后所得到的被选人员进行最终的鉴别;也就是说使用掌纹识别的方法对备选人员的掌纹图像进行一次匹配,得到掌纹图像经过2D-Gabor方向滤波的汉明距离Hi(i=1,2,…l),求出最小距离Hmin,根据手形的等误率曲线设定阈值Tpalm,当Hmin<Tpalm时,则匹配成功,否则待识别人员即为非注册人员。
图1是非接触式快速人手多模态信息融合识别方法的流程图,包括人手图像采集、手形特征点定位、手形和掌纹特征向量提取、手形特征一次粗匹配获得被选人员、掌纹特征细匹配获得最终识别结果等步骤。
其中图像采集过程使用单一背景,只需要人手自然张开,放在摄像头前一个可变的范围内。
图2是手形特征点定位过程图。具体实现步骤如下:
(1)在处理后的二值图像上,根据轮廓跟踪算法从手掌图像最右端从上至下搜索第一个轮廓点作为起始点,按逆时针方向跟踪轮廓的8邻域链码信息,记录轮廓边界点坐标。然后,以轮廓点为中心生成半径为9像素的模板圆,计算模板圆内目标像素个数N(即手掌部分在模板圆内的面积)来粗定位指尖点、指根点的链码区域。当N<120时,粗定位出指尖点的链码区域,当N>150时,粗定位出指根点的链码区域。如图2-1、2-2所示。
(2)在粗定位过程中,在手指上和手腕附近存在一些噪声点,对于这些噪声点,利用噪声点在链码上前后相邻R处的两个轮廓点与该点形成的夹角ζ(s)来加以排除。
曲率是用于平衡曲线弯曲程度的参数,如图2-3中所示,ζ(s)代表F点两侧向量FF1和FF2之间的夹角,夹角越大表示该点的曲率越小,曲线弯曲程度越小;夹角越小,表示该点的曲率越大,曲线弯曲程度越大。计算公式如下:
                                                                                       (1)
    通过曲率的方法,排除了噪声点的干扰,得到了较为准确的指尖点和指根点的链码区域,如图2-4、2-5所示。
    (3)根据指根点区域链码上的跳变点将指根点区域分区,选择每个链码区域的中间点为指根点,记录3个指根点在轮廓链码中的位置以及在图像中的坐标。同理,记录4个指尖点在轮廓链码中的位置以及在图像中的坐标。如图2-6所示。
(4) 如图2-6所示,在已确定的指根点C1、C2、C3处沿手形轮廓向前扫描若干像素点,分别为Ci1(i = 1,2,3);向后扫描若干像素点,分别为Ci2 (i = 1,2,3),以指根点C2为例,连接点C2和C21,C2和C22,得到直线C2C21,C2C22,如图2-7所示。在点C2和C21之间的手形轮廓上,寻找距线段C2C21最远的点V2D;在点C2和C22之间的手形轮廓上,寻找距线段C2C22最远的点V3U。指根点C1,C3处做相同的操作,从而得到指根点ViU (i = 2,3,4),ViD (i = 1.2.3),如图2-8所示。
(5)定位食指和小指的外边界指根点。以食指为例,连接点T1和C1,得到直线T1C1,以T1为圆心,| T1C1|为半径沿逆时针方向画圆,与手形轮廓的第一个交点即为食指的外边界点。小拇指做类似处理得到外边界点。从而寻找到了四指的全部指根点ViU、ViD(i = 1.2.3,4),结果如图2-9。
图3是手形和掌纹特征提取示意图。
手形特征定位中已经寻找到了四指的指尖点和8个指根点。连接每个手指的两侧指根点,即食指的指根连线,中指的指根连线,无名指的指根连线,小指的指根连线。计算其每条线段的中点坐标并和相应的指尖点连线,将这四个长度作为四个手指的绝对长度。然后计算各个手指绝对长度之间的相对长度,构成特征向量(包括6个相对长度)。分别是食指长度/中指长度;食指长度/无名指长度;食指长度/小指长度;中指长度/无名指长度;中指长度/小指长度;无名指长度/小指长度。构成的特征向量为di( i=1,2,…6)。四个手指长度如图3-1所示。
掌纹的特征定位实际上就是截取掌纹的感兴趣区域(ROI),利用已确定的指根点C1、C3,这里指根点C1用A表示,指根点C2用B表示,由于采用非接触式的采集方法,因此手掌成像大小是变化的,需采用相对长度L(A、B两点间距离)截取方形掌纹有效区域。以A、B两点连线及其中点垂线为坐标轴建立新的坐标系,根据新坐标系及原坐标系之间的角度关系将图像旋转,在旋转后的图像中,距离AB连线l( l=L/5) 处,以L为边长截取方形区域,经过缩放归一化大小为128*128的图像,如图3-2所示。
使用不同方向的2D-Gabor滤波器对掌纹图像进行滤波提取掌纹纹线的方向信息。包括如下步骤:
(1)通过实验,选择适当u、σ等参数值,生成0°、45°、90°、135°四个方向的2D-Gabor滤波器组。
(2)将尺寸和灰度归一化后的M×M大小的掌纹ROI图像F分别与4个方向的Gabor滤波器的实部Gr与虚部Gi分别作卷积运算。
                         
Figure 396400DEST_PATH_IMAGE002
                       (2)
                                                (3)
(3)将卷积运算后的计算结果形成0-1编码,编码规则如下:
                  
Figure 823544DEST_PATH_IMAGE004
                (4)
                  
Figure 762550DEST_PATH_IMAGE005
                (5)
                                  (6)
                                  (7)
最终获得掌纹特征编码。
实施例:
本发明采用130万像素MVC-Ⅱ-3M摄像头、8mm的C接口工业镜头、单一颜色背景板构成简易非接触式采集装置,摄像头与背景板周围无遮挡(均匀光照条件下手掌上无明显的反射光斑)。拍摄图像时,令手自然张开,与镜头的表面平行即可。采集图像时掌心向上平放在背景板前,摄像头置于手掌的垂直上方。根据实验需要,建立了如下两个实验图库。
(1)调节摄像头的焦距,使镜头上呈现较清晰的手掌图像,记录镜头与背景板之间的距离,这个位置称为聚焦面位置。采集30人的右手手掌图像,每人10幅,图像分辨率为640*480。在香港科技大学提供的手形数据库中抽取70人 ,每人右手10幅图像,这样建立了一个100人的混合图库,将其称为图库1.。如参考文件所示。
 (2)镜头的位置不变,向下移动背景板的位置,每次移动10cm,共移动4次,在每个位置上采集50人的右手手掌图像,每人10幅,图像分辨率为640*480。这样建立一个50人的小型图像库,将其称为图库2,如参考文件所示。
A  固定距离手掌图像实验
1) 手形识别和掌纹识别
固定距离的手掌图像实验是在图库1上进行,混合图库中共100人,每人10幅右手图像,共1000幅图像,在每个人拍摄的十幅手掌图像中,以任意三幅手掌图像作为训练样本,其余七幅图像作为测试样本。
应用文中手形相对距离算法提取特征,采用欧式距离匹配,采用最近邻分类方法分类。公式如式(8)所示。某用户注册的特征向量是{di,i=1,2…,6},被测试者的手形特征向量是{di’,i=1,2…,6},其中i表示特征向量的个数,若被测试者的手形特征向量与用户注册的手形特征向量的欧式距离Distance小于阈值T,判断为同一人的手,否则判断为不同人的手。合法匹配与非法匹配距离分布曲线如图4-1所示,等错误率曲线如图4-2所示,两图的横坐标均为归一化后的欧式距离。
                     
Figure 490094DEST_PATH_IMAGE008
                   (8)
    由实验结果分析可知,利用手指的相对长度进行身份识别,平均匹配时间为0.01443s,在等错误率的情况下识别率仅为82.98%。
对于掌纹ROI图像采用2D-Gabor方向滤波的特征提取方法,采用汉明距离DH匹配实验,采用最近邻分类方法分类。P和Q分别表示两个人的掌纹图像经2D-Gabor变换后的M×M大小的编码矩阵,其汉明距离计算公式如式(9)所示,
Figure 283606DEST_PATH_IMAGE009
表示异或运算。合法匹配与非法匹配距离分布曲线如图5-1所示,等错误率曲线如图5-2所示。两图的横坐标均为归一化后的欧式距离。
                            (9)
    由实验结果分析可知,利用掌纹的2D-Gabor方法进行身份识别,在等错误率的情况下识别率可以达到98.04%,但平均匹配时间却为1.87028s。
2) 手形和掌纹相结合的组合识别
由单独的手形识别和掌纹识别的实验可知,对于手形识别来说,特征矢量即手指的相对长度构成简单,具有可测量性,特征匹配速度快,但手形识别只是以单一的几何矢量构成特征,丢失了手掌丰富的有效信息,特别是当本文中采用非接触式的采集方法时,手指相对长度的可区分度有限。
     对于采用2D-Gabor方向滤波的掌纹识别来说,充分利用了手掌的纹理信息和相位信息,对于掌纹图像具有很好的区分度,可以得到较高的正确识别率,但与之相对应的是,时间消耗很大,识别速度受到明显影响。
    手形和掌纹相结合的组合识别方法可以将手形识别匹配速度快的优势和掌纹识别正确识别率高的优势相结合,在非接触式采集方法的前提下,增强识别系统的实用性。具体的方法如下,
首先使用手形识别的方法对待识别人员的手掌图像进行一次匹配,得到手指相对长度的欧氏距离Mi(i=1,2,…n),根据手形的等误率曲线设定阈值Thand,当Mi<Thand时,将Mi所对应的已注册人员姓名存入备选人员姓名数组中。
然后,再使用掌纹识别的方法对备选人员的掌纹图像进行一次匹配,得到掌纹图像经过2D-Gabor方向滤波的汉明距离Hi(i=1,2,…l),求出最小距离Hmin,根据手形的等误率曲线设定阈值Tpalm,当Hmin<Tpalm时,则匹配成功,否则待识别人员即为非注册人员。匹配结果如表1所示。
表1 固定距离下三种识别方法的比较
Figure 93616DEST_PATH_IMAGE012
    
经过对表1的实验数据分析可知,二者相结合的组合识别方法的时间消耗低于掌纹识别方法,而正确识别率是三种识别方法中最高的。
B  不同距离手掌图像实验
    不同距离手掌图像实验是在图库2上进行的,分别计算四个不同位置上三种识别方法的识别率,进而比较在非接触式采集的条件下,三种识别方法的鲁棒性。实验结果如表2所示。
表2 不同距离下三种识别方法的比较
Figure 2010105334462100002DEST_PATH_IMAGE013
    
通过分析表2的实验数据,由于手形识别采用的是六个手指相对长度作为特征矢量,所以当图像发生平移时,该方法的识别率相差均在2%以下,说明手指相对长度的方法具有一定的鲁棒性,但该方法的识别率均已经降至85%以下;而对于掌纹识别来说,在近距离时,掌纹图像较清晰,识别率可以达到97%,随着距离的拉远,掌纹图像开始模糊,识别率下降明显,说明基于二维Gabor的掌纹识别方法鲁棒性较差;采用手形和掌纹相结合的组合识别方法时,识别率相差均在1%以下,说明对于不同距离的手掌图像该方法具有较好的鲁棒性,并且识别率均在95%以上。 

Claims (7)

1.一种非接触式快速人手多模态信息融合识别方法,其特征在于:所述方法的具体步骤如下:
(1)人手图像采集;
将人手自然张开,放在摄像头前一个可变的范围内;
(2)手形关键特征点定位;
对除大拇指以外的其余四个手指提取指尖及指根点;
(3)手形特征向量提取;
取每个手指指跟两侧点连线的中点作为每个手指的指跟点,然后计算它们到相应指尖点的长度作为四个手指的绝对长度,计算各个手指绝对长度之间的相对长度,构成特征向量;
(4)掌纹ROI区域定位与特征向量提取;
获取掌纹ROI图像区域,生成0°、45°、90°、135°四个方向的2D-Gabor滤波器组,将尺寸和灰度归一化后的掌纹ROI图像(F)分别与4个方向的Gabor滤波器的实部Gr与虚部Gi分别作卷积运算,将卷积运算后的计算结果形成0-1编码作为掌纹特征向量; 
(5)设定阈值进行手形特征一次匹配,获得被选人员;
所述的进行手形特征一次匹配是用所提取的特征,计算欧式距离进行匹配,采用最近邻分类方法分类;获得满足某个阈值下的多个被选人员;
(6)使用掌纹识别的方法对备选人员的掌纹图像进行一次匹配,给出最终判断;
根据2D-Gabor滤波器获得的掌纹特征向量,通过匹配算法对有手形匹配后所得到的被选人员进行最终的鉴别。
2.根据权利要求1所述的非接触式快速人手多模态信息融合识别方法,其特征在于:“(3)”步骤中所述的相对长度为六个,分别是食指长度与中指长度;食指长度与无名指长度;食指长度与小指长度;中指长度与无名指长度;中指长度与小指长度;无名指长度与小指长度。
3.根据权利要求1所述的非接触式快速人手多模态信息融合识别方法,其特征在于:“(5)”步骤中的具体操作为:用手形识别的方法对待识别人员的手掌图像进行一次匹配,得到手指相对长度的欧氏距离Mi(i=1,2,…n),根据手形的等误率曲线设定阈值Thand,当Mi<Thand时,将Mi所对应的已注册人员姓名存入备选人员姓名数组中。
4.根据权利要求1所述的非接触式快速人手多模态信息融合识别方法,其特征在于:所述的人手图像采集是在人手自然张开、非接触、非固定位置的采集条件下进行的。
5.根据权利要求1所述的非接触式快速人手多模态信息融合识别方法,其特征在于:“(2)”步骤中的所述的指尖及指根点为食指、中指、无名指和小指的四个指尖点;食指、中指、无名指和小指之间的三个指跟点以及四个手指的指根两侧的八个点。
6.根据权利要求1所述的非接触式快速人手多模态信息融合识别方法,其特征在于:获取掌纹ROI图像区域的具体步骤为:利用食指与中指之间的指跟点和中指与无名指之间的指跟点两点的连线及其中点垂线为坐标轴建立新的坐标系,采用相对长度L截取方形掌纹有效区域,根据新坐标系及原坐标系之间的角度关系将图像旋转,经过缩放归一化大小为128*128的图像。
7.根据权利要求1所述的非接触式快速人手多模态信息融合识别方法,其特征在于:步骤“(6)”中使用掌纹识别的方法对备选人员的掌纹图像进行一次匹配,得到掌纹图像经过2D-Gabor方向滤波的汉明距离Hi(i=1,2,…l),求出最小距离Hmin,根据手形的等误率曲线设定阈值Tpalm,当Hmin<Tpalm时,则匹配成功,否则待识别人员即为非注册人员。
CN 201010533446 2010-11-05 2010-11-05 非接触式快速人手多模态信息融合识别方法 Expired - Fee Related CN102073843B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010533446 CN102073843B (zh) 2010-11-05 2010-11-05 非接触式快速人手多模态信息融合识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010533446 CN102073843B (zh) 2010-11-05 2010-11-05 非接触式快速人手多模态信息融合识别方法

Publications (2)

Publication Number Publication Date
CN102073843A CN102073843A (zh) 2011-05-25
CN102073843B true CN102073843B (zh) 2013-03-20

Family

ID=44032377

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010533446 Expired - Fee Related CN102073843B (zh) 2010-11-05 2010-11-05 非接触式快速人手多模态信息融合识别方法

Country Status (1)

Country Link
CN (1) CN102073843B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105095854A (zh) * 2015-06-19 2015-11-25 西安电子科技大学 低分辨率无接触的在线掌纹匹配方法
US9928399B2 (en) 2013-09-24 2018-03-27 Beijing Zhboon Information Technology Co., Ltd. Non-contact palmprint authentication method, device and mobile terminal

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102663393B (zh) * 2012-03-02 2014-10-22 哈尔滨工程大学 基于旋转校正的手指静脉图像感兴趣区域提取方法
CN102663355A (zh) * 2012-03-27 2012-09-12 天津理工大学 基于手背静脉与手形结合的识别系统与方法
CN103268483B (zh) * 2013-05-31 2017-08-04 沈阳工业大学 开放式环境非接触采集下的掌纹识别方法
CN103440480B (zh) * 2013-06-05 2016-08-10 哈尔滨工业大学 基于掌纹图像配准的非接触掌纹识别方法
CN103425979B (zh) * 2013-09-06 2016-10-05 天津工业大学 手形认证方法
CN104866804B (zh) * 2014-02-20 2019-10-11 阿里巴巴集团控股有限公司 一种掌纹信息识别的方法和设备
CN104123537B (zh) * 2014-07-04 2017-06-20 西安理工大学 一种基于手形和掌纹识别的快速身份验证方法
JP6617570B2 (ja) 2016-01-13 2019-12-11 富士通株式会社 生体認証装置、生体認証方法、および生体認証プログラム
WO2017173640A1 (zh) * 2016-04-08 2017-10-12 厦门中控智慧信息技术有限公司 一种基于多模式生物识别信息的个人识别方法和装置
CN105930802B (zh) * 2016-04-22 2021-10-22 嘉应学院 一种基于稀疏表示的手形识别装置及其方法
CN106096541B (zh) * 2016-06-08 2019-03-29 大连民族大学 手形识别中特征点固定定位顺序的方法
CN109376708B (zh) * 2016-06-08 2021-11-26 大连民族大学 提取roi的方法
CN106250823A (zh) * 2016-07-21 2016-12-21 同济大学 一种掌纹掌脉识别方法及掌纹掌脉图像采集仪
CN106851937A (zh) * 2017-01-25 2017-06-13 触景无限科技(北京)有限公司 一种手势控制台灯的方法及装置
CN107341473B (zh) * 2017-07-04 2018-07-06 深圳市利众信息科技有限公司 手掌特征识别方法、手掌特征识别设备、及存储介质
CN107195124A (zh) * 2017-07-20 2017-09-22 长江大学 基于掌纹和掌静脉的图书馆自助借书方法及系统
CN107578009B (zh) * 2017-09-02 2020-04-10 宜宾学院 多手指远端指间关节纹路的识别方法
CN107798351B (zh) * 2017-11-09 2020-03-31 大国创新智能科技(东莞)有限公司 一种基于深度学习神经网络的身份识别方法和系统
CN109829368B (zh) * 2018-12-24 2024-02-20 平安科技(深圳)有限公司 手掌特征的识别方法、装置、计算机设备及存储介质
CN110008825A (zh) * 2019-02-20 2019-07-12 平安科技(深圳)有限公司 掌纹识别方法、装置、计算机设备和存储介质
CN110232311B (zh) * 2019-04-26 2023-11-14 平安科技(深圳)有限公司 手部图像的分割方法、装置及计算机设备
CN110321690A (zh) * 2019-07-15 2019-10-11 山东浪潮通软信息科技有限公司 一种基于生物特征匹配的身份鉴别方法
CN111950492B (zh) * 2020-08-19 2023-09-29 山西慧虎健康科技有限公司 一种基于中医理论与手掌多特征提取的高血压风险预测方法
CN112507974B (zh) * 2020-12-29 2023-04-07 哈尔滨工业大学芜湖机器人产业技术研究院 一种基于纹理特征的掌纹识别方法
CN113780122B (zh) * 2021-08-30 2023-12-05 沈阳大学 基于手掌静脉特征加密的识别模板生成方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101055618A (zh) * 2007-06-21 2007-10-17 中国科学院合肥物质科学研究院 基于方向特征的掌纹识别方法
CN101281600A (zh) * 2008-06-03 2008-10-08 北京大学 一种掌纹特征获取方法及相应的基于掌纹的身份识别方法
CN101794374A (zh) * 2009-01-15 2010-08-04 香港理工大学 利用指关节纹识别个人身份的方法和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101055618A (zh) * 2007-06-21 2007-10-17 中国科学院合肥物质科学研究院 基于方向特征的掌纹识别方法
CN101281600A (zh) * 2008-06-03 2008-10-08 北京大学 一种掌纹特征获取方法及相应的基于掌纹的身份识别方法
CN101794374A (zh) * 2009-01-15 2010-08-04 香港理工大学 利用指关节纹识别个人身份的方法和系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李子良等.基于几何特征的掌纹区域分割算法.《计算机应用研究》.2010,第27卷(第6期),2370-2372,2376. *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9928399B2 (en) 2013-09-24 2018-03-27 Beijing Zhboon Information Technology Co., Ltd. Non-contact palmprint authentication method, device and mobile terminal
CN105095854A (zh) * 2015-06-19 2015-11-25 西安电子科技大学 低分辨率无接触的在线掌纹匹配方法
CN105095854B (zh) * 2015-06-19 2018-09-11 西安电子科技大学 低分辨率无接触的在线掌纹匹配方法

Also Published As

Publication number Publication date
CN102073843A (zh) 2011-05-25

Similar Documents

Publication Publication Date Title
CN102073843B (zh) 非接触式快速人手多模态信息融合识别方法
Fei et al. Feature extraction methods for palmprint recognition: A survey and evaluation
Cui et al. A fast and robust iris localization method based on texture segmentation
Sun et al. Improving iris recognition accuracy via cascaded classifiers
Wu et al. A secure palm vein recognition system
CN107392082B (zh) 一种基于深度学习的小面积指纹比对方法
Raghavendra et al. Scaling-robust fingerprint verification with smartphone camera in real-life scenarios
Muramatsu et al. Effectiveness of pen pressure, azimuth, and altitude features for online signature verification
KR20090087895A (ko) 생체인식정보의 추출과 대조를 위한 방법 및 장치
CN107169479A (zh) 基于指纹验证的智能移动设备敏感数据防护方法
CN105760841A (zh) 一种身份识别方法及系统
CN102254165A (zh) 一种基于结构编码特征和纹理编码特征融合的手背静脉识别方法
Srivastava Personal identification using iris recognition system, A Review
Chen et al. Query2set: Single-to-multiple partial fingerprint recognition based on attention mechanism
Tahmasebi et al. Robust intra-class distance-based approach for multimodal biometric game theory-based rank-level fusion of ear, palmprint and signature
Conti et al. An advanced technique for user identification using partial fingerprint
CN106295622A (zh) 一种基于手背静脉的识别方法
CN104268502B (zh) 人体静脉图像特征提取后的认识方法
CN111371951B (zh) 基于肌电信号和孪生神经网络的智能手机用户认证方法和系统
Sathish et al. Multi-algorithmic iris recognition
Izadi et al. Introduction of cylinder quality measure into minutia cylinder-code based fingerprint matching
Mane et al. Novel multiple impression based multimodal fingerprint recognition system
Ming et al. Gait recognition based on multiple views fusion of wavelet descriptor and human skeleton model
Jiaqiang et al. Analysis of palm vein image quality and recognition with different distance
Li et al. The evolution of biometrics

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130320

Termination date: 20151105

EXPY Termination of patent right or utility model