CN107239772A - 掌纹掌脉图像采集装置及通关闸机 - Google Patents

掌纹掌脉图像采集装置及通关闸机 Download PDF

Info

Publication number
CN107239772A
CN107239772A CN201710492250.5A CN201710492250A CN107239772A CN 107239772 A CN107239772 A CN 107239772A CN 201710492250 A CN201710492250 A CN 201710492250A CN 107239772 A CN107239772 A CN 107239772A
Authority
CN
China
Prior art keywords
palm
image
light source
collecting device
print
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710492250.5A
Other languages
English (en)
Other versions
CN107239772B (zh
Inventor
张大鹏
梁旭
骆南
卢光明
刘旸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Zhong Zhi Intelligent Technology Co., Ltd.
Original Assignee
Shenzhen Lizhong Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Lizhong Mdt Infotech Ltd filed Critical Shenzhen Lizhong Mdt Infotech Ltd
Priority to CN201710492250.5A priority Critical patent/CN107239772B/zh
Publication of CN107239772A publication Critical patent/CN107239772A/zh
Application granted granted Critical
Publication of CN107239772B publication Critical patent/CN107239772B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本发明提供一种掌纹掌脉图像采集装置及通关闸机,通过在接触面板上开设开口,将用于形成密闭成像环境的玻璃面板凹设于所述开口处,并与所述接触面板形成一凹陷区域,在触摸传感器检测到手掌接触时发送信号至主控单元,由主控单元控制光源发射可见光或近红外光,同时控制摄像机根据光源发射的可见光或近红外光采集手掌的掌纹图像和掌脉图像,避免了受外部环境的光照影响造成的精度不高,提高了精度和稳定性,免去了传统掌纹采集设备上的定位立柱,提高了灵活性,同时利用掌脉图像进行活体检测,提高了防伪性。

Description

掌纹掌脉图像采集装置及通关闸机
技术领域
本发明涉及生物特征识别技术领域,尤其涉及一种掌纹掌脉图像采集装置及通关闸机。
背景技术
传统的通关方法通过大量人力在现场比对证件上的照片和当前用户长相,不仅人力成本高、消耗时间长,而且主观判断难以保证整个工作的客观性。现有的基于闸机的通关系统通过IC卡进行身份验证,这种方式无法和用户本人对应起来,安全性不高,可扩展性不强。
现有的自助通关闸机系统主要有基于人脸识别和指纹识别两种。对于人脸识别,由于人脸识别容易受到表情、光照、姿态的影响,只能达到95%左右的精度,而且由于图像采集环境可控性不高,软件算法方面需要消耗大量的计算资源进行人脸检测和定位及矫正,检测时间长,而且,脸部特征并不具有独一无二的区分性。
对于指纹识别,由于特征不够丰富,只能在小规模的样本库中进行识别,采集过程中需将手指直接贴在玻璃材质的采集设备上,在大人流量的应用场景中非常容易造成病菌的传播。另外,指纹识别存在干手指和湿手指的问题,在手指过干或过湿及受伤的情况下,经常造成无法正确识别的情况,系统错误拒绝率较高,无法较好的应用在大人流量的场景中。
此外,现有的非接触掌纹掌脉识别设备采用红外距离感应器触发系统工作,系统实时采集图像,实时监测手掌位置,当满足预设条件时开始采集图像用于掌纹掌脉识别,但是由于去除了定位立柱和密闭成像环境也导致了用户自由度过大、环境光影响大、鲁棒性差等问题。
综上,现有基于生物识别的自助通关闸机系统主要存在以下缺点:
1)精度不高,环境光影响大;
2)稳定性不够,系统鲁棒性差;
3)防伪性能差。
发明内容
本发明的主要目的在于提供一种掌纹掌脉图像采集装置,旨在解决现有基于生物识别的自助通关闸机系统精度不够、环境光影响大,稳定性、鲁棒性、及防伪性差的技术问题。
为实现上述目的,本发明提出一种掌纹掌脉图像采集装置,包括接触面板、玻璃面板、主控单元、及连接所述主控单元的触摸传感器、光源和摄像机;
所述接触面板设有开口;
所述玻璃面板凹设于所述开口处,并与接触面板连接;
所述触摸传感器检测是否有手掌接触接触面板,当检测到有手掌接触时,发送信号至所述主控单元;
所述光源设置于所述玻璃面板的下方,依据主控单元的控制指令产生照射所述手掌的可见光或近红外光;
所述摄像机调焦成像于所述玻璃面板与接触面板形成的凹陷区域,根据所述光源照射到手掌上的反射光获取所述手掌的掌纹图像和掌脉图像。
进一步地,所述触摸传感器设置于所述接触面板放置手掌根部或手掌指部的一端。
进一步地,所述光源包括通过所述主控单元调节光强的可见光LED阵列和近红外光LED阵列;
所述近红外光LED阵列设置于所述玻璃面板的下方,产生照射所述手掌的近红外光;
所述可见光LED阵列设置于所述手掌的两侧下方,产生照射所述手掌的绿光。
进一步地,所述玻璃面板为厚度为2mm~3mm的透光玻璃,所述玻璃面板与接触面板相对于水平面的垂直高度相差3mm~5mm。
进一步地,所述掌纹掌脉图像采集装置还包括滤光片,所述滤光片设置于所述光源与摄像机之间,对近红外光和绿光之外的其他光谱进行削弱。
进一步地,所述掌纹掌脉图像采集装置还包括不透光机壳,所述接触面板的边缘与不透光机壳的侧壁连接,所述摄像机固定于所述不透光机壳的底壁。
进一步地,所述主控单元包括存储器、处理器及存储在所述存储器上并在所述处理器上运行的光源强度调节程序,所述光源强度调节程序被所述处理器执行时实现以下操作:
控制摄像机采集图像,将所述图像的中心矩形区域作为ROI,计算所述ROI的灰度均值Mean;
当90<Mean<110时,定位出掌纹ROI,计算所述掌纹ROI的Mean值和点锐度值EAV;
当|Mean-90|<|Mean-110|时,提高光源的强度直至Mean大于110,同时计算ROI对应的EAV值,并将所述EAV值和PWM占空比加入到队列Q中;当|Mean-90|>|Mean-110|时,降低光源的亮度直至Mean小于90,同时计算ROI对应的EAV值,并将所述EAV值和PWM占空比加入到队列Q中;
依据队列Q中最大的EAV值及其对应的PWM占空比调节光源的强度。
进一步地,所述光源强度调节程序被所述处理器执行时还实现以下步骤:
当Mean<90时,线性增加所述主控单元的PWM占空比,提高光源强度,当Mean>110时,线性减小所述PWM占空比,降低光源强度;
当EAV<13时,控制摄像机重新调焦。
进一步地,所述定位出掌纹ROI的过程,具体包括:
利用可见光和无光条件下得到的掌纹图像获取第三掌纹图像,对所述第三掌纹图像进行二值化得到第四掌纹图像;
在所述第四掌纹图像上建立x-0-y坐标系,令x=x0、y从像素点区间[0,h]取值,得到黑白交替的点序列(p1,p2,p3,p4,p5,p6);
分别以p1、p5为起始端点,以p2、p6为结束端点进行边缘跟踪计算,将两边缘上的点坐标分别存储于队列Q1和Q2中;
将Q1和Q2中最接近手掌的点连成线段,以所述线段为参照作预设边长的矩形,依据所述矩形的四个顶点并通过线性插值得到归一化的掌纹ROI。
进一步地,所述利用可见光和无光条件下得到的掌纹图像获取第三掌纹图像,对所述第三掌纹图像进行二值化得到第四掌纹图像,具体包括:
将利用可见光获取的第一掌纹图像的像素灰度值减去无光条件下得到的掌纹图像的对应像素灰度值,得到第三掌纹图像,对所述第三掌纹图像进行二值化得到第四掌纹图像。
进一步地,所述掌纹掌脉图像采集装置还包括手掌状态检测单元,当所述触摸传感器检测到手掌接触时,比较前后两帧图像的变化程度,并在所述变化程度小于预设阈值时,判断当前手掌放置稳定。
本发明的另一目的在于提出一种通关闸机,该通关闸机包括:
如上所述的掌纹掌脉图像采集装置,采集通关者的掌纹图像和掌脉图像;
IC识别模块,读取通关者的身份ID,并在所述身份ID合法时与预先录入的掌纹掌脉特征进行关联;
运算控制模块,将掌纹掌脉图像采集装置输入的掌纹图像和掌脉图像进行特征提取处理后与所述身份ID关联的掌纹掌脉特征进行比对,并输出比对结果;
闸机模块,根据所述比对结果执行放行或报警操作。
进一步地,所述运算控制模块包括:
图像处理单元,对掌纹图像和掌脉图像的灰度、清晰度进行归一化处理;
特征提取单元,利用卷积操作提取所述掌纹图像和掌脉图像的特征向量,融合为掌纹特征和掌脉特征并存储;及
特征比对单元,将当前提取的掌纹特征与预先录入的掌纹特征进行识别比对,并在比对成功后将当前提取的掌脉特征与预先录入的掌脉特征进行识别比对。
进一步地,该通关闸机的通关时间小于2秒。
本发明的掌纹掌脉图像采集装置通过在接触面板上设置开口,将用于形成密闭成像环境的玻璃面板凹设于所述开口处,并与所述接触面板形成一凹陷区域,在触摸传感器检测到手掌接触时发送信号至主控单元,由主控单元控制光源发射可见光或近红外光,同时控制摄像机根据光源发射的可见光或近红外光采集手掌的掌纹图像和掌脉图像,避免了受外部环境的光照影响造成的精度不高,提高了精度和稳定性,同时利用掌脉图像进行活体检测,提高了防伪性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图示出的结构获得其他的附图。
图1为本发明的掌纹掌脉图像采集装置一实施例的结构示意图;
图2为现有图像采集设备内镜面反射导致的内部虚像示意图;
图3为图1另一角度示意图;
图4为ROI坐标定位算法的示意图;
图5为本发明的通关闸机一实施例的功能模块图。
附图标号说明:
标号 名称 标号 名称
100 掌纹掌脉图像采集装置 70 滤光片
10 接触面板 80 不透光机壳
11 开口 90 电源
20 玻璃面板 200 IC识别模块
30 主控单元 300 运算控制模块
40 触摸传感器 310 图像处理单元
50 光源 320 特征提取单元
51 近红外光LED阵列 330 特征比对单元
53 可见光LED阵列 400 闸机模块
60 摄像机
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提出一种掌纹掌脉图像采集装置。
参照图1,图1为本发明的掌纹掌脉图像采集装置一实施例的结构示意图。
在本实施例中,该掌纹掌脉图像采集装置100包括接触面板10、玻璃面板20、主控单元30、及连接所述主控单元30的触摸传感器40、光源50和摄像机60;
所述接触面板10设有开口11;
所述玻璃面板20凹设于所述开口11,并与接触面板10连接;
所述触摸传感器40检测是否有手掌接触接触面板10,当检测到有手掌接触时,发送信号至所述主控单元30;
所述光源50设置于所述玻璃面板20的下方,依据主控单元30的控制指令产生照射所述手掌的可见光或近红外光;
所述摄像机60调焦成像于所述玻璃面板20与接触面板10形成的凹陷区域(未图示),根据所述光源50照射到手掌上的反射光获取所述手掌的掌纹图像和掌脉图像。
本实施例的掌纹掌脉图像采集装置100针对取消传统设备上的定位立柱后需增大面板镂空面积进而无法应对环境光的影响,造成手掌定位算法失效,降低闸机系统的安全性和精准度的问题,在用于支撑手掌的接触面板10的中心位置开设有开口11,一般情况下,为了提供一定程度的放置自由度,需要加大相机或摄像机的视场和开口11的尺寸,同时也要对可放置区域进行必要的限制,从而保证掌纹掌脉定位算法的速度和有效性,所以开口11的形状和尺寸根据先前采集的手掌库中的大量手掌的尺寸分布而确定。
传统的接触式掌纹掌脉采集设备,由于封闭的成像环境,能够很好的采集到稳定、高质量的图像,但是其中空的设计导致设备内部构造完全暴露在外部,使用不便,也降低了设备的使用寿命,对比本实施例的接触面板10与手掌接触的部分为平面,中间有开口11,为了保证掌纹掌脉图像采集装置100的安全性和稳定性,所述玻璃面板20凹设于所述开口11处,与接触面板10连接并形成一凹陷区域,所述玻璃面板20采用厚度为2mm~3mm的全波段高透光玻璃,同时鉴于掌脉图像的成像主要通过手掌血管中血液和手掌其他组织对近红外光吸收特性的细微差别来实现,而手掌表面和玻璃表面接触后会对血管的成像造成很大的影响,从而破坏掌脉信息的完整性和稳定性,因此,本实施例中玻璃面板20与接触面板10相对于水平面的垂直高度相差3mm~5mm,保证了手掌表面和玻璃面板20的上表面不接触,从而保证掌脉信息的稳定性,也避免了由于手掌接触玻璃面板20导致的频繁擦拭及手掌表面褶皱的问题。
为了缩短放置手掌到采集手掌的掌纹掌脉图像的时间,提高掌纹掌脉图像采集装置100的反应速度和精准度,在接触面板10放置手掌根部或手掌指部的一端设置一触摸传感器40,在检测到有手掌接触时,发送信号至主控单元30,由主控单元30控制光源50、摄像机60执行预定程序的操作,如摄像机60一直处于待机状态,在触摸传感器40向主控单元30发送有手掌接触的信号后,调焦成像于所述玻璃面板20与接触面板10形成的凹陷区域,并在无光源条件下采集第一手掌图像,然后由控制单元30控制光源50分时产生照射手掌的可见光和近红外光,同时摄像机60根据可见光照射到手掌上的反射光获取所述手掌的掌纹图像,以及根据近红外光照射到手掌上的反射光获取所述手掌的掌脉图像。
本实施例的掌纹掌脉图像采集装置100通过在接触面板10上设置开口11,将用于形成密闭成像环境的玻璃面板20凹设于所述开口处,并与所述接触面板10形成一凹陷区域,在触摸传感器40检测到手掌接触时发送信号至主控单元30,由主控单元30控制光源50发射可见光或近红外光,同时控制摄像机60根据光源50发射的可见光或近红外光采集手掌的掌纹图像和掌脉图像,避免了受外部环境的光照影响造成的精度不高,提高了精度和稳定性,同时利用掌脉图像进行活体检测,提高了防伪性。
进一步地,参照图1和2,所述光源50包括通过所述主控单元30调节光强的可见光LED阵列53和近红外光LED阵列51;
所述近红外光LED阵列51设置于所述玻璃面板20的下方,产生照射所述手掌的近红外光;
所述可见光LED阵列53设置于所述手掌的两侧下方,产生照射所述手掌的绿光。
在本实施例中,掌纹的成像和定位需要光源50的充足打光,在打光的一瞬间,LED光源阵列和整个装置内部组件在打光状态下会经玻璃面板20的表面镜面反射成比较明显的虚像叠加在正常的图像上,从而导致手掌定位失败。而且由于LED光源阵列本身的虚像强度较高,只能通过特殊的光路排列才能够在保证功能的前提下消除其影响,考虑到在进行手掌定位时需要根据可见光手掌图像检测手指部分的边缘,然后才能进行后续的定位操作,在可见光图像定位成功后,掌纹ROI(感兴趣区域)的坐标可以直接应用于近红外手掌图像提取掌脉ROI,因此,可见光LED阵列53,也即绿光LED阵列的分布应该充分照射到手掌及手指部分,而近红外LED阵列51仅仅需要照射到手掌部分即可。
如图2所示,以玻璃面板20为对称轴,凡是落入区域A中的组件虚像都会融合到最终的图像中,而区域B的虚像在相机的视场之外,从而无法进入到最终的图像中,对于掌纹成像而言,位于接触面板10的相对两侧的正下方的可见光LED阵列53,一方面由于倾斜入射能够防止手掌局部反光过强造成曝光,另一方面能够更好的突出掌纹的细纹理特征,因此将绿光LED阵列设置于手掌的两侧下方,使其虚像落入区域B。对于近红外光LED阵列51,目的是获得表层皮肤下血管的形状结构,故采用手掌前方直射比较好,且红外图像不需要手指边缘进行定位,所以只要虚像位置不影响手掌中心区域即可,因此将所述近红外光LED阵列51设置于所述玻璃面板20的正下方,使其虚像落入摄像机60的视场之外。
进一步地,参照图1至3,所述掌纹掌脉图像采集装置100还包括滤光片70,所述滤光片70设置于所述光源50与摄像机60之间,对近红外光和绿光之外的其他光谱进行削弱。
根据用户使用习惯,掌纹掌脉图像采集装置100在采集图像时,摄像机60的镜头朝向为由下至上,迎合通关者掌心向下放置手掌的自然方式,然而摄像机朝上拍摄容易受到开放环境中的强光源的干扰,如图3所示,外界环境光可以通过手指缝进入采集装置,从而对后续摄像机60的成像和识别算法产生严重的影响,为了削弱外界环境光的干扰,本实施例采用绿光和近红外光作为主动光源,并在光源50和摄像机60之间的光路上设置通绿光和近红外光的滤光片70,对近红外光和绿光之外的其他光谱进行削弱,可见光LED阵列53产生的绿光经手掌表面反射透过滤光片70在摄像机60的CCD阵列上形成掌纹图像,近红外光LED阵列51产生的近红外光经手掌表面反射透过滤光片70在摄像机60的CCD阵列上形成掌脉图像。
进一步地,参照图1和2,所述掌纹掌脉图像采集装置100还包括不透光机壳80,所述不透光机壳80的内壁经过磨砂和遮罩处理成黑色,削弱内部组件在光源50照射下的虚像强度,所述接触面板10的边缘与不透光机壳80的侧壁连接,或者与所述不透光机壳80为一体结构,所述摄像机60固定于所述不透光机壳80的底壁。
进一步地,参照图1和2,所述主控单元30包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的光源强度调节程序,所述光源强度调节程序被所述处理器执行时实现以下操作:
控制摄像机60采集图像,将所述图像的中心矩形区域作为ROI,计算所述ROI的灰度均值Mean;
当Mean<90时,线性增加所述主控单元的PWM占空比,提高光源强度,当Mean>110时,线性减小所述PWM占空比,降低光源强度,当90<Mean<110时,定位出掌纹ROI,计算所述掌纹ROI的Mean值和点锐度值EAV;
当|Mean-90|<|Mean-110|时,提高光源的强度直至Mean大于110,同时计算ROI对应的EAV值,并将所述EAV值和PWM占空比加入到队列Q中;当|Mean-90|>|Mean-110|时,降低光源的亮度直至Mean小于90,同时计算ROI对应的EAV值,并将所述EAV值和PWM占空比加入到队列Q中;
依据队列Q中最大的EAV值及其对应的PWM占空比调节光源的强度。
在本实施例中,使用滤光片70对外部环境光进行削弱,一方面可以降低环境强光源的干扰,另一方面也使得从手掌反射进来的光收到衰减,因而需要提高光源50的强度从而弥补掌纹掌脉图像的亮度损失。主控单元30具有PWM(脉冲宽度调制)脉码调制波形输出功能,通过电子开关控制可见光LED阵列53和近红外光LED阵列51的电源90的通断,因而通过调节PWM不同的占空比可以获得不同的光源强度,图像灰度值以0~255的范围进行存储,在掌纹掌脉图像采集装置100需要进行光源亮度参数确定时,将手掌放置于接触面板10正常采集的位置,通过光源强度调节程序对光源50的强度进行调节。
在进行光源强度调节时,首先由主控单元30控制摄像机60采集图像,此时的图像可以是在可见光条件下采集的掌纹图像,也可以是在近红外光条件下采集的掌脉图像,掌纹图像对应可见光的光强调节,以及摄像头焦距的调节,掌脉图像对应红外光强调节,将所述掌纹图像或掌脉图像的中心矩形区域作为ROI,计算所述掌纹ROI或掌脉ROI的灰度均值Mean。当Mean<90时,线性增加所述主控单元的PWM占空比,提高光源强度;当Mean>110时,线性减小所述PWM占空比,降低光源强度;当90<Mean<110时,根据掌纹或掌脉定位算法定位出掌纹ROI图像或掌脉ROI图像,计算掌纹ROI的Mean值和EAV值,如果EAV<13,则摄像机60对焦出现问题,控制摄像机60重新调焦,校准镜头焦距,使工作距离符合接触面板10到摄像机60的镜头的距离,然后重新判断Mean值更靠近90还是更靠近110。当|Mean-90|<|Mean-110|时,提高光源的强度直至Mean首次大于110,在提高光源强度的同时计算ROI对应的EAV值,并将所述EAV值和PWM占空比加入到队列Q中;当|Mean-90|>|Mean-110|时,降低光源的亮度直至Mean首次小于90,在降低光源强度的同时计算ROI对应的EAV值,并将所述EAV值和PWM占空比加入到队列Q中。最后从所述队列Q中找出最大的EAV值及其对应的PWM占空比,将所述最大的EAV值及其对应的PWM占空比写入到配置文件,进行光源强度的调节。
进一步地,所述定位出掌纹ROI的过程,具体包括:
利用可见光和无光条件下得到的掌纹图像获取第三掌纹图像,对所述第三掌纹图像进行二值化得到第四掌纹图像;
在所述第四掌纹图像上建立x-0-y坐标系,令x=x0、y从像素点区间[0,h]取值,得到黑白交替的点序列(p1,p2,p3,p4,p5,p6);
分别以p1、p5为起始端点,以p2、p6为结束端点进行边缘跟踪计算,将两边缘上的点坐标分别存储于队列Q1和Q2中;
将Q1和Q2中最接近手掌的点连成线段,以所述线段为参照作预设边长的矩形,依据所述矩形的四个顶点并通过线性插值得到归一化的掌纹ROI。
如图4所示,在进行掌纹ROI定位时,将利用可见光获取的第一掌纹图像的像素灰度值减去无光条件下得到的掌纹图像的对应像素灰度值,得到第三掌纹图像,对所述第三掌纹图像进行二值化得到第四掌纹图像;然后针对第四掌纹图像建立x-0-y坐标系,令x=x0、y从像素点区间[0,h]取值,若能够先后、依次、完整地找到黑白交替的点序列(p1,p2,p3,p4,p5,p6),则以p1、p5为起始端点,以p2、p6为结束端点进行边缘跟踪计算,否则,令x=x0+step,再次进行查找,直至完整地找到黑白交替的点序列(p1,p2,p3,p4,p5,p6);通过以p1、p5为起始端点,以p2、p6为结束端点进行边缘跟踪计算,将两边缘上的点坐标分别存储于队列Q1和Q2中;最后将Q1中的点与Q2中的点一一进行连线,以所述线段中最长的切线Lt的中点m为起点做垂直于Lt的线段L,线段L以n为另一端点,所述Q1和Q2中的所有点均在Lt的左边,以128为边长做矩形得到r1、r2、r3、r4四个顶点,通过线性插值算法得到归一化的掌纹图像中心块ROI,r1r2垂直于L且以n为中点,输入掌脉图像,以r1、r2、r3、r4为坐标通过线性插值得到掌脉图像中心块ROI,即掌脉ROI同掌纹ROI具有相同的坐标。
进一步地,所述掌纹掌脉图像采集装置100还包括手掌状态检测单元(未图示),当所述触摸传感器检测到手掌接触时,比较前后两帧图像的变化程度,并在所述变化程度小于预设阈值时,判断当前手掌放置稳定。
在本实施例中,掌纹掌脉图像采集装置100在待机状态下光源50为关闭状态,摄像机60实时采集图像,图像中手掌区域部分较暗,背景部分正常;当触摸传感器40检测到手掌放置信号时,触发手掌状态检测功能,由手掌状态检测单元使用帧差法比较前后两帧图像的变化程度,当前后两帧图像的变化程度小于预设阈值T时,判断当前手掌已经放置稳定,由摄像机60采集当前手掌图像作为无光条件下的掌纹掌脉图像,然后先后开启可见光LED阵列53采集绿光条件下的掌纹图像,以及关闭可见光LED阵列53,开启近红外光LED阵列51,采集近红外光条件下的掌脉图像。
本发明进一步提出一种通关闸机。
参照图5,图5为本发明的通关闸机的结构示意图。
在本实施例中,该通关闸机包括:
如上所述的掌纹掌脉图像采集装置100,采集通关者的掌纹图像和掌脉图像;
IC识别模块200,读取通关者的身份ID,并在所述身份ID合法时与预先录入的掌纹掌脉特征进行关联;
运算控制模块300,将掌纹掌脉图像采集装置100输入的掌纹图像和掌脉图像进行特征提取处理后与所述身份ID关联的掌纹掌脉特征进行比对,并输出比对结果;
闸机模块400,根据所述比对结果执行放行或报警操作。
本实施例的通关闸机包括如上所述的掌纹掌脉图像采集装置100,通过在接触面板10设置开口11,将用于形成密闭成像环境的玻璃面板20凹设于所述开口11处,并与所述接触面板10形成一凹陷区域,在触摸传感器40检测到手掌接触时发送信号至主控单元30,由主控单元30控制光源50发射可见光或近红外光,同时控制摄像机60根据光源50发射的可见光或近红外光采集手掌的掌纹图像和掌脉图像,避免了受外部环境的光照影响造成的精度不高,提高了精度和稳定性,同时利用掌脉图像进行活体检测,提高了防伪性。在使用该通关闸机时,通关者在进入通关闸机之前首先通过自身携带的IC卡贴近通关闸机的IC卡识别模块200,通过IC卡识别模块200读取通关者的身份ID,进行身份识别,在通过调取数据库信息认证该身份ID为合法用户时,让通关者通过闸机,并记录该通关者的身份ID,与预先录入的掌纹掌脉特征进行关联,以便通关者再次通过时进行掌纹掌脉特征的识别比对;在掌纹掌脉图像采集装置100采集通关者的掌纹图像和掌脉图像后通过USB接口将其输入至运算控制模块300,运算控制模块300可以是PC工控机或嵌入式系统,主要负责对掌纹掌脉图像采集装置100输入的掌纹图像和掌脉图像进行特征提取以及将提取和融合后的特征与所述身份ID关联的掌纹掌脉特征进行比对,输出比对结果,最后由闸机模块400根据运算控制模块300输出的比对结果执行放行或报警操作,避免了通关闸机受外部环境的光照影响造成的精度不高,提高了通关闸机的精度和稳定性,同时利用掌脉图像进行活体检测,提高了防伪性。
进一步地,参照图5,所述运算控制模块300包括:
图像处理单元310,对掌纹图像和掌脉图像的灰度、清晰度进行归一化处理;
特征提取单元320,利用卷积操作提取所述掌纹图像和掌脉图像的特征向量,融合为掌纹特征和掌脉特征并存储;及
特征比对单元330,将当前提取的掌纹特征与预先录入的掌纹特征进行识别比对,并在比对成功后将当前提取的掌脉特征与预先录入的掌脉特征进行识别比对。
在本实施例中,由于设备间光源参数的漂移以及环境光源和天气等因素的影响,不同掌纹掌脉图像采集装置间采集得到的掌纹图像和掌脉图像在亮度上存在差异,需要通过图像处理单元310对其进行归一化的标准化处理,所以在掌纹特征和掌脉特征提取之前需要利用图像处理单元310先对掌纹图像和掌脉图像进行灰度和清晰度的归一化操作。在进行掌纹掌脉比对和识别时,比对的只是掌纹特征和掌脉特征而不是完整的掌纹图像和掌脉图像,因此需要对128×128个像素的标准掌纹图像和掌脉图像中的掌纹方向分布和掌脉结构提取出来,特征提取单元320主要用于对标准的掌纹图像和掌脉图像进行滤波处理,提取掌纹和掌脉中稳定部分的特征向量,同时弱化波动较大的细小纹线的影响,在掌纹注册阶段,还需要将提取的掌纹特征和掌脉特征制成模板存储起来,以便后续识别比对时援引;在进行掌纹特征和掌脉特征的识别比对时,由特征比对单元330利用算法从获取的掌纹掌脉图像中定位出感兴趣的中心子块,从所述中心子块中分别提取掌纹特征和掌脉特征后,采用不同的相似度评价方法计算各自的相似度,根据训练样本得到掌纹特征和掌脉特征的最优加权组合后,将两个相似度进行相似度级的融合,最后将融合后的相似度同预设阈值进行比较,大于预设阈值则身份识别成功,否则失败。
本发明在使用i7处理器进行运算控制时,通关者放置手掌到开始掌纹掌脉图像采集耗时500ms,切换光源,采集三种条件下的手掌图像耗时1000ms,掌纹掌脉ROI定位、特征提取和特征匹配耗时300ms,整个认证过程在2秒内即可完成,但不包括通关者在闸机内行走的时间,而且在不同阶段和状态下配有相应的图像和声音提示,能够满足大人力量通关时的时间要求。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (14)

1.一种掌纹掌脉图像采集装置,其特征在于,包括接触面板、玻璃面板、主控单元、及连接所述主控单元的触摸传感器、光源和摄像机;
所述接触面板设有开口;
所述玻璃面板凹设于所述开口处,并与接触面板连接;
所述触摸传感器检测是否有手掌接触接触面板,当检测到有手掌接触时,发送信号至所述主控单元;
所述光源设置于所述玻璃面板的下方,依据主控单元的控制指令产生照射所述手掌的可见光或近红外光;
所述摄像机调焦成像于所述玻璃面板与接触面板形成的凹陷区域,根据所述光源照射到手掌上的反射光获取所述手掌的掌纹图像和掌脉图像。
2.根据权利要求1所述的掌纹掌脉图像采集装置,其特征在于,所述触摸传感器设置于所述接触面板放置手掌根部或手掌指部的一端。
3.根据权利要求1所述的掌纹掌脉图像采集装置,其特征在于,所述光源包括通过所述主控单元调节光强的可见光LED阵列和近红外光LED阵列;
所述近红外光LED阵列设置于所述玻璃面板的下方,产生照射所述手掌的近红外光;
所述可见光LED阵列设置于所述手掌的两侧下方,产生照射所述手掌的绿光。
4.根据权利要求1或3所述的掌纹掌脉图像采集装置,其特征在于,所述玻璃面板为厚度为2mm~3mm的透光玻璃,所述玻璃面板与接触面板相对于水平面的垂直高度相差3mm~5mm。
5.根据权利要求3所述的掌纹掌脉图像采集装置,其特征在于,所述掌纹掌脉图像采集装置还包括滤光片,所述滤光片设置于所述光源与摄像机之间,对近红外光和绿光之外的其他光谱进行削弱。
6.根据权利要求1所述的掌纹掌脉图像采集装置,其特征在于,所述掌纹掌脉图像采集装置还包括不透光机壳,所述接触面板的边缘与不透光机壳的侧壁连接,所述摄像机固定于所述不透光机壳的底壁。
7.根据权利要求1所述的掌纹掌脉图像采集装置,其特征在于,所述主控单元包括存储器、处理器及存储在所述存储器上并在所述处理器上运行的光源强度调节程序,所述光源强度调节程序被所述处理器执行时实现以下操作:
控制摄像机采集图像,将所述图像的中心矩形区域作为ROI,计算所述ROI的灰度均值Mean;
当90<Mean<110时,定位出掌纹ROI,计算所述掌纹ROI的Mean值和点锐度值EAV;
当|Mean-90|<|Mean-110|时,提高光源的强度直至Mean大于110,同时计算ROI对应的EAV值,并将所述EAV值和PWM占空比加入到队列Q中;当|Mean-90|>|Mean-110|时,降低光源的亮度直至Mean小于90,同时计算ROI对应的EAV值,并将所述EAV值和PWM占空比加入到队列Q中;
依据队列Q中最大的EAV值及其对应的PWM占空比调节光源的强度。
8.根据权利要求7所述的掌纹掌脉图像采集装置,其特征在于,所述光源强度调节程序被所述处理器执行时还实现以下步骤:
当Mean<90时,线性增加所述主控单元的PWM占空比,提高光源强度,当Mean>110时,线性减小所述PWM占空比,降低光源强度;
当EAV<13时,控制摄像机重新调焦。
9.根据权利要求7所述的掌纹掌脉图像采集装置,其特征在于,所述定位出掌纹ROI的过程,具体包括:
利用可见光和无光条件下得到的掌纹图像获取第三掌纹图像,对所述第三掌纹图像进行二值化得到第四掌纹图像;
在所述第四掌纹图像上建立x-0-y坐标系,令x=x0、y从像素点区间[0,h]取值,得到黑白交替的点序列(p1,p2,p3,p4,p5,p6);
分别以p1、p5为起始端点,以p2、p6为结束端点进行边缘跟踪计算,将两边缘上的点坐标分别存储于队列Q1和Q2中;
将Q1和Q2中最接近手掌的点连成线段,以所述线段为参照作预设边长的矩形,依据所述矩形的四个顶点并通过线性插值得到归一化的掌纹ROI。
10.根据权利要求9所述的掌纹掌脉图像采集装置,其特征在于,所述利用可见光和无光条件下得到的掌纹图像获取第三掌纹图像,对所述第三掌纹图像进行二值化得到第四掌纹图像,具体包括:
将利用可见光获取的第一掌纹图像的像素灰度值减去无光条件下得到的掌纹图像的对应像素灰度值,得到第三掌纹图像,对所述第三掌纹图像进行二值化得到第四掌纹图像。
11.根据权利要求1所述的掌纹掌脉图像采集装置,其特征在于,所述掌纹掌脉图像采集装置还包括手掌状态检测单元,当所述触摸传感器检测到手掌接触时,比较前后两帧图像的变化程度,并在所述变化程度小于预设阈值时,判断当前手掌放置稳定。
12.一种通关闸机,其特征在于,该通关闸机包括:
如权利要求1-11任一项所述的掌纹掌脉图像采集装置,采集通关者的掌纹图像和掌脉图像;
IC识别模块,读取通关者的身份ID,并在所述身份ID合法时与预先录入的掌纹掌脉特征进行关联;
运算控制模块,将掌纹掌脉图像采集装置输入的掌纹图像和掌脉图像进行特征提取处理后与所述身份ID关联的掌纹掌脉特征进行比对,并输出比对结果;
闸机模块,根据所述比对结果执行放行或报警操作。
13.根据权利要求12所述的通关闸机,其特征在于,所述运算控制模块包括:
图像处理单元,对掌纹图像和掌脉图像的灰度、清晰度进行归一化处理;
特征提取单元,利用卷积操作提取所述掌纹图像和掌脉图像的特征向量,融合为掌纹特征和掌脉特征并存储;及
特征比对单元,将当前提取的掌纹特征与预先录入的掌纹特征进行识别比对,并在比对成功后将当前提取的掌脉特征与预先录入的掌脉特征进行识别比对。
14.根据权利要求12或13所述的通关闸机,其特征在于,该通关闸机的通关时间小于2秒。
CN201710492250.5A 2017-06-23 2017-06-23 掌纹掌脉图像采集装置及通关闸机 Expired - Fee Related CN107239772B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710492250.5A CN107239772B (zh) 2017-06-23 2017-06-23 掌纹掌脉图像采集装置及通关闸机

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710492250.5A CN107239772B (zh) 2017-06-23 2017-06-23 掌纹掌脉图像采集装置及通关闸机

Publications (2)

Publication Number Publication Date
CN107239772A true CN107239772A (zh) 2017-10-10
CN107239772B CN107239772B (zh) 2018-10-16

Family

ID=59987658

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710492250.5A Expired - Fee Related CN107239772B (zh) 2017-06-23 2017-06-23 掌纹掌脉图像采集装置及通关闸机

Country Status (1)

Country Link
CN (1) CN107239772B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107967469A (zh) * 2018-01-24 2018-04-27 四川政安通科技有限公司 结合掌静脉的指纹采样方法
CN108038479A (zh) * 2018-01-17 2018-05-15 昆山龙腾光电有限公司 指纹识别装置及识别方法
WO2019140624A1 (zh) * 2018-01-19 2019-07-25 深圳信炜生物识别科技有限公司 电子设备
CN110188675A (zh) * 2019-05-29 2019-08-30 Oppo广东移动通信有限公司 静脉采集方法及相关产品
CN110457330A (zh) * 2019-08-21 2019-11-15 北京远舢智能科技有限公司 一种时序数据管理平台
CN110598661A (zh) * 2019-09-19 2019-12-20 京麦智能科技(苏州)有限公司 一种掌纹掌脉采集系统
CN110998600A (zh) * 2019-03-07 2020-04-10 深圳市汇顶科技股份有限公司 光学掌纹感测的方法和系统
CN111414810A (zh) * 2020-03-02 2020-07-14 Oppo广东移动通信有限公司 指纹采集方法、电子装置和存储介质
CN111524727A (zh) * 2019-02-02 2020-08-11 深圳市英泰斯达智能技术有限公司 具有红外图像掌纹的安全开关
CN111815840A (zh) * 2020-07-17 2020-10-23 河南华辰智控技术有限公司 一种基于生物识别的地铁快速身份识别系统
CN114092974A (zh) * 2021-10-25 2022-02-25 支付宝(杭州)信息技术有限公司 身份识别方法、装置、终端以及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101493884A (zh) * 2008-01-24 2009-07-29 中国科学院自动化研究所 多光谱图像采集装置和方法
CN102402679A (zh) * 2010-09-07 2012-04-04 北京北科慧识科技股份有限公司 非接触式掌纹掌脉识别系统
CN102521584A (zh) * 2011-10-31 2012-06-27 哈尔滨工业大学 一种人体掌纹图像采集装置及处理方法
CN102945363A (zh) * 2012-10-30 2013-02-27 哈尔滨工业大学 一种可自动调整照射光强的手指静脉图像采集装置及其采集方法
CN103902969A (zh) * 2014-02-27 2014-07-02 中国科学院自动化研究所 一种同时摄取掌纹和掌静脉图像的装置
CN203733135U (zh) * 2014-03-05 2014-07-23 中国计量学院 一种基于808nm激光的指静脉识别系统
US20140233810A1 (en) * 2007-06-11 2014-08-21 Lumidigm, Inc. Dermatoglyphic hand sensor

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140233810A1 (en) * 2007-06-11 2014-08-21 Lumidigm, Inc. Dermatoglyphic hand sensor
CN101493884A (zh) * 2008-01-24 2009-07-29 中国科学院自动化研究所 多光谱图像采集装置和方法
CN102402679A (zh) * 2010-09-07 2012-04-04 北京北科慧识科技股份有限公司 非接触式掌纹掌脉识别系统
CN102521584A (zh) * 2011-10-31 2012-06-27 哈尔滨工业大学 一种人体掌纹图像采集装置及处理方法
CN102945363A (zh) * 2012-10-30 2013-02-27 哈尔滨工业大学 一种可自动调整照射光强的手指静脉图像采集装置及其采集方法
CN103902969A (zh) * 2014-02-27 2014-07-02 中国科学院自动化研究所 一种同时摄取掌纹和掌静脉图像的装置
CN203733135U (zh) * 2014-03-05 2014-07-23 中国计量学院 一种基于808nm激光的指静脉识别系统

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
吴微等: "基于灰度曲面匹配的快速手掌静脉识别", 《光学学报》 *
张环: "掌纹掌脉及其融合识别技术研究", 《中国博士学位论文全文数据库 信息科技辑》 *
汤永华: "非接触条件下手部多模态生物特征融合方法的研究", 《中国博士学位论文全文数据库 信息科技辑》 *
赵秋实: "非接触式掌纹识别关键问题研究", 《中国博士学位论文全文数据库 信息科技辑》 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108038479A (zh) * 2018-01-17 2018-05-15 昆山龙腾光电有限公司 指纹识别装置及识别方法
WO2019140624A1 (zh) * 2018-01-19 2019-07-25 深圳信炜生物识别科技有限公司 电子设备
CN107967469A (zh) * 2018-01-24 2018-04-27 四川政安通科技有限公司 结合掌静脉的指纹采样方法
CN107967469B (zh) * 2018-01-24 2021-11-05 山东承势电子科技有限公司 指纹采样方法
CN111524727A (zh) * 2019-02-02 2020-08-11 深圳市英泰斯达智能技术有限公司 具有红外图像掌纹的安全开关
CN110998600A (zh) * 2019-03-07 2020-04-10 深圳市汇顶科技股份有限公司 光学掌纹感测的方法和系统
CN110998600B (zh) * 2019-03-07 2021-07-16 深圳市汇顶科技股份有限公司 光学掌纹感测的方法和系统
CN110188675A (zh) * 2019-05-29 2019-08-30 Oppo广东移动通信有限公司 静脉采集方法及相关产品
CN110457330A (zh) * 2019-08-21 2019-11-15 北京远舢智能科技有限公司 一种时序数据管理平台
CN110598661A (zh) * 2019-09-19 2019-12-20 京麦智能科技(苏州)有限公司 一种掌纹掌脉采集系统
CN111414810A (zh) * 2020-03-02 2020-07-14 Oppo广东移动通信有限公司 指纹采集方法、电子装置和存储介质
CN111414810B (zh) * 2020-03-02 2023-11-24 Oppo广东移动通信有限公司 指纹采集方法、电子装置和存储介质
CN111815840A (zh) * 2020-07-17 2020-10-23 河南华辰智控技术有限公司 一种基于生物识别的地铁快速身份识别系统
CN111815840B (zh) * 2020-07-17 2021-12-31 河南华辰智控技术有限公司 一种基于生物识别的地铁快速身份识别系统
CN114092974A (zh) * 2021-10-25 2022-02-25 支付宝(杭州)信息技术有限公司 身份识别方法、装置、终端以及存储介质
CN114092974B (zh) * 2021-10-25 2024-10-22 支付宝(杭州)信息技术有限公司 身份识别方法、装置、终端以及存储介质

Also Published As

Publication number Publication date
CN107239772B (zh) 2018-10-16

Similar Documents

Publication Publication Date Title
CN107239772B (zh) 掌纹掌脉图像采集装置及通关闸机
CN102622588B (zh) 双验证人脸防伪方法及装置
US9922238B2 (en) Apparatuses, systems, and methods for confirming identity
JP6650946B2 (ja) モバイル・デバイスを用いてキャプチャしたイメージを使用する指紋ベースのユーザ認証を実行するためのシステムおよび方法
JP7269711B2 (ja) 生体認証システム、生体認証方法およびプログラム
CN101196987B (zh) 在线掌纹、手掌静脉图像身份识别方法及其专用采集仪
KR101286454B1 (ko) 눈 영상의 특성을 이용한 모조얼굴 식별장치 및 방법
CN2828935Y (zh) 一种用于人脸识别的图像获取识别装置
CN109359647A (zh) 识别多种证件的方法、设备及计算机可读存储介质
CN111462379A (zh) 一种含掌静脉和人脸识别的门禁管理方法、系统及介质
CN104933344A (zh) 基于多生物特征模态的移动终端用户身份认证装置及方法
CN101493884A (zh) 多光谱图像采集装置和方法
CN102117404A (zh) 一种反射式手指静脉特征采集装置及其个人身份认证方法
CN204791017U (zh) 基于多生物特征模态的移动终端用户身份认证装置
CN104778445B (zh) 基于手指静脉立体特征的活体识别装置及方法
CN105426843A (zh) 一种单镜头下掌静脉和掌纹图像采集装置及图像增强和分割方法
CN108375095A (zh) 一种吸油烟机的控制方法及吸油烟机
CN106570469A (zh) 自助式双目虹膜注册方法及利用该方法的虹膜注册装置
Fletcher et al. Development of mobile-based hand vein biometrics for global health patient identification
JP2018106720A (ja) 画像処理装置及びその方法
CN110866235B (zh) 同时捕获人体脉搏和静脉图像的身份识别方法及装置
CN206711114U (zh) 一种全天候人脸采集装置
CN202033768U (zh) 一种透射式手指静脉特征采集装置
CN112075981A (zh) 静脉穿刺机器人控制方法、装置及计算机可读存储介质
CN116824658A (zh) 带交互式活体检测的人脸认证方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20180824

Address after: 518000 Guangdong Shenzhen Nanshan District Taoyuan street, Xili University Town, cloud Valley two phase 4 4 Story 3 floors.

Applicant after: Shenzhen Zhong Zhi Intelligent Technology Co., Ltd.

Address before: 518000 Room 201, building A, No. 1, Qian Wan Road, Qianhai Shenzhen Hong Kong cooperation zone, Shenzhen, Guangdong (Shenzhen Qianhai business secretary Co., Ltd.)

Applicant before: Shenzhen Lizhong Mdt InfoTech Ltd

GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20181016

Termination date: 20190623