CN109087429A - 基于人脸识别技术的图书馆借书证人证一致性检验的方法 - Google Patents

基于人脸识别技术的图书馆借书证人证一致性检验的方法 Download PDF

Info

Publication number
CN109087429A
CN109087429A CN201811096087.1A CN201811096087A CN109087429A CN 109087429 A CN109087429 A CN 109087429A CN 201811096087 A CN201811096087 A CN 201811096087A CN 109087429 A CN109087429 A CN 109087429A
Authority
CN
China
Prior art keywords
face
positive
image
face image
library
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811096087.1A
Other languages
English (en)
Other versions
CN109087429B (zh
Inventor
舒宗瑛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing University of Education
Original Assignee
Chongqing University of Education
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing University of Education filed Critical Chongqing University of Education
Priority to CN201811096087.1A priority Critical patent/CN109087429B/zh
Publication of CN109087429A publication Critical patent/CN109087429A/zh
Application granted granted Critical
Publication of CN109087429B publication Critical patent/CN109087429B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/20Individual registration on entry or exit involving the use of a pass
    • G07C9/22Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder
    • G07C9/25Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition
    • G07C9/257Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition electronically
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition

Abstract

本发明提供的一种基于人脸识别技术的图书馆借书证人证一致性检验的方法包括下步骤:S1:建立借书证信息库;S2:设置正脸比对阈值M1、第一侧脸比对阈值M2和第二侧脸比对阈值M3;S3:借书证信息的获取和提取;S4:持证人人脸图像的采集、处理和提取;S5:借书证信息和持证人人脸图像的信息比对和处理;本发明通过对持证人的正脸和侧脸进行人证比对,考虑到正脸对比偏差对侧脸对比的影响,进行人证一致性检验,检验精度高、误差小、效率高、速度快,且避免了冒用人用借书证所有人的平面照片在人证一致性检验过程中作弊。

Description

基于人脸识别技术的图书馆借书证人证一致性检验的方法
技术领域
本发明涉及图书馆监控领域,具体涉及一种基于人脸识别技术的图书馆借书证人证一致性检验的方法。
背景技术
图书馆需凭借书证才能进入借阅书籍,现有的图书馆门禁只验证借书证真伪。常常出现有人冒用其他的借书证进入图书馆借阅书籍,给图书馆的安全秩序造成不良影响,同时被冒用的借书证所有者往往要为冒用者在图书馆借阅书籍的不良行为承担责任,因此需要对借书证与使用者进行人证一致性比对,判断使用者是否是借书证的所有人。而现有人证比对方法常常依赖人工去识别,即通过人眼观察持借书证的人和所持借书证,从而判断认证是否一致,但是由于人工识别具有较大误差,因此识别的准确率不高,而一个一个地识别,识别速度非常慢,工作人员的工作量也大,非常耗费人力,效率低下。还有人通过读取借书证的人脸注册信息,与对持证人实时拍摄正脸的照片进行比对,判断是否是持证人是否是借书证所有人。然而这种方式在遇到有人故意将借书证所有人的正脸照对准实时拍摄正脸的相机等设备时,往往通过了人证一致性的验证,顺利进入图书馆借阅书籍。
因此,需要提出一种新的基于人脸识别技术的图书馆借书证人证一致性检验的方法
发明内容
有鉴于此,本发明的目的是提供一种基于人脸识别技术的图书馆借书证人证一致性检验的方法,通过对持证人的正脸和侧脸进行人证比对,考虑到正脸对比偏差对侧脸对比的影响,进行人证一致性检验,检验精度高、误差小、效率高、速度快,且避免了冒用人用借书证所有人的平面照片在人证一致性检验过程中作弊。
本发明提供一种基于人脸识别技术的图书馆借书证人证一致性检验的方法,包括步骤
S1:建立借书证信息库,所述借书证信息包括各借书证所有人的正脸照片、左脸照片、右脸照片、性别和年龄;
S2:设置正脸比对阈值M1、第一侧脸比对阈值M2和第二侧脸比对阈值 M3
S3:借书证信息的获取和提取,具体如下:
S31:借书证信息的获取:获取借书证信息,包括书证所有人的正脸照片、左脸照片、右脸照片、性别和年龄;
S32:借书证信息的提取:提取借书证所有人的正脸照片、左脸照片和右脸照片的特征值,依次作为正脸第一特征值、左脸第一特征值和右脸第一特征值;所述正脸照片、左脸照片和右脸照片符合身份证照片标准格式;
S4:持证人人脸图像的采集、处理和提取,具体如下:
S41:持证人人脸图像的采集:通过人脸图像采集模块对借书证持有人的正脸、左脸和右脸进行采集,实时获得借书证持有人的正脸图像、左脸图像和右脸图像;
S42:持证人人脸图像的处理:将正脸图像、左脸图像和右脸图像进行身份证照片标准格式化;然后将正脸图像、左脸图像和右脸图像分别以正脸照片、左脸照片和右脸照片的像素为标准进行正脸图像、左脸图像和右脸图像像素归一化处理;
S43:持证人人脸图像的提取,具体如下:
提取经步骤S42处理后的正脸图像、左脸图像和右脸图像的特征值,分别记为正脸第二特征值、左脸第二特征值和右脸第二特征值;
S44:人脸照片和人脸图像校正数据的提取,具体如下:
分别提取正脸照片、左脸照片和右脸照片中眼睛到正脸照片、左脸照片和右脸照片下边沿的最短距离,分别记为正脸原始尺寸α1、左脸原始尺寸α2和右脸原始尺寸α3
分别提取正脸图像、左脸图像和右脸图像中眼睛到正脸图像、左脸图像和右脸图像下边沿的最短距离,分别记为正脸校正尺寸β1、左脸校正尺寸β2和右脸校正尺寸β3
计算正脸对齐校正系数、左脸对齐校正系数和右脸对齐校正系数;
S5:借书证信息和持证人人脸图像的信息比对和处理,具体如下:
S51:比对及分值的计算:将正脸第一特征值和正脸第二特征值匹配比对,记下对应正脸相似度分值R1
S52:根据校正公式,计算校正正脸相似度分值R1’,将R1’与正脸比对阈值进行比对,若R1’大于正脸比对阈值M1,利用阈值偏差公式计算校正正脸相似度偏差率Q1,进入步骤S53;若R1’小于或等于正脸比对阈值M1,则图书馆借书证人证一致性检验不通过;
S53:将左脸第一特征值和左脸第二特征值匹配比对,记下对应左脸相似度分值R2
S54:根据校正公式,计算校正左脸相似度分值R2’;
根据关联影响公式,计算关联校正左脸相似度分值R2”;
对R1’和R2”进行归一化处理,得到第一人脸相似度分值R,所述R的计算公式为:
将R与第一侧脸比对阈值进行比对,若R大于第一侧脸比对阈值M2,利用阈值偏差公式计算校正侧脸相似度偏差率Q2,进入步骤S55;若R小于或等于第一侧脸比对阈值M2,则图书馆借书证人证一致性检验不通过;
S55:将右脸第一特征值和右脸第二特征值匹配比对,记下对应右脸相似度分值R3
S56:根据校正公式,计算校正右脸相似度分值R3’;
根据关联影响公式,计算关联校正右脸相似度分值R3”;
对R1’、R2”和R3”进行归一化处理,得到第二人脸相似度分值R’,所述 R’的计算公式为:
将R’与第二侧脸比对阈值进行比对,若R’大于第二侧脸比对阈值,则图书馆借书证人证一致性比对通过;若R’小于或等于第一侧脸比对阈值,则图书馆借书证人证一致性检验不通过。
进一步,所述校正公式如下:
Ri'=δiRi (2)
其中,i为正数,1≤i≤3,δi表示Ri对齐校正系数;δ1表示R1的对齐校正系数,即正脸对齐校正系数;δ2表示R2的对齐校正系数,即左脸对齐校正系数;δ3表示R3的对齐校正系数,即右脸对齐校正系数。
进一步,所述步骤S44中计算正脸对齐校正系数、左脸对齐校正系数和右脸对齐校正系数的公式为:
其中,i为正数,1≤i≤3,δi表示Ri对齐校正系数;δ1表示R1的对齐校正系数,即正脸对齐校正系数;δ2表示R2的对齐校正系数,即左脸对齐校正系数;δ3表示R3的对齐校正系数,即右脸对齐校正系数,α1为正脸原始尺寸,α2为左脸原始尺寸,α3为右脸原始尺寸,β1为正脸校正尺寸、β2为左脸校正尺寸,β3为右脸校正尺寸。
进一步,所述阈值偏差公式为:
其中,i为正数,1≤i≤2,Q1为校正正脸相似度偏差率;Q2为校正侧脸相似度偏差率。
进一步,所述关联影响公式为:
Ri"=(1+Qi-1 2)Ri' (5)
其中,i为正数,2≤i≤3,Q1为校正正脸相似度偏差率;Q2为校正侧脸相似度偏差率,R2’为校正左脸相似度分值,R3’为校正右脸相似度分值,R2”为关联校正左脸相似度分值,R3”为关联校正右脸相似度分值。
进一步,所述步骤S43中还包括:检测正脸图像、左脸图像和右脸图像的性别,所述正脸图像、左脸图像和右脸图像的性别是通过基于图像的性别检测算法检测的;
所述步骤S51中还包括:将借书证信息中的性别分别与检测到的正脸图像的性别匹配比对,性别一致则步骤S51中正脸相似度分值不变,若性别不一致,则步骤S51中正脸相似度分值减少5%;
所述步骤S53中还包括:将借书证信息中的性别分别与检测到的左脸图像的性别匹配比对,性别一致则步骤S53中左脸相似度分值不变,若性别不一致,则步骤S53中左脸相似度分值减少5%;
所述步骤S55中还包括:将借书证信息中的性别分别与检测到的右脸图像的性别匹配比对,性别一致则步骤S55中右脸相似度分值不变,若性别不一致,则步骤S55中右脸相似度分值减少5%。
进一步,所述步骤S43中还包括:检测正脸图像、左脸图像和右脸图像的年龄,所述正脸图像、左脸图像和右脸图像的性别是通过基于图像的年龄检测算法检测的;
所述步骤S51中还包括:将借书证信息中的性别分别与检测到的正脸图像的年龄匹配比对,年龄一致则步骤S51中正脸相似度分值不变,若年龄不一致,则步骤S51中正脸相似度分值减少5%;
所述步骤S53中还包括:将借书证信息中的性别分别与检测到的左脸图像的年龄匹配比对,年龄一致则步骤S53中左脸相似度分值不变,若年龄不一致,则步骤S53中左脸相似度分值减少5%;
所述步骤S55中还包括:将借书证信息中的性别分别与检测到的右脸图像的年龄匹配比对,年龄一致则步骤S55中右脸相似度分值不变,若年龄不一致,则步骤S55中右脸相似度分值减少5%;
进一步,所述人脸图像采集模块包括至少三台可同时获取持证人正脸图像、左脸图像和右脸图像的相机;
所述人脸图像采集模块需在同一时刻采集持证人的正脸图像、左脸图像和右脸图像。
进一步,所述人脸图像采集模块若成功检测到持证人的人脸图像,则进入下一步骤,否则,则提示持证人正视所述人脸图像采集模块中获取正脸图像的相机。
本发明的有益效果:本发明通过对持证人的正脸和侧脸进行人证比对,考虑到正脸对比偏差对侧脸对比的影响,进行人证一致性检验,检验精度高、误差小、效率高、速度快,且避免了冒用人用借书证所有人的平面照片在人证一致性检验过程中作弊。
具体实施方式
本发明提供的一种基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:包括步骤
S1:建立借书证信息库,所述借书证信息包括各借书证所有人的正脸照片、左脸照片、右脸照片、性别和年龄;本实施例中,所述建立借书证信息库是在借书证所有人首次办理借书证或借书证到期后续办借书证或补办借书证时,采集录入信借书证信息到借书证信息库中进行存储,每张借书证对应一个借书证所有人的正脸照片、左脸照片、右脸照片、性别和年龄的信息,每张借书证上设置有对应的二维码用于扫描获取对应的借书证信息。
S2:设置正脸比对阈值M1、第一侧脸比对阈值M2和第二侧脸比对阈值 M3
S3:借书证信息的获取和提取,具体如下:
S31:借书证信息的获取:获取借书证信息,包括书证所有人的正脸照片、左脸照片、右脸照片、性别和年龄;本实施例中,所述获取结束证信息,是通过在图书馆门禁处设置借书证的二维码扫描机,二维码扫描机扫描借书证上的二维码读取借书证信息。
S32:借书证信息的提取:提取借书证所有人的正脸照片、左脸照片和右脸照片的特征值,依次作为正脸第一特征值、左脸第一特征值和右脸第一特征值;所述正脸照片、左脸照片和右脸照片符合身份证照片标准格式;本实施例中,所述身份证照片标准格式为:(1-1)含有人脸的照片或图像的像素大小为358 ×441像素;(1-2)含有人脸的照片或图像的脸部宽度在193像素~221像素之间;(1-3)含有人脸的照片或图像的头顶发迹与照片或图片上边沿的距离在7~ 21像素之间;(1-4)含有人脸的照片或图像的眼睛所在位置距离照片或图片下边沿的距离大于或等于207像素;(1-5)含有人脸的照片或图像的分别率为350dpi,采用24位RGB真色颜色模式,采用JPGE压缩技术。
S4:持证人人脸图像的采集、处理和提取,具体如下:
S41:持证人人脸图像的采集:通过人脸图像采集模块对借书证持有人的正脸、左脸和右脸进行采集,实时获得借书证持有人的正脸图像、左脸图像和右脸图像;本实施例中,采集人脸三个角度的图像进行对比,解决了只采集正脸图像或其他一个角度的人脸图像,容易作弊的问题,同时提高了人证一致性检验的精度。
S42:持证人人脸图像的处理:将正脸图像、左脸图像和右脸图像进行身份证照片标准格式化;然后将正脸图像、左脸图像和右脸图像分别以正脸照片、左脸照片和右脸照片的像素为标准进行正脸图像、左脸图像和右脸图像像素归一化处理;本实施例中,通过对现场采集的人脸图像进行身份证照片标准格式化和人脸图像像素归一化处理,使借书证信息中的照片和采集的人脸图像纸件的人脸特征信息查减小、甚至消除,使得在人证一致性检验的过程中,检验的准确率更高、同时检验的速度更快。
S43:持证人人脸图像的提取,具体如下:
提取经步骤S42处理后的正脸图像、左脸图像和右脸图像的特征值,分别记为正脸第二特征值、左脸第二特征值和右脸第二特征值;本实施例中,所述第一特征值和第二特征值指的是人脸的物管,包括眼睛、眉毛、鼻子、嘴巴和耳朵,也可以包括脸型、头发,或其他人脸部特征。
S44:人脸照片和人脸图像校正数据的提取,具体如下:
分别提取正脸照片、左脸照片和右脸照片中眼睛到正脸照片、左脸照片和右脸照片下边沿的最短距离,分别记为正脸原始尺寸α1、左脸原始尺寸α2和右脸原始尺寸α3
分别提取正脸图像、左脸图像和右脸图像中眼睛到正脸图像、左脸图像和右脸图像下边沿的最短距离,分别记为正脸校正尺寸β1、左脸校正尺寸β2和右脸校正尺寸β3;由于眼睛在人脸照片或图像中占有一定面积的像素,面积中的点到人脸图像或图像下边沿的距离并不完全相同,故本实施例中,采集获得眼睛到正脸照片或图像、左脸照片或图像和右脸照片或图像下边沿的最短距离,保证数据的唯一性。
计算正脸对齐校正系数、左脸对齐校正系数和右脸对齐校正系数;本实施例中,在对现场采集的人脸图像进行像素归一化处理的时候,人脸图像和借书证信息中的人脸照片中的人脸比不是完全对齐的,即人脸的五官、脸型等并未完全对齐,可能导致对比的误差,利用正脸对齐校正系数、左脸对齐校正系数和右脸对齐校正系数对人脸图像和人脸照片中的人脸错开的程度进行校正,提高了对比的精度。
S51:比对及分值的计算:将正脸第一特征值和正脸第二特征值匹配比对,记下对应正脸相似度分值R1
S52:根据校正公式,计算校正正脸相似度分值R1’,将R1’与正脸比对阈值进行比对,若R1’大于正脸比对阈值M1,利用阈值偏差公式计算校正正脸相似度偏差率Q1,进入步骤S53;若R1’小于或等于正脸比对阈值M1,则图书馆借书证人证一致性检验不通过;
S53:将左脸第一特征值和左脸第二特征值匹配比对,记下对应左脸相似度分值R2
S54:根据校正公式,计算校正左脸相似度分值R2’;
根据关联影响公式,计算关联校正左脸相似度分值R2”;由于正脸图像、左脸图像和右脸图像是同时获得的,当正脸图像比对结果与阈值有偏差,由于人脸角度没对齐或其他原因,同时可能会存在左脸和右脸没有对齐人脸图像采集模块,导致侧脸图像比对结果与阈值偏差增大,即导致误差增大,故增加消除正脸对左脸的误差影响,左脸对右脸的误差影响的关联影响公式进行修正。
综合对正脸和左脸的比对结果,对R1’和R2”进行归一化处理,得到第一人脸相似度分值R,所述R的计算公式为:
综合对正脸和左脸的比对结果,对R1’和R2”进行归一化处理,避免了冒用人用借书证所有人的平面照片在人证一致性检验过程中作弊。
将R与第一侧脸比对阈值进行比对,若R大于第一侧脸比对阈值M2,利用阈值偏差公式计算校正侧脸相似度偏差率Q2,进入步骤S55;若R小于或等于第一侧脸比对阈值M2,则图书馆借书证人证一致性检验不通过;
S55:将右脸第一特征值和右脸第二特征值匹配比对,记下对应右脸相似度分值R3
S54:根据校正公式,计算校正右脸相似度分值R3’;
根据关联影响公式,计算关联校正右脸相似度分值R3”;
对R1’、R2”和R3”进行归一化处理,得到第二人脸相似度分值R’,所述 R’的计算公式为:
将R’与第二侧脸比对阈值进行比对,若R’大于第二侧脸比对阈值,则图书馆借书证人证一致性比对通过;若R’小于或等于第一侧脸比对阈值,则图书馆借书证人证一致性检验不通过。综合对正脸、左脸和右脸的比对结果,对R1’、 R2”和R3”进行归一化处理,避免了冒用人用借书证所有人的平面照片在人证一致性检验过程中作弊。本实施例中,设置正脸比对阈值M1、第一侧脸比对阈值M2和第二侧脸比对阈值M3依次对正脸、左脸和右脸人证是否一致进行比对,一旦校正后的相似度分值小于或等于对应的阈值,则停止后续的运算步骤,直接判断为图书馆借书证人证一致性检验不通过,相对于将正脸和侧脸的比对结果全部计算并进行处理,然后在对归一化的结果进行阈值比对,减少了开销,提高了效率。通过上述方法,对持证人的正脸和侧脸进行人证比对,考虑到正脸对比偏差对侧脸对比的影响,进行人证一致性检验,检验精度高、误差小、效率高、速度快,且避免了冒用人用借书证所有人的平面照片在人证一致性检验过程中作弊。
所述校正公式如下:
Ri'=δiRi (2)
其中,i为正数,1≤i≤3,δi表示Ri对齐校正系数;δ1表示R1的对齐校正系数,即正脸对齐校正系数;δ2表示R2的对齐校正系数,即左脸对齐校正系数;δ3表示R3的对齐校正系数,即右脸对齐校正系数。本实施例中,在对现场采集的人脸图像进行像素归一化处理的时候,人脸图像和借书证信息中的人脸照片中的人脸比不是完全对齐的,即人脸的五官、脸型等并未完全对齐,可能导致对比的误差,以眼睛的位置为基准,对人脸图像和人脸照片中的人脸错开的程度进行校正,提高了对比的精度。
所述步骤S44中计算正脸对齐校正系数、左脸对齐校正系数和右脸对齐校正系数的公式为:
其中,i为正数,1≤i≤3,δi表示Ri对齐校正系数;δ1表示R1的对齐校正系数,即正脸对齐校正系数;δ2表示R2的对齐校正系数,即左脸对齐校正系数;δ3表示R3的对齐校正系数,即右脸对齐校正系数,α1为正脸原始尺寸,α2为左脸原始尺寸,α3为右脸原始尺寸,β1为正脸校正尺寸、β2为左脸校正尺寸,β3为右脸校正尺寸。
所述阈值偏差公式为:
其中,i为正数,1≤i≤2,Q1为校正正脸相似度偏差率;Q2为校正侧脸相似度偏差率。
所述关联影响公式为:
Ri"=(1+Qi-1 2)Ri' (5)
其中,i为正数,2≤i≤3,Q1为校正正脸相似度偏差率;Q2为校正侧脸相似度偏差率,R2’为校正左脸相似度分值,R3’为校正右脸相似度分值,R2”为关联校正左脸相似度分值,R3”为关联校正右脸相似度分值。本实施例中,当人脸角度与人脸图像采集模块没有对齐时,包括正脸、左脸和右脸都没有对齐人脸图像采集模块,校正正脸相似度分值与正脸比对阈值的偏差会影响校正左脸相似度分值与第一侧脸比对阈值的偏差,校正左脸相似度分值与第一侧脸比对阈值的偏差会影响校正右脸相似度分值与第二侧脸比对阈值的偏差。通过偏差率Qi对后续步骤的计算进行校正,以免误差在计算过程中累积,导致误差偏大,影响了计算的精度。
所述步骤S43中还包括:检测正脸图像、左脸图像和右脸图像的性别,所述正脸图像、左脸图像和右脸图像的性别是通过基于图像的性别检测算法检测的;
所述步骤S51中还包括:将借书证信息中的性别分别与检测到的正脸图像的性别匹配比对,性别一致则步骤S51中正脸相似度分值不变,若性别不一致,则步骤S51中正脸相似度分值减少5%;
所述步骤S53中还包括:将借书证信息中的性别分别与检测到的左脸图像的性别匹配比对,性别一致则步骤S53中左脸相似度分值不变,若性别不一致,则步骤S53中左脸相似度分值减少5%;
所述步骤S55中还包括:将借书证信息中的性别分别与检测到的右脸图像的性别匹配比对,性别一致则步骤S55中右脸相似度分值不变,若性别不一致,则步骤S55中右脸相似度分值减少5%。
所述步骤S43中还包括:检测正脸图像、左脸图像和右脸图像的年龄,所述正脸图像、左脸图像和右脸图像的性别是通过基于图像的年龄检测算法检测的;
所述步骤S51中还包括:将借书证信息中的性别分别与检测到的正脸图像的年龄匹配比对,年龄一致则步骤S51中正脸相似度分值不变,若年龄不一致,则步骤S51中正脸相似度分值减少5%;
所述步骤S53中还包括:将借书证信息中的性别分别与检测到的左脸图像的年龄匹配比对,年龄一致则步骤S53中左脸相似度分值不变,若年龄不一致,则步骤S53中左脸相似度分值减少5%;
所述步骤S55中还包括:将借书证信息中的性别分别与检测到的右脸图像的年龄匹配比对,年龄一致则步骤S55中右脸相似度分值不变,若年龄不一致,则步骤S55中右脸相似度分值减少5%;本实施例中,进一步考虑性别和/或年龄比对考虑进行,将原Ri考虑性别和/或年龄比对后得到新的Ri,然后再进行接下来的步骤,提高了人证一致性检验的精度。
所述人脸图像采集模块包括至少三台可同时获取持证人正脸图像、左脸图像和右脸图像的相机;本实施例中,所述人脸图像采集模块设置在图书馆门禁处,所述获取持证人正脸图像的相机镜头与获取持证人左脸图像的相机镜头垂直;所述获取持证人正脸图像的相机镜头与获取持证人右脸图像的相机镜头垂直;所述获取持证人左脸图像的相机镜头与获取持证人右脸图像的相机镜头正对。
所述人脸图像采集模块需在同一时刻采集持证人的正脸图像、左脸图像和右脸图像。同一时刻采集正脸图像、左脸图像和右脸图像,保证了持证人不能利用采集各角度图像之间的时间差,来做作弊动作,以影响图书馆借书证人证一致性的检验结果。
所述人脸图像采集模块若成功检测到持证人的人脸图像,则进入下一步骤,否则,则提示持证人正视所述人脸图像采集模块中获取正脸图像的相机。
所述人脸图像采集模块若成功检测到持证人的人脸图像,则进入下一步骤,否则,则提示持证人正视所述人脸图像采集模块中获取正脸图像的相机。此外,本实施例中,还可有先对右脸进行对比,然后在对左脸对比。
最后说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的宗旨和范围,其均应涵盖在本发明的权利要求范围当中。

Claims (9)

1.一种基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:包括步骤
S1:建立借书证信息库,所述借书证信息包括各借书证所有人的正脸照片、左脸照片、右脸照片、性别和年龄;
S2:设置正脸比对阈值M1、第一侧脸比对阈值M2和第二侧脸比对阈值M3
S3:借书证信息的获取和提取,具体如下:
S31:借书证信息的获取:获取借书证信息,包括书证所有人的正脸照片、左脸照片、右脸照片、性别和年龄;
S32:借书证信息的提取:提取借书证所有人的正脸照片、左脸照片和右脸照片的特征值,依次作为正脸第一特征值、左脸第一特征值和右脸第一特征值;所述正脸照片、左脸照片和右脸照片符合身份证照片标准格式;
S4:持证人人脸图像的采集、处理和提取,具体如下:
S41:持证人人脸图像的采集:通过人脸图像采集模块对借书证持有人的正脸、左脸和右脸进行采集,实时获得借书证持有人的正脸图像、左脸图像和右脸图像;
S42:持证人人脸图像的处理:将正脸图像、左脸图像和右脸图像进行身份证照片标准格式化;然后将正脸图像、左脸图像和右脸图像分别以正脸照片、左脸照片和右脸照片的像素为标准进行正脸图像、左脸图像和右脸图像像素归一化处理;
S43:持证人人脸图像的提取,具体如下:
提取经步骤S42处理后的正脸图像、左脸图像和右脸图像的特征值,分别记为正脸第二特征值、左脸第二特征值和右脸第二特征值;
S44:人脸照片和人脸图像校正数据的提取,具体如下:
分别提取正脸照片、左脸照片和右脸照片中眼睛到正脸照片、左脸照片和右脸照片下边沿的最短距离,分别记为正脸原始尺寸α1、左脸原始尺寸α2和右脸原始尺寸α3
分别提取正脸图像、左脸图像和右脸图像中眼睛到正脸图像、左脸图像和右脸图像下边沿的最短距离,分别记为正脸校正尺寸β1、左脸校正尺寸β2和右脸校正尺寸β3
计算正脸对齐校正系数、左脸对齐校正系数和右脸对齐校正系数;
S5:借书证信息和持证人人脸图像的信息比对和处理,具体如下:
S51:比对及分值的计算:将正脸第一特征值和正脸第二特征值匹配比对,记下对应正脸相似度分值R1
S52:根据校正公式,计算校正正脸相似度分值R1’,将R1’与正脸比对阈值进行比对,若R1’大于正脸比对阈值M1,利用阈值偏差公式计算校正正脸相似度偏差率Q1,进入步骤S53;若R1’小于或等于正脸比对阈值M1,则图书馆借书证人证一致性检验不通过;
S53:将左脸第一特征值和左脸第二特征值匹配比对,记下对应左脸相似度分值R2
S54:根据校正公式,计算校正左脸相似度分值R2’;
根据关联影响公式,计算关联校正左脸相似度分值R2”;
对R1’和R2”进行归一化处理,得到第一人脸相似度分值R,所述R的计算公式为:
将R与第一侧脸比对阈值进行比对,若R大于第一侧脸比对阈值M2,利用阈值偏差公式计算校正侧脸相似度偏差率Q2,进入步骤S55;若R小于或等于第一侧脸比对阈值M2,则图书馆借书证人证一致性检验不通过;
S55:将右脸第一特征值和右脸第二特征值匹配比对,记下对应右脸相似度分值R3
S56:根据校正公式,计算校正右脸相似度分值R3’;
根据关联影响公式,计算关联校正右脸相似度分值R3”;
对R1’、R2”和R3”进行归一化处理,得到第二人脸相似度分值R’,所述R’的计算公式为:
将R’与第二侧脸比对阈值进行比对,若R’大于第二侧脸比对阈值,则图书馆借书证人证一致性比对通过;若R’小于或等于第一侧脸比对阈值,则图书馆借书证人证一致性检验不通过。
2.根据权利要求1所述基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:所述校正公式如下:
Ri'=δiRi (2)
其中,i为正数,1≤i≤3,δi表示Ri对齐校正系数;δ1表示R1的对齐校正系数,即正脸对齐校正系数;δ2表示R2的对齐校正系数,即左脸对齐校正系数;δ3表示R3的对齐校正系数,即右脸对齐校正系数。
3.根据权利要求2所述基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:所述步骤S44中计算正脸对齐校正系数、左脸对齐校正系数和右脸对齐校正系数的公式为:
其中,i为正数,1≤i≤3,δi表示Ri对齐校正系数;δ1表示R1的对齐校正系数,即正脸对齐校正系数;δ2表示R2的对齐校正系数,即左脸对齐校正系数;δ3表示R3的对齐校正系数,即右脸对齐校正系数,α1为正脸原始尺寸,α2为左脸原始尺寸,α3为右脸原始尺寸,β1为正脸校正尺寸、β2为左脸校正尺寸,β3为右脸校正尺寸。
4.根据权利要求1所述基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:所述阈值偏差公式为:
其中,i为正数,1≤i≤2,Q1为校正正脸相似度偏差率;Q2为校正侧脸相似度偏差率。
5.根据权利要求1所述基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:所述关联影响公式为:
Ri"=(1+Qi-1 2)Ri' (5)
其中,i为正数,2≤i≤3,Q1为校正正脸相似度偏差率;Q2为校正侧脸相似度偏差率,R2’为校正左脸相似度分值,R3’为校正右脸相似度分值,R2”为关联校正左脸相似度分值,R3”为关联校正右脸相似度分值。
6.根据权利要求1所述基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:所述步骤S43中还包括:检测正脸图像、左脸图像和右脸图像的性别,所述正脸图像、左脸图像和右脸图像的性别是通过基于图像的性别检测算法检测的;
所述步骤S51中还包括:将借书证信息中的性别分别与检测到的正脸图像的性别匹配比对,性别一致则步骤S51中正脸相似度分值不变,若性别不一致,则步骤S51中正脸相似度分值减少5%;
所述步骤S53中还包括:将借书证信息中的性别分别与检测到的左脸图像的性别匹配比对,性别一致则步骤S53中左脸相似度分值不变,若性别不一致,则步骤S53中左脸相似度分值减少5%;
所述步骤S55中还包括:将借书证信息中的性别分别与检测到的右脸图像的性别匹配比对,性别一致则步骤S55中右脸相似度分值不变,若性别不一致,则步骤S55中右脸相似度分值减少5%。
7.根据权利要求6所述基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:所述步骤S43中还包括:检测正脸图像、左脸图像和右脸图像的年龄,所述正脸图像、左脸图像和右脸图像的性别是通过基于图像的年龄检测算法检测的;
所述步骤S51中还包括:将借书证信息中的性别分别与检测到的正脸图像的年龄匹配比对,年龄一致则步骤S51中正脸相似度分值不变,若年龄不一致,则步骤S51中正脸相似度分值减少5%;
所述步骤S53中还包括:将借书证信息中的性别分别与检测到的左脸图像的年龄匹配比对,年龄一致则步骤S53中左脸相似度分值不变,若年龄不一致,则步骤S53中左脸相似度分值减少5%;
所述步骤S55中还包括:将借书证信息中的性别分别与检测到的右脸图像的年龄匹配比对,年龄一致则步骤S55中右脸相似度分值不变,若年龄不一致,则步骤S55中右脸相似度分值减少5%。
8.根据权利要求1所述基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:所述人脸图像采集模块包括至少三台可同时获取持证人正脸图像、左脸图像和右脸图像的相机;
所述人脸图像采集模块需在同一时刻采集持证人的正脸图像、左脸图像和右脸图像。
9.根据权利要求1所述基于人脸识别技术的图书馆借书证人证一致性检验的方法,其特征在于:所述人脸图像采集模块若成功检测到持证人的人脸图像,则进入下一步骤,否则,则提示持证人正视所述人脸图像采集模块中获取正脸图像的相机。
CN201811096087.1A 2018-09-19 2018-09-19 基于人脸识别技术的图书馆借书证人证一致性检验的方法 Expired - Fee Related CN109087429B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811096087.1A CN109087429B (zh) 2018-09-19 2018-09-19 基于人脸识别技术的图书馆借书证人证一致性检验的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811096087.1A CN109087429B (zh) 2018-09-19 2018-09-19 基于人脸识别技术的图书馆借书证人证一致性检验的方法

Publications (2)

Publication Number Publication Date
CN109087429A true CN109087429A (zh) 2018-12-25
CN109087429B CN109087429B (zh) 2020-12-04

Family

ID=64841842

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811096087.1A Expired - Fee Related CN109087429B (zh) 2018-09-19 2018-09-19 基于人脸识别技术的图书馆借书证人证一致性检验的方法

Country Status (1)

Country Link
CN (1) CN109087429B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110119674A (zh) * 2019-03-27 2019-08-13 深圳和而泰家居在线网络科技有限公司 一种作弊检测的方法、装置、计算设备及计算机存储介质
CN111476189A (zh) * 2020-04-14 2020-07-31 北京爱笔科技有限公司 一种身份识别方法和相关装置
CN112541174A (zh) * 2020-12-15 2021-03-23 平安科技(深圳)有限公司 业务数据核验方法、装置、设备及存储介质

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA1001761A (en) * 1971-11-04 1976-12-14 Rolf E. Rothfjell Method for identifying individuals using selected characteristic body curves
CN101916384A (zh) * 2010-09-01 2010-12-15 汉王科技股份有限公司 一种人脸图像重建方法、装置及人脸识别系统
CN105930709A (zh) * 2016-04-21 2016-09-07 深圳泰首智能技术有限公司 人脸识别技术应用于人证一致性检验的方法及装置
CN106203294A (zh) * 2016-06-30 2016-12-07 广东微模式软件股份有限公司 基于人脸属性分析的人证合一身份验证方法
US20160371540A1 (en) * 2015-06-16 2016-12-22 HotCoal Inc. Identity authentication platform
CN106295522A (zh) * 2016-07-29 2017-01-04 武汉理工大学 一种基于多角度人脸和环境信息的两级防欺骗检测方法
KR20170050979A (ko) * 2015-11-02 2017-05-11 주식회사 파이브지티 다중확인 얼굴 인식 시스템 및 그 방법
CN106709418A (zh) * 2016-11-18 2017-05-24 北京智慧眼科技股份有限公司 基于现场照和证件照的人脸识别方法及识别装置
CN106991390A (zh) * 2017-03-30 2017-07-28 电子科技大学 一种基于深度学习的手持人证比对系统及方法
CN107480658A (zh) * 2017-09-19 2017-12-15 苏州大学 基于多角度视频的人脸识别装置和方法
CN107516076A (zh) * 2017-08-10 2017-12-26 苏州妙文信息科技有限公司 人像识别方法及装置
CN107742094A (zh) * 2017-09-22 2018-02-27 江苏航天大为科技股份有限公司 提高人证比对结果的图像处理方法
CN108537304A (zh) * 2018-03-30 2018-09-14 深圳市华安高新技术有限公司 一种人证核验的方法和系统

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA1001761A (en) * 1971-11-04 1976-12-14 Rolf E. Rothfjell Method for identifying individuals using selected characteristic body curves
CN101916384A (zh) * 2010-09-01 2010-12-15 汉王科技股份有限公司 一种人脸图像重建方法、装置及人脸识别系统
US20160371540A1 (en) * 2015-06-16 2016-12-22 HotCoal Inc. Identity authentication platform
KR20170050979A (ko) * 2015-11-02 2017-05-11 주식회사 파이브지티 다중확인 얼굴 인식 시스템 및 그 방법
CN105930709A (zh) * 2016-04-21 2016-09-07 深圳泰首智能技术有限公司 人脸识别技术应用于人证一致性检验的方法及装置
CN106203294A (zh) * 2016-06-30 2016-12-07 广东微模式软件股份有限公司 基于人脸属性分析的人证合一身份验证方法
CN106295522A (zh) * 2016-07-29 2017-01-04 武汉理工大学 一种基于多角度人脸和环境信息的两级防欺骗检测方法
CN106709418A (zh) * 2016-11-18 2017-05-24 北京智慧眼科技股份有限公司 基于现场照和证件照的人脸识别方法及识别装置
CN106991390A (zh) * 2017-03-30 2017-07-28 电子科技大学 一种基于深度学习的手持人证比对系统及方法
CN107516076A (zh) * 2017-08-10 2017-12-26 苏州妙文信息科技有限公司 人像识别方法及装置
CN107480658A (zh) * 2017-09-19 2017-12-15 苏州大学 基于多角度视频的人脸识别装置和方法
CN107742094A (zh) * 2017-09-22 2018-02-27 江苏航天大为科技股份有限公司 提高人证比对结果的图像处理方法
CN108537304A (zh) * 2018-03-30 2018-09-14 深圳市华安高新技术有限公司 一种人证核验的方法和系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
杨凡,余水映,周祥明: "一种多角度的人脸识别方法", 《浙江师范大学学报》 *
郭迎达,于杨,曹正,丁一坤,闫永征: "人脸与证件对比系统设计与实现探究", 《中小企业管理与科技》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110119674A (zh) * 2019-03-27 2019-08-13 深圳和而泰家居在线网络科技有限公司 一种作弊检测的方法、装置、计算设备及计算机存储介质
CN111476189A (zh) * 2020-04-14 2020-07-31 北京爱笔科技有限公司 一种身份识别方法和相关装置
CN111476189B (zh) * 2020-04-14 2023-10-13 北京爱笔科技有限公司 一种身份识别方法和相关装置
CN112541174A (zh) * 2020-12-15 2021-03-23 平安科技(深圳)有限公司 业务数据核验方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN109087429B (zh) 2020-12-04

Similar Documents

Publication Publication Date Title
CN106529414A (zh) 一种通过图像比对实现结果认证的方法
Arca et al. A face recognition system based on automatically determined facial fiducial points
WO2020155939A1 (zh) 图像识别方法、装置、存储介质和处理器
US8374422B2 (en) Face expressions identification
WO2021036436A1 (zh) 一种人脸识别方法及装置
US8265347B2 (en) Method and system for personal identification using 3D palmprint imaging
CN108734235A (zh) 一种用于电子处方的身份识别方法及系统
CN108563990B (zh) 一种基于cis图像采集系统的证照鉴伪方法及系统
US11194997B1 (en) Method and system for thermal infrared facial recognition
WO2019061658A1 (zh) 眼镜定位方法、装置及存储介质
CN109087429A (zh) 基于人脸识别技术的图书馆借书证人证一致性检验的方法
CN107358174A (zh) 一种基于图像处理的手持身份证认证系统
CN103093274B (zh) 基于视频的行人计数的方法
KR20170006355A (ko) 모션벡터 및 특징벡터 기반 위조 얼굴 검출 방법 및 장치
CN106874968B (zh) 一种二代身份证真伪鉴别方法
CN114332865B (zh) 一种证件ocr识别方法及系统
CN110991434B (zh) 自助终端证件识别方法及装置
Hasan et al. Improving alignment of faces for recognition
CN109359546A (zh) 图书馆借书证人证比对方法
US7113637B2 (en) Apparatus and methods for pattern recognition based on transform aggregation
CN112200174A (zh) 人脸框检测方法及模块和活体人脸验证方法及系统
Malikovich et al. Problems in face recognition systems and their solving ways
CN112990381B (zh) 畸变图像目标识别方法及装置
CN113468954B (zh) 基于多通道下局部区域特征的人脸伪造检测方法
CN109284711A (zh) 图书馆借书证人证一致性检验的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20201204

Termination date: 20210919