CN113345177B - 一种基于人脸识别的图书自助借还系统 - Google Patents

一种基于人脸识别的图书自助借还系统 Download PDF

Info

Publication number
CN113345177B
CN113345177B CN202110511148.1A CN202110511148A CN113345177B CN 113345177 B CN113345177 B CN 113345177B CN 202110511148 A CN202110511148 A CN 202110511148A CN 113345177 B CN113345177 B CN 113345177B
Authority
CN
China
Prior art keywords
image
borrower
book
preset
borrowing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110511148.1A
Other languages
English (en)
Other versions
CN113345177A (zh
Inventor
刘国峰
颜湘原
李敏
王晶锋
蒋雯笑
方克林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Bao'an District Library
Shenzhen Seaever Intelligent Technology Co ltd
Original Assignee
Shenzhen Bao'an District Library
Shenzhen Seaever Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Bao'an District Library, Shenzhen Seaever Intelligent Technology Co ltd filed Critical Shenzhen Bao'an District Library
Priority to CN202110511148.1A priority Critical patent/CN113345177B/zh
Publication of CN113345177A publication Critical patent/CN113345177A/zh
Application granted granted Critical
Publication of CN113345177B publication Critical patent/CN113345177B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07GREGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00Cash registers

Abstract

本发明提供了一种基于人脸识别的图书自助借还系统,其特征在于,包括:人脸扫描模块,用于获取人脸检测区域的热感应信息,当所述热感应信息满足感应条件时,扫描借阅者的人脸;检测模块,用于接收借阅者输入的借阅认证信息,并根据借阅认证信息以及扫描信息,检测所述借阅者是否为本人;处理模块,用于当所述借阅者为本人时,基于预设数据库输出借阅信息到所述借阅者的借阅端,同时,根据借阅者在预设平台的输入指令,确定对应图书的当前状态,并记录所述借阅者在所述预设平台对所述图书的借还操作,并同借阅者还书时的情绪,判断借阅者对书籍的满意程度。

Description

一种基于人脸识别的图书自助借还系统
技术领域
本发明涉及图书自助借还系统,特别涉及一种基于人脸识别的图书自助借还系统。
背景技术
图书馆的日常管理工作包括盘点和上架,在馆藏量日渐增加的图书馆内,单纯靠人工操作的方法已经无法高效且准确地完成图书管理的工作,日常图书馆图书的借还量大,馆员逐本确认图书以及借阅者的过程繁琐。另外,在上架的过程中,杂乱无章的归还图书以及单一的书架布局经常会给馆员上架带来困扰,甚至导致图书位置的错放。如何快速且准确地对归还的大量图书进行记录,方便后续的借阅者尽早借到图书,一直是传统图书馆面临的难题。
发明内容
本发明提供一种基于人脸识别的图书自助借还系统,通过人脸识别技术,实现了图书借阅的自动化,简化了借阅流程,提高借阅者的借阅体验。
本发明提供一种基于人脸识别的图书自助借还系统,包括:
人脸扫描模块,用于获取人脸检测区域的热感应信息,当所述热感应信息满足感应条件时,扫描借阅者的人脸;
检测模块,用于接收借阅者输入的借阅认证信息,并根据借阅认证信息以及扫描信息,检测所述借阅者是否为本人;
处理模块,用于当所述借阅者为本人时,基于预设数据库输出借阅信息到所述借阅者的借阅端,同时,根据借阅者在预设平台的输入指令,确定对应图书的当前状态,并记录所述借阅者在所述预设平台对所述图书的借还操作。
在一种可能实现的方式中,
所述图书的当前状态的信息包括:图书的借阅情况、图书名称、被借阅人、存放位置,借阅者的信息包括:借阅者的身份信息、已借阅图书信息。
在一种可能实现的方式中,
所述借阅认证信息包括:借阅者的身份信息;所述扫描信息包括:包括借阅者的人脸在内的眨眼视频;
所述借还操作包括:借阅图书的数量、每本图书对应的借阅时长、归还时间。
在一种可能实现的方式中,
所述人体感应模块,包括:
第一感应单元,用于基于人脸检测区域的热感应信息,获得人脸检测区域的待检测信息;
第二感应单元,用于基于人脸检测区域的待检测信息,判断是否需要开启摄像头:
若待检测信息为有人,则控制摄像头开启,扫描借阅者的人脸;
若待检测信息为无人,则保持摄像头待机,不进行扫描;
第三感应单元:用于判断摄像头的控制情况:
若第二感应单元控制摄像头开启后,摄像头仍为待机状态,则进行报警。
在一种可能实现的方式中,
所述检测模块,包括:
检测单元,用于对人脸检测区域的图像数据分别进行放射划分和环状划分,获得若干子区域图像,并基于中心子区域图像的灰度值对若干子区域图像进行值域划分:将灰度值大于中心子区域灰度值的区域记为1,灰度值不大于中心子区域灰度值的区域记为0,从而获得人脸检测区域的图像的值域特征,并以预设分类器对人脸检测区域的图像的值域特征进行检测,获得人脸检测区域的图像的对称旋转性,并基于人脸检测区域的图像的对称旋转性判断所述图像数据是否包含人脸图像:
若人脸检测区域的图像具有对称旋转性,说明人脸检测区域的图像中包含人脸图像,则进行后续分析;
若人脸检测区域的图像不具有对称旋转性,说明人脸检测区域的图像不包含人脸图像,则不进行后续分析;
预处理单元,用于对所述人脸检测区域的图像进行分解,获得人脸检测区域的图像的子奇异值集合,并选取预设数量的奇异值进行图像重构,获得重构图像;
调整单元,用于对重构图像进行多级缩放,获得图像金字塔,并基于人脸检测区域的图像的对称旋转性获得重构图像的对称中心点,并基于对称中心点对图像金字塔进行调整,并对调整后的图像金字塔进行重合度检测,并对重合度超过预设阈值的图像金字塔进行合并处理,获得第一图像;
处理单元,用于对第一图像进行归一化处理,并调节处理后第一图像的色彩空间, 获得第二图像,将所述第二图像均匀分配为
Figure 604402DEST_PATH_IMAGE002
个单元块,获得单元块集合;
计算单元,用于对单元块集合进行扫描,并计算每一子单元块的像素梯度边缘方向,获得子梯度方向直方图,并将子梯度方向直方图数据化,获得子梯度方向直方图数据,并对子梯度方向直方图数据进行串联,获得所述第一图像的人脸特征;
检测单元,用于将所述第一图像的人脸特征与储存模块中借阅者的人脸特征进行匹配检测,从而获得人脸检测区域内借阅者的身份信息。
在一种可能实现的方式中,
所述处理模块,包括:
采集单元,用于采集待采集区域图书的标签信息,以及待采集区域的区域图像;
切割单元,用于对区域图像进行灰度化,并基于预设检测算法对区域图像进行检测,获得区域图像的平行线对,并基于平行线对拟合出图书分面的矩形轮廓,并基于预设规则对矩形轮廓进行刷选,获得封面轮廓,并基于封面轮廓对灰度化后的区域图像进行切割,获得图书封面图像,并对封面图像进行校正,获得校正后的图书封面图像;
提取单元,用于基于预设的纹理提取算法对校正后的图书封面图像进行纹理检测,获得封面图像的文本区域;
识别单元,用于对文本区域进行空隙检测,获得文本区域的空隙,并基于空隙对文本区域进行分割,获得子单一字符图像,并基于预设的识别算法,对子单一字符图像进行文字识别,从而获得待采集区域图书的名称,并基于标签信息,在数据库中进行检索,获得标签所对应的图书的信息;
若待采集区域图书的名称与待采集区域图书标签所对应的图书的信息一致,则不进行报警。
在一种可能实现的方式中,
所述处理模块还包括:
第一判别单元,用于当借阅者借阅图书时,根据待检测区域借阅者的身份信息,获得借阅者已借阅图书,并进行判别:
若借阅者已借阅图书达到预设数量上限,则关闭借阅功能,并提示借阅者借阅图书过多,无法继续借阅;
若借阅者已借阅图书时长达到预设时间上限,则关闭借阅功能,并提示借阅者借阅图书时间过长,无法继续借阅;
若借阅者已借阅图书的数量和时长均未达到上限,则将待采集区域图书借给借阅者;
第二判别单元,用于当借阅者归还图书时,判别采集区域图书是否可以归还:
若待采集区域图书的名称与标签所对应的图书名称不符,则关闭归还功能,并继续报警;
若待采集区域图书的名称与标签所对应的图书名称相符,则收取待采集区域的图书。
在一种可能实现的方式中,
所述处理模块,还用于基于第一判别单元以及第二判别单元的判别结果,对预设数据库进行数据更新。
在一种可能实现的方式中,
检测模块还包括:
活体扫描单元,用于提示人脸检测区域内的借阅者进行眨眼操作,获得借阅者的眨眼视频数据;
标记单元,用于在眨眼视频数据的每一帧画面中,标记眼睛的预设点位,获得子标记帧图像,并将子标记帧图像投影至预设坐标系,获得每一子标记帧图像中子预设点位的坐标;
计算单元:用于每一子标记帧图像中子预设点位的坐标,以及如下公式计算子标记帧图像中眼睛的纵值:
Figure 286050DEST_PATH_IMAGE003
其中,Y为子标记帧图像中眼睛的纵值,
Figure 460679DEST_PATH_IMAGE005
为眼睛第一预设点位到目标原点的向 量,
Figure 953103DEST_PATH_IMAGE007
为眼睛第二预设点位到目标原点的向量,
Figure 213183DEST_PATH_IMAGE009
为眼睛第三预设点位到目标原点的向 量,
Figure 557576DEST_PATH_IMAGE011
为眼睛第四预设点位到目标原点的向量,
Figure 462079DEST_PATH_IMAGE013
为眼睛第五预设点位到目标原点的向 量,
Figure 764884DEST_PATH_IMAGE015
为眼睛第六预设点位到目标原点的向量,公式中双数线表示向量作差之后各分量的 平方和的开根号;
所述计算单元还用于根据子标记帧图像中眼睛的纵值,以及如下公式,计算眨眼视频数据眼睛的纵差值:
Figure 371315DEST_PATH_IMAGE017
其中,H为眨眼视频数据眼睛的纵差值,K为眨眼视频数据所包含帧图像的总数,且 K>1,k为眨眼视频数据中帧图像的序号,k=1、2、3、...、K,
Figure 784978DEST_PATH_IMAGE019
为所述检测模块提示眨眼后借 阅者的反应时间,
Figure 278408DEST_PATH_IMAGE021
为借阅者的平均反应时间;y为眼睛的标准纵值;
判别单元,用于根据眨眼视频数据眼睛的纵差值与预设值的关系,判断待检测区域是否为本人:
若纵差值不小于预设值,则表明借阅者不是本人,关闭借阅和归还功能,并进行报警;
若纵差值小于预设值,则表明借阅者是本人,不进行报警。
在一种可能实现的方式中,
数据更新模块,用于所述借阅者还书后,对借阅者的本次借阅还书的满意度进行分析,包括:
信息采集单元,用于采集借阅者在归还图书过程中借阅者的面部情绪信息、行为数据信息;
信息分析单元,用于对所述面部情绪信息进行分析,确定所述借阅者的面部情绪,并基于预设的情绪数值对照表,确定所述借阅者的面部对应的情绪值;
并根据如下公式,计算所述借阅者对本次还书的满意度值;
Figure 752114DEST_PATH_IMAGE022
其中,Q表示所述借阅者对本次还书的满意度值,
Figure 347306DEST_PATH_IMAGE024
表示第一权重值,取值为[0.5, 0.7],
Figure 33502DEST_PATH_IMAGE026
表示第二权重值,取值为[0.5,0.7],
Figure 37230DEST_PATH_IMAGE028
表示所述借阅者在还书时的面部情绪值,
Figure 557205DEST_PATH_IMAGE030
表示所述借阅者在归还书的行为活跃度,取值为[0.3,0.9];
记录单元,用于根据所述满意度值,对所述图书进行评级,并进行记录。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种 基于人脸识别的图书自助借还系统的结构图;
图2为本发明实施例中人脸扫描模块的结构图;
图3为本发明实施例中检测模块的结构图;
图4为本发明实施例中处理模块的结构图;
图5为本发明实施例中处理模块的另一结构图;
图6为本发明实施例中检测模块的另一结构图;
图7为本发明实施例中数据更新模块的结构图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
实施例1:
本发明实施例提供一种基于人脸识别的图书自助借还系统,如图1所示包括:
人脸扫描模块,用于获取人脸检测区域的热感应信息,当所述热感应信息满足感应条件时,扫描借阅者的人脸;
检测模块,用于接收借阅者输入的借阅认证信息,并根据借阅认证信息以及扫描信息,检测所述借阅者是否为本人;
处理模块,用于当所述借阅者为本人时,基于预设数据库输出借阅信息到所述借阅者的借阅端,同时,根据借阅者在预设平台的输入指令,确定对应图书的当前状态,并记录所述借阅者在所述预设平台对所述图书的借还操作。
在该实施例中,人脸检测区域为摄像头的拍摄范围。
在该实施例中,热感应信息为人体感应模块所感应的人脸检测区域的热辐射信息。
该实施例中,输入指令指的是借阅者输入的搜索信息,比如,图书名称对应的归还地点,或者图书名称对应的借书地点等。
上述方案的工作原理和有益效果为:通过人体感应模块检测是否有借阅者进入图书借还区域,并通过人脸识别模块,识别借阅者的身份信息,通过图书识别模块,识别所借还图书的图书信息,通过判别模块判别借阅者是否可以继续借阅以及图书是否可以被归还,通过数据更新模块对存储模块进行数据更新,并通过报警模块检测是否有未借阅书籍被带出图书馆,通过活体检测模块检测借阅者的人脸图像是否为本人,防止有借阅者用其他借阅者的照片进行借阅,也有效防止了图书的丢失,简化了图书借阅程序,降低了图书馆的管理难度。
实施例2:
基于实施例1的基础上,所述的一种基于人脸识别的图书自助借还系统,其特征在于所述借阅认证信息包括:借阅者的身份信息;
所述扫描信息包括:包括借阅者的人脸在内的眨眼视频;
所述借还操作包括:借阅图书的数量、每本图书对应的借阅时长、归还时间。
上述方案的有益效果为:通过识别借阅图书的数量、每本图书对应的借阅时长、归还时间以及借阅者的身份信息,提高了图书馆对图书的掌控程度,使得管理更加方便。
实施例3:
基于实施例1的基础上,所述人脸扫描模块如图2所示,包括:
第一感应单元,用于基于人脸检测区域的热感应信息,获得预设区域的待检测信息;
第二感应单元,用于基于人脸检测区域的待检测信息,判断是否需要开启摄像头:
若待检测信息为有人,则控制摄像头开启,扫描借阅者的人脸;
若待检测信息为无人,则保持摄像头待机,不进行扫描;
第三感应单元,用于判断摄像头的控制情况:
若第二感应单元控制摄像头开启后,摄像头仍为待机状态,则进行报警。
上述方案的有益效果为:通过根据人脸检测区域是否有借阅者,来控制摄像头的开关,避免摄像头拍摄大量无用信息,为后续的检测环节减轻了工作量。
实施例4:
基于实施例1的基础上,所述检测模块如图3所示,包括:
扫描单元,用于扫描人脸检测区域的图像;
检测单元,用于对人脸检测区域的图像数据分别进行放射划分和环状划分,获得若干子区域图像,并基于中心子区域图像的灰度值对剩余若干子区域图像进行值域划分:将灰度值大于中心子区域灰度值的区域记为1,灰度值不大于中心子区域灰度值的区域记为0,从而获得人脸检测区域的图像的值域特征,并以预设分类器对人脸检测区域的图像的值域特征进行检测,获得人脸检测区域的图像的对称旋转性,并基于人脸检测区域的图像的对称旋转性判断所述图像数据是否包含人脸图像:
若人脸检测区域的图像具有对称旋转性,说明人脸检测区域的图像中包含人脸图像,则进行后续分析;
若人脸检测区域的图像不具有对称旋转性,说明人脸检测区域的图像不包含人脸图像,则不进行后续分析;
预处理单元,用于对所述人脸检测区域的图像进行分解,获得人脸检测区域的图像的子奇异值集合,并选取预设数量的奇异值进行图像重构,获得重构图像;
调整单元,用于对重构图像进行多级缩放,获得图像金字塔,并基于人脸检测区域的图像的对称旋转性获得重构图像的对称中心点,并基于对称中心点对图像金字塔进行调整,并对调整后的图像金字塔进行重合度检测,并对重合度超过预设阈值的图像金字塔进行合并处理,获得第一图像;
处理单元,用于对第一图像进行归一化处理,并调节处理后第一图像的色彩空间, 获得第二图像,将所述第二图像均匀分配为
Figure 13594DEST_PATH_IMAGE031
个单元块,获得单元块集合;
计算单元,用于对单元块集合进行扫描,并计算每一子单元块的像素梯度边缘方向,获得子梯度方向直方图,并将子梯度方向直方图数据化,获得子梯度方向直方图数据,并对子梯度方向直方图数据进行串联,获得所述第一图像的人脸特征;
检测单元,用于将所述第一图像的人脸特征与储存模块中借阅者的人脸特征进行匹配检测,从而获得人脸检测区域内借阅者的身份信息。
在本实施例中,奇异值为将人脸图像数据转化为矩阵,求得矩阵的分解矩阵,将分解矩阵对角线是的元素由大到小排列,获得元素集作为人脸图像数据的奇异值。
在本实施例中,预设数量为25。
在本实施例中,图像金字塔为不同比例的重构图像叠加在一起得到的叠加图像。
在本实施例中,归一化处理为对第一图像进行灰度化处理。
在本实施例中,调节色彩空间为用伽马校正法使处理后第一图像的色彩空间规范化。
在本实施例中,像素梯度边缘方向包括纵方向和横方向,对图像进行梯度计算之前,从横纵坐标两个方向进行梯度计算。
上述方案的工作原理及其有益效果为:通过设置人脸识别模块,扫描待检测区域借阅者的人脸图像数据,并进行预处理、调整、处理、计算、检测,获得待检测区域借阅者的身份信息,为后续判别单元判别是否开启借阅功能提供了判断依据。
实施例5:
基于实施例1的基础上,所述处理模块如图4所示,还包括:
采集单元,用于采集待采集区域图书的标签信息,以及待采集区域的区域图像;
切割单元,用于对区域图像进行灰度化,并基于预设检测算法对区域图像进行检测,获得区域图像的平行线对,并基于平行线对拟合出图书分面的矩形轮廓,并基于预设规则对矩形轮廓进行刷选,获得封面轮廓,并基于封面轮廓对灰度化后的区域图像进行切割,获得图书封面图像,并对封面图像进行校正,获得校正后的图书封面图像;
提取单元,用于基于预设的纹理提取算法对校正后的图书封面图像进行纹理检测,获得封面图像的文本区域;
识别单元,用于对文本区域进行空隙检测,获得文本区域的空隙,并基于空隙对文本区域进行分割,获得子单一字符图像,并基于预设的识别算法,对子单一字符图像进行文字识别,从而获得待采集区域图书的名称,并基于标签信息,在数据库中进行检索,获得标签所对应的图书的信息;
若待采集区域图书的名称与待采集区域图书标签所对应的图书的信息一致,则不进行报警。
在本实施例中,平行线对为区域图像平行的两条线段;
在本实施例中,纹理检测为对校正后的图书封面图像进行以边缘和角点为特征点的检测,获得文本区域。
在本实施例中,标签信息为图书中附带的IC卡的信息;
在本实施例中,空隙检测为检测文本区域的空白部分。
在本实施例中,预设的识别算法为字体匹配算法。
上述方案的工作原理及其有益效果为:通过设置图书识别模块,采集待采集区域图书的标签信息,并进行切割、提取、识别,获得标签所对应的图书的信息以及待采集区域图书的名称,并根据两者是否一致进行报警,保证了标签与图书的对应统一。
实施例6:
基于实施例1的基础上,所述处理模块如图5所示还包括:
第一判别单元,用于当借阅者借阅图书时,根据待检测区域借阅者的身份信息,获得借阅者已借阅图书,并进行判别:
若借阅者已借阅图书达到预设数量上限,则关闭借阅功能,并提示借阅者借阅图书过多,无法继续借阅;
若借阅者已借阅图书时长达到预设时间上限,则关闭借阅功能,并提示借阅者借阅图书时间过长,无法继续借阅;
若借阅者已借阅图书的数量和时长均未达到上限,则将待采集区域图书借给借阅者;
第二判别单元,用于当借阅者归还图书时,判别采集区域图书是否可以归还:
若待采集区域图书的名称与标签所对应的图书名称不符,则关闭归还功能,并继续报警;
若待采集区域图书的名称与标签所对应的图书名称相符,则收取待采集区域的图书。
上述方案的工作原理及其有益效果为:通过判断借阅者已借阅图书和采集区域图书是否可以归还,限制借阅者同时借阅预设数量图书,可以督促借阅者将之前借阅的图书进行归还,也有效限制了偷换图书的行为。
实施例7:
基于实施例6的基础上,处理模块,还用于基于第一判别单元以及第二判别单元的判别结果,对预设数据库进行数据更新。
上述方案的有益效果为:通过更新数据库,提升了图书馆对图书的管理程度,也为后续报警单元提供了必要的前提条件。
实施例8:
基于实施例1的基础上,所述检测模块如图7所示包括:
活体扫描单元:用于提示待检测区域借阅者进行眨眼操作,获得借阅者的眨眼视频数据;
标记单元,用于在眨眼视频数据的每一帧画面中,标记眼睛的预设点位,获得子标记帧图像,并将子标记帧图像投影至预设坐标系,获得每一子标记帧图像中子预设点位的坐标;
计算单元:用于每一子标记帧图像中子预设点位的坐标,以及如下公式计算子标记帧图像中眼睛的纵值:
Figure 628115DEST_PATH_IMAGE032
其中,Y为子标记帧图像中眼睛的纵值,
Figure 220770DEST_PATH_IMAGE034
为眼睛第一预设点位到目标原点的向 量,
Figure 911646DEST_PATH_IMAGE036
为眼睛第二预设点位到目标原点的向量,
Figure 855331DEST_PATH_IMAGE038
为眼睛第三预设点位到目标原点的向 量,
Figure 40587DEST_PATH_IMAGE040
为眼睛第四预设点位到目标原点的向量,
Figure 487749DEST_PATH_IMAGE042
为眼睛第五预设点位到目标原点的向 量,
Figure 208580DEST_PATH_IMAGE015
为眼睛第六预设点位到目标原点的向量,公式中双数线表示向量作差之后各分量的 平方和的开根号;
所述计算单元还用于根据子标记帧图像中眼睛的纵值,以及如下公式,计算眨眼视频数据眼睛的纵差值:
Figure 514927DEST_PATH_IMAGE044
其中,H为眨眼视频数据眼睛的纵差值,K为眨眼视频数据所包含帧图像的总数,且 K>1,k为眨眼视频数据中帧图像的序号,k=1、2、3、...、K,
Figure DEST_PATH_IMAGE046
为所述检测模块提示眨眼后借 阅者的反应时间,
Figure DEST_PATH_IMAGE048
为借阅者的平均反应时间;y为眼睛的标准纵值;
判别单元,用于根据眨眼视频数据眼睛的纵差值与预设值的关系,判断待检测区域是否为本人:
若纵差值不小于预设值,则表明借阅者不是本人,关闭借阅和归还功能,并进行报警;
若纵差值小于预设值,则表明借阅者是本人,不进行报警。
该实施例中,预设点位是包括6个子预设点位在内的;
该实施例中,第一预设点位、第二预设点位、第三预设点位分别位于用户上眼皮左、中、右三个位置,第四预设点位、第五预设点位、第六预设点位分别位于用户下眼皮左、中、右三个位置。
上述方案的工作原理及其有益效果为:通过设置活体检测模块,在眨眼视频数据的每一帧画面中,标记眼睛的预设点位,计算眨眼视频数据眼睛的纵横差值,并根据纵横差值与预设值的关系,判别视频中是否为本人,防止有借阅者利用别人的照片进行借阅,提高了图书馆的安全性。
实施例9
基于实施例1的基础上,所述数据更新模块如图7所示包括:
数据更新模块,用于所述借阅者还书后,对借阅者的本次借阅还书的满意度进行分析,包括:
信息采集单元,用于采集借阅者在归还图书过程中借阅者的面部情绪信息、行为数据信息;
信息分析单元,用于对所述面部情绪信息进行分析,确定所述借阅者的面部情绪,并基于预设的情绪数值对照表,确定所述借阅者的面部对应的情绪值;
并根据如下公式,计算所述借阅者对本次还书的满意度值;
Figure DEST_PATH_IMAGE049
其中,Q表示所述借阅者对本次还书的满意度值,
Figure DEST_PATH_IMAGE051
表示第一权重值,取值为 [0.5,0.7],
Figure DEST_PATH_IMAGE053
表示第二权重值,取值为[0.5,0.7],
Figure DEST_PATH_IMAGE055
表示所述借阅者在还书时的面部情 绪值,
Figure DEST_PATH_IMAGE057
表示所述借阅者在归还书的行为活跃度,取值为[0.3,0.9];
记录单元,用于根据所述满意度值,对所述图书进行评级,并进行记录。
上述方案的工作原理及其有益效果为:通过设置数据更新模块,采集借阅者在归还图书过程中借阅者的面部情绪信息、行为数据信息,并通过计算活动用户对本次还书的满意度值,从而获得该书籍的受欢迎程度,方便图书馆对书的受欢迎程度进行分级。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (8)

1.一种 基于人脸识别的图书自助借还系统,其特征在于,包括:
人脸扫描模块,用于获取人脸检测区域的热感应信息,当所述热感应信息满足感应条件时,扫描借阅者的人脸;
检测模块,用于接收借阅者输入的借阅认证信息,并根据借阅认证信息以及扫描信息,检测所述借阅者是否为本人;
处理模块,用于当所述借阅者为本人时,基于预设数据库输出借阅信息到所述借阅者的借阅端,同时,根据借阅者在预设平台的输入指令,确定对应图书的当前状态,并记录所述借阅者在所述预设平台对所述图书的借还操作;
所述检测模块,还包括:
活体扫描单元,用于提示人脸检测区域内的借阅者进行眨眼操作,获得借阅者的眨眼视频数据;
标记单元,用于在眨眼视频数据的每一帧画面中,标记眼睛的预设点位,获得子标记帧图像,并将子标记帧图像投影至预设坐标系,获得每一子标记帧图像中子预设点位的坐标;
计算单元:用于每一子标记帧图像中子预设点位的坐标,以及如下公式计算子标记帧图像中眼睛的纵值:
Figure 618282DEST_PATH_IMAGE002
其中,Y为子标记帧图像中眼睛的纵值,
Figure 630363DEST_PATH_IMAGE004
为眼睛第一预设点位到目标原点的向量,
Figure 878942DEST_PATH_IMAGE006
为眼睛第二预设点位到目标原点的向量,
Figure 8572DEST_PATH_IMAGE008
为眼睛第三预设点位到目标原点的向量,
Figure 416419DEST_PATH_IMAGE010
为眼睛第四预设点位到目标原点的向量,
Figure 707723DEST_PATH_IMAGE012
为眼睛第五预设点位到目标原点的向量,
Figure 568232DEST_PATH_IMAGE014
为眼睛第六预设点位到目标原点的向量,公式中双数线表示向量作差之后各分量的平方和 的开根号;
所述计算单元还用于根据子标记帧图像中眼睛的纵值,以及如下公式,计算眨眼视频数据眼睛的纵差值:
Figure 235974DEST_PATH_IMAGE016
其中,H为眨眼视频数据眼睛的纵差值,K为眨眼视频数据所包含帧图像的总数,且K> 1,k为眨眼视频数据中帧图像的序号,k=1、2、3、...、K,
Figure 763907DEST_PATH_IMAGE018
为所述检测模块提示眨眼后借阅 者的反应时间,
Figure 226112DEST_PATH_IMAGE020
为借阅者的平均反应时间;y为眼睛的标准纵值;
判别单元,用于根据眨眼视频数据眼睛的纵差值与预设值的关系,判断待检测区域是否为本人:
若纵差值不小于预设值,则表明借阅者不是本人,关闭借阅和归还功能,并进行报警;
若纵差值小于预设值,则表明借阅者是本人,不进行报警。
2.根据权利要求1所述的一种 基于人脸识别的图书自助借还系统,其特征在于,所述借阅认证信息包括:借阅者的身份信息;
所述扫描信息包括:包括借阅者的人脸在内的眨眼视频;
所述借还操作包括:借阅图书的数量、每本图书对应的借阅时长、归还时间。
3.根据权利要求1所述的一种 基于人脸识别的图书自助借还系统,其特征在于,所述人脸扫描模块,包括:
第一感应单元,用于基于人脸检测区域的热感应信息,获得人脸检测区域的待检测信息;
第二感应单元,用于基于人脸检测区域的待检测信息,判断是否需要开启摄像头:
若待检测信息为有人,则控制摄像头开启,扫描借阅者的人脸;
若待检测信息为无人,则保持摄像头待机,不进行扫描;
第三感应单元,用于判断摄像头的控制情况:
若第二感应单元控制摄像头开启后,摄像头仍为待机状态,则进行报警。
4.根据权利要求1所述的一种基于人脸识别的图书自助借还系统,其特征在于,所述检测模块包括:
扫描单元,用于扫描人脸检测区域的图像;
检测单元,用于对人脸检测区域的图像数据分别进行放射划分和环状划分,获得若干子区域图像,并基于中心子区域图像的灰度值对剩余若干子区域图像进行值域划分:将灰度值大于中心子区域灰度值的区域记为1,灰度值不大于中心子区域灰度值的区域记为0,从而获得人脸检测区域的图像的值域特征,并以预设分类器对人脸检测区域的图像的值域特征进行检测,获得人脸检测区域的图像的对称旋转性,并基于人脸检测区域的图像的对称旋转性判断所述图像数据是否包含人脸图像:
若人脸检测区域的图像具有对称旋转性,说明人脸检测区域的图像中包含人脸图像,则进行后续分析;
若人脸检测区域的图像不具有对称旋转性,说明人脸检测区域的图像不包含人脸图像,则不进行后续分析;
预处理单元,用于对所述人脸检测区域的图像进行分解,获得人脸检测区域的图像的子奇异值集合,并选取预设数量的奇异值进行图像重构,获得重构图像;
调整单元,用于对重构图像进行多级缩放,获得图像金字塔,并基于人脸检测区域的图像的对称旋转性获得重构图像的对称中心点,并基于对称中心点对图像金字塔进行调整,并对调整后的图像金字塔进行重合度检测,并对重合度超过预设阈值的图像金字塔进行合并处理,获得第一图像;
处理单元,用于对第一图像进行归一化处理,并调节处理后第一图像的色彩空间,获得 第二图像,将所述第二图像均匀分配为
Figure 714863DEST_PATH_IMAGE022
个单元块,获得单元块集合;
计算单元,用于对单元块集合进行扫描,并计算每一子单元块的像素梯度边缘方向,获得子梯度方向直方图,并将子梯度方向直方图数据化,获得子梯度方向直方图数据,并对子梯度方向直方图数据进行串联,获得所述第一图像的人脸特征;
检测单元,用于将所述第一图像的人脸特征与储存模块中借阅者的人脸特征进行匹配检测,从而获得人脸检测区域内借阅者的身份信息。
5.根据权利要求1所述的一种 基于人脸识别的图书自助借还系统,其特征在于,所述处理模块包括:
采集单元,用于采集待采集区域图书的标签信息,以及待采集区域的区域图像;
切割单元,用于对区域图像进行灰度化,并基于预设检测算法对区域图像进行检测,获得区域图像的平行线对,并基于平行线对拟合出图书分面的矩形轮廓,并基于预设规则对矩形轮廓进行刷选,获得封面轮廓,并基于封面轮廓对灰度化后的区域图像进行切割,获得图书封面图像,并对封面图像进行校正,获得校正后的图书封面图像;
提取单元,用于基于预设的纹理提取算法对校正后的图书封面图像进行纹理检测,获得封面图像的文本区域;
识别单元,用于对文本区域进行空隙检测,获得文本区域的空隙,并基于空隙对文本区域进行分割,获得子单一字符图像,并基于预设的识别算法,对子单一字符图像进行文字识别,从而获得待采集区域图书的名称,并基于标签信息,在数据库中进行检索,获得标签所对应的图书的信息;
若待采集区域图书的名称与待采集区域图书标签所对应的图书的信息一致,则不进行报警。
6.根据权利要求1所述的一种基于人脸识别的图书自助借还系统,其特征在于,所述处理模块还包括:
第一判别单元,用于当借阅者借阅图书时,根据待检测区域借阅者的身份信息,获得借阅者已借阅图书,并进行判别:
若借阅者已借阅图书达到预设数量上限,则关闭借阅功能,并提示借阅者借阅图书过多,无法继续借阅;
若借阅者已借阅图书时长达到预设时间上限,则关闭借阅功能,并提示借阅者借阅图书时间过长,无法继续借阅;
若借阅者已借阅图书的数量和时长均未达到上限,则将待采集区域图书借给借阅者;
第二判别单元,用于当借阅者归还图书时,判别采集区域图书是否可以归还:
若待采集区域图书的名称与标签所对应的图书名称不符,则关闭归还功能,并继续报警;
若待采集区域图书的名称与标签所对应的图书名称相符,则收取待采集区域的图书。
7.根据权利要求6所述的一种 基于人脸识别的图书自助借还系统,其特征在于,所述处理模块,还用于基于第一判别单元以及第二判别单元的判别结果,对预设数据库进行数据更新。
8.根据权利要求1所述的一种 基于人脸识别的图书自助借还系统,其特征在于,数据更新模块,用于所述借阅者还书后,对借阅者的本次借阅还书的满意度进行分析,包括:
信息采集单元,用于采集借阅者在归还图书过程中借阅者的面部情绪信息、行为数据信息;
信息分析单元,用于对所述面部情绪信息进行分析,确定所述借阅者的面部情绪,并基于预设的情绪数值对照表,确定所述借阅者的面部对应的情绪值;
并根据如下公式,计算所述借阅者对本次还书的满意度值;
Figure DEST_PATH_IMAGE023
其中,Q表示所述借阅者对本次还书的满意度值,
Figure DEST_PATH_IMAGE025
表示第一权重值,取值为[0.5, 0.7],
Figure 597413DEST_PATH_IMAGE026
表示第二权重值,取值为[0.5,0.7],
Figure 589640DEST_PATH_IMAGE028
表示所述借阅者在还书时的面部情绪值,
Figure 878538DEST_PATH_IMAGE030
表示所述借阅者在归还书的行为活跃度,取值为[0.3,0.9];
记录单元,用于根据所述满意度值,对所述图书进行评级,并进行记录。
CN202110511148.1A 2021-05-11 2021-05-11 一种基于人脸识别的图书自助借还系统 Active CN113345177B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110511148.1A CN113345177B (zh) 2021-05-11 2021-05-11 一种基于人脸识别的图书自助借还系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110511148.1A CN113345177B (zh) 2021-05-11 2021-05-11 一种基于人脸识别的图书自助借还系统

Publications (2)

Publication Number Publication Date
CN113345177A CN113345177A (zh) 2021-09-03
CN113345177B true CN113345177B (zh) 2022-01-18

Family

ID=77470759

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110511148.1A Active CN113345177B (zh) 2021-05-11 2021-05-11 一种基于人脸识别的图书自助借还系统

Country Status (1)

Country Link
CN (1) CN113345177B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114898511A (zh) * 2022-04-21 2022-08-12 厦门印天电子科技有限公司 图书借阅方法、系统、终端设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205486530U (zh) * 2016-02-19 2016-08-17 山东协和学院 一种人脸识别图书借还系统
CN207182520U (zh) * 2017-09-18 2018-04-03 大连交通大学 图书馆自助借阅书架
CN108875616A (zh) * 2018-06-07 2018-11-23 广东数相智能科技有限公司 一种图书乱架检测方法、电子设备及存储介质
CN109801096A (zh) * 2018-12-14 2019-05-24 中国科学院深圳先进技术研究院 一种多模态客户满意度综合评价系统、方法
CN110033570A (zh) * 2019-04-22 2019-07-19 海口一纬科技有限公司 图书馆智能借还机
KR102241406B1 (ko) * 2020-07-27 2021-04-16 씨엠아이텍주식회사 얼굴 인증 장치 및 얼굴 인증 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105632104B (zh) * 2016-03-18 2019-03-01 内蒙古大学 一种疲劳驾驶检测系统和方法
CN107992845A (zh) * 2017-12-14 2018-05-04 广东工业大学 一种面部识别辨伪方法及装置、计算机设备
CN109840565A (zh) * 2019-01-31 2019-06-04 成都大学 一种基于眼部轮廓特征点纵横比的眨眼检测方法
CN110705454A (zh) * 2019-09-29 2020-01-17 东华大学 一种具有活体检测功能的人脸识别方法
CN111210510B (zh) * 2020-01-16 2021-08-06 腾讯科技(深圳)有限公司 三维人脸模型生成方法、装置、计算机设备及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205486530U (zh) * 2016-02-19 2016-08-17 山东协和学院 一种人脸识别图书借还系统
CN207182520U (zh) * 2017-09-18 2018-04-03 大连交通大学 图书馆自助借阅书架
CN108875616A (zh) * 2018-06-07 2018-11-23 广东数相智能科技有限公司 一种图书乱架检测方法、电子设备及存储介质
CN109801096A (zh) * 2018-12-14 2019-05-24 中国科学院深圳先进技术研究院 一种多模态客户满意度综合评价系统、方法
CN110033570A (zh) * 2019-04-22 2019-07-19 海口一纬科技有限公司 图书馆智能借还机
KR102241406B1 (ko) * 2020-07-27 2021-04-16 씨엠아이텍주식회사 얼굴 인증 장치 및 얼굴 인증 방법

Also Published As

Publication number Publication date
CN113345177A (zh) 2021-09-03

Similar Documents

Publication Publication Date Title
CN105956578B (zh) 一种基于身份证件信息的人脸验证方法
CN104732601B (zh) 一种基于人脸识别技术的高识别率自动考勤装置及方法
CN108985134B (zh) 基于双目摄像机的人脸活体检测及刷脸交易方法及系统
CN104143086B (zh) 人像比对在移动终端操作系统上的应用方法
CN107423690A (zh) 一种人脸识别方法及装置
CN105740780B (zh) 人脸活体检测的方法和装置
Sohail et al. Detection of facial feature points using anthropometric face model
CN105740779B (zh) 人脸活体检测的方法和装置
CN106709450A (zh) 一种指纹图像识别方法及系统
CN108229330A (zh) 人脸融合识别方法及装置、电子设备和存储介质
JP6351243B2 (ja) 画像処理装置、画像処理方法
CN108171138B (zh) 一种生物特征信息获取方法和装置
CN107480586B (zh) 基于人脸特征点位移的生物识别照片仿冒攻击检测方法
CN113168680A (zh) 状态判定装置、状态判定方法以及状态判定程序
CN106778636A (zh) 身份验证方法及装置
CN109359577A (zh) 一种基于机器学习的复杂背景下人数检测系统
CN106874877A (zh) 一种结合局部和全局特征的无约束人脸验证方法
CN111178130A (zh) 一种基于深度学习的人脸识别方法、系统和可读存储介质
CN106570447A (zh) 基于灰度直方图匹配的人脸照片太阳镜自动去除方法
CN113345177B (zh) 一种基于人脸识别的图书自助借还系统
JP2015197708A (ja) オブジェクト識別装置、オブジェクト識別方法及びプログラム
JP2007048172A (ja) 情報分類装置
CN112613471B (zh) 人脸活体检测方法、装置及计算机可读存储介质
CN108288040A (zh) 基于面部轮廓的多参数人脸识别系统
CN106980818B (zh) 一种用于人脸图像的个性化预处理方法、系统及其终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant