CN106780929A - 基于面部识别与手写文字识别的自助排队机 - Google Patents

基于面部识别与手写文字识别的自助排队机 Download PDF

Info

Publication number
CN106780929A
CN106780929A CN201611161380.2A CN201611161380A CN106780929A CN 106780929 A CN106780929 A CN 106780929A CN 201611161380 A CN201611161380 A CN 201611161380A CN 106780929 A CN106780929 A CN 106780929A
Authority
CN
China
Prior art keywords
module
self
main frame
face recognition
service queue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611161380.2A
Other languages
English (en)
Inventor
刘洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gaoge Tianjin Information Technology Development Co ltd
Original Assignee
Gaoge Tianjin Information Technology Development Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gaoge Tianjin Information Technology Development Co ltd filed Critical Gaoge Tianjin Information Technology Development Co ltd
Priority to CN201611161380.2A priority Critical patent/CN106780929A/zh
Publication of CN106780929A publication Critical patent/CN106780929A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C11/00Arrangements, systems or apparatus for checking, e.g. the occurrence of a condition, not provided for elsewhere
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/30Writer recognition; Reading and verifying signatures
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C11/00Arrangements, systems or apparatus for checking, e.g. the occurrence of a condition, not provided for elsewhere
    • G07C2011/04Arrangements, systems or apparatus for checking, e.g. the occurrence of a condition, not provided for elsewhere related to queuing systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Collating Specific Patterns (AREA)

Abstract

一种基于面部识别与手写文字识别的自助排队机,包括主机、照片拍摄模块、材料拍摄模块、人机交互模块、手写签名模块、指纹采集模块、照明模块、打印机和数据库设备;所述主机与照片拍摄模块、材料拍摄模块、人机交互模块、手写签名模块、指纹采集模块、照明模块、打印机和数据库设备分别连接。将申请信息采集、申请材料拍摄、证件照片拍摄、照片质量检测、领取排队号五个环节整合在一起,解决多环节的多次排队问题;并进行无纸化采集;同时降低了采集受理信息工作量,提高受理工作的效率。

Description

基于面部识别与手写文字识别的自助排队机
技术领域
本专利涉及行政审批的技术领域,具体说是一种基于面部识别与手写文字识别的自助排队机。
背景技术
公民在生活中经常需要办理各类行政审批申请手续,包括办理护照、往来港澳通行证、往来台湾通行证、居民身份证、驾驶证等各类证件,以及办理罚款缴纳、驾驶证扣分等手续,在这些业务申请时往往需要申请人本人到现场、提供照片、填写申请表、提交身份证、户口本等复印件,甚至还需要采集指纹和手写签名。传统的业务办理流程往往采用人工方式,设置多个业务处理环节,不但需要申请人往返在多个窗口,还需要安排专业服务人员协助和指导,整个办理过程繁琐、低效。
在申请材料提交环节,需要申请人复印身份证、户口本等纸质材料,还需要申请人填写申请表格。经常出现由于申请人不了解材料要求,提交的复印件格式、内容等不合要求,需要重新复印的情况,另外在申请人填写申请表时,同样很难做到字迹工整、准确无误,重新填表的情况亦常发生,浪费了申请人和受理人员的时间。同时,在业务处理过程中的各个环节,大量的纸质材料流转时常发生差错,甚至出现材料丢失的情况,随着申请量的增加,也增加了材料的存储成本。
在照片拍摄环节,由于公安部对证件照片具有严格要求,需要在该环节安排专业人员进行拍摄。但由于证件照拍摄现场的照明、摄影器材、背景等环境不尽相同,拍摄人员的技术水平参差不齐,拍摄后的手工裁切照片的尺寸也存在着较大误差,经常导致照片质量不满足公安部要求,不但延误居民申请,浪费了申请人的时间和精力,而且也增加了拍摄的人工成本。
在业务受理环节,数量有限的现场窗口服务人员和逐年递增的申请人之间存在着不平衡,尤其是在节假日和旅游旺季期间,办事人员拥堵办理现场,排队时间过长的情况经常出现,其原因是因为受理人员需要大量录入申请人身份信息、申请信息等内容,造成受理时长较多,效率不高。
发明内容
本专利要解决的技术问题是提供一种基于面部识别与手写文字识别的自助排队机。
本专利为解决公知技术中存在的技术问题所采取的技术方案是:
本专利的基于面部识别与手写文字识别的自助排队机,包括主机、照片拍摄模块、材料拍摄模块、人机交互模块、手写签名模块、指纹采集模块、照明模块、打印机和数据库设备;其中主机与照片拍摄模块、材料拍摄模块、人机交互模块、手写签名模块、指纹采集模块、照明模块、打印机和数据库设备分别连接。
本专利还可以采用以下技术措施:
照片拍摄模块中又包括摄像头模块和位移控制模块,摄像头模块与位移控制模块相连接。
材料拍摄模块包括身份证识别模块和高清拍摄模块。
照明模块通过继电器模块与主机相连接。
人机交互模块包括与主机相连接的主操作屏和辅助操作屏。
还包括与主机相连接的广告屏。
本专利具有的优点和积极效果是:
本专利的基于面部识别与手写文字识别的自助排队机中,通过读取第二代身份证验证申请人身份后,将申请信息采集、申请材料拍摄、证件照片拍摄、照片质量检测、领取排队号五个环节整合在一起,解决多环节的多次排队问题;通过文件拍摄方式,将申请材料进行无纸化采集,解决纸张材料不易流转、存储的问题,提高效率,解决成本;通过跟踪申请人面部位置,自动移动相机到最佳拍摄位置,自动拍摄、自动裁剪、自动质检,解决人工拍摄照片的质量不高的问题;通过申请人自助录入申请信息的方式,降低受理人的受理环节信息采集工作量,将受理人的精力更多的投入到材料审核的工作方面,并提高受理工作的效率。
附图说明
图1是本专利的基于面部识别与手写文字识别的自助排队机的架构示意图。
具体实施方式
以下通过附图和具体实施例对本专利的技术方案进行详细说明。
如图1所示,本专利的基于面部识别与手写文字识别的自助排队机,包括主机、照片拍摄模块、材料拍摄模块、人机交互模块、手写签名模块、指纹采集模块、照明模块、打印机和数据库设备;其中主机与照片拍摄模块、材料拍摄模块、人机交互模块、手写签名模块、指纹采集模块、照明模块、打印机和数据库设备分别连接。
照片拍摄模块中又包括摄像头模块和位移控制模块,摄像头模块与位移控制模块相连接。位移控制模块由主机控制进行位移,并带动摄像头模块同时移动,使摄像头模块到达预定拍摄位置。
材料拍摄模块包括身份证识别模块和高清拍摄模块。申请人通过身份证识别模块进行身份录入,主机通过身份证识别模块获取申请人的基本身份信息并进行验证。高清拍摄模块对申请人提供的各证明材料进行拍摄,获得数字格式的对应图像,并将各图像传输至主机。
照明模块通过继电器模块与主机相连接。主机通过继电器模块控制照明模块工作,以保证照片拍摄时的环境亮度。
人机交互模块包括与主机相连接的主操作屏和辅助操作屏,主操作屏和辅助操作屏都能够完成对申请步骤的具体操作。
还包括与主机相连接的广告屏。广告屏能够对外显示各种信息,或者对本自助服务一体机的使用方法进行说明和演示,
本专利的基于面部识别与手写文字识别的自助排队机在使用时,包括以下步骤:
A、申请人通过人机交互模块开始进入自助服务;
B、身份证识别模块对申请人的身份证芯片进行信息读取,记录身份证号作为申请人的身份10,调取公安部人口查询接口,核实身份信息,以确保身份信息的准确性,并以该身份10作为申请人的索引,在后续的申请材料拍摄、证件照采集以及领取排队号的依据,从而解决了传统的多个窗口的操作中,难以进行业务数据整合的问题,将多窗口服务改为了“一站式”,解决了申请人申请过程中的多次排队的问题;
C、通过高清拍摄模块对申请人的身份证、户口本、单位派出函等各种申请材料进行拍摄,解决了传统模式下申请人需复印纸质材料的问题,实现了无纸化,拍摄的图像传输至主机,主机对各图像进行识别处理,判断各图片所对应的材料类型并关联于申请人的身份10;主机对高清拍摄模块采集到的证明材料图像进行边缘检测,去除材料以外的图像部分,仅保留材料本身的图像,检测图像的尺寸,由于身份证、户口本和单位派出函等各种证明材料的尺寸并不相同,根据获得的图像尺寸就能够识别出图像对应的证明材料类型;然后对图像进行OCR字识别,多次旋转图像并对应进行多次识别,判断图像中的特定文字,如是否存在“居民身份证”,“户口本”,“证明信”,“派出函”等关键字样,从而进一步判断图像所对应材料的类型;
D、主机通过继电器模块控制照明模块工作,照片拍摄模块对申请人进行证件照采集,将采集到的证件照与身份10相对应;证件照采集包括以下步骤:照明模块工作,使环境达到拍摄亮度;摄像头模块对申请人预拍摄一副影像,进行人脸检测,初步识别人脸的位置,主机计算人脸坐标与图像中央区域坐标的偏差值,根据相机移动距离和拍摄画面的像素偏移关系计算出相机移动的距离,控制位移控制模块带动摄像头模块位移,使申请人的人脸坐标移动至图像中央区域;拍摄第二幅影像,再次进行人脸检测,计算人脸坐标与图像中央区域坐标的偏差值,计算两次拍摄对应的偏差值之间的偏差,根据偏差逆向推导出新的相机移动距离和拍摄画面间的像素偏移的关系指数,根据关系指数和第二幅图像对应的偏差值,计算出相机应移动的距离,主机控制位移控制模块带动摄像头模块位移,使人脸处于图像中央区域;移动完成后,摄像头模块拍摄第三幅影像,主机检测人脸区域,叠加肤色检测和人眼检测算法以定位人脸的具体坐标,如高度、宽度、头顶坐标和中央坐标等具体参数,按照公安部证件照片标准,进行图像的缩放和裁切,得到人脸的位置、大小及图像的尺寸均符合质量要求的证件照片;根据图像色彩、曝光等优化算法对图像进行优化,得到最终的证件照片;
E、主机通过手写签名模块采集申请人的签名,通过指纹采集模块采集申请人的指纹,将采集到的签名与指纹与申请人的身份10相对应;
F、以申请人的身份10为索引,将上述采集到的身份证信息、申请材料、证件照、签名和指纹存储至数据库设备;
G、打印机完成申请人的申请表的打印,申请人可持申请表至办事窗口进行后续事务处理。
H、申请人通过人机交互模块中的主操作屏进行触摸操作,便于其录入申请的各项信息;当申请人由于年龄偏大或者不熟悉触摸操作时,可由辅助操作人员代为通过辅助操作屏进行触摸操作。
I、以上所述,仅是本专利的较佳实施例而已,并非对本专利作任何形式上的限制,虽然本专利已以较佳实施例公开如上,但凡是未脱离本专利技术方案的内容,依据本专利的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均属于本专利技术方案的范围内。

Claims (6)

1.一种基于面部识别与手写文字识别的自助排队机,其特征在于:包括主机、照片拍摄模块、材料拍摄模块、人机交互模块、手写签名模块、指纹采集模块、照明模块、打印机和数据库设备;其中主机与照片拍摄模块、材料拍摄模块、人机交互模块、手写签名模块、指纹采集模块、照明模块、打印机和数据库设备分别连接。
2.根据权利要求1所述的基于面部识别与手写文字识别的自助排队机,其特征在于:照片拍摄模块中又包括摄像头模块和位移控制模块,摄像头模块与位移控制模块相连接。
3.根据权利要求1或2所述的基于面部识别与手写文字识别的自助排队机,其特征在于:材料拍摄模块包括身份证识别模块和高清拍摄模块。
4.根据权利要求3所述的基于面部识别与手写文字识别的自助排队机,其特征在于:照明模块通过继电器模块与主机相连接。
5.根据权利要求4所述的基于面部识别与手写文字识别的自助排队机,其特征在于:人机交互模块包括与主机相连接的主操作屏和辅助操作屏。
6.根据权利要求1或5所述的基于面部识别与手写文字识别的自助排队机,其特征在于:还包括与主机相连接的广告屏。
CN201611161380.2A 2016-12-15 2016-12-15 基于面部识别与手写文字识别的自助排队机 Pending CN106780929A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611161380.2A CN106780929A (zh) 2016-12-15 2016-12-15 基于面部识别与手写文字识别的自助排队机

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611161380.2A CN106780929A (zh) 2016-12-15 2016-12-15 基于面部识别与手写文字识别的自助排队机

Publications (1)

Publication Number Publication Date
CN106780929A true CN106780929A (zh) 2017-05-31

Family

ID=58891459

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611161380.2A Pending CN106780929A (zh) 2016-12-15 2016-12-15 基于面部识别与手写文字识别的自助排队机

Country Status (1)

Country Link
CN (1) CN106780929A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108492425A (zh) * 2018-04-12 2018-09-04 广东汇泰龙科技有限公司 一种基于人脸锁的自动跟踪人脸开门方法及系统
CN108765785A (zh) * 2018-04-02 2018-11-06 广州供电局有限公司 一种远程视频柜员机vtm自助终端系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202904748U (zh) * 2012-08-31 2013-04-24 深圳华视电子读写设备有限公司 一种基于第二代身份证的自助证件办理装置
CN105469513A (zh) * 2015-12-31 2016-04-06 天津中邦信息技术有限公司 基于人脸检测与文字识别的自助服务一体机及其使用方法
CN205566460U (zh) * 2015-12-31 2016-09-07 天津中邦信息技术有限公司 证件照采集设备
CN205563854U (zh) * 2015-12-31 2016-09-07 天津中邦信息技术有限公司 基于人脸检测与文字识别的自助服务一体机

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202904748U (zh) * 2012-08-31 2013-04-24 深圳华视电子读写设备有限公司 一种基于第二代身份证的自助证件办理装置
CN105469513A (zh) * 2015-12-31 2016-04-06 天津中邦信息技术有限公司 基于人脸检测与文字识别的自助服务一体机及其使用方法
CN205566460U (zh) * 2015-12-31 2016-09-07 天津中邦信息技术有限公司 证件照采集设备
CN205563854U (zh) * 2015-12-31 2016-09-07 天津中邦信息技术有限公司 基于人脸检测与文字识别的自助服务一体机

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108765785A (zh) * 2018-04-02 2018-11-06 广州供电局有限公司 一种远程视频柜员机vtm自助终端系统
CN108492425A (zh) * 2018-04-12 2018-09-04 广东汇泰龙科技有限公司 一种基于人脸锁的自动跟踪人脸开门方法及系统

Similar Documents

Publication Publication Date Title
CN110472524B (zh) 基于深度学习的发票信息管理方法、系统和可读介质
WO2019238063A1 (zh) 文本检测分析方法、装置及设备
CN105469513A (zh) 基于人脸检测与文字识别的自助服务一体机及其使用方法
JP2018195293A (ja) 画像処理システム、画像においてマルチラベル意味エッジ検出を行う方法、および、非一時的コンピューター可読記憶媒体
US7035463B1 (en) Document image processor, method for extracting document title, and method for imparting document tag information
CN103975342A (zh) 用于移动图像捕获和处理的系统和方法
EP3437019A1 (en) Optical character recognition in structured documents
CN111091538A (zh) 一种管道焊缝自动识别、缺陷检测方法及装置
US11323577B2 (en) Image processing device for creating an album
US9659206B2 (en) Station for acquiring biometric and biographic data
JP2872776B2 (ja) 顔画像照合装置
CN107194397A (zh) 卡片放置方向的识别方法、装置以及图像处理装置
RU2656573C2 (ru) Методы обнаружения введенных пользователем контрольных меток
US11817215B2 (en) Artificial intelligence cloud diagnosis platform
CN110472605B (zh) 一种基于深度学习人脸分区的皮肤问题分类方法
CN106780929A (zh) 基于面部识别与手写文字识别的自助排队机
CN205563854U (zh) 基于人脸检测与文字识别的自助服务一体机
JP2021060629A (ja) 設問生成装置、設問生成方法、設問生成装置用プログラム、および、書類管理システム
CN110378289A (zh) 一种车辆识别代号的读取识别系统及方法
WO2020258523A1 (zh) 一种习题采集的方法及系统
JP4853073B2 (ja) 帳票分類処理システム、電子媒体レセプトの作成方法および納入方法
US11527102B2 (en) Systems and methods of automated biometric identification reporting
JP6567638B2 (ja) 鼻紋照合システム、鼻紋照合方法及び鼻紋照合プログラム
Gopila et al. Machine learning classifier model for attendance management system
CN116229236A (zh) 一种基于改进YOLO v5模型的结核杆菌检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170531

WD01 Invention patent application deemed withdrawn after publication