CN103761516B - 基于视频监控的atm机异常人脸检测方法 - Google Patents

基于视频监控的atm机异常人脸检测方法 Download PDF

Info

Publication number
CN103761516B
CN103761516B CN201410051985.0A CN201410051985A CN103761516B CN 103761516 B CN103761516 B CN 103761516B CN 201410051985 A CN201410051985 A CN 201410051985A CN 103761516 B CN103761516 B CN 103761516B
Authority
CN
China
Prior art keywords
face
region
threshold value
pixel
video image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410051985.0A
Other languages
English (en)
Other versions
CN103761516A (zh
Inventor
李作进
陈刘奎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing University of Science and Technology
Original Assignee
Chongqing University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing University of Science and Technology filed Critical Chongqing University of Science and Technology
Priority to CN201410051985.0A priority Critical patent/CN103761516B/zh
Publication of CN103761516A publication Critical patent/CN103761516A/zh
Application granted granted Critical
Publication of CN103761516B publication Critical patent/CN103761516B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明公开一种基于视频监控的ATM机异常人脸检测方法,先通过肤色模型对视频图像进行二值化处理;然后通过选定有效团块区域和眼睛/嘴巴区域并计算其平均每行白点个数N,Ne/Nm;然后判断N‑Ne或N‑Nm是否大于阈值N’;如果N‑Ne或N‑Nm大于N’,进一步判断对称性指标是否大于阈值R;如果对称性指标大于阈值R,则人脸异常标志位置位;最后通过统计人脸异常标志位数据来确定是否进行人脸异常报警。其显著效果是:基于人眼或人嘴的形状特征进行分类识别,而是通过人眼或人嘴被遮挡后本身的像素值发生改变而进行判断,大大提高了异常人脸的鲁棒性,而且算法简单,运算量小,在ATN环境下具有较低的漏检率和误检率。

Description

基于视频监控的ATM机异常人脸检测方法
技术领域
发明涉及视频监控中的图像检测技术,具体地讲,是一种基于视频监控的ATM机异常人脸检测方法。
背景技术
随着银行业的快速发展,ATM机(Automated Tellermachine,即自动柜员机)呈现迅猛发展之势,然而,ATM给我们生活带来方便的同时,也暴露出一些安全上的问题。近年来针对ATM的安全事故时有发生,比如蒙面盗取他人非法钱财等事件。因此,如何减少ATM安全事故的发生逐渐成为人们普遍关注的话题,尤其是如何借助现代防范技术将安全事件遏制在萌芽状态是一个亟待解决的问题。
视频监控作为一种图像数据存贮与再现技术,目前已成为提高ATM安全防范能力的重要工具。现有ATM视频监控系统实现了实时监视、视频保存以及长时间存贮等基本功能,但由于均是采用半人工值守方式,往往容易出现报警不准确、不及时甚至错报、漏报等现象,因而现有的视频监控系统通常适用于事后查证,而无法实现实时分析与及时提醒功能,即无法起到进一步减少安全事件发生的作用。
ATM机前的异常人脸往往存在盗取他人钱财事件的潜在危险,但现有视频监控技术只是实现图像数据的记录,而无法做到及时提醒与预警。因此,如何有效、实时地监控ATM用户环境以及分析判断是否有异常人脸发生并及时发出警报信息是减少此类事件发生的关键所在。由于异常人脸出现较突然,具有高度的隐蔽性,而且所发生的环境较为复杂,现有的智能视频技术借助于人眼与人嘴形状特征分类器实现异常人脸检测,在ATM环境下存在较高的误检率与漏检率,从而导致犯罪分子得以成功盗取他人钱财。
发明内容
为了克服现有技术对于ATM机前异常人脸检测误检率和漏检率高的缺陷,本发明提供了一种基于视频监控的ATM机异常人脸检测方法,主要针对ATM环境下戴墨镜与戴口罩的人脸进行检测并及时输出报警信息,从而简化计算量,提高运算速率,降低漏检率。
为了达到上述目的,本发明所采用的具体技术方案如下:
一种基于视频监控的ATM机异常人脸检测方法,其关键在于包括以下步骤:
步骤1:初始化系统参数,包括设置平均每行白点个数判定阈值N’,对称性指标判定阈值R以及人脸异常标志位置位总数判定阈值n;
步骤2:采集一帧视频图像;
步骤3:通过肤色模型对步骤2所采集的图像进行二值化处理;
步骤4:选定有效团块区域和眼睛/嘴巴区域;
步骤5:计算有效团块区域、眼睛区域/嘴巴区域平均每行白点个数;其中有效团块区域平均每行白点个数记为N,眼睛区域平均每行白点个数记为Ne,嘴巴区域平均每行白点个数记为Nm;
步骤6:判断N-Ne或N-Nm是否大于阈值N’;
如果N-Ne或N-Nm大于阈值N’,则进入步骤7;否则进入步骤8’;
步骤7:判断对称性指标是否大于阈值R;如果对称性指标大于阈值R,则进入步骤8,否则进入步骤8’;
步骤8:人脸异常标志位置位;
步骤8’:人脸异常标志位清零;
步骤9:统计人脸异常标志位数据;
步骤10:判断人脸异常标志位置位总数是否大于阈值n,如果人脸异常标志位置位总数大于阈值n,则进行人脸异常报警,否则,返回步骤2采集下一帧视频图像。
基于上述方法可以发现,人脸异常检测过程中,计算量较大的仅仅在于利用肤色模型对视频图像进行二值化处理,经过该步骤后,视频图像中为皮肤裸露的区域其像素点为1,相当于白点,被墨镜或口罩遮挡的区域其像素点为0,从而可以确定人脸轮廓,根据正常人的眼睛和嘴巴分布情况可以选定眼睛/嘴巴区域;通过统计各个区域平均每行白点个数即可判定是否出现佩戴墨镜或口罩的情况,为了保证获取的视频图像是正面图像,该方法中采用了对称性指标,当连续几帧图像都判定出人脸异常时,则系统发出异常报警,保证ATM机的安全运行。
为了便于数据处理,所述步骤2中采集的一帧视频图像按照320*240像素大小进行标准化处理。
结合ATM视频监控系统的配置情况,所述步骤3中的肤色模型选用YCbCr颜色空间进行计算,二值化处理时Cb取值为140-190,Cr取值为140-180。
结合人脸面部特征,所述步骤4中选定有效团块的方法是从视频图像的顶部开始,选择二值化处理后像素点为1且相邻区域面积大于100的团块作为有效团块区域;将有效团块区域中行数上边1/3的区域作为眼睛区域,将有效团块区域中行数下边1/3的区域作为嘴巴区域。
作为优选,步骤5中按照计算有效团块区域平均每行白点个数N,其中K为平均行缩放因子。
作为优选,所述步骤7中对称性指标为视频图像中左右两边像素点二值化处理后的相关系数。
通过采用以上技术方案,本发明的显著效果是:算法并非基于人眼或人嘴的形状特征进行分类识别,而是通过人眼或人嘴被遮挡后本身的像素值发生改变而进行判断,大大提高了异常人脸的鲁棒性,而且算法简单,运算量小,在ATN环境下具有较低的漏检率和误检率。
附图说明
图1是本发明的方法步骤流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,下面结合附图及具体实施例对本发明作进一步详细说明。应当理解,此处所描述的具体实施方式仅仅用于解释本发明,并不用于限定本发明。
如图1所示的一种基于视频监控的ATM机异常人脸检测方法的步骤流程图,主要包括:
步骤1:初始化系统参数,包括设置平均每行白点个数判定阈值N’,对称性指标判定阈值R以及人脸异常标志位置位总数判定阈值n;
步骤2:采集一帧视频图像,并按照320*240像素大小进行标准化处理;
步骤3:通过肤色模型对步骤2所采集的图像进行二值化处理,这里的肤色模型选用YCbCr颜色空间进行计算,二值化处理时Cb取值为140-190,Cr取值为140-180;
步骤4:选定有效团块区域和眼睛/嘴巴区域,其中选定有效团块的方法是从视频图像的顶部开始,选择二值化处理后像素点为1且相邻区域面积大于100的团块作为有效团块区域;将有效团块区域中行数上边1/3的区域作为眼睛区域,将有效团块区域中行数下边1/3的区域作为嘴巴区域;因为正常人的眼睛分布在整个人脸图像的上边1/3区域内,嘴巴分布在整个人脸图像的下边1/3区域内,接着利用步骤5对眼睛区域和嘴巴区域的平均每行白点个数进行统计,从而判断是否存在异常;
步骤5:计算有效团块区域、眼睛区域/嘴巴区域平均每行白点个数;其中有效团块区域平均每行白点个数记为N,并按照计算,其中K为平均行缩放因子,通常设为0.2,眼睛区域平均每行白点个数记为Ne,嘴巴区域平均每行白点个数记为Nm;
步骤6:判断N-Ne或N-Nm是否大于阈值N’,如果N-Ne或N-Nm大于阈值N’,则进入步骤7;否则进入步骤8’;通常平均每行白点个数判定阈值N’设为2,相当于眼睛区域或者嘴巴区域平均每行白色点的个数比整个有效团块区域平均每行白色点的个数少2个时,则认定为出现人脸异常情况,进一步通过步骤7进行视频图像对称性判断;否则,人脸图像正常,通过步骤8’对人脸异常标志位清零;
步骤7:判断对称性指标是否大于阈值R;如果对称性指标大于阈值R,则进入步骤8,否则进入步骤8’;这里的对称性指标为视频图像中左右两边像素点二值化处理后的相关系数,通过相关系数计算公式进行计算,其中Xi表示视频图像中左边各个像素点的像素值,为其平均,Yi表示视频图像中右边各个像素点的像素值,为其平均,M为左右两边像素点的个数,阈值R通常设为0.8,当RXY小于0.8时,说明视频图像相关性不高,对称性不强,即使判断为人脸异常,有可能存在扭头或者转身等特殊情况,只有当RXY大于或等于0.8时,才认定属于人脸正面图像,同时满足步骤6和步骤7的判断标准,才确定存在人脸异常,从而利于步骤8进行人脸异常标志位置位。
为了便于统计,步骤8:人脸异常标志位置位;步骤8’:人脸异常标志位清零;
步骤9:统计人脸异常标志位数据;
步骤10:判断人脸异常标志位置位总数是否大于阈值n,如果人脸异常标志位置位总数大于阈值n,则进行人脸异常报警,否则,返回步骤2采集下一帧视频图像。
通常阈值n设为5,相当于在监控时间内如果有5帧视频图像存在人脸异常,则进行异常报警,如果仅仅只有一两帧图像出现这种情况,有可能是其它偶然因素造成,从而提高算法的鲁棒性。
通过上述步骤可以看出,采用该方法对ATM机的视频监控图像进行处理,可以有效检测佩戴墨镜或口罩等异常情况,对蒙面盗取他人非法钱财等事件能够做到即时预警,提高ATM机的安全性能。

Claims (4)

1.一种基于视频监控的ATM机异常人脸检测方法,其特征在于包括以下步骤:
步骤1:初始化系统参数,包括设置平均每行白点个数判定阈值N’,对称性指标判定阈值R以及人脸异常标志位置位总数判定阈值n;
步骤2:采集一帧视频图像;
步骤3:通过肤色模型对步骤2所采集的图像进行二值化处理;
步骤4:选定有效团块区域和眼睛/嘴巴区域;
步骤5:计算有效团块区域、眼睛区域/嘴巴区域平均每行白点个数;其中有效团块区域平均每行白点个数记为N,眼睛区域平均每行白点个数记为Ne,嘴巴区域平均每行白点个数记为Nm;
步骤6:判断N-Ne或N-Nm是否大于阈值N’;
如果N-Ne或N-Nm大于阈值N’,则进入步骤7;否则进入步骤8’;
步骤7:判断对称性指标是否大于阈值R;如果对称性指标大于阈值R,则进入步骤8,否则进入步骤8’;
步骤8:人脸异常标志位置位;
步骤8’:人脸异常标志位清零;
步骤9:统计人脸异常标志位数据;
步骤10:判断人脸异常标志位置位总数是否大于阈值n,如果人脸异常标志位置位总数大于阈值n,则进行人脸异常报警,否则,返回步骤2采集下一帧视频图像;
所述步骤4中选定有效团块的方法是从视频图像的顶部开始,选择二值化处理后像素点为1且相邻区域面积大于100的团块作为有效团块区域;将有效团块区域中行数上边1/3的区域作为眼睛区域,将有效团块区域中行数下边1/3的区域作为嘴巴区域;
所述步骤7中对称性指标为视频图像中左右两边像素点二值化处理后的相关系数,通过相关系数计算公式:
进行计算,其中Xi表示视频图像中左边各个像素点的像素值,为其平均,Yi表示视频图像中右边各个像素点的像素值,为其平均,M为左右两边像素点的个数。
2.根据权利要求1所述的基于视频监控的ATM机异常人脸检测方法,其特征在于:所述步骤2中采集的一帧视频图像按照320*240像素大小进行标准化处理。
3.根据权利要求1所述的基于视频监控的ATM机异常人脸检测方法,其特征在于:所述步骤3中的肤色模型选用YCbCr颜色空间进行计算,二值化处理时Cb取值为140-190,Cr取值为140-180。
4.根据权利要求1所述的基于视频监控的ATM机异常人脸检测方法,其特征在于:步骤5中按照计算有效团块区域平均每行白点个数N,其中K为平均行缩放因子。
CN201410051985.0A 2014-02-14 2014-02-14 基于视频监控的atm机异常人脸检测方法 Active CN103761516B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410051985.0A CN103761516B (zh) 2014-02-14 2014-02-14 基于视频监控的atm机异常人脸检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410051985.0A CN103761516B (zh) 2014-02-14 2014-02-14 基于视频监控的atm机异常人脸检测方法

Publications (2)

Publication Number Publication Date
CN103761516A CN103761516A (zh) 2014-04-30
CN103761516B true CN103761516B (zh) 2017-06-06

Family

ID=50528752

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410051985.0A Active CN103761516B (zh) 2014-02-14 2014-02-14 基于视频监控的atm机异常人脸检测方法

Country Status (1)

Country Link
CN (1) CN103761516B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103971100A (zh) * 2014-05-21 2014-08-06 国家电网公司 基于视频并针对自动提款机的伪装与偷窥行为的检测方法
CN104463137B (zh) * 2014-12-18 2017-07-18 上海交通大学 基于特征空间分裂的异常人脸图像检测方法及系统
CN104883538A (zh) * 2015-05-04 2015-09-02 黄河科技学院 一种银行自动取款机智能监控系统与方法
CN105678213B (zh) * 2015-12-20 2021-08-10 华南理工大学 基于视频特征统计的双模式蒙面人事件自动检测方法
CN109190489A (zh) * 2018-08-08 2019-01-11 深圳市唯特视科技有限公司 一种基于修复自动编码器残差的异常人脸检测方法
CN109101923B (zh) * 2018-08-14 2020-11-27 罗普特(厦门)科技集团有限公司 一种人员佩戴口罩情况的检测方法以及装置
CN111179880A (zh) * 2019-12-26 2020-05-19 恒大新能源汽车科技(广东)有限公司 一种显示屏幕的亮度调节方法、装置、电子设备及系统
CN113850229B (zh) * 2021-10-18 2023-12-22 深圳市成玉信息技术有限公司 基于视频数据机器学习的人员异常行为预警方法、系统及计算机设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102542246A (zh) * 2011-03-29 2012-07-04 广州市浩云安防科技股份有限公司 Atm机异常人脸检测方法
CN102622584A (zh) * 2012-03-02 2012-08-01 成都三泰电子实业股份有限公司 视频监控中蒙面人脸的检测方法
CN103400110A (zh) * 2013-07-10 2013-11-20 上海交通大学 Atm取款机前的异常人脸检测方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102542246A (zh) * 2011-03-29 2012-07-04 广州市浩云安防科技股份有限公司 Atm机异常人脸检测方法
CN102622584A (zh) * 2012-03-02 2012-08-01 成都三泰电子实业股份有限公司 视频监控中蒙面人脸的检测方法
CN103400110A (zh) * 2013-07-10 2013-11-20 上海交通大学 Atm取款机前的异常人脸检测方法

Also Published As

Publication number Publication date
CN103761516A (zh) 2014-04-30

Similar Documents

Publication Publication Date Title
CN103761516B (zh) 基于视频监控的atm机异常人脸检测方法
CN109308445B (zh) 一种基于信息融合的固定岗位人员疲劳检测方法
CN108062542B (zh) 被遮挡的人脸的检测方法
CN109002801B (zh) 一种基于视频监控的人脸遮挡检测方法及系统
CN107133564B (zh) 一种工装工帽检测方法
CN106295551A (zh) 一种基于视频分析的人员安全帽佩戴情况实时检测方法
CN107480658A (zh) 基于多角度视频的人脸识别装置和方法
CN109840565A (zh) 一种基于眼部轮廓特征点纵横比的眨眼检测方法
CN103942539B (zh) 一种人头部椭圆精确高效提取及遮蔽人脸检测方法
US11514582B2 (en) Method and device for image analysis
CN106203394A (zh) 基于人眼状态检测的疲劳驾驶安全监测方法
CN113223046B (zh) 一种监狱人员行为识别的方法和系统
US7650034B2 (en) Method of locating a human eye in a video image
WO2015158087A1 (zh) 一种检测人眼健康状态的方法、装置及移动终端
CN112489368A (zh) 智能跌倒识别与检测报警方法及系统
CN113034826A (zh) 基于视频的异常事件告警方法及其系统、设备、存储介质
CN111652185A (zh) 一种基于违章行为识别的安全施工方法、系统、装置及存储介质
CN103400457B (zh) 一种atm银行卡调包行为监测方法
CN111695432A (zh) 一种视频监控场景下的人工智能人脸异常检测系统及方法
CN114155513A (zh) 一种基于人脸多参量检测的驾驶危险行为监控方法、系统、设备和可读存储介质
CN110490148A (zh) 一种打架斗殴行为的识别方法
CN117132949A (zh) 一种基于深度学习的全天候跌倒检测方法
CN101609580A (zh) 银行自助设备智能保护方法
Liu et al. Design and implementation of multimodal fatigue detection system combining eye and yawn information
Singh et al. Driver fatigue detection using machine vision approach

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant