CN103500324A - 基于视频监控的暴力行为识别方法 - Google Patents
基于视频监控的暴力行为识别方法 Download PDFInfo
- Publication number
- CN103500324A CN103500324A CN201310452383.1A CN201310452383A CN103500324A CN 103500324 A CN103500324 A CN 103500324A CN 201310452383 A CN201310452383 A CN 201310452383A CN 103500324 A CN103500324 A CN 103500324A
- Authority
- CN
- China
- Prior art keywords
- light stream
- threshold value
- predetermined threshold
- video monitoring
- violence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Burglar Alarm Systems (AREA)
Abstract
本发明公开一种基于视频监控的暴力行为识别方法,先初始化参数,读取视频帧图像并建立高斯背景图像;然后通过当前视频帧与背景图像帧作差分割出运动团块;接着在各个运动团块中进行光流检测并去除光流幅值小于预设阈值A1的光流矢量;接着对连续K帧图像中的运动团块进行处理,统计运动团块光流矢量的幅值和角度;最后通过判断连续K帧图像的光流幅值的和值是否大于预设阈值A2以及判断光流角度分布是否满足均匀条件来给出暴力事件报警信息。其显著效果是:能有效的从传统的视频监控数据中分析有无多人暴力行为发生,该方法的识别具有一定的鲁棒性,对公共场所的多人暴力行为识别针对性强,误报率低。
Description
技术领域
发明涉及视频监控中的图像识别技术,具体地讲,是一种基于视频监控的暴力行为识别方法。
背景技术
多人暴力行为属于严重的突发性事件,而且持续的时间较短,其行为一旦发生,极易造成非常严重的后果,因此,多人暴力行为已经作为了公共安全技术防范的重点内容之一。而暴力行为的识别也成为智能视频监控技术领域的研究热点和难点课题。
目前,基于视频特征的多人暴力行为识别技术主要是采用单一的特征进行识别。如基于视频动态能量的暴力行为识别,这种方法主要通过提取视频帧的能量特征,通过计算视频帧的光流幅度值大小来判断暴力行为是否发生,由于视频能量特征是一种标量信息,容易导致将单人的快速或者大幅度的动作误判为暴力行为,即误报率较高。针对此问题,也有人提出用视频能量方向来判断暴力行为是否发生,该方法首先计算视频帧中能量方向,然后统计方向的分布情况,如果主方向属于随机分布,则认为是暴力行为发生,这是因为单人行走时其主方向比较明显且很突出,而暴力行为发生时,其主方向随机性较强,因此,这种方法能有效的分辨出单人行为与多人聚集情况,但很难辨识出多人随机行走和多人暴力的情况,原因是在多人随机行走的情况下其方向分布也存现出均匀分布的情况,此时容易将此误判为多人的暴力行为。
基于上述背景,如何提高多人暴力行为识别的鲁棒性是该方法的关键所在,由于多人暴力行为发生较突然且持续时间较短以及所发生的环境较为复杂,现有的智能视频技术还没有较好的解决方案,其误报率较高,对暴力行为识别的鲁棒性不高。
发明内容
为了克服现有技术对于视频监控中暴力行为识别误报率高的缺陷,本发明提供了一种基于视频监控的暴力行为识别方法。通过计算视频帧的动态能量大小、方向以及团块特征,并将三种特征为融合暴力行为辨识的基本条件,提高暴力行为识别的鲁棒性,具体技术方案如下:
一种基于视频监控的暴力行为识别方法,包括以下步骤:
步骤1:初始化参数,包括设定预设阈值A1、预设阈值A2以及整数K的值;
步骤2:读取视频帧图像;
步骤3:建立高斯背景图像;
步骤4:通过当前视频帧与背景图像帧作差分割出运动团块;
步骤5:在各个运动团块中进行光流检测;
步骤6:去除光流幅值小于预设阈值A1的光流矢量;
步骤7:对连续K帧图像中的运动团块进行处理,统计运动团块光流矢量的幅值和角度;
步骤8:判断连续K帧图像的光流幅值的和值是否大于预设阈值A2,如果是,则进入步骤9;如果不是,则返回步骤2继续读取新的视频帧图像;
步骤9:判断连续K帧图像的光流角度分布是否满足均匀条件,如果是,则给出暴力事件报警信息;如果不是,则返回步骤2继续读取新的视频帧图像。
通过上述步骤可以看出,本方案通过步骤6可以去除一些光流幅值相对较小的目标,降低后续处理的干扰,通过步骤8的幅值判断和步骤9的方向分布性判断,提高暴力行为识别的鲁棒性,减少误判率。
为了更加准确的获得判断结果,在步骤1中,设定预设阈值A1=2,预设阈值A2=140,K=5。
作为进一步描述,所述步骤7中,以30°为间隔将光流矢量分为12个方向,假设每个方向光流矢量的统计值为Ni,i=1~12,主方向的统计值为Nm,则主方向占比率在所述步骤9中,如果主方向占比率p大于预设阈值ps,则不满足均匀条件;否则满足均匀条件。
根据实际场景的需求,所述预设阈值ps在步骤1中设定为ps=0.32。
通过采用以上技术方案,本发明的显著效果是:能有效的从传统的视频监控数据中分析有无多人暴力行为发生,该方法的识别具有一定的鲁棒性,对公共场所的多人暴力行为识别针对性强,误报率低。
附图说明
图1是本发明的方法步骤流程图;
图2是正常情况下光流检测幅值和方向分布图;
图3是暴力行为发生时光流检测幅值和方向分布图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,下面结合附图及具体实施例对本发明作进一步详细说明。应当理解,此处所描述的具体实施方式仅仅用于解释本发明,并不用于限定本发明。
如图1所示的一种基于视频监控的暴力行为识别方法的流程图,包括以下步骤:
步骤1:初始化参数,设定预设阈值A1=2、预设阈值A2=140,预设阈值ps=0.32以及整数K=5;
步骤2:从视频监控系统中读取视频帧图像,采集视频帧主要是借助采集卡提供的开发包,直接从帧容器中读取所需要的序列帧数据即可,为了便于调试以及方法的有效计算,在实施过程中,本步骤中还将所得的视频数据进行标准化采样处理,即初始化为320*240像素大小的图像。
步骤3:利用高斯建模的方式建立高斯背景图像;
步骤4:通过当前视频帧与背景图像帧作差分割出运动团块;
步骤5:在各个运动团块中进行光流检测,光流检测即OpticalFlow方法,属于图像处理技术中的一种惯用手法,本方案考虑到技术的应用背景,采用了一种计算速度较快的Lucas-Kanade算法来实现;
步骤6:去除光流幅值小于预设阈值A1的光流矢量,该步骤主要用于消除局部干扰,降低后续处理的误判率;
步骤7:对连续K帧图像中的运动团块进行处理,统计运动团块光流矢量的幅值和角度;
具体可以参见图2和图3,其中图2(a)和图3(a)为光流能量直方图,横坐标从左向右为帧序数,纵坐标为能量的大小,每一个根直方柱是一帧视频图像中的光流能量,图2(b)和图3(b)为光流能量累积直方图,每个根直方柱表示当前帧和前四帧的光流能量的累积量,图2(c)和图3(c)是光流方向分布直方图,该步骤中,以30°为间隔将光流矢量分为12个方向,图中横坐标依次为方向区域1,2,…,12,纵坐标为光流矢量的个数。在本实施例中,将360度的方向按照[0~30),[31~60),…,[270~360)分为12个方向区域,对检测到的每个光流矢量,其方向如果在某个区间内则对应的方向直方柱高度增加1,图中最高的直方柱,也就是光流矢量的主方向。假设每个方向光流矢量的统计值为Ni,i=1~12,主方向的统计值为Nm,则主方向占比率在此计算出的主方向占比率主要用于后续步骤中判断光流角度分布是否满足均匀条件。
步骤8:判断连续K帧图像的光流幅值的和值是否大于预设阈值A2,如果是,则进入步骤9;如果不是,则返回步骤2继续读取新的视频帧图像;
步骤9:判断连续K帧图像的光流角度分布是否满足均匀条件,如果是,则给出暴力事件报警信息;如果不是,则返回步骤2继续读取新的视频帧图像。
通过图2和图3可以看出,在视频图像中,行人正常行走时,其光流能量直方图/累积直方图和方向直方图如图2所示,其累积能量有可能超过设定的ALARM线,图中2(b)中的直线,但其主方向占比率远大于设定的阈值,因此不会产生暴力行为报警。
如果有两人打架产生暴力行为时,其光流能量直方图/累积直方图和方向直方图如图3所示,其累积能量连续多次超过设定的ALARM线,同时其主方向占比率小于设定的阈值,从而判断为暴力行为,触发报警。
通过本方法可以看出,采用双重判别机制,在避免漏判的同时降低了误判率,提供了视频监控系统中暴力行为报警的准确性。
Claims (4)
1.一种基于视频监控的暴力行为识别方法,其特征在于包括以下步骤:
步骤1:初始化参数,包括设定预设阈值A1、预设阈值A2以及整数K的值;
步骤2:读取视频帧图像;
步骤3:建立高斯背景图像;
步骤4:通过当前视频帧与背景图像帧作差分割出运动团块;
步骤5:在各个运动团块中进行光流检测;
步骤6:去除光流幅值小于预设阈值A1的光流矢量;
步骤7:对连续K帧图像中的运动团块进行处理,统计运动团块光流矢量的幅值和角度;
步骤8:判断连续K帧图像的光流幅值的和值是否大于预设阈值A2,如果是,则进入步骤9;如果不是,则返回步骤2继续读取新的视频帧图像;
步骤9:判断连续K帧图像的光流角度分布是否满足均匀条件,如果是,则给出暴力事件报警信息;如果不是,则返回步骤2继续读取新的视频帧图像。
2.根据权利要求1所述的基于视频监控的人体暴力行为识别方法,其特征在于:在步骤1中,设定预设阈值A1=2,预设阈值A2=140,K=5。
4.根据权利要求3所述的基于视频监控的人体暴力行为识别方法,其特征在于:所述预设阈值ps在步骤1中设定为ps=0.32。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310452383.1A CN103500324B (zh) | 2013-09-29 | 2013-09-29 | 基于视频监控的暴力行为识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310452383.1A CN103500324B (zh) | 2013-09-29 | 2013-09-29 | 基于视频监控的暴力行为识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103500324A true CN103500324A (zh) | 2014-01-08 |
CN103500324B CN103500324B (zh) | 2016-07-13 |
Family
ID=49865529
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310452383.1A Expired - Fee Related CN103500324B (zh) | 2013-09-29 | 2013-09-29 | 基于视频监控的暴力行为识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103500324B (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104036301A (zh) * | 2014-06-11 | 2014-09-10 | 北京中慧煌技术有限公司 | 基于光流块特征的暴力事件识别方法及系统 |
CN105025271A (zh) * | 2015-07-28 | 2015-11-04 | 深圳英飞拓科技股份有限公司 | 行为监测方法及装置 |
CN105512631A (zh) * | 2015-12-07 | 2016-04-20 | 上海交通大学 | 基于MoSIFT和CSD特征的暴恐视频检测方法 |
CN106407889A (zh) * | 2016-08-26 | 2017-02-15 | 上海交通大学 | 基于光流图深度学习模型在视频中人体交互动作识别方法 |
WO2017129020A1 (zh) * | 2016-01-29 | 2017-08-03 | 中兴通讯股份有限公司 | 视频中人体行为识别的方法、装置和计算机存储介质 |
CN107777498A (zh) * | 2017-11-20 | 2018-03-09 | 江苏省特种设备安全监督检验研究院 | 一种电梯轿厢内暴力行为检测方法 |
CN108171744A (zh) * | 2017-12-26 | 2018-06-15 | 努比亚技术有限公司 | 一种双目虚化中视差图的确定方法、移动终端及存储介质 |
CN108875712A (zh) * | 2018-08-01 | 2018-11-23 | 四川电科维云信息技术有限公司 | 一种基于ViF描述符的暴力行为检测系统及方法 |
CN109756666A (zh) * | 2017-11-06 | 2019-05-14 | 京瓷办公信息系统株式会社 | 监控系统 |
CN111539301A (zh) * | 2020-04-20 | 2020-08-14 | 贵州安防工程技术研究中心有限公司 | 一种基于视频分析技术的场景混乱程度判别方法 |
CN111582031A (zh) * | 2020-04-03 | 2020-08-25 | 深圳市艾伯信息科技有限公司 | 基于神经网络的多模型协同暴力检测方法及系统 |
CN111950518A (zh) * | 2020-08-27 | 2020-11-17 | 重庆科技学院 | 一种用于暴力行为识别的视频图像增强方法 |
CN113807636A (zh) * | 2021-04-12 | 2021-12-17 | 河北广电传智信息技术有限公司 | 区域监管方法、装置、电子设备及计算机存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102629384A (zh) * | 2012-02-28 | 2012-08-08 | 成都三泰电子实业股份有限公司 | 视频监控中异常行为的检测方法 |
CN102663429A (zh) * | 2012-04-11 | 2012-09-12 | 上海交通大学 | 运动目标的运动模式分类和动作识别的方法 |
CN102799883A (zh) * | 2012-06-29 | 2012-11-28 | 广州中国科学院先进技术研究所 | 一种从视频图像中提取运动目标的方法及装置 |
-
2013
- 2013-09-29 CN CN201310452383.1A patent/CN103500324B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102629384A (zh) * | 2012-02-28 | 2012-08-08 | 成都三泰电子实业股份有限公司 | 视频监控中异常行为的检测方法 |
CN102663429A (zh) * | 2012-04-11 | 2012-09-12 | 上海交通大学 | 运动目标的运动模式分类和动作识别的方法 |
CN102799883A (zh) * | 2012-06-29 | 2012-11-28 | 广州中国科学院先进技术研究所 | 一种从视频图像中提取运动目标的方法及装置 |
Non-Patent Citations (1)
Title |
---|
杜鉴豪 等: "基于区域光流特征的异常行为检测", 《浙江大学学报(工学版)》 * |
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104036301B (zh) * | 2014-06-11 | 2018-08-28 | 北京逸趣电子商务有限公司 | 基于光流块特征的暴力事件识别方法及系统 |
CN104036301A (zh) * | 2014-06-11 | 2014-09-10 | 北京中慧煌技术有限公司 | 基于光流块特征的暴力事件识别方法及系统 |
CN105025271A (zh) * | 2015-07-28 | 2015-11-04 | 深圳英飞拓科技股份有限公司 | 行为监测方法及装置 |
CN105512631A (zh) * | 2015-12-07 | 2016-04-20 | 上海交通大学 | 基于MoSIFT和CSD特征的暴恐视频检测方法 |
CN105512631B (zh) * | 2015-12-07 | 2019-01-25 | 上海交通大学 | 基于MoSIFT和CSD特征的暴恐视频检测方法 |
WO2017129020A1 (zh) * | 2016-01-29 | 2017-08-03 | 中兴通讯股份有限公司 | 视频中人体行为识别的方法、装置和计算机存储介质 |
CN106407889A (zh) * | 2016-08-26 | 2017-02-15 | 上海交通大学 | 基于光流图深度学习模型在视频中人体交互动作识别方法 |
CN109756666B (zh) * | 2017-11-06 | 2020-12-25 | 京瓷办公信息系统株式会社 | 监控系统 |
CN109756666A (zh) * | 2017-11-06 | 2019-05-14 | 京瓷办公信息系统株式会社 | 监控系统 |
CN107777498B (zh) * | 2017-11-20 | 2019-07-19 | 江苏省特种设备安全监督检验研究院 | 一种电梯轿厢内暴力行为检测方法 |
CN107777498A (zh) * | 2017-11-20 | 2018-03-09 | 江苏省特种设备安全监督检验研究院 | 一种电梯轿厢内暴力行为检测方法 |
CN108171744A (zh) * | 2017-12-26 | 2018-06-15 | 努比亚技术有限公司 | 一种双目虚化中视差图的确定方法、移动终端及存储介质 |
CN108875712A (zh) * | 2018-08-01 | 2018-11-23 | 四川电科维云信息技术有限公司 | 一种基于ViF描述符的暴力行为检测系统及方法 |
CN111582031A (zh) * | 2020-04-03 | 2020-08-25 | 深圳市艾伯信息科技有限公司 | 基于神经网络的多模型协同暴力检测方法及系统 |
CN111582031B (zh) * | 2020-04-03 | 2023-07-14 | 深圳市艾伯信息科技有限公司 | 基于神经网络的多模型协同暴力检测方法及系统 |
CN111539301A (zh) * | 2020-04-20 | 2020-08-14 | 贵州安防工程技术研究中心有限公司 | 一种基于视频分析技术的场景混乱程度判别方法 |
CN111539301B (zh) * | 2020-04-20 | 2023-04-18 | 贵州安防工程技术研究中心有限公司 | 一种基于视频分析技术的场景混乱程度判别方法 |
CN111950518A (zh) * | 2020-08-27 | 2020-11-17 | 重庆科技学院 | 一种用于暴力行为识别的视频图像增强方法 |
CN113807636A (zh) * | 2021-04-12 | 2021-12-17 | 河北广电传智信息技术有限公司 | 区域监管方法、装置、电子设备及计算机存储介质 |
CN113807636B (zh) * | 2021-04-12 | 2024-04-09 | 河北广电传智信息技术有限公司 | 区域监管方法、装置、电子设备及计算机存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN103500324B (zh) | 2016-07-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103500324A (zh) | 基于视频监控的暴力行为识别方法 | |
CN108053427B (zh) | 一种基于KCF与Kalman的改进型多目标跟踪方法、系统及装置 | |
CN108073890B (zh) | 用于由相机所捕获的视频序列中的动作识别的方法和系统 | |
Yang et al. | Online learned discriminative part-based appearance models for multi-human tracking | |
CN102663452B (zh) | 基于视频分析的可疑行为检测方法 | |
CN106571014A (zh) | 一种在视频中识别异常动作的方法和系统 | |
US10878578B2 (en) | Exclusion zone in video analytics | |
CN103093192B (zh) | 高压输电线舞动的识别方法 | |
CN108596028B (zh) | 一种基于视频录像中的异常行为检测算法 | |
CN110782433B (zh) | 基于时序的动态信息暴力抛物检测方法、装置及存储介质 | |
Lee et al. | ArchCam: Real time expert system for suspicious behaviour detection in ATM site | |
Liu et al. | Anomaly detection in surveillance video using motion direction statistics | |
CN106355162A (zh) | 一种基于视频监控的入侵检测方法 | |
CN102034240A (zh) | 一种静态前景检测和跟踪方法 | |
CN104200466A (zh) | 一种预警方法及摄像机 | |
CN103150736A (zh) | 一种基于视频监控的摄像机移动检测方法 | |
CN103714319A (zh) | 一种用于电力线防外力破坏系统的视频入侵检测方法 | |
Ullah et al. | Gaussian mixtures for anomaly detection in crowded scenes | |
CN113657309A (zh) | 一种基于Adocf的穿越安全围栏违章行为检测方法 | |
CN103400457A (zh) | 一种atm银行卡调包行为监测方法 | |
CN102096928A (zh) | 一种视频监控中基于角度的徘徊轨迹检测方法 | |
Leyva et al. | Video anomaly detection based on wake motion descriptors and perspective grids | |
CN101662635B (zh) | 音视频智能分析终端 | |
Kwon et al. | Scene modeling-based anomaly detection for intelligent transport system | |
KR20200060868A (ko) | 객체 탐지 및 자동 추적이 가능한 다시점 영상 감시 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160713 Termination date: 20210929 |
|
CF01 | Termination of patent right due to non-payment of annual fee |