CN104866844A - 一种面向监控视频的人群聚集检测方法 - Google Patents
一种面向监控视频的人群聚集检测方法 Download PDFInfo
- Publication number
- CN104866844A CN104866844A CN201510304080.4A CN201510304080A CN104866844A CN 104866844 A CN104866844 A CN 104866844A CN 201510304080 A CN201510304080 A CN 201510304080A CN 104866844 A CN104866844 A CN 104866844A
- Authority
- CN
- China
- Prior art keywords
- foreground
- area
- region
- point
- human body
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
- G06V20/53—Recognition of crowd images, e.g. recognition of crowd congestion
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本发明涉及一种面向监控视频的人群聚集检测方法。首先通过像素点灰度统计和边缘一致性测算实现前景区域的可靠提取,然后使用基于区域归一化的改进Haar人体检测方法提取包含人体的前景区域,最后通过统计包含人体的前景区域的Fast特征点的分布特性实现人群聚集检测。基于像素点灰度统计和边缘一致性的前景提取方法,初始训练时间短,虚警率低。区域归一化的人体检测方法,不同尺寸的待检测区域归一化后的外扩范围相同,兼顾了检测精度和效率。基于Fast特征点的区域特征提取与人群聚集检测,使用区域面积作为加权依据,实际系统中可操作性强;使用特征点加权值表征人体可有效克服遮挡,适应性强。
Description
技术领域
本发明属于面向公共安全预警的视频图像处理领域,具体涉及一种人群聚集检测方法。
背景技术
视频监控被广泛应用于公共安全领域,为公共安全管理业务中的预警与查证提供了有力的数据于技术支撑。人群聚集检测目的在于从实时监视视频中快速发现大量人体的聚集情况,预防因拥挤导致的各类突发事件,对于维护社会稳定有重要作用。
目前面向视频监控的人群聚集检测的智能化水平还比较低,应用受限。专利200710041086使用背景差法提取前景目标,使用特征匹配判断前景人体目标,通过统计前景人体目标的个数实现聚集检测;专利201110329227首先提取前景,然后通过计算前景势能与单个人体平均势能之比来估算局部人体聚集情况,这两种方法仅适用于无遮挡的低密度人体场景检测。专利201210064543通过提取前景区域的SURF特征点,再对特征点进行聚类来判断人体数量;文献“利用归一化前景和二维联合熵的人群聚集检测方法(武汉大学学报信息科学版,2013.09)”通过计算前景区域二维联合熵来统计场景中的人群密度,这两种方法一定程度解决了遮挡问题,但是不能消除非人体前景目标干扰。文献“多种人群密度场景下的人群计数(中国图象图形学报,2013.04)”采用回归模型估计场景中的人数,可以估计特定场景下的人群密度,但是训练过程较为复杂,场景适应性差。
发明内容
针对人群聚集检测的技术需求,本发明提出了面向监控视频的人群聚集检测方法,该方法首先通过像素点灰度统计和边缘一致性测算实现前景区域的可靠提取,然后使用基于区域归一化的改进Haar人体检测方法提取包含人体的前景区域,最后通过统计包含人体的前景区域的Fast特征点的分布特性实现人群聚集检测。
下面对本发明中的技术方案阐述如下:
1、基于像素点灰度统计和边缘一致性测算的可靠前景提取方法
视频中前景和背景的灰度分布区间存在差异,利用这种差异可以提取出前景区域。当提取结果正确时,提取到的区域边缘和实际前景的边缘较为相似,据此可以消除前景提取中的虚假目标。具体流程为:
Step1:利用第一帧 的随机采样结果生成初始背景序列
其中为像素坐标,为背景序列中的序号,为随机函数,取值范围为;
Step2:对于新输入的视频帧,计算每一个像素点灰度和背景序列对应像素点灰度差异,如果差异超过给定阈值的次数超过两次,则该点被判定为前景点,否则为背景点;
Step3:对得到前景提取结果以的模板进行一次开运算和闭运算,得到滤波后的前景;
Step4:使用Sobel算子提取当前帧的边缘和滤波后的前景边缘,对于每一个滤波后的前景边缘点,计算其邻域内的当前帧边缘点数量,如果数量大于4,则该点为有效边缘点;
Step5:对于每一个滤波后的前景区域,统计其有效边缘点总数和所有边缘点总数之比,如果比值超过60%,则该滤波后的前景区域为有效区域,反之为虚假区域;
Step6:利用当前背景区域像素点的灰度值随机更新背景序列中对应像素点的一个采样值。
2、基于区域归一化的改进Haar人体检测方法
基于Haar分类器的人体检测是常用的人体检测方法,为消除目标远近对检测结果的差异,将提取到的前景区域缩放到同一尺度下是通常的做法,但是由于区域提取算法可能存在提取不全的问题,需要对图像区域进行对应的扩充,具体处理流程如下:
Step1:预先训练好用于人体检测的Haar分类器,确定人体图像的最大宽度和最大高度;
Step2:依据待检测前景区域的宽度和高度,确定缩放尺度;
Step3:使用对整个输入图像进行缩放,将缩放后的前景区域对应位置上、下、左、右各扩充20个像素的区域作为待检测的目标区域;
Step4:使用训练好的Haar分类器对待检测区域进行检测,确定人体区域。
3、基于前景区域Fast特征点分布特性的人群聚集检测方法
在视频图像中,人群越密集,对应区域的纹理就越复杂,局部极值点就越多,通过局部极值点来表征人群密集程度,可有效解决多人遮挡问题,考虑到目标距摄像机距离不同时对可用的特征点数量存在差异,依据目标位置对特征点权重进行补偿。具体实施步骤为:
Step1:单个测试人员在场景中从最近点运动到最远点,将最近点的权值设为1,将其余点的权值设为最近点目标区域面积与当前点目标区域面积的比值;
Step2:提取前景人体区域的FAST特征点;
Step3:将所有特征点乘以其权值,求取所有加权和;
Step4:当输入视频帧的加权和连续50次超过预设阈值,则判断发生聚集。
本发明的优点在于:
1、基于像素点灰度统计和边缘一致性的前景提取方法
初始训练时间短,虚警率低。
2、区域归一化的人体检测方法
不同尺寸的待检测区域归一化后的外扩范围相同,兼顾了检测精度和效率。
3、基于Fast特征点的区域特征提取与人群聚集检测
(1)使用区域面积作为加权依据,实际系统中可操作性强;
(2)使用特征点加权值表征人体可有效克服遮挡,适应性强。
附图说明
图1是本发明实施例的整体示意图;
图2是本发明基于像素点灰度统计和边缘一致性的前景提取方法的示意图。
具体实施方式
下面结合图示,对本发明的优选实施例作详细介绍。
本发明的人群聚集检测工作流程如图1所示,首先获取一帧视频数据;然后进行前景提取和人体检测得到前景人体区域;然后提取人体区域的Fast特征点并计算其加权和;最后根据加权和的大小判断是否出现人体聚集。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,比如更改应用领域等,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
Claims (4)
1. 一种面向监控视频的人群聚集检测方法,针对人群聚集检测,其特征在于,首先通过像素点灰度统计和边缘一致性测算实现前景区域的可靠提取,然后使用基于区域归一化的改进Haar人体检测方法提取包含人体的前景区域,最后通过统计包含人体的前景区域的Fast特征点的分布特性实现人群聚集检测,具体如下:
(1)、基于像素点灰度统计和边缘一致性测算的可靠前景提取,
视频中前景和背景的灰度分布区间存在差异,利用这种差异提取出前景区域,当提取结果正确时,提取到的区域边缘和实际前景的边缘较为相似,据此消除前景提取中的虚假目标;
(2)、基于区域归一化的改进Haar人体检测
基于Haar分类器的人体检测是常用的人体检测方法,为消除目标远近对检测结果的差异,将提取到的前景区域缩放到同一尺度下是通常的做法,但是由于区域提取算法存在提取不全的问题,需要对图像区域进行对应的扩充;
(3)、基于前景区域Fast特征点分布特性的人群聚集检测
在视频图像中,人群越密集,对应区域的纹理就越复杂,局部极值点就越多,通过局部极值点来表征人群密集程度,可有效解决多人遮挡问题,考虑到目标距摄像机距离不同时对可用的特征点数量存在差异,依据目标位置对特征点权重进行补偿。
2.根据权利要求1所述的一种面向监控视频的人群聚集检测方法,其特征在于,所述基于像素点灰度统计和边缘一致性测算的可靠前景提取具体流程为:
Step1:利用第一帧 的随机采样结果生成初始背景序列
其中为像素坐标,为背景序列中的序号,为随机函数,取值范围为;
Step2:对于新输入的视频帧,计算每一个像素点灰度和背景序列对应像素点灰度差异,如果差异超过给定阈值的次数超过两次,则该点被判定为前景点,否则为背景点;
Step3:对得到前景提取结果以的模板进行一次开运算和闭运算,得到滤波后的前景;
Step4:使用Sobel算子提取当前帧的边缘和滤波后的前景边缘,对于每一个滤波后的前景边缘点,计算其邻域内的当前帧边缘点数量,如果数量大于4,则该点为有效边缘点;
Step5:对于每一个滤波后的前景区域,统计其有效边缘点总数和所有边缘点总数之比,如果比值超过60%,则该滤波后的前景区域为有效区域,反之为虚假区域;
Step6:利用当前背景区域像素点的灰度值随机更新背景序列中对应像素点的一个采样值。
3.根据权利要求1所述的一种面向监控视频的人群聚集检测方法,其特征在于,所述基于区域归一化的改进Haar人体检测具体处理流程如下:
Step2.1:预先训练好用于人体检测的Haar分类器,确定人体图像的最大宽度和最大高度;
Step2.2:依据待检测前景区域的宽度和高度,确定缩放尺度;
Step2.3:使用对整个输入图像进行缩放,将缩放后的前景区域对应位置上、下、左、右各扩充20个像素的区域作为待检测的目标区域;
Step2.4:使用训练好的Haar分类器对待检测区域进行检测,确定人体区域。
4.根据权利要求1所述的一种面向监控视频的人群聚集检测方法,其特征在于,所述基于前景区域Fast特征点分布特性的人群聚集检测具体实施步骤为:
Step3.1:单个测试人员在场景中从最近点运动到最远点,将最近点的权值设为1,将其余点的权值设为最近点目标区域面积与当前点目标区域面积的比值;
Step3.2:提取前景人体区域的FAST特征点;
Step3.3:将所有特征点乘以其权值,求取所有加权和;
Step3.4:当输入视频帧的加权和连续50次超过预设阈值,则判断发生聚集。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510304080.4A CN104866844B (zh) | 2015-06-05 | 2015-06-05 | 一种面向监控视频的人群聚集检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510304080.4A CN104866844B (zh) | 2015-06-05 | 2015-06-05 | 一种面向监控视频的人群聚集检测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104866844A true CN104866844A (zh) | 2015-08-26 |
CN104866844B CN104866844B (zh) | 2018-03-13 |
Family
ID=53912665
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510304080.4A Expired - Fee Related CN104866844B (zh) | 2015-06-05 | 2015-06-05 | 一种面向监控视频的人群聚集检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104866844B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106022219A (zh) * | 2016-05-09 | 2016-10-12 | 重庆大学 | 一种非垂直俯视视角的人群密度检测方法 |
CN106156749A (zh) * | 2016-07-25 | 2016-11-23 | 福建星网锐捷安防科技有限公司 | 基于选择性搜索的人脸检测方法及装置 |
CN111242096A (zh) * | 2020-02-26 | 2020-06-05 | 贵州安防工程技术研究中心有限公司 | 基于人数梯度的人群聚集判别方法与系统 |
CN113255430A (zh) * | 2021-03-31 | 2021-08-13 | 中交第二公路勘察设计研究院有限公司 | 基于深度学习的视频中人群分布检测与计数方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110115920A1 (en) * | 2009-11-18 | 2011-05-19 | Industrial Technology Research Institute | Multi-state target tracking mehtod and system |
CN102890791A (zh) * | 2012-08-31 | 2013-01-23 | 浙江捷尚视觉科技有限公司 | 基于深度信息聚类的复杂场景人数统计方法 |
CN103164711A (zh) * | 2013-02-25 | 2013-06-19 | 昆山南邮智能科技有限公司 | 基于像素和支持向量机的区域人流密度估计的方法 |
CN103577875A (zh) * | 2013-11-20 | 2014-02-12 | 北京联合大学 | 一种基于fast的计算机辅助cad人数统计方法 |
CN103679148A (zh) * | 2013-12-11 | 2014-03-26 | 哈尔滨工业大学深圳研究生院 | 一种基于聚类角点加权面积的群体聚散检测的方法与装置 |
-
2015
- 2015-06-05 CN CN201510304080.4A patent/CN104866844B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110115920A1 (en) * | 2009-11-18 | 2011-05-19 | Industrial Technology Research Institute | Multi-state target tracking mehtod and system |
CN102890791A (zh) * | 2012-08-31 | 2013-01-23 | 浙江捷尚视觉科技有限公司 | 基于深度信息聚类的复杂场景人数统计方法 |
CN103164711A (zh) * | 2013-02-25 | 2013-06-19 | 昆山南邮智能科技有限公司 | 基于像素和支持向量机的区域人流密度估计的方法 |
CN103577875A (zh) * | 2013-11-20 | 2014-02-12 | 北京联合大学 | 一种基于fast的计算机辅助cad人数统计方法 |
CN103679148A (zh) * | 2013-12-11 | 2014-03-26 | 哈尔滨工业大学深圳研究生院 | 一种基于聚类角点加权面积的群体聚散检测的方法与装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106022219A (zh) * | 2016-05-09 | 2016-10-12 | 重庆大学 | 一种非垂直俯视视角的人群密度检测方法 |
CN106156749A (zh) * | 2016-07-25 | 2016-11-23 | 福建星网锐捷安防科技有限公司 | 基于选择性搜索的人脸检测方法及装置 |
CN111242096A (zh) * | 2020-02-26 | 2020-06-05 | 贵州安防工程技术研究中心有限公司 | 基于人数梯度的人群聚集判别方法与系统 |
CN113255430A (zh) * | 2021-03-31 | 2021-08-13 | 中交第二公路勘察设计研究院有限公司 | 基于深度学习的视频中人群分布检测与计数方法 |
Also Published As
Publication number | Publication date |
---|---|
CN104866844B (zh) | 2018-03-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102903124B (zh) | 一种运动目标检测方法 | |
CN105404847B (zh) | 一种遗留物实时检测方法 | |
CN102063614B (zh) | 一种安防监控中遗留物品的检测方法及装置 | |
CN104978567B (zh) | 基于场景分类的车辆检测方法 | |
Avgerinakis et al. | Recognition of activities of daily living for smart home environments | |
CN102955940B (zh) | 一种输电线路物体检测系统及方法 | |
CN104123544A (zh) | 基于视频分析的异常行为检测方法及系统 | |
CN101957997A (zh) | 一种动态场景中基于区域均值核密度估计的运动目标检测方法 | |
CN103218816A (zh) | 一种基于视频分析的人群密度估计方法与人流量统计方法 | |
CN101286239A (zh) | 航拍交通视频车辆快速检测方法 | |
CN102609724B (zh) | 一种基于双摄像头的周围环境信息提示方法 | |
CN104866844A (zh) | 一种面向监控视频的人群聚集检测方法 | |
CN103700087A (zh) | 移动侦测方法和装置 | |
KR101204259B1 (ko) | 화재 검출 방법 | |
CN103544502A (zh) | 基于svm的高分辨率遥感影像船只提取方法 | |
CN104159088B (zh) | 一种远程智能车辆监控系统及方法 | |
CN104616006A (zh) | 一种面向监控视频的胡须人脸检测方法 | |
CN104123734A (zh) | 基于可见光和红外检测结果融合的运动目标检测方法 | |
CN104933738A (zh) | 一种基于局部结构检测和对比度的视觉显著图生成方法 | |
CN103049765A (zh) | 一种基于鱼眼相机的判断人群密度和人数的方法 | |
CN104463121A (zh) | 人群密度信息获取方法 | |
CN105554462A (zh) | 一种遗留物检测方法 | |
CN104537688A (zh) | 一种基于背景差分和hog特征的运动目标检测方法 | |
CN104168462B (zh) | 基于图像角点集特征的摄像头场景变换检测方法 | |
Surkutlawar et al. | Shadow suppression using rgb and hsv color space in moving object detection |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
EXSB | Decision made by sipo to initiate substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180313 |