CN105956568A - 一种基于监控目标识别的异常行为检测预警方法 - Google Patents

一种基于监控目标识别的异常行为检测预警方法 Download PDF

Info

Publication number
CN105956568A
CN105956568A CN201610309174.5A CN201610309174A CN105956568A CN 105956568 A CN105956568 A CN 105956568A CN 201610309174 A CN201610309174 A CN 201610309174A CN 105956568 A CN105956568 A CN 105956568A
Authority
CN
China
Prior art keywords
early warning
wire frame
region
image
moving target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610309174.5A
Other languages
English (en)
Inventor
章伟明
周武能
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Donghua University
National Dong Hwa University
Original Assignee
Donghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Donghua University filed Critical Donghua University
Priority to CN201610309174.5A priority Critical patent/CN105956568A/zh
Publication of CN105956568A publication Critical patent/CN105956568A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/44Event detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明涉及一种基于监控目标识别的异常行为检测预警方法,包括以下步骤:获取图像,并对获取的图像进行预处理;基于混合高斯模型的对运动目标进行识别;通过一个矩形对运动目标进行图像分割,提取分割所用矩形的长宽比特征来判断运动目标是行人还是车辆;对视频监控背景中的人行道、机动车道和非机动车道区域通过一个虚拟线框进行划分和界定;判别运动目标是否触发虚拟线框,从而进行检测预警。本发明能够及时对监控视频中的异常行为作出检测与预警。

Description

一种基于监控目标识别的异常行为检测预警方法
技术领域
本发明涉及智能交通技术领域,特别是涉及一种基于监控目标识别的异常行为检测预警方法。
背景技术
随着科学技术的不断发展,智能交通在未来的城市交通中必然会占据十分重要的地位。而视频监控的智能化则是交通智能化中及其重要的一环。现如今城市的监控系统主要还是靠人工完成,计算机技术只是起到了一个内容保存的作用,这就导致了在监控过程中很容易产生疏漏,不能及时发现突发状况。
发明内容
本发明所要解决的技术问题是提供一种基于监控目标识别的异常行为检测预警方法,能够及时对监控视频中的异常行为作出检测与预警。
本发明解决其技术问题所采用的技术方案是:提供一种基于监控目标识别的异常行为检测预警方法,包括以下步骤:
(1)获取图像,并对获取的图像进行预处理;
(2)基于混合高斯模型的对运动目标进行识别;
(3)通过一个矩形对运动目标进行图像分割,提取分割所用矩形的长宽比特征来判断运动目标是行人还是车辆;
(4)对视频监控背景中的人行道、机动车道和非机动车道区域通过一个虚拟线框进行划分和界定;
(5)判别运动目标是否触发虚拟线框,从而进行检测预警。
所述步骤(1)中的预处理包括噪声过滤处理和图像平滑处理。
所述步骤(2)具体为:根据视频数据帧的大小建立一个相同尺度的背景模型,然后在背景中对应每个像素都初始化K个高斯分布函数进行构建,当有新的图像到来时,将新图像的每个像素与该像素的K个高斯分布逐一匹配检验,完成检验后更新各个高斯分布的权重,并对其进行归一化处理,按高斯分布的权重与方差比由大到小将构建每个像素的高斯分布进行排序,选取排序靠前的若干个高斯分布作为背景模型,将新图像的每个像素与背景模型重新进行匹配检验,若匹配成功则为背景点,否则为前景点,完成运动目标的识别。
所述步骤(5)具体为:当人行道区域出现行人,则立即启动人行道与非机动车道之间虚拟线框的检测,若检测到虚拟线框被触发,说明人行道上的行人可能出现非法过马路的危险行为,立即预警并保存当前图像;若非机动车道区域中识别出运动目标,则立即启动人行道与非机动车道之间虚拟线框和非机动车道与机动车道之间虚拟线框的检测,若检测到虚拟线框被触发,便有可能发生车辆事故或者非机动车道区域的车辆非法占道机动车道区域的情况,立即预警并保存当前图像;若机动车道区域中识别出运动目标,则启动非机动车道与机动车道之间虚拟线框的检测,若虚拟线框被触发,则可能出现交通事故或者机动车道区域的车辆非法占道非机动车道区域的情况,立即预警并保存当前图像。
有益效果
由于采用了上述的技术方案,本发明与现有技术相比,具有以下的优点和积极效果:本发明采用混合高斯模型对视频中出现的运动目标进行识别并进行二值化处理。混合高斯模型能有效应对复杂场景,抗干扰能力强,能够更加精确的识别出运动目标。完成对运动目标的识别之后,利用一个矩形分割出运动目标,并对该矩形进行特征提取,分析其长宽比特征,根据长宽比特征来判别行人还是车辆。其次,对视频监控背景中人行道、机动车道和非机动车道的区域利用一个虚拟线框进行划分和界定,一旦完成对运动目标的识别之后,虚拟线框则会立即进行实时检测,检测运动目标是否进入该区域并据此来判断可能的异常行为,从而及时作出预警。
附图说明
图1是本发明的流程图;
图2是运动目标的矩形提取图;
图3是运动目标的分类图;
图4是视频监控下的交通道路图;
图5是交通道路虚拟线框的划分图。
具体实施方式
下面结合具体实施例,进一步阐述本发明。应理解,这些实施例仅用于说明本发明而不用于限制本发明的范围。此外应理解,在阅读了本发明讲授的内容之后,本领域技术人员可以对本发明作各种改动或修改,这些等价形式同样落于本申请所附权利要求书所限定的范围。
本发明的实施方式涉及一种基于监控目标识别的异常行为检测预警方法,如图1所示,包括以下步骤:获取图像,并对获取的图像进行预处理;基于混合高斯模型的对运动目标进行识别;通过一个矩形对运动目标进行图像分割,提取分割所用矩形的长宽比特征来判断运动目标是行人还是车辆;对视频监控背景中的人行道、机动车道和非机动车道区域通过一个虚拟线框进行划分和界定;判别运动目标是否触发虚拟线框,从而进行检测预警。具体如下:
预处理
对视频帧图像进行预处理,主要是对图像做噪声过滤、平滑等处理。滤波处理可以通过多种图像去噪、图像平滑处理方法实现。
运动目标识别
运动目标识别的方法主要有帧差法,光流法和背景差分法。基于本发明所应用的对象为道路交通,背景复杂,干扰项多,故此采用基于背景差分的混合高斯模型。混合高斯模型由于引入了多个高斯模型,所以能有效应对发杂场景并具有更强的抗干扰能力。
根据视频数据帧的大小建立一个相同尺度的背景模型,然后在背景中对应每个像素都初始化K个高斯分布函数,K的值可以根据实际需求或是软硬件条件来设定(一般取3~7),假设某像素点在视频序列中取值依次为{X1,X2,X3………..}如果该点的所有历史值用K个高斯函数来近似,那么所观察到的当前像素值的概率为:
P ( X t ) = Σ i = 1 K ω i , t η ( X t , μ i , t , Σ i , t ) - - - ( 4 - 1 )
式中K是混合高斯模型的个数,ωi,t是t时刻第i个高斯模型的权值,η(Xt,ui,ti,t)是t时刻第i个高斯分布,定义如下:
η ( X t , μ i , t , Σ i , t ) = 1 ( 2 π ) N 2 | Σ i , t | 1 2 e - 1 2 ( X t - μ i , t ) - 1 Σ - 1 i , t ( X t - μ i , t ) - - - ( 4 - 2 )
其中,i=1,2…K,N表示像素的维数,ui,t和Σi,t分别表示t时刻第i个高斯模型的均值和协方差矩阵。
对那些由图像传感器获取到的数据进行前景目标与背景的判断是需要大量计算方可完成的,但是根据混合高斯模型的上述表达式就可做出如下的判断,当有新的图像到来时,将新图像每个像素与该像素已存在的K个高斯分布逐一匹配检验,若满足:
|Xt-ui,t-1|≤2.5*σi,t-1 (4-3)
式中,σi,t-1表示t时刻第i-1个高斯模型的方差。
则表示此像素点与模型匹配,此时更新模型参数:
ω i , t = ( 1 - α ) * ω i , t - 1 + α μ i , t = ( 1 - ρ ) * μ i , t - 1 + ρ * X t σ i , t 2 = ( 1 - ρ ) σ i , t 2 + ρ ( X t - μ i , t - 1 ) ( X t - μ i , t - 1 ) T - - - ( 4 - 4 )
式中,α为用户自定义的学习速率(通常取0.005),ρ为参数学习速率。
若匹配时像素不满足模型,则对相应的模型的权值作衰减:
ωi,t=(1-α)*ωi,t-1 (4-5)
模型保证了有像素与之匹配的模型权值增大,不匹配当前像素的模型权值变小。最后根据ωi,ti,t从大到小排列高斯模型,并根据其中0.5<T<1,argmin(·)是指加权求和得到的结果可以大于阈值T时,B值就取i的最小值,从排序后的高斯模型中选择前B个高斯模型作为背景模型。
然后重新对新图像的像素点与上述B个高斯模型做匹配检验,如果新图像的像素点与前B个高斯模型之一匹配,则表示该像素点为背景点,否则为前景点,从而完成了运动目标的检测。
目标分割和特征提取
识别运动目标之后,对二值化后的运动目标利用一个矩形进行分割,提取出分割所采用矩形的长宽比(见图2),并根据该特征来对目标进行行人和车辆的分类。
从图2可以看出行人和车辆的长宽比特征有着明显的差别。如图3所示,根据监控摄像头所处实际位置设定相应长宽比特征的阈值来具体判断。
虚拟线框设计
图4所示的是视频监控下的交通道路,对图4所示的道路利用虚拟线框进行划分得到如图5所示的道路。
其中,最左边A区域为行人区域,中间的非机动车道区域为B区域,右边机动车道区域为C区域。各区域之间利用红色虚拟线框进行划分。
一旦视频中A区域出现运动目标(即行人),则立即启动A区域与B区域之间虚拟线框的检测,实时检测该区域是否被触发,一旦虚拟线框被触发,说明该行人可能出现非法过马路的危险行为,立即预警并保存当前视频帧图像。
若B区域中识别出运动目标,则立即启动A区域与B区域之间、和B区域与C区域之间虚拟线框的检测,若检测到虚拟线框被处罚,便有可能发生车辆事故或者B区域汽车非法占道C区域的可能性,立即预警并保存当前视频帧图像。
若C区域中识别出运动目标,则启动B区域与C区域之间虚拟线框的检测,若虚拟线框被触发,则可能出现交通事故或者C区域汽车非法占道B区域,立即预警并保存当前视频帧图像。
不难发现,本发明采用混合高斯模型对视频中出现的运动目标进行识别并进行二值化处理。混合高斯模型能有效应对复杂场景,抗干扰能力强,能够更加精确的识别出运动目标。完成对运动目标的识别之后,利用一个矩形分割出运动目标,并对该矩形进行特征提取,分析其长宽比特征,根据长宽比特征来判别行人还是车辆。其次,对视频监控背景中人行道、机动车道和非机动车道的区域利用一个虚拟线框进行划分和界定,一旦完成对运动目标的识别之后,虚拟线框则会立即进行实时检测,检测运动目标是否进入该区域并据此来判断可能的异常行为,从而及时作出预警。

Claims (4)

1.一种基于监控目标识别的异常行为检测预警方法,其特征在于,包括以下步骤:
(1)获取图像,并对获取的图像进行预处理;
(2)基于混合高斯模型的对运动目标进行识别;
(3)通过一个矩形对运动目标进行图像分割,提取分割所用矩形的长宽比特征来判断运动目标是行人还是车辆;
(4)对视频监控背景中的人行道、机动车道和非机动车道区域通过一个虚拟线框进行划分和界定;
(5)判别运动目标是否触发虚拟线框,从而进行检测预警。
2.根据权利要求1所述的基于监控目标识别的异常行为检测预警方法,其特征在于,所述步骤(1)中的预处理包括噪声过滤处理和图像平滑处理。
3.根据权利要求1所述的基于监控目标识别的异常行为检测预警方法,其特征在于,所述步骤(2)具体为:根据视频数据帧的大小建立一个相同尺度的背景模型,然后在背景中对应每个像素都初始化K个高斯分布函数进行构建,当有新的图像到来时,将新图像的每个像素与该像素的K个高斯分布逐一匹配检验,完成检验后更新各个高斯分布的权重,并对其进行归一化处理,按高斯分布的权重与方差比由大到小将构建每个像素的高斯分布进行排序,选取排序靠前的若干个高斯分布作为背景模型,将新图像的每个像素与背景模型重新进行匹配检验,若匹配成功则为背景点,否则为前景点,完成运动目标的识别。
4.根据权利要求1所述的基于监控目标识别的异常行为检测预警方法,其特征在于,所述步骤(5)具体为:当人行道区域出现行人,则立即启动人行道与非机动车道之间虚拟线框的检测,若检测到虚拟线框被触发,说明人行道上的行人可能出现非法过马路的危险行为,立即预警并保存当前图像;若非机动车道区域中识别出运动目标,则立即启动人行道与非机动车道之间虚拟线框和非机动车道与机动车道之间虚拟线框的检测,若检测到虚拟线框被触发,便有可能发生车辆事故或者非机动车道区域的车辆非法占道机动车道区域的情况,立即预警并保存当前图像;若机动车道区域中识别出运动目标,则启动非机动车道与机动车道之间虚拟线框的检测,若虚拟线框被触发,则可能出现交通事故或者机动车道区域的车辆非法占道非机动车道区域的情况,立即预警并保存当前图像。
CN201610309174.5A 2016-05-11 2016-05-11 一种基于监控目标识别的异常行为检测预警方法 Pending CN105956568A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610309174.5A CN105956568A (zh) 2016-05-11 2016-05-11 一种基于监控目标识别的异常行为检测预警方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610309174.5A CN105956568A (zh) 2016-05-11 2016-05-11 一种基于监控目标识别的异常行为检测预警方法

Publications (1)

Publication Number Publication Date
CN105956568A true CN105956568A (zh) 2016-09-21

Family

ID=56912413

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610309174.5A Pending CN105956568A (zh) 2016-05-11 2016-05-11 一种基于监控目标识别的异常行为检测预警方法

Country Status (1)

Country Link
CN (1) CN105956568A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108596045A (zh) * 2018-04-02 2018-09-28 四川大学 一种基于空中监控平台的群体异常行为检测方法
CN109857114A (zh) * 2019-02-26 2019-06-07 温州市职业中等专业学校 校园移动智能机器人及校园智能管理系统
CN111753579A (zh) * 2019-03-27 2020-10-09 杭州海康威视数字技术股份有限公司 指定代步工具的检测方法及装置
CN112528821A (zh) * 2020-12-06 2021-03-19 杭州晶一智能科技有限公司 基于运动检测的人行横道行人检测方法
CN112597945A (zh) * 2020-12-29 2021-04-02 上海眼控科技股份有限公司 车辆检测方法及装置
US11182596B2 (en) * 2018-11-08 2021-11-23 International Business Machines Corporation Identifying a deficiency of a facility
CN114332776A (zh) * 2022-03-07 2022-04-12 深圳市城市交通规划设计研究中心股份有限公司 非机动车占用人行道检测方法、系统、设备及存储介质
CN114898342A (zh) * 2022-07-15 2022-08-12 深圳市城市交通规划设计研究中心股份有限公司 行驶中非机动车驾驶员接打电话的检测方法
CN117496727A (zh) * 2023-11-13 2024-02-02 广东高信智能科技有限公司 基于卡槽板的交通识别和控制的方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103077614A (zh) * 2012-12-24 2013-05-01 南京航空航天大学 一种基于计算机视觉的人行横道处车辆的检测系统及方法
CN104301669A (zh) * 2014-09-12 2015-01-21 重庆大学 基于双摄像头协同的可疑目标检测跟踪与识别方法
CN104599502A (zh) * 2015-02-13 2015-05-06 重庆邮电大学 一种基于视频监控的车流量统计方法
CN104680555A (zh) * 2015-02-13 2015-06-03 电子科技大学 基于视频监控的越界检测方法及越界监控系统
CN104680557A (zh) * 2015-03-10 2015-06-03 重庆邮电大学 视频序列图像中的异常行为智能检测方法
CN105100718A (zh) * 2015-07-29 2015-11-25 西安冉科信息技术有限公司 一种基于视频摘要的智能视频分析方法
CN105184771A (zh) * 2015-08-12 2015-12-23 西安斯凯智能科技有限公司 一种自适应运动目标检测系统及检测方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103077614A (zh) * 2012-12-24 2013-05-01 南京航空航天大学 一种基于计算机视觉的人行横道处车辆的检测系统及方法
CN104301669A (zh) * 2014-09-12 2015-01-21 重庆大学 基于双摄像头协同的可疑目标检测跟踪与识别方法
CN104599502A (zh) * 2015-02-13 2015-05-06 重庆邮电大学 一种基于视频监控的车流量统计方法
CN104680555A (zh) * 2015-02-13 2015-06-03 电子科技大学 基于视频监控的越界检测方法及越界监控系统
CN104680557A (zh) * 2015-03-10 2015-06-03 重庆邮电大学 视频序列图像中的异常行为智能检测方法
CN105100718A (zh) * 2015-07-29 2015-11-25 西安冉科信息技术有限公司 一种基于视频摘要的智能视频分析方法
CN105184771A (zh) * 2015-08-12 2015-12-23 西安斯凯智能科技有限公司 一种自适应运动目标检测系统及检测方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108596045A (zh) * 2018-04-02 2018-09-28 四川大学 一种基于空中监控平台的群体异常行为检测方法
US11182596B2 (en) * 2018-11-08 2021-11-23 International Business Machines Corporation Identifying a deficiency of a facility
CN109857114A (zh) * 2019-02-26 2019-06-07 温州市职业中等专业学校 校园移动智能机器人及校园智能管理系统
CN111753579A (zh) * 2019-03-27 2020-10-09 杭州海康威视数字技术股份有限公司 指定代步工具的检测方法及装置
CN112528821A (zh) * 2020-12-06 2021-03-19 杭州晶一智能科技有限公司 基于运动检测的人行横道行人检测方法
CN112597945A (zh) * 2020-12-29 2021-04-02 上海眼控科技股份有限公司 车辆检测方法及装置
CN114332776A (zh) * 2022-03-07 2022-04-12 深圳市城市交通规划设计研究中心股份有限公司 非机动车占用人行道检测方法、系统、设备及存储介质
CN114898342A (zh) * 2022-07-15 2022-08-12 深圳市城市交通规划设计研究中心股份有限公司 行驶中非机动车驾驶员接打电话的检测方法
CN114898342B (zh) * 2022-07-15 2022-11-25 深圳市城市交通规划设计研究中心股份有限公司 行驶中非机动车驾驶员接打电话的检测方法
CN117496727A (zh) * 2023-11-13 2024-02-02 广东高信智能科技有限公司 基于卡槽板的交通识别和控制的方法及装置

Similar Documents

Publication Publication Date Title
CN105956568A (zh) 一种基于监控目标识别的异常行为检测预警方法
US11840239B2 (en) Multiple exposure event determination
Tian et al. An automatic car accident detection method based on cooperative vehicle infrastructure systems
US9058744B2 (en) Image based detecting system and method for traffic parameters and computer program product thereof
Zhang et al. A graded offline evaluation framework for intelligent vehicle’s cognitive ability
Ketcham et al. Recognizing the Illegal Parking Patterns of Cars on the Road in Front of the Bus Stop Using the Support Vector Machine
Quinn et al. Traffic flow monitoring in crowded cities
Khan Estimating Speeds and Directions of Pedestrians in Real-Time Videos: A solution to Road-Safety Problem.
Rafi et al. Performance analysis of deep learning YOLO models for South Asian regional vehicle recognition
Cypto et al. Automatic detection system of speed violations in a traffic based on deep learning technique
Kim Deep learning-based vehicle type and color classification to support safe autonomous driving
Das et al. Why slammed the brakes on? auto-annotating driving behaviors from adaptive causal modeling
CN115762153A (zh) 倒车检测方法及装置
Abdi et al. Driver information system: A combination of augmented reality and deep learning
CN112633163B (zh) 一种基于机器学习算法实现非法运营车辆检测的检测方法
CN108596146A (zh) 道路多目标分类方法
Panigrahi et al. Real Time Car Speed Detection Using CNN Algorithm
Dwivedi et al. Speed detection software
Dopfer et al. What can we learn from accident videos?
Kovačić et al. Measurement of road traffic parameters based on multi-vehicle tracking
Patil et al. A Novel Method of Traffic Rule Compliance Detection Using Morphological Operations at Toll Booths
Ismail et al. Vehicle Detection, Counting, and Classification System based on Video using Deep learning Models
CN109063675A (zh) 车流密度计算方法、系统、终端及计算机可读存储介质
Hamdan et al. Measuring the road traffic intensity using neural network with computer vision
Huang et al. Driving safety prediction and safe route mapping using in-vehicle and roadside data

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160921

RJ01 Rejection of invention patent application after publication