CN1266656C - 视频监控系统的智能化报警处理方法 - Google Patents

视频监控系统的智能化报警处理方法 Download PDF

Info

Publication number
CN1266656C
CN1266656C CN 200310109882 CN200310109882A CN1266656C CN 1266656 C CN1266656 C CN 1266656C CN 200310109882 CN200310109882 CN 200310109882 CN 200310109882 A CN200310109882 A CN 200310109882A CN 1266656 C CN1266656 C CN 1266656C
Authority
CN
China
Prior art keywords
video
background
scene
image
monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN 200310109882
Other languages
English (en)
Other versions
CN1556506A (zh
Inventor
杨树堂
陈丽亚
李建华
陆松年
郭礼华
袁晓彤
陈俊文
朱靖宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN 200310109882 priority Critical patent/CN1266656C/zh
Publication of CN1556506A publication Critical patent/CN1556506A/zh
Application granted granted Critical
Publication of CN1266656C publication Critical patent/CN1266656C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

一种视频监控系统的智能化报警处理方法。属于视频监控技术领域。方法步骤如下:采用背景建模方法,对采集得到的视频流进行场景背景提取,排除场景中的运动干扰,提取出稳定的视频监控场景画面;采用视频对象分割方法,对提取的监控场景进行视频对象分割,分割出所关注的固定监控对象,经过分割后,跟踪识别就更精确;采用视频跟踪方法,利用相邻帧中的视频对象的颜色特性,完成对视频对象进行跟踪,从而实现对于丢失的视频对象的报警处理。本发明能对指定的监控对象进行及时、准确的跟踪定位,从而高效、快捷地完成智能化报警处理。

Description

视频监控系统的智能化报警处理方法
技术领域
本发明涉及一种智能化报警处理方法,具体是一种视频监控系统的智能化报警处理方法。属于视频监控技术领域。
背景技术
目前的视频监控系统的报警处理还没有达到很好的智能化水平,并且复杂程度高,如果把智能化报警处理应用到监控系统中,不仅造价昂贵,效果也很不理想,因此现有的大部分监控系统报警处理还是采用人工方式。通常是将摄像机的输出结果记录下来,当异常情况(如停车场中的车辆被盗)发生后,通过人工观察结果,对于这种异常进行记录与处理,此时的视频监控系统没有充分发挥其实时主动的监督作用。还有少部分的视频监控系统,虽然可以自动实现报警处理,可是智能化程度很低,主要是检测场景中是否存在运动,从而根据场景的运动信息给出报警信号。这种方法不适用于室外或者人员走动频繁等场景。
经文献检索发现,在美国专利中,专利号为4589081号专利,专利名称为:“Inteligent surveillance alarm system and method”,(“智能化监控报警系统和方法”)此技术利用统计的方法,统计过去时间段内的监控环境中的统计信息,利用当前的监控信息与过去时间段内的统计信息进行匹配,利用这种匹配关系来完成报警处理。这种方法虽然简单,可是当场景中存在着运动物体的干扰时,其误报警将很严重。美国专利号为:6457364,专利名称为:“UltrasoundSurveillance and Break-In Alarm”(“超声波监控和闯入报警系统”),此专利技术首先向监控场景中发射超声波,利用发射回来的超声波信息,来判断在相应的位置是否有人闯入。这种方法可以很好的应用为家庭的防盗系统,可是不能很好的应用在对固定对象的防盗系统,并且它也很容易受场景中运动的干扰。此方法还有一个最大的缺点是不能进行摄像和摄影。
发明内容
本发明的目的在于克服现有技术的不足,提供一种稳定、高效的视频监控系统的智能化报警处理方法,使其解决已有视频监控系统的智能化报警处理能力差、复杂程度高的技术缺陷。本发明采用计算机视觉和模式识别领域的新技术,如果场景中存在物体运动或者人员的走动,或是场景中的光线发生改变,只要监控场景中的监控对象还在,就可以排除这些干扰,防止误报警,从而实现智能化的视频监控。
本发明是通过以下技术方案实现的,本发明方法步骤如下:
(1)采用背景建模方法,对采集得到的视频流进行场景背景更新维护,提取出去除运动干扰的视频监控场景画面;
(2)采用视频对象分割方法,对得到的监控背景进行视频对象提取;
(3)采用视频跟踪方法,利用相邻帧中视频对象的颜色特性,实现对视频对象的跟踪,并对监控对象的丢失进行报警处理。
以下对本发明作进一步的说明,具体内容如下:
所述的背景建模方法,具体步骤如下:
●背景初始化:采用背景初始化算法,利用当前的初始输入帧的信息作为各个模型的均值,系统默认最大方差为各模型的方差;
●数据输入:对收到的视频帧信息进行转换,为YUV12到RGB的转换,采用MSDN推荐内插法;
●背景更新:抽选收到的帧,根据背景模型更新算法处理;
●背景预处理:利用图像形态学原理,利用腐蚀等方式消除孤立点;
●阴影消除:取出孤立点后,对仅色度值分布相同的点的集合定义为阴影,去除阴影后得到更精确的背景。
所述的背景初始化算法,其实就是建立背景模型。背景模型特征值采用像素的亮度色度值RGB,其中Iij=(Rij,Gij,Bij)表示第j帧、第i个像素上的RGB值,分布模型描述为:
背景分布的概率密度函数p(x)的估计值 满足:
式中,在RGB空间上,每个像素假定有N个高斯分布,x为某一帧某像素点上的输入特征向量x=(R,G,B)T为该像素点的第i个高斯分布的权重,其中μi为第i个高斯分布的均值,μi=(μiR,μiG,μiB)T;σi为第i个高斯分布的均方差,σi=(σiR,σiG,σiB)T
由于背景的稳定状态数目一般有限,再考虑计算成本,假设单一高斯分布数目N=5,就可以满足大多数的情况了。同时规定,N个单一分布中的前L个权值较大的分布是背景分布。即按分布的权重降序排列时,L满足:
Figure C20031010988200071
其余的分布可以认为是由于前景运动而引起的暂时变化,不属于背景。门限T的大小影响背景中稳定状态的数目,同分布数N有关。
所述的背景模型更新算法,主要是用新的视频采样值实时地调整匹配的单一高斯分布的权重和参数,来更新模型逼近变化后的真实背景分布。其匹配准则为:|x-μi|<τσi,而且同时
Figure C20031010988200072
最小时,才是匹配的。
匹配分布的参数更新遵循下式:
μi(t)=(1-α)μi(t-1)+αx(t)                    (3)
σ i ( t ) = ( ( 1 - β ) σ i 2 ( t - 1 ) + β ( x ( t ) - μ i ( t ) ) 2 ) 1 / 2 - - - ( 4 )
因子α的大小表征了时间远近不同的采样值对背景物体状态的影响大小,β的大小则主要表征了摄像机自身参数变化的快慢。
分布权重更新遵循:
当新采样与第i个分布匹配时,S(t)=1;不匹配时S(t)=0。因子γ的大小反映了背景模型对背景物体变化的敏感程度。
当新的值不匹配时,在分布数N一定的情况下,将舍弃权重最小的高斯分布,用新的分布来代替,并且初始化权重为
Figure C20031010988200075
同时对其他权重做归一化处理:
(i≠min)。其中,参数l的取值,表示场景变化对背景模型适应的速度影响。
所述的视频对象分割方法,具体步骤如下:
●背景图像读取:以RGB的格式读入图象数据,然后分别转换为YUV12和HSI格式的数据保存;
●预处理:采用Roberts算子计算原图象的梯度图象,然后用中值滤波的方法对梯度图象去噪声,减少由于噪声引起的过分割,中值滤波器窗口大小的选择兼顾滤波效果和运算速度;
●图象分割:采用分水岭算法对图象进行块分割,即以图象的灰度作为第三维建立三维拓扑图,用Vincent和Soille提出的模拟注水的方法提取拓扑图表面的分水岭,自然形成各区域,完成图象的块分割;传统的分水岭算法最大的缺点就是过分割现象,即会出现大量的分割图像块,这主要是噪声和图像内容本身比较复杂造成的,也是分水岭算法本身无法克服的。为了分割出准确的视频监控对象,必须对分水岭算法进行改进处理,主要对分水岭算法分割后的结果,再采用基于颜色信息的区域聚类算法;
●颜色分析和区域聚合:设一幅灰度图象经过分水岭算法处理后被分为k个区域,得到块邻接关系图;
●弱边界的处理:经过颜色聚类处理后,再消除弱边界,即对每一条相邻块之间的边界,检验边界上的梯度大于某一设定阈值的象素的比例,若该比例超过50%则认为是强边界予以保留,反之则认为是弱边界,相应的邻块进行合并。
传统的分水岭算法最大的缺点就是过分割现象,即会出现大量的分割图像块,这主要是噪声和图像内容本身比较复杂造成的,也是分水岭算法本身无法克服的。为了分割出准确的视频监控对象,必须对分水岭算法进行改进处理,主要对分水岭算法分割后的结果,再采用基于颜色信息的块聚类算法,这样就可以很好的解决过分割现象,准确地提取出视频对象。利用视频对象分割方法,不再关注整个监控场景,只关注分割出来的视频对象,从而大大的减小视频跟踪处理的复杂程度,为实现实时视频跟踪提供基础。
所述的视频跟踪方法,具体步骤如下:
●对相继视频帧中的视频对象进行亮度的灰度值匹配,如果在确定的搜索范围内能很好的匹配上监控对象,则认为对象存在,否则认为监控对象已经丢失,发出报警信号;
●系统检测出场景中显著的光线变化,给出提示。检测出场景中光线的变化,对指定的监控对象进行及时、准确的跟踪定位,从而高效、快捷地完成智能化报警处理。
与现有技术相比,本发明将背景建模和视频对象分割结合起来,首先对采集得到的视频流进行场景背景更新维护,提取出去除运动干扰的视频监控场景画面,很好的排除了场景中人的移动所引起的遮挡对监控对象的干扰,检测出场景中光线的变化,对指定的监控对象进行及时、准确的跟踪定位,从而高效、快捷地完成智能化报警处理。
附图说明
图1本发明方法流程框图
图2本发明背景建模流程框图
图3本发明视频分割与跟踪流程框图
具体实施方式
基于本发明方法实现的的智能化报警的视频监控系统,是一种当监控场景中的固定对象发生丢失时的自动报警系统。此系统主要有以下几个特点:(1)可以很好的排除对监控对象运动遮挡的干扰;(2)可以自动识别监控场景中光线的改变;(3)当丢失的监控对象恢复原有位置,可以重新识别与跟踪;(4)对实际的监控环境有很好的适应能力。以下结合附图对本发明方法作进一步详细描述。
本发明是视频监控系统中的智能化报警处理的核心技术,其方法流程框图如图1所示,其主要包括四部分:背景建模、视频对象分割、视频对象跟踪和报警处理。
背景建模的流程框图如图2所示,其中
●背景初始化模块:利用当前的初始输入帧的信息作为各个模型的均值,系统默认最大方差为各模型的方差。
●数据输入模块:对收到的视频帧信息进行转换,现定为YUV12到RGB的转换(采用MSDN推荐内插法)。
●背景更新模块:抽选收到的帧(暂定为4取1),根据以上更新算法处理。
●背景预处理模块:利用图像形态学原理,利用腐蚀等方式消除孤立点。
●阴影消除模块:取出孤立点后,对色度值分布相同而亮度值不同的点的集合定义为阴影,去除阴影后得到更精确的背景。
视频分割与跟踪主要完成从监控场景中分离出监控视频对象,并且在后继的视频帧内进行跟踪定位,其流程框图如图3所示。
前面背景建模中提取出来的监控背景图像数据送入视频对象分割模块,系统将根据用户预先定义的分割区域,进行对象分割。主要采用改进的分水岭算法来实现。传统的分水岭算法最大的缺点就是过分割现象,即会出现大量的分割图像块,这主要是噪声和图像内容本身比较复杂造成的,也是分水岭算法本身无法克服的。为了分割出准确的视频监控对象,必须对分水岭算法进行改进处理,主要对分水岭算法分割后的结果,再采用基于颜色信息的块聚类算法,这样就可以很好的解决过分割现象,准确地提取出视频对象。视频对象分割后视频对象将送入视频对象跟踪模块,视频对象跟踪中,利用前面已提取得到的监控对象,在后继的视频帧内进行对象跟踪,其具体的跟踪方法是对相继视频帧的视频对象进行亮度的灰度值匹配,如果在确定的搜索范围内可以很好的匹配上监控对象,则认为其没有丢失,如果不能匹配上,则认为监控对象已经丢失,并将触发报警模块发出报警信号。同时,跟踪模块可以检测出场景中显著的光线变化,对这种情形不予报警。

Claims (3)

1、一种视频监控系统中的智能化报警处理方法,其特征是,方法步骤如下:
(1)采用背景建模方法,对采集得到的视频流进行场景背景更新维护,提取出去除运动干扰的视频监控场景画面;
(2)采用视频对象分割方法,对得到的监控场景进行视频对象提取;
(3)采用视频跟踪方法,利用相邻帧中视频对象的颜色特性,实现对视频对象的跟踪,并对监控对象的丢失进行报警处理,
所述的背景建模方法,具体步骤如下:
●背景初始化:采用背景初始化算法,利用当前的初始输入帧的信息作为各个模型的均值,系统默认最大方差为各模型的方差;
●数据输入:对收到的视频帧信息进行转换,为YUV12到RGB的转换,采用MSDN推荐内插法;
●背景更新:抽选收到的帧,根据背景模型更新算法处理;
●背景预处理:利用图像形态学原理,利用腐蚀方式消除孤立点;
●阴影消除:取出孤立点后,对仅色度值分布相同的点的集合定义为阴影,去除阴影后得到更精确的背景,
所述的视频对象分割方法,具体步骤如下:
●背景图像读取:以RGB的格式读入图象数据,然后分别转换为YUV12和HSI格式的数据保存;
●预处理:采用Roberts算子计算原图象的梯度图象,然后用中值滤波的方法对梯度图象去噪声,减少由于噪声引起的过分割,中值滤波器窗口大小的选择兼顾滤波效果和运算速度;
●图象分割:采用分水岭算法对图象进行块分割,即以图象的灰度作为第三维建立三维拓扑图,用Vincent和Soille提出的模拟注水的方法提取拓扑图表面的分水岭,自然形成各区域,完成图象的块分割;
●颜色分析和区域聚合:设一幅灰度图象经过分水岭算法处理后被分为k个区域,得到块邻接关系图;
●弱边界的处理:经过颜色聚类处理后,再消除弱边界,即对每一条相邻块之间的边界,检验边界上的梯度大于某一设定阈值的象素的比例,若该比例超过50%则认为是强边界予以保留,反之则认为是弱边界,相应的邻块进行合并,
所述的视频跟踪方法,具体步骤如下:
●对相继视频帧中的视频对象进行亮度的灰度值匹配,如果在确定的搜索范围内能很好的匹配上监控对象,则认为对象存在,否则认为监控对象已经丢失,发出报警信号;
●系统检测出场景中显著的光线变化,给出提示。
2、根据权利要求1所述的视频监控系统中的智能化报警处理方法,其特征是,所述的背景初始化算法,具体如下:
背景模型特征值采用像素的亮度色度值RGB,其中Iij=(Rij,Gij,Bij)表示第j帧、第i个像素上的RGB值,分布模型描述为:
背景分布的概率密度函数p(x)的估计值 满足:
Figure C2003101098820003C2
式中,在RGB空间上,每个像素假定有N个高斯分布,x为某一帧某像素点上的输入特征向量x=(R,G,B)T
Figure C2003101098820003C3
为该像素点的第i个高斯分布的权重,其中μi为第i个高斯分布的均值,μi=(μiR,μiG,μiB)T,σi为第i个高斯分布的均方差,σi=(σiR,σiG,σiB)T
按分布的权重降序排列时,L满足: 门限T的大小影响背景中稳定状态的数目,同分布数N有关。
3、根据权利要求1所述的视频监控系统中的智能化报警处理方法,其特征是,所述的背景模型更新算法,具体如下:
用新的视频采样值实时地调整匹配的单一高斯分布的权重和参数,来更新模型逼近变化后的真实背景分布,其匹配准则为:|x-μi|<τσi,而且同时
Figure C2003101098820003C5
最小时,才是匹配的;
匹配分布的参数更新遵循下式:
μi(t)=(1-α)μi(t-1)+αx(t)
σ i ( t ) = ( ( 1 - β ) σ i 2 ( t - 1 ) + β ( x ( t ) - μ i ( t ) ) 2 ) 1 / 2
分布权重更新遵循:
Figure C2003101098820004C2
当新采样与第i个分布匹配时,S(t)=1;否则S(t)=0,且在分布数N一定的情况下,舍弃权重最小的高斯分布,用新的分布来代替,并且初始化权重为 同时对其他权重做归一化处理:
Figure C2003101098820004C4
i≠min,其中,参数1的取值,表示场景变化对背景模型适应的速度影响。
CN 200310109882 2003-12-30 2003-12-30 视频监控系统的智能化报警处理方法 Expired - Fee Related CN1266656C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 200310109882 CN1266656C (zh) 2003-12-30 2003-12-30 视频监控系统的智能化报警处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 200310109882 CN1266656C (zh) 2003-12-30 2003-12-30 视频监控系统的智能化报警处理方法

Publications (2)

Publication Number Publication Date
CN1556506A CN1556506A (zh) 2004-12-22
CN1266656C true CN1266656C (zh) 2006-07-26

Family

ID=34335429

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200310109882 Expired - Fee Related CN1266656C (zh) 2003-12-30 2003-12-30 视频监控系统的智能化报警处理方法

Country Status (1)

Country Link
CN (1) CN1266656C (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101146216B (zh) * 2006-09-14 2010-05-12 黄柏霞 基于画面分割的视频定位及参数计算方法
JP5479907B2 (ja) * 2006-11-20 2014-04-23 アデレード リサーチ アンド イノヴェーション ピーティーワイ エルティーディー ネットワーク監視システム
CN101626489B (zh) * 2008-07-10 2011-11-02 苏国政 无人值守目标智能识别与自动跟踪的方法及其系统
CN101420536B (zh) * 2008-11-28 2011-03-02 江苏科海智能系统有限公司 视频流背景图像建模方法
CN101436252A (zh) * 2008-12-22 2009-05-20 北京中星微电子有限公司 一种车辆视频图像中车身颜色识别方法及系统
JP5816098B2 (ja) * 2009-02-02 2015-11-18 アイサイト モバイル テクノロジーズ リミテッド ビデオストリームの中のオブジェクト認識および追跡システムおよび方法
JP5218168B2 (ja) * 2009-03-11 2013-06-26 ソニー株式会社 撮像装置、動体検知方法、動体検知回路、プログラム、及び監視システム
JP5625995B2 (ja) * 2010-05-10 2014-11-19 カシオ計算機株式会社 被写体追跡装置、被写体追跡方法及びプログラム
CN102457733B (zh) * 2010-10-18 2014-04-09 满景资讯股份有限公司 增强辨识立体对象的方法
AU2010257454B2 (en) * 2010-12-24 2014-03-06 Canon Kabushiki Kaisha Summary view of video objects sharing common attributes
CN104392573B (zh) * 2014-10-11 2017-09-05 天津艾思科尔科技有限公司 一种基于视频的智能偷盗检测方法
CN106034222A (zh) * 2015-03-16 2016-10-19 深圳市贝尔信智能系统有限公司 一种立体式捕捉物体的方法、装置以及系统
CN106559645B (zh) * 2015-09-25 2020-01-17 杭州海康威视数字技术股份有限公司 基于摄像机的监控方法、系统和装置
CN108460968A (zh) * 2017-02-22 2018-08-28 中兴通讯股份有限公司 一种基于车联网获取交通路况信息的方法及装置
CN108492279B (zh) * 2018-02-11 2020-05-05 杭州鸿泉物联网技术股份有限公司 一种车辆篷布开关状态检测方法和系统

Also Published As

Publication number Publication date
CN1556506A (zh) 2004-12-22

Similar Documents

Publication Publication Date Title
CN1266656C (zh) 视频监控系统的智能化报警处理方法
CN103164858B (zh) 基于超像素和图模型的粘连人群分割与跟踪方法
CN105427626B (zh) 一种基于视频分析的车流量统计方法
Mikic et al. Moving shadow and object detection in traffic scenes
CN101826228B (zh) 基于背景估计的公交乘客运动目标检测方法
CN110874592B (zh) 一种基于总有界变分的森林火灾烟雾图像检测方法
CN106447674B (zh) 一种视频的背景去除方法
EP1766581A1 (en) Method for detecting desired objects in a highly dynamic environment by a monitoring system
CN107103292A (zh) 一种基于运动车辆跟踪的车流量统计方法
CN101017573A (zh) 一种基于视频监控的运动目标检测与识别方法
CN1918604A (zh) 对背景区域和前景区域进行建模的方法
WO2023273011A1 (zh) 高空抛物检测方法和装置、设备,及计算机存储介质
CN109063667B (zh) 一种基于场景的视频识别方式优化及推送方法
CN102034240A (zh) 一种静态前景检测和跟踪方法
CN101576952A (zh) 一种检测静止目标的方法和装置
CN105046218A (zh) 一种基于串并行处理的多特征交通视频烟雾检测方法
CN102663362A (zh) 一种基于灰度特征的运动目标检测方法
Hu et al. Parallel spatial-temporal convolutional neural networks for anomaly detection and location in crowded scenes
CN109086682A (zh) 一种基于多特征融合的智能视频黑烟车检测方法
Li et al. Intelligent transportation video tracking technology based on computer and image processing technology
CN107169439A (zh) 一种行人车辆检测与分类方法
Husni et al. Crowd event detection in computer vision
CN103400148A (zh) 基于视频分析的银行自助服务区域尾随行为检测方法
CN112258552A (zh) 一种社区监控场景下行人多目标跟踪方法
CN116453069A (zh) 基于级联差异感知模型的高速公路抛洒物检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C19 Lapse of patent right due to non-payment of the annual fee
CF01 Termination of patent right due to non-payment of annual fee