CN101179713A - 复杂背景下单个运动目标的检测方法 - Google Patents

复杂背景下单个运动目标的检测方法 Download PDF

Info

Publication number
CN101179713A
CN101179713A CNA200710176742XA CN200710176742A CN101179713A CN 101179713 A CN101179713 A CN 101179713A CN A200710176742X A CNA200710176742X A CN A200710176742XA CN 200710176742 A CN200710176742 A CN 200710176742A CN 101179713 A CN101179713 A CN 101179713A
Authority
CN
China
Prior art keywords
image
pixel
difference
moving target
prime
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA200710176742XA
Other languages
English (en)
Inventor
张延华
陈春朋
胡启梁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing University of Technology
Original Assignee
Beijing University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing University of Technology filed Critical Beijing University of Technology
Priority to CNA200710176742XA priority Critical patent/CN101179713A/zh
Publication of CN101179713A publication Critical patent/CN101179713A/zh
Pending legal-status Critical Current

Links

Images

Abstract

复杂背景下单个运动目标的检测方法,属于数字图像处理领域。首先对摄像头采集的第k帧图像fk(x,y)和第k-1帧图像fk-1(x,y)分别采用laplace算子进行边缘提取,然后对经过边缘提取的两帧图像进行差分运算,得到差分图像D(x,y),然后对差分图像D(x,y)进行均值滤波和二值化处理,最后对二值化后的图象进行判断,即认为当差分图像中某一个像素的差大于设定的阈值时,则认为该像素是目标像素,反之则认为是静止不动的背景像素。本发明能够在噪声比较严重的情况下,很好的检测出运动目标,在监控和智能交通等领域有广泛的应用前景。

Description

复杂背景下单个运动目标的检测方法
技术领域
本发明属于数字图象处理领域。
背景技术
新一代的智能视觉监控技术现在航天、军事、农业、工业等有着广泛的应用,它是一个跨学科的综合问题,也是一个极具挑战性的前沿课题。它与传统监控技术的重要区别在于,试图赋予监控系统观察分析场景内容的能力,从而能够在几乎不需要人为干预的情况下,通过对摄像机拍录的图像序列进行自动分析来对动态场景中的目标进行定位、识别和跟踪,并在此基础上分析和判断目标的行为,做到既能完成日常管理又能在异常情况发生的时候及时做出反应。
在整个视觉监控系统中,运动目标检测与跟踪处于最底层,是各种后续高级处理如目标分类、行为理解等的基础。运动目标检测是指从视频流中实时提取目标,而运动目标跟踪则指对目标进行连续的跟踪以确定其运动轨迹。
对运动目标的检测通常有三种方法光流法、瞬时差分算法和背景减法。大多数光流法的计算非常复杂,如果没有硬件支持,不适合实时处理,而且对噪声也比较敏感。瞬时差分算法虽然对动态环境有很好的适应性,能实现实时的运动检测,但是如果图像的质量不是很好,噪声比较严重的话,这种检测方法的可靠性就会大大下降。背景减法则是一个重要的运动检测方法,它能够较完整的提取目标点,却容易受到光照和外部条件造成的场景变化的影响。所以它的难点在于如何进行背景更新。
传统的这种瞬时差分算法在应用的时候有一定的局限性,如果图像中噪声比较严重的话,仅通过阈值的选取来提取运动区域出现错误的几率会比较大,而且阈值的选取并不容易,这样很容易就将噪声点误判为运动目标。
发明内容
本发明的目的是在静止的复杂背景下对单个运动目标进行检测。本发明对传统的瞬时差分的方法进行了改进,并且在以TMS320C6416为核心的DSP开发板上实现了本发明提出的改进算法,经过对算法的汇编语言的不断优化和改进,能够实时且较准确的锁定运动目标,并且能够钩实时得到运动目标的位置信息。
瞬时差分算法是主要的运动目标检测算法之一,它直接比较了两帧图像对应像素点的灰度值的不同,然后通过阈值来提取序列图像中的运动区域。这个在检测图像序列中是个很重要的过程。场景中任何可观察的运动都会在场景序列的变化上体现,检测这个变化,就是在检测其运动过程。
本发明的检测方法主要包含下列步骤:
步骤一:读取第k帧图像fk(x,y)和第k-1帧图像fk-1(x,y),其中k,k-1表示第k帧和k-1帧图像,(x,y)表示图像中像素点的坐标,fk(x,y)和fk-1(x,y)表示像素点的像素值。
步骤二:对fk(x,y)和fk-1(x,y)分别进行边缘提取,得到f′k(x,y)和f′k-1(x,y)。边缘提取的算子很多,可以选择laplace算子,拉普拉斯算子是对二维函数进行运算的二阶导数标量算子。它的定义为
▿ 2 f ( x , y ) = ∂ 2 ∂ x 2 f ( x , y ) + ∂ 2 ∂ y 2 f ( x , y )
其中
Figure S200710176742XD00022
Figure S200710176742XD00023
表示在x方向和y方向的二阶偏导数。在计算中使用的laplace算子是:
    -1     -1     -1
    -1     8     -1
    -1     -1     -1
步骤三:对经过边缘提取的两帧图像f′k(x,y)和f′k-1(x,y)进行差分运算,得到差分图像D(x,y)。
D(x,y)=|f′k(x,y)-f′k-1(x,y)|
其中,D(x,y)为图像f′k(x,y)和f′k-1(x,y)差值的绝对值。
步骤四:对差分图像D(x,y)进行均值滤波处理,均值滤波是图像平滑的一种方法,它的运算如下所示:
D ′ ( x , y ) = 1 9 Σ ( x , y ) ∈ S D ( x , y )
式中,S是以(x,y)为中心的邻域的集合。对差分图像D(x,y)进行滤波处理主要是过滤一些噪声点,以便留下真实的运动变化的像素点。
步骤五:对均值滤波之后的图像D′(x,y)进行二值化处理。二值化的关键是阈值的选取,计算过程如下所示:
D &prime; &prime; ( x , y ) = 0 , if D &prime; ( x , y ) < T 1 , otherwise , ( 0 < T < 64 )
式中T为差分图像二值化阈值。二值图像中为“0”的像素对应在前后两帧图像间没有发生变化的地方,为“1”的像素对应两帧图像间发生变化的地方,这是由目标运动而产生的,这也就是我们最终检测出来的运动的目标。
在实验过程中为了提高检测的精度和效果,可以采用多帧图像进行类似的处理,关键的问题是在二值化时阈值的选取。正确的选取阈值,才能将噪声的干扰去掉,实现对运动目标的检测。
本发明在传统的瞬时差分算法上进行了改进,能够在噪声比较严重的情况下,很好的检测出运动目标,其基本原理流程图见图1。
附图说明
图1相邻两帧图像瞬间差分基本原理流程
图2整个装置示意图
图3第k-1帧图像
图4第k帧图像
图5检测结果
具体实施方式
本发明是在一个DSP开发板上实现的,此开发板的核心DSP是TI公司的TMS320C6416,它可以外接摄像头,采集图像,也留有VGA接口,可以外接显示器,显示图像。整个装置的示意图如图2所示:
本发明的实现过程可以分为一下几步:
第一步:由核心DSP TMS320C6416控制摄像头,采集图像,将采集来的图像数据存放在DSP的外部RAM上。
第二步:在TMS320C6416上实现目标检测与跟踪的算法,并且进行汇编代码的优化,提高代码效率。
第三步:将摄像头采集进来的图像直接显示在显示器1上,将最终二值化后的图像显示在显示器2上,这样就可以将原始图像和检测出来运动目标的图像进行对比。
本发明在DSP开发板上的实现主要是利用了TI的DSP/BIOS,TI的DSP/BIOS是一个简易的嵌入式操作系统,它方便用户编写多任务程序,并且能增强对代码执行效率的监控。本发明中的运动目标检测算法是在任务中完成的。
首先,利用DSP开发板自带的函数库,将摄像头采集的图像数据放到DSP的外部RAM上。
其次,对存储的图像数据进行处理。取出两帧图像第k帧图像fk(x,y)和第k-1帧图像fk-1(x,y),对它们分别进行边缘提取,本发明采用的是laplace算子,选用其他的算子(如sobel算子)也可以。然后对两帧边缘提取之后的图像进行差分运算,得到差分图像D(x,y),将差分后的像素值取绝对值之后,进行均值滤波和二值化。
D &prime; &prime; ( x , y ) = 0 , if D &prime; ( x , y ) < T 1 , otherwise , ( 0 < T < 64 )
式中T为差分图像二值化阈值。
二值化的计算主要是阈值的选取。均值滤波和二值化都是为了去除噪声的影响,检测出真正的运动目标。数字图像处理的这些算法都是用汇编语言实现的,算法复杂度不是很大,但是数据量很大,而且摄像头的采集速度很快,为了得到流畅的不丢帧的图像,这些算法要反复的优化,能够高效快速的处理数据。
最后,将摄像头采集的图像和检测目标的图像显示出来。利用开发板的函数库将原始图像和检测后的图像分别显示在不同的显示器上,以便进行对比。
实验结果:
在实验中对本发明提出的算法进行了检验,能够比较准确的找到运动目标。图3和图4分别为第k-1帧和第k帧图像,图5为检测结果,其中,在图5中白色区域为检测出的运动目标,方框为运动目标所在区域。

Claims (1)

1.复杂背景下单个运动目标的检测方法,其特征在于,包括以下步骤:
步骤一:读取第k帧图像fk(x,y)和第k-1帧图像fk-1(x,y),其中k,k-1表示第k帧和k-1帧图像,(x,y)表示图像中像素点的坐标,fk(x,y)和fk-1(x,y)表示像素点的像素值;
步骤二:对fk(x,y)和fk-1(x,y)分别进行边缘提取,得到f′k(x,y)和f′k-1(x,y);
步骤三:对经过边缘提取的两帧图像f′k(x,y)和f′k-1(x,y)进行差分运算,得到差分图像D(x,y);
D(x,y)=|f′k(x,y)-f′k-1(x,y)|
其中,D(x,y)为图像f′k(x,y)和f′k-1(x,y)差值的绝对值;
步骤四:对差分图像D(x,y)进行均值滤波处理,运算如下所示:
D &prime; ( x , y ) = 1 9 &Sigma; ( x , y ) &Element; S D ( x , y )
式中,S是以(x,y)为中心的邻域的集合;
步骤五:对均值滤波之后的图像D′(x,y)进行二值化处理,计算过程如下所示:
D &prime; &prime; ( x , y ) = 0 , if D &prime; ( x , y ) < T 1 , otherwise , ( 0 < T < 64 )
式中T为差分图像二值化阈值;二值图像中为“0”的像素对应在前后两帧图像间没有发生变化的地方,为“1”的像素对应两帧图像间发生变化的地方,就是最终检测出来的运动的目标。
CNA200710176742XA 2007-11-02 2007-11-02 复杂背景下单个运动目标的检测方法 Pending CN101179713A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNA200710176742XA CN101179713A (zh) 2007-11-02 2007-11-02 复杂背景下单个运动目标的检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNA200710176742XA CN101179713A (zh) 2007-11-02 2007-11-02 复杂背景下单个运动目标的检测方法

Publications (1)

Publication Number Publication Date
CN101179713A true CN101179713A (zh) 2008-05-14

Family

ID=39405774

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA200710176742XA Pending CN101179713A (zh) 2007-11-02 2007-11-02 复杂背景下单个运动目标的检测方法

Country Status (1)

Country Link
CN (1) CN101179713A (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101763513A (zh) * 2010-02-26 2010-06-30 成都三泰电子实业股份有限公司 一种消除光照影响的前景提取方法
CN101854475A (zh) * 2009-03-31 2010-10-06 卡西欧计算机株式会社 摄像装置、图像处理方法及记录介质
CN101860664A (zh) * 2010-06-13 2010-10-13 华中科技大学 一种对光照变化鲁棒的运动目标检测方法
CN102184552A (zh) * 2011-05-11 2011-09-14 上海理工大学 一种基于差分融合与图像边缘信息的运动目标检测方法
CN102244776A (zh) * 2011-07-06 2011-11-16 浙江浙大华是科技有限公司 一种自动跟踪激光热成像监控系统
CN102307274A (zh) * 2011-08-31 2012-01-04 南京南自信息技术有限公司 基于边缘检测和帧差法的运动检测方法
CN102509307A (zh) * 2011-10-12 2012-06-20 西安理工大学 针对运动目标的基于经纬度定位和图像配准的查找方法
CN104811623A (zh) * 2015-04-30 2015-07-29 华为技术有限公司 一种减少干扰的拍照装置及其方法
CN105100923A (zh) * 2014-05-06 2015-11-25 深圳市快播科技有限公司 视频播放方法及装置
CN106530248A (zh) * 2016-10-28 2017-03-22 中国南方电网有限责任公司 一种变电站场景视频噪声的智能检测方法
CN106651923A (zh) * 2016-12-13 2017-05-10 中山大学 一种视频图像目标检测与分割方法及系统
CN106887010A (zh) * 2017-01-13 2017-06-23 西北工业大学深圳研究院 基于高层场景信息的地面运动目标检测方法
CN107657614A (zh) * 2017-10-31 2018-02-02 成都意町工业产品设计有限公司 一种用于高压输电线破损检测的轨交检测装置
CN107741431A (zh) * 2017-10-31 2018-02-27 成都意町工业产品设计有限公司 一种高压输电线路的破损检测系统
CN107945193A (zh) * 2017-10-31 2018-04-20 成都意町工业产品设计有限公司 一种用于检测高压线破损情况的检测系统
CN110837079A (zh) * 2018-08-16 2020-02-25 杭州海康威视数字技术股份有限公司 一种基于雷达的目标检测方法及装置
CN111931724A (zh) * 2020-09-23 2020-11-13 北京百度网讯科技有限公司 信号灯的异常识别方法、装置、电子设备和路侧设备
CN115285381A (zh) * 2022-10-09 2022-11-04 北京开运联合信息技术集团股份有限公司 一种太空碎片的碰撞预警方法及装置

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101854475A (zh) * 2009-03-31 2010-10-06 卡西欧计算机株式会社 摄像装置、图像处理方法及记录介质
CN101854475B (zh) * 2009-03-31 2013-01-23 卡西欧计算机株式会社 摄像装置、图像处理方法及记录介质
CN101763513A (zh) * 2010-02-26 2010-06-30 成都三泰电子实业股份有限公司 一种消除光照影响的前景提取方法
CN101860664A (zh) * 2010-06-13 2010-10-13 华中科技大学 一种对光照变化鲁棒的运动目标检测方法
CN102184552A (zh) * 2011-05-11 2011-09-14 上海理工大学 一种基于差分融合与图像边缘信息的运动目标检测方法
CN102244776A (zh) * 2011-07-06 2011-11-16 浙江浙大华是科技有限公司 一种自动跟踪激光热成像监控系统
CN102244776B (zh) * 2011-07-06 2013-03-20 浙江浙大华是科技有限公司 一种自动跟踪激光热成像监控系统
CN102307274A (zh) * 2011-08-31 2012-01-04 南京南自信息技术有限公司 基于边缘检测和帧差法的运动检测方法
CN102307274B (zh) * 2011-08-31 2013-01-02 南京南自信息技术有限公司 基于边缘检测和帧差法的运动检测方法
CN102509307A (zh) * 2011-10-12 2012-06-20 西安理工大学 针对运动目标的基于经纬度定位和图像配准的查找方法
CN105100923A (zh) * 2014-05-06 2015-11-25 深圳市快播科技有限公司 视频播放方法及装置
CN104811623A (zh) * 2015-04-30 2015-07-29 华为技术有限公司 一种减少干扰的拍照装置及其方法
CN106530248A (zh) * 2016-10-28 2017-03-22 中国南方电网有限责任公司 一种变电站场景视频噪声的智能检测方法
CN106651923A (zh) * 2016-12-13 2017-05-10 中山大学 一种视频图像目标检测与分割方法及系统
CN106887010A (zh) * 2017-01-13 2017-06-23 西北工业大学深圳研究院 基于高层场景信息的地面运动目标检测方法
CN107657614A (zh) * 2017-10-31 2018-02-02 成都意町工业产品设计有限公司 一种用于高压输电线破损检测的轨交检测装置
CN107741431A (zh) * 2017-10-31 2018-02-27 成都意町工业产品设计有限公司 一种高压输电线路的破损检测系统
CN107945193A (zh) * 2017-10-31 2018-04-20 成都意町工业产品设计有限公司 一种用于检测高压线破损情况的检测系统
CN110837079A (zh) * 2018-08-16 2020-02-25 杭州海康威视数字技术股份有限公司 一种基于雷达的目标检测方法及装置
CN110837079B (zh) * 2018-08-16 2021-10-19 杭州海康威视数字技术股份有限公司 一种基于雷达的目标检测方法及装置
CN111931724A (zh) * 2020-09-23 2020-11-13 北京百度网讯科技有限公司 信号灯的异常识别方法、装置、电子设备和路侧设备
CN115285381A (zh) * 2022-10-09 2022-11-04 北京开运联合信息技术集团股份有限公司 一种太空碎片的碰撞预警方法及装置

Similar Documents

Publication Publication Date Title
CN101179713A (zh) 复杂背景下单个运动目标的检测方法
CN107256225B (zh) 一种基于视频分析的热度图生成方法及装置
Lopez-Molina et al. Multiscale edge detection based on Gaussian smoothing and edge tracking
CN108062525B (zh) 一种基于手部区域预测的深度学习手部检测方法
CN105160310A (zh) 基于3d卷积神经网络的人体行为识别方法
CN107369166B (zh) 一种基于多分辨率神经网络的目标跟踪方法及系统
EP1697901B1 (en) Method for modeling background and foreground regions
CN109146911B (zh) 一种目标跟踪的方法及装置
US20130243343A1 (en) Method and device for people group detection
CN106600625A (zh) 检测小型生物的图像处理方法及装置
CN103093198B (zh) 一种人群密度监测方法及装置
CN105512618B (zh) 视频跟踪方法
CN108416780B (zh) 一种基于孪生-感兴趣区域池化模型的物体检测与匹配方法
CN110659659A (zh) 一种智能识别和预警害虫的方法及系统
CN110929593A (zh) 一种基于细节辨别区别的实时显著性行人检测方法
CN111553265A (zh) 一种排水管道内部缺陷的检测方法及系统
CN102509085A (zh) 基于轮廓不变矩特征的猪行走姿态识别系统和方法
CN111738344A (zh) 一种基于多尺度融合的快速目标检测方法
CN106529441B (zh) 基于模糊边界分片的深度动作图人体行为识别方法
CN111353496B (zh) 一种红外弱小目标实时检测方法
Lin et al. Cross camera people counting with perspective estimation and occlusion handling
CN104243916A (zh) 一种基于压缩传感的运动目标检测和跟踪方法
Xu et al. Unusual event detection in crowded scenes using bag of LBPs in spatio-temporal patches
CN111723773A (zh) 遗留物检测方法、装置、电子设备及可读存储介质
CN111738218A (zh) 人体异常行为识别系统及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20080514