CN101442609A - 一种窗口分割和重组的跟踪方法 - Google Patents

一种窗口分割和重组的跟踪方法 Download PDF

Info

Publication number
CN101442609A
CN101442609A CNA2008101951850A CN200810195185A CN101442609A CN 101442609 A CN101442609 A CN 101442609A CN A2008101951850 A CNA2008101951850 A CN A2008101951850A CN 200810195185 A CN200810195185 A CN 200810195185A CN 101442609 A CN101442609 A CN 101442609A
Authority
CN
China
Prior art keywords
tracking
window
target
frame
tracks
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2008101951850A
Other languages
English (en)
Inventor
高阳
史颖欢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University
Original Assignee
Nanjing University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University filed Critical Nanjing University
Priority to CNA2008101951850A priority Critical patent/CN101442609A/zh
Publication of CN101442609A publication Critical patent/CN101442609A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明公开了一种窗口分割和重组的跟踪方法,包括如下步骤:(1)在第一帧初始化跟踪窗口的尺寸;(2)根据目标的颜色信息找出一个划分,使划分的两个子部分颜色之间的方差最大;(3)对步骤(2)划分的子部分及原目标框分别用Mean-Shift方法进行跟踪;(4)在步骤(3)跟踪结果的边缘部分根据颜色信息进行划分,得到近似的跟踪窗口;(5)用加权的方法,结合步骤(3)和(4)的结果得到目标的位置;(6)取下一帧图片,重复(2)到(5),进行跟踪。本发明能够更准确地用尺寸比较合适的跟踪窗口来跟踪运动物体。

Description

一种窗口分割和重组的跟踪方法
技术领域
本发明涉及一种基于Mean-Shift的窗口分割和重组的跟踪方法。
背景技术
Mean-Shift算法是一种常用的跟踪方法,现在广泛应用于视频监控系统中。该算法鲁棒性较强,实时性较好,符合大部分视频监控系统对时间的要求。
在目前基于Mean-Shift的跟踪方法中,跟踪窗口一般是以矩形或者椭圆形等简单的几何形状来表示。随着目标在场景中的移动,跟踪窗口尺寸的选择是一个难点,尺寸太大或者太小都会引起问题,所以关键是找到一个合适的窗口。
发明内容
发明目的:本发明的目的是针对现有技术的不足,提供一种基于Mean-Shift的窗口分割和重组的跟踪方法。
技术方案:本发明根据运动目标的颜色分布的规律进行一次划分,得到运动目标的两个子部分,同时保证划分的这两部分在颜色的差异上尽可能的大,然后对这两个划分的子部分分别用Mean-Shift方法进行跟踪,得到两个子部分新的位置,再在当前帧通过边缘的分割得到一个近似的矩形,最后通过结合上述两步的结果得到目标现在的跟踪窗口。该方法包括以下步骤:(1)在第一帧初始化跟踪窗口的尺寸;(2)根据目标的颜色信息找出一个划分位置,使划分的两个子部分颜色之间的方差最大;(3)对步骤(2)划分的子部分和原目标框分别用Mean-Shift方法进行跟踪;(4)在步骤(3)跟踪结果的边缘部分根据颜色信息进行划分,得到近似的跟踪窗口;(5)用加权的方法结合(3)和(4)的结构得到目标的位置;(6)取下一帧图片,重复步骤(2)到(5),进行跟踪。
有益效果:本发明与现有技术相比,其显著优点是:能够更准确地用尺寸比较合适的跟踪窗口来跟踪运动物体。
附图说明
图1是本发明方法追踪目标的动态过程图,共三页9幅图;图2是本发明方法的组成结构图。图3是本发明方法的流程图。
具体实施方式
如图1所示,本发明方法包含初始化模块,运动目标划分模块、Mean-Shift子部分跟踪模块、边缘分割模块和跟踪窗口重组模块。
本发明方法流程如图2所示,下面详细说明:
步骤1,从外部设备(如摄像头)读入第一张图片。
步骤2,手动用外接矩形把图中要跟踪的物体框定出来。
步骤3,记录下步骤2中目标框外围四点的坐标,如目标框的左上角坐标是(x0,y0),右上角坐标是(x0,y1),左下角坐标是(x1,y0),右下角坐标是(x1,y1),则窗口的高度是x1-x0,窗口的宽度是y1-y0。并计算它所包围的封闭区域的颜色直方图(RGB,灰度都可)信息。
步骤4,根据步骤3中的目标框的位置定义一个矩形的中心区域。如目标框的左上角坐标是(x0,y0),右上角坐标是(x0,y1),左下角坐标是(x1,y0),右下角坐标是(x1,y1),则此目标框中的中心区域的四个角的坐标位置为:左上角为(x0+α(x1-x0),y0+α(y1-y0)),右上角为(x0+α(x1-x0),y1-α(y1-y0)),左下角为(x1-α(x1-x0),y0+α(y1-y0)),右下角为(x1-α(x1-x0),y1-α(y1-y0))。其中α,(0<α<0.5)衡量中心区域到目标框的距离,α越小表示中心区域离目标框的距离越小,反之越远。
步骤5,在步骤4中定义的中心区域中找出一条直线来划分这个目标框区域,可以垂直的划分,也可以水平的划分,划分评价的依据是使划分的左右两部分或者上下两部分区域所包围的像素点之间颜色平均值的方差最大。
步骤6,取下一帧的图片,目标框保持不动。
步骤7,对步骤5中的划分出的两部分以及原目标框这三部分分别进行Mean-Shift的跟踪,得到三个新的窗口。
其中:Mean-Shift算法的具体步骤是:
(1)计算当前目标区域直方图与原目标模型直方图的巴氏距离ρ1
(2)计算当前帧与上一帧的相似性权值,比如现有一个像素点灰度是x,则分别统计当前目标区域直方图与原模型直方图中灰度是x的像素点个数分别是Num1与Num2,则此像素点的权值为
Figure A200810195185D00051
(3)根据(2)中的权重计算现在目标中心的位置,现在中心的位置是:
&Sigma; i = 1 n x i w ( x i ) &Sigma; i = 1 n w ( x i )
其中xi表示区域中像素点的颜色值(灰度,RGB都可),n表示区域中像素点的个数,w(xi)表示用(2)的方法计算出的xi这个点的相似性权值;
(4)计算目标区域直方图与原目标模型直方图的巴氏距离ρ2
(5)根据计算巴氏距离的差值判断是否已经达到收敛的条件,即|ρ12|是否小于指定的阈值,否就回到(2)继续循环,是就停止。
步骤8,把步骤7中的三个窗口组合起来,在该方法中,假定划分是水平划分的,经过步骤7以后两个子窗口的四条边界分别是(up1,down1,left(1),right1),(up2,down2,left(2),right2),和整个窗口的跟踪结果(upe,downe,left(e),righte),则组合以后的窗口W1的结果是:上边界是3/4*up1+1/4*upe,下边界是3/4*down2+1/4*downe,左,右边界分别是3/7*left1+3/7*left2+1/7*lefte,3/7*right1+3/7*right2+1/7*righte;同理,垂直划分的情况与此类似。
步骤9,边缘分割,在上一次跟踪窗口四条边缘的邻域内找出一条使分开的两部分区域的颜色平均值的方差最大,把新的四条边缘组成新的窗口W2。在本发明的方法中,假设目标框的左上角坐标是(x0,y0),右上角坐标是(x0,y1),左下角坐标是(x1,y0),右下角坐标是(x1,y1),则目标框的高是h,宽是w,则上边界的矩形邻域的四个点的坐标是(x0-h/4,y0),(x0-h/4,y1),(x0+h/4,y0),(x0+h/4,y1),下,左,右边界的邻域以此类推。
步骤10,把W1和W2的边界以加权平均的方式求平均的新的跟踪窗口WNew。假定W1和W2的上,下,左,右的边界分别是(up1,down1,left(1),right1),和(up2,down2,left(2),right2),在本发明中WNew的上,下,左,右边界分别是up1/2+up2/2,down1/2+down2/2,left1/2+left2/2,right1/2+right2/2。
步骤11,回到步骤1,进行下一次跟踪。

Claims (7)

1、一种窗口分割和重组的跟踪方法,其特征在于该方法包括以下步骤:
(1)在第一帧初始化跟踪窗口的尺寸;
(2)根据目标的颜色信息找出一个划分位置,使划分的两个子部分颜色之间的方差最大;
(3)对步骤(2)划分的子部分和原目标框分别用Mean-Shift方法进行跟踪;
(4)在步骤(3)跟踪结果的边缘部分根据颜色信息进行划分,得到近似的跟踪窗口;
(5)用加权的方法,结合步骤(3)和(4)的结果得到目标的位置;
(6)取下一帧图片,重复步骤(2)到(5),进行跟踪。
2、根据权利要求1所述的一种窗口分割和重组的跟踪方法,其特征在于步骤(1)所述的在第一帧初始化跟踪窗口的尺寸的步骤是:
(2.1)从外部设备读入第一张图片;
(2.2)手动用外接矩形把图中要跟踪的物体框定出来;
(2.3)记录下步骤(2.2)中目标框外围四点的坐标,计算出窗口的高度及宽度,并计算它所包围的封闭区域的颜色直方图的RGB或灰度信息。
3、根据权利要求1所述的一种窗口分割和重组的跟踪方法,其特征在于步骤(2)所述的根据目标的颜色信息找出一个划分,使划分的两个子部分颜色之间的方差最大的步骤是:
(3.1)根据目标框的位置定义一个矩形的中心区域;
(3.2)在步骤(3.1)中定义的中心区域中找出一条直线来划分这个目标框区域,使划分的左右两部分或者上下两部分区域所包围的像素点之间颜色平均值的方差最大。
4、根据权利要求1所述的一种窗口分割和重组的跟踪方法,其特征在于步骤(3)所述的对步骤(2)划分的子部分及原目标框分别用Mean-Shift方法进行跟踪的步骤是:
(4.1)取下一帧的图片,目标框保持不动;
(4.2)对步骤(2)中的划分出的两部分以及原目标框这三部分分别进行Mean-Shift的跟踪,得到三个新的窗口。
5、根据权利要求1或4所述的一种窗口分割和重组的跟踪方法,其特征在于Mean-Shift算法的步骤是:
(5.1)计算当前目标区域直方图与原目标模型直方图的巴氏距离ρ1
(5.2)计算当前帧与上一帧的相似性权值;
(5.3)根据(2)中的权重计算现在目标中心的位置;
(5.4)计算目标区域直方图与原目标模型直方图的巴氏距离ρ2
(5.5)根据计算巴氏距离的差值判断是否已经达到收敛的条件,即|ρ12|是否小于指定的阈值,否就回到步骤(2)继续循环,是就停止;
(5.6)将步骤(3)跟踪得到的三个新窗口组合起来,组合后的窗口W1
6、根据权利要求1所述的一种窗口分割和重组的跟踪方法,其特征在于步骤(4)所述的在上一次跟踪结果的边缘部分根据颜色信息进行划分,得到近似的跟踪窗口的步骤是:在步骤(3)跟踪得到窗口四条边缘的邻域内找出一条使分开的两部分区域的颜色平均值的方差最大,把新的四条边缘组成新的窗口W2
7、根据权利要求1所述的一种窗口分割和重组的跟踪方法,其特征在于步骤(5)所述的用加权的方法,结合步骤(3)和(4)的结果得到目标的位置的步骤是:把W1和W2的边界以加权平均的方式求平均得到新的跟踪窗口WNew
CNA2008101951850A 2008-11-07 2008-11-07 一种窗口分割和重组的跟踪方法 Pending CN101442609A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNA2008101951850A CN101442609A (zh) 2008-11-07 2008-11-07 一种窗口分割和重组的跟踪方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNA2008101951850A CN101442609A (zh) 2008-11-07 2008-11-07 一种窗口分割和重组的跟踪方法

Publications (1)

Publication Number Publication Date
CN101442609A true CN101442609A (zh) 2009-05-27

Family

ID=40726835

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2008101951850A Pending CN101442609A (zh) 2008-11-07 2008-11-07 一种窗口分割和重组的跟踪方法

Country Status (1)

Country Link
CN (1) CN101442609A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102074000A (zh) * 2010-11-23 2011-05-25 天津市亚安科技电子有限公司 一种利用方差率最优解自适应调整窗宽的跟踪方法
CN102289822A (zh) * 2011-09-09 2011-12-21 南京大学 一种多摄像机协同跟踪运动目标的方法
CN102431034A (zh) * 2011-09-05 2012-05-02 天津理工大学 基于颜色识别的机器人追踪方法
CN103065325A (zh) * 2012-12-20 2013-04-24 中国科学院上海微系统与信息技术研究所 一种基于彩色颜色距离和图像分科聚合的目标跟踪方法
CN113853515A (zh) * 2019-05-30 2021-12-28 松下知识产权经营株式会社 运动物体的应力分析装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102074000A (zh) * 2010-11-23 2011-05-25 天津市亚安科技电子有限公司 一种利用方差率最优解自适应调整窗宽的跟踪方法
CN102074000B (zh) * 2010-11-23 2014-06-04 天津市亚安科技股份有限公司 一种利用方差率最优解自适应调整窗宽的跟踪方法
CN102431034A (zh) * 2011-09-05 2012-05-02 天津理工大学 基于颜色识别的机器人追踪方法
CN102431034B (zh) * 2011-09-05 2013-11-20 天津理工大学 基于颜色识别的机器人追踪方法
CN102289822A (zh) * 2011-09-09 2011-12-21 南京大学 一种多摄像机协同跟踪运动目标的方法
CN103065325A (zh) * 2012-12-20 2013-04-24 中国科学院上海微系统与信息技术研究所 一种基于彩色颜色距离和图像分科聚合的目标跟踪方法
CN103065325B (zh) * 2012-12-20 2015-07-29 中国科学院上海微系统与信息技术研究所 一种基于彩色颜色距离和图像分割聚合的目标跟踪方法
CN113853515A (zh) * 2019-05-30 2021-12-28 松下知识产权经营株式会社 运动物体的应力分析装置
CN113853515B (zh) * 2019-05-30 2024-03-19 松下知识产权经营株式会社 运动物体的应力分析装置

Similar Documents

Publication Publication Date Title
CN103164711B (zh) 基于像素和支持向量机的区域人流密度估计的方法
CN104200485B (zh) 一种面向视频监控的人体跟踪方法
CN101916370B (zh) 人脸检测中非特征区域图像处理的方法
CN103186904B (zh) 图片轮廓提取方法及装置
CN106780548A (zh) 基于交通视频的运动车辆检测方法
WO2017084204A1 (zh) 一种二维视频流中的人体骨骼点追踪方法及系统
CN101996407B (zh) 一种多相机颜色标定方法
CN104484645B (zh) 一种面向人机交互的“1”手势识别方法与系统
CN102420985B (zh) 一种多视点视频对象提取方法
CN101442609A (zh) 一种窗口分割和重组的跟踪方法
CN103077531B (zh) 基于边缘信息的灰度目标自动跟踪方法
CN104331151A (zh) 基于光流法的手势运动方向识别方法
CN101527043B (zh) 基于运动目标轮廓信息的视频对象分割方法
CN107301657B (zh) 一种考虑目标运动信息的视频目标跟踪方法
CN109034017A (zh) 头部姿态估计方法及机器可读存储介质
CN107808386A (zh) 一种基于图像语义分割的海天线检测方法
CN102693426A (zh) 一种图像显著区域检测方法
CN107563330B (zh) 一种监控视频中的水平倾斜车牌矫正方法
CN106228579A (zh) 一种基于地理时空场景的视频图像动态水位信息提取方法
CN102855466B (zh) 一种基于视频图像处理的人数统计方法
CN107578430A (zh) 一种基于自适应权值和局部熵的立体匹配方法
CN102306307B (zh) 一种彩色显微图像序列中固点噪声的定位方法
CN106991686A (zh) 一种基于超像素光流场的水平集轮廓跟踪方法
CN104751466A (zh) 一种基于视觉显著性的形变物体跟踪算法及其系统
CN104537688A (zh) 一种基于背景差分和hog特征的运动目标检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20090527