CN104299243A - 一种基于霍夫森林的目标跟踪方法 - Google Patents

一种基于霍夫森林的目标跟踪方法 Download PDF

Info

Publication number
CN104299243A
CN104299243A CN201410507656.2A CN201410507656A CN104299243A CN 104299243 A CN104299243 A CN 104299243A CN 201410507656 A CN201410507656 A CN 201410507656A CN 104299243 A CN104299243 A CN 104299243A
Authority
CN
China
Prior art keywords
target
center
threshold
value
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410507656.2A
Other languages
English (en)
Other versions
CN104299243B (zh
Inventor
蔡利
吴鹏飞
李晓飞
刘浏
卢官明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Post and Telecommunication University
Nanjing University of Posts and Telecommunications
Original Assignee
Nanjing Post and Telecommunication University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Post and Telecommunication University filed Critical Nanjing Post and Telecommunication University
Priority to CN201410507656.2A priority Critical patent/CN104299243B/zh
Publication of CN104299243A publication Critical patent/CN104299243A/zh
Application granted granted Critical
Publication of CN104299243B publication Critical patent/CN104299243B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于霍夫森林的目标跟踪方法,针对视频中目标相似物造成干扰的解决方案,结合卡尔曼滤波校正与计算帧间目标中心位置均值的欧氏距离达到准确的目标检测和跟踪目的,考虑目标运动的方向和速度,对场景中发生的运动目标相似物交叉和部分遮挡现象具有较好的稳定性和鲁棒性,有效避免了由于干扰产生的目标中心位置漂移现象,同时提高了跟踪速度。

Description

一种基于霍夫森林的目标跟踪方法
技术领域
本发明属于图像处理技术领域,特别是一种基于霍夫森林的目标跟踪方法。
背景技术
运动目标跟踪是计算机视觉研究领域中的关键问题,融合了图像处理、模式识别、人工智能、自动控制等多种不同领域的理论知识,其本质是根据图像帧中选定的目标在接下来的视频帧中寻找目标的最佳位置。目标跟踪系统一般是基于图像序列的处理,对目标的运动规律加以预测,实现对目标的连续、准确的跟踪。在理想状态下,得到准确实时的数据输出是可以的,但在现实场景中,由于各种干扰的存在,往往难以达到理想效果。
目前视频目标跟踪技术的关键环节有两个方面,一是目标特征的选取,对于待跟踪的目标,需要通过特征描述来表达,如果选择的特征能将目标与其周围的背景环境很好的区分,则说明该特征适用于此目标的跟踪,是较优的特征;另一方面是跟踪算法框架,即采用怎样的策略在图像中找到具有某种特征的待跟踪目标。
论文《Hough-based Tracking of Non-Rigid Objects》,Computer Vision and ImageUnderstanding,2013,通过实现目标的分割后再选取检测块对目标进行跟踪,并实时更新样本,此方法能较好的实现目标的实时更新,但当不能分割出目标或目标暂时遮挡时,不能获得较全面的目标样本,很容易检测不到目标的正确位置进而造成目标丢失。
西安电子科技大学提出的专利申请“基于霍夫森林的视频目标跟踪方法”(专利申请号201210253267.2,公开号CN102831618A),公开了采用霍夫森林基本框架进行目标检测,利用霍夫投票结果判定目标的存在性,并采用在线训练模式进一步检测目标,结合Lucas-Kanade跟踪器得到目标坐标,但在线更新样本数据需要较大的计算量,并且霍夫森林的优势是对同类目标的检测,更新后的数据变化参考度不高,这样就增加了算法的冗余度,算法也变得更加复杂,导致运行速度变慢,跟踪的实时性也就有所降低。
发明内容
本发明所要解决的技术问题是克服现有技术的不足,提供一种基于霍夫森林的目标跟踪方法,采用离线训练方式建立霍夫森林,对样本进行霍夫投票,检测目标中心位置;跟踪时引入卡尔曼滤波校正和计算帧间目标中心位置均值的欧氏距离达到实时准确的跟踪目的。
本发明为解决上述技术问题采用以下技术方案:
根据本发明提出的一种基于霍夫森林的目标跟踪方法,包括以下步骤:
步骤一、从标准训练库中选取图片作为训练样本,训练样本包括正训练样本和负训练样本,正训练样本的图片中有目标,负训练样本的图片中无目标,提取训练样本的特征得到特征图片;
步骤二、对步骤一中的特征图片进行滤波处理后建立特征图片集合;
步骤三、建立霍夫森林;
步骤四、采集视频,输入视频的第一帧,并人工标记出待跟踪目标的中心位置,作包围中心位置的矩形框用来设定目标检测范围;采用遍历的方式选取矩形框内的图片特征块,根据建立的霍夫森林对目标的中心位置进行加权投票,统计投票值得到设定矩形框内的霍夫投票图,选取投票峰值确定目标的中心位置,并将该目标的中心位置作为第一帧图像目标的中心位置,根据获得的第一帧图像目标的中心位置初始化卡尔曼滤波器参数;
步骤五、确定目标中心位置,跟踪目标;
(501)、载入新一帧视频图像,根据前一帧目标的中心位置作包围中心位置的矩形框用来设定待检测目标范围,利用建立好的霍夫森林获取投票峰值,得到目标的中心位置;
(502)、计算帧间目标中心位置均值的欧式距离;
(503)、预先设定第一阈值和第二阈值,第一阈值为投票峰值阈值,第二阈值为帧间目标中心位置均值的欧式距离阈值;
(504)、当投票峰值小于预设的第一阈值或者帧间目标中心位置均值的欧式距离大于预设的第二阈值,则采用卡尔曼滤波算法对目标中心位置进行预测得到预测值,采用预测值校正目标中心位置;
当投票峰值大于或等于预设的第一阈值,并且帧间目标中心位置均值的欧氏距离小于或等于预设的第二阈值,则表明跟踪到的目标正确,不修正当前帧检测得到的目标中心位置,同时更新卡尔曼滤波器参数,用于对下一帧视频图像中目标的中心位置进行预测;
当投票峰值大于或等于预设的第一阈值,但帧间目标中心位置均值的欧氏距离大于预设的第二阈值,则根据卡尔曼滤波算法得到的预测值校正目标中心位置。
作为本发明的一种基于霍夫森林的目标跟踪方法的进一步优化的方案,所述步骤三具体如下:
(301)、随机获取特征图片块集,采用二值函数对特征图片块集进行划分,当类不确定度或者偏移量不确定度达到最小时,获得最优分裂节点;依次对最优分裂节点处的图片块不断划分,直到当前节点的深度达到预设的第三阈值或者当前节点上的样本数量小于预设的第四阈值则停止划分,构成二叉决策树;其中,预设的第三阈值为10至20的整数,预设的第四阈值为10至25的整数;
(302)、选取N个二叉决策树建立霍夫森林,N为整数且9<N<16。
作为本发明的一种基于霍夫森林的目标跟踪方法的进一步优化的方案,所述步骤一中提取训练样本的特征包括:Lab颜色空间中的颜色特征描述符,图像x方向的一阶导数特征、二阶导数特征,图像y方向的一阶导数特征、二阶导数特征,梯度直方图HOG特征。
作为本发明的一种基于霍夫森林的目标跟踪方法的进一步优化的方案,
所述(301)中二值函数为
t a , p , q , u , v , &tau; ( I ) = 0 , if I a ( p , q ) < I a ( u , v ) + &tau; 1 , otherwise . ;
其中,ta,p,q,u,v,τ(I)表示获得的像素差值标记,(p,q),(u,v)表示图片块上的两个随机点,a表示随机选取的某一特征描述符,τ表示分裂节点处的阈值,Ia(p,q)表示a特征图片上(p,q)点的像素值,Ia(u,v)表示a特征图片上(u,v)点的像素值;
类不确定度为:
U 1 = | A | Entropy ( { c i } ) = | A L | A H ( p L ) + | A R | A H ( p R ) ;
H(pL)=-pLlog pL-(1-pL)log(1-pL);
H(pR)=-pRlog pR-(1-pR)log(1-pR);
其中,H(pL)为左子节点的熵值,H(pR)为右子节点的熵值,pL为左子节点中来自正样本的图片块占的比例,pR为右子节点中来自正样本的图片块占的比例,|A|表示节点处块集合A中图片块个数,i是对图片块计数,且i为大于0的整数,Entropy({ci})表示熵值,ci表示第i个图片块类别,ci取值为0或1:当ci取0时表示图片块来自于负样本,当ci取1时表示来自正样本;|AL|为节点划分后左子节点的图片块数目,|AR|为节点划分后右子节点的图片块数目;
偏移量不确定度为:
U 2 = &Sigma; l > 0 ( d l L - d L ) 2 + &Sigma; r > 0 ( d r R - d R ) 2 ;
其中,l表示左子节点中来自正样本的图片块,r表示右子节点中来自正样本的图片块,dL为左子节点处所有正样本图片块的平均偏移量,dR为右子节点处所有正样本图片块的平均偏移量,为左子节点第l个正样本块对应的偏移量,为右子节点第r个正样本块对应的偏移量。
作为本发明的一种基于霍夫森林的目标跟踪方法的进一步优化的方案,所述(502)中欧式距离为:
Ed = sqrt [ ( x n &OverBar; - x n - 1 &OverBar; ) 2 + ( y n &OverBar; - y n - 1 &OverBar; ) 2 ] ;
其中,n为正整数,为第n帧视频图像中目标平均中心坐标x方向的值,为第n帧视频图像中目标平均中心坐标y方向的值,为第n-1帧视频图像中目标平均中心坐标,x方向的值,为第n-1帧视频图像中目标平均中心坐标y方向的值。
作为本发明的一种基于霍夫森林的目标跟踪方法的进一步优化的方案,所述N为10。
作为本发明的一种基于霍夫森林的目标跟踪方法的进一步优化的方案,所述预设的第一阈值为180,所述预设的第二阈值为5。
本发明采用以上技术方案与现有技术相比,具有以下技术效果:本发明是针对视频中目标相似物造成干扰的解决方案,结合卡尔曼滤波校正与计算帧间目标中心位置均值的欧氏距离达到准确的目标检测和跟踪目的,考虑目标运动的方向和速度,对场景中发生的运动目标相似物交叉和部分遮挡现象具有较好的稳定性和鲁棒性,有效避免了由于干扰产生的目标中心位置漂移现象,同时提高了跟踪速度。
附图说明
图1是随机选取的特征图片块构建的二叉决策树。
图2是建立霍夫森林流程图。
图3是卡尔曼滤波算法的结构图。
图4是基于霍夫森林的目标跟踪流程图。
具体实施方式
下面结合附图对本发明的技术方案做进一步的详细说明:
如图1所示的是随机选取的特征图片块构建的二叉决策树,方框表示训练样本,在每个训练样本上随机选取50个特征图片块,标记每个块的信息:特征、类别、中心偏移量,按照确定的划分准则和评价函数对样本集合进行最优划分,得到两个子节点,每个节点再依次进行划分,直到满足停止划分条件生成叶子节点。
一种基于霍夫森林的目标跟踪方法,包括以下步骤:
步骤一、从标准训练库中选取图片作为训练样本,训练样本包括正训练样本和负训练样本,正训练样本的图片中有目标,负训练样本的图片中无目标,提取训练样本的特征得到特征图片;
步骤二、对步骤一中的特征图片进行滤波处理后建立特征图片集合;
如图2所示的是建立霍夫森林流程图,采用离线训练的方式训练生成二叉决策树,通过建立N棵二叉决策树组成霍夫森林。对采集的正负训练样本图片进行特征变换,随机选取特征图片块集合构造二叉决策树,利用二值函数对特征图片块集合进行划分,保存最优的划分结果即分裂参数,然后再对生成的子节点进行划分,以此循环,当各节点均达到停止划分条件时即完成了二叉决策树的建立过程。
步骤三、建立霍夫森林;具体如下:
(301)、随机获取特征图片块集,采用二值函数对特征图片块集进行划分,当类不确定度或者偏移量不确定度达到最小时,获得最优分裂节点;依次对最优分裂节点处的图片块不断划分,直到当前节点的深度达到预设的第三阈值或者当前节点上的样本数量小于预设的第四阈值则停止划分,构成二叉决策树;其中,预设的第三阈值为10至20的整数,预设的第四阈值为10至25的整数;第三阈值为二叉决策树的最大深度阈值,第四阈值为节点处样本块个数阈值,预设的第三阈值可为15,预设的第四阈值可为20。
(302)、选取N个二叉决策树建立霍夫森林,N为整数且9<N<16;
如图3所示的是卡尔曼滤波算法的结构图,其中y(n)表示观测值,F(n+1,n)为状态转移矩阵,C(n)为观测矩阵,表示观测值的最小二乘估计,新息 表示n+1帧目标的估计值。
如图4表示的是基于霍夫森林的改进目标跟踪流程图。对输入的每一帧图片,根据检测框内的霍夫投票结果判定是否存在目标,以及是否正确跟踪到目标。
在计算帧间目标中心位置均值的欧式距离前,为了保证算法的稳定性,我们选取连续三帧目标的中心位置的均值作为当前帧的中心位置。
步骤四、采集视频,输入视频的第一帧,并人工标记出待跟踪目标的中心位置,作包围中心位置的矩形框用来设定目标检测范围;采用遍历的方式选取矩形框内的图片特征块,根据建立的霍夫森林对目标的中心位置进行加权投票,统计投票值得到设定矩形框内的霍夫投票图,选取投票峰值确定目标的中心位置,并将该目标的中心位置作为第一帧图像目标的中心位置,根据获得的第一帧图像目标的中心位置初始化卡尔曼滤波器参数;
步骤五、确定目标中心位置,跟踪目标;
(501)、载入新一帧视频图像,根据前一帧目标的中心位置作包围中心位置的矩形框用来设定待检测目标范围,利用建立好的霍夫森林获取投票峰值,得到目标的中心位置;
(502)、计算帧间目标中心位置均值的欧式距离;
(503)、预先设定第一阈值和第二阈值,第一阈值为投票峰值阈值,第二阈值为帧间目标中心位置均值的欧式距离阈值;
(504)、当投票峰值小于预设的第一阈值或者帧间目标中心位置均值的欧式距离大于预设的第二阈值,则采用卡尔曼滤波算法对目标中心位置进行预测得到预测值,采用预测值校正目标中心位置;
当投票峰值大于或等于预设的第一阈值,并且帧间目标中心位置均值的欧氏距离小于或等于预设的第二阈值,则表明跟踪到的目标正确,不修正当前帧检测得到的目标中心位置,同时更新卡尔曼滤波器参数,用于对下一帧视频图像中目标的中心位置进行预测;
当投票峰值大于或等于预设的第一阈值,但帧间目标中心位置均值的欧氏距离大于预设的第二阈值,则根据卡尔曼滤波算法得到的预测值校正目标中心位置。
所述步骤一中提取训练样本的特征包括:Lab颜色空间中的颜色特征描述符,图像x方向的一阶导数特征、二阶导数特征,图像y方向的一阶导数特征、二阶导数特征,梯度直方图HOG特征。
所述(301)中二值函数为
t a , p , q , u , v , &tau; ( I ) = 0 , if I a ( p , q ) < I a ( u , v ) + &tau; 1 , otherwise . ;
其中,ta,p,q,u,v,τ(I)表示获得的像素差值标记,(p,q),(u,v)表示图片块上的两个随机点,a表示随机选取的某一特征描述符,τ表示分裂节点处的阈值,Ia(p,q)表示a特征图片上(p,q)点的像素值,Ia(u,v)表示a特征图片上(u,v)点的像素值;
类不确定度为:
U 1 = | A | Entropy ( { c i } ) = | A L | A H ( p L ) + | A R | A H ( p R ) ;
H(pL)=-pLlog pL-(1-pL)log(1-pL);
H(pR)=-pRlog pR-(1-pR)log(1-pR);
其中,H(pL)为左子节点的熵值,H(pR)为右子节点的熵值,pL为左子节点中来自正样本的图片块占的比例,pR为右子节点中来自正样本的图片块占的比例,|A|表示节点处块集合A中图片块个数,i是对图片块计数,且i为大于0的整数,Entropy({ci})表示熵值,ci表示第i个图片块类别,ci取值为0或1:当ci取0时表示图片块来自于负样本,当ci取1时表示来自正样本;|AL|为节点划分后左子节点的图片块数目,|AR|为节点划分后右子节点的图片块数目;
偏移量不确定度为:
U 2 = &Sigma; l > 0 ( d l L - d L ) 2 + &Sigma; r > 0 ( d r R - d R ) 2 ;
其中,l表示左子节点中来自正样本的图片块,r表示右子节点中来自正样本的图片块,dL为左子节点处所有正样本图片块的平均偏移量,dR为右子节点处所有正样本图片块的平均偏移量,为左子节点第l个正样本块对应的偏移量,为右子节点第r个正样本块对应的偏移量。
所述(502)中欧式距离为:
Ed = sqrt [ ( x n &OverBar; - x n - 1 &OverBar; ) 2 + ( y n &OverBar; - y n - 1 &OverBar; ) 2 ] ;
其中,n为正整数,为第n帧视频图像中目标平均中心坐标x方向的值,为第n帧视频图像中目标平均中心坐标y方向的值,为第n-1帧视频图像中目标平均中心坐标,x方向的值,为第n-1帧视频图像中目标平均中心坐标y方向的值。。
所述N为10,所述第一阈值为180,所述第二阈值为5。
具体方法流程:
1、建立霍夫森林前的样本特征提取
本发明从标准训练库中选取了800幅图片作为训练样本,其中正负训练样本比例相等,对正负样本标记并进行特征提取。提取的图片特征包括Lab颜色空间的3个颜色特征描述符,x方向的一阶导数特征、二阶导数特征,y方向的一阶导数特征、二阶导数特征,以及9个方向上的梯度直方图HOG特征等,为了增加算法的抗噪性能,需对以上特征描述符进行进一步的滤波处理,提取最终的样本特征数据。
2、构建霍夫森林
在每个训练样本上随机选50个大小为16×16的图片块作为根节点处的划分样本总集合,设定节点划分的停止条件:树的最大深度预设的第三阈值为15或预设的第四阈值即节点处样本块个数少于20。图片块集合表示为:A=Pi=(Ii,ci,di),其中Pi表示随机选取的第i个的图片块信息;Ii表示对应位置图片块的特征集合;ci表示第i个图片块类别;di表示一个二维的偏移向量,即图片块中心对目标中心的偏移量。
对图片块集合进行划分时,采用的二值函数为
t a , p , q , u , v , &tau; ( I ) = 0 , if I a ( p , q ) < I a ( u , v ) + &tau; 1 , otherwise . ;
其中,ta,p,q,u,v,τ(I)表示获得的像素差值标记,(p,q),(u,v)表示图片块上的两个随机点,a表示随机选取的某一特征描述符,τ表示分裂节点处的阈值,Ia(p,q)表示a特征图片上(p,q)点的像素值,Ia(u,v)表示a特征图片上(u,v)点的像素值。二值函数中涉及的参数均通过随机方式获得,节点初次分裂后并不能保证得到的结果最优,需建立评价函数来对二值函数的划分样本进行衡量,以获得最优的分裂参数。
定义了两种不确定度:类不确定度和偏移量不确定度来评价划分结果。
类不确定度为:
U 1 = | A | Entropy ( { c i } ) = | A L | A H ( p L ) + | A R | A H ( p R ) ;
H(pL)=-pLlog pL-(1-pL)log(1-pL);
H(pR)=-pRlog pR-(1-pR)log(1-pR);
其中,H(pL)为左子节点的熵值,H(pR)为右子节点的熵值,pL为左子节点中来自正样本的图片块占的比例,pR为右子节点中来自正样本的图片块占的比例,|A|表示节点处块集合A中图片块个数,i是对图片块计数,且i为大于0的整数,Entropy({ci})表示熵值,ci表示第i个图片块类别,ci取值为0或1:当ci取0时表示图片块来自于负样本,当ci取1时表示来自正样本;|AL|为节点划分后左子节点的图片块数目,|AR|为节点划分后右子节点的图片块数目;
偏移量不确定度为:
U 2 = &Sigma; l > 0 ( d l L - d L ) 2 + &Sigma; r > 0 ( d r R - d R ) 2 ;
其中,l为左子节点中的正样本块,r为右子节点中的正样本块,dL为左子节点处所有正样本图片块的平均偏移量,dR为右子节点处所有正样本图片块的平均偏移量,为左子节点第l个正样本块对应的偏移量,为右子节点第r个正样本块对应的偏移量。
在训练随机树过程中,由于不能保证两类不确定度的值均达到最小,故随机选取一类不确定度值来衡量二值函数的划分结果并选择最佳的随机决策值参数作为节点信息。
3、霍夫投票检测目标
已有的采用霍夫森林算法进行目标跟踪时大多采用在线方式更新训练数据,再利用更新后的数据对下一帧目标进行检测,但由于算法采用的特征对每一特定类目标的识别度相似,实时地更新只会增加算法的复杂度,并且当检测到错误目标时,更会导致更新失败而严重影响目标的检测。本文提出采用离线的方式进行目标检测,依据事先训练好的霍夫森林进行霍夫投票,不更新训练数据,保证了特定类别判断的准确性和实时性。
对输入的第一帧视频图像,通过人工标定待跟踪目标,初始化目标的中心位置,以初始位置为中心设定目标检测的范围,并对检测图片进行特征变换,采用遍历的方式在特征图片上选取测试样本块,获得样本块集合,样本块通过依次遍历生成的二叉决策树查找对应的叶子节点,并对目标中心位置进行投票,投票权值为:
V = C L | D L | ;
其中,CL表示叶子节点处的正样本块所占比率;DL表示样本块的偏移量信息,|DL|则表示含偏移量信息的样本块数目。样本块遍历每棵树后的投票值累加即可得到设定检测目标区域的霍夫投票图,选取投票峰值确定目标的中心位置。
4、卡尔曼滤波和校正
利用卡尔曼滤波器建立目标运动模型,设法减小目标运动过程中噪声的干扰,能得到较好的目标中心位置的估计值。本文运用卡尔曼滤波器进行的估计包括对当前帧目标中心位置的估计值即滤波后的结果和对下一帧目标中心位置的估计值即预测值,将卡尔曼滤波和预测进行结合运用于目标的跟踪。
载入新一帧视频图像,确定目标检测范围,利用建立好的霍夫森林检测得到目标中心的霍夫投票,对投票峰值符合第一阈值T1的样本则判定为目标,并计算帧间目标中心位置均值的欧式距离为:
Ed = sqrt [ ( x n &OverBar; - x n - 1 &OverBar; ) 2 + ( y n &OverBar; - y n - 1 &OverBar; ) 2 ] ;
其中,n为正整数,为第n帧视频图像中目标平均中心坐标x方向的值,为第n帧视频图像中目标平均中心坐标y方向的值,为第n-1帧视频图像中目标平均中心坐标,x方向的值,为第n-1帧视频图像中目标平均中心坐标y方向的值。
当投票峰值小于第一阈值T1或者帧间目标中心位置均值的欧式距离大于第二阈值T2,则采用卡尔曼滤波算法对目标中心位置进行预测得到预测值,采用预测值校正目标中心位置;
当投票峰值大于或等于第一阈值T1,并且帧间目标中心位置均值的欧氏距离小于或等于第二阈值T2,则跟踪到的目标正确,不修正当前帧检测得到的目标中心位置,同时更新卡尔曼滤波器参数,用于对下一帧视频图像中目标的中心位置进行预测;
当投票峰值大于或等于第一阈值T1,并且帧间目标中心位置均值的欧氏距离大于第二阈值T2,根据卡尔曼滤波算法得到的预测值校正目标中心位置。
所述投票峰值第一阈值T1为180,帧间目标中心位置均值的欧氏距离第二阈值T2为5,建立的霍夫森林包含的树的数量N为10。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替代,都应当视为属于本发明的保护范围。

Claims (7)

1.一种基于霍夫森林的目标跟踪方法,其特征在于,包括以下步骤:
步骤一、从标准训练库中选取图片作为训练样本,训练样本包括正训练样本和负训练样本,正训练样本的图片中有目标,负训练样本的图片中无目标,提取训练样本的特征得到特征图片;
步骤二、对步骤一中的特征图片进行滤波处理后建立特征图片集合;
步骤三、建立霍夫森林;
步骤四、采集视频,输入视频的第一帧,并人工标记出待跟踪目标的中心位置,作包围中心位置的矩形框用来设定目标检测范围;采用遍历的方式选取矩形框内的图片特征块,根据建立的霍夫森林对目标的中心位置进行加权投票,统计投票值得到设定矩形框内的霍夫投票图,选取投票峰值确定目标的中心位置,并将该目标的中心位置作为第一帧图像目标的中心位置,根据获得的第一帧图像目标的中心位置初始化卡尔曼滤波器参数;
步骤五、确定目标中心位置,跟踪目标;
(501)、载入新一帧视频图像,根据前一帧目标的中心位置作包围中心位置的矩形框用来设定待检测目标范围,利用建立好的霍夫森林获取投票峰值,得到目标的中心位置;
(502)、计算帧间目标中心位置均值的欧式距离;
(503)、预先设定第一阈值和第二阈值,第一阈值为投票峰值阈值,第二阈值为帧间目标中心位置均值的欧式距离阈值;
(504)、当投票峰值小于预设的第一阈值或者帧间目标中心位置均值的欧式距离大于预设的第二阈值,则采用卡尔曼滤波算法对目标中心位置进行预测得到预测值,采用预测值校正目标中心位置;
当投票峰值大于或等于预设的第一阈值,并且帧间目标中心位置均值的欧氏距离小于或等于预设的第二阈值,则表明跟踪到的目标正确,不修正当前帧检测得到的目标中心位置,同时更新卡尔曼滤波器参数,用于对下一帧视频图像中目标的中心位置进行预测;
当投票峰值大于或等于预设的第一阈值,但帧间目标中心位置均值的欧氏距离大于预设的第二阈值,则根据卡尔曼滤波算法得到的预测值校正目标中心位置。
2.根据权利要求1所述的一种基于霍夫森林的目标跟踪方法,其特征在于,所述步骤三具体如下:
(301)、随机获取特征图片块集,采用二值函数对特征图片块集进行划分,当类不确定度或者偏移量不确定度达到最小时,获得最优分裂节点;依次对最优分裂节点处的图片块不断划分,直到当前节点的深度达到预设的第三阈值或者当前节点上的样本数量小于预设的第四阈值则停止划分,构成二叉决策树;其中,预设的第三阈值为10至20的整数,预设的第四阈值为10至25的整数;
(302)、选取N个二叉决策树建立霍夫森林,N为整数且9<N<16。
3.根据权利要求1所述的一种基于霍夫森林的目标跟踪方法,其特征在于,所述步骤一中提取训练样本的特征包括:Lab颜色空间中的颜色特征描述符,图像x方向的一阶导数特征、二阶导数特征,图像y方向的一阶导数特征、二阶导数特征,梯度直方图HOG特征。
4.根据权利要求2所述的一种基于霍夫森林的目标跟踪方法,其特征在于,
所述(301)中二值函数为
t a , p , q , u , v , &tau; ( I ) = 0 , if I a ( p , q ) < I a ( u , v ) + &tau; 1 , otherwise . ;
其中,ta,p,q,u,v,τ(I)表示获得的像素差值标记,(p,q),(u,v)表示图片块上的两个随机点,a表示随机选取的某一特征描述符,τ表示分裂节点处的阈值,Ia(p,q)表示a特征图片上(p,q)点的像素值,Ia(u,v)表示a特征图片上(u,v)点的像素值;
类不确定度为:
U 1 = | A | Entropy ( { c i } ) = | A L | A H ( p L ) + | A R | A H ( p R ) ;
H(pL)=-pLlogpL-(1-pL)log(1-pL);
H(pR)=-pRlogpR-(1-pR)log(1-pR);
其中,H(pL)为左子节点的熵值,H(pR)为右子节点的熵值,pL为左子节点中来自正样本的图片块占的比例,pR为右子节点中来自正样本的图片块占的比例,|A|表示节点处块集合A中图片块个数,i是对图片块计数,且i为大于0的整数,Entropy({ci})表示熵值,ci表示第i个图片块类别,ci取值为0或1:当ci取0时表示图片块来自于负样本,当ci取1时表示来自正样本;|AL|为节点划分后左子节点的图片块数目,|AR|为节点划分后右子节点的图片块数目;
偏移量不确定度为:
U 2 = &Sigma; l > 0 ( d l L - d L ) 2 + &Sigma; r > 0 ( d r R - d R ) 2 ;
其中,l表示左子节点中来自正样本的图片块,r表示右子节点中来自正样本的图片块,dL为左子节点处所有正样本图片块的平均偏移量,dR为右子节点处所有正样本图片块的平均偏移量,为左子节点第l个正样本块对应的偏移量,为右子节点第r个正样本块对应的偏移量。
5.根据权利要求1所述的一种基于霍夫森林的目标跟踪方法,其特征在于,所述(502)中欧式距离为:
Ed = sqrt [ ( x n &OverBar; - x n - 1 &OverBar; ) 2 + ( y n &OverBar; - y n - 1 &OverBar; ) 2 ] ;
其中,n为正整数,为第n帧视频图像中目标平均中心坐标x方向的值,为第n帧视频图像中目标平均中心坐标y方向的值,为第n-1帧视频图像中目标平均中心坐标,x方向的值,为第n-1帧视频图像中目标平均中心坐标y方向的值。
6.根据权利要求2所述的一种基于霍夫森林的目标跟踪方法,其特征在于,所述N为10。
7.根据权利要求1所述的一种基于霍夫森林的目标跟踪方法,其特征在于,所述预设的第一阈值为180,所述预设的第二阈值为5。
CN201410507656.2A 2014-09-28 2014-09-28 一种基于霍夫森林的目标跟踪方法 Active CN104299243B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410507656.2A CN104299243B (zh) 2014-09-28 2014-09-28 一种基于霍夫森林的目标跟踪方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410507656.2A CN104299243B (zh) 2014-09-28 2014-09-28 一种基于霍夫森林的目标跟踪方法

Publications (2)

Publication Number Publication Date
CN104299243A true CN104299243A (zh) 2015-01-21
CN104299243B CN104299243B (zh) 2017-02-08

Family

ID=52318965

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410507656.2A Active CN104299243B (zh) 2014-09-28 2014-09-28 一种基于霍夫森林的目标跟踪方法

Country Status (1)

Country Link
CN (1) CN104299243B (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105184220A (zh) * 2015-08-04 2015-12-23 厦门大学 基于gpu的交替霍夫森林实时目标跟踪方法
CN105184088A (zh) * 2015-09-22 2015-12-23 南京邮电大学 基于内插网格序列规则的移动对象位置预测方法
CN105701448A (zh) * 2015-12-31 2016-06-22 湖南拓视觉信息技术有限公司 三维人脸点云鼻尖检测方法及应用其的数据处理装置
CN106846361A (zh) * 2016-12-16 2017-06-13 深圳大学 基于直觉模糊随机森林的目标跟踪方法及装置
CN107145862A (zh) * 2017-05-05 2017-09-08 山东大学 一种基于霍夫森林的多特征匹配多目标跟踪方法
CN108171146A (zh) * 2017-12-25 2018-06-15 河南工程学院 一种基于霍夫森林集成学习的人脸检测方法
CN108446634A (zh) * 2018-03-20 2018-08-24 北京天睿空间科技股份有限公司 基于视频分析和定位信息结合的航空器持续跟踪方法
CN108596048A (zh) * 2018-03-30 2018-09-28 西安电子科技大学 一种基于相关滤波器的目标跟踪检测方法
CN110909592A (zh) * 2019-10-11 2020-03-24 重庆特斯联智慧科技股份有限公司 一种基于多尺度特征量的目标跟踪方法和系统
CN111091078A (zh) * 2019-12-03 2020-05-01 北京华捷艾米科技有限公司 一种对象跟踪方法和相关设备

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107516092A (zh) * 2017-09-21 2017-12-26 天津呼噜互娱科技有限公司 人脸特征点检测增强方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100135544A1 (en) * 2005-10-25 2010-06-03 Bracco Imaging S.P.A. Method of registering images, algorithm for carrying out the method of registering images, a program for registering images using the said algorithm and a method of treating biomedical images to reduce imaging artefacts caused by object movement
CN102436590A (zh) * 2011-11-04 2012-05-02 康佳集团股份有限公司 一种基于在线学习的实时跟踪方法及跟踪系统
CN102831618A (zh) * 2012-07-20 2012-12-19 西安电子科技大学 基于霍夫森林的视频目标跟踪方法
CN103400391A (zh) * 2013-08-09 2013-11-20 北京博思廷科技有限公司 一种基于改进的随机森林的多目标跟踪方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100135544A1 (en) * 2005-10-25 2010-06-03 Bracco Imaging S.P.A. Method of registering images, algorithm for carrying out the method of registering images, a program for registering images using the said algorithm and a method of treating biomedical images to reduce imaging artefacts caused by object movement
CN102436590A (zh) * 2011-11-04 2012-05-02 康佳集团股份有限公司 一种基于在线学习的实时跟踪方法及跟踪系统
CN102831618A (zh) * 2012-07-20 2012-12-19 西安电子科技大学 基于霍夫森林的视频目标跟踪方法
CN103400391A (zh) * 2013-08-09 2013-11-20 北京博思廷科技有限公司 一种基于改进的随机森林的多目标跟踪方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
林亦宁等: "半监督Hough Forest跟踪算法", 《浙江大学学报(工学版)》 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105184220B (zh) * 2015-08-04 2018-06-29 厦门大学 基于gpu的交替霍夫森林实时目标跟踪方法
CN105184220A (zh) * 2015-08-04 2015-12-23 厦门大学 基于gpu的交替霍夫森林实时目标跟踪方法
CN105184088A (zh) * 2015-09-22 2015-12-23 南京邮电大学 基于内插网格序列规则的移动对象位置预测方法
CN105184088B (zh) * 2015-09-22 2017-11-07 南京邮电大学 基于内插网格序列规则的移动对象位置预测方法
CN105701448B (zh) * 2015-12-31 2019-08-09 湖南拓视觉信息技术有限公司 三维人脸点云鼻尖检测方法及应用其的数据处理装置
CN105701448A (zh) * 2015-12-31 2016-06-22 湖南拓视觉信息技术有限公司 三维人脸点云鼻尖检测方法及应用其的数据处理装置
CN106846361A (zh) * 2016-12-16 2017-06-13 深圳大学 基于直觉模糊随机森林的目标跟踪方法及装置
CN107145862A (zh) * 2017-05-05 2017-09-08 山东大学 一种基于霍夫森林的多特征匹配多目标跟踪方法
CN107145862B (zh) * 2017-05-05 2020-06-05 山东大学 一种基于霍夫森林的多特征匹配多目标跟踪方法
CN108171146A (zh) * 2017-12-25 2018-06-15 河南工程学院 一种基于霍夫森林集成学习的人脸检测方法
CN108446634A (zh) * 2018-03-20 2018-08-24 北京天睿空间科技股份有限公司 基于视频分析和定位信息结合的航空器持续跟踪方法
CN108596048B (zh) * 2018-03-30 2020-05-19 西安电子科技大学 一种基于相关滤波器的目标跟踪检测方法
CN108596048A (zh) * 2018-03-30 2018-09-28 西安电子科技大学 一种基于相关滤波器的目标跟踪检测方法
CN110909592A (zh) * 2019-10-11 2020-03-24 重庆特斯联智慧科技股份有限公司 一种基于多尺度特征量的目标跟踪方法和系统
CN111091078A (zh) * 2019-12-03 2020-05-01 北京华捷艾米科技有限公司 一种对象跟踪方法和相关设备
CN111091078B (zh) * 2019-12-03 2023-10-24 北京华捷艾米科技有限公司 一种对象跟踪方法和相关设备

Also Published As

Publication number Publication date
CN104299243B (zh) 2017-02-08

Similar Documents

Publication Publication Date Title
CN104299243A (zh) 一种基于霍夫森林的目标跟踪方法
CN101729872B (zh) 一种基于视频监控图像自动判别道路交通状态的方法
CN103198493B (zh) 一种基于多特征自适应融合和在线学习的目标跟踪方法
CN101447082B (zh) 一种运动目标实时检测方法
He et al. Obstacle detection of rail transit based on deep learning
CN102722725B (zh) 一种基于主动场景学习的对象跟踪方法
CN103886325B (zh) 一种分块的循环矩阵视频跟踪方法
CN103544483B (zh) 一种基于局部稀疏表示的联合目标追踪方法及其系统
CN104574439A (zh) 一种融合卡尔曼滤波与tld算法的目标跟踪方法
CN104112282A (zh) 一种基于在线学习跟踪监控视频中多个运动目标的方法
CN110084165A (zh) 基于边缘计算的电力领域开放场景下异常事件的智能识别与预警方法
CN103259962A (zh) 一种目标追踪方法和相关装置
CN104200488A (zh) 一种基于图表示和匹配的多目标跟踪方法
CN102496001A (zh) 一种视频监控目标自动检测的方法和系统
CN103593679A (zh) 一种基于在线机器学习的视觉人手跟踪方法
CN101799968A (zh) 基于视频图像智能分析的油井入侵检测方法及装置
CN104077596A (zh) 一种无标志物跟踪注册方法
CN108320306A (zh) 融合tld和kcf的视频目标跟踪方法
CN109740609A (zh) 一种轨距检测方法及装置
CN103426179A (zh) 一种基于均值偏移多特征融合的目标跟踪方法及装置
CN101572770B (zh) 一种可用于实时监控的运动检测方法与装置
CN106778570A (zh) 一种行人实时检测与跟踪方法
CN106228570A (zh) 一种真值数据确定方法和装置
CN112100435A (zh) 一种基于边缘端交通音视频同步样本的自动标注方法
CN107609509A (zh) 一种基于运动显著性区域检测的动作识别方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20150121

Assignee: Nanjing Nanyou Information Industry Technology Research Institute Co. Ltd.

Assignor: Nanjing Post & Telecommunication Univ.

Contract record no.: 2018320000285

Denomination of invention: Target tracking method based on Hough forests

Granted publication date: 20170208

License type: Common License

Record date: 20181101