CN104318588A - 一种基于位置感知判别外观模型的多摄像机目标跟踪方法 - Google Patents

一种基于位置感知判别外观模型的多摄像机目标跟踪方法 Download PDF

Info

Publication number
CN104318588A
CN104318588A CN201410614430.2A CN201410614430A CN104318588A CN 104318588 A CN104318588 A CN 104318588A CN 201410614430 A CN201410614430 A CN 201410614430A CN 104318588 A CN104318588 A CN 104318588A
Authority
CN
China
Prior art keywords
target
camera
display model
differentiates
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410614430.2A
Other languages
English (en)
Inventor
黄治同
韩琦
曾凡祥
纪越峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing University of Posts and Telecommunications
Original Assignee
Beijing University of Posts and Telecommunications
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing University of Posts and Telecommunications filed Critical Beijing University of Posts and Telecommunications
Priority to CN201410614430.2A priority Critical patent/CN104318588A/zh
Publication of CN104318588A publication Critical patent/CN104318588A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/277Analysis of motion involving stochastic approaches, e.g. using Kalman filters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/207Analysis of motion for motion estimation over a hierarchy of resolutions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/292Multi-camera tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开一种基于位置感知判别外观模型的多摄像机目标跟踪方法,属于图像信息处理领域,主要克服现有跟踪方法对于跨摄像机跟踪的准确性和实时性的不足。其实现过程是:通过摄像机标定得到的摄像机间单应性关系,计算目标跨摄像机时的映射位置,再在该映射位置周围根据前一摄像机中建立的判别外观模型,重新检测目标,根据检测到的目标更新外观模型,再继续进行跟踪。本方法,因为结合了目标的位置坐标和外观两方面的信息进行跟踪,兼顾了多摄像机跟踪算法的准确性和实时性。

Description

一种基于位置感知判别外观模型的多摄像机目标跟踪方法
技术领域
本发明涉及一种计算机视觉领域的目标跟踪的方法,属于图像信息处理领域。
背景技术
计算机视觉是使用计算机及相关设备对生物视觉的一种模拟,其主要任务是通过对采集的图片或视频进行处理。计算机视觉既是工程领域,也是科学领域中的一个富有挑战性重要研究领域。
视频序列中目标的检测与跟踪是计算机视觉领域的一个重要研究课题,是目标分类、行为分析等后续处理的基础,在智能交通控制、智能视频监控、军事制导等诸多领域具有重要的应用价值。
随着视频监控技术的快速发展,以及单摄像机有限的视域无法满足广域视频监控的要求,多摄像机目标跟踪成为有效解决广域视频监控问题的一种途径。目前多摄像机跟踪方法主要包括:
1.基于摄像机标定的多摄像机跟踪算法
当摄像机的标定信息和三维环境坐标信息已知,通过一定的映射函数把这些信息统一映射到同一个坐标系下,最后由较为简单的一维参数就能得到正确的多摄像机之间的对应关系,进而采用传统的跟踪方法实现对运动目标的跟踪。
2.基于目标模型的多摄像机跟踪算法
该算法的基本思想是提取目标的仿射不变特征建立目标模型,在目标检测过程中,直接提取出目标的这种特征,与模型比对,匹配到目标后,采用传统的跟踪方法继续对运动目标进行跟踪。
然而,基于摄像机标定的多摄像机跟踪算法的鲁棒性,严重依赖于多摄像机之间的对应关系的准确性,一旦映射的位置坐标对实际位置有较大的偏离时,跨摄像机的跟踪就无法接力下去。
基于目标模型的多摄像机跟踪算法,严重依赖于目标模型的提取,而由于光照条件变化和摄像机本身参数差异,在不同摄像机不同视野下同一目标的基本特征已发生了变化,初始化目标模型可能无法正确进行目标匹配。此外,目标模型的建立和匹配过程复杂,难以实现跟踪算法的实时性。
发明内容
本发明的目的是克服现有跟踪方法对于跨摄像机跟踪的准确性和实时性的不足,提出一种基于位置感知判别外观模型的多摄像机目标跟踪方法。
基于位置感知判别外观模型,通过摄像机标定得到的摄像机间单应性关系,计算目标跨摄像机时的映射位置,再在该映射位置周围根据前一摄像机中建立的判别外观模型,重新检测目标,从而实现多摄像机跟踪。本方法,因为结合了目标的位置坐标和外观两方面的信息进行跟踪,兼顾了多摄像机跟踪算法的准确性和实时性问题。
本发明通过以下步骤实现:
1)对选取的目标建立判别外观模型;
2)利用步骤1的外观模型对目标进行持续跟踪,同时利用摄像机标定所得的单应性参数计算目标的位置坐标;
3)当步骤2得到的坐标超出当前摄像机视场时,映射到相邻摄像机的对应坐标位置,利用原外观模型进行检测
4)根据步骤3检测到的目标更新外观模型,继续进行跟踪,实现跨摄像机的目标跟踪。
本发明优于其他跟踪方法主要在其第三步,传统的跟踪方法对于跨摄像机问题,一种方法是基于全局检测,另一种是基于位置的匹配,前者检测速度很慢,后者匹配准确性较差。本发明很好地解决了这两个缺点。
因此,本发明利用朴素贝叶斯分类器通过训练多尺度Haar-like特征生成判别外观模型,从而确保了匹配准确性。
本发明另一个作用是在利用单应性做位置映射,快速确定检测范围,大大的提高了检测速度。
优选的,本发明利用以下方法完成判别外观模型的建立:
1)在目标范围内选取位置、大小随机的若干矩形框。
2)以目标为中心,一定距离为半径进行正采样,产生正样本,在正样本范围内选取与(1)分布相同的矩形框。
3)以目标为中心,一定距离为半径进行负采样,产生负样本,在负样本范围内选取与(1)分布相同的矩形框。
4)分别对每个样本的矩形框加上高斯核权重,并计算每个矩形框的Haar-like特征。
5)分别统计正样本和负样本每个特征的均值与方差,生成外观模型参数。
对上述的方法得到的外观模型进行匹配,能够使得匹配方法兼顾准确性和实时性。
附图说明:
图1为本发明多摄像机目标跟踪方法流程图。
图2(a)为判别外观模型建立示意图,(b)为判别外观模型建立流程图。
具体实施方式:
进一步的,本发明是一种基于位置感知判别外观模型的多摄像机目标跟踪方法,其具体实施方式如下:
所述的外观模型建立包含两部分:一是正负样本的采集,二是模型参数的计算。
1)首先在手动选取或者检测到的目标范围内选取位置、大小随机的n个矩形框。
2)再以目标位置lt为中心,α为半径进行正采样,产生正样本然后在正样本范围内选取与(1)分布相同的矩形框。
3)类似的,以目标位置lt为中心,ξ,β为半径进行负采样,产生负样本 然后在负样本范围内选取与(1)分布相同的矩形框。
4)分别统计正样本和负样本每个特征的均值与方差,生成外观模型参数 ( μ i 1 , σ i 1 , μ i 0 , σ i 0 ) , i = 1,2,3 , . . . , n
外观模型建立完成,下一帧开始进行跟踪,基于位置感知判别外观模型的跟踪的具体步骤如下:
1)以上一帧位置lt为中心,γ为半径进行采样,产生候选目标集2)计算候选目标集中每个元素外观特征vi,i=1,2,3,…,n,其中vi是第i个矩形框内所有像素灰度值的均值。
3)利用朴素贝叶斯分类器计算每个候选目标集中每个元素的响应 h ( v ) = log ( p ( v | y = 1 ) p ( v | y = 0 ) ) = log Π i = 1 n p ( v i | y = 1 ) p ( v i | y = 0 ) = Σ i = 1 n log p ( v i | y = 1 ) p ( v i | y = 0 ) .
4)以最大响应作为目标位置的估计,
以上步骤完成了单摄像机目标跟踪的过程,为了完成多摄像机目标跟踪,需要完成摄像机的协同和目标的重新检测。摄像机的协同具体实现步骤如下:
1)利用摄像机cam1标定所得的单应性参数Hcam1将目标的位置坐标lt,cam1映射到统一世界
坐标系下,lt,world=Hcam1*lt,cam1
2)当该坐标lw超出当前摄像机视场时,映射到相邻摄像机cam2的对应坐标位置, l t , cam 2 = H cam 2 - 1 * l t , world .
3)停止摄像机cam1的目标跟踪,在摄像机cam2中重新检测目标。
目标检测的具体实现步骤如下:
1)利用原外观模型进行检测。以映射到相邻摄像机cam2的对应坐标位置lt,cam2为中心,γ为半径进行采样,产生候选目标集 S t + 1 &gamma; = { s | | | l t + 1 s - l t , cam 2 | | < &gamma; } .
2)计算候选目标集中每个元素外观特征vi,i=1,2,3,…,n,其中vi是第i个矩形框内所有像素灰度值的均值。
3)利用朴素贝叶斯分类器计算每个候选目标集中每个元素的响应 h ( v ) = log ( p ( v | y = 1 ) p ( v | y = 0 ) ) = log &Pi; i = 1 n p ( v i | y = 1 ) p ( v i | y = 0 ) = &Sigma; i = 1 n log p ( v i | y = 1 ) p ( v i | y = 0 ) .
4)以最大响应作为检测到的目标位置的估计,
5)下一帧开始继续在摄像机cam2中进行跟踪。

Claims (4)

1.一种基于位置感知判别外观模型的多摄像机目标跟踪方法,其特征在于,包括如下步骤:
步骤(1),对选取的目标建立判别外观模型;
步骤(2),利用该外观模型对目标进行持续跟踪,同时利用摄像机标定所得的单应性参数计算目标的位置坐标;
步骤(3),当该坐标超出当前摄像机视场时,映射到相邻摄像机的对应坐标位置,利用原外观模型进行检测
步骤(4),根据检测到的目标更新外观模型,继续进行跟踪,实现跨摄像机的目标跟踪。
2.根据权利要求1所述的一种基于位置感知判别外观模型的多摄像机目标跟踪方法,其特征在于,步骤(1)得到的位置感知判别外观模型是利用朴素贝叶斯分类器通过训练多尺度Haar-like特征生成的。
3.根据权利要求1所述的一种基于位置感知判别外观模型的多摄像机目标跟踪方法,其特征在于,权利要求2所述的位置感知判别外观模型生成的具体步骤如下:
S3.1:在目标范围内选取位置、大小随机的若干矩形框;
S3.2:在目标周围进行正采样、负采样;
S3.3:分别对每个样本的矩形框加上高斯核权重,并计算每个矩形框的Haar-like特征;
S3.4:统计正样本和负样本每个特征的均值与方差,生成外观模型参数。
4.根据权利要求1所述的一种基于位置感知判别外观模型的多摄像机目标跟踪方法,其特征在于,步骤(3)检测目标的具体步骤如下:
S3.1:以映射位置为中心,一定距离为半径,采样一组候选集;
S3.2:利用朴素贝叶斯分类器计算每个候选元素的响应;
S3.3:以最大响应作为目标位置的估计;
S3.4:更新目标外观模型。
CN201410614430.2A 2014-11-04 2014-11-04 一种基于位置感知判别外观模型的多摄像机目标跟踪方法 Pending CN104318588A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410614430.2A CN104318588A (zh) 2014-11-04 2014-11-04 一种基于位置感知判别外观模型的多摄像机目标跟踪方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410614430.2A CN104318588A (zh) 2014-11-04 2014-11-04 一种基于位置感知判别外观模型的多摄像机目标跟踪方法

Publications (1)

Publication Number Publication Date
CN104318588A true CN104318588A (zh) 2015-01-28

Family

ID=52373814

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410614430.2A Pending CN104318588A (zh) 2014-11-04 2014-11-04 一种基于位置感知判别外观模型的多摄像机目标跟踪方法

Country Status (1)

Country Link
CN (1) CN104318588A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104615147A (zh) * 2015-02-13 2015-05-13 中国北方车辆研究所 一种变电站巡检目标的精确定位方法和系统
CN104700408A (zh) * 2015-03-11 2015-06-10 中国电子科技集团公司第二十八研究所 一种基于摄像机网络的室内单目标定位方法
CN105005773A (zh) * 2015-07-24 2015-10-28 成都市高博汇科信息科技有限公司 一种融合时域信息和空域信息的行人检测方法
CN105069795A (zh) * 2015-08-12 2015-11-18 深圳锐取信息技术股份有限公司 运动对象跟踪方法及装置
CN105205500A (zh) * 2015-09-29 2015-12-30 北京邮电大学 基于多目标跟踪与级联分类器融合的车辆检测
CN106529396A (zh) * 2016-09-19 2017-03-22 华南农业大学 一种基于稳定表观模型的实时跟踪方法
CN106846373A (zh) * 2016-11-16 2017-06-13 浙江工业大学 一种融合目标外观模型和博弈论的视频目标互遮挡处理方法
CN108875588A (zh) * 2018-05-25 2018-11-23 武汉大学 基于深度学习的跨摄像头行人检测跟踪方法
CN108932509A (zh) * 2018-08-16 2018-12-04 新智数字科技有限公司 一种基于视频跟踪的跨场景目标检索方法及装置
CN111179305A (zh) * 2018-11-13 2020-05-19 晶睿通讯股份有限公司 对象位置估算方法及其对象位置估算装置
CN113673321A (zh) * 2021-07-12 2021-11-19 浙江大华技术股份有限公司 目标重识别方法、目标重识别装置及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060098873A1 (en) * 2000-10-03 2006-05-11 Gesturetek, Inc., A Delaware Corporation Multiple camera control system
CN101572804A (zh) * 2009-03-30 2009-11-04 浙江大学 多摄像机智能控制方法及装置
US20100166260A1 (en) * 2008-12-25 2010-07-01 Ching-Chun Huang Method for automatic detection and tracking of multiple targets with multiple cameras and system therefor
CN102436662A (zh) * 2011-11-29 2012-05-02 南京信息工程大学 一种非重叠视域多摄像机网络中的人体目标跟踪方法
CN104123732A (zh) * 2014-07-14 2014-10-29 中国科学院信息工程研究所 一种基于多摄像头的在线目标跟踪方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060098873A1 (en) * 2000-10-03 2006-05-11 Gesturetek, Inc., A Delaware Corporation Multiple camera control system
US20100166260A1 (en) * 2008-12-25 2010-07-01 Ching-Chun Huang Method for automatic detection and tracking of multiple targets with multiple cameras and system therefor
CN101572804A (zh) * 2009-03-30 2009-11-04 浙江大学 多摄像机智能控制方法及装置
CN102436662A (zh) * 2011-11-29 2012-05-02 南京信息工程大学 一种非重叠视域多摄像机网络中的人体目标跟踪方法
CN104123732A (zh) * 2014-07-14 2014-10-29 中国科学院信息工程研究所 一种基于多摄像头的在线目标跟踪方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
FANXIANG ZENG ET AL: "Kernel Based Multiple Cue Adaptive Appearance Model For Robust Real-time Visual Tracking", 《IEEE SIGNAL PROCESSING LETTERS》 *
JAMES BLACK ET AL: "Multi camera image tracking", 《IMAGE AND VISION COMPUTING》 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104615147A (zh) * 2015-02-13 2015-05-13 中国北方车辆研究所 一种变电站巡检目标的精确定位方法和系统
CN104700408B (zh) * 2015-03-11 2017-10-17 中国电子科技集团公司第二十八研究所 一种基于摄像机网络的室内单目标定位方法
CN104700408A (zh) * 2015-03-11 2015-06-10 中国电子科技集团公司第二十八研究所 一种基于摄像机网络的室内单目标定位方法
CN105005773A (zh) * 2015-07-24 2015-10-28 成都市高博汇科信息科技有限公司 一种融合时域信息和空域信息的行人检测方法
CN105069795A (zh) * 2015-08-12 2015-11-18 深圳锐取信息技术股份有限公司 运动对象跟踪方法及装置
CN105069795B (zh) * 2015-08-12 2017-12-22 深圳锐取信息技术股份有限公司 运动对象跟踪方法及装置
CN105205500A (zh) * 2015-09-29 2015-12-30 北京邮电大学 基于多目标跟踪与级联分类器融合的车辆检测
CN106529396A (zh) * 2016-09-19 2017-03-22 华南农业大学 一种基于稳定表观模型的实时跟踪方法
CN106846373A (zh) * 2016-11-16 2017-06-13 浙江工业大学 一种融合目标外观模型和博弈论的视频目标互遮挡处理方法
CN106846373B (zh) * 2016-11-16 2019-07-05 浙江工业大学 一种融合目标外观模型和博弈论的视频目标互遮挡处理方法
CN108875588A (zh) * 2018-05-25 2018-11-23 武汉大学 基于深度学习的跨摄像头行人检测跟踪方法
CN108875588B (zh) * 2018-05-25 2022-04-15 武汉大学 基于深度学习的跨摄像头行人检测跟踪方法
CN108932509A (zh) * 2018-08-16 2018-12-04 新智数字科技有限公司 一种基于视频跟踪的跨场景目标检索方法及装置
CN111179305A (zh) * 2018-11-13 2020-05-19 晶睿通讯股份有限公司 对象位置估算方法及其对象位置估算装置
CN111179305B (zh) * 2018-11-13 2023-11-14 晶睿通讯股份有限公司 对象位置估算方法及其对象位置估算装置
CN113673321A (zh) * 2021-07-12 2021-11-19 浙江大华技术股份有限公司 目标重识别方法、目标重识别装置及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN104318588A (zh) 一种基于位置感知判别外观模型的多摄像机目标跟踪方法
CN102542289B (zh) 一种基于多高斯计数模型的人流量统计方法
CN103886325B (zh) 一种分块的循环矩阵视频跟踪方法
CN109800689A (zh) 一种基于时空特征融合学习的目标跟踪方法
CN103854292B (zh) 一种人数及人群运动方向的计算方法及装置
CN103218605B (zh) 一种基于积分投影与边缘检测的快速人眼定位方法
CN104680559B (zh) 基于运动行为模式的多视角室内行人跟踪方法
CN102426646B (zh) 多角度人脸检测装置与方法
CN103530599A (zh) 一种真实人脸和图片人脸的区别方法和系统
CN102982537B (zh) 一种检测场景变换的方法和系统
CN104484868B (zh) 一种结合模板匹配和图像轮廓的运动目标航拍跟踪方法
CN103426179B (zh) 一种基于均值偏移多特征融合的目标跟踪方法及装置
CN107301376B (zh) 一种基于深度学习多层刺激的行人检测方法
CN110232379A (zh) 一种车辆姿态检测方法及系统
CN103400129A (zh) 一种基于频域显著性的目标跟踪方法
CN104992453A (zh) 基于极限学习机的复杂背景下目标跟踪方法
CN105760846A (zh) 基于深度数据的目标检测与定位方法及系统
CN105243664A (zh) 一种基于视觉的轮式移动机器人快速目标跟踪方法
CN103593679A (zh) 一种基于在线机器学习的视觉人手跟踪方法
CN102663775A (zh) 面向低帧率视频的目标跟踪方法
CN105354856A (zh) 一种基于mser与orb相结合的人体匹配与定位方法及系统
CN104159088A (zh) 一种远程智能车辆监控系统及方法
CN104463104A (zh) 一种静态车辆目标快速检测方法及装置
CN105718904A (zh) 基于组合特征与车载摄像头的盲人检测与识别方法与系统
CN106408593A (zh) 一种基于视频的车辆跟踪方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150128

WD01 Invention patent application deemed withdrawn after publication