CN102722706A - 基于粒子滤波的红外弱小目标检测与跟踪方法及装置 - Google Patents

基于粒子滤波的红外弱小目标检测与跟踪方法及装置 Download PDF

Info

Publication number
CN102722706A
CN102722706A CN2012101631401A CN201210163140A CN102722706A CN 102722706 A CN102722706 A CN 102722706A CN 2012101631401 A CN2012101631401 A CN 2012101631401A CN 201210163140 A CN201210163140 A CN 201210163140A CN 102722706 A CN102722706 A CN 102722706A
Authority
CN
China
Prior art keywords
particle
target
state
function
int
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012101631401A
Other languages
English (en)
Other versions
CN102722706B (zh
Inventor
汲清波
杨洋
耿丽群
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Engineering University
Original Assignee
Harbin Engineering University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Engineering University filed Critical Harbin Engineering University
Priority to CN201210163140.1A priority Critical patent/CN102722706B/zh
Publication of CN102722706A publication Critical patent/CN102722706A/zh
Application granted granted Critical
Publication of CN102722706B publication Critical patent/CN102722706B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

本发明提供的是一种基于粒子滤波的红外弱小目标检测与跟踪方法及装置。采用形态学对图像进行开启操作获得背景图像,将原图像减去背景图像获得含有目标和噪声的去背景图像;根据设定的阈值和初始目标出现概率,在全视场大于阈值的范围内抽取粒子;跟踪阶段分为预测和更新两个步骤,预测包括目标出现状态的预测和目标状态的预测,在更新过程中利用似然函数计算粒子权重值、对权重值归一化、根据归一化后的权重值对粒子进行重采样;根据重采样之后的当前时刻的粒子状态计算目标存在的后验概率,并以此计算似然比,再利用似然比完成目标检测。本发明在低信噪比复杂背景的情况下,实现对红外弱小目标的有效检测和高精度跟踪。可广泛应用于各类系统。

Description

基于粒子滤波的红外弱小目标检测与跟踪方法及装置
技术领域
本发明涉及的是一种红外弱小目标检测与跟踪方法。本发明也涉及一种红外弱小目标检测与跟踪装置。
背景技术
随着红外成像技术的不断发展,红外成像系统已经广泛应用在光学遥感、安全监视、夜间导航、目标探测等领域中。目前关键问题是如何在远距离、低信噪比的条件下尽早检测和跟踪目标,但由于远距离时目标成像面积太小,可检测信号相对较弱,特别是非平稳的起伏背景干扰下,目标被背景杂波淹没,无结构、形状信息可利用,使得那些传统的近距离目标图像检测和识别方法无法达到检测识别的目的。因此,复杂背景、低信噪比情况下的红外弱小目标检测与跟踪问题以及硬件实现成为目前亟待解决的关键问题。
经过对现有的技术文献及专利的检索发现,目前粒子滤波理论和算法的研究比较成熟,如:敬忠良在2005年的发明专利《红外图像序列中弱小目标的检测和跟踪方法》,该专利将基于粒子滤波的检测前跟踪方法应用到红外图像检测和跟踪领域,该方法的理论研究比较成熟,但是目前没有该方法在实用化方面的文献及研究成果,特别是在硬件实现方面还有很多关键问题需要解决。
发明内容
本发明的目的在于提供一种具有良好的检测性能和较高的跟踪精度的基于粒子滤波的红外弱小目标检测与跟踪方法。本发明的目的还在于提供一种具有实用价值的基于粒子滤波的红外弱小目标检测与跟踪装置。
本发明的目的是这样实现的:
本发明的基于粒子滤波的红外弱小目标检测与跟踪方法,包括由如下步骤构成的基于全视场进行检测的粒子滤波检测前跟踪方法:
(1)图像预处理:采用形态学对图像进行开启操作获得背景图像,将原图像减去背景图像获得含有目标和噪声的去背景图像;
(2)粒子初始化:根据设定的阈值和初始目标出现概率,在全视场大于阈值的范围内抽取粒子,粒子的速度和强度服从最大值和最小值间的均匀分布;
(3)目标跟踪阶段:跟踪阶段分为预测和更新两个步骤;
1)在预测过程中,分为目标出现状态的预测和目标状态的预测,根据目标前一时刻的状态和状态转移概率矩阵对当前时刻目标状态进行预测,预测之后的状态为不存在的粒子没有意义,预测之后的状态为存在的粒子分为新生粒子和已存在的粒子两种,对新生粒子从大于阈值的范围内抽取粒子,已存在粒子由系统模型确定的一步转移概率函数中抽取;
2)在更新过程中,根据当前图像信息和粒子的状态参数利用似然函数计算粒子权重值,对权重值归一化,根据归一化后的权重值对粒子进行重采样;
(4)目标检测阶段:根据重采样之后的当前时刻的粒子状态计算目标存在的后验概率,并以此计算似然比,再利用似然比完成目标检测,如果似然比大于设定的阈值,就采用粒子滤波得到的预测结果作为目标的状态估计值。
本发明的方法还可以包括:由基于全视场进行检测的粒子滤波检测前跟踪方法实现目标的搜索后,判定是否搜索的目标,如果搜索到目标再采用基于窗口的粒子滤波的检测前跟踪的算法实现目标的跟踪。
本发明的基于粒子滤波的红外弱小目标检测与跟踪装置由视频采集模块、目标检测与跟踪模块和显示模块构成,其中视频采集模块由红外热像仪IR109-HGC和SAA7115HL解码器构成,目标检测与跟踪模块由ICETEK-DM642开发板构成,显示模块由监视器构成;
视频采集模块利用DM642芯片的实时操作系统即DSP/BIOS、驱动开发套件即DDK、SAA7115和SAA7105芯片的配置函数完成对红外图像的采集与输出;主要包含以下函数和配置:
1)DSP/BIOS的配置
①设置放置缓存图像的内存空间:在System下的MEM模块中加入自己定义的内存空间名SDRAM1和SDRAM2,并对SDRAM1和SDRAM2进行配置;
②设置运行时间统计函数:在Instrumentation下的STS模块中添加需要统计的对象STS_algorithm和tskLoopback;
③设置算法运行函数:在Scheduling下的TSK模块添加算法运行任务函数tskVideoprocess,并对其进行配置:函数名为_tskVideoprocess,并在源程序中编写tskVideoprocess函数的具体实现程序;
④对视频设备进行驱动:在Input/Output下的Device Drivers模块中的User-Defined Devices子模块配置视频设备驱动,添加自定义的视频捕获设备VP0CAPTURE和显示设备VP2DISPLAY,并对设备进行配置;
2)SAA7115和SAA7105芯片的配置
①对SAA7115进行配置:将inMode配置为SAA7115_MODE_PAL720;
②对SAA7105进行配置:将SAA7105_AnalogFormat配置为SAA7105_AFMT_SVIDEO,将SAA7105_Mode配置为SAA7105_MODE_PAL720;
目标检测与跟踪模块完成:
1)图像预处理
利用函数MEM_copy将每一帧待处理红外图像复制至划分的临时存储空间中,再利用函数ICETEKDM642PCIYuchuli(unsigned char*in)完成对每帧图像的预处理,得到只有目标和噪声的图像,将函数代码放置在ISRAM中划分的段".text1"中,在预处理中使用MEM_calloc函数动态在内存段MEMTEMP内划分一个指向临时数据存储空间的unsigned char型的指针tempdata,用于存储存每次腐蚀与膨胀之后的图像信息;
2)初始化粒子
在初始化粒子之前,定义算法运算中需要的参数:粒子个数Num_particle、视场行数LINE_SZ、视场每行像素数NUM_LINES、矩形分辨单元宽度delta_x、矩形分辨单元高度delta_y、初始时刻目标存在的概率Init_Pro_exist、x方向矩形分辨单元个数Num_Cell_x、y方向矩形分辨单元个数Num_Cell_y、状态转移概率矩阵Trans_Matrix[2][2]、目标运动中过程噪声的大小q1,目标强度噪声大小q2、模糊参数I_Blur;
使用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在预处理之后的第一帧图像的全视场内找出大于阈值th的像素点,返回其坐标值,粒子初始化时的位置坐标值从大于阈值th的像素点中抽取;速度
Figure BDA00001677554700031
采用建议分布函数
Figure BDA00001677554700032
vmax是目标的最大速度,
Figure BDA00001677554700033
方向也是如此处理;目标的强度Ik□U[Imin,Imax],Imin和Imax是合适的灰度级,粒子状态的初始化:使用函数randn(Num_particle)产生与粒子个数相等的值在0到1间的随机序列,用函数find_M_X(U_rand,1,Num_particle,length_u,Init_Pro_exist)找出随即序列中小于Init_Pro_exist的随机数位置,将与之位置相同的粒子的状态定义为存在用值2表示,其余粒子状态为不存在用值1表示,完成对粒子的初始化;
3)跟踪
预测:由k-1时刻目标出现的状态
Figure BDA00001677554700041
与转移概率矩阵∏=[πij]作为参数,利用函数int*Regime_Transition(int*in,int le_RP,float**T_M,int len_TM)完成前后两帧中粒子状态的转移;对于
Figure BDA00001677554700042
的粒子,其状态变量没有意义;对于
Figure BDA00001677554700043
的粒子,预测每个粒子k时刻的状态变量,分两种情况:(a)新生粒子,这些粒子是由
Figure BDA00001677554700044
转换到
Figure BDA00001677554700045
时产生的,用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在全视场内找出大于阈值th的像素点得位置,粒子的位置坐标值随即从大于阈值th的像素点中抽取;速度
Figure BDA00001677554700046
采用建议分布函数
Figure BDA00001677554700047
vmax是目标的最大速度,
Figure BDA00001677554700048
方向也是如此处理;目标的强度IkU[Imin,Imax],Imin和Imax是合适的灰度级,(b)已存在粒子,这些粒子是
Figure BDA00001677554700049
转换到
Figure BDA000016775547000410
时一直存在的,其状态值利用函数sk+1=Fsk+vk计算,sk+1为当前时刻状态值,sk为前一时刻粒子状态值,vk为高斯噪声,利用DSP计算;
更新:用似然比计算重要性权值,在计算出粒子的重要性权值之后,对重要性权值进行归一化。利用重采样函数float*multinomialR(int n,float*q)对粒子进行重采样,在重采样完之后对粒子进行更新;
4)检测
在对粒子重采样和更新之后,利用函数int find_k_E(int*in,int m,int n,float th)计算粒子中状态为存在即粒子状态值为2的个数,以此求出k时刻目标存在的后验概率
Figure BDA000016775547000411
如果
Figure BDA000016775547000412
认为目标存在,否则认为目标不存在,在目标存在的情况下,通过对状态值为2的粒子各个状态求均值得到目标的状态值,完成检测。
本发明在DSP硬件平台上实现了基于全视场和基于窗口粒子滤波的检测前跟踪算法,实现了对低信噪比的红外弱小目标的有效检测和跟踪,具有良好的检测性能和较高的跟踪精度。
本发明首先通过形态学对红外图像进行预处理,完成对图像的去噪以及背景抑制,得到含有目标和噪声的去背景图像,在粒子初始化阶段采用在全视场中大于阈值的范围内抽取粒子的方法,在跟踪阶段采用粒子滤波得到状态的后验概率分布,在检测阶段利用似然比假设检验方法判决目标是否存在,如果目标存在,则进行目标状态估计,最后得出目标的航迹。
目前针对红外弱小目标的基于粒子滤波的检测前跟踪算法,为了减少计算量都是在一个窗口内实现的,这就需要首先选定窗口,也就是需要一步预检测算法。因此预检测算法的性能对整个算法的性能来说是至关重要的,而在如此低的信噪比下并没有稳健的预检测算法。因此本发明针对这个问题,提出在整个视场进行检测前跟踪算法的方案,从而提高了检测概率。
本发明将基于粒子滤波的检测前跟踪算法应用于红外弱小目标的检测和跟踪,是一个实用化的系统,在低信噪比(SNR>1.5)复杂背景的情况下,实现对红外弱小目标的有效检测和高精度跟踪。可广泛应用于各类系统,具有广阔的市场前景和应用价值。
附图说明
图1为硬件系统框图。
图2为软件系统框图。
图3基于全视场采样的粒子滤波的TDB方法总体框图。
图4基于全视场采样的粒子滤波的检测前跟踪算法流程图。
图5基于窗口的粒子滤波的检测前跟踪算法流程图。
图6(a)-图6(f)为跟踪结果,其中:图6(a)为第4帧;图6(b)为第6帧;图6(c)为第8帧;图6(d)为第10帧;图6(e)为第12帧;图6(f)为第14帧。
具体实施方式
下面举例对本发明做更详细的描述:
本发明采用软、硬件协同工作,完成红外弱小目标的检测和跟踪。利用红外热成像仪、ICETEK-DM642开发板和监视器构成硬件系统,硬件系统框图如附图1。软件系统包括视频驱动模块、图像预处理模块和目标检测与跟踪模块,软件系统框图如附图2。
本发明具体实施方案如下:
本发明可采用两种方案,一种是采用基于全视场进行检测的粒子滤波的检测前跟踪方法,另一种方案是结合全视场和窗口的粒子滤波的检测前跟踪方法。
一、基于全视场进行检测的粒子滤波的检测前跟踪方法
本发明的核心内容是提出了基于全视场进行检测的粒子滤波的检测前跟踪算法。具体实现方法和步骤如下:
1.图像预处理:采用背景抑制技术对图像进行预处理,具体方法为:用2×2方形结构元素对红外图像进行开操作,以去除各类亮噪声及小目标,获得图像背景。再用原图像减去背景图像得到含有目标和噪声的图像。
2.粒子初始化:在整个视场大于阈值的范围内抽取粒子。粒子在整个视场大于阈值的范围内服从均匀分布。粒子的速度和强度在最大与最小值之间服从均匀分布。
3.建立系统模型和观测模型:
红外弱小目标在k时刻的状态向量为 s k = x k x · k y k y · k I k T , 其中包含目标位置(xk,yk),速度
Figure BDA00001677554700062
和目标的强度幅值Ik;系统方程为:
sk+1=Fsk+vk        (1)
其中, F = 1 T 0 0 0 0 1 0 0 0 0 0 1 T 0 0 0 0 1 0 0 0 0 0 1 , Q = q 1 3 T 3 q 1 2 T 2 0 0 0 q 1 2 T 2 q 1 T 0 0 0 0 0 q 1 3 T 3 q 1 2 T 2 0 0 0 q 1 2 T 2 q 1 T 0 0 0 0 0 q 2 T , vk是服从零均值,方差为Q的高斯白噪声,q1代表目标运动中过程噪声的大小,q2代表目标强度噪声的大小。T为采样间隔T=1s。
把通过红外热像仪获得的前k帧序列图像当成量测,用符号Zk表示,设zk表示第k帧图像,则前k次量测为Zk={z1,z2,...,zk}。假设传感器对x-y平面上的区域进行扫描,传感器含有N×M个矩形分辨单元,每个分辨单元的大小为Δx×Δy。在每个采样时刻k,每个分辨单元(i,j)(1≤i≤N,1≤j≤M)分别记录一个量测
Figure BDA00001677554700065
而:
z k ( i , j ) = I k ( i , j ) ( s k ) + n k ( i , j ) δ k = 1 n k ( i , j ) δ k = 0 - - - ( 2 )
式中δk=1表示k时刻目标出现,δk=0表示目标未出现,δk服从Markov过程,
Figure BDA00001677554700067
为k时刻目标质心位于(xk,yk)时像素单元(i,j)处接受的信号强度,
Figure BDA00001677554700068
为量测噪声,像素间帧间噪声相互独立。分辨单元(i,j)处强度
Figure BDA00001677554700069
按传感器的点传播函数可近似为(其中∑是传感器引起的模糊程度参数,目标(xk,yk)处的幅值为Ik):
I k ( i , j ) ( s k ) ≈ Δ x Δ y I k 2 π Σ 2 exp ( - ( iΔ x - x k ) 2 2 Σ 2 - ( jΔ y - y k ) 2 2 Σ 2 ) - - - ( 3 )
4.目标跟踪阶段。目标跟踪阶段分为预测与更新两个步骤。
在预测过程中,由k-1时刻目标出现状态
Figure BDA00001677554700071
与转移概率矩阵∏=[πij],i,j={0,1}对k时刻目标出现状态变量
Figure BDA00001677554700072
的预测。在预测完成之后,对粒子的状态进行分析:对于的粒子,其状态变量没有意义;对于的粒子,预测每个粒子k时刻的状态变量。分两种情况:(a)新生粒子,这些粒子是由
Figure BDA00001677554700075
转换到
Figure BDA00001677554700076
时产生的,本发明提出目标状态从建议分布函数qb(sk|zk)中采样,qb(sk|zk)由如下方法获得:对于位置(xk,yk),γ为一个经过实际检验过较为合适的阈值,将量测zk
Figure BDA00001677554700077
的分辨单元组成的区域,qb(xk,yk|zk)是均匀分布在此区域上的。对于目标的速度
Figure BDA00001677554700078
本发明提出分布函数vmax是目标的最大速度(方向也是如此处理);对于目标的强度Ik □U[Imin,Imax],Imin和Imax是合适的灰度级(根据目标的信噪比)。(b)已存在粒子,这些粒子是
Figure BDA000016775547000711
转换到
Figure BDA000016775547000712
时一直存在的,此时分布函数选择为由系统模型确定的一步转移概率
Figure BDA000016775547000713
在更新过程中,利用似然比计算粒子的重要性权值,再进行权值归一化和重采样。
5.目标检测阶段。
重采样后得到k时刻的一组粒子
Figure BDA000016775547000714
逼近状态的后验概率分布p(skk=1|Zk),k时刻目标存在的后验概率:
P ^ k = Σ n = 1 N δ k n N - - - ( 4 )
用上式近似计算,最后利用似然比检测完成目标检测,似然比为:
Λ k = P ( δ k = 1 | Z k ) P ( δ k = 0 | Z k ) ≈ P ^ k 1 - P ^ k - - - ( 5 )
设定某一阈值Δt,因为
Figure BDA000016775547000717
为0.6,所以阈值Δt为1.5。若Λk>Λt表明目标出现,此时求出目标状态估计值:
s ^ k = Σ n = 1 N s k n δ k n Σ n = 1 N δ k n - - - ( 6 )
二、基于窗口粒子滤波的检测前跟踪方法
首先在整个视场进行目标搜索,采用基于全视场的粒子滤波的检测前跟踪算法实现目标的搜索,如果没有搜到目标,继续搜索;如果目标出现,一个较小的窗口内采用基于窗口的粒子滤波检测前跟踪算法实现目标的跟踪,如果目标消失,再在整个窗口进行目标搜索。窗口的大小为10×10。
三、基于全视场进行检测的粒子滤波的检测前跟踪系统的软硬件设计
本发明采用红外热像仪、ICETEK-DM642开发板和监视器构成硬件系统。
1.系统的硬件设计与构成
本系统分为视频采集模块、目标检测与跟踪模块和显示模块三部分。其中视频采集模块由红外热像仪IR109-HGC和SAA7115HL解码器构成,目标检测与跟踪模块由ICETEK-DM642开发板构成,显示模块由监视器构成。
(1)IR109-HGC红外热像仪
IR109-HGC红外热像仪采用多晶硅非制冷焦平面探测器(UFPA)和IR109机芯组件,是理想的红外观测分析系统。工作波段为8~14μm,工作温度-40℃~+50℃,输出为标准PAL制模拟视频。
(2)ICETEK-DM642开发板
ICETEK-DM642开发板采用600MHz的TMS320DM642型的DSP芯片,具有4800MIPS的计算能力,并配置了4路视频端口、4M×64bit同步动态存储器和SAA7115和SAA7105型的编解码芯片。
(3)监视器
监视器为普通黑白监视器。
2.系统的软件实现
(1)红外图像采集与输出
利用DM642芯片的实时操作系统(DSP/BIOS)、驱动开发套件(DDK)、SAA7115和SAA7105芯片的配置函数完成对红外图像的采集与输出。主要包含以下函数和配置。
3)DSP/BIOS的配置
①设置放置缓存图像的内存空间:在System下的MEM模块中加入自己定义的内存空间名SDRAM1和SDRAM2,并对SDRAM1和SDRAM2进行配置。SDRAM1配置为:其起始地址为0x80000000和长度为0x01000000,并在SDRAM1中定义一个大小为0x00800000和表示符号为_EXTERNALHEAP的堆,用于存放采集和输出的图像。SDRAM2配置为:其起始地址为0x81000000和长度为0x00800000,并在SDRAM2中定义一个大小为0x00800000和表示符号为_MEMTEMP的堆,用于算法运行过程中需要动态分配的内存空间。
②设置运行时间统计函数:在Instrumentation下的STS模块中添加需要统计的对象STS_algorithm和tskLoopback,用以统计每帧图像运行的时间和处理每帧图像时算法所需要的时间。
③设置算法运行函数:在Scheduling下的TSK模块添加算法运行任务函数tskVideoprocess,并对其进行配置:函数名为_tskVideoprocess,并在源程序中编写tskVideoprocess函数的具体实现程序。
④对视频设备进行驱动:在Input/Output下的Device Drivers模块中的User-Defined Devices子模块配置视频设备驱动。添加自定义的视频捕获设备VP0CAPTURE和显示设备VP2DISPLAY,并对设备进行配置。视频捕获设备VP0CAPTURE配置为:function table ptr中填入_VPORTCAP_Fxns,function table type中填入IOM_Fxns,device id中填入设备号0x00000000,在device params ptr中填入_EVMDM642_vCapParamsPort。视频显示设备VP2DISPLAY配置为:function table ptr中填入_VPORTDIS_Fxns,function table type中填入IOM_Fxns,device id中填入设备号0x00000002,在device params ptr中填入_EVMDM642_vDisParamsPort。
4)SAA7115和SAA7105芯片的配置
①对SAA7115进行配置:将inMode配置为SAA7115_MODE_PAL720。
②对SAA7105进行配置:将SAA7105_AnalogFormat配置为SAA7105_AFMT_SVIDEO,将SAA7105_Mode配置为SAA7105_MODE_PAL720。
(2)图像预处理
利用函数MEM_copy将每一帧待处理红外图像复制至划分的临时存储空间中,再利用函数ICETEKDM642PCIYuchuli(unsigned char*in)完成对每帧图像的预处理,得到只有目标和噪声的图像。将函数代码放置在ISRAM中划分的段".text1″中。在预处理中使用MEM_calloc函数动态在内存段MEMTEMP内划分一个指向临时数据存储空间的unsigned char型的指针tempdata,用于存储存每次腐蚀与膨胀之后的图像信息。
(3)初始化粒子
在初始化粒子之前,定义算法运算中需要的参数:粒子个数Num_particle、视场行数LINE_SZ、视场每行像素数NUM_LINES、矩形分辨单元宽度delta_x、矩形分辨单元高度delta_y、初始时刻目标存在的概率Init_Pro_exist、x方向矩形分辨单元个数Num_Cell_x、y方向矩形分辨单元个数Num_Cell_y、状态转移概率矩阵Trans_Matrix[2][2]、目标运动中过程噪声的大小q1,目标强度噪声大小q2、模糊参数I_Blur等。
使用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在预处理之后的第一帧图像的全视场内找出大于阈值th的像素点,返回其坐标值。粒子初始化时的位置坐标值从大于阈值th的像素点中抽取;速度
Figure BDA00001677554700101
采用建议分布函数
Figure BDA00001677554700102
vmax是目标的最大速度(
Figure BDA00001677554700103
方向也是如此处理);目标的强度Ik □U[Imin,Imax],Imin和Imax是合适的灰度级(根据目标的信噪比)。粒子状态的初始化:使用函数randn(Num_particle)产生与粒子个数相等的值在0到1间的随机序列,用函数find_M_X(U_rand,1,Num_particle,length_u,Init_Pro_exist)找出随即序列中小于Init_Pro_exist的随机数位置,将与之位置相同的粒子的状态定义为存在用值2表示,其余粒子状态为不存在用值1表示,完成对粒子的初始化。
(4)跟踪阶段
跟踪阶段分为预测与更新两个步骤。
预测:由k-1时刻目标出现的状态
Figure BDA00001677554700104
与转移概率矩阵∏=[πij]作为参数,利用函数int*Regime_Transition(int*in,int le_RP,float**T_M,int len_TM)完成前后两帧中粒子状态的转移。对于
Figure BDA00001677554700105
的粒子,其状态变量没有意义;对于
Figure BDA00001677554700106
的粒子,预测每个粒子k时刻的状态变量。分两种情况:(a)新生粒子,这些粒子是由
Figure BDA00001677554700107
转换到
Figure BDA00001677554700108
时产生的,用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在全视场内找出大于阈值th的像素点得位置,粒子的位置坐标值随即从大于阈值th的像素点中抽取;速度
Figure BDA00001677554700109
采用建议分布函数
Figure BDA000016775547001010
vmax是目标的最大速度(方向也是如此处理);目标的强度IkU[Imin,Imax],Imin和Imax是合适的灰度级(根据目标的信噪比)。(b)已存在粒子,这些粒子是
Figure BDA00001677554700111
转换到
Figure BDA00001677554700112
时一直存在的,其状态值利用函数sk+1=Fsk+vk计算,sk+1为当前时刻状态值,sk为前一时刻粒子状态值,vk为高斯噪声,利用DSP计算。
更新:用似然比计算重要性权值。在计算出粒子的重要性权值之后,对重要性权值进行归一化。利用重采样函数float*multinomialR(int n,float*q)对粒子进行重采样。在重采样完之后对粒子进行更新。
(5)检测阶段
在对粒子重采样和更新之后,利用函数int find_k_E(int*in,int m,int n,float th)计算粒子中状态为存在即粒子状态值为2的个数,以此求出k时刻目标存在的后验概率
Figure BDA00001677554700113
如果
Figure BDA00001677554700114
认为目标存在,否则认为目标不存在。在目标存在的情况下,通过对状态值为2的粒子各个状态求均值得到目标的状态值,完成检测。

Claims (3)

1.一种基于粒子滤波的红外弱小目标检测与跟踪方法,其特征是包括由如下步骤构成的基于全视场进行检测的粒子滤波检测前跟踪方法:
(1)图像预处理:采用形态学对图像进行开启操作获得背景图像,将原图像减去背景图像获得含有目标和噪声的去背景图像;
(2)粒子初始化:根据设定的阈值和初始目标出现概率,在全视场大于阈值的范围内抽取粒子,粒子的速度和强度服从最大值和最小值间的均匀分布;
(3)目标跟踪阶段:跟踪阶段分为预测和更新两个步骤;
1)在预测过程中,分为目标出现状态的预测和目标状态的预测,根据目标前一时刻的状态和状态转移概率矩阵对当前时刻目标状态进行预测,预测之后的状态为不存在的粒子没有意义,预测之后的状态为存在的粒子分为新生粒子和已存在的粒子两种,对新生粒子从大于阈值的范围内抽取粒子,已存在粒子由系统模型确定的一步转移概率函数中抽取;
2)在更新过程中,根据当前图像信息和粒子的状态参数利用似然函数计算粒子权重值,对权重值归一化,根据归一化后的权重值对粒子进行重采样;
(4)目标检测阶段:根据重采样之后的当前时刻的粒子状态计算目标存在的后验概率,并以此计算似然比,再利用似然比完成目标检测,如果似然比大于设定的阈值,就采用粒子滤波得到的预测结果作为目标的状态估计值。
2.根据权利要求1所述的基于粒子滤波的红外弱小目标检测与跟踪方法,其特征是:由基于全视场进行检测的粒子滤波检测前跟踪方法实现目标的搜索后,判定是否搜索的目标,如果搜索到目标再采用基于窗口的粒子滤波的检测前跟踪的算法实现目标的跟踪。
3.一种基于粒子滤波的红外弱小目标检测与跟踪装置,由视频采集模块、目标检测与跟踪模块和显示模块构成,其特征是:其中视频采集模块由红外热像仪IR109-HGC和SAA7115HL解码器构成,目标检测与跟踪模块由ICETEK-DM642开发板构成,显示模块由监视器构成;
视频采集模块利用DM642芯片的实时操作系统即DSP/BIOS、驱动开发套件即DDK、SAA7115和SAA7105芯片的配置函数完成对红外图像的采集与输出;主要包含以下函数和配置:
1)DSP/BIOS的配置
①设置放置缓存图像的内存空间:在System下的MEM模块中加入自己定义的内存空间名SDRAM1和SDRAM2,并对SDRAM1和SDRAM2进行配置;
②设置运行时间统计函数:在Instrumentation下的STS模块中添加需要统计的对象STS_algorithm和tskLoopback;
③设置算法运行函数:在Scheduling下的TSK模块添加算法运行任务函数tskVideoprocess,并对其进行配置:函数名为_tskVideoprocess,并在源程序中编写tskVideoprocess函数的具体实现程序;
④对视频设备进行驱动:在Input/Output下的Device Drivers模块中的User-Defined Devices子模块配置视频设备驱动,添加自定义的视频捕获设备VP0CAPTURE和显示设备VP2DISPLAY,并对设备进行配置;
2)SAA7115和SAA7105芯片的配置
①对SAA7115进行配置:将inMode配置为SAA7115_MODE_PAL720;
②对SAA7105进行配置:将SAA7105_AnalogFormat配置为SAA7105_AFMT_SVIDEO,将SAA7105_Mode配置为SAA7105_MODE_PAL720;
目标检测与跟踪模块完成:
1)图像预处理
利用函数MEM_copy将每一帧待处理红外图像复制至划分的临时存储空间中,再利用函数ICETEKDM642PCIYuchuli(unsigned char*in)完成对每帧图像的预处理,得到只有目标和噪声的图像,将函数代码放置在ISRAM中划分的段".text1″中,在预处理中使用MEM_calloc函数动态在内存段MEMTEMP内划分一个指向临时数据存储空间的unsigned char型的指针tempdata,用于存储存每次腐蚀与膨胀之后的图像信息;
2)初始化粒子
在初始化粒子之前,定义算法运算中需要的参数:粒子个数Num_particle、视场行数LINE_SZ、视场每行像素数NUM_LINES、矩形分辨单元宽度delta_x、矩形分辨单元高度delta_y、初始时刻目标存在的概率Init_Pro_exist、x方向矩形分辨单元个数Num_Cell_x、y方向矩形分辨单元个数Num_Cell_y、状态转移概率矩阵Trans_Matrix[2][2]、目标运动中过程噪声的大小q1,目标强度噪声大小q2、模糊参数I_Blur;
使用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在预处理之后的第一帧图像的全视场内找出大于阈值th的像素点,返回其坐标值,粒子初始化时的位置坐标值从大于阈值th的像素点中抽取;速度
Figure FDA00001677554600031
采用建议分布函数qb
Figure FDA00001677554600032
=U[-vmax,vmax],vmax是目标的最大速度,
Figure FDA00001677554600033
方向也是如此处理;目标的强度Ik □U[Imin,Imax],Imin和Imax是合适的灰度级,粒子状态的初始化:使用函数randn(Num_particle)产生与粒子个数相等的值在0到1间的随机序列,用函数find_M_X(U_rand,1,Num_particle,length_u,Init_Pro_exist)找出随即序列中小于Init_Pro_exist的随机数位置,将与之位置相同的粒子的状态定义为存在用值2表示,其余粒子状态为不存在用值1表示,完成对粒子的初始化;
3)跟踪
预测:由k-1时刻目标出现的状态
Figure FDA00001677554600034
与转移概率矩阵∏=[πij]作为参数,利用函数int*Regime_Transition(int*in,int le_RP,float**T_M,int len_TM)完成前后两帧中粒子状态的转移;对于的粒子,其状态变量没有意义;对于
Figure FDA00001677554600036
的粒子,预测每个粒子k时刻的状态变量,分两种情况:(a)新生粒子,这些粒子是由
Figure FDA00001677554600037
转换到
Figure FDA00001677554600038
时产生的,用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在全视场内找出大于阈值th的像素点得位置,粒子的位置坐标值随即从大于阈值th的像素点中抽取;速度采用建议分布函数qb
Figure FDA000016775546000310
=U[-vmax,vmax],vmax是目标的最大速度,
Figure FDA000016775546000311
方向也是如此处理;目标的强度IkU[Imin,Imax],Imin和Imax是合适的灰度级,(b)已存在粒子,这些粒子是
Figure FDA000016775546000312
=1转换到
Figure FDA000016775546000313
时一直存在的,其状态值利用函数sk+1=Fsk+vk计算,sk+1为当前时刻状态值,sk为前一时刻粒子状态值,vk为高斯噪声,利用DSP计算;
更新:用似然比计算重要性权值,在计算出粒子的重要性权值之后,对重要性权值进行归一化。利用重采样函数float*multinomialR(int n,float*q)对粒子进行重采样,在重采样完之后对粒子进行更新;
4)检测
在对粒子重采样和更新之后,利用函数int find_k_E(int*in,int m,int n,float th)计算粒子中状态为存在即粒子状态值为2的个数,以此求出k时刻目标存在的后验概率
Figure FDA000016775546000314
如果
Figure FDA000016775546000315
认为目标存在,否则认为目标不存在,在目标存在的情况下,通过对状态值为2的粒子各个状态求均值得到目标的状态值,完成检测。
CN201210163140.1A 2012-05-24 2012-05-24 基于粒子滤波的红外弱小目标检测与跟踪方法及装置 Expired - Fee Related CN102722706B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210163140.1A CN102722706B (zh) 2012-05-24 2012-05-24 基于粒子滤波的红外弱小目标检测与跟踪方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210163140.1A CN102722706B (zh) 2012-05-24 2012-05-24 基于粒子滤波的红外弱小目标检测与跟踪方法及装置

Publications (2)

Publication Number Publication Date
CN102722706A true CN102722706A (zh) 2012-10-10
CN102722706B CN102722706B (zh) 2014-01-29

Family

ID=46948456

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210163140.1A Expired - Fee Related CN102722706B (zh) 2012-05-24 2012-05-24 基于粒子滤波的红外弱小目标检测与跟踪方法及装置

Country Status (1)

Country Link
CN (1) CN102722706B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103957360A (zh) * 2014-05-20 2014-07-30 合肥君达高科信息技术有限公司 一种具有高速粒子跟踪拍摄功能的控制方法及其装置
CN104237853A (zh) * 2014-09-16 2014-12-24 电子科技大学 一种针对多帧检测前跟踪点迹序列的粒子滤波方法
CN104463125A (zh) * 2014-12-11 2015-03-25 哈尔滨工程大学 基于dsp的人脸自动检测跟踪装置及其方法
CN104766100A (zh) * 2014-10-22 2015-07-08 中国人民解放军电子工程学院 基于机器学习的红外小目标图像背景预测方法与装置
CN104833964A (zh) * 2015-04-28 2015-08-12 南京邮电大学 针对雷达/声呐系统的目标检测跟踪一体化方法和装置
CN106127253A (zh) * 2016-06-27 2016-11-16 北京航空航天大学 一种利用样本特征学习分类的红外弱小目标检测方法
CN107710092A (zh) * 2015-06-09 2018-02-16 三星电子株式会社 移动机器人及控制其的方法
CN109213322A (zh) * 2018-08-23 2019-01-15 深圳大学 一种虚拟现实中手势识别的方法及系统
CN110073410A (zh) * 2016-12-15 2019-07-30 Trw有限公司 跟踪场景中的对象的方法
CN111427042A (zh) * 2020-03-24 2020-07-17 哈尔滨工程大学 基于高刷新率声脉冲的水下弱目标回波检测前跟踪方法
CN113325405A (zh) * 2020-02-28 2021-08-31 加特兰微电子科技(上海)有限公司 恒虚警目标检测方法、装置、集成电路、传感器及设备
CN115311470A (zh) * 2022-09-28 2022-11-08 北京万龙精益科技有限公司 自适应块匹配滤波的红外小目标实时检测与跟踪方法
CN115469270A (zh) * 2022-08-16 2022-12-13 哈尔滨工程大学 基于检测前跟踪的长基线定位方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1606033A (zh) * 2004-11-18 2005-04-13 上海交通大学 红外图像序列中弱小目标的检测和跟踪方法
CN101894381A (zh) * 2010-08-05 2010-11-24 上海交通大学 动态视频序列中多目标跟踪系统
CN102043150A (zh) * 2010-12-06 2011-05-04 电子科技大学 用于微弱目标检测的改进型粒子滤波检测前跟踪方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1606033A (zh) * 2004-11-18 2005-04-13 上海交通大学 红外图像序列中弱小目标的检测和跟踪方法
CN101894381A (zh) * 2010-08-05 2010-11-24 上海交通大学 动态视频序列中多目标跟踪系统
CN102043150A (zh) * 2010-12-06 2011-05-04 电子科技大学 用于微弱目标检测的改进型粒子滤波检测前跟踪方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JI QINGBO,YANG YANG: "The Arithmetic of Tracking before Detecting of Dim Infrared Targets Based on Particle Filter", 《2010 SECOND ASIA PACIFIC CONFERENCE ON POSTGRADUATE RESEARCH IN MICROELECTRONICS & ELECTRONICS (PRIMEASIA 2010)》 *
汲清波: "红外序列图像中弱小目标检测方法研究", 《中国博士学位论文全文数据库》 *

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103957360A (zh) * 2014-05-20 2014-07-30 合肥君达高科信息技术有限公司 一种具有高速粒子跟踪拍摄功能的控制方法及其装置
CN104237853A (zh) * 2014-09-16 2014-12-24 电子科技大学 一种针对多帧检测前跟踪点迹序列的粒子滤波方法
CN104766100A (zh) * 2014-10-22 2015-07-08 中国人民解放军电子工程学院 基于机器学习的红外小目标图像背景预测方法与装置
CN104766100B (zh) * 2014-10-22 2018-05-18 中国人民解放军电子工程学院 基于机器学习的红外小目标图像背景预测方法与装置
CN104463125A (zh) * 2014-12-11 2015-03-25 哈尔滨工程大学 基于dsp的人脸自动检测跟踪装置及其方法
CN104833964A (zh) * 2015-04-28 2015-08-12 南京邮电大学 针对雷达/声呐系统的目标检测跟踪一体化方法和装置
CN107710092A (zh) * 2015-06-09 2018-02-16 三星电子株式会社 移动机器人及控制其的方法
CN107710092B (zh) * 2015-06-09 2020-12-22 三星电子株式会社 移动机器人及控制其的方法
CN106127253A (zh) * 2016-06-27 2016-11-16 北京航空航天大学 一种利用样本特征学习分类的红外弱小目标检测方法
CN106127253B (zh) * 2016-06-27 2019-04-05 北京航空航天大学 一种利用样本特征学习分类的红外弱小目标检测方法
CN110073410A (zh) * 2016-12-15 2019-07-30 Trw有限公司 跟踪场景中的对象的方法
CN110073410B (zh) * 2016-12-15 2023-06-30 Trw有限公司 跟踪场景中的对象的方法
CN109213322A (zh) * 2018-08-23 2019-01-15 深圳大学 一种虚拟现实中手势识别的方法及系统
CN109213322B (zh) * 2018-08-23 2021-05-04 深圳大学 一种虚拟现实中手势识别的方法及系统
CN113325405A (zh) * 2020-02-28 2021-08-31 加特兰微电子科技(上海)有限公司 恒虚警目标检测方法、装置、集成电路、传感器及设备
CN111427042A (zh) * 2020-03-24 2020-07-17 哈尔滨工程大学 基于高刷新率声脉冲的水下弱目标回波检测前跟踪方法
CN111427042B (zh) * 2020-03-24 2022-04-19 哈尔滨工程大学 基于高刷新率声脉冲的水下弱目标回波检测前跟踪方法
CN115469270A (zh) * 2022-08-16 2022-12-13 哈尔滨工程大学 基于检测前跟踪的长基线定位方法及系统
CN115311470A (zh) * 2022-09-28 2022-11-08 北京万龙精益科技有限公司 自适应块匹配滤波的红外小目标实时检测与跟踪方法
CN115311470B (zh) * 2022-09-28 2023-01-24 北京万龙精益科技有限公司 自适应块匹配滤波的红外小目标实时检测与跟踪方法及其系统、装置和计算机可读存储介质

Also Published As

Publication number Publication date
CN102722706B (zh) 2014-01-29

Similar Documents

Publication Publication Date Title
CN102722706B (zh) 基于粒子滤波的红外弱小目标检测与跟踪方法及装置
US11643076B2 (en) Forward collision control method and apparatus, electronic device, program, and medium
CN111399642B (zh) 手势的识别方法、装置、移动终端和存储介质
CN102176228B (zh) 一种用于识别多个指针式仪表表盘信息的机器视觉方法
CN101916447B (zh) 一种鲁棒的运动目标检测与跟踪图像处理方法
US10255673B2 (en) Apparatus and method for detecting object in image, and apparatus and method for computer-aided diagnosis
CN104183127A (zh) 交通监控视频检测方法和装置
CN101216941A (zh) 剧烈光照变化下基于角点匹配与光流法的运动估计方法
US9244159B1 (en) Distinguishing between maritime targets and clutter in range-doppler maps
CN104766334A (zh) 红外弱小目标检测跟踪方法及其装置
CN107423734B (zh) 一种sar图像海洋目标快速检测方法与装置
CN112312001B (zh) 一种图像检测的方法、装置、设备和计算机存储介质
CN111121797B (zh) 道路筛选方法、装置、服务器及存储介质
CN102592128A (zh) 一种动态图像检测处理方法、装置及显示终端
CN103824302A (zh) 基于方向波域图像融合的sar图像变化检测方法
CN102129559B (zh) 基于PrimalSketch算法的SAR图像目标检测方法
CN103559715B (zh) 一种高光谱图像的异常检测方法及装置
CN106056115B (zh) 一种非均匀背景下的红外小目标检测方法
CN114998628A (zh) 基于模板匹配的孪生网络长时目标跟踪方法
CN103093481B (zh) 一种基于分水岭分割的静态背景下运动目标检测方法
CN104268852B (zh) 红外序列图像中弱小目标的检测方法及其检测装置
CN109636832A (zh) 停靠检测方法、装置、电子设备和存储介质
CN106778822B (zh) 基于漏斗变换的图像直线检测方法
CN114895274A (zh) 一种护栏识别方法
CN109612467B (zh) 轨迹简化方法、系统及轨迹可视化系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140129

Termination date: 20190524

CF01 Termination of patent right due to non-payment of annual fee