CN102722706A - 基于粒子滤波的红外弱小目标检测与跟踪方法及装置 - Google Patents
基于粒子滤波的红外弱小目标检测与跟踪方法及装置 Download PDFInfo
- Publication number
- CN102722706A CN102722706A CN2012101631401A CN201210163140A CN102722706A CN 102722706 A CN102722706 A CN 102722706A CN 2012101631401 A CN2012101631401 A CN 2012101631401A CN 201210163140 A CN201210163140 A CN 201210163140A CN 102722706 A CN102722706 A CN 102722706A
- Authority
- CN
- China
- Prior art keywords
- target
- particles
- state
- particle
- function
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000002245 particle Substances 0.000 title claims abstract description 166
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000001514 detection method Methods 0.000 claims abstract description 72
- 230000006870 function Effects 0.000 claims description 66
- 230000007704 transition Effects 0.000 claims description 18
- 238000012952 Resampling Methods 0.000 claims description 17
- 238000007781 pre-processing Methods 0.000 claims description 16
- 239000011159 matrix material Substances 0.000 claims description 15
- 238000011161 development Methods 0.000 claims description 11
- 238000001914 filtration Methods 0.000 claims description 11
- 238000005315 distribution function Methods 0.000 claims description 8
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000012935 Averaging Methods 0.000 claims description 3
- 238000013500 data storage Methods 0.000 claims description 3
- 238000009827 uniform distribution Methods 0.000 claims description 3
- 238000005260 corrosion Methods 0.000 claims description 2
- 230000007797 corrosion Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 5
- 238000009826 distribution Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003331 infrared imaging Methods 0.000 description 2
- 230000001629 suppression Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003628 erosive effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 229910021420 polycrystalline silicon Inorganic materials 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
Abstract
本发明提供的是一种基于粒子滤波的红外弱小目标检测与跟踪方法及装置。采用形态学对图像进行开启操作获得背景图像,将原图像减去背景图像获得含有目标和噪声的去背景图像;根据设定的阈值和初始目标出现概率,在全视场大于阈值的范围内抽取粒子;跟踪阶段分为预测和更新两个步骤,预测包括目标出现状态的预测和目标状态的预测,在更新过程中利用似然函数计算粒子权重值、对权重值归一化、根据归一化后的权重值对粒子进行重采样;根据重采样之后的当前时刻的粒子状态计算目标存在的后验概率,并以此计算似然比,再利用似然比完成目标检测。本发明在低信噪比复杂背景的情况下,实现对红外弱小目标的有效检测和高精度跟踪。可广泛应用于各类系统。
Description
技术领域
本发明涉及的是一种红外弱小目标检测与跟踪方法。本发明也涉及一种红外弱小目标检测与跟踪装置。
背景技术
随着红外成像技术的不断发展,红外成像系统已经广泛应用在光学遥感、安全监视、夜间导航、目标探测等领域中。目前关键问题是如何在远距离、低信噪比的条件下尽早检测和跟踪目标,但由于远距离时目标成像面积太小,可检测信号相对较弱,特别是非平稳的起伏背景干扰下,目标被背景杂波淹没,无结构、形状信息可利用,使得那些传统的近距离目标图像检测和识别方法无法达到检测识别的目的。因此,复杂背景、低信噪比情况下的红外弱小目标检测与跟踪问题以及硬件实现成为目前亟待解决的关键问题。
经过对现有的技术文献及专利的检索发现,目前粒子滤波理论和算法的研究比较成熟,如:敬忠良在2005年的发明专利《红外图像序列中弱小目标的检测和跟踪方法》,该专利将基于粒子滤波的检测前跟踪方法应用到红外图像检测和跟踪领域,该方法的理论研究比较成熟,但是目前没有该方法在实用化方面的文献及研究成果,特别是在硬件实现方面还有很多关键问题需要解决。
发明内容
本发明的目的在于提供一种具有良好的检测性能和较高的跟踪精度的基于粒子滤波的红外弱小目标检测与跟踪方法。本发明的目的还在于提供一种具有实用价值的基于粒子滤波的红外弱小目标检测与跟踪装置。
本发明的目的是这样实现的:
本发明的基于粒子滤波的红外弱小目标检测与跟踪方法,包括由如下步骤构成的基于全视场进行检测的粒子滤波检测前跟踪方法:
(1)图像预处理:采用形态学对图像进行开启操作获得背景图像,将原图像减去背景图像获得含有目标和噪声的去背景图像;
(2)粒子初始化:根据设定的阈值和初始目标出现概率,在全视场大于阈值的范围内抽取粒子,粒子的速度和强度服从最大值和最小值间的均匀分布;
(3)目标跟踪阶段:跟踪阶段分为预测和更新两个步骤;
1)在预测过程中,分为目标出现状态的预测和目标状态的预测,根据目标前一时刻的状态和状态转移概率矩阵对当前时刻目标状态进行预测,预测之后的状态为不存在的粒子没有意义,预测之后的状态为存在的粒子分为新生粒子和已存在的粒子两种,对新生粒子从大于阈值的范围内抽取粒子,已存在粒子由系统模型确定的一步转移概率函数中抽取;
2)在更新过程中,根据当前图像信息和粒子的状态参数利用似然函数计算粒子权重值,对权重值归一化,根据归一化后的权重值对粒子进行重采样;
(4)目标检测阶段:根据重采样之后的当前时刻的粒子状态计算目标存在的后验概率,并以此计算似然比,再利用似然比完成目标检测,如果似然比大于设定的阈值,就采用粒子滤波得到的预测结果作为目标的状态估计值。
本发明的方法还可以包括:由基于全视场进行检测的粒子滤波检测前跟踪方法实现目标的搜索后,判定是否搜索的目标,如果搜索到目标再采用基于窗口的粒子滤波的检测前跟踪的算法实现目标的跟踪。
本发明的基于粒子滤波的红外弱小目标检测与跟踪装置由视频采集模块、目标检测与跟踪模块和显示模块构成,其中视频采集模块由红外热像仪IR109-HGC和SAA7115HL解码器构成,目标检测与跟踪模块由ICETEK-DM642开发板构成,显示模块由监视器构成;
视频采集模块利用DM642芯片的实时操作系统即DSP/BIOS、驱动开发套件即DDK、SAA7115和SAA7105芯片的配置函数完成对红外图像的采集与输出;主要包含以下函数和配置:
1)DSP/BIOS的配置
①设置放置缓存图像的内存空间:在System下的MEM模块中加入自己定义的内存空间名SDRAM1和SDRAM2,并对SDRAM1和SDRAM2进行配置;
②设置运行时间统计函数:在Instrumentation下的STS模块中添加需要统计的对象STS_algorithm和tskLoopback;
③设置算法运行函数:在Scheduling下的TSK模块添加算法运行任务函数tskVideoprocess,并对其进行配置:函数名为_tskVideoprocess,并在源程序中编写tskVideoprocess函数的具体实现程序;
④对视频设备进行驱动:在Input/Output下的Device Drivers模块中的User-Defined Devices子模块配置视频设备驱动,添加自定义的视频捕获设备VP0CAPTURE和显示设备VP2DISPLAY,并对设备进行配置;
2)SAA7115和SAA7105芯片的配置
①对SAA7115进行配置:将inMode配置为SAA7115_MODE_PAL720;
②对SAA7105进行配置:将SAA7105_AnalogFormat配置为SAA7105_AFMT_SVIDEO,将SAA7105_Mode配置为SAA7105_MODE_PAL720;
目标检测与跟踪模块完成:
1)图像预处理
利用函数MEM_copy将每一帧待处理红外图像复制至划分的临时存储空间中,再利用函数ICETEKDM642PCIYuchuli(unsigned char*in)完成对每帧图像的预处理,得到只有目标和噪声的图像,将函数代码放置在ISRAM中划分的段".text1"中,在预处理中使用MEM_calloc函数动态在内存段MEMTEMP内划分一个指向临时数据存储空间的unsigned char型的指针tempdata,用于存储存每次腐蚀与膨胀之后的图像信息;
2)初始化粒子
在初始化粒子之前,定义算法运算中需要的参数:粒子个数Num_particle、视场行数LINE_SZ、视场每行像素数NUM_LINES、矩形分辨单元宽度delta_x、矩形分辨单元高度delta_y、初始时刻目标存在的概率Init_Pro_exist、x方向矩形分辨单元个数Num_Cell_x、y方向矩形分辨单元个数Num_Cell_y、状态转移概率矩阵Trans_Matrix[2][2]、目标运动中过程噪声的大小q1,目标强度噪声大小q2、模糊参数I_Blur;
使用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在预处理之后的第一帧图像的全视场内找出大于阈值th的像素点,返回其坐标值,粒子初始化时的位置坐标值从大于阈值th的像素点中抽取;速度采用建议分布函数vmax是目标的最大速度,方向也是如此处理;目标的强度Ik□U[Imin,Imax],Imin和Imax是合适的灰度级,粒子状态的初始化:使用函数randn(Num_particle)产生与粒子个数相等的值在0到1间的随机序列,用函数find_M_X(U_rand,1,Num_particle,length_u,Init_Pro_exist)找出随即序列中小于Init_Pro_exist的随机数位置,将与之位置相同的粒子的状态定义为存在用值2表示,其余粒子状态为不存在用值1表示,完成对粒子的初始化;
3)跟踪
预测:由k-1时刻目标出现的状态与转移概率矩阵∏=[πij]作为参数,利用函数int*Regime_Transition(int*in,int le_RP,float**T_M,int len_TM)完成前后两帧中粒子状态的转移;对于的粒子,其状态变量没有意义;对于的粒子,预测每个粒子k时刻的状态变量,分两种情况:(a)新生粒子,这些粒子是由转换到时产生的,用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在全视场内找出大于阈值th的像素点得位置,粒子的位置坐标值随即从大于阈值th的像素点中抽取;速度采用建议分布函数vmax是目标的最大速度,方向也是如此处理;目标的强度IkU[Imin,Imax],Imin和Imax是合适的灰度级,(b)已存在粒子,这些粒子是转换到时一直存在的,其状态值利用函数sk+1=Fsk+vk计算,sk+1为当前时刻状态值,sk为前一时刻粒子状态值,vk为高斯噪声,利用DSP计算;
更新:用似然比计算重要性权值,在计算出粒子的重要性权值之后,对重要性权值进行归一化。利用重采样函数float*multinomialR(int n,float*q)对粒子进行重采样,在重采样完之后对粒子进行更新;
4)检测
在对粒子重采样和更新之后,利用函数int find_k_E(int*in,int m,int n,float th)计算粒子中状态为存在即粒子状态值为2的个数,以此求出k时刻目标存在的后验概率如果认为目标存在,否则认为目标不存在,在目标存在的情况下,通过对状态值为2的粒子各个状态求均值得到目标的状态值,完成检测。
本发明在DSP硬件平台上实现了基于全视场和基于窗口粒子滤波的检测前跟踪算法,实现了对低信噪比的红外弱小目标的有效检测和跟踪,具有良好的检测性能和较高的跟踪精度。
本发明首先通过形态学对红外图像进行预处理,完成对图像的去噪以及背景抑制,得到含有目标和噪声的去背景图像,在粒子初始化阶段采用在全视场中大于阈值的范围内抽取粒子的方法,在跟踪阶段采用粒子滤波得到状态的后验概率分布,在检测阶段利用似然比假设检验方法判决目标是否存在,如果目标存在,则进行目标状态估计,最后得出目标的航迹。
目前针对红外弱小目标的基于粒子滤波的检测前跟踪算法,为了减少计算量都是在一个窗口内实现的,这就需要首先选定窗口,也就是需要一步预检测算法。因此预检测算法的性能对整个算法的性能来说是至关重要的,而在如此低的信噪比下并没有稳健的预检测算法。因此本发明针对这个问题,提出在整个视场进行检测前跟踪算法的方案,从而提高了检测概率。
本发明将基于粒子滤波的检测前跟踪算法应用于红外弱小目标的检测和跟踪,是一个实用化的系统,在低信噪比(SNR>1.5)复杂背景的情况下,实现对红外弱小目标的有效检测和高精度跟踪。可广泛应用于各类系统,具有广阔的市场前景和应用价值。
附图说明
图1为硬件系统框图。
图2为软件系统框图。
图3基于全视场采样的粒子滤波的TDB方法总体框图。
图4基于全视场采样的粒子滤波的检测前跟踪算法流程图。
图5基于窗口的粒子滤波的检测前跟踪算法流程图。
图6(a)-图6(f)为跟踪结果,其中:图6(a)为第4帧;图6(b)为第6帧;图6(c)为第8帧;图6(d)为第10帧;图6(e)为第12帧;图6(f)为第14帧。
具体实施方式
下面举例对本发明做更详细的描述:
本发明采用软、硬件协同工作,完成红外弱小目标的检测和跟踪。利用红外热成像仪、ICETEK-DM642开发板和监视器构成硬件系统,硬件系统框图如附图1。软件系统包括视频驱动模块、图像预处理模块和目标检测与跟踪模块,软件系统框图如附图2。
本发明具体实施方案如下:
本发明可采用两种方案,一种是采用基于全视场进行检测的粒子滤波的检测前跟踪方法,另一种方案是结合全视场和窗口的粒子滤波的检测前跟踪方法。
一、基于全视场进行检测的粒子滤波的检测前跟踪方法
本发明的核心内容是提出了基于全视场进行检测的粒子滤波的检测前跟踪算法。具体实现方法和步骤如下:
1.图像预处理:采用背景抑制技术对图像进行预处理,具体方法为:用2×2方形结构元素对红外图像进行开操作,以去除各类亮噪声及小目标,获得图像背景。再用原图像减去背景图像得到含有目标和噪声的图像。
2.粒子初始化:在整个视场大于阈值的范围内抽取粒子。粒子在整个视场大于阈值的范围内服从均匀分布。粒子的速度和强度在最大与最小值之间服从均匀分布。
3.建立系统模型和观测模型:
sk+1=Fsk+vk (1)
其中, vk是服从零均值,方差为Q的高斯白噪声,q1代表目标运动中过程噪声的大小,q2代表目标强度噪声的大小。T为采样间隔T=1s。
把通过红外热像仪获得的前k帧序列图像当成量测,用符号Zk表示,设zk表示第k帧图像,则前k次量测为Zk={z1,z2,...,zk}。假设传感器对x-y平面上的区域进行扫描,传感器含有N×M个矩形分辨单元,每个分辨单元的大小为Δx×Δy。在每个采样时刻k,每个分辨单元(i,j)(1≤i≤N,1≤j≤M)分别记录一个量测而:
式中δk=1表示k时刻目标出现,δk=0表示目标未出现,δk服从Markov过程,为k时刻目标质心位于(xk,yk)时像素单元(i,j)处接受的信号强度,为量测噪声,像素间帧间噪声相互独立。分辨单元(i,j)处强度按传感器的点传播函数可近似为(其中∑是传感器引起的模糊程度参数,目标(xk,yk)处的幅值为Ik):
4.目标跟踪阶段。目标跟踪阶段分为预测与更新两个步骤。
在预测过程中,由k-1时刻目标出现状态与转移概率矩阵∏=[πij],i,j={0,1}对k时刻目标出现状态变量的预测。在预测完成之后,对粒子的状态进行分析:对于的粒子,其状态变量没有意义;对于的粒子,预测每个粒子k时刻的状态变量。分两种情况:(a)新生粒子,这些粒子是由转换到时产生的,本发明提出目标状态从建议分布函数qb(sk|zk)中采样,qb(sk|zk)由如下方法获得:对于位置(xk,yk),γ为一个经过实际检验过较为合适的阈值,将量测zk中的分辨单元组成的区域,qb(xk,yk|zk)是均匀分布在此区域上的。对于目标的速度本发明提出分布函数vmax是目标的最大速度(方向也是如此处理);对于目标的强度Ik □U[Imin,Imax],Imin和Imax是合适的灰度级(根据目标的信噪比)。(b)已存在粒子,这些粒子是转换到时一直存在的,此时分布函数选择为由系统模型确定的一步转移概率在更新过程中,利用似然比计算粒子的重要性权值,再进行权值归一化和重采样。
5.目标检测阶段。
用上式近似计算,最后利用似然比检测完成目标检测,似然比为:
二、基于窗口粒子滤波的检测前跟踪方法
首先在整个视场进行目标搜索,采用基于全视场的粒子滤波的检测前跟踪算法实现目标的搜索,如果没有搜到目标,继续搜索;如果目标出现,一个较小的窗口内采用基于窗口的粒子滤波检测前跟踪算法实现目标的跟踪,如果目标消失,再在整个窗口进行目标搜索。窗口的大小为10×10。
三、基于全视场进行检测的粒子滤波的检测前跟踪系统的软硬件设计
本发明采用红外热像仪、ICETEK-DM642开发板和监视器构成硬件系统。
1.系统的硬件设计与构成
本系统分为视频采集模块、目标检测与跟踪模块和显示模块三部分。其中视频采集模块由红外热像仪IR109-HGC和SAA7115HL解码器构成,目标检测与跟踪模块由ICETEK-DM642开发板构成,显示模块由监视器构成。
(1)IR109-HGC红外热像仪
IR109-HGC红外热像仪采用多晶硅非制冷焦平面探测器(UFPA)和IR109机芯组件,是理想的红外观测分析系统。工作波段为8~14μm,工作温度-40℃~+50℃,输出为标准PAL制模拟视频。
(2)ICETEK-DM642开发板
ICETEK-DM642开发板采用600MHz的TMS320DM642型的DSP芯片,具有4800MIPS的计算能力,并配置了4路视频端口、4M×64bit同步动态存储器和SAA7115和SAA7105型的编解码芯片。
(3)监视器
监视器为普通黑白监视器。
2.系统的软件实现
(1)红外图像采集与输出
利用DM642芯片的实时操作系统(DSP/BIOS)、驱动开发套件(DDK)、SAA7115和SAA7105芯片的配置函数完成对红外图像的采集与输出。主要包含以下函数和配置。
3)DSP/BIOS的配置
①设置放置缓存图像的内存空间:在System下的MEM模块中加入自己定义的内存空间名SDRAM1和SDRAM2,并对SDRAM1和SDRAM2进行配置。SDRAM1配置为:其起始地址为0x80000000和长度为0x01000000,并在SDRAM1中定义一个大小为0x00800000和表示符号为_EXTERNALHEAP的堆,用于存放采集和输出的图像。SDRAM2配置为:其起始地址为0x81000000和长度为0x00800000,并在SDRAM2中定义一个大小为0x00800000和表示符号为_MEMTEMP的堆,用于算法运行过程中需要动态分配的内存空间。
②设置运行时间统计函数:在Instrumentation下的STS模块中添加需要统计的对象STS_algorithm和tskLoopback,用以统计每帧图像运行的时间和处理每帧图像时算法所需要的时间。
③设置算法运行函数:在Scheduling下的TSK模块添加算法运行任务函数tskVideoprocess,并对其进行配置:函数名为_tskVideoprocess,并在源程序中编写tskVideoprocess函数的具体实现程序。
④对视频设备进行驱动:在Input/Output下的Device Drivers模块中的User-Defined Devices子模块配置视频设备驱动。添加自定义的视频捕获设备VP0CAPTURE和显示设备VP2DISPLAY,并对设备进行配置。视频捕获设备VP0CAPTURE配置为:function table ptr中填入_VPORTCAP_Fxns,function table type中填入IOM_Fxns,device id中填入设备号0x00000000,在device params ptr中填入_EVMDM642_vCapParamsPort。视频显示设备VP2DISPLAY配置为:function table ptr中填入_VPORTDIS_Fxns,function table type中填入IOM_Fxns,device id中填入设备号0x00000002,在device params ptr中填入_EVMDM642_vDisParamsPort。
4)SAA7115和SAA7105芯片的配置
①对SAA7115进行配置:将inMode配置为SAA7115_MODE_PAL720。
②对SAA7105进行配置:将SAA7105_AnalogFormat配置为SAA7105_AFMT_SVIDEO,将SAA7105_Mode配置为SAA7105_MODE_PAL720。
(2)图像预处理
利用函数MEM_copy将每一帧待处理红外图像复制至划分的临时存储空间中,再利用函数ICETEKDM642PCIYuchuli(unsigned char*in)完成对每帧图像的预处理,得到只有目标和噪声的图像。将函数代码放置在ISRAM中划分的段".text1″中。在预处理中使用MEM_calloc函数动态在内存段MEMTEMP内划分一个指向临时数据存储空间的unsigned char型的指针tempdata,用于存储存每次腐蚀与膨胀之后的图像信息。
(3)初始化粒子
在初始化粒子之前,定义算法运算中需要的参数:粒子个数Num_particle、视场行数LINE_SZ、视场每行像素数NUM_LINES、矩形分辨单元宽度delta_x、矩形分辨单元高度delta_y、初始时刻目标存在的概率Init_Pro_exist、x方向矩形分辨单元个数Num_Cell_x、y方向矩形分辨单元个数Num_Cell_y、状态转移概率矩阵Trans_Matrix[2][2]、目标运动中过程噪声的大小q1,目标强度噪声大小q2、模糊参数I_Blur等。
使用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在预处理之后的第一帧图像的全视场内找出大于阈值th的像素点,返回其坐标值。粒子初始化时的位置坐标值从大于阈值th的像素点中抽取;速度采用建议分布函数vmax是目标的最大速度(方向也是如此处理);目标的强度Ik □U[Imin,Imax],Imin和Imax是合适的灰度级(根据目标的信噪比)。粒子状态的初始化:使用函数randn(Num_particle)产生与粒子个数相等的值在0到1间的随机序列,用函数find_M_X(U_rand,1,Num_particle,length_u,Init_Pro_exist)找出随即序列中小于Init_Pro_exist的随机数位置,将与之位置相同的粒子的状态定义为存在用值2表示,其余粒子状态为不存在用值1表示,完成对粒子的初始化。
(4)跟踪阶段
跟踪阶段分为预测与更新两个步骤。
预测:由k-1时刻目标出现的状态与转移概率矩阵∏=[πij]作为参数,利用函数int*Regime_Transition(int*in,int le_RP,float**T_M,int len_TM)完成前后两帧中粒子状态的转移。对于的粒子,其状态变量没有意义;对于的粒子,预测每个粒子k时刻的状态变量。分两种情况:(a)新生粒子,这些粒子是由转换到时产生的,用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在全视场内找出大于阈值th的像素点得位置,粒子的位置坐标值随即从大于阈值th的像素点中抽取;速度采用建议分布函数vmax是目标的最大速度(方向也是如此处理);目标的强度IkU[Imin,Imax],Imin和Imax是合适的灰度级(根据目标的信噪比)。(b)已存在粒子,这些粒子是转换到时一直存在的,其状态值利用函数sk+1=Fsk+vk计算,sk+1为当前时刻状态值,sk为前一时刻粒子状态值,vk为高斯噪声,利用DSP计算。
更新:用似然比计算重要性权值。在计算出粒子的重要性权值之后,对重要性权值进行归一化。利用重采样函数float*multinomialR(int n,float*q)对粒子进行重采样。在重采样完之后对粒子进行更新。
(5)检测阶段
Claims (3)
1.一种基于粒子滤波的红外弱小目标检测与跟踪方法,其特征是包括由如下步骤构成的基于全视场进行检测的粒子滤波检测前跟踪方法:
(1)图像预处理:采用形态学对图像进行开启操作获得背景图像,将原图像减去背景图像获得含有目标和噪声的去背景图像;
(2)粒子初始化:根据设定的阈值和初始目标出现概率,在全视场大于阈值的范围内抽取粒子,粒子的速度和强度服从最大值和最小值间的均匀分布;
(3)目标跟踪阶段:跟踪阶段分为预测和更新两个步骤;
1)在预测过程中,分为目标出现状态的预测和目标状态的预测,根据目标前一时刻的状态和状态转移概率矩阵对当前时刻目标状态进行预测,预测之后的状态为不存在的粒子没有意义,预测之后的状态为存在的粒子分为新生粒子和已存在的粒子两种,对新生粒子从大于阈值的范围内抽取粒子,已存在粒子由系统模型确定的一步转移概率函数中抽取;
2)在更新过程中,根据当前图像信息和粒子的状态参数利用似然函数计算粒子权重值,对权重值归一化,根据归一化后的权重值对粒子进行重采样;
(4)目标检测阶段:根据重采样之后的当前时刻的粒子状态计算目标存在的后验概率,并以此计算似然比,再利用似然比完成目标检测,如果似然比大于设定的阈值,就采用粒子滤波得到的预测结果作为目标的状态估计值。
2.根据权利要求1所述的基于粒子滤波的红外弱小目标检测与跟踪方法,其特征是:由基于全视场进行检测的粒子滤波检测前跟踪方法实现目标的搜索后,判定是否搜索的目标,如果搜索到目标再采用基于窗口的粒子滤波的检测前跟踪的算法实现目标的跟踪。
3.一种基于粒子滤波的红外弱小目标检测与跟踪装置,由视频采集模块、目标检测与跟踪模块和显示模块构成,其特征是:其中视频采集模块由红外热像仪IR109-HGC和SAA7115HL解码器构成,目标检测与跟踪模块由ICETEK-DM642开发板构成,显示模块由监视器构成;
视频采集模块利用DM642芯片的实时操作系统即DSP/BIOS、驱动开发套件即DDK、SAA7115和SAA7105芯片的配置函数完成对红外图像的采集与输出;主要包含以下函数和配置:
1)DSP/BIOS的配置
①设置放置缓存图像的内存空间:在System下的MEM模块中加入自己定义的内存空间名SDRAM1和SDRAM2,并对SDRAM1和SDRAM2进行配置;
②设置运行时间统计函数:在Instrumentation下的STS模块中添加需要统计的对象STS_algorithm和tskLoopback;
③设置算法运行函数:在Scheduling下的TSK模块添加算法运行任务函数tskVideoprocess,并对其进行配置:函数名为_tskVideoprocess,并在源程序中编写tskVideoprocess函数的具体实现程序;
④对视频设备进行驱动:在Input/Output下的Device Drivers模块中的User-Defined Devices子模块配置视频设备驱动,添加自定义的视频捕获设备VP0CAPTURE和显示设备VP2DISPLAY,并对设备进行配置;
2)SAA7115和SAA7105芯片的配置
①对SAA7115进行配置:将inMode配置为SAA7115_MODE_PAL720;
②对SAA7105进行配置:将SAA7105_AnalogFormat配置为SAA7105_AFMT_SVIDEO,将SAA7105_Mode配置为SAA7105_MODE_PAL720;
目标检测与跟踪模块完成:
1)图像预处理
利用函数MEM_copy将每一帧待处理红外图像复制至划分的临时存储空间中,再利用函数ICETEKDM642PCIYuchuli(unsigned char*in)完成对每帧图像的预处理,得到只有目标和噪声的图像,将函数代码放置在ISRAM中划分的段".text1″中,在预处理中使用MEM_calloc函数动态在内存段MEMTEMP内划分一个指向临时数据存储空间的unsigned char型的指针tempdata,用于存储存每次腐蚀与膨胀之后的图像信息;
2)初始化粒子
在初始化粒子之前,定义算法运算中需要的参数:粒子个数Num_particle、视场行数LINE_SZ、视场每行像素数NUM_LINES、矩形分辨单元宽度delta_x、矩形分辨单元高度delta_y、初始时刻目标存在的概率Init_Pro_exist、x方向矩形分辨单元个数Num_Cell_x、y方向矩形分辨单元个数Num_Cell_y、状态转移概率矩阵Trans_Matrix[2][2]、目标运动中过程噪声的大小q1,目标强度噪声大小q2、模糊参数I_Blur;
使用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在预处理之后的第一帧图像的全视场内找出大于阈值th的像素点,返回其坐标值,粒子初始化时的位置坐标值从大于阈值th的像素点中抽取;速度采用建议分布函数qb=U[-vmax,vmax],vmax是目标的最大速度,方向也是如此处理;目标的强度Ik □U[Imin,Imax],Imin和Imax是合适的灰度级,粒子状态的初始化:使用函数randn(Num_particle)产生与粒子个数相等的值在0到1间的随机序列,用函数find_M_X(U_rand,1,Num_particle,length_u,Init_Pro_exist)找出随即序列中小于Init_Pro_exist的随机数位置,将与之位置相同的粒子的状态定义为存在用值2表示,其余粒子状态为不存在用值1表示,完成对粒子的初始化;
3)跟踪
预测:由k-1时刻目标出现的状态与转移概率矩阵∏=[πij]作为参数,利用函数int*Regime_Transition(int*in,int le_RP,float**T_M,int len_TM)完成前后两帧中粒子状态的转移;对于的粒子,其状态变量没有意义;对于的粒子,预测每个粒子k时刻的状态变量,分两种情况:(a)新生粒子,这些粒子是由转换到时产生的,用函数float*find_M_D(unsinged char*in,int m,int n,int length,int th)在全视场内找出大于阈值th的像素点得位置,粒子的位置坐标值随即从大于阈值th的像素点中抽取;速度采用建议分布函数qb=U[-vmax,vmax],vmax是目标的最大速度,方向也是如此处理;目标的强度IkU[Imin,Imax],Imin和Imax是合适的灰度级,(b)已存在粒子,这些粒子是=1转换到时一直存在的,其状态值利用函数sk+1=Fsk+vk计算,sk+1为当前时刻状态值,sk为前一时刻粒子状态值,vk为高斯噪声,利用DSP计算;
更新:用似然比计算重要性权值,在计算出粒子的重要性权值之后,对重要性权值进行归一化。利用重采样函数float*multinomialR(int n,float*q)对粒子进行重采样,在重采样完之后对粒子进行更新;
4)检测
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210163140.1A CN102722706B (zh) | 2012-05-24 | 2012-05-24 | 基于粒子滤波的红外弱小目标检测与跟踪方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210163140.1A CN102722706B (zh) | 2012-05-24 | 2012-05-24 | 基于粒子滤波的红外弱小目标检测与跟踪方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102722706A true CN102722706A (zh) | 2012-10-10 |
CN102722706B CN102722706B (zh) | 2014-01-29 |
Family
ID=46948456
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210163140.1A Expired - Fee Related CN102722706B (zh) | 2012-05-24 | 2012-05-24 | 基于粒子滤波的红外弱小目标检测与跟踪方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102722706B (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103957360A (zh) * | 2014-05-20 | 2014-07-30 | 合肥君达高科信息技术有限公司 | 一种具有高速粒子跟踪拍摄功能的控制方法及其装置 |
CN104237853A (zh) * | 2014-09-16 | 2014-12-24 | 电子科技大学 | 一种针对多帧检测前跟踪点迹序列的粒子滤波方法 |
CN104463125A (zh) * | 2014-12-11 | 2015-03-25 | 哈尔滨工程大学 | 基于dsp的人脸自动检测跟踪装置及其方法 |
CN104766100A (zh) * | 2014-10-22 | 2015-07-08 | 中国人民解放军电子工程学院 | 基于机器学习的红外小目标图像背景预测方法与装置 |
CN104833964A (zh) * | 2015-04-28 | 2015-08-12 | 南京邮电大学 | 针对雷达/声呐系统的目标检测跟踪一体化方法和装置 |
CN106127253A (zh) * | 2016-06-27 | 2016-11-16 | 北京航空航天大学 | 一种利用样本特征学习分类的红外弱小目标检测方法 |
CN107710092A (zh) * | 2015-06-09 | 2018-02-16 | 三星电子株式会社 | 移动机器人及控制其的方法 |
CN109213322A (zh) * | 2018-08-23 | 2019-01-15 | 深圳大学 | 一种虚拟现实中手势识别的方法及系统 |
CN110073410A (zh) * | 2016-12-15 | 2019-07-30 | Trw有限公司 | 跟踪场景中的对象的方法 |
CN111427042A (zh) * | 2020-03-24 | 2020-07-17 | 哈尔滨工程大学 | 基于高刷新率声脉冲的水下弱目标回波检测前跟踪方法 |
CN113325405A (zh) * | 2020-02-28 | 2021-08-31 | 加特兰微电子科技(上海)有限公司 | 恒虚警目标检测方法、装置、集成电路、传感器及设备 |
CN115311470A (zh) * | 2022-09-28 | 2022-11-08 | 北京万龙精益科技有限公司 | 自适应块匹配滤波的红外小目标实时检测与跟踪方法 |
CN115469270A (zh) * | 2022-08-16 | 2022-12-13 | 哈尔滨工程大学 | 基于检测前跟踪的长基线定位方法及系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1606033A (zh) * | 2004-11-18 | 2005-04-13 | 上海交通大学 | 红外图像序列中弱小目标的检测和跟踪方法 |
CN101894381A (zh) * | 2010-08-05 | 2010-11-24 | 上海交通大学 | 动态视频序列中多目标跟踪系统 |
CN102043150A (zh) * | 2010-12-06 | 2011-05-04 | 电子科技大学 | 用于微弱目标检测的改进型粒子滤波检测前跟踪方法 |
-
2012
- 2012-05-24 CN CN201210163140.1A patent/CN102722706B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1606033A (zh) * | 2004-11-18 | 2005-04-13 | 上海交通大学 | 红外图像序列中弱小目标的检测和跟踪方法 |
CN101894381A (zh) * | 2010-08-05 | 2010-11-24 | 上海交通大学 | 动态视频序列中多目标跟踪系统 |
CN102043150A (zh) * | 2010-12-06 | 2011-05-04 | 电子科技大学 | 用于微弱目标检测的改进型粒子滤波检测前跟踪方法 |
Non-Patent Citations (2)
Title |
---|
JI QINGBO,YANG YANG: "The Arithmetic of Tracking before Detecting of Dim Infrared Targets Based on Particle Filter", 《2010 SECOND ASIA PACIFIC CONFERENCE ON POSTGRADUATE RESEARCH IN MICROELECTRONICS & ELECTRONICS (PRIMEASIA 2010)》 * |
汲清波: "红外序列图像中弱小目标检测方法研究", 《中国博士学位论文全文数据库》 * |
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103957360A (zh) * | 2014-05-20 | 2014-07-30 | 合肥君达高科信息技术有限公司 | 一种具有高速粒子跟踪拍摄功能的控制方法及其装置 |
CN104237853A (zh) * | 2014-09-16 | 2014-12-24 | 电子科技大学 | 一种针对多帧检测前跟踪点迹序列的粒子滤波方法 |
CN104766100A (zh) * | 2014-10-22 | 2015-07-08 | 中国人民解放军电子工程学院 | 基于机器学习的红外小目标图像背景预测方法与装置 |
CN104766100B (zh) * | 2014-10-22 | 2018-05-18 | 中国人民解放军电子工程学院 | 基于机器学习的红外小目标图像背景预测方法与装置 |
CN104463125A (zh) * | 2014-12-11 | 2015-03-25 | 哈尔滨工程大学 | 基于dsp的人脸自动检测跟踪装置及其方法 |
CN104833964A (zh) * | 2015-04-28 | 2015-08-12 | 南京邮电大学 | 针对雷达/声呐系统的目标检测跟踪一体化方法和装置 |
CN107710092A (zh) * | 2015-06-09 | 2018-02-16 | 三星电子株式会社 | 移动机器人及控制其的方法 |
CN107710092B (zh) * | 2015-06-09 | 2020-12-22 | 三星电子株式会社 | 移动机器人及控制其的方法 |
CN106127253A (zh) * | 2016-06-27 | 2016-11-16 | 北京航空航天大学 | 一种利用样本特征学习分类的红外弱小目标检测方法 |
CN106127253B (zh) * | 2016-06-27 | 2019-04-05 | 北京航空航天大学 | 一种利用样本特征学习分类的红外弱小目标检测方法 |
CN110073410A (zh) * | 2016-12-15 | 2019-07-30 | Trw有限公司 | 跟踪场景中的对象的方法 |
CN110073410B (zh) * | 2016-12-15 | 2023-06-30 | Trw有限公司 | 跟踪场景中的对象的方法 |
CN109213322A (zh) * | 2018-08-23 | 2019-01-15 | 深圳大学 | 一种虚拟现实中手势识别的方法及系统 |
CN109213322B (zh) * | 2018-08-23 | 2021-05-04 | 深圳大学 | 一种虚拟现实中手势识别的方法及系统 |
CN113325405A (zh) * | 2020-02-28 | 2021-08-31 | 加特兰微电子科技(上海)有限公司 | 恒虚警目标检测方法、装置、集成电路、传感器及设备 |
CN111427042A (zh) * | 2020-03-24 | 2020-07-17 | 哈尔滨工程大学 | 基于高刷新率声脉冲的水下弱目标回波检测前跟踪方法 |
CN111427042B (zh) * | 2020-03-24 | 2022-04-19 | 哈尔滨工程大学 | 基于高刷新率声脉冲的水下弱目标回波检测前跟踪方法 |
CN115469270A (zh) * | 2022-08-16 | 2022-12-13 | 哈尔滨工程大学 | 基于检测前跟踪的长基线定位方法及系统 |
CN115311470A (zh) * | 2022-09-28 | 2022-11-08 | 北京万龙精益科技有限公司 | 自适应块匹配滤波的红外小目标实时检测与跟踪方法 |
CN115311470B (zh) * | 2022-09-28 | 2023-01-24 | 北京万龙精益科技有限公司 | 自适应块匹配滤波的红外小目标实时检测与跟踪方法及其系统、装置和计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN102722706B (zh) | 2014-01-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102722706A (zh) | 基于粒子滤波的红外弱小目标检测与跟踪方法及装置 | |
CN104766320B (zh) | 阈值化量测下的多伯努利滤波弱目标检测与跟踪方法 | |
CN106526585B (zh) | 基于高斯粒子势概率假设密度滤波的目标检测前跟踪方法 | |
CN102982537B (zh) | 一种检测场景变换的方法和系统 | |
CA2780595A1 (en) | Method and multi-scale attention system for spatiotemporal change determination and object detection | |
CN107851196B (zh) | 一种图像模式匹配的方法及装置 | |
CN106170819A (zh) | 一种合成孔径雷达图像舰船目标快速检测方法 | |
CN106128121A (zh) | 基于局部特征分析的车辆排队长度快速检测算法 | |
CN103077537B (zh) | 基于l1正则化的实时运动目标跟踪的新方法 | |
CN114549589B (zh) | 一种基于轻量化神经网络的旋转体振动位移测量方法及系统 | |
CN108156452B (zh) | 一种检测传感器的方法、装置、设备及存储介质 | |
CN110135312B (zh) | 一种基于分级lcm的快速小目标检测方法 | |
CN108305265B (zh) | 微弱小目标图像实时处理方法及系统 | |
CN103049905B (zh) | 利用单演信号三分量的合成孔径雷达图像配准方法 | |
CN114445404A (zh) | 基于亚像素边缘检测的结构振动响应自动识别方法及系统 | |
Han et al. | An improved corner detection algorithm based on harris | |
CN113160084A (zh) | 多孔硅生物传感器表面量子点荧光图像的去噪方法及装置 | |
CN110345918A (zh) | 基于恒星检索的空间碎片检测方法和系统 | |
Liu et al. | Space target detection in optical image sequences for wide-field surveillance | |
CN107369163B (zh) | 一种基于最佳熵双阈值分割的快速sar图像目标检测方法 | |
CN117765368A (zh) | 一种轻量化YOLOv8的光纤分布式振动信号图像检测方法 | |
CN115683431A (zh) | 基于直线跟踪算法的拉索索力确定方法、装置及设备 | |
CN116736286A (zh) | 基于随机超曲面的渐进贝叶斯扩展目标跟踪方法及系统 | |
CN116188510B (zh) | 一种基于多传感器的企业排放数据采集系统 | |
CN117475154A (zh) | 一种基于优化Canny边缘检测的仪表图像识别方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20140129 Termination date: 20190524 |
|
CF01 | Termination of patent right due to non-payment of annual fee |