CN103679216B - 基于空时稀疏表示的红外小弱目标检测方法 - Google Patents
基于空时稀疏表示的红外小弱目标检测方法 Download PDFInfo
- Publication number
- CN103679216B CN103679216B CN201410004850.9A CN201410004850A CN103679216B CN 103679216 B CN103679216 B CN 103679216B CN 201410004850 A CN201410004850 A CN 201410004850A CN 103679216 B CN103679216 B CN 103679216B
- Authority
- CN
- China
- Prior art keywords
- space
- time
- dictionary
- rarefaction representation
- atom
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Image Analysis (AREA)
Abstract
本发明提出了一种基于空时稀疏表示的红外小弱目标检测方法,包括以下步骤:从连续多帧图像的相同位置处提取一定大小的三维空时图像块作为训练样本;运用K聚类奇异值分解法学习训练样本并构建图像空时超完备字典;运用正交匹配跟踪算法将连续多帧图像信号在空时超完备字典进行稀疏分解,提取图像信号在空时超完备字典中的稀疏表示系数;计算稀疏表示系数的稀疏度,并对稀疏表示系数取值较大的空时原子及其运动速度和方向进行以正比于稀疏表示系数的比重加权判断,检测出运动目标及其运动信息。本发明能突破现有空域超完备字典仅能表示目标形态信息的局限,能同时刻画目标的运动信息和形态信息,有效提高红外小弱目标的运动检测能力。
Description
技术领域
本发明属于深空飞行器测控领域,具体涉及探测红外弱小运动目标检测,是红外成像搜索与跟踪系统、目标监视系统、卫星遥感系统、安全检查系统等的一项核心技术,在各类军、民用系统中均可有广泛的应用。
背景技术
在各种成像探测跟踪系统中,要求能够尽快地截获并锁定跟踪目标。当探测器与目标之间的距离较远时,目标在成像上表现为只占若干个像素的小目标,并且易于淹没在各种杂波背景和强噪声中,这给目标检测与跟踪带来了很大难度。
目前,稀疏表示在图像处理领域兴起,即使用超完备字典使得图像的能量只集中于较少的原子,而这些具有非零表示系数的原子揭示了图像的主要特征和内在结构,可得到更加稀疏的分解,表示图像会更加有效。采用二维高斯模型构造红外目标的超完备字典,计算图像子块在该字典中的表示系数,并根据表示系数稀疏性差异不同区分是否含有目标。高斯超完备字典适合于高斯分布的小弱目标,而小弱目标形态动态变化,该模型难以适应非高斯分布等非结构形态。采用训练样本构造能反应目标信号特点的空域自适应超完备字典,其稀疏表示系数差异性较高斯字典要优越。然而,尽管经稀疏编码的超完备字典源于多帧图像训练而来,但其原子仍然只反应目标形态结构,难以提取目标信号的运动特征,目标检测能力有限。
发明内容
针对高斯超完备字典和空域自适应超完备字典在表示和检测目标信号运动信息的不足,本发明通过学习连续多帧同一位置不同时刻的图像形态信息和运动特征,训练构建空时自适应超完备字典,提出了一种基于空时稀疏表示的红外小弱目标检测方法。
本发明采用以下技术方案解决上述技术问题。
本发明提出了一种基于空时域稀疏表示的红外小弱目标检测方法,涉及测控技术领域。本发明包括步骤:
1、从连续多帧图像的相同位置处提取一定大小的三维空时图像块形成空时图像训练样本。
2、运用K聚类奇异值分解法K_SVD学习训练样本构建图像的空时超完备字典,其中字典中空时原子的时域长度与连续图像的帧数相等。
3、运用正交匹配跟踪(OMP)算法将原连续序列图像信号在空时超完备字典进行稀疏分解,提取序列图像信号在空时超完备字典中的稀疏表示系数。
4、计算稀疏表示系数的稀疏度,如果稀疏度大于一定阈值,则对其中稀疏表示系数取值较大的不多于3个原子所表现出的运动速度和方向进行以正比于稀疏表示系数的比重加权判断,检测出运动目标及其运动信息。
所述空时超完备字典是在K聚类奇异值分解法(K_SVD)算法基础上,增加时间维k,得到改进的模型为
其中,W为图像空间,μx,y,k是稀疏度控制参数,L为空时超完备字典的时域长度。
所述K_SVD训练超完备空时字典的步骤包括:训练样本、字典初始化和迭代过程,其中迭代过程包括稀疏编码和字典更新两个阶段。
训练样本阶段,联合帧间信息,把图像序列空时域作为三维图像,利用一个空时滑动窗(大小与字典中的原子相同)按照从上到下,从左到右的顺序依次提取三维空时图像块Rx,y,kF,并将其展开成一维列向量zi,然后将这些向量按列顺序组成矩阵即共有S个训练样本。
初始化字典阶段,把二维超完备DCT字典的每个原子复制L次,创建时间长度为L的三维原子,最终得到的三维超完备DCT字典作为空时超完备稀疏字典D的初始化字典。
在稀疏编码阶段,固定字典D,求解每个训练样本zi在当前空时超完备字典中的表示系数最终形成稀疏表示矩阵A。在求解过程中,需要把字典D中每个三维原子转换为列向量dj,然后将这些列向量组成矩阵得D=[d1,d2,...,dM]∈RN×M,并对其进行归一化。运用正交匹配追踪(OMP)算法求解所得的表示系数在当前字典D中是最稀疏的,即每个三维图像块可用字典D中用较少的原子线性表示。
在字典更新阶段,每次更新字典D中的一个原子及其与之对应的表示系数,即固定字典中除第j0个原子外的所有原子,更新原子和与其相应的系数用矩阵DA对训练样本Z进行稀疏分解时,去掉原子得到的表示误差 然后对 进行奇异值分解,得到最优的和由于求得的系数是满向量的,它与原来系数向量中的非零个数和位置不一致,出现发散现象。为解决此问题,定义约束运算符右乘移除不相关的列。矩阵有S行(总的样本数)和列(使用第j0个原子的样本数)。定义为对行向量的限制,即仅选择中的非零元素。对进行SVD分解,更新原子及其对应的系数同时进行更新加速了训练算法的收敛。反复最小化改进模型等式,直到字典对训练样本的表示误差减小到开始趋于稳定时停止,即可得到能够反映图像序列中目标的运动和形态特征的空时稀疏字典D。所述三维图像F在空时超完备字典D中稀疏分解是通过迭代的贪婪算法(匹配追踪算法)提取图像信号在空时超完备字典的稀疏表示系数αxy,,k,即求解它在一定容许误差s内的逼近解 计算稀疏表示系数的稀疏度,即统计非零稀疏表示系数的数量count以及非零稀疏表示系数的最大值max(αx,y,k),然后两者相除,即如果稀疏度大于一定阈值,则对其中稀疏表示系数取值较大的不多于3个原子所表现出的运动速度和方向进行以正比于稀疏表示系数的比重加权判断,可有效地检测出运动目标。
本发明能突破现有空域超完备字典仅能表示目标形态信息的局限,通过学习序列图像连续多帧训练空时自适应超完备字典,能同时刻画目标的运动信息和形态信息,有效的提高红外小弱运动目标的检测能力。
附图说明
图1为本发明工作原理框图;
图2为原图像;
图3(a)为空时超完备字典的空域字典;图3(b)空时超完备字典的空时原子
图4(a)为在空时字典的稀疏表示系数;图4(b)最大稀疏表示系数对应的空域原子。
具体实施方式
为了更好地理解本发明的技术方案,下面结合附图对本发明的实施方式作进一步描述。
图1为本发明基于空时稀疏表示的红外小弱目标检测方法的工作原理框图。从连续多帧图像的相同位置处提取一定大小的三维空时图像块形成空时图像训练样本;运用K聚类奇异值分解法K_SVD训练样本构建图像的空时超完备字典,其中字典中空时原子的时域长度与连续图像的帧数相等;运用正交匹配跟踪(OMP)算法将待检测的连续多帧图像信号在空时超完备字典进行稀疏分解,提取图像信号在空时超完备字典中的稀疏表示系数;计算稀疏表示系数的稀疏度,如果稀疏度大于一定阈值,则对其中取值较大的稀疏表示系数所对应的原子所表现出的运动速度和方向进行加权判断。以低对比度的红外云层图像为例详细讨论各部分具体实施细节如下(图2中方框所在中心位置为小弱目标)
1.空时超完备字典
利用K_SVD训练超完备空时字典包括训练样本、字典初始化和迭代过
程,其中迭代过程包括稀疏编码和字典更新两个阶段。在训练样本阶段,联合帧间信息,利用一个空时滑动窗(大小与字典中的原子相同)按照从上到下,从左到右的顺序依次从连续L帧图像F相同位置[x,y]处提取一定大小的三维空时图像块Rx,y,kF,并将其展开成一维列向量zi,然后将这些向量按列顺序组成矩阵即共有S个训练样本。
在初始化字典阶段,把二维超完备DCT字典的每个原子复制L次,创建时间长度为L的三维原子,最终得到的三维超完备DCT字典作为空时稀疏字典的初始化字典。
在稀疏编码阶段,固定字典D,求解每个训练样本zi在当前字典中的表示系数最终形成稀疏表示矩阵A。在求解过程中,需要把字典D中每个三维原子转换为列向量dj,然后将这些列向量组成矩阵得D=[d1,d2,...,dM]∈RN×M,并对其进行归一化。运用正交匹配追踪(OMP)算法求解所得的表示系数在当前字典D中是最稀疏的,即每个三维图像块可用字典D中较少的原子线性表示。
在字典更新阶段,每次更新字典D中的一个原子,同时更新与其相应的系数。固定字典中除第j0个原子外的所有原子,更新原子和与其相应的系数用矩阵DA对训练样本Z进行稀疏表示时,去掉原子得到的表示误差 为 然后对 进行奇异值SVD分解,得到最优的和由于求得的系数是满向量的,它与原来系数向量中的非零个数和位置不一致,出现发散现象。为解决此问题,定义约束运算符右乘移除不相关的列。矩阵有S行(总的样本数)和列(使用第j0个原子的样本数)。定义为对行向量的限制,即仅选择中的非零元素。对进行SVD分解,更新原子及其对应的系数同时反复最小化改进模型等式,直到字典对训练样本的表示误差减小到开始趋于稳定时停止,即可得到能够反映图像序列中目标的运动和形态特征的空时域稀疏字典D。图3(a)为云层图像的超完备空时稀疏字典D,每个原子的大小为16x16像素,共有1600个原子,从连续五帧图像作为三维空时图像中提取大小为16′16′5的图像块作为训练样本,训练得到大小为256×1600×5的三维空时稀疏字典,该空时字典的一个空域字典的部分原子如图3(a)所示。图3(b)为该空时域字典中的两个空时域原子,原子一表示含有目标的原子,原子二表示背景原子。
2.空时稀疏表示
空时三维图像块在空时超完备字典中稀疏表示是通过迭代的贪婪算法(匹配追踪算法(OMP)提取图像信号在自适应空时超完备字典的αx,y,k,即求解它在一定容许误差s内的L1范数最小化问题的逼近解
图4(a)含目标的三维图像块在空时域字典中的稀疏分解系数,其中图4(a)表示目标的稀疏表示系数只有四个非零表示系数。图4(b)为表示系数最大值对应的原子,该原子描述了目标的形态特征而且能够体现目标的运动轨迹。对表示系数取值最大的不多于3个原子及其中运动速度和方向进行加权判断,可有效地检测出目标的运动信息。
本发明利用空时超完备字典学习图像序列的形态信息和运动特征,能更加稀疏有效地表示序列图像内容,显著提高小弱目标的运动检测能力。
Claims (5)
1.一种基于空时稀疏表示的红外小弱目标检测方法,其特征在于,包括步骤:
(1)从连续多帧图像的相同位置处提取一定大小的三维空时图像块形成空时图像训练样本;
(2)采用K聚类奇异值分解法K_SVD学习训练样本构建图像空时超完备字典,其中字典中空时原子的时域长度与连续图像的帧数相等;
(3)采用正交匹配跟踪OMP算法将待检测的空时三维图像F在空时超完备字典D进行稀疏分解,提取空时三维图像F在空时超完备字典中的稀疏表示系数αx,y,k;
(4)计算稀疏表示系数的稀疏度,如果稀疏度大于一定阈值,则对稀疏表示系数取值较大的空时原子及其中目标的运动速度和方向进行以正比于稀疏表示系数的比重加权判断,检测出目标的运动信息;
所述步骤(4)计算稀疏表示系数的稀疏度,即统计非零稀疏表示系数的数量count以及非零稀疏表示系数的最大值max(αx,y,k),然后两者相除,即如果稀疏度大于一定阈值,则对其中稀疏表示系数取值较大的原子所表现出的运动速度和方向进行以正比于稀疏表示系数的比重加权判断,检测出运动目标,其中,稀疏表示系数取值较大的原子数量不多于3个。
2.根据权利要求1所述的基于空时稀疏表示的红外小弱目标检测方法,其特征在于,所述步骤(1)是从连续L帧图像F相同位置[x,y]处提取一定大小的三维空时图像块Rx,y,kF形成空时图像训练样本。
3.根据权利要求1所述的基于空时稀疏表示的红外小弱目标检测方法,其特征在于所述步骤(2),在K聚类奇异值分解法K_SVD基础上,增加时间维k,得到改进的模型为:
其中,Ω为图像空间,μx,y,k是稀疏度控制参数,L为空时超完备字典的时域长度。
4.根据权利要求3所述的基于空时稀疏表示的红外小弱目标检测方法,其特征在于,所述步骤(2)采用K聚类奇异值分解法K_SVD训练空时超完备字典包括步骤:
1)训练样本:利用一个大小与字典中的原子相同的空时滑动窗按照从上到下、从左到右的顺序依次提取三维空时图像块Rx,y,kF,并将其展开成一维列向量zi,然后将这些向量按列顺序组成矩阵即共有S个训练样本;
2)初始化字典:把二维超完备离散余弦字典DCT的每个原子复制L次,创建帧数长度为L的三维原子,最终得到的三维超完备DCT字典作为空时超完备字典D的初始字典;
3)稀疏编码:固定字典D,运用正交匹配追踪(OMP)算法求解每个训练样本zi在当前字典中的表示系数其中1≤i≤S,最终形成稀疏表示矩阵A;公式中μx,y,i为正则化参数,控制系数的稀疏度,Dα表示稀疏重构后图像;
4)字典更新:每次更新初始字典D中的一个原子及其与之对应的表示系数,即固定初始字典D中除第j0个原子外的所有原子,更新原子和与其相应的系数采用矩阵DA对训练样本Z进行稀疏重构时,去掉原子得到的表示误差然后对进行奇异值分解,得到最优的原子和表示系数反复最小化模型等式,直到字典对训练样本的表示误差减小到一定数量σ并趋于稳定时停止。
5.根据权利要求1所述的基于空时稀疏表示的红外小弱目标检测方法,其特征在于,所述步骤(3)采用正交匹配跟踪OMP算法将待检测的空时三维图像F在空时超完备字典D中进行稀疏分解,求解信号在超完备字典的稀疏表示系数αx,y,k,即求解它在一定容许误差σ内的L1范数最小化问题的逼近解
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410004850.9A CN103679216B (zh) | 2014-01-06 | 2014-01-06 | 基于空时稀疏表示的红外小弱目标检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410004850.9A CN103679216B (zh) | 2014-01-06 | 2014-01-06 | 基于空时稀疏表示的红外小弱目标检测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103679216A CN103679216A (zh) | 2014-03-26 |
CN103679216B true CN103679216B (zh) | 2017-01-18 |
Family
ID=50316704
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410004850.9A Expired - Fee Related CN103679216B (zh) | 2014-01-06 | 2014-01-06 | 基于空时稀疏表示的红外小弱目标检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103679216B (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106405509B (zh) * | 2016-08-30 | 2019-01-11 | 南京理工大学 | 空时自适应信号的分块处理方法 |
CN106965187B (zh) * | 2017-05-25 | 2020-11-27 | 北京理工大学 | 一种仿生手抓取物体时生成反馈力向量的方法 |
CN109241981B (zh) * | 2018-09-03 | 2022-07-12 | 哈尔滨工业大学 | 一种基于稀疏编码的特征检测方法 |
CN109375205B (zh) * | 2018-09-28 | 2020-11-03 | 清华大学 | 基于字典学习的多种类无人机场景识别方法及装置 |
CN109584303B (zh) * | 2018-12-03 | 2023-04-14 | 电子科技大学 | 一种基于Lp范数和核范数的红外弱小目标检测方法 |
CN110632566A (zh) * | 2019-08-31 | 2019-12-31 | 南京理工大学 | 基于稀疏表示的无线电引信抗箔条干扰方法 |
CN112114300B (zh) * | 2020-09-14 | 2022-06-21 | 哈尔滨工程大学 | 一种基于图像稀疏表示的水下弱目标检测方法 |
CN113836732B (zh) * | 2021-09-29 | 2024-04-02 | 华东理工大学 | 一种冲击特征指标引导的振动信号稀疏重构方法及应用 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102542571A (zh) * | 2010-12-17 | 2012-07-04 | 中国移动通信集团广东有限公司 | 一种运动目标检测方法及装置 |
CN102750533A (zh) * | 2012-07-05 | 2012-10-24 | 重庆大学 | 基于形态成份稀疏表示的红外小弱目标检测方法 |
CN102842047A (zh) * | 2012-09-10 | 2012-12-26 | 重庆大学 | 基于多尺度稀疏字典的红外小弱目标检测方法 |
CN103440502A (zh) * | 2013-09-06 | 2013-12-11 | 重庆大学 | 基于混合高斯稀疏表示的红外小目标检测方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8320613B2 (en) * | 2008-06-04 | 2012-11-27 | Lockheed Martin Corporation | Detecting and tracking targets in images based on estimated target geometry |
JP6032921B2 (ja) * | 2012-03-30 | 2016-11-30 | キヤノン株式会社 | 物体検出装置及びその方法、プログラム |
-
2014
- 2014-01-06 CN CN201410004850.9A patent/CN103679216B/zh not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102542571A (zh) * | 2010-12-17 | 2012-07-04 | 中国移动通信集团广东有限公司 | 一种运动目标检测方法及装置 |
CN102750533A (zh) * | 2012-07-05 | 2012-10-24 | 重庆大学 | 基于形态成份稀疏表示的红外小弱目标检测方法 |
CN102842047A (zh) * | 2012-09-10 | 2012-12-26 | 重庆大学 | 基于多尺度稀疏字典的红外小弱目标检测方法 |
CN103440502A (zh) * | 2013-09-06 | 2013-12-11 | 重庆大学 | 基于混合高斯稀疏表示的红外小目标检测方法 |
Non-Patent Citations (2)
Title |
---|
"基于svd背景抑制和粒子滤波的弱小目标检测";崔丽洁等;《计算机应用研究》;20110415;第28卷(第4期);全文 * |
"基于多特征融合的微弱红外运动目标跟踪方法";李正周等;《强激光与粒子束》;20110115;第23卷(第1期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN103679216A (zh) | 2014-03-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103679216B (zh) | 基于空时稀疏表示的红外小弱目标检测方法 | |
CN105787439B (zh) | 一种基于卷积神经网络的深度图像人体关节定位方法 | |
Wang et al. | TS-I3D based hand gesture recognition method with radar sensor | |
CN104978580B (zh) | 一种用于无人机巡检输电线路的绝缘子识别方法 | |
Long et al. | Lira-YOLO: A lightweight model for ship detection in radar images | |
CN105809198B (zh) | 基于深度置信网络的sar图像目标识别方法 | |
CN107657217A (zh) | 基于运动目标检测的红外与可见光视频的融合方法 | |
CN103413151B (zh) | 基于图正则低秩表示维数约简的高光谱图像分类方法 | |
CN105741333B (zh) | 一种Video-SAR图像实时压缩重构方法 | |
CN103440502A (zh) | 基于混合高斯稀疏表示的红外小目标检测方法 | |
CN103984966A (zh) | 基于稀疏表示的sar图像目标识别方法 | |
CN104899567A (zh) | 基于稀疏表示的小弱运动目标跟踪方法 | |
CN108008385A (zh) | 基于稀疏贝叶斯学习的干扰环境isar高分辨成像方法 | |
CN110135344B (zh) | 基于加权固定秩表示的红外弱小目标检测方法 | |
CN112099008A (zh) | 基于cv-admmn的sa-isar成像与自聚焦方法 | |
CN102750533A (zh) | 基于形态成份稀疏表示的红外小弱目标检测方法 | |
CN109658351A (zh) | 一种结合l0梯度约束和局部低秩矩阵恢复的高光谱图像去噪方法 | |
CN109063549A (zh) | 基于深度神经网络的高分辨率航拍视频运动目标检测方法 | |
CN105913002A (zh) | 视频场景下在线自适应的异常事件检测方法 | |
CN107742133A (zh) | 一种用于极化sar图像的分类方法 | |
CN106875403B (zh) | 一种用于空中加油的仿鹰眼视觉运动目标检测方法 | |
CN113112583B (zh) | 基于红外热成像的3d人体重构方法 | |
CN109472747A (zh) | 一种微波遥感图像去相干斑噪声的深度学习方法 | |
CN113283409A (zh) | 基于EfficientDet和Transformer的航空图像中的飞机检测方法 | |
CN111781599B (zh) | 基于CV-EstNet的SAR运动舰船目标速度估算方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20170118 Termination date: 20220106 |
|
CF01 | Termination of patent right due to non-payment of annual fee |