CN111353496B - 一种红外弱小目标实时检测方法 - Google Patents

一种红外弱小目标实时检测方法 Download PDF

Info

Publication number
CN111353496B
CN111353496B CN201811567537.0A CN201811567537A CN111353496B CN 111353496 B CN111353496 B CN 111353496B CN 201811567537 A CN201811567537 A CN 201811567537A CN 111353496 B CN111353496 B CN 111353496B
Authority
CN
China
Prior art keywords
image
background
target
variance
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811567537.0A
Other languages
English (en)
Other versions
CN111353496A (zh
Inventor
史泽林
向伟
常铮
蓝德岩
刘云鹏
王学娟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenyang Institute of Automation of CAS
Original Assignee
Shenyang Institute of Automation of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenyang Institute of Automation of CAS filed Critical Shenyang Institute of Automation of CAS
Priority to CN201811567537.0A priority Critical patent/CN111353496B/zh
Publication of CN111353496A publication Critical patent/CN111353496A/zh
Application granted granted Critical
Publication of CN111353496B publication Critical patent/CN111353496B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/25Fusion techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07Target detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及一种红外弱小目标实时检测方法,输入原始红外图像,对输入图像进行空间背景抑制,对输入图像进行双局部方差背景抑制;将空间背景抑制后的图像和双局部方差背景抑制后的图像按像素点对应相乘;对背景抑制后的图像选取若干个局部极大值点,进行目标分割,得到并统计疑似候选目标的特征;将多帧图像中的疑似候选目标进行关联,选取真实目标。本发明使用滤波的方法预测低频背景,使用积分图计算双局部方差方法实现背景抑制,搜索局部极大值后进行目标分割,对分割得到候选目标区域提取特征,综合多帧图像的候选目标特征,得到真实红外弱小目标的检测结果,有效提升了计算速度和检测准确率,降低了虚警率。

Description

一种红外弱小目标实时检测方法
技术领域
本发明涉及红外图像目标检测技术领域,具体地说是一种红外弱小目标实时检测方法。
背景技术
红外弱小目标检测是红外探测系统的关键技术之一。由于背景的复杂性和目标的机动性,使得低信噪比情况下检测未知位置和速度的运动弱小目标面临着较大的困难。国内外有关红外弱小目标检测的众多算法,从目标判决时所需处理图像数据量的差异进行分析,这些算法可以归结为两大类,即基于单帧的方法和基于序列的方法。
基于单帧检测的弱小目标检测方法以其计算量少,实时性好等特点在工程实践中得到了广泛的应用。由于目标检测算法对低信噪比条件下的检测效果较差,而这会直接影响后续对目标跟踪的处理,所以稳健的背景抑制算法对于单帧检测算法来说非常重要。基于序列检测的弱小目标检测方法从计算量来说较大,但是能进一步提高图像信噪比使得算法在低信噪比的图像中得到有效的检测效果。序列检测算法性能好坏的关键在于它能否成功地累积分布在图像序列中的目标能量。但由于目标的机动性,序列检测算法很可能需要进行全时空搜索。显然,这是以搜索目标可能的运动轨迹时间为代价的。序列时间越长则越可能产生目标跟踪时间延迟,与实际情况无法同步。
发明内容
针对现有技术的不足,本发明提供一种红外弱小目标实时检测方法,解决现有低信噪比红外图像中弱小目标检测运算量大、检测概率低,虚警率高的问题。
本发明为实现上述目的所采用的技术方案是:
一种红外弱小目标实时检测方法,包括以下步骤:
步骤1:输入原始红外图像,对输入图像进行空间背景抑制,得到空间背景抑制后的图像,对输入图像进行双局部方差背景抑制,得到双局部方差背景抑制后的图像;
步骤2:将空间背景抑制后的图像和双局部方差背景抑制后的图像按像素点对应相乘,得到背景抑制后的图像;
步骤3:对背景抑制后的图像选取若干个局部极大值点,进行目标分割,得到若干疑似候选目标;
步骤4:统计疑似候选目标的特征;
步骤5:将多帧图像中的疑似候选目标进行关联,选取真实目标,并输出。
所述空间背景抑制,包括:
利用周围像素的灰度分布计算中心像素的背景估计值:
其中,为空域背景抑制法的背景估计图;/>为空域背景抑制法的(x,y)位置处背景估计值;I为被处理图像;w(m,n)为空域抑制模板中的权重系数;IM为以被预测像素点为中心的背景区域;M为预测模板;
计算空间背景抑制后的图像:
所述双局部方差背景抑制,包括:
步骤1.1:利用第一方差模板计算出图像第一方差S1(x,y),利用第二方差模板计算出图像第二方差S2(x,y);
步骤1.2:将图像第一方差S1(x,y)与图像第二方差S2(x,y)进行减法计算,得到局部方差差值D(x,y)=S1(x,y)-S2(x,y),其中,D(x,y)表示在(x,y)位置处的局部方差差值;
步骤1.3:对(x,y)位置处的局部方差差值D(x,y)进行归一化:
其中,K(x,y)为(x,y)位置处的双局部方差背景抑制后的图像值,K为双局部方差背景抑制后的图像。
所述疑似候选目标的特征包括:目标坐标、目标长度、目标宽度、目标面积和目标能量。
所述将多帧图像中的疑似候选目标进行关联,选取真实目标,包括:
提取疑似候选目标的能量变化值ΔE、疑似候选目标的运动距离值ΔD和疑似候选目标的面积变化值ΔA,选取总变化ΔS最小的疑似候选目标为真实目标:
ΔS=ΔE*ΔD*ΔA。
本发明具有以下有益效果及优点:
与现有技术相比,本发明在图像预处理过程中使用滤波的方法预测低频背景,实现空域背景抑制。使用积分图计算双局部方差方法进一步实现背景抑制,搜索局部极大值后进行目标分割,对分割得到候选目标区域提取特征。综合多帧图像的候选目标特征,得到真实红外弱小目标的检测结果,有效提升了计算速度和检测准确率,降低了虚警率。
附图说明
图1是本发明的方法流程图;
图2是本发明的双方差模板图;
图3是本发明的红外弱小目标检测结果示意图。
具体实施方式
下面结合附图及实施例对本发明做进一步的详细说明。
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图对本发明的具体实施方式做详细的说明。在下面的描述中阐述了很多具体细节以便于充分理解本发明。但本发明能够以很多不同于在此描述的其他方式来实施,本领域技术人员可以在不违背发明内涵的情况下做类似改进,因此本发明不受下面公开的具体实施的限制。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。
如图1所示为方法流程图。
一种红外弱小目标实时检测方法,包括如下步骤:
步骤一、输入原始红外图像;可以红外热像仪直接采集红外图像,也可以对存储的红外图像进行目标检测;
步骤二、对输入的原始红外图像进行预处理,实现背景抑制的目的。背景抑制的实现包括两部分:
第一部分,空域背景抑制。空域背景抑制法主要利用的是背景区域能量分布缓变的特点。假设背景相邻或相近像素的灰度值具有相似性,利用周围像素的灰度分布去计算中心像素的背景估计值。空域背景抑制法的背景估计模型如下式所示。
上式中,为空域背景抑制法的背景估计图;I为被处理图像;w(m,n)为空域抑制模板中的权重系数;IM为以被预测像素点为中心的背景区域;M为预测模板。得到红外图像背景的估计后,通过与原图作差得到背景抑制后的处理结果,如下式所示。
式(3)和(4)空域背景抑制算法的基本运算过程。决定这种算法效果的核心因素就是模板的权重系数矩阵w。
优选地,考虑计算复杂度和实时性需求,权重系数矩阵w为权重系数设为同一值,其效果就是将周边像素背景的均值当作中心像素的背景估计值。即为均值滤波后图像,实施例中均值滤波尺寸5x5。
第二部分,双局部方差背景抑制。红外小目标图像包括:天空,云层,地面物体和红外小目标物体,这四类物体在红外图像中灰度分布不同。局部方差反映了图像中某个区域灰度分布的离散状况,图像灰度分布越分散,其局部方差就越大,图像灰度分布越集中,其局部方差就越小。目标区域与其它不同区域有着不同的特点,目标区域整体方差较大,而去除中心区域后,剩余部分的局部方差较小。根据上述目标与其他区域区别,建立如图2所示的双方差模板。优选L取值7,K取值3。
双局部方差背景抑制方法的计算流程可归纳为:
(1)得到局部方差图像。将模板1与模板2计算出的图像方差分别替换为模板中心点的灰度值,得到不同模板的局部方差图像S1(x,y),S2(x,y)。
(2)减法运算。将上面得到的不同模板处理后的局部方差图像进行减法计算得到局部方差差值,将其表示为
D(x,y)=S1(x,y)-S2(x,y) (5)
上式中,D(x,y)表示在(x,y)位置处的局部方差差值。
(3)归一化运算。为便于和空域背景抑制法融合,将D(x,y)除以S1(x,y),将其值范围置于0~1之间。即
上式中K(x,y)表示(x,y)双局部方差背景抑制的最终结果。根据上面分析,目标处S2(x,y)远小于S1(x,y),因此,K(x,y)接近于1,而净空、云层、云边缘处S2(x,y)接近S1(x,y),因此,K(x,y)接近于0。
优选地,根据方差计算公式x为数组中的元素值,在图像中为像素值。计算图像固定区域的方差时,通过一次遍历即可求出方差,可提高计算效率。在双方差背景抑制过程,需要计算所有点的双局部方差。进一步地,预先计算整幅图像x的积分图和整幅图像像素值平方x2的积分图,在计算所有点双局部方差时,可以非常大的降低求和操作的运算量,更有助于计算效率的提升,满足实时性要求。
将空域背景抑制的结果图像和双局部方差背景抑制的结果图像对应位置像素相乘,得到预处理后的图像。
步骤三,在经过预处理后的图像中,选取n个局部极大值点,局部极大值点在原始图像中的信噪比t满足一定阈值,实施例中n取值10,t取值3。在对n个局部极大值点使用区域生长的方法进行目标分割,得到那n个候选目标。剔除不满足形状约束(长宽比,饱和度,大小)的候选目标,保留余下的候选目标为疑似候选目标。
步骤四,统计疑似候选目标坐标、长度、宽度、面积、能量等特征。
步骤五,根据记录的前m帧候选目标与本帧计算得到疑似候选目标进行关联,选取能量(目标灰度值)的变化最小,两帧之间运动距离的变化最小,目标面积的变化最小,运动方向的一致的疑似候选目标作为真实目标。实施例中m取值4。
步骤六,如图3所示,输出检测到的真实目标,并记录目标在步骤四中得到的特征。

Claims (4)

1.一种红外弱小目标实时检测方法,其特征在于,包括以下步骤:
步骤1:输入原始红外图像,对输入图像进行空间背景抑制,得到空间背景抑制后的图像,对输入图像进行双局部方差背景抑制,得到双局部方差背景抑制后的图像;
步骤2:将空间背景抑制后的图像和双局部方差背景抑制后的图像按像素点对应相乘,得到背景抑制后的图像;
步骤3:对背景抑制后的图像选取若干个局部极大值点,进行目标分割,得到若干疑似候选目标;
步骤4:统计疑似候选目标的特征;
步骤5:将多帧图像中的疑似候选目标进行关联,选取真实目标,并输出;
所述双局部方差背景抑制,包括:
步骤1.1:利用第一方差模板计算出图像第一方差S1(x,y),利用第二方差模板计算出图像第二方差S2(x,y);
步骤1.2:将图像第一方差S1(x,y)与图像第二方差S2(x,y)进行减法计算,得到局部方差差值D(x,y)=S1(x,y)-S2(x,y),其中,D(x,y)表示在(x,y)位置处的局部方差差值;
步骤1.3:对(x,y)位置处的局部方差差值D(x,y)进行归一化:
其中,K(x,y)为(x,y)位置处的双局部方差背景抑制后的图像值,K为双局部方差背景抑制后的图像。
2.根据权利要求1所述的红外弱小目标实时检测方法,其特征在于:所述空间背景抑制,包括:
利用周围像素的灰度分布计算中心像素的背景估计值:
其中,为空域背景抑制法的背景估计图;/>为空域背景抑制法的(x,y)位置处背景估计值;I为被处理图像;w(m,n)为空域抑制模板中的权重系数;IM为以被预测像素点为中心的背景区域;M为预测模板;
计算空间背景抑制后的图像:
3.根据权利要求1所述的红外弱小目标实时检测方法,其特征在于:所述疑似候选目标的特征包括:目标坐标、目标长度、目标宽度、目标面积和目标能量。
4.根据权利要求1所述的红外弱小目标实时检测方法,其特征在于:所述将多帧图像中的疑似候选目标进行关联,选取真实目标,包括:
提取疑似候选目标的能量变化值ΔE、疑似候选目标的运动距离值ΔD和疑似候选目标的面积变化值ΔA,选取总变化ΔS最小的疑似候选目标为真实目标:
ΔS=ΔE*ΔD*ΔA。
CN201811567537.0A 2018-12-20 2018-12-20 一种红外弱小目标实时检测方法 Active CN111353496B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811567537.0A CN111353496B (zh) 2018-12-20 2018-12-20 一种红外弱小目标实时检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811567537.0A CN111353496B (zh) 2018-12-20 2018-12-20 一种红外弱小目标实时检测方法

Publications (2)

Publication Number Publication Date
CN111353496A CN111353496A (zh) 2020-06-30
CN111353496B true CN111353496B (zh) 2023-07-28

Family

ID=71195641

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811567537.0A Active CN111353496B (zh) 2018-12-20 2018-12-20 一种红外弱小目标实时检测方法

Country Status (1)

Country Link
CN (1) CN111353496B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112541486B (zh) * 2020-12-31 2022-11-08 洛阳伟信电子科技有限公司 基于改进Pixel分割的红外弱小目标检测算法
CN113822352B (zh) * 2021-09-15 2024-05-17 中北大学 基于多特征融合的红外弱小目标检测方法
CN113592914B (zh) * 2021-09-28 2022-04-01 南京天朗防务科技有限公司 红外弱小飞行目标自适应检测跟踪方法、装置
CN114820665B (zh) * 2022-06-30 2022-09-02 中国人民解放军国防科技大学 一种星图背景抑制方法、装置、计算机设备和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104299229A (zh) * 2014-09-23 2015-01-21 西安电子科技大学 一种基于时空域背景抑制的红外弱小目标检测方法
CN104766079A (zh) * 2015-05-05 2015-07-08 四川九洲电器集团有限责任公司 一种远距离红外弱小目标检测方法
CN107092911A (zh) * 2017-03-29 2017-08-25 中国电子科技集团公司第十研究所 一种时空联合弱小目标检测方法与装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104299229A (zh) * 2014-09-23 2015-01-21 西安电子科技大学 一种基于时空域背景抑制的红外弱小目标检测方法
CN104766079A (zh) * 2015-05-05 2015-07-08 四川九洲电器集团有限责任公司 一种远距离红外弱小目标检测方法
CN107092911A (zh) * 2017-03-29 2017-08-25 中国电子科技集团公司第十研究所 一种时空联合弱小目标检测方法与装置

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
David G. Lowe et al. .Distinctive Image Features from Scale-Invariant Keypoints.International Journal of Computer Vision.2004,10-11. *
刘刚等.空域-小波域联合滤波的红外复杂背景抑制.电光与控制.2015,41-44+49. *
孙立辉等.基于局部统计特征的自适应红外背景抑制算法.红外与激光工程.2008,182-185. *
徐航等.基于局部均值差分的红外小目标图像背景抑制算法.航空学报.2015,71-75. *
王军等.基于噪声方差估计的红外弱小目标检测与跟踪方法.光电子・激光.2018,81-89. *

Also Published As

Publication number Publication date
CN111353496A (zh) 2020-06-30

Similar Documents

Publication Publication Date Title
CN111353496B (zh) 一种红外弱小目标实时检测方法
WO2019101220A1 (zh) 基于深度学习网络和均值漂移的船只自动跟踪方法及系统
CN107256225B (zh) 一种基于视频分析的热度图生成方法及装置
KR20200007084A (ko) 장면의 다차원 특징을 기반으로 하는 선박 탐지 방법 및 시스템
Zhang et al. Three-frame difference algorithm research based on mathematical morphology
CN103164858B (zh) 基于超像素和图模型的粘连人群分割与跟踪方法
CN112257569B (zh) 一种基于实时视频流的目标检测和识别方法
Sengar et al. Moving object area detection using normalized self adaptive optical flow
US20120328161A1 (en) Method and multi-scale attention system for spatiotemporal change determination and object detection
CN106204484B (zh) 一种基于光流和局部不变特征的交通目标跟踪方法
CN102222214A (zh) 快速物体识别算法
CN108804992B (zh) 一种基于深度学习的人群统计方法
CN110490905A (zh) 一种基于YOLOv3和DSST算法的目标跟踪方法
CN109859246B (zh) 一种结合相关滤波与视觉显著性的低空慢速无人机跟踪方法
Niu et al. A moving objects detection algorithm based on improved background subtraction
CN112288778A (zh) 一种基于多帧回归深度网络的红外小目标检测方法
CN115482489A (zh) 基于改进YOLOv3的配电房行人检测和轨迹追踪方法及系统
CN112164093A (zh) 一种基于边缘特征和相关滤波的人物自动跟踪方法
Angelo A novel approach on object detection and tracking using adaptive background subtraction method
Roy et al. A comprehensive survey on computer vision based approaches for moving object detection
CN105740819A (zh) 一种基于整数规划的人群密度估计方法
Al Okaishi et al. Real-time traffic light control system based on background updating and edge detection
CN103996199A (zh) 一种基于深度信息的运动检测方法
CN108985216B (zh) 一种基于多元logistic回归特征融合的行人头部检测方法
CN108805909B (zh) 在相关滤波框架下基于粒子滤波重检测的目标跟踪方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant