CN112487918B - 一种红外图像小目标检测方法 - Google Patents

一种红外图像小目标检测方法 Download PDF

Info

Publication number
CN112487918B
CN112487918B CN202011337553.8A CN202011337553A CN112487918B CN 112487918 B CN112487918 B CN 112487918B CN 202011337553 A CN202011337553 A CN 202011337553A CN 112487918 B CN112487918 B CN 112487918B
Authority
CN
China
Prior art keywords
target
neighborhood
point set
infrared image
small
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011337553.8A
Other languages
English (en)
Other versions
CN112487918A (zh
Inventor
张羽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin Jinhang Institute of Technical Physics
Original Assignee
Tianjin Jinhang Institute of Technical Physics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin Jinhang Institute of Technical Physics filed Critical Tianjin Jinhang Institute of Technical Physics
Priority to CN202011337553.8A priority Critical patent/CN112487918B/zh
Publication of CN112487918A publication Critical patent/CN112487918A/zh
Application granted granted Critical
Publication of CN112487918B publication Critical patent/CN112487918B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G06N20/10—Machine learning using kernel methods, e.g. support vector machines [SVM]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07—Target detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Multimedia (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Image Analysis (AREA)

Abstract

本发明属于图像处理技术领域，具体涉及一种红外图像小目标检测方法，其包括以下步骤：提取红外图像中候选目标的位置信息；计算候选目标所在位置的邻域特征信息；将特征信息输入到判别模型进行虚假目标排除；输出真实目标的位置信息。本发明针对红外图像的小目标提出一种特征提取算法，用于作为机器学习算法的特征输入，以此训练一种检测小目标的模型，应用模型和此特征信息进行目标检测。本发明技术方案所提供的红外图像小目标检测方法使得红外小目标的检测问题转化为可以应用机器学习方法的目标检测问题，通过大数据的学习，训练出有效的检测模型，从而提高红外小目标的检测能力和适应能力。

Description

一种红外图像小目标检测方法
技术领域
本发明属于图像处理技术领域，具体涉及一种红外图像小目标检测方法。
背景技术
红外图像的小目标检测对于精确制导武器的发展和红外预警等具有重要意义。传统的红外图像的小目标检测方法通常基于目标邻域的灰度阈值分割方法，经过背景抑制的预处理算法尽可能抑制背景杂波和提高目标与背景的对比度。然而，由于红外成像受复杂环境条件和目标辐射率影响，成像差别较大，灰度阈值分割往往不能找到可靠的分割阈值，因而检测存在不稳定性。基于机器学习的目标检测方法到目前为止已发展成为较成熟的目标检测方法，常见的成熟方法有基于决策树、基于支持向量机、随机森林等学习方法。应用机器学习的方法进行目标检测的关键在于找到有效的描述目标的特征。红外小目标检测方法应用基于机器学习目标检测方法的难点在于由于小目标的成像面积小、没有色彩信息而难于找到一种描述红外小目标的特征。
发明内容
(一)要解决的技术问题
本发明要解决的技术问题是：如何提取出一种描述目标与背景相关的邻域特征信息，使得红外小目标的检测问题转化为可以应用机器学习方法的目标检测问题，通过大数据的学习和建模建立一种新的红外图像小目标检测方法。
(二)技术方案
为解决上述技术问题，本发明提供一种红外图像小目标检测方法，所述方法包括以下步骤：
步骤S1：从红外图像中提取候选目标的位置信息；
步骤S2：计算候选目标所在位置的邻域特征信息；
步骤S3：将邻域特征信息输入到判别模型进行虚假目标排除；
步骤S4：输出真实目标的位置信息。
其中，所述步骤S1中，所述从红外图像中提取候选目标的位置信息的过程采用本技术领域现有的红外小目标提取算法。
其中，所述步骤S1中，所述从红外图像中提取候选目标的位置信息的过程采用基于数学形态学的方法或基于Top-Hat算子的红外图像背景抑制方法，通过寻找背景抑制后的图像灰度极值点来获取候选的目标的位置信息。
其中，所述步骤S2中，候选目标所在位置的邻域特征信息是通过建立和候选目标点灰度相关的邻域点集得到的。
其中，所述步骤S2中，邻域点集的建立方法包含以下步骤：
步骤S21：初始化邻域点集set(0)；
邻域点集的初始化方法是将当前候选目标点的像素值加入到邻域点集set(0)中；
步骤S22：扩充邻域点集set(n)；
邻域点集的扩充方法是首先找到出当前邻域点集set(n-1)的极大值，然后将该极大值周围3×3邻域的8个像素点的像素值加入到邻域点集中，并将该极大值从邻域点集中去除便得到扩充后的邻域点集set(n)；
步骤S23：完成邻域点集set(N)；
经过N次步骤S22的邻域扩充便完成了邻域点集建立。
其中，所述步骤S23中，所述N的大小根据检测目标大小确定。
其中，所述步骤S23中，N＝200。
其中，所述步骤S2中，所述候选目标所在位置的邻域特征信息表示为一数据向量feature＝{f0,f1……fN}；
其中，fn＝max(set(n))，n＝1……N。
其中，所述步骤S3中，所述判别模型的获得方法为现有机器学习模型训练方法，训练所需的特征为步骤S2所输出的邻域特征信息。
其中，所述步骤S4中，所述真实目标的位置信息即为候选目标经过判别模型判别得到的结果。
(三)有益效果
与现有技术相比较，本发明技术方案所提供的红外图像小目标检测方法使得红外小目标的检测问题转化为可以应用机器学习方法的目标检测问题，通过大数据的学习，训练出有效的检测模型，从而提高红外小目标的检测能力和适应能力。
本发明的意义在于通过寻找目标邻域的同质区域，提取出一种描述目标与背景相关的邻域特征信息，使得红外小目标的检测问题转化为可以应用机器学习方法的目标检测问题，通过大数据的学习，训练出有效的检测模型，从而提高红外小目标的检测能力和适应能力。
附图说明
图1为典型红外小目标成像效果图。
图2为红外图像的预处理效果图。
图3为特征向量生成流程图。
图4为目标邻域特征点集示意图。
具体实施方式
为使本发明的目的、内容、和优点更加清楚，下面结合附图和实施例，对本发明的具体实施方式作进一步详细描述。
为解决现有技术问题，本发明提供一种红外图像小目标检测方法，所述方法包括以下步骤：
步骤S1：从红外图像中提取候选目标的位置信息；
步骤S2：计算候选目标所在位置的邻域特征信息；
步骤S3：将邻域特征信息输入到判别模型进行虚假目标排除；
步骤S4：输出真实目标的位置信息。
其中，所述步骤S1中，所述从红外图像中提取候选目标的位置信息的过程采用本技术领域现有的红外小目标提取算法。
其中，所述步骤S1中，所述从红外图像中提取候选目标的位置信息的过程采用基于数学形态学的方法或基于Top-Hat算子的红外图像背景抑制方法，通过寻找背景抑制后的图像灰度极值点来获取候选的目标的位置信息。
其中，基于数学形态学的方法来源于TomV T,Peli T,Leung M,etal.Morphology-based algorithm for point target detection in infraredbackgrounds[C]//SPIE，1993,1954:2-11。
基于Top-Hat算子的红外图像背景抑制方法来源于Wang Weihua,Niu Zhaodong,Chen Zengping.Temporal-spatial fusion filtering algorithm for small infraredmoving target detection[J].Infrared and Laser Engineering,2005,34(6):714-718.(in Chinese)王卫华,牛照东,陈曾平.基于时空域融合滤波的红外运动小目标检测算法[J].红外与激光工程,2005,34(6):714-718。
其中，所述步骤S2中，候选目标所在位置的邻域特征信息是通过建立和候选目标点灰度相关的邻域点集得到的。
其中，所述步骤S2中，邻域点集的建立方法包含以下步骤：
步骤S21：初始化邻域点集set(0)；
邻域点集的初始化方法是将当前候选目标点的像素值加入到邻域点集set(0)中；
步骤S22：扩充邻域点集set(n)；
邻域点集的扩充方法是首先找到出当前邻域点集set(n-1)的极大值，然后将该极大值周围3×3邻域的8个像素点的像素值加入到邻域点集中，并将该极大值从邻域点集中去除便得到扩充后的邻域点集set(n)；
步骤S23：完成邻域点集set(N)；
经过N次步骤S22的邻域扩充便完成了邻域点集建立。
其中，所述步骤S23中，所述N的大小根据检测目标大小确定。
其中，所述步骤S23中，根据小目标的定义，一般情况下N＝200可满足检测需求。
其中，所述步骤S2中，所述候选目标所在位置的邻域特征信息表示为一数据向量feature＝{f0,f1……fN}；
其中，fn＝max(set(n))，n＝1……N。
其中，所述步骤S3中，所述判别模型的获得方法为现有机器学习模型训练方法，训练所需的特征为步骤S2所输出的邻域特征信息。
其中，所述步骤S4中，所述真实目标的位置信息即为候选目标经过判别模型判别得到的结果。
实施例1
复杂背景下的红外图像小目标图像目标与背景的信噪比很低，肉眼都不易察觉，由于小目标的“小”，不具备任何纹理特征，红外图像也不具备色彩信息，因而很难提取出有效的用于描述特性的特征。肉眼可见的特性是目标与背景存在一定的对比度差别，当目标所处的环境简单时，经过背景抑制目标与背景的对比去增大，背景得到抑制明显，因而传统的基于对比度分割能够获得比较准确的分割阈值，获得比较准确的检测结果。
如图1所示的典型的红外图像的小目标。两幅图像小目标所在环境不同，成像和预处理之后差别也比较大。预处理之后如图2所示。总体来说目标邻域的背景成像差别比较大时，很难获得关于目标和背景的一致性的描述。
本发明提供一种面向红外图像小目标检测方法，其包括以下步骤：
步骤S1：提取红外图像中候选目标的位置信息；
步骤S2：计算候选目标所在位置的邻域特征信息；
步骤S3：将特征信息输入到判别模型进行虚假目标排除；
步骤S4：输出真实目标的位置信息；
其中，步骤S1中所述从红外图像中提取候选目标点的位置信息可采用本领域现有的红外小目标提取算法，如基于数学形态学的方法，基于Top-Hat算子的红外图像背景抑制方法，通过寻找背景抑制后的图像灰度极值点来获取候选的目标点位置信息。
其中，基于数学形态学的方法来源于TomV T,Peli T,Leung M,etal.Morphology-based algorithm for point target detection in infraredbackgrounds[C]//SPIE，1993,1954:2-11。
基于Top-Hat算子的红外图像背景抑制方法来源于Wang Weihua,Niu Zhaodong,Chen Zengping.Temporal-spatial fusion filtering algorithm for small infraredmoving target detection[J].Infrared and Laser Engineering,2005,34(6):714-718.(in Chinese)王卫华,牛照东,陈曾平.基于时空域融合滤波的红外运动小目标检测算法[J].红外与激光工程,2005,34(6):714-718。
本发明的关键在于步骤S2所描述的获得目标与背景的一致性的描述。步骤S2描述目标与背景的特征的获取步骤为：
步骤S21：初始化邻域点集set(0)。
邻域点集的初始化方法是将当前候选目标点的像素值加入到邻域点集set(0)中。
步骤S22：扩充邻域点集set(n)。
邻域点集的扩充方法是首先找到出当前邻域点集set(n-1)的极大值，然后将该极大值周围3×3邻域的8个像素点的像素值加入到邻域点集中，并将该极大值从邻域点集中去除便得到扩充后的邻域点集set(n)。
步骤S23：完成邻域点集set(N)。
经过N次步骤S22的邻域扩充便完成了邻域点集建立。
候选目标的邻域特征信息可表示为一数据向量：
feature＝{f0,f1……fN}；
其中，fn＝max(set(n)),n＝1……N；
可以用如图3所示的流程图进行描述。
通过上述流程获得了获选目标点的特征描述邻域，具体找到特征描述邻域所包含的像素点如图4中点标记的像素所示。从图中可以看出特征描述邻域的像素点在空间位置上和像素值两个维度上保持与目标信息相对较接近，其中包含了目标的全部信息，同时包含了部分背景信息，邻域特征集的过程排除了与目标灰度值相差较大的背景信息，因而所包含的背景信息是非常有效的背景信息，目标与背景的灰度分布特点得以体现，因而是一种能够代表目标与背景差别的特征。本发明就是采用这样一种特征来描述目标与邻域的背景差别，在此基础上进行学习判别。
本发明步骤S3描述的方法将特征信息输入到判别模型进行虚假目标排除；本步骤所述判别模型是由步骤2中描述的目标邻域特征和成熟的机器学习方法训练得到。目前成熟的基于机器学习的训练方法如基于支持向量机的方法。通过预处理获取到候选目标点位置，再经过步骤描述的方法提取出候选目标点的特征信息，然后将真实的目标标记为正样本，虚假的目标标记为负样本。这样获取了模型训练所需的训练数据，从而可以开展下一步的模型训练，得到判别模型。
基于判别模型，将待检测图像的候选目标的特征输入到判别模型进行判别，从而得到真实的目标。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明技术原理的前提下，还可以做出若干改进和变形，这些改进和变形也应视为本发明的保护范围。

Claims (5)

1.一种红外图像小目标检测方法，其特征在于，所述方法包括以下步骤：
步骤S1：从红外图像中提取候选目标的位置信息；
步骤S2：计算候选目标所在位置的邻域特征信息；
步骤S3：将邻域特征信息输入到判别模型进行虚假目标排除；
步骤S4：输出真实目标的位置信息；
其中，所述步骤S2中，候选目标所在位置的邻域特征信息是通过建立和候选目标点灰度相关的邻域点集得到的；邻域点集的建立方法包含以下步骤：
步骤S21：初始化邻域点集set(0)；
邻域点集的初始化方法是将当前候选目标点的像素值加入到邻域点集set(0)中；
步骤S22：扩充邻域点集set(n)；
邻域点集的扩充方法是首先找到出当前邻域点集set(n-1)的极大值，然后将该极大值周围3×3邻域的8个像素点的像素值加入到邻域点集中，并将该极大值从邻域点集中去除便得到扩充后的邻域点集set(n)；
步骤S23：完成邻域点集set(N)；
经过N次步骤S22的邻域扩充便完成了邻域点集建立；
其中，所述步骤S23中，所述N的大小根据检测目标大小确定；
其中，所述步骤S23中，N＝200；
其中，所述步骤S2中，所述候选目标所在位置的邻域特征信息表示为一数据向量feature＝{f0,f1……fN}；
其中，fn＝max(set(n))，n＝1……N。
2.如权利要求1所述红外图像小目标检测方法，其特征在于，所述步骤S1中，所述从红外图像中提取候选目标的位置信息的过程采用本技术领域现有的红外小目标提取算法。
3.如权利要求2所述红外图像小目标检测方法，其特征在于，所述步骤S1中，所述从红外图像中提取候选目标的位置信息的过程采用基于数学形态学的方法或基于Top-Hat算子的红外图像背景抑制方法，通过寻找背景抑制后的图像灰度极值点来获取候选的目标的位置信息。
4.如权利要求1所述红外图像小目标检测方法，其特征在于，所述步骤S3中，所述判别模型的获得方法为现有机器学习模型训练方法，训练所需的特征为步骤S2所输出的邻域特征信息。
5.如权利要求4所述红外图像小目标检测方法，其特征在于，所述步骤S4中，所述真实目标的位置信息即为候选目标经过判别模型判别得到的结果。
CN202011337553.8A 2020-11-25 2020-11-25 一种红外图像小目标检测方法 Active CN112487918B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011337553.8A CN112487918B (zh) 2020-11-25 2020-11-25 一种红外图像小目标检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011337553.8A CN112487918B (zh) 2020-11-25 2020-11-25 一种红外图像小目标检测方法

Publications (2)

Publication Number Publication Date
CN112487918A CN112487918A (zh) 2021-03-12
CN112487918B true CN112487918B (zh) 2022-10-18

Family

ID=74934561

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011337553.8A Active CN112487918B (zh) 2020-11-25 2020-11-25 一种红外图像小目标检测方法

Country Status (1)

Country Link
CN (1) CN112487918B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103020592A (zh) * 2012-11-22 2013-04-03 北京大学 一种基于局部上下文的遥感图像舰船检测虚警剔除方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110096933B (zh) * 2018-01-30 2023-07-18 华为技术有限公司 目标检测的方法、装置及系统
CN111428573B (zh) * 2020-03-02 2021-06-25 南京莱斯电子设备有限公司 一种复杂背景下的红外弱小目标检测虚警抑制方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103020592A (zh) * 2012-11-22 2013-04-03 北京大学 一种基于局部上下文的遥感图像舰船检测虚警剔除方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于邻域特征的红外低慢小目标检测;南天章 等;《红外与激光工程》;20190425;第48卷(第S1期);全文 *

Also Published As

Publication number Publication date
CN112487918A (zh) 2021-03-12

Similar Documents

Publication Publication Date Title
Liu et al. Dpatch: An adversarial patch attack on object detectors
CN109934224B (zh) 基于马尔科夫随机场和视觉对比机制的小目标检测方法
CN110569905B (zh) 基于生成对抗网络和注意力网络的细粒度图像分类方法
CN104156693B (zh) 一种基于多模态序列融合的动作识别方法
Wu et al. Shadow elimination algorithm using color and texture features
Fiaz et al. Vision based human activity tracking using artificial neural networks
Al-Heety Moving vehicle detection from video sequences for traffic surveillance system
Karunakaran Deep learning based object detection using mask RCNN
CN112487918B (zh) 一种红外图像小目标检测方法
Jaiswal et al. A survey of image segmentation based on artificial intelligence and evolutionary approach
Zhang et al. An improved ViBe method for motion target detection
KR101394473B1 (ko) 이동 물체 탐지 방법 및 그 감시 시스템
Yu et al. A SAR image segmentation method based on otsu and level set
KR102211106B1 (ko) 객체 고속 검출 시스템 및 그 방법
Yao et al. Real-time multiple moving targets detection from airborne IR imagery by dynamic Gabor filter and dynamic Gaussian detector
Neves et al. Wavelet-watershed automatic infrared image segmentation method
Yang et al. A hierarchical approach for background modeling and moving objects detection
Yu et al. Improved threshold-based segmentation method for millimeter wave radiometric image
Bai et al. An improved vibe algorithm for quickly suppressing ghosts
Islam et al. An efficient mask generation method for moving object detection in atmospheric imaging
Karthik et al. Level set methodology for Tamil document image binarization and segmentation
Liu A Moving Object Detection Algorithm for Removing Ghost and Shadow
Sharon et al. Multi-object tracking based on Kalman filter by using multi-feature appearance model
Zhang et al. Research on visual vehicle detection and tracking based on deep learning
Sun et al. Moving target detection based on multi-feature adaptive background model

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant