CN104899866B - 一种智能化的红外小目标检测方法 - Google Patents
一种智能化的红外小目标检测方法 Download PDFInfo
- Publication number
- CN104899866B CN104899866B CN201510222607.9A CN201510222607A CN104899866B CN 104899866 B CN104899866 B CN 104899866B CN 201510222607 A CN201510222607 A CN 201510222607A CN 104899866 B CN104899866 B CN 104899866B
- Authority
- CN
- China
- Prior art keywords
- infrared
- background
- image
- target
- small
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
一种智能化的红外小目标检测方法,首先基于统计特征将红外图像划分成子图像,确定候选目标区域。然后基于候选目标区域大小,确定结构元素尺寸,利用灰度形态学开运算,实现红外复杂背景的估计。将红外原图像与背景估计图像做差影,实现红外复杂背景抑制并突出待检测小目标。对经过背景抑制的六个量并作为红外小目标特征。以红外小目标特征为输入,像素类别为输出,构造三层BP神经网络。经过大样本训练后,形成图像像素特征与目标或背景的非线性输入输出关系,建立BP神经网络检测模型。实际红外图像经过背景抑制后,提取像素特征向量,送入经过训练的BP神经网络,实现红外复杂背景下的小目标在线智能化检测。
Description
技术领域
本发明涉及小目标检测方法,适用于远距离红外复杂背景下弱小目标的检测。
背景技术
在基于红外探测的军事应用领域,当探测系统与目标之间的距离较远时,一方面红外探测器接受到的目标红外辐射强度很弱,另一方面探测器内的噪声和背景杂波干扰又往往较强,因而是一个低信噪比的弱小目标检测问题。此外,战场的复杂背景也会对运动目标的识别产生极大的干扰。除了军事领域的应用之外,在卫星大气红外云图分析、空间遥感、红外医疗图像病理分析、飞机拍摄地面红外图像地质分析、森林防火、城市红外污染分析和大视场目标搜救等领域中,有效的红外小目标检测技术可以在较好的时机帮助人们迅速地提取感兴趣的目标区域,从而为人们的生产和生活提供必要地指导。如何在复杂背景环境中准确识别信号弱小的目标是远距离红外成像探测研究领域中较为困难却又极具实际意义的课题。
发明内容
为了解决上述技术问题,提供一种基于自适应结构元素灰度形态学背景抑制和BP神经网络识别的红外小目标智能化检测方法。
为实现上述技术目的,所采用的技术方案是:一种智能化的小目标检测方法,包括以下步骤:
S1.综合通过侦查手段获得的目标实际物理大小和红外实时成像应用中的导航信息,按照红外图像探测器成像投影模型,初步确定目标区域大小,将红外原图像划分成若干子图像;
S2. 计算每一子图像区域的灰度均值和方差,并计算均值与方差之比,如果比值大于整帧图像的全局值则该子区域为候选目标区域,并标记该区域。对所有候选目标区域统计目标的八连通区域,计算各自的矩形包围盒,以矩形的最大边长作为灰度形态学结构元素大小;
S3.背景抑制:基于步骤S2确定的结构元素大小,利用灰度形态学开运算,实现红外复杂背景的估计,得到背景估计图像,将原图像与背景估计图像做差影,实现红外复杂背景抑制并突出待检测小目标;
S4. 红外小目标特征提取:对经过灰度形态学变换背景抑制的红外图像计算像素的灰度、水平梯度、垂直梯度、对角梯度、邻域均值和方差六个量作为红外小目标特征;
S5. BP神经网络红外小目标检测:以红外小目标特征作为输入,像素类别为输出,构造三层BP神经网络,经过大样本训练后,形成背景抑制后的图像像素特征与目标或背景的非线性输入输出关系,实际应用时,将背景抑制后的图像像素特征输入BP神经网络,得到目标或背景的检测结果,进而实现红外复杂背景下的小目标在线智能化检测。
本发明基于自适应结构元素形态学背景抑制和BP神经网络实现红外复杂背景下的弱小目标的智能化检测。本发明的背景抑制效果明显,目标和背景像点的区分度高,能够有效地解决复杂背景条件下的红外弱小目标检测问题。
附图说明
图1 红外空中小目标原图像;
图2 红外空中复杂背景抑制;
图3 BP神经网络训练曲线;
图4 红外空中小目标的BP神经网络检测结果;
图5 海面背景目标检测结果;
图6 地面背景目标检测结果。
具体实施方式
本发明的基本思路:红外弱小目标图像由目标、背景和成像器件的电子噪声构成。图像中的目标即使在整帧图像中强度不是最强,但在其邻域中与局部背景的差异也较明显,一般要高于局部背景的辐射强度。红外图像中的目标区域通常为亮区域,在选用比目标区域尺寸大的结构元素情况下,灰度形态学开运算可使亮的目标区域被看作噪声而被滤除,可以估计出可能目标区域外的图像背景。原图像与估计出的图像背景做差即可得到包含候选目标且抑制大量背景的增强图像。经过背景抑制后,目标像素和背景像素的特征差异非常明显,可考虑构造特征向量,通过模式分类器来实现输入特征向量的模式划分。本发明采用BP神经网络作为小目标特征向量的模式分类器。
本发明的具体过程:
基于自适应结构元素灰度形态学的红外复杂背景估计:综合通过侦查手段获得的目标实际物理大小和红外实时成像应用中的导航信息,按照红外图像探测器成像投影模型,初步确定目标区域大小,将红外图像划分成若干子图像。计算每一子图像区域内的灰度均值和方差,并计算均值与方差之比。如果比值大于整帧图像的全局值,则该子区域为候选目标区域,并标记该区域,即
(1)
μg、σg代表全局均值和方差。
在候选目标区域中统计目标的八连通区域,计算其矩形包围盒,以矩形的最大边长作为灰度形态学开运算的结构元素大小。基于确定的结构元素大小,利用灰度形态学开运算,实现红外复杂背景的估计。整个过程可描述如下:
(2)
其中,f代表红外原图像,是结构元素b对图像f的开运算,为灰度形态学腐蚀运算,代表灰度形态学膨胀运算。
红外复杂背景抑制及小目标预提取:
将红外原图像与估计的红外背景图像做差影,实现红外复杂背景抑制以及小目标信号的预提取,该过程可描述如下:
(3)
其中,f代表红外原图像,f b 为红外背景估计图像,f T 是红外复杂背景抑制的结果图像。
基于BP神经网络的红外小目标检测:
在本发明的设计中,BP神经网络采用单隐层的三层前向网络,主要包括输入层、隐层和输出层。假定待检测图像为f(x,y),考虑到背景抑制后待检测目标在图像中呈现为亮点区域的特点,本发明归纳了以像素点为中心的6个特征作为神经网络的输入,即网络输入层节点个数为6:灰度值A1、水平梯度A2、垂直梯度A3、对角梯度A4、邻域均值A5、邻域方差A6。所有梯度均为1阶,邻域大小取3*3。其中梯度信息表达如下:
(4)
(5)
(6)
网络输出神经元个数为1,表示当前像素属于目标1或背景0。取识别误差为0.5,输出在0.5~1之间认为是目标点,0~0.5之间则是背景点。
隐层节点个数一般满足: (7)
t和r分别是输入、输出层神经元个数,本发明分别取6和1。一般为1~10之间的常数,本发明取6,隐层为8个节点。
隐层和输出层的激励函数选择logsig函数:
(8)
对红外空中100帧图像按照自适应结构元素灰度形态学变换进行背景抑制,原始图像序列其中6帧如图1所示。考虑到小目标的实际大小范围和红外实时成像应用中的导航信息,按照红外图像探测器成像投影模型,,将原图像按照7*7邻域进行划分,当邻域均值和方差比值大于全局值时,认为其为候选目标区域。对所有候选区域计算最大矩形包围盒边长作为结构元素的尺寸。如果设置的初始图像划分尺寸如7*7找不到候选目标区域,则减少划分尺寸继续在图像中遍历。初始图像的划分尺寸设置上限和下限(本测试尺寸3*3),如在划分尺寸下限仍没有找到候选目标区域,则以该下限值作为结构元素尺寸。通过灰度形态学变换,可以保留所有尺寸大于结构元素的背景信息。图1的背景抑制结果如图2所示。
通过局部信噪比增益(Local Signal-to-Noise Ratio Gain)和背景抑制系数(Background Suppression Factor)两个指标定量衡量背景抑制效果:
(9)
(10)
其中,s代表目标信号的幅度,u为区域均值,、代表输入、输出图像的标准差。SNRG l 衡量算法对目标信号的保留程度,BSF代表算法对背景的抑制程度。区域大小取50*50。
本发明背景抑制方法与两种空域高通滤波器的局部信噪比增益、背景抑制系数比较见表1和表2。高通滤波器表达式如(11)式。
表1 局部信噪比增益
表2 背景抑制比
(11)
从经过自适应结构元素灰度形态学变换进行背景抑制的空中红外视频100帧中选择20帧典型图像,涵盖目标位于云背景外和云背景中两类情况。每帧图像取包括目标和背景的样本点50个,一共1000个样本对BP神经网络进行训练。其余80帧作为测试图像。部分样本如表3所示。
表3 部分训练样本
BP算法的一个主要缺陷为网络训练过程中可能陷入局部最优而不能达到全局最优。鉴于这种情况,本发明采用动态学习率。如当前总误差与上次总误差小于某阈值时,增大学习率,跳出局部最优,反之则减小学习率。网络的初始权值在0.1~0.4范围内随机取得,初始学习率取0.5。网络训练次数为2000次,训练目标误差阈值为10-3。
图3表示BP神经网络随机计算过程中的误差收敛曲线。图中所示训练达到378次时,达到训练目标误差要求。表4表示15个样本的测试结果。由表4可看出,测试结果达到预期,目标和背景像素点得到正确区分。
表4 测试数据检测结果
对其余80帧红外空中图像进行测试,全部实现成功检测。其中三帧的处理结果如图4所示。图中以检测到的目标像素的几何中心生成波门框。
为进一步验证本发明,另选用海面和地面背景两组图像序列进行测试,每个序列包含图像100帧,本发明全部实现成功检测。两个图像序列各取其中三帧的检测结果如图5和图6所示。
针对远距离复杂背景下的红外弱小目标检测问题,本发明提出了一种结合自适应结构元素的灰度形态学变换和BP神经网络的智能化检测方法。该发明基于灰度形态学开运算进行红外复杂背景估计,其中结构元素的大小通过统计候选目标区域来确定。随后,利用原图像与背景估计图像的差影实现红外复杂背景抑制和小目标预检测。在此基础上,通过统计目标像素和背景像素的统计特征,对BP神经网络进行离线训练,形成图像像素特征与目标或背景的非线性输入输出关系,最终实现红外复杂背景下的小目标在线检测。实验结果表明,发明方法在复杂背景抑制方面具有明显的优势,能够实现复杂背景下的红外弱小目标智能化检测。
Claims (1)
1.一种智能化的小目标检测方法,其特征在于:包括以下步骤:
S1、综合通过侦查手段获得的目标实际物理大小和红外实时成像应用中的导航信息,按照红外图像探测器成像投影模型,初步确定目标区域大小,将红外原图像划分成若干子图像;
S2、计算每一子图像区域的灰度均值和方差,并计算均值与方差之比,如果比值大于整帧图像的全局值则该子区域为候选目标区域,并标记该区域,对所有候选目标区域统计目标的八连通区域,计算各自的矩形包围盒,以矩形的最大边长作为灰度形态学结构元素大小;
S3、背景抑制:基于步骤S2确定的结构元素大小,利用灰度形态学开运算,实现红外复杂背景的估计,得到背景估计图像,将原图像与背景估计图像做差影,实现红外复杂背景抑制并突出待检测小目标;
S4、红外小目标特征提取:对经过灰度形态学变换背景抑制的红外图像计算像素的灰度、水平梯度、垂直梯度、对角梯度、邻域均值和方差六个量作为红外小目标特征;
S5、BP神经网络红外小目标检测:以红外小目标特征作为输入,像素类别为输出,构造三层BP神经网络,BP神经网络的隐层节点计算公式为:
t和r分别是输入、输出层神经元节点个数,为1~10之间的常数,经过大样本训练后,形成背景抑制后的图像像素特征与目标或背景的非线性输入输出关系,实际应用时,将背景抑制后的图像像素特征输入BP神经网络,得到目标或背景的检测结果,进而实现红外复杂背景下的小目标在线智能化检测。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510222607.9A CN104899866B (zh) | 2015-05-05 | 2015-05-05 | 一种智能化的红外小目标检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510222607.9A CN104899866B (zh) | 2015-05-05 | 2015-05-05 | 一种智能化的红外小目标检测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104899866A CN104899866A (zh) | 2015-09-09 |
CN104899866B true CN104899866B (zh) | 2018-03-30 |
Family
ID=54032511
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510222607.9A Expired - Fee Related CN104899866B (zh) | 2015-05-05 | 2015-05-05 | 一种智能化的红外小目标检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104899866B (zh) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105869156B (zh) * | 2016-03-25 | 2018-07-17 | 中国科学院武汉物理与数学研究所 | 一种基于模糊距离的红外小目标检测方法 |
CN106599828A (zh) * | 2016-12-09 | 2017-04-26 | 上海电机学院 | 一种基于roi的红外图像检测方法 |
CN108898573B (zh) * | 2018-04-23 | 2021-11-02 | 西安电子科技大学 | 基于多方向环形梯度法的红外小目标快速提取方法 |
CN108629378A (zh) * | 2018-05-10 | 2018-10-09 | 上海鹰瞳医疗科技有限公司 | 图像识别方法和设备 |
CN109102003B (zh) * | 2018-07-18 | 2020-07-10 | 华中科技大学 | 一种基于红外物理特征融合的小目标检测方法和系统 |
CN109544535B (zh) * | 2018-11-26 | 2022-06-24 | 马杰 | 一种基于红外截止滤镜光学滤波特性的窥视摄像头检测方法及系统 |
CN109800637A (zh) * | 2018-12-14 | 2019-05-24 | 中国科学院深圳先进技术研究院 | 一种遥感影像小目标检测方法 |
US11346938B2 (en) | 2019-03-15 | 2022-05-31 | Msa Technology, Llc | Safety device for providing output to an individual associated with a hazardous environment |
CN110223344B (zh) * | 2019-06-03 | 2023-09-29 | 哈尔滨工程大学 | 一种基于形态学和视觉注意机制的红外小目标检测方法 |
CN110490904B (zh) * | 2019-08-12 | 2022-11-11 | 中国科学院光电技术研究所 | 一种弱小目标检测与跟踪方法 |
CN110765631B (zh) * | 2019-10-31 | 2023-03-14 | 中国人民解放军95859部队 | 基于有效成像像素的红外辐射特性测量小目标判断方法 |
CN110619373B (zh) * | 2019-10-31 | 2021-11-26 | 北京理工大学 | 一种基于bp神经网络的红外多光谱微弱目标检测方法 |
CN112070786B (zh) * | 2020-07-17 | 2023-11-24 | 中国人民解放军63892部队 | 一种警戒雷达ppi图像目标和干扰提取方法 |
CN113537253B (zh) * | 2021-08-23 | 2024-01-23 | 北京环境特性研究所 | 一种红外图像目标检测方法、装置、计算设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1482573A (zh) * | 2003-07-24 | 2004-03-17 | 上海交通大学 | 基于旋转不变形态学神经网络的红外目标识别方法 |
CN1870051A (zh) * | 2006-06-29 | 2006-11-29 | 上海交通大学 | 基于神经网络和形态学的红外弱小目标单帧检测方法 |
CN101275870A (zh) * | 2008-05-12 | 2008-10-01 | 北京理工大学 | 一种红外热像仪mrtd客观评测方法 |
CN102496016A (zh) * | 2011-11-22 | 2012-06-13 | 武汉大学 | 一种基于时空协同框架的红外目标检测方法 |
CN103761731A (zh) * | 2014-01-02 | 2014-04-30 | 河南科技大学 | 一种基于非下采样轮廓波变换的红外空中小目标检测方法 |
-
2015
- 2015-05-05 CN CN201510222607.9A patent/CN104899866B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1482573A (zh) * | 2003-07-24 | 2004-03-17 | 上海交通大学 | 基于旋转不变形态学神经网络的红外目标识别方法 |
CN1870051A (zh) * | 2006-06-29 | 2006-11-29 | 上海交通大学 | 基于神经网络和形态学的红外弱小目标单帧检测方法 |
CN101275870A (zh) * | 2008-05-12 | 2008-10-01 | 北京理工大学 | 一种红外热像仪mrtd客观评测方法 |
CN102496016A (zh) * | 2011-11-22 | 2012-06-13 | 武汉大学 | 一种基于时空协同框架的红外目标检测方法 |
CN103761731A (zh) * | 2014-01-02 | 2014-04-30 | 河南科技大学 | 一种基于非下采样轮廓波变换的红外空中小目标检测方法 |
Non-Patent Citations (4)
Title |
---|
Neural-network-based single-frame detection of dim spot target in infrared images;Peng Zhang 等;《Optical Engineering》;20070718;第076401-1至076401-11页 * |
用顶帽变换估计并消除图像背景;陈箫枫 等;《微计算机信息》;20080325;第24卷(第3-3期);第310页第1.1节 * |
空域-小波域联合滤波的红外复杂背景抑制;刘刚 等;《电光与控制》;20150420;正文第3页左栏第1-2段、第4页第3节图1、第7页第5节第1段 * |
红外图像目标识别及跟踪技术研究;郭婉露;《中国优秀硕士学位论文全文数据库 信息科技辑》;20120615;摘要、正文第31页4.2.2.1节第2段、第40页第1段、第43页第2-3段 * |
Also Published As
Publication number | Publication date |
---|---|
CN104899866A (zh) | 2015-09-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104899866B (zh) | 一种智能化的红外小目标检测方法 | |
CN113065558B (zh) | 一种结合注意力机制的轻量级小目标检测方法 | |
CN107818326B (zh) | 一种基于场景多维特征的船只检测方法及系统 | |
CN109522857B (zh) | 一种基于生成式对抗网络模型的人数估计方法 | |
CN103886344B (zh) | 一种图像型火灾火焰识别方法 | |
CN104537647B (zh) | 一种目标检测方法及装置 | |
CN105404894B (zh) | 无人机用目标追踪方法及其装置 | |
CN109902715B (zh) | 一种基于上下文聚合网络的红外弱小目标检测方法 | |
CN108596108B (zh) | 基于三元组语义关系学习的航拍遥感图像变化检测方法 | |
CN110298297B (zh) | 火焰识别方法和装置 | |
CN107229929A (zh) | 一种基于r‑cnn的车牌定位方法 | |
CN107403134B (zh) | 基于局部梯度三边的图域多尺度红外弱小目标检测方法 | |
CN104834915B (zh) | 一种复杂云天背景下小红外目标检测方法 | |
CN104036250B (zh) | 视频行人检测与跟踪方法 | |
CN110766058B (zh) | 一种基于优化rpn网络的战场目标检测方法 | |
CN104794737B (zh) | 一种深度信息辅助粒子滤波跟踪方法 | |
CN107220603A (zh) | 基于深度学习的车辆检测方法及装置 | |
CN106023257A (zh) | 一种基于旋翼无人机平台的目标跟踪方法 | |
CN112560619B (zh) | 一种基于多聚焦图像融合的多距离鸟类精准识别方法 | |
CN109215018A (zh) | 基于Canny算子和高斯形态学的船舶检测方法 | |
CN108280412A (zh) | 基于变结构cnn的高分辨sar图像目标检测方法 | |
CN110533025A (zh) | 基于候选区域提取网络的毫米波人体图像检测方法 | |
CN110163157A (zh) | 一种利用新型损失函数进行多人姿态估计的方法 | |
CN110348434A (zh) | 相机来源鉴别方法、系统、存储介质和计算设备 | |
CN108614998A (zh) | 一种单像素红外目标检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180330 Termination date: 20200505 |