CN113487525B - 一种基于双平台直方图的自迭代红外图像增强方法 - Google Patents

一种基于双平台直方图的自迭代红外图像增强方法 Download PDF

Info

Publication number
CN113487525B
CN113487525B CN202110765363.4A CN202110765363A CN113487525B CN 113487525 B CN113487525 B CN 113487525B CN 202110765363 A CN202110765363 A CN 202110765363A CN 113487525 B CN113487525 B CN 113487525B
Authority
CN
China
Prior art keywords
value
pixel point
infrared image
pixel
element group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110765363.4A
Other languages
English (en)
Other versions
CN113487525A (zh
Inventor
袁航
魏凌飞
朱伟锋
王轩
葛海水
马超
司凯旋
吴晓栋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Henan Huilian Shian Information Technology Co ltd
Original Assignee
Henan Huilian Shian Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Henan Huilian Shian Information Technology Co ltd filed Critical Henan Huilian Shian Information Technology Co ltd
Priority to CN202110765363.4A priority Critical patent/CN113487525B/zh
Publication of CN113487525A publication Critical patent/CN113487525A/zh
Application granted granted Critical
Publication of CN113487525B publication Critical patent/CN113487525B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/40Image enhancement or restoration by the use of histogram techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation

Abstract

本发明公开了一种基于双平台直方图的自迭代红外图像增强方法,包括以下步骤:A:获取原始红外图像;B:计算熵值和熵值比临界值;C:得到降序列表;D:确定前序元素组和后续元素组;E:计算出当前上限阈值和当前下限阈值;F:计算得出均衡化后的熵值;G:计算出当前熵值比系数;H:若当前熵值比系数大于等于熵值比临界值进入步骤L,否则进入步骤I;I:若迭代次数小于终止迭代次数进入步骤J,等于进入步骤M;J:若当前熵值比系数大于熵值比系数则对前序元素组进行扩充,小于等于则对后续元素组扩充;K:返回步骤E;L:输出当前熵值为
Figure DEST_PATH_IMAGE002
的红外图像;M:输出当前熵值为
Figure DEST_PATH_IMAGE004
的红外图像。本发明能够有效地增强红外图像。

Description

一种基于双平台直方图的自迭代红外图像增强方法
技术领域
本发明涉及一种图像处理领域,尤其涉及一种基于双平台直方图的自迭代红外图像增强方法。
背景技术
随着我国经济的快速发展,社会的安全稳定运行显得尤为重要,国家对于各类灾情事故的预防与及时处理极为重视。
火灾是一种极易发生的事故,会导致巨大的人员伤亡和财产损失。在消防人员进行消防救援时,对火灾现场的情况掌握至关重要,直接影响到是否能够及时扑灭火灾,降低损失。由于火灾现场中存在着大量烟雾粒子,而烟雾粒子的直径大于可见光波长且对于可见光是不透明的,因此直接导致火灾现场能见度过低,使得一般的摄像头在火灾现场无法清楚的记录火灾的内部情况。而近些年,随着红外技术的发展,红外成像技术在科学领域和安防领域都发挥着重要的作用,可以利用红外技术去实时了解火灾现场的内部情况。例如,可以在无人机上安装红外摄像头,把火灾现场的实时图像数据传输至指挥中心,从而为查找着火点、计算着火面积和寻找被困人员提供有力的数据支持。
红外图像与可见图像相比,普遍存在着目标与背景对比度低、分辨率低、边缘模糊和噪声较大等缺点。在众多的图像增强算法中,直方图均衡化法是一种常用的红外图像对比度增强算法,它主要是基于图像直方图的灰度分布情况进行灰度级的调整,从而达到较为理想的增强效果。直方图均衡化法对图像的整体对比度增强有很强的效果,但如果直接采用直方图均衡化方法对图像进行增强处理,有可能导致图像中占据大多数像素灰度的背景和噪声等无用信息过度放大的现象,反而将图像中占有少量像素灰度的目标和边缘细节等有用信息过分抑制从而变得模糊,甚至出现目标丢失的现象,从而造成目标和细节的对比度降低而背景和噪声的对比度提高的现象。因此,传统的直方图均衡并不完全适用于红外图像的增强。
现有的平台直方图均衡算法对直方图均衡算法实现了一定程度的修正,它对图像的统计直方图设置一个上限平台阈值,对直方图中大于上限平台的灰度作出钳制,由此对图像中占据大量像素的背景灰度进行相对抑制,同时给图像中的目标细节留出了提升空间。但是,上限平台阈值的确定较为困难,若平台阈值过高会失去对背景和噪声的抑制作用,若平台阈值过低又会导致图像亮度过暗、对比度提高不理想等众多问题。
现有的双平台直方图均衡算法对平台直方图均衡算法的一种修正算法,它首先对图像进行直方图统计,然后针对该统计直方图设置两个较为合适的平台值T1和T2,分别作为上限平台和下限平台,然后在根据这两个平台值对统计直方图进行修改。常用的阈值选取原则是上限平台阈值设定红外图像总像素的20%~30%,而下限平台阈值设定为总像素的5%~10%。现有的双平台直方图均衡算法中,阈值的计算仅与像素数量有关,而与图像内容无关,使得该算法适应性较差。
发明内容
本发明的目的是提供一种基于双平台直方图的自迭代红外图像增强方法,能够有效地增强红外图像中占有少量像素灰度的目标和边缘细节等有用信息,同时对红外图像中占据大量像素的背景灰度进行有效抑制。
本发明采用下述技术方案:
一种基于双平台直方图的自迭代红外图像增强方法,包括以下步骤:
A:首先获取原始红外图像,并将获取的原始红外图像转化为该原始红外图像对应的像素分布直方图;然后进入步骤B;
B:根据获取的像素分布直方图,计算出原始红外图像的熵值H0和熵值比临界值V,并将熵值H0作为当前最大熵值Hbig,即Hbig=H0;然后进入步骤C;
其中,熵值的计算公式为:H=-∑agPag lnPag
熵值比临界值的计算公式为:
Figure GDA0003632053040000031
熵值H0中的下角标表示未经迭代的第0次,Pag表示原始红外图像中像素点对应的特征二元组(a,g)出现的概率,
Figure GDA0003632053040000032
f(a,g)表示原始红外图像中像素点对应的特征二元组(a,g)出现的频数,W为原始红外图像的宽度,J为原始红外图像的高度;原始红外图像中像素点对应的特征二元组(a,g)中,a为图像中该像素点的像素值,g为图像中该像素点的邻域梯度值;e为自然对数,Q为图像质量系数,
Figure GDA0003632053040000033
N(T)表示原始红外图像中像素值的数量大于等于每个灰度值理想上最优数量Nexp的像素点的数量,T表示原始红外图像中像素值的数量大于等于每个灰度级理想上最优数量Nexp的像素点,M表示红外图像的灰度级阶数;
C:根据获取的像素分布直方图,对每个灰度阶数在直方图中的数量进行降序排序,得到降序列表A;然后进入步骤D;
A=[N(X1),N(X2),......,N(Xn)];
其中,Xn表示原始红外图像中的像素点且该像素点所对应的灰度阶数在直方图中数量最少,N(Xn)表示像素点Xn在像素分布直方图中的数量,N(X1)>N(X2)>…>N(Xn);n为自然数;
D:在降序列表A中从前至后取前U个元素作为前序元素组,从后至前取后D个元素作为后续元素组;设熵值比系数Rold的初始值为0,迭代次数m的初始值为0,改进方向C的初始值为up;然后进入步骤E;
其中,改进方向C包括up和down两个方向,C=up表示仅从降序列表A中前序元素组内最后一个元素向后逐个进行扩充,改进方向C=down表示仅从降序列表A中后续元素组内第一个元素向前逐个进行扩充;
E:根据确定的前序元素组和后续元素组,分别计算出当前上限阈值Tup和当前下限阈值Tdown;然后进入步骤F;
Figure GDA0003632053040000041
Figure GDA0003632053040000042
其中,[]表示取整操作,Medianup表示前序元素组的中位数,Meanup表示前序元素组的均值;N(Xi)表示前序元素组中的第i个像素点Xi在像素分布直方图中的数量,1≤i≤U-1;σ1表示前序元素组中元素的标准差;Mediandown表示后序元素组的中位数,Meandown表示后序元素组的均值;N(Xj)表示后序元素组中的第j个像素点Xj在像素分布直方图中的数量,1≤j≤D-1,σ2表示后序元素组中元素的标准差;
F:利用步骤E中计算得到的当前上限阈值Tup和当前下限阈值Tdown,使用双平台直方图均衡算法对原始红外图像进行计算,得出均衡化后的原始红外图像的熵值Hnew;然后进入步骤G;
G:根据原始红外图像的熵值H0和均衡化后的熵值Hnew,计算出当前熵值比系数Rnew;然后进入步骤H;
Figure GDA0003632053040000043
H:判断当前熵值比系数Rnew是否大于熵值比临界值V;若Rnew≥V,则进入步骤L;若Rnew<V,则进入步骤I;
I:判断迭代次数m是否小于设定的终止迭代次数ms,若m<ms,则进入步骤J;若m=ms,则进入步骤M;
其中,ms≥1;ms中下角标s为stop的首字母缩写;
J:判断当前熵值比系数Rnew是否大于熵值比系数Rold
若Rnew>Rold,则将当前最大熵值Hbig更新为均衡化后的熵值Hnew,即Hbig=Hnew;然后依然将当前的改进方向C=up作为最新改进方向Cnew,即Cnew=C=up,然后将降序列表A中前序元素组内最后一个元素的下一个元素纳入前序元素组中,即将降序列表A中正数第U+1个元素纳入前序元素组中,对前序元素组向后进行扩充;在首次迭代时Rold的初始值为0;在后续迭代过程中,下一次迭代时的Rold为本次迭代时的Rnew
若Rnew≤Rold,则保持当前最大熵值Hbig的值不变;然后将当前的改进方向C=up的反方向作为最新改进方向Cnew,即Cnew=Inv(C)=down,然后将降序列表A中后续元素组内第一个元素的前一个元素纳入后序元素组中,即将降序列表A中倒数第D+1个元素纳入后序元素组中,对后序元素组向前进行扩充;在首次迭代时Rold的初始值为0;在后续迭代过程中,下一次迭代时的Rold依然为本次迭代时的Rold
在对前序元素组或后序元素组完成扩充后,进入步骤K;
K:根据步骤J中得到的扩充后的前序元素组或后序元素组,返回步骤E重新计算当前上限阈值Tup和当前下限阈值Tdown;此时迭代次数m的数值加1;
L:输出当前熵值为Hnew的红外图像;
M:输出当前熵值为Hbig的红外图像。
所述的步骤B中,图像中像素点的邻域梯度值的计算方法如下:
a:对于图像中的像素点P,设像素点P的坐标为(u,v),像素点P的邻域为以像素点P为中心且与像素点P相邻的像素点,像素点P的邻域的坐标分别为(u-1,v-1)、(u,v-1)、(u+1,v-1)、(u-1,v)、(u+1,v)、(u-1,v+1)、(u,v+1)、(u+1,v+1);
b:计算像素点P及其邻域在x轴方向的梯度并进行绝对值求和;
在计算像素点P及其8个邻域在x轴方向的梯度时,均使用x轴方向上位于该像素点左侧的像素点的像素值减去该像素点的像素值,将结果作为该像素点在x轴方向的梯度;
然后,将像素点P及其8个邻域在x轴方向的梯度的绝对值进行求和,记为
Figure GDA0003632053040000051
c:计算像素点P及其邻域在y轴方向的梯度并进行绝对值求和;
在计算像素点P及其8个邻域在y轴方向上的梯度时,均使用y轴方向上位于该像素点下侧的像素点的像素值减去该像素点的像素值,将结果作为该像素点在y轴方向的梯度;
然后,将像素点P及其8个邻域在y轴方向的梯度的绝对值进行求和,记为
Figure GDA0003632053040000061
d:利用公式
Figure GDA0003632053040000062
最终求得图像中的像素点P的邻域梯度值g,r=3,s=3,[]表示取整操作;当图像中的像素点P的邻域中像素点小于8个时,即像素点P位于图像的边缘时,将缺少的像素点的像素值用0填充,即缺少的像素点的像素值为0。
所述的步骤D中,U=D=10。
所述步骤I中,ms=20。
所述的步骤B中,
Figure GDA0003632053040000063
其中,W和J分别为红外图像的宽度和高度,M为红外图像的灰度级阶数,Nexp为该红外图像中每个灰度值理想上的最优值。
首先,本发明引入了能够表达红外图像周围梯度变化的二维梯度熵,作为确定上限平台和下限平台阈值的因素之一,以克服现有技术中仅利用红外图像中像素数量确定阈值的弊端,能够充分利用红外图像的空间特征,准确可靠的表达红外图像中的相关信息,从而准确确定上限平台和下限平台阈值。
然后,本发明通过设立熵值比系数,通过优化前后两幅红外图像的熵值的实时对比来确定图像增强效果,再依据熵值比系数来确定前序元素组和后续元素组中元素的数量,从而达到准确确定的上限阈值和下限阈值的目的,进而保证红外图像的增强效果。
其次,本发明通过设置基于图像像素值分布的图像质量系数Q来表达图像质量,利用图像质量系数Q来确定熵值比临界值V,使得质量差的图像有较高的临界值,而质量高的图像有较低的临界值,从而确保输出的图像质量。
最后,本发明还通过设定合理的迭代次数,保证本申请既能够获得较高的图像增强效果,又能够有效缩短获取结果的时间。
附图说明
图1为本发明的流程示意图;
图2为增强前的红外图像;
图3为增强后的红外图像。
具体实施方式
以下结合附图和实施例对本发明作以详细的描述:
如图1至图3所示,本发明所述的基于双平台直方图的自迭代红外图像增强方法,包括以下步骤:
A:首先获取原始红外图像,并将获取的原始红外图像转化为该原始红外图像对应的像素分布直方图;然后进入步骤B;
B:根据获取的像素分布直方图,计算出原始红外图像的熵值H0和熵值比临界值V,并将熵值H0作为当前最大熵值Hbig,即Hbig=H0;然后进入步骤C;
在计算原始红外图像的熵值H0时,使用下述公式:
R=-∑agPag lnPag
其中,熵值H0中的下角标数字0表示未经迭代的第0次,也称为第0次迭代;Pag表示原始红外图像中像素点对应的特征二元组(a,g)出现的概率,
Figure GDA0003632053040000071
f(a,g)表示原始红外图像中像素点对应的特征二元组(a,g)出现的频数,W为原始红外图像的宽度,J为原始红外图像的高度;原始红外图像中像素点对应的特征二元组(a,g)中,a为图像中该像素点的像素值,g为图像中该像素点的邻域梯度值;
计算原始红外图像的熵值H0时,按照上述方法,分别计算得到原始红外图像中各个像素点对应的特征二元组(a,g),然后依据原始红外图像的熵值的计算公式,计算出计算原始红外图像的熵值H0
在计算原始红外图像的熵值比临界值V时,使用下述公式:
Figure GDA0003632053040000072
其中,e为自然对数,Q为图像质量系数,
Figure GDA0003632053040000073
N(T)表示原始红外图像中像素值的数量大于等于每个灰度值理想上最优数量Nexp的像素点的数量,T表示原始红外图像中像素值的数量大于等于每个灰度级理想上最优数量Nexp的像素点,M表示红外图像的灰度级阶数;
本发明中,图像中像素点的邻域梯度值的计算方法如下:
a:对于图像中的像素点P,设像素点P的坐标为(u,v),像素点P的邻域为以像素点P为中心且与像素点P相邻的像素点,像素点P的邻域的坐标分别为(u-1,v-1)、(u,v-1)、(u+1,v-1)、(u-1,v)、(u+1,v)、(u-1,v+1)、(u,v+1)、(u+1,v+1);
b:计算像素点P及其邻域在x轴方向的梯度并进行绝对值求和;
在计算像素点P及其8个邻域在x轴方向的梯度时,均使用x轴方向上位于该像素点左侧的像素点的像素值减去该像素点的像素值,将结果作为该像素点在x轴方向的梯度;
然后,将像素点P及其8个邻域在x轴方向的梯度的绝对值进行求和,记为
Figure GDA0003632053040000081
c:计算像素点P及其邻域在y轴方向的梯度并进行绝对值求和;
在计算像素点P及其8个邻域在y轴方向上的梯度时,均使用y轴方向上位于该像素点下侧的像素点的像素值减去该像素点的像素值,将结果作为该像素点在y轴方向的梯度;
然后,将像素点P及其8个邻域在y轴方向的梯度的绝对值进行求和,记为
Figure GDA0003632053040000082
d:利用公式
Figure GDA0003632053040000083
最终求得图像中的像素点P的邻域梯度值g,r=3,s=3,[]表示取整操作,即取出结果中的整数部分。
r和s分别为用于确定像素点P在x轴方向和y轴方向上邻域像素点范围的数值,当像素点P的邻域的范围为以像素点P为中心的8个像素点时,r=3,即像素点P的邻域的x轴坐标范围为像素点P的x轴坐标减1至x轴坐标加1共3列;s=3,即像素点P的邻域的y轴坐标的范围为像素点P的y轴坐标减1至y轴坐标加1共3行。
当图像中的像素点P的邻域中像素点小于8个时,即像素点P位于图像的边缘时,将缺少的像素点的像素值用0填充,即缺少的像素点的像素值为0。
C:根据获取的像素分布直方图,对每个灰度阶数在直方图中的数量进行降序排序,得到降序列表A;然后进入步骤D;
A=[N(X1),N(X2),......,N(Xn)];
其中,Xn表示原始红外图像中的像素点且该像素点所对应的灰度阶数在直方图中数量最少,N(Xn)表示像素点Xn在像素分布直方图中的数量,N(X1)>N(X2)>…>N(Xn);n为自然数;
D:在降序列表A中从前至后取前U个元素作为前序元素组,从后至前取后D个元素作为后续元素组;设熵值比系数Rold的初始值为0,迭代次数m的初始值为0,改进方向C的初始值为up;然后进入步骤E;
本发明中,改进方向C包括up和down两个方向,C=up表示仅从降序列表A中前序元素组内最后一个元素向后逐个进行扩充,即仅从降序列表A中正数第U个元素向后逐个进行扩充,改进方向C=down表示仅从降序列表A中后续元素组内第一个元素向前逐个进行扩充,即仅从降序列表A中倒数第D个元素向前逐个进行扩充;
E:根据确定的前序元素组和后续元素组,分别计算出当前上限阈值Tup和当前下限阈值Tdown;然后进入步骤F;
Figure GDA0003632053040000091
Figure GDA0003632053040000092
其中,[]表示取整操作,Medianup表示前序元素组的中位数,Meanup表示前序元素组的均值;N(Xi)表示前序元素组中的第i个像素点Xi在像素分布直方图中的数量,1≤i≤U-1;σ1表示前序元素组中元素的标准差;Mediandown表示后序元素组的中位数,Meandown表示后序元素组的均值;N(Xj)表示后序元素组中的第j个像素点Xj在像素分布直方图中的数量,1≤/≤D-1,σ2表示后序元素组中元素的标准差;
F:利用步骤E中计算得到的当前上限阈值Tup和当前下限阈值Tdown,使用双平台直方图均衡算法对原始红外图像进行计算,得出均衡化后的原始红外图像的熵值Hnew;然后进入步骤G;
双平台直方图均衡算法为本领域常规技术,在此不再赘述。
G:根据原始红外图像的熵值H0和均衡化后的熵值Hnew,计算出当前熵值比系数Rnew;然后进入步骤H;
Figure GDA0003632053040000101
H:判断当前熵值比系数Rnew是否大于熵值比临界值V;若Rnew≥V,则进入步骤L;若Rnew<V,则进入步骤I;
I:判断迭代次数m是否小于设定的终止迭代次数ms,若m<ms,则进入步骤J;若m=ms,则进入步骤M;
其中,ms≥1;ms中下角标s为stop的首字母缩写;
J:判断当前熵值比系数Rnew是否大于熵值比系数Rold
若Rnew>Rold,则将当前最大熵值Hbig更新为均衡化后的熵值Hnew,即Hbig=Hnew;然后依然将当前的改进方向C=up作为最新改进方向Cnew,即Cnew=C=up,然后将降序列表A中前序元素组内最后一个元素的下一个元素纳入前序元素组中,即将降序列表A中正数第U+1个元素纳入前序元素组中,对前序元素组向后进行扩充;在首次迭代时Rold的初始值为0;在后续迭代过程中,下一次迭代时的Rold为本次迭代时的Rnew
若Rnew≤Rold,则保持当前最大熵值Hbig的值不变;然后将当前的改进方向C=up的反方向作为最新改进方向Cnew,即Cnew=Inv(C)=down,然后将降序列表A中后续元素组内第一个元素的前一个元素纳入后序元素组中,即将降序列表A中倒数第D+1个元素纳入后序元素组中,对后序元素组向前进行扩充;在首次迭代时Rold的初始值为0;在后续迭代过程中,下一次迭代时的Rold依然为本次迭代时的Rold
在对前序元素组或后序元素组完成扩充后,进入步骤K;
K:根据步骤J中得到的扩充后的前序元素组或后序元素组,返回步骤E重新计算当前上限阈值Tup和当前下限阈值Tdown;此时迭代次数m的数值加1;
L:输出当前熵值为Hnew的红外图像;
M:输出当前熵值为Hbig的红外图像。
本发明中,可根据所获取的降序列表A,分别设置前序元素组中元素的个数U和后续元素组中元素的个数D;U和D的取值可以相同,也可以不同。本实施例中,U=D=10。
首先,现有的双平台直方图均衡算法在对红外图像进行均衡化处理时,需要对原始红外图像进行转化从而得到像素分布直方图,再利用像素分布直方图确定上限平台和下限平台的阈值,最后再利用所确定的上限平台和下限平台的阈值进行图像优化处理。而针对双平台直方图均衡算法中上限平台和下限平台阈值确定的现有方法,普遍是将上限平台阈值设定为红外图像总像素的20%~30%,将下限平台阈值设定为红外图像总像素的5%~10%,阈值的计算仅与像素数量有关,而与红外图像内容无关,使得该算法适应性较差。
据此,本发明引入了能够表达红外图像周围梯度变化的二维梯度熵,作为确定上限平台和下限平台阈值的因素之一,以克服现有技术中仅利用红外图像中像素数量确定阈值的弊端。
红外图像的熵值是一种特征的统计形式,它反映了红外图像中平均信息量的多少。现有技术中,红外图像的一维熵表示图像中灰度分布的聚集特征所包含的信息量。但无法反映出红外图像周围梯度变化的空间特征。而梯度空间特征则能够反应出图像像素值与周围像素点的整体变化趋势,有利于空间灰度分布变化趋势的展示。因此,为了表征空间特征,本发明在一维熵的基础上设立了能够反映红外图像周围梯度变化空间特征的二维梯度熵。
在进行像素点P的特征二元组(i,g)的计算时,设像素点P的坐标为(3,3),像素值为27,像素点P的邻域的坐标分别为(2,2)、(3,2)、(4,2)、(2,3)、(4,3)、(2,4)、(3,4)、(4,4);其各个像素点对应的像素值如下表所示:
20 46 55 8 124
33 44 43 54 12
43 23 27 66 12
34 34 178 190 201
222 221 21 23 34
则,像素点P及其邻域在x轴方向的梯度分别如下表所述:
11 -1 11
-20 4 39
0 144 12
像素点P及其邻域在y轴方向的梯度分别如下表所述:
-2 -12 46
-21 -16 12
11 151 124
最终,根据邻域梯度值计算公式求得图像中的像素点P(3,3)的邻域梯度值为36,像素点P(3,3)的特征二元组为(27,36)。
本发明中,选取红外图像中某一像素点的邻域梯度值作为灰度分布的空间特征量,与红外图像中该像素点的像素灰度组成特征二元组(i,g);将特征二元组(i,g)作为确定原始红外图像熵值H0的因素之一,能够充分利用红外图像的空间特征,准确可靠的表达红外图像中的相关信息,从而准确确定上限平台和下限平台阈值。
其次,现有的双平台直方图均衡算法中,均依据上限平台阈值将像素数大于该上限平台阈值的灰度级像素重新设置将其钳制在该上限平台。因此可以看出,上限平台阈值主要作用于大于该上限平台阈值的灰度级像素,也就是说影响上限平台阈值大小的因素就是像素分布直方图中灰度阶数较大的元素。同理,影响下限平台阈值大小的因素就是像素分布直方图中灰度阶数较小的元素。而根据上限平台阈值和下限平台阈值的计算公式可以看出,当前上限阈值Tup和当前下限阈值Tdown的大小,直接取决于在降序列表A选择的前序元素组和后续元素组中元素的数量。且经分析发现,随着前序元素组和后续元素组中元素的数量的变化,红外图像熵值的变化并不是单调递增或者单调递减的形式。因此,确定最优的前序元素组和后续元素组中元素的数量,将直接影响到上限阈值和下限阈值的准确率。简单的确定前序元素组和后续元素组中元素的数量固定不变,或者简单的确定前序元素组和后续元素组中元素的数量为递增或递减,都无法获得准确的上限阈值和下限阈值。
据此,本发明通过设立熵值比系数,通过优化前后两幅红外图像的熵值的实时对比来确定图像增强效果,再依据熵值比系数来确定前序元素组和后续元素组中元素的数量。即本发明中通过能够实时反映优化前后两幅红外图像增强效果的熵值比系数,来选择是对前序元素组中元素的数量进行扩充,或是对后续元素组中元素的数量进行扩充,同时通过多次迭代计算,确定前序元素组和后续元素组所扩充的元素数量,从而达到准确确定的上限阈值和下限阈值的目的,进而保证红外图像的增强效果。
最后,根据熵值比系数的计算公式
Figure GDA0003632053040000131
可以看出,若优化后的红外图像与优化前的红外图像的熵值相同,则熵值比系数Rnew=1;随着前序元素组或后续元素组中元素的数量的不断变化,熵值Hnew的数值在不断变化,从理论上而言,熵值Hnew的值越大越好。但实际处理中如果把红外图像中每个灰度级级数都计算一遍,对于时间和算力都是一种巨大的浪费。因此,本申请通过设置基于图像像素值分布的图像质量系数Q来表达图像质量,利用图像质量系数Q来确定熵值比系数的临界值,即何时达到理想的增强效果。
在红外图像中,图像像素值的分布可以大致代表着图像质量的整体水平。红外图像为二维矩阵,设红外图像的宽度为W,高度为J,灰度级阶数为M,则可计算出该图像中每个灰度值理想上的最优值Nexp
Figure GDA0003632053040000141
由于计算出的每个灰度级理想上的最优值Nexp仅为理想值,实际应用中不会存在真正的像素均匀分布的图像。因此,需要计算出红外图像中N(T),即红外图像中存在像素值大于等于Nexp的像素点的数量。
设列表T=[T1,T2,,......,Ti];
其中,Ti表示原始红外图像中像素值的数量大于等于每个灰度级理想上最优数量Nexp的像素点,列表T中的任意元素Tf≥Nexp,1≤f≤i;N(T)表示列表T中像素点的数量;
根据图像质量系数Q的计算公式
Figure GDA0003632053040000142
当N(T)=0时,Q=1,图像质量系数为最小值;当N(T)>0时,Q>1,且随着N(T)数值的增大,Q的数值增大,图像的质量越来越高。
通过对大量不同的红外图像进行对比度增强分析,其实验结果表明熵值比系数Rnew可以表征图像的对比度增强水平。对于质量很差的图像,需要保证熵值比系数Rnew为需要较大的数值,才能确保输出高质量的图像。而对于质量较好的图像,熵值比系数Rnew较低即可确保输出高质量的图像。因此,本申请中设定熵值比临界值V,使得质量差的图像有较高的临界值,而质量高的图像有较低的临界值,从而确保输出的图像质量。
熵值比临界值V的计算公式为:
Figure GDA0003632053040000143
本发明中,终止迭代次数ms的取值可根据计算时间要求和设备算力情况自行设定。但考虑到算法效率,如果进行无限的迭代循环,对设备算力是种较大的浪费,同时也极大的延长了获取结果的时间,与快速准确获取火场图像数据的初衷相悖。因此,本发明对双平台直方图均衡算法处理后的图像熵值的总体波动规律进行了研究,发现若原始红外图像的所含内容太过单一,较大的迭代次数对于图像增强效果无任何帮助,同时会极大的延长获取结果的时间。因此本实施例中,终止迭代次数ms设定为20,既能够获得较高的图像增强效果,又能够有效缩短获取结果的时间。原始红外图像增强前和增强后的对比如图2和图3所示。

Claims (5)

1.一种基于双平台直方图的自迭代红外图像增强方法,其特征在于:包括以下步骤:
A:首先获取原始红外图像,并将获取的原始红外图像转化为该原始红外图像对应的像素分布直方图;然后进入步骤B;
B:根据获取的像素分布直方图,计算出原始红外图像的熵值H0和熵值比临界值V,并将熵值H0作为当前最大熵值Hbig,即Hbig=H0;然后进入步骤C;
其中,熵值的计算公式为:H=-∑agPaglnPag
熵值比临界值的计算公式为:
Figure FDA0003632053030000011
熵值H0中的下角标表示未经迭代的第0次,Pag表示原始红外图像中像素点对应的特征二元组(a,g)出现的概率,
Figure FDA0003632053030000012
f(a,g)表示原始红外图像中像素点对应的特征二元组(a,g)出现的频数,W为原始红外图像的宽度,J为原始红外图像的高度;原始红外图像中像素点对应的特征二元组(a,g)中,a为图像中该像素点的像素值,g为图像中该像素点的邻域梯度值;e为自然对数,Q为图像质量系数,
Figure FDA0003632053030000013
N(T)表示原始红外图像中像素值的数量大于等于每个灰度值理想上最优数量Nexp的像素点的数量,T表示原始红外图像中像素值的数量大于等于每个灰度级理想上最优数量Nexp的像素点,M表示红外图像的灰度级阶数;
C:根据获取的像素分布直方图,对每个灰度阶数在直方图中的数量进行降序排序,得到降序列表A;然后进入步骤D;
A=[N(X1),N(X2),……,N(Xn)];
其中,Xn表示原始红外图像中的像素点且该像素点所对应的灰度阶数在直方图中数量最少,N(Xn)表示像素点Xn在像素分布直方图中的数量,N(X1)>N(X2)>…>N(Xn);n为自然数;
D:在降序列表A中从前至后取前U个元素作为前序元素组,从后至前取后D个元素作为后续元素组;设熵值比系数Rold的初始值为0,迭代次数m的初始值为0,改进方向C的初始值为up;然后进入步骤E;
其中,改进方向C包括up和down两个方向,C=up表示仅从降序列表A中前序元素组内最后一个元素向后逐个进行扩充,改进方向C=down表示仅从降序列表A中后续元素组内第一个元素向前逐个进行扩充;
E:根据确定的前序元素组和后续元素组,分别计算出当前上限阈值Tup和当前下限阈值Tdown;然后进入步骤F;
Figure FDA0003632053030000021
Figure FDA0003632053030000022
其中,[]表示取整操作,Medianup表示前序元素组的中位数,Meanup表示前序元素组的均值;N(Xi)表示前序元素组中的第i个像素点Xi在像素分布直方图中的数量,1≤i≤U-1;σ1表示前序元素组中元素的标准差;Mediandown表示后序元素组的中位数,Meandown表示后序元素组的均值;N(Xj)表示后序元素组中的第j个像素点Xj在像素分布直方图中的数量,1≤j≤D-1,σ2表示后序元素组中元素的标准差;
F:利用步骤E中计算得到的当前上限阈值Tup和当前下限阈值Tdown,使用双平台直方图均衡算法对原始红外图像进行计算,得出均衡化后的原始红外图像的熵值Hnew;然后进入步骤G;
G:根据原始红外图像的熵值H0和均衡化后的熵值Hnew,计算出当前熵值比系数Rnew;然后进入步骤H;
Figure FDA0003632053030000023
H:判断当前熵值比系数Rnew是否大于熵值比临界值V;若Rnew≥V,则进入步骤L;若Rnew<V,则进入步骤I;
I:判断迭代次数m是否小于设定的终止迭代次数ms,若m<ms,则进入步骤J;若m=ms,则进入步骤M;
其中,ms≥1;ms中下角标s为stop的首字母缩写;
J:判断当前熵值比系数Rnew是否大于熵值比系数Rold
若Rnew>Rold,则将当前最大熵值Hbig更新为均衡化后的熵值Hnew,即Hbig=Hnew;然后依然将当前的改进方向C=up作为最新改进方向Cnew,即Cnew=C=up,然后将降序列表A中前序元素组内最后一个元素的下一个元素纳入前序元素组中,即将降序列表A中正数第U+1个元素纳入前序元素组中,对前序元素组向后进行扩充;在首次迭代时Rold的初始值为0;在后续迭代过程中,下一次迭代时的Rold为本次迭代时的Rnew
若Rnew≤Rold,则保持当前最大熵值Hbig的值不变;然后将当前的改进方向C=up的反方向作为最新改进方向Cnew,即Cnew=Inv(C)=down,然后将降序列表A中后续元素组内第一个元素的前一个元素纳入后序元素组中,即将降序列表A中倒数第D+1个元素纳入后序元素组中,对后序元素组向前进行扩充;在首次迭代时Rold的初始值为0;在后续迭代过程中,下一次迭代时的Rold依然为本次迭代时的Rold
在对前序元素组或后序元素组完成扩充后,进入步骤K;
K:根据步骤J中得到的扩充后的前序元素组或后序元素组,返回步骤E重新计算当前上限阈值Tup和当前下限阈值Tdown;此时迭代次数m的数值加1;
L:输出当前熵值为Hnew的红外图像;
M:输出当前熵值为Hbig的红外图像。
2.根据权利要求1所述的基于双平台直方图的自迭代红外图像增强方法,其特征在于:所述的步骤B中,图像中像素点的邻域梯度值的计算方法如下:
a:对于图像中的像素点P,设像素点P的坐标为(u,v),像素点P的邻域为以像素点P为中心且与像素点P相邻的像素点,像素点P的邻域的坐标分别为(u-1,v-1)、(u,v-1)、(u+1,v-1)、(u-1,v)、(u+1,v)、(u-1,v+1)、(u,v+1)、(u+1,v+1);
b:计算像素点P及其邻域在x轴方向的梯度并进行绝对值求和;
在计算像素点P及其8个邻域在x轴方向的梯度时,均使用x轴方向上位于该像素点左侧的像素点的像素值减去该像素点的像素值,将结果作为该像素点在x轴方向的梯度;
然后,将像素点P及其8个邻域在x轴方向的梯度的绝对值进行求和,记为
Figure FDA0003632053030000041
c:计算像素点P及其邻域在y轴方向的梯度并进行绝对值求和;
在计算像素点P及其8个邻域在y轴方向上的梯度时,均使用y轴方向上位于该像素点下侧的像素点的像素值减去该像素点的像素值,将结果作为该像素点在y轴方向的梯度;
然后,将像素点P及其8个邻域在y轴方向的梯度的绝对值进行求和,记为
Figure FDA0003632053030000042
d:利用公式
Figure FDA0003632053030000043
最终求得图像中的像素点P的邻域梯度值g,r=3,s=3,[]表示取整操作;当图像中的像素点P的邻域中像素点小于8个时,即像素点P位于图像的边缘时,将缺少的像素点的像素值用0填充,即缺少的像素点的像素值为0。
3.根据权利要求1所述的基于双平台直方图的自迭代红外图像增强方法,其特征在于:所述的步骤D中,U=D=10。
4.根据权利要求1所述的基于双平台直方图的自迭代红外图像增强方法,其特征在于:所述步骤I中,ms=20。
5.根据权利要求1所述的基于双平台直方图的自迭代红外图像增强方法,其特征在于:所述的步骤B中,
Figure FDA0003632053030000044
其中,W和J分别为红外图像的宽度和高度,M为红外图像的灰度级阶数,Nexp为该红外图像中每个灰度值理想上的最优值。
CN202110765363.4A 2021-07-06 2021-07-06 一种基于双平台直方图的自迭代红外图像增强方法 Active CN113487525B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110765363.4A CN113487525B (zh) 2021-07-06 2021-07-06 一种基于双平台直方图的自迭代红外图像增强方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110765363.4A CN113487525B (zh) 2021-07-06 2021-07-06 一种基于双平台直方图的自迭代红外图像增强方法

Publications (2)

Publication Number Publication Date
CN113487525A CN113487525A (zh) 2021-10-08
CN113487525B true CN113487525B (zh) 2022-07-01

Family

ID=77941471

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110765363.4A Active CN113487525B (zh) 2021-07-06 2021-07-06 一种基于双平台直方图的自迭代红外图像增强方法

Country Status (1)

Country Link
CN (1) CN113487525B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115660997B (zh) * 2022-11-08 2023-06-02 杭州微影软件有限公司 一种图像数据处理方法、装置及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7840066B1 (en) * 2005-11-15 2010-11-23 University Of Tennessee Research Foundation Method of enhancing a digital image by gray-level grouping
CN102521813A (zh) * 2011-11-21 2012-06-27 华中科技大学 基于双平台直方图的红外图像自适应增强方法
CN102693531A (zh) * 2012-01-11 2012-09-26 河南科技大学 基于自适应双平台的红外图像增强方法
CN109377464A (zh) * 2018-10-08 2019-02-22 嘉应学院 一种红外图像的双平台直方图均衡化方法及其应用系统
CN111462024A (zh) * 2020-04-03 2020-07-28 中国科学院半导体研究所 双边自适应图像可视化增强方法及成像系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108376391B (zh) * 2018-01-29 2022-04-05 江苏宇特光电科技股份有限公司 一种智能化红外图像场景增强方法
CN108846319A (zh) * 2018-05-25 2018-11-20 平安科技(深圳)有限公司 基于直方图的虹膜图像增强方法、装置、设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7840066B1 (en) * 2005-11-15 2010-11-23 University Of Tennessee Research Foundation Method of enhancing a digital image by gray-level grouping
CN102521813A (zh) * 2011-11-21 2012-06-27 华中科技大学 基于双平台直方图的红外图像自适应增强方法
CN102693531A (zh) * 2012-01-11 2012-09-26 河南科技大学 基于自适应双平台的红外图像增强方法
CN109377464A (zh) * 2018-10-08 2019-02-22 嘉应学院 一种红外图像的双平台直方图均衡化方法及其应用系统
CN111462024A (zh) * 2020-04-03 2020-07-28 中国科学院半导体研究所 双边自适应图像可视化增强方法及成像系统

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
Jing RuiTang 等.Bi-histogram equalization using modified histogram bins.《Applied Soft Computing》.2017,第55卷第31-43页. *
Upendra Kumar Acharya 等.Directed searching optimized mean-exposure based sub-image histogram equalization for grayscale image enhancement.《Multimedia Tools and Applications 》.2021,第1-21页. *
宋岩峰等.基于双平台直方图的红外图像增强算法.《红外与激光工程》.2008,(第02期), *
武英.基于双直方图均衡的自适应图像增强算法.《计算机工程》.2011,(第04期), *
涂志强.一种自适应双平台直方图红外图像增强算法及其FPGA实现.《中国硕士学位论文全文数据库》.2013,I138-987. *

Also Published As

Publication number Publication date
CN113487525A (zh) 2021-10-08

Similar Documents

Publication Publication Date Title
CN103218778B (zh) 一种图像和视频的处理方法及装置
CN107301623B (zh) 一种基于暗通道和图像分割的交通图像去雾方法及系统
CN110889813A (zh) 基于红外信息的低光图像增强方法
CN112288658A (zh) 一种基于多残差联合学习的水下图像增强方法
CN110544213B (zh) 一种基于全局和局部特征融合的图像去雾方法
CN106157267A (zh) 一种基于暗通道先验的图像去雾透射率优化方法
CN115223004A (zh) 基于改进的多尺度融合生成对抗网络图像增强方法
CN110400274B (zh) 一种车载红外行人检测用红外图像增强方法
CN111008608B (zh) 一种基于深度学习的夜间车辆检测方法
CN102170526A (zh) 散焦模糊核计算及其散焦模糊图像清晰化处理方法
CN113449664B (zh) 一种火灾现场火情监测系统和监测方法
CN113487525B (zh) 一种基于双平台直方图的自迭代红外图像增强方法
CN111489322A (zh) 给静态图片加天空滤镜的方法及装置
CN105447825A (zh) 图像去雾方法及其系统
CN114155210B (zh) 基于注意力机制与标准化密集空洞空间多尺度融合网络的人群计数方法
CN115775376A (zh) 一种基于低光图像增强的人群计数方法
US11783454B2 (en) Saliency map generation method and image processing system using the same
CN103295205A (zh) 一种基于Retinex的微光图像快速增强方法和装置
WO2020107308A1 (zh) 一种基于Retinex的微光图像快速增强方法及其装置
CN114549297A (zh) 一种基于不确定分析的无监督单目深度估计方法
KR102277005B1 (ko) 비지도 학습을 이용한 저조도 영상 처리 방법 및 장치
CN104835121B (zh) 基于无穷范数约束与最大熵原则的色调映射方法
CN112991236B (zh) 一种基于模板的图像增强方法及装置
CN116129379A (zh) 一种雾天环境下的车道线检测方法
CN115187954A (zh) 一种基于图像处理的特殊场景下交通标志识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant