CN111754433A - 一种航拍图像去雾方法 - Google Patents
一种航拍图像去雾方法 Download PDFInfo
- Publication number
- CN111754433A CN111754433A CN202010578071.5A CN202010578071A CN111754433A CN 111754433 A CN111754433 A CN 111754433A CN 202010578071 A CN202010578071 A CN 202010578071A CN 111754433 A CN111754433 A CN 111754433A
- Authority
- CN
- China
- Prior art keywords
- image
- pixel point
- pixel
- value
- point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 85
- 230000005540 biological transmission Effects 0.000 claims abstract description 48
- 238000001914 filtration Methods 0.000 claims abstract description 39
- 238000010586 diagram Methods 0.000 claims description 35
- 230000000694 effects Effects 0.000 claims description 10
- 238000010276 construction Methods 0.000 claims description 8
- 238000005070 sampling Methods 0.000 claims description 8
- 239000013598 vector Substances 0.000 claims description 8
- 238000004364 calculation method Methods 0.000 claims description 6
- 230000003247 decreasing effect Effects 0.000 claims description 4
- 238000012417 linear regression Methods 0.000 claims description 4
- 239000011159 matrix material Substances 0.000 claims description 4
- 238000002156 mixing Methods 0.000 claims description 4
- 230000003044 adaptive effect Effects 0.000 claims description 2
- 125000001475 halogen functional group Chemical group 0.000 abstract description 4
- 238000002474 experimental method Methods 0.000 abstract 1
- 238000005516 engineering process Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
Images
Classifications
-
- G06T5/73—
-
- G06T5/77—
Abstract
本发明一种航拍图像去雾方法属于航拍图像复原邻域;该方法首先建立大气散射模型并求取暗通道图、粗糙大气透射图和全球大气光,再利用非局部特征结构张量的主特征值对航拍图像的纹理信息进行描述,然后采用非局部特征结构张量的自适应滤波方法优化粗糙大气透射图,最后求到无雾图像;实验证明,本文方法能够有效消除去雾后图像边缘出现的“光晕”现象。
Description
技术领域
本发明一种航拍图像去雾方法属于航拍图像复原邻域。
背景技术
随着无人机技术的飞速发展,无人机以其体积小,灵活性高,费用低,操作简单,监测速度快等优点广泛应用于各行各业当中。相比传统的卫星遥感和机载航空遥感,无人机遥感技术作为一项新的空间数据获取手段以其高分辨率和高时效而广泛的应用在各个领域。无人机遥感技术在各领域的应用以无人机获取的高清影像为前提,但由于天气中雾、霾等因素的存在,使得户外的能见度大大降低,影响无人机航拍图像的质量。当在雾天进行无人机遥感作业时,就需要对所获取的影像进行清晰化处理,为后续的处理工作提供可以依赖的清晰影像。
目前,国内外研究图像去雾的算法大体可分为基于非模型的图像增强方法和基于模型的图像复原方法。
基于非模型的图像增强方法,从主观上选择性的突出有价值部分的特征,提高图像清晰度和对比度,以达到满意的视觉去雾效果。但该类算法只是单纯的去除了图像当中的噪声,提高了图像的对比度,让图像边缘看起来更清晰并突出图像的某些性质,但这不是本质上的去雾。
基于模型的图像复原去雾方法,通过分析雾天图像的模糊化原理,构建大气散射模型的方式将输入的雾霾图像复原为无雾图像,实现了真正意义上的图像去雾。这类方法在去雾效果,时间复杂度等各方面都表现得比较均衡,是现阶段主流的去雾方法。但这类方法在去雾图像的边缘位置会产生“光晕现象”和梯度反转伪影的问题。
针对以上不足,提出了一种航拍图像去雾方法,利用非局部特征结构张量的自适应滤波法优化大气透射图,减少无雾图像的“光晕”和伪影效应,达到更好的去雾效果。
发明内容
针对上述技术需求,本发明公开了一种航拍图像去雾方法,该方法能够有效对有雾图像进行去雾清晰化处理,同时能够消除去雾后图像边缘位置产生的“光晕现象”和伪影效应。在视觉效果和颜色对比度方面优于其他去雾方法,并且去雾后图像整体颜色都比较自然,去雾效果更理想。
本发明的目的是这样实现的:
一种航拍图像去雾方法,包括以下步骤:
步骤a、建立大气散射模型并求取暗通道图、粗糙大气透射图和全球大气光;
步骤b、利用非局部特征结构张量的主特征值对航拍图像纹理信息进行描述;
步骤c、采用图像非局部特征结构张量的自适应滤波方法优化粗糙大气透射图;
步骤d、求取无雾图像。
上述的一种航拍图像去雾方法,步骤a的具体步骤如下:
步骤a1:构建大气散射模型
构建大气散射模型如下:
I(xe,g)=J(xe,g)t(xe,g)+A(1-t(xe,g))
其中,I(xe,g)为航拍有雾图像,J(xe,g)为去雾后的图像,t(xe,g)为透射图,A为大气光,xe,g为图像的像素点,xe,g坐标为(e,g),I(xe,g)、t(xe,g)、J(xe,g)的大小均为m×n,e=0,…,m-1,g=0,…,n-1,xe,g∈τ,τ为像素点从x0,0到xm-1,n-1所覆盖的区域集合;
步骤a2:构建航拍有雾图像I(xe,g)的暗通道图Idark(xe,g)
求出I(xe,g)各像素点RGB三通道中灰度值的最小值,存入到一幅与I(xe,g)大小相同的灰度图像Igray(xe,g)中,对Igray(xe,g)进行最小值滤波可得到I(xe,g)的暗通道图Idark(xe,g),用数学表达式可定义为:
其中,Ω(xe,g)为Igray(xe,g)上以任意点xe,g为中心的一定大小的矩形窗口,Ω(xe,g)=15,y代表Ω(xe,g)中的任意像素点,c代表图像RGB三通道中的任意通道,Ic(y)代表I(xe,g)中Ω(xe,g)内任意像素点在指定c通道中的灰度值;
步骤a3:求取全球大气光A
步骤a31、将步骤a2构建的Idark(xe,g),按像素点亮度从大到小的顺序提取前O个像素点位置,O=0.1%×m×n;
步骤a32、根据步骤a31提取的O个Idark(xe,g)中像素点位置,在I(xe,g)中寻找所对应位置的像素点,其中亮度最高的像素点的三个通道灰度的平均值即为全球大气光A;
步骤a41、将步骤a1所构建的大气散射模型两边同时除以I(xe,g)和J(xe,g)所对应各RGB通道的大气光Ac:
步骤a42、假设Ω(xe,g)的透射图tΩ(xe,g)为定值,则在Ω(xe,g)大小的矩形窗口内,对步骤a41所得公式两边,用最小化算子作最小化运算:
步骤a43、J(xe,g)的RGB通道中至少有一个通道的亮度值接近于0,根据步骤a2公式可求出J(xe,g)的暗通道Jdark(xe,g)为:
由于Ac为正值,故:
步骤a44、将步骤a43所得公式代入到步骤a42最小化运算的式子中,为了使恢复出的图像更自然,引入参数ω=0.95,所求出的定值tΩ(xe,g)为:
上述的一种航拍图像去雾方法,步骤b的具体步骤如下:
Idown(X)为对I(xe,g)进行M倍下采样得到的引导图,M为下采样的倍数,I(xe,g)大小为m×n,下采样后Idown(X)大小为Xi,j为下采样后图像的像素点,Xi,j坐标为(i,j),X∈θ,θ为像素点从X0,0到所覆盖的区域集合;Idown(X)中任取像素点Xi,j相对于像素点Xi+Δi,j+Δj的非局部方向导数为:
步骤b2:求解权函数v(Xi,j,Xi+Δi,j+Δj)
步骤b21、计算块距离dα(Xi,j,Xi+Δi,j+Δj):
其中,Gα(Z)是标准差为α的高斯函数,Z表示以Xi,j、Xi+Δi,j+Δj为中心的邻域S(Xi,j)、S(Xi+Δi,j+Δj)的半径,邻域半径为定值;块距离dα(Xi,j,Xi+Δi,j+Δj)表示的是以Xi,j、Xi+Δi,j+Δj两点为中心的邻域S(Xi,j)和S(Xi+Δi,j+Δj)之间灰度值相似性的度量;
其中,‖Xi,j,Xi+Δi,j+Δj‖为像素点Xi,j与Xi+Δi,j+Δj之间的欧式距离;
步骤b23、在领域S(Xi,j)内,计算D(Xi,j):
其中,|D|代表区域D内的像素点个数,γ为参数;D(Xi,j)表示在Xi,j的邻域S(Xi,j)内,寻找在设定的距离度量函数值下与Xi,j点灰度值相似的γ个点的集合;
步骤b3:求解主特征值λ1
Idown(X)中任意点Xi,j的非局部结构张量为:
其中,s=1,…,γ,特征值λ1≥λ2≥…≥λγ≥0,最大的特征值λ1称为主特征值,由于rank(Jρ)=1,所以λ1≥0,λ2=…=λγ=0;
步骤b4:Idown(X)的纹理信息描述图λ(X)
求出Idown(X)各个像素点非局部结构张量的主特征值λ1,存入到一副与Idown(X)大小相同的灰度图像λ(X)中,即为纹理信息描述图。
上述的一种航拍图像去雾方法,步骤c的具体步骤如下:
步骤c1:构建滤波模型
步骤c3:改进成本函数
将步骤b4所求λ(X)与像素点k相对应像素位置的强度值λ(k)融入步骤c2所构建的成本函数E(aR,bR)中,得到的最小误差成本函数E′(aR,bR)如下:
其中,为了防止分母为0,取η为大于0的常数;
步骤c4:求系数aR和bR
利用最小二乘法对步骤c3的最小误差成本函数E′(aR,bR)进行计算,得到系数aR和bR为:
步骤c5:改进系数aR和bR
为了更快的计算出系数aR和bR,把系数aR和bR改为包含像素点k的所有窗口的线性回归系数均值,改进后的系数aR′和bR′如下:
其中,h为包含像素点k的所有窗口的总个数,Rl表示为第l个包含像素点k的窗口,l=1,2,…,h;
将步骤c5所求改进后的系数aR′和bR′带入步骤c1的滤波模型中,所构建的滤波模型为:
上述的一种航拍图像去雾方法,步骤d的具体步骤如下:
其中,t0为阈值。
有益效果:
本发明采用了如下技术手段,首先建立大气散射模型并求取暗通道图、粗糙大气透射图和全球大气光,再利用非局部特征结构张量的主特征值对航拍图像的纹理信息进行描述,然后采用非局部特征结构张量的自适应滤波方法优化粗糙大气透射图,最后求到无雾图像;该技术手段相互依存,缺一不可,作为一个整体,共同实现了其中任何一个手段存在时都不能实现的有雾图像去雾清晰化处理,此外,本发明方法还有效的消除了去雾后图像边缘位置产生的“光晕现象”和伪影效应,使去雾后图像整体颜色都比较自然,视觉效果更好。
附图说明
图1是本发明一种航拍图像去雾方法的流程图。
图2是航拍有雾图像。
图3是引导图。
图4是去雾后图像。
具体实施方式
下面结合附图对本发明具体实施方式作进一步详细描述。
具体实施例一
本实施例是一种航拍图像去雾方法的实施例。
本实施例的一种航拍图像去雾方法,流程图如图1所示,该方法包括以下步骤:
步骤a、建立大气散射模型并求取暗通道图、粗糙大气透射图和全球大气光;
步骤b、利用非局部特征结构张量的主特征值对航拍图像纹理信息进行描述;
步骤c、采用图像非局部特征结构张量的自适应滤波方法优化粗糙大气透射图;
步骤d、求取无雾图像。
具体实施例二
本实施例是一种航拍图像去雾方法的实施例。
本实施例的一种航拍图像去雾方法,流程图如图1所示,该方法在具体实施例一的基础上进一步对每个步骤进行细化,并对具体图片进行处理,其中,航拍有雾图像如图2所示,引导图如图3所示,去雾后图像如图4所示。包括以下步骤:
步骤a、建立大气散射模型并求取暗通道图、粗糙大气透射图和全球大气光;具体步骤如下:
步骤a1:构建大气散射模型
构建大气散射模型如下:
I(xe,g)=J(xe,g)t(xe,g)+A(1-t(xe,g))
其中,I(xe,g)为航拍有雾图像,J(xe,g)为去雾后的图像,t(xe,g)为透射图,A为大气光,xe,g为图像的像素点,xe,g坐标为(e,g),I(xe,g)、t(xe,g)、J(xe,g)的大小均为m×n,e=0,…,m-1,g=0,…,n-1,xe,g∈τ,τ为像素点从x0,0到xm-1,n-1所覆盖的区域集合;
步骤a2:构建航拍有雾图像I(xe,g)的暗通道图Idark(xe,g)
求出I(xe,g)各像素点RGB三通道中灰度值的最小值,存入到一幅与I(xe,g)大小相同的灰度图像Igray(xe,g)中,对Igray(xe,g)进行最小值滤波可得到I(xe,g)的暗通道图Idark(xe,g),用数学表达式可定义为:
其中,Ω(xe,g)为Igray(xe,g)上以任意点xe,g为中心的一定大小的矩形窗口,Ω(xe,g)=15,y代表Ω(xe,g)中的任意像素点,c代表图像RGB三通道中的任意通道,Ic(y)代表I(xe,g)中Ω(xe,g)内任意像素点在指定c通道中的灰度值;
步骤a3:求取全球大气光A
步骤a31、将步骤a2构建的Idark(xe,g),按像素点亮度从大到小的顺序提取前O个像素点位置,O=0.1%×m×n;
步骤a32、根据步骤a31提取的O个Idark(xe,g)中像素点位置,在I(xe,g)中寻找所对应位置的像素点,其中亮度最高的像素点的三个通道灰度的平均值即为全球大气光A;
步骤a41、将步骤a1所构建的大气散射模型两边同时除以I(xe,g)和J(xe,g)所对应各RGB通道的大气光Ac:
步骤a42、假设Ω(xe,g)的透射图tΩ(xe,g)为定值,对步骤a41所得公式两边用最小化算子作最小化运算:
步骤a43、J(xe,g)的RGB通道中至少有一个通道的亮度值接近于0,根据步骤a2公式可求出J(xe,g)的暗通道Jdark(xe,g)为:
由于Ac为正值,故:
步骤a44、将步骤a43所得公式代入到步骤a42最小化运算的式子中,为了使恢复出的图像更自然,引入参数ω=0.95,所求出的定值tΩ(xe,g)为:
步骤b、利用非局部特征结构张量的主特征值对航拍图像纹理信息进行描述;步骤b的具体步骤如下:
Idown(X)为对I(xe,g)进行M倍下采样得到的引导图,M为下采样的倍数,I(xe,g)大小为m×n,下采样后Idown(X)大小为Xi,j为下采样后图像的像素点,Xi,j坐标为(i,j),X∈θ,θ为像素点从X0,0到所覆盖的区域集合;Idown(X)中任取像素点Xi,j相对于像素点Xi+Δi,j+Δj的非局部方向导数为:
步骤b2:求解权函数ν(Xi,j,Xi+Δi,j+Δj)
步骤b21、计算块距离dα(Xi,j,Xi+Δi,j+Δj):
其中,Gα(Z)是标准差为α的高斯函数,Z表示以Xi,j,Xi+Δi,j+Δj为中心的邻域S(Xi,j),S(Xi+Δi,j+Δj)的半径,邻域半径为定值;块距离dα(Xi,j,Xi+Δi,j+Δj)表示的是以Xi,j,Xi+Δi,j+Δj两点为中心的邻域S(Xi,j)和S(Xi+Δi,j+Δj)之间灰度值相似性的度量;
其中,‖Xi,j,Xi+Δi,j+Δj‖为像素点Xi,j与Xi+Δi,j+Δj之间的欧式距离;
步骤b23、在领域S(Xi,j)内,寻找一个区域D:
其中,|D|代表区域D内的像素点个数,γ为参数,arg min表示使目标函数取最小值时的变量值;D(Xi,j)表示在Xi,j的邻域S(Xi,j)内,寻找在设定的距离度量函数值下与Xi,j点灰度值相似的γ个点的集合;
步骤b3:求解主特征值λ1
Idown(X)在点Xi,j的非局部梯度为点Xi,j相对于D(Xi,j)集合内所有像素点的非局部方向导数所构成的向量,点Xi,j相对于D(Xi,j)集合内所有像素点的非局部方向导数可由步骤b1和步骤b24相结合求出,是一个γ维向量;
Idown(X)中任意点Xi,j的非局部结构张量为:
其中,s=1,…,γ,特征值λ1≥λ2≥…≥λγ≥0,最大的特征值λ1称为主特征值,由于rank(Jρ)=1,所以λ1≥0,λ2=…=λγ=0;
步骤b4:Idown(X)的纹理信息描述图λ(X)
求出Idown(X)各个像素点非局部结构张量的主特征值λ1,存入到一副与Idown(X)大小相同的灰度图像λ(X)中,即为纹理信息描述图。
步骤c、采用图像非局部特征结构张量的自适应滤波方法优化粗糙大气透射图;具体步骤如下:
步骤c1:构建滤波模型
步骤c3:改进成本函数
将步骤b4所求λ(X)与像素点k相对应像素位置的强度值λ(k)融入步骤c2所构建的成本函数E(aR,bR)中,得到的最小误差成本函数E′(aR,bR)如下:
其中,为了防止分母为0,取η为大于0的常数;
步骤c4:求系数aR和bR
利用最小二乘法对步骤c3的最小误差成本函数E′(aR,bR)进行计算,得到系数aR和bR为:
步骤c5:改进系数aR和bR
在实际计算过程中,步骤c4所求系数aR和bR在窗口R(Xi,j)范围内的值不一定为常量。为了更快的计算出系数aR和bR,把系数aR和bR改为包含像素点k的所有窗口的线性回归系数均值,改进后的系数aR′和bR′如下:
其中,h为包含像素点k的所有窗口的总个数,Rl表示为第l个包含像素点k的窗口,l=1,2,…,h;
将步骤c5所求改进后的系数aR′和bR′带入步骤c1的滤波模型中,所构建的滤波模型为:
步骤d、求取无雾图像;具体步骤如下:
上述的一种航拍图像去雾方法,步骤d的具体步骤如下:
一般会为公式中t设置一个阈值t0=0.1,用来避免当t值太小,导致J(xe,g)变大,避免恢复的图像不自然。
具体实施例三
本实施例是一种航拍图像去雾方法中预处理方法的实施例。
一种航拍图像去雾方法中预处理方法,包括以下步骤:
步骤a、建立大气散射模型并求取暗通道图、粗糙大气透射图和全球大气光;具体步骤如下:
步骤a1:构建大气散射模型
构建大气散射模型如下:
I(xe,g)=J(xe,g)t(xe,g)+A(1-t(xe,g))
其中,I(xe,g)为航拍有雾图像,J(xe,g)为去雾后的图像,t(xe,g)为透射图,A为大气光,xe,g为图像的像素点,xe,g坐标为(e,g),I(xe,g)、t(xe,g)、J(xe,g)的大小均为m×n,e=0,…,m-1,g=0,…,n-1,xe,g∈τ,τ为像素点从x0,0到xm-1,n-1所覆盖的区域集合;
步骤a2:构建航拍有雾图像I(xe,g)的暗通道图Idark(xe,g)
求出I(xe,g)各像素点RGB三通道中灰度值的最小值,存入到一幅与I(xe,g)大小相同的灰度图像Igray(xe,g)中,对Igray(xe,g)进行最小值滤波可得到I(xe,g)的暗通道图Idark(xe,g),用数学表达式可定义为:
其中,Ω(xe,g)为Igray(xe,g)上以任意点xe,g为中心的一定大小的矩形窗口,Ω(xe,g)=15,y代表Ω(xe,g)中的任意像素点,c代表图像RGB三通道中的任意通道,Ic(y)代表I(xe,g)中Ω(xe,g)内任意像素点在指定c通道中的灰度值;
步骤a3:求取全球大气光A
步骤a31、将步骤a2构建的Idark(xe,g),按像素点亮度从大到小的顺序提取前O个像素点位置,O=0.1%×m×n;
步骤a32、根据步骤a31提取的O个Idark(xe,g)中像素点位置,在I(xe,g)中寻找所对应位置的像素点,其中亮度最高的像素点的三个通道灰度的平均值即为全球大气光A;
步骤a41、将步骤a1所构建的大气散射模型两边同时除以I(xe,g)和J(xe,g)所对应各RGB通道的大气光Ac:
步骤a42、假设Ω(xe,g)的透射图tΩ(xe,g)为定值,对步骤a41所得公式两边用最小化算子作最小化运算:
步骤a43、J(xe,g)的RGB通道中至少有一个通道的亮度值接近于0,根据步骤a2公式可求出J(xe,g)的暗通道Jdark(xe,g)为:
由于Ac为正值,故:
步骤a44、将步骤a43所得公式代入到步骤a42最小化运算的式子中,为了使恢复出的图像更自然,引入参数ω=0.95,所求出的定值tΩ(xe,g)为:
具体实施例四
本实施例是一种航拍图像去雾方法中航拍图像纹理信息描述方法的实施例。
一种航拍图像去雾方法中航拍图像纹理信息描述方法,包括以下步骤:
步骤b、利用非局部特征结构张量的主特征值对航拍图像纹理信息进行描述;步骤b的具体步骤如下:
Idown(X)为对I(xe,g)进行M倍下采样得到的引导图,M为下采样的倍数,I(xe,g)大小为m×n,下采样后Idown(X)大小为Xi,j为下采样后图像的像素点,Xi,j坐标为(i,j),X∈θ,θ为像素点从X0,0到所覆盖的区域集合;Idown(X)中任取像素点Xi,j相对于像素点Xi+Δi,j+Δj的非局部方向导数为:
步骤b2:求解权函数v(Xi,j,Xi+Δi,j+Δj)
步骤b21、计算块距离dα(Xi,j,Xi+Δi,j+Δj):
其中,Gα(Z)是标准差为α的高斯函数,Z表示以Xi,j,Xi+Δi,j+Δj为中心的邻域S(Xi,j),S(Xi+Δi,j+Δj)的半径,邻域半径为定值;块距离dα(Xi,j,Xi+Δi,j+Δj)表示的是以Xi,j,Xi+Δi,j+Δj两点为中心的邻域S(Xi,j)和S(Xi+Δi,j+Δj)之间灰度值相似性的度量;
其中,‖Xi,j,Xi+Δi,j+Δj‖为像素点Xi,j与Xi+Δi,j+Δj之间的欧式距离;
步骤b23、在领域S(Xi,j)内,寻找一个区域D:
其中,|D|代表区域D内的像素点个数,γ为参数,arg min表示使目标函数取最小值时的变量值;D(Xi,j)表示在Xi,j的邻域S(Xi,j)内,寻找在设定的距离度量函数值下与Xi,j点灰度值相似的γ个点的集合;
步骤b3:求解主特征值λ1
Idown(X)在点Xi,j的非局部梯度为点Xi,j相对于D(Xi,j)集合内所有像素点的非局部方向导数所构成的向量,点Xi,j相对于D(Xi,j)集合内所有像素点的非局部方向导数可由步骤b1和步骤b24相结合求出,是一个γ维向量;
Idown(X)中任意点Xi,j的非局部结构张量为:
其中,s=1,…,γ,特征值λ1≥λ2≥…≥λγ≥0,最大的特征值λ1称为主特征值,由于rank(Jρ)=1,所以λ1≥0,λ2=…=λγ=0;
步骤b4:Idown(X)的纹理信息描述图λ(X)
求出Idown(X)各个像素点非局部结构张量的主特征值λ1,存入到一副与Idown(X)大小相同的灰度图像λ(X)中,即为纹理信息描述图。
具体实施例五
本实施例是一种航拍图像去雾方法中粗糙大气透射图优化方法的实施例。
一种航拍图像去雾方法中粗糙大气透射图优化方法,具体步骤如下:
步骤c1:构建滤波模型
步骤c3:改进成本函数
将步骤b4所求λ(X)与像素点k相对应像素位置的强度值λ(k)融入步骤c2所构建的成本函数E(aR,bR)中,得到的最小误差成本函数E′(aR,bR)如下:
其中,为了防止分母为0,取η为大于0的常数;
步骤c4:求系数aR和bR
利用最小二乘法对步骤c3的最小误差成本函数E′(aR,bR)进行计算,得到系数aR和bR为:
步骤c5:改进系数aR和bR
在实际计算过程中,步骤c4所求系数aR和bR在窗口R(Xi,j)范围内的值不一定为常量。为了更快的计算出系数aR和bR,把系数aR和bR改为包含像素点k的所有窗口的线性回归系数均值,改进后的系数aR′和bR′如下:
其中,h为包含像素点k的所有窗口的总个数,Rl表示为第l个包含像素点k的窗口,l=1,2,…,h;
将步骤c5所求改进后的系数aR′和bR′带入步骤c1的滤波模型中,所构建的滤波模型为:
具体实施例六
本实施例是一种航拍图像去雾方法中无雾图像求取方法的实施例。
一种航拍图像去雾方法中无雾图像求取方法,具体步骤如下:
上述的一种航拍图像去雾方法,步骤d的具体步骤如下:
一般会为公式中t设置一个阈值t0=0.1,用来避免当t值太小,导致J(xe,g)变大,避免恢复的图像不自然。
Claims (5)
1.一种航拍图像去雾方法,其特征在于,包括以下步骤:
步骤a、建立大气散射模型并求取暗通道图、粗糙大气透射图和全球大气光;
步骤b、利用非局部特征结构张量的主特征值对航拍图像纹理信息进行描述;
步骤c、采用图像非局部特征结构张量的自适应滤波方法优化粗糙大气透射图;
步骤d、求取无雾图像。
2.根据权利要求1所述的一种航拍图像去雾方法,其特征在于,步骤a的具体步骤如下:
步骤a1:构建大气散射模型
构建大气散射模型如下:
I(xe,g)=J(xe,g)t(xe,g)+A(1-t(xe,g))
其中,I(xe,g)为航拍有雾图像,J(xe,g)为去雾后的图像,t(xe,g)为透射图,A为大气光,xe,g为图像的像素点,xe,g坐标为(e,g),I(xe,g)、t(xe,g)、J(xe,g)的大小均为m×n,e=0,…,m-1,g=0,…,n-1,xe,g∈τ,τ为像素点从x0,0到xm-1,n-1所覆盖的区域集合;
步骤a2:构建航拍有雾图像I(xe,g)的暗通道图Idark(xe,g)
求出I(xe,g)各像素点RGB三通道中灰度值的最小值,存入到一幅与I(xe,g)大小相同的灰度图像Igray(xe,g)中,对Igray(xe,g)进行最小值滤波可得到I(xe,g)的暗通道图Idark(xe,g),用数学表达式可定义为:
其中,Ω(xe,g)为Igray(xe,g)上以任意点xe,g为中心的一定大小的矩形窗口,Ω(xe,g)=15,y代表Ω(xe,g)中的任意像素点,c代表图像RGB三通道中的任意通道,Ic(y)代表I(xe,g)中Ω(xe,g)内任意像素点在指定c通道中的灰度值;
步骤a3:求取全球大气光A
步骤a31、将步骤a2构建的Idark(xe,g),按像素点亮度从大到小的顺序提取前O个像素点位置,O=0.1%×m×n;
步骤a32、根据步骤a31提取的O个Idark(xe,g)中像素点位置,在I(xe,g)中寻找所对应位置的像素点,其中亮度最高的像素点的三个通道灰度的平均值即为全球大气光A;
步骤a41、将步骤a1所构建的大气散射模型两边同时除以I(xe,g)和J(xe,g)所对应各RGB通道的大气光Ac:
步骤a42、假设Ω(xe,g)的透射图tΩ(xe,g)为定值,则在Ω(xe,g)大小的矩形窗口内,对步骤a41所得公式两边,用最小化算子作最小化运算:
步骤a43、J(xe,g)的RGB通道中至少有一个通道的亮度值接近于0,根据步骤a2公式可求出J(xe,g)的暗通道Jdark(xe,g)为:
由于Ac为正值,故:
步骤a44、将步骤a43所得公式代入到步骤a42最小化运算的式子中,为了使恢复出的图像更自然,引入参数ω=0.95,所求出的定值tΩ(xe,g)为:
3.根据权利要求1所述的一种航拍图像去雾方法,其特征在于,步骤b的具体步骤如下:
Idown(X)为对I(xe,g)进行M倍下采样得到的引导图,M为下采样的倍数,I(xe,g)大小为m×n,下采样后Idown(X)大小为Xi,j为下采样后图像的像素点,Xi,j坐标为(i,j),X∈θ,θ为像素点从X0,0到所覆盖的区域集合;Idown(X)中任取像素点Xi,j相对于像素点Xi+Δi,j+Δj的非局部方向导数为:
步骤b2:求解权函数v(Xi,j,Xi+Δi,j+Δj)
步骤b21、计算块距离dα(Xi,j,Xi+Δi,j+Δj):
其中,Gα(Z)是标准差为α的高斯函数,Z表示以Xi,j、Xi+Δi,j+Δj为中心的邻域S(Xi,j)、S(Xi+Δi,j+Δj)的半径,邻域半径为定值;块距离dα(Xi,j,Xi+Δi,j+Δj)表示的是以Xi,j、Xi+Δi,j+Δj两点为中心的邻域S(Xi,j)和S(Xi+Δi,j+Δj)之间灰度值相似性的度量;
其中,‖Xi,j,Xi+Δi,j+Δj‖为像素点Xi,j与Xi+Δi,j+Δj之间的欧式距离;
步骤b23、在领域S(Xi,j)内,计算D(Xi,j):
其中,|D|代表区域D内的像素点个数,γ为参数;D(Xi,j)表示在Xi,j的邻域S(Xi,j)内,寻找在设定的距离度量函数值下与Xi,j点灰度值相似的γ个点的集合;
步骤b3:求解主特征值λ1
Idown(X)中任意点Xi,j的非局部结构张量为:
其中,s=1,…,γ,特征值λ1≥λ2≥…≥λγ≥0,最大的特征值λ1称为主特征值,由于rank(Jρ)=1,所以λ1≥0,λ2=…=λγ=0;
步骤b4:Idown(X)的纹理信息描述图λ(X)
求出Idown(X)各个像素点非局部结构张量的主特征值λ1,存入到一副与Idown(X)大小相同的灰度图像λ(X)中,即为纹理信息描述图。
4.根据权利要求1所述的一种航拍图像去雾方法,其特征在于,步骤c的具体步骤如下:
步骤c1:构建滤波模型
步骤c3:改进成本函数
将步骤b4所求λ(X)与像素点k相对应像素位置的强度值λ(k)融入步骤c2所构建的成本函数E(aR,bR)中,得到的最小误差成本函数E′(aR,bR)如下:
其中,为了防止分母为0,取η为大于0的常数;
步骤c4:求系数aR和bR
利用最小二乘法对步骤c3的最小误差成本函数E′(aR,bR)进行计算,得到系数aR和bR为:
步骤c5:改进系数aR和bR
为了更快的计算出系数aR和bR,把系数aR和bR改为包含像素点k的所有窗口的线性回归系数均值,改进后的系数aR′和bR′如下:
其中,h为包含像素点k的所有窗口的总个数,Rl表示为第l个包含像素点k的窗口,l=1,2,…,h;
将步骤c5所求改进后的系数aR′和bR′带入步骤c1的滤波模型中,所构建的滤波模型为:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010578071.5A CN111754433B (zh) | 2020-06-22 | 2020-06-22 | 一种航拍图像去雾方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010578071.5A CN111754433B (zh) | 2020-06-22 | 2020-06-22 | 一种航拍图像去雾方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111754433A true CN111754433A (zh) | 2020-10-09 |
CN111754433B CN111754433B (zh) | 2024-03-05 |
Family
ID=72675689
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010578071.5A Active CN111754433B (zh) | 2020-06-22 | 2020-06-22 | 一种航拍图像去雾方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111754433B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112581411A (zh) * | 2021-02-26 | 2021-03-30 | 深圳金三立视频科技股份有限公司 | 一种图像去雾的方法及终端 |
CN113344802A (zh) * | 2021-04-19 | 2021-09-03 | 大连海事大学 | 一种基于自适应的大气光融合的水下图像复原方法 |
CN114049274A (zh) * | 2021-11-13 | 2022-02-15 | 哈尔滨理工大学 | 一种单幅图像去雾方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140205192A1 (en) * | 2011-08-30 | 2014-07-24 | Fujitsu Limited | Image defogging method and system |
CN104299192A (zh) * | 2014-09-28 | 2015-01-21 | 北京联合大学 | 一种基于大气光散射物理模型的单幅图像去雾方法 |
CN106530246A (zh) * | 2016-10-28 | 2017-03-22 | 大连理工大学 | 基于暗通道与非局部先验的图像去雾方法及系统 |
CN108460743A (zh) * | 2018-03-19 | 2018-08-28 | 西安因诺航空科技有限公司 | 一种基于暗通道的无人机航拍图像去雾算法 |
CN110675340A (zh) * | 2019-09-16 | 2020-01-10 | 重庆邮电大学 | 一种基于改进的非局部先验的单幅图像去雾方法及介质 |
-
2020
- 2020-06-22 CN CN202010578071.5A patent/CN111754433B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140205192A1 (en) * | 2011-08-30 | 2014-07-24 | Fujitsu Limited | Image defogging method and system |
CN104299192A (zh) * | 2014-09-28 | 2015-01-21 | 北京联合大学 | 一种基于大气光散射物理模型的单幅图像去雾方法 |
CN106530246A (zh) * | 2016-10-28 | 2017-03-22 | 大连理工大学 | 基于暗通道与非局部先验的图像去雾方法及系统 |
CN108460743A (zh) * | 2018-03-19 | 2018-08-28 | 西安因诺航空科技有限公司 | 一种基于暗通道的无人机航拍图像去雾算法 |
CN110675340A (zh) * | 2019-09-16 | 2020-01-10 | 重庆邮电大学 | 一种基于改进的非局部先验的单幅图像去雾方法及介质 |
Non-Patent Citations (1)
Title |
---|
陈茹 等: "一种基于暗通道的航拍图像去雾算法", 无线电工程, no. 11, pages 38 - 41 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112581411A (zh) * | 2021-02-26 | 2021-03-30 | 深圳金三立视频科技股份有限公司 | 一种图像去雾的方法及终端 |
CN113344802A (zh) * | 2021-04-19 | 2021-09-03 | 大连海事大学 | 一种基于自适应的大气光融合的水下图像复原方法 |
CN114049274A (zh) * | 2021-11-13 | 2022-02-15 | 哈尔滨理工大学 | 一种单幅图像去雾方法 |
Also Published As
Publication number | Publication date |
---|---|
CN111754433B (zh) | 2024-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108596849B (zh) | 一种基于天空区域分割的单幅图像去雾方法 | |
CN107680054B (zh) | 雾霾环境下多源图像融合方法 | |
CN107301623B (zh) | 一种基于暗通道和图像分割的交通图像去雾方法及系统 | |
CN111754433A (zh) | 一种航拍图像去雾方法 | |
Gao et al. | Sand-dust image restoration based on reversing the blue channel prior | |
Zhang et al. | A new haze removal approach for sky/river alike scenes based on external and internal clues | |
CN110570360B (zh) | 一种基于Retinex的鲁棒和全面的低质量光照图像增强方法 | |
Liu et al. | Rank-one prior: Real-time scene recovery | |
Hou et al. | Underwater image dehazing and denoising via curvature variation regularization | |
CN110827218A (zh) | 基于图像hsv透射率加权校正的机载图像去雾方法 | |
CN115797225B (zh) | 一种水下地形测量用无人船采集图像增强方法 | |
Sabir et al. | Segmentation-based image defogging using modified dark channel prior | |
CN112200746A (zh) | 一种雾天交通场景图像的去雾方法和设备 | |
CN112053298B (zh) | 一种图像去雾方法 | |
CN116468640B (zh) | 一种用于互联网教学的视频图像增强方法 | |
CN113436124A (zh) | 一种应用于海洋雾天环境下的单图像去雾方法 | |
CN112419163B (zh) | 一种基于先验知识和深度学习的单张图像弱监督去雾方法 | |
CN113421210B (zh) | 一种基于双目立体视觉的表面点云重建方法 | |
CN109345479B (zh) | 一种视频监控数据的实时预处理方法及存储介质 | |
CN109801281B (zh) | 一种无纹理金属零件图像规整化直线段边缘检测方法 | |
CN113298763A (zh) | 一种基于显著性窗口策略的图像质量评估方法 | |
CN109672874B (zh) | 一种时空一致的立体视频颜色校正方法 | |
CN116433525A (zh) | 一种基于边缘检测函数变分模型的水下图像去雾方法 | |
Huang et al. | An end-to-end dehazing network with transitional convolution layer | |
Kim et al. | Single image dehazing of road scenes using spatially adaptive atmospheric point spread function |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |