CN111598886A - 一种基于单幅图像的像素级透过率估计方法 - Google Patents

一种基于单幅图像的像素级透过率估计方法 Download PDF

Info

Publication number
CN111598886A
CN111598886A CN202010446058.4A CN202010446058A CN111598886A CN 111598886 A CN111598886 A CN 111598886A CN 202010446058 A CN202010446058 A CN 202010446058A CN 111598886 A CN111598886 A CN 111598886A
Authority
CN
China
Prior art keywords
formula
image
pixel
transmittance
estimation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010446058.4A
Other languages
English (en)
Other versions
CN111598886B (zh
Inventor
毕国玲
陈长征
聂婷
薛金来
齐彪
张艳超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Original Assignee
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun Institute of Optics Fine Mechanics and Physics of CAS filed Critical Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority to CN202010446058.4A priority Critical patent/CN111598886B/zh
Publication of CN111598886A publication Critical patent/CN111598886A/zh
Application granted granted Critical
Publication of CN111598886B publication Critical patent/CN111598886B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)

Abstract

一种基于单幅图像的像素级透过率估计方法,涉及数字图像处理技术领域,解决现有暗通道复原方法中对局部透过率估计不准确的问题,本发明利用有雾图像的最小值通道和无雾图像的最小值通道建立像素级的透过率估计模型,通过对像素级的雾浓度估计,得到了无雾图像的最小值通道,从而得到了像素级的透过率估计。此外,对像素级的透过率图像进行高斯滤波处理,即可准确地估计透过率图像。实验证明本发明算法处理效果较好且运算量小,可应用于实时工程系统中。

Description

一种基于单幅图像的像素级透过率估计方法
技术领域
本发明涉及数字图像处理技术领域,具体涉及一种基于单幅图像的像素级透过率估计方法。
背景技术
近年来由于环境污染和气候变化,使得雾霾天气广泛存在,由于雾的影响会使得图像的亮度改变,细节丢失,对比度下降,极大地限制了户外成像设备效用的发挥。雾霾图像给后续图像分割、目标检测与跟踪、以及图像理解与分析带来了困难,对处理结果的准确性产生严重的影响。因此,对单幅有雾图像进行去雾处理意义重大。
通常对单幅雾霾图像的去雾处理主要通过图像增强和图像复原两种方式实现。图像增强方法主要包括:直方图均衡化、小波变换、Retinex算法以及同态滤波等,通常在增强图像细节信息的同时会导致其他信息的损失。图像复原方法去雾是通常以雾成像的大气散射模型为基础,通过一些先验信息对未知变量进行估计求解,如暗通道先验、颜色先验、几何先验等。一个关键未知变量的估计就是对透过率的估计。近年来,He提出的暗通道先验算法被公认是简单有效的去雾方法,然而暗通道算法在局部图像不满足先验信息的时候,对透过率的估计将会出现明显偏差,将会有颜色失真和光晕现象的发生,导致整体图像去雾效果不佳。
发明内容
本发明为了解决现有暗通道复原方法中对局部透过率估计不准确的问题,提供一种基于单幅图像的像素级透过率估计方法。
一种基于单幅图像的像素级透过率估计方法,该方法由以下步骤实现:
步骤一、以像素为最小估计单元,设定Jd(x)和Id(x)分别为RGB空间中无雾和有雾场景辐射的最小值通道,分别用下式表示为:
Figure BDA0002505816840000011
Figure BDA0002505816840000012
式中,c为R、G、B三通道中的一个颜色通道;对像素级的透过率t(x)的精细化估计,用下式表示为:
Figure BDA0002505816840000021
式中,κ为常数调节量,取Id(x)灰度值前0.05%像素对应的有雾图像灰度值的平均值作为大气光值A;
步骤二、选择RGB三通道Ic最大值,并将所述最大值的位置作为雾浓度最大的位置,则所有像素点与该最大值位置的距离为dc(x),用下式表示为:
dc(x)=(|Ic(x)-max(Ic(x))|)c∈(R,G,B) (4)
将三通道的dc(x)取最大值通道,并进行归一化处理,用下式表示为:
Figure BDA0002505816840000022
步骤三、采用公式(6)的减函数形式,获得像素级的雾浓度ω(x)的估计,用下式表示为:
ω(x)=(1-d(x))n (6)
当图像的雾浓度ω(x)越大,Id(x)越大,Jd(x)也越大;当图像的雾浓度ω(x)越小,Id(x)越小,Jd(x)也越小;获得Jd(x)的公式为:
Jd(x)=ω(x)Id(x) (7)
将公式(7)代入公式(3),获得像素级透过率t(x)的估计,用下式表示为:
Figure BDA0002505816840000023
步骤四、选取M×N的模版,对于每个像素(x,y)进行高斯滤波,高斯滤波函数G(x)用下式表示为:
Figure BDA0002505816840000024
式中,σ为正态分布的标准差,利用上式高斯滤波函数公式(9)与公式(8)中的t(x)作卷积(*)操作,对像素级透过率t(x)的图像进行高斯滤波平滑,平滑后的透过率为tg(x),用下式表示为:
tg(x)=t(x)*G(x) (10)
获得最终的去雾图像J(x),用下式表示为:
Figure BDA0002505816840000031
式中,I(x)为待去雾的图像。
本发明的有益效果:本发明利用有雾图像的最小值通道和无雾图像的最小值通道建立像素级的透过率估计模型,通过对像素级的雾浓度估计,得到了无雾图像的最小值通道,从而得到了像素级的透过率估计。此外,对像素级的透过率图像进行高斯滤波处理,即可准确地估计透过率图像。实验证明本发明算法处理效果较好且运算量小,可应用于实时工程系统中。
附图说明
图1为本发明所述的不同δ值对透过率估计的影响的效果图;
图2为不同n值与雾浓度估计ω(x)的关系示意图;
图3为不同n值时获得的透过率图像效果图;图3a为n=0.5时的透过率图像效果图,图3b为n=1.5时的透过率图像效果图,图3c为n=2.5时的透过率图像效果图。
图4为不同n值得到的去雾效果图;图4a为n=0.5时的去雾图像效果图,图4b为n=1.5时的去雾图像效果图,图4c为n=2.5时的去雾图像效果图。
图5为去雾效果对比图像的效果图;图5a为原雾图像,图5b为暗通道先验算法获得的去雾效果图,图5c为采用本发明的方法去雾的效果图。
具体实施方式
具体实施方式一、结合图1至图5说明本实施方式,一种基于单幅图像的像素级透过率估计方法,目前,广泛使用的雾成像模型是以衰减的反射光和参与成像的大气光两部分描述雾、霾天气下的退化过程的,其成像模型表示如下:
I(x)=J(x)t(x)+A(1-t(x))
其中,I(x)为待去雾的图像,J(x)为要恢复的无雾图像,A为全球大气光成分,t(x)为透过率。
基于以上大气散射模型,He等提出的暗通道先验去雾算法取得很好的去雾效果,被广泛采用。根据暗通道先验可知:
Figure BDA0002505816840000041
其中,c指R、G、B三通道中的一个颜色通道。表示在局部区域y∈Ω(x)窗口内,无雾图像J(x)趋于0。
但是,通过统计发现,户外的图像中,有相当大的一部分区域并不能很好的满足这个先验规律,如天空、灰白的区域、高反射率的物体等。即使局部区域满足暗通道先验,所求取图像的通过率会存在块效应,导致后续去雾图像在边缘处会产生光晕现象,还需要后续soft matting的精细化处理后方能得到梯度保持,较为准确的透过率图像,导致算法非常耗时。
对大气散射模型的局部区域进行最小值滤波,可得透过率的粗略估计
Figure BDA0002505816840000042
为:
Figure BDA0002505816840000043
其中,
Figure BDA0002505816840000044
为有雾和无雾场景的暗通道图像。其中,Jdark(x)取值对透过率估计值的影响,因为雾气的存在,使得有雾图像的暗通道Idark(x)≥Jdark(x),所以
Figure BDA0002505816840000045
设δ=Jdark(x)/Idark(x),选取δ=0、δ<0.25、δ<0.50、δ<0.75的随机数,A=250,那么得到透过率的粗略估计
Figure BDA0002505816840000046
如图1所示。
由图1可知,当δ=0即Jdark(x)→0时,Idark(x)与t(x)呈线性关系;当
Figure BDA0002505816840000055
时,t(x)的取值都比Jdark(x)→0时的值要大,而且随着Jdark(x)增大,对t(x)的影响越大。可见,当完全按照暗通道先验进行去雾处理时,导致透过率估计值比实际值偏小且在暗区时这种影响更明显,根据散射模型公式可知,所得的去雾后的图像整体会偏暗,图像去雾后会色彩失真。
本实施方式中,采用基于像素的透过率估计方法,不是以块为暗通道的最小估计单元,而是以像素为最小估计单元,设定Jd(x)和Id(x)分别为RGB空间中无雾和有雾场景辐射的最小值通道。
Figure BDA0002505816840000051
Figure BDA0002505816840000052
通过求取像素级的最小值通道图像,来估计透过率图像,能够很好地保持图像的边缘细节信息。然而,按照式(1)进行像素级最小值滤波求取无雾图像的最小值通道图像,会导致大面积的
Figure BDA0002505816840000053
本实施方式中,对不符合暗通道先验的区域利用数学模型的方式进行补偿,可得到本发明提出的像素级的精细化透过率t(x)的估计,如式(3)所示。
Figure BDA0002505816840000054
式中,κ为一个常数调节量,通常取κ=0.9,我们取Id(x)灰度值前0.05%像素对应的有雾图像的灰度值的平均值作为大气光值A。在式(3)中,只有Jd(x)为未知量,需要借助已知量Id(x)进行估计,下面我们将介绍对Jd(x)的估计方法。
找到RGB三通道Ic最大值并认为该位置为雾浓度最大的位置,那么所有像素点与该最大值的距离为dc(x)如式(4)所示。将三通道的dc(x)取最大值通道,并进行归一化处理,如式(5)所示。d(x)值越小表示和雾浓度最大的值越接近,我们近似的认为该处的雾的浓度越高;d(x)值越大,表示和雾浓度最大的值相差越远,雾的浓度越低。
dc(x)=(|Ic(x)-max(Ic(x))|)c∈(R,G,B) (4)
Figure BDA0002505816840000061
接下来我们采用式(6)减函数形式,得到像素级的雾浓度估计。
ω(x)=(1-d(x))n (6)
一般地,当雾的浓度较高时,即当d(x)<0.5时,雾的浓度ω(x)随着d(x)值的增大迅速下降,当d(x)>0.5时,雾的浓度ω(x)随着d(x)值的增大下降速度变缓,此时,当d(x)接近1时,雾对成像的影响就非常小了,因为综合分析,本发明选取n=1.5,符合实际雾霾成像的情况。为了直观的说明,下面给出不同n值与雾浓度估计ω(x)的关系,如图2所示。
一般情况下,当图像的雾浓度ω(x)越大,Id(x)越大,Jd(x)也越大;当图像的雾浓度ω(x)越小,Id(x)越小,Jd(x)也越小。可得Jd(x)如下式所示:
Jd(x)=ω(x)Id(x) (7)
将公式(7)代入公式(3)可得到本发明的较为准确的像素级透过率t(x)的估计值,如式(8)所示。
Figure BDA0002505816840000062
由于雾霾天气条件下,可认为大气是均匀的,这样局部小区域内的透过率应该是相等的。因此,选取M×N的模版,对于每个像素(x,y)进行高斯滤波的函数如式(9)所示,σ为正态分布的标准差。。
Figure BDA0002505816840000063
利用上式的高斯函数与式(8)中的t(x)的卷积操作,对像素级透过率t(x)进行高斯滤波平滑,同时也保持了像素级的边缘,得到的平滑透过率tg(x),如式(10)所示。
tg(x)=t(x)*G(x) (10)
最终得到的去雾图像如式(11)所示:
Figure BDA0002505816840000071
经过本实施方式所述的方法,处理后的图像细节丰富、对比度高,无光晕现象产生。与暗通道去雾处理后的效果对比如图5所示。

Claims (1)

1.一种基于单幅图像的像素级透过率估计方法,其特征是:该方法由以下步骤实现:
步骤一、以像素为最小估计单元,设定Jd(x)和Id(x)分别为RGB空间中无雾和有雾场景辐射的最小值通道,分别用下式表示为:
Figure FDA0002505816830000011
Figure FDA0002505816830000012
式中,c为R、G、B三通道中的一个颜色通道;对像素级的透过率t(x)的精细化估计,用下式表示为:
Figure FDA0002505816830000013
式中,κ为常数调节量,取Id(x)灰度值前0.05%像素对应的有雾图像灰度值的平均值作为大气光值A;
步骤二、选择RGB三通道Ic最大值,并将所述最大值的位置作为雾浓度最大的位置,则所有像素点与该最大值位置的距离为dc(x),用下式表示为:
dc(x)=(|Ic(x)-max(Ic(x))|)c∈(R,G,B) (4)
将三通道的dc(x)取最大值通道,并进行归一化处理,用下式表示为:
Figure FDA0002505816830000014
步骤三、采用公式(6)的减函数形式,获得像素级的雾浓度ω(x)的估计,用下式表示为:
ω(x)=(1-d(x))n (6)
当图像的雾浓度ω(x)越大,Id(x)越大,Jd(x)也越大;当图像的雾浓度ω(x)越小,Id(x)越小,Jd(x)也越小;获得Jd(x)的公式为:
Jd(x)=ω(x)Id(x) (7)
将公式(7)代入公式(3),获得像素级透过率t(x)的估计,用下式表示为:
Figure FDA0002505816830000021
步骤四、选取M×N的模版,对于每个像素(x,y)进行高斯滤波,高斯滤波函数G(x)用下式表示为:
Figure FDA0002505816830000022
式中,σ为正态分布的标准差,利用上式高斯滤波函数公式(9)与公式(8)中的t(x)作卷积操作,对像素级透过率t(x)的图像进行高斯滤波平滑,平滑后的透过率为tg(x),用下式表示为:
tg(x)=t(x)*G(x) (10)
获得最终的去雾图像J(x),用下式表示为:
Figure FDA0002505816830000023
式中,I(x)为待去雾的图像。
CN202010446058.4A 2020-05-25 2020-05-25 一种基于单幅图像的像素级透过率估计方法 Active CN111598886B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010446058.4A CN111598886B (zh) 2020-05-25 2020-05-25 一种基于单幅图像的像素级透过率估计方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010446058.4A CN111598886B (zh) 2020-05-25 2020-05-25 一种基于单幅图像的像素级透过率估计方法

Publications (2)

Publication Number Publication Date
CN111598886A true CN111598886A (zh) 2020-08-28
CN111598886B CN111598886B (zh) 2022-03-22

Family

ID=72191392

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010446058.4A Active CN111598886B (zh) 2020-05-25 2020-05-25 一种基于单幅图像的像素级透过率估计方法

Country Status (1)

Country Link
CN (1) CN111598886B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112116537A (zh) * 2020-08-31 2020-12-22 中国科学院长春光学精密机械与物理研究所 图像反射光消除方法及图像反射光消除网络构建方法
CN113298730A (zh) * 2021-05-24 2021-08-24 中国科学院长春光学精密机械与物理研究所 一种基于图像分解的去雾复原方法
CN113298729A (zh) * 2021-05-24 2021-08-24 中国科学院长春光学精密机械与物理研究所 基于最小值通道的快速单幅图像去雾方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102831591A (zh) * 2012-06-27 2012-12-19 北京航空航天大学 一种基于高斯滤波的单幅图像的实时去雾方法
US20140140619A1 (en) * 2011-08-03 2014-05-22 Sudipta Mukhopadhyay Method and System for Removal of Fog, Mist, or Haze from Images and Videos
US20150161769A1 (en) * 2013-03-11 2015-06-11 Industry Foundation Of Chonnam National University System for improving foggy luminance image using fog reduction estimation model
CN106548463A (zh) * 2016-10-28 2017-03-29 大连理工大学 基于暗通道与Retinex的海雾图像自动去雾方法及系统
US20190114747A1 (en) * 2016-04-07 2019-04-18 Carmel Haifa University Economic Corporation Ltd. Image dehazing and restoration
CN110570365A (zh) * 2019-08-06 2019-12-13 西安电子科技大学 基于先验信息的图像去雾方法
CN110675340A (zh) * 2019-09-16 2020-01-10 重庆邮电大学 一种基于改进的非局部先验的单幅图像去雾方法及介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140140619A1 (en) * 2011-08-03 2014-05-22 Sudipta Mukhopadhyay Method and System for Removal of Fog, Mist, or Haze from Images and Videos
CN102831591A (zh) * 2012-06-27 2012-12-19 北京航空航天大学 一种基于高斯滤波的单幅图像的实时去雾方法
US20150161769A1 (en) * 2013-03-11 2015-06-11 Industry Foundation Of Chonnam National University System for improving foggy luminance image using fog reduction estimation model
US20190114747A1 (en) * 2016-04-07 2019-04-18 Carmel Haifa University Economic Corporation Ltd. Image dehazing and restoration
CN106548463A (zh) * 2016-10-28 2017-03-29 大连理工大学 基于暗通道与Retinex的海雾图像自动去雾方法及系统
CN110570365A (zh) * 2019-08-06 2019-12-13 西安电子科技大学 基于先验信息的图像去雾方法
CN110675340A (zh) * 2019-09-16 2020-01-10 重庆邮电大学 一种基于改进的非局部先验的单幅图像去雾方法及介质

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
GUOLING BI 等: "Image Dehazing Based on Accurate Estimation of Transmission in the Atmospheric Scattering Model", 《IEEE PHOTONICS JOURNAL》 *
RUI WANG 等: "Haze removal based on multiple scattering model with superpixel algorithm", 《SIGNAL PROCESSING》 *
SOO-CHANG PEI 等: "Single image desmoking using haze image model and human visual system", 《JOURNAL OF ELECTRONIC IMAGING》 *
张闪闪: "基于大气散射模型的图像去雾算法研究", 《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》 *
汤红忠 等: "结合最小颜色通道图与传播滤波的单幅图像去雾算法研究", 《通信学报》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112116537A (zh) * 2020-08-31 2020-12-22 中国科学院长春光学精密机械与物理研究所 图像反射光消除方法及图像反射光消除网络构建方法
CN113298730A (zh) * 2021-05-24 2021-08-24 中国科学院长春光学精密机械与物理研究所 一种基于图像分解的去雾复原方法
CN113298729A (zh) * 2021-05-24 2021-08-24 中国科学院长春光学精密机械与物理研究所 基于最小值通道的快速单幅图像去雾方法
CN113298729B (zh) * 2021-05-24 2022-04-26 中国科学院长春光学精密机械与物理研究所 基于最小值通道的快速单幅图像去雾方法

Also Published As

Publication number Publication date
CN111598886B (zh) 2022-03-22

Similar Documents

Publication Publication Date Title
CN111598886B (zh) 一种基于单幅图像的像素级透过率估计方法
Gao et al. Sand-dust image restoration based on reversing the blue channel prior
CN107301624B (zh) 基于区域划分及浓雾预处理的卷积神经网络去雾方法
Muniraj et al. Underwater image enhancement by combining color constancy and dehazing based on depth estimation
CN108133462B (zh) 一种基于梯度场区域分割的单幅图像的复原方法
CN110782407B (zh) 一种基于天空区域概率分割的单幅图像去雾方法
Yang et al. Visibility restoration of single image captured in dust and haze weather conditions
CN111861896A (zh) 一种面向uuv的水下图像色彩补偿与恢复方法
CN111598814B (zh) 基于极端散射通道的单图像去雾方法
CN111598812B (zh) 一种基于rgb和hsv双颜色空间的图像去雾方法
CN105023246B (zh) 一种基于对比度和结构相似度的图像增强方法
Choi et al. Fog detection for de-fogging of road driving images
Wei et al. An image fusion dehazing algorithm based on dark channel prior and retinex
CN110335210B (zh) 一种水下图像复原方法
CN108765337B (zh) 一种基于暗原色先验与非局部mtv模型的单幅彩色图像去雾处理方法
CN112419163A (zh) 一种基于先验知识和深度学习的单张图像弱监督去雾方法
CN112825189B (zh) 一种图像去雾方法及相关设备
Wang et al. Retinex algorithm on changing scales for haze removal with depth map
Hong et al. Single image dehazing based on pixel-wise transmission estimation with estimated radiance patches
CN110852971B (zh) 基于暗原色先验和Retinex的视频去雾方法及存储介质
Hari et al. Dark and Bright Channel Priors for Haze Removal in Day and Night Images.
Negru et al. Exponential image enhancement in daytime fog conditions
Wang et al. Adaptive Bright and Dark Channel Combined with Defogging Algorithm Based on Depth of Field
Jeong et al. Fog detection and fog synthesis for effective quantitative evaluation of fog–detection-and-removal algorithms
CN113298729B (zh) 基于最小值通道的快速单幅图像去雾方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant