CN111598886A - 一种基于单幅图像的像素级透过率估计方法 - Google Patents
一种基于单幅图像的像素级透过率估计方法 Download PDFInfo
- Publication number
- CN111598886A CN111598886A CN202010446058.4A CN202010446058A CN111598886A CN 111598886 A CN111598886 A CN 111598886A CN 202010446058 A CN202010446058 A CN 202010446058A CN 111598886 A CN111598886 A CN 111598886A
- Authority
- CN
- China
- Prior art keywords
- formula
- image
- pixel
- transmittance
- estimation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000002834 transmittance Methods 0.000 title claims abstract description 44
- 238000000034 method Methods 0.000 title claims abstract description 19
- 238000012545 processing Methods 0.000 claims abstract description 12
- 238000001914 filtration Methods 0.000 claims description 7
- 238000009499 grossing Methods 0.000 claims description 4
- 238000010606 normalization Methods 0.000 claims description 3
- 230000005855 radiation Effects 0.000 claims description 3
- 230000001105 regulatory effect Effects 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract description 19
- 238000002474 experimental method Methods 0.000 abstract description 2
- 238000003384 imaging method Methods 0.000 description 7
- 239000003595 mist Substances 0.000 description 6
- 125000001475 halogen functional group Chemical group 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- NAWXUBYGYWOOIX-SFHVURJKSA-N (2s)-2-[[4-[2-(2,4-diaminoquinazolin-6-yl)ethyl]benzoyl]amino]-4-methylidenepentanedioic acid Chemical compound C1=CC2=NC(N)=NC(N)=C2C=C1CCC1=CC=C(C(=O)N[C@@H](CC(=C)C(O)=O)C(O)=O)C=C1 NAWXUBYGYWOOIX-SFHVURJKSA-N 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000003912 environmental pollution Methods 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
Abstract
一种基于单幅图像的像素级透过率估计方法,涉及数字图像处理技术领域,解决现有暗通道复原方法中对局部透过率估计不准确的问题,本发明利用有雾图像的最小值通道和无雾图像的最小值通道建立像素级的透过率估计模型,通过对像素级的雾浓度估计,得到了无雾图像的最小值通道,从而得到了像素级的透过率估计。此外,对像素级的透过率图像进行高斯滤波处理,即可准确地估计透过率图像。实验证明本发明算法处理效果较好且运算量小,可应用于实时工程系统中。
Description
技术领域
本发明涉及数字图像处理技术领域,具体涉及一种基于单幅图像的像素级透过率估计方法。
背景技术
近年来由于环境污染和气候变化,使得雾霾天气广泛存在,由于雾的影响会使得图像的亮度改变,细节丢失,对比度下降,极大地限制了户外成像设备效用的发挥。雾霾图像给后续图像分割、目标检测与跟踪、以及图像理解与分析带来了困难,对处理结果的准确性产生严重的影响。因此,对单幅有雾图像进行去雾处理意义重大。
通常对单幅雾霾图像的去雾处理主要通过图像增强和图像复原两种方式实现。图像增强方法主要包括:直方图均衡化、小波变换、Retinex算法以及同态滤波等,通常在增强图像细节信息的同时会导致其他信息的损失。图像复原方法去雾是通常以雾成像的大气散射模型为基础,通过一些先验信息对未知变量进行估计求解,如暗通道先验、颜色先验、几何先验等。一个关键未知变量的估计就是对透过率的估计。近年来,He提出的暗通道先验算法被公认是简单有效的去雾方法,然而暗通道算法在局部图像不满足先验信息的时候,对透过率的估计将会出现明显偏差,将会有颜色失真和光晕现象的发生,导致整体图像去雾效果不佳。
发明内容
本发明为了解决现有暗通道复原方法中对局部透过率估计不准确的问题,提供一种基于单幅图像的像素级透过率估计方法。
一种基于单幅图像的像素级透过率估计方法,该方法由以下步骤实现:
步骤一、以像素为最小估计单元,设定Jd(x)和Id(x)分别为RGB空间中无雾和有雾场景辐射的最小值通道,分别用下式表示为:
式中,c为R、G、B三通道中的一个颜色通道;对像素级的透过率t(x)的精细化估计,用下式表示为:
式中,κ为常数调节量,取Id(x)灰度值前0.05%像素对应的有雾图像灰度值的平均值作为大气光值A;
步骤二、选择RGB三通道Ic最大值,并将所述最大值的位置作为雾浓度最大的位置,则所有像素点与该最大值位置的距离为dc(x),用下式表示为:
dc(x)=(|Ic(x)-max(Ic(x))|)c∈(R,G,B) (4)
将三通道的dc(x)取最大值通道,并进行归一化处理,用下式表示为:
步骤三、采用公式(6)的减函数形式,获得像素级的雾浓度ω(x)的估计,用下式表示为:
ω(x)=(1-d(x))n (6)
当图像的雾浓度ω(x)越大,Id(x)越大,Jd(x)也越大;当图像的雾浓度ω(x)越小,Id(x)越小,Jd(x)也越小;获得Jd(x)的公式为:
Jd(x)=ω(x)Id(x) (7)
将公式(7)代入公式(3),获得像素级透过率t(x)的估计,用下式表示为:
步骤四、选取M×N的模版,对于每个像素(x,y)进行高斯滤波,高斯滤波函数G(x)用下式表示为:
式中,σ为正态分布的标准差,利用上式高斯滤波函数公式(9)与公式(8)中的t(x)作卷积(*)操作,对像素级透过率t(x)的图像进行高斯滤波平滑,平滑后的透过率为tg(x),用下式表示为:
tg(x)=t(x)*G(x) (10)
获得最终的去雾图像J(x),用下式表示为:
式中,I(x)为待去雾的图像。
本发明的有益效果:本发明利用有雾图像的最小值通道和无雾图像的最小值通道建立像素级的透过率估计模型,通过对像素级的雾浓度估计,得到了无雾图像的最小值通道,从而得到了像素级的透过率估计。此外,对像素级的透过率图像进行高斯滤波处理,即可准确地估计透过率图像。实验证明本发明算法处理效果较好且运算量小,可应用于实时工程系统中。
附图说明
图1为本发明所述的不同δ值对透过率估计的影响的效果图;
图2为不同n值与雾浓度估计ω(x)的关系示意图;
图3为不同n值时获得的透过率图像效果图;图3a为n=0.5时的透过率图像效果图,图3b为n=1.5时的透过率图像效果图,图3c为n=2.5时的透过率图像效果图。
图4为不同n值得到的去雾效果图;图4a为n=0.5时的去雾图像效果图,图4b为n=1.5时的去雾图像效果图,图4c为n=2.5时的去雾图像效果图。
图5为去雾效果对比图像的效果图;图5a为原雾图像,图5b为暗通道先验算法获得的去雾效果图,图5c为采用本发明的方法去雾的效果图。
具体实施方式
具体实施方式一、结合图1至图5说明本实施方式,一种基于单幅图像的像素级透过率估计方法,目前,广泛使用的雾成像模型是以衰减的反射光和参与成像的大气光两部分描述雾、霾天气下的退化过程的,其成像模型表示如下:
I(x)=J(x)t(x)+A(1-t(x))
其中,I(x)为待去雾的图像,J(x)为要恢复的无雾图像,A为全球大气光成分,t(x)为透过率。
基于以上大气散射模型,He等提出的暗通道先验去雾算法取得很好的去雾效果,被广泛采用。根据暗通道先验可知:
其中,c指R、G、B三通道中的一个颜色通道。表示在局部区域y∈Ω(x)窗口内,无雾图像J(x)趋于0。
但是,通过统计发现,户外的图像中,有相当大的一部分区域并不能很好的满足这个先验规律,如天空、灰白的区域、高反射率的物体等。即使局部区域满足暗通道先验,所求取图像的通过率会存在块效应,导致后续去雾图像在边缘处会产生光晕现象,还需要后续soft matting的精细化处理后方能得到梯度保持,较为准确的透过率图像,导致算法非常耗时。
由图1可知,当δ=0即Jdark(x)→0时,Idark(x)与t(x)呈线性关系;当时,t(x)的取值都比Jdark(x)→0时的值要大,而且随着Jdark(x)增大,对t(x)的影响越大。可见,当完全按照暗通道先验进行去雾处理时,导致透过率估计值比实际值偏小且在暗区时这种影响更明显,根据散射模型公式可知,所得的去雾后的图像整体会偏暗,图像去雾后会色彩失真。
本实施方式中,采用基于像素的透过率估计方法,不是以块为暗通道的最小估计单元,而是以像素为最小估计单元,设定Jd(x)和Id(x)分别为RGB空间中无雾和有雾场景辐射的最小值通道。
本实施方式中,对不符合暗通道先验的区域利用数学模型的方式进行补偿,可得到本发明提出的像素级的精细化透过率t(x)的估计,如式(3)所示。
式中,κ为一个常数调节量,通常取κ=0.9,我们取Id(x)灰度值前0.05%像素对应的有雾图像的灰度值的平均值作为大气光值A。在式(3)中,只有Jd(x)为未知量,需要借助已知量Id(x)进行估计,下面我们将介绍对Jd(x)的估计方法。
找到RGB三通道Ic最大值并认为该位置为雾浓度最大的位置,那么所有像素点与该最大值的距离为dc(x)如式(4)所示。将三通道的dc(x)取最大值通道,并进行归一化处理,如式(5)所示。d(x)值越小表示和雾浓度最大的值越接近,我们近似的认为该处的雾的浓度越高;d(x)值越大,表示和雾浓度最大的值相差越远,雾的浓度越低。
dc(x)=(|Ic(x)-max(Ic(x))|)c∈(R,G,B) (4)
接下来我们采用式(6)减函数形式,得到像素级的雾浓度估计。
ω(x)=(1-d(x))n (6)
一般地,当雾的浓度较高时,即当d(x)<0.5时,雾的浓度ω(x)随着d(x)值的增大迅速下降,当d(x)>0.5时,雾的浓度ω(x)随着d(x)值的增大下降速度变缓,此时,当d(x)接近1时,雾对成像的影响就非常小了,因为综合分析,本发明选取n=1.5,符合实际雾霾成像的情况。为了直观的说明,下面给出不同n值与雾浓度估计ω(x)的关系,如图2所示。
一般情况下,当图像的雾浓度ω(x)越大,Id(x)越大,Jd(x)也越大;当图像的雾浓度ω(x)越小,Id(x)越小,Jd(x)也越小。可得Jd(x)如下式所示:
Jd(x)=ω(x)Id(x) (7)
将公式(7)代入公式(3)可得到本发明的较为准确的像素级透过率t(x)的估计值,如式(8)所示。
由于雾霾天气条件下,可认为大气是均匀的,这样局部小区域内的透过率应该是相等的。因此,选取M×N的模版,对于每个像素(x,y)进行高斯滤波的函数如式(9)所示,σ为正态分布的标准差。。
利用上式的高斯函数与式(8)中的t(x)的卷积操作,对像素级透过率t(x)进行高斯滤波平滑,同时也保持了像素级的边缘,得到的平滑透过率tg(x),如式(10)所示。
tg(x)=t(x)*G(x) (10)
最终得到的去雾图像如式(11)所示:
经过本实施方式所述的方法,处理后的图像细节丰富、对比度高,无光晕现象产生。与暗通道去雾处理后的效果对比如图5所示。
Claims (1)
1.一种基于单幅图像的像素级透过率估计方法,其特征是:该方法由以下步骤实现:
步骤一、以像素为最小估计单元,设定Jd(x)和Id(x)分别为RGB空间中无雾和有雾场景辐射的最小值通道,分别用下式表示为:
式中,c为R、G、B三通道中的一个颜色通道;对像素级的透过率t(x)的精细化估计,用下式表示为:
式中,κ为常数调节量,取Id(x)灰度值前0.05%像素对应的有雾图像灰度值的平均值作为大气光值A;
步骤二、选择RGB三通道Ic最大值,并将所述最大值的位置作为雾浓度最大的位置,则所有像素点与该最大值位置的距离为dc(x),用下式表示为:
dc(x)=(|Ic(x)-max(Ic(x))|)c∈(R,G,B) (4)
将三通道的dc(x)取最大值通道,并进行归一化处理,用下式表示为:
步骤三、采用公式(6)的减函数形式,获得像素级的雾浓度ω(x)的估计,用下式表示为:
ω(x)=(1-d(x))n (6)
当图像的雾浓度ω(x)越大,Id(x)越大,Jd(x)也越大;当图像的雾浓度ω(x)越小,Id(x)越小,Jd(x)也越小;获得Jd(x)的公式为:
Jd(x)=ω(x)Id(x) (7)
将公式(7)代入公式(3),获得像素级透过率t(x)的估计,用下式表示为:
步骤四、选取M×N的模版,对于每个像素(x,y)进行高斯滤波,高斯滤波函数G(x)用下式表示为:
式中,σ为正态分布的标准差,利用上式高斯滤波函数公式(9)与公式(8)中的t(x)作卷积操作,对像素级透过率t(x)的图像进行高斯滤波平滑,平滑后的透过率为tg(x),用下式表示为:
tg(x)=t(x)*G(x) (10)
获得最终的去雾图像J(x),用下式表示为:
式中,I(x)为待去雾的图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010446058.4A CN111598886B (zh) | 2020-05-25 | 2020-05-25 | 一种基于单幅图像的像素级透过率估计方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010446058.4A CN111598886B (zh) | 2020-05-25 | 2020-05-25 | 一种基于单幅图像的像素级透过率估计方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111598886A true CN111598886A (zh) | 2020-08-28 |
CN111598886B CN111598886B (zh) | 2022-03-22 |
Family
ID=72191392
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010446058.4A Active CN111598886B (zh) | 2020-05-25 | 2020-05-25 | 一种基于单幅图像的像素级透过率估计方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111598886B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112116537A (zh) * | 2020-08-31 | 2020-12-22 | 中国科学院长春光学精密机械与物理研究所 | 图像反射光消除方法及图像反射光消除网络构建方法 |
CN113298730A (zh) * | 2021-05-24 | 2021-08-24 | 中国科学院长春光学精密机械与物理研究所 | 一种基于图像分解的去雾复原方法 |
CN113298729A (zh) * | 2021-05-24 | 2021-08-24 | 中国科学院长春光学精密机械与物理研究所 | 基于最小值通道的快速单幅图像去雾方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102831591A (zh) * | 2012-06-27 | 2012-12-19 | 北京航空航天大学 | 一种基于高斯滤波的单幅图像的实时去雾方法 |
US20140140619A1 (en) * | 2011-08-03 | 2014-05-22 | Sudipta Mukhopadhyay | Method and System for Removal of Fog, Mist, or Haze from Images and Videos |
US20150161769A1 (en) * | 2013-03-11 | 2015-06-11 | Industry Foundation Of Chonnam National University | System for improving foggy luminance image using fog reduction estimation model |
CN106548463A (zh) * | 2016-10-28 | 2017-03-29 | 大连理工大学 | 基于暗通道与Retinex的海雾图像自动去雾方法及系统 |
US20190114747A1 (en) * | 2016-04-07 | 2019-04-18 | Carmel Haifa University Economic Corporation Ltd. | Image dehazing and restoration |
CN110570365A (zh) * | 2019-08-06 | 2019-12-13 | 西安电子科技大学 | 基于先验信息的图像去雾方法 |
CN110675340A (zh) * | 2019-09-16 | 2020-01-10 | 重庆邮电大学 | 一种基于改进的非局部先验的单幅图像去雾方法及介质 |
-
2020
- 2020-05-25 CN CN202010446058.4A patent/CN111598886B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140140619A1 (en) * | 2011-08-03 | 2014-05-22 | Sudipta Mukhopadhyay | Method and System for Removal of Fog, Mist, or Haze from Images and Videos |
CN102831591A (zh) * | 2012-06-27 | 2012-12-19 | 北京航空航天大学 | 一种基于高斯滤波的单幅图像的实时去雾方法 |
US20150161769A1 (en) * | 2013-03-11 | 2015-06-11 | Industry Foundation Of Chonnam National University | System for improving foggy luminance image using fog reduction estimation model |
US20190114747A1 (en) * | 2016-04-07 | 2019-04-18 | Carmel Haifa University Economic Corporation Ltd. | Image dehazing and restoration |
CN106548463A (zh) * | 2016-10-28 | 2017-03-29 | 大连理工大学 | 基于暗通道与Retinex的海雾图像自动去雾方法及系统 |
CN110570365A (zh) * | 2019-08-06 | 2019-12-13 | 西安电子科技大学 | 基于先验信息的图像去雾方法 |
CN110675340A (zh) * | 2019-09-16 | 2020-01-10 | 重庆邮电大学 | 一种基于改进的非局部先验的单幅图像去雾方法及介质 |
Non-Patent Citations (5)
Title |
---|
GUOLING BI 等: "Image Dehazing Based on Accurate Estimation of Transmission in the Atmospheric Scattering Model", 《IEEE PHOTONICS JOURNAL》 * |
RUI WANG 等: "Haze removal based on multiple scattering model with superpixel algorithm", 《SIGNAL PROCESSING》 * |
SOO-CHANG PEI 等: "Single image desmoking using haze image model and human visual system", 《JOURNAL OF ELECTRONIC IMAGING》 * |
张闪闪: "基于大气散射模型的图像去雾算法研究", 《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》 * |
汤红忠 等: "结合最小颜色通道图与传播滤波的单幅图像去雾算法研究", 《通信学报》 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112116537A (zh) * | 2020-08-31 | 2020-12-22 | 中国科学院长春光学精密机械与物理研究所 | 图像反射光消除方法及图像反射光消除网络构建方法 |
CN113298730A (zh) * | 2021-05-24 | 2021-08-24 | 中国科学院长春光学精密机械与物理研究所 | 一种基于图像分解的去雾复原方法 |
CN113298729A (zh) * | 2021-05-24 | 2021-08-24 | 中国科学院长春光学精密机械与物理研究所 | 基于最小值通道的快速单幅图像去雾方法 |
CN113298729B (zh) * | 2021-05-24 | 2022-04-26 | 中国科学院长春光学精密机械与物理研究所 | 基于最小值通道的快速单幅图像去雾方法 |
Also Published As
Publication number | Publication date |
---|---|
CN111598886B (zh) | 2022-03-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111598886B (zh) | 一种基于单幅图像的像素级透过率估计方法 | |
Gao et al. | Sand-dust image restoration based on reversing the blue channel prior | |
CN107301624B (zh) | 基于区域划分及浓雾预处理的卷积神经网络去雾方法 | |
Muniraj et al. | Underwater image enhancement by combining color constancy and dehazing based on depth estimation | |
CN108133462B (zh) | 一种基于梯度场区域分割的单幅图像的复原方法 | |
CN110782407B (zh) | 一种基于天空区域概率分割的单幅图像去雾方法 | |
Yang et al. | Visibility restoration of single image captured in dust and haze weather conditions | |
CN111861896A (zh) | 一种面向uuv的水下图像色彩补偿与恢复方法 | |
CN111598814B (zh) | 基于极端散射通道的单图像去雾方法 | |
CN111598812B (zh) | 一种基于rgb和hsv双颜色空间的图像去雾方法 | |
CN105023246B (zh) | 一种基于对比度和结构相似度的图像增强方法 | |
Choi et al. | Fog detection for de-fogging of road driving images | |
Wei et al. | An image fusion dehazing algorithm based on dark channel prior and retinex | |
CN110335210B (zh) | 一种水下图像复原方法 | |
CN108765337B (zh) | 一种基于暗原色先验与非局部mtv模型的单幅彩色图像去雾处理方法 | |
CN112419163A (zh) | 一种基于先验知识和深度学习的单张图像弱监督去雾方法 | |
CN112825189B (zh) | 一种图像去雾方法及相关设备 | |
Wang et al. | Retinex algorithm on changing scales for haze removal with depth map | |
Hong et al. | Single image dehazing based on pixel-wise transmission estimation with estimated radiance patches | |
CN110852971B (zh) | 基于暗原色先验和Retinex的视频去雾方法及存储介质 | |
Hari et al. | Dark and Bright Channel Priors for Haze Removal in Day and Night Images. | |
Negru et al. | Exponential image enhancement in daytime fog conditions | |
Wang et al. | Adaptive Bright and Dark Channel Combined with Defogging Algorithm Based on Depth of Field | |
Jeong et al. | Fog detection and fog synthesis for effective quantitative evaluation of fog–detection-and-removal algorithms | |
CN113298729B (zh) | 基于最小值通道的快速单幅图像去雾方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |