CN111127377A - 一种基于多图像融合Retinex的弱光增强方法 - Google Patents
一种基于多图像融合Retinex的弱光增强方法 Download PDFInfo
- Publication number
- CN111127377A CN111127377A CN201911323862.7A CN201911323862A CN111127377A CN 111127377 A CN111127377 A CN 111127377A CN 201911323862 A CN201911323862 A CN 201911323862A CN 111127377 A CN111127377 A CN 111127377A
- Authority
- CN
- China
- Prior art keywords
- image
- illumination
- map
- fusion
- initial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000004927 fusion Effects 0.000 title claims abstract description 122
- 238000000034 method Methods 0.000 title claims abstract description 53
- 238000005286 illumination Methods 0.000 claims abstract description 177
- 238000001914 filtration Methods 0.000 claims abstract description 26
- 238000012937 correction Methods 0.000 claims abstract description 19
- 230000000877 morphologic effect Effects 0.000 claims abstract description 11
- 238000009499 grossing Methods 0.000 claims description 20
- 230000009466 transformation Effects 0.000 claims description 9
- 230000002708 enhancing effect Effects 0.000 claims description 6
- 238000013507 mapping Methods 0.000 claims description 6
- 239000011159 matrix material Substances 0.000 claims description 6
- 238000011551 log transformation method Methods 0.000 claims description 5
- 230000003044 adaptive effect Effects 0.000 claims description 4
- 108010063499 Sigma Factor Proteins 0.000 claims description 3
- 238000010606 normalization Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 abstract description 8
- 230000000694 effects Effects 0.000 description 12
- 238000011156 evaluation Methods 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000001105 regulatory effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000002474 experimental method Methods 0.000 description 3
- 238000013441 quality evaluation Methods 0.000 description 3
- 238000002310 reflectometry Methods 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000014759 maintenance of location Effects 0.000 description 2
- 230000035772 mutation Effects 0.000 description 2
- 238000004321 preservation Methods 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20224—Image subtraction
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本发明属于图像处理技术领域,公开了一种基于多图像融合Retinex的弱光增强方法,包括:根据原始图像获得初始照明图;根据原始图像、初始照明图获得初始反射图;根据初始反射图,采用形态学闭合的方式获得调整反射图;选取获得初始融合照明图,包括初始照明估计图、伽马矫正照明估计图、直方图规定化照明估计图;对初始融合照明图进行加权最小二乘滤波,获得滤波图;根据初始融合照明图、滤波图,获得平滑层融合照明图、细节层融合照明图;根据平滑层融合照明图、细节层融合照明图,获得最终照明融合图;根据调整反射图、最终照明融合图,获得增强图像。本发明能够有效增强弱光图像对比度,同时保持图像自然度。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及一种基于多图像融合Retinex的弱光增强方法。
背景技术
高质量图像为图像的后续处理提供保障,而在弱光照环境中,通过设备往往不能直接获取清晰地、高对比度的图像,图像增强就成为了图像应用于特定场合与系统的重要方式。目前,图像增强已应用于各种科学和工程领域,如大气科学、卫星遥感、计算机视觉、人体医学、交通领域等,因此,弱光图像增强是图像处理领域一个必不可少而又极为重要的研究内容。目前,基于直方图均衡化方法、基于Retinex理论方法和基于图像去雾算法等增强算法已经被广泛应用于通过设备采集图像后处理的过程中,以便于后续图像处理步骤。
基于Retinex算法主要解决分解后照明图信息的准确估计问题和结构信息的有效保存问题。反射图包含图像彩色和纹理信息,其被处理后很容易造成颜色失真,通常是对照明图估计来得到更好的对比度和细节特征增强,例如经典的单尺度Retinex(Single-scaleRetinex,SSR)、多尺度Retinex(multi-scale Retinex,MSR)、带颜色恢复的多尺度Retinex(Multi-Scale Retinex with Color Restoration,MSRCR),SSR、MSR以及之后的一些类似的对数域照明估计方法及改进方法不能有效保留细节信息和图像自然度,出现局部欠增强和过增强现象。对于照明图和反射图不能有效估计问题,Fu等人提出同步反射率和光照估计的加权变分模型(A weighted variational model for simultaneous reflectanceand illumination estimation,SRIE),能够有效估计照度和反射率,保持反射图细节,但是合成之后的增强有一定的局部欠增强和颜色失真问题,对于图像自然度保存问题,Wang等人提出非均匀弱光图像自然度保持(Naturalness Preserved Enhancement Algorithmfor Non-Uniform Illumination Images,NPE)算法,在增强图像的同时有效的保留图像照度信息,但是最终增强结果对非均匀光照图像存在细节模糊现象。随后,Fu等人提出基于多图像融合的弱光照图像增强(A fusion-based enhancing method for weaklyilluminated images)算法同时提高图像对比度和亮度,多图像通过不同采样信息进行融合同时提升对比度和颜色特征提取,但是没有考虑不同融合图像结构信息的相似性,在局部光照突变处细节信息不清晰。
发明内容
本发明的目的是克服上述现有方法存在的缺陷,提供一种基于多图像融合Retinex的弱光增强方法,以有效增强弱光图像对比度,同时保持图像自然度。
本申请实施例提供一种基于多图像融合Retinex的弱光增强方法,包括以下步骤:
S1、根据原始图像获得初始照明图;
S2、根据所述原始图像、所述初始照明图获得初始反射图;
S3、根据所述初始反射图,采用形态学闭合的方式获得调整反射图;
S4、选取获得初始融合照明图,所述初始融合照明图包括初始照明估计图、伽马矫正照明估计图、直方图规定化照明估计图;
S5、对所述初始融合照明图进行加权最小二乘滤波,获得滤波图;
S6、根据所述初始融合照明图、所述滤波图,获得平滑层融合照明图、细节层融合照明图;
S7、根据所述平滑层融合照明图、所述细节层融合照明图,获得最终照明融合图;
S8、根据所述调整反射图、所述最终照明融合图,获得增强图像。
优选的,所述步骤S1中,在获得初始照明图之前,对所述原始图像进行下采样处理。
优选的,所述步骤S1中,通过在所述原始图像的R、G、B通道中找到最大值来估计图像每个像素的亮度,得到所述初始照明图。
优选的,所述步骤S2中,获得所述初始反射图的公式为:
式中,Rinit(x,y)表示初始反射图;ε表示微小实数;Sc(x,y)表示原始图像的像素位置,c表示颜色通道;Linit(x,y)表示初始照明图。
优选的,所述步骤S3中,获得所述调整反射图的公式为:
优选的,所述步骤S4中,获得所述初始融合照明图的公式为:
式中,I1表示初始照明估计图,记为第一个初始融合照明图;I2表示伽马矫正照明估计图,记为第二个初始融合照明图;I3表示直方图规定化照明估计图,记为第三个初始融合照明图;B表示伽马矫正的调整系数;Linit γ表示Linit的伽马矫正照明估计,γ为伽马矫正系数;Pr表示通过双对数变换得到的映射关系。
优选的,所述步骤S5中,获得所述滤波图的公式为:
式中,Ik,wls s表示第k个初始融合照明图对应的滤波图,记为第k个平滑层图像;F表示从Ik到Ik,wls s的函数映射关系;λ表示平滑因子;Ik表示第k个初始融合照明图,k=1,2,3;LIk是第k个初始融合照明图的WLS矩阵形式;Dx、Dy表示前向差分矩阵;Ax、Ay表示权重分配值。
优选的,所述步骤S6包括以下子步骤:
通过所述初始融合照明图和所述滤波图相减得到细节层图像,公式表示如下:
Ik,wls d=Ik-Ik,wls s (5)
式中,Ik,wls d表示第k个细节层图像,k=1,2,3;
平滑层图像的权重公式为:
式中,Wm(m,n)表示第n个平滑层图像关联的第m个平滑层图像的权重,Im表示第m个平滑层图像,In表示第n个平滑层图像,m=1,2,3,n=1,2,3;μ表示均值变换因子,σ表示方差变换因子,A表示权重调节系数;
所述平滑层图像的加权最小二乘法自适应加权融合公式如下所示:
式中,Ls(x,y)表示平滑层融合照明图,分母表示总权重归一化项;
获得所述细节层融合照明图的公式为:
Ld(x,y)=(I1,wls d(x,y)+I2,wls d(x,y))/2 (8)
式中,Ld(x,y)表示细节层融合照明图。
优选的,所述S7中,结合公式(7)和公式(8)得到最终照明融合图,公式为:
Lfinal(x,y)=Ls(x,y)+Ld(x,y) (9)
式中,Lfinal(x,y)表示最终照明融合图。
优选的,所述S8中,获得所述增强图像的公式为:
本申请实施例中提供的一个或多个技术方案,至少具有如下技术效果或优点:
在本申请实施例中,根据Retinex理论和通道最大值得到初始照明图和初始反射图,并通过形态学闭合的方式,获得调整反射图,弥补反射图的细节损失。对于照明图,本发明通过一种自适应加权最小二乘滤波多图像融合的策略,通过伽马变换和双对数变换调整初始照明图分别得到伽马矫正照明估计图和直方图规定化照明估计图,再对滤波得到的平滑层和细节层分别融合和像素级相加以得到最终照明融合图,最后将调整反射图和最终照明融合图合成增强图像。本发明能有效的增强弱光图像对比度,同时保持图像自然度。本发明具有更低的亮度顺序差LOE和盲图像质量评价NIQE值,较其他方法表现出更好的增强效果。
附图说明
为了更清楚地说明本实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一个实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种基于多图像融合Retinex的弱光增强方法的流程图;
图2为本发明实施例提供的一种基于多图像融合Retinex的弱光增强方法中反射图估计的流程图;
图3为本发明实施例提供的一种基于多图像融合Retinex的弱光增强方法中通过最小二乘滤波照明估计的流程图;
图4为本发明实施例提供的一种基于多图像融合Retinex的弱光增强方法中得到最终照明融合图的流程图;
图5为本发明实施例提供的一种基于多图像融合Retinex的弱光增强方法的整体框架图;
图6为本发明实施例提供的一种基于多图像融合Retinex的弱光增强方法与其他算法的对比实验效果图。
具体实施方式
为了更好的理解上述技术方案,下面将结合说明书附图以及具体的实施方式对上述技术方案进行详细的说明。
本实施例提供了一种基于多图像融合Retinex的弱光增强方法,如图1所示,包括以下步骤:
S1、根据原始图像获得初始照明图;
S2、根据所述原始图像、所述初始照明图获得初始反射图;
S3、根据所述初始反射图,采用形态学闭合的方式获得调整反射图;
S4、选取获得初始融合照明图,所述初始融合照明图包括初始照明估计图、伽马矫正照明估计图、直方图规定化照明估计图;
S5、对所述初始融合照明图进行加权最小二乘滤波,获得滤波图;
S6、根据所述初始融合照明图、所述滤波图,获得平滑层融合照明图、细节层融合照明图;
S7、根据所述平滑层融合照明图、所述细节层融合照明图,获得最终照明融合图;
S8、根据所述调整反射图、所述最终照明融合图,获得增强图像。
下面对本发明做进一步的说明。
1.反射图与照明图估计
1.1反射图估计
反射图估计如图2所示,针对原始弱光图像(记为原始图像),在R、G和B通道中找到最大值来估计图像每个像素的亮度,得到初始照明图,然后通过公式(1)得到初始反射图。为便于在反射图中保留颜色信息,假设三个通道具有相同的反射率,则初始反射图为:
式中,Rinit(x,y)表示初始反射图;ε为微小实数,避免分母为0;Sc(x,y)表示原始图像的像素位置,c表示颜色通道;Linit(x,y)表示与原始图像像素位置相对应的初始照明图。
初始照明图是通过通道最大值来获得的,由于未考虑到R、G和B三个通道之间的联系,因此通过公式(1)得到的初始反射图的局部细节特征粗糙,因此本发明提出采用形态学闭合的方式获得调整反射图,弥补反射图的细节损失,使得反射图具有更清晰的细节特征,通过公式(2)获得调整反射图:
式中,Estruc表示圆盘形结构元素,Radjust(x,y)表示初始反射图对应像素位置得到的调整反射图,°表示形态学闭合操作。
1.2加权最小二乘图像融合照明估计
本发明提出的多图像融合策略中,选择三幅图像作为初始融合照明图,图3所示为通过最小二乘滤波照明估计图。第一个初始融合照明图I1是初始照明估计图(即初始照明图),它是整个融合策略的基础,包含了原始弱光图像的结构信息和基准色调,结构信息的保留避免了后续处理对原始图像特征造成扭曲,基准色调保留了图像复原过程中对比度信息。第二个初始融合照明图像I2是伽马矫正照明估计图,通过伽马矫正提升了初始照明图的整体对比度,较暗的区域被增强而过亮的区域又能够被抑制。第三个初始融合照明图像I3是直方图规定化照明估计图,通过双对数变换处理,保留照明图更多的自然度信息。相应算法可表示为:
式中,B是伽马矫正的调整系数;Linit γ表示Linit的伽马矫正照明估计,γ为伽马矫正系数;Pr表示通过双对数变换得到的映射关系。
由前所述,通过对初始融合照明图Ik(k=1,2,3)进行加权最小二乘滤波,得到和初始融合照明图相对应的滤波图Ik,wls s(k=1,2,3),公式如下:
式中,Ik,wls s表示第k个初始融合照明图对应的滤波图,记为第k个平滑层图像;F表示从Ik到Ik,wls s的函数映射关系;λ表示平滑因子,控制加权最小二乘WLS滤波图像对于原始图像的平滑程度,λ越大所得到的滤波图像越平滑,但局部细节特征会变得模糊;Ik表示第k个初始融合照明图,LIk是第k个初始融合照明图的WLS矩阵形式,Dx、Dy表示前向差分矩阵,Ax、Ay表示权重分配值。
WLS滤波器所得到的滤波结果很好的保留了照明图的对比度信息,但是很容易损失掉局部细节信息,为了对照明图细节信息的弥补,本发明又通过初始融合照明图和滤波图像相减得到细节图像Ik,wls d(k=1,2,3),公式表示如下:
Ik,wls d=Ik-Ik,wls s (5)
式中,Ik,wls d表示第k个细节层图像,k=1,2,3;上标d和s分别表示滤波所得到的细节层和平滑层。
对于平滑层图像融合,结合对比度和细节融合的特点,本发明采用一种根据融合图像本身和图像之间的差异性自适应的分配权重策略使得对比度较高的照明图像能分配较高的权重,同时对比度有着较大差异的区域融合后应该有着较高的相似度,保证光照分量平滑过渡。权重有两部分组成,第一部分是对比度权重,每一幅对比度权重分别由与其对应的照明图得到,第二部分是相似度权重,由相邻图像相似度所共同决定的,平滑层图像的权重如公式(6)所示:
式中,Wm(m,n)表示第n个平滑层图像关联的第m个平滑层图像的权重,Im(x,y)表示第m个平滑层图像,μ表示均值变换因子,σ表示方差变换因子,A表示权重调节系数,取(0,1],调节对比度占比,通过对多幅图像的融合实验表明对比度权重对图像增强效果显著,而相似度对于融合效果的起着微调作用,因此设置权重调节系数改善融合效果。Im表示第m个平滑层图像,In表示第n个平滑层图像。
平滑层WLS自适应加权融合公式如下所示:
式中,Ls(x,y)表示融合后的平滑层照明图,分母表示总权重归一化项。
对于细节层,由于双对数变换照明图像经过重新排列,平滑层图像边缘存在像素值突变,对整体细节特征有明显干扰,所以不使用双对数变换照明图(即直方图规定化照明估计图)的细节图作为融合图,对于细节层图像Ik,wls d(k=1,2),本发明使用平均融合的方式,最后将平滑层融合照明图和细节层融合照明图通过像素级相加即可得到最终照明融合图,其中,细节层融合照明图Ld(x,y)可表示为:
Ld(x,y)=(I1,wls d(x,y)+I2,wls d(x,y))/2 (8)
结合公式(7)和公式(8)即可得到最终照明融合图,见公式(9):
Lfinal(x,y)=Ls(x,y)+Ld(x,y) (9)
式中,Lfinal(x,y)表示通过自适应WLS得到的最终照明融合图,如图4所示。
当得到调整反射图和最终照明融合图后,通过Retinex分解原理即可重构之后的增强图,可表示为:
此外,为了避免图像采集过程中噪声因素对后续图像处理的影响,通常会采集高质量的弱光原始图像,同时为了减少运算时间,本发明首先通过下采样操作降低图像分辨率,然后根据上述增强算法得到初始照明和反射图,最后融合、合成得到最终增强之后的图像。表1描述了本发明的算法的流程。
表1整体算法流程
综上,本发明提供了一种基于多图像融合Retinex的弱光增强方法,首先,在图像的每个像素的R、G、B三通道中找到最大亮度值作为该像素的初始照明图,根据Retinex理论生成初始反射像,并通过形态学闭合方式调整反射图;接着,在初始照明图的基础上,通过Gamma变换和双对数变换方法分别生成伽马矫正照明估计图和直方图规定化照明估计图;随后,设计一种自适应加权最小二乘滤波融合策略将三幅照明图融合成最终照明融合图;最后合成最终照明融合图和调整反射图以获得弱光增强后的图像,可参见图5。
2.自然场景弱光图像增强
2.1参数设置
本发明所提出弱光照增强算法在电脑配置为CPU:Intel Core i5-9300H主频:2.40GHz,内存:4G的环境下Matlab软件中运行的。
为了表明本发明所提算法的优越性,将本发明分别与其他六种弱光增强算法进行对比实验,具体包括两种基于Retinex方法:MSR、MSRCR;一种基于灰度直方图的弱光增强算法:上下文及变分对比度增强算法(Contextual and Variational ContrastEnhancement,CVC)、两种基于照明估计的增强算法:SRIE、NPE。
通过主观评价方法和客观评价方法对增强图像进行评估,由于与低照度图像相对应的正常光照图像未知,本发明根据增强之后图像质量采用盲图像质量评价NIQE、增强图像与原始弱光照图像对比采用LOE以上两种图像质量评估指标。实验参数设置如表2所示。
表2实验参数设置
实验方法 | 参数 |
MSR | 三个高斯尺度常量分别为15,80和200 |
MSRCR | 三个高斯尺度常量分别为15,80和200,色彩恢复因子C=1/3 |
CVC | 权重因子α=β=γ=1/3单像素邻域大小为7×7 |
SRIE | 照明和反射估计误差系数分别为εr=0.01,εl=0.1 |
NPE | 降采样系数0.5,邻域为8 |
本发明算法 | 伽马矫正系数γ=0.6,均值μ=0.5,方差σ=1/5,权重调节系数A=0.3 |
3.2增强对比图及分析
图6为某校图书馆自然弱光图,背景是傍晚稍暗的天空,全图不仅整体对比度低而且前后景都存在背光现象。从增强的效果来看,MSR对背景天空产生严重的颜色扭曲;MSRCR算法对树木、雕塑和图书馆都进行了较好的亮度增强,但是背景天空和图书馆上部分别产生了过增强和欠增强现象;CVC算法对暗光区域没起到增强作用而且彩色失真;SRIE算法整体光照和对比度欠增强,而且部分前景,如树木和雕塑欠增强明显;NPE算法较原图对比度有明显增强作用,且整体自然度较高,但是树木和雕塑不能有效光照补偿;Fu的算法对前后景光照变化(雕塑与台阶)处有边缘模糊现象;本发明算法不仅对整体对比度有效增强、渐变的背景天空很好的保留了自然度,而且前景的树木、雕塑、花圃都清晰的表现出来,相较于其他方法对弱光图像的单一属性的增强,本发明算法对对比度、色彩和局部细节特征能同时起到增强的效果。
2.3客观评价指标
表3为图6对应方法的客观评价数据,为减少计算量,图6的分辨率分别为下采样之后的像素120pixels×80pixels。从表3中的数据可知,本发明算法的亮度顺序差比NPE算法略低,但在全部弱光增强算法中对图像自然度保持效果最好。同时,本发明算法的盲图像评价指标在所有方法中是最低的,表明在全局和局部对比度同时没有较大的细节模糊和颜色失真,在不考虑图像噪声情况下,光照增强是相对平滑的过渡的。
表3图6对应图像LOE和NIQE指标
为了在图像弱光增强过程中同时提高对比度和保存自然度,本发明提出一种基于Retinex的多图像融合算法,根据Retinex理论和通道最大值分别得到初始照明图和反射图,并通过形态学闭合的方式,弥补了图像细节的损失。对于照明图,本发明通过设计一种自适应加权最小二乘滤波多图像融合的策略,通过伽马变换和双对数变换调整初始照明图分别得到全局对比度增强图(即伽马矫正照明估计图)和自然度保持图(即直方图规定化照明估计图),再对滤波得到的平滑层和细节层分别融合和像素级相加以得到最终照明融合图,最后将调整反射图和最终照明融合图合成增强图像。实验结果表明,本发明对实际自然弱光场景的LOE、NIQE值分别降到4.12和3.25,较其他方法有更好的增强效果,表明本发明算法在弱光图像增强方面有优越的性能。
本发明实施例提供的一种基于多图像融合Retinex的弱光增强方法至少包括如下技术效果:
本发明能有效的增强弱光图像对比度,同时保持图像自然度。本发明具有更低的亮度顺序差LOE和盲图像质量评价NIQE值,较其他方法表现出更好的增强效果。
最后所应说明的是,以上具体实施方式仅用以说明本发明的技术方案而非限制,尽管参照实例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的精神和范围,其均应涵盖在本发明的权利要求范围当中。
Claims (10)
1.一种基于多图像融合Retinex的弱光增强方法,其特征在于,包括以下步骤:
S1、根据原始图像获得初始照明图;
S2、根据所述原始图像、所述初始照明图获得初始反射图;
S3、根据所述初始反射图,采用形态学闭合的方式获得调整反射图;
S4、选取获得初始融合照明图,所述初始融合照明图包括初始照明估计图、伽马矫正照明估计图、直方图规定化照明估计图;
S5、对所述初始融合照明图进行加权最小二乘滤波,获得滤波图;
S6、根据所述初始融合照明图、所述滤波图,获得平滑层融合照明图、细节层融合照明图;
S7、根据所述平滑层融合照明图、所述细节层融合照明图,获得最终照明融合图;
S8、根据所述调整反射图、所述最终照明融合图,获得增强图像。
2.根据权利要求1所述的基于多图像融合Retinex的弱光增强方法,其特征在于,所述步骤S1中,在获得初始照明图之前,对所述原始图像进行下采样处理。
3.根据权利要求1所述的基于多图像融合Retinex的弱光增强方法,其特征在于,所述步骤S1中,通过在所述原始图像的R、G、B通道中找到最大值来估计图像每个像素的亮度,得到所述初始照明图。
8.根据权利要求7所述的基于多图像融合Retinex的弱光增强方法,其特征在于,所述步骤S6包括以下子步骤:
通过所述初始融合照明图和所述滤波图相减得到细节层图像,公式表示如下:
Ik,wls d=Ik-Ik,wls s (5)
式中,Ik,wls d表示第k个细节层图像,k=1,2,3;
平滑层图像的权重公式为:
式中,Wm(m,n)表示第n个平滑层图像关联的第m个平滑层图像的权重,Im表示第m个平滑层图像,In表示第n个平滑层图像,m=1,2,3,n=1,2,3;μ表示均值变换因子,σ表示方差变换因子,A表示权重调节系数;
所述平滑层图像的加权最小二乘法自适应加权融合公式如下所示:
式中,Ls(x,y)表示平滑层融合照明图,分母表示总权重归一化项;
获得所述细节层融合照明图的公式为:
Ld(x,y)=(I1,wls d(x,y)+I2,wls d(x,y))/2 (8)
式中,Ld(x,y)表示细节层融合照明图。
9.根据权利要求8所述的基于多图像融合Retinex的弱光增强方法,其特征在于,所述S7中,结合公式(7)和公式(8)得到最终照明融合图,公式为:
Lfinal(x,y)=Ls(x,y)+Ld(x,y) (9)
式中,Lfinal(x,y)表示最终照明融合图。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911323862.7A CN111127377B (zh) | 2019-12-20 | 2019-12-20 | 一种基于多图像融合Retinex的弱光增强方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911323862.7A CN111127377B (zh) | 2019-12-20 | 2019-12-20 | 一种基于多图像融合Retinex的弱光增强方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111127377A true CN111127377A (zh) | 2020-05-08 |
CN111127377B CN111127377B (zh) | 2023-04-25 |
Family
ID=70500516
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911323862.7A Active CN111127377B (zh) | 2019-12-20 | 2019-12-20 | 一种基于多图像融合Retinex的弱光增强方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111127377B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113920036A (zh) * | 2021-12-14 | 2022-01-11 | 武汉大学 | 一种基于rgb-d图像的交互式重光照编辑方法 |
WO2023272506A1 (zh) * | 2021-06-29 | 2023-01-05 | 深圳市大疆创新科技有限公司 | 图像处理方法及装置、可移动平台及存储介质 |
CN117173642A (zh) * | 2023-11-03 | 2023-12-05 | 昊金海建设管理有限公司 | 一种基于大数据的建筑施工视频实时监测预警方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103295225A (zh) * | 2013-04-10 | 2013-09-11 | 苏州大学 | 弱光照条件下的列车转向架边缘检测方法 |
CN103530848A (zh) * | 2013-09-27 | 2014-01-22 | 中国人民解放军空军工程大学 | 一种非均匀光照图像二次曝光的实现方法 |
CN103955902A (zh) * | 2014-05-08 | 2014-07-30 | 国网上海市电力公司 | 基于Retinex和Reinhard色彩迁移的弱光照图像的增强方法 |
CN105654429A (zh) * | 2015-10-22 | 2016-06-08 | 天津大学 | 基于透射率归一化的增强弱光图像清晰度的方法 |
CN107316279A (zh) * | 2017-05-23 | 2017-11-03 | 天津大学 | 基于色调映射和正则化模型的弱光图像增强方法 |
CN108122210A (zh) * | 2017-12-19 | 2018-06-05 | 长沙全度影像科技有限公司 | 一种基于Retinex和增强梯度的低照度车牌视频图像增强方法 |
CN109118458A (zh) * | 2018-11-06 | 2019-01-01 | 哈尔滨工程大学 | 一种低照度彩色图像增强方法 |
CN109300101A (zh) * | 2018-10-18 | 2019-02-01 | 重庆邮电大学 | 一种基于Retinex理论的多曝光图像融合方法 |
CN110175964A (zh) * | 2019-05-30 | 2019-08-27 | 大连海事大学 | 一种基于拉普拉斯金字塔的Retinex图像增强方法 |
CN110570360A (zh) * | 2019-05-30 | 2019-12-13 | 昆明理工大学 | 一种基于Retinex的鲁棒和全面的低质量光照图像增强方法 |
-
2019
- 2019-12-20 CN CN201911323862.7A patent/CN111127377B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103295225A (zh) * | 2013-04-10 | 2013-09-11 | 苏州大学 | 弱光照条件下的列车转向架边缘检测方法 |
CN103530848A (zh) * | 2013-09-27 | 2014-01-22 | 中国人民解放军空军工程大学 | 一种非均匀光照图像二次曝光的实现方法 |
CN103955902A (zh) * | 2014-05-08 | 2014-07-30 | 国网上海市电力公司 | 基于Retinex和Reinhard色彩迁移的弱光照图像的增强方法 |
CN105654429A (zh) * | 2015-10-22 | 2016-06-08 | 天津大学 | 基于透射率归一化的增强弱光图像清晰度的方法 |
CN107316279A (zh) * | 2017-05-23 | 2017-11-03 | 天津大学 | 基于色调映射和正则化模型的弱光图像增强方法 |
CN108122210A (zh) * | 2017-12-19 | 2018-06-05 | 长沙全度影像科技有限公司 | 一种基于Retinex和增强梯度的低照度车牌视频图像增强方法 |
CN109300101A (zh) * | 2018-10-18 | 2019-02-01 | 重庆邮电大学 | 一种基于Retinex理论的多曝光图像融合方法 |
CN109118458A (zh) * | 2018-11-06 | 2019-01-01 | 哈尔滨工程大学 | 一种低照度彩色图像增强方法 |
CN110175964A (zh) * | 2019-05-30 | 2019-08-27 | 大连海事大学 | 一种基于拉普拉斯金字塔的Retinex图像增强方法 |
CN110570360A (zh) * | 2019-05-30 | 2019-12-13 | 昆明理工大学 | 一种基于Retinex的鲁棒和全面的低质量光照图像增强方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023272506A1 (zh) * | 2021-06-29 | 2023-01-05 | 深圳市大疆创新科技有限公司 | 图像处理方法及装置、可移动平台及存储介质 |
CN113920036A (zh) * | 2021-12-14 | 2022-01-11 | 武汉大学 | 一种基于rgb-d图像的交互式重光照编辑方法 |
CN117173642A (zh) * | 2023-11-03 | 2023-12-05 | 昊金海建设管理有限公司 | 一种基于大数据的建筑施工视频实时监测预警方法 |
CN117173642B (zh) * | 2023-11-03 | 2024-02-02 | 昊金海建设管理有限公司 | 一种基于大数据的建筑施工视频实时监测预警方法 |
Also Published As
Publication number | Publication date |
---|---|
CN111127377B (zh) | 2023-04-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107527332B (zh) | 基于改进Retinex的低照度图像色彩保持增强方法 | |
Wang et al. | Adaptive image enhancement method for correcting low-illumination images | |
Liang et al. | Single underwater image enhancement by attenuation map guided color correction and detail preserved dehazing | |
Gao et al. | Naturalness preserved nonuniform illumination estimation for image enhancement based on retinex | |
CN111127377B (zh) | 一种基于多图像融合Retinex的弱光增强方法 | |
CN102789635B (zh) | 一种图像增强方法和装置 | |
Lai et al. | Improved local histogram equalization with gradient-based weighting process for edge preservation | |
Kansal et al. | Improved color attenuation prior based image de-fogging technique | |
CN104732492B (zh) | 一种深度图像的去噪方法 | |
CN107798661B (zh) | 一种自适应的图像增强方法 | |
CN103578084A (zh) | 基于亮通道滤波的彩色图像增强方法 | |
Liu et al. | Survey of natural image enhancement techniques: Classification, evaluation, challenges, and perspectives | |
CN106651817A (zh) | 一种基于非抽样Contourlet的图像增强方法 | |
Lepcha et al. | A deep journey into image enhancement: A survey of current and emerging trends | |
CN109448019B (zh) | 一种变分光流模型平滑参数的自适应方法 | |
Liu et al. | De-hazing and enhancement method for underwater and low-light images | |
CN115587945A (zh) | 高动态红外图像细节增强方法、系统及计算机存储介质 | |
CN116188339A (zh) | 一种基于Retinex及图像融合的暗视觉图像增强方法 | |
Zhao et al. | An adaptive low-illumination image enhancement algorithm based on weighted least squares optimization | |
Liu et al. | Low-light image enhancement network based on recursive network | |
Zhang et al. | Underwater image enhancement via multi-scale fusion and adaptive color-gamma correction in low-light conditions | |
Al-Samaraie | A new enhancement approach for enhancing image of digital cameras by changing the contrast | |
CN116579953A (zh) | 自监督的水面图像增强方法及相关设备 | |
CN116630198A (zh) | 一种结合自适应伽马校正的多尺度融合水下图像增强方法 | |
CN115797205A (zh) | 基于Retinex分数阶变分网络的无监督单张图像增强方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |