CN110009574A - 一种亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法 - Google Patents
一种亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法 Download PDFInfo
- Publication number
- CN110009574A CN110009574A CN201910116580.3A CN201910116580A CN110009574A CN 110009574 A CN110009574 A CN 110009574A CN 201910116580 A CN201910116580 A CN 201910116580A CN 110009574 A CN110009574 A CN 110009574A
- Authority
- CN
- China
- Prior art keywords
- dynamic range
- image
- histogram
- high dynamic
- defining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 22
- 238000013507 mapping Methods 0.000 claims abstract description 21
- 230000003044 adaptive effect Effects 0.000 claims abstract description 10
- 230000011218 segmentation Effects 0.000 claims description 18
- 238000009499 grossing Methods 0.000 claims description 12
- 238000012937 correction Methods 0.000 claims description 11
- 239000011159 matrix material Substances 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 claims description 3
- 230000001186 cumulative effect Effects 0.000 claims description 3
- 239000004576 sand Substances 0.000 claims description 3
- 230000035945 sensitivity Effects 0.000 claims description 3
- 230000000007 visual effect Effects 0.000 abstract description 3
- 238000011156 evaluation Methods 0.000 abstract 1
- 238000009877 rendering Methods 0.000 abstract 1
- 238000003384 imaging method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Picture Signal Circuits (AREA)
Abstract
本发明公开了一种亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法,本发明方法首先对输入的低动态范围图像亮度灰度图全局细节增强;再由直方图裁剪与补偿、亮度与标准差估算模型获得输入图像到中间高动态范围图像的亮度直方图全局映射曲线,其中由最大熵亮度估算方法自适应选出最优输出中间高动态范围图像亮度;然后对中间高动态范围图像灰度图利用高效滤波器滤波去除映射产生的伪影得到输出高动态范围图像亮度;最后合并色彩通道并对色彩进行自适应校正,生成的高动态范围图像很好的体现了真实场景。本发明能将输入图像映射到高动态范围图像,输出的高动态范围图像亮度与色彩自适应,细节重现,视觉效果真实震撼。
Description
技术领域
本发明涉及高动态范围成像技术领域,更具体地,涉及一种亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法。
背景技术
我们身处的环境亮度有着非常高的动态范围,其最高亮度和最低亮度之比高达108:1,然而现有的数字图像采集设备受到了传感器等制约,其动态范围十分有限,无法覆盖完整的环境亮度动态范围。虽然高动态范围(HDR)图像相比于低动态范围(LDR)图像更为自然和逼真的图像,但目前主流的仍为低动态范围图像。利用曝光控制技术有选择地捕捉场景亮度,但是无法避免图像存在曝光过度或者曝光不足的区域,严重影响成像质量,无法提供更多的动态范围和图像细节。
同时目前一般的显示器只能表示28个亮度数量级,也无法完美反映真实世界的场景;随着科技的发展,市场上逐步推出高动态范围显示器,能表示的亮度数量级与细节色彩表现力大幅度提升。因此,利用现有低动态范围图像资源生成高动态范围图像,更好的反映出真实环境中的视觉效果,具有较高应用与经济价值。
发明内容
本发明为解决现有的成像技术无法提供更多的动态范围和图像细节等问题,提供了一种亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法。
为实现以上发明目的,而采用的技术手段是:
一种亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法,包括:
a)对输入图像亮度灰度图进行全局细节增强,计算所述输入图像亮度灰度图细节增强后的对数,利用对数转换初步压缩原始场景中的亮度;其中所述图像为低动态范围图像或高动态范围图像;
b)对全局细节增强的输入图像亮度对数进行直方图统计,计算其平均值与标准差,对直方图进行分段裁剪与补偿;
c)由亮度与标准差估算模型计算映射到中间高动态范围图像的平均亮度与标准差,从而求解输入图像到中间高动态范围图像的亮度直方图全局映射曲线,其中由最大熵亮度估算方法自适应估算出最优输出中间高动态范围图像亮度;
d)利用高效滤波器对中间高动态范围图像亮度滤波去除映射产生的伪影得到输出高动态范围图像亮度;
e)将输入图像色彩通道映射到对应输出高动态范围图像色彩通道并进行自适应校正,合并色彩空间获得输出高动态范围图像。
上述方案中,通过细节重现与基于亮度与标准差估算模型获得全局映射模型进行图像映射,然后对映射生成的图像灰度图利用高效滤波器滤波去除映射产生的伪影得到输出高动态范围图像亮度图,最后合并色彩通道并对色彩进行自适应校正,从而得到亮度、色彩自适应与细节重现的输出高动态范围图像。
优选的,所述步骤a)包括:
a1)定义输入图像红绿蓝三个色彩通道的数据分别为R,G,B,定义输入图像亮度Lw:
Lw=0.299R+0.587G+0.114B (1)
a2)定义输入高动态范围图像大尺度纹理层为b:
其中,I为单位矩阵;α是平衡因子,一般选取25~35之间;Qx,Qy是前向差分算子;是后向差分算子;Ax和Ay是分别包含平滑权重ax(Lw)和ay(Lw) 的对角矩阵;平滑权重ax(Lw)和ay(Lw)分别定义如下:
其中,ε1是常数;β是决定ln(Lw)梯度灵敏度的参数,一般选取5~5.5之间;其中ε1为很小的数;
a3)计算输入图像亮度的对数Le:
Le=ln(Lw) (5)
a4)定义输入图像亮度细节层对数d:
d=Le-ln(b) (6)
a5)定义输入图像全局增强亮度的对数L'e:
L'e=λ1ln(b)+λ2d (7)
其中,λ1是修正因子,一般取0.94~0.98之间;λ2是增强因子,定义为:
其中,μInput为输入图像平均亮度;C为输入图像对比度;μInput和C分别定义如下:
其中,M和N是输入高动态范围图像的长和宽;Lw(i,j)表示位置为(i,j)像素点的亮度值;δ(τ,υ)=|τ-υ|即是相邻像素间的亮度τ和亮度υ的差值绝对值, Pδ(i,j)即相邻像素间的亮度灰度差为δ的像素分布概率。
优选的,所述步骤b)包括:
b1)定义L'e的最大值Lmax以及最小值Lmin,直方图组数为D,将L'e的值线性映射到[0,D-1],定义离散后的亮度LI,由公式描述为:
其中,表示向下取整操作;
b2)对离散后的亮度图像LI进行直方图统计,定义直方图为h(p):
h(p)=<{LI(i,j)|LI(i,j)=p}> (12)
其中,p=0,…,D-1,<U>表示集合U的元素个数;
b3)定义由步骤a)得到的直方图h(p),p=0,…,D-1的平均值μ,
b4)定义由步骤a)得到的直方图h(p),p=0,…,D-1的标准差σ,
b5)定义t1和t2为直方图h(p),p=0,…,D-1的两个分割点:
t1和t2将直方图分割为三段独立的直方图分别定义为hl、hs和hu:
hl=h(p),0≤p<t1
hs=h(p),t1≤p<t2
hu=h(p),t2≤p<D (16)
定义r1,r2和r3分别为各段直方图在整体直方图中的比例:
b6)对第一段直方图hl进行裁剪,定义裁剪阈值Tl:
定义裁剪后的直方图为hl':
为了不改变hl在整体的比例,将裁剪多出的部分补偿到直方图中,定义补偿后的直方图为h”l:
其中,resl为第一段直方图经过裁剪出来的数量之和,p=0,…,t1-1;
b7)对第二段直方图hs进行裁剪,定义裁剪阈值Ts:
定义裁剪后的直方图为h's:
为了不改变hs在整体的比例,将裁剪多出的部分补偿到直方图中,定义补偿后的直方图为h”s:
其中,ress为第二段直方图经过裁剪出来的数量之和,p=t1,…,t2-1;
b8)对第三段直方图hu进行裁剪,定义裁剪阈值Tu:
定义裁剪后的直方图为h’u:
为了不改变hu在整体的比例,将裁剪多出的部分补偿到直方图中,定义补偿后的直方图为h”u:
其中,resu为第三段直方图经过裁剪出来的数量之和,p=t2,…,D-1;
b9)定义经过裁剪和补偿的直方图h”:
优选的,所述步骤c)包括:
c1)定义输入图像直方图的分割点t1和t2映射到中间高动态范围图像直方图的分割点为t'1和t'2,定义估计输出图像的模型平均亮度μm和标准差σm,输出高动态范围图像最大亮度级,通过迭代求解方程得到分割点t'1;
根据估计模型计算分割点t'1,k的方程:
其中k是迭代次数,计算标准差σm,k的方程:
c2)定义迭代计数器k=1,定义最大迭代次数K,定义预设误差e,定义初始标准差σm,0,映射后的中间高动态范围图像初始平均亮度为μm,0,计算t′1,0=f1(μm,0,σm,0),迭代开始;
c3)计算输出图像的标准差σm,k=f2(t'1,k-1,σm,k-1);更新自适应亮度μm,k:
所述公式基于最大熵提出,其中,[ω0,ωL]是从输入图像映射到高动态图像的范围;
c4)更新t'1,k=f1(μm,k,σm,k);
c5)若满足或k>K,迭代结束,输出最终的分割点 t1’=t’1,k,t2’=t1’+2σm,k;否则令k=k+1,转到步骤c3);
c6)定义直方图的累计密度函数cdf:
c7)定义从输入图像[0,D-1]的图像映射到高动态范围[ω0,ωL]的图像的映射曲线函数T:
其中,η1为过暗区域可调增强因子,η1一般选取1~3之间;η2为过亮区域可调增强因子,η2一般选取1~3之间;
c8)定义映射后的中间高动态范围灰度图L'HDR:
L'HDR(i,j)=T(LI(i,j)) (33)。
优选的,所述步骤d)包括:
d1)定义中间高动态范围亮度灰度图平均亮度μMid:
d2)定义中心位于(i,j)大小为1×θ1的图像窗口θinfeed,中间高动态范围亮度灰度图L'HDR经过横向去伪影得到横向去伪影高动态范围亮度灰度图L”LDR;判断图像窗口θinfeed是否为横向伪影区域,若对任意的Z'j'满足下式,则图像窗口θinfeed是横向伪影区域:
其中,Z'j'∈{-9,-6,-3,0,3,6,9},其中,j'∈{-3,-2,-1,0,1,2,3};
d3)若图像窗口θinfeed是横向伪影区则进行横向伪影区域去伪影平滑处理:
d4)若图像窗口θ不是横向伪影区域则:
L”LDR(i,j)=L'LDR(i,j) (37)
d5)定义中心位于(i,j)大小为θ2×1的图像窗口θfore,横向去伪影高动态范围亮度灰度图L”LDR经过纵向去伪影得到输出高动态范围亮度灰度图L”'HDR;判断图像窗口θfore是否为纵向伪影区域,若对任意的Zi”'满足下式,则图像窗口θfore是纵向伪影区域:
其中,Z”'i∈{-9,-6,-3,0,3,6,9},其中,i'∈{-3,-2,-1,0,1,2,3};
d6)若图像窗口θfore是纵向伪影区则进行纵向伪影区域去伪影平滑处理:
d7)若图像窗口θfore不是纵向伪影区域则:
L”'LDR(i,j)=L”LDR(i,j) (40)。
优选的,所述步骤e)包括:
e1)定义输出高动态范围图像RGB三个通道数据分别为RHDR,GHDR和BHDR:
其中γ为生成高动态范围图像自适应色彩校正因子:
与现有技术相比,本发明技术方案的有益效果是:
本发明首先对输入图像亮度灰度图全局细节增强;再由直方图裁剪与补偿、亮度与标准差估算模型获得输入图像到中间高动态范围图像的亮度直方图全局映射曲线,其中由最大熵亮度估算方法自适应选出最优输出中间高动态范围图像亮度;然后对中间高动态范围图像灰度图利用高效滤波器滤波去除映射产生的伪影得到输出高动态范围图像亮度;最后合并色彩通道并对色彩进行自适应校正,生成的高动态范围图像很好的体现了真实场景。本发明能将输入图像映射到高动态范围图像,输出的高动态范围图像亮度与色彩自适应,细节重现,视觉效果真实震撼。
附图说明
图1为本发明方法的框图。
图2为本发明方法的框图的流程图。
图3为本发明中输入图像全局映射模型。
具体实施方式
附图仅用于示例性说明,不能理解为对本专利的限制;
为了更好说明本实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;
对于本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。
下面结合附图和实施例对本发明的技术方案做进一步的说明。
如图1所示,一种亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法,包括:
a)对输入图像亮度灰度图进行全局细节增强,计算所述输入图像亮度灰度图细节增强后的对数,利用对数转换初步压缩原始场景中的亮度;其中所述图像为低动态范围图像或高动态范围图像;
b)对全局细节增强的输入图像亮度对数进行直方图统计,计算其平均值与标准差,对直方图进行分段裁剪与补偿;
c)由亮度与标准差估算模型计算映射到中间高动态范围图像的平均亮度与标准差,从而求解输入图像到中间高动态范围图像的亮度直方图全局映射曲线,其中由最大熵亮度估算方法自适应估算出最优输出中间高动态范围图像亮度;
d)利用高效滤波器对中间高动态范围图像亮度滤波去除映射产生的伪影得到输出高动态范围图像亮度;
e)将输入图像色彩通道映射到对应输出高动态范围图像色彩通道并进行自适应校正,合并色彩空间获得输出高动态范围图像。
本发明方法的具体实施过程如图2所示。
其中,所述步骤a)包括:
a1)定义输入图像红绿蓝三个色彩通道的数据分别为R,G,B,定义输入图像亮度Lw:
Lw=0.299R+0.587G+0.114B (1)
a2)定义输入高动态范围图像大尺度纹理层为b:
其中,I为单位矩阵;α是平衡因子,一般选取25~35之间,本实施例取为 30;Qx,Qy是前向差分算子;是后向差分算子;Ax和Ay是分别包含平滑权重ax(Lw)和ay(Lw)的对角矩阵;平滑权重ax(Lw)和ay(Lw)分别定义如下:
其中,ε1为常数,本实施例取0.0002;β是决定ln(Lw)梯度灵敏度的参数,一般选取5~5.5之间,本实施例取5;
a3)计算输入图像亮度的对数Le:
Le=ln(Lw) (5)
a4)定义输入图像亮度细节层对数d:
d=Le-ln(b) (6)
a5)定义输入图像全局增强亮度的对数L'e:
L'e=λ1ln(b)+λ2d (7)
其中,λ1是修正因子,一般取0.94~0.98之间,本实施例取0.95;λ2是增强因子,定义为:
其中,μInput为输入图像平均亮度;C为输入图像对比度;μInput和C分别定义如下:
其中,M和N是输入高动态范围图像的长和宽;Lw(i,j)表示位置为(i,j) 像素点的亮度值;δ(τ,υ)=|τ-υ|即是相邻像素间的亮度τ和亮度υ的差值绝对值, Pδ(i,j)即相邻像素间的亮度灰度差为δ的像素分布概率,本实施例像素相邻取四近邻。
其中,所述步骤b)包括:
b1)定义L'e的最大值Lmax以及最小值Lmin,直方图组数为D,本实施例取为 1000;将L'e的值线性映射到[0,D-1],定义离散后的亮度LI,由公式描述为:
其中,表示向下取整操作;
b2)对离散后的亮度图像LI进行直方图统计,定义直方图为h(p):
h(p)=<{LI(i,j)|LI(i,j)=p}> (12)
其中,p=0,…,D-1,<U>表示集合U的元素个数;
b3)定义由步骤a)得到的直方图h(p),p=0,…,D-1的平均值μ,
b4)定义由步骤a)得到的直方图h(p),p=0,…,D-1的标准差σ,
b5)定义t1和t2为直方图h(p),p=0,…,D-1的两个分割点:
t1和t2将直方图分割为三段独立的直方图分别定义为hl、hs和hu:
hl=h(p),0≤p<t1
hs=h(p),t1≤p<t2
hu=h(p),t2≤p<D (16)
定义r1,r2和r3分别为各段直方图在整体直方图中的比例:
b6)对第一段直方图hl进行裁剪,定义裁剪阈值Tl:
定义裁剪后的直方图为h'l:
为了不改变hl在整体的比例,将裁剪多出的部分补偿到直方图中,定义补偿后的直方图为h”l:
其中,resl为第一段直方图经过裁剪出来的数量之和,p=0,…,t1-1;
b7)对第二段直方图hs进行裁剪,定义裁剪阈值Ts:
定义裁剪后的直方图为h's:
为了不改变hs在整体的比例,将裁剪多出的部分补偿到直方图中,定义补偿后的直方图为h”s:
其中,ress为第二段直方图经过裁剪出来的数量之和,p=t1,…,t2-1;
b8)对第三段直方图hu进行裁剪,定义裁剪阈值Tu:
定义裁剪后的直方图为hu':
为了不改变hu在整体的比例,将裁剪多出的部分补偿到直方图中,定义补偿后的直方图为h'u:
其中,resu为第三段直方图经过裁剪出来的数量之和,p=t2,…,D-1;
b9)定义经过裁剪和补偿的直方图h”:
如图3所示为输入图像全局映射模型。
其中,所述步骤c)包括:
c1)定义输入图像直方图的分割点t1和t2映射到中间高动态范围图像直方图的分割点为t'1和t'2,定义估计输出图像的模型平均亮度μm和标准差σm,输出高动态范围图像最大亮度级,本实施例取为1000,通过迭代求解方程得到分割点t'1;
根据估计模型计算分割点t'1,k的方程:
其中k是迭代次数,计算标准差σm,k的方程:
c2)定义迭代计数器k=1,定义最大迭代次数K,定义预设误差e,定义初始标准差σm,0,映射后的中间高动态范围图像初始平均亮度为μm,0,计算t′1,0=f1(μm,0,σm,0),迭代开始;
c3)计算输出图像的标准差σm,k=f2(t'1,k-1,σm,k-1);更新自适应亮度μm,k:
所述公式基于最大熵提出,其中,[ω0,ωL]是从输入图像映射到高动态图像的范围,本实施例取[ω0,ωL]为[0,1000];
c4)更新t'1,k=f1(μm,k,σm,k);
c5)若满足或k>K,迭代结束,输出最终的分割点 t1’=t’1,k,t2’=t1’+2σm,k;否则令k=k+1,转到步骤c3);
c6)定义直方图的累计密度函数cdf:
c7)定义从输入图像[0,D-1]的图像映射到高动态范围[ω0,ωL]的图像的映射曲线函数T:
其中,η1为过暗区域可调增强因子,η1一般选取1~3之间,本实施例取为2;η2为过亮区域可调增强因子,η2一般选取1~3之间,本实施例取为2;
c8)定义映射后的中间高动态范围灰度图L'HDR:
L'HDR(i,j)=T(LI(i,j)) (33)。
其中,所述步骤d)包括:
d1)定义中间高动态范围亮度灰度图平均亮度μMid:
d2)定义中心位于(i,j)大小为1×θ1的图像窗口θinfeed,本实施例取θ1为19,中间高动态范围亮度灰度图L'HDR经过横向去伪影得到横向去伪影高动态范围亮度灰度图L”LDR;判断图像窗口θinfeed是否为横向伪影区域,若对任意的Z'j'满足下式,则图像窗口θinfeed是横向伪影区域:
其中,Z'j'∈{-9,-6,-3,0,3,6,9},其中,j'∈{-3,-2,-1,0,1,2,3};
d3)若图像窗口θinfeed是横向伪影区则进行横向伪影区域去伪影平滑处理:
d4)若图像窗口θ不是横向伪影区域则:
L”LDR(i,j)=L'LDR(i,j) (37)
d5)定义中心位于(i,j)大小为θ2×1的图像窗口θfore,本实施例取θfore为19,横向去伪影高动态范围亮度灰度图L”LDR经过纵向去伪影得到输出高动态范围亮度灰度图L”'HDR;判断图像窗口θfore是否为纵向伪影区域,若对任意的Z”'i满足下式,则图像窗口θfore是纵向伪影区域:
其中,Z”'i∈{-9,-6,-3,0,3,6,9},其中,i'∈{-3,-2,-1,0,1,2,3};
d6)若图像窗口θfore是纵向伪影区则进行纵向伪影区域去伪影平滑处理:
d7)若图像窗口θfore不是纵向伪影区域则:
L”'LDR(i,j)=L”LDR(i,j) (40)。
其中,所述步骤e)包括:
e1)定义输出高动态范围图像RGB三个通道数据分别为RHDR,GHDR和BHDR:
其中γ为生成高动态范围图像自适应色彩校正因子:
其中,
附图中描述位置关系的用语仅用于示例性说明,不能理解为对本专利的限制;
显然,本发明的上述实施例仅仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明权利要求的保护范围之内。
Claims (6)
1.一种亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法,其特征在于,包括:
a)对输入图像亮度灰度图进行全局细节增强,计算输入图像亮度灰度图细节增强后的对数,利用对数转换初步压缩原始场景中的亮度;其中所述图像为低动态范围图像或高动态范围图像;
b)对全局细节增强的输入图像亮度对数进行直方图统计,计算其平均值与标准差,对直方图进行分段裁剪与补偿;
c)由亮度与标准差估算模型计算映射到中间高动态范围图像的平均亮度与标准差,从而求解输入图像到中间高动态范围图像的亮度直方图全局映射曲线,其中由最大熵亮度估算方法自适应估算出最优输出中间高动态范围图像亮度;
d)利用高效滤波器对中间高动态范围图像亮度滤波去除映射产生的伪影得到输出高动态范围图像亮度;
e)将输入图像色彩通道映射到对应输出高动态范围图像色彩通道并进行自适应校正,合并色彩空间获得输出高动态范围图像。
2.根据权利要求1所述的亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法,其特征在于,所述步骤a)包括:
a1)定义输入图像红绿蓝三个色彩通道的数据分别为R,G,B,定义输入图像亮度Lw:
Lw=0.299R+0.587G+0.114B (1)
a2)定义输入高动态范围图像大尺度纹理层为b:
其中,I为单位矩阵;α是平衡因子;Qx,Qy是前向差分算子;是后向差分算子;Ax和Ay是分别包含平滑权重ax(Lw)和ay(Lw)的对角矩阵;平滑权重ax(Lw)和ay(Lw)分别定义如下:
其中,ε1是常数;β是决定ln(Lw)梯度灵敏度的参数;
a3)计算输入图像亮度的对数Le:
Le=ln(Lw) (5)
a4)定义输入图像亮度细节层对数d:
d=Le-ln(b) (6)
a5)定义输入图像全局增强亮度的对数L'e:
L'e=λ1ln(b)+λ2d (7)
其中,λ1是修正因子;λ2是增强因子,定义为:
其中,μInput为输入图像平均亮度;C为输入图像对比度;μInput和C分别定义如下:
其中,M和N是输入高动态范围图像的长和宽;Lw(i,j)表示位置为(i,j)像素点的亮度值;δ(τ,υ)=|τ-υ|即是相邻像素间的亮度τ和亮度υ的差值绝对值,Pδ(i,j)即相邻像素间的亮度灰度差为δ的像素分布概率。
3.根据权利要求1所述的亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法,其特征在于,所述步骤b)包括:
b1)定义L'e的最大值Lmax以及最小值Lmin,直方图组数为D,将L'e的值线性映射到[0,D-1],定义离散后的亮度LI,由公式描述为:
其中,表示向下取整操作;
b2)对离散后的亮度图像LI进行直方图统计,定义直方图为h(p):
h(p)=<{LI(i,j)|LI(i,j)=p}> (12)
其中,p=0,…,D-1,<U>表示集合U的元素个数;
b3)定义由步骤a)得到的直方图h(p),p=0,…,D-1的平均值μ,
b4)定义由步骤a)得到的直方图h(p),p=0,…,D-1的标准差σ,
b5)定义t1和t2为直方图h(p),p=0,…,D-1的两个分割点:
t1和t2将直方图分割为三段独立的直方图分别定义为hl、hs和hu:
hl=h(p),0≤p<t1
hs=h(p),t1≤p<t2
hu=h(p),t2≤p<D (16)
定义r1,r2和r3分别为各段直方图在整体直方图中的比例:
b6)对第一段直方图hl进行裁剪,定义裁剪阈值Tl:
定义裁剪后的直方图为h′l:
为了不改变hl在整体的比例,将裁剪多出的部分补偿到直方图中,定义补偿后的直方图为h″l:
其中,resl为第一段直方图经过裁剪出来的数量之和,p=0,…,t1-1;
b7)对第二段直方图hs进行裁剪,定义裁剪阈值Ts:
定义裁剪后的直方图为hs':
为了不改变hs在整体的比例,将裁剪多出的部分补偿到直方图中,定义补偿后的直方图为h″s:
其中,ress为第二段直方图经过裁剪出来的数量之和,p=t1,…,t2-1;
b8)对第三段直方图hu进行裁剪,定义裁剪阈值Tu:
定义裁剪后的直方图为h′u:
为了不改变hu在整体的比例,将裁剪多出的部分补偿到直方图中,定义补偿后的直方图为h″u:
其中,resu为第三段直方图经过裁剪出来的数量之和,p=t2,…,D-1;
b9)定义经过裁剪和补偿的直方图h”:
4.根据权利要求1所述的亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法,其特征在于,所述步骤c)包括:
c1)定义输入图像直方图的分割点t1和t2映射到中间高动态范围图像直方图的分割点为t′1和t′2,定义估计输出图像的模型平均亮度μm和标准差σm,输出高动态范围图像最大亮度级,通过迭代求解方程得到分割点t′1;
根据估计模型计算分割点t′1,k的方程:
其中k是迭代次数,计算标准差σm,k的方程:
c2)定义迭代计数器k=1,定义最大迭代次数K,定义预设误差e,定义初始标准差σm,0,映射后的中间高动态范围图像初始平均亮度为μm,0,计算t′1,0=f1(μm,0,σm,0),迭代开始;
c3)计算输出图像的标准差σm,k=f2(t′1,k-1,σm,k-1);更新自适应亮度μm,k:
所述公式基于最大熵提出,其中,[ω0,ωL]是从输入图像映射到高动态图像的范围;
c4)更新t′1,k=f1(μm,k,σm,k);
c5)若满足或k>K,迭代结束,输出最终的分割点t1’=t’1,k,t2’=t1’+2σm,k;否则令k=k+1,转到步骤c3);
c6)定义直方图的累计密度函数cdf:
c7)定义从输入图像[0,D-1]的图像映射到高动态范围[ω0,ωL]的图像的映射曲线函数T:
其中,η1为过暗区域可调增强因子;η2为过亮区域可调增强因子;
c8)定义映射后的中间高动态范围灰度图L'HDR:
L'HDR(i,j)=T(LI(i,j)) (33)。
5.根据权利要求1所述的亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法,其特征在于,所述步骤d)包括:
d1)定义中间高动态范围亮度灰度图平均亮度μMid:
d2)定义中心位于(i,j)大小为1×θ1的图像窗口θinfeed,中间高动态范围亮度灰度图L'HDR经过横向去伪影得到横向去伪影高动态范围亮度灰度图L”LDR;判断图像窗口θinfeed是否为横向伪影区域,若对任意的Z'j'满足下式,则图像窗口θinfeed是横向伪影区域:
其中,Z'j'∈{-9,-6,-3,0,3,6,9},其中,j'∈{-3,-2,-1,0,1,2,3};
d3)若图像窗口θinfeed是横向伪影区则进行横向伪影区域去伪影平滑处理:
d4)若图像窗口θ不是横向伪影区域则:
L”LDR(i,j)=L'LDR(i,j) (37)
d5)定义中心位于(i,j)大小为θ2×1的图像窗口θfore,横向去伪影高动态范围亮度灰度图L”LDR经过纵向去伪影得到输出高动态范围亮度灰度图L”'HDR;判断图像窗口θfore是否为纵向伪影区域,若对任意的Z″i′满足下式,则图像窗口θfore是纵向伪影区域:
其中,Z″i′∈{-9,-6,-3,0,3,6,9},其中,i'∈{-3,-2,-1,0,1,2,3};
d6)若图像窗口θfore是纵向伪影区则进行纵向伪影区域去伪影平滑处理:
d7)若图像窗口θfore不是纵向伪影区域则:
L”'LDR(i,j)=L”LDR(i,j) (40)。
6.根据权利要求1所述的亮度、色彩自适应与细节丰富的低动态范围图像逆向生成高动态范围图像的方法,其特征在于,所述步骤e)包括:
e1)定义输出高动态范围图像RGB三个通道数据分别为RHDR,GHDR和BHDR:
其中γ为生成高动态范围图像自适应色彩校正因子:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910116580.3A CN110009574B (zh) | 2019-02-13 | 2019-02-13 | 一种低动态范围图像逆向生成高动态范围图像的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910116580.3A CN110009574B (zh) | 2019-02-13 | 2019-02-13 | 一种低动态范围图像逆向生成高动态范围图像的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110009574A true CN110009574A (zh) | 2019-07-12 |
CN110009574B CN110009574B (zh) | 2023-01-17 |
Family
ID=67165734
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910116580.3A Active CN110009574B (zh) | 2019-02-13 | 2019-02-13 | 一种低动态范围图像逆向生成高动态范围图像的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110009574B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110428377A (zh) * | 2019-07-26 | 2019-11-08 | 北京百度网讯科技有限公司 | 数据扩充方法、装置、设备和介质 |
CN111601048A (zh) * | 2020-05-13 | 2020-08-28 | 展讯通信(上海)有限公司 | 图像处理方法及装置 |
CN112348763A (zh) * | 2020-11-09 | 2021-02-09 | 西安宇视信息科技有限公司 | 图像增强方法、装置、电子设备及介质 |
CN112862709A (zh) * | 2021-01-27 | 2021-05-28 | 昂纳工业技术(深圳)有限公司 | 图像特征增强方法、装置及可读存储介质 |
CN114693550A (zh) * | 2022-03-24 | 2022-07-01 | 广东第二师范学院 | 一种亮度可控细节保持眼底图像动态范围扩展方法及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102696220A (zh) * | 2009-10-08 | 2012-09-26 | 国际商业机器公司 | 将数字图像从低动态范围图像转换为高动态范围图像的方法与系统 |
CN102959957A (zh) * | 2010-07-06 | 2013-03-06 | 皇家飞利浦电子股份有限公司 | 在多视图视频编码中从低动态范围图像生成高动态范围图像 |
CN103295194A (zh) * | 2013-05-15 | 2013-09-11 | 中山大学 | 亮度可控与细节保持的色调映射方法 |
US20140267822A1 (en) * | 2013-03-12 | 2014-09-18 | Stmicroelectronics (Grenoble 2) Sas | Tone mapping method |
CN106530263A (zh) * | 2016-10-19 | 2017-03-22 | 天津大学 | 一种适应于医学影像的单曝光高动态范围图像生成方法 |
CN106886386A (zh) * | 2017-01-23 | 2017-06-23 | 苏州科达科技股份有限公司 | 从低动态图像生成高动态图像的方法 |
-
2019
- 2019-02-13 CN CN201910116580.3A patent/CN110009574B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102696220A (zh) * | 2009-10-08 | 2012-09-26 | 国际商业机器公司 | 将数字图像从低动态范围图像转换为高动态范围图像的方法与系统 |
CN102959957A (zh) * | 2010-07-06 | 2013-03-06 | 皇家飞利浦电子股份有限公司 | 在多视图视频编码中从低动态范围图像生成高动态范围图像 |
US20140267822A1 (en) * | 2013-03-12 | 2014-09-18 | Stmicroelectronics (Grenoble 2) Sas | Tone mapping method |
CN103295194A (zh) * | 2013-05-15 | 2013-09-11 | 中山大学 | 亮度可控与细节保持的色调映射方法 |
CN106530263A (zh) * | 2016-10-19 | 2017-03-22 | 天津大学 | 一种适应于医学影像的单曝光高动态范围图像生成方法 |
CN106886386A (zh) * | 2017-01-23 | 2017-06-23 | 苏州科达科技股份有限公司 | 从低动态图像生成高动态图像的方法 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110428377A (zh) * | 2019-07-26 | 2019-11-08 | 北京百度网讯科技有限公司 | 数据扩充方法、装置、设备和介质 |
CN111601048A (zh) * | 2020-05-13 | 2020-08-28 | 展讯通信(上海)有限公司 | 图像处理方法及装置 |
CN111601048B (zh) * | 2020-05-13 | 2022-04-19 | 展讯通信(上海)有限公司 | 图像处理方法及装置 |
CN112348763A (zh) * | 2020-11-09 | 2021-02-09 | 西安宇视信息科技有限公司 | 图像增强方法、装置、电子设备及介质 |
CN112348763B (zh) * | 2020-11-09 | 2024-05-14 | 西安宇视信息科技有限公司 | 图像增强方法、装置、电子设备及介质 |
CN112862709A (zh) * | 2021-01-27 | 2021-05-28 | 昂纳工业技术(深圳)有限公司 | 图像特征增强方法、装置及可读存储介质 |
CN112862709B (zh) * | 2021-01-27 | 2024-05-03 | 昂视智能(深圳)有限公司 | 图像特征增强方法、装置及可读存储介质 |
CN114693550A (zh) * | 2022-03-24 | 2022-07-01 | 广东第二师范学院 | 一种亮度可控细节保持眼底图像动态范围扩展方法及系统 |
CN114693550B (zh) * | 2022-03-24 | 2024-10-08 | 广东第二师范学院 | 一种亮度可控细节保持眼底图像动态范围扩展方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110009574B (zh) | 2023-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109410126B (zh) | 一种细节增强与亮度自适应的高动态范围图像的色调映射方法 | |
CN110009574B (zh) | 一种低动态范围图像逆向生成高动态范围图像的方法 | |
EP2076013B1 (en) | Method of high dynamic range compression | |
US7881554B2 (en) | Method for correcting a digital image | |
JP5669513B2 (ja) | 画像処理装置、画像処理プログラム、及び、画像処理方法 | |
US20040081363A1 (en) | Enhancing the tonal and spatial characteristics of digital images using selective spatial filters | |
JPWO2009072537A1 (ja) | 画像処理装置および方法、プログラム、並びに記録媒体 | |
Hessel et al. | An extended exposure fusion and its application to single image contrast enhancement | |
JP4021261B2 (ja) | 画像処理装置 | |
Kumar et al. | An improved Gamma correction model for image dehazing in a multi-exposure fusion framework | |
JP4639037B2 (ja) | 画像処理方法および装置 | |
JP2001313844A (ja) | 局所的な色補正を実行する方法および装置 | |
US20210368088A1 (en) | Systems and methods of image enhancement | |
CN113039576A (zh) | 图像增强系统和方法 | |
Parihar et al. | A comprehensive analysis of fusion-based image enhancement techniques | |
CN114240767A (zh) | 一种基于曝光融合的图像宽动态范围处理方法及装置 | |
CN107169942B (zh) | 一种基于鱼类视网膜机制的水下图像增强方法 | |
CN110766622A (zh) | 基于亮度区分和Gamma平滑的水下图像增强方法 | |
JP2005004510A (ja) | 画像処理プログラム | |
JP4345366B2 (ja) | 画像処理プログラムおよび画像処理装置 | |
CN116630198A (zh) | 一种结合自适应伽马校正的多尺度融合水下图像增强方法 | |
KR101462440B1 (ko) | 색 보정 장치 및 색 보정 방법 | |
CN115937029A (zh) | 一种水下图像增强方法 | |
CN113284058B (zh) | 一种基于迁移理论的水下图像增强方法 | |
JP4125191B2 (ja) | 画像処理装置および方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |