CN109949244B - 一种基于曲率项的水下图像盲复原变分方法 - Google Patents

一种基于曲率项的水下图像盲复原变分方法 Download PDF

Info

Publication number
CN109949244B
CN109949244B CN201910215474.0A CN201910215474A CN109949244B CN 109949244 B CN109949244 B CN 109949244B CN 201910215474 A CN201910215474 A CN 201910215474A CN 109949244 B CN109949244 B CN 109949244B
Authority
CN
China
Prior art keywords
image
underwater image
underwater
term
item
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910215474.0A
Other languages
English (en)
Other versions
CN109949244A (zh
Inventor
侯国家
李景明
端金鸣
潘振宽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao University
Original Assignee
Qingdao University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao University filed Critical Qingdao University
Priority to CN201910215474.0A priority Critical patent/CN109949244B/zh
Publication of CN109949244A publication Critical patent/CN109949244A/zh
Application granted granted Critical
Publication of CN109949244B publication Critical patent/CN109949244B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)

Abstract

本发明属于数字图像处理技术领域,涉及一种基于曲率项的水下图像复原变分方法,引入曲率项控制全变分规则项的扩散、根据水下成像物理模型和Retinex模型重建数据项,建立基于曲率项的水下图像变分盲复原模型,并基于交替方向乘子法,巧妙设计辅助变量,实现能量方程最小化极值问题的快速求解,从而实现水下图像的盲复原,减少了计算的复杂度,在实现去雾、去噪、提升图像对比度的同时,也能很好的保持图像边缘信息,具有良好的实际应用价值。

Description

一种基于曲率项的水下图像盲复原变分方法
技术领域:
本发明属于数字图像处理技术领域,涉及一种基于曲率项的水下图像复原变分方法。
背景技术:
水下图像的盲复原是水下图像处理的基本问题,由于水及其悬浮粒子对光的吸收和散射,水体流动、人工光源以及观测平台的运动等特征导致所观测到的图像呈现出模糊、对比度低颜色退化、噪声严重等问题。为了克服这些问题,目前通常采用图像增强和图像盲复原的方法来恢复水下图像,其中图像增强方法主要是使用客观衡量标准来让水下图像质量得到提升,不注重水下成像的物理过程,并且在增强过程中可能会导致噪声更加明显;图像盲复原方法是依赖水下成像模型,并考虑到水下的反射特性,最后通过逆向求解来得到清晰的图像。
雾化、模糊、噪声等致使水下退化图像复原为复杂的病态反问题,由于多因素耦合影响,传统的单一算法仅能解决某一特定问题,而多步法往往顾此失彼,基于综合多因素的变分模型及交替优化算法具有高度的可扩展性和灵活性,图像信息可较好的融入相应的能量泛函中,可实现同时去雾、去噪和边缘保持的效果。因此,迫切需要一种新的水下图像复原变分方法,将曲率项变分模型应用于复杂的水下图像进行盲复原,融合水下图像的成像物理模型和先验知识,获得高质量的复原结果。
发明内容:
本发明的目的在于克服现有技术存在的缺点,设计提供一种基于曲率项的水下图像变分盲复原方法,引入曲率项控制全变分规则项的扩散、根据水下成像物理模型和Retinex模型重建数据项,建立基于曲率项的水下图像变分盲复原模型,并基于交替方向乘子法(ADMM),巧妙设计辅助变量,实现能量方程最小化极值问题的快速求解,从而实现水下图像的盲复原。
为了实现上述目的,本发明实现水下图像盲复原的具体步骤为:
(1)先输入水下图像I,采用暗通道先验算法求出输入图像的暗通道图,选取最亮的前0.1%的像素值作为全局背景光;
(2)由暗通道图求出红色通道的透射率图tr,基于Jaffe-McGlamery模型,再根据波长衰减系数之间的关系
Figure BDA0002001914210000021
求出蓝通道的透射率图tg和绿通道的透射率图tb,其中λc,c∈{R,G,B}代表红光、绿光和蓝光的波长,m=-0.00113,i=1.62517,βk,k∈{g,b}代表绿光与蓝光在水下的衰减系数,βr为红光在水下的衰减系数;
(3)将Retinex模型变形如下:
S=L·R
s=log(S),l=log(L),r=log(R)
s=l+r
将水下成像模型变形如下:
I(x,y)=t(x,y)·J(x,y)+(1-t(x,y))·B
Figure BDA0002001914210000031
将两个模型进行融合变形如下:
Figure BDA0002001914210000032
其中S为观察到的图像,L表示照度分量,R表示反射分量;I为获取的水下图像,t为透射率图,J为复原后的水下图像,B为全局背景光;
(4)设计基于曲率项的水下图像变分复原方法的规则项
Figure BDA0002001914210000033
和数据项|s-l-r|2以及|r-r0|2,用于控制迭代过程中r与初始值相近;
Figure BDA0002001914210000034
为r的TV项,
Figure BDA0002001914210000035
为s的TV项,r0为Retinex模型变换得来的r的初始值,
Figure BDA0002001914210000036
t0为透射率图的初始值;
(5)建立基于曲率项的水下图像变分盲复原能量方程为:
Figure BDA0002001914210000037
其中,Ω为水下图像区域,
Figure BDA0002001914210000038
Figure BDA0002001914210000039
为复原区域的规则项,α和β为规则项的惩罚参数,|s-l-r|2为数据项,μ为约束项|r-r0|2的惩罚参数;
(6)引入辅助变量
Figure BDA00020019142100000310
步骤(5)的能量方程转换为:
Figure BDA0002001914210000041
其中,α,β是正的惩罚参数,
Figure BDA0002001914210000042
是拉格朗日乘子,可根据以下规则进行更新:
Figure BDA0002001914210000043
Figure BDA0002001914210000044
Figure BDA0002001914210000045
Figure BDA0002001914210000046
Figure BDA0002001914210000047
其中,μ,μ12345分别为约束项∫Ω(r-r0)2dx,
Figure BDA0002001914210000048
Figure BDA0002001914210000049
的惩罚参数;
(7)利用变量交替迭代优化求解分别计算步骤(6)中的变量
Figure BDA00020019142100000410
将步骤(6)的极小化问题转换为以下七个子问题:
Figure BDA00020019142100000411
Figure BDA00020019142100000412
Figure BDA00020019142100000413
Figure BDA0002001914210000051
Figure BDA0002001914210000052
Figure BDA0002001914210000053
Figure BDA0002001914210000054
(8)分别求解ε1(s),ε2(q),
Figure BDA0002001914210000055
ε6(r),
Figure BDA0002001914210000056
的欧拉方程;
(9)对步骤(7)中的
Figure BDA0002001914210000057
行迭代求解,当相邻两次迭代的能量差小于设定的阈值时停止;
(10)输出水下图像盲复原结果;
(11)对输出的水下图像盲复结果进行伽马矫正变换进一步提视觉效果。
本发明与现有技术相比,利用基于曲率的变分复原方法对水下图像进行盲复原,对构建的能量方程引入辅助变量,采用交替迭代方法进行求解,提高了效率,而且减少了计算的复杂度,在实现去雾、去噪、提升图像对比度的同时,也能很好的保持图像边缘信息,具有良好的实际应用价值。
附图说明:
图1为本发明的工作原理流程图。
图2为本发明实施例中原始降质水下图像(a)与经过本发明复原后的结果(b)对比,实验参数设置为:α=7,β=2,μ=0.05,μ1=0.00001,μ2=1,μ3=10000,μ4=0.001,μ5=0.2。
图3为本发明实施例中利用本发明复原得到的结果与其他经典复原方法的比较,其中(a)为原始水下图像;(b)为本发明实施例复原结果;(c)为限制对比度的自适应直方图均衡算法(CLAHE)复原结果;(d)为单尺度视网膜方法(SSR)复原结果;(e)为暗通道先验法(DCP)方法复原结果;(f)为波长补偿与去雾方法(WCID)复原结果。
图4本发明实施例中利用本发明复原的图像与其他方法的在具体细节上对比。(a)原始水下图象的细节图;(b)本发明复原结果细节图;(c)CLAHE方法复原结果细节图;(d)SSR方法复原结果细节图;(e)DCP方法复原结果细节图;(f)WCID方法复原结果细节图。
图5本发明实施例中利用本发明与其它方法对含有椒盐、高斯、泊松噪声的水下图像复原结果对比以及对去噪效果客观评价结果的对比(图片下方的数值即为评估值),客观评价方法采用经典方法:均方根误差(RMSE)和峰值信噪比(PSNR),其中RMSE值越小、PSNR值越大代表去噪效果越佳,其中(a)为添加噪声后的图像;(b)为本发明实施例对含有椒盐、高斯、泊松噪声的水下图像处理后的结果以及RMSE/PSNR评估值;(c)为CLAHE对含有椒盐、高斯、泊松噪声的水下图像处理后的结果以及RMSE/PSNR评估值;(d)为SSR对含有椒盐、高斯、泊松噪声的水下图像处理后的结果以及RMSE/PSNR评估值;(e)为DCP对含有椒盐、高斯、泊松噪声的水下图像处理后的结果以及RMSE/PSNR评估值;(f)为WCID对含有椒盐、高斯、泊松噪声的水下图像处理后的结果以及RMSE/PSNR评估值。
具体实施方式:
下面通过实施例并结合附图对本发明作进一步说明。
实施例:
本实施例具体包括以下步骤:
(1)先输入水下图像I,采用暗通道先验算法求出输入图像的暗通道图,选取最亮的前0.1%的像素值作为全局背景光;
(2)由暗通道图求出红色通道的透射率图tr,基于Jaffe-McGlamery模型,再根据波长衰减系数之间的关系
Figure BDA0002001914210000071
求出蓝通道的透射率图tg和绿通道的透射率图tb,其中λc,c∈{R,G,B}代表红光、绿光和蓝光的波长,m=-0.00113,i=1.62517,βk,k∈{g,b}代表绿光与蓝光在水下的衰减系数,βr为红光在水下的衰减系数.
(3)将Retinex模型变形如下:
S=L·R
s=log(S),l=log(L),r=log(R)
s=l+r
将水下成像模型变形如下:
I(x,y)=t(x,y)·J(x,y)+(1-t(x,y))·B
Figure BDA0002001914210000081
将两个模型进行融合变形如下:
Figure BDA0002001914210000082
其中S为观察到的图像,L表示照度分量,R表示反射分量;I为获取的水下图像,t为透射率图,J为复原后的水下图像,B为全局背景光;
(4)设计基于曲率项的水下图像变分复原方法的规则项
Figure BDA0002001914210000083
Figure BDA0002001914210000084
和数据项|s-l-r|2以及|r-r0|2,|r-r0|2用于控制迭代过程中与r初始值相近;
Figure BDA0002001914210000085
为r的TV项,
Figure BDA0002001914210000086
为s的TV项,r0为Retinex模型变换得来的r的初始值,
Figure BDA0002001914210000087
t0为透射率图的初始值;
(5)建立基于曲率项的水下图像变分复原能量方程为:
Figure BDA0002001914210000088
其中,Ω为水下图像区域,
Figure BDA0002001914210000089
Figure BDA00020019142100000810
为复原区域的规则项,α和β为规则项的惩罚参数,|s-l-r|2为数据项,μ为约束项|r-r0|2的惩罚参数;
(6)引入辅助变量
Figure BDA00020019142100000811
步骤(5)的能量方程转换为:
Figure BDA0002001914210000091
其中,α,β是正的惩罚参数,
Figure BDA0002001914210000092
是拉格朗日乘子,可以根据以下规则进行更新:
Figure BDA0002001914210000093
Figure BDA0002001914210000094
Figure BDA0002001914210000095
Figure BDA0002001914210000096
Figure BDA0002001914210000097
其中,μ,μ12345分别为约束项∫Ω(r-r0)2dx,
Figure BDA0002001914210000098
Figure BDA0002001914210000099
的惩罚参数;(1)利用变量交替迭代优化求解分别计算步骤(6)中的变量
Figure BDA00020019142100000910
步骤(6)的极小化问题转换为以下7个子问题:
Figure BDA00020019142100000911
Figure BDA00020019142100000912
Figure BDA00020019142100000913
Figure BDA0002001914210000101
Figure BDA0002001914210000102
Figure BDA0002001914210000103
Figure BDA0002001914210000104
(7)分别求解ε1(s),ε2(q),
Figure BDA0002001914210000105
ε6(r),
Figure BDA0002001914210000106
的欧拉方程;
(8)对步骤(7)中的
Figure BDA0002001914210000107
进行迭代求解,当相邻两次迭代的能量差小于设定的阈值时停止:
a)初始化参数
Figure BDA0002001914210000108
α,β,μ12345,μ,
Figure BDA0002001914210000109
iternum;
b)固定
Figure BDA00020019142100001010
求解ε1(s)的欧拉方程,sk+1可通过以下方程直接求解:
Figure BDA00020019142100001011
Figure BDA00020019142100001012
c)固定
Figure BDA00020019142100001013
求解ε2(q)的欧拉方程,采用广义软阈值公式求解可得:
Figure BDA0002001914210000111
d)固定
Figure BDA0002001914210000112
求解
Figure BDA0002001914210000113
的的欧拉方程,采广义软阈值公式求解可得:
Figure BDA0002001914210000114
e)固定
Figure BDA0002001914210000115
求解
Figure BDA0002001914210000116
的欧拉方程可得:
Figure BDA0002001914210000117
Figure BDA0002001914210000118
Figure BDA0002001914210000119
Figure BDA00020019142100001110
f)固定
Figure BDA00020019142100001111
求解
Figure BDA00020019142100001112
的欧拉方程可得:
Figure BDA00020019142100001113
求解完之后对其进行投影:
Figure BDA00020019142100001114
g)固定
Figure BDA00020019142100001115
求解ε6(r)的欧拉方程可得:
Figure BDA00020019142100001116
Figure BDA0002001914210000121
h)固定
Figure BDA0002001914210000122
求解
Figure BDA0002001914210000123
的欧拉方程,采广义软阈值公式
求解可得:
Figure BDA0002001914210000124
i)根据以下规则更新Lagrange乘子:
Figure BDA0002001914210000125
Figure BDA0002001914210000126
Figure BDA0002001914210000127
Figure BDA0002001914210000128
Figure BDA0002001914210000129
(9)进行伽马矫正,得到最终的复原图像:将求解出的s,r,l,进行S=exp(s),L=exp(l),
Figure BDA00020019142100001210
变换后,对照度分量L进行伽马矫正得到修正后的L':
Figure BDA00020019142100001211
其中γ是控制修正程度的参数,W是白像素的值,W=255,修正后的图象S'表示为:
Figure BDA00020019142100001212
最后通过J=B-S'得到清晰的图象。

Claims (1)

1.一种基于曲率项的水下图像盲复原变分方法,其特征在于具体步骤为:
(1)先输入水下图像I,采用暗通道先验算法求出输入图像的暗通道图,选取最亮的前0.1%的像素值作为全局背景光;
(2)由暗通道图求出红色通道的透射率图tr,基于Jaffe-McGlamery模型,再根据波长衰减系数之间的关系
Figure FDA0002001914200000011
求出蓝通道的透射率图tg和绿通道的透射率图tb,其中λc,c∈{R,G,B}代表红光、绿光和蓝光的波长,m=-0.00113,i=1.62517,βk,k∈{g,b}代表绿光与蓝光在水下的衰减系数,βr为红光在水下的衰减系数;
(3)将Retinex模型变形如下:
S=L·R
s=log(S),l=log(L),r=log(R)
s=l+r
将水下成像模型变形如下:
I(x,y)=t(x,y)·J(x,y)+(1-t(x,y))·B
Figure FDA0002001914200000012
将两个模型进行融合变形如下:
s=log(B-J);l=log(B-I);
Figure FDA0002001914200000013
其中S为观察到的图像,L表示照度分量,R表示反射分量;I为获取的水下图像,t为透射率图,J为复原后的水下图像,B为全局背景光;
(4)设计基于曲率项的水下图像变分复原方法的规则项
Figure FDA0002001914200000021
和数据项|s-l-r|2以及|r-r0|2,用于控制迭代过程中r与初始值相近;
Figure FDA0002001914200000022
为r的TV项,
Figure FDA0002001914200000023
为s的TV项,r0为Retinex模型变换得来的r的初始值,
Figure FDA0002001914200000024
t0为透射率图的初始值;
(5)建立基于曲率项的水下图像变分盲复原能量方程为:
Figure FDA0002001914200000025
其中,Ω为水下图像区域,
Figure FDA0002001914200000026
Figure FDA0002001914200000027
为复原区域的规则项,α和β为规则项的惩罚参数,|s-l-r|2为数据项,μ为约束项|r-r0|2的惩罚参数;
(6)引入辅助变量
Figure FDA0002001914200000028
步骤(5)的能量方程转换为:
Figure FDA0002001914200000029
其中,α,β是正的惩罚参数,σ1,
Figure FDA00020019142000000210
σ3,
Figure FDA00020019142000000211
是拉格朗日乘子,可根据以下规则进行更新:
Figure FDA0002001914200000031
Figure FDA0002001914200000032
Figure FDA0002001914200000033
Figure FDA0002001914200000034
Figure FDA0002001914200000035
其中,μ,μ12345分别为约束项∫Ω(r-r0)2dx,
Figure FDA0002001914200000036
Figure FDA0002001914200000037
的惩罚参数;
(7)利用变量交替迭代优化求解分别计算步骤(6)中的变量r,s,
Figure FDA0002001914200000038
q,
Figure FDA0002001914200000039
将步骤(6)的极小化问题转换为以下七个子问题:
Figure FDA00020019142000000310
Figure FDA00020019142000000311
Figure FDA00020019142000000312
Figure FDA00020019142000000313
Figure FDA00020019142000000314
Figure FDA00020019142000000315
Figure FDA0002001914200000041
(8)分别求解ε1(s),ε2(q),
Figure FDA0002001914200000042
ε6(r),
Figure FDA0002001914200000043
的欧拉方程;
(9)对步骤(7)中的r,s,
Figure FDA0002001914200000044
q,
Figure FDA0002001914200000045
行迭代求解,当相邻两次迭代的能量差小于设定的阈值时停止;
(10)输出水下图像盲复原结果;
(11)对输出的水下图像盲复结果进行伽马矫正变换进一步提视觉效果。
CN201910215474.0A 2019-03-21 2019-03-21 一种基于曲率项的水下图像盲复原变分方法 Active CN109949244B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910215474.0A CN109949244B (zh) 2019-03-21 2019-03-21 一种基于曲率项的水下图像盲复原变分方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910215474.0A CN109949244B (zh) 2019-03-21 2019-03-21 一种基于曲率项的水下图像盲复原变分方法

Publications (2)

Publication Number Publication Date
CN109949244A CN109949244A (zh) 2019-06-28
CN109949244B true CN109949244B (zh) 2023-01-24

Family

ID=67011081

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910215474.0A Active CN109949244B (zh) 2019-03-21 2019-03-21 一种基于曲率项的水下图像盲复原变分方法

Country Status (1)

Country Link
CN (1) CN109949244B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108550120A (zh) * 2018-03-29 2018-09-18 青岛大学 一种变分框架下水下图像复原方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104537620B (zh) * 2014-12-30 2017-04-12 华中科技大学 一种方向自适应图像去模糊方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108550120A (zh) * 2018-03-29 2018-09-18 青岛大学 一种变分框架下水下图像复原方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
基于多通道非线性扩散项的运动模糊图像盲复原;朱婉霞等;《激光与光电子学进展》;20180130;全文 *
基于归一化曲率项的单幅运动模糊彩色图像盲复原;张宏等;《青岛大学学报(自然科学版)》;20180515(第02期);全文 *
基于曲率项的彩色图像非盲去模糊模型;吴楠等;《青岛大学学报(自然科学版)》;20180515(第02期);全文 *

Also Published As

Publication number Publication date
CN109949244A (zh) 2019-06-28

Similar Documents

Publication Publication Date Title
CN111968044B (zh) 基于Retinex和深度学习的低照度图像增强方法
CN110097519B (zh) 基于深度学习的双监督图像去雾方法、系统、介质和设备
CN107798665B (zh) 基于结构-纹理分层的水下图像增强方法
WO2019019695A1 (zh) 一种基于Retinex模型的水下图像增强方法
CN109118446B (zh) 一种水下图像复原及去噪方法
Wang et al. Joint iterative color correction and dehazing for underwater image enhancement
CN107256536B (zh) 一种基于色彩恒常性和群稀疏的水下图像复原方法
WO2017067130A1 (zh) 一种气动光学热辐射噪声校正方法与系统
Li et al. Underwater image high definition display using the multilayer perceptron and color feature-based SRCNN
Hou et al. Non-uniform illumination underwater image restoration via illumination channel sparsity prior
CN113284061B (zh) 一种基于梯度网络的水下图像增强方法
CN113313702A (zh) 基于边界约束与颜色校正的航拍图像去雾方法
CN108648160B (zh) 一种水下海参图像去雾增强方法及系统
Tang et al. A local flatness based variational approach to retinex
Zhang et al. Underwater image enhancement via multi-scale fusion and adaptive color-gamma correction in low-light conditions
Liang et al. Underwater image quality improvement via color, detail, and contrast restoration
Zhou et al. A Pixel Distribution Remapping and Multi-prior Retinex Variational Model for Underwater Image Enhancement
CN109949244B (zh) 一种基于曲率项的水下图像盲复原变分方法
CN111539885B (zh) 一种基于多尺度网络的图像增强去雾方法
CN111489302B (zh) 一种雾气环境下海事图像增强方法
CN107301625B (zh) 基于亮度融合网络的图像去雾方法
Shuang et al. Algorithms for improving the quality of underwater optical images: A comprehensive review
CN108550120B (zh) 一种变分框架下水下图像复原方法
CN113837963A (zh) 基于深度网络在lab颜色空间下的水下图像增强方法
CN108447034B (zh) 一种基于光照分解的海上雾天图像去雾方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant