CN107680062A - 一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法 - Google Patents

一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法 Download PDF

Info

Publication number
CN107680062A
CN107680062A CN201710947477.4A CN201710947477A CN107680062A CN 107680062 A CN107680062 A CN 107680062A CN 201710947477 A CN201710947477 A CN 201710947477A CN 107680062 A CN107680062 A CN 107680062A
Authority
CN
China
Prior art keywords
micro
burnt
priori
image
blurred
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710947477.4A
Other languages
English (en)
Inventor
张智福
余思洋
陈捷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changsha Full Image Technology Co Ltd
Original Assignee
Changsha Full Image Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changsha Full Image Technology Co Ltd filed Critical Changsha Full Image Technology Co Ltd
Priority to CN201710947477.4A priority Critical patent/CN107680062A/zh
Publication of CN107680062A publication Critical patent/CN107680062A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明公开一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法。首先利用手机近距离拍摄微焦模糊图像,将微焦模糊图像复原问题转换成基于最大后验概率的盲卷积图像复原问题,在目标函数中加入l1/l2先验和高斯先验进行求解。高斯先验可近似表示微焦模糊的模糊核特性,与稳健的l1/l2先验结合能有效解决微焦模糊图像复原问题。

Description

一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法
技术领域
本发明涉及一种图像复原领域,具体指一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法。
背景技术
图像模糊会影响视觉效果,给人们的日常生活带来不便。目前图像复原领域有针对不同模糊类型的图像复原算法,比如运动模糊、抖动模糊或简单透镜自身像差模糊等,都取得了不错的效果。但是目前针对一类特殊图像模糊即微焦模糊的研究几乎为空白,微焦模糊是镜头离拍摄物体特别近时,由于无法聚焦所导致的图像模糊。在某些特殊情况下,如狭小环境限制或时间紧急仓促拍得的照片,受微焦模糊影响,无法提供重要信息,需要对模糊图像进行复原得到清晰图像。微焦模糊不同于运动模糊、抖动模糊或像差模糊,因此常用的图像复原方法对微焦模糊并不适用。微焦模糊类似散焦模糊,但比一般程度的散焦模糊更为严重,因为镜头距离拍摄物体特别近,散焦模糊图像复原算法中的构造参数化模糊核方法对微焦模糊也不适用。
因此,如何取得较好的微焦模糊图像复原结果是急需解决的问题。
发明内容
本发明为克服上述情况不足,旨在提供一种结合l1/l2先验和高斯先验的盲卷积图像复原算法,针对微焦模糊图像特征,解决微焦模糊图像复原问题。
一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法,其特征在于,包括以下步骤:
步骤一:用手机近距离拍摄,获取微焦模糊图像,微焦模糊图像是指在静态下拍到的图像,不包括抖动模糊或运动模糊图像;
步骤二:将微焦模糊图像的复原问题转换成盲卷积图像复原问题,其中盲卷积图像复原算法为基于最大后验概率MAP的盲卷积图像复原算法,在最大后验概率模型下,盲卷积图像复原问题的统计学模型可以表述为:
arg maxP(K,I|B)=arg maxP(B|I,K)P(I)P(K) (1)
其中,K表示微焦模糊图像对应的模糊核;I表示清晰图像;B表示微焦模糊图像;P(K,I|B)表示在微焦模糊图像B已知条件下,与微焦模糊图像B对应的模糊核和清晰图像分别为K和I的概率;P(B|I,K)表示如果已知模糊核K和清晰图像I,对应的微焦模糊图像为B的概率;P(I)表示对原始清晰图像已知的先验概率;P(K)表示模糊核的先验概率。
为计算方便,考虑到对数与乘积的转换关系以及对数函数的单调性,对式(1)左右两端分别取负对数:
-log P(K,I|B)=-log P(B|K,I)-log P(I)-log P(K) (2)
则上述问题转化为能量最小化问题,左边的目标函数可以定义为:
其中,||K*I-B||2表示数据拟合项;表示图像先验;||K||p2表示模糊核先验;λ1和λ2分别表示图像先验和模糊核先验的权重;P1和P2分别表示图像先验和模糊核先验的具体范数。
步骤三:在盲卷积图像复原目标函数中加入l1/l2先验和高斯先验,l1/l2先验可表示为其中I表示清晰图像,x和y表示像素坐标,||·||1表示1范数,||·||2表示2范数;高斯先验可表示为其中表示模糊核导数,x和y表示像素坐标;盲卷积图像复原目标函数可表示为:
其中,表示||K*I-B||2数据拟合项,表示l1/l2先验,表示高斯先验,λ1和λ2分别表示两个先验的权重。
步骤四:用优化算法求解目标函数,得到复原图像。优化算法可采用EM优化算法,EM优化算法的具体步骤如下:
(1)E-step:令Q(I)=P(I|B,K),计算出的均值和方差,其中P(I|B,K)表示在已知模糊图像B和模糊核K的条件下,对应的清晰图像为I的概率;均值u就代表给定当前模糊核时潜在的清晰图像,C代表清晰图像周围的方差;
(2)M-step:找到使K*I-B达到最小值的K值,即式(5)达到最小值;
EQ||K*I-B||2 (5)
其中,EQ表示求||K*I-B||2的最小值,即能量函数;
在M-step中使用的是求导函数的方法,即找到式(5)的极值点,式(5)包含一个二次项,而在E-step中所求出的均值和方差足以满足式(5)的求解条件,此时所求出的是局部最优解,然后多次交替迭代E-step和M-step,直到得到最终的全局最优解,即求得复原后的清晰图像。
本发明有益效果:用盲卷积图像复原算法解决微焦模糊图像复原问题,微焦模糊与运动模糊和抖动模糊特性不同,是另一种形式的散焦模糊,用高斯先验能更好地表示微焦模糊的模糊核特性;l1/l2先验是一种比较稳健的图像先验,与高斯先验结合能很好地解决微焦模糊的图像复原问题,取得更好的复原结果。
附图说明
图1是本发明方法的流程图;
图2是手机近距离拍摄的微焦模糊图像;
图3是复原清晰图像。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本实施例提供的一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法,包括如下步骤:
步骤一:用手机近距离拍摄,获取微焦模糊图像,微焦模糊图像是指在静态下拍到的图像,不包括抖动模糊或运动模糊图像,如图2所示,是用苹果手机在距离页面5厘米左右静止拍摄的微焦模糊图像。
步骤二:将微焦模糊图像的复原问题转换成盲卷积图像复原问题,其中盲卷积图像复原算法为基于最大后验概率MAP的盲卷积图像复原算法,在最大后验概率模型下,盲卷积图像复原问题的统计学模型可以表述为:
arg maxP(K,I|B)=arg maxP(B|I,K)P(I)P(K) (1)
其中,K表示微焦模糊图像对应的模糊核;I表示清晰图像;B表示微焦模糊图像;P(K,I|B)表示在微焦模糊图像B已知条件下,与微焦模糊图像B对应的模糊核和清晰图像分别为K和I的概率;P(B|I,K)表示如果已知模糊核K和清晰图像I,对应的微焦模糊图像为B的概率;P(I)表示对原始清晰图像已知的先验概率;P(K)表示模糊核的先验概率。
为计算方便,考虑到对数与乘积的转换关系以及对数函数的单调性,对式(1)左右两端分别取负对数:
-log P(K,I|B)=-log P(B|K,I)-log P(I)-log P(K) (2)
则上述问题转化为能量最小化问题,左边的目标函数可以定义为:
其中,||K*I-B||2表示数据拟合项;表示图像先验;||K||p2表示模糊核先验;λ1和λ2分别表示图像先验和模糊核先验的权重;P1和P2分别表示图像先验和模糊核先验的具体范数。
步骤三:在盲卷积图像复原目标函数中加入l1/l2先验和高斯先验,l1/l2先验可表示为其中I表示清晰图像,x和y表示像素坐标,||·||1表示1范数,||·||2表示2范数;高斯先验可表示为其中表示模糊核导数,x和y表示像素坐标;盲卷积图像复原目标函数可表示为:
其中,表示||K*I-B||2数据拟合项,表示l1/l2先验,表示高斯先验,λ1和λ2分别表示两个先验的权重。
在具体实施过程中,取λ1=0.55,λ2=0.45。
步骤四:用优化算法求解步骤三中的目标函数,优化算法可采用EM优化算法,EM优化算法的具体步骤如下:
(1)E-step:令Q(I)=P(I|B,K),计算出的均值和方差,其中P(I|B,K)表示在已知模糊图像B和模糊核K的条件下,对应的清晰图像为I的概率;均值u就代表给定当前模糊核时潜在的清晰图像,C代表清晰图像周围的方差;
(2)M-step:找到使K*I-B达到最小值的K值,即式(5)达到最小值;
EQ||K*I-B||2 (5)
其中,EQ表示求||K*I-B||2的最小值,即能量函数;
在M-step中使用的是求导函数的方法,即找到式(5)的极值点,式(5)包含一个二次项,而在E-step中所求出的均值和方差足以满足式(5)的求解条件,此时所求出的是局部最优解,然后多次交替迭代E-step和M-step,直到得到最终的全局最优解,即求得复原后的清晰图像,如图3所示。
以上所揭露的仅为本发明一种较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。

Claims (4)

1.一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法,其特征在于,包括以下步骤:
步骤一:用手机近距离拍摄,获取微焦模糊图像;
步骤二:将微焦模糊图像的复原问题转换成盲卷积图像复原问题,将微焦模糊图像作为已知条件,用盲卷积图像复原算法对微焦模糊图像进行处理;
步骤三:在盲卷积图像复原目标函数中加入l1/l2先验和高斯先验;
步骤四:用优化算法求解目标函数,得到复原图像。
2.根据权利要求1所述的基于l1/l2先验结合高斯先验的微焦模糊图像复原方法,其特征在于:所述步骤一中的微焦模糊图像是指在静态下拍到的图像,不包括抖动模糊或运动模糊图像。
3.根据权利要求1所述的基于l1/l2先验结合高斯先验的微焦模糊图像复原方法,其特征在于:所述步骤二中盲卷积图像复原算法为基于最大后验概率MAP的盲卷积图像复原算法,在最大后验概率模型下,盲卷积图像复原问题的统计学模型可以表述为:
arg max P(K,I|B)=arg max P(B|I,K)P(I)P(K) (1)
其中,K表示微焦模糊图像对应的模糊核;I表示清晰图像;B表示微焦模糊图像;P(K,I|B)表示在微焦模糊图像B已知条件下,与微焦模糊图像B对应的模糊核和清晰图像分别为K和I的概率;P(B|I,K)表示如果已知模糊核K和清晰图像I,对应的微焦模糊图像为B的概率;P(I)表示对原始清晰图像已知的先验概率;P(K)表示模糊核的先验概率。
为计算方便,考虑到对数与乘积的转换关系以及对数函数的单调性,对式(1)左右两端分别取负对数:
-log P(K,I|B)=-log P(B|K,I)-log P(I)-log P(K) (2)
则上述问题转化为能量最小化问题,左边的目标函数可以定义为:
其中,||K*I-B||2表示数据拟合项;表示图像先验;||K||p2表示模糊核先验;λ1和λ2分别表示图像先验和模糊核先验的权重;P1和P2分别表示图像先验和模糊核先验的具体范数。
4.根据权利要求1所述的基于l1/l2先验结合高斯先验的微焦模糊图像复原方法,其特征在于:所述步骤三中l1/l2先验可表示为其中I表示清晰图像,x和y表示像素坐标,||·||1表示1范数,||·||2表示2范数;所述步骤三中高斯先验可表示为其中表示模糊核导数,x和y表示像素坐标;盲卷积图像复原目标函数可表示为:
其中,表示||K*I-B||2数据拟合项,表示l1/l2先验,表示高斯先验,λ1和λ2分别表示两个先验的权重。
CN201710947477.4A 2017-10-12 2017-10-12 一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法 Pending CN107680062A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710947477.4A CN107680062A (zh) 2017-10-12 2017-10-12 一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710947477.4A CN107680062A (zh) 2017-10-12 2017-10-12 一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法

Publications (1)

Publication Number Publication Date
CN107680062A true CN107680062A (zh) 2018-02-09

Family

ID=61139875

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710947477.4A Pending CN107680062A (zh) 2017-10-12 2017-10-12 一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法

Country Status (1)

Country Link
CN (1) CN107680062A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104091312A (zh) * 2014-07-11 2014-10-08 中国人民解放军国防科学技术大学 一种根据图像频谱信息提取模糊核先验的单透镜成像方法
CN104574423A (zh) * 2015-02-03 2015-04-29 中国人民解放军国防科学技术大学 基于球面像差标定的单透镜成像psf估计算法
CN104599254A (zh) * 2015-02-03 2015-05-06 中国人民解放军国防科学技术大学 基于组合模糊核结构先验的单透镜计算成像方法
CN104809706A (zh) * 2015-05-05 2015-07-29 中国人民解放军国防科学技术大学 一种基于图像颜色平缓变化先验的单透镜计算成像方法
CN105046659A (zh) * 2015-07-02 2015-11-11 中国人民解放军国防科学技术大学 一种基于稀疏表示的单透镜计算成像psf估算方法
CN105957024A (zh) * 2016-04-20 2016-09-21 西安电子科技大学 基于图像块先验与稀疏范数的盲去模糊方法
CN106651811A (zh) * 2017-01-03 2017-05-10 长沙全度影像科技有限公司 一种亮度通道引导的简单镜头成像模糊去除方法
CN106709879A (zh) * 2016-12-08 2017-05-24 中国人民解放军国防科学技术大学 一种基于简单透镜计算成像的空间变化点扩散函数平滑方法
CN106780378A (zh) * 2016-12-08 2017-05-31 中国人民解放军国防科学技术大学 一种针对色差已校正双镜片透镜的盲卷积图像复原方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104091312A (zh) * 2014-07-11 2014-10-08 中国人民解放军国防科学技术大学 一种根据图像频谱信息提取模糊核先验的单透镜成像方法
CN104574423A (zh) * 2015-02-03 2015-04-29 中国人民解放军国防科学技术大学 基于球面像差标定的单透镜成像psf估计算法
CN104599254A (zh) * 2015-02-03 2015-05-06 中国人民解放军国防科学技术大学 基于组合模糊核结构先验的单透镜计算成像方法
CN104809706A (zh) * 2015-05-05 2015-07-29 中国人民解放军国防科学技术大学 一种基于图像颜色平缓变化先验的单透镜计算成像方法
CN105046659A (zh) * 2015-07-02 2015-11-11 中国人民解放军国防科学技术大学 一种基于稀疏表示的单透镜计算成像psf估算方法
CN105957024A (zh) * 2016-04-20 2016-09-21 西安电子科技大学 基于图像块先验与稀疏范数的盲去模糊方法
CN106709879A (zh) * 2016-12-08 2017-05-24 中国人民解放军国防科学技术大学 一种基于简单透镜计算成像的空间变化点扩散函数平滑方法
CN106780378A (zh) * 2016-12-08 2017-05-31 中国人民解放军国防科学技术大学 一种针对色差已校正双镜片透镜的盲卷积图像复原方法
CN106651811A (zh) * 2017-01-03 2017-05-10 长沙全度影像科技有限公司 一种亮度通道引导的简单镜头成像模糊去除方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
DILIP KRISHNAN等: "Blind Deconvolution Using a Normalized Sparsity Measure", 《CVPR 2011》 *
HUANFENG SHEN等: "Adaptive Norm Selection for Regularized Image Restoration and Super-Resolution", 《IEEE TRANSACTIONS ON CYBERNETICS》 *
余义斌等: "凹凸范数比值正则化的快速图像盲去模糊", 《电子学报》 *
王光新: "基于稀疏约束正则化模型的图像提高分辨率技术研究", 《中国博士学位论文全文数据库 信息科技辑》 *

Similar Documents

Publication Publication Date Title
Chan et al. An augmented Lagrangian method for total variation video restoration
CN101639938B (zh) 一种基于双边滤波器和余量去卷积的图像复原方法
CN104952036A (zh) 一种即时视频中的人脸美化方法和电子设备
CN110517283A (zh) 姿态跟踪方法、装置及计算机可读存储介质
CN109767388B (zh) 基于超像素提升图像拼接质量的方法、移动终端、相机
CN110348496B (zh) 一种人脸图像融合的方法及系统
CN103927016A (zh) 一种基于双目视觉的实时三维双手手势识别方法及其系统
CN110264396B (zh) 视频人脸替换方法、系统及计算机可读存储介质
US20160093028A1 (en) Image processing method, image processing apparatus and electronic device
CN110942436B (zh) 一种基于图像质量评价的图像去模糊方法
CN104881845B (zh) 用于处理图像的方法和设备
CN108109121A (zh) 一种基于卷积神经网络的人脸模糊快速消除方法
CN106169078B (zh) 图像识别方法
CN114255337A (zh) 文档图像的矫正方法、装置、电子设备及存储介质
CN113870283B (zh) 人像抠图方法、装置、计算机设备及可读存储介质
CN113657396B (zh) 训练方法、译文展示方法、装置、电子设备以及存储介质
CN108898562A (zh) 一种基于深度学习的移动设备图像去雾方法
CN110633692A (zh) 一种用于无人机航拍的行人识别方法和相关装置
CN109859136A (zh) 一种在景深渲染中对图像进行模糊处理的方法
CN107680062A (zh) 一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法
CN107203961A (zh) 一种表情迁移的方法及电子设备
CN107301667A (zh) 基于棋盘格图像对单透镜计算成像的psf估计方法
CN108053376A (zh) 一种语义分割信息指导深度学习鱼眼图像校正方法
CN112541454A (zh) 一种用于视线估计的卷积神经网络设计方法
CN107590790A (zh) 一种基于对称边缘填充的简单透镜边缘区域去模糊方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180209

WD01 Invention patent application deemed withdrawn after publication