CN113658061A - 一种面向混合约束条件的模糊图像复原方法及终端 - Google Patents

一种面向混合约束条件的模糊图像复原方法及终端 Download PDF

Info

Publication number
CN113658061A
CN113658061A CN202110857344.4A CN202110857344A CN113658061A CN 113658061 A CN113658061 A CN 113658061A CN 202110857344 A CN202110857344 A CN 202110857344A CN 113658061 A CN113658061 A CN 113658061A
Authority
CN
China
Prior art keywords
model
image
blurred image
expression
follows
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110857344.4A
Other languages
English (en)
Other versions
CN113658061B (zh
Inventor
张凯
董文德
徐贵力
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Aeronautics and Astronautics
Original Assignee
Nanjing University of Aeronautics and Astronautics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Aeronautics and Astronautics filed Critical Nanjing University of Aeronautics and Astronautics
Priority to CN202110857344.4A priority Critical patent/CN113658061B/zh
Publication of CN113658061A publication Critical patent/CN113658061A/zh
Application granted granted Critical
Publication of CN113658061B publication Critical patent/CN113658061B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02TCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00Road transport of goods or passengers
    • Y02T10/10Internal combustion engine [ICE] based vehicles
    • Y02T10/40Engine management systems

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种面向混合约束条件的模糊图像复原方法及终端,步骤如下:根据高斯概率模型对噪声建模,得到模糊图像模型;构建面向清晰图像的约束条件模型;构建模糊图像复原问题模型;得到辅助变量问题求解模型;对于固定的惩罚系数,将辅助变量问题求解模型变形;采用基于变量分离策略的轮换迭代算法,对变形后的辅助变量问题求解模型进行优化求解。本发明采用了基于变量分离策略的轮换迭代算法,引入一个固定的惩罚系数,并为每个约束条件设置两个辅助变量,设计了面向混合约束条件的优化求解算法,从而对模糊图像进行有效复原,提高图像的细节分辨能力,提升其使用价值。

Description

一种面向混合约束条件的模糊图像复原方法及终端
技术领域
本发明属于计算机数字图像处理技术领域,具体涉及一种面向混合约束条件的模糊图像复原方法及终端。
背景技术
在日常摄影或医学影像检测等应用领域中,由于外界振动等影响经常会使所得图像发生模糊,而采用三脚架、悬浮镜片镜头等稳像设备来提升成像质量又会提升成本,且携带不便。因此,通过数学方法设计软件,对模糊图像进行后期处理,提升其分辨率和对比度显得尤为重要。
图像建模是数字图像处理领域重要的研究手段之一。在数学上,图像的模糊效果可用点扩散函数与清晰图像的卷积来表示;同时,由于成像环境和成像器件电路特性的影响,噪声会叠加在模糊图像上。通常,针对点扩散函数也即卷积核已知情况下的非盲图像复原,通常采用正则化方法,引入如各向同性、各向异性的总变分(TV)约束,从而使得在较好地保持图像的边缘情况下,同时对噪声也具有一定的去噪效果。但是这些典型的正则化方法又各有缺陷,同时单一的约束条件已无法满足求解清晰图像的需求。
因此,在综合借鉴各种正则化方法后,本发明针对上述问题,利用Split-Bregman迭代算法,提出了一种面向混合约束条件的模糊图像复原方法,该方法首先采用清晰图像卷积模糊核对模糊图像进行建模,然后引入多种约束约束对清晰图像进行约束建模,并将所有的约束通过相应的约束系数加权求和得到复原问题模型。
发明内容
针对于上述现有技术的不足,本发明的目的在于提供一种面向混合约束条件的模糊图像复原方法及终端,以能够平衡地利用多种已知的约束条件,有效缓解模糊图像复原过程中固有的病态性,能够稳定快速地得到高质量的复原图像。
为达到上述目的,本发明采用的技术方案如下:
本发明的一种面向混合约束条件的模糊图像复原方法,步骤如下:
1)根据高斯概率模型对噪声建模,得到模糊图像模型;
2)引入多种约束条件并设置相应的加权系数,进行加权混合后对清晰图像建模,得到面向清晰图像的约束条件模型;
3)引入正则化系数λ,结合所述步骤1)和步骤2)中建立的模型,构建模糊图像复原问题模型;
4)引入一个固定的惩罚系数β,对每个约束条件使用一组辅助变量,并将步骤3)中的模糊图像复原问题模型进行转化,以得到辅助变量问题求解模型;
5)对于固定的惩罚系数β,将步骤4)中的辅助变量问题求解模型变形;
6)采用基于变量分离策略的轮换迭代算法,对步骤5)中的变形后的辅助变量问题求解模型进行优化求解;
7)不断循环求解上述模糊图像复原问题模型和变形后的辅助变量问题模型直至收敛,此时模糊图像复原问题模型的解即为所得的最终复原图像。
进一步地,所述步骤1)中具体包括:假设图像中每个像素均为随机变量且独立同分布,则根据单像素高斯模型的概率表达式,以及所有独立像素的联合概率分布等于单个像素概率分布的乘积的原理,经过负自然对数运算后,得到模糊图像模型表达式如下:
Figure BDA0003184586720000021
式中,g表示模糊图像,o表示清晰图像,h表示点扩散函数;P(g|ho)为噪声发生的概率。
进一步地,所述步骤2)中具体包括:将一幅图像视为一个定义在二维格子系统上的离散随机场,将每个像素点视为格子系统的一个元素,并且在该格子系统上定义一个无向图,用以表示各个格子(即像素)之间的相邻关系,如果两个格子之间被无向图的边相连,则称这两个格子是相邻的;反之,认为是不相邻的;在上述定义下,根据马尔科夫随机场原理对某个像素而言,其发生的概率仅与临近像素相关,采用Hammersley-Clifford定理对整幅图像进行概率建模,得到的面向清晰图像的约束条件模型表达式如下:
Figure BDA0003184586720000022
式中,P(o)为图像发生的概率,N表示引入的TV约束条件个数,Di(o)和μi分别表示单个约束条件及其系数,i表示约束条件索引。
进一步地,所述步骤3)具体包括:根据最大后验概率估计,对步骤1)中模糊图像模型和步骤2)中面向清晰图像的约束条件模型加权,以得到模糊图像复原问题模型表达式如下:
Figure BDA0003184586720000023
进一步地,所述步骤4)具体包括:根据变量分离最优化问题求解技术,引入辅助变量将模糊图像复原问题模型进行转化,得到辅助变量问题求解表达式如下:
Figure BDA0003184586720000024
式中,ui和di为引入的一组辅助变量。
进一步地,所述步骤5)中变形后的辅助变量问题求解模型表达式如下:
Figure BDA0003184586720000025
进一步地,所述步骤6)中的求解过程如下:
61)固定o的估计值,对ui进行更新,其表达式为:
Figure BDA0003184586720000031
62)固定ui的估计值,对o进行更新,其表达式为:
Figure BDA0003184586720000032
63)固定(o,ui)的估计值,对di进行更新,其表达式为:
di=di+ui-o。
上述迭代次数不小于100次,同时di变化小;迭代停止时o的估值即为复原图像。
本发明还提供一种模糊图像复原终端,包括:一个或多个处理器;存储器,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现所述面向混合约束条件的模糊图像复原方法。
本发明还提供一种计算机可读存储介质,其存储有计算机程序,该程序被处理器执行时实现所述面向混合约束条件的模糊图像复原方法。
本发明的有益效果:
本发明的模糊图像复原方法,首先基于点扩散函数模型构建了模糊图像噪声模型,引入多种约束对清晰图像进行约束建模,并将所有的约束通过相应的约束系数加权求和得到复原问题模型,可以有效克服模糊图像复原的病态性问题,减少噪声等负面效应对复原结果的影响。
本发明采用了基于变量分离策略的轮换迭代算法,引入一个固定的惩罚系数,并为每个约束条件设置两个辅助变量,设计了面向混合约束条件的优化求解算法,从而对模糊图像进行有效复原,提高图像的细节分辨能力,提升其使用价值。
附图说明
图1为本发明方法的流程图;
图2为本发明示例中的模糊图像;
图3为本发明示例中模糊图像对应的点扩散函数;
图4为本发明示例中复原图像。
具体实施方式
为了便于本领域技术人员的理解,下面结合实施例与附图对本发明作进一步的说明,实施方式提及的内容并非对本发明的限定。
参照图1所示,本发明的一种面向混合约束条件的模糊图像复原方法,步骤如下:
1)根据高斯概率模型对噪声建模,得到模糊图像模型;
假设图像中每个像素均为随机变量且独立同分布,则根据单像素高斯模型的概率表达式,以及所有独立像素的联合概率分布等于单个像素概率分布的乘积的原理,经过负自然对数运算后,得到模糊图像模型表达式如下:
Figure BDA0003184586720000041
式中,g表示模糊图像,o表示清晰图像,h表示点扩散函数;P(g|ho)为噪声发生的概率;模糊图像如图2所示,点扩散函数图像如图3所示。
2)引入多种约束条件并设置相应的加权系数,进行加权混合后对清晰图像建模,得到面向清晰图像的约束条件模型;
引入各项异性和各向同性总变分约束条件并设置相应的加权系数,进行加权混合后对清晰图像进行建模,其表达式如下:
-ln[P(o)]∝(μTVL1(o)+ηTVL2(o))
Figure BDA0003184586720000042
Figure BDA0003184586720000043
其中,P(o)为图像发生的概率,TVL1(o)和TVL2(o)分别各项异性和各向同性总变分约束条件,μ和η分别为各项异性和各向同性总变分约束条件的权重,M和j分别表示复原图像差分矩阵元素个数和元素索引值。
3)引入正则化系数λ,结合所述步骤1)和步骤2)中建立的模型,构建模糊图像复原问题模型,表达式如下:
Figure BDA0003184586720000044
示例中,取λ=4000,μ=0.1,η=1。
4)引入一个固定的惩罚系数β,对每个约束条件使用一组辅助变量,并将步骤3)中的模糊图像复原问题模型进行转化,以得到辅助变量问题求解模型,表达式如下:
Figure BDA0003184586720000045
式中,u1,u2,d1,d2均为引入的辅助变量;
5)对于固定的惩罚系数β,将步骤4)中辅助变量问题求解模型变形;
Figure BDA0003184586720000051
6)采用基于变量分离策略的轮换迭代算法,对步骤5)中的变形后的辅助变量问题求解模型进行优化求解;具体如下:
固定o的估计值,对u1进行更新,其表达式为:
Figure BDA0003184586720000052
固定o的估计值,对u2进行更新,其表达式为:
Figure BDA0003184586720000053
固定u1和u2的估计值,对o进行更新,其表达式为:
Figure BDA0003184586720000054
固定(o,u1)的估计值,对d1进行更新,其表达式为:
d1=d1+u1-o
固定(o,u2)的估计值,对d2进行更新,其表达式为:
d2=d2+u2-o;
上述迭代终止的标志是迭代次数不少于100次,同时d1和d2变化不大,停止时o的估值即为复原图像;示例中的复原图像如图4所示。
本发明能够利用已知的点扩散函数对模糊图像进行高质量复原,显著改善图像质量,提升图像细节的分辨能力。将示例中图4与图2比较,可见图像的模糊效应被有效去除,图像细节得到有效恢复,可见本发明方法对模糊图像复原的有效性。
本发明具体应用途径很多,以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进,这些改进也应视为本发明的保护范围。

Claims (9)

1.一种面向混合约束条件的模糊图像复原方法,其特征在于,步骤如下:
1)根据高斯概率模型对噪声建模,得到模糊图像模型;
2)引入多种约束条件并设置相应的加权系数,进行加权混合后对清晰图像建模,得到面向清晰图像的约束条件模型;
3)引入正则化系数λ,结合所述步骤1)和步骤2)中建立的模型,构建模糊图像复原问题模型;
4)引入一个固定的惩罚系数β,对每个约束条件使用一组辅助变量,并将步骤3)中的模糊图像复原问题模型进行转化,以得到辅助变量问题求解模型;
5)对于固定的惩罚系数β,将步骤4)中的辅助变量问题求解模型变形;
6)采用基于变量分离策略的轮换迭代算法,对步骤5)中的变形后的辅助变量问题求解模型进行优化求解;
7)不断循环求解上述模糊图像复原问题模型和变形后的辅助变量问题模型直至收敛,此时模糊图像复原问题模型的解即为所得的最终复原图像。
2.根据权利要求1所述的面向混合约束条件的模糊图像复原方法,其特征在于,所述步骤1)中具体包括:假设图像中每个像素均为随机变量且独立同分布,根据单像素高斯模型的概率表达式,以及所有独立像素的联合概率分布等于单个像素概率分布的乘积的原理,经过负自然对数运算后,得到模糊图像模型表达式如下:
Figure FDA0003184586710000011
式中,g表示模糊图像,o表示清晰图像,h表示点扩散函数;P(g|ho)为噪声发生的概率。
3.根据权利要求2所述的面向混合约束条件的模糊图像复原方法,其特征在于,所述步骤2)中具体包括:采用Hammersley-Clifford定理对整幅图像进行概率建模,得到的面向清晰图像的约束条件模型表达式如下:
Figure FDA0003184586710000012
式中,P(o)为图像发生的概率,N表示引入的TV约束条件个数,Di(o)和μi分别表示单个约束条件及其系数,i表示约束条件索引。
4.根据权利要求3所述的面向混合约束条件的模糊图像复原方法,其特征在于,所述步骤3)具体包括:根据最大后验概率估计,对步骤1)中模糊图像模型和步骤2)中面向清晰图像的约束条件模型加权,以得到模糊图像复原问题模型表达式如下:
Figure FDA0003184586710000013
5.根据权利要求4所述的面向混合约束条件的模糊图像复原方法,其特征在于,所述步骤4)具体包括:根据变量分离最优化问题求解技术,引入辅助变量将模糊图像复原问题模型进行转化,得到辅助变量问题求解表达式如下:
Figure FDA0003184586710000021
式中,ui和di为引入的一组辅助变量。
6.根据权利要求5所述的面向混合约束条件的模糊图像复原方法,其特征在于,所述步骤5)中变形后的辅助变量问题求解模型表达式如下:
Figure FDA0003184586710000022
7.根据权利要求6所述的面向混合约束条件的模糊图像复原方法,其特征在于,所述步骤6)中的求解过程如下:
61)固定o的估计值,对ui进行更新,其表达式为:
Figure FDA0003184586710000023
62)固定ui的估计值,对o进行更新,其表达式为:
Figure FDA0003184586710000024
63)固定(o,ui)的估计值,对di进行更新,其表达式为:
di=di+ui-o;
上述迭代次数不小于100次,同时di变化小;迭代停止时o的估值即为复原图像。
8.一种模糊图像复原终端,其特征在于,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
9.一种计算机可读存储介质,其存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的方法。
CN202110857344.4A 2021-07-28 2021-07-28 一种面向混合约束条件的模糊图像复原方法及终端 Active CN113658061B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110857344.4A CN113658061B (zh) 2021-07-28 2021-07-28 一种面向混合约束条件的模糊图像复原方法及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110857344.4A CN113658061B (zh) 2021-07-28 2021-07-28 一种面向混合约束条件的模糊图像复原方法及终端

Publications (2)

Publication Number Publication Date
CN113658061A true CN113658061A (zh) 2021-11-16
CN113658061B CN113658061B (zh) 2024-04-16

Family

ID=78478849

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110857344.4A Active CN113658061B (zh) 2021-07-28 2021-07-28 一种面向混合约束条件的模糊图像复原方法及终端

Country Status (1)

Country Link
CN (1) CN113658061B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117173058A (zh) * 2023-11-03 2023-12-05 武汉工程大学 空变模糊图像统一复原方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104008531A (zh) * 2014-06-17 2014-08-27 中国电子科技集团公司第二十八研究所 一种基于混合型马尔科夫专家场的模糊图像盲复原方法
US20150186748A1 (en) * 2012-09-06 2015-07-02 The University Of Manchester Image processing apparatus and method for fitting a deformable shape model to an image using random forest regression voting
CN111986121A (zh) * 2020-09-24 2020-11-24 南京航空航天大学 基于Framelet l0范数约束的模糊图像非盲复原方法
CN111986122A (zh) * 2020-09-24 2020-11-24 南京航空航天大学 基于混合型总变分正则化的模糊图像非盲复原方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150186748A1 (en) * 2012-09-06 2015-07-02 The University Of Manchester Image processing apparatus and method for fitting a deformable shape model to an image using random forest regression voting
CN104008531A (zh) * 2014-06-17 2014-08-27 中国电子科技集团公司第二十八研究所 一种基于混合型马尔科夫专家场的模糊图像盲复原方法
CN111986121A (zh) * 2020-09-24 2020-11-24 南京航空航天大学 基于Framelet l0范数约束的模糊图像非盲复原方法
CN111986122A (zh) * 2020-09-24 2020-11-24 南京航空航天大学 基于混合型总变分正则化的模糊图像非盲复原方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117173058A (zh) * 2023-11-03 2023-12-05 武汉工程大学 空变模糊图像统一复原方法及系统
CN117173058B (zh) * 2023-11-03 2024-02-02 武汉工程大学 空变模糊图像统一复原方法及系统

Also Published As

Publication number Publication date
CN113658061B (zh) 2024-04-16

Similar Documents

Publication Publication Date Title
Sreehari et al. Plug-and-play priors for bright field electron tomography and sparse interpolation
CN106204472B (zh) 基于稀疏特性的视频图像去模糊方法
US9692939B2 (en) Device, system, and method of blind deblurring and blind super-resolution utilizing internal patch recurrence
Mukundan Some computational aspects of discrete orthonormal moments
EP2291999B1 (en) Image deconvolution using color priors
CN107133923B (zh) 一种基于自适应梯度稀疏模型的模糊图像非盲去模糊方法
Chowdhury et al. Non-blind and blind deconvolution under Poisson noise using fractional-order total variation
CN110675347A (zh) 一种基于组稀疏表示的图像盲复原方法
Yun et al. Linearized proximal alternating minimization algorithm for motion deblurring by nonlocal regularization
CN111986122B (zh) 基于混合型总变分正则化的模糊图像非盲复原方法
CN112116541B (zh) 基于梯度l0范数和总变分正则化约束的模糊图像复原方法
Khan et al. Iterative methods of Richardson-Lucy-type for image deblurring
Lv et al. Deblurring Poisson noisy images by total variation with overlapping group sparsity
JP6390173B2 (ja) 情報処理装置、情報処理システム、画像処理方法、及び、プログラム
Tofighi et al. Blind image deblurring using row–column sparse representations
US9202265B2 (en) Point spread function cost function with non-uniform weights
CN109767389A (zh) 基于局部和非局部联合先验的自适应加权双范数遥感图像盲超分辨重建方法
Lim et al. Deep spectral-spatial network for single image deblurring
CN113658061B (zh) 一种面向混合约束条件的模糊图像复原方法及终端
El-Henawy et al. A comparative study on image deblurring techniques
Zhou et al. A unified weighted variational model for simultaneously haze removal and noise suppression of hazy images
CN110930324A (zh) 一种模糊星图复原方法
CN111986121B (zh) 基于Framelet l0范数约束的模糊图像非盲复原方法
US20210334939A1 (en) Method and architecture for blind image deconvolution
Yue et al. Efficient method for high-quality removal of nonuniform blur in the wavelet domain

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant