CN104599254A - 基于组合模糊核结构先验的单透镜计算成像方法 - Google Patents

基于组合模糊核结构先验的单透镜计算成像方法 Download PDF

Info

Publication number
CN104599254A
CN104599254A CN201510054784.0A CN201510054784A CN104599254A CN 104599254 A CN104599254 A CN 104599254A CN 201510054784 A CN201510054784 A CN 201510054784A CN 104599254 A CN104599254 A CN 104599254A
Authority
CN
China
Prior art keywords
priori
fuzzy core
fuzzy
image
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510054784.0A
Other languages
English (en)
Other versions
CN104599254B (zh
Inventor
刘煜
李卫丽
张茂军
熊志辉
王炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National University of Defense Technology
Original Assignee
National University of Defense Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National University of Defense Technology filed Critical National University of Defense Technology
Priority to CN201510054784.0A priority Critical patent/CN104599254B/zh
Publication of CN104599254A publication Critical patent/CN104599254A/zh
Application granted granted Critical
Publication of CN104599254B publication Critical patent/CN104599254B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)

Abstract

本发明公开了一种基于组合模糊核结构先验的单透镜计算成像方法,首先利用单透镜相机获取模糊图像;将模糊图像的像差校正问题转换为盲卷积图像复原问题;在盲卷积图像复原算法的目标函数中加入组合的模糊核结构先验;针对步骤三中加入组合模糊核先验的目标函数,采用相应的迭代优化算法估计出单透镜的PSF;针对步骤四中所得到的单透镜PSF,利用相应的非盲卷积图像复原算法得到最终清晰图像。本发明过分析单透镜模糊核的结构特点,在估计空间变化的模糊核时,不同区域采用不同的模糊核先验,这种组合模糊核结构先验能更加准确地反应出单透镜PSF的结构特点,进一步提高盲卷积图像复原算法所估计出的PSF精度,从而最终提高图像复原质量。

Description

基于组合模糊核结构先验的单透镜计算成像方法
技术领域
本发明主要涉及到数字图像处理领域,特指一种基于组合模糊核结构先验的单透镜成像方法。
背景技术
目前,单反相机以其高清的成像质量、丰富的镜头选择、迅捷的响应速度、卓越的手控能力等优势在人们的日常生活中发挥着越来越重要的作用。然而,为弥补单反镜头中镜片的几何畸变和像差,进一步提高成像质量,单反镜头的设计日益复杂,甚至包含数十个独立的光学器件。复杂的镜头在提高成像质量的同时,无疑也会增加镜头的体积和重量,也导致镜头的成本大大提高。镜头体积和重量的增加给用户的日常使用带来了不便,成本的提高也不便单反相机向大面积用户推广使用。因此,在尽量消除镜片像差,增加成像质量的同时,如何降低镜头成本,使其更为轻便,也成为目前单反相机设计的重要需求之一。近年来,随着图像复原技术的快速发展,图像去模糊等方法越来越成熟,镜头中某些消除像差和修正几何畸变的镜片可由去模糊等计算摄影技术代替,因此,单透镜计算成像(如图1所示)与图像复原技术的结合也逐渐成为单反相机设计的一个新的研究方向。
单透镜计算成像的关键在于利用盲卷积图像复原算法准确估计出单透镜成像系统的模糊核,即点扩散函数(Point Spread Function,PSF)。目前常用的盲卷积图像复原算法是基于最大后验概率MAP的盲卷积图像复原算法[1]:在最大后验概率的框架下,盲卷积图像复原问题的统计学模型可以表述为:
argmaxP(K,I|B)=argmaxP(B|I,K)P(I)P(K)  (1)
其中,K表示单透镜的模糊核,又称点扩散函数PSF;I表示清晰图像;B表示由单透镜成像系统直接得到的模糊图像;P(K,I|B)表示在模糊图像B已知条件下,与模糊图像B对应的模糊核和清晰图像分别为K和I的概率;P(B|I,K)表示如果已知模糊核K和清晰图像I,对应的模糊图像为B的概率;P(I)表示对原始清晰图像已知的先验概率;P(K)表示模糊核的先验概率。
为计算方便,考虑到对数与乘积的转换关系以及对数函数的单调性,对式(1)左右两端分别去负对数:
-logP(K,I|B)=-logP(B|K,I)-logP(I)-logP(K)  (2)
则上述问题转化为能量最小化问题,左边的目标函数可以定义为:
E ( K , I ) = min K , I | | K * I - B | | 2 + λ 1 | | ▿ ( I ) | | p 1 + λ 2 | | K | | p 2 - - - ( 3 )
其中,表示数据拟合项;λ1||▽(I)||p1表示图像先验;λ2||K||p2表示模糊核先验。式(3)中图像先验和模糊核先验对常用的图像先验包括图像梯度重尾分布、边缘轮廓分布等,模糊核约束包括模糊核自身的非负性、能量守恒性、稀疏性或平滑性约束,具体请参考文献[3]。
目前常用的图像先验能满足单透镜计算成像的基本需求,但是模糊核约束如果只采用上述模糊核自身约束,如常用的模糊核稀疏先验约束,与单透镜计算成像系统的实际PSF存在一定差距。图2展示了Heide等人[4]所求出的单个双凸透镜的PSF,从图2可以看出单透镜的PSF是高度空间变化的,从中间部分的的圆盘状模糊核向四周逐渐扩散成为被拉伸的条状结构模糊核。如果对每个区域的模糊核都采用稀疏性约束,很明显会影响中间部分的模糊核精度,因为中间部分的圆盘状模糊核稀疏性不强。所以如果采用单一的模糊核先验约束会影响最终的图像复原效果。因此,分析单透镜模糊核的具体结构特点,提出适用于单透镜计算成像的模糊核先验是急需解决的问题。
发明内容
针对目前的模糊核先验与单透镜计算成像中单透镜的实际PSF不相符,从而导致盲卷积图像复原算法所恢复出的PSF精度不高,影响最终图像复原效果的问题,本发明提出一种基于组合模糊核结构先验的单透镜计算成像方法。通过分析单透镜模糊核的结构特点,在估计空间变化的模糊核时,不同区域采用不同的模糊核先验,这种组合模糊核结构先验能更加准确地反应出单透镜PSF的结构特点,进一步提高盲卷积图像复原算法所估计出的PSF精度,从而最终提高图像复原质量。
为解决上述技术问题,本发明提出的技术方案是:
一种基于组合模糊核结构先验的单透镜计算成像方法,其特征在于,
S1:利用单透镜相机获取模糊图像;
其中,模糊图像是在正常光圈大小下,由单透镜相机得到的模糊图像。
S2:将模糊图像的像差校正问题转换为盲卷积图像复原问题;
单透镜相机得到的模糊图像,需要对模糊图像的像差进行校正,以提高图像质量。而盲卷积图像复原就是处理将模糊图像变清晰的问题,所以可以将单透镜得到的模糊图像作为已知条件,将其看作盲卷积图像复原问题,用相关的算法对模糊图像处理,可以得到单透镜的模糊核和最终的清晰图像。具体包括以下步骤:
S21:在盲卷积图像复原算法的目标函数中加入组合的模糊核结构先验,即中间部分圆盘状的模糊核采用满足高斯分布的平滑性先验,周围区域狭长带状的模糊核采用满足混合指数分布的稀疏性先验;
S22:针对S21中加入组合模糊核先验的目标函数,采用相应的迭代优化算法估计出单透镜的PSF。
S23:针对S22中所得到的单透镜PSF,利用相应的非盲卷积图像复原算法得到最终清晰图像。
在步骤S2中将模糊图像的像差校正用图像处理中的盲卷积图像复原算法来解决。所采用的盲卷积图像复原算法为基于最大后验概率MAP的盲卷积图像复原算法,在最大后验概率模型下,盲卷积图像复原问题的统计学模型可以表述为:
argmaxP(K,I|B)=argmaxP(B|I,K)P(I)P(K)  (1)
其中,K表示单透镜的模糊核,又称点扩散函数PSF;I表示清晰图像;B表示由单透镜成像系统直接得到的模糊图像;P(K,I|B)表示在模糊图像B已知条件下,与模糊图像B对应的模糊核和清晰图像分别为K和I的概率;P(B|I,K)表示如果已知模糊核K和清晰图像I,对应的模糊图像为B的概率;P(I)表示对原始清晰图像已知的先验概率;P(K)表示模糊核的先验概率。
为计算方便,考虑到对数与乘积的转换关系以及对数函数的单调性,对式(1)左右两端分别去负对数:
-logP(K,I|B)=-logP(B|K,I)-logP(I)-logP(K)  (2)则上述问题转化为能量最小化问题,左边的目标函数可以定义为:
E ( K , I ) = min K , I | | K * I - B | | 2 + λ 1 | | ▿ ( I ) | | p 1 + λ 2 | | K | | p 2 - - - ( 3 )
其中,表示数据拟合项;λ1||▽(I)||p1表示图像先验;λ2||K||p2表示模糊核先验。
式(3)中的图像先验采用服从重尾分布的先验,如下式所示:
Π x , y ∈ Ω 1 σ 2 π exp ( - | | ▿ I ( x , y ) - ▿ B ( x , y ) | | 2 2 σ 2 ) - - - ( 4 )
重尾分布的另一种表达方式是二次平滑项λ||▽I(x,y)-▽B(x,y)||2,可直接加入目标函数中。
在步骤S21中,在盲卷积图像复原算法的目标函数中加入组合的模糊核结构先验,即中间部分圆盘状的模糊核采用满足高斯分布的平滑性先验,周围区域狭长带状的模糊核采用满足混合指数分布的稀疏性先验;
针对盲卷积图像复原算法的目标函数中的模糊核先验λ2||K||p2,分析单透镜PSF的具体结构特征,对中间部分圆盘状的模糊核采用满足高斯分布的平滑性先验,可用下式表示:
p ( K ( x , y ) ) = 1 σ 2 π exp ( - | | ▿ K ( x , y ) | | 2 2 σ 2 ) - - - ( 5 )
其中,σ表示高斯分布的标准差。平滑性先验的另外一种表达方式是||▽K(x,y)||2
而对周围区域狭长带状的模糊核采用满足混合指数分布的稀疏性先验,可用下式表示:
p ( K ( x , y ) ) = Σ d α d exp ( - K ( x , y ) λ d ) - - - ( 6 )
其中,λd表示尺度因子,αd表示第d个先验分量的权重。稀疏性先验的另外一种表达方式是||K(x,y)||2
根据步骤S2中的图像先验和S21中的组合模糊核先验,最终目标函数如下式所示:
min K , I | | K * I - B | | 2 + λ 1 | | ▿ I ( x , y ) - ▿ B ( x , y ) | | 2 + α · λ 2 | | ▿ K ( x , y ) | | 2 + ( 1 - α ) · λ 3 | | K ( x , y ) | | 2 - - - ( 7 )
其中,λ1为控制图像先验的权重,λ2和λ3分别为控制不同模糊核结构先验的权重,若α=1则表示使用模糊核平滑性先验,若α=0则表示使用模糊核稀疏性先验。在具体实现过程中,取λ1=0.55,λ2=λ3=0.45。我们计算出共7×11的PSF,针对1、2、10、11列的PSF,采用稀疏模糊核先验,即α=0,针对其余列的PSF,采用平滑性先验,即α=1。
S22:针对步骤S21中加入组合模糊核先验的目标函数,采用相应的迭代优化算法估计出单透镜的PSF。
针对式(7)所示的目标函数,采用EM迭代优化算法估计出单透镜的PSF。EM优化算法主要分为两个步骤,如附图3所示,在在E-step中,根据给定的当前模糊核求解非盲卷积图像复原,求出潜在的平均图像,并估计该平均图像周围的方差;在M-step中,根据E-step中求出的潜在平均图像求出最佳的模糊核。
EM算法的具体步骤可定义如下:
(1)E-step:令Q(I)=P(I|B,K),并计算出Q(I)的均值u和方差C,其中P(I|B,K)表示在已知模糊图像B和模糊核K的条件下,对应的清晰图像为I的概率。均值u就代表给定当前模糊核时潜在的清晰图像,C代表清晰图像周围的方差;在MATLAB中计算期望值和方差时,所用到的函数分别为mean和cov。
(2)M-step:找到使K*I-B达到最小值的K值,即式(8)达到最小值。
EQ[||K*I-B||2]  (8)
在M-step中使用的是求导函数的方法,即找到式(8)的极值点,因为式(8)包含一个二次项,而在E-step中所求出的均值和方差足以满足式(8)的求解条件,此时所求出的是局部最优解,而非全局最优解。所以,仍需多次交替迭代E-step和M-step,直到得到最终的全局最优解。
由EM迭代优化算法得到的空间变化的7×11大小的PSF如图5所示。
S23:针对S22中所得到的单透镜PSF,利用相应的非盲卷积图像复原算法得到最终清晰图像。在具体实现过程中,采用Levin在2007年所提出的非盲卷积算法[2]。步骤S22中已求出模糊核,又模糊图像是已知条件,则求解清晰图像的问题就成为非盲卷积图像复原问题。Levin等人使用的概率模型如下式所示:
P K ( I | B ) ∝ exp ( - ( 1 η 2 | C K I - B | 2 + β | C g I I | 2 + β | C g B | 2 ) ) - - - ( 9 )
则式(9)的最大值即为所求的清晰图像,即I*=argmaxPK(I|B)。其中,gI=[1-1],gB=[1-1]T。C表示卷积操作,对于函数f,Cfx表示f与x的卷积操作,即Cfx≡f*x。β和η是控制权重的参数。
本发明提供的基于组合模糊核结构先验的单透镜计算成像方法,通过分析单透镜PSF的具体结构特点,针对不同区域的模糊核采用不同的模糊核结构先验,可以提高盲卷积图像复原算法所估计出的模糊核精度,从而进一步提高单透镜计算成像最终的图像复原效果,本发明在图像处理和相机设计领域具有非常重要的意义。
附图说明
图1为单透镜计算成像示意图;
图2为单个双凸透镜的PSF;
图3为EM优化算法示意图;
图4为单透镜相机和对应的模糊图像;
图5为利用图像复原算法所估计出的空间变化的PSF;
图6为单一模糊核先验与组合模糊核结构先验的图像复原效果图;
具体实施方式
下面结合附图,对本发明进行详细描述:
本实施例提供的所述基于组合模糊核结构先验的单透镜计算成像方法包括如下步骤:
S1:在正常光圈大小下,由所制作的单透镜相机得到模糊图像。单透镜相机以及由该相机得到的模糊图像如图4所示;
S2:将模糊图像的像差校正问题转换为盲卷积图像复原问题,在最大后验概率模型下,盲卷积图像复原问题的统计学模型可以表述为:
argmaxP(K,I|B)=argmaxP(B|I,K)P(I)P(K)  (1)
其中,K表示单透镜的模糊核,又称点扩散函数PSF;I表示清晰图像;B表示由单透镜成像系统直接得到的模糊图像;P(K,I|B)表示在模糊图像B已知条件下,与模糊图像B对应的模糊核和清晰图像分别为K和I的概率;P(B|I,K)表示如果已知模糊核K和清晰图像I,对应的模糊图像为B的概率;P(I)表示对原始清晰图像已知的先验概率;P(K)表示模糊核的先验概率。
为计算方便,考虑到对数与乘积的转换关系以及对数函数的单调性,对式(1)左右两端分别去负对数:
-logP(K,I|B)=-logP(B|K,I)-logP(I)-logP(K)  (2)则上述问题转化为能量最小化问题,左边的目标函数可以定义为:
E ( K , I ) = min K , I | | K * I - B | | 2 + λ 1 | | ▿ ( I ) | | p 1 + λ 2 | | K | | p 2 - - - ( 3 )
其中,表示数据拟合项;λ1||▽(I)||p1表示图像先验;λ2||K||p2表示模糊核先验。
式(3)中的图像先验采用服从重尾分布的先验,如下式所示:
Π x , y ∈ Ω 1 σ 2 π exp ( - | | ▿ I ( x , y ) - ▿ B ( x , y ) | | 2 2 σ 2 ) - - - ( 4 )
重尾分布的另一种表达方式是二次平滑项λ||▽I(x,y)-▽B(x,y)||2,可直接加入目标函数中。
S21:针对S2中目标函数中的模糊核先验λ2||K||p2,分析单透镜PSF的具体结构特征,对中间部分圆盘状的模糊核采用满足高斯分布的平滑性先验,可用下式表示:
p ( K ( x , y ) ) = 1 σ 2 π exp ( - | | ▿ K ( x , y ) | | 2 2 σ 2 ) - - - ( 5 )
其中,σ表示高斯分布的标准差。平滑性先验的另外一种表达方式是||▽K(x,y)||2
而对周围区域狭长带状的模糊核采用满足混合指数分布的稀疏性先验,可用下式表示:
p ( K ( x , y ) ) = Σ d α d exp ( - K ( x , y ) λ d ) - - - ( 6 )
其中,λd表示尺度因子,αd表示第d个先验分量的权重。稀疏性先验的另外一种表达方式是||K(x,y)||2
根据S2中的图像先验和S21中的组合模糊核先验,最终目标函数如下式所示:
min K , I | | K * I - B | | 2 + λ 1 | | ▿ I ( x , y ) - ▿ B ( x , y ) | | 2 + α · λ 2 | | ▿ K ( x , y ) | | 2 + ( 1 - α ) · λ 3 | | K ( x , y ) | | 2 - - - ( 7 )
其中,λ1为控制图像先验的权重,λ2和λ3分别为控制不同模糊核结构先验的权重,若α=1则表示使用模糊核平滑性先验,若α=0则表示使用模糊核稀疏性先验。在具体实现过程中,取λ1=0.55,λ2=λ3=0.45。我们计算出共7×11的PSF,针对1、2、10、11列的PSF,采用稀疏模糊核先验,即α=0,针对其余列的PSF,采用平滑性先验,即α=1。
S22:针对式(7)所示的目标函数,采用EM迭代优化算法估计出单透镜的PSF。EM优化算法主要分为两个步骤,如附图3所示,在在E-step中,根据给定的当前模糊核求解非盲卷积图像复原,求出潜在的平均图像,并估计该平均图像周围的方差;在M-step中,根据E-step中求出的潜在平均图像求出最佳的模糊核。
EM算法的具体步骤可定义如下:
(1)E-step:令Q(I)=P(I|B,K),并计算出Q(I)的均值u和方差C,其中P(I|B,K)表示在已知模糊图像B和模糊核K的条件下,对应的清晰图像为I的概率。均值u就代表给定当前模糊核时潜在的清晰图像,C代表清晰图像周围的方差;在MATLAB中计算期望值和方差时,所用到的函数分别为mean和cov。
(2)M-step:找到使K*I-B达到最小值的K值,即式(8)达到最小值。
EQ[||K*I-B||2]  (8)
在M-step中使用的是求导函数的方法,即找到式(8)的极值点,因为式(8)包含一个二次项,而在E-step中所求出的均值和方差足以满足式(8)的求解条件,此时所求出的是局部最优解,而非全局最优解。所以,仍需多次交替迭代E-step和M-step,直到得到最终的全局最优解。
由EM迭代优化算法得到的空间变化的7×11大小的PSF如图5所示。
S23:针对步骤S22所得到的空间变化的PSF,利用Leivn在2007年所提出的非盲卷积图像复原算法得到最终清晰图像,S22中已求出模糊核,又模糊图像是已知条件,则求解清晰图像的问题就成为非盲卷积图像复原问题。Levin等人使用的概率模型如下式所示:
P K ( I | B ) ∝ exp ( - ( 1 η 2 | C K I - B | 2 + β | C g I I | 2 + β | C g B | 2 ) ) - - - ( 9 )
则式(9)的最大值即为所求的清晰图像,即I*=argmaxPK(I|B)。其中,gI=[1-1],gB=[1-1]T。C表示卷积操作,对于函数f,Cfx表示f与x的卷积操作,即Cfx≡f*x。β和η是控制权重的参数,在具体实现过程中取β=250,η=0.005。图6展示了采用单一稀疏模糊核先验和采用组合模糊核结构先验的图像复原效果结果。
如上所述,本发明基于单透镜计算成像系统,在盲卷积图像复原算法中,针对单透镜模糊核的结构空间变化的特性,提出组合模糊核结构先验。这种组合模糊核结构先验相对于单一的模糊核先验,更能体现单透镜PSF的真实情况,从而等提高盲卷积图像算法所估计出的PSF的精度,最终提高图像复原的效果,这种方法在图像处理和相机设计领域都具有非常重要的意义。

Claims (7)

1.一种基于组合模糊核结构先验的单透镜计算成像方法,其特征在于,
S1:利用单透镜相机获取模糊图像;
S2:将模糊图像的像差校正问题转换为盲卷积图像复原问题,将单透镜得到的模糊图像作为已知条件,将其看作盲卷积图像复原问题,用盲卷积图像复原算法对模糊图像处理,得到单透镜的模糊核和最终的清晰图像,具体包括以下步骤:
S21:在盲卷积图像复原算法的目标函数中加入组合的模糊核结构先验,即中间部分圆盘状的模糊核采用满足高斯分布的平滑性先验,周围区域狭长带状的模糊核采用满足混合指数分布的稀疏性先验;
S22:针对S21中加入组合模糊核先验的目标函数,采用相应的迭代优化算法估计出单透镜的PSF;
S23:针对S22中所得到的单透镜PSF,利用相应的非盲卷积图像复原算法得到最终清晰图像。
2.根据权利要求1所述的基于组合模糊核结构先验的单透镜计算成像方法,其特征在于,所述S1中的模糊图像是在正常光圈大小下,由单透镜相机得到的模糊图像。
3.根据权利要求2所述的基于组合模糊核结构先验的单透镜计算成像方法,其特征在于,在S2中,将模糊图像的像差校正用图像处理中的盲卷积图像复原算法来解决,所采用的盲卷积图像复原算法为基于最大后验概率MAP的盲卷积图像复原算法,在最大后验概率模型下,盲卷积图像复原问题的统计学模型可以表述为:
argmaxP(K,I|B)=argmaxP(B|I,K)P(I)P(K)           (1)
其中,K表示单透镜的模糊核,又称点扩散函数PSF;I表示清晰图像;B表示由单透镜成像系统直接得到的模糊图像;P(K,I|B)表示在模糊图像B已知条件下,与模糊图像B对应的模糊核和清晰图像分别为K和I的概率;P(B|I,K)表示如果已知模糊核K和清晰图像I,对应的模糊图像为B的概率;P(I)表示对原始清晰图像已知的先验概率;P(K)表示模糊核的先验概率;
为计算方便,考虑到对数与乘积的转换关系以及对数函数的单调性,对式(1)左右两端分别去负对数:
-logP(K,I|B)=-logP(B|K,I)-logP(I)-logP(K)          (2)
则上述问题转化为能量最小化问题,左边的目标函数可以定义为:
E ( K , I ) = min K , I | | K * I - B | | 2 + λ 1 | | ▿ ( I ) | | p 1 + λ 2 | | K | | p 2 - - - ( 3 )
其中,表示数据拟合项;表示图像先验;λ2||K||p2表示模糊核先验;
式(3)中的图像先验采用服从重尾分布的先验,如下式示:
Π x , y ∈ Ω 1 σ 2 π exp ( - | | ▿ I ( x , y ) - ▿ B ( x , y ) | | 2 2 σ 2 ) . - - - ( 4 )
4.根据权利要求3所述的基于组合模糊核结构先验的单透镜计算成像方法,其特征在于,所述S21中中间部分圆盘状的模糊核采用满足高斯分布的平滑性先验,用下式表示:
p ( K ( x , y ) ) = 1 σ 2 π exp ( - | | ▿ K ( x , y ) | | 2 2 σ 2 ) - - - ( 5 )
其中,σ表示高斯分布的标准差;
所述S21中周围区域狭长带状的模糊核采用满足混合指数分布的稀疏性先验,用下式表示:
p ( K ( x , y ) ) = Σ d α d exp ( - K ( x , y ) λ d ) - - - ( 6 )
其中,λd表示尺度因子,αd表示第d个先验分量的权重;
根据步骤S2中的图像先验和S21中的组合模糊核先验,最终目标函数如下式所示:
min K , I | | K * I - B | | 2 + λ 1 | | ▿ I ( x , y ) - ▿ B ( x , y ) | | 2 + α · λ 2 | | ▿ K ( x , y ) | | 2 + ( 1 - α ) · λ 3 | | K ( x , y ) | | 2 - - - ( 7 )
其中,λ1为控制图像先验的权重,λ2和λ3分别为控制不同模糊核结构先验的权重,若α=1则表示使用模糊核平滑性先验,若α=0则表示使用模糊核稀疏性先验。
5.根据权利要求4所述的基于组合模糊核结构先验的单透镜计算成像方法,其特征在于,所述S22中所采用的迭代优化算法为EM优化算法,EM优化算法主要分为两个步骤,在在E-step中,根据给定的当前模糊核求解非盲卷积图像复原,求出潜在的平均图像,并估计该平均图像周围的方差;在M-step中,根据E-step中求出的潜在平均图像求出最佳的模糊核,
EM算法的具体步骤可定义如下:
(1)E-step:令Q(I)=P(I|B,K),并计算出Q(I)的均值u和方差C,其中P(I|B,K)表示在已知模糊图像B和模糊核K的条件下,对应的清晰图像为I的概率;均值u就代表给定当前模糊核时潜在的清晰图像,C代表清晰图像周围的方差;
(2)M-step:找到使K*I-B达到最小值的K值,即式(8)达到最小值;
EQ[||K*I-B||2]          (8)
在M-step中使用的是求导函数的方法,即找到式(8)的极值点,因为式(8)包含一个二次项,而在E-step中所求出的均值和方差足以满足式(8)的求解条件,此时所求出的是局部最优解,然后多次交替迭代E-step和M-step,直到得到最终的全局最优解,即最佳的模糊核。
6.根据权利要求5所述的基于组合模糊核结构先验的单透镜计算成像方法,其特征在于,所述S23中,利用S22中已求出的模糊核,模糊图像是已知条件,则求解清晰图像的问题就成为非盲卷积图像复原问题,采用如下概率模型:
P K ( I | B ) ∝ exp ( - ( 1 η 2 | C K I - B | 2 + β | C g I I | 2 + β | C g B I | 2 ) ) - - - ( 9 )
则式(9)的最大值即为所求的清晰图像,即I*=argmaxPK(I|B);其中,gI=[1 -1],gB=[1 -1]T;C表示卷积操作,对于函数f,Cfx表示f与x的卷积操作,即Cfx≡f*x,β和η是控制权重的参数。
7.根据权利要求6所述的基于组合模糊核结构先验的单透镜计算成像方法,其特征在于,所述β和η是控制权重的参数,β=250,η=0.005。
CN201510054784.0A 2015-02-03 2015-02-03 基于组合模糊核结构先验的单透镜计算成像方法 Active CN104599254B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510054784.0A CN104599254B (zh) 2015-02-03 2015-02-03 基于组合模糊核结构先验的单透镜计算成像方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510054784.0A CN104599254B (zh) 2015-02-03 2015-02-03 基于组合模糊核结构先验的单透镜计算成像方法

Publications (2)

Publication Number Publication Date
CN104599254A true CN104599254A (zh) 2015-05-06
CN104599254B CN104599254B (zh) 2016-03-02

Family

ID=53125004

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510054784.0A Active CN104599254B (zh) 2015-02-03 2015-02-03 基于组合模糊核结构先验的单透镜计算成像方法

Country Status (1)

Country Link
CN (1) CN104599254B (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104915937A (zh) * 2015-07-02 2015-09-16 中国人民解放军国防科学技术大学 基于频域矩阵分解的快速单透镜计算成像方法
CN106572285A (zh) * 2015-10-08 2017-04-19 三星电机株式会社 相机模块、电子装置及其操作方法
CN106651811A (zh) * 2017-01-03 2017-05-10 长沙全度影像科技有限公司 一种亮度通道引导的简单镜头成像模糊去除方法
CN106651812A (zh) * 2017-01-03 2017-05-10 长沙全度影像科技有限公司 一种简单镜头成像的多通道psf标定方法
CN106780378A (zh) * 2016-12-08 2017-05-31 中国人民解放军国防科学技术大学 一种针对色差已校正双镜片透镜的盲卷积图像复原方法
CN107301667A (zh) * 2017-06-01 2017-10-27 中国人民解放军国防科学技术大学 基于棋盘格图像对单透镜计算成像的psf估计方法
CN107451971A (zh) * 2017-07-30 2017-12-08 湖南鸣腾智能科技有限公司 基于暗通道和高斯组合先验的低照度盲卷积图像复原法
CN107610064A (zh) * 2017-09-20 2018-01-19 长沙全度影像科技有限公司 一种基于不同模糊核先验的简单透镜psf均值融合方法
CN107680053A (zh) * 2017-09-20 2018-02-09 长沙全度影像科技有限公司 一种基于深度学习分类的模糊核优化迭代初始值估计方法
CN107680062A (zh) * 2017-10-12 2018-02-09 长沙全度影像科技有限公司 一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法
CN107833194A (zh) * 2017-11-21 2018-03-23 长沙全度影像科技有限公司 一种结合raw图像去噪的简单透镜图像复原方法
CN108074221A (zh) * 2017-12-19 2018-05-25 长沙全度影像科技有限公司 一种参数化简单透镜psf估计方法
CN108694715A (zh) * 2018-05-15 2018-10-23 清华大学 基于卷积稀疏编码的单相机rgb-nir成像系统
CN109102476A (zh) * 2018-08-28 2018-12-28 北京理工大学 一种基于弥散圆拟合的多光谱图像散焦模糊核估计方法
CN111539901A (zh) * 2020-04-08 2020-08-14 中国人民解放军国防科技大学 一种针对单透镜计算成像的空间变化psf融合估计方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090324126A1 (en) * 2008-06-26 2009-12-31 Microsoft Corporation Image deconvolution using color priors
CN103337058A (zh) * 2013-07-05 2013-10-02 西北工业大学 基于模糊噪声图像对联合优化的图像盲复原方法
CN103559693A (zh) * 2013-11-18 2014-02-05 东南大学 一种基于非连续性指示符的图像局部结构自适应复原方法
CN104091312A (zh) * 2014-07-11 2014-10-08 中国人民解放军国防科学技术大学 一种根据图像频谱信息提取模糊核先验的单透镜成像方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090324126A1 (en) * 2008-06-26 2009-12-31 Microsoft Corporation Image deconvolution using color priors
CN103337058A (zh) * 2013-07-05 2013-10-02 西北工业大学 基于模糊噪声图像对联合优化的图像盲复原方法
CN103559693A (zh) * 2013-11-18 2014-02-05 东南大学 一种基于非连续性指示符的图像局部结构自适应复原方法
CN104091312A (zh) * 2014-07-11 2014-10-08 中国人民解放军国防科学技术大学 一种根据图像频谱信息提取模糊核先验的单透镜成像方法

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104915937A (zh) * 2015-07-02 2015-09-16 中国人民解放军国防科学技术大学 基于频域矩阵分解的快速单透镜计算成像方法
CN104915937B (zh) * 2015-07-02 2017-10-20 中国人民解放军国防科学技术大学 基于频域矩阵分解的快速单透镜计算成像方法
CN106572285A (zh) * 2015-10-08 2017-04-19 三星电机株式会社 相机模块、电子装置及其操作方法
CN106780378A (zh) * 2016-12-08 2017-05-31 中国人民解放军国防科学技术大学 一种针对色差已校正双镜片透镜的盲卷积图像复原方法
CN106780378B (zh) * 2016-12-08 2017-12-05 中国人民解放军国防科学技术大学 一种针对色差已校正双镜片透镜的盲卷积图像复原方法
CN106651811A (zh) * 2017-01-03 2017-05-10 长沙全度影像科技有限公司 一种亮度通道引导的简单镜头成像模糊去除方法
CN106651812A (zh) * 2017-01-03 2017-05-10 长沙全度影像科技有限公司 一种简单镜头成像的多通道psf标定方法
CN106651812B (zh) * 2017-01-03 2018-06-26 长沙全度影像科技有限公司 一种简单镜头成像的多通道psf标定方法
CN107301667A (zh) * 2017-06-01 2017-10-27 中国人民解放军国防科学技术大学 基于棋盘格图像对单透镜计算成像的psf估计方法
CN107451971A (zh) * 2017-07-30 2017-12-08 湖南鸣腾智能科技有限公司 基于暗通道和高斯组合先验的低照度盲卷积图像复原法
CN107680053A (zh) * 2017-09-20 2018-02-09 长沙全度影像科技有限公司 一种基于深度学习分类的模糊核优化迭代初始值估计方法
CN107610064A (zh) * 2017-09-20 2018-01-19 长沙全度影像科技有限公司 一种基于不同模糊核先验的简单透镜psf均值融合方法
CN107680062A (zh) * 2017-10-12 2018-02-09 长沙全度影像科技有限公司 一种基于l1/l2先验结合高斯先验的微焦模糊图像复原方法
CN107833194A (zh) * 2017-11-21 2018-03-23 长沙全度影像科技有限公司 一种结合raw图像去噪的简单透镜图像复原方法
CN108074221A (zh) * 2017-12-19 2018-05-25 长沙全度影像科技有限公司 一种参数化简单透镜psf估计方法
CN108694715A (zh) * 2018-05-15 2018-10-23 清华大学 基于卷积稀疏编码的单相机rgb-nir成像系统
CN109102476A (zh) * 2018-08-28 2018-12-28 北京理工大学 一种基于弥散圆拟合的多光谱图像散焦模糊核估计方法
CN109102476B (zh) * 2018-08-28 2021-06-08 北京理工大学 一种基于弥散圆拟合的多光谱图像散焦模糊核估计方法
CN111539901A (zh) * 2020-04-08 2020-08-14 中国人民解放军国防科技大学 一种针对单透镜计算成像的空间变化psf融合估计方法
CN111539901B (zh) * 2020-04-08 2022-09-20 中国人民解放军国防科技大学 一种针对单透镜计算成像的空间变化psf融合估计方法

Also Published As

Publication number Publication date
CN104599254B (zh) 2016-03-02

Similar Documents

Publication Publication Date Title
CN104599254B (zh) 基于组合模糊核结构先验的单透镜计算成像方法
CN103856723B (zh) 一种单透镜成像的psf快速标定方法
CN104809706A (zh) 一种基于图像颜色平缓变化先验的单透镜计算成像方法
Theis et al. Faster gaze prediction with dense networks and fisher pruning
CN105046659B (zh) 一种基于稀疏表示的单透镜计算成像psf估算方法
CN104091312B (zh) 一种根据图像频谱信息提取模糊核先验的单透镜成像方法
CN103761710B (zh) 基于边缘自适应的高效图像盲去模糊方法
CN104574423A (zh) 基于球面像差标定的单透镜成像psf估计算法
CN103295010B (zh) 一种处理人脸图像的光照归一化方法
CN104599242A (zh) 使用多尺度非局部正则的模糊核估计方法
CN104794727A (zh) 一种基于对称性的单透镜计算成像psf快速标定方法
CN102393955A (zh) 用于图像复原的全信息非局部约束全变分方法
CN111161360A (zh) 基于Retinex理论的端到端网络的图像去雾方法
CN113657560A (zh) 基于节点分类的弱监督图像语义分割方法及系统
CN113486963B (zh) 一种密度自适应的点云端到端采样方法
CN108492270A (zh) 一种基于模糊核估计和变分重构的超分辨率方法
CN103971354A (zh) 低分辨率红外图像重建高分辨率红外图像的方法
CN104835168A (zh) 基于全局凸优化变分模型的快速多相图像分割方法
CN102789634B (zh) 一种获取光照均一化图像的方法
CN106023097A (zh) 一种基于迭代法的流场图像预处理算法
CN103473784B (zh) 基于高维空间几何信息学的模糊图像自适应复原方法
CN115170921A (zh) 一种基于双边网格学习和边缘损失的双目立体匹配方法
CN104915937A (zh) 基于频域矩阵分解的快速单透镜计算成像方法
CN110263806B (zh) 一种基于深度学习的皮肤图像实际面积估算方法
CN110060258B (zh) 基于高斯混合模型聚类的视网膜sd-oct图像分割方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant