CN105405107A - 一种快速高质的图像超分辨率重建方法 - Google Patents

一种快速高质的图像超分辨率重建方法 Download PDF

Info

Publication number
CN105405107A
CN105405107A CN201510703679.5A CN201510703679A CN105405107A CN 105405107 A CN105405107 A CN 105405107A CN 201510703679 A CN201510703679 A CN 201510703679A CN 105405107 A CN105405107 A CN 105405107A
Authority
CN
China
Prior art keywords
image
training
multitask
gaussian
sigma
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510703679.5A
Other languages
English (en)
Other versions
CN105405107B (zh
Inventor
李键红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GUANGZHOU CHNAVS DIGITAL TECHNOLOGY Co Ltd
Original Assignee
GUANGZHOU CHNAVS DIGITAL TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GUANGZHOU CHNAVS DIGITAL TECHNOLOGY Co Ltd filed Critical GUANGZHOU CHNAVS DIGITAL TECHNOLOGY Co Ltd
Priority to CN201510703679.5A priority Critical patent/CN105405107B/zh
Publication of CN105405107A publication Critical patent/CN105405107A/zh
Application granted granted Critical
Publication of CN105405107B publication Critical patent/CN105405107B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20024Filtering details
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种快速高质的图像超分辨率重建方法,包括:对输入图像YL分别进行高斯低通滤波和双三次上采样,得到高斯低通滤波图像XL和双三次上采样图像XH;根据输入图像YL和高斯低通滤波图像XL构建图像对训练集然后根据图像对训练集D采用最近邻域查找法得到图像XH的训练样本对集合;采用多任务高斯过程回归模型对图像XH的训练样本对集合进行描述,然后采用梯度下降法进行参数训练,求出图像XH样本所对应的多任务高斯模型参数以及多任务高斯模型输出YH;对求出的多任务高斯模型输出YH采用反向投影法得到最终的超分辨率图像。本发明具有速度快且效果好的优点,可广泛应用于图像处理领域。

Description

一种快速高质的图像超分辨率重建方法
技术领域
本发明涉及图像处理领域,尤其是一种快速高质的图像超分辨率重建方法。
背景技术
图像超分辨率重建技术是图像处理领域内一个重要且基础的课题,它指的是通过软件计算的方式处理输入的一幅或多幅同一场景的低分辨率图像来估算其对应的高分辨率图像。这种技术在数字电视高清显示、视频监控、遥感图像通讯等领域有着广泛的应用。其实现方法主要可分为基于插值的方法、基于重建的方法和基于学习的方法。近年来,随着机器学习、数据挖掘等技术的兴起,基于学习的方法逐渐为人们所重视,并成为图像超分辨率重建技术的主流。
图像本身信息丰富,数据量巨大,因此简单的超分辨率重建算法虽然速度快但往往达不到最优的重建效果,如采用双三次插值算法,该算法速度快,处理平滑区域能取得很好的效果,但是对于边缘和纹理区域,该算法容易引入模糊和噪声,造成重建质量下降;复杂的方法为了追求最优的效果通常都需要占用大量的内存空间和漫长的等待时间,如He等人发表在2011年CVPR会议上的论文《SingleImageSuper-ResolutionUsingGaussianprocessRegression》中所提到的方法。He等人的方法将图像中的每一个像素点和其对应的八邻域构造成训练样本对,在每一个小区域内(文中为30×30大小的区域)训练高斯过程回归模型参数,把该区域用双三次放大到目标尺寸后构造样本集合作为高斯过程回归模型的输入,得到这个小区域的对应的高分辨率估计。这种方法模型训练阶段的时间复杂度为O(M*N3),其中,M为抽取的图像小区域的数量,N为小区域内构造的样本对数量;预测阶段的时间复杂度为O(N’2),N’为输入的样本数量,可以看出该方法时间复杂度较大。由于时间复杂度的限制,该算法很难在实际情况中应用。
综上所述,目前业内亟需一种速度快且效果好的图像分辨率重建方法。
发明内容
为了解决上述技术问题,本发明的目的是:提供一种速度快且效果好的,快速高质的图像超分辨率重建方法。
本发明解决其技术问题所采用的技术方案是:
一种快速高质的图像超分辨率重建方法,包括:
S1、对输入图像YL分别进行高斯低通滤波和双三次上采样,得到高斯低通滤波图像XL和双三次上采样图像XH
S2、根据输入图像YL和高斯低通滤波图像XL构建图像对训练集然后根据图像对训练集D采用最近邻域查找法得到图像XH的训练样本对集合,其中,p表示图像片的位置;
S3、采用多任务高斯过程回归模型对图像XH的训练样本对集合进行描述,然后采用梯度下降法进行参数训练,求出图像XH样本所对应的多任务高斯模型参数以及多任务高斯模型输出YH,所述图像XH样本所对应的多任务高斯模型参数为图像XH不同位置的样本赋予了不同的噪声级别;
S4、对求出的多任务高斯模型输出YH采用反向投影法得到最终的超分辨率图像。
进一步,所述步骤S2,其包括:
S21、从输入图像YL和高斯低通滤波图像XL中抽取图像片集合进而构建相应的图像对训练集
S22、对双三次上采样图像XH所抽取的第i个图像片通过最近邻域查找法查找到其在图像对训练集D中的k个最近样本对,进而构建图像XH的训练样本对集合其中,是图像对训练集D中图像YL第i个图像片的像素点的列向量形式,ni中元素的个数; 是由图像片中与像素点位置相对应像素点的8邻域所组成的列向量,i=1,2,…,k;j=1,2,…,ni
进一步,所述步骤S3,其包括:
S31、采用多任务高斯过程回归模型对图像XH的训练样本对集合进行描述,得到图像XH训练样本对集合的描述方程,所述得到的描述方程为:
Y i = f ( X i ) + ϵ i ϵ i ~ N ( 0 , σ i 2 I n i ) ,
其中,εi为图像XH训练样本对集合对应的噪声,εi服从均值是0且协方差矩阵为的高斯分布,代表噪声的等级,是ni×ni大小的单位矩阵;
S32、根据图像XH训练样本对集合对应的描述方程得到所有训练样本的描述方程,所述所有训练样本的描述方程为:
Y = f ( X ) + ϵ ϵ ~ N ( 0 , D ) ,
其中,X=[X1,X2,...,Xk],Y=[Y1,Y2,...,Yk],ε为所有训练样本对应的噪声,ε服从均值是0且协方差矩阵为D的高斯分布,D是对角矩阵且满足:
S33、根据图像XH训练样本对集合以及所有训练样本的描述方程采用梯度下降法进行参数训练,求出图像XH样本所对应的多任务高斯模型参数。
进一步,所述步骤S33,其包括:
S331、为图像XH第i个图像片中每一个像素点的八邻域构造测试矩阵从而得到所有训练样本的训练输出Y和图像XH样本的测试输出Y*的联合分布,所述得到的联合分布为:
Y Y * ~ N ( 0 , K ( X , X ) + D K ( X , X * ) K ( X * , X ) K ( X * , X * ) + σ * 2 I * ) ;
其中,K(X,X*)、K(X*,X)和K(X,X)分别为(X,X*)、(X*,X)和(X,X)的协方差矩阵,矩阵K(X,X*)、K(X*,X)和K(X,X)第m行第n列元素km,n的表达式为:
k m , n = σ f 2 exp ( - | | x m - x n | | 2 2 l 2 ) , 参数σf、l和均为待求的多任务高斯模型参数;
S332、根据图像XH训练样本对集合以及所有训练样本的描述方程确定似然函数R(x),所述似然函数R(x)的表达式为:
R ( x ) = 1 2 [ Y T ( K + D ) - 1 Y + l n | K + D | ] + Σ i = 1 k [ lnσ i + l n ρ + ( lnσ i - μ ) 2 2 ρ 2 ] ,
其中,服从对数正态分布,μ为对数正态分布的均值,ρ为对数正态分布的标准差;
S333、采用梯度下降法求出使似然函数R(x)取得最小值时对应的多任务高斯模型参数σf、l和
S334、根据多任务高斯模型参数σf、l和计算图像XH样本测试矩阵的输出Y*,所述测试矩阵的输出Y*的表达式为:
Y*=f(X*)=K(X*,X)[K(X,X)+D]TY。
进一步,所述步骤S22在通过最近邻域查找法查找时在以图像XH所抽取的第i个图像片对应的位置为中心,30×30大小的区域内进行查找。
进一步,所述步骤S22在对双三次上采样图像XH所抽取的第i个图像片通过最近邻域查找法查找之前还包括根据图像XH所抽取的图像片的方差大小和设定阈值进行初步分类的步骤。
本发明的有益效果是:采用最近邻域查找法来得到双三次上采样图像XH的训练样本对集合,然后采用多任务高斯过程回归模型对训练样本对集合进行描述以及采用梯度下降法进行参数训练,得到多任务高斯模型参数以及多任务高斯模型输出YH,最后根据多任务高斯模型输出YH得到最终的超分辨率图像,与采用简单的双三次插值算法相比,效果更好且重建后得到的图像质量更高;从图像本身的特性出发,图像XH样本所对应的多任务高斯模型参数为图像XH不同位置的样本赋予了不同的噪声级别,使得本发明的重建方法可以在不同图像片间独立运行,易改造为并行算法或采用GPU图像处理器来实现,与传统的高斯模型回归算法相比,运行时间更更短,速度更快。进一步,在通过最近邻域查找法查找最近邻域的过程中只在以所抽取的图像片对应的位置为中心,30×30大小的区域内进行查找,大大降低了查找所需消耗的时间,速度更快。
附图说明
下面结合附图和实施例对本发明作进一步说明。
图1为本发明一种快速高质的图像超分辨率重建方法的整体流程图;
图2为本发明实施例一的算法框架图。
具体实施方式
参照图1,一种快速高质的图像超分辨率重建方法,包括:
S1、对输入图像YL分别进行高斯低通滤波和双三次上采样,得到高斯低通滤波图像XL和双三次上采样图像XH
S2、根据输入图像YL和高斯低通滤波图像XL构建图像对训练集然后根据图像对训练集D采用最近邻域查找法得到图像XH的训练样本对集合,其中,p表示图像片的位置;
S3、采用多任务高斯过程回归模型对图像XH的训练样本对集合进行描述,然后采用梯度下降法进行参数训练,求出图像XH样本所对应的多任务高斯模型参数以及多任务高斯模型输出YH,所述图像XH样本所对应的多任务高斯模型参数为图像XH不同位置的样本赋予了不同的噪声级别;
S4、对求出的多任务高斯模型输出YH采用反向投影法得到最终的超分辨率图像。
进一步作为优选的实施方式,所述步骤S2,其包括:
S21、从输入图像YL和高斯低通滤波图像XL中抽取图像片集合进而构建相应的图像对训练集
S22、对双三次上采样图像XH所抽取的第i个图像片通过最近邻域查找法查找到其在图像对训练集D中的k个最近样本对,进而构建图像XH的训练样本对集合其中,是图像对训练集D中图像YL第i个图像片的像素点的列向量形式,ni中元素的个数; 是由图像片中与像素点位置相对应像素点的8邻域所组成的列向量,i=1,2,…,k;j=1,2,…,ni
进一步作为优选的实施方式,所述步骤S3,其包括:
S31、采用多任务高斯过程回归模型对图像XH的训练样本对集合进行描述,得到图像XH训练样本对集合的描述方程,所述得到的描述方程为:
Y i = f ( X i ) + ϵ i ϵ i ~ N ( 0 , σ i 2 I n i ) ,
其中,εi为图像XH训练样本对集合对应的噪声,εi服从均值是0且协方差矩阵为的高斯分布,代表噪声的等级,是ni×ni大小的单位矩阵;
S32、根据图像XH训练样本对集合对应的描述方程得到所有训练样本的描述方程,所述所有训练样本的描述方程为:
Y = f ( X ) + ϵ ϵ ~ N ( 0 , D ) ,
其中,X=[X1,X2,...,Xk],Y=[Y1,Y2,...,Yk],ε为所有训练样本对应的噪声,ε服从均值是0且协方差矩阵为D的高斯分布,D是对角矩阵且满足:
S33、根据图像XH训练样本对集合以及所有训练样本的描述方程采用梯度下降法进行参数训练,求出图像XH样本所对应的多任务高斯模型参数。
进一步作为优选的实施方式,所述步骤S33,其包括:
S331、为图像XH第i个图像片中每一个像素点的八邻域构造测试矩阵从而得到所有训练样本的训练输出Y和图像XH样本的测试输出Y*的联合分布,所述得到的联合分布为:
Y Y * ~ N ( 0 , K ( X , X ) + D K ( X , X * ) K ( X * , X ) K ( X * , X * ) + σ * 2 I * ) ;
其中,K(X,X*)、K(X*,X)和K(X,X)分别为(X,X*)、(X*,X)和(X,X)的协方差矩阵,矩阵K(X,X*)、K(X*,X)和K(X,X)第m行第n列元素km,n的表达式为:
k m , n = σ f 2 exp ( - | | x m - x n | | 2 2 l 2 ) , 参数σf、l和均为待求的多任务高斯模型参数;
S332、根据图像XH训练样本对集合以及所有训练样本的描述方程确定似然函数R(x),所述似然函数R(x)的表达式为:
R ( x ) = 1 2 [ Y T ( K + D ) - 1 Y + l n | K + D | ] + Σ i = 1 k [ lnσ i + l n ρ + ( lnσ i - μ ) 2 2 ρ 2 ] ,
其中,服从对数正态分布,μ为对数正态分布的均值,ρ为对数正态分布的标准差;
S333、采用梯度下降法求出使似然函数R(x)取得最小值时对应的多任务高斯模型参数σf、l和
S334、根据多任务高斯模型参数σf、l和计算图像XH样本测试矩阵的输出Y*,所述测试矩阵的输出Y*的表达式为:
Y*=f(X*)=K(X*,X)[K(X,X)+D]TY
进一步作为优选的实施方式,所述步骤S22在通过最近邻域查找法查找时在以图像XH所抽取的第i个图像片对应的位置为中心,30×30大小的区域内进行查找。
进一步作为优选的实施方式,所述步骤S22在对双三次上采样图像XH所抽取的第i个图像片通过最近邻域查找法查找之前还包括根据图像XH所抽取的图像片的方差大小和设定阈值进行初步分类的步骤。
实施例一
参照图1和图2,本发明的第一实施例:
针对现有的图像超分辨率重建方法无法同时兼顾运算速度以及重建图像质量的缺点,本发明提出了一种快速高质的图像超分辨率重建方法,如图2所示。该方法将输入图像YL通过高斯低通滤波器做滤波处理得到结果图像XL,将YL通过双三次方法上采样到目标尺寸来得到与目标图像尺寸相同的图像XH,然后利用图像XL,YL和XH来估计出XL对应的高分辨率图像YH,最后通过反向投影法得到最终的超分辨率图像。如图1和2所示,本发明的具体实现过程为:
(1).首先从图像YL和图像XL中以a×a大小的尺寸抽取图像片集合p表示图像片位置,进而构造图像片对训练集
(2).由于在图像XH中有重叠的抽取图像片,故对图像XH的第i个图像片而言,通过将它和XL中的图像片进行比较,在数据集D中找到距离它最近的k个样本对,以构造出它的样本对集合其中是对应训练集合中图像片的列向量形式,ni中元素个数。 是在图像片中与像素点位置相对应像素点的8邻域组成的列向量;X=[X1,X2,...,Xk],Y=[Y1,Y2,...,Yk]为所有样本的矩阵形式。
(3).对图像XH的每一个样本对引入高斯过程回归模型来进行描述,可得到:
Y i = f ( X i ) + ϵ i ϵ i ~ N ( 0 , σ i 2 I n i )
εi为对图像XH样本的噪声,服从均值是0,协方差矩阵为的高斯分布,代表噪声的等级。与之相对应,整个样本集合的高斯过程回归模型可以写成:
Y = f ( X ) + ϵ ϵ ~ N ( 0 , D ) ,
其中,协方差矩阵D是对角矩阵,其形式为:
(4).对于在图像XH抽取出的第i个图像片,本实施例需采用图像片中的每一个像素点的八邻域来构造测试矩阵那么训练输出Y和测试输出Y*的联合分布为:
Y Y * ~ N ( 0 , K ( X , X ) + D K ( X , X * ) K ( X * , X ) K ( X * , X * ) + σ * 2 I * ) .
其中,协方差矩阵K(X,X*)、K(X*,X)和K(X,X)第m行第n列元素km,n的表达式为:
k m , n = σ f 2 exp ( - | | x m - x n | | 2 2 l 2 ) .
为了确定高斯模型的参数σf、l和假定服从对数正态分布,此时采用梯度下降法求解似然函数R(x)的最小值就可以确定所需的参数σf、l和如下式所示:
arg min R ( x ) σ f , l , { σ i } i = 1 k R ( x ) = 1 2 [ Y T ( K + D ) - 1 Y + ln | K + D | ] + Σ i = 1 k [ lnσ i + ln ρ + ( lnσ i + μ ) 2 2 ρ 2 ] .
确定参数σf、l和后,即可估计出测试矩阵的输出Y*为:
Y*=f(X*)=K(X*,X)[K(X,X)+D]TY。
(5).在不降低超分辨率重建结果质量的情况下,为了进一步加快算法的速度,本实施例在通过最近邻域查找法查找最近邻域的过程中只在以抽取的图像片对应的位置为中心,30×30大小的区域内查找,这样大大降低了查找需要消耗的时间。
另外,本实施例还根据设定的阈值a对在图像XH所抽取出的图像片做初步的分类:如果图像片的方差大于a,则判定该图像片来自纹理或边缘等细节信息较为丰富的区域,此时执行步骤(4);若图像片的方差小于a,则判定图像片来自图像的平滑区域,此时直接用双三次插值的方法放大到目标尺寸。
(6).所有从XH中抽取出图像片处理完毕后,对多任务高斯模型输出YH中重叠的位置进行加权平均后再通过反向投影,即可重构出最终的高分辨率图像。
本发明提出的图像超分辨率重建方法从图像本身的特性出发,有别于以往的高斯过程回归算法,其假定来自不同位置的样本有不同的噪声级别,扩展了高斯过程回归算法。该方法的图像片与图像片之间可以独立运行,很容易被改造成并行算法或引入到GPU进行处理,进一步加快算法的运行时间,以实现对视频图像的实时处理。同时,该方法对于高分辨率结果中的每一个像素点都可以计算其引入误差的概率,为后面进一步提高图像质量提供了可能。
下表1、2分别展示了采用本发明的方法与几种传统算法进行图像超分辨率重建的质量评价比较和运行时间(其中,Lena、baboon、peppers和parrot均为国际标准测试图像,Bicubic为双三次算法,Yangetal.算法和Heetal.算法分别为Yangetal等人以及Heetal等人提出的超分辨率重建算法,PSNR为峰值信噪比,SSIM为结构相似性指标),从表1、2可以看出,本发明的方法在很大程度上优于当前图像超分辨率重建的前沿算法。
表1图像放大三倍PSNR和SSIM的比较结果
表2运行时间的比较(单位:秒)
Yangetal算法 Heetal算法 本发明的方法
Lena(256*256) 115 1855 58
peppers(256*256) 112 1674 45
baboon(256*256) 120 1782 60
Parrot(256*256) 113 1706 48
以上是对本发明的较佳实施进行了具体说明,但本发明创造并不限于所述实施例,熟悉本领域的技术人员在不违背本发明精神的前提下还可做作出种种的等同变形或替换,这些等同的变形或替换均包含在本申请权利要求所限定的范围内。

Claims (6)

1.一种快速高质的图像超分辨率重建方法,其特征在于:包括:
S1、对输入图像YL分别进行高斯低通滤波和双三次上采样,得到高斯低通滤波图像XL和双三次上采样图像XH
S2、根据输入图像YL和高斯低通滤波图像XL构建图像对训练集然后根据图像对训练集D采用最近邻域查找法得到图像XH的训练样本对集合,其中,p表示图像片的位置;
S3、采用多任务高斯过程回归模型对图像XH的训练样本对集合进行描述,然后采用梯度下降法进行参数训练,求出图像XH样本所对应的多任务高斯模型参数以及多任务高斯模型输出YH,所述图像XH样本所对应的多任务高斯模型参数为图像XH不同位置的样本赋予了不同的噪声级别;
S4、对求出的多任务高斯模型输出YH采用反向投影法得到最终的超分辨率图像。
2.根据权利要求1所述的一种快速高质的图像超分辨率重建方法,其特征在于:所述步骤S2,其包括:
S21、从输入图像YL和高斯低通滤波图像XL中抽取图像片集合进而构建相应的图像对训练集 D = { ( X L p ) , ( Y L P ) } ;
S22、对双三次上采样图像XH所抽取的第i个图像片通过最近邻域查找法查找到其在图像对训练集D中的k个最近样本对,进而构建图像XH的训练样本对集合其中,是图像对训练集D中图像YL第i个图像片的像素点的列向量形式,ni中元素的个数; 是由图像片中与像素点位置相对应像素点的8邻域所组成的列向量,i=1,2,…,k;j=1,2,…,ni
3.根据权利要求2所述的一种快速高质的图像超分辨率重建方法,其特征在于:所述步骤S3,其包括:
S31、采用多任务高斯过程回归模型对图像XH的训练样本对集合进行描述,得到图像XH训练样本对集合的描述方程,所述得到的描述方程为:
Y i = f ( X i ) + ϵ i ϵ i ~ N ( 0 , σ i 2 I n i ) ,
其中,εi为图像XH训练样本对集合对应的噪声,εi服从均值是0且协方差矩阵为的高斯分布,代表噪声的等级,是ni×ni大小的单位矩阵;
S32、根据图像XH训练样本对集合对应的描述方程得到所有训练样本的描述方程,所述所有训练样本的描述方程为:
Y = f ( X ) + ϵ ϵ ~ N ( 0 , D ) ,
其中,X=[X1,X2,...,Xk],Y=[Y1,Y2,...,Yk],ε为所有训练样本对应的噪声,ε服从均值是0且协方差矩阵为D的高斯分布,D是对角矩阵且满足:
S33、根据图像XH训练样本对集合以及所有训练样本的描述方程采用梯度下降法进行参数训练,求出图像XH样本所对应的多任务高斯模型参数。
4.根据权利要求3所述的一种快速高质的图像超分辨率重建方法,其特征在于:所述步骤S33,其包括:
S331、为图像XH第i个图像片中每一个像素点的八邻域构造测试矩阵从而得到所有训练样本的训练输出Y和图像XH样本的测试输出Y*的联合分布,所述得到的联合分布为:
Y Y * ~ N ( 0 , K ( X , X ) + D K ( X , X * ) K ( X * , X ) K ( X * , X * ) + σ * 2 I * ) ;
其中,K(X,X*)、K(X*,X)和K(X,X)分别为(X,X*)、(X*,X)和(X,X)的协方差矩阵,矩阵K(X,X*)、K(X*,X)和K(X,X)第m行第n列元素km,n的表达式为:
k m , n = σ f 2 exp ( - | | x m - x n | | 2 2 l 2 ) , 参数σf、l和均为待求的多任务高斯模型参数;
S332、根据图像XH训练样本对集合以及所有训练样本的描述方程确定似然函数R(x),所述似然函数R(x)的表达式为:
R ( x ) = 1 2 [ Y T ( K + D ) - 1 Y + l n | K + D | ] + Σ i = 1 k [ lnσ i + l n ρ + ( lnσ i - μ ) 2 2 ρ 2 ] ,
其中,服从对数正态分布,μ为对数正态分布的均值,ρ为对数正态分布的标准差;
S333、采用梯度下降法求出使似然函数R(x)取得最小值时对应的多任务高斯模型参数σf、l和
S334、根据多任务高斯模型参数σf、l和计算图像XH样本测试矩阵的输出Y*,所述测试矩阵的输出Y*的表达式为:
Y*=f(X*)=K(X*,X)[K(X,X)+D]TY。
5.根据权利要求2所述的一种快速高质的图像超分辨率重建方法,其特征在于:
所述步骤S22在通过最近邻域查找法查找时在以图像XH所抽取的第i个图像片对应的位置为中心,30×30大小的区域内进行查找。
6.根据权利要求2所述的一种快速高质的图像超分辨率重建方法,其特征在于:所述步骤S22在对双三次上采样图像XH所抽取的第i个图像片通过最近邻域查找法查找之前还包括根据图像XH所抽取的图像片的方差大小和设定阈值进行初步分类的步骤。
CN201510703679.5A 2015-10-23 2015-10-23 一种图像超分辨率重建方法 Active CN105405107B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510703679.5A CN105405107B (zh) 2015-10-23 2015-10-23 一种图像超分辨率重建方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510703679.5A CN105405107B (zh) 2015-10-23 2015-10-23 一种图像超分辨率重建方法

Publications (2)

Publication Number Publication Date
CN105405107A true CN105405107A (zh) 2016-03-16
CN105405107B CN105405107B (zh) 2018-05-08

Family

ID=55470574

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510703679.5A Active CN105405107B (zh) 2015-10-23 2015-10-23 一种图像超分辨率重建方法

Country Status (1)

Country Link
CN (1) CN105405107B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103578079A (zh) * 2012-07-24 2014-02-12 李素非 一种基于无迹卡尔曼滤波的图像重建方法
CN103854268A (zh) * 2014-03-26 2014-06-11 西安电子科技大学 基于多核高斯过程回归的图像超分辨重建方法
CN104574336A (zh) * 2015-01-19 2015-04-29 上海交通大学 基于自适应亚模字典选择的超分辨率图像重建系统
CN104700436A (zh) * 2015-03-05 2015-06-10 西安电子科技大学 在多变量观测下基于边缘约束的图像重构方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103578079A (zh) * 2012-07-24 2014-02-12 李素非 一种基于无迹卡尔曼滤波的图像重建方法
CN103854268A (zh) * 2014-03-26 2014-06-11 西安电子科技大学 基于多核高斯过程回归的图像超分辨重建方法
CN104574336A (zh) * 2015-01-19 2015-04-29 上海交通大学 基于自适应亚模字典选择的超分辨率图像重建系统
CN104700436A (zh) * 2015-03-05 2015-06-10 西安电子科技大学 在多变量观测下基于边缘约束的图像重构方法

Also Published As

Publication number Publication date
CN105405107B (zh) 2018-05-08

Similar Documents

Publication Publication Date Title
CN111047516B (zh) 图像处理方法、装置、计算机设备和存储介质
US8655109B2 (en) Regression-based learning model for image upscaling
CN106204447A (zh) 基于总变差分和卷积神经网络的超分辨率重建方法
US9865036B1 (en) Image super resolution via spare representation of multi-class sequential and joint dictionaries
CN103871041B (zh) 基于认知正则化参数构建的图像超分辨率重构方法
CN102354394B (zh) 图像超分辨方法及系统
CN103279933B (zh) 一种基于双层模型的单幅图像超分辨率重建方法
JP2013518336A (ja) 入力画像から増加される画素解像度の出力画像を生成する方法及びシステム
CN111667410B (zh) 图像分辨率提升方法、装置及电子设备
CN106296586B (zh) 基于凸组合方式的多帧低分辨率图像超分辨率重建方法
US11887218B2 (en) Image optimization method, apparatus, device and storage medium
CN103065292B (zh) 一种基于主成份稀疏表达的人脸超分辨率重建方法
CN101247489A (zh) 一种用于数字电视细节实时重现的方法
CN106127688A (zh) 一种超分辨率图像重建方法及其系统
US8233748B2 (en) Image-resolution-improvement apparatus and method
JPWO2011111819A1 (ja) 画像処理装置、画像処理プログラム、および、画像を生成する方法
CN103971354A (zh) 低分辨率红外图像重建高分辨率红外图像的方法
Dong et al. Real-world remote sensing image super-resolution via a practical degradation model and a kernel-aware network
CN117575915B (zh) 一种图像超分辨率重建方法、终端设备及存储介质
CN106169174A (zh) 一种图像放大方法
Zou et al. Joint wavelet sub-bands guided network for single image super-resolution
CN116934592A (zh) 一种基于深度学习的图像拼接方法、系统、设备及介质
Lin et al. UHD Low-light image enhancement via interpretable bilateral learning
Tomar et al. Attentive exfeat based deep generative adversarial network for noise robust face super-resolution
An et al. Image super-resolution reconstruction algorithm based on significant network connection-collaborative migration structure

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant