CN103530860A - 基于自适应的自回归模型的高光谱图像超分辨率方法 - Google Patents

基于自适应的自回归模型的高光谱图像超分辨率方法 Download PDF

Info

Publication number
CN103530860A
CN103530860A CN201310451410.3A CN201310451410A CN103530860A CN 103530860 A CN103530860 A CN 103530860A CN 201310451410 A CN201310451410 A CN 201310451410A CN 103530860 A CN103530860 A CN 103530860A
Authority
CN
China
Prior art keywords
mrow
image
msub
resolution
msubsup
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310451410.3A
Other languages
English (en)
Other versions
CN103530860B (zh
Inventor
冯伟
尹雪飞
朱彦铭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Tupo Technology Co ltd
Original Assignee
Tianjin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University filed Critical Tianjin University
Priority to CN201310451410.3A priority Critical patent/CN103530860B/zh
Publication of CN103530860A publication Critical patent/CN103530860A/zh
Application granted granted Critical
Publication of CN103530860B publication Critical patent/CN103530860B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明属于计算机视觉技术领域,为提供一种能广泛应用,且能得到高质量高光谱图像的高光谱图像超分辨率获取方法,为此,本发明采取的技术方案是,一种基于自适应的自回归模型的高光谱图像超分辨率方法,从第一波段的高光谱图像起,依次的借助于高分辨率的彩色图像放大每一波段的图像;对于输入的第i波段图像,寻找其之前相邻最近的三个波段图像中与其相似度最高的图像,然后将最相似的图像对应的已经超分辨率的图像投影到当前波段,得到投影图像;基于该投影图像和高分辨率的彩色图像,经由自适应的自回归模型来实现当前第i波段的图像的超分辨,最终实现所有波段的图像超分辨率。本发明主要应用于图像处理。

Description

基于自适应的自回归模型的高光谱图像超分辨率方法
技术领域
本发明属于计算机视觉技术领域,涉及自回归理论、信号投影转换空间理论及高光谱图像超分辨率方法,具体讲,涉及基于自适应的自回归模型的高光谱图像超分辨方法。
技术背景
长期以来,通过低分辨高光谱图像恢复到高分辨率高光谱图像已在关键技术上取得了重要突破,已经趋于成熟并在遥感地理,医学图像,农业科学和气候科学等多个领域获得广泛应用。然而,传统的方法做超分辨率高光谱图像对光谱有一定的限制,同时超分辨结果不尽人意。基于自适应的自回归模型的高光谱图像超分辨方法借助于一张高分辨的彩色图像,则可达到更高的分辨率,并且能有效的保持原有的光谱信息。相关研究在近年来开始成为研究热点。高光谱图像超分辨率方法技术在遥感地理,医学图像,农业科学和气候科学等领域有着广泛应用。国际上多所著名大学与研究机构如:佐治亚理工学院,格勒诺布尔理工学院,冰岛大学,西北工业大学,微软亚洲研究院,Adobe公司等都在该领域有着深度的研究。现阶段,普遍的高光谱超分辨率技术一种方法是由单幅或者多幅低分辨率的高光谱图像来重构高分辨的高光谱图像,例如(Hyperspectral imagery super-resolution by sparserepresentation and spectral regularization,Yongqiang Zhao*,Jinxiang Yang,QingyongZhang,Lin Song,Yongmei Cheng and Quan Pan,Journal on Advances in Signal Processing,2011),然而,此类方法由于没有利用额外的高频信息,此类方法能达到的分辨率放大倍数十分有限,且结果也不是很好;另一种方法是借助于一幅高分辨的彩色图像和低分辨率的高光谱图像融合得到高分辨率的高光谱图像,例如(High-resolution Hyperspectral Imaging viaMatrix Factorization,Rei Kawakami et al.CVPR2011),但是这种方法对于高光谱图像的波段有很大的局限性,要求输入的高光谱图像是可见光波段的图像,因此此类方法不能达到实现广泛的实际应用。
发明内容
为克服现有技术的不足,本发明旨在提供一种能广泛应用,且能得到高质量高光谱图像的高光谱图像超分辨率获取方法,为此,本发明采取的技术方案是,一种基于自适应的自回归模型的高光谱图像超分辨率方法,从第一波段的高光谱图像起,依次的借助于高分辨率的彩色图像放大每一波段的图像;对于输入的第i波段图像,寻找其之前相邻最近的三个波段图像中与其相似度最高的图像,然后将最相似的图像对应的已经超分辨率的图像投影到当前波段,得到投影图像;基于该投影图像和高分辨率的彩色图像,经由自适应的自回归模型来实现当前第i波段的图像的超分辨,最终实现所有波段的图像超分辨率。
自适应的自回归模型的高光谱图像超分辨率方法具体步骤为:
1)对于输入的第i波段的高光谱图像,计算与当前波段图像之前相邻最近的三幅图像与当前波段图像的相似度;
2)选择出与当前波段图像相似度最高的图像,将相似图像对应的已经超分辨的图像投影到当前波段,得到当前波段的一个高分辨率估计图像;
3)基于步骤2)得到的投影图像,以及彩色的高分辨图像构造自回归模型的系数;
4)基于步骤3)得到的自回归模型系数,采用自适应的自回归模型重构当前波段图像的超分辨图像;
5)对步骤4)得到的超分辨图像,根据彩色的高分辨图像将其细节部分后处理,得到更优化的超分辨结果。
计算与当前波段图像之前相邻最近的三幅图像与当前波段图像的相似度,具体如下:
S i , j = M × N Σ x | y x hs , i - y x hs , j | - - - ( 1 )
其中,Si,j是第i波段图像和第j波段图像的相似度,
Figure BDA0000388174600000023
分别是当前第i波段低分辨高光谱图像yhs,i的第x个像素值和之前第j个波段低分辨高光谱图像yhs,j的第x个像素值,M和N分别是低分辨高光谱图像的维度,在与当前波段图像之前相邻最近的三幅图像中,选择相似度Si,j最大的图像作为当前图像的相似图像。
将相似图像对应的已经超分辨的图像投影到当前波段,具体如下:
Y ~ i = P ( ρ i , j ) · Y j with ρ i , j = y i / y j - - - ( 2 )
其中,
Figure BDA0000388174600000025
是当前i波段图像的高分辨投影图像,Yj是相似图像对应的超分辨后的图像,P(.)是一种将比率矩阵放大到高分辨率图像Yj大小的放大操作,在实际试验中采取bi-cubic的放大方法,yi和yj分别是当前i波段的低分辨图像和其相似图像。
基于投影图像和彩色高分辨图像构造自回归模型系数,具体如下:
c m , n = 1 Z m c m , n Y i ~ c m , n X - - - ( 3 )
其中,cm,n是自回归模型的系数,m和n分别是图像点的下标,Zm是一个归一化因子,
Figure BDA0000388174600000028
分别是高光谱项和彩色图像项。
高光谱项是定义在投影得到的图像
Figure BDA0000388174600000029
上,具体如下:
c m , n Y ~ i = exp ( - | | m - n | | 2 2 2 σ 1 2 ) exp ( - ( Y ~ m i - Y ~ n i ) 2 2 σ 2 2 ) - - - ( 4 )
其中,σ1和σ2是两个双边滤波器的系数,用来调节空间距离和光照强度的重要度。
彩色图像项是定义在高分辨的彩色图像X上,具体如下:
Figure BDA00003881746000000211
其中,σ3是指数函数的衰减率,O是彩色图像的彩色空间,采取RGB空间,⊙代表矩阵元素间的乘法,
Figure BDA0000388174600000031
是一个在彩色图像第l维彩色空间中以m为中心提取w×w大小块的操作,彩色核Cm是在邻域内定义的,具体如下:
C m ( m , n ) = exp ( - Σ l ∈ O ( X m l - X n l ) 2 2 × 3 × σ 4 2 ) - - - ( 6 )
其中,
Figure BDA0000388174600000033
Figure BDA0000388174600000034
分别是彩色图像m和n点处在第l维色彩空间的值,σ4是指数函数的衰减率。
根据高分辨率的彩色图像对超分辨后的图像进行细节后处理,包括以下步骤:
(1)检测包含图像细节的块,具体如下:
var ( W ) = Σ m = 1 N 1 Σ n = 1 N 2 ( W m , n - ( Σ m = 1 N 1 Σ n = 1 N 2 W m , n N 1 × N 2 ) ) N 1 × N 2 - - - ( 7 )
其中,var(W)是块W的细节丰富度,N1和N2分别是块的大小,选择细节丰富度大于阀值T的块为需要后处理的细节块;
(2)对选择出的细节块进行后处理,具体如下:
Figure BDA0000388174600000036
其中,./和⊙分别是矩阵元素间除法和矩阵元素间乘法。
本发明的方法的特点及效果:
本发明方法提高了高光谱图像超分辨率的质量,通过依次的对每一波段的高光谱图像借助于一张场景相同的高分辨彩色图像,和之前最相似图像对应的已经超分辨的图像构造的投影图像构造自回归模型的系数来指导高光谱图像的放大,实现了高光谱图像的超分辨,达到了很好的效果。同时,由于相似图像的投影图像的指导作用,保证了光谱的一致性,不会破坏原有的光谱特性。所提出的发明方法在可见光波段和近红外波段的高光谱图像中可以广泛应用,并取得高质量的高分辨率放大结果。
具有以下特点:
1、程序简单,易于实现。
2、针对输入的某一波段高光谱图像,借助于一张场景相同的高分辨彩色图像和其相似图像构造自回归模型的系数来指导超分辨率,充分考虑了空域关系和谱域关系,达到了很好的超分辨效果。
3、采用了基于自适应的自回归模型的超分辨率方法,以及细节后处理,使得到的高光谱图像分辨率高,细节丰富。
本发明可以应用的任何波段的高光谱图像。所提出的方法具有很好的实用性,可以广泛的应用到各种现实实例中。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明实施例的基于自适应的自回归模型的高光谱图像超分辨率方法流程图;
图2为本发明实施例采用所提出的发明方法和bi-cubic方法对oil-painting高光谱图像序列做超分辨率放大4倍的结果。
图3为本发明实施例采用所提出的发明方法和bi-cubic方法对balloons高光谱图像序列做超分辨率放大8倍的结果。
具体实施方式
本发明将高光谱图像序列依次的借助一张高分辨的彩色图像进行放大,其中当前波段之前最相似的图像对应的已经超分辨率的图像投影到当前波段用来指导当前波段的放大,充分的考虑了光谱间的关系,并且自回归模型的应用充分考虑到了空间的关系,最后对细节部分的后处理充分的考虑了纹理等信息的恢复,最终实现的超分辨结果具有纹理细节丰富,分辨率更高的特点。
本发明的基于自适应的自回归模型的高光谱图像超分辨率方法,其特征在于:从第一波段的高光谱图像起,依次的借助于高分辨率的彩色图像放大每一波段的图像。对于输入的第i波段图像,寻找其之前相邻最近的三个波段图像中与其相似度最高的图像,然后将最相似的图像对应的已经超分辨率的图像投影到当前波段,得到投影图像。基于该投影图像和高分辨率的彩色图像,经由自适应的自回归模型来实现当前第i波段的图像的超分辨。具体方法包括以下步骤:
1)对于输入的第i波段的高光谱图像,计算与当前波段图像之前相邻最近的三幅图像与
当前波段图像的相似度,具体如下;
S i , j = M × N Σ x | y x hs , i - y x hs , j | - - - ( 1 )
其中,Si,j是第i波段图像和第j波段图像的相似度,
Figure BDA0000388174600000042
Figure BDA0000388174600000043
分别是当前第i波段低分辨高光谱图像yhs,i的第x个像素值和之前第j个波段低分辨高光谱图像yhs,j的第x个像素值。M和N分别是低分辨高光谱图像的维度。在与当前波段图像之前相邻最近的三幅图像中,我们选择相似度Si,j最大的图像作为当前图像的相似图像。
2)选择出与当前波段图像相似度最高的图像,将相似图像对应的已经超分辨的图像投影到当前波段,得到当前波段的一个高分辨率估计图像,具体如下:
Y ~ i = P ( ρ i , j ) · Y j with ρ i , j = y i / y j - - - ( 2 )
其中,
Figure BDA0000388174600000052
是当前i波段图像的高分辨投影图像,Yj是相似图像对应的超分辨后的图像,P(.)是一种将比率矩阵放大到高分辨率图像Yj大小的放大操作,在实际试验中我们采取了bi-cubic的放大方法,yi和yj分别是当前i波段的低分辨图像和其相似图像。
3)基于步骤2)得到的投影图像,以及彩色的高分辨图像构造自回归模型的系数,具体如下:
c m , n = 1 Z m c m , n Y i ~ c m , n X - - - ( 3 )
其中,cm,n是自回归模型的系数,m和n分别是图像点的下标,Zm是一个归一化因子,
Figure BDA0000388174600000055
分别是高光谱项和彩色图像项。
高光谱项是定义在投影得到的图像
Figure BDA0000388174600000056
上,具体如下:
c m , n Y ~ i = exp ( - | | m - n | | 2 2 2 σ 1 2 ) exp ( - ( Y ~ m i - Y ~ n i ) 2 2 σ 2 2 ) - - - ( 4 )
其中,σ1和σ2是两个双边滤波器的系数,用来调节空间距离和光照强度的重要度。
彩色图像项是定义在高分辨的彩色图像X上,具体如下:
Figure BDA0000388174600000058
其中,σ3是指数函数的衰减率,O是彩色图像的彩色空间,在实验实例中,我们采取了RGB空间,⊙代表矩阵元素间的乘法,
Figure BDA0000388174600000059
是一个在彩色图像第l维彩色空间中以m为中心提取w×w大小块的操作,彩色核Cm是在邻域内定义的,具体如下:
C m ( m , n ) = exp ( - Σ l ∈ O ( X m l - X n l ) 2 2 × 3 × σ 4 2 ) - - - ( 6 )
其中,
Figure BDA00003881746000000511
Figure BDA00003881746000000512
分别是彩色图像m和n点处在第l维色彩空间的值,σ4是指数函数的衰减率。
4)基于步骤3)得到的自回归模型系数,采用自适应的自回归模型重构当前波段图像的超分辨图像。
5)对步骤4)得到的超分辨图像,根据彩色的高分辨图像将其细节部分后处理,得到更优化的超分辨结果,具体包括以下步骤:
(1)检测包含图像细节的块,具体如下:
var ( W ) = Σ m = 1 N 1 Σ n = 1 N 2 ( W m , n - ( Σ m = 1 N 1 Σ n = 1 N 2 W m , n N 1 × N 2 ) ) N 1 × N 2 - - - ( 7 )
其中,var(W)是块W的细节丰富度,N1和N2分别是块的大小。我们选择细节丰富度大于阀值T的块为需要后处理的细节块。
(2)对选择出的细节块进行后处理,具体如下:
Figure BDA0000388174600000062
其中,./和⊙分别是矩阵元素间除法和矩阵元素间乘法。
本发明提出了一种基于自适应的自回归模型的高光谱图像超分辨率方法,结合附图及实施例详细说明如下:
实现本发明方法的系统实施例为:oil-painting和balloons公用高光谱图像测试集。通过从第一波段的高光谱图像起,依次的借助于高分辨率的彩色图像放大每一波段的图像,来实现高光谱图像的超分辨率。对于输入的第i波段图像,寻找其之前相邻最近的三个波段图像中与其相似度最高的图像,然后将最相似的图像对应的已经超分辨率的图像投影到当前波段,得到投影图像。基于该投影图像和高分辨率的彩色图像,经由自适应的自回归模型来实现当前第i波段的图像的超分辨。如图1所示,为本发明实施例的自适应的自回归模型的高光谱图像超分辨率方法的流程图,包括以下步骤:
1)对于输入的第i波段的高光谱图像,计算与当前波段图像之前相邻最近的三幅图像与
当前波段图像的相似度,具体如下;
S i , j = M × N Σ x | y x hs , i - y x hs , j | - - - ( 1 )
其中,Si,j是第i波段图像和第j波段图像的相似度,
Figure BDA0000388174600000064
Figure BDA0000388174600000065
分别是当前第i波段低分辨高光谱图像yhs,i的第x个像素值和之前第j个波段低分辨高光谱图像yhs,j的第x个像素值。M和N分别是低分辨高光谱图像的维度。在与当前波段图像之前相邻最近的三幅图像中,我们选择相似度Si,j最大的图像作为当前图像的相似图像。
2)选择出与当前波段图像相似度最高的图像,将相似图像对应的已经超分辨的图像投影到当前波段,得到当前波段的一个高分辨率估计图像,具体如下:
Y ~ i = P ( ρ i , j ) · Y j with ρ i , j = y i / y j - - - ( 2 )
其中,
Figure BDA0000388174600000072
是当前i波段图像的高分辨投影图像,Yj是相似图像对应的超分辨后的图像,P(.)是一种将比率矩阵放大到高分辨率图像Yj大小的放大操作,在实际试验中我们采取了bi-cubic的放大方法,yi和yj分别是当前i波段的低分辨图像和其相似图像。
3)基于步骤2)得到的投影图像,以及彩色的高分辨图像构造自回归模型的系数,具体如下:
c m , n = 1 Z m c m , n Y i ~ c m , n X - - - ( 3 )
其中,cm,n是自回归模型的系数,m和n分别是图像点的下标,Zm是一个归一化因子,分别是高光谱项和彩色图像项。
高光谱项是定义在投影得到的图像
Figure BDA0000388174600000076
上,具体如下:
c m , n Y ~ i = exp ( - | | m - n | | 2 2 2 σ 1 2 ) exp ( - ( Y ~ m i - Y ~ n i ) 2 2 σ 2 2 ) - - - ( 4 )
其中,σ1和σ2是两个双边滤波器的系数,用来调节空间距离和光照强度的重要度。
彩色图像项是定义在高分辨的彩色图像X上,具体如下:
Figure BDA0000388174600000078
其中,σ3是指数函数的衰减率,O是彩色图像的彩色空间,在实验实例中,我们采取了RGB空间,⊙代表矩阵元素间的乘法,
Figure BDA0000388174600000079
是一个在彩色图像第l维彩色空间中以m为中心提取w×w大小块的操作,彩色核Cm是在邻域内定义的,具体如下:
C m ( m , n ) = exp ( - Σ l ∈ O ( X m l - X n l ) 2 2 × 3 × σ 4 2 ) - - - ( 6 )
其中,
Figure BDA00003881746000000711
Figure BDA00003881746000000712
分别是彩色图像m和n点处在第l维色彩空间的值,σ4是指数函数的衰减率。
4)基于步骤3)得到的自回归模型系数,采用自适应的自回归模型重构当前波段图像的超分辨图像。
5)对步骤4)得到的超分辨图像,根据彩色的高分辨图像将其细节部分后处理,得到更优化的超分辨结果,具体包括以下步骤:
(1)检测包含图像细节的块,具体如下:
var ( W ) = Σ m = 1 N 1 Σ n = 1 N 2 ( W m , n - ( Σ m = 1 N 1 Σ n = 1 N 2 W m , n N 1 × N 2 ) ) N 1 × N 2 - - - ( 7 )
其中,var(W)是块W的细节丰富度,N1和N2分别是块的大小。我们选择细节丰富度大于阀值T的块为需要后处理的细节块。
(2)对选择出的细节块进行后处理,具体如下:
Figure BDA0000388174600000082
其中,./和⊙分别是矩阵元素间除法和矩阵元素间乘法。
本实施例对oil-painting高光谱图像序列最终超分辨率放大4倍的结果及与bi-cubic的比较如图2所示,其中,(a)图为原始高分辨率高光谱图像,(b)图为输入的低分辨高光谱图像,(c)图为高分辨率的彩色图像,(d)图为采用bi-cubic方法得到的超分辨率结果;(e)图为采用本发明方法得到的超分辨率结果。
如图3所示,为采用所提出的发明方法与其他方法对balloons高光谱图像序列的超分辨率放大8倍结果的比较。其中,(a)图为原始高分辨率高光谱图像,(b)图为输入的低分辨高光谱图像,(c)图为高分辨率的彩色图像,(d)图为采用bi-cubic方法得到的超分辨率结果;(e)图为采用本发明方法得到的超分辨率结果。
选取与当前波段之前最相似的图像是本发明的一个必要技术特征,没有这个步骤后面步骤无从谈起,本发明是包括选取最相似图像及后续步骤的一个完整的技术方案,这个方案是若干必要技术特征的组合,不会因其中一个或多个必要技术特征被公开而破坏,或者采用以现有技术进行简单替换获得的方法,自当属于本说明书表述的范围之内。

Claims (7)

1.一种基于自适应的自回归模型的高光谱图像超分辨率方法,其特征是,从第一波段的高光谱图像起,依次的借助于高分辨率的彩色图像放大每一波段的图像;对于输入的第i波段图像,寻找其之前相邻最近的三个波段图像中与其相似度最高的图像,然后将最相似的图像对应的已经超分辨率的图像投影到当前波段,得到投影图像;基于该投影图像和高分辨率的彩色图像,经由自适应的自回归模型来实现当前第i波段的图像的超分辨,最终实现所有波段的图像超分辨率。
2.如权利要求1所述的基于自适应的自回归模型的高光谱图像超分辨率方法,其特征是,所述方法进一步细化为包括如下步骤:
1)对于输入的第i波段的高光谱图像,计算与当前波段图像之前相邻最近的三幅图像与当前波段图像的相似度;
2)选择出与当前波段图像相似度最高的图像,将相似图像对应的已经超分辨的图像投影到当前波段,得到当前波段的一个高分辨率估计图像;
3)基于步骤2)得到的投影图像,以及彩色的高分辨图像构造自回归模型的系数;
4)基于步骤3)得到的自回归模型系数,采用自适应的自回归模型重构当前波段图像的超分辨图像;
5)对步骤4)得到的超分辨图像,根据彩色的高分辨图像将其细节部分后处理,得到更优化的超分辨结果。
3.如权利要求1所述的基于自适应的自回归模型的高光谱图像超分辨率方法,其特征是,计算与当前波段图像之前相邻最近的三幅图像与当前波段图像的相似度,具体如下:
S i , j = M × N Σ x | y x hs , i - y x hs , j | - - - ( 1 )
其中,Si,j是第i波段图像和第j波段图像的相似度,
Figure FDA0000388174590000012
分别是当前第i波段低分辨高光谱图像yhs,i的第x个像素值和之前第j个波段低分辨高光谱图像yhs,j的第x个像素值,M和N分别是低分辨高光谱图像的维度,在与当前波段图像之前相邻最近的三幅图像中,选择相似度Si,j最大的图像作为当前图像的相似图像。
将相似图像对应的已经超分辨的图像投影到当前波段,具体如下:
Y ~ i = P ( ρ i , j ) · Y j with ρ i , j = y i / y j - - - ( 2 )
其中,
Figure FDA0000388174590000015
是当前i波段图像的高分辨投影图像,Yj是相似图像对应的超分辨后的图像,P(.)是一种将比率矩阵放大到高分辨率图像Yj大小的放大操作,在实际试验中采取bi-cubic的放大方法,yi和yj分别是当前i波段的低分辨图像和其相似图像。
4.如权利要求2所述的基于自适应的自回归模型的高光谱图像超分辨率方法,其特征是,基于投影图像和彩色高分辨图像构造自回归模型系数,具体如下:
c m , n = 1 Z m c m , n Y i ~ c m , n X - - - ( 3 )
其中,cm,n是自回归模型的系数,m和n是图像点的下标,Zm是一个归一化因子,
Figure FDA0000388174590000021
Figure FDA0000388174590000022
分别是高光谱项和彩色图像项。
5.如权利要求2所述的基于自适应的自回归模型的高光谱图像超分辨率方法,其特征是,高光谱项是定义在投影得到的图像上,具体如下:
c m , n Y ~ i = exp ( - | | m - n | | 2 2 2 σ 1 2 ) exp ( - ( Y ~ m i - Y ~ n i ) 2 2 σ 2 2 ) - - - ( 4 )
其中,σ1和σ2是两个双边滤波器的系数,用来调节空间距离和光照强度的重要度。
6.如权利要求1所述的基于自适应的自回归模型的高光谱图像超分辨率方法,其特征是,彩色图像项是定义在高分辨的彩色图像X上,具体如下:
Figure FDA0000388174590000025
其中,σ3是指数函数的衰减率,O是彩色图像的彩色空间,采取RGB空间,⊙代表矩阵元素间的乘法,
Figure FDA0000388174590000026
是一个在彩色图像第l维彩色空间中以m为中心提取w×w大小块的操作,彩色核Cm是在邻域内定义的,具体如下:
C m ( m , n ) = exp ( - Σ l ∈ O ( X m l - X n l ) 2 2 × 3 × σ 4 2 ) - - - ( 6 )
其中,
Figure FDA0000388174590000029
Figure FDA00003881745900000210
分别是彩色图像m和n点处在第l维色彩空间的值,σ4是指数函数的衰减率。
7.如权利要求2所述的基于自适应的自回归模型的高光谱图像超分辨率方法,其特征是,根据高分辨率的彩色图像对超分辨后的图像进行细节后处理,包括以下步骤:
(1)检测包含图像细节的块,具体如下:
var ( W ) = Σ m = 1 N 1 Σ n = 1 N 2 ( W m , n - ( Σ m = 1 N 1 Σ n = 1 N 2 W m , n N 1 × N 2 ) ) N 1 × N 2 - - - ( 7 )
其中,var(W)是块W的细节丰富度,N1和N2分别是块的大小,选择细节丰富度大于阀值T的块为需要后处理的细节块;
(2)对选择出的细节块进行后处理,具体如下:
Figure FDA0000388174590000031
其中,./和⊙分别是矩阵元素间除法和矩阵元素间乘法。
CN201310451410.3A 2013-09-26 2013-09-26 基于自适应的自回归模型的高光谱图像超分辨率方法 Active CN103530860B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310451410.3A CN103530860B (zh) 2013-09-26 2013-09-26 基于自适应的自回归模型的高光谱图像超分辨率方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310451410.3A CN103530860B (zh) 2013-09-26 2013-09-26 基于自适应的自回归模型的高光谱图像超分辨率方法

Publications (2)

Publication Number Publication Date
CN103530860A true CN103530860A (zh) 2014-01-22
CN103530860B CN103530860B (zh) 2017-05-17

Family

ID=49932843

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310451410.3A Active CN103530860B (zh) 2013-09-26 2013-09-26 基于自适应的自回归模型的高光谱图像超分辨率方法

Country Status (1)

Country Link
CN (1) CN103530860B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104050653A (zh) * 2014-07-07 2014-09-17 西安电子科技大学 基于非负结构稀疏的高光谱图像超分辨率算法
CN108830796A (zh) * 2018-06-20 2018-11-16 重庆大学 基于谱空结合和梯度域损失的高光谱图像超分辨重构方法
CN110310249A (zh) * 2019-05-20 2019-10-08 西北工业大学 用于遥感图像的可视化增强方法
CN110490799A (zh) * 2019-07-25 2019-11-22 西安理工大学 基于自融合卷积神经网络的高光谱遥感影像超分辨率方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009207192A (ja) * 2009-06-15 2009-09-10 Sony Corp 撮像装置、撮像方法、プログラム、及び記録媒体
CN102629373A (zh) * 2012-02-27 2012-08-08 天津大学 基于稀疏表示理论的超分辨率图像获取方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009207192A (ja) * 2009-06-15 2009-09-10 Sony Corp 撮像装置、撮像方法、プログラム、及び記録媒体
CN102629373A (zh) * 2012-02-27 2012-08-08 天津大学 基于稀疏表示理论的超分辨率图像获取方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
RAKESH C.PATEL等: "Super-Resolution of Hyperspectral Images Using Compressive Sensing Based Approach", 《ISPRS ANNALS OF THE PHOTOGRAMMETRY, REMOTE SENSING AND SPATIAL INFORMATION SCIENCES》 *
YONGQIANG ZHAO等: "Hyperspectral imagery super-resolution by sparse representation and spectral regularization", 《EURASIP JOURNAL ON ADVANCES IN SIGNAL PROCESSING》 *
张垚等: "基于稀疏表示的自适应图像超分辨率重建算法", 《计算机应用研究》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104050653A (zh) * 2014-07-07 2014-09-17 西安电子科技大学 基于非负结构稀疏的高光谱图像超分辨率算法
CN104050653B (zh) * 2014-07-07 2017-01-25 西安电子科技大学 基于非负结构稀疏的高光谱图像超分辨率方法
CN108830796A (zh) * 2018-06-20 2018-11-16 重庆大学 基于谱空结合和梯度域损失的高光谱图像超分辨重构方法
CN110310249A (zh) * 2019-05-20 2019-10-08 西北工业大学 用于遥感图像的可视化增强方法
CN110310249B (zh) * 2019-05-20 2020-09-08 西北工业大学 用于遥感图像的可视化增强方法
CN110490799A (zh) * 2019-07-25 2019-11-22 西安理工大学 基于自融合卷积神经网络的高光谱遥感影像超分辨率方法
CN110490799B (zh) * 2019-07-25 2021-09-24 西安理工大学 基于自融合卷积神经网络的高光谱遥感影像超分辨率方法

Also Published As

Publication number Publication date
CN103530860B (zh) 2017-05-17

Similar Documents

Publication Publication Date Title
Arad et al. Ntire 2022 spectral recovery challenge and data set
CN110119780B (zh) 基于生成对抗网络的高光谱图像超分辨重建方法
Liu et al. A spectral grouping and attention-driven residual dense network for hyperspectral image super-resolution
Li et al. Hyperspectral image super-resolution by band attention through adversarial learning
CN108830796B (zh) 基于谱空结合和梯度域损失的高光谱图像超分辨重构方法
CN109102469B (zh) 一种基于卷积神经网络的遥感图像全色锐化方法
WO2024027095A1 (zh) 基于双rgb图像融合的高光谱成像方法、系统及介质
CN108460391B (zh) 基于生成对抗网络的高光谱图像无监督特征提取方法
CN114119444B (zh) 一种基于深度神经网络的多源遥感图像融合方法
Li et al. Hyperspectral pansharpening via improved PCA approach and optimal weighted fusion strategy
CN110428387A (zh) 基于深度学习与矩阵分解的高光谱与全色图像融合方法
CN113420838B (zh) 基于多尺度注意力特征融合的sar与光学图像分类方法
CN103455988B (zh) 基于结构自相似性与稀疏表示的超分辨率图像重构方法
CN102609930B (zh) 一种基于多方向梯度场的图像融合方法
CN101556690A (zh) 基于词典学习和稀疏表示的超分辨率算法
CN112819910A (zh) 基于双鬼注意力机制网络的高光谱图像重建方法
CN103530860B (zh) 基于自适应的自回归模型的高光谱图像超分辨率方法
CN109711466B (zh) 一种基于边缘保留滤波的cnn高光谱图像分类方法
CN113139904B (zh) 一种图像盲超分辨率方法及系统
CN112819737A (zh) 基于3d卷积的多尺度注意力深度卷积网络的遥感图像融合方法
CN113870124B (zh) 基于弱监督的双网络互激励学习阴影去除方法
CN116309070A (zh) 一种高光谱遥感图像超分辨率重建方法、装置及计算机设备
Liu et al. Research on super-resolution reconstruction of remote sensing images: A comprehensive review
Yu et al. Decolorization algorithm based on contrast pyramid transform fusion
Thuan et al. Edge-focus thermal image super-resolution using generative adversarial network

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220402

Address after: 210000 room 1805, building C, Xingzhi science and Technology Park, Xingzhi Road, Nanjing Economic and Technological Development Zone, Jiangsu Province

Patentee after: Nanjing Tupo Technology Co.,Ltd.

Address before: 300072 Tianjin City, Nankai District Wei Jin Road No. 92

Patentee before: Tianjin University