CN114841860A - 一种基于拉普拉斯金字塔网络的高光谱遥感图像超分辨率方法 - Google Patents

一种基于拉普拉斯金字塔网络的高光谱遥感图像超分辨率方法 Download PDF

Info

Publication number
CN114841860A
CN114841860A CN202210518113.5A CN202210518113A CN114841860A CN 114841860 A CN114841860 A CN 114841860A CN 202210518113 A CN202210518113 A CN 202210518113A CN 114841860 A CN114841860 A CN 114841860A
Authority
CN
China
Prior art keywords
resolution
image
super
spectral
training
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210518113.5A
Other languages
English (en)
Other versions
CN114841860B (zh
Inventor
崔梦天
李裕岚
郭曌阳
苗加庆
赵海军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southwest Minzu University
Original Assignee
Southwest Minzu University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southwest Minzu University filed Critical Southwest Minzu University
Priority to CN202210518113.5A priority Critical patent/CN114841860B/zh
Publication of CN114841860A publication Critical patent/CN114841860A/zh
Application granted granted Critical
Publication of CN114841860B publication Critical patent/CN114841860B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/048—Activation functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/58—Extraction of image or video features relating to hyperspectral data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G06V20/194—Terrestrial scenes using hyperspectral data, i.e. more or other wavelengths than RGB
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A40/00—Adaptation technologies in agriculture, forestry, livestock or agroalimentary production
    • Y02A40/10—Adaptation technologies in agriculture, forestry, livestock or agroalimentary production in agriculture

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Biophysics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Multimedia (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Remote Sensing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及一种基于拉普拉斯金字塔结构的高光谱遥感图像超分辨率方法，所述超分辨率方法包括：首先，对高光谱图像数据集进行裁剪和下采样，构成低分辨率图像和高分辨图像对。然后构建包括级联的光谱‑空间模块，层注意力模块及上采样模块的超分辨率网络，并进行训练。最后利用训练好的模型对测试图像进行超分辨率处理，得到高分辨率高光谱图像。本发明通过串联多个光谱‑空间特征提取模块，使用多种注意力机制，充分利用光谱特征之间的空间信息和相关性。同时引入渐进式上采样框架，并在网络中共享参数，降低训练难度，提高网络性能。对三个公开的高光谱数据集的评估表明，本文提出的模型在常用的客观指标上取得了良好的表现。

Description

一种基于拉普拉斯金字塔网络的高光谱遥感图像超分辨率 方法
技术领域
本发明涉及高光谱遥感图像处理领域，尤其是一种基于拉普拉斯金字塔的高光谱遥感图像超分辨率方法。
背景技术
高光谱影像(hyperspectral image,HSI)数据的获得是由航天飞机,遥感卫星,无人机,实验室成像设备等高光谱传感器从矿物,植被,森林,城市,农作物,食品,材料等区域或物品的反射光谱中采集数十,数百甚至上千狭窄且连续的光谱波段所生成的反射率影像组,通常高光谱成像传感器光谱响应范围是350nm～2500nm.高光谱影像数据具有获得连续波段影像的优点,因此对差异较小的不同地物特征而言捕获的图像包含丰富的空间和光谱信息。高光谱图像(HSI)不仅可以通过图像的形状和结构的不同来判别不同的地物结构,还可以通过光谱特性的不同来判别地物特征,因此可以广泛应用于分类，目标检测等领域.但由于卫星距地面遥远因此高光谱遥感影像具有成像波段范围越窄,成像传感器所需光能量就越多导致成像所需的地表覆盖范围就越大.相反,波段范围越宽,单位内地面物体反射的光能量就越多,地面上较小的区域就可以对应于传感器上的一个像素点,因此高光谱影像的空间分辨率相对较低.由于高光谱遥感影像处理领域的很多应用都需要高分辨率的高光谱影像,因此如何得到包含更多地物特征信息的高分辨率的高光谱遥感影像是一个重要研究内容。
发明内容
本发明的目的在于：针对现有高分辨率高光谱遥感图像获得困难，高光谱遥感图像超分辨率网络难以训练、性能低等问题，提供了一种基于拉普拉斯金字塔的高光谱遥感图像超分辨率方法，以解决目前高光谱遥感图像超分辨率技术存在的不足。
为解决上述的问题，本发明采用的一个技术方案是：提出一种基于拉普拉斯金字塔的高光谱遥感图像超分辨率方法，所述超分辨率方法包括以下步骤：
S1：构建训练集、验证集和测试集：首先对图像进行中心部分提取，再提取图像顶部区域作为测试子图像，剩余部分为训练子图像。对训练子图像采用128×128的滑动框进行裁剪，滑动框的重叠率为50％，得到的数据作为训练集，并在训练集中随机选择10％作为验证集；对测试子图像采用256x256的滑动框进行无重叠裁剪，得到的数据作为测试集。
S2：构建超分辨率模型：所构建的超分辨率模型m_1由多级金字塔组成，每级金字塔包含两个分支：特征提取分支和重建分支。首先图像被同时输入第一级金字塔的特征提取分支和重建分支，在特征提取分支通过光谱-空间特征提取模块和层注意力模块，得到深层特征图，再输入上采样模块，得到放大的特征图，然后与重建分支中通过反卷积直接放大得到的特征图相加作为下一级金字塔的输入。在最后一级金字塔中，特征提取分支与重建分支相加的结果作为模型的输出。
S3：模型训练：将S1中处理好的训练集输入S2构建的超分辨率模型m_1中训练，训练采用Adam优化器，通过最小化损失函数来得到最优网络权重，最终得到训练好的超分辨率模型m_2.
S4：图像重建：将低分辨率高光谱遥感图像输入到训练好的超分辨率模型m_2中，模型的输出是对应的高分辨率高光谱遥感图像。
步骤S2所述的光谱-空间特征提取模块由2部分组成，前半部分是6个的3x3卷积层，然后通过通道注意力提取光谱特征；后半部分是一个Non-local自注意力模块，通过考虑所有位置特征的加权来获得非局部的信息。通道注意力可以由以下计算公式给出：
s＝f(WUδ(WDHGP([X]))) (1)
Figure BDA0003640578310000021
式(1)中X＝[x1,...,xc,...xC]为输入，HGP为全局平均池化函数，f(·)和δ(·)分别为sigmoid函数和ReLU函数，WD和WU为卷积层，对通道进行比例为r的放缩。式(2)中sc和xc分别为第c个通道的缩放因子和特征图。不同波段通过通道注意力被自适应地缩放。
Non-local自注意力机制可以定义为：
Figure BDA0003640578310000022
式(3)中i为计算响应的输出位置的索引，j列举所有位置的索引，x和y分别为非局部操作的输入和输出，C(x)为归一化常数，本发明设置C(x)为输入x的位置数目，成对函数f(xi,xj)计算xi和xj的关系，函数g(xj)计算在位置j处输入信号的表示。
步骤S2所述的层注意力模块的输入是N个光谱-空间特征提取模块中提取的中间特征组FGs，维度为N×H×W×C，然后将中间特征组FGs重塑为N×HWC的二维矩阵，并应用矩阵乘法与相应的转置相乘来计算不同层之间的相关性
Figure BDA0003640578310000023
Figure BDA0003640578310000024
式(4)中δ(·)和
Figure BDA0003640578310000025
分别表示SoftMax和reshape操作，wi,j表示第i个和第j个特征组之间的相关指数。最后将重构的中间特征组FGs和带比例因子的预测相关矩阵相乘，并加上中间特征组FGs。
步骤S2所述的上采样模块由亚像素卷积组成，通过卷积和多通道间的重组得到高分辨率的特征图。
步骤S3所述的损失函数是在L1损失的基础上，引入空间光谱总变量和光谱角匹配的复合损失函数，可以由以下公式给出：
Lttotal(Θ)＝L1+αLSSTV+λLSAM (5)
Figure BDA0003640578310000026
Figure BDA0003640578310000027
Figure BDA0003640578310000028
式(5)中的L1，LSSTV和LSAM分别为L1损失，空间光谱总变量损失和光谱角匹配损失。式(6)中
Figure BDA0003640578310000029
和
Figure BDA00036405783100000210
分别代表Ground Truth图像和超分辨率结果图像。式(7)中
Figure BDA00036405783100000211
是计算
Figure BDA00036405783100000212
中的水平、垂直和光谱梯度。λ,α是预定义的平衡系数。
本发明的有益效果是：所设计的网络串联了多个光谱-空间特征提取模块，使用了多种注意力机制，充分利用光谱特征之间的空间信息和相关性。此外，针对高光谱数据维度高、难以训练的问题，引入渐进式上采样框架，并在网络中共享参数，可以减少模型的参数。
附图说明
图1为本发明方法的流程示意图
图2为本发明网络模型的结构示意图
图3为光谱-空间模块的结构图
图4为通道注意力的结构图
图5为non-local自注意力模块的结构图
图6为层注意力模块的结构图
图7为Chikusei数据集上的测试结果
图8为Pavia Center数据集上的测试结果
图9为Washington DC数据集上的测试结果
具体实施方式
下面结合附图和实施例对本发明进一步说明，本发明包括但不限于下述实例。
如图1所示，本发明提供了一种基于拉普拉斯金字塔的的高光谱遥感图像的超分辨率方法，其具体实现过程如下：
S1.构建训练、验证和测试数据。
首先对图像进行中心部分提取，再提取图像顶部区域作为测试子图像，剩余部分为训练子图像。对训练子图像采用128×128的滑动框进行裁剪，滑动框的重叠率为50％，得到的数据作为训练集，并在训练集中随机选择10％作为验证集；对测试子图像采用256x256的滑动框进行无重叠裁剪，得到的数据作为测试集。并采用上下翻转、多角度旋转的图像增强。
S2.构建超分辨率网络模型。
如图2所示，本发明构建了用于高光谱遥感图像的超分辨率网络模型m_1，能够通过网络模型得到高分辨率图像。所构建的超分辨率模型m_1由多级金字塔组成，每级金字塔包含两个分支：特征提取分支和重建分支。首先图像被同时输入第一级金字塔的特征提取分支和重建分支，在特征提取分支通过光谱-空间特征提取模块和上采样模块，得到放大的特征图，然后与重建分支中通过反卷积直接放大得到的特征图相加作为下一级金字塔的输入。在最后一级金字塔中，特征提取分支与重建分支相加的结果作为模型的输出。
S201.光谱-空间特征提取模块。
该模块由2部分组成，前半部分是6个的3x3卷积层，然后通过通道注意力提取光谱特征；后半部分是一个Non-local自注意力模块，通过考虑所有位置特征的加权来获得非局部的信息。通道注意力可以由以下计算公式给出：
s＝f(WUδ(WDHGP([X]))) (9)
Figure BDA0003640578310000031
式(9)中X＝[x1,...,xc,...xC]为输入，HGP为全局平均池化函数，f(·)和δ(·)分别为sigmoid函数和ReLU函数，WD和WU为卷积层，对通道进行比例为r的放缩。式(10)中sc和xc分别为第c个通道的缩放因子和特征图。不同波段通过通道注意力被自适应地缩放。
Non-local自注意力机制可以定义为：
Figure BDA0003640578310000041
式(11)中i为计算响应的输出位置的索引，j列举所有位置的索引，x和y分别为非局部操作的输入和输出，C(x)为归一化常数，本发明设置C(x)为输入x的位置数目，成对函数f(xi,xj)计算xi和xj的关系，函数g(xj)计算在位置j处输入信号的表示。
S202.层注意力模块。
该模块的输入是N个光谱-空间特征提取模块中提取的中间特征组FGs，维度为N×H×W×C，然后将中间特征组FGs重塑为N×HWC的二维矩阵，并应用矩阵乘法与相应的转置相乘来计算不同层之间的相关性
Figure BDA0003640578310000042
Figure BDA0003640578310000043
式(12)中δ(·)和
Figure BDA0003640578310000044
分别表示SoftMax和reshape操作，wi,j表示第i个和第j个特征组之间的相关指数。最后将重构的中间特征组FGs和带比例因子的预测相关矩阵相乘，并加上中间特征组FGs。
S3.模型训练。
将S1中处理好的训练集输入S2构建的模型m_1中训练，训练采用Adam优化器，通过最小化损失函数来得到最优网络权重，最终得到训练好的超分辨率网络模型m_2.
S301.损失函数。
损失函数是在L1损失的基础上，引入空间光谱总变量和光谱角匹配的复合损失函数，可以由以下公式给出：
Lttotal(Θ)＝L1+αLSSTV+λLSAM (13)
Figure BDA0003640578310000045
Figure BDA0003640578310000046
Figure BDA0003640578310000047
式(13)中的L1，LSSTV和LSAM分别为L1损失，空间光谱总变量损失和光谱角匹配损失。式(14)中
Figure BDA0003640578310000048
和
Figure BDA0003640578310000049
分别代表Ground Truth图像和超分辨率结果图像。式(15)中
Figure BDA00036405783100000410
是计算
Figure BDA00036405783100000411
中的水平、垂直和光谱梯度。λ,α是预定义的平衡系数。
S4.图像重建。
图像重建：将低分辨率高光谱遥感图像输入到训练好的超分辨率网络模型m_2中，模型的输出是对应的高分辨率高光谱遥感图像。
为验证本发明的有效性，使用3个公开的高光谱图像数据集进行对比实验，评价指标采用PSNR,SSIM,RMSE,SAM和ERGAS。
表1-3为在不同数据集上的实验结果，表中粗体表示最好的结果，下划线表示次佳的结果。由表1可知，本文所提出的Lap-SSPN算法在所有评价指标上都优于其他算法,在放大尺寸为4和8时,该方法的PSNR分别高于次佳的方法1.3DB和0.25DB以上.RCAN和SAN的结果大部分都仅次于本文提出的方法,这可能是因为RCAN和SAN都使用了注意力机制,能够很好地捕捉高光谱图像的光谱特征.本文与LapSRN一样使用拉普拉斯金字塔结构,对图像进行渐进式上采样,从结果可以看出,在针对高光谱图像时,本文提出的方法表现更好.DeepPrior是一种针对高光谱图像所提出的方法,但是该方法是通过迭代来获得高分辨率图像，调整结果需要很长时间。
表2给出了在Pavia数据集上所有比较算法的2张测试图像的平均性能，可以看到本文所提出的方法基本在所有评价指标上都有最优的表现，尤其是在PSNR评价指标上表现最优。在放大尺寸为4和8时，Lap-SSFN都优于次优算法1.9DB.
表3给出了在Washington DC数据集上所有比较算法的2张测试图像的平均性能，可以看到本数据集在所有方法上PSNR的表现都比较好，这可能是由于测试图像中有大约1/5的图像为黑色，影响了整体的评价。可以由表中看出，本文所提出的方法在d＝4时表现较好，在大部分指标上都有最优表现，尤其是在PSNR评价指标上表现最优，在d＝8时表现比d＝4时略差，综合三个数据集考虑，本文提出的模型可能在线条纹理多的数据上表现更好。
表1在Chikusei上的结果
Figure BDA0003640578310000051
表2在Pavia Center上的结果
Figure BDA0003640578310000052
Figure BDA0003640578310000061
表3在Washington DC上的结果
Figure BDA0003640578310000062
以上所述仅是本发明的优选实施方式，应当理解本发明并非局限于本文所披露的形式，不应看作是对其他实施例的排除，而可用于各种其他组合、修改和环境，并能够在本文所述构想范围内，通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围，则都应在本发明所附权利要求的保护范围内。

Claims (1)

1.一种基于拉普拉斯金字塔的高光谱遥感图像超分辨率方法，其特征在于，所述超分辨率方法包括以下步骤：
S1：构建训练集、验证集和测试集：首先对图像进行中心部分提取，再提取图像顶部区域作为测试子图像，剩余部分为训练子图像。对训练子图像采用128×128的滑动框进行裁剪，滑动框的重叠率为50％，得到的数据作为训练集，并在训练集中随机选择10％作为验证集；对测试子图像采用256x256的滑动框进行无重叠裁剪，得到的数据作为测试集。
S2：构建超分辨率模型：所构建的超分辨率模型m_1由多级金字塔组成，每级金字塔包含两个分支：特征提取分支和重建分支。首先图像被同时输入第一级金字塔的特征提取分支和重建分支，在特征提取分支通过光谱-空间特征提取模块和层注意力模块，得到深层特征图，再输入上采样模块，得到放大的特征图，然后与重建分支中通过反卷积直接放大得到的特征图相加作为下一级金字塔的输入。在最后一级金字塔中，特征提取分支与重建分支相加的结果作为模型的输出。
S3：模型训练：将S1中处理好的训练集输入S2构建的超分辨率模型m_1中训练，训练采用Adam优化器，通过最小化损失函数来得到最优网络权重，最终得到训练好的超分辨率模型m_2.
S4：图像重建：将低分辨率高光谱遥感图像输入到训练好的超分辨率模型m_2中，模型的输出是对应的高分辨率高光谱遥感图像。
步骤S2所述的光谱-空间特征提取模块由2部分组成，前半部分是6个的3x3卷积层，然后通过通道注意力提取光谱特征；后半部分是一个Non-local自注意力模块，通过考虑所有位置特征的加权来获得非局部的信息。通道注意力可以由以下计算公式给出：
s＝f(WUδ(WDHGP([X]))) (1)
Figure FDA0003640578300000014
式(1)中X＝[x1,...,xc,...xC]为输入，HGP为全局平均池化函数，f(·)和δ(·)分别为sigmoid函数和ReLU函数，WD和WU为卷积层，对通道进行比例为r的放缩。式(2)中sc和xc分别为第c个通道的缩放因子和特征图。不同波段通过通道注意力被自适应地缩放。
Non-local自注意力机制可以定义为：
Figure FDA0003640578300000011
式(3)中i为计算响应的输出位置的索引，j列举所有位置的索引，x和y分别为非局部操作的输入和输出，C(x)为归一化常数，本发明设置C(x)为输入x的位置数目，成对函数f(xi,xj)计算xi和xj的关系，函数g(xj)计算在位置j处输入信号的表示。
步骤S2所述的层注意力模块的输入是N个光谱-空间特征提取模块中提取的中间特征组FGs，维度为N×H×W×C，然后将中间特征组FGs重塑为N×HWC的二维矩阵，并应用矩阵乘法与相应的转置相乘来计算不同层之间的相关性
Figure FDA0003640578300000012
Figure FDA0003640578300000013
式(4)中δ(·)和
Figure FDA0003640578300000015
分别表示SoftMax和reshape操作，wi,j表示第i个和第j个特征组之间的相关指数。最后将重构的中间特征组FGs和带比例因子的预测相关矩阵相乘，并加上中间特征组FGs。
步骤S2所述的上采样模块由亚像素卷积组成，通过卷积和多通道间的重组得到高分辨率的特征图。
步骤S3所述的损失函数是在L1损失的基础上，引入空间光谱总变量和光谱角匹配的复合损失函数，可以由以下公式给出：
Lttotal(Θ)＝L1+αLSSTV+λLSAM (5)
Figure FDA0003640578300000021
Figure FDA0003640578300000022
Figure FDA0003640578300000023
式(5)中的L1，LSSTV和LSAM分别为L1损失，空间光谱总变量损失和光谱角匹配损失。式(6)中
Figure FDA0003640578300000024
和
Figure FDA0003640578300000025
分别代表Ground Truth图像和超分辨率结果图像。式(7)中
Figure FDA0003640578300000026
是计算
Figure FDA0003640578300000027
中的水平、垂直和光谱梯度。λ,α是预定义的平衡系数。
CN202210518113.5A 2022-05-12 2022-05-12 一种基于拉普拉斯金字塔网络的高光谱遥感图像超分辨率方法 Active CN114841860B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210518113.5A CN114841860B (zh) 2022-05-12 2022-05-12 一种基于拉普拉斯金字塔网络的高光谱遥感图像超分辨率方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210518113.5A CN114841860B (zh) 2022-05-12 2022-05-12 一种基于拉普拉斯金字塔网络的高光谱遥感图像超分辨率方法

Publications (2)

Publication Number Publication Date
CN114841860A true CN114841860A (zh) 2022-08-02
CN114841860B CN114841860B (zh) 2022-11-25

Family

ID=82569121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210518113.5A Active CN114841860B (zh) 2022-05-12 2022-05-12 一种基于拉普拉斯金字塔网络的高光谱遥感图像超分辨率方法

Country Status (1)

Country Link
CN (1) CN114841860B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115587949A (zh) * 2022-10-27 2023-01-10 贵州大学 一种基于可见光图像的农业多光谱视觉重构方法
CN115810139A (zh) * 2022-12-16 2023-03-17 西北民族大学 一种spect图像的目标区域识别方法及系统
CN116310572A (zh) * 2023-03-23 2023-06-23 齐齐哈尔大学 金字塔多尺度卷积和自注意力结合的高光谱图像分类方法
CN116777768A (zh) * 2023-05-25 2023-09-19 珠海移科智能科技有限公司 一种鲁棒且高效的扫描文档图像增强方法及其装置
CN116777768B (zh) * 2023-05-25 2024-05-31 珠海移科智能科技有限公司 一种鲁棒且高效的扫描文档图像增强方法及其装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109544448A (zh) * 2018-11-09 2019-03-29 浙江工业大学 一种拉普拉斯金字塔结构的团网络超分辨率图像重建方法
CN110473144A (zh) * 2019-08-07 2019-11-19 南京信息工程大学 一种基于拉普拉斯金字塔网络的图像超分辨率重建方法
CN111161141A (zh) * 2019-11-26 2020-05-15 西安电子科技大学 基于频带间注意力机制对抗学习高光谱单图超分辨率方法
CN113902622A (zh) * 2021-11-08 2022-01-07 西北工业大学 基于深度先验联合注意力的光谱超分辨率方法
CN114186234A (zh) * 2021-12-16 2022-03-15 西南民族大学 基于轻量级网络ESPNet的恶意代码检测算法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109544448A (zh) * 2018-11-09 2019-03-29 浙江工业大学 一种拉普拉斯金字塔结构的团网络超分辨率图像重建方法
CN110473144A (zh) * 2019-08-07 2019-11-19 南京信息工程大学 一种基于拉普拉斯金字塔网络的图像超分辨率重建方法
CN111161141A (zh) * 2019-11-26 2020-05-15 西安电子科技大学 基于频带间注意力机制对抗学习高光谱单图超分辨率方法
CN113902622A (zh) * 2021-11-08 2022-01-07 西北工业大学 基于深度先验联合注意力的光谱超分辨率方法
CN114186234A (zh) * 2021-12-16 2022-03-15 西南民族大学 基于轻量级网络ESPNet的恶意代码检测算法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
YIQUN MEI等: "Image Super-Resolution with Non-Local Sparse Attention", 《COMPUTER VISION FOUNDATION》 *
YULUN ZHANG等: "RESIDUAL NON-LOCAL ATTENTION NETWORKS FOR IMAGE RESTORATION", 《ICLR 2019》 *
张澎等: "基于深度卷积生成对抗网络的植物图像识别方法的研究", 《西南民族大学学报(自然科学版)》 *
欧阳宁等: "结合感知边缘约束与多尺度融合网络的图像超分辨率重建方法", 《计算机应用》 *
胡高鹏等: "基于深度渐进式反投影注意力网络的图像超分辨率重建", 《计算机应用》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115587949A (zh) * 2022-10-27 2023-01-10 贵州大学 一种基于可见光图像的农业多光谱视觉重构方法
CN115810139A (zh) * 2022-12-16 2023-03-17 西北民族大学 一种spect图像的目标区域识别方法及系统
CN115810139B (zh) * 2022-12-16 2023-09-01 西北民族大学 一种spect图像的目标区域识别方法及系统
CN116310572A (zh) * 2023-03-23 2023-06-23 齐齐哈尔大学 金字塔多尺度卷积和自注意力结合的高光谱图像分类方法
CN116310572B (zh) * 2023-03-23 2024-01-23 齐齐哈尔大学 金字塔多尺度卷积和自注意力结合的高光谱图像分类方法
CN116777768A (zh) * 2023-05-25 2023-09-19 珠海移科智能科技有限公司 一种鲁棒且高效的扫描文档图像增强方法及其装置
CN116777768B (zh) * 2023-05-25 2024-05-31 珠海移科智能科技有限公司 一种鲁棒且高效的扫描文档图像增强方法及其装置

Also Published As

Publication number Publication date
CN114841860B (zh) 2022-11-25

Similar Documents

Publication Publication Date Title
CN114841860B (zh) 一种基于拉普拉斯金字塔网络的高光谱遥感图像超分辨率方法
Li et al. Hyperspectral image super-resolution using deep convolutional neural network
Xie et al. Hyperspectral image super-resolution using deep feature matrix factorization
CN109727207B (zh) 基于光谱预测残差卷积神经网络的高光谱图像锐化方法
CN111709882B (zh) 基于亚像素卷积与特征分割的超分辨率融合的计算方法
CN111914909B (zh) 基于空谱联合三方向卷积网络的高光谱变化检测方法
CN111161141B (zh) 基于频带间注意力机制对抗学习高光谱单图超分辨率方法
He et al. DsTer: A dense spectral transformer for remote sensing spectral super-resolution
Mei et al. Hyperspectral image super-resolution via convolutional neural network
CN113327218A (zh) 一种基于级联网络的高光谱与全色图像融合方法
Liu et al. An efficient residual learning neural network for hyperspectral image superresolution
Wang et al. Dilated projection correction network based on autoencoder for hyperspectral image super-resolution
Li et al. Progressive split-merge super resolution for hyperspectral imagery with group attention and gradient guidance
Hu et al. Hyperspectral image super resolution based on multiscale feature fusion and aggregation network with 3-D convolution
CN110111276B (zh) 基于空-谱信息深度利用的高光谱遥感影像超分辨率方法
CN115565045A (zh) 基于多尺度空谱变换的高光谱与多光谱图像融合方法
Deng et al. Multiple frame splicing and degradation learning for hyperspectral imagery super-resolution
Gendy et al. Balanced spatial feature distillation and pyramid attention network for lightweight image super-resolution
CN113744134B (zh) 基于光谱解混卷积神经网络的高光谱图像超分辨方法
CN113205453B (zh) 一种基于空间-光谱全变分正则化的高光谱融合方法
CN108335265B (zh) 一种基于样本学习的快速图像超分辨率重建方法及装置
Liang et al. Blind super-resolution of single remotely sensed hyperspectral image
CN114511470B (zh) 一种基于注意力机制的双分支全色锐化方法
CN114862976A (zh) 一种用于旋转衍射的多光谱图像重建方法
CN113781311A (zh) 一种基于生成对抗网络的图像超分辨率重建方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant