CN113538236A - 一种基于生成对抗网络的图像超分辨率重构方法 - Google Patents

一种基于生成对抗网络的图像超分辨率重构方法 Download PDF

Info

Publication number
CN113538236A
CN113538236A CN202110736530.2A CN202110736530A CN113538236A CN 113538236 A CN113538236 A CN 113538236A CN 202110736530 A CN202110736530 A CN 202110736530A CN 113538236 A CN113538236 A CN 113538236A
Authority
CN
China
Prior art keywords
image
picture
network
resolution
attention
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202110736530.2A
Other languages
English (en)
Inventor
颜成钢
方运志
姚婷婷
孙垚棋
张继勇
李宗鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Dianzi University
Original Assignee
Hangzhou Dianzi University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Dianzi University filed Critical Hangzhou Dianzi University
Priority to CN202110736530.2A priority Critical patent/CN113538236A/zh
Publication of CN113538236A publication Critical patent/CN113538236A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4053Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于生成对抗网络的图像超分辨率重构方法。对目标图像进行预处理,提供GAN网络训练所需的图片信息;设计好GAN网络金字塔,使得网络可以以自监督的方式,从低分辨率到高分辨率不断的重建出逼近真实图像的虚假图像;在重构出原来分辨率大小的虚假图像的基础上,按照所需分辨率进行上采样;再次输入到原始分辨率的GAN网络层中进行迭代训练,得到超分辨图像。本发明采用注意力关注机制和自监督训练的方式重构图像,网络可在训练过程中根据需求调节对图片不同区域的关注度,生成更加逼真的重构图;同时自监督的方式在提升网络训练效果的同时避免了人工标注等繁杂操作,也杜绝了由于人工标注信息不准确对训练效果的影响。

Description

一种基于生成对抗网络的图像超分辨率重构方法
技术领域
本发明涉及到图像处理领域,具体来说是利用深度学习中生成对抗网络技术,实现图像超分辨率重构的一种方法。
背景技术
长久以来,图像的超分辨率(Super-Resolution,简称SR)重构是图像处理领域中颇受关注的一个问题。具体来说,给定一张(或一系列)低分辨率的图像,利用相关算法或者硬件设备进行处理,提高图像的分辨率,得到一张清晰的高分辨率图像。随着深度学习领域的兴起,利用神经网络模型来处理低分辨率图片逐渐成为了颇受欢迎的方法,相较于传统的重构方法,基于深度学习方法的图像超分辨率重构具有成本低、效果好、重建质量高等优点,在医疗成像、卫星图像等诸多领域都具有广泛的应用前景。
本文采用深度学习领域中生成对抗网络(GAN)的思想和模型来完成图像的超分辨率重构,在成像过程中没有在原始图像上采用“临近插值”等方法粗略的提高图像的分辨率。在原理上该方法利用了“零和博弈”的思想,它主要包含有图像生成器(Generator,简称G)和图像判别器(Discriminator,简称D)两个部分。其中生成器G的输入初始化为一张随机采样的噪声图像,通过生成器G处理映射,得到一张虚假图像,虚假图像的维度大小和真实图像相同。然后把虚假图像和真实图像分别输入到判别器D中判断真假,判别器D的输出范围为0~1。通过优化函数(具体见下节内容)约束,使得网络自动调整生成器G和判别器D的网络参数,使得判别器能够尽可能识别出输入图像的真伪,当输入真实图像,判别器输入尽可能接近1,否则接近0;对于生成器而言,则是最大限度的“欺骗”判别器,在多次的对抗训练过程中,生成器和判别器性能不断提高,构造出的虚假图像不断接近真实图像,直至难以判断真假。
不同于利用数据集来优化网络模型的训练方法,本方法中利用GAN网络金字塔的思想,训练单张输入图片。对于输入的真实图像不断进行下采样处理,得到一系列低分辨率图片。从最低分辨率开始,经过对应的GAN网络层处理训练,得到逼真的虚假图像。然后将所得结果上采样输入到上层的网络中,与该层的高分辨率真实图像在该网络层进一步训练,得到更高分辨率的虚假图像。为提高网络的训练效果,本方法在网络中引入了卷积块注意力机制,将网络的训练重点关注在图像中我们所需要的信息,有利用提升图像训练效果;此外,由于训练过程中缺乏标记的监督信息,单纯使用无监督网络进行训练达不到理想效果,而人为添加标签信息既会增加成本也可能导致网络因标签信息不合理导致模型“恶化”。为解决这个问题,本文在网络中使用自监督的方法对网络进行校正改善:即在判别器中对每层网络输入的真实图像进行特征交换操作,即:当输入真实图像时,经过判别器提取特征后,对于提取的特征图fea,复制得到feacopy。选择feacopy中不同空间位置如(i,j)和(j,i)处的特征进行空间位置交换,把fea和feacopy都输入判别器,判断图像是否为真实图像以及是否进行了特征交换。通过这种方法可以在不加入人工标签的前提下,使得网络以自我监督的方式训练优化。
发明内容
本发明关注于如何根据低分辨率图像重构出对应的高分辨率图像这一问题,提出了一种基于生成对抗网络的图像超分辨率重构方法。首先是对图像进行下采样处理,可以获取真实图像的一系列低分辨率图片集;然后GAN网络从低分辨率图像开始训练,生成对应的虚假图像,引入优化函数反应虚假图像和真实图像的差距。根据优化函数结果自动调节网络参数,迭代多次,直至虚假图像逼近真实图像;然后,将最后生成的虚假图像上采样后加入噪声,输入到上一层训练网络中,与该层的真实图像一起迭代训练,得到更高分辨率的虚假图像直至重构出与未采样前真实图像相同分辨率大小的虚假图像;最后,按照需要的超分辨率值对图像进一步上采样,叠加噪声输入至原始图像分辨率的GAN网络层中迭代训练,得到所需要的超分辨率图像。整个训练过程主要包含部分:
第一方面是对目标图像的预处理,提供GAN网络训练所需的图片信息;第二方面是设计好GAN网络金字塔,使得网络可以以自监督的方式,从低分辨率到高分辨率不断的重建出逼近真实图像的虚假图像;第三方面则是在重构出原来分辨率大小的虚假图像的基础上,按照所需分辨率进行上采样;再次输入到原始分辨率的GAN网络层中进行迭代训练,得到超分辨图像。
一种基于生成对抗网络的图像超分辨率重构方法,步骤如下:
步骤1:图像的预处理。
给定一张RGB的自然图像RI,首先按照确定的降采样参数α不断的对图像进行降采样处理,获得一个关于RI的不同分辨率的图像数据集RIj(0≤j≤n)。
步骤2:从最低分辨率图像开始,输入到对应的网络层GANj进行训练。在GANj网络中,生成器G包括五层的神经网络卷积块,除最后一层外每层神经网络卷积块后连接注意力卷积块。其中,神经网络卷积块由卷积-归一化-激活函数组成,用于完成图像中特征信息的提取和处理,得到特征图;注意力卷积块在特征图中填加了注意力机制,调整网络对特征图不同位置和不同通道的关注权重,对于生成结果通过优化函数提高生成虚假图片的逼真程度,即使得其输入判别器时,结果接近1。
步骤3:将生成的虚假图片和真实图片都输入到判别器D当中,判别器D结构和生成器G相同,但是判别器的最后一层神经网络卷积块采用不同的激活函数Sigmoid,使得最终输出值范围为(0~1),判别器目标为:(1)判断输入图片的真假;(2)输入真实图片时,判断该真实图片是否为进行了特征交换操作。
步骤4:多次重复迭代训练该层GANj网络,使得生成的虚假图片逼近真实图片。
步骤5:对步骤4所得图片上采样,采样率与降采样处理一致,输入至上层即分辨率更高一层的GANj-1网络中加入随机噪声,重复步骤2~4,直至训练生成良好的更高分辨率的虚假图片。
步骤6:不断重复步骤5,直至生成和原始真实图片相同分辨率的逼真的虚假图片。
步骤7:按照预定的超分辨率参数λ,对步骤6最终生成的虚假图片进行超分辨率上采样,采样结果加入噪声后,重新输入到最高层的GAN0网络,按照步骤2~4,训练得到所需的超分辨率图片。
本发明有益效果如下:
本发明采用注意力关注机制和自监督训练的方式重构图像,网络可在训练过程中根据需求调节对图片不同区域的关注度,生成更加逼真的重构图;同时自监督的方式在提升网络训练效果的同时避免了人工标注等繁杂操作,也杜绝了由于人工标注信息不准确对训练效果的影响。
附图说明
图1是本发明实施例网络整体模型图;
图2是本发明实施例单层的生成器结构图;
图3是本发明实施例单层的判别器结构图;
图4是本发明实施例注意力卷积模块图。
具体实施方式
以下结合附图与实施例对本发明方法进行进一步描述。
一种基于生成对抗网络的图像超分辨率重构方法,步骤如下:
步骤1:图像的预处理。
对于给定的RGB的自然图像RI,其维度为M*N*D,初始值M=N=256,D=3,M,N分别表示图像的宽和高,D表示图片通道数。首先按照确定的降采样参数α,α∈(0.6,0.8)不断的对图像进行降采样处理,获得一个关于RI的不同分辨率的图像数据集RIj(0≤j≤n),其中j=0表示原始图像RI,j=n表示最低分辨率,为原图像的1/10,j越大则图像分辨率越低。
步骤2:从最低分辨率图像层开始,开始训练整个网络模型(如图1),生成器G(如图2所示)包括五层的神经网络卷积块,除最后一层外每层神经网络卷积块后连接注意力卷积块(如图4所示)。其中,神经网络卷积块由神经网络中常用的卷积-归一化-激活函数组成,用于特征提取。卷积块尺寸为3*3,激活函数使用LeakyReLU函数fleaky(x)。
Figure BDA0003141897850000041
注意力卷积块在特征图中填加了注意力机制模块(如图3),注意力机制模块含有空间关注模块和通道关注模块两部分,用于调整对特征图不同通道和空间位置的关注权重:
Atten(fea)=Attenchannel(fea)*Attenspatial(fea) (2)
Attenchannel(fea)=σ(MLP(AvgPool(fea))+MLP(MaxPool(fea)) (3)
Attentionspatial(fea)=σ(conv5*5(cat(MLP(AvgPool(fea))+MLP(MaxPool(fea)))) (4)
其中Atten表示整个注意力卷积模块,Attenchannel表示通道关注,调节网络对图片不同通道的关注权重;Attentionspatial表示空间关注,用于调节网络对每个图片通道中不同位置的关注程度。卷积模块MaxPool和AvePool分别表示最大池化和平均池化,MLP表示多层感知机。conv表示卷积操作,卷积核大小为5*5,fea表示输入的图片特征图。cat(x,x)表示拼接函数,改变图像的通道数不影响图像的宽和高,σ(x)为sigmoid激活函数。
cat(xm,n,c1,xm,n,c2)=xm,n,c1+c2 (5)
Figure BDA0003141897850000042
通过生成器生成对应的虚假图片FIj
步骤3:将生成的图片和真实图片都输入到D判别器当中,判别器D结构结构和生成器G相同,但是判别器的最后一层神经网络卷积块采用不同的激活函数Sigmoid,使得最终输出值范围为(0~1),判别器D的输出值越大,图片真实度越高。当输入判别器的为真实图像时,判别器提取图像特征后会复制一份特征图,选取复制的特征图的对角线上的相邻位置如坐标(i,i)和(i+1,i+1),交换两个位置的特征数据,将原始特征图和复制后进行特征数据交换的特征图先后输入至判别器中,判别器判断图片的虚假程度和图片是否进行了特征数据交换操作。判别器目标为:(1)判断输入图片的真假;(2)输入真实图片时,判断该真实图片是否为进行了特征交换操作。
步骤4:设计损失优化函数floss=Ltf(Gj,Dj)+γLex(Dj),Ltf(Gj,Dj)用于判断输入图片的真假,Lex(Dj)用于判断当输入真实图片,图片是否进行了特征交换操作利直至难以分辨出虚假图片,γ为超参数,取值为0.1。利用优化函数floss多次重复迭代训练该层GAN网络提升虚假图片的真实程度。Ltrain(Gj,Dj)表示WGAN-GP损失,Lrec(Gj)为重构损失,表示真假图片的差距,Lself(Dj)为添加特征交换操作,引入的自监督损失,T(RIj)p,q表示仅对对角线上的相邻位置的特征向量进行交换。β=2,FIj+1↑表示对FIj+1上采样。z表示与最低分辨率的真实图像相同大小的随机噪声图。
Ltf(Gj,Dj)=Ltrain(Gj,Dj)+βLrec(Gj)+Lself(Dj) (7)
Lex(Dj)=Dj(RIj)+Lself(Dj) (8)
Figure BDA0003141897850000051
Lself(Dj)=1-(Dj(T(RIj)) (10)
Figure BDA0003141897850000052
步骤5:对步骤4所得图片FIj上采样(采样率依旧为α),加入同尺寸的随机噪声,输入至上层,即分辨率更高一层的GANj-1网络中,重复步骤2~4,直至训练生成良好的更高分辨率的虚假图片FIj-1
步骤6:不断重复步骤5,直至生成和原始真实图片相同分辨率的逼真的虚假图片FI。
步骤7:按照预定的超分辨率参数λ(通常λ∈[1,4]),对步骤6最终生成的虚假图片进行超分辨率上采样,采样结果加入噪声后,重新输入到最高层的GAN0网络,按照步骤2~4,迭代训练得到所需的超分辨率图片。

Claims (6)

1.一种基于生成对抗网络的图像超分辨率重构方法,其特征在于,步骤如下:
步骤1:图像的预处理;
给定一张RGB的自然图像RI,首先按照确定的降采样参数α不断的对图像进行降采样处理,获得一个关于RI的不同分辨率的图像数据集RIj(0≤j≤n);
步骤2:从最低分辨率图像开始,输入到对应的网络层GANj进行训练;在GANj网络中,生成器G包括五层的神经网络卷积块,除最后一层外每层神经网络卷积块后连接注意力卷积块;其中,神经网络卷积块由卷积-归一化-激活函数组成,用于完成图像中特征信息的提取和处理,得到特征图;注意力卷积块在特征图中填加了注意力机制,调整网络对特征图不同位置和不同通道的关注权重,对于生成结果通过优化函数提高生成虚假图片的逼真程度,即使得其输入判别器时,结果接近1;
步骤3:将生成的虚假图片和真实图片都输入到判别器D当中,判别器D结构和生成器G相同,但是判别器的最后一层神经网络卷积块采用不同的激活函数Sigmoid,使得最终输出值范围为(0~1),判别器目标为:(1)判断输入图片的真假;(2)输入真实图片时,判断该真实图片是否为进行了特征交换操作;
步骤4:多次重复迭代训练该层GANj网络,使得生成的虚假图片逼近真实图片;
步骤5:对步骤4所得图片上采样,采样率与降采样处理一致,输入至上层即分辨率更高一层的GANj-1网络中加入随机噪声,重复步骤2~4,直至训练生成良好的更高分辨率的虚假图片;
步骤6:不断重复步骤5,直至生成和原始真实图片相同分辨率的逼真的虚假图片;
步骤7:按照预定的超分辨率参数λ,对步骤6最终生成的虚假图片进行超分辨率上采样,采样结果加入噪声后,重新输入到最高层的GAN0网络,按照步骤2~4,训练得到所需的超分辨率图片。
2.根据权利要求1所述的一种基于生成对抗网络的图像超分辨率重构方法,其特征在于,步骤1具体方法如下:
对于给定的RGB的自然图像RI,其维度为M*N*D,初始值M=N=256,D=3,M,N分别表示图像的宽和高,D表示图片通道数;首先按照确定的降采样参数α,α∈(0.6,0.8)不断的对图像进行降采样处理,获得一个关于RI的不同分辨率的图像数据集RIj(0≤j≤n),其中j=0表示原始图像RI,j=n表示最低分辨率,为原图像的1/10,j越大则图像分辨率越低。
3.根据权利要求2所述的一种基于生成对抗网络的图像超分辨率重构方法,其特征在于,步骤2具体方法如下:
从最低分辨率图像层开始,开始训练整个网络模型,生成器G包括五层的神经网络卷积块,除最后一层外每层神经网络卷积块后连接注意力卷积块;其中,神经网络卷积块由卷积-归一化-激活函数组成,用于特征提取;卷积块尺寸为3*3,激活函数使用LeakyReLU函数fleaky(x);
Figure FDA0003141897840000021
注意力卷积块在特征图中填加了注意力机制模块,注意力机制模块含有空间关注模块和通道关注模块两部分,用于调整对特征图不同通道和空间位置的关注权重:
Atten(fea)=Attenchannel(fea)*Attenspatial(fea) (2)
Attenchannel(fea)=σ(MLP(AvgPool(fea))+MLP(MaxPool(fea)) (3)
Attentionspatial(fea)=σ(conv5*5(cat(MLP(AvgPool(fea))+MLP(MaxPool(fea)))) (4)
其中Atten表示整个注意力卷积模块,Attenchannel表示通道关注,调节网络对图片不同通道的关注权重;Attentionspatial表示空间关注,用于调节网络对每个图片通道中不同位置的关注程度;卷积模块MaxPool和AvePool分别表示最大池化和平均池化,MLP表示多层感知机;conv表示卷积操作,卷积核大小为5*5,fea表示输入的图片特征图;cat(x,x)表示拼接函数,改变图像的通道数不影响图像的宽和高,σ(x)为sigmoid激活函数;
cat(xm,n,c1,xm,n,c2)=xm,n,c1+c2 (5)
Figure FDA0003141897840000022
通过生成器生成对应的虚假图片FIj
4.根据权利要求3所述的一种基于生成对抗网络的图像超分辨率重构方法,其特征在于,步骤3具体方法如下:
将生成的图片和真实图片都输入到D判别器当中,判别器D结构结构和生成器G相同,但是判别器的最后一层神经网络卷积块采用不同的激活函数Sigmoid,使得最终输出值范围为(0~1),判别器D的输出值越大,图片真实度越高;当输入判别器的为真实图像时,判别器提取图像特征后会复制一份特征图,选取复制的特征图的对角线上的相邻位置如坐标(i,i)和(i+1,i+1),交换两个位置的特征数据,将原始特征图和复制后进行特征数据交换的特征图先后输入至判别器中,判别器判断图片的虚假程度和图片是否进行了特征数据交换操作。
5.根据权利要求4所述的一种基于生成对抗网络的图像超分辨率重构方法,其特征在于,步骤4具体方法如下:
设计损失优化函数floss=Ltf(Gj,Dj)+γLex(Dj),Ltf(Gj,Dj)用于判断输入图片的真假,Lex(Dj)用于判断当输入真实图片,图片是否进行了特征交换操作利直至难以分辨出虚假图片,γ为超参数,取值为0.1;利用优化函数floss多次重复迭代训练该层GAN网络提升虚假图片的真实程度;Ltrain(Gj,Dj)表示WGAN-GP损失,Lrec(Gj)为重构损失,表示真假图片的差距,Lself(Dj)为添加特征交换操作,引入的自监督损失,T(RIj)p,q表示仅对对角线上的相邻位置的特征向量进行交换;β=2,FIj+1↑表示对FIj+1上采样;z表示与最低分辨率的真实图像相同大小的随机噪声图;
Ltf(Gj,Dj)=Ltrain(Gj,Dj)+βLrec(Gj)+Lself(Dj) (7)
Lex(Dj)=Dj(RIj)+Lself(Dj) (8)
Figure FDA0003141897840000031
Lself(Dj)=1-(Dj(T(RIj)) (10)
Figure FDA0003141897840000032
6.根据权利要求1-5中任意一项所述的一种基于生成对抗网络的图像超分辨率重构方法,其特征在于,步骤7中的超分辨率参数λ∈[1,4]。
CN202110736530.2A 2021-06-30 2021-06-30 一种基于生成对抗网络的图像超分辨率重构方法 Withdrawn CN113538236A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110736530.2A CN113538236A (zh) 2021-06-30 2021-06-30 一种基于生成对抗网络的图像超分辨率重构方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110736530.2A CN113538236A (zh) 2021-06-30 2021-06-30 一种基于生成对抗网络的图像超分辨率重构方法

Publications (1)

Publication Number Publication Date
CN113538236A true CN113538236A (zh) 2021-10-22

Family

ID=78097362

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110736530.2A Withdrawn CN113538236A (zh) 2021-06-30 2021-06-30 一种基于生成对抗网络的图像超分辨率重构方法

Country Status (1)

Country Link
CN (1) CN113538236A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114693831A (zh) * 2022-05-31 2022-07-01 深圳市海清视讯科技有限公司 一种图像处理方法、装置、设备和介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114693831A (zh) * 2022-05-31 2022-07-01 深圳市海清视讯科技有限公司 一种图像处理方法、装置、设备和介质
CN114693831B (zh) * 2022-05-31 2022-09-02 深圳市海清视讯科技有限公司 一种图像处理方法、装置、设备和介质

Similar Documents

Publication Publication Date Title
CN110119780B (zh) 基于生成对抗网络的高光谱图像超分辨重建方法
CN111275637B (zh) 一种基于注意力模型的非均匀运动模糊图像自适应复原方法
CN111192200A (zh) 基于融合注意力机制残差网络的图像超分辨率重建方法
CN112801904B (zh) 一种基于卷积神经网络的混合退化图像增强方法
CN112288632B (zh) 基于精简esrgan的单图像超分辨率方法及系统
CN110363068B (zh) 一种基于多尺度循环生成式对抗网络的高分辨行人图像生成方法
CN112837224A (zh) 一种基于卷积神经网络的超分辨率图像重建方法
CN115564649B (zh) 一种图像超分辨率重建方法、装置及设备
CN116091313A (zh) 一种图像超分辨率网络模型和重建方法
Guan et al. Srdgan: learning the noise prior for super resolution with dual generative adversarial networks
CN112699844A (zh) 一种基于多尺度残差层级密连接网络的图像超分辨率方法
CN112950475A (zh) 一种基于残差学习及空间变换网络的光场超分辨率重建方法
CN114841856A (zh) 基于深度残差通道空间注意力的密集连接网络的图像超像素重建方法
CN111833261A (zh) 一种基于注意力的生成对抗网络的图像超分辨率复原方法
CN116486074A (zh) 一种基于局部和全局上下文信息编码的医学图像分割方法
CN115170915A (zh) 一种基于端到端注意力网络的红外与可见光图像融合方法
CN115829876A (zh) 一种基于交叉注意力机制的真实退化图像盲修复方法
CN116167920A (zh) 一种基于超分辨率和先验知识的图像压缩与重建方法
CN114066729A (zh) 一种可恢复身份信息的人脸超分辨率重建方法
CN113379606B (zh) 一种基于预训练生成模型的人脸超分辨方法
CN115170392A (zh) 一种基于注意力机制的单图像超分辨率算法
CN110047038B (zh) 一种基于层级递进网络的单图像超分辨重建方法
Liu et al. Facial image inpainting using multi-level generative network
CN114332625A (zh) 基于神经网络的遥感图像彩色化和超分辨率方法及系统
CN113538236A (zh) 一种基于生成对抗网络的图像超分辨率重构方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20211022

WW01 Invention patent application withdrawn after publication