CN112308772A - 基于深度学习局部与非局部信息的超分辨率重建方法 - Google Patents
基于深度学习局部与非局部信息的超分辨率重建方法 Download PDFInfo
- Publication number
- CN112308772A CN112308772A CN201910711664.1A CN201910711664A CN112308772A CN 112308772 A CN112308772 A CN 112308772A CN 201910711664 A CN201910711664 A CN 201910711664A CN 112308772 A CN112308772 A CN 112308772A
- Authority
- CN
- China
- Prior art keywords
- local
- super
- resolution
- image
- convolutional neural
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 90
- 238000013135 deep learning Methods 0.000 title claims abstract description 20
- 238000013527 convolutional neural network Methods 0.000 claims abstract description 20
- 238000012549 training Methods 0.000 claims abstract description 13
- 230000003321 amplification Effects 0.000 claims abstract description 4
- 238000003199 nucleic acid amplification method Methods 0.000 claims abstract description 4
- 230000008901 benefit Effects 0.000 claims description 5
- 230000007547 defect Effects 0.000 claims 1
- 230000008034 disappearance Effects 0.000 claims 1
- 230000000694 effects Effects 0.000 abstract description 5
- 238000012360 testing method Methods 0.000 description 11
- 238000004422 calculation algorithm Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000011156 evaluation Methods 0.000 description 5
- 238000002474 experimental method Methods 0.000 description 5
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 4
- 238000001994 activation Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 230000004913 activation Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000005284 excitation Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000005215 recombination Methods 0.000 description 3
- 230000006798 recombination Effects 0.000 description 3
- 238000012733 comparative method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003909 pattern recognition Methods 0.000 description 2
- 239000002253 acid Substances 0.000 description 1
- 238000005903 acid hydrolysis reaction Methods 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 230000008521 reorganization Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000017105 transposition Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于深度学习局部与非局部信息的超分辨率重建方法。主要包括以下步骤:搭建基于深度学习局部与非局部信息的超分辨率卷积神经网络模型,包括局部网络和非局部增强网络两大模块;利用前一步骤搭建的卷积神经网络,分别训练不同放大因子的超分辨率模型;以训练好的超分辨率重建模型为基础,将低分辨率图像作为输入,得到最终的超分辨率重建图像。本发明所述的方法能够利用非局部增强网络挖掘到图像更广泛区域的有效信息,因此可以有效地对低分辨率图像进行超分辨率重建,能获得很好的主客观效果,是一种有效的低分辨率图像复原方法。
Description
技术领域
本发明涉及图像超分辨率重建技术,具体涉及一种基于深度学习局部与非局部信息的超分辨率重建方法,属于数字图像处理领域。
背景技术
超分辨率重建技术因其能提升图像的分辨率,而被广泛应用于实际生活中,如从安全领域的成像到医疗成像,因此在图像处理领域中,超分辨率重建技术受到不少研究学者的青睐并被深入地研究。提高图像分辨率的方法主要有两种:一种是通过改善硬件设备条件获取高分辨率图像;另一种是通过软件提升图像的分辨率。通过改善硬件条件实现的方式,往往成本比较高,不能增加已拍摄图像的分辨率,局限性强。因此,软件超分辨率重建技术成为了近年来图像处理的一个研究热点。
超分辨率重建技术是一种后处理技术,主要的优点在于能够在不改变现有硬件条件的情况下提高图像的分辨率。此类方法大致分为基于插值的方法,基于重建的方法,以及基于学习的方法。其中,基于学习的方法,由于复原速度快和复原后的图像质量好,往往具有更多的实际意义。近年来,随着计算机技术的发展和设备的更新换代,基于卷积神经网络学习的方法取得了较大发展,相比之前的一些基于学习的方法,其学习效率高且能够更好地恢复低分辨率图像损失的细节信息。然而,现有的基于深度学习的超分辨率重建方法,大多是局部卷积神经网络,在复原图像的质量上还有进一步提升的空间。
发明内容
本发明的目的是结合基于深度学习局部与非局部信息的优点,进而构建一种有效的超分辨率重建方法。
本发明提出的基于深度学习局部与非局部信息的超分辨率重建方法,主要包括以下操作步骤:
(1)搭建基于深度学习局部与非局部信息的超分辨率卷积神经网络模型,包括局部网络和非局部增强网络两大模块;
(2)利用步骤一的卷积神经网络,分别训练不同放大因子的超分辨率模型;
(3)以训练好的超分辨率重建模型为基础,将低分辨率图像作为输入,得到最终的超分辨率重建图像。
附图说明
图1是本发明基于深度学习局部与非局部信息的超分辨率重建方法的原理框图图2为局部残差模块图3为非局部相似性模块运算过程说明图4为非局部残差模块图5是本发明与另外六种方法对双三次下采样图像“216081”超分辨率重建结果的对比图(超分辨率重建因子为2):其中,(a)为原始图像,(b)(c)(d)(e)(f)(g)(h)分别为方法1、方法2、方法3、方法4、方法5、方法6及本发明的重建结果图6是本发明与另外六种方法对双三次下采样图像“223061”超分辨率重建结果的对比图(超分辨率重建因子为4):其中,(a)为原始图像,(b)(c)(d)(e)(f)(g)(h)分别为方法1、方法2、方法3、方法4、方法5、方法6及本发明的重建结果
具体实施方式
下面结合附图对本发明作进一步说明:
图1中,基于深度学习局部与非局部信息的超分辨率重建方法,具体可以分为以下几个步骤:
(1)搭建基于深度学习局部与非局部信息的超分辨率卷积神经网络模型,包括局部网络和非局部增强网络两大模块;
(2)利用步骤一的卷积神经网络,分别训练不同放大因子的超分辨率模型;
(3)以训练好的超分辨率重建模型为基础,将低分辨率图像作为输入,得到最终的超分辨率重建图像。
具体地,在步骤(1)中,搭建的基于深度学习局部与非局部信息的超分辨率卷积神经网络模型如图1所示,包括局部网络和非局部增强网络两大模块。
局部网络依次包括第一层的特征提取层(卷积层)、中间的12个局部残差模块、特征重组层(卷积层)、亚像素卷积层以及特征增强层(卷积层)。搭建的局部残差模块如图2所示,主要包括两层卷积层和一层激励层。由于残差学习的收敛性能,残差学习思想被广泛用于深度卷积神经网络中。在经过两层卷积层后,将输入直接加在输出端以便学习残差图像或者残差特征。对于第i个残差模块,由输入yi-1得到输出yi的过程可以表示为:
式中,Wi 1和Wi 2分别表示残差模块中第一个和第二个卷积层,和分别是第一层卷积层和第二层卷积层的偏置,σ表示激励层。在本发明中,激励层采用高效的ReLU激活函数。假设输入为xi,输出为其激活过程可以描述为:
该函数将xi中的负值直接映射为0,在一定程度上,ReLU的使用能够增加搭建网络的非线性能力。
亚像素卷积层采用文献“Real-time single image and video super-resolution using an efficient sub-pixel convolutional neural network”中的上采样层。早期的超分辨率重建网络中采用双三次插值来获取初始的低分辨率图像,使得训练和重建需要消耗一定的时间。亚像素卷积层能利用亚像素插值来提升特征或者图像的分辨率,而在网络末端设置亚像素卷积层可以有效地减少特征卷积过程中所需的时间。因此,在局部网络中,本发明以该层来提升特征的分辨率,并且为了增强分辨率提升后的特征,在亚像素卷积层后加了一层卷积层。
局部网络虽然性能不错,但未涉及更多的图像结构信息。在本发明提出的非局部增强网络框架中,利用非局部相似性模块来搜索相似性信息,并将其用于特征的重构中。图3为非局部相似性模块运算过程的示意图,展示以小长方体P为中心的大长方体S与小长方体S之间的运算过程(大长方体S为N通道输入特征张量的一个f×f×N子张量,小长方体P是位于大长方体S几何中心的1×1×N子张量)。下面详细介绍运算过程。
为了学习到更具鲁棒性的非局部相似性,先采用1×1卷积层分别对S和P进行自适应特征加权。对加权后维度为f×f×N的A进行维度重组、转置得到维度为N×f2的Stemp-A,对加权后维度为f×f×N的B进行维度重组得到维度为f2×N的Stemp-B,对加权后维度为1×1×N的C进行维度重组形成维度为1×N的Ptemp。上述过程可以用公式表示为:
Stemp-A=[Hreshape(Hconv(S))]T
Stemp-B=[Hreshape(Hconv(S))]
Ptemp=Hreshape(Hconv(P))
式中,Hreshape和Hconv分别表示维度重组和卷积操作,T表示转置操作。
不同于传统基于非局部相似性的算法,非局部相似性模块中采用内积的方式来求解相似程度。在实际计算中,以矩阵乘法实现内积的思想,先将维度为1×N的Ptemp与维度为N×f2的Stemp-A进行矩阵相乘,得到维度为1×f2的初始相似权重,再用Softmax激活函数归一化初始相似权重,得到最终归一化的相似权重w。接着,将w与Stemp-B进行矩阵相乘,即可得到维度为1×N的加权平小长方体Pw。另外,受残差学习思想的启发,将原始小长方体P与加权平小长方体Pw相加就得到了原始小长方体P经过非局部相似性模块处理后的结果Q。上述过程可以用公式表示为:
Q=P+Softmax(PtempStemp-A)Stemp-B
在局部网络中,对于同一张特征图采用相同的卷积核,因而对于细节丰富程度不同的区域无法区别对待。与局部网络不同,非局部相似性模块结合了非局部区域的结构信息,并且每一小长方体均有不同的相似权重矩阵,因而很好地利用了特征的结构信息。
本发明将非局部相似性模块嵌入至残差学习中构成如图4所示的非局部残差块。在非局部残差模块中,由输入特征Fi得到到输出特征Fj的过程可以用公式描述为:
Fj=Hconv(HconvR(NLSB(HconvR(Fi))))+Fi
式中NLSB表示非局部相似性模块操作,HconvR表示先进行卷积层操作再进行ReLU激活,Hconv表示卷积层操作。
在训练阶段,采用双三次插值对高分辨率图像库进行降质生成低分辨率图像库。将对应的高低分辨率图像作为训练对象输入到设计的网络模型中。训练过程以预测图像和真实图像之间的MSE误差作为损失函数,并以此来规范网络参数的训练,其过程可以用公式表示为:
为了更好地说明本发明的有效性,在常用测试图库“Set5”(包含5幅经典图像)和“B100”(包含100幅测试图像)进行实验。实验中,选取6种典型的图像超分辨率算法作为对比方法,其中方法1为传统算法,方法2到方法6为深度学习算法且为局部卷积神经网络复原算法。
对比的图像超分辨率算法为:
方法1:双三次插值(Bicubic)。
方法2:Dong等人提出的方法,参考文献“Dong C,Loy C C,He K,et al.Imagesuper-resolution using deep convolutional networks[J].IEEE Transactions onPattern Analysis and Machine Intelligence,2016,38(2):295-307.”。
方法3:Dong等人提出的方法,参考文献“Dong C,Loy C C,Tang X.Acceleratingthe super-resolution convolutional neural network[C].European Conference onComputer Vision,2016:391-407.”。
方法4:Kim等人提出的方法,参考文献“KimJ,Kwon Lee J,Mu Lee K.Accurateimage super-resolution using very deep convolutional networks[C].IEEEConference on Computer Vision and Pattern Recognition,2016:1646-1654.”。
方法5:Lai等人提出的方法,参考文献“Lai W S,Huang J B,Ahuja N,et al.Deeplaplacian pyramid networks for fast and accurate superresolution[C].IEEEConference on Computer Vision and Pattern Recognition,2017:5835-5843.”。
方法6:Lai等人提出的方法,参考文献“Lai W S,Huang J B,Ahuja N,et al.Fastand accurate image super-resolution with deep laplacian pyramid networks[EB/OL].IEEE Transactions on Pattern Analysis and Machine Intelligence,[2018-08-13].https://ieeexplore.ieee.org/document/8434354.”。
对比实验的内容如下:
实验1,用双三次对测试图库“Set5”分别进行2、3、4倍下采样,用方法1到方法6以及本发明对双三次下采样的图库进行超分辨率重建测试。表一展示了对比方法及本发明在Set5测试图库上评价指标的平均值。其中方法5的作者只提供放大倍数为2和4时的训练模型,所以表一中只列出该方法上述2种情况下的比较。客观评价参数采用PSNR(Peak Signalto Noise Ratio)和SSIM(Structure Similarity Index)。这两个参数的数值越高表明超分辨率重建效果越好。
表一
实验2,用双三次对测试图库“B100”分别进行2、3、4倍下采样,用方法1到方法6以及本发明对双三次下采样的图库进行超分辨率重建测试。表二展示了对比方法及本发明在B100测试图库上评价指标的平均值。另外,为了进行主观视觉比较,图5和图6分别给出了图像“216081”和图像“223061”的重建结果。
表二
从表一及表二所示的客观评价参数上看,在测试图库“Set5”和“B100”上本发明均取得了较高的PSNR和SSIM值。
图5展示了测试图库“B100”中的图像“216081”在倍数为2时的超分辨率重建结果。原始图像、方法1、方法2、方法3、方法4、方法5、方法6及本发明的重建结果分别如图5(a)、图5(b)、图5(c)、图5(d)、图5(e)、图5(f)、图5(g)及图5(h)所示。方法1重建出的图像较为模糊,深度学习的超分辨率重建算法能够恢复更多的边缘细节。相比于方法2、方法3、方法4和方法5,方法6重建的图像更为清晰,且边缘更为突出,如在图中圈出的字体部分。本发明相比于其他的算法,较为干净,且保证了部分字体的完整性,因而重建的图像具有更丰富的信息。
图6展示了测试图库“B100”中的图像“223061”在倍数为4时的超分辨率重建结果。原始图像、方法1、方法2、方法3、方法4、方法5、方法6及本发明的重建结果分别如图6(a)、图6(b)、图6(c)、图6(d),图6(e)、图6(f)、图6(g)及图6(h)所示。方法1的重建图像出现了明显的模糊和振铃效应,方法2和方法3的重建图像减少了部分振铃效应,突出了部分建筑物的轮廓。方法6重建图像中建筑物轮廓较为突出,但不够真实。本发明相比于其他深度学习的方法,重建图像中无振铃效应,且重建的建筑物轮廓与原图更加接近。
综上所述,相比于对比方法,本发明的超分辨率重建结果在主客观评价上都有较大优势。因此,本发明是一种有效的超分辨率重建方法。
Claims (3)
1.基于深度学习局部与非局部信息的超分辨率重建方法,其特征在于包括以下步骤:
步骤一:搭建基于深度学习局部与非局部信息的超分辨率卷积神经网络模型,包括局部网络和非局部增强网络两大模块;
步骤二:利用步骤一的卷积神经网络,分别训练不同放大因子的超分辨率模型;
步骤三:以训练好的超分辨率重建模型为基础,将低分辨率图像作为输入,得到最终的超分辨率重建图像。
2.根据权利要求1的基于深度学习局部与非局部信息的超分辨率重建方法,其特征在于步骤一中的超分辨率卷积神经网络模型,该模型不同于传统的局部卷积神经网络模型,由于该重建方法能够利用非局部增强网络挖掘图像更广泛区域的有效信息,从而弥补了局部网络仅考虑局部感受野区域而未挖掘待重建图像结构信息的不足,增强了超分辨率重建网络模型的性能。
3.根据权利要求1的基于深度学习局部与非局部信息的超分辨率重建方法,其特征在于步骤一中的超分辨率卷积神经网络模型,该模型中使用了提出的非局部残差模块,该模块由三个卷积层、两个ReLU层和一个非局部相似性模块组成,兼有残差模块和非局部相似性模块的优点,既能够有效地加快训练网络的收敛速度,避免梯度消失的问题,又能够获取图像更广泛区域的有效信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910711664.1A CN112308772B (zh) | 2019-08-02 | 2019-08-02 | 基于深度学习局部与非局部信息的超分辨率重建方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910711664.1A CN112308772B (zh) | 2019-08-02 | 2019-08-02 | 基于深度学习局部与非局部信息的超分辨率重建方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112308772A true CN112308772A (zh) | 2021-02-02 |
CN112308772B CN112308772B (zh) | 2022-11-01 |
Family
ID=74485955
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910711664.1A Active CN112308772B (zh) | 2019-08-02 | 2019-08-02 | 基于深度学习局部与非局部信息的超分辨率重建方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112308772B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113191947A (zh) * | 2021-03-23 | 2021-07-30 | 西安电子科技大学 | 一种图像超分辨率的方法及系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106251289A (zh) * | 2016-07-21 | 2016-12-21 | 北京邮电大学 | 一种基于深度学习和自相似性的视频超分辨率重建方法 |
CN107730451A (zh) * | 2017-09-20 | 2018-02-23 | 中国科学院计算技术研究所 | 一种基于深度残差网络的压缩感知重建方法和系统 |
US20190005603A1 (en) * | 2017-06-30 | 2019-01-03 | Intel Corporation | Approximating image processing functions using convolutional neural networks |
CN109523470A (zh) * | 2018-11-21 | 2019-03-26 | 四川长虹电器股份有限公司 | 一种深度图像超分辨率重建方法及系统 |
CN109584161A (zh) * | 2018-11-29 | 2019-04-05 | 四川大学 | 基于通道注意力的卷积神经网络的遥感图像超分辨率重建方法 |
CN109767386A (zh) * | 2018-12-22 | 2019-05-17 | 昆明理工大学 | 一种基于深度学习的快速图像超分辨率重建方法 |
CN110020989A (zh) * | 2019-05-23 | 2019-07-16 | 西华大学 | 一种基于深度学习的深度图像超分辨率重建方法 |
-
2019
- 2019-08-02 CN CN201910711664.1A patent/CN112308772B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106251289A (zh) * | 2016-07-21 | 2016-12-21 | 北京邮电大学 | 一种基于深度学习和自相似性的视频超分辨率重建方法 |
US20190005603A1 (en) * | 2017-06-30 | 2019-01-03 | Intel Corporation | Approximating image processing functions using convolutional neural networks |
CN107730451A (zh) * | 2017-09-20 | 2018-02-23 | 中国科学院计算技术研究所 | 一种基于深度残差网络的压缩感知重建方法和系统 |
CN109523470A (zh) * | 2018-11-21 | 2019-03-26 | 四川长虹电器股份有限公司 | 一种深度图像超分辨率重建方法及系统 |
CN109584161A (zh) * | 2018-11-29 | 2019-04-05 | 四川大学 | 基于通道注意力的卷积神经网络的遥感图像超分辨率重建方法 |
CN109767386A (zh) * | 2018-12-22 | 2019-05-17 | 昆明理工大学 | 一种基于深度学习的快速图像超分辨率重建方法 |
CN110020989A (zh) * | 2019-05-23 | 2019-07-16 | 西华大学 | 一种基于深度学习的深度图像超分辨率重建方法 |
Non-Patent Citations (7)
Title |
---|
CHAO REN等: ""Nonlocal Similarity Modeling and Deep CNN Gradient Prior for Super Resolution"", 《IEEE SIGNAL PROCESSING LETTERS》 * |
DING LIU 等: ""Non-local recurrent network for image restoration"", 《ADVANCES IN NEURAL INFORMATION PROCESSING SYSTEMS》 * |
FU, B 等: ""Image super-resolution using TV priori guided convolutional network"", 《PATTERN RECOGNITION LETTERS》 * |
HE K等: ""Deep Residual Learning for Image Recognition"", 《IEEE CONFERENCE ON COMPUTER VISION AND PATTERN》 * |
LIM B等: ""Enhanced Deep Residual Networks for Single Image Super-Resolution"", 《IEEE CONFERENCE ON COMPUTER》 * |
SHUHANG GU等: ""Integrating Local and Non-local Denoiser Priors for Image Restoration"", 《IEEE》 * |
张福旺 等: ""一种自适应稀疏表示和非局部自相似性的图像超分辨率重建算法"", 《计算机科学》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113191947A (zh) * | 2021-03-23 | 2021-07-30 | 西安电子科技大学 | 一种图像超分辨率的方法及系统 |
CN113191947B (zh) * | 2021-03-23 | 2024-05-14 | 西安电子科技大学 | 一种图像超分辨率的方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN112308772B (zh) | 2022-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Qiu et al. | Embedded block residual network: A recursive restoration model for single-image super-resolution | |
CN112801877B (zh) | 一种视频帧的超分辨率重构方法 | |
CN112507617B (zh) | 一种SRFlow超分辨率模型的训练方法及人脸识别方法 | |
CN112070702B (zh) | 多尺度残差特征判别增强的图像超分辨率重构系统及方法 | |
CN109272452A (zh) | 小波域中基于集团结构子带共同学习超分辨率网络的方法 | |
CN109949217B (zh) | 基于残差学习和隐式运动补偿的视频超分辨率重建方法 | |
CN111951164B (zh) | 一种图像超分辨率重建网络结构及图像重建效果分析方法 | |
Luo et al. | Lattice network for lightweight image restoration | |
CN111932461A (zh) | 一种基于卷积神经网络的自学习图像超分辨率重建方法及系统 | |
CN112288632A (zh) | 基于精简esrgan的单图像超分辨率方法及系统 | |
CN110363068A (zh) | 一种基于多尺度循环生成式对抗网络的高分辨行人图像生成方法 | |
CN113506224A (zh) | 基于多尺度生成对抗网络的图像修复方法 | |
CN111489305B (zh) | 基于强化学习的图像增强方法 | |
CN111986092A (zh) | 一种基于双重网络的图像超分辨率重建方法及系统 | |
CN116168197A (zh) | 一种基于Transformer分割网络和正则化训练的图像分割方法 | |
CN113962905B (zh) | 基于多阶段特征互补网络的单幅图像去雨方法 | |
Wu et al. | Lightweight asymmetric convolutional distillation network for single image super-resolution | |
CN112150356A (zh) | 基于级联框架的单幅压缩图像超分辨率重建方法 | |
CN111414988B (zh) | 基于多尺度特征自适应融合网络的遥感影像超分辨率方法 | |
Wang et al. | Gridformer: Residual dense transformer with grid structure for image restoration in adverse weather conditions | |
CN112308772B (zh) | 基于深度学习局部与非局部信息的超分辨率重建方法 | |
CN113240581A (zh) | 一种针对未知模糊核的真实世界图像超分辨率方法 | |
CN111489306A (zh) | 基于强化学习的图像去噪方法 | |
CN116468605A (zh) | 基于时空分层掩膜注意力融合的视频超分辨率重建方法 | |
CN111598781B (zh) | 一种基于混合高阶注意网络的图像超分辨率方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |