CN109360171A - 一种基于神经网络的视频图像实时去模糊方法 - Google Patents
一种基于神经网络的视频图像实时去模糊方法 Download PDFInfo
- Publication number
- CN109360171A CN109360171A CN201811256949.2A CN201811256949A CN109360171A CN 109360171 A CN109360171 A CN 109360171A CN 201811256949 A CN201811256949 A CN 201811256949A CN 109360171 A CN109360171 A CN 109360171A
- Authority
- CN
- China
- Prior art keywords
- image
- neural network
- characteristic pattern
- deblurring
- decoder
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013528 artificial neural network Methods 0.000 title claims abstract description 36
- 238000000034 method Methods 0.000 title claims abstract description 29
- 239000010410 layer Substances 0.000 claims abstract description 47
- 239000002356 single layer Substances 0.000 claims abstract description 20
- 230000004927 fusion Effects 0.000 claims abstract description 18
- 230000008569 process Effects 0.000 claims abstract description 5
- 230000006870 function Effects 0.000 claims description 11
- 230000008447 perception Effects 0.000 claims description 6
- 238000003475 lamination Methods 0.000 claims description 4
- 230000004913 activation Effects 0.000 claims description 3
- 238000010606 normalization Methods 0.000 claims description 3
- 239000011159 matrix material Substances 0.000 claims description 2
- 238000005070 sampling Methods 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract description 11
- 238000012545 processing Methods 0.000 abstract description 7
- 238000011084 recovery Methods 0.000 abstract description 5
- 230000008901 benefit Effects 0.000 abstract description 3
- 238000012549 training Methods 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- ORILYTVJVMAKLC-UHFFFAOYSA-N Adamantane Natural products C1C(C2)CC3CC1CC2C3 ORILYTVJVMAKLC-UHFFFAOYSA-N 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000006735 deficit Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000002844 melting Methods 0.000 description 1
- 230000008018 melting Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
Classifications
-
- G06T5/73—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Abstract
本发明一种基于神经网络的视频图像去模糊方法,具体过程为:构建由编码器、动态融合网络以及解码器组成的神经网络;编码器由两层卷积、级联层和四个单层残差结构依次堆叠而成;动态融合网络用于将上一个去模糊阶段自身保存的特征图与当前阶段编码器得到的特征图进行加权融合;解码器包含四个单层残差结构,所述四个单层残差结构上连接有两条分支;神经网络最终输出的图像为输入图像序列的中间帧图像与解码器第一条分支输出图像相加得到的图像;构造损失函数,并对神经网络进行训练;利用训练好的神经网络进行视频图像去模糊。本发明方法具有处理速度快、恢复效果好的优势。
Description
技术领域
本发明涉及一种基于神经网络的视频图像实时去模糊方法,属于图像处理技术领域。
背景技术
信息化时代,便携成像设备在视频监控、视觉导航、车牌照自动识别、遥感、医疗以及太空探测等领域都得到了广泛的应用。成像设备在曝光时由于相机与拍摄物体之间的相对运动以及拍摄物体与相机光心距离的不合适将造成运动模糊和散焦模糊。模糊图像由于缺失了图像中的细节信息,对一些对细节要求极高的应用造成了诸多不便。所以,从模糊图像中恢复出清晰的、细节丰富的图像具有非常重要的应用价值。
目前的图像去模糊算法通常是基于图像先验信息,利用正则化技术构造图像去模糊模型,并对模型求解获得清晰的复原图像。图像的先验信息获取大体可分为两类。一类是基于统计的先验模型,另一类是通过学习方法获得。统计先验模型包括梯度重尾分布先验,归一化稀疏先验,L0正则化梯度先验等。统计先验模型的不足之处在于其对图像特征的表达不完全,图像细节恢复能力有限。基于学习的图像先验信息获取包括基于单幅图像的去模糊方法以及基于视频序列的去模糊方法。然而这些算法的计算复杂度较高,难以应用于对实时性要求高的场景。
与单幅图像的去模糊方法相比,视频序列图像去模糊算法可以利用图像的时序信息,从相邻图像中获取辅助信息,因此可以获得更好的去模糊效果。
发明内容
本发明是为了克服已有的视频去模糊算法处理速度过慢或者恢复效果较差的缺陷,为实时地解决相机与拍摄物体之间由于相对运动而产生的图像模糊问题,提出一种基于神经网络的视频图像去模糊方法,该方法具有处理速度快、恢复效果好的优势。
实现本发明的技术方案如下:
一种基于神经网络的视频图像去模糊方法,具体过程为:
一、构建神经网络
构建主要由编码器、动态融合网络以及解码器组成的神经网络;
(1)编码器:编码器由两层卷积、级联层和四个单层残差结构依次堆叠而成,其中第一个卷积层将输入的图像映射到多个通道,第二个卷积层将输入的图像降采样,所述级联层中级联的图像为降采样得到的特征图和上一个去模糊阶段解码器中保存的特征图Fn-1;
(2)动态融合网络:动态融合网络用于将上一个去模糊阶段自身保存的特征图与当前阶段编码器得到的特征图进行加权融合;
(3)解码器:解码器包含四个单层残差结构,所述四个单层残差结构上连接有两条分支,第一条分支上设有一个反卷积层和一个卷积层,其输出为清晰图像;第二条分支上设有一个卷积层,输出一组特征图Fn;
神经网络最终输出的图像为输入图像序列的中间帧图像与解码器第一条分支输出图像相加得到的图像;
二、构造损失函数,并对神经网络进行训练;
三、利用训练好的神经网络进行视频图像去模糊。
进一步地,本发明所述单层残差结构主要由卷积层,批归一化层以及线性整流函数构成。
进一步地,本发明利用感知损失作为损失函数。
与现有技术相比,本发明的有益效果为:
第一、本发明构建由编码器、动态融合网络以及解码器构成的神经网络,在动态融合网络和解码器中会各自保存一组特征图作为下一阶段的输入,通过这种方式可以利用更多临近帧的图像信息,并且可以提高感受野,从而获得更好的去模糊效果。
第二、本发明引入全局残差,整个网络只需学习清晰图像和模糊图像的残差,提升了训练速度以及最终的去模糊效果。
第三、本发明使用感知损失函数,提升了图像纹理细节的恢复效果。
第四、本发明使用单层残差结构,在对去模糊效果没有明显影响的情况下提升了去模糊速度。
利用以上改进,本发明方法能够对不同尺度的图像进行快速的去模糊,对640×480分辨率的图像可以达到每秒40帧的处理速度,并且可实现与目前最佳去模糊算法相近的效果。在AR/VR,机器人导航,目标检测等多种任务中可以得到广泛应用。
附图说明
图1为本发明实施方式的网络架构图;
图2为编码器、解码器网络层图;
图3为单双层残差结构的对比图;
图4为动态融合网络结构。
具体实施方式
下面结合附图并结合具体实现对本发明方法的实施方式做进一步详细说明。
本发明一种基于神经网络的视频图像去模糊方法,旨在借助神经网络,利用视频序列实时地解决由于相机和拍摄场景之间相对运动导致的图像模糊问题。具体过程为:
一、构建神经网络:
如图1所示,本实例构建端到端的神经网络,主要由编码器、动态融合网络以及解码器组成,各部分具体实现如下:
(1)编码器:如图2a所示,由两层卷积层、级联层和四个单层残差结构组成,其中第一层卷积层的卷积核大小为5×5、步长为1,第二层卷积层的卷积核大小为3×3、步长为2;编码器首先使用卷积核大小为5×5、步长为1的卷积层将输入图像映射到64个通道;其次使用卷积核大小为3×3、步长为2的卷积层进行降采样并将通道数降低到32;再次将得到的特征图与上一阶段解码器中保存的特征图Fn-1进行级联,得到64通道的特征图;最后使用四个单层残差结构,进一步提取图像特征,输出特征图hn。
单层残差结构:在编码器和解码器之中都使用了四个单层残差结构,如图3所示,本实例使用单层残差结构,每个残差结构包含一层卷积层,卷积核大小为3×3、步长为1,通道数为64;卷积层之后接一个批归一化层以及线性整流函数。残差结构对级联之后的特征图进行卷积、批归一化处理,并使用线性整流函数作为激活函数,与传统残差结构差异如图3所示。
(2)动态融合网络:如图4所示,该结构包含级联层、卷积层、权重计算层及特征融合;所述动态融合网络将编码器输出的特征图hn与上一阶段保存的特征图进行级联,级联后的通道数量为128,然后通过5×5的卷积层映射到64个通道,卷积后的特征图d经过公式(2)计算得到权重wn,然后利用公式(3)将上一阶段的特征图与当前阶段的特征图hn进行加权融合得到保存以用于下一阶段。计算公式如下所示:
wn=min(1,|tanh(d)|+β)) (2)
其中,d代表经动态融合网络中卷积层卷积后得到的特征图,β代表偏置,取值在0-1之间由神经网络训练得到,tanh( )表示激活函数,符号表示矩阵逐个元素相乘操作。
(3)解码器:解码器包含四个单层残差结构,所述四个单层残差结构上连着两个分支,如图2b所示。分支一依次连接两个卷积层,第一层卷积核大小为4×4,步长为1,第二层卷积核大小为4×4,步长为1;特征图首先经过四个单层残差结构,卷积核大小为3×3、步长为1、通道数为64;然后使用卷积核大小为4×4、步长为1的反卷积层恢复图像尺寸;最后经过一个卷积核大小为3×3、步长为1的卷积层恢复出3通道图像。分支二与分支一共享残差结构,分支二连接一个卷积核大小为3×3,步长为1的卷积层得到32通道的特征图Fn。
全局残差:网络使用全局残差即将输入图像序列的中间帧直接和解码器第一条分支输出的图像相加得到最终的输出图像,如图1所示,整个网络只需学习清晰图像和模糊图像的残差,从而提高了网络训练速度和最终去模糊效果。
如图1所示,在动态融合网络和解码器中会各自保存一组特征图作为下一阶段的输入,通过这种方式可以利用更多临近帧的图像信息,并且可以提高感受野,从而获得更好的去模糊效果。
二、构造损失函数
使用感知损失作为损失函数,感知损失利用已经训练好的分类网络(如VGG 19,VGG 16)计算图像损失,具体形式为:
公式(1)中,W,H分别代表特征图φi,j的宽和高;φi,j代表分类网络(VGG 19)中的第i个池化层(分类网络里的一层,如上述提到的分类网络VGG 19,VGG 16)之后的第j个卷积层输出的特征图;IS代表真实清晰图像;IB代表输入到网络的模糊图像;G(IB)表示网络输出的清晰图像,x,y表示像素坐标。
具体为:使用VGG 19分类网络的Conv3_3卷积层计算损失函数,VGG 19在训练过程中参数固定,训练时将神经网络得到的清晰图像G(IB)输入VGG 19得到一组特征图φ3,3(G(IB))x,y,同时将真实的清晰图像IS输入VGG 19得到另一组特征图φ3,3(IS)x,y,然后计算两组特征图的L2范数的均方误差,即
三、训练神经网络
实验中使用tensorflow搭建神经网络,使用GoPro公开数据集进行训练。训练时使用三张(Bn-1,Bn,Bn+1)连续的图像作为神经网络的输入,Bn对应的清晰图像Sn作为目标图像,使用Adam优化方法降低感知损失。
测试神经网络
测试时每次输入连续的三张模糊图像,输出为中间帧对应的清晰图像。经测试,本实例中的方法处理1280×720的图像每帧耗时约88毫秒,处理640×480的图像每帧耗时约25毫秒,在处理640×480的图像时可以满足实时性的要求。
四、利用训练好的神经网络对视频图像进行去模糊处理。
自此,就实现了基于视频图像序列的实时去模糊算法。
综上所述,以上仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (4)
1.一种基于神经网络的视频图像去模糊方法,其特征在于,具体过程为:
一、构建神经网络
构建主要由编码器、动态融合网络以及解码器组成的神经网络;
(1)编码器:编码器由两层卷积、级联层和四个单层残差结构依次堆叠而成,其中第一个卷积层将输入的图像映射到多个通道,第二个卷积层用于将输入的图像降采样,所述级联层中级联的图像为降采样得到的特征图和上一个去模糊阶段解码器中保存的特征图Fn-1;
(2)动态融合网络:动态融合网络用于将上一个去模糊阶段自身保存的特征图与当前阶段编码器得到的特征图进行加权融合,保存并输出给解码器;
(3)解码器:解码器包含四个单层残差结构,所述四个单层残差结构上连接有两条分支,第一条分支上设有一个反卷积层和一个卷积层,其输出为清晰图像;第二条分支上设有一个卷积层,输出一组特征图Fn;
神经网络最终输出的图像为输入图像序列的中间帧图像与解码器第一条分支输出图像相加得到的图像;
二、构造损失函数,并对神经网络进行训练;
三、利用训练好的神经网络进行视频图像去模糊。
2.根据权利要求1所述基于神经网络的视频图像去模糊方法,其特征在于,所述单层残差结构主要由卷积层,批归一化层以及线性整流函数构成。
3.根据权利要求1所述基于神经网络的视频图像去模糊方法,其特征在于,利用感知损失作为损失函数。
4.根据权利要求1所述基于神经网络的视频图像去模糊方法,其特征在于,所述动态融合网络将编码器输出的特征图hn与上一个去模糊阶段保存的特征图进行级联,级联后的图像经卷积后得到特征图d,根据公式(2)计算权重wn,然后利用公式(3)将上一阶段的特征图与当前阶段的特征图hn进行加权融合得到保存以用于下一阶段;
wn=min(1,|tanh(d)|+β)) (2)
其中,β表示偏置,取值在0-1之间,由神经网络学习得到,tanh()表示激活函数,符号表示矩阵逐个元素相乘操作。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811256949.2A CN109360171B (zh) | 2018-10-26 | 2018-10-26 | 一种基于神经网络的视频图像实时去模糊方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811256949.2A CN109360171B (zh) | 2018-10-26 | 2018-10-26 | 一种基于神经网络的视频图像实时去模糊方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109360171A true CN109360171A (zh) | 2019-02-19 |
CN109360171B CN109360171B (zh) | 2021-08-06 |
Family
ID=65346825
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811256949.2A Active CN109360171B (zh) | 2018-10-26 | 2018-10-26 | 一种基于神经网络的视频图像实时去模糊方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109360171B (zh) |
Cited By (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109919874A (zh) * | 2019-03-07 | 2019-06-21 | 腾讯科技(深圳)有限公司 | 图像处理方法、装置、计算机设备及存储介质 |
CN109993712A (zh) * | 2019-04-01 | 2019-07-09 | 腾讯科技(深圳)有限公司 | 图像处理模型的训练方法、图像处理方法及相关设备 |
CN110033422A (zh) * | 2019-04-10 | 2019-07-19 | 北京科技大学 | 一种眼底oct图像融合方法及装置 |
CN110163815A (zh) * | 2019-04-22 | 2019-08-23 | 桂林电子科技大学 | 基于多阶段变分自编码器的低照度还原方法 |
CN110188752A (zh) * | 2019-05-20 | 2019-08-30 | 南京邮电大学 | 监控视频下模糊车牌的去模糊识别系统及去模糊识别方法 |
CN110276739A (zh) * | 2019-07-24 | 2019-09-24 | 中国科学技术大学 | 一种基于深度学习的视频去抖方法 |
CN110782399A (zh) * | 2019-08-22 | 2020-02-11 | 天津大学 | 一种基于多任务cnn的图像去模糊方法 |
CN111028166A (zh) * | 2019-11-30 | 2020-04-17 | 温州大学 | 一种基于迭代神经网络的视频去模糊方法 |
CN111316316A (zh) * | 2019-04-10 | 2020-06-19 | 深圳市大疆创新科技有限公司 | 用于图像复原的神经网络及其训练与使用方法 |
CN111460939A (zh) * | 2020-03-20 | 2020-07-28 | 深圳市优必选科技股份有限公司 | 一种去模糊的人脸识别方法、系统和一种巡检机器人 |
CN111583101A (zh) * | 2020-05-13 | 2020-08-25 | 杭州云梯科技有限公司 | 基于深度学习的图像防盗系统和方法 |
CN111612066A (zh) * | 2020-05-21 | 2020-09-01 | 成都理工大学 | 基于深度融合的卷积神经网络的遥感图像分类方法 |
CN111920436A (zh) * | 2020-07-08 | 2020-11-13 | 浙江大学 | 基于多任务学习三维卷积编解码网络的双示踪剂pet分离方法 |
CN112015932A (zh) * | 2020-09-11 | 2020-12-01 | 深兰科技(上海)有限公司 | 一种基于神经网络的图片存储方法、介质及装置 |
CN112348766A (zh) * | 2020-11-06 | 2021-02-09 | 天津大学 | 一种用于监控视频增强的渐进式特征流深度融合网络 |
CN112750093A (zh) * | 2021-01-25 | 2021-05-04 | 中国人民解放军火箭军工程大学 | 一种基于时序标签传递的视频图像去雾方法 |
CN113177896A (zh) * | 2021-05-20 | 2021-07-27 | 中国人民解放军国防科技大学 | 基于多路径精化融合神经网络的图像去除模糊方法 |
CN113436137A (zh) * | 2021-03-12 | 2021-09-24 | 北京世纪好未来教育科技有限公司 | 一种图像清晰度识别方法、装置、设备及介质 |
JP2021528795A (ja) * | 2019-04-22 | 2021-10-21 | シェンチェン センスタイム テクノロジー カンパニー リミテッドShenzhen Sensetime Technology Co.,Ltd | ビデオ画像処理方法及び装置 |
CN113689356A (zh) * | 2021-09-14 | 2021-11-23 | 三星电子(中国)研发中心 | 一种图像修复的方法和装置 |
CN114066751A (zh) * | 2021-10-29 | 2022-02-18 | 西北工业大学 | 基于普通摄像头采集条件下的车卡监控视频去模糊方法 |
WO2022067653A1 (zh) * | 2020-09-30 | 2022-04-07 | 京东方科技集团股份有限公司 | 图像处理方法及装置、设备、视频处理方法及存储介质 |
CN114820342A (zh) * | 2022-03-17 | 2022-07-29 | 西北工业大学 | 一种基于动态神经网络的视频去模糊方法 |
CN115063312A (zh) * | 2022-06-14 | 2022-09-16 | 北京大学 | 基于事件相机辅助的卷帘门效应矫正方法及装置 |
CN115171882A (zh) * | 2022-07-07 | 2022-10-11 | 广东工业大学 | 一种基于多先验嵌入的y型网络的智能医学辅助诊断方法及系统 |
CN116205822A (zh) * | 2023-04-27 | 2023-06-02 | 荣耀终端有限公司 | 一种图像处理的方法、电子设备和计算机可读存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150172726A1 (en) * | 2013-12-16 | 2015-06-18 | Samsung Electronics Co., Ltd. | Method for real-time implementation of super resolution |
CN108109121A (zh) * | 2017-12-18 | 2018-06-01 | 深圳市唯特视科技有限公司 | 一种基于卷积神经网络的人脸模糊快速消除方法 |
CN108376387A (zh) * | 2018-01-04 | 2018-08-07 | 复旦大学 | 基于聚合膨胀卷积网络的图像去模糊方法 |
CN108596841A (zh) * | 2018-04-08 | 2018-09-28 | 西安交通大学 | 一种并行实现图像超分辨率及去模糊的方法 |
CN108629743A (zh) * | 2018-04-04 | 2018-10-09 | 腾讯科技(深圳)有限公司 | 图像的处理方法、装置、存储介质和电子装置 |
-
2018
- 2018-10-26 CN CN201811256949.2A patent/CN109360171B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150172726A1 (en) * | 2013-12-16 | 2015-06-18 | Samsung Electronics Co., Ltd. | Method for real-time implementation of super resolution |
CN108109121A (zh) * | 2017-12-18 | 2018-06-01 | 深圳市唯特视科技有限公司 | 一种基于卷积神经网络的人脸模糊快速消除方法 |
CN108376387A (zh) * | 2018-01-04 | 2018-08-07 | 复旦大学 | 基于聚合膨胀卷积网络的图像去模糊方法 |
CN108629743A (zh) * | 2018-04-04 | 2018-10-09 | 腾讯科技(深圳)有限公司 | 图像的处理方法、装置、存储介质和电子装置 |
CN108596841A (zh) * | 2018-04-08 | 2018-09-28 | 西安交通大学 | 一种并行实现图像超分辨率及去模糊的方法 |
Cited By (47)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109919874A (zh) * | 2019-03-07 | 2019-06-21 | 腾讯科技(深圳)有限公司 | 图像处理方法、装置、计算机设备及存储介质 |
CN109919874B (zh) * | 2019-03-07 | 2023-06-02 | 腾讯科技(深圳)有限公司 | 图像处理方法、装置、计算机设备及存储介质 |
CN109993712A (zh) * | 2019-04-01 | 2019-07-09 | 腾讯科技(深圳)有限公司 | 图像处理模型的训练方法、图像处理方法及相关设备 |
US11741581B2 (en) | 2019-04-01 | 2023-08-29 | Tencent Technology (Shenzhen) Company Limited | Training method for image processing model, image processing method, network device, and storage medium |
WO2020206630A1 (zh) * | 2019-04-10 | 2020-10-15 | 深圳市大疆创新科技有限公司 | 用于图像复原的神经网络及其训练与使用方法 |
CN111316316A (zh) * | 2019-04-10 | 2020-06-19 | 深圳市大疆创新科技有限公司 | 用于图像复原的神经网络及其训练与使用方法 |
CN110033422B (zh) * | 2019-04-10 | 2021-03-23 | 北京科技大学 | 一种眼底oct图像融合方法及装置 |
CN110033422A (zh) * | 2019-04-10 | 2019-07-19 | 北京科技大学 | 一种眼底oct图像融合方法及装置 |
CN113992848A (zh) * | 2019-04-22 | 2022-01-28 | 深圳市商汤科技有限公司 | 视频图像处理方法及装置 |
TWI759668B (zh) * | 2019-04-22 | 2022-04-01 | 大陸商深圳市商湯科技有限公司 | 視頻圖像處理方法、電子設備和電腦可讀儲存介質 |
JP2021528795A (ja) * | 2019-04-22 | 2021-10-21 | シェンチェン センスタイム テクノロジー カンパニー リミテッドShenzhen Sensetime Technology Co.,Ltd | ビデオ画像処理方法及び装置 |
CN110163815B (zh) * | 2019-04-22 | 2022-06-24 | 桂林电子科技大学 | 基于多阶段变分自编码器的低照度还原方法 |
CN113992847A (zh) * | 2019-04-22 | 2022-01-28 | 深圳市商汤科技有限公司 | 视频图像处理方法及装置 |
CN110163815A (zh) * | 2019-04-22 | 2019-08-23 | 桂林电子科技大学 | 基于多阶段变分自编码器的低照度还原方法 |
JP7123256B2 (ja) | 2019-04-22 | 2022-08-22 | シェンチェン センスタイム テクノロジー カンパニー リミテッド | ビデオ画像処理方法及び装置 |
CN110188752A (zh) * | 2019-05-20 | 2019-08-30 | 南京邮电大学 | 监控视频下模糊车牌的去模糊识别系统及去模糊识别方法 |
CN110276739B (zh) * | 2019-07-24 | 2021-05-07 | 中国科学技术大学 | 一种基于深度学习的视频去抖方法 |
CN110276739A (zh) * | 2019-07-24 | 2019-09-24 | 中国科学技术大学 | 一种基于深度学习的视频去抖方法 |
CN110782399B (zh) * | 2019-08-22 | 2023-05-12 | 天津大学 | 一种基于多任务cnn的图像去模糊方法 |
CN110782399A (zh) * | 2019-08-22 | 2020-02-11 | 天津大学 | 一种基于多任务cnn的图像去模糊方法 |
CN111028166B (zh) * | 2019-11-30 | 2022-07-22 | 温州大学 | 一种基于迭代神经网络的视频去模糊方法 |
CN111028166A (zh) * | 2019-11-30 | 2020-04-17 | 温州大学 | 一种基于迭代神经网络的视频去模糊方法 |
CN111460939A (zh) * | 2020-03-20 | 2020-07-28 | 深圳市优必选科技股份有限公司 | 一种去模糊的人脸识别方法、系统和一种巡检机器人 |
CN111583101A (zh) * | 2020-05-13 | 2020-08-25 | 杭州云梯科技有限公司 | 基于深度学习的图像防盗系统和方法 |
CN111612066A (zh) * | 2020-05-21 | 2020-09-01 | 成都理工大学 | 基于深度融合的卷积神经网络的遥感图像分类方法 |
CN111612066B (zh) * | 2020-05-21 | 2022-03-08 | 成都理工大学 | 基于深度融合的卷积神经网络的遥感图像分类方法 |
CN111920436A (zh) * | 2020-07-08 | 2020-11-13 | 浙江大学 | 基于多任务学习三维卷积编解码网络的双示踪剂pet分离方法 |
CN112015932A (zh) * | 2020-09-11 | 2020-12-01 | 深兰科技(上海)有限公司 | 一种基于神经网络的图片存储方法、介质及装置 |
WO2022067653A1 (zh) * | 2020-09-30 | 2022-04-07 | 京东方科技集团股份有限公司 | 图像处理方法及装置、设备、视频处理方法及存储介质 |
CN112348766B (zh) * | 2020-11-06 | 2023-04-18 | 天津大学 | 一种用于监控视频增强的渐进式特征流深度融合网络 |
CN112348766A (zh) * | 2020-11-06 | 2021-02-09 | 天津大学 | 一种用于监控视频增强的渐进式特征流深度融合网络 |
CN112750093A (zh) * | 2021-01-25 | 2021-05-04 | 中国人民解放军火箭军工程大学 | 一种基于时序标签传递的视频图像去雾方法 |
CN113436137A (zh) * | 2021-03-12 | 2021-09-24 | 北京世纪好未来教育科技有限公司 | 一种图像清晰度识别方法、装置、设备及介质 |
CN113177896A (zh) * | 2021-05-20 | 2021-07-27 | 中国人民解放军国防科技大学 | 基于多路径精化融合神经网络的图像去除模糊方法 |
CN113177896B (zh) * | 2021-05-20 | 2022-05-03 | 中国人民解放军国防科技大学 | 基于多路径精化融合神经网络的图像去除模糊方法 |
CN113689356B (zh) * | 2021-09-14 | 2023-11-24 | 三星电子(中国)研发中心 | 一种图像修复的方法和装置 |
CN113689356A (zh) * | 2021-09-14 | 2021-11-23 | 三星电子(中国)研发中心 | 一种图像修复的方法和装置 |
CN114066751A (zh) * | 2021-10-29 | 2022-02-18 | 西北工业大学 | 基于普通摄像头采集条件下的车卡监控视频去模糊方法 |
CN114066751B (zh) * | 2021-10-29 | 2024-02-27 | 西北工业大学 | 基于普通摄像头采集条件下的车卡监控视频去模糊方法 |
CN114820342A (zh) * | 2022-03-17 | 2022-07-29 | 西北工业大学 | 一种基于动态神经网络的视频去模糊方法 |
CN114820342B (zh) * | 2022-03-17 | 2024-02-27 | 西北工业大学 | 一种基于动态神经网络的视频去模糊方法 |
CN115063312A (zh) * | 2022-06-14 | 2022-09-16 | 北京大学 | 基于事件相机辅助的卷帘门效应矫正方法及装置 |
CN115063312B (zh) * | 2022-06-14 | 2023-03-10 | 北京大学 | 基于事件相机辅助的卷帘门效应矫正方法及装置 |
CN115171882A (zh) * | 2022-07-07 | 2022-10-11 | 广东工业大学 | 一种基于多先验嵌入的y型网络的智能医学辅助诊断方法及系统 |
CN115171882B (zh) * | 2022-07-07 | 2023-06-02 | 广东工业大学 | 一种基于多先验嵌入的y型网络的智能医学辅助诊断方法及系统 |
CN116205822B (zh) * | 2023-04-27 | 2023-10-03 | 荣耀终端有限公司 | 一种图像处理的方法、电子设备和计算机可读存储介质 |
CN116205822A (zh) * | 2023-04-27 | 2023-06-02 | 荣耀终端有限公司 | 一种图像处理的方法、电子设备和计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN109360171B (zh) | 2021-08-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109360171A (zh) | 一种基于神经网络的视频图像实时去模糊方法 | |
CN106845549B (zh) | 一种基于多任务学习的场景与目标识别的方法及装置 | |
CN109886225A (zh) | 一种基于深度学习的图像手势动作在线检测与识别方法 | |
CN110443763B (zh) | 一种基于卷积神经网络的图像阴影去除方法 | |
CN113592736B (zh) | 一种基于融合注意力机制的半监督图像去模糊方法 | |
CN113837938B (zh) | 基于动态视觉传感器重建潜在图像的超分辨率方法 | |
CN108256426A (zh) | 一种基于卷积神经网络的人脸表情识别方法 | |
CN109493300B (zh) | 基于fpga卷积神经网络的航拍图像实时去雾方法及无人机 | |
CN112084868A (zh) | 一种基于注意力机制的遥感图像中目标计数方法 | |
CN111814661A (zh) | 基于残差-循环神经网络的人体行为识别方法 | |
CN113344806A (zh) | 一种基于全局特征融合注意力网络的图像去雾方法与系统 | |
CN108510451A (zh) | 一种基于双层卷积神经网络的重建车牌的方法 | |
CN112633220B (zh) | 一种基于双向序列化建模的人体姿态估计方法 | |
CN113379771B (zh) | 带有边缘约束的层次化人体解析语义分割方法 | |
CN112288627A (zh) | 一种面向识别的低分辨率人脸图像超分辨率方法 | |
CN113269682B (zh) | 一种结合帧间信息的非均匀运动模糊视频复原方法 | |
CN109977834B (zh) | 从深度图像中分割人手与交互物体的方法和装置 | |
CN105913002A (zh) | 视频场景下在线自适应的异常事件检测方法 | |
CN110781962A (zh) | 基于轻量级卷积神经网络的目标检测方法 | |
CN111639580A (zh) | 一种结合特征分离模型和视角转换模型的步态识别方法 | |
CN116052016A (zh) | 基于深度学习的遥感图像云和云影的精细分割检测方法 | |
CN113610046A (zh) | 一种基于深度视频联动特征的行为识别方法 | |
CN115484410A (zh) | 基于深度学习的事件相机视频重建方法 | |
Tang et al. | Very deep residual network for image matting | |
CN111861949A (zh) | 一种基于生成对抗网络的多曝光图像融合方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |