CN109785258B - 一种基于多判别器生成对抗网络的人脸图像修复方法 - Google Patents

一种基于多判别器生成对抗网络的人脸图像修复方法 Download PDF

Info

Publication number
CN109785258B
CN109785258B CN201910021782.XA CN201910021782A CN109785258B CN 109785258 B CN109785258 B CN 109785258B CN 201910021782 A CN201910021782 A CN 201910021782A CN 109785258 B CN109785258 B CN 109785258B
Authority
CN
China
Prior art keywords
image
discriminator
face image
network
missing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910021782.XA
Other languages
English (en)
Other versions
CN109785258A (zh
Inventor
林少文
丁长兴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China University of Technology SCUT
Original Assignee
South China University of Technology SCUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China University of Technology SCUT filed Critical South China University of Technology SCUT
Priority to CN201910021782.XA priority Critical patent/CN109785258B/zh
Publication of CN109785258A publication Critical patent/CN109785258A/zh
Application granted granted Critical
Publication of CN109785258B publication Critical patent/CN109785258B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开的一种基于多判别器生成对抗网络的人脸图像修复方法,包括以下步骤:(1)将公开的人脸图像数据库中的图像进行预处理,并输入到生成器中得到生成图像;(2)将真实图像和生成图像输入到多个判别器中得到反馈值;(3)将多个判别器的反馈值作为对抗损失,同时结合感知损失和重建损失对生成对抗网络进行对抗训练;(4)将缺失的人脸图像输入到训练好的生成器中得到修复的人脸图像。本发明针对有遮挡或损坏的人脸图像修复问题,采用具有多判别器的生成对抗网络结构,解决了修复图像真实度低的问题,使修复后的图像更加自然、更加真实。

Description

一种基于多判别器生成对抗网络的人脸图像修复方法
技术领域
本发明涉及计算机视觉与模式识别领域,特别涉及一种基于多判别器生成对抗网络的人脸图像修复方法。
背景技术
随着科学技术的发展,手机、平板电脑及数码相机等电子设备得到了广泛普及。使用电子设备拍照成为了人们日常生活的普遍行为。同时伴随着移动互联网的发展,人们热衷于人脸照片相关的娱乐分享社交活动,而且对拍照得到的人脸图像的审美要求越来越高。现有的电子设备提供一系列的拍照功能,可以对人脸图像进行自动美化,拥有包括美白、祛痘、自动美妆等功能,但是缺乏人脸图像修复的相关功能。当针对一些存在脸部缺陷的用户,针对拍出来的人脸图像,无法有效地去除人脸图像的缺陷。同时,在探案侦查、考古和艺术等领域已损坏人脸图像也需要进行修复,成熟的人脸修复技术具有非常重要的意义与应用价值。
传统的人脸图像修复技术修复出来的图像纹理简单,并且需要缺陷部分的形状特定,这局限了人脸图像修复的应用场景。随着计算设备运算能力的提升和算法模型的发展,深度学习和生成模型在许多领域取得了丰厚的成果。虽然生成式对抗网络能对一些人脸图像进行修复,但是现有的技术很难稳定提供一个更加逼真、更加真实的人脸修复图像。
发明内容
本发明的目的在于克服现有技术的缺点与不足,提供一种基于多判别器生成对抗网络的人脸图像修复方法。
本发明的目的通过以下的技术方案实现:
一种基于多判别器生成对抗网络的人脸图像修复方法,包括以下步骤
步骤A:将公开的人脸图像数据库中的图像进行预处理,并输入到生成器中得到生成图像;
步骤B:真实图像和生成图像输入到判别器中得到反馈值;
步骤C:将判别器的反馈值作为对抗损失,同时结合感知损失和重建损失对生成对抗网络中的生成器和判别器进行对抗训练;
步骤D:将缺失的人脸图像输入到训练好的生成器中得到修复的人脸图像。
步骤A中,所述将公开的人脸图像数据库中的图像进行预处理,具体包括:
步骤A1:将人脸图像x裁剪成大小为n*n,n为正整数,然后使用Dlib人脸特征点检测算法检测人脸图像中左眼、右眼、鼻子和嘴巴这4个区域的特征点,并计算均值得到4个区域的中心特征点位置,以4个区域中每个区域的中心特征点为中心截取4个大小为p*p的图像块,p为正整数;
步骤A2:随机生成大小为m*m的二进制掩码,m为正整数,m的值包括0和1,其中0表示图像中待修补区域,1表示图像中需要保留的区域,将二进制掩码与人脸图像相乘得到模型训练数据;
步骤A3:根据二进制掩码的位置信息将原图中缺失矩形图像块截取出来,然后把该图像块均分成k个大小为(m/k)*(m/k)的小图像块,其中k为正整数。
所述生成器采用类U-NET网络结构,由编码网络与解码网络组成,构成一个U型结构。
所述编码网络由8个编码模块级联组成,其中每个编码模块由1个卷积层、1个批处理层和1个ReLU激活层按顺序级联而成。
所述解码网络由8个解码模块级联组成,其中每个解码模块由1个上采样层、1个拼接层、1个卷积层、1个批处理层、1个ReLU激活层按顺序级联而成。
所述判别器有d个,d为正整数,d=4+1+1+k,其中4个判别器作为人脸图像中左眼、右眼、鼻子和嘴巴这4个区域图像块的输入,确保人脸特定区域所生成出来的细节以及清晰度;1个判别器作为整张图像的输入,确保整体图像语义的一致性;1个判别器作为缺失矩形图像块的输入,确保缺失区域图像的语义一致性;k个判别器作为缺失矩形小图像块的输入,确保缺失区域生成出来的细节以及训练的稳定性。
所述判别器由5个卷积模块级联构成,其中每个卷积模块均由一个卷积核大小t×t的卷积层、1个批处理层和1个系数为0.2的LeakyReLU激活层按顺序级联而成,t为正整数。
步骤C中,所述对抗损失的经验风险最小化项为
Figure BDA0001940993040000031
其中,
Figure BDA0001940993040000032
表示真实图像x服从数据分布规律Pr
Figure BDA0001940993040000033
表示缺失图像
Figure BDA0001940993040000034
服从数据分布规律Pg,Di表示总共d个判别器中的第i个判别器,G表示生成器,
Figure BDA0001940993040000035
表示将缺失图像
Figure BDA0001940993040000036
通过生成器G后输入到判别器Di中。
步骤C中,所述对抗网络使用的是wgan-gp算法,所述对抗损失的梯度惩罚项为
Figure BDA0001940993040000037
其中,
Figure BDA0001940993040000038
为采样自数据分布规律Pr和数据分布规律Pg之间采样点相连的直线,γ为惩罚因子,γ为实数,
Figure BDA0001940993040000039
所述判别器的最小化目标函数为
Figure BDA00019409930400000310
其中,L(Di)表示第i个判别器的最小化目标函数。
步骤C中,所述重建损失为
Figure BDA00019409930400000311
其中x为真实图像,
Figure BDA00019409930400000312
为缺失图像。
步骤C中,所述感知损失为
Figure BDA0001940993040000041
其中,x为真实图像,
Figure BDA0001940993040000042
为缺失图像,Vn()表示利用深度学习网络模型中的第n层来提取特征。
所述深度学习网络模型为用ImageNet数据集预训练的VGG16模型。
所述生成器的最小化目标函数为
Figure BDA0001940993040000043
本发明与现有技术相比,具有如下优点和有益效果:
1、本发明提出一种基于多判别器生成对抗网络的人脸图像修复方法,使用了多个判别器,使网络在训练阶段收敛更加稳定,同时很好地约束生成模型对人脸图像细节的生成,使修复的人脸图像在人脸中眼镜、鼻子和嘴巴等特定区域上生成出更真实的细节和更协调的图像语义。
2、本发明引入多判别器的方法,使用模型时减小了整体网络模型的参数量和计算量,使该方法可以应用在更多的使用场景中。
3、本发明的方法采用程序化、步骤化的方式进行,加工成相关功能模块可以进行更为直接的利用和推广
附图说明
图1为本发明所述一种基于多判别器生成对抗网络的人脸图像修复方法的流程图。
图2是生成器网络结构图。
图3是生成器网络结构细节图。
图4是判别器网络结构图。
图5是原始人脸图像、待修复图像和修复处理后的人脸图像的对比图。
具体实施方式
下面结合实施例及附图对本发明作进一步详细的描述,但本发明的实施方式不限于此。
如图1-5,一种基于多判别器生成对抗网络的人脸图像修复方法,包括步骤如下
步骤(A):将公开的人脸图像数据库中的图像进行预处理,并输入到生成器中得到生成图像;
步骤(B):真实图像和生成图像输入到多个判别器中得到反馈值;
步骤(C):将多个判别器的反馈值作为对抗损失,同时结合感知损失和重建损失对生成对抗网络中的生成器和判别器进行对抗训练;
步骤D:将缺失的人脸图像输入到训练好的生成器中得到修复的人脸图像。
上述步骤(A)中图像预处理步骤包括:
步骤(A1):将人脸图像x裁剪成大小为256*256,然后使用Dlib人脸特征点检测算法检测人脸图像中左眼、右眼、鼻子和嘴巴这4个区域的特征点,并计算均值得到4个区域的中心特征点位置,以4个区域中每个区域的中心特征点为中心截取4个大小为32*32的图像块;
步骤(A2):随机生成大小为128*128的二进制掩码,值包括0和1,其中0表示图像中待修补区域,1表示图像中需要保留的区域,将二进制掩码与人脸图像相乘得到模型训练数据;
步骤(A3):根据二进制掩码的位置信息将原图中缺失矩形图像块截取出来,然后把该图像块均分成4个大小为32*32的小图像块,其中k为正整数。
步骤(A)中所述生成器为类U-NET网络结构,由编码网络与解码网络组成,构成一个U型结构。其中编码网络8个编码模块级联组成,其中每个编码模块由1个卷积层、1个批处理层和1个ReLU激活层构成。解码网络8个解码模块级联组成,其中每个解码模块由1个上采样层、1个拼接层、1个卷积层、1个批处理层还有1个ReLU激活层构成。
步骤(B)中所述判别器有10个,其中4个判别器作为人脸图像中左眼、右眼、鼻子和嘴巴这4个区域图像块的输入,确保人脸特定区域所生成出来的细节以及清晰度;1个判别器作为整张图像的输入,确保整体图像语义的一致性;1个判别器作为缺失矩形图像块的输入,确保缺失区域图像的语义一致性;4个判别器作为缺失矩形小图像块的输入,确保缺失区域生成出来的细节以及训练的稳定性。
上述判别器由5个卷积模块级联构成,其中所有卷积模块由一个卷积核大小4*4的卷积层、1个批处理层和1个系数为0.2的LeakyReLU激活层构成。
步骤C中对抗损失的经验风险最小化项为
Figure BDA0001940993040000061
其中,
Figure BDA0001940993040000062
表示真实图像x服从数据分布规律Pr
Figure BDA0001940993040000063
表示缺失图像
Figure BDA0001940993040000064
服从数据分布规律Pg,Di表示总共10个判别器中的第i个判别器,G表示生成器,
Figure BDA0001940993040000065
表示将缺失图像
Figure BDA00019409930400000612
通过生成器G后输入到判别器Di中。
步骤C所述对抗网络训练使用的是wgan-gp算法,对抗损失中梯度惩罚项为
Figure BDA0001940993040000066
其中,
Figure BDA0001940993040000067
为采样自数据分布规律Pr和数据分布规律Pg之间采样点相连的直线,γ为惩罚因子(γ为实数),
Figure BDA0001940993040000068
步骤C中,判别器的最小化目标函数为
Figure BDA0001940993040000069
其中,L(Di)表示第i个判别器的最小化目标函数。
步骤C中所述重建损失为,
Figure BDA00019409930400000610
其中x为真实图像,
Figure BDA00019409930400000611
为缺失图像。
步骤C中感知损失为
Figure BDA0001940993040000071
其中,x为真实图像,
Figure BDA0001940993040000072
为缺失图像,Vn()表示利用深度学习网络模型中的第n层来提取特征。
结合以上,则上述步骤C中,生成器的最小化目标函数为
Figure BDA0001940993040000073
上述深度学习网络模型为用ImageNet数据集预训练的VGG16模型。
上述实施例为本发明较佳的实施方式,但本发明的实施方式并不受上述实施例的限制,其他的任何未背离本发明的精神实质与原理下所作的改变、修饰、替代、组合、简化,均应为等效的置换方式,都包含在本发明的保护范围之内。

Claims (7)

1.一种基于多判别器生成对抗网络的人脸图像修复方法,其特征在于,包括以下步骤
步骤A:将公开的人脸图像数据库中的图像进行预处理,并输入到生成器中得到生成图像;
步骤B:真实图像和生成图像输入到判别器中得到反馈值;
步骤C:将判别器的反馈值作为对抗损失,同时结合感知损失和重建损失对生成对抗网络中的生成器和判别器进行对抗训练;
步骤D:将缺失的人脸图像输入到训练好的生成器中得到修复的人脸图像;
所述判别器的最小化目标函数为:
Figure FDA0003897081970000011
其中,L(Di)表示第i个判别器的最小化目标函数;
步骤C中,所述重建损失为:
Figure FDA0003897081970000012
其中x为真实图像,
Figure FDA0003897081970000013
为缺失图像;
步骤C中,所述感知损失为:
Figure FDA0003897081970000014
其中,x为真实图像,
Figure FDA0003897081970000015
为缺失图像,Vn()表示利用深度学习网络模型中的第n层来提取特征;
所述深度学习网络模型为用ImageNet数据集预训练的VGG16模型;
所述生成器的最小化目标函数为:
Figure FDA0003897081970000016
2.根据权利要求1所述基于多判别器生成对抗网络的人脸图像修复方法,其特征在于,步骤A中,所述将公开的人脸图像数据库中的图像进行预处理,具体包括:
步骤A1:将人脸图像x裁剪成大小为n*n,n为正整数,然后使用Dlib人脸特征点检测算法检测人脸图像中左眼、右眼、鼻子和嘴巴这4个区域的特征点,并计算均值得到4个区域的中心特征点位置,以4个区域中每个区域的中心特征点为中心截取4个大小为p*p的图像块,p为正整数;
步骤A2:随机生成大小为m*m的二进制掩码,m为正整数,m的值包括0和1,其中0表示图像中待修补区域,1表示图像中需要保留的区域,将二进制掩码与人脸图像相乘得到模型训练数据;
步骤A3:根据二进制掩码的位置信息将原图中缺失矩形图像块截取出来,然后把该图像块均分成k个大小为(m/k)*(m/k)的小图像块,其中k为正整数。
3.根据权利要求1所述基于多判别器生成对抗网络的人脸图像修复方法,其特征在于,所述生成器采用类U-NET网络结构,由编码网络与解码网络组成,构成一个U型结构;所述编码网络由8个编码模块级联组成,其中每个编码模块由1个卷积层、1个批处理层和1个ReLU激活层按顺序级联而成;所述解码网络由8个解码模块级联组成,其中每个解码模块由1个上采样层、1个拼接层、1个卷积层、1个批处理层、1个ReLU激活层按顺序级联而成。
4.根据权利要求1所述基于多判别器生成对抗网络的人脸图像修复方法,其特征在于,所述判别器有d个,d为正整数,d=4+1+1+k,其中4个判别器作为人脸图像中左眼、右眼、鼻子和嘴巴这4个区域图像块的输入;1个判别器作为整张图像的输入;1个判别器作为缺失矩形图像块的输入;k个判别器作为缺失矩形小图像块的输入。
5.根据权利要求1所述基于多判别器生成对抗网络的人脸图像修复方法,其特征在于,所述判别器由5个卷积模块级联构成,其中每个卷积模块均由一个卷积核大小t×t的卷积层、1个批处理层和1个系数为0.2的LeakyReLU激活层按顺序级联而成,t为正整数。
6.根据权利要求1所述基于多判别器生成对抗网络的人脸图像修复方法,其特征在于,步骤C中,所述对抗损失的经验风险最小化项为
Figure FDA0003897081970000031
其中,
Figure FDA0003897081970000032
表示真实图像x服从数据分布规律Pr
Figure FDA0003897081970000033
表示缺失图像
Figure FDA0003897081970000034
服从数据分布规律Pg,Di表示总共d个判别器中的第i个判别器,G表示生成器,
Figure FDA0003897081970000035
表示将缺失图像
Figure FDA0003897081970000036
通过生成器G后输入到判别器Di中。
7.根据权利要求1所述基于多判别器生成对抗网络的人脸图像修复方法,其特征在于,步骤C中,所述对抗网络使用的是wgan-gp算法,所述对抗损失的梯度惩罚项为
Figure FDA0003897081970000037
其中,
Figure FDA0003897081970000038
表示数学期望,
Figure FDA0003897081970000039
表示
Figure FDA00038970819700000310
服从的分布规律,
Figure FDA00038970819700000311
为采样自数据分布规律Pr和数据分布规律Pg之间采样点相连的直线,γ为惩罚因子,γ为实数,
Figure FDA00038970819700000312
Figure FDA00038970819700000313
CN201910021782.XA 2019-01-10 2019-01-10 一种基于多判别器生成对抗网络的人脸图像修复方法 Active CN109785258B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910021782.XA CN109785258B (zh) 2019-01-10 2019-01-10 一种基于多判别器生成对抗网络的人脸图像修复方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910021782.XA CN109785258B (zh) 2019-01-10 2019-01-10 一种基于多判别器生成对抗网络的人脸图像修复方法

Publications (2)

Publication Number Publication Date
CN109785258A CN109785258A (zh) 2019-05-21
CN109785258B true CN109785258B (zh) 2022-12-16

Family

ID=66500090

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910021782.XA Active CN109785258B (zh) 2019-01-10 2019-01-10 一种基于多判别器生成对抗网络的人脸图像修复方法

Country Status (1)

Country Link
CN (1) CN109785258B (zh)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110175567A (zh) * 2019-05-28 2019-08-27 吉林大学 基于wgan-gp和u-net的素描—照片转化方法
CN110211045B (zh) * 2019-05-29 2022-09-06 电子科技大学 基于srgan网络的超分辨率人脸图像重建方法
CN110210399A (zh) * 2019-05-31 2019-09-06 广东世纪晟科技有限公司 一种基于不确定性量化概率卷积神经网络的人脸识别方法
CN110222628A (zh) * 2019-06-03 2019-09-10 电子科技大学 一种基于生成式对抗网络的人脸修复方法
CN110189278B (zh) * 2019-06-06 2020-03-03 上海大学 一种基于生成对抗网络的双目场景图像修复方法
CN110457994B (zh) * 2019-06-26 2024-05-10 平安科技(深圳)有限公司 人脸图像生成方法及装置、存储介质、计算机设备
CN110309889A (zh) * 2019-07-04 2019-10-08 西南大学 一种双判别器gan的古彝文字符修复方法
CN110473151B (zh) * 2019-07-04 2022-05-03 北京航空航天大学 基于分区卷积和关联损失的双阶段图像补全方法及系统
CN110533615A (zh) * 2019-08-30 2019-12-03 上海大学 一种基于生成对抗网络的老电影大面积破损修复方法
CN110648294B (zh) * 2019-09-19 2022-08-30 北京百度网讯科技有限公司 图像修复方法、装置及电子设备
CN110717857A (zh) * 2019-09-29 2020-01-21 中国科学院长春光学精密机械与物理研究所 超分辨率图像重构方法和装置
CN110706303B (zh) * 2019-10-15 2021-05-11 西南交通大学 基于GANs的人脸图像生成方法
CN112836701A (zh) * 2019-11-25 2021-05-25 中国移动通信集团浙江有限公司 人脸识别方法、装置及计算设备
CN111033532B (zh) * 2019-11-26 2024-04-02 驭势(上海)汽车科技有限公司 生成对抗网络的训练方法和系统、电子设备和存储介质
CN111192206A (zh) * 2019-12-03 2020-05-22 河海大学 一种提高图像清晰度的方法
CN111105336A (zh) * 2019-12-04 2020-05-05 山东浪潮人工智能研究院有限公司 一种基于对抗网络的图像去水印的方法
CN113112411B (zh) * 2020-01-13 2023-11-24 南京信息工程大学 基于多尺度特征融合的人脸图像语义修复方法
CN111523412A (zh) * 2020-04-08 2020-08-11 北京百度网讯科技有限公司 图像处理方法和装置
CN111507914B (zh) * 2020-04-10 2023-08-08 北京百度网讯科技有限公司 人脸修复模型的训练方法、修复方法、装置、设备和介质
CN113689527B (zh) * 2020-05-15 2024-02-20 武汉Tcl集团工业研究院有限公司 一种人脸转换模型的训练方法、人脸图像转换方法
CN111612718A (zh) * 2020-05-21 2020-09-01 中山大学 一种引入注意力机制的人脸图像修复方法
CN111832609B (zh) * 2020-06-01 2024-02-13 北京百度网讯科技有限公司 图像处理模型的训练方法、装置、电子设备和存储介质
CN111767861B (zh) * 2020-06-30 2024-03-12 苏州兴钊防务研究院有限公司 一种基于多判别器生成对抗网络的sar图像目标识别方法
CN111784611B (zh) * 2020-07-03 2023-11-03 厦门美图之家科技有限公司 人像美白方法、装置、电子设备和可读存储介质
CN112001427B (zh) * 2020-08-04 2022-11-15 中国科学院信息工程研究所 一种基于类比学习的图像转化方法和装置
CN112102928B (zh) * 2020-09-02 2022-11-01 上海壁仞智能科技有限公司 病理图像染色风格归一化方法及装置
CN112270651B (zh) * 2020-10-15 2023-12-15 西安工程大学 一种基于多尺度判别生成对抗网络的图像修复方法
WO2022087941A1 (zh) * 2020-10-29 2022-05-05 京东方科技集团股份有限公司 人脸重建模型的训练方法及装置、人脸重建方法及装置、电子设备和可读存储介质
CN112541866B (zh) * 2020-11-24 2022-09-13 同济大学 一种基于进化式生成对抗网络的人脸图像修复模型
CN114581458A (zh) * 2020-12-02 2022-06-03 中强光电股份有限公司 产生影像辨识模型的方法及使用所述方法的电子装置
CN112634176B (zh) * 2021-01-05 2022-02-25 西南石油大学 基于多感知对抗生成网络的手机拍摄图像去噪方法
CN113111906B (zh) * 2021-02-24 2022-07-12 浙江大学 一种基于单对图像训练的条件生成对抗网络模型的方法
CN113222808B (zh) * 2021-05-18 2024-10-18 东南大学 一种基于生成式对抗网络的人脸口罩移除方法
CN116797877A (zh) * 2023-06-26 2023-09-22 支付宝(杭州)信息技术有限公司 图像生成模型的训练方法及装置、图像生成方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10262236B2 (en) * 2017-05-02 2019-04-16 General Electric Company Neural network training image generation system
CN108171266A (zh) * 2017-12-25 2018-06-15 中国矿业大学 一种多目标深度卷积生成式对抗网络模型的学习方法
CN108460760B (zh) * 2018-03-06 2020-08-25 陕西师范大学 一种基于生成式对抗网络的桥梁裂缝图像判别修复方法
CN108537743B (zh) * 2018-03-13 2022-05-20 杭州电子科技大学 一种基于生成对抗网络的面部图像增强方法
CN108520503B (zh) * 2018-04-13 2020-12-22 湘潭大学 一种基于自编码器和生成对抗网络修复人脸缺损图像的方法
CN108986041A (zh) * 2018-06-13 2018-12-11 浙江大华技术股份有限公司 一种图像恢复方法、装置、电子设备及可读存储介质

Also Published As

Publication number Publication date
CN109785258A (zh) 2019-05-21

Similar Documents

Publication Publication Date Title
CN109785258B (zh) 一种基于多判别器生成对抗网络的人脸图像修复方法
Wang et al. Deeply supervised face completion with multi-context generative adversarial network
US20220156987A1 (en) Adaptive convolutions in neural networks
Sun et al. Masked lip-sync prediction by audio-visual contextual exploitation in transformers
Zhang et al. Generative adversarial and self-supervised dehazing network
Hu et al. Dear-gan: Degradation-aware face restoration with gan prior
Wang et al. AAGAN: enhanced single image dehazing with attention-to-attention generative adversarial network
CN116310045A (zh) 一种三维人脸纹理创建方法、装置及设备
CN116385606A (zh) 一种语音信号驱动的个性化三维人脸动画生成方法及其应用
CN111832517A (zh) 基于门控卷积的低清人脸关键点检测方法
Zhang et al. FCHP: Exploring the discriminative feature and feature correlation of feature maps for hierarchical DNN pruning and compression
CN116740547A (zh) 基于数字孪生的变电站目标检测方法、系统、设备及介质
Cai et al. Fcsr-gan: End-to-end learning for joint face completion and super-resolution
CN114092354A (zh) 一种基于生成对抗网络的人脸图像修复方法
CN117218246A (zh) 图像生成模型的训练方法、装置、电子设备及存储介质
CN116563506A (zh) 直播场景下基于xr设备的三维表情人脸还原方法、系统及设备
Jiang et al. Multi-level memory compensation network for rain removal via divide-and-conquer strategy
Liu et al. X-gans: Image reconstruction made easy for extreme cases
Zhou et al. Perceptual Information Completion based Siamese Omnidirectional Image Quality Assessment Network
You et al. Db-net: dual attention network with bilinear pooling for fire-smoke image classification
Vasiliu et al. Coherent rendering of virtual smile previews with fast neural style transfer
Zhu et al. A Study on Intelligent Obscured Face Image Completion System Based on GAN Network
CN118154830B (zh) 一种基于单视角视频的2d数字人重光照方法和系统
CN114863527B (zh) 一种基于fp-scgan模型的妆容风格迁移方法
Wang et al. ISFRNet: A Deep Three-stage Identity and Structure Feature Refinement Network for Facial Image Inpainting.

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant