CN110348496A - 一种人脸图像融合的方法及系统 - Google Patents
一种人脸图像融合的方法及系统 Download PDFInfo
- Publication number
- CN110348496A CN110348496A CN201910569455.8A CN201910569455A CN110348496A CN 110348496 A CN110348496 A CN 110348496A CN 201910569455 A CN201910569455 A CN 201910569455A CN 110348496 A CN110348496 A CN 110348496A
- Authority
- CN
- China
- Prior art keywords
- face
- point data
- data
- mask
- crucial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000001815 facial effect Effects 0.000 title claims abstract description 47
- 230000004927 fusion Effects 0.000 title claims abstract description 26
- 238000000034 method Methods 0.000 title claims abstract description 11
- 230000000694 effects Effects 0.000 claims abstract description 17
- 239000011159 matrix material Substances 0.000 claims description 17
- 230000009466 transformation Effects 0.000 claims description 13
- 238000000605 extraction Methods 0.000 claims description 4
- 239000000284 extract Substances 0.000 claims description 3
- 238000007500 overflow downdraw method Methods 0.000 claims description 3
- 238000007781 pre-processing Methods 0.000 claims description 3
- 238000006243 chemical reaction Methods 0.000 claims 1
- 238000005516 engineering process Methods 0.000 description 4
- 239000000155 melt Substances 0.000 description 2
- 238000002156 mixing Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000002844 melting Methods 0.000 description 1
- 230000008018 melting Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明涉及一种人脸图像融合的方法，包括如下步骤：识别人脸模板图人脸区域，得到关键点数据A及人脸朝向数据；识别待融合人脸图的人脸区域，经处理得到关键点数据B及人脸朝向数据；通过三角剖分重新绘制待融合人脸图和人脸模板图，结合关键点数据B实现两图的人脸对齐；通过关键点数据B的脸部轮廓计算出待融合人脸图的五官区域掩码图C，将待融合人脸图、人脸模板图和掩码图C输入泊松融合网络中，得到初步效果图D；将关键点数据B的脸部轮廓计算出所述人脸模板图的五官区域，去除掉眼睛和嘴巴区域后，得到掩码图E；将所述人脸模板图、初步效果图D和掩码图E，通过泊松融合网络得到最终的效果图。本发明还公开了相应的人脸图像融合的系统。
Description
技术领域
本发明涉及图像融合处理技术领域，特别是涉及一种人脸图像融合的方法及系统。
背景技术
在人脸图像处理领域，随着AI人工智能的出现，对用户图片照片的美颜，渲染，锐化，分割等技术越发成熟，凡是在图像融合处理技术领域，略显不足，在传统图像处理实现方案中，不论是利用直方图统计或者RGB缩放的方式都很难让融合效果达到很高的鲁棒性，尤其是对于用户图片带有复杂的光照。
基于深度机器学习的技术实现方案，在融合效果方面，比传统的好，但需要花费大量的云端计算服务器的成本，在用户移动终端需要依赖于良好的网络条件甚至需要长时间的等待，对于人脸不端正，侧脸融合图像模糊，效果不好，用户体验差。。
发明内容
基于此，本发明的目的在于，提供一种人脸图像融合的方法及系统，通过对人脸关键点的计算，将融合图的面部变形，根据模板图的人脸角度，得到符合模板图角度的人脸五官面具，解决侧脸融合中角度和边缘的问题，使融合更真实，同时融合速度快，节省用户服务器资源。
一种人脸图像融合的方法，包括如下步骤：
获取用户待融合人脸图和人脸模板图；
将人脸模板图进行人脸识别，得到关键点数据A以及人脸朝向数据；
将待融合人脸图进行人脸识别，得到关键点数据B1以及人脸朝向数据；缩放并位移所述关键点数据B1到所述人脸模板图矩形区域内；通过缩放将所述关键点数据B1的眼睛轮廓点和所述关键点数据A的眼睛轮廓点对齐；利用所述关键点数据B1和关键点数据A嘴巴轮廓关键点计算出透视变换矩阵M，使用所述矩阵M对关键点数据B1进行透视变换；提取所述关键点数据A的脸部轮廓点，替换所述关键点数据B1的脸部轮廓点，得到关键点数据B；
将所述关键点数据B结合图像的左上、上中、右上、右中、右下、下中、坐下、左中八个点进行三角剖分，通过三角剖分重新绘制所述待融合人脸图和所述人脸模板图，实现两图的人脸对齐；
将所述关键点数据B的脸部轮廓计算出所述待融合人脸图的五官区域掩码图C，将所述待融合人脸图、人脸模板图和掩码图C输入泊松融合网络中，得到初步效果图D；
将所述关键点数据B的脸部轮廓计算出所述人脸模板图的五官区域，去除掉眼睛和嘴巴区域后，得到掩码图E；将所述人脸模板图、初步效果图D和掩码图E，输入到泊松融合网络中，得到最终的效果图；
一种人脸图像融合的系统，所述系统包括：
人脸模板图关键点预处理模块，用于将人脸模板图进行人脸识别，得到关键点数据A以及人脸朝向数据；
待融合人脸图像关键点调整模块，用于将待融合人脸图进行人脸识别，得到关键点数据 B1以及人脸朝向数据；其中，缩放并位移所述关键点数据B1到所述人脸模板图矩形区域内；通过缩放将所述关键点数据B1的眼睛轮廓点和所述关键点数据A的眼睛轮廓点对齐；利用所述关键点数据B1和关键点数据A嘴巴轮廓关键点计算出透视变换矩阵M，使用所述矩阵 M对关键点数据B1进行透视变换；提取所述关键点数据A的脸部轮廓点，替换所述关键点数据B1的脸部轮廓点，得到关键点数据B；
人脸对齐模块，用于将所述关键点数据B结合图像的左上、上中、右上、右中、右下、下中、坐下、左中八个点进行三角剖分，通过三角剖分重新绘制所述待融合人脸图和所述人脸模板图，实现两图的人脸对齐；
五官图像面具无缝融合模块，用于将所述关键点数据B的脸部轮廓计算出所述待融合人脸图的五官区域掩码图C，将所述待融合人脸图、人脸模板图和掩码图C输入泊松融合网络中，得到初步效果图D；
人像融合模块，用于将所述关键点数据B的脸部轮廓计算出所述人脸模板图的五官区域，去除掉眼睛和嘴巴区域后，得到掩码图E；将所述人脸模板图、初步效果图D和掩码图E，输入到泊松融合网络中，得到最终的效果图；
本发明相对于现有技术具有以下有益效果：
本方案根据所述待融合人脸图关键点进行调整和透视变换，得到关键点数据B2和人像朝向数据；根据人脸模板图关键点预处理，得到关键点数据A以及人脸朝向数据；将关键点数据B2结合图像的左上、上中、右上、右中、右下、下中、坐下、左中八个点进行三角剖分，通过三角剖分重新绘制所述待融合人脸图和所述人脸模板图，实现两图的人脸对齐；通过关键点数据B2脸部轮廓计算待融合人脸图的五官掩码图C，通过泊松融合网络处理待融合人脸图、人脸模板图和解码图C得到初步效果图D；通过关键点数据B2脸部轮廓计算出人脸模板图的五官区域，去除眼睛和嘴巴区域后，得到掩码图E，将人脸模板图、初步效果图 D和掩码图E通过泊松融合网络，计算得出最终融合的效果图。通过人脸模板图和待融合人脸图关键点的处理，使得融合角度和边缘的融合效果更真实，融合速度快，完全离线的情况下，不需要网络便可生成融合图像。
附图说明
图1为本发明一种人脸图像融合方法流程图；
图2为本发明一种人脸图像融合系统流程图；
图3为本发明待融合人脸图像关键点调整模块示意图；
图4(A、B、C、D)为本发明实施例中待融合人脸图、人脸模板图、融合输出的本地结果图、传统机器学习的结果图；
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部的实施例。
克服现有技术中，运行速度慢，融合效果差，消耗服务器资源等缺点，请参阅图1和图 3，本发明提供一种人脸图像融合的方法，包括如下步骤：
S101：获取用户待融合人脸图和人脸模板图；
S102：将人脸模板图进行人脸识别，得到关键点数据A以及人脸朝向数据；
S103：将待融合人脸图进行人脸识别，得到关键点数据B1以及人脸朝向数据；缩放并位移所述关键点数据B1到所述人脸模板图矩形区域内；通过缩放将所述关键点数据B1的眼睛轮廓点和所述关键点数据A的眼睛轮廓点对齐；利用所述关键点数据B1和关键点数据A嘴巴轮廓关键点计算出透视变换矩阵M，使用所述矩阵M对关键点数据B1进行透视变换；提取所述关键点数据A的脸部轮廓点，替换所述关键点数据B1的脸部轮廓点，得到关键点数据B；
S104：将所述关键点数据B结合图像的左上、上中、右上、右中、右下、下中、坐下、左中八个点进行三角剖分，通过三角剖分重新绘制所述待融合人脸图和所述人脸模板图，实现两图的人脸对齐；
S105：将所述关键点数据B的脸部轮廓计算出所述待融合人脸图的五官区域掩码图C，将所述待融合人脸图、人脸模板图和掩码图C输入泊松融合网络中，得到初步效果图D；
S106：将所述关键点数据B的脸部轮廓计算出所述人脸模板图的五官区域，去除掉眼睛和嘴巴区域后，得到掩码图E；将所述人脸模板图、初步效果图D和掩码图E，输入到泊松融合网络中，得到最终的效果图；
具体的，在对模板图关键点处理时，获取的人脸朝向数据，对应三个值yaw、pitch、roll 是三个角度值，yaw是围绕着y轴旋转的，对应到人脸上就是左右转头，roll是围绕z轴旋转，对应到人脸上就是左右点头，pitch是围绕x轴旋转，对应到人脸上就是上下点头。
在步骤S103待融合人脸图识别获取关键点数据包括，数据识别、关键点提取、透视变换、关键点替换、数据输出，具体实现步骤如下：
对待融合人脸图像进行人脸数据识别；
识别待融合人脸图像后，提取人脸关键点数据B1；
透视变换模块，缩放并位移关键点数据B1到模板人脸矩形区域中，对人脸关键点进行操作缩放，选择关键点A中最外侧的两个点，计算距离da；选择关键点B1最外侧的两个点，计算距离db；通过da/db得到缩放比例，根据所述缩放比例对B1所有点进行缩放移动；选择 A和B1眼睛中央的关键点，计算距离，从而确定得出B1移动到A位置的大致距离；缩放将关键点数据B1的眼睛轮廓对齐关键点数据A的眼睛轮廓点，利用关键点数据B和关键点数据A的嘴巴轮廓点计算出透视变换矩阵M；关键点替换模块，利用透视变换矩阵M，对关键点数据B1进行透视变换；
关键点替换模块，使用关键点数据A的脸部轮廓点，完全替换替换关键点数据B1的脸部轮廓，得到关键点数据B。
输出模块，输出待融合人脸图关键点数据B。
参照图2所示，本发明提供一种人脸图像融合的系统，包括以下模块：
S201：人脸模板图关键点预处理模块，用于将人脸模板图进行人脸识别，得到关键点数据A以及人脸朝向数据；
S202：待融合人脸图像关键点调整模块，用于将待融合人脸图进行人脸识别，得到关键点数据B1以及人脸朝向数据；缩放并位移所述关键点数据B1到所述人脸模板图矩形区域内；通过缩放将所述关键点数据B1的眼睛轮廓点和所述关键点数据A的眼睛轮廓点对齐；利用所述关键点数据B1和关键点数据A嘴巴轮廓关键点计算出透视变换矩阵M，使用所述矩阵 M对关键点数据B1进行透视变换；提取所述关键点数据A的脸部轮廓点，替换所述关键点数据B1的脸部轮廓点，得到关键点数据B；
S203：人脸对齐模块，用于将所述关键点数据B结合图像的左上、上中、右上、右中、右下、下中、坐下、左中八个点进行三角剖分，通过三角剖分重新绘制所述待融合人脸图和所述人脸模板图，实现两图的人脸对齐；
S204：五官图像面具无缝融合模块，用于将所述关键点数据B的脸部轮廓计算出所述待融合人脸图的五官区域掩码图C，将所述待融合人脸图、人脸模板图和掩码图C输入泊松融合网络中，得到初步效果图D；
S205：人像融合模块，用于将所述关键点数据B的脸部轮廓计算出所述人脸模板图的五官区域，去除掉眼睛和嘴巴区域后，得到掩码图E；将所述人脸模板图、初步效果图D和掩码图E，输入到泊松融合网络中，得到最终的效果图；
具体的，在对模板图关键点处理时，获取的人脸朝向数据，对应三个值yaw、pitch、roll 是三个角度值，yaw是围绕着y轴旋转的，对应到人脸上就是左右转头，roll是围绕z轴旋转，对应到人脸上就是左右点头，pitch是围绕x轴旋转，对应到人脸上就是上下点头。
如图3所示，待融合人脸图模块，包含数据识别模块、关键点提取模块、透视变换模块、关键点替换模块、输出模块，具体实现步骤如下：
S301：数据识别模块，对待融合人脸图像进行人脸数据识别；
S302：关键点提取模块，识别待融合人脸图像后，提取人脸关键点数据B1；
S303：透视变换模块，缩放并位移关键点数据B1到模板人脸矩形区域中，对人脸关键点进行操作缩放，选择关键点A中最外侧的两个点，计算距离da；选择关键点B1最外侧的两个点，计算距离db；通过da/db得到缩放比例，根据所述缩放比例对B1所有点进行缩放移动；选择A和B1眼睛中央的关键点，计算距离，从而确定得出B1移动到A位置的大致距离；缩放将关键点数据B1的眼睛轮廓对齐关键点数据A的眼睛轮廓点，利用关键点数据B1 和关键点数据A的嘴巴轮廓点计算出透视变换矩阵M；关键点替换模块，利用透视变换矩阵 M，对关键点数据B1进行透视变换；
S304：关键点替换模块，使用关键点数据A的脸部轮廓点，完全替换替换关键点数据 B1的脸部轮廓，得到关键点数据B。
S305：输出模块，输出待融合人脸图关键点数据B。
本发明方案融合效果明显优于传统方法，模板图的融合效果，特别是在侧脸模板图的情况下，可以完美的实现融合，且可以运行于客户端，算法时间对1080P图像能控制在300毫秒以内，平均100毫秒，其中，模板图的人脸占比越高，耗时越长，从用户体验来讲，融合速度快，等待时间少，同时节省服务器资源，在无需云端服务器，网络的情况下，可以完全实现离线运行。
模板图是侧脸的情况下，融合效果更好，角度和边缘的融合效果更真实，传统机器学习的方案，经过服务器，成功率比较低，本实现方案在客户端处理，成功率大大提成，此外，大幅度优化了边缘和侧脸的融合，保存率也提升较大。如图4(A、B、C、D)所示，分别是待融合图、模板图、融合输出的本地结果图、传统机器学习的结果图。
此外，本领域技术人员能够理解，尽管再次所述的一些实施例包括其它实施例中所包含的某些特征而不是其他特征，但是不同实施例的特征的组合意味着处于本发明的范围之外，并且形成不同的实施例。例如，在所述的权利要求书中，所要求的保护的实施例的任意之一都可以以任意的组合方式来使用。
尽管根据有限数量的实施例描述了本发明，但是收益于上面的描述，本技术领域内的技术人员明白，在由此描述的本发明的范围内，可以设想其他实施例。此外，应当注意，本说明书中使用的语言主要是为了可读性和教导的目的而选择的，而不是为了解释或者限定本发明的主题而选择的。因此，在不偏离所附权利要求书的范围和精神的情况下，对于本技术领域的普通技术人员来说，许多修改和变更是显而易见的。对于本发明的范围，对本发明所作的公开是说明性的，而非限制性的，本发明的范围由所附权利要求书限定。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。
Claims (5)
1.一种人脸图像融合的方法，其特征在于，包括如下步骤：
获取用户待融合人脸图和人脸模板图；
将人脸模板图进行人脸识别，得到关键点数据A以及人脸朝向数据；
将待融合人脸图进行人脸识别和预处理，得到关键点数据B以及人脸朝向数据；
将所述关键点数据B结合图像的左上、上中、右上、右中、右下、下中、坐下、左中八个点进行三角剖分，通过三角剖分重新绘制所述待融合人脸图和所述人脸模板图，实现两图的人脸对齐；
将所述关键点数据B的脸部轮廓计算出所述待融合人脸图的五官区域掩码图C，将所述待融合人脸图、人脸模板图和掩码图C输入泊松融合网络中，得到初步效果图D；
将所述关键点数据B的脸部轮廓计算出所述人脸模板图的五官区域，去除掉眼睛和嘴巴区域后，得到掩码图E；将所述人脸模板图、初步效果图D和掩码图E，输入到泊松融合网络中，得到最终的效果图。
2.如权利要求1所述的人脸图像融合方法，其特征在于：所述待融合人脸图进行识别和预处理包括以下步骤：
识别待融合人脸图得到关键数据B1；
缩放并位移所述待融合人脸图像的关键点数据B1到所述人脸模板图矩形区域内；通过缩放将所述关键点数据B1的眼睛轮廓点和所述关键点数据A的眼睛轮廓点对齐；
利用所述关键点数据B1和关键点数据A嘴巴轮廓关键点计算出透视变换矩阵M，使用所述矩阵M对关键点数据B1进行透视变换；
提取所述关键点数据A的脸部轮廓点，替换所述关键点数据B1的脸部轮廓点，得到关键点数据B。
3.如权利要求1所述的人脸图像融合方法，其特征在于：所述人脸朝向数据三个值yaw，pitch，roll是角度值。其中，yaw是围绕着y轴旋转的，对应到人脸上是左右转头，roll是围绕z轴旋转，对应到人脸上是左右点头，pitch是围绕x轴旋转，对应到人脸上是上下点头。
4.一种人脸图像融合的系统，其特征在于，包括如下模块：
人脸模板图关键点预处理模块，用于将人脸模板图进行人脸识别，得到关键点数据A以及人脸朝向数据；
待融合人脸图像关键点调整模块，用于将待融合人脸图进行人脸识别，得到关键点数据B1以及人脸朝向数据；缩放并位移所述关键点数据B1到所述人脸模板图矩形区域内；通过缩放将所述关键点数据B1的眼睛轮廓点和所述关键点数据A的眼睛轮廓点对齐；利用所述关键点数据B1和关键点数据A嘴巴轮廓关键点计算出透视变换矩阵M，使用所述矩阵M对关键点数据B1进行透视变换；提取所述关键点数据A的脸部轮廓点，替换所述关键点数据B1的脸部轮廓点，得到关键点数据B；
人脸对齐模块，用于将所述关键点数据B结合图像的左上、上中、右上、右中、右下、下中、坐下、左中八个点进行三角剖分，通过三角剖分重新绘制所述待融合人脸图和所述人脸模板图，实现两图的人脸对齐；
五官图像面具无缝融合模块，用于将所述关键点数据B的脸部轮廓计算出所述待融合人脸图的五官区域掩码图C，将所述待融合人脸图、人脸模板图和掩码图C输入泊松融合网络中，得到初步效果图D；
人像融合模块，用于将所述关键点数据B的脸部轮廓计算出所述人脸模板图的五官区域，去除掉眼睛和嘴巴区域后，得到掩码图E；将所述人脸模板图、初步效果图D和掩码图E，输入到泊松融合网络中，得到最终的效果图。
5.如权利要求4所述的待融合人脸图模块，包含数据识别模块、关键点提取模块、透视变换模块、关键点替换模块、输出模块，具体实现步骤如下：
数据识别模块，对待融合人脸图像进行人脸数据识别；
关键点提取模块，识别待融合人脸图像后，提取人脸关键点数据B1；
透视变换模块，缩放并位移关键点数据B1到模板人脸矩形区域中，对人脸关键点进行操作缩放，选择关键点A中最外侧的两个点，计算距离da；选择关键点B1最外侧的两个点，计算距离db；通过da/db得到缩放比例，根据所述缩放比例对B1所有点进行缩放移动；选择A和B1眼睛中央的关键点，计算距离，从而确定得出B1移动到A位置的大致距离；缩放将关键点数据B1的眼睛轮廓对齐关键点数据A的眼睛轮廓点，利用关键点数据B1和关键点数据A的嘴巴轮廓点计算出透视变换矩阵M；关键点替换模块，利用透视变换矩阵M，对关键点数据B1进行透视变换；
关键点替换模块，使用关键点数据A的脸部轮廓点，完全替换替换关键点数据B1的脸部轮廓，得到关键点数据B。
输出模块，输出待融合人脸图关键点数据B。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910569455.8A CN110348496B (zh) | 2019-06-27 | 2019-06-27 | 一种人脸图像融合的方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910569455.8A CN110348496B (zh) | 2019-06-27 | 2019-06-27 | 一种人脸图像融合的方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110348496A true CN110348496A (zh) | 2019-10-18 |
| CN110348496B CN110348496B (zh) | 2023-11-14 |
Family
ID=68176719
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910569455.8A Active CN110348496B (zh) | 2019-06-27 | 2019-06-27 | 一种人脸图像融合的方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110348496B (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111179156A (zh) * | 2019-12-23 | 2020-05-19 | 北京中广上洋科技股份有限公司 | 一种基于人脸检测的视频美化方法 |
| CN111489311A (zh) * | 2020-04-09 | 2020-08-04 | 北京百度网讯科技有限公司 | 一种人脸美化方法、装置、电子设备及存储介质 |
| CN111783621A (zh) * | 2020-06-29 | 2020-10-16 | 北京百度网讯科技有限公司 | 人脸表情识别及模型训练的方法、装置、设备及存储介质 |
| CN112257657A (zh) * | 2020-11-11 | 2021-01-22 | 网易（杭州）网络有限公司 | 脸部图像融合方法及装置、存储介质、电子设备 |
| CN112258384A (zh) * | 2020-10-22 | 2021-01-22 | 北京中科深智科技有限公司 | 一种实时人物视频去背景的方法和系统 |
| CN112949360A (zh) * | 2019-12-11 | 2021-06-11 | 广州市久邦数码科技有限公司 | 一种视频换脸方法和装置 |
| CN113052783A (zh) * | 2019-12-27 | 2021-06-29 | 杭州深绘智能科技有限公司 | 一种基于人脸关键点的人脸图像融合方法 |
| CN114782708A (zh) * | 2022-05-12 | 2022-07-22 | 北京百度网讯科技有限公司 | 图像生成方法、图像生成模型的训练方法、装置和设备 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015017687A2 (en) * | 2013-07-31 | 2015-02-05 | Cosmesys Inc. | Systems and methods for producing predictive images |
| CN107680071A (zh) * | 2017-10-23 | 2018-02-09 | 深圳市云之梦科技有限公司 | 一种人脸与身体融合处理的方法及系统 |
| CN108257084A (zh) * | 2018-02-12 | 2018-07-06 | 北京中视广信科技有限公司 | 一种基于移动端的轻量级人脸自动化妆方法 |
| CN108876705A (zh) * | 2017-11-23 | 2018-11-23 | 北京旷视科技有限公司 | 图像合成的方法、装置及计算机存储介质 |
| CN109191410A (zh) * | 2018-08-06 | 2019-01-11 | 腾讯科技（深圳）有限公司 | 一种人脸图像融合方法、装置及存储介质 |
| CN109376684A (zh) * | 2018-11-13 | 2019-02-22 | 广州市百果园信息技术有限公司 | 一种人脸关键点检测方法、装置、计算机设备和存储介质 |
| US20190080431A1 (en) * | 2017-09-14 | 2019-03-14 | The Regents Of The University Of Colorado, A Body Corporate | Thermal-Depth Fusion Imaging |
| CN109829930A (zh) * | 2019-01-15 | 2019-05-31 | 深圳市云之梦科技有限公司 | 人脸图像处理方法、装置、计算机设备及可读存储介质 |
| CN109859098A (zh) * | 2019-01-15 | 2019-06-07 | 深圳市云之梦科技有限公司 | 人脸图像融合方法、装置、计算机设备及可读存储介质 |
-
2019
- 2019-06-27 CN CN201910569455.8A patent/CN110348496B/zh active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015017687A2 (en) * | 2013-07-31 | 2015-02-05 | Cosmesys Inc. | Systems and methods for producing predictive images |
| US20190080431A1 (en) * | 2017-09-14 | 2019-03-14 | The Regents Of The University Of Colorado, A Body Corporate | Thermal-Depth Fusion Imaging |
| CN107680071A (zh) * | 2017-10-23 | 2018-02-09 | 深圳市云之梦科技有限公司 | 一种人脸与身体融合处理的方法及系统 |
| CN108876705A (zh) * | 2017-11-23 | 2018-11-23 | 北京旷视科技有限公司 | 图像合成的方法、装置及计算机存储介质 |
| CN108257084A (zh) * | 2018-02-12 | 2018-07-06 | 北京中视广信科技有限公司 | 一种基于移动端的轻量级人脸自动化妆方法 |
| CN109191410A (zh) * | 2018-08-06 | 2019-01-11 | 腾讯科技（深圳）有限公司 | 一种人脸图像融合方法、装置及存储介质 |
| CN109376684A (zh) * | 2018-11-13 | 2019-02-22 | 广州市百果园信息技术有限公司 | 一种人脸关键点检测方法、装置、计算机设备和存储介质 |
| CN109829930A (zh) * | 2019-01-15 | 2019-05-31 | 深圳市云之梦科技有限公司 | 人脸图像处理方法、装置、计算机设备及可读存储介质 |
| CN109859098A (zh) * | 2019-01-15 | 2019-06-07 | 深圳市云之梦科技有限公司 | 人脸图像融合方法、装置、计算机设备及可读存储介质 |
Non-Patent Citations (3)
| Title |
|---|
| PEI-YING CHIANG等: "Generation of Chinese ink portraits by blending face photographs with Chinese ink paintings", 《JOURNAL OF VISUAL COMMUNICATION AND IMAGE REPRESENTATION》 * |
| 仪晓斌等: "分段仿射变换下基于泊松融合的正面人脸合成", 《计算机工程与应用》 * |
| 胡广宇: "视频虚拟美颜技术研究与实现", 《中国硕士学位论文全文数据库(信息科技辑)》 * |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112949360A (zh) * | 2019-12-11 | 2021-06-11 | 广州市久邦数码科技有限公司 | 一种视频换脸方法和装置 |
| CN111179156B (zh) * | 2019-12-23 | 2023-09-19 | 北京中广上洋科技股份有限公司 | 一种基于人脸检测的视频美化方法 |
| CN111179156A (zh) * | 2019-12-23 | 2020-05-19 | 北京中广上洋科技股份有限公司 | 一种基于人脸检测的视频美化方法 |
| CN113052783A (zh) * | 2019-12-27 | 2021-06-29 | 杭州深绘智能科技有限公司 | 一种基于人脸关键点的人脸图像融合方法 |
| CN111489311B (zh) * | 2020-04-09 | 2023-08-08 | 北京百度网讯科技有限公司 | 一种人脸美化方法、装置、电子设备及存储介质 |
| CN111489311A (zh) * | 2020-04-09 | 2020-08-04 | 北京百度网讯科技有限公司 | 一种人脸美化方法、装置、电子设备及存储介质 |
| CN111783621A (zh) * | 2020-06-29 | 2020-10-16 | 北京百度网讯科技有限公司 | 人脸表情识别及模型训练的方法、装置、设备及存储介质 |
| CN111783621B (zh) * | 2020-06-29 | 2024-01-23 | 北京百度网讯科技有限公司 | 人脸表情识别及模型训练的方法、装置、设备及存储介质 |
| CN112258384A (zh) * | 2020-10-22 | 2021-01-22 | 北京中科深智科技有限公司 | 一种实时人物视频去背景的方法和系统 |
| CN112257657A (zh) * | 2020-11-11 | 2021-01-22 | 网易（杭州）网络有限公司 | 脸部图像融合方法及装置、存储介质、电子设备 |
| CN112257657B (zh) * | 2020-11-11 | 2024-02-27 | 网易（杭州）网络有限公司 | 脸部图像融合方法及装置、存储介质、电子设备 |
| CN114782708A (zh) * | 2022-05-12 | 2022-07-22 | 北京百度网讯科技有限公司 | 图像生成方法、图像生成模型的训练方法、装置和设备 |
| CN114782708B (zh) * | 2022-05-12 | 2024-04-16 | 北京百度网讯科技有限公司 | 图像生成方法、图像生成模型的训练方法、装置和设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110348496B (zh) | 2023-11-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110348496A (zh) | 一种人脸图像融合的方法及系统 | |
| CN107729838A (zh) | 一种基于深度学习的头部姿态估算方法 | |
| CN110363116B (zh) | 基于gld-gan的不规则人脸矫正方法、系统及介质 | |
| CN109376582A (zh) | 一种基于生成对抗网络的交互式人脸卡通方法 | |
| US20170069124A1 (en) | Avatar generation and animations | |
| US20220044491A1 (en) | Three-dimensional face model generation method and apparatus, device, and medium | |
| WO2021139557A1 (zh) | 肖像简笔画生成方法、系统及绘画机器人 | |
| CN105678702B (zh) | 一种基于特征跟踪的人脸图像序列生成方法及装置 | |
| CN101098241A (zh) | 虚拟形象实现方法及其系统 | |
| CN103927016A (zh) | 一种基于双目视觉的实时三维双手手势识别方法及其系统 | |
| CN107343225B (zh) | 在视频图像中展示业务对象的方法、装置和终端设备 | |
| CN102567716B (zh) | 一种人脸合成系统及实现方法 | |
| CN106709931B (zh) | 一种脸谱映射至人脸的方法、脸谱映射装置 | |
| CN108197534A (zh) | 一种人头部姿态检测方法、电子设备及存储介质 | |
| CN109598210A (zh) | 一种图片处理方法和装置 | |
| CN110264396B (zh) | 视频人脸替换方法、系统及计算机可读存储介质 | |
| CN109241810A (zh) | 虚拟角色图像的构建方法及装置、存储介质 | |
| CN107578435A (zh) | 一种图像深度预测方法及装置 | |
| CN113297956B (zh) | 一种基于视觉的手势识别方法及系统 | |
| CN113191216B (zh) | 基于姿态识别和c3d网络的多人实时动作识别方法和系统 | |
| CN105069745A (zh) | 基于普通图像传感器及增强现实技术的带表情变脸系统及方法 | |
| CN100487732C (zh) | 一种基于人脸照片的卡通肖像生成方法 | |
| CN113469929A (zh) | 训练数据生成方法、装置、电子设备及计算机可读存储介质 | |
| CN111243051A (zh) | 基于肖像照片的简笔画生成方法、系统及存储介质 | |
| CN112749611A (zh) | 人脸点云模型生成方法及装置、存储介质、电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |