CN105118024A - 人脸交换方法 - Google Patents
人脸交换方法 Download PDFInfo
- Publication number
- CN105118024A CN105118024A CN201510581950.2A CN201510581950A CN105118024A CN 105118024 A CN105118024 A CN 105118024A CN 201510581950 A CN201510581950 A CN 201510581950A CN 105118024 A CN105118024 A CN 105118024A
- Authority
- CN
- China
- Prior art keywords
- face
- key position
- motion vector
- vector field
- key
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 210000003467 cheek Anatomy 0.000 claims description 2
- 210000001508 eye Anatomy 0.000 claims description 2
- 210000004709 eyebrow Anatomy 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000006748 scratching Methods 0.000 description 1
- 230000002393 scratching effect Effects 0.000 description 1
Classifications
-
- G06T3/18—
Abstract
本发明提供的人脸交换方法，包括：识别人脸的关键部位，所述人脸的关键部位包括第一人脸的关键部位和第二人脸的关键部位；根据人脸模型对所述第一人脸的关键部位和所述第二人脸的关键部位进行定位；计算所述第一人脸的关键部位到所述第二人脸的关键部位的运动向量场；根据所述运动向量场将第一人脸变形到第二人脸的位置得到变形后的人脸；对所述变形后的人脸进行自然化处理。本发明可以实现快速换脸。
Description
技术领域
本发明涉及数字图像处理技术，特别是涉及一种人脸交换方法。
背景技术
目前所用的换脸技术是通过对人脸区域及特征点位置进行手动标注，没有自动的人脸识别功能；在换脸过程中，只是简单地对原始图像根据手动标注的人脸区域进行抠图，然后摆放到目标图像中。以上换脸技术没有根据待换的两张人脸图像特征点位置，对原始图像的人脸区域进行扭曲变形。
因此，该换脸技术通常只能对人脸的正面图像进行处理，如果是非正脸图像，则处理效果会较差。
发明内容
本发明提供的人脸交换方法，可以实现快速换脸。
根据本发明的一方面，提供一种人脸交换方法，包括：识别人脸的关键部位，所述人脸的关键部位包括第一人脸的关键部位和第二人脸的关键部位；根据人脸模型对所述第一人脸的关键部位和所述第二人脸的关键部位进行定位；计算所述第一人脸的关键部位到所述第二人脸的关键部位的运动向量场；根据所述运动向量场将第一人脸变形到第二人脸的位置得到变形后的人脸；对所述变形后的人脸进行自然化处理。
本发明实施例提供的人脸交换方法，通过识别人脸的关键部位，人脸的关键部位包括第一人脸的关键部位和第二人脸的关键部位，根据人脸模型对第一人脸的关键部位和第二人脸的关键部位进行定位，计算第一人脸的关键部位到第二人脸的关键部位的运动向量场，根据运动向量场将第一人脸变形到第二人脸的位置得到变形后的人脸，对变形后的人脸进行自然化处理，从而可以实现快速换脸。
附图说明
图1为本发明实施例提供的人脸交换方法流程图。
具体实施方式
下面结合附图对本发明实施例提供的人脸交换方法进行详细描述。
图1为本发明实施例提供的人脸交换方法流程图。
参照图1，在步骤S101，识别人脸的关键部位，所述人脸的关键部位包括第一人脸的关键部位和第二人脸的关键部位。
在步骤S102，根据人脸模型对所述第一人脸的关键部位和所述第二人脸的关键部位进行定位。
在步骤S103，计算所述第一人脸的关键部位到所述第二人脸的关键部位的运动向量场。
在步骤S104，根据所述运动向量场将第一人脸变形到第二人脸的位置得到变形后的人脸。
在步骤S105，对所述变形后的人脸进行自然化处理。
进一步地，所述根据人脸模型对所述第一人脸的关键部位和所述第二人脸的关键部位进行定位包括：
将人脸模型中对应的人脸的关键部位的位置进行训练得到学习模型；
根据所述学习模型对所述第一人脸的关键部位和所述第二人脸的关键部位进行定位。
进一步地，所述计算所述第一人脸的关键部位到所述第二人脸的关键部位的运动向量场包括：
计算所述第一人脸的关键部位和所述第二人脸的关键部位的各个对应部位的定位偏差；
所述各个对应部位的定位偏差通过插值算法得到所述运动向量场。
进一步地，所述变形后的人脸包括边界部分，所述对所述变形后的人脸进行自然化处理包括：
对所述边界部分进行自然化处理。
进一步地，所述人脸关键部位包括：鼻子、嘴巴、眼睛、眉毛和脸颊。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。
Claims (5)
1.一种人脸交换方法，其特征在于，所述方法包括：
识别人脸的关键部位，所述人脸的关键部位包括第一人脸的关键部位和第二人脸的关键部位；
根据人脸模型对所述第一人脸的关键部位和所述第二人脸的关键部位进行定位；
计算所述第一人脸的关键部位到所述第二人脸的关键部位的运动向量场；
根据所述运动向量场将第一人脸变形到第二人脸的位置得到变形后的人脸；
对所述变形后的人脸进行自然化处理。
2.根据权利要求1所述的方法，其特征在于，所述根据人脸模型对所述第一人脸的关键部位和所述第二人脸的关键部位进行定位包括：
将所述人脸模型中对应的人脸的关键部位的位置进行训练得到学习模型；
根据所述学习模型对所述第一人脸的关键部位和所述第二人脸的关键部位进行定位。
3.根据权利要求1所述的方法，其特征在于，所述计算所述第一人脸的关键部位到所述第二人脸的关键部位的运动向量场包括：
计算所述第一人脸的关键部位和所述第二人脸的关键部位的各个对应部位的定位偏差；
所述各个对应部位的定位偏差通过插值算法得到所述运动向量场。
4.根据权利要求1所述的方法，其特征在于，所述变形后的人脸包括边界部分，所述对所述变形后的人脸进行自然化处理包括：
对所述边界部分进行自然化处理。
5.根据权利要求1所述的方法，其特征在于，所述人脸关键部位包括：鼻子、嘴巴、眼睛、眉毛和脸颊。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510581950.2A CN105118024A (zh) | 2015-09-14 | 2015-09-14 | 人脸交换方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510581950.2A CN105118024A (zh) | 2015-09-14 | 2015-09-14 | 人脸交换方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN105118024A true CN105118024A (zh) | 2015-12-02 |
Family
ID=54665999
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510581950.2A Pending CN105118024A (zh) | 2015-09-14 | 2015-09-14 | 人脸交换方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105118024A (zh) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106331569A (zh) * | 2016-08-23 | 2017-01-11 | 广州华多网络科技有限公司 | 即时视频画面中人物脸部变换方法以及系统 |
| WO2017186016A1 (zh) * | 2016-04-27 | 2017-11-02 | 腾讯科技（深圳）有限公司 | 图像形变处理的方法和装置、计算机存储介质 |
| WO2018201551A1 (zh) * | 2017-05-02 | 2018-11-08 | 厦门美图之家科技有限公司 | 一种人脸图像的融合方法、装置及计算设备 |
| CN109492540A (zh) * | 2018-10-18 | 2019-03-19 | 北京达佳互联信息技术有限公司 | 一种图像中的人脸交换方法、装置及电子设备 |
| CN110418146A (zh) * | 2018-04-27 | 2019-11-05 | 武汉斗鱼网络科技有限公司 | 应用于直播场景的换脸方法、存储介质、电子设备及系统 |
| CN111160138A (zh) * | 2019-12-11 | 2020-05-15 | 杭州电子科技大学 | 一种基于卷积神经网络的快速人脸交换方法 |
| WO2021036314A1 (zh) * | 2019-08-28 | 2021-03-04 | 北京市商汤科技开发有限公司 | 人脸图像处理方法及装置、图像设备及存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2009148404A1 (en) * | 2008-06-03 | 2009-12-10 | Xid Technologies Pte Ltd | Method for replacing objects in images |
| JP2014085796A (ja) * | 2012-10-23 | 2014-05-12 | Sony Corp | 情報処理装置およびプログラム |
| CN104240274A (zh) * | 2014-09-29 | 2014-12-24 | 小米科技有限责任公司 | 人脸图像处理方法及装置 |
-
2015
- 2015-09-14 CN CN201510581950.2A patent/CN105118024A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2009148404A1 (en) * | 2008-06-03 | 2009-12-10 | Xid Technologies Pte Ltd | Method for replacing objects in images |
| JP2014085796A (ja) * | 2012-10-23 | 2014-05-12 | Sony Corp | 情報処理装置およびプログラム |
| CN104240274A (zh) * | 2014-09-29 | 2014-12-24 | 小米科技有限责任公司 | 人脸图像处理方法及装置 |
Non-Patent Citations (6)
| Title |
|---|
| MINGLI SONG等: "SUBTLE FACIAL EXPRESSION MODELING WITH VECTOR FIELD DECOMPOSITION", 《IEEE INTERNATIONAL CONFERENCE ON IMAGE PROCESSING》 * |
| 刘德龙: "视频图像中的自动角色变换技术的研究", 《中国优秀硕士学位论文全文数据库信息科技辑》 * |
| 唐峰等: "基于径向基函数多步离散数据插值的人脸变形研究", 《计算机工程与应用》 * |
| 宋明黎等: "宋明黎等", 《计算机辅助设计与图形学学报》 * |
| 李传学: "图像/视频中自动人脸替换研究", 《中国优秀硕士学位论文全文数据库信息科技辑》 * |
| 林源等: "基于真实感三维头重建的人脸替换", 《清华大学学报（自然科学版）》 * |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017186016A1 (zh) * | 2016-04-27 | 2017-11-02 | 腾讯科技（深圳）有限公司 | 图像形变处理的方法和装置、计算机存储介质 |
| US10691927B2 (en) | 2016-04-27 | 2020-06-23 | Tencent Technology (Shenzhen) Company Limited | Image deformation processing method and apparatus, and computer storage medium |
| CN106331569A (zh) * | 2016-08-23 | 2017-01-11 | 广州华多网络科技有限公司 | 即时视频画面中人物脸部变换方法以及系统 |
| WO2018201551A1 (zh) * | 2017-05-02 | 2018-11-08 | 厦门美图之家科技有限公司 | 一种人脸图像的融合方法、装置及计算设备 |
| CN110418146A (zh) * | 2018-04-27 | 2019-11-05 | 武汉斗鱼网络科技有限公司 | 应用于直播场景的换脸方法、存储介质、电子设备及系统 |
| CN110418146B (zh) * | 2018-04-27 | 2022-02-08 | 武汉斗鱼网络科技有限公司 | 应用于直播场景的换脸方法、存储介质、电子设备及系统 |
| CN109492540A (zh) * | 2018-10-18 | 2019-03-19 | 北京达佳互联信息技术有限公司 | 一种图像中的人脸交换方法、装置及电子设备 |
| WO2021036314A1 (zh) * | 2019-08-28 | 2021-03-04 | 北京市商汤科技开发有限公司 | 人脸图像处理方法及装置、图像设备及存储介质 |
| US11941854B2 (en) | 2019-08-28 | 2024-03-26 | Beijing Sensetime Technology Development Co., Ltd. | Face image processing method and apparatus, image device, and storage medium |
| CN111160138A (zh) * | 2019-12-11 | 2020-05-15 | 杭州电子科技大学 | 一种基于卷积神经网络的快速人脸交换方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105118024A (zh) | 人脸交换方法 | |
| TWI742690B (zh) | 人體檢測方法、裝置、電腦設備及儲存媒體 | |
| CN110147721B (zh) | 一种三维人脸识别方法、模型训练方法和装置 | |
| CN102662476B (zh) | 一种视线估计方法 | |
| CN108965740B (zh) | 一种实时视频换脸方法、装置、设备和存储介质 | |
| CN107507217B (zh) | 证件照的制作方法、装置及存储介质 | |
| CN106919906B (zh) | 一种图像互动方法及互动装置 | |
| US9978119B2 (en) | Method for automatic facial impression transformation, recording medium and device for performing the method | |
| CN107610202B (zh) | 人脸图像替换方法、设备及存储介质 | |
| CN103927016A (zh) | 一种基于双目视觉的实时三维双手手势识别方法及其系统 | |
| WO2021135827A1 (zh) | 视线方向确定方法、装置、电子设备及存储介质 | |
| CN107564080B (zh) | 一种人脸图像的替换系统 | |
| JP2022502726A (ja) | 顔画像処理方法及び装置、画像機器並びに記憶媒体 | |
| MX352237B (es) | Metodo, aparato y dispositivo para segmentar imagen. | |
| CN103793693A (zh) | 一种人脸转向的检测方法及其应用该方法的脸型优化方法 | |
| EP2923306A1 (en) | Method and apparatus for facial image processing | |
| WO2015123117A3 (en) | Method of making a mask with customized facial features | |
| CN105678686A (zh) | 一种图片处理方法及装置 | |
| EP3932318A4 (en) | LEARNING METHOD, LEARNING SYSTEM, LEARNED MODEL, PROGRAM AND DEVICE FOR GENERATION OF SUPER RESOLUTION IMAGES | |
| CN109948441B (zh) | 模型训练、图像处理方法、装置、电子设备及计算机可读存储介质 | |
| CN105357519B (zh) | 基于自相似度特征的无参考立体图像质量客观评价方法 | |
| CN108053373A (zh) | 一种基于深度学习模型鱼眼图像校正方法 | |
| CN103164119B (zh) | 通信终端及图像的自适应显示方法 | |
| CN110021000B (zh) | 基于图层变形的发际线修复方法及装置 | |
| CN105447823A (zh) | 一种图像处理方法及一种电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20151202 |