CN107154074A - 一种基于特征的三维人脸建模方法 - Google Patents

一种基于特征的三维人脸建模方法 Download PDF

Info

Publication number
CN107154074A
CN107154074A CN201710037607.0A CN201710037607A CN107154074A CN 107154074 A CN107154074 A CN 107154074A CN 201710037607 A CN201710037607 A CN 201710037607A CN 107154074 A CN107154074 A CN 107154074A
Authority
CN
China
Prior art keywords
region
muscle
choosing
dimensional
characteristic point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710037607.0A
Other languages
English (en)
Inventor
季木
季一木
朱曈晖
柴博周
杨罗坤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Yue Rong Network Technology Co Ltd
Original Assignee
Nanjing Yue Rong Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Yue Rong Network Technology Co Ltd filed Critical Nanjing Yue Rong Network Technology Co Ltd
Priority to CN201710037607.0A priority Critical patent/CN107154074A/zh
Publication of CN107154074A publication Critical patent/CN107154074A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20Finite element generation, e.g. wire-frame surface description, tesselation

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种基于特征的三维人脸建模方法,步骤如下:1)将面部分为多个区域;2)对每个区域的特征点进行提取,通过比对标准模型上预设的特征点,局部调整每个区域内的面部形态;3)将调整完成的二维特征点从二维坐标映射到三维的人脸模型中;4)完成坐标映射后,对特征点采用B样条函数来拟合B样条曲线;5)采用平滑过渡算法将各个面部区域拼接在一起。本发明基于特征的三维人脸建模方法生成的人脸模型还原度更高,从骨骼到轮廓再到五官的细节,都更加逼真,克服了以前人脸建模方法缺乏真实感、神情僵硬的问题。

Description

一种基于特征的三维人脸建模方法
技术领域
本发明涉及人体三维建模技术领域,具体是一种基于特征的三维人脸建模方法。
背景技术
传统的三维人脸建模是利用一套由三角面片构成的网格人脸模型,对每个三角面片进行比照调整,再利用平滑过渡算法打磨人脸模型,这种方案存在的问题就是调整的颗粒度太高,因为整个模型三角面片的个数是固定的,所以注定会出现某些区域无法调整出期望的图样这样的问题。而且模型在调整的过程中,其所调整的是一片一片单独的三角面片,有些情况下可能会割碎整个面部的结构,即使再使用平滑过渡算法也难以打磨出一个完整有辨识度的人脸模型。
发明内容
本发明的目的在于提供一种基于特征的三维人脸建模方法,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:
一种基于特征的三维人脸建模方法,步骤如下:
1)将面部分为多个区域;
2)对每个区域的特征点进行提取,通过比对标准模型上预设的特征点,局部调整每个区域内的面部形态;
3)将调整完成的二维特征点从二维坐标映射到三维的人脸模型中;
4)完成坐标映射后,对特征点采用B样条函数来拟合B样条曲线;
5)采用平滑过渡算法将各个面部区域拼接在一起。
作为本发明进一步的方案:步骤1)中,将面部分为区域A、区域B、区域C、区域D、区域E、区域F、区域G、区域H、区域I、区域J;
所述区域A通过选取额肌、帽状腱膜、枕额肌额腹、颞筋膜浅层形成;
所述区域B通过选取皱眉肌、降眉间肌、颞筋膜深层形成;
所述区域C通过选取眼轮匝肌、枕额肌额腹、枕额肌枕腹、内毗形成;
所述区域D通过选取鼻肌、提上唇肌内侧部、颧小肌、颧大肌形成;
所述区域E通过选取上唇方肌、提上唇肌、鼻肌横部、提上唇肌眶下部形成;
所述区域F通过选取鼻肌翼部、提口角肌、副腮腺、腮腺管形成;
所述区域G通过选取口轮匝肌、颊肌、腮腺形成;
所述区域H通过选取降口角肌、咬肌形成;
所述区域I通过选取降下唇肌、下唇方肌、斜方肌形成;
所述区域J通过选取骇肌、下颌下腺、胸锁乳突肌形成。
与现有技术相比,本发明的有益效果是:
本发明基于特征的三维人脸建模方法生成的的人脸模型还原度更高,从骨骼到轮廓再到五官的细节,都更加逼真,克服了以前人脸建模方法缺乏真实感、神情僵硬的问题;本发明基于特征的三维人脸建模方法模型调整速度更快,选取的特征点更精准。
附图说明
图1为区域A、区域H和区域I所拟合的特征曲线。
图2为图1的侧视示意图。
图3为区域D所拟合的特征曲线。
图4为区域E所拟合的特征曲线。
图5为区域F所拟合的特征曲线。
图6为区域G所拟合的特征曲线。
图7为区域C所拟合的特征曲线。
图8为区域B所拟合的特征曲线。
图9为区域J所拟合的特征曲线。
图10为区域J所拟合的特征曲线图。
图11为采用平滑过渡算法将各个面部区域拼接在一起后的正面效果示意图。
图12为采用平滑过渡算法将各个面部区域拼接在一起后的侧面效果示意图。
具体实施方式
下面结合具体实施方式对本发明的技术方案作进一步详细地说明。
请参阅图1-12,一种基于特征的三维人脸建模方法,步骤如下:
1)将面部分为多个区域,本实施例中,优选的,将面部分为区域A、区域B、区域C、区域D、区域E、区域F、区域G、区域H、区域I、区域J;
所述区域A通过选取额肌、帽状腱膜、枕额肌额腹、颞筋膜浅层形成;所述区域B通过选取皱眉肌、降眉间肌、颞筋膜深层形成;所述区域C通过选取眼轮匝肌、枕额肌额腹、枕额肌枕腹、内毗形成;所述区域D通过选取鼻肌、提上唇肌内侧部、颧小肌、颧大肌形成;所述区域E通过选取上唇方肌、提上唇肌、鼻肌横部、提上唇肌眶下部形成,所述区域F通过选取鼻肌翼部、提口角肌、副腮腺、腮腺管形成;所述区域G通过选取口轮匝肌、颊肌、腮腺形成;所述区域H通过选取降口角肌、咬肌形成;所述区域I通过选取降下唇肌、下唇方肌、斜方肌形成;所述区域J通过选取骇肌、下颌下腺、胸锁乳突肌形成;
2)对每个区域的特征点进行提取,通过比对标准模型上预设的特征点,局部调整每个区域内的面部形态;
在对区域A进行特征点提取时,以头盖骨以及下巴自然的弧度为基准,如附图1所示;
在对区域B进行特征点提取时,如附图8所示;
在对区域C进行特征点提取时,因为眼皮部分的结构较为平滑且近椭圆形,所以曲线选取竖直区域的特征点拟合成曲线,如附图7所示;
在对区域D进行特征点提取时,考虑到它左右对称,特征点相对密集,同时弧度的部分主要在鼻翼以及鼻头,所以我们选用横向选取特征点并拟合成曲线的方法,如附图3所示;
在对区域E进行特征点提取时,选取肌肉延展的方向作为曲线拟合的方向,由于有斜卧的颧骨,所以脸颊部分采用斜向拟合的方式,如附图4所示;
在对区域F进行特征点提取时,选取肌肉延展的方向作为曲线拟合的方向,采用横向拟合的方式,如附图5所示;
在对区域G进行特征点提取时,参照肌肉的分布图,曲线选取横向区域的特征点拟合成曲线,这种方式拟合成的嘴唇会更加平滑丰满,如附图6所示;
在对区域H进行特征点提取时,如附图1-2所示;
在对区域I进行特征点提取时,如附图1-2所示;
在对区域J进行特征点提取时,主要需要拟合的是喉结以及动脉区域的肌肉状态,所以曲线选取横向区域的特征点拟合成曲线,如附图9-10所示;
3)将调整完成的二维特征点从二维坐标映射到三维的人脸模型中;
4)完成坐标映射后,对特征点采用B样条函数来拟合B样条曲线;
5)采用平滑过渡算法将各个面部区域拼接在一起。
建模实验:
具体步骤为:A:按照步骤1)的方法对300张不同人脸进行区域划分,并在每个区域手动提取特征点;B:提取的特征点形成特征点提取训练集,利用opencv+dlib的训练模型来训练特征点提取训练集,通过反复调整参数,训练出一套很接近人工选取方法的特征点提取训练集,在输入一张正脸照片后,可以自己标记出所需要的特征点;C:运用坐标矩阵变换算法,将二维的坐标映射到三维基准人脸模型的三维坐标中,通过比照每个区域内映射特征点与预设特征点的误差,利用模型面部区域微调算法我们逐步调整每个局部区域的形态;D:再利用平滑过渡算法拼接各个区域。
上述实验生成的的人脸模型还原度更高,克服了以前人脸建模方法缺乏真实感,神情僵硬的问题。
本发明基于特征的三维人脸建模方法生成的的人脸模型还原度更高,从骨骼到轮廓再到五官的细节,都更加逼真,克服了以前人脸建模方法缺乏真实感、神情僵硬的问题;本发明基于特征的三维人脸建模方法模型调整速度更快,选取的特征点更精准。
上面对本发明的较佳实施方式作了详细说明,但是本发明并不限于上述实施方式,在本领域的普通技术人员所具备的知识范围内,还可以在不脱离本发明宗旨的前提下作出各种变化。

Claims (2)

1.一种基于特征的三维人脸建模方法,其特征在于,步骤如下:
1)将面部分为多个区域;
2)对每个区域的特征点进行提取,通过比对标准模型上预设的特征点,局部调整每个区域内的面部形态;
3)将调整完成的二维特征点从二维坐标映射到三维的人脸模型中;
4)完成坐标映射后,对特征点采用B样条函数来拟合B样条曲线;
5)采用平滑过渡算法将各个面部区域拼接在一起。
2.根据权利要求1所述的基于特征的三维人脸建模方法,其特征在于,步骤1)中,将面部分为区域A、区域B、区域C、区域D、区域E、区域F、区域G、区域H、区域I、区域J;
所述区域A通过选取额肌、帽状腱膜、枕额肌额腹、颞筋膜浅层形成;
所述区域B通过选取皱眉肌、降眉间肌、颞筋膜深层形成;
所述区域C通过选取眼轮匝肌、枕额肌额腹、枕额肌枕腹、内毗形成;
所述区域D通过选取鼻肌、提上唇肌内侧部、颧小肌、颧大肌形成;
所述区域E通过选取上唇方肌、提上唇肌、鼻肌横部、提上唇肌眶下部形成;
所述区域F通过选取鼻肌翼部、提口角肌、副腮腺、腮腺管形成;
所述区域G通过选取口轮匝肌、颊肌、腮腺形成;
所述区域H通过选取降口角肌、咬肌形成;
所述区域I通过选取降下唇肌、下唇方肌、斜方肌形成;
所述区域J通过选取骇肌、下颌下腺、胸锁乳突肌形成。
CN201710037607.0A 2017-01-18 2017-01-18 一种基于特征的三维人脸建模方法 Pending CN107154074A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710037607.0A CN107154074A (zh) 2017-01-18 2017-01-18 一种基于特征的三维人脸建模方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710037607.0A CN107154074A (zh) 2017-01-18 2017-01-18 一种基于特征的三维人脸建模方法

Publications (1)

Publication Number Publication Date
CN107154074A true CN107154074A (zh) 2017-09-12

Family

ID=59792368

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710037607.0A Pending CN107154074A (zh) 2017-01-18 2017-01-18 一种基于特征的三维人脸建模方法

Country Status (1)

Country Link
CN (1) CN107154074A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107948499A (zh) * 2017-10-31 2018-04-20 维沃移动通信有限公司 一种图像拍摄方法及移动终端
CN108062787A (zh) * 2017-12-13 2018-05-22 北京小米移动软件有限公司 三维人脸建模方法及装置
CN109087340A (zh) * 2018-06-04 2018-12-25 成都通甲优博科技有限责任公司 一种包含尺度信息的人脸三维重建方法及系统
CN109919876A (zh) * 2019-03-11 2019-06-21 四川川大智胜软件股份有限公司 一种三维真脸建模方法及三维真脸照相系统
CN113269890A (zh) * 2021-07-21 2021-08-17 广州中望龙腾软件股份有限公司 边界面网格生成方法、智能终端以及存储装置
CN115797569A (zh) * 2023-01-31 2023-03-14 盾钰(上海)互联网科技有限公司 高精度数孪人面部表情动作细分的动态生成方法及系统

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107948499A (zh) * 2017-10-31 2018-04-20 维沃移动通信有限公司 一种图像拍摄方法及移动终端
CN108062787A (zh) * 2017-12-13 2018-05-22 北京小米移动软件有限公司 三维人脸建模方法及装置
CN108062787B (zh) * 2017-12-13 2022-02-11 北京小米移动软件有限公司 三维人脸建模方法及装置
CN109087340A (zh) * 2018-06-04 2018-12-25 成都通甲优博科技有限责任公司 一种包含尺度信息的人脸三维重建方法及系统
CN109919876A (zh) * 2019-03-11 2019-06-21 四川川大智胜软件股份有限公司 一种三维真脸建模方法及三维真脸照相系统
CN109919876B (zh) * 2019-03-11 2020-09-01 四川川大智胜软件股份有限公司 一种三维真脸建模方法及三维真脸照相系统
CN113269890A (zh) * 2021-07-21 2021-08-17 广州中望龙腾软件股份有限公司 边界面网格生成方法、智能终端以及存储装置
CN113269890B (zh) * 2021-07-21 2021-11-19 广州中望龙腾软件股份有限公司 边界面网格生成方法、智能终端以及存储装置
CN115797569A (zh) * 2023-01-31 2023-03-14 盾钰(上海)互联网科技有限公司 高精度数孪人面部表情动作细分的动态生成方法及系统

Similar Documents

Publication Publication Date Title
CN107154074A (zh) 一种基于特征的三维人脸建模方法
CN103208133B (zh) 一种图像中人脸胖瘦的调整方法
CN103456010B (zh) 一种基于特征点定位的人脸卡通画生成方法
CN103606190B (zh) 单张人脸正面照片自动转换为三维人脸模型的方法
CN101847268B (zh) 一种基于人脸图像的卡通人脸图形生成方法和装置
CN105678232B (zh) 一种基于深度学习的人脸图片特征提取与对比方法
CN108171789B (zh) 一种虚拟形象生成方法和系统
CN101853523B (zh) 一种采用草图创建三维人脸模型的方法
CN101339606B (zh) 一种人脸关键器官外轮廓特征点定位与跟踪的方法及装置
CN101324961B (zh) 计算机虚拟世界中人脸部三维贴图方法
CN105139438A (zh) 视频人脸卡通动画生成方法
CN103268623A (zh) 一种基于频域分析的静态人脸表情合成方法
CN109376582A (zh) 一种基于生成对抗网络的交互式人脸卡通方法
CN111161418B (zh) 面部美容整形仿真模拟方法
CN106952336B (zh) 一种保特征的人类三维头像生产方法
US20230044644A1 (en) Large-scale generation of photorealistic 3d models
CN106909875A (zh) 人脸脸型分类方法和系统
CN101739719A (zh) 二维正面人脸图像的三维网格化方法
CN108629338A (zh) 一种基于lbp和卷积神经网络的人脸美丽预测方法
CN105787974A (zh) 仿生人脸衰老模型建立方法
CN101777195A (zh) 一种三维人脸模型的调整方法
CN106650654B (zh) 一种基于人体头部彩色点云模型的三维发际线提取方法
US11403800B1 (en) Image generation from 3D model using neural network
CN102157010A (zh) 基于分层建模及多体驱动的三维人脸动画实现方法
CN112017278A (zh) 一种基于Grasshopper的泳镜造型定制设计方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170912

WD01 Invention patent application deemed withdrawn after publication