CN101916456B - 一种个性化三维动漫的制作方法 - Google Patents

一种个性化三维动漫的制作方法 Download PDF

Info

Publication number
CN101916456B
CN101916456B CN2010102506043A CN201010250604A CN101916456B CN 101916456 B CN101916456 B CN 101916456B CN 2010102506043 A CN2010102506043 A CN 2010102506043A CN 201010250604 A CN201010250604 A CN 201010250604A CN 101916456 B CN101916456 B CN 101916456B
Authority
CN
China
Prior art keywords
point
dimensional
dimensional cartoon
personalized
actual human
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2010102506043A
Other languages
English (en)
Other versions
CN101916456A (zh
Inventor
李浩民
徐秀兵
万爱明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JIANGSU RULINGTONG CULTURE INDUSTRY GROUP CO., LTD.
Original Assignee
WUXI HUANYING TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by WUXI HUANYING TECHNOLOGY Co Ltd filed Critical WUXI HUANYING TECHNOLOGY Co Ltd
Priority to CN2010102506043A priority Critical patent/CN101916456B/zh
Publication of CN101916456A publication Critical patent/CN101916456A/zh
Application granted granted Critical
Publication of CN101916456B publication Critical patent/CN101916456B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种个性化三维动漫的制作方法,步骤为:首先进行多视点真人头部图像的采集,然后基于多视点图像的三维真人头像建模,再进行变姿态虚拟真人头像的绘制,最后进行个性化三维动漫的合成。采用本发明,可以极大地降低个性化三维动漫的制作成本和制作时间,且制作出来的三维动漫人物真实感强,以较低的成本实现个性化三维动漫制作的简单化,批量化,快速化和自动化。

Description

一种个性化三维动漫的制作方法
技术领域
本发明涉及一种个性化三维动漫的制作方法,属于计算机动漫技术领域。
背景技术
随着3D电影《阿凡达》在全球的热播和票房的火爆,三维动漫在国内外也得到越来越多的重视。皮克斯的最新3D力作《飞屋环游记》、《鬼妈妈》、《了不起的狐狸爸爸》,不论从动漫内容上还是技术上,都呈现出比2D动漫或剧情片更具吸引力的赶超趋势。
以个人用户为动漫主角的个性化三维动漫,可广泛应用于儿童MV,艺术相册,艺术动画,情侣婚庆等市场,满足人们对于个性化和差异化的追求,市场前景不可估量。
然而,由于个性化三维动漫面向的是个人用户,因此需要针对每个用户,建立该用户的人物模型,再将此人物模型融入到三维动漫场景模型中进行渲染,得到三维动漫视频。这样制作出来的个性化三维动漫成本极高,动辄数千元/秒的制作成本使得它难以成为个人用户的消费选择,目前尚无较好的替代方案或解决办法。对大部分人来说,拥有一部“自己主演的动画片”对于普通人来说依然是一个遥不可及的梦想。
另一方面,现有的三维动漫制作主要通过造型技术来建立人物角色的模型,就是以曲线、曲面等模型为基元,通过人工操作和组合,绘制出人物的模型。它涉及到大量枯燥复杂的人工操作,成本高,制作时间长,难以模拟人物的细节以及一些复杂的光照效果,并且模型的真实感较差,与真实人物相去甚远,普通人一眼就能分辨出二者的差异。
综上所述,传统的三维动漫制作方法在面向个人用户时制作成本高昂,制作时间长,真实感差,难以进入个人消费领域。因此,急需一种新型的、低成本、自动化的个性化三维动漫制作方法。
发明内容
本发明的目的是为了克服传统的三维动漫制作针对个人用户进行个性化定制中的缺陷:成本高昂,制作时间长,真实感差,需要大量枯燥复杂的人工操作等等。为此,本发明提出一种个性化三维动漫的制作方法。采用本发明,可以极大地降低个性化三维动漫的制作成本和制作时间,且制作出来的三维动漫人物真实感强,以较低的成本实现个性化三维动漫制作的简单化,批量化,快速化和自动化。
按照本发明提供的技术方案,所述个性化三维动漫的制作方法包括如下步骤:
1)多视点真人头部图像的采集:
利用相机对个人用户从多个不同角度进行头部的拍摄,获取该用户头部的多视点图像;
2)基于多视点图像的三维真人头像建模:
对所采集的多视点图像,采用SIFT(Scale-invariant feature transform)技术来获取多视点图像中的对应特征点,以此特征点作为约束来恢复相机参数,并根据此相机参数进行射影重构来修正特征点中的误匹配对,得到稀疏点云模型;同时,以所述稀疏点云模型作为约束,进行基于立体视觉的三维重建,并经过融合,得到密集的点云模型,即三维真人头像模型;
3)变姿态虚拟真人头像的绘制:
对得到的密集点云模型进行特征点的提取和特征点列的重采样,然后进行基于轮廓的空间点三角化,再使用OpenGL(Open Graphics Library)技术,实现重建目标的三维显示,即虚拟真人头像;
4)个性化三维动漫的合成:
对三维动漫中的角色头像信息进行标记,记录角色头像在视频中的姿态、位置、大小信息,结合变姿态虚拟头像渲染技术,将具有动漫角色的相同位置、姿态和大小的虚拟真人头像直接嵌入到动漫视频当中,替换三维动漫中的原角色头像,实现虚拟真人头像与三维动漫的无缝嵌入。
所述基于多视点图像的三维真人头像建模的步骤为:
a)基于SIFT技术对多视点图像的特征点抽取和匹配;
b)利用RANSAC(RANdom SAmple Consensus)算法去除匹配结果中的野点;
c)根据匹配结果进行相机的自标定,获取相机内参和外参;
d)利用相机的参数,对特征点进行射影重构,来修正特征点中的误匹配对,得到的稀疏点云模型;
e)以所述稀疏点云模型为基础,进行基于立体视觉的三维重建,对重建结果进行融合,得到密集的点云模型。
所述变姿态虚拟真人头像的绘制的步骤为:
a)对采集的多视点图像进行基于轮廓的特征提取;
b)对提取出的多视点图像的轮廓按创建polygonal-chain的方法,形成点列,并对此点列进行重采样,以减少后续阶段中处理的数据量;
c)结合密集点云模型对重采样后的点列进行基于轮廓的空间点三角化,形成三角面片;
d)对所述三角面片进行纹理抽取和贴图;
e)基于OpenGL技术的三角面片可视化,实现真人头像的变姿态绘制。
所述个性化三维动漫的合成步骤为:
a)对三维动漫中的角色头像信息逐帧进行标记,记录角色头像在视频中的姿态、位置、大小信息;
b)根据角色头像的标记信息,生成每个姿态下的虚拟真人头像。
c)以虚拟真人头像来替换三维动漫中当前帧的角色头像,所述虚拟真人头像和角色头像具有相同位置、姿态和大小;
d)对替换后的帧进行合成,生成所需的个性化三维动漫视频。
本发明的优点是:
1.基于民用级的摄像机或相机所获取的多视点图像和通用的硬件计算平台,快速构建出数字化三维真人头像模型,模型精度高,真实感强。
2.除多视点图像的采集和动漫角色信息的标定外,整个过程全自动实现,实现个性化三维动漫制作的简单化,快速化和批量化。
3.无需复杂的人工建模操作,成本低,制作周期短,速度快。
附图说明
图1为本发明所述方法的流程图。
图2为个性化三维动漫真人头像的合成。
具体实施方式
下面结合附图和实施例对本发明作进一步说明。
如图1所示,本发明主要步骤如下:
1)多视点真人头部图像的采集
利用民用级的相机,对个人用户从多个不同角度进行头部的拍摄,获取该用户头部的多视点图像。
为实现较好的拍摄效果,可采取如下5P的拍照方案:真人头部的正对位置(正位)1张;左正位2张,拍摄角度间隔为30度;右正位2张,拍摄角度间隔为30度;垂直方向上下位置各一张,与正位的角度间隔均为30度。
2)基于多视点图像的三维真人头像建模
针对民用级的数码相机所采集的多视点图像,采用SIFT技术来获取多视点图像中的对应特征点,以此作为约束来恢复相机参数,并根据此参数进行射影重构来修正特征点中的误匹配对,得到的稀疏点云模型。同时,以此结果作为约束,进行基于立体视觉的三维重建,并经过融合,得到密集的点云模型,具体步骤如下:
a)基于SIFT技术的多视点图像的特征点抽取和匹配;
b)利用RANSAC算法去除匹配结果中的野点;
c)根据匹配结果进行相机的自标定,获取相机内参和外参;
d)利用相机的参数,对特征点对进行射影重构,来修正特征点中的误匹配对,得到的稀疏点云模型;
e)以稀疏点云模型为基础,进行基于立体视觉的三维重建,对重建结果进行融合,得到密集的点云模型。
3)变姿态虚拟真人头像的绘制
对真人头像建模得到的密集点云数据进行特征点的提取和特征点列的重采样,然后进行基于轮廓的空间点三角化,再使用OpenGL技术,实现重建目标的三维显示,具体步骤如下:
a)对输入多视点图像进行基于轮廓的特征提取;
b)对提取出的多视点图像的轮廓按创建polygonal-chain的方法,形成点列,并对此点列进行重采样,以减少后续阶段中处理的数据量;
c)结合密集点云模型对重采样后的点列进行基于轮廓的空间点三角化,形成三角面片;
d)对三角面片进行纹理抽取和贴图;
e)基于OpenGL技术的三角面片可视化,实现真人头像的变姿态绘制。
4)个性化三维动漫的合成
对三维动漫中的角色头像信息进行标记,记录其在视频中的姿态、位置、大小等信息,结合变姿态虚拟头像渲染技术,将具有动漫角色的相同位置和姿态的真人头像直接嵌入到动漫视频当中,替换三维动漫中的原角色头像,实现真人头像与三维动漫的无缝嵌入。
如图2所示,具体步骤如下:
a)对三维动漫中的角色头像信息逐帧进行标记,记录其在视频中的姿态和位置等信息。
b)根据角色头像的标记信息,生成该姿态下的虚拟真人头像。
c)以虚拟真人头像来替换三维动漫中当前帧的角色头像。
d)对替换后的结果进行合成,生成所需的个性化三维动漫视频。

Claims (4)

1.一种个性化三维动漫的制作方法,其特征是所述方法包括如下步骤:
1)多视点真人头部图像的采集:
利用相机对个人用户从多个不同角度进行头部的拍摄,获取该用户头部的多视点图像;
2)基于多视点图像的三维真人头像建模:
对所采集的多视点图像,采用SIFT技术来获取多视点图像中的对应特征点,以此特征点作为约束来恢复相机参数,并根据此相机参数进行射影重构来修正特征点中的误匹配对,得到稀疏点云模型;同时,以所述稀疏点云模型作为约束,进行基于立体视觉的三维重建,并经过融合,得到密集的点云模型,即三维真人头像模型;
3)变姿态虚拟真人头像的绘制:
对得到的密集点云模型进行特征点的提取和特征点列的重采样,然后进行基于轮廓的空间点三角化,再使用OpenGL技术,实现重建目标的三维显示,即虚拟真人头像;
4)个性化三维动漫的合成:
对三维动漫中的角色头像信息进行标记,记录角色头像在视频中的姿态、位置、大小信息,结合变姿态虚拟头像渲染技术,将具有动漫角色的相同位置、姿态和大小的虚拟真人头像直接嵌入到动漫视频当中,替换三维动漫中的原角色头像,实现虚拟真人头像与三维动漫的无缝嵌入。
2.如权利要求1所述个性化三维动漫的制作方法,其特征是所述基于多视点图像的三维真人头像建模的步骤为:
a)基于SIFT技术对多视点图像的特征点抽取和匹配;
b)利用RANSAC算法去除匹配结果中的野点;
c)根据匹配结果进行相机的自标定,获取相机内参和外参;
d)利用相机的参数,对特征点进行射影重构,来修正特征点中的误匹配对,得到的稀疏点云模型;
e)以所述稀疏点云模型为基础,进行基于立体视觉的三维重建,对重建结果进行融合,得到密集的点云模型。
3.如权利要求1所述个性化三维动漫的制作方法,其特征是所述变姿态虚拟真人头像的绘制的步骤为:
k)对采集的多视点图像进行基于轮廓的特征提取;
l)对提取出的多视点图像的轮廓按创建polygonal-chain的方法,形成点列,并对此点列进行重采样,以减少后续阶段中处理的数据量;
m)结合密集点云模型对重采样后的点列进行基于轮廓的空间点三角化,形成三角面片;
n)对所述三角面片进行纹理抽取和贴图;
o)基于OpenGL技术的三角面片可视化,实现真人头像的变姿态绘制。
4.如权利要求1所述个性化三维动漫的制作方法,其特征是所述个性化三维动漫的合成步骤为:
a)对三维动漫中的角色头像信息逐帧进行标记,记录角色头像在视频中的姿态、位置、大小信息;
b)根据角色头像的标记信息,生成每个姿态下的虚拟真人头像;
c)以虚拟真人头像来替换三维动漫中当前帧的角色头像,所述虚拟真人头像和角色头像具有相同位置、姿态和大小;
d)对替换后的帧进行合成,生成所需的个性化三维动漫视频。
CN2010102506043A 2010-08-11 2010-08-11 一种个性化三维动漫的制作方法 Active CN101916456B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2010102506043A CN101916456B (zh) 2010-08-11 2010-08-11 一种个性化三维动漫的制作方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2010102506043A CN101916456B (zh) 2010-08-11 2010-08-11 一种个性化三维动漫的制作方法

Publications (2)

Publication Number Publication Date
CN101916456A CN101916456A (zh) 2010-12-15
CN101916456B true CN101916456B (zh) 2012-01-04

Family

ID=43323959

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010102506043A Active CN101916456B (zh) 2010-08-11 2010-08-11 一种个性化三维动漫的制作方法

Country Status (1)

Country Link
CN (1) CN101916456B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5059986B2 (ja) * 2010-11-05 2012-10-31 国男 後藤 画像生成方法、画像生成プログラム及び画像投影装置
CN103514620B (zh) * 2012-09-29 2016-12-21 天津十彩动画科技有限公司 3d立体动画全流程制作云计算平台
CN104079810A (zh) * 2014-07-16 2014-10-01 镇江中维信息技术有限公司 一种三维全景扫描装置及三维模型生成方法
CN104680569B (zh) * 2015-03-23 2017-10-03 厦门幻世网络科技有限公司 一种基于移动终端的更新目标3d动画的方法及其装置
CN104699842B (zh) 2015-03-31 2019-03-26 百度在线网络技术(北京)有限公司 图片展示方法和装置
CN104978758A (zh) * 2015-06-29 2015-10-14 世优(北京)科技有限公司 基于用户创作的图像的动画视频生成方法和装置
CN105787994A (zh) * 2016-01-26 2016-07-20 王创 一种利用3d技术模拟街景娱乐的方法
CN105825539A (zh) * 2016-03-16 2016-08-03 成都电锯互动科技有限公司 一种三维动画制作方法
US10878612B2 (en) * 2017-04-04 2020-12-29 Intel Corporation Facial image replacement using 3-dimensional modelling techniques
CN107845126A (zh) * 2017-11-21 2018-03-27 江西服装学院 一种三维动画制作方法及装置
CN108521597B (zh) * 2018-03-21 2020-12-25 浙江口碑网络技术有限公司 直播信息动态展示方法及装置
CN108898653A (zh) * 2018-06-20 2018-11-27 广州晖恒广告策划有限公司 一种基于图片的三维动漫玩具设计方法
CN109102472A (zh) * 2018-07-23 2018-12-28 上海滚滚文化传播有限公司 一种三维仿二维建模渲染后制作漫画特效的方法
CN110599540B (zh) * 2019-08-05 2022-06-17 清华大学 多视点相机下的实时三维人体体型与姿态重建方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3848101B2 (ja) * 2001-05-17 2006-11-22 シャープ株式会社 画像処理装置および画像処理方法ならびに画像処理プログラム
ES2284391B1 (es) * 2006-04-19 2008-09-16 Emotique, S.L. Procedimiento para la generacion de imagenes de animacion sintetica.
CN100468465C (zh) * 2007-07-13 2009-03-11 中国科学技术大学 基于虚拟图像对应的立体视觉三维人脸建模方法
CN101515374B (zh) * 2008-02-20 2010-12-01 中国科学院自动化研究所 基于图像的个性化真实感虚拟人物造型方法
CN101388115B (zh) * 2008-10-24 2011-07-27 北京航空航天大学 一种结合纹理信息的深度图像自动配准方法
CN101452582B (zh) * 2008-12-18 2013-09-18 北京中星微电子有限公司 一种实现三维视频特效的方法和装置

Also Published As

Publication number Publication date
CN101916456A (zh) 2010-12-15

Similar Documents

Publication Publication Date Title
CN101916456B (zh) 一种个性化三维动漫的制作方法
US11654633B2 (en) System and method of enhancing a 3D printed model
CN106600667B (zh) 一种基于卷积神经网络的视频驱动人脸动画方法
CN104915986B (zh) 一种实体三维模型自动建模方法
Musialski et al. A survey of urban reconstruction
CN103021017B (zh) 基于gpu加速的三维场景重建方法
Starck et al. Surface capture for performance-based animation
CN101930618B (zh) 一种个性化二维动漫的制作方法
CN111105483B (zh) 生成商品对象动态图像的方法、装置及电子设备
Zhang et al. Feature-based light field morphing
JP2002042169A (ja) 三次元画像提供システム及び方法並びにモーフィング画像提供システム及び方法
CN104537716B (zh) 三维数字人像与虚拟场景的合成系统
CN103077552A (zh) 一种基于多视点视频的三维展示方法
CN105913496A (zh) 一种将真实服饰快速转换为三维虚拟服饰的方法及系统
CN105809734B (zh) 一种基于多视角交互式的机械模型三维建模方法
Hilsmann et al. Going beyond free viewpoint: creating animatable volumetric video of human performances
CN107845126A (zh) 一种三维动画制作方法及装置
Pérez et al. Touring the Forum Adiectum of Augusta Emerita in a virtual reality experience
CA3175695A1 (en) 3d modelling and representation of furnished rooms and their manipulation
Meyer et al. PEGASUS: Physically Enhanced Gaussian Splatting Simulation System for 6DOF Object Pose Dataset Generation
CN108898653A (zh) 一种基于图片的三维动漫玩具设计方法
CN103593863A (zh) 一种三维动画制作系统
Chen et al. Micro-scale manufacture of 3D printing
TW201019265A (en) Auxiliary design system and method for drawing and real-time displaying 3D objects
Song et al. Landscape Fusion Method Based on Augmented Reality and Multiview Reconstruction

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Free format text: FORMER OWNER: XU XIUBING

Owner name: WUXI HUANYING TECHNOLOGY CO., LTD.

Free format text: FORMER OWNER: LI HAOMIN

Effective date: 20110228

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20110228

Address after: 214062 Jiangsu province Binhu District of Wuxi City Liangxi Road No. 988-8

Applicant after: Wuxi Huanying Technology Co., Ltd.

Address before: 214062 Jiangsu province Binhu District of Wuxi City Liangxi Road No. 988-8

Applicant before: Li Haomin

Co-applicant before: Xu Xiubing

C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: JIANGSU RULINGTONG CULTURE INDUSTRY CO., LTD.

Free format text: FORMER OWNER: WUXI HUANYING TECHNOLOGY CO., LTD.

Effective date: 20150526

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: 214062 WUXI, JIANGSU PROVINCE TO: 214000 WUXI, JIANGSU PROVINCE

TR01 Transfer of patent right

Effective date of registration: 20150526

Address after: 214000, No. 599, West Building Road, Wuxi, Jiangsu, three, B building, No. 11, No. 1101

Patentee after: Jiangsu Lingtong Confucian Culture Industry Co.

Address before: 214062 Jiangsu province Binhu District of Wuxi City Liangxi Road No. 988-8

Patentee before: Wuxi Huanying Technology Co., Ltd.

C56 Change in the name or address of the patentee

Owner name: JIANGSU RULINGTONG CULTURE INDUSTRY GROUP CO., LTD

Free format text: FORMER NAME: JIANGSU RULINGTONG CULTURE INDUSTRY CO., LTD.

CP01 Change in the name or title of a patent holder

Address after: 214000, No. 599, West Building Road, Wuxi, Jiangsu, three, B building, No. 11, No. 1101

Patentee after: JIANGSU RULINGTONG CULTURE INDUSTRY GROUP CO., LTD.

Address before: 214000, No. 599, West Building Road, Wuxi, Jiangsu, three, B building, No. 11, No. 1101

Patentee before: Jiangsu Lingtong Confucian Culture Industry Co.