CN105528142A - 一种3d动画聊天方法 - Google Patents

一种3d动画聊天方法 Download PDF

Info

Publication number
CN105528142A
CN105528142A CN201510921685.8A CN201510921685A CN105528142A CN 105528142 A CN105528142 A CN 105528142A CN 201510921685 A CN201510921685 A CN 201510921685A CN 105528142 A CN105528142 A CN 105528142A
Authority
CN
China
Prior art keywords
animation
dimensional face
chat
expression animation
face expression
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510921685.8A
Other languages
English (en)
Inventor
许奇明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Liduo Digital Technology Co Ltd
Original Assignee
Suzhou Liduo Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Liduo Digital Technology Co Ltd filed Critical Suzhou Liduo Digital Technology Co Ltd
Priority to CN201510921685.8A priority Critical patent/CN105528142A/zh
Publication of CN105528142A publication Critical patent/CN105528142A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance

Abstract

本发明提供了一种3D动画聊天方法,聊天过程中使用了三维人脸表情动画;首先,聊天双方分别建立自己的三维人脸表情动画库并进入相应的会话界面,其次,聊天双方中的一方从自己的三维人脸表情动画库中选择想要发送的三维人脸表情动画,并将其发送给对方,聊天双方中的另外一方打开并观看接收到的三维人脸表情动画,如果愿意,聊天双方中的一方可以将接收到的三维人脸表情动画保存到自己的三维人脸表情动画库中。

Description

一种3D动画聊天方法
技术领域
本发明涉及互联网交互式聊天以及计算机图形学技术领域,具体涉及一种3D动画聊天方法。
背景技术
互联网聊天目前已经成为日常生活的一个重要的组成部分,CNNIC和iResearch的调查和统计显示,中国30岁以下的网民中有91.3%的人使用QQ、微信等即时通信工具,其中23%的人认为值得为个人虚拟形象服务付费。目前的聊天工具主要以语音、文字或者固定的表情图标作为主要的交流手段,缺乏在聊天工具内嵌入个人形象,提供个性化服务的方案。
发明内容
为了解决现有技术中存在的问题,本发明提供了一种3D动画聊天方法。
本发明的一种3D动画聊天方法,聊天过程中使用了三维人脸表情动画,包括以下基本步骤:
步骤①:聊天双方分别建立自己的三维人脸表情动画库;
步骤②:聊天双方分别进入相应的会话界面;
步骤③:所述步骤②中聊天双方中的一方从自己的三维人脸表情动画库中选择想要发送的三维人脸表情动画,并将其发送给对方;
步骤④:所述步骤③中聊天双方中的另外一方打开并观看接收到的三维人脸表情动画。
所述聊天双方中的一方可以将接收到的三维人脸表情动画保存到自己的三维人脸表情动画库中。
所述步骤①中三维人脸表情动画库是通过以下步骤建立的:
步骤①:拍摄人脸正面图像,所述人脸正面图像为中性表情图像;
步骤②:利用所述步骤①中拍摄的人脸正面图像合成三维人脸模型;
步骤③:利用所述步骤②中的三维人脸模型合成三维人脸表情动画;
步骤④:多次重复所述步骤①至③,建立三维人脸表情动画库。
合成三维人脸表情动画时,利用人脸正面图像结合三维形变模型技术实现。
合成三维人脸表情动画时,三维人脸表情动画中的每一帧都通过预先设定好的MPEG-4FAP参数对三维人脸模型的网格顶点进行形变。
本发明相对于现有技术具有以下优点:
1、本发明的一种3D动画聊天方法中使用三维人脸表情动画,丰富了聊天内容,使聊天变得更加生动有趣。
2、本发明的一种3D动画聊天方法在合成三维人脸表情动画时,使用了三维形变模型技术,做出来的三维人脸表情动画形象逼真,使聊天过程成为一种享受。
附图说明
图1为本发明的聊天过程示意图。
具体实施方式
以下结合附图,对本发明的一种3D动画聊天方法做进一步的详细说明。
如图1所示,本发明的一种3D动画聊天方法,聊天过程中使用了三维人脸表情动画;首先,聊天双方分别建立自己的三维人脸表情动画库并进入相应的会话界面,其次,聊天双方中的一方从自己的三维人脸表情动画库中选择想要发送的三维人脸表情动画,并将其发送给对方,聊天双方中的另外一方打开并观看接收到的三维人脸表情动画,如果愿意,聊天双方中的一方可以将接收到的三维人脸表情动画保存到自己的三维人脸表情动画库中。
聊天过程中建立三维人脸表情动画库时首先拍摄人脸正面图像,人脸正面图像一般为中性表情图像,其次利用拍摄的人脸正面图像合成三维人脸模型,并用三维人脸模型合成三维人脸表情动画,最后用三维人脸表情动画建立三维人脸表情动画库;合成三维人脸表情动画时,利用人脸正面图像结合三维形变模型技术实现,三维人脸表情动画中的每一帧都通过预先设定好的MPEG-4FAP参数对三维人脸模型的网格顶点进行形变。
建立三维人脸表情动画库时,用普通摄像头拍摄一张自己的正面中性表情图像,根据上述拍摄图像运用人脸特征点检测结合3DMorphableModel技术实现三维人脸模型合成;三维人脸表情动画库合成中,主要通过对三维人脸模型的网格顶点参考MPEG-4FAP参数的预先设置对三维人脸模型的网格顶点进行形变。
拍摄表情图像时,可以通过手机前置摄像头或电脑摄像头自拍得到。
合成三维人脸表情动画时,首先通过Paul-Viola人脸检测算法检测图像中的人脸区域,然后在人脸区域内利用主动轮廓(ASM)技术检测特征点,根据检测到的人脸2D特征点,采用3DMorphableModel技术获得人脸的三维模型。其中在3DMorphableModel的训练集构建过程中需要对三维模型进行调整,使得其符合MPEG-4规范的要求,这可以首先用激光3D扫描仪扫描人脸三维模型然后通过3DSMAX等软件进行编辑实现。
合成三维人脸表情动画时,首先确定人脸表情动作类型,如大笑、哭泣等,然后由美工师通过3DSMax软件中尝试确定每个动作的每一帧所对应的MPEG-4FAP参数,然后将该预先设定好的MPEG-4FAP参数根据MPEG-4推荐的方法对三维人脸模型的网格顶点进行形变,结合摄像机投影参数从而获得每一帧的表情动画。
聊天过程中,可以通过类似QQ等双击对方头像的方式进入双方聊天界面,甲方结合自身的具体情况,从构建好的本地三维人脸表情动画库中选择自己需要的特定动画,点击聊天工具上的发送按钮,动画信息通过互联网向乙方发出;乙方接受到动作信息,点击动作信息在双方聊天界面显示甲方发送来的个性化三维人脸表情动画文件。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (6)

1.一种3D动画聊天方法,其特征在于,聊天过程中使用了三维人脸表情动画。
2.如权利要求1所述的一种3D动画聊天方法,其特征在于,包括以下基本步骤:
步骤①:聊天双方分别建立自己的三维人脸表情动画库;
步骤②:聊天双方分别进入相应的会话界面;
步骤③:所述步骤②中聊天双方中的一方从自己的三维人脸表情动画库中选择想要发送的三维人脸表情动画,并将其发送给对方;
步骤④:所述步骤③中聊天双方中的另外一方打开并观看接收到的三维人脸表情动画。
3.如权利要求2所述的一种3D动画聊天方法,其特征在于,所述步骤①中三维人脸表情动画库是通过以下步骤建立的:
步骤①:拍摄人脸正面图像,所述人脸正面图像为中性表情图像;
步骤②:利用所述步骤①中拍摄的人脸正面图像合成三维人脸模型;
步骤③:利用所述步骤②中的三维人脸模型合成三维人脸表情动画;
步骤④:多次重复所述步骤①至③,建立三维人脸表情动画库。
4.如权利要求3所述的一种3D动画聊天方法,其特征在于,合成三维人脸表情动画时,利用所述人脸正面图像结合三维形变模型技术实现。
5.如权利要求4所述的一种3D动画聊天方法,其特征在于,合成三维人脸表情动画时,三维人脸表情动画中的每一帧都通过预先设定好的MPEG-4FAP参数对三维人脸模型的网格顶点进行形变。
6.如权利要求2所述的一种3D动画聊天方法,其特征在于,所述聊天双方中的一方可以将接收到的三维人脸表情动画保存到自己的三维人脸表情动画库中。
CN201510921685.8A 2015-12-14 2015-12-14 一种3d动画聊天方法 Pending CN105528142A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510921685.8A CN105528142A (zh) 2015-12-14 2015-12-14 一种3d动画聊天方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510921685.8A CN105528142A (zh) 2015-12-14 2015-12-14 一种3d动画聊天方法

Publications (1)

Publication Number Publication Date
CN105528142A true CN105528142A (zh) 2016-04-27

Family

ID=55770402

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510921685.8A Pending CN105528142A (zh) 2015-12-14 2015-12-14 一种3d动画聊天方法

Country Status (1)

Country Link
CN (1) CN105528142A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108900407A (zh) * 2017-05-11 2018-11-27 腾讯科技(深圳)有限公司 会话记录的管理方法、装置及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4477951B2 (ja) * 2004-07-07 2010-06-09 花王株式会社 化粧シミュレーション装置
CN104346824A (zh) * 2013-08-09 2015-02-11 汉王科技股份有限公司 基于单张人脸图像自动合成三维表情的方法及装置
CN105069830A (zh) * 2015-08-14 2015-11-18 广州市百果园网络科技有限公司 表情动画生成方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4477951B2 (ja) * 2004-07-07 2010-06-09 花王株式会社 化粧シミュレーション装置
CN104346824A (zh) * 2013-08-09 2015-02-11 汉王科技股份有限公司 基于单张人脸图像自动合成三维表情的方法及装置
CN105069830A (zh) * 2015-08-14 2015-11-18 广州市百果园网络科技有限公司 表情动画生成方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108900407A (zh) * 2017-05-11 2018-11-27 腾讯科技(深圳)有限公司 会话记录的管理方法、装置及存储介质
CN108900407B (zh) * 2017-05-11 2020-08-11 腾讯科技(深圳)有限公司 会话记录的管理方法、装置及存储介质

Similar Documents

Publication Publication Date Title
US10609334B2 (en) Group video communication method and network device
CN107113396B (zh) 视频通话期间在用户终端处实现的方法、用户终端及计算机可读存储介质
CN113168231A (zh) 用于跟踪真实世界对象的移动以改进虚拟对象定位的增强技术
US11290573B2 (en) Method and apparatus for synchronizing viewing angles in virtual reality live streaming
CN107111427B (zh) 修改视频通话数据
CN111402399B (zh) 人脸驱动和直播方法、装置、电子设备及存储介质
CN104780338A (zh) 一种即时视频中的表情特效动画加载方法和电子设备
CN110401810B (zh) 虚拟画面的处理方法、装置、系统、电子设备及存储介质
US11887235B2 (en) Puppeteering remote avatar by facial expressions
CN111368137A (zh) 视频的生成方法、装置、电子设备及可读存储介质
CN110413108B (zh) 虚拟画面的处理方法、装置、系统、电子设备及存储介质
CN103368816A (zh) 基于虚拟人物形象的即时通讯方法及系统
CN111064919A (zh) 一种vr远程会议方法及装置
CN110427227B (zh) 虚拟场景的生成方法、装置、电子设备及存储介质
CN112653898B (zh) 用户形象生成方法、相关装置及计算机程序产品
CN108259806A (zh) 一种视频通信方法、设备和终端
EP4298598A1 (en) Whole body visual effects
EP3371966A1 (en) Depth camera based image stabilization
CN105264884B (zh) 显示装置及其控制方法
CN105407313A (zh) 一种视频通话方法、设备和系统
CN113315927B (zh) 视频处理方法和装置、电子设备和存储介质
EP4298597A1 (en) Whole body segmentation
CN108513090B (zh) 群组视频会话的方法及装置
CN105528142A (zh) 一种3d动画聊天方法
CN112449098A (zh) 一种拍摄方法、装置、终端及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160427