CN110163939A - 三维动画角色表情生成方法、装置、设备及存储介质 - Google Patents

三维动画角色表情生成方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN110163939A
CN110163939A CN201910450182.5A CN201910450182A CN110163939A CN 110163939 A CN110163939 A CN 110163939A CN 201910450182 A CN201910450182 A CN 201910450182A CN 110163939 A CN110163939 A CN 110163939A
Authority
CN
China
Prior art keywords
expression
basic
sequence
expression sequence
nozzle type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910450182.5A
Other languages
English (en)
Other versions
CN110163939B (zh
Inventor
徐天
张庆华
唐齐
徐磊磊
芦兴宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Mihayou Network Science And Technology Co Ltd
Original Assignee
Shanghai Mihayou Network Science And Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Mihayou Network Science And Technology Co Ltd filed Critical Shanghai Mihayou Network Science And Technology Co Ltd
Priority to CN201910450182.5A priority Critical patent/CN110163939B/zh
Publication of CN110163939A publication Critical patent/CN110163939A/zh
Application granted granted Critical
Publication of CN110163939B publication Critical patent/CN110163939B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings

Abstract

本发明实施例公开了一种三维动画角色表情生成方法、装置、设备及存储介质。该方法包括:获取表情序列;其中,表情序列包括基础表情序列,基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成;确定基础表情序列中产生跳变的目标基础表情;根据与目标基础表情相邻的基础表情和目标基础表情,对基础表情序列进行平滑处理,以更新表情序列。上述技术方案通过对产生跳变的目标基础表情进行平滑处理,实现了对表情序列的自动更新,减少了基础表情的制作数量,提高了表情动画的制作效率,同时通过对目标基础表情的平滑处理,使表情序列对应的动画角色表情在播放时,不同基础表情之间过渡更加平滑流畅,进而提升了用户体验。

Description

三维动画角色表情生成方法、装置、设备及存储介质
技术领域
本发明实施例涉及三维动画技术领域,尤其涉及一种三维动画角色表情生成方法、装置、设备及存储介质。
背景技术
在进行三维动画制作过程中,通常需要设计师提供动画人物造型,并制作出具备相应外形的三维动画角色和骨骼绑定系统,使之具备丰富细腻的表情动画,表现出喜悦、伤心或者生气等情绪。
现有技术通常通过手动插入不同的表情对应的关键帧和过渡帧,并将各表情依次拼接生成表情动画。然而,上述方法需要针对每种所需的表情制作表情模型,加大了设计师的工作量。另外,由于表情拼接组合时缺乏对表情衔接的细节调控,使得在播放表情动画时会出现卡顿等情况,降低了用户体验度。
发明内容
本发明提供一种三维动画角色表情生成方法、装置、设备及存储介质,以实现表情动画的自动生成,提高表情动画制作效率,并使表情之间的过渡更加平滑。
第一方面,本发明实施例提供了一种三维动画角色表情生成方法,包括:
获取表情序列;其中,所述表情序列包括基础表情序列,所述基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成;
确定所述基础表情序列中产生跳变的目标基础表情;
根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列。
第二方面,本发明实施例还提供了一种三维动画角色表情生成装置,包括:
表情序列获取模块,用于获取表情序列;其中,所述表情序列包括基础表情序列,所述基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成;
目标基础表情确定模块,用于确定所述基础表情序列中产生跳变的目标基础表情;
基础表情序列平滑模块,用于根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列。
第三方面,本发明实施例还提供了一种电子设备,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如第一方面实施例所提供的一种三维动画角色表情生成方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如第一方面实施例所提供的一种三维动画角色表情生成方法。
本发明实施例通过获取表情序列,表情序列包括多个基础表情,每个基础表情由多个关键帧组成;确定基础表情该序列中产生跳变的目标基础表情;根据与目标基础表情相邻的基础表情和所述目标基础表情,对基础表情序列进行平滑处理,以更新表情序列。上述技术方案通过对产生跳变的目标基础表情进行平滑处理,实现了对表情序列的自动更新,减少了基础表情的制作数量,提高了表情动画的制作效率,同时通过对目标基础表情的平滑处理,使表情序列对应的动画角色表情在播放时不同基础表情之间过渡更加平滑流畅,进而提升了用户体验。
附图说明
图1是本发明实施例一中的一种三维角色表情生成方法的流程图;
图2是本发明实施例二中的一种三维动画角色表情生成方法的流程图;
图3是本发明实施例三中的一种三维动画角色表情生成方法的流程图;
图4是本发明实施例四中的一种三维角色表情生成装置的结构图;
图5是本发明实施例五中的一种电子设备的结构图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1是本发明实施例一中的一种三维角色表情生成方法的流程图,本发明实施例适用于三维动画角色表情,特别是非写实风格三维动画角色表情的生成过程,该方法由三维角色表情生成装置执行,该装置通过软件和/或硬件实现,并具体配置于具备一定数据运算能力的电子设备中。
如图1所示的一种三维角色表情生成方法,包括:
S110、获取表情序列;其中,所述表情序列包括基础表情序列,所述基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成。
其中,基础表情可以理解为不包含眼睛眨动或嘴型变化,或者忽略眼睛眨动或嘴型变化的表情。每个基础表情由多个关键帧顺序排列组成,其中,第一帧为起始关键帧,最后一帧为结束关键帧,起始关键帧和结束关键帧之间的帧为过渡帧。
其中,基础表情序列中包括多个依次排列的基础表情,各基础表情根据所需的播放顺序进行排列。例如当表情由生气到无聊再到开心时,基础表情序列中基础表情的排列顺序为“生气-无聊-开心”。
其中,基础表情的起始关键帧和结束关键帧由设计师进行表情制作,并通过计算机生成起始关键帧和结束关键帧之间的过渡帧,进而得到各基础表情。可以理解的是,为了便于基础表情的生成,可以将基础表情中的关键帧预先存储在表情基元剪辑库中,并通过基础表情排列组合以及过渡帧自动生成的方式,得到基础表情序列。其中,表情基元剪辑库可以存储在电子设备本地,与电子设备关联的其他存储设备或云端,并在需要时从电子设备本地、与电子设备关联的其他存储设备或云端,进行基础表情的关键帧的获取。
可以理解的是,为了便于对表情基元剪辑库中所包含的表情基元(例如基础表情、眨眼表情以及语音嘴型对应的各个帧)的查找获取,还可以为各表情基元结合各表情基元固有的变形信息(blendshape)以及骨骼信息等生成索引标识,并将索引标识与相应的表情基元对应存储。
S120、确定所述基础表情序列中产生跳变的目标基础表情。
其中,跳变可以理解为在播放基础表情序列时,从一个基础表情突变至另一个基础表情,两个基础表情之间切换生硬,给用户带来较差的用户体验。
可选的,确定所述基础表情序列中产生跳变的目标基础表情,可以是:若所述基础表情序列中的基础表情包括特定关键帧,则将包含特定关键帧的基础表情确定为所述目标基础表情。其中,特定关键帧可以是自定义扩展帧,例如可以是一个半闭眨眼帧,当然,特定帧中有关眨眼以及嘴型的相关特征不能被忽略。可以理解的是,为了便于将特定关键帧与其他基础表情中的关键帧加以区分,通常会在特定关键帧中设置自定义标识。一般的,包含特定关键帧的基础表情均由至少一个自定义扩展帧经过排列组合得到。
或者可选的,确定所述基础表情序列中产生跳变的目标基础表情,还可以是:获取所述基础表情序列对应的动画曲线,并将所述动画曲线产生波动时的基础表情确定为所述目标基础表情。其中,动画曲线为基于基础表情序列中所包含的各个帧对应的变形信息所绘制的曲线。
示例性地,将所述动画曲线产生波动时的基础表情确定为所述目标基础表情,可以是确定所述动画曲线各基础表情所对应的正切值,得到正切变化曲线;确定所述正切变化曲线波峰对应的基础表情为所述目标基础表情。可以理解的时,由于正切变化曲线波峰的存在,使得波峰前后的基础表情之间在进行切换时变化趋势先增大后减小,此时基础表情序列将会在此处产生跳变,因此需要确定波峰所对应的基础表情为目标基础表情,进而进行后续基础表情序列的平滑操作;而当正切变化曲线波谷的存在,使得波谷前后的基础表情之间在进行切换时变化趋势先减小后增大,此时基础表情序列能够产生平滑过渡的效果,所以无需将波谷所对应的基础表情确定为目标基础表情而进行后续的平滑操作。
S130、根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列。
其中,目标基础表情相邻的基础表情可以是右邻基础表情,也即位于所述目标基础表情下一时序的基础表情;还可以是左邻基础表情,也即位于所述目标基础表情上一时序的基础表情。
在本发明实施例的一个可选实施方式中,根据所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,可以是:将与所述目标基础表情对应的右邻基础表情中结束关键帧以外的其他关键帧删除;根据所述目标基础表情的结束关键帧和所述右邻基础表情的结束关键帧,对所述基础表情序列进行插值运算。其中,插值运算可以是线性插值和/或缓动插值。
示例性地,根据所述目标基础表情的结束关键帧和所述右邻基础表情的结束关键帧,对所述基础表情序列进行线性插值,可以是:根据目标基础表情的结束关键帧对应的变形信息和右邻基础表情的结束关键帧信息对应的变形信息,根据设定线性插值参数,生成至少一个过渡关键帧,并将生成的过渡关键镇依次插入到目标基础表情的结束关键帧和所述右邻基础表情的结束关键帧之间。其中,设定线性插值参数由技术人员根据用户需要或经验值进行设定。
示例性地,根据所述目标基础表情的结束关键帧和所述右邻基础表情的结束关键帧,对所述基础表情序列进行缓动插值,可以是:根据目标基础表情的结束关键帧对应的变形信息和右邻基础表情的结束关键帧信息对应的变形信息,根据设定缓动插值参数,生成至少一个过渡关键帧,并将生成的过渡关键帧依次插入到目标基础表情的结束关键帧和所述右邻基础表情的结束关键帧之间。其中,设定缓动插值参数由技术人员根据用户需要或经验值进行设定。
在本发明实施例的另一可选实施方式中,根据所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,还可以是:根据所述目标基础表情的起始关键帧和所述目标基础表情对应的左邻基础表情的结束关键帧,对所述基础表情序列进行插值运算。其中,插值运算可以是线性插值和/或缓动插值。
其中,对基础表情序列进行线性插值和/或缓动插值的方式与前述内容相似,在此不再赘述。
本发明实施例通过获取表情序列,表情序列包括多个基础表情,每个基础表情由多个关键帧组成;确定基础表情该序列中产生跳变的目标基础表情;根据与目标基础表情相邻的基础表情和所述目标基础表情,对基础表情序列进行平滑处理,以更新表情序列。上述技术方案通过对产生跳变的目标基础表情进行平滑处理,实现了对表情序列的自动更新,减少了基础表情的制作数量,提高了表情动画的制作效率,同时通过对目标基础表情的平滑处理,使表情序列对应的动画角色表情在播放时,不同基础表情之间过渡更加平滑流畅,进而提升了用户体验。
实施例二
图2是本发明实施例二中的一种三维动画角色表情生成方法的流程图,本发明实施例在上述各实施例的技术方案的基础上进行了优化改进。
进一步地,将表情序列优化为还包括眨眼表情序列;其中,所述眨眼表情序列包括至少一个眨眼表情;所述眨眼表情序列叠加覆盖所述基础表情序列;相应的,在执行操作“在根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列”之后,追加“确定所述眨眼表情的配置时间是否位于对相应的所述基础表情序列进行平滑处理的时间段内;将位于对所述基础表情序列进行平滑处理的时间段以外的眨眼表情作为目标眨眼表情;根据设定眨眼参数配置所述目标眨眼表情的播放时长,以更新所述表情序列”,以完善在表情序列包含眨眼表情序列时,对表情序列的更新机制,进而优化三维动画角色表情的生成方式。
如图2所示的一种三维动画角色表情生成方法,包括:
S210、获取表情序列;其中,所述表情序列包括基础表情序列和眨眼表情序列。
其中,所述基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成。其中,眨眼表情序列包括至少一个眨眼表情;眨眼表情序列叠加覆盖基础表情序列,使得播放展示表情序列时,能够在连续展示基础表情序列中的各基础表情时,同步显示眨眼表情序列中的眨眼动作。
可以理解的是,为了便于眨眼表情序列的生成,可以将眨眼表情预先存储在表情基元剪辑库中,进而通过眨眼表情的排列组合,得到眨眼表情序列。其中,眨眼表情序列中的各眨眼表情需要与所叠加覆盖的基础表情序列中的基础表情相对应。例如,在当前时序对应的基础表情为生气表情时,相应的眨眼表情包括与生气表情对应的眨眼表情关键帧,以及生气表情对应的眨眼表情过渡帧,并通过眨眼表情关键帧和眨眼表亲过渡帧组合得到与生气表情对应的眨眼表情。
S220、确定所述基础表情序列中产生跳变的目标基础表情。
S230、根据所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列。
S240、确定所述眨眼表情的配置时间是否位于对相应的所述基础表情序列进行平滑处理的时间段内。
由于眨眼表情序列叠加在基础表情序列之上,因此如果对已做平滑处理的基础表情序列对应的时间段内的眨眼表情进行处理,将会覆盖已平滑处理的基础表情序列。为了避免此现象的发生,需要对眨眼表情序列的平滑过程与基础表情序列的平滑过程互斥设置,也即,在对眨眼表情序列进行平滑处理之前,需要预先确定眨眼表情的配置时间所在时间段,以避开对基础表情序列进行平滑处理的时间段。
S250、将位于对所述基础表情序列进行平滑处理的时间段以外的眨眼表情作为目标眨眼表情。
其中,所确定的目标眨眼表情至少为一个,每个目标眨眼表情由多个关键帧组成。
S260、根据设定眨眼参数配置所述目标眨眼表情的播放时长,以更新所述表情序列。
其中,设定眨眼参数根据用户的动画制作需求预先设定。根据每个目标眨眼表情的设定眨眼参数,为各目标眨眼表情配置播放时长,以更新表情序列,进而在播放表情序列时,在连续展示基础表情的同时,进行眨眼表情的同步播放。其中,播放时长包括目标眨眼表情的起始播放时刻和终止播放时刻;当然,播放时长还可以根据需要包括循环播放次数以及循环播放时间间隔等信息。
本发明实施例通过在表情序列中还包括叠加覆盖在基础表情序列上的眨眼表情序列时,追加确定所述眨眼表情的配置时间是否位于对相应的所述基础表情序列进行平滑处理的时间段内;将位于对所述基础表情序列进行平滑处理的时间段以外的眨眼表情作为目标眨眼表情;根据设定眨眼参数配置所述目标眨眼表情的播放时长,以更新所述表情序列。上述技术方案通过在对基础表情序列平滑处理的基础上,对眨眼表情序列中的目标眨眼表情进行播放时长配置,使得在播放表情序列对应的动画时能够使眨眼过程更加平滑自然,完善了对表情序列的更新机制,进而优化了三维动画角色表情的生成方式。
实施例三
图3是本发明实施例三中的一种三维动画角色表情生成方法的流程图,本发明实施例在上述各实施例的技术方案的基础上进行了优化改进。
进一步地,将表情序列优化为还包括语音表情序列;其中,所述语音表情序列包括至少一个语音嘴型;所述语音表情序列叠加覆盖所述基础表情序列。
相应的,在操作“根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列”之后,追加“获取其中一个语音嘴型为当前语音嘴型,在右邻语音嘴型不存在时序重叠时,将所述当前语音嘴型确定为目标语音嘴型;所述右邻语音嘴型为所述当前语音嘴型下一时序的语音嘴型;在所述目标语音嘴型后插入与所述目标语音嘴型对应的语音嘴型过渡帧;根据所述目标语音嘴型的配置时长,在所述语音嘴型过渡帧与所述目标语音嘴型下一时序的语音嘴型之间,插入闭嘴关键帧,以更新所述表情序列”,以完善在表情序列包含语音表情序列,且相邻语音嘴型存在时序重叠时,对表情序列的更新机制,进而优化三维动画角色表情的生成方式。
进一步地,在操作“根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列”之后,追加“获取其中一个语音嘴型为当前语音嘴型,在所述当前语音嘴型与右邻语音嘴型存在时序重叠时,删除所述当前语音嘴型与所述右邻语音嘴型的重叠的关键帧;所述右邻语音嘴型为所述当前语音嘴型下一时序的语音嘴型;根据所述当前语音嘴型的配置时长,在删除重叠的关键帧的位置,插入闭嘴关键帧,以更新所述表情序列”,以完善在表情序列包含语音表情序列,且相邻语音嘴型不存在时序重叠时,对表情序列的更新机制,进而优化三维动画角色表情的生成方式。
如图3所示的一种三维动画角色表情生成方法,包括:
S310、获取表情序列;其中,所述表情序列包括基础表情序列和语音表情序列。
其中,所述基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成。其中,语音表情序列包括至少一个语音嘴型;语音表情序列叠加覆盖基础表情序列,使得播放展示表情序列时,能够在连续展示基础表情序列中的各基础表情时,同步显示语音表情序列中的嘴型变化细节。
需要说明的是,当表情序列包括基础表情序列、眨眼表情序列以及语音表情序列时,眨眼表情序列叠加覆盖在基础表情序列之上,语音表情序列叠加覆盖在眨眼表情序列之上,使得播放展示表情序列时,能够在连续展示基础表情序列中的各基础表情时,同步显示眨眼表情序列中的眨眼动作以及语音表情序列中的嘴型变化细节。
可以理解的是,为了便于语音表情序列的生成,可以将语音嘴型预先存储在表情基元剪辑库中,进而通过对语音嘴型的排列组合得到语音表情序列。示例性地,语音嘴型可以是元音嘴型,如a、e、i、o以及u;当然还可以根据其他添加辅音嘴型或者其他嘴型等。
S320、确定所述基础表情序列中产生跳变的目标基础表情。
S330、根据所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列。
S341、获取其中一个语音嘴型为当前语音嘴型,在右邻语音嘴型不存在时序重叠时,将所述当前语音嘴型确定为目标语音嘴型。
所述右邻语音嘴型为所述当前语音嘴型下一时序的语音嘴型。
S351、在所述目标语音嘴型后插入与所述目标语音嘴型对应的语音嘴型过渡帧。
可选的,语音嘴型过渡帧可以由设计师根据用户需求预先制作,当然还可以预先存储在表情基元剪辑库中。其中,不同的语音嘴型之间可以设置相同或不同的语音嘴型过渡帧。
或者可选的,还可以根据目标语音嘴型和右邻语音嘴型,对基础表情序列进行线性插值,以自动生成语音嘴型过渡帧,并将生成的语音嘴型插入之目标语音嘴型与右邻语音嘴型之间。
S361、根据所述目标语音嘴型的配置时长,在所述语音嘴型过渡帧与所述右邻语音嘴型之间,插入闭嘴关键帧,以更新所述表情序列。
为了突出三维动画角色在说话时的节奏感,通常相邻语音嘴型之间会进行跳变处理,也即在目标语音嘴型对应插入的语音嘴型过渡帧之后,在目标语音嘴型下一时序的语音嘴型(也即,右邻语音嘴型)之前,通过常量插值的方式插入闭嘴关键帧。
S342、获取其中一个语音嘴型为当前语音嘴型,在所述当前语音嘴型与右邻语音嘴型存在时序重叠时,删除所述当前语音嘴型与所述右邻语音嘴型的重叠的关键帧。
由于由设计师制作的语音嘴型较少,所以形成语音表情序列时,为了增加语音嘴型的种类,还会将相邻的两个语音嘴型进行部分时序的重叠设置。在当前语音嘴型与右邻语音嘴型存在时序重叠时,会将重叠部分的关键帧进行删除,以在进行表情序列对应的动画播放时,所呈现的语音嘴型更加自然。
S352、根据所述当前语音嘴型的配置时长,在删除重叠的关键帧的位置,插入闭嘴关键帧,以更新所述表情序列。
本发明实施例通过在表情序列中还包括叠加覆盖在基础表情序列上的语音表情序列时,追加在当前语音嘴型与右邻语音嘴型不存在时序重叠时,进行语音嘴型过渡帧以及闭嘴关键帧的插入,在当前语音嘴型与右邻语音嘴型存在时序重叠时,进行重叠的关键帧的删除以及闭嘴关键帧的插入,突出了进行表情序列对应的动画播放时所呈现的三维动画角色说话时的节奏感,提高了用户体验,完善了对表情序列的更新机制,进而优化了三维动画角色表情的生成方式。
在上述各实施例的技术方案的基础上,为了便于所更新的表情序列的迁移使用,还可以将更新后的表情序列进行烘焙,得到与表情序列中所包含的各表情基元对应的各索引标识所绑定的动画曲线,使得运行时播放无需任何复杂计算。
实施例四
图4是本发明实施例四中的一种三维角色表情生成装置的结构图,本发明实施例适用于三维动画角色表情,特别是非写实风格三维动画角色表情的生成过程,该装置通过软件和/或硬件实现,并具体配置于具备一定数据运算能力的电子设备中。
如图4所示的一种三维角色表情生成装置,包括:表情序列获取模块410,目标基础表情确定模块420,以及基础表情序列平滑模块430。
其中,表情序列获取模块410,用于获取表情序列;其中,所述表情序列包括基础表情序列,所述基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成;
目标基础表情确定模块420,用于确定所述基础表情序列中产生跳变的目标基础表情;
基础表情序列平滑模块430,用于根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列。
本发明实施例通过表情序列获取模块获取表情序列,表情序列包括多个基础表情,每个基础表情由多个关键帧组成;通过目标基础表情确定模块确定基础表情该序列中产生跳变的目标基础表情;通过基础表情序列平滑模块根据与目标基础表情相邻的基础表情和所述目标基础表情,对基础表情序列进行平滑处理,以更新表情序列。上述技术方案通过对产生跳变的目标基础表情进行平滑处理,实现了对表情序列的自动更新,减少了基础表情的制作数量,提高了表情动画的制作效率,同时通过对目标基础表情的平滑处理,使表情序列对应的动画角色表情在播放时不同基础表情之间过渡更加平滑流畅,进而提升了用户体验。
进一步地,目标基础表情确定模块420,具体用于:
在所述基础表情序列中的基础表情包括特定关键帧时,将包含特定关键帧的基础表情确定为所述目标基础表情;
获取所述基础表情序列对应的动画曲线,并将所述动画曲线产生波动时的基础表情确定为所述目标基础表情。
进一步地,目标基础表情确定模块420,在执行将所述动画曲线产生波动时的基础表情确定为所述目标基础表情时,具体用于:
确定所述动画曲线各基础表情所对应的正切值,得到正切变化曲线;
确定所述正切变化曲线波峰对应的基础表情为所述目标基础表情。
进一步地,基础表情序列平滑模块430,具体用于:
将与所述目标基础表情对应的右邻基础表情中结束关键帧以外的其他关键帧删除;所述右邻基础表情为位于所述目标基础表情下一时序的基础表情;
根据所述目标基础表情的结束关键帧和所述右邻基础表情的结束关键帧,对所述基础表情序列进行插值运算。
进一步地,基础表情序列平滑模块430,还用于:
根据所述目标基础表情的起始关键帧和所述目标基础表情对应的左邻基础表情的结束关键帧,对所述基础表情序列进行插值运算;所述左邻基础表情为位于所述目标基础表情上一时序的基础表情。
进一步地,所述插值运算为线性插值和/或缓动插值。
进一步地,所述表情序列还包括眨眼表情序列和/或语音表情序列;
其中,所述眨眼表情序列包括至少一个眨眼表情;所述语音表情序列包括至少一个语音嘴型;所述眨眼表情序列和/或所述语音表情序列叠加覆盖所述基础表情序列。
进一步地,该装置还包括,眨眼表情序列平滑模块,具体用于:
在所述表情序列包括眨眼表情序列时,在根据所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列之后,确定所述眨眼表情的配置时间是否位于对相应的所述基础表情序列进行平滑处理的时间段内;
将位于对所述基础表情序列进行平滑处理的时间段以外的眨眼表情作为目标眨眼表情;
根据设定眨眼参数配置所述目标眨眼表情的播放时长,以更新所述表情序列。
进一步地,该装置还包括,语音表情序列平滑模块,具体用于:
在所述表情序列还包括语音表情序列时,在根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列之后,获取其中一个语音嘴型为当前语音嘴型,在右邻语音嘴型不存在时序重叠时,将所述当前语音嘴型确定为目标语音嘴型;所述右邻语音嘴型为所述当前语音嘴型下一时序的语音嘴型;
在所述目标语音嘴型后插入与所述目标语音嘴型对应的语音嘴型过渡帧;
根据所述目标语音嘴型的配置时长,在所述语音嘴型过渡帧与所述右邻语音嘴型之间,插入闭嘴关键帧,以更新所述表情序列。
进一步地,语音表情序列平滑模块,还用于:
获取其中一个语音嘴型为当前语音嘴型,在所述当前语音嘴型与右邻语音嘴型存在时序重叠时,删除所述当前语音嘴型与所述右邻语音嘴型的重叠的关键帧;所述右邻语音嘴型为所述当前语音嘴型下一时序的语音嘴型;
根据所述当前语音嘴型的配置时长,在删除重叠的关键帧的位置,插入闭嘴关键帧,以更新所述表情序列。
上述三维角色表情生成装置可执行本发明任意实施例所提供的三维角色表情生成方法,具备执行三维角色表情生成方法相应的功能模块和有益效果。
实施例五
图5是本发明实施例五中的一种电子设备的结构图。如图5所示的电子设备,包括:输入装置510、输出装置520、处理器530以及存储装置540。
其中,输入装置510,用于获取表情序列;
输出装置520,用于展示表情序列;
一个或多个处理器530;
存储装置540,用于存储一个或多个程序。
图5中以一个处理器530为例,该电子设备中的输入装置510可以通过总线或其他方式与输出装置520、处理器530以及存储装置540相连,且处理器530和存储装置540也通过总线或其他方式连接,图5中以通过总线连接为例。
在本实施例中,电子设备中的处理器530可以控制输入装置510获取表情序列;还可以确定表情序列所包含的基础表情序列中产生跳变的目标基础表情;还可以根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列;还可以控制输出装置520展示表情序列。
该电子设备中的存储装置540作为一种计算机可读存储介质,可用于存储一个或多个程序,所述程序可以是软件程序、计算机可执行程序以及模块,如本发明实施例中三维角色表情生成方法对应的程序指令/模块(例如,附图4所示的表情序列获取模块410,目标基础表情确定模块420,以及基础表情序列平滑模块430)。处理器530通过运行存储在存储装置540中的软件程序、指令以及模块,从而执行电子设备的各种功能应用以及数据处理,即实现上述方法实施例中的三维角色表情生成方法。
存储装置540可包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储数据等(如上述实施例中的表情序列以及目标基础表情等)。此外,存储装置540可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储装置540可进一步包括相对于处理器530远程设置的存储器,这些远程存储器可以通过网络连接至服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
实施例六
本发明实施例六还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被三维角色表情生成装置执行时,实现本发明实施提供的三维角色表情生成方法,该方法包括:获取表情序列;其中,所述表情序列包括基础表情序列,所述基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成;确定所述基础表情序列中产生跳变的目标基础表情;根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (13)

1.一种三维动画角色表情生成方法,其特征在于,包括:
获取表情序列;其中,所述表情序列包括基础表情序列,所述基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成;
确定所述基础表情序列中产生跳变的目标基础表情;
根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列。
2.根据权利要求1所述的方法,其特征在于,确定所述基础表情序列中产生跳变的目标基础表情,包括:
若所述基础表情序列中的基础表情包括特定关键帧,则将包含特定关键帧的基础表情确定为所述目标基础表情;或者,
获取所述基础表情序列对应的动画曲线,并将所述动画曲线产生波动时的基础表情确定为所述目标基础表情。
3.根据权利要求2所述的方法,其特征在于,将所述动画曲线产生波动时的基础表情确定为所述目标基础表情,包括:
确定所述动画曲线各基础表情所对应的正切值,得到正切变化曲线;
确定所述正切变化曲线波峰对应的基础表情为所述目标基础表情。
4.根据权利要求1所述的方法,其特征在于,根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,包括:
将与所述目标基础表情对应的右邻基础表情中结束关键帧以外的其他关键帧删除;所述右邻基础表情为位于所述目标基础表情下一时序的基础表情;
根据所述目标基础表情的结束关键帧和所述右邻基础表情的结束关键帧,对所述基础表情序列进行插值运算。
5.根据权利要求4所述的方法,其特征在于,若所述目标基础表情为包含特定关键帧的基础表情,则根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,还包括:
根据所述目标基础表情的起始关键帧和所述目标基础表情对应的左邻基础表情的结束关键帧,对所述基础表情序列进行插值运算;所述左邻基础表情为位于所述目标基础表情上一时序的基础表情。
6.根据权利要求4或5所述的方法,其特征在于,所述插值运算为线性插值和/或缓动插值。
7.根据权利要求1所述的方法,其特征在于,所述表情序列还包括眨眼表情序列和/或语音表情序列;
其中,所述眨眼表情序列包括至少一个眨眼表情;所述语音表情序列包括至少一个语音嘴型;所述眨眼表情序列和/或所述语音表情序列叠加覆盖所述基础表情序列。
8.根据权利要求7所述的方法,其特征在于,在所述表情序列包括眨眼表情序列时,在根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列之后,还包括:
确定所述眨眼表情的配置时间是否位于对相应的所述基础表情序列进行平滑处理的时间段内;
将位于对所述基础表情序列进行平滑处理的时间段以外的眨眼表情作为目标眨眼表情;
根据设定眨眼参数配置所述目标眨眼表情的播放时长,以更新所述表情序列。
9.根据权利要求7所述的方法,其特征在于,在所述表情序列还包括语音表情序列时,在根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列之后,还包括:
获取其中一个语音嘴型为当前语音嘴型,在右邻语音嘴型不存在时序重叠时,将所述当前语音嘴型确定为目标语音嘴型;所述右邻语音嘴型为所述当前语音嘴型下一时序的语音嘴型;
在所述目标语音嘴型后插入与所述目标语音嘴型对应的语音嘴型过渡帧;
根据所述目标语音嘴型的配置时长,在所述语音嘴型过渡帧与所述右邻语音嘴型之间,插入闭嘴关键帧,以更新所述表情序列。
10.根据权利要求7所述的方法,其特征在于,在所述表情序列还包括语音表情序列时,在根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列之后,还包括:
获取其中一个语音嘴型为当前语音嘴型,在所述当前语音嘴型与右邻语音嘴型存在时序重叠时,删除所述当前语音嘴型与所述右邻语音嘴型的重叠的关键帧;所述右邻语音嘴型为所述当前语音嘴型下一时序的语音嘴型;
根据所述当前语音嘴型的配置时长,在删除重叠的关键帧的位置,插入闭嘴关键帧,以更新所述表情序列。
11.一种三维动画角色表情生成装置,其特征在于,包括:
表情序列获取模块,用于获取表情序列;其中,所述表情序列包括基础表情序列,所述基础表情序列包括多个基础表情,每个基础表情由多个关键帧组成;
目标基础表情确定模块,用于确定所述基础表情序列中产生跳变的目标基础表情;
基础表情序列平滑模块,用于根据与所述目标基础表情相邻的基础表情和所述目标基础表情,对所述基础表情序列进行平滑处理,以更新所述表情序列。
12.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-10中任一项所述的一种三维动画角色表情生成方法。
13.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-10中任一项所述的一种三维动画角色表情生成方法。
CN201910450182.5A 2019-05-28 2019-05-28 三维动画角色表情生成方法、装置、设备及存储介质 Active CN110163939B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910450182.5A CN110163939B (zh) 2019-05-28 2019-05-28 三维动画角色表情生成方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910450182.5A CN110163939B (zh) 2019-05-28 2019-05-28 三维动画角色表情生成方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN110163939A true CN110163939A (zh) 2019-08-23
CN110163939B CN110163939B (zh) 2023-04-28

Family

ID=67629537

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910450182.5A Active CN110163939B (zh) 2019-05-28 2019-05-28 三维动画角色表情生成方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN110163939B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110517337A (zh) * 2019-08-29 2019-11-29 成都数字天空科技有限公司 动画角色表情生成方法、动画制作方法及电子设备
CN112634409A (zh) * 2020-12-28 2021-04-09 稿定(厦门)科技有限公司 自定义动画曲线生成方法及装置
WO2021093453A1 (zh) * 2019-11-15 2021-05-20 腾讯科技(深圳)有限公司 三维表情基的生成方法、语音互动方法、装置及介质
CN113516738A (zh) * 2020-04-09 2021-10-19 上海米哈游天命科技有限公司 一种动画处理方法、装置、存储介质及电子设备
CN115618155A (zh) * 2022-12-20 2023-01-17 成都泰盟软件有限公司 一种生成动画的方法、装置、计算机设备及存储介质
WO2023231568A1 (zh) * 2022-05-30 2023-12-07 腾讯科技(深圳)有限公司 视频编辑方法、装置、计算机设备、存储介质及产品

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101311966A (zh) * 2008-06-20 2008-11-26 浙江大学 一种基于运行传播和Isomap分析的三维人脸动画编辑与合成方法
CN104574481A (zh) * 2015-01-26 2015-04-29 北京科艺有容科技有限责任公司 一种三维角色动画非线性修改方法
CN104599309A (zh) * 2015-01-09 2015-05-06 北京科艺有容科技有限责任公司 一种基于元表情的三维动画角色的表情生成方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101311966A (zh) * 2008-06-20 2008-11-26 浙江大学 一种基于运行传播和Isomap分析的三维人脸动画编辑与合成方法
CN104599309A (zh) * 2015-01-09 2015-05-06 北京科艺有容科技有限责任公司 一种基于元表情的三维动画角色的表情生成方法
CN104574481A (zh) * 2015-01-26 2015-04-29 北京科艺有容科技有限责任公司 一种三维角色动画非线性修改方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110517337A (zh) * 2019-08-29 2019-11-29 成都数字天空科技有限公司 动画角色表情生成方法、动画制作方法及电子设备
CN110517337B (zh) * 2019-08-29 2023-07-25 成都数字天空科技有限公司 动画角色表情生成方法、动画制作方法及电子设备
WO2021093453A1 (zh) * 2019-11-15 2021-05-20 腾讯科技(深圳)有限公司 三维表情基的生成方法、语音互动方法、装置及介质
US11748934B2 (en) 2019-11-15 2023-09-05 Tencent Technology (Shenzhen) Company Limited Three-dimensional expression base generation method and apparatus, speech interaction method and apparatus, and medium
CN113516738A (zh) * 2020-04-09 2021-10-19 上海米哈游天命科技有限公司 一种动画处理方法、装置、存储介质及电子设备
CN113516738B (zh) * 2020-04-09 2022-12-02 上海米哈游天命科技有限公司 一种动画处理方法、装置、存储介质及电子设备
CN112634409A (zh) * 2020-12-28 2021-04-09 稿定(厦门)科技有限公司 自定义动画曲线生成方法及装置
CN112634409B (zh) * 2020-12-28 2022-04-19 稿定(厦门)科技有限公司 自定义动画曲线生成方法及装置
WO2023231568A1 (zh) * 2022-05-30 2023-12-07 腾讯科技(深圳)有限公司 视频编辑方法、装置、计算机设备、存储介质及产品
CN115618155A (zh) * 2022-12-20 2023-01-17 成都泰盟软件有限公司 一种生成动画的方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
CN110163939B (zh) 2023-04-28

Similar Documents

Publication Publication Date Title
CN110163939A (zh) 三维动画角色表情生成方法、装置、设备及存储介质
CN108566519B (zh) 视频制作方法、装置、终端和存储介质
US8006186B2 (en) System and method for media production
JP6942300B2 (ja) コンピュータグラフィックスのプログラム、表示装置、送信装置、受信装置、動画生成装置、データ変換装置、データ生成装置、情報処理方法及び情報処理システム
CN104202540B (zh) 一种利用图片生成视频的方法及系统
CN108989705B (zh) 一种虚拟形象的视频制作方法、装置和终端
CN110766776A (zh) 生成表情动画的方法及装置
BRPI0613542B1 (pt) método para exibir animação
US20220375150A1 (en) Expression generation for animation object
CN111553967A (zh) 一种基于Unity的动画资源文件制作方法、模块及存储介质
WO2019233348A1 (zh) 动画展示、制作方法及装置
CN109621419A (zh) 游戏角色表情的生成装置方法及装置、存储介质
CN105637579A (zh) 通过在多组波形数据之间切换来再现波形的技术
CN109523614B (zh) 一种3d动画导出方法、3d动画播放方法及装置
Zhao et al. Automatic construction of a minimum size motion graph
CN109859739A (zh) 基于语音合成的旋律生成方法、装置及终端设备
CN108846881A (zh) 一种表情图像的生成方法及装置
CN111862911B (zh) 歌曲即时生成方法和歌曲即时生成装置
US8237719B1 (en) Pose-structured animation interface
Neff et al. Layered performance animation with correlation maps
CN115177956A (zh) 一种音乐游戏谱面的生成方法、存储介质和终端
Sauer et al. Music-driven character animation
JP2013195699A (ja) 歌唱合成装置および歌唱合成プログラム
US8773441B2 (en) System and method for conforming an animated camera to an editorial cut
CN113704390A (zh) 虚拟对象的交互方法、装置、计算机可读介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant