CN101968893A - 游戏音唇同步系统 - Google Patents

Abstract

一种游戏音唇同步系统由输入内容解析模块、汉字转成拼音模块、拼音转成动画序列信息模块、动画序列信息解析模块及最终动画应用模块依次连接；用于该系统的方法包括解析输入内容的步骤，生成统一格式的单个汉字及汉字发音时间长短的步骤，生成统一格式的汉字拼音及汉字发音时间长短的步骤，生成统一格式的动画序列信息及汉字发音时间长短的步骤，生成统一格式的单个动画序列信息及动画播放时间，单个动画序列信息及动画播放时间，下一个单个动画序列信息的融合时间的步骤及应用步骤。本发明能通过游戏动画的说话内容直接由汉字自动实时地实现音唇同步，实时性强，使用简单，调整方便，是目前唯一一款能通过汉字自动生成音唇同步的游戏系统。

Description

游戏音唇同步系统

技术领域

本发明涉及一种游戏系统，具体涉及一种游戏音唇同步系统。

背景技术

目前，一种现有技术的源虚拟角色上的口形动画生成方法，包括下列步骤：1)接收文本，将文本切分为单个字，将字拆分为文本的音素；2)根据音素口形对应库将音素转化为对应的口形命令，其中音素口形对应库设定了音素对应的起始口形和终止口形；3)根据音素时长表，缩放口形命令中的文本的音素对应口形，其中音素时长表包含口形幅度的标识；4)根据音素时长表，计算文本的音素对应的起始口形和终止口形分别对应的起始帧和结束帧，设置口形命令的执行时间，其中，音素时长表包括音素对应口形的时长；5)执行所述口形命令，生成源虚拟角色上的口形动画。

这种现有技术的源虚拟角色上的口形动画生成方法的缺点是：

1、这种现有技术的源虚拟角色上的口形动画生成方法由于根据音素时长表，计算文本的音素对应的起始口形和终止口形分别对应的起始帧和结束帧，耗时长，不能确保动画的实时性。

2、这种现有技术的源虚拟角色上的口形动画生成方法由于流程复杂，调整不方便。

3、这种现有技术的源虚拟角色上的口形动画生成方法成本高，不易普及应用。

发明内容

本发明的目的是提供一种游戏音唇同步系统，能将输入的汉字最终转换成口形动画输出，能够广泛的应用在各种游戏的制作、CG制作、三维MV制作等各个行业中。

本发明游戏音唇同步系统的目的是通过以下技术方案实现的：一种游戏音唇同步系统，包括输入内容解析模块、汉字转成拼音模块、拼音转成动画序列信息模块、动画序列信息解析模块及最终动画应用模块。

所述的输入内容解析模块的输出端与汉字转成拼音模块的输入端连接。

所述的汉字转成拼音模块的输出端与拼音转成动画序列信息模块的输入端连接。

所述的拼音转成动画序列信息模块的输出端与动画序列信息解析模块的输入端连接。

所述的动画序列信息解析模块的输出端与最终动画应用模块的输入端连接。

所述的最终动画应用模块的输出端外接渲染引擎。

上述的游戏音唇同步系统及其方法，其中，所述的输入内容解析模块的各种输入格式的文本是汉字文本或使用工具编辑成的音乐电视字幕格式的汉字，并将其归一化为统一格式的汉字及汉字发音时间长短的数据序列信息；所述的输入格式包括普通说话的匀速发音及唱歌的变速发音。

上述的游戏音唇同步系统及其方法，其中，所述的汉字转成拼音模块对应《汉字-拼音对应表格》，将输入文本中的每个汉字转换为汉字拼音，输出统一格式的汉字拼音及每个汉字发音时间的长短的数据序列信息。

上述的游戏音唇同步系统及其方法，其中，所述的拼音转成动画序列信息模块对应《拼音-动画序列对应表格》，将汉字转成拼音模块中输出的汉字拼音转换为动画序列信息，输出统一格式的动画序列信息及每个音发音时间长短的数据序列信息。

上述的游戏音唇同步系统及其方法，其中，所述的动画序列信息解析模块输出统一格式的单个动画序列信息、单个动画播放时间及和下一个动画融合时间的数据序列信息；所述的融合时间是指汉字和汉字之间的停顿时间。

上述的游戏音唇同步系统及其方法，其中，所述的最终动画应用模块在渲染引擎中渲染出最终应用模型。

一种用于游戏音唇同步系统的方法，该方法至少包括以下步骤：

步骤1，用户输入文本，输入内容解析模块对输入的文本进行解析，输出统一格式的单个汉字及汉字发音时间长短的数据序列信息；判断文本解析是否成功；解析成功，则继续执行步骤2，解析失败，则返回继续输入文本。

步骤2，汉字转成拼音模块根据《汉字-拼音对应表格》进行数据转换，生成统一格式的汉字拼音及汉字发音时间长短的数据序列信息；判断汉字转成拼音是否成功；转换成功，则继续执行步骤3，转换失败，则返回继续输入文本。

步骤3，拼音转成动画序列信息模块根据《拼音-动画序列对应表格》进行数据转换，生成统一格式的动画序列信息及汉字发音时间长短的数据序列信息；判断拼音转成动画序列结构是否成功；转换成功，则继续执行步骤4，转换失败，则返回继续输入文本。

步骤4，动画序列信息解析模块根据动画序列中的信息及整个汉字的发音时间长短进行数据转换，生成统一格式的单个动画序列信息及动画播放时间，单个动画序列信息及动画播放时间，和下一个单个动画序列信息的融合时间的最终数据序列信息；判断最终数据序列信息转换是否成功；转换成功，则继续执行步骤5，转换失败，则返回继续输入文本。

步骤5，动画应用模块将最终数据序列信息应用到渲染引擎中。

本发明游戏音唇同步系统由于采用了上述方案，使之与现有技术相比，具有以下的优点和积极效果：

1、本发明游戏音唇同步系统能够通过游戏动画的说话内容直接由汉字自动实时地实现音唇同步。

2、本发明游戏音唇同步系统实时性强，使用简单，调整方便。

3、本发明游戏音唇同步系统是目前市场上唯一一款能够通过汉字自动生成音唇同步的游戏系统。

附图说明

图1是本发明游戏音唇同步系统的模块图。

图2是本发明游戏音唇同步系统的流程图。

图3是本发明游戏音唇同步系统的一个实施例。

具体实施方式

请参见附图1所示，本发明游戏音唇同步系统包括输入内容解析模块1、汉字转成拼音模块2、拼音转成动画序列信息模块3、动画序列信息解析模块4及最终动画应用模块5；输入内容解析模块1的输出端与汉字转成拼音模块2的输入端连接，汉字转成拼音模块2的输出端与拼音转成动画序列信息模块3的输入端连接，音转成动画序列信息模块3的输出端与动画序列信息解析模块4的输入端连接，动画序列信息解析模块4的输出端与最终动画应用模块5的输入端连接。

输入内容解析模块1的各种输入格式的文本是汉字文本或使用工具编辑成的音乐电视(MTV)字幕格式的汉字，并将其归一化为统一格式的汉字及汉字发音时间长短的数据序列信息；输入格式包括普通说话的匀速发音及唱歌的变速发音，汉字转成拼音模块2对应《汉字-拼音对应表格》，将输入文本中的每个汉字转换为汉字拼音，并将输出统一格式的汉字拼音及每个汉字发音时间的长短的数据序列信息，拼音转成动画序列信息模块3对应《拼音-动画序列对应表格》，将汉字转成拼音模块2中输出的汉字拼音转换为动画序列信息，并将输出统一格式的动画序列信息及每个音发音时间长短的数据序列信息，动画序列信息解析模块4将输出统一格式的单个动画序列信息、单个动画播放时间及和下一个动画融合时间的数据序列信息；融合时间是指汉字和汉字之间的停顿时间，最终动画应用模块5在渲染引擎中渲染出最终应用模型。

请参见附图2所示，用于本发明游戏音唇同步系统的运行方法包括如下步骤：

步骤1，用户输入文本，输入内容解析模块对输入的文本进行解析，输出统一格式的单个汉字及汉字发音时间长短的数据序列信息；判断文本解析是否成功；解析成功，则继续执行步骤2，解析失败，则返回继续输入文本。

步骤2，汉字转成拼音模块根据《汉字-拼音对应表格》进行数据转换，生成统一格式的汉字拼音及汉字发音时间长短的数据序列信息；判断汉字转成拼音是否成功；转换成功，则继续执行步骤3，转换失败，则返回继续输入文本。

步骤3，拼音转成动画序列信息模块根据《拼音-动画序列对应表格》进行数据转换，生成统一格式的动画序列信息及汉字发音时间长短的数据序列信息；判断拼音转成动画序列结构是否成功；转换成功，则继续执行步骤4，转换失败，则返回继续输入文本。

步骤4，动画序列信息解析模块根据动画序列中的信息及整个汉字的发音时间长短进行数据转换，生成统一格式的单个动画序列信息及动画播放时间，单个动画序列信息及动画播放时间，和下一个单个动画序列信息的融合时间的最终数据序列信息；判断最终数据序列信息转换是否成功；转换成功，则继续执行步骤5，转换失败，则返回继续输入文本。

步骤5，动画应用模块将最终数据序列信息应用到渲染引擎中。

本发明游戏音唇同步系统在算法上时跨平台的，能够在各种系统环境中使用，如windows，linux等。

本发明游戏音唇同步系统还包括《汉字-拼音对应表格》：

{

     啊a

     阿a e

     埃ai

     挨ai

     哎ai

         唉ai

         哀ai

         ……

      }

及《拼音-动画序列对应表格》：

      {

         a  lips_a[0.1]lips_a[0.9]

         ai lips_a[0.1]lips_i[0.9]

         an lips_a[0.1]lips_n[0.9]

         ang   lips_a[0.1]lips_ng[0.9]

         ao lips_a[0.1]lips_o[0.9]

         …… 

      }

请参见附图3所示，附图3是本发明游戏音唇同步系统的一个实施例，游戏音唇同步系统根据《汉字-拼音对应表格》将输入的文本内容“冰动娱乐”转换成拼音及播放时间：

{

“bing，0.3”

“dong，0.3”

“yu，0.3”

“le，0.3”}

进而根据《拼音-动画序列对应表格》转化为口形动画：

{

“0.3(lips_b，0.1)，(lips_ing，0.9)”

“0.3(lips_d，0.1)，(lips_ong，0.9)”

“0.3(lips_y，0.1)，(lips_u，0.9)”

“0.3(lips_l，0.1)，(lips_e，0.9)”

}

再在汉字与汉字之间加上融合时间，输出：

{

“0.3(lips_b，0.1)，(lips_ing，0.9)blend_time”

“0.3(lips_d，0.1)，(lips_ong，0.9)blend_time”

“0.3(lips_y，0.1)，(lips_u，0.9)blend_time”

“0.3(lips_l，0.1)，(lips_e，0.9)blend_time”

}

最后在渲染引擎中渲染出三维效果。

综上所述，本发明游戏音唇同步系统能够通过游戏动画的说话内容直接由汉字自动实时地实现音唇同步；本发明游戏音唇同步系统实时性强，使用简单，调整方便；本发明游戏音唇同步系统是目前市场上唯一一款能够通过汉字自动生成音唇同步的游戏系统。

Claims (7)

1.一种游戏音唇同步系统，其特征在于：包括输入内容解析模块、汉字转成拼音模块、拼音转成动画序列信息模块、动画序列信息解析模块及最终动画应用模块；

所述的输入内容解析模块的输出端与汉字转成拼音模块的输入端连接；

所述的汉字转成拼音模块的输出端与拼音转成动画序列信息模块的输入端连接；

所述的拼音转成动画序列信息模块的输出端与动画序列信息解析模块的输入端连接；

所述的动画序列信息解析模块的输出端与最终动画应用模块的输入端连接；

所述的最终动画应用模块的输出端外接渲染引擎。

2.根据权利要求1所述的游戏音唇同步系统，其特征在于：所述的输入内容解析模块的各种输入格式的文本是汉字文本或使用工具编辑成的音乐电视字幕格式的汉字，并将其归一化为统一格式的汉字及汉字发音时间长短的数据序列信息；所述的输入格式包括普通说话的匀速发音及唱歌的变速发音。

3.根据权利要求1所述的游戏音唇同步系统，其特征在于：所述的汉字转成拼音模块对应《汉字-拼音对应表格》，将输入文本中的每个汉字转换为汉字拼音，输出统一格式的汉字拼音及每个汉字发音时间的长短的数据序列信息。

4.根据权利要求1所述的游戏音唇同步系统，其特征在于：所述的拼音转成动画序列信息模块对应《拼音-动画序列对应表格》，将汉字转成拼音模块中输出的汉字拼音转换为动画序列信息，输出统一格式的动画序列信息及每个音发音时间长短的数据序列信息。

5.根据权利要求1所述的游戏音唇同步系统，其特征在于：所述的动画序列信息解析模块输出统一格式的单个动画序列信息、单个动画播放时间及和下一个动画融合时间的数据序列信息；所述的融合时间是指汉字和汉字之间的停顿时间。

6.根据权利要求1所述的游戏音唇同步系统，其特征在于：所述的最终动画应用模块在渲染引擎中渲染出最终应用模型。

7.一种用于游戏音唇同步系统的方法，其特征在于：该方法至少包括以下步骤：

步骤1，用户输入文本，输入内容解析模块对输入的文本进行解析，输出统一格式的单个汉字及汉字发音时间长短的数据序列信息；判断文本解析是否成功；解析成功，则继续执行步骤2，解析失败，则返回继续输入文本；

步骤2，汉字转成拼音模块根据《汉字-拼音对应表格》进行数据转换，生成统一格式的汉字拼音及汉字发音时间长短的数据序列信息；判断汉字转成拼音是否成功；转换成功，则继续执行步骤3，转换失败，则返回继续输入文本；

步骤3，拼音转成动画序列信息模块根据《拼音-动画序列对应表格》进行数据转换，生成统一格式的动画序列信息及汉字发音时间长短的数据序列信息；判断拼音转成动画序列结构是否成功；转换成功，则继续执行步骤4，转换失败，则返回继续输入文本；

步骤4，动画序列信息解析模块根据动画序列中的信息及整个汉字的发音时间长短进行数据转换，生成统一格式的单个动画序列信息及动画播放时间，单个动画序列信息及动画播放时间，和下一个单个动画序列信息的融合时间的最终数据序列信息；判断最终数据序列信息转换是否成功；转换成功，则继续执行步骤5，转换失败，则返回继续输入文本；

步骤5，动画应用模块将最终数据序列信息应用到渲染引擎中。

Images