CN101520903B - 一种动画角色汉语口型匹配的方法 - Google Patents

一种动画角色汉语口型匹配的方法 Download PDF

Info

Publication number
CN101520903B
CN101520903B CN2009100825060A CN200910082506A CN101520903B CN 101520903 B CN101520903 B CN 101520903B CN 2009100825060 A CN2009100825060 A CN 2009100825060A CN 200910082506 A CN200910082506 A CN 200910082506A CN 101520903 B CN101520903 B CN 101520903B
Authority
CN
China
Prior art keywords
mouth
shape
speaks
key frame
pronunciation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2009100825060A
Other languages
English (en)
Other versions
CN101520903A (zh
Inventor
孙业飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CRYSTAL CG Co Ltd
Original Assignee
CRYSTAL CG Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CRYSTAL CG Co Ltd filed Critical CRYSTAL CG Co Ltd
Priority to CN2009100825060A priority Critical patent/CN101520903B/zh
Publication of CN101520903A publication Critical patent/CN101520903A/zh
Application granted granted Critical
Publication of CN101520903B publication Critical patent/CN101520903B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Document Processing Apparatus (AREA)

Abstract

本发明提供一种动画角色汉语口型匹配的方法，包括：利用正则表达式识别汉字对应的拼音中的最小口型单元；从识别出的最小口型单元中统计每一个汉字的口型变化次数；在动画中标注出所述汉字出现位置的关键帧；和在预设的8种发音口型组合中选取每一个汉字所用到的口型，并根据先前统计出的口型变化次数，在关键帧前后融合挑选出的发音口型。

Description

一种动画角色汉语口型匹配的方法
技术领域
本发明涉及一种动画角色发声的方法，特别是一种汉字发声的方法。
技术背景
在制作有大量对话口型的动画时，口型动画量非常的大，一直都是制作过程的比较耗时的一项工作。无论制作精度如何，口型的制作都需要动画一点点同对话匹配制作，费时费力。
对于口型精度要求不高的动画，如果有一个方便的工具基本实现，然后根据要求，再精细调整，这样效果会大大提高。
发明内容
有鉴于此，本发明的目的在于提供一种动画角色汉语口型匹配的方法，通过优化口型模型，提高了制作效率。
为了达到上述目的，本发明一种动画角色汉语口型匹配的方法，包括：
利用正则表达式识别汉字对应的拼音中的最小口型单元；
从识别出的最小口型单元中统计每一个汉字的口型变化次数；
在动画中标注出所述汉字出现位置的关键帧；和
在预设的8种发音口型组合中选取每一个汉字所用到的口型，并根据先前统计出的口型变化次数，在关键帧前后融合挑选出的发音口型。
进一步地，所述识利用正则表达式别汉字对应的拼音中最小口型单元的方法包括：
区分汉字是否为单音节字，将单音节的字识别出其最小口型单元；
判断出非单音节字拼音中的声母和韵母；和
将非单音节字的声母和韵母拆分出最小口型单元。
进一步地，将非单音节字的声母和韵母拆分出最小口型单元的步骤中，对于非单音节字的声母，根据每个声母发音时是否带有自己的口型的特性，对于没有发音口型的声母其口型延继上一个发音的口型。
进一步地，将非单音节字的声母和韵母拆分出最小口型单元的步骤中，对于非单音节字的韵母，分析韵母是单口型还是复合口型，单口型包括一个发音口型，复合口型包括两个或两个以上发音口型。
进一步地，所述单口型在发音时是没有过渡的，所述复合口型在发音时是由两个以上口型过渡而成的。
进一步地，所述8种发音口型组合分别为：
B：对应声母b、m和p；
F：对应声母f；
I：对应声母z、c、s和韵母i、ei、in；
R：对应声母r、zh、ch和sh；
A：对应韵母a、ang和er；
AI：对应韵母ai、an和ie；
U：对应声母w、v和韵母u、o、iong、ong和ue；
E：对应韵母e、en和eng。
进一步地，所述在关键帧前后融合挑选出的发音口型步骤包括：
根据统计出的汉字口型个数的奇偶数确定关键帧以及前后两帧的发音口型；和
将一个汉字对应的声母和韵母发声口型依次在关键帧以及前后两帧内依照实际发声中的情况控制动画角色发音。
进一步地，所述根据统计出的汉字口型个数的奇偶数确定关键帧以及前后两帧的发音口型的方法包括：
对于一个最小口型的汉字，将对应的口型在关键帧上显示；
对于两个最小口型的汉字，将对应的口型分别在关键帧及其之后的一帧上现实；
对于三个最小口型的汉字，将对应的口型分别在关键帧之前一帧、关键帧以及关键帧之后的一帧上显示；和
对于四个最小口型的汉字，将对应的口型分别在关键帧之前一帧、关键帧、关键帧之后的一帧和关键帧之后的两帧上显示。
进一步地，所述将一个汉字对应的声母和韵母发声口型依次在关键帧以及前后两帧内依照实际发声中的情况控制动画角色发音步骤中还需要去除实际发声中的轻声和连读。
本发明一种动画角色汉语口型匹配的方法采用8中口型模型与实际汉字拼音匹配，去除轻声后配合关键帧将动画角色口型在关键帧前后融合，使得动画角色在说话的时候能与口型相匹配，大大提高了制作效率。
附图说明
图1是本发明一个具体实施例中一种动画角色口型匹配的方法流程图；
图2是本发明一个具体实施例中8种口型模型的嘴巴和面部肌肉的位置模型；和
图3是本发明一个具体实施例中所有拼音组合中声母和韵母的发声规律。
具体实施方式
请参看图1所示，本发明提供了一种动画角色口型匹配的方法，其包括：
步骤101，利用正则表达式识别汉字对应的拼音中的最小口型单元。
正则表达式(Regular Expression)，在计算机科学中，是指一个用来描述或者匹配一系列符合某个句法规则的字符串的单个字符串。在很多文本编辑器或其他工具里，正则表达式通常被用来检索和/或替换那些符合某个模式的文本内容。在本发明一个具体的实施例中，采用正则表达式的目的是为了能够校验汉字的拼音是否准确，同时还可以区分每一个汉字对应的拼音，这样可以方便下一步找到汉字的声母和韵母。
目前通过汉字识别拼音的方法很多，在此不做赘述。
获得汉字的拼音后，执行
步骤102，区分汉字是否为单音节字，将单音节的字识别出其最小口型单元。
步骤103，对非单音节字判断出非单音节字拼音中的声母和韵母。
步骤104，将非单音节字的声母和韵母拆分出最小口型单元。
在一个具体的实施例中，采用8种口型模型将拼音的声母和韵母拆分成最小口型单元，他们分别是：
B：对应声母b、m和p；
F：对应声母f；
I：对应声母z、c、s和韵母i、ei、in；
R：对应声母r、zh、ch和sh；
A：对应韵母a、ang和er；
AI：对应韵母ai、an和ie；
U：对应声母w、v和韵母u、o、iong、ong和ue；
E：对应韵母e、en和eng。
具体的模型参看图2所示，图2表示出了这8种模型的嘴巴和面部肌肉的位置模型。采用8种模型而不是更多或者更少的模型数是有操作效率考虑的。如果每一种韵母单独做一个模型，那么其精确程度必然非常高，但是这样的话模型的数量就会非常大，对于制作来讲会比较费时费力。如果缩小模型个数，会造成更加不精确，比如将韵母ai和a组合在一起，的时候就会将ai中的带有嘴角上扬的韵母和带有鼻音的字母混淆成一个模型，这样就过于不精确了。
采用8种模型是经过模拟、计算和统计后较佳的模型数量。其较好地组合了相似的发音，同时模型数量不多，很适合实际应用。
步骤105，从识别出的最小口型单元中统计每一个汉字的口型变化次数。
请参看图3所示，图3表示所有拼音组合中声母和韵母的发声规律。其中多次口型变化的如biao，则是从B——I——A——U变化了四次最小发声单元。
对于声母，有发音和不发音的区别，对于没有发音口型的声母其口型延继上一个发音的口型。
在一个具体的实施例中，还需要考虑连读和轻声的情况，连读比如wu声母和韵母两个口型一样，这样就可以连读；比如“吃了”的“了”字声母和韵母两个口型应该轻声处理，在统计最小发声单元的时候这些因素都需要考虑。
步骤106，在动画中标注出所述汉字出现位置的关键帧。可以根据剧本和台词在每个字出现的帧做出标记，将标记过的帧作为关键帧。
步骤107，在预设的8种发音口型组合中选取每一个汉字所用到的口型，并根据先前统计出的口型变化次数，在关键帧前后融合挑选出的发音口型。
在一个具体的实施例中，可以根据最小发声单元个数的奇偶数确定具体的融合方法。
对于一个最小口型的汉字，将对应的口型在关键帧上显示；
对于两个最小口型的汉字，将对应的口型分别在关键帧及其之后的一帧上现实；
对于三个最小口型的汉字，将对应的口型分别在关键帧之前一帧、关键帧以及关键帧之后的一帧上显示；和
对于四个最小口型的汉字，将对应的口型分别在关键帧之前一帧、关键帧、关键帧之后的一帧和关键帧之后的两帧上显示。
这样就可以很好地实现动画角色说话的问题，从而在一定程度上解决了每段动画都需要人工设计制作的麻烦。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换等，均应包含在本发明的保护范围之内。

Claims (9)

1.一种动画角色汉语口型匹配的方法，包括：
利用正则表达式识别汉字对应的拼音中的最小口型单元；
从识别出的最小口型单元中统计每一个汉字的口型变化次数；
在动画中标注出所述汉字出现位置的关键帧；和
在预设的8种发音口型组合中选取每一个汉字所用到的口型，并根据先前统计出的口型变化次数，在关键帧前后融合挑选出的发音口型。
2.根据权利要求1所述的方法，其特征在于，所述利用正则表达式识别汉字对应的拼音中的最小口型单元的方法包括：
区分汉字是否为单音节字，将单音节的字识别出其最小口型单元；
判断出非单音节字拼音中的声母和韵母；和
将非单音节字的声母和韵母拆分出最小口型单元。
3.根据权利要求2所述的方法，其特征在于，将非单音节字的声母和韵母拆分出最小口型单元的步骤中，对于非单音节字的声母，根据每个声母发音时是否带有自己的口型的特性，对于没有发音口型的声母其口型延继上一个发音的口型。
4.根据权利要求2所述的方法，其特征在于，将非单音节字的声母和韵母拆分出最小口型单元的步骤中，对于非单音节字的韵母，分析韵母是单口型还是复合口型，单口型包括一个发音口型，复合口型包括两个或两个以上发音口型。
5.根据权利要求4所述的方法，其特征在于，所述单口型在发音时是没有过渡的，所述复合口型在发音时是由两个以上口型过渡而成的。
6.根据权利要求1所述的方法，其特征在于，所述8种发音口型组合分别为：
B：对应声母b、m和p；
F：对应声母f；
I：对应声母z、c、s和韵母i、ei、in；
R：对应声母r、zh、ch和sh；
A：对应韵母a、ang和er；
AI：对应韵母ai、an和ie；
U：对应声母w、v和韵母u、o、iong、ong和ue；
E：对应韵母e、en和eng。
7.根据权利要求1所述的方法，其特征在于，所述在关键帧前后融合挑选出的发音口型步骤包括：
根据统计出的汉字口型个数的奇偶数确定关键帧以及前后两帧的发音口型；和
将一个汉字对应的声母和韵母发声口型依次在关键帧以及前后两帧内依照实际发声中的情况控制动画角色发音。
8.根据权利要求7所述的方法，其特征在于，所述根据统计出的汉字口型个数的奇偶数确定关键帧以及前后两帧的发音口型的方法包括：
对于一个最小口型的汉字，将对应的口型在关键帧上显示；
对于两个最小口型的汉字，将对应的口型分别在关键帧及其之后的一帧上显示；
对于三个最小口型的汉字，将对应的口型分别在关键帧之前一帧、关键帧以及关键帧之后的一帧上显示；和
对于四个最小口型的汉字，将对应的口型分别在关键帧之前一帧、关键帧、关键帧之后的一帧和关键帧之后的两帧上显示。
9.根据权利要求7所述的方法，其特征在于，所述将一个汉字对应的声母和韵母发声口型依次在关键帧以及前后两帧内依照实际发声中的情况控制动画角色发音步骤中还需要去除实际发声中的轻声和连读。
CN2009100825060A 2009-04-23 2009-04-23 一种动画角色汉语口型匹配的方法 Expired - Fee Related CN101520903B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009100825060A CN101520903B (zh) 2009-04-23 2009-04-23 一种动画角色汉语口型匹配的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009100825060A CN101520903B (zh) 2009-04-23 2009-04-23 一种动画角色汉语口型匹配的方法

Publications (2)

Publication Number Publication Date
CN101520903A CN101520903A (zh) 2009-09-02
CN101520903B true CN101520903B (zh) 2011-09-28

Family

ID=41081475

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009100825060A Expired - Fee Related CN101520903B (zh) 2009-04-23 2009-04-23 一种动画角色汉语口型匹配的方法

Country Status (1)

Country Link
CN (1) CN101520903B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104361620B (zh) * 2014-11-27 2017-07-28 韩慧健 一种基于综合加权算法的口型动画合成方法
CN104574477B (zh) * 2014-12-22 2017-08-08 北京像素软件科技股份有限公司 动画角色汉语口型生成的方法及装置
CN105786802B (zh) * 2014-12-26 2019-04-12 广州爱九游信息技术有限公司 一种外语的音译方法及装置
CN104574474A (zh) * 2015-01-09 2015-04-29 何玉欣 一种通过字幕生成动画角色语言口型的匹配方法
CN106446406A (zh) * 2016-09-23 2017-02-22 天津大学 一种将中文语句转化为人类口型的仿真系统及仿真方法
CN111950327A (zh) * 2019-05-16 2020-11-17 上海流利说信息技术有限公司 口型纠正方法、装置、介质和计算设备
CN113284506A (zh) * 2021-05-20 2021-08-20 北京沃东天骏信息技术有限公司 信息映射方法、装置及存储介质和电子设备
CN115810074A (zh) * 2023-02-06 2023-03-17 武汉织梦动漫文化设计有限公司 一种数字仿油墨版画的数字动画制作方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6332123B1 (en) * 1989-03-08 2001-12-18 Kokusai Denshin Denwa Kabushiki Kaisha Mouth shape synthesizing
CN1707550A (zh) * 2005-04-14 2005-12-14 张远辉 语音发音与发音口型动画数据库的建立及其访问方法
CN1808519A (zh) * 2005-01-18 2006-07-26 无敌科技(西安)有限公司 同步播放语言音节发音及其口形图片的装置及方法
CN1936889A (zh) * 2005-09-20 2007-03-28 文化传信科技（澳门）有限公司 动画生成系统以及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6332123B1 (en) * 1989-03-08 2001-12-18 Kokusai Denshin Denwa Kabushiki Kaisha Mouth shape synthesizing
CN1808519A (zh) * 2005-01-18 2006-07-26 无敌科技(西安)有限公司 同步播放语言音节发音及其口形图片的装置及方法
CN1707550A (zh) * 2005-04-14 2005-12-14 张远辉 语音发音与发音口型动画数据库的建立及其访问方法
CN1936889A (zh) * 2005-09-20 2007-03-28 文化传信科技（澳门）有限公司 动画生成系统以及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2005-309952A 2005.11.04

Also Published As

Publication number Publication date
CN101520903A (zh) 2009-09-02

Similar Documents

Publication Publication Date Title
CN101520903B (zh) 一种动画角色汉语口型匹配的方法
Johnson et al. A TAG-based noisy-channel model of speech repairs
Hogg et al. Metrical phonology: a course book
CN101000764B (zh) 基于韵律结构的语音合成文本处理方法
CN108959250A (zh) 一种基于语言模型和词特征的纠错方法及其系统
CN107451115B (zh) 端到端的汉语韵律层级结构预测模型的构建方法及系统
CN101118541B (zh) 汉语语音码汉语语音识别方法
CN101727902B (zh) 一种对语调进行评估的方法
Maamouri et al. Diacritization: A challenge to Arabic treebank annotation and parsing
CN103177733A (zh) 汉语普通话儿化音发音质量评测方法与系统
CN105404621A (zh) 一种用于盲人读取汉字的方法及系统
CN104637482A (zh) 一种语音识别方法、装置、系统以及语言交换系统
CN108664474A (zh) 一种基于深度学习的简历解析方法
CN106297764A (zh) 一种多语种混语文本处理方法及系统
WO2005089428A2 (en) Language phonetic system and method thereof
CN115034218A (zh) 一种基于多阶段训练和编辑级别投票的中文语法错误诊断方法
CN1591414B (zh) 一种汉语到盲文的自动翻译转换方法
CN1811912B (zh) 小音库语音合成方法
CN103336803B (zh) 一种嵌名春联的计算机生成方法
CN105895076B (zh) 一种语音合成方法及系统
Wan et al. The phonological representation of Taiwan Mandarin vowels: A psycholinguistic study
CN113657122A (zh) 一种融合迁移学习的伪平行语料库的蒙汉机器翻译方法
CN107894977A (zh) 结合兼类词词性消歧模型和字典的越南语词性标记方法
Hlaing et al. Automatic syllable segmentation of Myanmar texts using finite state transducer
Zhang et al. The phoneme automatic segmentation algorithms study of Tibetan lhasa words continuous speech stream

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20090902

Assignee: NANJING CRYSTAL CG DIGITAL TECHNOLOGY CO., LTD.

Assignor: Crystal CG Co., Ltd.

Contract record no.: 2014990000121

Denomination of invention: Method for matching Chinese mouth shape of cartoon role

Granted publication date: 20110928

License type: Exclusive License

Record date: 20140311

LICC Enforcement, change and cancellation of record of contracts on the licence for exploitation of a patent or utility model
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110928

Termination date: 20180423

CF01 Termination of patent right due to non-payment of annual fee