CN101105943A - 语言辅助表达系统及方法 - Google Patents

Abstract

本发明涉及一种语言辅助表达系统及方法，通过采集使用者的语音信息，以识别该语音信息中是否包含有预设的特征关键词，并依据所识别的特征关键词，提取相应的场景数据予以播放显示，因此，本发明通过结合多媒体技术令所表达的语言信息更为生动且易于理解。

Description

语言辅助表达系统及方法

技术领域

本发明涉及一种多媒体技术，尤其涉及一种依据语音信息播放相应的场景数据的语言辅助表达系统及方法。

背景技术

在语言交流活动中，“听”是人们获得信息、获取知识和发展智力的重要途径，并通过“说”来输出信息，以口语表达形式表达自身的所闻所想，因此，听与说无疑是语言交流活动的重要组成部份，一般而言，使用生动形象的语言通常使得所讲述的对象表达得活灵活现，栩栩如生，以提高听者的兴趣，这样即可使得双方的交流更具互动性，从而达到发言人传递信息的目的。

而为使语言表达生动形象，仅仅配合一些文字的讲述是不够的，因为文字毕竟是抽象的，是思想的间接表达，因此，人们常常在讲话的同时，配合一些表情或动作以使讲话内容更具戏剧化效果，也更生动有趣。例如，在儿童语言活动中，通过对童话故事、儿童诗歌等语言教材的理解及欣赏，能培养儿童对语言美的感悟以及对语言表达的语感能力，但由于受到儿童身心发展的限制，使得他们对故事内容或诗歌内在意义的理解有一定的难度，因此，也就很难在朗读过程中通过想象形成鲜明的画面，语感的培养也受到了限制。由此可知，创建良好的说话环境，是唤醒听者主体意识，产生强烈表达欲望的方式，且良好的说话环境容易引起听者的情感共鸣，帮助他们正确理解语言所要表达的内容。

再者，多媒体技术由于凭借其所具有的声画并茂、视听结合、动静相宜以及感染力强等优点，正迅速地被应用于越来越多的技术领域中。有鉴于此，如果能在儿童听童话故事或儿童诗歌等语言教材的过程中结合使用多媒体技术，以利用情景再现的方式使得所要表达的语言信息更为形象生动且易于理解，即为本案所需解决的课题。

发明内容

鉴于上述现有技术的缺点，本发明的主要目的在于提供一种语言辅助表达系统及方法，以令所表达的语言信息更为形象生动且易于理解。

为达上述目的及其相关目的，本发明提供一种语言辅助表达系统及方法。本发明所涉及的语言辅助表达系统用以接收语音信息，据以同步播放相应的场景数据，该系统包括用以设定特征关键词数据及其相应的场景数据的设定模块；用以采集语音信息并进行识别该语音信息中所包含的该设定模块所设定的特征关键词的识别模块；以及用以依据该识别模块识别出的特征关键词以及该设定模块的设定数据，提取对应该特征关键词的场景数据并予以播放的处理模块。

其中，该场景数据由动画数据及图像数据所组成的群组之一的。再者，该处理模块以切换方式及迭加方式之一播放所提取的场景数据，且该识别模块还包括匹配单元，用以依据预设规则分析该识别模块识别出的特征关键词，以于该设定模块的设定数据中搜寻出与其相匹配的特征关键词。

本发明所涉及的语言辅助表达方法用以接收语音信息，同步播放相应的场景数据，该方法包括：设定特征关键词数据及其相应的场景数据；采集语音信息并识别该语音信息中所包含的特征关键词；以及提取与所识别出的特征关键词相对应的场景数据并予以播放。

其中，该场景数据由动画数据及图像数据所组成的群组之一。再者，该方法以切换方式及迭加方式之一播放所提取的场景数据。此外，该方法还包括依据预设规则，分析所识别出的特征关键词，以于该设定数据中搜寻出与其相匹配的特征关键词。

通过由本案所涉及的语言辅助表达系统及方法，通过采集语音信息并进行识别，以搜寻出与该语音信息相对应的场景数据予以播放，借此以通过结合多媒体技术的方式使得所表达的语言信息更为生动且易于理解。

附图说明

图1是本发明所涉及的语言辅助表达系统的基本架构方块示意图。

图2是本发明所涉及的语言辅助表达方法的运作流程示意图。

【主要组件符号说明】

100        语言辅助表达系统

101        数据库

110        设定模块

120        识别模块

121        匹配单元

130        处理模块

2          声音采集器

3          显示器

S202～214  步骤

具体实施方式

以下通过特定的具体实施例说明本发明的实施方式，本领域技术人员可由本说明书所揭示的内容轻易地了解本发明的其它优点与功效。本发明亦可通过由其它不同的具体实施例加以施行或应用，本说明书中的各项细节亦可基于不同观点与应用，在不脱离本发明的核心思想下进行各种修饰与变更。

如图1是用以说明本发明所涉及的语言辅助表达系统的基本架构方块示意图。如图所示，本发明的语言辅助表达系统100用以接收外部语音信息，并对所接收的语音信息进行识别，从而搜寻出与该语音信息相对应的场景数据予以播放，以使所表达的语言信息更为形象生动，便于听者进行理解及记忆。另一方面，本发明的语言辅助表达统100还可搭配应用于具有多媒体处理功能的电子设备(未图示)中，如个人计算机(PC)、笔记型计算机(NB)、掌上型计算机(PPC)、个人数字助理(PDA)或移动电话(Cell Phone)等，且该电子设备组设有用以采集声音信息的声音采集器2以及用以播放显示场景数据的显示器3。

如图1所示，该语言辅助表达系统100包括设定模块110、识别模块120以及处理模块130。

该设定模块110用以提供使用者设定特征关键词数据，以及各特征关键词所对应的场景数据，其中，该场景数据可为动画场景数据或静态图像数据，并包括有用以配合各动画场景及静态图像的音效数据，且该设定模块110将该等设定数据储存于数据库101中。再者，于本实施例中，该储存于数据库101中的动画场景数据按照播放效果(如景物层次)进行分类，以供该处理模块130按照场景数据的景物层次分类信息以迭加方式予以播放(请容后详述)。

该识别模块120则用以采集语音信息，于本实施例中，其可藉由该声音采集器2以采集外部的语音信息，如于演讲过程中通过麦克风以采集的发言者的语音信息；同时，亦可利用组设于该电子设备中的音频处理单元(未图示)以采集该电子设备所输出的语音信息，且对所采集的语音信息进行识别，以寻找出该语音信息中所包含的特征关键词。再者，本发明的识别模块120还包括匹配单元121，其用以依据预设规则，对该识别模块120所识别出的特征关键词进行分析，以于储存于数据库101的设定数据中搜寻出与其相匹配的特征关键词，如，当从所采集的语音信息中识别出“鹅毛大雪”的特征关键词时，即按照预设规则，由该数据库101中搜寻出特征关键词“大雪”与其相匹配。

该处理模块130用以依据该识别模块120所识别出的特征关键词以及该设定模块110的设定数据，提取对应该特征关键词的场景数据并输出至显示器3中予以播放。另一方面，于本实施例中，使用者还可依照个人喜好预先选择播放模式，如切换方式或迭加方式等，以供该处理模块130据以播放所提取的场景数据，并于播放过程中，可通过手动方式来延长或缩短场景数据的显示时间。

图2是用以显示本发明所涉及的语言辅助表达方法的运作流程图。如图所示，首先进行步骤S202，设定特征关键词数据如小雨、大雪等用以描述天气特征的关键词；又如行走、跑步、跳跃等用以描述动作特征的关键词；或是如微笑、难过、生气等用以描述表情特征的关键词等等，并针对各特征关键词所表达的释意，提供一个或者多个的场景数据与其相关联，于此，该场景数据可具体为动画场景数据或静态图像数据等，再将该等设定数据储存于数据库101中。此外，为达到较加地播放效果，该数据库101中亦储存与各场景数据相对应的音效数据。再者，于本实施例中，该储存于数据库101中的动画场景数据按照播放效果(如景物层次)进行分类，以满足后续以迭加方式播放场景数据的需求。接着进至步骤S204。

于步骤S204中，采集所需的语音信息，举例来说，当老师给学生讲故事的过程中，可通过声音采集器2以采集老师的语音信息，再者，亦可利用组设于该电子设备中的音频处理单元(未图示)采集该电子设备所输出的语音信息，如广播电台所播出的语音信息等。接着进至步骤S206。

于步骤S206中，识别该采集的语音信息中所包含的特征关键词，例如，从“天上下着鹅毛大雪”的语音信息中识别出“鹅毛大雪”的特征关键词；又如，从“一只小熊在艰难地行走”的语音信息中识别出“小熊”以及“行走”的特征关键词，接着进至步骤S208。

于步骤S208中，依据该识别结果，自数据库101中搜寻出与其相匹配的特征关键词，具体而言，依照预设的分析规则，对所识别出的特征关键词进行分析，以自该数据库101中寻找出与分析结果相匹配的特征关键词，例如，对“鹅毛大雪”进行分析，以于数据库101中搜寻出“大雪”的特征关键词与其相匹配；又如，对“小熊”和“行走”进行分析，并于数据库101中搜寻出“行走的小熊”与其相匹配，接着进至步骤S210。

于步骤S210中，判断是否从数据库101中搜寻到与识别结果相匹配的特征关键词，若是，则进行步骤S212，否则返回步骤S204。

于步骤S212中，由数据库101中提取与该特征关键词相对应的场景数据，接着进至步骤S214。

于步骤S214中，将所提取出的场景数据输出至显示器3中予以播放，于本实施例中，可依照使用者的喜好设定以切换方式或迭加方式等播放模式播放该场景数据，如，当老师念到“天上下着鹅毛大雪”时，该显示器3中显示出正在下雪的场景画面，接着当老师继续念到“一只小熊在艰难地行走”时，该显示器3中则会同步显示出一只正在行走的小熊的画面，且若使用者预先设定以迭加方式进行播放时，则该正在行走的小熊的画面即会迭加于正在下雪的场景画面中予以播放，此时，观众即可看到有一只小熊在雪地中行走的画面效果。再者，于本发明中，使用者亦可于播放过程中，按照实际进度以手动方式来延长或缩短各场景数据的显示时间，从而使播放画面可与讲话内容达到同步的效果。

综上所述，本发明的语音辅助表达系统及方法，通过采集所需的语音信息并依照预设规则对该语音信息进行识别分析，以判断于该语音信息中是否包含有预设的特征关键词，且提取出与该特征关键词相对应的场景数据予以播放显示，借此以使语言表达更为形象生动，且易于理解记忆。

上述实施例仅例示性说明本发明的原理及其功效，而非用于限制本发明。任何本领域技术人员均可在不违背本发明的核心思想及范畴下，对上述实施例进行修饰与改变。因此，本发明的权利保护范围，应如后述的本发明要求保护的内容所列。

Claims (10)

1.一种语言辅助表达统，用以接收语音信息，同步播放相应的场景数据，其特征在于，该系统包括：

设定模块，用以设定特征关键词数据及其相应的场景数据；

识别模块，用以采集语音信息并识别该语音信息中所包含的该设定模块所设定的特征关键词；以及

处理模块，用以依据该识别模块识别出的特征关键词以及该设定模块的设定数据，提取对应该特征关键词的场景数据并予以播放。

2.根据权利要求1所述的语言辅助表达统，其中，该场景数据由动画数据及图像数据所组成的群组之一。

3.根据权利要求1所述的语言辅助表达统，其中，该处理模块以切换方式及迭加方式之一播放所提取的场景数据。

4.根据权利要求3所述的语言辅助表达统，其中，该设定模块还包括将场景数据按照播放效果进行分类，据以提供该处理模块按照场景数据的分类信息以迭加方式予以播放。

5.根据权利要求1所述的语言辅助表达统，其中，该识别模块还包括匹配单元，用以依据预设规则分析该识别模块识别出的特征关键词，以于该设定模块的设定数据中搜寻出与其相匹配的特征关键词。

6.一种语言辅助表达方法，用以接收语音信息，同步播放相应的场景数据，其特征在于，该方法包括：

设定特征关键词数据及其相应的场景数据；

采集语音信息并识别该语音信息中所包含的特征关键词；以及

提取与所识别出的特征关键词相对应的场景数据并予以播放。

7.根据权利要求6所述的语言辅助表达方法，其中，该场景数据由动画数据及图像数据所组成的群组之一。

8.根据权利要求6所述的语言辅助表达方法，其中，以切换方式及迭加方式之一播放所提取的场景数据。

9.根据权利要求8所述的语言辅助表达方法，其中，于该数据设定步骤中更进一步包括将场景数据按照播放效果进行分类，以按照场景数据的分类信息以迭加方式予以播放。

10.根据权利要求6所述的语言辅助表达方法，还包括依据预设规则，分析所识别出的特征关键词，以于该设定数据中搜寻出与其相匹配的特征关键词。

Images