CN1710556A - 使用语言识别的在线语言学习方法及系统 - Google Patents
使用语言识别的在线语言学习方法及系统 Download PDFInfo
- Publication number
- CN1710556A CN1710556A CNA2005100088583A CN200510008858A CN1710556A CN 1710556 A CN1710556 A CN 1710556A CN A2005100088583 A CNA2005100088583 A CN A2005100088583A CN 200510008858 A CN200510008858 A CN 200510008858A CN 1710556 A CN1710556 A CN 1710556A
- Authority
- CN
- China
- Prior art keywords
- game
- learning
- content file
- session
- study
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 238000012360 testing method Methods 0.000 claims abstract description 19
- 238000005516 engineering process Methods 0.000 claims abstract description 11
- 238000012937 correction Methods 0.000 claims description 21
- 230000002452 interceptive effect Effects 0.000 claims description 14
- 238000011156 evaluation Methods 0.000 claims description 12
- 238000010586 diagram Methods 0.000 claims description 8
- 230000008676 import Effects 0.000 claims description 8
- 230000006835 compression Effects 0.000 claims 1
- 238000007906 compression Methods 0.000 claims 1
- 238000012905 input function Methods 0.000 claims 1
- 230000008569 process Effects 0.000 abstract description 10
- 230000000694 effects Effects 0.000 abstract description 2
- 230000000875 corresponding effect Effects 0.000 description 17
- 230000009471 action Effects 0.000 description 12
- 230000015572 biosynthetic process Effects 0.000 description 3
- 239000013256 coordination polymer Substances 0.000 description 3
- 230000002596 correlated effect Effects 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 244000269722 Thea sinensis Species 0.000 description 2
- 239000008280 blood Substances 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 2
- 230000037396 body weight Effects 0.000 description 2
- 230000002354 daily effect Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 235000013305 food Nutrition 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000008450 motivation Effects 0.000 description 2
- 241000239290 Araneae Species 0.000 description 1
- 240000007594 Oryza sativa Species 0.000 description 1
- 235000007164 Oryza sativa Nutrition 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 235000015123 black coffee Nutrition 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010835 comparative analysis Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- RUZYUOTYCVRMRZ-UHFFFAOYSA-N doxazosin Chemical compound C1OC2=CC=CC=C2OC1C(=O)N(CC1)CCN1C1=NC(N)=C(C=C(C(OC)=C2)OC)C2=N1 RUZYUOTYCVRMRZ-UHFFFAOYSA-N 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000036973 muscularity Effects 0.000 description 1
- 235000021110 pickles Nutrition 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 235000009566 rice Nutrition 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- 239000000516 sunscreening agent Substances 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
- G06Q50/2057—Career enhancement or continuing education service
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
- G09B19/06—Foreign languages
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Human Resources & Organizations (AREA)
- Tourism & Hospitality (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Health & Medical Sciences (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- General Business, Economics & Management (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
本发明涉及使学习者能够通过使用语音识别的游戏愉快地进行学习的使用语音识别的语言学习方法及系统。本发明的系统包含:会话学习内容文件,影院学习内容文件,发音矫正内容文件,测验内容文件等,储存学习所必要的内容的内容数据库,储存作为学习者的顾客的信息的顾客数据库,以web方式提供语言学习服务的web服务器,储存使用语音识别技术的各种语言学习游戏内容的游戏数据库,和用上述游戏数据库的游戏内容提供语言学习游戏的游戏服务器。持有有线终端设备或无线终端设备的学习者能够通过有线/无线因特网连接语言学习服务系统。根据本发明,通过网络连接的多个学习者以游戏的方式进行语言学习,具有自然的提高游戏参与者的语言能力的效果。
Description
发明领域
本发明涉及使用语音识别的在线语言学习方法及系统,更详细地说,涉及学习者能够能动地参与、通过使用语音识别的游戏能够愉快地学习的使用语音识别的语言学习方法及系统。
技术背景
现代社会如地球村这个词所形容的那样,由于交通和文化的发展,国际间的交流更加日常化。伴随而来的外语学习成为国家竞争力基础的非常重要的因素。但是外语的学习不是一蹴而就的,往往要经过枯燥的过程。因此,人们对如何开发有效的语言学习系统倾注了大量的努力。
图1是使用动画或语音识别的以往的语言学习概念的示意图,以往的语言学习系统在使用动画进行语言学习时,是通过一个文件12将动画11单纯地重放的方式,而在使用语音识别进行语言学习时,是通过对用于语音识别的源13进行实时执行14的方式学习的。
但是,由于以往这样的语言学习系统是单纯地重放动画的方式,学习者不能随着内容而能动地应对,而仅是进行视听的单向学习,因而具有效率不高、学习者易于厌烦、学习效果低下的问题。而且,以往的语言学习系统的内容没有按照一定的规则进行存储,仅是动画文件,很难提供其他服务,具有很难进行内容的扩充的问题。
发明内容
本发明是为了解决上述问题的而提出的,其目的在于提供使语言学习和会话测验中的学习者能够能动地参与到学习内容中去的、使用语音识别的语言学习方法。
本发明的另一目的是提供使用语音识别的语言学习方法,用使用语音识别的游戏,使学习者能够愉快地学习。
为了达到上述目的,在本发明的语言学习方法中,使用了包含有多个标准内容文件的语言学习系统。该方法包括以下步骤:驱动所述语言学习系统而显示主画面;在所述主画面中选择希望的语言学习过程;在选择了会话学习室时,选择主题和会话方法以及主人公,从而在预定的会话学习画面中学习;在选择了电影学习室时,在选择所希望的电影、并选择会话方法和在选择主人公之后,在预定的电影学习画面中学习。该方法还包括会话及级数测验步骤,可通过语音识别技术客观地评价会话。
另外,为了实现上述的其他的目的,本发明的语言学习方法包含有包括大量的标准内容文件的游戏数据库和游戏软件,为通过网络连接的大量游戏者提供使用游戏的语言学习。该方法中包含以下步骤:连接游戏服务器,下载和执行游戏程序;分别根据游戏的状况选择主题;在所选的状况中显示多个游戏室;选择游戏室并进入;进入游戏室后在游戏画面中选择发言者;游戏开始后,根据所对应的状况显示会话,并根据各游戏者所选择的发言者的说话顺序输入游戏者的声音;输入所述游戏者的声音,显示波形和分数;在基于所述状况的会话结束之后,随着游戏的结束,按顺序分别显示各游戏者的标识(ID:Identification)和分数。
如上所述,使用本发明所涉及的语音识别技术,使得在现有的例如英语学习网站很难实现的一对一说话以及说话训练和发音校正成为可能。具体地说,与现有的英语学习网站不同,本发明最大限度地灵活运用语音识别技术,提供能够通过各种例文练习会话的会话学习室,以及提供可以使学习者自己成为电影的主人公、通过一对一说话来进行电影放映的电影院学习室等不同的内容,与此同时提供现有的英语作文练习、阅读练习、写作等高质量的内容,能够大幅度地提高学习效率。
另外,通过网络同时连接的多个学习者以游戏的方式进行语言学习,在通过竞争心理引导学习动机的同时,通过游戏剧目等多种方式强化学习动机,能够自然地提高游戏参与者的语言能力。
附图说明
图1是使用以往的动画或语音识别的语言学习的示意图;
图2显示了根据本发明的内容生成及学习的构思的示意图;
图3显示了根据本发明的一个实施例所生成的标准内容文件的构造的方框图;
图4显示了本发明的一个实施例的语言学习系统的画面;
图5显示了本发明的语言学习顺序的流程图;
图6显示了图5所示的会话学习的详细顺序的流程图;
图7显示了图5所示的影院学习的详细顺序的流程图;
图8显示了图5所示的发音矫正(单词)的学习顺序的流程图;
图9显示了图5所示的发音矫正(文章)的学习顺序的流程图;
图10显示了图5所示的测验顺序的流程图;
图11显示了图5所示的网络游戏的学习顺序的流程图;
图12显示了图5所示的游戏剧目的学习顺序的流程图;
图13显示了根据本发明的会话学习室画面的一个例子的图;
图14显示了根据本发明的文章学习室画面的一个例子的图;
图15显示了根据本发明的角色设定画面的一个例子的图
图16显示了根据本发明的设定会话方式的画面的一个例子的图;
图17显示了根据本发明的声音设定画面的一个例子的图;
图18显示了根据本发明的会话学习画面的一个例子的图;
图19显示了根据本发明的影院学习画面的一个例子的图;
图20显示了根据本发明的网络游戏学习的待机室画面的一个例子的图;
图21显示了根据本发明的网络游戏学习的游戏室画面的一个例子的图;
图22显示了根据本发明的网络游戏学习的游戏画面的一个例子的图;
图23显示了根据本发明的网络游戏学习的结果画面的一个例子的图;
图24显示了说明根据本发明的游戏剧目的画面的一个例子的图。
优选实施例的详细说明
下面参考附图详细说明本发明的优选实施例。
图2是显示生成与本发明相关的语音识别标准内容从而进行学习的构思的示意图。
参考图2,整个过程可分为通过内容提供者CP进行的语音识别内容生成过程,和用户对生成的内容进行学习的语言学习过程。内容提供者CP使用用于生成适用于语音识别技术的标准内容的内容数据22,从多媒体源21生成用于语言学习的标准内容文件23。
如图3所示,这样生成的标准内容文件23包含内容固有编号231,安全码232,用于语音识别的源233,图像数据234,原声(native)语音数据235,动画数据236等。而且用于语音识别的源233、图像数据234、以及本国语语音数据235是配合会话个数进行重复的语音识别和多媒体源40。
参考图3,固有编号231和安全码232可在内容提供者CP的内容制作中容易地附加、修正及向现有的因特网的教育网站加载(add on)。另外,标准内容文件23可以用流(streaming)结构形成,通过因特网利用流(streaming)服务向学习者(用户)提供500KB到100MB以上的文件,从而可以象现有的动画流服务同样可以即时的学习。由于能够通过用于实现各种多媒体功能的标准内容文件进行会话那样的双向学习,所以学习者能够积极地参与。即,通过提供本发明相关的驱动标准内容文件和进行原声和实际会话的虚拟环境,能够在内容中所提示的发言者中选择学习者所希望的角色,通过各种方式进行学习。这时,能够在进行麦克风设定和会话方法设定后,按开始按钮,进行使用语音识别的语言学习。
另一方面,根据本发明提供使用语音识别的语言学习机能的语言学习系统24能够通过含有大量标准内容文件的语音识别软件来实现、也可以是使用台式计算机或笔记本电脑等独立地工作、还能够以语言学习机、电子图书等各种形式的专用终端设备的形式实现、或者是向PDA、手机等移动终端设备或现有的本中插入装置的形式。而且,也可以通过因特网提供。如图4所示,本发明的实施例中列举了通过因特网网站提供服务的例子进行说明。
图4显示了在网站上实现本发明的语言学习系统,通过因特网进行服务的构成的示意图。
参考图4,本发明的语言学习系统24包括:内容数据库242,其储存学习所必要的内容,包括会话学习内容文件242-1、影院学习内容文件242-2、发音矫正内容文件242-3、以及测验内容文件242-4等;储存有作为学习者的顾客的信息的顾客数据库243;以环球网(web)方式提供本发明的语言学习服务的网络服务器241;储存有使用语音识别技术的各种语言学习游戏内容的游戏数据库245;以及提供本发明相关的语言学习游戏的游戏服务器244。持有有线终端设备的学习者251,252或持有无线终端设备的学习者253能够通过有线/无线因特网102连接至该语言学习服务系统24。
图5是显示本发明的语言学习顺序的流程图。
参考图5,学习者与语言学习服务系统24连接(步骤S1)。该系统生成本发明相关的标准内容文件,通过因特网102提供服务。在连接上服务系统24后,出现用户的主画面。在学习者已经是会员的情况下,立刻就能登录。在学习者不是会员的情况下,作为新会员加入后能够登录(步骤S2~S4)。在通过认证进行正常登录后,选择主画面上提供的各种菜单,能够进行所希望的学习(步骤S5)。在根据本发明的主画面上提供的基本的语言学习菜单包含:“会话学习室”,“影院学习室”,“发音矫正(单词)”,“发音矫正(文章)”,“测验”,“网络游戏学习室”,“游戏剧目学习室”等。
如果学习者选择了“会话学习室”菜单,则提供能够通过各种例文反复进行会话练习的内容(步骤S6,S7);如果选择了“影院学习室”,则提供能够由学习者选择自己希望的电影的主人公、一边和周围的人物一起演绎电影的情节,一边进行实质的会话学习的内容(步骤S8,S9)。
如果学习者选择“发音矫正学习室(单词/文章)”菜单,则提供强化发音矫正部分所构成的内容(步骤S10,S11),显示用于选择单词、文章和TTS(文字转换为语音)的子菜单,选择会话方法和主人公,从而在单词发音学习室或文章发音学习室,或TTS学习室画面中能够进行发音的学习;如果选择了“测验”菜单,则提供测验画面,评价学习者的能力(步骤S12,S13)。
如果学习者选择了“网络游戏学习室”菜单,则提供能够使用语音识别技术的用网络游戏增进用户的兴趣和学习效果的内容(步骤S14,S15);如果选择了“游戏剧目学习室”菜单,则提供能够使用语音识别技术的通过游戏剧目增进用户的兴趣和学习效果的内容(步骤S16,S17)。
图6是显示图5所示的会话学习的具体细节的顺序的流程图。
如果学习者在主画面上选择“会话学习室”菜单,则出现主题选择的画面。在主题被选择后,对应的内容文件被下载,显示如图13所示的会话学习的基本画面(步骤S101~S103)。如图13所示,在基本画面中显示了与内容相关的简单的图像302和进行内容介绍的文本304,以及属于对应主题的小主题和该小主题所对应的学习级别(单词/文章/会话)的选择按钮306/308/310。学习者在基本画面中选择自己想学习的小主题的学习级别(单词/文章/会话)按钮306/308/310(步骤S104)。
如果选择单词级按钮310,则所对应的小主题的单词学习内容文件被下载后被驱动,显示出单词学习窗(步骤S110~S112)。在单词学习窗中选择单词后,按播放(play)按钮,则在学习窗中显示出原声语音和波形。计时器条动作,以使原声结束后由学习者输入声音,并显示经过的时间(步骤S113~S116)。
计时器条动作时,学习者如果通过麦克风(图中未示出)输入自己的声音,则用图形来表示学习者的声音波形(步骤S117,S118)。接着,将学习者的声音输入数据与统计取得的原声数据库进行比较评价,在分数栏显示分数(步骤S119)。接着对其他单词重复所述过程进行学习。如果按结束按钮,则关闭单词学习窗,显示会话学习基本画面(步骤S120)。
如果选择文章级按钮308,则对应的小主题的文章学习内容在被下载后被驱动。如图14所示,显示文章学习窗(步骤S130~S132)。参考图14,文章学习窗包括:用图形表示原声(原声声音)波形的部分(原声波形:402)和用图形表示用户(学习者)的声音波形的部分(用户波形:404)、显示声音输入所经过的时间的计时器条408、当前文章说明栏410、全体文章文本显示栏406、分数显示栏412、以及播放动作按钮414等。
当在文章学习窗中选择文章、按下播放按钮414时,在视窗402中显示原声的声音和波形。计时器条408活动以便在原声播放结束后学习者输入声音,并且显示所经过的时间(步骤S133~S136)。在计时器条408动作的时间内,学习者如果通过麦克风输入自己的声音,则以图形404表示学习者的声音的波形(步骤S137,S138)。接着,将学习者的声音输入波形和原声的声音波形进行比较,在分数栏412中显示分数(步骤S139)。分数可用条形图和数字等来显示。接着可以对其他的文章重复上述的学习过程。如果结束按钮被按下,则关闭文章学习窗,回到会话学习的基本画面(步骤S140)。
如果选择会话级按钮306,则对应的小主题的会话学习内容文件在被下载后被驱动。如图15所示,显示说话者(出场人物:Character)设定窗和会话学习窗(步骤S150~S152)。在最初激活说话者设定窗,在该窗口设定说话者。参考图15,说话者设定窗中包含“全说(SpeakALL)”按钮421、“全听(Listen ALL)”按钮422、说话者选择栏423。其中“全说”表示学习者全都说话,“全听”表示仅听全体的讲话,在说话者选择栏423中选择出现在会话中的人物的名字,选择所希望的角色(说话者)。说话者设定后,会话方式选择窗出现。如图16所示,在会话方式选择窗中具有:“角色选择(Role Playing)”选择栏431,“隐藏英语(Hide English)”选择栏432,“隐藏韩语(HideKorean)”选择栏。接着出现声音设定窗。在声音设定窗中,如图17所示,包含扬声器音量调节条(Speaker Volume Control)441和麦克风音量调节条(Mic Volume Control)442。学习者可进行上述内容的设置(步骤S153)。
在说话者/会话方式/声音设定结束后,如图18所示的会话学习窗被激活,在点击了会话学习窗的播放(Play)按钮516时,则根据设定的方式进行会话学习(步骤S154,S155)。参考图18,会话学习窗包含:显示与会话相关的图像的图像栏502、计时器条504、当前文章显示栏506、全体文章显示栏508、原声波形输出栏510、用户声音波形输出栏512、分数显示栏514、播放按钮516、选择按钮518等。按结束按钮(图中未示出),则关闭会话学习窗,回到会话学习基本画面(步骤S156)。
本发明的会话学习室作为能够通过各种例文练习会话的学习室,是以日常经常使用的文章为中心构成,很容易应用到实际生活中去。这样,本发明不仅学习日常会话,通过听,达到能说、能实际使用、学习生动的外语,而且通过对应于学习结果的针对性教育,能够弥补自己的弱点。而且,通过声音波形图还能够矫正发音和声调,不仅是说话,而且能够引导学习者达到原声水准的发音。
图7是显示图5所示的影院学习细节的顺序的流程图。
如果学习者选择“影院学习室”菜单,则出现选择电影的主题画面。在选择电影的标题后,对应的电影内容文件被下载,然后被驱动,显示影院学习基本画面(步骤S201~S203)。基本画面中有学习清单,可根据对应的主题内的各种状况选择会话。在从学习清单中选择状况后,在学习按钮被点击时,对应的内容文件被下载,然后被驱动。如刚才的会话学习说明那样显示说话者设定窗和影院学习画面(步骤S204~S207)。说话者/会话方式/声音设定窗与图15至图17所示的类似,省略对设定步骤S208的说明。
说话者/会话方式/声音设定结束后,如图19所示,激活影院学习窗,在影院学习窗中点击了播放按钮612时,在动画部602重放动画画面,同时原样输出对方的对话声音(步骤S209,S210)。参考图19,影院学习窗包含:重放实际电影动画的动画部602,显示学习者声音输入经过的时间的计时器条604,当前文章(说明)显示栏606,全体文章(说明)显示栏608,分数显示栏610,播放按钮612,选择按钮614等。此时通过全体文章说明部608用文字显示会话的英文说明,在当前文章说明部606中显示当前出现的说明的文字和译文。
接着,在到达学习者所设定的角色的会话时间后,画面暂时停止,同时计时器条604动作,使学习者输入对应角色的声音(步骤S211~S213)。学习者的声音输入后与统计的原声声音数据库进行比较、评价,给出分数(步骤S214)。这样,针对所选择的状况,能够用动画进行有现实感的会话,能够改变自己的角色进行各种方式的学习。按结束(CLOSE)按钮,则关闭影院学习窗,回到影院学习基本画面(步骤S215)。
本发明的影院学习室作为应用了语音识别技术的内容,提供了使学习者自己可以成为电影中的角色、和周围的人物共同演绎电影的情节的内容。也就是说,用户选择自己所希望的出场人物,通过麦克风直接说出该出场人物的台词,在确认与原声对比的用户发音分数和波形形态的同时进行上述操作。这样用户感觉自己如同成为电影的主角那样,抱着兴趣投入英语的学习,能够自然地提高其对英语会话的自信和实力。
图8是显示图5所示的发音矫正(单词)的学习顺序的流程图,图9是图5所示的发音矫正(文章)的学习顺序的流程图。
参考图8,如果学习者选择“发音矫正(单词)”菜单,则出现选择练习发音的发音记号画面,如果选择练习的发音,则包含对应发音的单词构成的单词学习内容文件被下载后显示单词学习画面(步骤S301~S303)。
当在单词学习画面中选择单词,点击播放按钮时,则用图形表示原声的声音的波形和频谱,在原声输出结束后,学习者输入声音,计时器条动作,显示所经过的时间(步骤S304~S307)。在计时器条动作的过程中,如果学习者通过麦克风输入自己的声音,则以图形来表示作为声音分析结果的学习者的声音波形和频谱(步骤S308,S309)。接着将学习者的声音输入波形和频谱与统计的原声数据库进行比较评价,在分数栏显示其结果的分数(步骤S310)。接着,可对其他单词重复上述过程进行学习。如判断按下了结束按钮,则关闭发音矫正(单词)学习画面(步骤S311)。
参考图9,如果学习者选择“发音矫正(文章)”菜单,则出现选择练习状况的文章类别选择画面。如选择练习状况,则由与对应的状况相关的文章构成的文章学习内容文件被下载后,显示声音设定窗和文章学习画面。设定音量后激活文章学习画面,选择文章,点击开始按钮(步骤S401~S405)。
在点击开始按钮后,所选择的文章的原声声音与声音波形图一同输出(步骤S406)。在原声输出结束后,学习者输入声音,计时器条动作,显示所经过的时间(步骤S407)。在计时器条动作的过程中,如果学习者通过麦克风输入自己的声音,则以图形来显示学习者声音的波形(步骤S408,S409)。然后,将学习者的声音输入数据和统计的原声数据库进行比较评价,其结果显示在分数栏中(步骤S410)。接着可以对其他文章重复所述学习过程。如果按下结束按钮,则关闭发音矫正(文章)学习窗。
这样本发明的“发音矫正”学习室作为强化关于发音矫正部分的学习室,能够将用户的发音矫正至原声水准。也就是说,能够由用户通过波形比较原声和自己的发音,选择自己发音较弱部分的单词反复练习,从而能够集中克服较弱部分。
图10是显示图5所示的测验顺序的流程图。
如果学习者选择“测验”菜单,则出现用于测验的基本画面,以在基本画面中选择级别(步骤S501)。在选择级别后,显示对应的级别的测验画面。在选择文章后选择测验方式(步骤S502,S503)。测验方式包含跟读的方式和说话方式。按“播放”按钮,首先原声声音和声音波形一同输出,计时器条动作,使学习者能够输入声音(步骤S504~S507)。在学习者的声音输入后,与原声的发音进行比较评价,给出分数(步骤S508)。
如果学习者按“进行”按钮,则原声声音输出停止,计时器条立刻动作,使学习者能够输入自己的声音(步骤S509~S511)。学习者输入声音后,与原声的发音进行比较评价,结果以分数给出(步骤S512)。
如果评价结果在预定的基准分数以上,则升到下一个级别。如果达不到基准分数,则重复现在的级别(步骤S513~S515)。在测验画面中级别显示窗显示当前的级别,分数窗则显示各问题所对应的分数。特别是分数图用图形显示对各问题的分数。按照这样的方法,个人、各机关、学校等可评价会话及发音的正确性,对学习者的实力或能力不再由人来主观地评价,而是通过语音识别技术客观地(例如,发音分数,与原声进行声音波形的比较分析、语调比较,声音有无的比较等)评价,可以灵活地用作公正地评价个人的能力及语言等级的评价系统。
图11是显示图5所示的网络游戏学习顺序的流程图,使用语音识别的语言学习在线多网络mug游戏的例子。
通常,本发明的网络游戏可谓是通过在线网络汇集了各种各样的人来竞争各自的外语实力的一种mug游戏,通过所给的会话进行游戏。所有游戏者都能听到按照游戏中所选择的角色参与的其他游戏者的声音识别结果和声音波形,看到参与的游戏者的发音,抱着竞争心与参与的学习者互相听着声音进行会话,用分数顺序来决定学习者的发音好坏。为了取得高分数,胜过其他游戏者,发音必须好,因此该游戏的特征是通过这样的发音练习学习提高的效果非常大。
参考图11,点击“网络游戏”菜单,执行游戏,则如图20所示,出现选择游戏室的不同状况的主题清单(待机室)(步骤S601,S602)。参考图20,待机室画面中包含状况清单702,事件公告栏704,提供游戏相关信息的引导栏706,显示游戏参与者的信息的游戏者栏708,将各种状况整理为初、中、高级别,游戏者能够根据自己的水平选择合适的会话。此时,选择基准是通过状况、出场人物、难易度等提示的信息确认和选择。
当游戏者从状况清单中选择了所希望的状况后,如图21所示,显示选择游戏室的画面(步骤S603)。参考图21,在游戏室选择画面中显示了大量的游戏室710,以及游戏室现在的状态714和游戏者所对应的游戏室内712的ID,还包括待机室栏720、引导栏730、游戏者栏740。
在图示的游戏室画面中选择与其他游戏者进行游戏的游戏室。此时确认能够参与游戏的游戏室,选择待机中的游戏室,参与游戏(步骤S604)。
在进入游戏室后,出现如图22所示的网络游戏画面。在网络游戏画面中参与的游戏者在画面右侧的角色中选择所希望的角色,按“Let’s go(开始)”按钮,开始游戏。
游戏开始后,出现所给的会话的第一篇文章,则选择了对应角色的游戏者看着文章说话,使输入的声音让其他游戏者也能听见。可见右侧下方,向其他学习者传送分数和画面中央的声音波形。在出现第二篇文章后,和第一篇文章相同,选择的游戏者输入声音,互相进行游戏。这样的游戏进行画面是以标准内容文件形式将制作的游戏几乎完全相同的向所有的游戏者传送,因此所有的游戏者能够边看相同的画面,边进行游戏(步骤S605)。
在游戏结束后,如图23所示,可以确认在该游戏室中参与的游戏者的ID752和分数754按顺序显示的游戏结果(步骤S606,S607)。
图12显示了图5所示的游戏剧目的学习顺序的流程图,是使用语音识别的英语学习的Clear游戏的例子。
本发明中,游戏剧目是游戏者通过语音识别英语学习制作话剧那样的话进行游戏的,是一个学习者完成戏剧。用普通游戏剧目确定的情节仅能是视听者单方向的视听,本发明的游戏剧目是游戏者在各种状况下制作会话。即,游戏(发音学习)根据所参与的人的不同,游戏剧目中的状况分为几种不同的方向,可以体验无法预想的状况的结果。
这样的游戏剧目与所述网络游戏不同,不是通过网络,而是和预定的计算机中的原声声音进行会话的方式。本发明的实施例中游戏的游戏剧目进行步骤平均由16个步骤构成,在16步骤游戏剧目完成。其构成是对每个步骤准备5-6个左右的状况、渐进地完成每个步骤的形式。下面是一个例子,两个男女大学生出场,为使约会成功所用的话题构成的游戏剧目。表1和表2是对出场的人物的说明,表3介绍了游戏剧目的内容。
表1
姓名:韩启志(男性)身高:183cm体重:73kg外貌:英俊特征:非肌肉型,给人印象敏锐的25岁男性。因为喜欢整洁,每天打扫房间,并用抹布擦。理想类型:日本女性喜欢的事情:欣赏音乐演出血型:B型 |
喜欢的食物:韩式泡菜火锅、榛子黑咖啡喜欢的音乐:古典乐喜欢的运动:篮球崇拜的人:莫扎特 |
表2
姓名:泰英(女性)身高:168体重:(?)外貌:无须语言的纯情少女型。特征:外表是纯粹的美少女型,健壮,具有冒险性的多血质的二十岁的女孩。理想的类型:能够理解自己,经济宽裕的男子。喜欢的事情:边听摇滚乐边摇摆。血型:AB型喜欢的食物:一个便利店的饭团就行喜欢的运动:格斗的全都喜欢。最喜欢看K1。尊敬的人:李小龙 |
表三
背景:-剧本1.以男主人公启志的语言进修生活为背景,挑战以某大学为中心的留学生活,以男女同学的约会和恋爱话题为背景。-剧本2.女主人公y的留学生活为背景所展开的话题。故事梗概身为韩国男性的启志来到美国学习语言。在海边碰到詹妮,从而展开单恋的事情为主要情节。<最初的画面介绍> |
温暖的加利福尼亚海边。可见一个男子,与这样的海边格格不入。为什么这个男子看起来那么紧张呢。典型20岁左右的日本男性,外型还可以,为何那么紧张呢,总之可见行动不大自然。在强烈的阳光下,因为打算把自己晒黑,就横躺着,连防晒霜都没有涂,所以很快就要晒黑了。此时,来了一个金发美女。<Q.1.测验基本发音!基准定为50分>W:Excuse me,对不起。W:Is this space taken?这里有人吗?M:No,go ahead.没有,请。W:Thank you.谢谢。M:No sweat.不用谢。上面的学习者根据跟着说的语音识别文章的平均分数结果,选择第二步骤的状况。 |
参考图12,如果点击了“游戏剧目”菜单来执行游戏,则出现选择主题的画面。当该画面上显示的主题被选择后,则显示如表1至表3那样的对出场人物和游戏剧目内容的介绍(步骤S701~S703)。
接着在游戏剧目中出场的人物中选择自己所希望的人物(角色),执行游戏。如图24所示,从低级层次开始(步骤S705)。图24显示了以约会为主题的游戏剧目的进行步骤的状况表,总共16个步骤。根据低级层次的分数来决定高级层次的状况。此时分数越高越向好的状况进行,分数越低,越向坏的困难的状况进行。如果分数不够的话,也可能出现在中间步骤脱离的可能。
游戏的进行方式是,根据会话学习画面或影院学习画面那样的状况,按照自己所选择的角色来说话,顺序地输入自己的声音,与统计的原声声音数据库进行比较评价,并给出分数。但本发明的游戏剧目具有在向下一阶段进行时,根据当前阶段的分数,在多个状况中决定下个阶段的状况的特征。也就是说,分数越好学习者所选择的角色越向所希望的状况进行。相反,分数越差,越向令人不快的状况进行(步骤S706~S709)。
例如,图24中,在第一阶段有男女两人的相遇,由此会话进行。此时根据游戏者的角色将声音输入的评价结果分为上/中/下,如果是“上”,则在第2步骤向接受约会的状况802进行,如果分数是“下”,则向拒绝提出约会的状况804进行。
在第二阶段也用同一方式进行会话。对游戏者扮演角色的声音输入给出分数,分为上/中/下,根据分数决定第三阶段的状况。重复这样的步骤。如果到达最后的阶段,则结婚,游戏剧目结束,否则分手,游戏剧目结束。这样本发明的游戏剧目的状况是由发音分数来决定下一状况的。为了发好音,语言学习者必然会努力学习,能够自然地提高学习者的语言学习能力。
Claims (14)
1.一种标准内容文件生成方法,其特征在于包括:
准备文章数据;
准备用于重放所述文章的原声数据和图像;
准备显示单词的发音的动画数据;
准备用于声音识别的源数据;
利用标准内容数据,将所述准备的文章数据和声音及图像数据,动画数据,以及声音识别源数据压缩生成预定的标准内容文件;和
将所述生成的标准内容文件变换成流文件结构。
2.如权利要求1所述的标准内容文件生成方法,其特征在于,所述内容文件包含:内容的固有编号,安全码,用于声音识别的源,图像,原声,以及动画。
3.如权利要求1所述的标准内容文件生成方法,其特征在于,所述内容数据调用电影文件生成适用于声音识别组件的标准内容文件,并且在输入关联数据时,还具有用于最低限度输入的自动输入功能,以及在整部电影中进行区间选择,从而仅将所希望的部分制作成内容。
4.使用包含有多个标准内容文件的语言学习系统进行语言学习的方法,其特征在于包括以下步骤:
驱动所述语言学习系统来显示主画面;
在所述主画面中选择所希望的语言学习过程;
在选择了会话学习室后,选择主题和会话方法,选择主人公,从而在预定的会话学习画面中进行学习;
在选择了影院学习室后,选择所希望的电影,选择会话方法,选择主人公,从而在预定的影院学习画面中进行学习。
5.如权利要求4所述的使用标准内容文件的语言学习方法,其特征在于,所述语言学习方法还包括发音矫正步骤,所述发音矫正步骤包括:
在选择了发音矫正菜单后,出现用于选择单词、文章和TTS的子菜单,选择会话方法和主人公,从而在单词发音学习室或文章发音学习室,或TTS学习室画面中能够进行发音的学习。
6.如权利要求4所述的标准内容文件生成方法,其特征在于,所述语言学习方法还包括:
测验步骤:在“测验”菜单被选择后,出现用于选择念单词和抄写的子菜单,在所希望的子菜单被选择后,在预定的测验画面测验自己的能力;和
评价步骤:客观地评价以各机关及团体等中的学习者为对象的各人的语言能力,所述语言能力包括听,说,写,以及语言等级。
7.如权利要求4所述的标准内容文件生成方法,其特征在于,所述预定的会话学习画面包括;窗口和时间图,原声发音显示窗,用户发音显示窗,说明窗,分数窗,说明清单,播放按钮,暂停按钮,以及关闭按钮。
8.如权利要求4所述的标准内容文件生成方法,其特征在于,所述预定的影院学习画面包括电影窗和时间图,台词窗,分数窗,台词清单,播放按钮,暂停按钮,关闭按钮。
9.一种使用游戏的语言学习方法,利用由多个标准内容文件形成的游戏数据库和游戏软件,通过网络向连接的多个游戏者提供通过游戏的语言学习,其特征在于,所述方法包括:
连接游戏服务器,下载并执行游戏程序;
根据游戏的状况选择主题;
针对所述选择的状况显示多个游戏室;
选择进入所述游戏室;
在进入所述游戏室后,选择游戏画面中的说话者;
游戏开始后,根据对应的状况显示会话,并按照各游戏者所选择的说话者的说话顺序输入游戏者的声音;
输入所述游戏者的声音,与统计的原声声音数据库进行比较评价,显示波形和分数;和
在基于所述状况的会话结束和游戏结束时,按照顺序显示各游戏者的分数。
10.如权利要求9所述的使用游戏的语言学习方法,其特征在于,将所述游戏者的输入声音制作成标准内容形式,传送给参与游戏的所有游戏者。
11.使用游戏的语言学习方法,利用由多个标准内容文件形成的游戏数据库和游戏软件,向通过网络连接的多个游戏者提供通过游戏的语言学习,其特征在于,所述方法包括:
连接游戏服务器,下载游戏程序来执行;
选择游戏剧目主题;
介绍游戏剧目的场景;
选择剧本的角色;
在开始低级层次游戏时,根据所对应的状况,显示会话,按照各游戏者所选择的说话者的说话顺序,输入游戏者的声音;
将输入的所述游戏者的声音与统计的母语原声数据库进行比较评价,显示波形和分数;
在对应于所述状况的会话结束之后,在所述低级层次游戏结束的同时收集分数来区分等级;
根据所述等级选择更高层次游戏的状况。
12.如权利要求11所述的使用游戏的语言学习方法,其特征在于,所述低级层次中游戏者的分数分为上、中、下,根据分数选择说话者所希望的状况进行。
13.使用声音识别的语言学习系统,其特征在于,包括:
内容数据库,其储存有对学习所需要的内容,包括会话学习内容文件,影院学习内容文件,发音矫正文件,测验内容文件;
顾客数据库,储存有作为学习者的顾客的信息;
web服务器,用于以网络方式提供语言学习服务;
游戏数据库,用于储存使用声音识别技术的各种语言学习游戏内容;以及
利用所述游戏数据库的游戏内容提供语言学习游戏的游戏服务器,
其中,持有有线终端设备的学习者或持有无线终端设备的学习者可通过有线或无线网络连接所述语言学习服务系统。
14.如权利要求13所述的使用游戏的语言学习系统,其特征在于,所述游戏数据库包含有:
网络mug游戏数据库,多个游戏者可与其连接以便相互进行语言学习;
游戏剧目数据库,可根据低级层次的分数决定高级层次的状况。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020040044926 | 2004-06-17 | ||
KR1020040044926A KR100593590B1 (ko) | 2004-06-17 | 2004-06-17 | 콘텐츠 자동 생성방법 및 이를 이용한 어학학습방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN1710556A true CN1710556A (zh) | 2005-12-21 |
Family
ID=35706799
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2005100088583A Pending CN1710556A (zh) | 2004-06-17 | 2005-02-24 | 使用语言识别的在线语言学习方法及系统 |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR100593590B1 (zh) |
CN (1) | CN1710556A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103514768A (zh) * | 2013-10-24 | 2014-01-15 | 苏州市思玛特电力科技有限公司 | 一种辅助教学系统 |
CN105139311A (zh) * | 2015-07-31 | 2015-12-09 | 谭瑞玲 | 基于智能终端的英语教学系统 |
CN109243208A (zh) * | 2018-10-22 | 2019-01-18 | 潍坊医学院 | 一种微生物学趣味游戏系统及其学习方法 |
CN109326152A (zh) * | 2018-11-12 | 2019-02-12 | 长春师范大学 | 一种互动型汉语言文字学学习装置及其使用方法 |
CN113128824A (zh) * | 2019-12-30 | 2021-07-16 | 韩相钟 | 基于母语文字的一周期在线外语学习系统及其方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20010056872A (ko) * | 1999-12-17 | 2001-07-04 | 김명수 | 인터넷 강의 시스템 |
KR100568167B1 (ko) * | 2000-07-18 | 2006-04-05 | 한국과학기술원 | 자동발음 비교방법을 이용한 외국어 발음 테스트 방법 |
KR100392473B1 (ko) * | 2000-10-30 | 2003-07-22 | 하용철 | 인터넷상에서의 동영상을 이용한 언어학습 실행 방법 |
KR20010008391A (ko) * | 2000-11-30 | 2001-02-05 | 최세현 | 인터넷을 통한 외국어 학습 방법 및 시스템 |
KR20030079497A (ko) * | 2002-04-04 | 2003-10-10 | (주)코이소프트 | 대화형 언어학습 시스템 및 서비스방법 |
-
2004
- 2004-06-17 KR KR1020040044926A patent/KR100593590B1/ko not_active IP Right Cessation
-
2005
- 2005-02-24 CN CNA2005100088583A patent/CN1710556A/zh active Pending
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103514768A (zh) * | 2013-10-24 | 2014-01-15 | 苏州市思玛特电力科技有限公司 | 一种辅助教学系统 |
CN105139311A (zh) * | 2015-07-31 | 2015-12-09 | 谭瑞玲 | 基于智能终端的英语教学系统 |
CN109243208A (zh) * | 2018-10-22 | 2019-01-18 | 潍坊医学院 | 一种微生物学趣味游戏系统及其学习方法 |
CN109326152A (zh) * | 2018-11-12 | 2019-02-12 | 长春师范大学 | 一种互动型汉语言文字学学习装置及其使用方法 |
CN113128824A (zh) * | 2019-12-30 | 2021-07-16 | 韩相钟 | 基于母语文字的一周期在线外语学习系统及其方法 |
Also Published As
Publication number | Publication date |
---|---|
KR20050119809A (ko) | 2005-12-22 |
KR100593590B1 (ko) | 2006-06-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Duval et al. | SpokeIt: building a mobile speech therapy experience | |
CN1710556A (zh) | 使用语言识别的在线语言学习方法及系统 | |
Alm et al. | Engaging multimedia leisure for people with dementia | |
WO2005076243A1 (en) | Language teaching method | |
KR100791024B1 (ko) | 음성인식을 이용한 온라인 어학학습방법 및 시스템 | |
Bijou et al. | Manual of instructions for identifying and analyzing referential interactions | |
Resmi et al. | Graphical speech training system for hearing impaired | |
Post | Taiko and the Asian/American body: Drums, rising sun, and the question of gender | |
Kadagidze | Different types of listening materials | |
Hosoda et al. | Positions and actions of classroom-specific applause | |
Sharp | Conversational analysis of turn-taking in a dungeons & dragons game session | |
Liu et al. | Motivating Online Game Intervention to Enhance Practice Engagement in Children with Functional Articulation Disorder | |
Henderson et al. | There's No Such Thing as Public Speaking: Make Any Presentation or Speech as Persuasive as a One-on-One Conversation | |
Ahern et al. | Radio Announcing | |
CN112863268B (zh) | 一种英语口语人机对话装置 | |
Fitri et al. | THE EFFECT OF RECORDED (VIDEOTAPED) MINI-DRAMA TOWARD STUDENTS’SPEAKING ABILITY | |
Said et al. | Factors Affecting Effective Online Presentations as Perceived by Undergraduate and Graduate Students in Indonesia | |
Beales | Developing confident speakers | |
JP2002099198A (ja) | 学習支援システム、学習支援方法、記録媒体及びサーバ | |
Hammond | Presentation skills in changing environments | |
Tingyu | EXPLORATION AND UTILIZATION OF" THE BROKER'S" VOICE IN" RHINOCEROS IN LOVE" | |
Takayama et al. | Throwing voices: The psychological impact of the spatial height of projected voices | |
Weaver | Holy ground, shaky ground, common ground: Public prayer in rhetorical perspective | |
Osborn | Teaching: What we can learn from the actor | |
Rivera | Training learners to become more effective communicators in english |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |