JPH10326074A - Control method for language training device - Google Patents
Control method for language training deviceInfo
- Publication number
- JPH10326074A JPH10326074A JP15043597A JP15043597A JPH10326074A JP H10326074 A JPH10326074 A JP H10326074A JP 15043597 A JP15043597 A JP 15043597A JP 15043597 A JP15043597 A JP 15043597A JP H10326074 A JPH10326074 A JP H10326074A
- Authority
- JP
- Japan
- Prior art keywords
- utterance
- sentence
- learner
- conversation
- language training
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Electrically Operated Instructional Devices (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、音声認識機能を有
するコンピュータを利用した語学訓練装置の制御方法に
関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a method for controlling a language training apparatus using a computer having a voice recognition function.
【０００２】[0002]
【従来の技術】国際化社会において語学訓練の要求は多
い。こうした要求をコンピュータのソフトウェアによっ
て実現するものとして語学訓練装置がある。当該装置
は、音声認識機能を持ち、学習者と対話しながら様々な
訓練を実施する。語学訓練装置は、ディスプレイに学習
者が次に発話すべき内容を指定する文や単語を表示し、
学習者はその表示された文や単語を発話するといった手
順で、語学訓練が進められる。2. Description of the Related Art There is a great demand for language training in an internationalized society. There is a language training device that fulfills such demands by computer software. The device has a voice recognition function and performs various trainings while interacting with the learner. The language training device displays sentences and words on the display that specify what the learner should speak next,
The learner proceeds with language training in a procedure such as speaking the displayed sentence or word.
【０００３】[0003]
【発明が解決しようとする課題】ところで、上記のよう
な従来の語学訓練装置には次のような解決すべき課題が
あった。学習者が発話し、コンピュータがこれに答え、
あるいは学習者に対し新たな問いかけをするといった対
話型の語学訓練装置では、実際の会話により近い自然な
会話文がやりとりされることが理想である。The conventional language training apparatus as described above has the following problems to be solved. The learner speaks, the computer answers,
Alternatively, in an interactive language training apparatus that asks a new question to a learner, it is ideal that a natural conversation sentence closer to the actual conversation is exchanged.
【０００４】しかしながら、この理想を実現するために
は、無限に近い数の学習者の発話内容を全て予想しなけ
ればならない。この全ての発話内容を予想することは困
難である。また、全ての発話内容に応じた会話を行うた
めのデータを用意することは、記憶できるデータ量に制
限があることから現実的でない。一方、従来技術のよう
に、学習者が発話すべき会話文をそのまま表示して、画
一的な会話を要求するのでは、自由度がなさすぎ、自然
に近い会話ができず、学習効果も少ない。However, in order to realize this ideal, it is necessary to anticipate all of the utterance contents of an infinite number of learners. It is difficult to predict all the utterance contents. Also, it is not realistic to prepare data for a conversation in accordance with all the utterance contents because the amount of data that can be stored is limited. On the other hand, as in the prior art, if the learner simply displays the conversation sentence to be spoken and requests a uniform conversation, the degree of freedom is too low, the conversation close to nature cannot be performed, and the learning effect is also low. Few.
【０００５】[0005]
【課題を解決するための手段】本発明は以上の点を解決
するため次の構成を採用する。 〈構成１〉会話練習中の学習者に対して、単数または複
数の発話文のうちのいずれかを間接的に示唆する発話案
内を表示し、装置側で用意した上記発話文のうちのいず
れかを学習者が発話するように誘導することを特徴とす
る語学訓練装置の制御方法。The present invention employs the following structure to solve the above problems. <Structure 1> A utterance guide that indirectly suggests one or a plurality of utterance sentences is displayed to a learner who is practicing a conversation, and one of the utterance sentences prepared on the device side is displayed. A method for controlling a language training apparatus, characterized in that a learner is guided to speak.
【０００６】〈構成２〉構成１において、発話案内は、
各発話文を示唆するキーワードリストから成ることを特
徴とする語学訓練装置の制御方法。<Structure 2> In structure 1, the utterance guidance is
A method for controlling a language training apparatus, comprising a keyword list indicating each utterance sentence.
【０００７】〈構成３〉構成１において、発話案内は、
各発話文に共通する表現及び範囲を限定する文言から成
ることを特徴とする語学訓練装置の制御方法。<Structure 3> In structure 1, the utterance guidance is
A method for controlling a language training apparatus, comprising: an expression common to each utterance sentence; and words limiting a range.
【０００８】〈構成４〉構成１において、発話案内は、
発話文の命題を示す文言から成ることを特徴とする語学
訓練装置の制御方法。<Structure 4> In Structure 1, utterance guidance is
A method for controlling a language training apparatus, comprising a word indicating a proposition of an utterance sentence.
【０００９】〈構成５〉構成１から４のうちのいずれか
１項において、学習者の発話を音声認識して得られた認
識文が、装置側で用意したいずれの発話文とも一致しな
いとき、上記認識文を意味解析して、装置側で用意した
いずれかの発話文とその意味が等価であれば、装置側で
用意した発話文に該当する認識文を得ることを特徴とす
る語学訓練装置の制御方法。<Structure 5> In any one of Structures 1 to 4, when the recognition sentence obtained by speech recognition of the utterance of the learner does not match any utterance sentence prepared on the device side, A language training apparatus characterized by analyzing the semantics of the recognition sentence and obtaining a recognition sentence corresponding to the utterance sentence prepared on the device side if the meaning is equivalent to any of the utterance sentences prepared on the device side. Control method.
【００１０】〈構成６〉会話練習中の学習者に対して、
単数または複数の発話文のうちのいずれかを間接的に示
唆する発話案内を表示し、装置側で用意した上記発話文
のうちのいずれかを学習者が発話するように誘導制御す
るプログラムを記録した記録媒体。<Structure 6> For learners practicing conversation,
A utterance guide that indirectly suggests one or more utterance sentences is displayed, and a program for guiding the learner to utter one of the utterance sentences prepared on the device side is recorded. Recording medium.
【００１１】[0011]
【発明の実施の形態】以下、本発明の実施の形態を具体
例を用いて説明する。 〈具体例〉図１は、本発明による語学訓練装置の制御方
法概略図を示す。この図１に示す本発明の方法の実際を
説明する前に、まず一般的な語学訓練装置の構造を説明
する。DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiments of the present invention will be described below using specific examples. <Example> FIG. 1 is a schematic diagram showing a control method of a language training apparatus according to the present invention. Before describing the method of the present invention shown in FIG. 1, the structure of a general language training apparatus will be described first.
【００１２】図２に、語学訓練装置のブロック図を示
す。当該装置は、学習者１の語学訓練のために、装置本
体２に、ディスプレイ３、スピーカ４、マイク５等を備
えている。装置本体２は、パーソナルコンピュータ等か
ら構成される。その内部の機能ブロックをこの図の右側
に示した。即ち、装置本体２には、音声入力部１１、音
声出力部１２、音声認識部１３、画像処理部１４、プロ
グラムメモリ１５、プロセッサ１６及び記憶部１７等が
設けられている。FIG. 2 shows a block diagram of the language training apparatus. The device includes a display 3, a speaker 4, a microphone 5, and the like in a device main body 2 for language training of a learner 1. The device main body 2 is composed of a personal computer or the like. The internal functional blocks are shown on the right side of this figure. That is, the apparatus main body 2 includes a voice input unit 11, a voice output unit 12, a voice recognition unit 13, an image processing unit 14, a program memory 15, a processor 16, a storage unit 17, and the like.
【００１３】音声入力部１１はマイク５を制御し、学習
者１の音声を取り込む機能を持つ。音声出力部１２は装
置の合成した音声をスピーカ４を駆動して出力する機能
を持つ。音声認識部１３は音声入力部１１により取り入
れた学習者１の音声を認識して、テキストデータから成
る認識文を生成する機能を持つ。画像処理部１４は、学
習者１に、後で説明するような発話案内その他の情報を
表示するために、ディスプレイ３を制御する機能を持
つ。The voice input unit 11 has a function of controlling the microphone 5 and capturing the voice of the learner 1. The audio output unit 12 has a function of driving the speaker 4 to output audio synthesized by the device. The voice recognition unit 13 has a function of recognizing the voice of the learner 1 taken in by the voice input unit 11 and generating a recognition sentence composed of text data. The image processing unit 14 has a function of controlling the display 3 to display utterance guidance and other information to the learner 1 as described later.
【００１４】プロセッサ１６は装置全体の動作を制御す
る。プログラムメモリ１５には、プロセッサ１６の動作
を制御するプログラムが格納されている。この語学訓練
装置の制御プログラムはこのプログラムメモリ１５に格
納される。記憶部１７はハードディスク等の記憶装置
で、会話文データファイル１８や表示画面データファイ
ル１９を格納している。The processor 16 controls the operation of the entire apparatus. The program memory 15 stores a program for controlling the operation of the processor 16. The control program of the language training apparatus is stored in the program memory 15. The storage unit 17 is a storage device such as a hard disk, and stores a conversation sentence data file 18 and a display screen data file 19.
【００１５】会話文データファイル１８には、会話文テ
キストデータと、それを音声出力部が発話する際に使用
する合成音声データ等が保存されている。会話文は、学
習者１の発話文や装置本体２から発話させるべき発話文
を集めたものである。その会話文データを用いて対話型
の語学訓練が実行される。表示画面データファイル１９
には、学習者１と対話する表示画面中の登場人物（パー
トナーと呼んでいる）の画面データや、学習者１に対し
発話のための発話案内等を表示する画面データが格納さ
れている。ディスプレイ３には、そのパートナーや発話
案内が表示される。こうして学習者１とパートナーとの
対話が実施される。The conversational sentence data file 18 stores conversational sentence text data and synthetic voice data used when the voice output unit utters the data. The conversation sentence is a collection of utterances of the learner 1 and utterances to be uttered from the apparatus main body 2. Interactive language training is performed using the conversation sentence data. Display screen data file 19
Stores screen data of a character (called a partner) in a display screen interacting with the learner 1 and screen data for displaying utterance guidance and the like for the learner 1 to speak. The display 3 displays the partner and the utterance guidance. Thus, the conversation between the learner 1 and the partner is performed.
【００１６】ところで、パートナーと学習者とが普通の
人間同士であったなら、実際の会話には次のような特徴
がある。 １．パートナーの発話に対する学習者の返答の内容は何
種類もあり得る。 ２．同一の内容でも表現が異なる発話文が何種類もあり
得る。 ３．学習者より話を切り出し、あるいは話題を切り換え
ることができる。 ４．学習者はパートナーの発話とは無関係なことを発話
できる。 ５．パートナーの発話に対して学習者が返答しないこと
もできる。 語学訓練装置によって、学習者とパートナーとの自由会
話が実現するとすれば、このように、パートナーの発話
に対し何種類もの発話が可能になり、その表現も自由で
話題を自由に切り換えることができる。ところがこれで
は図２に示した会話文データファイル１８に無限の会話
文を用意しなければならない。そこで、本発明では、図
１に示すような発話案内９を表示することによって、あ
る制限された範囲内であるが、自由会話に近い語学訓練
を可能にする。By the way, if the partner and the learner are ordinary persons, the actual conversation has the following features. 1. The learner's response to the partner's utterance can be of many types. 2. There can be many types of utterance sentences with the same content but different expressions. 3. The learner can cut out the story or switch topics. 4. The learner can speak something unrelated to the partner's speech. 5. The learner may not respond to the partner's utterance. Assuming that the language training device enables free conversation between the learner and the partner, in this way, many types of utterances are possible for the partner's utterance, and the expression can be freely changed and the topic can be freely switched. . However, in this case, an infinite number of conversational sentences must be prepared in the conversational sentence data file 18 shown in FIG. Therefore, in the present invention, by displaying the utterance guide 9 as shown in FIG. 1, language training within a limited range but close to free conversation is enabled.
【００１７】再び図１に戻って、本発明の語学訓練装置
の制御方法を実際の会話を例にして具体的に説明する。
まず、来客を迎えて応対する場面を設定する。パートナ
ーが迎える側で、学習者は客とする。ここで、語学訓練
装置側のスピーカ４から、例えば「何か飲物はいりませ
んか。」といった問いかけをする。このとき、そのディ
スプレイ３には、パートナー１０の画像と発話案内９と
を含む発話誘導画面８が表示される。この発話案内９は
発話文を直接表示するのではなく、間接的に特定のある
いは何種類かの発話文を示唆する表示とする。この例で
は、発話案内として「コーヒー、お茶、水」といった表
示を行っている。日本人による英会話の練習なら、これ
は英文でなく日本語でよい。Returning to FIG. 1, the control method of the language training apparatus of the present invention will be specifically described by taking an actual conversation as an example.
First, a scene is set in which a visitor is greeted. On the side where the partner greets, the learner is the customer. Here, the speaker 4 of the language training apparatus asks, for example, "Do you need any drink?" At this time, the display 3 displays an utterance guidance screen 8 including an image of the partner 10 and the utterance guidance 9. The utterance guide 9 does not directly display the utterance sentence but indirectly suggests a specific or several types of utterance sentences. In this example, a display such as “coffee, tea, water” is provided as the utterance guidance. If you are practicing English conversation by Japanese, this should be in Japanese instead of English.
【００１８】学習者１は、この発話案内９をヒントにし
て、「コーヒーを下さい。」といった英語の文を考えて
発話をする。これは装置のマイク５から装置に入力す
る。装置には、図に示すように音声認識部１３が設けら
れており、ここで学習者１の音声が認識され、「コーヒ
ーを下さい。」という認識文が生成される。これは、
「コーヒーを下さい。」という内容の文字コードから成
るテキストデータである。Using the utterance guide 9 as a hint, the learner 1 utters an English sentence such as "Please give me coffee." This is input to the device from the microphone 5 of the device. The apparatus is provided with a voice recognition unit 13 as shown in the figure. Here, the voice of the learner 1 is recognized, and a recognition sentence "Please give me coffee." this is,
This is text data consisting of a character code of "Please give me coffee."
【００１９】次に、図に示す発話判定部６は、このテキ
ストデータ形式の認識文と予め装置側で用意した発話文
との比較を行う。即ち、記憶部１７に格納された会話文
データファイル１８に含まれる発話リスト１８Ａには、
例えば、「コーヒーを下さい。お茶を下さい。水を下さ
い。」といったいくつかの発話文のリストが格納されて
いる。これと認識文とを比較して、いずれかと一致した
場合には、それに続くべき次の会話文が選択される。そ
の会話選択は、会話制御部７によって実行される。「コ
ーヒーを下さい。」という発話に対しては、コーヒーを
話題にした会話文が選択される。また、「水を下さ
い。」といった発話には、水を話題にした会話文が選択
される。こうして、会話が続行される。なお、この図に
示す発話判定部６や会話制御部７は、図２に示した語学
訓練装置のプログラムメモリ１５に格納されたプログラ
ム等によって実現される。Next, the utterance judging section 6 shown in the figure compares the recognized sentence in the text data format with the utterance sentence prepared in advance in the apparatus. That is, the utterance list 18A included in the conversation sentence data file 18 stored in the storage unit 17 includes:
For example, a list of several utterances such as "Please give me coffee. Please give me tea. Please give me water." This is compared with the recognition sentence, and if any matches, the next conversation sentence to be followed is selected. The conversation selection is performed by the conversation control unit 7. For the utterance "Please give me coffee", a conversation sentence about coffee is selected. For an utterance such as "Please give me water.", A conversation sentence on water is selected. Thus, the conversation is continued. The utterance determination unit 6 and the conversation control unit 7 shown in this figure are realized by a program or the like stored in the program memory 15 of the language training apparatus shown in FIG.
【００２０】図３には、上記発話案内の具体例を示す説
明図を示す。上記のように、発話案内を、単数または複
数の発話文を間接的に示唆するような内容とすれば、学
習者はこれをヒントに自ら発話文を組み立てて、自由会
話に近い会話をすることができる。即ち、ここで示唆さ
れた範囲で自由な発話ができる。FIG. 3 is an explanatory diagram showing a specific example of the utterance guidance. As described above, if the utterance guidance is such that it indirectly suggests one or more utterances, the learner can use this as a hint to assemble the utterances themselves and have a conversation close to free conversation. Can be. That is, free speech can be made within the range suggested here.
【００２１】図３の第一例は、図１に示した通りのもの
で、「何か飲物はいりませんか。」といった問いかけに
対し、「コーヒー、お茶、水」といった案内を行う。こ
れによって、学習者に対し、「コーヒーを下さい。」と
いった発話を誘導する。第二例では、レンタカー会社で
の会話という設定で、「何日間利用しますか。」といっ
た問いかけをしている。これに対する発話案内として、
「１〜１０日」という表示をする。学習者はこの範囲で
任意の数字を選択して発話すればよい。学習者が、「３
日間利用します。」という発話をした場合、装置は、
「３日ですね。それでは料金は…です。」といった会話
文を次に選択することになる。以上の例は、発話文のキ
ーワードを示して発話文を示唆する方法であるが、キー
ワードを示す方法には、キーワードを含むキーフレーズ
やキーセンテンスを表示する方法もある。The first example shown in FIG. 3 is as shown in FIG. 1. In response to the question "Do you need any drinks?", Guidance such as "coffee, tea, water" is given. As a result, an utterance such as "Please give me coffee." In the second example, the conversation is set up at a rental car company, and the user is asked, "How many days do you want to use?" As utterance guidance for this,
A display "1 to 10 days" is displayed. The learner may select any number within this range and speak. If the learner says “3
Use for days. The device says,
Next, you will select a conversation sentence such as "3 days. Then the price is ...". The above example is a method of suggesting an utterance sentence by indicating a keyword of the utterance sentence. As a method of indicating a keyword, there is also a method of displaying a key phrase or a key sentence including the keyword.
【００２２】第三例では、ディスプレイの画面などで、
所定の場面が設定されており、ここで学習者側からの発
話を促すものを示す。この場面は、例えば電話を掛けて
相手を呼び出すときという設定になっている。このと
き、発話案内としては「固有名詞」という表示になる。
これによって、学習者は「もしもし、ジョンさんです
か。」というように、任意の固有名詞を含めて発話す
る。一般に、パーソナルコンピュータ等には固有名詞の
辞書が格納されているから、特に対象を制限しなくて
も、任意の固有名詞の発話に対しこれを固有名詞と認識
し、対処することが可能である。これは、学習者の発話
文が、固有名詞を含む表現であることを装置側で期待し
ている場合の発話案内例である。固有名詞の選択は自由
であるが、固有名詞を含む共通の表現をさせようとして
いる。In the third example, on a display screen or the like,
A predetermined scene is set, and here, an object that prompts the learner to speak is shown. In this scene, for example, a setting is made when a call is made to call the other party. At this time, the utterance guidance is displayed as “proper noun”.
As a result, the learner utters an arbitrary proper noun, such as "Hello, John?" Generally, a personal computer or the like stores a dictionary of proper nouns, so that it is possible to recognize any proper noun utterance as a proper noun and deal with it without any particular limitation. . This is an example of utterance guidance in a case where the apparatus expects the learner's utterance sentence to be an expression including a proper noun. The choice of proper nouns is free, but we are trying to make common expressions including proper nouns.
【００２３】第四例は、「ホテルのフロントで」という
設定である。この場合、発話案内としては、「チェック
インを」という命題を示すものになる。学習者はチェッ
クインで発話すべき発話文を選択することになる。装置
側ではその発話文が予め用意されたものと一致するかど
うかを判断し、チェックインの会話が進められることに
なる。こうした発話案内を見て発話を決定する動作は、
学習者の頭の中で直感的に行われる。従って、発話案内
の内容も、これを見ただけで直感的にいくつかの発話文
を思い浮かべるような簡潔な表現が好ましい。また、発
話案内は、あくまでも学習者の直感的な思考を助けるこ
とを目的とする。A fourth example is a setting of “at the front of a hotel”. In this case, the utterance guidance indicates the proposition “Check In”. The learner selects the utterance to be uttered at check-in. The apparatus determines whether or not the uttered sentence matches a prepared one, and the check-in conversation proceeds. The operation of deciding an utterance based on such utterance guidance,
It is done intuitively in the learner's head. Therefore, it is preferable that the contents of the utterance guidance be a simple expression that allows the user to intuitively think of some utterance sentences just by looking at the contents. In addition, the utterance guidance is intended only to help the learner's intuitive thinking.
【００２４】従って、例えばイエスかノーかというよう
に、回答方法が明らかな場合に、その内容を直接表示す
ると、かえって学習者の思考を中断させてしまう。こう
した場合には発話案内を表示しないことが好ましい。例
えば、「あなたは鈴木さんですか。」というような問い
かけに対する発話案内は不要である。また、「コーヒー
あるいは紅茶のどちらにしますか。」といった問いかけ
に対する発話案内も不要である。なお、例えば英会話の
練習中に、従来は「I like tea.」と表示していたとこ
ろを「お茶を下さい」と日本語で表示するのは、発話文
の間接的な示唆である。この文を英語にすると、「I li
ke tea.」以外のいくつかの表現が考えられるからであ
る。また、発話案内は、文字だけでなく、図形や記号、
写真などの画像を単独であるいは組み合わせて表現した
ものでもよい。以上の構成により、予め用意した何種類
かの制限された範囲内であるが、学習者の自由に選択し
た発話に従って、自由会話に近い語学練習が可能とな
る。Therefore, if the answer method is clear, for example, "yes" or "no", if the content is directly displayed, the learner's thinking is interrupted. In such a case, it is preferable not to display the speech guidance. For example, utterance guidance for a question such as "Are you Suzuki-san?" Is unnecessary. Also, there is no need to provide utterance guidance for a question such as "whether coffee or tea?" For example, during the practice of English conversation, displaying "I like tea." In Japanese instead of "I like tea." Is an indirect suggestion of the utterance sentence. If you translate this sentence into English,
This is because some expressions other than "ke tea." In addition, the utterance guidance includes not only characters but also figures and symbols,
Images such as photographs may be represented alone or in combination. With the above configuration, it is possible to practice a language close to a free conversation in accordance with utterances freely selected by the learner, within a limited range of several kinds prepared in advance.
【００２５】ところで、上記のように発話文を間接的に
示唆するような発話案内を行った場合には、必ずしも学
習者の発した発話文が装置側で用意した発話文と完全に
一致しないことが生じる。この場合、音声認識の結果出
力された認識文を意味解析し、予め用意された認識文と
意味的に一致しているかどうかを判断するようにすれ
ば、円滑な対話が可能になる。また、言い方の異なる会
話文を多数記憶しておくよりもメモリの節約ができる。When the utterance guidance that indirectly suggests the utterance sentence is performed as described above, the utterance sentence of the learner does not always completely match the utterance sentence prepared on the device side. Occurs. In this case, if the semantic analysis of the recognition sentence output as a result of the speech recognition is performed to determine whether or not the sentence is semantically identical to the prepared recognition sentence, a smooth dialogue can be performed. Further, memory can be saved as compared with storing a large number of conversational sentences having different expressions.
【００２６】図４には、こうした手法も取り入れた本発
明による制御方法のフローチャートを示した。まず、ス
テップＳ１において、装置による問いかけや場面の設定
が行われる。そして、ステップＳ２で、既に説明したよ
うな発話案内の表示がされる。次に、ステップＳ３で学
習者の発話が入力されると、ステップＳ４で音声認識が
行われる。次のステップＳ５では、記憶部に格納された
発話リストとの比較が行われる。認識文と発話リストが
一致すれば、ステップＳ６からステップＳ７に進み、こ
れまで説明した通り、該当する流れの会話が選択され、
ステップＳ８で、新たな問いかけの準備が行われる。こ
うして、ステップＳ１に戻り、次の問いかけ等が実行さ
れる。FIG. 4 shows a flowchart of a control method according to the present invention that also incorporates such a method. First, in step S1, an inquiry and setting of a scene are performed by the device. Then, in step S2, the utterance guidance as described above is displayed. Next, when the utterance of the learner is input in step S3, voice recognition is performed in step S4. In the next step S5, comparison with the utterance list stored in the storage unit is performed. If the recognition sentence and the utterance list match, the process proceeds from step S6 to step S7, and the conversation of the corresponding flow is selected as described above,
In step S8, a new inquiry is prepared. Thus, the process returns to step S1, and the next inquiry or the like is performed.
【００２７】一方、ステップＳ６で、認識文と発話リス
トが一致しない場合にはステップＳ９に進み、よく知ら
れた構文解析の手法を用いて意味解析が行われる。そし
て、意味の似た言葉や意味の似た表現を装置側の文生成
規則に従った言葉や表現に置き換えて、新たな定型化さ
れた認識文が生成される（ステップＳ１０）。その後、
改めて記憶部に格納された発話リストと比較する（ステ
ップＳ１１、１２）。こうして、認識文と発話リストが
一致すればステップＳ７に進み、該当する流れの会話が
選択される。On the other hand, if the recognized sentence does not match the utterance list in step S6, the process proceeds to step S9, where semantic analysis is performed using a well-known syntactic analysis technique. Then, words having similar meanings and expressions having similar meanings are replaced with words and expressions according to the sentence generation rules on the device side, and a new stylized recognition sentence is generated (step S10). afterwards,
The utterance list is compared again with the utterance list stored in the storage unit (steps S11 and S12). If the recognition sentence matches the utterance list in this way, the process proceeds to step S7, and the conversation of the corresponding flow is selected.
【００２８】一方、意味解析による処置を行っても発話
リストと一致しない場合にはステップＳ１３に進み、再
度の問いかけ準備が行われる。このように、再び学習者
に対し発話文の入力を要求する。On the other hand, if the utterance list does not match even after the action by the semantic analysis is performed, the process proceeds to step S13, and the inquiry is prepared again. In this way, the learner is again requested to input an utterance sentence.
【００２９】意味解析を行い、認識文を生成する処理
は、装置に記憶された発話リストと一致させるように認
識文を修正する処理である。これは、例えば同一の意味
を持つ単語が複数ある場合、装置が用意している単語に
変換する処理等で実現する。なお、この他に同一の意味
を持つ複数の文を生成し、これと発話リストとを比較す
るようにしてもよい。なお、上記のような語学訓練装置
は、パーソナルコンピュータのプログラムの制御により
実現する。従って、そのプログラムをフロッピーディス
クやＣＤ−ＲＯＭその他の記録媒体に記録してから、コ
ンピュータのハードディスクにインストールしあるいは
ネットワークを経由してダウンロードすれば、本発明を
実施することができる。The process of performing a semantic analysis and generating a recognition sentence is a process of correcting the recognition sentence so that it matches the utterance list stored in the device. This is realized by, for example, a process of converting words having the same meaning into words prepared by the device. Alternatively, a plurality of sentences having the same meaning may be generated and compared with the utterance list. The language training apparatus as described above is realized by controlling a program of a personal computer. Therefore, the present invention can be implemented by recording the program on a floppy disk, CD-ROM, or other recording medium and then installing the program on the hard disk of the computer or downloading the program via a network.
【００３０】[0030]
【発明の効果】以上説明した本発明の方法によれば、発
話案内を表示することによって、学習者の発話内容に自
由度が生じ、より自由会話に近い語学訓練ができる。し
かも、発話案内によって、装置が選択できる会話の流れ
の範囲を有限の範囲に制限することができるため、限ら
れたデータ量で高度な語学訓練制御ができる。また、自
由度のある会話を許容しつつ、その音声認識率を向上さ
せ、円滑な語学訓練を実行することができる。According to the method of the present invention described above, by displaying the utterance guidance, the degree of freedom in the utterance content of the learner is increased, and language training closer to free conversation can be performed. Moreover, the range of the conversation flow that can be selected by the device can be limited to a finite range by the utterance guidance, so that advanced language training control can be performed with a limited amount of data. In addition, it is possible to improve the speech recognition rate while allowing a conversation with a degree of freedom, and to execute a smooth language training.
【図１】本発明による語学訓練装置の制御方法概略図で
ある。FIG. 1 is a schematic diagram of a control method of a language training apparatus according to the present invention.
【図２】語学訓練装置のブロック図である。FIG. 2 is a block diagram of a language training device.
【図３】発話案内の説明図である。FIG. 3 is an explanatory diagram of utterance guidance.
【図４】本発明による制御方法のフローチャートであ
る。FIG. 4 is a flowchart of a control method according to the present invention.
１ 学習者 ３ ディスプレイ ４ スピーカ ５ マイク ６ 発話判定部 ７ 会話制御部 ８ 発話誘導画面 ９ 発話案内 １３ 音声認識部 １７ 記憶部 １８ 会話文データファイル Reference Signs List 1 learner 3 display 4 speaker 5 microphone 6 utterance judging unit 7 conversation control unit 8 utterance guidance screen 9 utterance guidance 13 voice recognition unit 17 storage unit 18 conversation sentence data file
───────────────────────────────────────────────────── フロントページの続き (72)発明者 木村 信宏 石川県金沢市幸町３番35号 株式会社沖北 陸システム開発内 ────────────────────────────────────────────────── ─── Continuing on the front page (72) Inventor Nobuhiro Kimura 3-35 Sachimachi, Kanazawa-shi, Ishikawa Pref.
Claims (6)
唆する発話案内を表示し、 装置側で用意した前記発話文のうちのいずれかを学習者
が発話するように誘導することを特徴とする語学訓練装
置の制御方法。An utterance guide which indirectly suggests one or a plurality of utterance sentences is displayed to a learner who is practicing a conversation, and one of the utterance sentences prepared on the device side is displayed. A method for controlling a language training apparatus, characterized by inducing a learner to speak.
成ることを特徴とする語学訓練装置の制御方法。2. The method according to claim 1, wherein the utterance guidance comprises a keyword list suggesting each utterance sentence.
る文言から成ることを特徴とする語学訓練装置の制御方
法。3. The method according to claim 1, wherein the utterance guidance comprises an expression common to each utterance sentence and words limiting a range.
徴とする語学訓練装置の制御方法。4. The method according to claim 1, wherein the utterance guidance comprises a word indicating a proposition of the utterance sentence.
おいて、 学習者の発話を音声認識して得られた認識文が、 装置側で用意したいずれの発話文とも一致しないとき、 前記認識文を意味解析して、装置側で用意したいずれか
の発話文とその意味が等価であれば、装置側で用意した
発話文に該当する認識文を得ることを特徴とする語学訓
練装置の制御方法。5. The method according to claim 1, wherein a recognition sentence obtained by speech recognition of the utterance of the learner does not match any utterance sentence prepared on the device side. The language training apparatus is characterized in that the semantic analysis of the recognition sentence is performed, and if any of the utterance sentences prepared on the device side have the same meaning, a recognition sentence corresponding to the utterance sentence prepared on the device side is obtained. Control method.
唆する発話案内を表示し、 装置側で用意した前記発話文のうちのいずれかを学習者
が発話するように誘導制御するプログラムを記録した記
録媒体。6. A utterance guide which indirectly suggests one or a plurality of utterance sentences to a learner who is practicing a conversation, and wherein any one of the utterance sentences prepared on the device side is displayed. A recording medium on which a program for guiding and guiding a learner to speak is recorded.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15043597A JPH10326074A (en) | 1997-05-23 | 1997-05-23 | Control method for language training device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15043597A JPH10326074A (en) | 1997-05-23 | 1997-05-23 | Control method for language training device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH10326074A true JPH10326074A (en) | 1998-12-08 |
Family
ID=15496874
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP15043597A Pending JPH10326074A (en) | 1997-05-23 | 1997-05-23 | Control method for language training device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH10326074A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20030063743A (en) * | 2002-01-23 | 2003-07-31 | 주식회사 영어와 사람들 | Foreign Language Training System and Method |
| WO2011074771A3 (en) * | 2009-12-16 | 2011-08-25 | 포항공과대학교 산학협력단 | Apparatus and method for foreign language study |
-
1997
- 1997-05-23 JP JP15043597A patent/JPH10326074A/en active Pending
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20030063743A (en) * | 2002-01-23 | 2003-07-31 | 주식회사 영어와 사람들 | Foreign Language Training System and Method |
| WO2011074771A3 (en) * | 2009-12-16 | 2011-08-25 | 포항공과대학교 산학협력단 | Apparatus and method for foreign language study |
| CN102667889A (en) * | 2009-12-16 | 2012-09-12 | 浦项工科大学校产学协力团 | Apparatus and method for foreign language study |
| JP2013512461A (en) * | 2009-12-16 | 2013-04-11 | 浦項工科大學校 産學協力團 | Foreign language learning apparatus and dialogue system |
| US9767710B2 (en) | 2009-12-16 | 2017-09-19 | Postech Academy-Industry Foundation | Apparatus and system for speech intent recognition |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6560574B2 (en) | Speech recognition enrollment for non-readers and displayless devices | |
| EP0956552B1 (en) | Method and apparatus for combined information from speech signals for adaptive interaction in teaching and testing | |
| US8566098B2 (en) | System and method for improving synthesized speech interactions of a spoken dialog system | |
| US6157913A (en) | Method and apparatus for estimating fitness to perform tasks based on linguistic and other aspects of spoken responses in constrained interactions | |
| US9070363B2 (en) | Speech translation with back-channeling cues | |
| JPH0883041A (en) | Method and system for education based on interactive visual and hearing presentation system | |
| JP2003517158A (en) | Distributed real-time speech recognition system | |
| JP2001159865A (en) | Method and device for leading interactive language learning | |
| JP4729902B2 (en) | Spoken dialogue system | |
| WO2007062529A1 (en) | Interactive language education system and method | |
| JP2001034293A (en) | Method and device for transferring voice | |
| US20070055520A1 (en) | Incorporation of speech engine training into interactive user tutorial | |
| WO2018033979A1 (en) | Language learning system and language learning program | |
| US11314942B1 (en) | Accelerating agent performance in a natural language processing system | |
| US20150254238A1 (en) | System and Methods for Maintaining Speech-To-Speech Translation in the Field | |
| Tomko et al. | Towards efficient human machine speech communication: The speech graffiti project | |
| JPH10326176A (en) | Voice conversation control method | |
| JPH1138863A (en) | Language information apparatus | |
| JP2007148170A (en) | Foreign language learning support system | |
| JPH10326074A (en) | Control method for language training device | |
| JP2005031150A (en) | Apparatus and method for speech processing | |
| JP7172168B2 (en) | Dialogue device, dialogue device control method and program | |
| KR101104822B1 (en) | System and Method for Foreign Language Learning based on Loud Speaking | |
| JP6383748B2 (en) | Speech translation device, speech translation method, and speech translation program | |
| León-Montaño et al. | Design of the architecture for text recognition and reading in an online assessment applied to visually impaired students |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Effective date: 20040520 Free format text: JAPANESE INTERMEDIATE CODE: A621 |
|
| RD05 | Notification of revocation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7425 Effective date: 20040527 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060403 |
|
| A131 | Notification of reasons for refusal |
Effective date: 20060509 Free format text: JAPANESE INTERMEDIATE CODE: A131 |
|
| A02 | Decision of refusal |
Effective date: 20060912 Free format text: JAPANESE INTERMEDIATE CODE: A02 |