JPH07325597A - Information input method and device for executing its method - Google Patents

Information input method and device for executing its method

Info

Publication number
JPH07325597A
JPH07325597A JP13966394A JP13966394A JPH07325597A JP H07325597 A JPH07325597 A JP H07325597A JP 13966394 A JP13966394 A JP 13966394A JP 13966394 A JP13966394 A JP 13966394A JP H07325597 A JPH07325597 A JP H07325597A
Authority
JP
Japan
Prior art keywords
input
information
confirmation
time
determination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP13966394A
Other languages
Japanese (ja)
Inventor
Mitsuhisa Kamei
光久 亀井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP13966394A priority Critical patent/JPH07325597A/en
Publication of JPH07325597A publication Critical patent/JPH07325597A/en
Pending legal-status Critical Current

Links

Abstract

PURPOSE:To surely realize the high input efficiency by deciding whether confirming directly when respective inputs are performed or confirming after two pieces or above of the inputs are united according to the certainty of the inputted information when the information is inputted to a machine and confirming in the decided time. CONSTITUTION:An information inputter inputs the information to an information input means 10. The information related to the input such as the certainty, etc., of the inputted information and the input is transmitted to a conversation condition control means 20. The conversation condition control means 20 presents the information necessary for stimulation of next input and confirmation of the inputted information, etc., to the information inputter through an information output device 90 by commanding an output information generation means 80. Whenever the information is inputted from the information inputter to an above-mentioned information input device, a confirmation time decision means 30 operates and decides the time to be confirmed, and the conversation condition control means 20 revises an information input and its confirmation flow according to the confirmation time.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は、機械へ正しく情報を入
力するために、確認を取りながら情報を入力する方式に
関し、特に確認作業に要する時間を短くし、情報入力者
に煩わしく感じさせない情報入力方法およびその方法を
実施するための装置に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a method for inputting information while confirming it in order to correctly input information to a machine, and in particular, information that shortens the time required for confirmation work and does not make the information inputter feel annoying. The present invention relates to an input method and an apparatus for implementing the method.

【0002】[0002]

【従来の技術】機械へ情報を入力する際に誤って入力が
なされる場合がある。したがって、入力された情報を入
力者が確認できるようにして、誤りを見つける機構が不
可欠である。しかし、音声認識を利用した入力作業など
のある種の入力作業においては、この確認作業は入力時
間を引き延ばしたり、情報入力者に煩わしさを感じさせ
る原因になっている。そこで、短い時間で、かつ入力者
に煩わしさを感じさせない確認作業の方法が必要となっ
ていた。音声認識による情報入力の場合において、入力
者の習熟度に応じてあらかじめ定めた複数の入力作業の
フローを用意しておき、確認時機もそのフローに応じて
変更する方法が行われている(特開平3−160868
号公報)。しかし、入力者ごとに決まった入力作業フロ
ーを適用してしまうので、風邪などで声がかすれてしま
って音声入力に誤認識が増加するなどの入力者の状態の
変化に適応できない。加えて、入力しやすい入力項目
や、入力の誤りを起こしやすい入力項目といった、入力
項目の変化などにも適応できない。
2. Description of the Related Art When inputting information to a machine, it may be erroneously input. Therefore, it is indispensable to have a mechanism that allows the input person to confirm the input information and detect an error. However, in certain types of input work such as input work using voice recognition, this confirmation work prolongs the input time and causes the information input person to feel annoyed. Therefore, there has been a need for a confirmation work method in a short time and without making the input person feel annoyed. In the case of inputting information by voice recognition, a method of preparing a plurality of predetermined input work flows according to the proficiency of the input person and changing the confirmation timing according to the flow is also performed. Kaihei 3-160868
Issue). However, since the input work flow decided for each input person is applied, it is not possible to adapt to the change of the input person's state such as the voice being faint due to a cold or the like and the false recognition being increased in the voice input. In addition, it cannot adapt to changes in input items such as input items that are easy to input and input items that are prone to input errors.

【0003】また音声認識による情報入力の別の例とし
て、音声認識時のマッチング距離などの認識パラメータ
を利用して認識の確度を推定し、確度が十分に高い時に
は確認作業を省略し、確度が低い時にのみ確認作業を行
う確認方式が行われている(特開昭63−123098
号公報、特開昭63−169699号公報、特開平3−
248199号公報)。しかしながら、確度が十分高い
時においても、誤りが全くないことは保証できない。こ
の時に、確認を省いてしまうと誤りの検出に失敗する。
この誤りの検出失敗を恐れて認識確度の判定基準を厳し
くすると、基準を満たす入力が少なくなり確認を省略す
る回数が減少し、この方式の特徴が活かされない欠点を
持っていた。
As another example of information input by voice recognition, the recognition accuracy is estimated by using a recognition parameter such as a matching distance at the time of voice recognition, and when the accuracy is sufficiently high, the confirmation work is omitted and the accuracy is improved. There is a confirmation method in which confirmation work is performed only when the temperature is low (Japanese Patent Laid-Open No. 63-123098).
JP-A-63-169699, JP-A-3-
248199). However, even when the accuracy is high enough, it cannot be guaranteed that there is no error. At this time, if the confirmation is omitted, the error detection fails.
If the criterion of the recognition accuracy is tightened due to fear of failure in detecting this error, the number of inputs satisfying the criterion is reduced and the number of times the confirmation is omitted is reduced, which has a drawback that the feature of this method cannot be utilized.

【0004】[0004]

【発明が解決しようとする課題】本発明は、上述した問
題を解決するためになされたもので、情報入力作業にお
いて、入力者や入力項目などの状態の変化に対応すると
ともに、確認を省略することによって誤りを検出できな
い危険性をなくすことにより、確認作業の効率を高める
ことを課題とする。
SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problems, and in the information inputting work, it corresponds to the change of the state of the input person or the input item, and the confirmation is omitted. Therefore, it is an object to improve the efficiency of confirmation work by eliminating the risk that an error cannot be detected.

【0005】[0005]

【課題を解決するための手段】本発明の情報入力方法
は、情報の入力毎に、入力された情報の評価情報(例、
認識率の基になる標準パターンとの距離、類似度、ある
いは入力情報の重要度などの入力の確認の必要性を評価
する情報)に基づいて入力された情報の確認時機を判断
し、その判断の結果、確認時機であったときに、情報が
正しく入力されたか否かの確認処理を実行することを特
徴とする。また、本発明の情報入力装置は、情報の入力
毎に、入力された情報の前述の評価情報に基づいて入力
された情報の確認時機を判断する判断手段(30)と、
その判断において参照する判断時機判定基準を記憶する
判定基準記憶手段(41)と、判断手段により判断され
た確認時機に、情報が正しく入力されたか否かの確認処
理を実行する確認処理手段(20)と、前記評価情報お
よび確認処理結果を記憶する記憶手段(43)と、その
記憶手段の内容に基づいて前記判断基準を最適化して更
新する更新手段(50)とを具備する。
According to the information input method of the present invention, evaluation information (for example,
Information that evaluates the necessity of confirming the input such as the distance from the standard pattern that is the basis of the recognition rate, the degree of similarity, or the importance of the input information). As a result, when it is the confirmation time, the confirmation process of whether or not the information is correctly input is executed. Further, the information input device of the present invention comprises a determination means (30) for determining the confirmation timing of the input information based on the above-mentioned evaluation information of the input information, each time the information is input.
Judgment criterion storage means (41) for storing the judgment timing judgment reference to be referred to in the judgment, and confirmation processing means (20) for executing confirmation processing as to whether or not information is correctly input at the confirmation time judged by the judgment means. ), A storage means (43) for storing the evaluation information and the confirmation processing result, and an updating means (50) for optimizing and updating the judgment criterion based on the contents of the storage means.

【0006】[0006]

【作用】一般に、確認作業を行う時機には以下の2種類
が考えられる。入力者が情報を1項目入力する度にすぐ
に行う方法と、情報が2項目以上まとまってから行う方
法である。すぐに確認作業を行う方法は、入力された情
報が誤っている可能性が高い時に有効で、2項目以上ま
とまってから確認作業を行う方法は、入力された情報が
正しい可能性が高い時に有効である(インターナショナ
ル マン−マシンスタディーズ,第28巻,(198
8),アインスワース,「エラー修正を伴った音声数字
入力における入力長の最適化」p.573−581[I
nt.J.Man−Machine Studies,
Vol.28,(1988),W.A.Ainswor
th:“Optimization of Strin
g length for Spoken Digit
Input with Error Correct
ion”])。特に音声認識のように誤認識の発生が避
けられない入力においては、1項目入力する度にすぐに
行う方法と、情報が2項目以上まとまってから行う方法
の、入力時間と音声認識率との関係が、それぞれ図5に
示す関係になっている。音声以外の入力方式に対して
も、装置からの出力が音声メッセージを利用する場合
や、認識処理やデータの通信に時間を必要として入力装
置の反応のサイクルに時間を要する入力に対しては、上
記と同様の関係は成立する。したがって、本発明の情報
入力方法は、入力された情報が受理できるか受理できな
いかといった機能的な基準だけではなく、入力された情
報が正しい可能性が高いか低いかといった入力確度や、
誤った入力がされると影響の大きい入力かどうかなどの
情報の重要性などの入力の確認の必要性を評価する評価
情報によって、確認時機を判定し、情報が入力される度
に、確認作業を行う時機を適宜変更することにより、正
しい情報を効率よく入力できるようにする。これは、人
間同士の会話においても、聞き取りにくかったり、重要
そうな内容については、すぐ聞き返すことと対応するよ
うに、自然な情報入力の技術であるともいえる。このよ
うに、本発明によれば、入力者によって情報が入力され
ると、その情報の確度や重要性を推定し、その推定結果
に応じて確認作業を行う時機を判定し、判定された確認
作業の時機が来た時に確認作業を行うようにしたので、
入力された情報に応じて最適な確認の時機を得ることが
可能となる。
In general, the following two kinds of time can be considered when performing the confirmation work. There are two methods, one is to perform the information immediately after the user inputs one item of information, and the other is to perform the information after two or more items are collected. The method of performing confirmation work immediately is effective when the input information is likely to be incorrect, and the method of performing confirmation work after collecting two or more items is effective when the input information is likely to be correct. (International Man-Machine Studies, Volume 28, (198
8), Einsworth, “Optimization of Input Length in Speech and Numeric Input with Error Correction” p. 573-581 [I
nt. J. Man-Machine Studies,
Vol. 28, (1988), W.W. A. Ainswor
th: “Optimization of Strin
g length for Spoken Digit
Input with Error Correct
")"). Especially for input such as voice recognition in which erroneous recognition is inevitable, the input time is divided into two methods, one that is performed immediately after inputting one item and one that is performed after two or more items of information are collected. The relationship with the voice recognition rate is as shown in Fig. 5. For input methods other than voice, when the output from the device uses a voice message, or when the recognition process or data communication takes time. Therefore, the same relationship as described above is established for an input requiring a long reaction cycle of the input device, and thus the information input method of the present invention determines whether the input information can be accepted or not accepted. Not only functional criteria, input accuracy such as whether the input information is likely or not correct,
Evaluated information that evaluates the necessity of input confirmation such as the importance of information such as whether it is an input that is greatly affected by incorrect input, and the confirmation work is performed each time information is input. By properly changing the timing of performing, it is possible to efficiently input correct information. It can be said that this is a technique for inputting information in a natural manner so that it is difficult to hear even in conversation between humans, and when it is important to listen back quickly for important contents. As described above, according to the present invention, when the information is input by the input person, the accuracy or importance of the information is estimated, the time for performing the confirmation work is determined according to the estimation result, and the determined confirmation is performed. I decided to do confirmation work when the time came for work,
It is possible to obtain an optimal time for confirmation according to the input information.

【0007】また、本発明の情報入力装置においては、
判断手段は、情報の入力毎に、入力された情報の前述の
評価情報に基づいて、判定基準記憶手段に記憶された判
断時機判定基準を参照して、入力された情報の確認時機
を判断する。そして、確認処理手段は、判断手段により
判断された確認時機に、情報が正しく入力されたか否か
の確認処理を実行する。更新手段は、前記評価情報およ
び確認処理結果を記憶手段により記憶し、その記憶手段
の内容に基づいて前記判断基準を最適化して更新する。
本発明によれば、最適な時機に入力情報の確認作業を行
うので、確認作業に要する時間と、入力者にあたえる煩
わしさとを最小限にすることができる。さらに、本発明
によれば、判断基準を入力に対する認識結果が正解であ
ったか不正解であったかなどの確認処理結果に応じて更
新することにより判断基準の学習を行っているので、判
断基準が使用者に応じて最適化され、入力速度を向上さ
せることができる。
In the information input device of the present invention,
Every time the information is input, the determination means determines the timing of confirmation of the input information by referring to the determination timing determination criteria stored in the determination criteria storage means based on the above-described evaluation information of the input information. . Then, the confirmation processing means executes the confirmation processing as to whether or not the information is correctly input at the confirmation timing determined by the determination means. The updating unit stores the evaluation information and the confirmation processing result in the storage unit, and optimizes and updates the determination standard based on the contents of the storage unit.
According to the present invention, since the confirmation work of the input information is performed at the optimum time, the time required for the confirmation work and the troublesomeness of the input person can be minimized. Further, according to the present invention, the criterion is learned by updating the criterion according to the confirmation processing result such as whether the recognition result for the input is correct or incorrect, and thus the criterion is learned by the user. The input speed can be improved according to the optimization.

【0008】[0008]

【実施例】図6は第一の実施例のブロック構成図であ
り、図1は全体のフローチャートである。本実施例は、
音声によって入力する作業に対して、確認時機を判定す
る基準として特に認識の確度を示すパラメータの一つで
ある音声認識装置の出力する認識スコアを確認時機の判
定基準に利用する例である。
FIG. 6 is a block diagram of the first embodiment, and FIG. 1 is an overall flow chart. In this example,
This is an example in which a recognition score output from a voice recognition device, which is one of the parameters indicating the accuracy of recognition, is used as a criterion for determining a confirmation timing for a task input by voice as a criterion for determining a confirmation timing.

【0009】まず利用者は、マイクロホン11に向かっ
て入力する項目を発声する。マイクロホン11から入力
された音声は、音声認識装置12によって認識される。
音声認識装置12の出力データは、第一候補の認識結果
とそのスコア、および、第一候補と第二候補の認識スコ
アの差である。これらの、音声認識装置12の出力デー
タは、対話状態管理手段20へ渡される。対話状態管理
手段20は、確認をすぐ取るべきか否かを決定するため
のデータを収集し確認時機判定手段30に渡す。すなわ
ち、第一候補の認識結果、第一候補のスコア、第一と第
二候補のスコアの差などの音声認識装置12の出力デー
タとあわせて、対話状態記憶手段42を参照して、今ま
で確認しないで保存していた既入力項目の数や対話の区
切りなどを初めとする対話状態など確認時機判定に必要
なデータを、確認時機判定手段30に渡す。
First, the user speaks into the microphone 11 an item to be input. The voice input from the microphone 11 is recognized by the voice recognition device 12.
The output data of the voice recognition device 12 is the recognition result of the first candidate and its score, and the difference between the recognition scores of the first candidate and the second candidate. These output data of the voice recognition device 12 are passed to the dialogue state management means 20. The dialogue state management means 20 collects data for deciding whether or not to take confirmation immediately, and passes it to the confirmation time determination means 30. That is, referring to the dialogue state storage means 42 together with the output data of the voice recognition device 12 such as the recognition result of the first candidate, the score of the first candidate, the difference between the scores of the first and second candidates, and so on. The data necessary for the confirmation occasion determination such as the number of already input items that have been stored without confirmation and the dialogue state such as the break of the dialogue is passed to the confirmation occasion determination means 30.

【0010】確認時機判定手段30では、確認する時機
を決定する。この決定手順のフローチャートを図7に示
す。確認時機判定手段30は、対話状態管理手段20か
らデータを受け取り(ステップS201)、その受け取
った入力された項目によって対話の状態が一区切りつい
たかどうか判定する(ステップS211)。対話の状態
が一区切りつくとは、例えばスケジュールの登録をする
タスクにおいては、月、日付、時間、用件、の4項目が
一区切りであると考えられる。すべての入力が終了した
時も区切りがついたといえる。区切りがつけばそれまで
の入力をすぐ確認する必要があると結論づけられるの
で、確認時機の決定処理を行う(ステップS282)。
区切りがつかない場合には、いままで入力された項目で
まだ確認されていない項目が3個未満であるか否かを調
べる(ステップS221)。3個以上ある場合には、溜
まりすぎているということで、確認されていない項目す
べてをすぐ確認する必要があると結論づけられ、確認時
機の決定処理を行う(ステップS282)。3個も溜ま
っていない場合には、次に入力された項目が重要である
かどうか判断するため、認識結果がその時の状態におい
て重要な単語であるかどうかのリストを参照して認識結
果が重要な単語であるか否かを判定する(ステップS2
51)。次に、確認時機を決定するために、判定基準を
参照する(ステップS252)。本実施例では、認識単
語の重要性、第一候補の認識スコア、第一候補と第二候
補のスコアの差をもとに判定基準を参照する。判定基準
のどの領域に区分されたかによって確認時機を判定結果
とする(ステップS281)。判定結果は対話状態管理
手段20へ送出する(ステップS290)。
The confirmation timing determining means 30 determines the timing for confirmation. FIG. 7 shows a flowchart of this determination procedure. The confirmation time determination means 30 receives the data from the dialogue state management means 20 (step S201), and determines whether or not the dialogue states are separated by the received input item (step S211). It is considered that, for example, in a task of registering a schedule, four items of month, date, time, and requirement are separated from each other when the state of dialogue is separated from each other. It can be said that there is a break even when all the input is completed. If there is a break, it can be concluded that it is necessary to immediately confirm the input up to that point, so the confirmation timing determination process is performed (step S282).
If there is no break, it is checked whether or not there are less than three items that have not been confirmed among the items that have been input so far (step S221). When there are three or more items, it is concluded that it is necessary to immediately check all the items that have not been confirmed, because there are too many accumulated items, and the confirmation timing determination process is performed (step S282). If three words are not accumulated, it is determined whether the next input item is important, so the recognition result is important by referring to the list of whether the recognition result is an important word in the state at that time. It is determined whether the word is a word (step S2
51). Next, the determination criterion is referred to in order to determine the confirmation timing (step S252). In this embodiment, the criterion is referred to based on the importance of the recognized word, the recognition score of the first candidate, and the difference between the scores of the first candidate and the second candidate. The time of confirmation is set as the determination result depending on which region of the determination standard is divided (step S281). The determination result is sent to the dialogue state management means 20 (step S290).

【0011】確認時機判定基準の一具体例の概念図を図
9に示す。図9の例は、第一候補の認識スコア、およ
び、第一候補と第二候補の認識スコアの差によって確認
時機を定めている。横軸が第一候補の認識スコアであ
り、右に行くほどよいスコアである。縦軸が第一候補と
第二候補の認識スコアの差であり、上に行くほどスコア
の差が大きい。図9の判定基準を利用すると、認識スコ
アに従って、領域2に分類される場合はすぐに確認を取
り、領域3に分類される場合は後でまとめて確認を取る
と判断する。領域5は、単語の重要性によって変わる部
分であり、重要な単語の時はすぐ確認を取り、重要な単
語でない時は後でまとめて確認をとると判断する。重要
な単語かどうか判定するのは、確認時機判定基準記憶手
段41に記憶された重要語リストを参照して行う。重要
語リストの例を図8に示す。以上のようにして、決定さ
れた確認の時機を対話状態管理手段20に送出して、確
認時機判定の手続は終了する。なお、図9の左上のグレ
ーに色づけられたところは、第二候補の認識スコアが負
の値になる部分を示す。この例では、認識スコアは正の
値であると考えているので、このグレーの領域にはデー
タが存在しない。
FIG. 9 shows a conceptual diagram of a specific example of the confirmation timing judgment criteria. In the example of FIG. 9, the confirmation timing is determined by the recognition score of the first candidate and the difference between the recognition scores of the first candidate and the second candidate. The horizontal axis is the recognition score of the first candidate, and the score goes to the right. The vertical axis represents the difference between the recognition scores of the first candidate and the second candidate, and the higher the score, the larger the difference in scores. Using the determination criteria of FIG. 9, it is determined according to the recognition score that confirmation is taken immediately when the area is classified into the area 2 and collective confirmation is performed later when classified into the area 3. The area 5 is a portion that changes depending on the importance of the word, and it is determined that the immediate confirmation is made when the important word is made, and the collective confirmation is made later when the important word is not made. Whether or not it is an important word is determined by referring to the important word list stored in the confirmation timing determination criterion storage means 41. An example of the important word list is shown in FIG. As described above, the timing of the determined confirmation is sent to the dialogue state management means 20, and the procedure for determining the confirmation timing is completed. In addition, the place colored in gray on the upper left of FIG. 9 indicates a portion where the recognition score of the second candidate has a negative value. In this example, since the recognition score is considered to be a positive value, there is no data in this gray area.

【0012】対話状態管理手段20は、確認時機判定手
段30によって決定された確認の時機に応じて、すぐに
確認する場合とそうでない場合とがある。 すぐ確認をする場合には、対話状態記憶手段42を
参照し、今までに確認されていない入力項目が存在する
のであれば、その入力項目とともに今回入力された項目
を入力者に提示して、確認作業を行う。確認の結果誤り
が検出されれば誤りの修正を行うことになるが、ここで
はその方法については省略する。確認の結果、正しいこ
とが確認されると対話状態記憶手段42に、今回の入力
の結果とともに確認を行った項目が確認済になったこと
を記録して次の入力に進む。 すぐに確認をしない場合には、今回入力された結果
とともに、確認がすんでいない入力であることを記録し
次の入力に進む。
Depending on the confirmation timing determined by the confirmation timing determination means 30, the dialogue state management means 20 may or may not immediately confirm. When confirming immediately, the dialogue state storage means 42 is referred to, and if there is an input item that has not been confirmed so far, the input item is presented to the input person together with the input item, Perform confirmation work. If an error is detected as a result of the confirmation, the error will be corrected, but the method is omitted here. If it is confirmed as correct as a result of the confirmation, the dialogue state storage means 42 records that the confirmed item has been confirmed together with the result of this input, and proceeds to the next input. If the confirmation is not performed immediately, the fact that the confirmation has not been completed is recorded together with the result input this time, and the process proceeds to the next input.

【0013】入力された項目の確認や、次の入力の促し
などの、装置から利用者に提示するメッセージは、対話
状態管理手段20の指示に応じて、出力情報生成手段8
0が出力情報記憶手段43に記憶されていたメッセージ
を読み出し、音声合成装置81によって音声信号を合成
しアンプ91とスピーカ92を介して入力者に提示され
る。このようにして進行する情報入力における入力者と
装置との対話の様子を図10に示す。
The message presented from the device to the user such as confirmation of the input items and prompting for the next input is output information generation means 8 according to the instruction of the dialogue state management means 20.
0 reads out the message stored in the output information storage means 43, synthesizes a voice signal by the voice synthesizer 81, and presents it to the input person via the amplifier 91 and the speaker 92. FIG. 10 shows a state of the dialogue between the input person and the apparatus in the information input which progresses in this way.

【0014】以上に説明したように、本実施例は、入力
者によって情報が入力されると、その情報の確度や重要
性を推定し、その推定結果に応じて確認作業を行う時機
を判定し、判定された確認作業の時機が来た時に確認作
業を行うようにしたので、入力された情報に応じて最適
な確認の時機を得ることが可能となる。
As described above, in this embodiment, when the information is input by the input person, the accuracy and importance of the information are estimated, and the timing of the confirmation work is determined according to the estimation result. Since the confirmation work is performed when the time for the determined confirmation work comes, it is possible to obtain the optimum confirmation time according to the input information.

【0015】(第二の実施例)第二の実施例は、第一の
実施例において、確認時機判定基準として、認識確度が
きわめて低い領域1と認識の確度がきわめて高い領域4
とを追加し、領域1では認識結果を採用せずにすぐに再
入力を促し、領域4では確認作業を省略するような機能
を追加したものである。すなわち、図11に示したよう
に、確認時機判定基準を領域1から領域4までに分類し
ておき、領域2や領域3に区分される入力が入った時
は、第一の実施例と同様に動作する。領域1に区分され
る入力が入った時は、認識結果を採用せずに、もう一度
同じ入力を入力者にするよう促す。領域4に区分される
入力が入った時は、誤認識がないと見なして、確認をし
ない。これは、対話状態記憶手段42の、対話状態に入
力された項目の内容とともに、確認の必要が無いことを
記入すれば実現できる。本実施例によれば、認識確度が
きわめて高い場合には確認作業を省略し、認識確度がき
わめて低い場合にも確認作業を行わずただちに再入力を
するようにしたので、入力速度が高くなる利点がある。
(Second Embodiment) The second embodiment is the same as the first embodiment except that the area 1 having a very low recognition accuracy and the area 4 having a very high recognition accuracy are used as a criterion for confirmation timing.
Is added, and in area 1, a function for prompting re-input immediately without adopting the recognition result and for omitting confirmation work in area 4 is added. That is, as shown in FIG. 11, when confirmation time judgment criteria are classified into areas 1 to 4 and an input classified into areas 2 and 3 is input, the same as in the first embodiment. To work. When an input classified into the area 1 is input, the recognition result is not adopted and the input user is prompted again to make the same input. When an input classified into the area 4 is input, it is considered that there is no erroneous recognition and confirmation is not performed. This can be realized by entering the contents of the items entered in the dialogue state in the dialogue state storage means 42 and the fact that there is no need for confirmation. According to the present embodiment, when the recognition accuracy is extremely high, the confirmation work is omitted, and even when the recognition accuracy is extremely low, the confirmation work is not performed and the re-input is performed immediately, so that the input speed is increased. There is.

【0016】(第三の実施例)指で触れるタッチパネル
と、音声の出力による入力の案内を組あわせたインタフ
ェースにより分かりやすく入力できるようにした場合に
は、視覚的な出力だけの場合と比較してある程度の時間
がかかる。第三の実施例は、このような場合に効率よく
入力することのできる実施例である。図12は第三の実
施例のブロック構成図であり、全体のフローチャートは
図1と共通である。数字入力の時のディスプレイ95の
表示例を図14に示す。入力者は、ディスプレイ93の
表示に従って、タッチパネル13に触れて入力を行う。
タッチパネル13は入力者の触れた位置情報を出力す
る。入力処理手段14はタッチパネル13の出力とディ
スプレイの表示内容から入力者の入力を判定し、判定結
果に加えて入力内容と触れた位置の領域の端までの距離
を対話状態管理手段20に伝える。図15は図14のタ
ッチパネル表示の一部の拡大図で、指で触れた位置が×
印で示し、ボタンを触れたと判断する領域を破線で示し
ている。対話状態管理手段20は、入力処理手段14か
らの情報を受けとると、対話状態管理手段20の機能の
一つを構成する計時手段21を参照し入力者がタッチパ
ネルに触れて情報を入力した時間(タイムスタンプ)を
得る。次に、対話状態記憶手段42を参照して、今回の
入力が確認を行うべき区切りのいい入力であるか判断す
る。そして、確認時機判定手段30へ、入力者が入力し
たボタンと、そのタイムスタンプ、領域の端までの距
離、区切りのいい入力であるかどうかなど、確認の時機
を判定するのに必要なデータを確認時機判定手段30に
伝える。
(Third Embodiment) In the case where an interface which combines a touch panel to be touched with a finger and input guidance by voice output is used so as to be easily understandable, it is compared with the case of only visual output. Takes some time. The third embodiment is an embodiment that enables efficient input in such a case. FIG. 12 is a block diagram of the third embodiment, and the entire flow chart is common to FIG. FIG. 14 shows a display example of the display 95 when a numeral is input. The input person touches the touch panel 13 in accordance with the display on the display 93 to perform input.
The touch panel 13 outputs the position information touched by the input person. The input processing means 14 determines the input of the input person from the output of the touch panel 13 and the display content of the display, and informs the dialogue state management means 20 of the input content and the distance to the edge of the area touched in addition to the determination result. FIG. 15 is an enlarged view of a part of the touch panel display of FIG. 14, where the position touched by the finger is x.
An area in which the button is touched is indicated by a broken line. When the dialogue state management means 20 receives the information from the input processing means 14, it refers to the timing means 21 constituting one of the functions of the dialogue state management means 20, and refers to the time when the input person touches the touch panel to input the information ( Time stamp). Next, with reference to the dialogue state storage means 42, it is determined whether or not the input this time is a good input for confirmation. Then, data necessary for determining the time of confirmation such as the button input by the input person, the time stamp thereof, the distance to the edge of the area, and whether or not the input is well separated are input to the confirmation time determination means 30. The confirmation time determination means 30 is notified.

【0017】データを受け取った確認時機判定手段30
は、データに基づいて確認の時機を判定する。その判定
のフローチャートを図13に示す。まず、区切りのいい
入力であったかどうかを見る(ステップS211)。区
切りのいい入力である場合には、今まで確認が行われて
いない項目とあわせてすぐ確認をすると決定する(ステ
ップS283)。区切りのいい入力でない場合には、タ
イムスタンプから前の入力との時間差を算出する(ステ
ップS261)。また、その時間差をそれまでの入力間
隔の平均と分散と比較してずれが大きいかどうか判定し
(ステップS262)、後述する確認時機の判定に用い
る。つぎに、触れた位置とボタンの領域の端までの距離
を計算する(ステップS263)。そして、確認時機判
定基準記憶手段41に記憶されている図16に例を示し
た確認時機の判定基準を参照する。前の入力との時間
差、および触れた位置とボタン領域の端までの距離か
ら、領域2に入るか領域3に入るかわかる。時間差がT
minとTmaxの間の範囲にあり、かつ触れた位置と
ボタン領域の端までの距離Dminより小さい範囲にあ
るとき領域3とし、それ以外の範囲は領域2とする。領
域を決定する基準である図16のTminやTmax、
Dminなどは、入力している状態やボタンの位置や大
きさなどによってことなっている。図16には入力して
いる状態が数字入力である場合とコマンド入力である場
合とで、TminやTmaxを変え、またボタンの位置
によってDminを変えることが示されている。この判
定基準を参照した結果、領域2に入る時には、ボタンを
押した時間が、非常に早くて一回押すつもりがダブルタ
ッチになってしまったり、非常に遅くて迷って押したの
か、また、押した位置が端に近いので、となりを押すつ
もりがそのボタンを触れたり、タッチパネルとディスプ
レイの視差の関係でずれて押したりなど、誤った入力で
ある可能性が高いので、すぐ確認すると判定される(ス
テップS284)。領域3に入る時には、ボタンの押し
方が安定していて、正しい入力である可能性が高いの
で、後でまとめて確認を取ると判定される(ステップS
285)。このようにして、決定された内容は、対話状
態管理手段20に伝えられる(ステップS290)。
Confirmation timing determining means 30 that has received the data
Determines the timing of confirmation based on the data. FIG. 13 shows a flowchart of the determination. First, it is checked whether or not the input has a good break (step S211). If the input is well-separated, it is determined that confirmation is to be performed immediately including items that have not been confirmed so far (step S283). If the input is not well separated, the time difference from the previous input is calculated from the time stamp (step S261). Further, the time difference is compared with the average and variance of the input intervals so far to determine whether or not the deviation is large (step S262), and is used for the determination of the confirmation timing to be described later. Next, the distance between the touched position and the end of the button area is calculated (step S263). Then, reference is made to the determination criteria of the confirmation occasion shown in FIG. 16 stored in the confirmation occasion determination reference storage means 41. From the time difference from the previous input and the distance between the touched position and the edge of the button area, it is possible to know whether to enter the area 2 or the area 3. Time difference is T
When it is in the range between min and Tmax and is smaller than the distance Dmin between the touched position and the end of the button area, the area 3 is set, and the other areas are set as the area 2. Tmin and Tmax in FIG. 16, which are the criteria for determining the region,
Dmin and the like are different depending on the input state, the position and size of the button, and the like. FIG. 16 shows that Tmin and Tmax are changed, and Dmin is changed depending on the position of the button, depending on whether the input state is numeric input or command input. As a result of referring to this determination criterion, when entering the area 2, the button was pressed very quickly and intended to be pressed once, resulting in a double touch, or was it too late and hesitated to press? Since the pressed position is near the edge, it is highly likely that the input is incorrect, such as touching the button even if you intend to press the next button, or pressing due to the parallax between the touch panel and the display, so it is determined to confirm immediately. (Step S284). When entering the area 3, the button is pressed in a stable manner and there is a high possibility that the input is correct, so it is determined later that confirmation will be taken collectively (step S).
285). The contents thus determined are transmitted to the dialogue state management means 20 (step S290).

【0018】対話状態管理手段20では、確認時機判定
手段30で決定された確認時機に従い、入力の確認また
は次の入力の受付を行う。 すぐ確認をすべきと判断された時は、確認する内容
を出力情報生成手段80に送る。出力情報生成手段80
は、確認すべき項目の確認を行う時に出力すべき情報
を、出力情報記憶手段43から読み出し、情報の種類に
応じてディスプレイ92の表示を変化させたり、アンプ
91スピーカ92を通して音声メッセージを提示して、
入力者に送出する。そして、入力者は入力した情報が確
認でき、正しいか誤りがあるかをさらにタッチパネル1
3から入力する。この時に、正しい時には何も入力しな
いという割当ても可能である。誤りがある場合は誤りを
修正する。対話状態管理手段20は、入力者からの正し
いか誤りがあるかの入力に応じて、対話状態記憶手段4
2に確認ができた項目に対しては、確認ができたことを
記録し、誤りがあった入力に対しては訂正を加えて対話
状態を更新し、次の入力を受け付ける状態になる。
The dialogue state management means 20 confirms the input or accepts the next input according to the confirmation time determined by the confirmation time determination means 30. When it is determined that the confirmation should be performed immediately, the confirmation content is sent to the output information generating means 80. Output information generating means 80
Reads the information to be output when confirming the items to be confirmed from the output information storage means 43, changes the display on the display 92 according to the type of information, and presents a voice message through the amplifier 91 speaker 92. hand,
Send to the input person. Then, the input person can confirm the entered information, and further confirm whether the information is correct or incorrect.
Enter from 3. At this time, it is possible to assign nothing when it is correct. If there is an error, correct it. The dialogue state management means 20 responds to an input from the input person as to whether the dialogue state storage means 4 is correct or incorrect.
For items that can be confirmed in 2, the confirmation is recorded, and if there is an error, the dialog state is updated by making a correction and the next input is accepted.

【0019】 あとでまとめて確認をすべきと判断さ
れた時は、今回の入力項目は入力されたがまだ確認され
ていない項目として、対話状態記憶手段42に記録し、
次の入力受け付ける状態にする。次の入力を受け付ける
状態になった時には、必要に応じて次の入力を促す表示
をするために、出力情報生成手段80に入力を促すディ
スプレイ表示や、音声メッセージを出力するように命令
する。出力情報生成手段80は、出力情報記憶手段43
を読み出し、ディスプレイ92の表示を変更したり、音
声合成装置81、アンプ91およびスピーカ92を通し
て音声メッセージを出力する。以上の流れを、入力が終
了するまで繰り返すことで情報入力作業が遂行される。
When it is later determined that the items should be collectively checked, the input item of this time is recorded in the dialogue state storage means 42 as an item which has been input but not yet confirmed,
The next input is accepted. When the state of accepting the next input is entered, the output information generating unit 80 is instructed to display a display prompting the input or to output a voice message in order to display the prompt for the next input as necessary. The output information generation means 80 is the output information storage means 43.
To change the display on the display 92 or output a voice message through the voice synthesizer 81, the amplifier 91 and the speaker 92. The information input work is performed by repeating the above flow until the input is completed.

【0020】本実施例によれば、タッチパネルによる情
報の入力において、確認時機の判定、確認の処理の各過
程を通じて、音声の出力による適切な入力の案内のメッ
セージを入力者に伝える場合において、音声のメッセー
ジを出力することによる時間の消費を最小限に押さえ
て、誤りのない効率のよい入力をすることができる。
According to the present embodiment, in inputting information on the touch panel, when a message of an appropriate input guidance by voice output is transmitted to the input person through each process of determination of confirmation timing and confirmation processing, It is possible to minimize the time consumption by outputting the message and input without error.

【0021】(第四の実施例)第四の実施例は、第一の
実施例において確認時機判定基準を入力確度情報および
確認処理結果に基づいて更新するようにしたものであ
る。図17は第四の実施例のブロック構成図であり、図
1の第一の実施例の構成に確認時機判定基準計算手段5
0を追加した構成を有する。図18は第四の実施例の装
置の全体の処理動作のフローチャートである。まず入力
者はマイクロホン11に向かって、入力する項目を発声
する。マイクロホン11から入力された音声は、音声認
識装置12によって認識される。音声認識装置12の出
力情報は、第一候補の認識結果とそのスコア、および、
第一候補と第二候補の認識スコアの差である。これら
の、音声認識装置12の出力情報は、対話状態管理手段
20へ渡される。対話状態管理手段20は、対話状態記
憶手段42を参照して、今までに入力されているが未確
認の項目の数を数えて、その数とともに音声認識の出力
データを確認時機判定手段30に伝送する。
(Fourth Embodiment) In the fourth embodiment, the confirmation timing judgment criterion in the first embodiment is updated based on the input accuracy information and the confirmation processing result. FIG. 17 is a block diagram of the configuration of the fourth embodiment. In the configuration of the first embodiment of FIG.
It has a configuration in which 0 is added. FIG. 18 is a flow chart of the overall processing operation of the apparatus of the fourth embodiment. First, the input person speaks into the microphone 11 for an item to be input. The voice input from the microphone 11 is recognized by the voice recognition device 12. The output information of the voice recognition device 12 is the recognition result of the first candidate and its score, and
It is the difference in recognition score between the first and second candidates. The output information of the voice recognition device 12 is passed to the dialogue state management means 20. The dialogue state management means 20 refers to the dialogue state storage means 42, counts the number of items that have been input so far but is not confirmed, and transmits the output data of the voice recognition together with the number to the confirmation time determination means 30. To do.

【0022】確認時機判定手段30は、対話状態管理手
段20から渡されたデータをもとに確認時機を判定す
る。その判定の手順のフローチャートを図19に示す。
まず、対話状態管理手段20からデータを受け取り(ス
テップS201)、入力された項目が最後の入力か否か
を判定し(ステップS212)、最後の入力ならば、入
力作業を終了するために、確認を行う必要があるのです
ぐ確認をすると決定する(ステップS284)。最後の
入力でない場合は、入力された項目で未確認のものの数
を調べる(ステップS221)。その数が、3個以上あ
る場合には、確認をすぐ行うと決定する(ステップS2
84)。2個以下の場合には、図20に示す確認時機判
定基準を参照し(ステップS252)、どの領域に区分
するかを判定する(ステップS272)。図20の確認
時機判定基準は、図9と同様に音声認識の第一候補の認
識スコアと、第一候補と第二候補の認識スコアの差とに
よって規定される空間を、小領域に分割したものであ
る。各小領域は、領域2と領域3に区分されている。第
一候補の認識スコア、第一と第二候補のスコアの差か
ら、今回の入力はどの領域に入るか判定される。領域2
の場合は、第一候補が正しい可能性があるがあまり高く
ないので、すぐ確認を実施すると決定される(ステップ
S284)。領域3の場合は、第一候補が正しい可能性
が比較的高いので、後でまとめて確認をすると決定され
る(ステップS285)。決定された結果は対話状態管
理手段20に伝えられる(ステップS290)。
The confirmation time determination means 30 determines the confirmation time based on the data passed from the dialogue state management means 20. FIG. 19 shows a flowchart of the determination procedure.
First, data is received from the dialogue state management means 20 (step S201), it is determined whether or not the input item is the last input (step S212), and if it is the last input, a confirmation is made to finish the input work. Since it is necessary to perform the above, it is decided to confirm immediately (step S284). If it is not the last input, the number of unconfirmed input items is checked (step S221). If the number is 3 or more, it is determined that the confirmation will be performed immediately (step S2).
84). When the number is two or less, the confirmation timing determination reference shown in FIG. 20 is referred to (step S252), and it is determined which area to divide (step S272). 20, the space defined by the recognition score of the first candidate of voice recognition and the difference between the recognition scores of the first candidate and the second candidate is divided into small regions. It is a thing. Each small area is divided into an area 2 and an area 3. From which recognition score of the first candidate and the difference between the scores of the first and second candidates, it is determined which region the input this time belongs to. Area 2
In the case of 1, there is a high possibility that the first candidate is correct, but since it is not so high, it is determined to perform confirmation immediately (step S284). In the case of region 3, the first candidate has a relatively high probability of being correct, so it is determined to collectively confirm later (step S285). The determined result is transmitted to the dialogue state management means 20 (step S290).

【0023】対話状態管理手段20は、確認時機判定手
段30から伝えられた確認時機に従い、確認作業あるい
は、次の入力の受付を行う。確認作業のフローチャート
を図21に示す。まず対話状態管理手段20は、対話状
態記憶手段42から今まで確認されていない項目を読み
出し、出力情報生成手段80に確認するためのメッセー
ジを出力するように命令する。出力情報生成手段80は
出力情報記憶手段43を参照してアンプ91とスピーカ
92を通して確認されていない情報の確認に必要なメッ
セージを出力する(ステップS501)。
The dialogue state management means 20 carries out confirmation work or accepts the next input according to the confirmation time transmitted from the confirmation time determination means 30. FIG. 21 shows a flowchart of the confirmation work. First, the dialogue state management means 20 reads an item that has not been confirmed so far from the dialogue state storage means 42, and instructs the output information generation means 80 to output a confirmation message. The output information generation means 80 refers to the output information storage means 43 and outputs a message required for confirmation of information not confirmed through the amplifier 91 and the speaker 92 (step S501).

【0024】入力者は、確認のために必要なメッセージ
を聞いた入力事項に誤りがない場合は肯定の意味を持つ
無言か同じ意味を持つ「はい」とマイクロホン11に入
力する。対話状態管理手段20は、入力者からの入力を
監視し(ステップS502)、入力があったときにはそ
の入力が「はい」であるかを否かを調べ(ステップS5
11、ステップS512)、入力がないときには一定時
間以上入力がないかを調べる(ステップS503)。そ
の結果、音声認識装置12によって「はい」と認識結果
が出た時と、一定時間無言でいた時には、対話状態管理
手段20は対話状態記憶手段42の内容を、今回確認し
た項目を確認済の状態に変更する(ステップS53
2)。そして、次の入力を受けつける状態にする(ステ
ップS533)。
If there is no error in the input matter that the input person has heard the message necessary for confirmation, the input person inputs "Yes", which is a silent word having the affirmative meaning or the same meaning, into the microphone 11. The dialogue state management means 20 monitors the input from the input person (step S502), and when there is an input, checks whether or not the input is "yes" (step S5).
11, step S512), if there is no input, it is checked whether there is no input for a certain period of time (step S503). As a result, when the voice recognition device 12 outputs a recognition result of "yes" or when the speech recognition device 12 is silent for a certain period of time, the dialogue state management means 20 confirms the contents of the dialogue state storage means 42 for the items confirmed this time. Change to state (step S53)
2). Then, the next input is received (step S533).

【0025】一方、入力者は、入力事項に誤りを見つけ
た時には、否定の意味を持つ「いいえ」とマイクロホン
11に入力するか、正しい入力内容を言い直す。音声認
識装置12によって「いいえ」と認識結果が出た時に
は、対話状態管理手段20は対話状態記憶手段42の内
容を今回確認をした項目を否定された状態に変更する
(ステップS521、ステップS532)。否定された
項目に関しては、普通の入力と同じ手順で再入力を行う
(ステップS553)。言い直しを行った時には、今回
認識した項目を否定された状態に変更し(ステップS5
51、ステップS552)、続けてその言い直しの認識
結果を持って確認時機判定からやり直しをする(ステッ
プS553)。次の入力受けつける時には、対話状態管
理手段20は、出力情報生成手段80に次の入力を促す
命令を伝える。出力情報生成手段80では、出力情報記
憶手段43を参照し、アンプ91とスピーカ92に対し
て次の入力を促すメッセージを出力する。入力者はメッ
セージに応じて前の入力と同様に次の入力を行う。この
ようにしてすべての項目の入力が終了するまで入力を繰
り返す。
On the other hand, when the input person finds an error in the input matter, he / she inputs "No" having a negative meaning to the microphone 11 or re-states the correct input content. When the voice recognition device 12 gives a recognition result of "No", the dialogue state management means 20 changes the contents of the dialogue state storage means 42 to the negated state of the item confirmed this time (steps S521, S532). . The denied item is re-input by the same procedure as the normal input (step S553). When rephrasing, the item recognized this time is changed to the denied state (step S5).
51, step S552), and then repeats from the confirmation time determination with the recognition result of the rewording (step S553). At the time of accepting the next input, the dialogue state management means 20 transmits a command for prompting the next input to the output information generation means 80. The output information generation means 80 refers to the output information storage means 43 and outputs a message prompting the next input to the amplifier 91 and the speaker 92. The input person makes the next input in the same manner as the previous input in response to the message. In this way, input is repeated until input of all items is completed.

【0026】上記の情報入力手続と平行して本実施例の
システムは、確認時機判定基準の変更を行う。変更を行
う時機は、確認作業が発生した時にすぐ行う方法や、入
力した情報がある一定量たまった時に行う方法などが考
えられるが、ここでは一通りの入力が終了して入力者が
装置から離れた時に行う方法を示す。そのフローチャー
トを図22に示す。一通りの入力作業が終了した時点で
対話状態管理手段20は、確認時機判定基準変更手段5
0に確認時機判定基準を書き換えるように命令する。確
認時機判定基準変更手段50はまず、確認時機判定基準
記憶手段42から、図23に示すように各小領域毎に記
憶してある、その小領域に分類されるスコアの音声認識
結果に対して、それまでの入力回数と確認の時に正しい
と認められた正しい認識の回数の2つで示される認識成
果をすべて読み込む(ステップS801)。次に、対話
状態記憶手段42から、その時の一連の入力作業で入力
された、確認のすんだ入力項目の認識結果と第一候補の
認識スコアと第一候補と第二候補の認識スコアの差と確
認の結果肯定されたか否定されたかを一項目ずつ読み込
む(ステップS802)。各項目の第一候補の認識スコ
アと第一候補と第二候補の認識スコアの差とから、どの
小領域に該当するか判定し、おのおのの項目の認識結果
があとの確認作業で肯定されたか否定されたかによっ
て、すなわち認識結果が正解であったか不正解であった
かによって、その小領域の認識成果を変更する。つま
り、正解であった時には正解の数と入力回数を、不正解
であった時には入力回数のみを一つ増加させる(ステッ
プS803)。全部の入力項目に対して変更が加えられ
たら、正解数を入力回数で割ることで、それぞれの小領
域の認識率を計算する(ステップS805)。計算した
結果、図24に示すようなあらかじめ決められた基準に
従って、各小領域を領域1から領域4までの領域に区分
し直す(ステップS806)。その結果を確認時機判定
基準記憶手段42に書き直すことによって(ステップS
807)、作業は終了する。次からの入力に対しては、
新しい判定基準を利用する。
In parallel with the above-mentioned information input procedure, the system of this embodiment changes the confirmation timing judgment criterion. There are two possible ways to make changes: immediately when a confirmation operation occurs, or when a certain amount of entered information has accumulated. Here's how to do it when you're away. The flowchart is shown in FIG. At the time when one set of input work is completed, the dialogue state management means 20 confirms the confirmation timing judgment criterion changing means 5
Command 0 to rewrite the confirmation criterion. The confirmation timing determination criterion changing unit 50 firstly detects, from the confirmation timing determination criterion storage unit 42, voice recognition results of scores classified into the small regions, which are stored for each small region as shown in FIG. , All the recognition results indicated by the number of inputs up to that point and the number of correct recognitions recognized as correct at the time of confirmation are read (step S801). Next, the difference between the recognition result of the confirmed input item, the recognition score of the first candidate, and the recognition score of the first candidate and the second candidate, which are input by the series of input operations at that time, from the dialogue state storage means 42. As a result of the confirmation, whether the result is affirmative or negative is read one by one (step S802). Based on the recognition score of the first candidate and the difference between the recognition scores of the first candidate and the second candidate for each item, it was determined which sub-region they corresponded to, and whether the recognition result for each item was affirmed in the subsequent confirmation work. The recognition result of the small area is changed depending on whether it is denied, that is, whether the recognition result is a correct answer or an incorrect answer. That is, when the answer is correct, the number of correct answers and the number of inputs are increased, and when the answer is incorrect, only the number of inputs is increased by one (step S803). When all input items have been changed, the recognition rate of each small area is calculated by dividing the number of correct answers by the number of inputs (step S805). As a result of the calculation, each small area is redivided into areas 1 to 4 according to a predetermined criterion as shown in FIG. 24 (step S806). By rewriting the result in the confirmation time criterion storage means 42 (step S
807), the work ends. For the following input,
Use new criteria.

【0027】本第四の実施例によれば、第三の実施例と
同様の効果を得ることができる外に、判断基準を入力に
対する認識結果が正解であったか不正解であったかに応
じて更新することにより判断基準の学習を行っているの
で、判断基準が使用者に応じて最適化され、入力速度を
向上させることができる。
According to the fourth embodiment, the same effect as that of the third embodiment can be obtained, and the judgment criterion is updated according to whether the recognition result for the input is correct or incorrect. Since the judgment criterion is learned by this, the judgment criterion is optimized according to the user, and the input speed can be improved.

【0028】[0028]

【発明の効果】本発明によれば、入力者によって情報が
入力されると、その情報の確度や重要性を推定し、その
推定結果に応じて確認作業を行う時機を判定し、判定さ
れた確認作業の時機が来た時に確認作業を行うようにし
たので、入力された情報に応じて最適な確認の時機を得
ることが可能となる。このように、本発明によれば、最
適な時機に入力情報の確認作業を行うので、確認作業に
要する時間と、入力者にあたえる煩わしさとを最小限に
することができる。また、本発明によれば、判断基準を
入力に対する認識結果が正解であったか不正解であった
かに応じて更新することにより判断基準の学習を行って
いるので、判断基準が使用者に応じて最適化され、入力
速度を向上させることができる。
According to the present invention, when information is input by an input person, the accuracy and importance of the information is estimated, and the timing of the confirmation work is determined according to the estimation result, and the determination is made. Since the confirmation work is performed when the time comes for the confirmation work, it is possible to obtain the optimum time for confirmation according to the input information. As described above, according to the present invention, the confirmation work of the input information is performed at an optimum time, so that the time required for the confirmation work and the troublesomeness of the input person can be minimized. Further, according to the present invention, since the criterion is learned by updating the criterion according to whether the recognition result for the input is correct or incorrect, the criterion is optimized according to the user. Therefore, the input speed can be improved.

【図面の簡単な説明】[Brief description of drawings]

【図1】 この発明の請求項1の方法を示すフローチャ
ート
FIG. 1 is a flowchart showing a method according to claim 1 of the present invention.

【図2】 同発明を実施するための装置の構成を示すブ
ロック構成図
FIG. 2 is a block configuration diagram showing a configuration of an apparatus for carrying out the present invention.

【図3】 この発明の請求項2の装置の処理手順を示す
フローチャート
FIG. 3 is a flowchart showing a processing procedure of the apparatus according to claim 2 of the present invention.

【図4】 同発明の装置のブロック構成図FIG. 4 is a block diagram of the device of the invention.

【図5】 本発明の効果の説明図FIG. 5 is an explanatory diagram of the effect of the present invention.

【図6】 本発明を音声認識に適用した第一の実施例の
ブロック構成図
FIG. 6 is a block configuration diagram of a first embodiment in which the present invention is applied to voice recognition.

【図7】 第一の実施例の確認時機判定手順を示すフロ
ーチャート
FIG. 7 is a flowchart showing a confirmation timing determination procedure of the first embodiment.

【図8】 第一の実施例に用いる確認時機判定基準の重
要語リストの一例を示す図
FIG. 8 is a diagram showing an example of an important word list of confirmation timing judgment criteria used in the first embodiment.

【図9】 第一の実施例に用いる確認時機判定基準の概
念図
FIG. 9 is a conceptual diagram of confirmation timing judgment criteria used in the first embodiment.

【図10】 第一の実施例の情報入力対話の様子を示す
FIG. 10 is a diagram showing a state of an information input dialogue according to the first embodiment.

【図11】 第二の実施例に用いる確認時機判定基準の
概念図
FIG. 11 is a conceptual diagram of confirmation timing determination criteria used in the second embodiment.

【図12】 タッチパネル入力に本発明を適用した第三
の実施例のブロック構成図
FIG. 12 is a block diagram of a third embodiment in which the present invention is applied to touch panel input.

【図13】 第三の実施例の確認時機判定手順を示すフ
ローチャート
FIG. 13 is a flowchart showing a confirmation timing determination procedure of the third embodiment.

【図14】 第三の実施例のタッチパネルの表示例を示
す図
FIG. 14 is a diagram showing a display example of a touch panel according to a third embodiment.

【図15】 第三の実施例のタッチパネルの拡大図FIG. 15 is an enlarged view of the touch panel of the third embodiment.

【図16】 第二の実施例に用いる確認時機判定基準の
概念図
FIG. 16 is a conceptual diagram of confirmation timing determination criteria used in the second embodiment.

【図17】 第四の実施例のブロック構成図FIG. 17 is a block configuration diagram of a fourth embodiment.

【図18】 第四の実施例の全体のフローチャートFIG. 18 is an overall flowchart of the fourth embodiment.

【図19】 第四の実施例の確認時機判定手順を示すフ
ローチャート
FIG. 19 is a flow chart showing a confirmation timing determination procedure of the fourth embodiment.

【図20】 第四の実施例に適用する確認時機判定基準
の概念図
FIG. 20 is a conceptual diagram of confirmation timing judgment criteria applied to the fourth embodiment.

【図21】 第四の実施例の確認作業の手順を示すフロ
ーチャート
FIG. 21 is a flowchart showing the procedure of the confirmation work of the fourth embodiment.

【図22】 第四の実施例の確認時機判定基準変更の手
順を示すフローチャート
FIG. 22 is a flow chart showing the procedure for changing the judgment criteria for the confirmation time according to the fourth embodiment.

【図23】 第四の実施例における確認時機判定基準変
更用データの概念図
FIG. 23 is a conceptual diagram of data for changing the judgment criterion at the time of confirmation in the fourth embodiment.

【図24】 第四の実施例における確認時機判定基準変
更基準の一例
FIG. 24 is an example of a confirmation timing change criterion change criterion in the fourth embodiment.

【符号の説明】[Explanation of symbols]

10・・情報入力手段、20・・対話状態管理手段、3
0・・確認時機判定手段、40・・記録手段、41・・
確認時機判定基準記憶手段、42・・対話状態記録手
段、43・・出力情報記憶手段、50・・確認時機判定
基準計算手段、80・・出力情報生成手段、90・・情
報出力手段。
10 ... Information input means, 20 ... Dialogue state management means, 3
0 ... Confirmation timing determination means, 40 ... Recording means, 41 ...
Confirmation timing determination reference storage means, 42 ... Dialogue state recording means, 43 ... Output information storage means, 50 ... Confirmation timing determination reference calculation means, 80 ... Output information generation means, 90 ... Information output means.

Claims (2)

【特許請求の範囲】[Claims] 【請求項1】 情報の入力毎に、入力された情報の評価
情報に基づいて入力された情報の確認時機を判断し、そ
の判断の結果、確認時機であったときに、情報が正しく
入力されたか否かの確認処理を実行することを特徴とす
る情報入力方法。
1. Each time information is input, the timing of confirmation of the input information is determined based on the evaluation information of the input information, and as a result of the determination, the information is correctly input when the confirmation timing is reached. An information input method, characterized in that confirmation processing is performed.
【請求項2】 情報の入力毎に、入力された情報の評価
情報に基づいて入力された情報の確認時機を判断する判
断手段と、 前記判断において参照する判断時機判定基準を記憶する
判定基準記憶手段と、 判断手段により判断された確認時機に、情報が正しく入
力されたか否かの確認処理を実行する確認処理手段と、 前記入力確度情報および確認処理結果を記憶する記憶手
段と、 前記記憶手段の内容に基づいて前記判断基準を最適化し
て更新する更新手段とを具備することを特徴とする情報
入力装置。
2. A judgment means for judging the timing of confirmation of the inputted information based on the evaluation information of the inputted information every time the information is inputted, and a criterion storing memory for storing the criterion of the determination occasion referred to in the judgment. Means, confirmation processing means for performing confirmation processing as to whether or not information is correctly input at the confirmation time determined by the determination means, storage means for storing the input accuracy information and confirmation processing result, and the storage means An information input device comprising: an updating unit for optimizing and updating the determination criterion based on the content of
JP13966394A 1994-05-31 1994-05-31 Information input method and device for executing its method Pending JPH07325597A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP13966394A JPH07325597A (en) 1994-05-31 1994-05-31 Information input method and device for executing its method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP13966394A JPH07325597A (en) 1994-05-31 1994-05-31 Information input method and device for executing its method

Publications (1)

Publication Number Publication Date
JPH07325597A true JPH07325597A (en) 1995-12-12

Family

ID=15250526

Family Applications (1)

Application Number Title Priority Date Filing Date
JP13966394A Pending JPH07325597A (en) 1994-05-31 1994-05-31 Information input method and device for executing its method

Country Status (1)

Country Link
JP (1) JPH07325597A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008108174A (en) * 2006-10-27 2008-05-08 Fujitsu Ltd Information processor with information input support function
JP2009251019A (en) * 2008-04-01 2009-10-29 Toyota Motor Corp Speech recognition device
JP2009541800A (en) * 2006-06-22 2009-11-26 マルチモダル テクノロジーズ,インク. Speech recognition method
JP2019105904A (en) * 2017-12-11 2019-06-27 トヨタ自動車株式会社 Service providing apparatus, service providing program and method for providing service by speech recognition

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009541800A (en) * 2006-06-22 2009-11-26 マルチモダル テクノロジーズ,インク. Speech recognition method
US8768694B2 (en) 2006-06-22 2014-07-01 Mmodal Ip Llc Verification of extracted data
JP2014197223A (en) * 2006-06-22 2014-10-16 マルチモーダル・テクノロジーズ・エルエルシー Speech recognition method
US9892734B2 (en) 2006-06-22 2018-02-13 Mmodal Ip Llc Automatic decision support
JP2008108174A (en) * 2006-10-27 2008-05-08 Fujitsu Ltd Information processor with information input support function
JP2009251019A (en) * 2008-04-01 2009-10-29 Toyota Motor Corp Speech recognition device
JP2019105904A (en) * 2017-12-11 2019-06-27 トヨタ自動車株式会社 Service providing apparatus, service providing program and method for providing service by speech recognition

Similar Documents

Publication Publication Date Title
JP3662780B2 (en) Dialogue system using natural language
US5860059A (en) Transaction system based on a bidirectional speech channel by status graph building and problem detection for a human user
JP3284832B2 (en) Speech recognition dialogue processing method and speech recognition dialogue device
US5855002A (en) Artificially intelligent natural language computational interface system for interfacing a human to a data processor having human-like responses
CN106537492B (en) Vehicle operation device with the Correction Strategies for speech recognition
US20020123894A1 (en) Processing speech recognition errors in an embedded speech recognition system
JP2005331882A (en) Voice recognition device, method, and program
DE112008001334T5 (en) Voice recognition device
US20030065515A1 (en) Information processing system and method operable with voice input command
JP2002132287A (en) Speech recording method and speech recorder as well as memory medium
US6879953B1 (en) Speech recognition with request level determination
JPH07325597A (en) Information input method and device for executing its method
JP4604377B2 (en) Voice recognition device
JP2008275987A (en) Speech recognition device and conference system
JPH06130985A (en) Voice recognizing device
JP3718088B2 (en) Speech recognition correction method
JPH0830290A (en) Voice input possible information processing device and its malprocessing detection method
JPH0432900A (en) Sound recognizing device
JP2005258235A (en) Interaction controller with interaction correcting function by feeling utterance detection
JPH08335094A (en) Voice input method and device for executing this method
JPH09114579A (en) Pointing calling confirmation system
JPH064264A (en) Voice input/output system
KR102543926B1 (en) User Equipment with Artificial Inteligence for Forign Language Education and Method for Forign Language Education
JPH08259124A (en) Voice recognizing device for elevator
JP3611533B2 (en) Interactive information providing apparatus, interactive information providing processing method, program, and recording medium