JP2002259114A - 音声認識コンピュータシステム - Google Patents
音声認識コンピュータシステムInfo
- Publication number
- JP2002259114A JP2002259114A JP2001060720A JP2001060720A JP2002259114A JP 2002259114 A JP2002259114 A JP 2002259114A JP 2001060720 A JP2001060720 A JP 2001060720A JP 2001060720 A JP2001060720 A JP 2001060720A JP 2002259114 A JP2002259114 A JP 2002259114A
- Authority
- JP
- Japan
- Prior art keywords
- voice
- voice command
- computer system
- command
- list
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
(57)【要約】
【課題】 利用者が表示画面上の表示により次に操作す
べき音声コマンドを容易に短時間で探し出すことができ
るようにした音声認識コンピュータシステムを提供す
る。 【解決手段】 利用者による音声コマンドを認識する音
声コマンド認識手段１２，１３と、音声コマンド認識手
段により認識されたコマンドに基づいてアプリケーショ
ンを制御する制御手段１５と、を備えた音声認識コンピ
ュータシステム１０であって、利用者が次にすべき操作
を表わす音声コマンドの一覧を表示する音声コマンド一
覧表示手段１４，１７と、上記アプリケーションの制御
手段による状態変化通知を取得する取得手段１５と、上
記アプリケーションの状態変化に基づいて、次に発声す
べき音声コマンドの一覧を更新する音声コマンド一覧更
新手段１４と、を設ける。
べき音声コマンドを容易に短時間で探し出すことができ
るようにした音声認識コンピュータシステムを提供す
る。 【解決手段】 利用者による音声コマンドを認識する音
声コマンド認識手段１２，１３と、音声コマンド認識手
段により認識されたコマンドに基づいてアプリケーショ
ンを制御する制御手段１５と、を備えた音声認識コンピ
ュータシステム１０であって、利用者が次にすべき操作
を表わす音声コマンドの一覧を表示する音声コマンド一
覧表示手段１４，１７と、上記アプリケーションの制御
手段による状態変化通知を取得する取得手段１５と、上
記アプリケーションの状態変化に基づいて、次に発声す
べき音声コマンドの一覧を更新する音声コマンド一覧更
新手段１４と、を設ける。
Description
【０００１】
【発明の属する技術分野】本発明は、音声認識コンピュ
ータシステムに関し、特に音声による操作指示を受け付
けるＧＵＩ環境を備えた音声認識コンピュータシステム
に関する。
ータシステムに関し、特に音声による操作指示を受け付
けるＧＵＩ環境を備えた音声認識コンピュータシステム
に関する。
【０００２】
【従来の技術】従来、このようなＧＵＩ（ｇｒａｐｈｉ
ｃａｌ ｕｓｅｒ ｉｎｔｅｒｆａｃｅ）環境を備えた
音声認識コンピュータシステムは、例えば特開平１０−
２２２３３７号に開示されている。この音声認識コンピ
ュータシステムは、図９に示すように構成されている。
図９において、音声認識コンピュータシステム１００
は、マイク１０１で取り込んだ利用者の音声コマンド
を、音声認識部１０２にてキーワードとして認識し、認
識したキーワードを変換部１０３により、前もって登録
された変換テーブル（キーワード対制御コマンドテーブ
ル）１０４に従って、システムソフトウェア１０５の制
御コマンドに変換する。
ｃａｌ ｕｓｅｒ ｉｎｔｅｒｆａｃｅ）環境を備えた
音声認識コンピュータシステムは、例えば特開平１０−
２２２３３７号に開示されている。この音声認識コンピ
ュータシステムは、図９に示すように構成されている。
図９において、音声認識コンピュータシステム１００
は、マイク１０１で取り込んだ利用者の音声コマンド
を、音声認識部１０２にてキーワードとして認識し、認
識したキーワードを変換部１０３により、前もって登録
された変換テーブル（キーワード対制御コマンドテーブ
ル）１０４に従って、システムソフトウェア１０５の制
御コマンドに変換する。
【０００３】これにより、音声認識コンピュータシステ
ム１００は、システムソフトウェア１０５により、この
制御コマンドを実行して、表示部１０６を制御し、表示
画面１０７上にて、この制御コマンドに対応するウィン
ドウをアクティブな状態にする。そして、音声認識コン
ピュータシステム１００は、この状態から再び利用者の
音声コマンドにより、システムソフトウェア１０５の制
御コマンドを実行し、システムソフトウェア１０５にて
各種動作を行なうようになっている。
ム１００は、システムソフトウェア１０５により、この
制御コマンドを実行して、表示部１０６を制御し、表示
画面１０７上にて、この制御コマンドに対応するウィン
ドウをアクティブな状態にする。そして、音声認識コン
ピュータシステム１００は、この状態から再び利用者の
音声コマンドにより、システムソフトウェア１０５の制
御コマンドを実行し、システムソフトウェア１０５にて
各種動作を行なうようになっている。
【０００４】ところで、上述したようにウィンドウがア
クティブな状態にあるとき、利用者がどのようなキーワ
ードを音声コマンドにより入力すればよいか分からない
場合には、例えば「キーワード一覧」等の特定の音声コ
マンドをマイク１０１から入力する。これにより、音声
認識コンピュータシステム１００は、利用者からマイク
１０１を介して特定のキーワードが音声コマンドとして
入力されると、音声認識部１０２にて、この特定のキー
ワードを認識して、前もって単語辞書１０２ａに登録さ
れているキーワードあるいは現在有効なキーワードの一
覧を読み出す。
クティブな状態にあるとき、利用者がどのようなキーワ
ードを音声コマンドにより入力すればよいか分からない
場合には、例えば「キーワード一覧」等の特定の音声コ
マンドをマイク１０１から入力する。これにより、音声
認識コンピュータシステム１００は、利用者からマイク
１０１を介して特定のキーワードが音声コマンドとして
入力されると、音声認識部１０２にて、この特定のキー
ワードを認識して、前もって単語辞書１０２ａに登録さ
れているキーワードあるいは現在有効なキーワードの一
覧を読み出す。
【０００５】そして、音声認識コンピュータシステム１
００は、システムソフトウェア１０５により、表示部１
０６を制御して、このキーワードの一覧を、表示画面１
０７上に表示する。このようにして、利用者は、音声認
識コンピュータシステム１００の表示画面１０７上に表
示されたキーワードの一覧を見ながら、そのときに有効
なキーワードを見つけて、音声入力することができるよ
うになっている。
００は、システムソフトウェア１０５により、表示部１
０６を制御して、このキーワードの一覧を、表示画面１
０７上に表示する。このようにして、利用者は、音声認
識コンピュータシステム１００の表示画面１０７上に表
示されたキーワードの一覧を見ながら、そのときに有効
なキーワードを見つけて、音声入力することができるよ
うになっている。
【０００６】
【発明が解決しようとする課題】しかしながら、このよ
うな構成の音声認識コンピュータシステム１００におい
ては、ウィンドウがアクティブな状態にあるとき、利用
者がどのようなキーワードを音声コマンドにより入力す
ればよいか分からない場合には、常時キーワードの一覧
が表示されていないので、例えば「キーワード一覧」等
の特定の音声コマンドをマイク１０１から入力して、キ
ーワードの一覧を音声認識コンピュータシステム１００
の表示画面１０７上に表示させる必要がある。
うな構成の音声認識コンピュータシステム１００におい
ては、ウィンドウがアクティブな状態にあるとき、利用
者がどのようなキーワードを音声コマンドにより入力す
ればよいか分からない場合には、常時キーワードの一覧
が表示されていないので、例えば「キーワード一覧」等
の特定の音声コマンドをマイク１０１から入力して、キ
ーワードの一覧を音声認識コンピュータシステム１００
の表示画面１０７上に表示させる必要がある。
【０００７】また、キーワードの一覧を音声認識コンピ
ュータシステム１００の表示画面１０７上に表示させた
とき、キーワードの数が多いと、利用者が必要とするキ
ーワードをすぐには見つけることが困難であると共に、
表示画面１０７上に収まらない場合には、キーワードの
一覧をスクロールさせる必要がある。これは、音声認識
コンピュータシステム１００におけるキーワードの一覧
表示が、表示すべきキーワードの個数や表示順序あるい
は表示属性について考慮されていないためである。
ュータシステム１００の表示画面１０７上に表示させた
とき、キーワードの数が多いと、利用者が必要とするキ
ーワードをすぐには見つけることが困難であると共に、
表示画面１０７上に収まらない場合には、キーワードの
一覧をスクロールさせる必要がある。これは、音声認識
コンピュータシステム１００におけるキーワードの一覧
表示が、表示すべきキーワードの個数や表示順序あるい
は表示属性について考慮されていないためである。
【０００８】さらに、キーワードの一覧を音声認識コン
ピュータシステム１００の表示画面１０７上に表示させ
たとき、利用者がキーワードの内容、すなわちキーワー
ドに対応する操作内容を理解することができず、どのキ
ーワードを選択すればよいか分からないことがある。
ピュータシステム１００の表示画面１０７上に表示させ
たとき、利用者がキーワードの内容、すなわちキーワー
ドに対応する操作内容を理解することができず、どのキ
ーワードを選択すればよいか分からないことがある。
【０００９】本発明は、上記の問題を解決すべくなされ
たものであり、利用者が表示画面上の表示により次に操
作すべき音声コマンドを容易に短時間で探し出すことが
できるようにした音声認識コンピュータシステムの提供
を目的とする。
たものであり、利用者が表示画面上の表示により次に操
作すべき音声コマンドを容易に短時間で探し出すことが
できるようにした音声認識コンピュータシステムの提供
を目的とする。
【００１０】
【課題を解決するための手段】この目的を達成するた
め、本発明の請求項１記載の音声認識コンピュータシス
テムは、利用者によって発声された音声コマンドを認識
する音声コマンド認識手段と、音声コマンド認識手段に
より認識されたコマンドに基づいてアプリケーションを
制御する制御手段と、を備えた音声認識コンピュータシ
ステムであって、利用者が次にすべき操作を表わす音声
コマンドの一覧を表示する音声コマンド一覧表示手段
と、上記アプリケーションの制御手段による状態変化通
知を取得する取得手段と、上記アプリケーションの状態
変化に基づいて、次に発声すべき音声コマンドの一覧を
更新する音声コマンド一覧更新手段と、を設けた構成と
してある。
め、本発明の請求項１記載の音声認識コンピュータシス
テムは、利用者によって発声された音声コマンドを認識
する音声コマンド認識手段と、音声コマンド認識手段に
より認識されたコマンドに基づいてアプリケーションを
制御する制御手段と、を備えた音声認識コンピュータシ
ステムであって、利用者が次にすべき操作を表わす音声
コマンドの一覧を表示する音声コマンド一覧表示手段
と、上記アプリケーションの制御手段による状態変化通
知を取得する取得手段と、上記アプリケーションの状態
変化に基づいて、次に発声すべき音声コマンドの一覧を
更新する音声コマンド一覧更新手段と、を設けた構成と
してある。
【００１１】音声認識コンピュータシステムをこのよう
な構成とすると、音声認識コンピュータシステムにおい
て、利用者により音声コマンドが発声されると、音声コ
マンド認識手段が音声コマンドを認識して、制御手段が
この音声コマンドに基づいてアプリケーションを制御す
る。これにより、アプリケーションの操作が行なわれ、
アプリケーションが所望の動作を行なう。
な構成とすると、音声認識コンピュータシステムにおい
て、利用者により音声コマンドが発声されると、音声コ
マンド認識手段が音声コマンドを認識して、制御手段が
この音声コマンドに基づいてアプリケーションを制御す
る。これにより、アプリケーションの操作が行なわれ、
アプリケーションが所望の動作を行なう。
【００１２】ここで、制御手段によりアプリケーション
の制御が行なわれると、アプリケーションの状態変化が
取得手段に通知され、この取得手段により取得されたア
プリケーションの状態変化に基づいて、音声コマンド一
覧更新手段によって、利用者が次に操作すべき操作を表
わす音声コマンドの一覧が更新され、音声コマンド一覧
表示手段によって、有効な音声コマンドの一覧が例えば
コンピュータシステムの表示画面上に表示される。
の制御が行なわれると、アプリケーションの状態変化が
取得手段に通知され、この取得手段により取得されたア
プリケーションの状態変化に基づいて、音声コマンド一
覧更新手段によって、利用者が次に操作すべき操作を表
わす音声コマンドの一覧が更新され、音声コマンド一覧
表示手段によって、有効な音声コマンドの一覧が例えば
コンピュータシステムの表示画面上に表示される。
【００１３】したがって、次にすべき操作を表わす音声
コマンドの一覧が常に音声コマンド一覧表示手段によっ
て例えば表示画面上に表示されているので、利用者は、
次にどのような音声コマンドを発声すればよいか分から
ない場合、特になんらかの操作を行なうことなく、表示
された音声コマンドの一覧を見ながら、必要な音声コマ
ンドを見つけることができる。これにより、利用者は、
アプリケーションの操作方法を知らなくても、容易に当
該アプリケーションを利用することができる。
コマンドの一覧が常に音声コマンド一覧表示手段によっ
て例えば表示画面上に表示されているので、利用者は、
次にどのような音声コマンドを発声すればよいか分から
ない場合、特になんらかの操作を行なうことなく、表示
された音声コマンドの一覧を見ながら、必要な音声コマ
ンドを見つけることができる。これにより、利用者は、
アプリケーションの操作方法を知らなくても、容易に当
該アプリケーションを利用することができる。
【００１４】請求項２記載の音声認識コンピュータシス
テムは、音声コマンドの一覧における各音声コマンドの
説明を表示する音声コマンド説明表示手段を設けた構成
としてある。音声認識コンピュータシステムをこのよう
な構成とすると、音声コマンド一覧表示手段により表示
された各音声コマンドについて、その音声コマンドの説
明が音声コマンド説明表示手段により表示されるので、
利用者は、各音声コマンドの説明を読むことにより、当
該音声コマンドによる操作内容を知ることができる。
テムは、音声コマンドの一覧における各音声コマンドの
説明を表示する音声コマンド説明表示手段を設けた構成
としてある。音声認識コンピュータシステムをこのよう
な構成とすると、音声コマンド一覧表示手段により表示
された各音声コマンドについて、その音声コマンドの説
明が音声コマンド説明表示手段により表示されるので、
利用者は、各音声コマンドの説明を読むことにより、当
該音声コマンドによる操作内容を知ることができる。
【００１５】請求項３記載の音声認識コンピュータシス
テムは、上記音声コマンド一覧表示手段が、次に最も利
用されると予想される音声コマンドに対して特別な表示
属性で表示する構成としてある。音声認識コンピュータ
システムをこのような構成とすると、表示された音声コ
マンド一覧において、次にもっとも利用されると予想さ
れる音声コマンドが、特別な表示属性により、優先順位
を付されて、例えば画面上の一番上から順次に表示され
る。これにより、利用者が最も利用すると予想される音
声コマンドが見易い位置にて目立つように表示されるこ
とにより、利用者は当該音声コマンドを容易に見つける
ことができる。
テムは、上記音声コマンド一覧表示手段が、次に最も利
用されると予想される音声コマンドに対して特別な表示
属性で表示する構成としてある。音声認識コンピュータ
システムをこのような構成とすると、表示された音声コ
マンド一覧において、次にもっとも利用されると予想さ
れる音声コマンドが、特別な表示属性により、優先順位
を付されて、例えば画面上の一番上から順次に表示され
る。これにより、利用者が最も利用すると予想される音
声コマンドが見易い位置にて目立つように表示されるこ
とにより、利用者は当該音声コマンドを容易に見つける
ことができる。
【００１６】請求項４記載の音声認識コンピュータシス
テムは、上記音声コマンド一覧表示手段が、パラメータ
の異なる複数の音声コマンドについて、パラメータ部分
に関して記号によりまとめて表示する構成としてある。
音声認識コンピュータシステムをこのような構成とする
と、パラメータ部分を例えば括弧記号等の記号により括
り、あるいは表示の文字色，文字サイズ，文字フォント
等を変更して表示し、パラメータ部分を他のパラメータ
により置換可能であることを表現することにより、一覧
表示すべき音声コマンドの数を低減し、見易い画面表示
にすることができる。
テムは、上記音声コマンド一覧表示手段が、パラメータ
の異なる複数の音声コマンドについて、パラメータ部分
に関して記号によりまとめて表示する構成としてある。
音声認識コンピュータシステムをこのような構成とする
と、パラメータ部分を例えば括弧記号等の記号により括
り、あるいは表示の文字色，文字サイズ，文字フォント
等を変更して表示し、パラメータ部分を他のパラメータ
により置換可能であることを表現することにより、一覧
表示すべき音声コマンドの数を低減し、見易い画面表示
にすることができる。
【００１７】請求項５記載の音声認識コンピュータシス
テムは、上記音声コマンド認識手段が、音声コマンドの
使い方の問い合わせコマンドを含んでいる構成としてあ
る。音声認識コンピュータシステムをこのような構成と
すると、利用者が問い合わせコマンドを発声することに
より、問い合わせコマンドに対応した説明が表示され
る。
テムは、上記音声コマンド認識手段が、音声コマンドの
使い方の問い合わせコマンドを含んでいる構成としてあ
る。音声認識コンピュータシステムをこのような構成と
すると、利用者が問い合わせコマンドを発声することに
より、問い合わせコマンドに対応した説明が表示され
る。
【００１８】請求項６記載の音声認識コンピュータシス
テムは、アプリケーションの動作中に、当該アプリケー
ションの一般的な操作方法を表示する操作方法提示手段
と、上記一般的な操作方法に対応する音声コマンドの例
示を行なう音声コマンド例示手段と、を設けた構成とし
てある。音声認識コンピュータシステムをこのような構
成とすると、利用者がまだ利用したことがない、あるい
はあまり利用したことがないアプリケーションを利用す
る場合に、操作方法提示手段により一般的な操作方法が
表示され、この一般的な操作方法に対応する音声コマン
ドの例が、音声コマンド例示手段によって表示されるの
で、利用者はアプリケーションの操作方法を知らなくて
も、当該アプリケーションを迷うことなく確実に操作す
ることができる。
テムは、アプリケーションの動作中に、当該アプリケー
ションの一般的な操作方法を表示する操作方法提示手段
と、上記一般的な操作方法に対応する音声コマンドの例
示を行なう音声コマンド例示手段と、を設けた構成とし
てある。音声認識コンピュータシステムをこのような構
成とすると、利用者がまだ利用したことがない、あるい
はあまり利用したことがないアプリケーションを利用す
る場合に、操作方法提示手段により一般的な操作方法が
表示され、この一般的な操作方法に対応する音声コマン
ドの例が、音声コマンド例示手段によって表示されるの
で、利用者はアプリケーションの操作方法を知らなくて
も、当該アプリケーションを迷うことなく確実に操作す
ることができる。
【００１９】
【発明の実施の形態】以下、本発明の実施の形態につい
て、図面を参照して説明する。まず、本発明の音声認識
コンピュータシステムの第一の実施形態について、図１
〜図５を参照して説明する。図１は、本発明による音声
認識コンピュータシステムの構成を示す図である。
て、図面を参照して説明する。まず、本発明の音声認識
コンピュータシステムの第一の実施形態について、図１
〜図５を参照して説明する。図１は、本発明による音声
認識コンピュータシステムの構成を示す図である。
【００２０】図１において、音声認識コンピュータシス
テム１０は、音声入力部１１と、音声コマンド認識手段
としての音声認識部１２及びキーワード抽出部１３と、
制御手段としての状態管理部１４及びアプリケーション
Ｉ／Ｆ部１５と、音声出力部１６と、音声コマンド一覧
表示手段としての表示部１７と、から構成されている。
テム１０は、音声入力部１１と、音声コマンド認識手段
としての音声認識部１２及びキーワード抽出部１３と、
制御手段としての状態管理部１４及びアプリケーション
Ｉ／Ｆ部１５と、音声出力部１６と、音声コマンド一覧
表示手段としての表示部１７と、から構成されている。
【００２１】上記音声入力部１１は、例えばマイクロフ
ォン等から構成されており、利用者が発声した音声を取
り込んで、電気信号（音声信号）に変換する。
ォン等から構成されており、利用者が発声した音声を取
り込んで、電気信号（音声信号）に変換する。
【００２２】上記音声認識部１２は、音声認識辞書１２
ａを備えており、音声入力部１１からの音声信号を、音
声認識辞書１２ａに登録されている単語と照合して、一
致する単語群すなわちフレーズを認識結果としてキーワ
ード抽出部１３に出力する。ここで、音声認識辞書１２
ａは、登録されている単語のうち、操作の内容を決定付
ける単語には、予めキーワードが付されている。例えば
「メール」，「メッセージ」という単語に対しては、
「Ｍａｉｌ」というキーワードが、また「見る」，「見
せて」，「表示」という単語に対しては、「Ｇｅｔ」と
いうキーワードが付されている。そして、音声認識部１
２は、認識結果のフレーズと共に、このフレーズに含ま
れる単語にキーワードが付されている場合には、当該キ
ーワードもキーワード抽出部１３に出力する。
ａを備えており、音声入力部１１からの音声信号を、音
声認識辞書１２ａに登録されている単語と照合して、一
致する単語群すなわちフレーズを認識結果としてキーワ
ード抽出部１３に出力する。ここで、音声認識辞書１２
ａは、登録されている単語のうち、操作の内容を決定付
ける単語には、予めキーワードが付されている。例えば
「メール」，「メッセージ」という単語に対しては、
「Ｍａｉｌ」というキーワードが、また「見る」，「見
せて」，「表示」という単語に対しては、「Ｇｅｔ」と
いうキーワードが付されている。そして、音声認識部１
２は、認識結果のフレーズと共に、このフレーズに含ま
れる単語にキーワードが付されている場合には、当該キ
ーワードもキーワード抽出部１３に出力する。
【００２３】上記キーワード抽出部１３は、音声認識部
１２で認識されたフレーズから、キーワードを抽出す
る。例えば、認識されたフレーズが「メールを見せて」
である場合、キーワード抽出部１３は、「Ｍａｉｌ」及
び「Ｇｅｔ」という二つのキーワードを抽出する。
１２で認識されたフレーズから、キーワードを抽出す
る。例えば、認識されたフレーズが「メールを見せて」
である場合、キーワード抽出部１３は、「Ｍａｉｌ」及
び「Ｇｅｔ」という二つのキーワードを抽出する。
【００２４】上記状態管理部１４は、動作決定ルール１
４ａを備えており、キーワード抽出部１３にて抽出され
たキーワードに基づいて、動作決定ルール１４ａを参照
して、キーワードのセットが一致する動作決定のブロッ
クを検索して読み出すことにより、アプリケーションに
よる動作を決定して、アプリケーションＩ／Ｆ部１５に
制御コマンドを送出する。また、上記状態管理部１４
は、アプリケーションＩ／Ｆ部１５におけるアプリケー
ション１８の操作時の実行結果（成功または失敗）を判
別して、成功または失敗時におけるメッセージ及びその
ときに表示すべき音声コマンドの一覧を動作決定ルール
１４ａから取得して、音声コマンド一覧更新手段として
音声コマンドの一覧を更新する。ここで、動作決定ルー
ル１４ａは、キーワードのセットに対して、アプリケー
ションをどのように操作するか、そしてその操作の前，
操作成功時及び操作失敗時における表示及び音声出力を
定義している。
４ａを備えており、キーワード抽出部１３にて抽出され
たキーワードに基づいて、動作決定ルール１４ａを参照
して、キーワードのセットが一致する動作決定のブロッ
クを検索して読み出すことにより、アプリケーションに
よる動作を決定して、アプリケーションＩ／Ｆ部１５に
制御コマンドを送出する。また、上記状態管理部１４
は、アプリケーションＩ／Ｆ部１５におけるアプリケー
ション１８の操作時の実行結果（成功または失敗）を判
別して、成功または失敗時におけるメッセージ及びその
ときに表示すべき音声コマンドの一覧を動作決定ルール
１４ａから取得して、音声コマンド一覧更新手段として
音声コマンドの一覧を更新する。ここで、動作決定ルー
ル１４ａは、キーワードのセットに対して、アプリケー
ションをどのように操作するか、そしてその操作の前，
操作成功時及び操作失敗時における表示及び音声出力を
定義している。
【００２５】上記アプリケーションＩ／Ｆ部１５は、音
声認識コンピュータシステム１０で動作するアプリケー
ション１８に対して操作コマンドを送出して、当該アプ
リケーション１８を操作すると共に、その実行結果（成
功または失敗）を状態管理部１４に送出する。
声認識コンピュータシステム１０で動作するアプリケー
ション１８に対して操作コマンドを送出して、当該アプ
リケーション１８を操作すると共に、その実行結果（成
功または失敗）を状態管理部１４に送出する。
【００２６】上記音声出力部１６は、スピーカ等から構
成されており、状態管理部１４で決定された動作に基づ
いて、音声メッセージを出力する。上記表示部１７は、
ＣＲＴ，液晶表示装置等から構成されており、状態管理
部１４で決定された動作に基づいて、次に利用者が発声
すべき音声コマンドの一覧を表示画面上にて表示する。
成されており、状態管理部１４で決定された動作に基づ
いて、音声メッセージを出力する。上記表示部１７は、
ＣＲＴ，液晶表示装置等から構成されており、状態管理
部１４で決定された動作に基づいて、次に利用者が発声
すべき音声コマンドの一覧を表示画面上にて表示する。
【００２７】次に、本実施形態による音声認識コンピュ
ータシステム１０の動作について、図２のフローチャー
トを参照して説明する。図２において、先ずステップＡ
１にて、利用者が音声コマンドを発声して、音声入力部
１１に音声が入力されると、音声入力部１１は、この音
声を検出して、音声信号に変換して、音声認識部１２に
出力する。
ータシステム１０の動作について、図２のフローチャー
トを参照して説明する。図２において、先ずステップＡ
１にて、利用者が音声コマンドを発声して、音声入力部
１１に音声が入力されると、音声入力部１１は、この音
声を検出して、音声信号に変換して、音声認識部１２に
出力する。
【００２８】次に、ステップＡ２にて、音声認識部１２
は、音声入力部１１からの音声信号を、音声認識辞書１
２ａに登録されている単語と照合して、一致する単語群
すなわちフレーズを認識結果としてキーワード抽出部１
３に出力する。その際、認識結果のフレーズに含まれる
単語にキーワードが付されている場合には、音声認識部
１２は、そのキーワードもキーワード抽出部１３に出力
する。例えば、認識結果のフレーズが「メールを見せ
て」である場合には、音声認識部１２は、「メールを見
せて」というフレーズと共に、「メール」及び「見せ
て」にそれぞれ付与された「Ｍａｉｌ」及び「Ｇｅｔ」
のキーワードを、キーワード抽出部１３に出力する。
は、音声入力部１１からの音声信号を、音声認識辞書１
２ａに登録されている単語と照合して、一致する単語群
すなわちフレーズを認識結果としてキーワード抽出部１
３に出力する。その際、認識結果のフレーズに含まれる
単語にキーワードが付されている場合には、音声認識部
１２は、そのキーワードもキーワード抽出部１３に出力
する。例えば、認識結果のフレーズが「メールを見せ
て」である場合には、音声認識部１２は、「メールを見
せて」というフレーズと共に、「メール」及び「見せ
て」にそれぞれ付与された「Ｍａｉｌ」及び「Ｇｅｔ」
のキーワードを、キーワード抽出部１３に出力する。
【００２９】続いて、ステップＡ３にて、キーワード抽
出部１３は、認識結果のフレーズ及びキーワードから、
キーワードのみを抽出する。すなわち、キーワード抽出
部１３は、「メールを見せて」というフレーズ及び「Ｍ
ａｉｌ」及び「Ｇｅｔ」のキーワードから、キーワード
「Ｍａｉｌ」及び「Ｇｅｔ」を抽出して、状態管理部１
４に出力する。
出部１３は、認識結果のフレーズ及びキーワードから、
キーワードのみを抽出する。すなわち、キーワード抽出
部１３は、「メールを見せて」というフレーズ及び「Ｍ
ａｉｌ」及び「Ｇｅｔ」のキーワードから、キーワード
「Ｍａｉｌ」及び「Ｇｅｔ」を抽出して、状態管理部１
４に出力する。
【００３０】その後、ステップＡ４にて、状態管理部１
４は、キーワード抽出部１３からのキーワードに基づい
て、動作決定ルール１４ａを参照して、これらのキーワ
ードのセットが一致する動作決定のブロックを検索し
て、当該ブロックを読み込んで、アプリケーションによ
る動作を決定して、アプリケーションＩ／Ｆ部１５に出
力する。そして、ステップＡ５にて、アプリケーション
Ｉ／Ｆ部１５は、状態管理部１４による動作決定に基づ
いて、アプリケーション１８に制御コマンドを送出する
ことにより、アプリケーション１８を操作し、制御を実
行する。その後、ステップＡ６にて、アプリケーション
Ｉ／Ｆ部１５は、アプリケーション１８からの実行結果
通知を受信して、状態管理部１４に送出する。
４は、キーワード抽出部１３からのキーワードに基づい
て、動作決定ルール１４ａを参照して、これらのキーワ
ードのセットが一致する動作決定のブロックを検索し
て、当該ブロックを読み込んで、アプリケーションによ
る動作を決定して、アプリケーションＩ／Ｆ部１５に出
力する。そして、ステップＡ５にて、アプリケーション
Ｉ／Ｆ部１５は、状態管理部１４による動作決定に基づ
いて、アプリケーション１８に制御コマンドを送出する
ことにより、アプリケーション１８を操作し、制御を実
行する。その後、ステップＡ６にて、アプリケーション
Ｉ／Ｆ部１５は、アプリケーション１８からの実行結果
通知を受信して、状態管理部１４に送出する。
【００３１】これにより、ステップＡ７にて、状態管理
部１４は、アプリケーションＩ／Ｆ部１５からの実行結
果通知により、実行結果が成功か失敗かを判別し、成功
の場合には、ステップＡ８にて、動作決定ルール１４ａ
から成功時のメッセージと次の音声コマンド一覧を読み
出して、音声出力部１６から成功の旨の音声メッセージ
を発声すると共に、表示部１７にて次に操作すべき音声
コマンドの一覧を更新して、表示する。
部１４は、アプリケーションＩ／Ｆ部１５からの実行結
果通知により、実行結果が成功か失敗かを判別し、成功
の場合には、ステップＡ８にて、動作決定ルール１４ａ
から成功時のメッセージと次の音声コマンド一覧を読み
出して、音声出力部１６から成功の旨の音声メッセージ
を発声すると共に、表示部１７にて次に操作すべき音声
コマンドの一覧を更新して、表示する。
【００３２】またステップＡ７にて実行結果が失敗の場
合には、状態管理部１４は、ステップＡ９にて、動作決
定ルール１４ａから失敗時のメッセージと次の音声コマ
ンド一覧を読み出して、音声出力部１６から失敗の旨の
音声メッセージを発声すると共に、表示部１７にて次に
操作すべき音声コマンドの一覧を表示する。
合には、状態管理部１４は、ステップＡ９にて、動作決
定ルール１４ａから失敗時のメッセージと次の音声コマ
ンド一覧を読み出して、音声出力部１６から失敗の旨の
音声メッセージを発声すると共に、表示部１７にて次に
操作すべき音声コマンドの一覧を表示する。
【００３３】以上で、一つの音声コマンドによる音声認
識コンピュータシステム１０における処理が終了し、利
用者は、表示部１７に表示された音声コマンドの一覧に
基づいて、所望の音声コマンドを発声することにより、
上記ステップＡ１〜Ａ８またはＡ９の処理が繰返し行な
われることになる。
識コンピュータシステム１０における処理が終了し、利
用者は、表示部１７に表示された音声コマンドの一覧に
基づいて、所望の音声コマンドを発声することにより、
上記ステップＡ１〜Ａ８またはＡ９の処理が繰返し行な
われることになる。
【００３４】このようにして、音声認識コンピュータシ
ステム１０によれば、音声コマンドに基づいて、アプリ
ケーション１８の操作が行なわれ、制御が実行された
後、実行の成功または失敗により、利用者が次にすべき
音声コマンドの一覧が表示部１７の画面上に表示されて
いるので、利用者は、どのような音声コマンドを発声す
ればよいかが即座に分かるので、操作性が向上すること
になる。
ステム１０によれば、音声コマンドに基づいて、アプリ
ケーション１８の操作が行なわれ、制御が実行された
後、実行の成功または失敗により、利用者が次にすべき
音声コマンドの一覧が表示部１７の画面上に表示されて
いるので、利用者は、どのような音声コマンドを発声す
ればよいかが即座に分かるので、操作性が向上すること
になる。
【００３５】図３〜図５は、音声認識コンピュータシス
テム１０における表示部の画面表示の具体例を示してい
る。図３において、表示部１７の画面２０は、電子メー
ルのアプリケーションにおける操作画面の初期状態を示
している。この画面２０は、音声コマンドの一覧２１、
すなわち「新しいメールを見る」，「メールを見る」，
「［吉田］さんにメールを送る」及び「その他のことを
する」という音声コマンドを表わしている。
テム１０における表示部の画面表示の具体例を示してい
る。図３において、表示部１７の画面２０は、電子メー
ルのアプリケーションにおける操作画面の初期状態を示
している。この画面２０は、音声コマンドの一覧２１、
すなわち「新しいメールを見る」，「メールを見る」，
「［吉田］さんにメールを送る」及び「その他のことを
する」という音声コマンドを表わしている。
【００３６】ここで、利用者が「メールを見る」という
音声コマンドを発声すると、上述したように、音声認識
コンピュータシステム１０の音声認識部１２による音声
認識及びキーワード抽出部１３によるキーワード抽出に
よって、「Ｍａｉｌ」及び「Ｇｅｔ」という二つのキー
ワードから成るキーワードのセットが得られる。
音声コマンドを発声すると、上述したように、音声認識
コンピュータシステム１０の音声認識部１２による音声
認識及びキーワード抽出部１３によるキーワード抽出に
よって、「Ｍａｉｌ」及び「Ｇｅｔ」という二つのキー
ワードから成るキーワードのセットが得られる。
【００３７】ここで、動作決定ルール１４ａは、図４に
示すように、動作決定が定義されている。したがって、
状態管理部１４は、動作決定ルール１４ａを参照して、
動作決定ルール１４ａにおける「Ｍａｉｌ」及び「Ｇｅ
ｔ」のキーワードセットに対応して、電子メールのアプ
リケーションに対して定義された電子メールの受信トレ
イの内容を表示する「ＣｈａｎｇｅＦｏｌｄｅｒ（Ｉｎ
ｂｏｘ）」（図４の符号Ａ参照）という動作を決定し、
アプリケーションＩ／Ｆ部１５を介して、アプリケーシ
ョン１８に対して制御コマンドを送出し、アプリケーシ
ョン１８が上記動作を実行し、図５に示すように、受信
トレイ１９の表示を行なう。
示すように、動作決定が定義されている。したがって、
状態管理部１４は、動作決定ルール１４ａを参照して、
動作決定ルール１４ａにおける「Ｍａｉｌ」及び「Ｇｅ
ｔ」のキーワードセットに対応して、電子メールのアプ
リケーションに対して定義された電子メールの受信トレ
イの内容を表示する「ＣｈａｎｇｅＦｏｌｄｅｒ（Ｉｎ
ｂｏｘ）」（図４の符号Ａ参照）という動作を決定し、
アプリケーションＩ／Ｆ部１５を介して、アプリケーシ
ョン１８に対して制御コマンドを送出し、アプリケーシ
ョン１８が上記動作を実行し、図５に示すように、受信
トレイ１９の表示を行なう。
【００３８】その後、実行の成功時には、状態管理部１
４は、動作決定ルール１４ａを参照して、図４の符号Ｂ
で示すように、「受信トレイを表示します」というメッ
セージを音声出力部１６から音声出力すると共に、表示
部１７の画面上に表示する。同時に、状態管理部１４
は、図４の符号Ｃで示すように、次にすべき音声コマン
ドの一覧を読み込んで、音声コマンドの一覧を更新し
て、図５にて符号Ｄで示すように、表示部１７の画面上
に新たな音声コマンドの一覧２１を表示する。
４は、動作決定ルール１４ａを参照して、図４の符号Ｂ
で示すように、「受信トレイを表示します」というメッ
セージを音声出力部１６から音声出力すると共に、表示
部１７の画面上に表示する。同時に、状態管理部１４
は、図４の符号Ｃで示すように、次にすべき音声コマン
ドの一覧を読み込んで、音声コマンドの一覧を更新し
て、図５にて符号Ｄで示すように、表示部１７の画面上
に新たな音声コマンドの一覧２１を表示する。
【００３９】ここで、動作決定ルール１４ａにおける音
声コマンドの一覧は、図４の符号Ｃで示すように、受信
トレイの表示の際に想定される操作に対応した６個の音
声コマンド、すなわち「下のページを見る」，「下のメ
ールを見る」，「このメールを読む」，「返事を書
く」，「［吉田］さんにメールを送る」，「［山田］さ
んに転送」の各音声コマンドを含んでおり、これ以外の
操作をしたい場合に備えて、さらに「その他のことをす
る」という音声コマンドを備えている。なお、これらの
音声コマンドは、必要に応じて、上から重要な順に配置
されており、特に重要なものについては、文字色，文字
サイズ，文字フォント等の表示属性を適宜に変更して目
立つように表示するようにしてもよい。
声コマンドの一覧は、図４の符号Ｃで示すように、受信
トレイの表示の際に想定される操作に対応した６個の音
声コマンド、すなわち「下のページを見る」，「下のメ
ールを見る」，「このメールを読む」，「返事を書
く」，「［吉田］さんにメールを送る」，「［山田］さ
んに転送」の各音声コマンドを含んでおり、これ以外の
操作をしたい場合に備えて、さらに「その他のことをす
る」という音声コマンドを備えている。なお、これらの
音声コマンドは、必要に応じて、上から重要な順に配置
されており、特に重要なものについては、文字色，文字
サイズ，文字フォント等の表示属性を適宜に変更して目
立つように表示するようにしてもよい。
【００４０】これにより、利用者は、これらの音声コマ
ンドの一覧から、次にすべき音声コマンドを見つけ出
し、発声することにより、所望の操作を行なうことがで
きる。また、上述した受信トレイを表示する操作の際
に、何らかの原因でアプリケーションの実行が失敗した
場合には、状態管理部１４は、動作決定ルール１４ａを
参照して、図４の符号Ｅで示すように、「受信トレイを
表示できませんでした」というメッセージを読み出し
て、音声出力部１６から音声出力すると共に、表示部１
７の画面上に表示する。なお、上記音声コマンドのう
ち、「［吉田］さんにメールを送る」及び「［山田］さ
んに転送」の音声コマンドにおける括弧［］の中は、メ
ールの宛先等の可変部分（パラメータ）を示しており、
これにより表示数を低減することができる。
ンドの一覧から、次にすべき音声コマンドを見つけ出
し、発声することにより、所望の操作を行なうことがで
きる。また、上述した受信トレイを表示する操作の際
に、何らかの原因でアプリケーションの実行が失敗した
場合には、状態管理部１４は、動作決定ルール１４ａを
参照して、図４の符号Ｅで示すように、「受信トレイを
表示できませんでした」というメッセージを読み出し
て、音声出力部１６から音声出力すると共に、表示部１
７の画面上に表示する。なお、上記音声コマンドのう
ち、「［吉田］さんにメールを送る」及び「［山田］さ
んに転送」の音声コマンドにおける括弧［］の中は、メ
ールの宛先等の可変部分（パラメータ）を示しており、
これにより表示数を低減することができる。
【００４１】図６は、本発明による音声認識コンピュー
タシステムの第二の実施形態を示している。図６におい
て、音声認識コンピュータシステム３０は、図１に示し
た音声認識コンピュータシステム１０とほぼ同様の構成
であって、以下の点でのみ異なる構成であるので、同じ
構成部品には同じ符号を付して、その説明を省略する。
図６に示した音声認識コンピュータシステム３０は、状
態管理部１４が、音声コマンド説明表示手段１４ｂとし
ても動作するように構成されている。
タシステムの第二の実施形態を示している。図６におい
て、音声認識コンピュータシステム３０は、図１に示し
た音声認識コンピュータシステム１０とほぼ同様の構成
であって、以下の点でのみ異なる構成であるので、同じ
構成部品には同じ符号を付して、その説明を省略する。
図６に示した音声認識コンピュータシステム３０は、状
態管理部１４が、音声コマンド説明表示手段１４ｂとし
ても動作するように構成されている。
【００４２】すなわち、音声認識コンピュータシステム
３０においては、状態管理部１４は、音声コマンド説明
表示手段１４ｂとして、図７に示すように、次にすべき
音声コマンドの一覧２１と共に、動作決定ルール１４ａ
に登録されている音声コマンドの説明文を読み込んで、
一定時間毎に、音声コマンドの操作ガイド３１または各
音声コマンドに対応する説明文（図７参照）３２を切換
え表示するようになっている。
３０においては、状態管理部１４は、音声コマンド説明
表示手段１４ｂとして、図７に示すように、次にすべき
音声コマンドの一覧２１と共に、動作決定ルール１４ａ
に登録されている音声コマンドの説明文を読み込んで、
一定時間毎に、音声コマンドの操作ガイド３１または各
音声コマンドに対応する説明文（図７参照）３２を切換
え表示するようになっている。
【００４３】図７〜図８は、音声認識コンピュータシス
テム３０における表示部の画面表示の具体例を示してい
る。図７において、表示部１７の画面４０は、電子メー
ルのアプリケーションにおける操作画面の初期状態を示
している。この画面４０は、音声コマンドの一覧２１、
すなわち「新しいメールを見る」，「メールを見る」，
「［吉田］さんにメールを送る」及び「その他のことを
する」という音声コマンドと、音声コマンドの操作ガイ
ド３１を表わしている。
テム３０における表示部の画面表示の具体例を示してい
る。図７において、表示部１７の画面４０は、電子メー
ルのアプリケーションにおける操作画面の初期状態を示
している。この画面４０は、音声コマンドの一覧２１、
すなわち「新しいメールを見る」，「メールを見る」，
「［吉田］さんにメールを送る」及び「その他のことを
する」という音声コマンドと、音声コマンドの操作ガイ
ド３１を表わしている。
【００４４】ここで、利用者が「メールを見る」という
音声コマンドを発声すると、上述したように、音声認識
コンピュータシステム３０の音声認識部１２による音声
認識及びキーワード抽出部１３によるキーワード抽出に
よって、「Ｍａｉｌ」及び「Ｇｅｔ」という二つのキー
ワードから成るキーワードのセットが得られる。
音声コマンドを発声すると、上述したように、音声認識
コンピュータシステム３０の音声認識部１２による音声
認識及びキーワード抽出部１３によるキーワード抽出に
よって、「Ｍａｉｌ」及び「Ｇｅｔ」という二つのキー
ワードから成るキーワードのセットが得られる。
【００４５】ここで、動作決定ルール１４ａは、前述し
たように、動作決定が定義されている。したがって、状
態管理部１４は、動作決定ルール１４ａを参照して、動
作決定ルール１４ａにおける「Ｍａｉｌ」及び「Ｇｅ
ｔ」のキーワードセットに対応して、電子メールのアプ
リケーションに対して定義された電子メールの受信トレ
イの内容を表示する「ＣｈａｎｇｅＦｏｌｄｅｒ（Ｉｎ
ｂｏｘ）」という動作を決定し、アプリケーションＩ／
Ｆ部１５を介して、アプリケーション１８に対して制御
コマンドを送出し、アプリケーション１８が上記動作を
実行し、図８に示すように、受信トレイ１９の表示を行
なう。
たように、動作決定が定義されている。したがって、状
態管理部１４は、動作決定ルール１４ａを参照して、動
作決定ルール１４ａにおける「Ｍａｉｌ」及び「Ｇｅ
ｔ」のキーワードセットに対応して、電子メールのアプ
リケーションに対して定義された電子メールの受信トレ
イの内容を表示する「ＣｈａｎｇｅＦｏｌｄｅｒ（Ｉｎ
ｂｏｘ）」という動作を決定し、アプリケーションＩ／
Ｆ部１５を介して、アプリケーション１８に対して制御
コマンドを送出し、アプリケーション１８が上記動作を
実行し、図８に示すように、受信トレイ１９の表示を行
なう。
【００４６】その後、実行の成功時には、状態管理部１
４は、動作決定ルール１４ａを参照して、「受信トレイ
を表示します」というメッセージを音声出力部１６から
音声出力すると共に、表示部１７の画面４０上に表示す
る。同時に、状態管理部１４は、次にすべき音声コマン
ドの一覧２１を読み込んで、音声コマンドの一覧を更新
して、図８にて符号Ｄで示すように、表示部１７の画面
４０上に新たな音声コマンドの一覧２１を表示する。
４は、動作決定ルール１４ａを参照して、「受信トレイ
を表示します」というメッセージを音声出力部１６から
音声出力すると共に、表示部１７の画面４０上に表示す
る。同時に、状態管理部１４は、次にすべき音声コマン
ドの一覧２１を読み込んで、音声コマンドの一覧を更新
して、図８にて符号Ｄで示すように、表示部１７の画面
４０上に新たな音声コマンドの一覧２１を表示する。
【００４７】なお、上述した受信トレイを表示する操作
の際に、何らかの原因でアプリケーションの実行が失敗
した場合には、状態管理部１４は、動作決定ルール１４
ａを参照して、図４の符号Ｅで示すように、「受信トレ
イを表示できませんでした」というメッセージを読み出
して、音声出力部１６から音声出力すると共に、表示部
１７の画面上に表示する。
の際に、何らかの原因でアプリケーションの実行が失敗
した場合には、状態管理部１４は、動作決定ルール１４
ａを参照して、図４の符号Ｅで示すように、「受信トレ
イを表示できませんでした」というメッセージを読み出
して、音声出力部１６から音声出力すると共に、表示部
１７の画面上に表示する。
【００４８】ここで、表示部１７の画面４０上にて、上
記音声コマンドの一覧２１と共に、音声コマンドの操作
ガイド３１または音声コマンドの説明文３２が表示され
る。この操作ガイド３１及び説明文３２は、順次、一定
時間毎に切換表示されると共に、操作ガイド３１に示さ
れているように、利用者が音声コマンドの意味を理解で
きない場合には、利用者が「○○（当該音声コマンド）
って何？」という問い合わせコマンドを発声することに
より、音声認識部１４がこの問い合わせコマンドに基づ
いて、当該音声コマンドの説明文３２を即時に画面４０
上に表示する。
記音声コマンドの一覧２１と共に、音声コマンドの操作
ガイド３１または音声コマンドの説明文３２が表示され
る。この操作ガイド３１及び説明文３２は、順次、一定
時間毎に切換表示されると共に、操作ガイド３１に示さ
れているように、利用者が音声コマンドの意味を理解で
きない場合には、利用者が「○○（当該音声コマンド）
って何？」という問い合わせコマンドを発声することに
より、音声認識部１４がこの問い合わせコマンドに基づ
いて、当該音声コマンドの説明文３２を即時に画面４０
上に表示する。
【００４９】これにより、利用者は、これらの音声コマ
ンドの一覧から、次にすべき音声コマンドを見つけ出
し、発声することにより、所望の操作を行なうことがで
きると共に、音声コマンドを理解できない場合には、当
該音声コマンドの説明文３２が表示されたとき、または
上述したように「○○（当該音声コマンド）って何？」
という問い合わせコマンドを発声して即時に当該音声コ
マンドの説明文３２が表示されたとき、当該表示を読む
ことによって、当該音声コマンドの操作内容を理解する
ことができる。
ンドの一覧から、次にすべき音声コマンドを見つけ出
し、発声することにより、所望の操作を行なうことがで
きると共に、音声コマンドを理解できない場合には、当
該音声コマンドの説明文３２が表示されたとき、または
上述したように「○○（当該音声コマンド）って何？」
という問い合わせコマンドを発声して即時に当該音声コ
マンドの説明文３２が表示されたとき、当該表示を読む
ことによって、当該音声コマンドの操作内容を理解する
ことができる。
【００５０】上述した実施形態においては、本発明によ
り電子メールのアプリケーションの制御を行なう場合に
ついて説明したが、これに限らず、音声認識コンピュー
タシステム１０，３０上で稼動する各種アプリケーショ
ンあるいはシステムソフトウェアについて、音声コマン
ドによる制御を行なうことができる。その際、状態管理
部１４が、音声コマンド例示手段として、表示部１７に
て音声コマンドの一覧を表示させることによって、当該
アプリケーション１８の一般的な操作方法を利用者に知
らせることができる。さらに、状態管理部１４が、操作
方法提示手段として、音声コマンドの操作ガイドにより
各音声ガイドの説明文３２を表示することにより、利用
者は、まだ利用したことのないアプリケーションや、あ
まり利用したことのないアプリケーションに関して、音
声コマンドの一覧２１によって、当該アプリケーション
１８を迷うことなく、確実に操作することができる。
り電子メールのアプリケーションの制御を行なう場合に
ついて説明したが、これに限らず、音声認識コンピュー
タシステム１０，３０上で稼動する各種アプリケーショ
ンあるいはシステムソフトウェアについて、音声コマン
ドによる制御を行なうことができる。その際、状態管理
部１４が、音声コマンド例示手段として、表示部１７に
て音声コマンドの一覧を表示させることによって、当該
アプリケーション１８の一般的な操作方法を利用者に知
らせることができる。さらに、状態管理部１４が、操作
方法提示手段として、音声コマンドの操作ガイドにより
各音声ガイドの説明文３２を表示することにより、利用
者は、まだ利用したことのないアプリケーションや、あ
まり利用したことのないアプリケーションに関して、音
声コマンドの一覧２１によって、当該アプリケーション
１８を迷うことなく、確実に操作することができる。
【００５１】
【発明の効果】以上のように、本発明によれば、次にす
べき操作を表わす音声コマンドの一覧が常に音声コマン
ド一覧表示手段によって例えば表示画面上に表示されて
いるので、利用者は、次にどのような音声コマンドを発
声すればよいか分からない場合、特になんらかの操作を
行なうことなく、表示された音声コマンドの一覧を見な
がら、必要な音声コマンドを見つけることができる。こ
れにより、利用者は、アプリケーションの操作方法を知
らなくても、容易に当該アプリケーションを利用するこ
とができる。また、音声コマンドの一覧における各音声
コマンドの説明を表示する音声コマンド説明表示手段を
設けた場合には、音声コマンド一覧表示手段により表示
された各音声コマンドについて、その音声コマンドの説
明が音声コマンド説明表示手段により表示されるので、
利用者は、各音声コマンドの説明を読むことにより、当
該音声コマンドによる操作内容を知ることができる。
べき操作を表わす音声コマンドの一覧が常に音声コマン
ド一覧表示手段によって例えば表示画面上に表示されて
いるので、利用者は、次にどのような音声コマンドを発
声すればよいか分からない場合、特になんらかの操作を
行なうことなく、表示された音声コマンドの一覧を見な
がら、必要な音声コマンドを見つけることができる。こ
れにより、利用者は、アプリケーションの操作方法を知
らなくても、容易に当該アプリケーションを利用するこ
とができる。また、音声コマンドの一覧における各音声
コマンドの説明を表示する音声コマンド説明表示手段を
設けた場合には、音声コマンド一覧表示手段により表示
された各音声コマンドについて、その音声コマンドの説
明が音声コマンド説明表示手段により表示されるので、
利用者は、各音声コマンドの説明を読むことにより、当
該音声コマンドによる操作内容を知ることができる。
【図１】本発明による音声認識コンピュータシステムの
第一の実施形態の構成を示すブロック図である。
第一の実施形態の構成を示すブロック図である。
【図２】図１の音声認識コンピュータシステムにおける
音声認識動作を示すフローチャートである。
音声認識動作を示すフローチャートである。
【図３】図１の音声認識コンピュータシステムにおける
電子メールのアプリケーションの音声コマンドによる操
作の具体例の初期画面を示す図である。
電子メールのアプリケーションの音声コマンドによる操
作の具体例の初期画面を示す図である。
【図４】図３の音声コマンドによる操作で参照される動
作決定ルールの一例を示す図である。
作決定ルールの一例を示す図である。
【図５】図１の音声認識コンピュータシステムにおける
電子メールのアプリケーションの音声コマンドによる受
信トレイの表示画面を示す図である。
電子メールのアプリケーションの音声コマンドによる受
信トレイの表示画面を示す図である。
【図６】本発明による音声認識コンピュータシステムの
第二の実施形態の構成を示すブロック図である。
第二の実施形態の構成を示すブロック図である。
【図７】図６の音声認識コンピュータシステムにおける
電子メールのアプリケーションの音声コマンドによる操
作の具体例の初期画面を示す図である。
電子メールのアプリケーションの音声コマンドによる操
作の具体例の初期画面を示す図である。
【図８】図６の音声認識コンピュータシステムにおける
電子メールのアプリケーションの音声コマンドによる受
信トレイの表示画面を示す図である。
電子メールのアプリケーションの音声コマンドによる受
信トレイの表示画面を示す図である。
【図９】従来の音声認識コンピュータシステムの一例の
構成を示すブロック図である。
構成を示すブロック図である。
１０ 音声認識コンピュータシステム １１ 音声入力部 １２ 音声認識部 １２ａ 音声認識辞書 １３ キーワード抽出部 １４ 状態管理部 １４ａ 動作決定ルール １５ アプリケーションＩ／Ｆ部 １６ 音声出力部 １７ 表示部 １８ アプリケーション １９ 受信トレイ ２０ 画面 ２１ 音声コマンドの一覧 ３０ 音声認識コンピュータシステム ３１ 音声コマンドの操作ガイド ３２ 音声コマンドの説明文 ４０ 画面
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ１０Ｌ 15/22 Ｇ１０Ｌ 3/00 ５７１Ｈ 15/28
Claims (6)
- 【請求項１】 利用者によって発声された音声コマンド
を認識する音声コマンド認識手段と、音声コマンド認識
手段により認識されたコマンドに基づいてアプリケーシ
ョンを制御する制御手段と、を備えた音声認識コンピュ
ータシステムであって、 利用者が次にすべき操作を表わす音声コマンドの一覧を
表示する音声コマンド一覧表示手段と、 上記アプリケーションの制御手段による状態変化通知を
取得する取得手段と、 上記アプリケーションの状態変化に基づいて、次に発声
すべき音声コマンドの一覧を更新する音声コマンド一覧
更新手段と、 を設けたことを特徴とする音声認識コンピュータシステ
ム。 - 【請求項２】 音声コマンドの一覧における各音声コマ
ンドの説明を表示する音声コマンド説明表示手段を設け
たことを特徴とする請求項１に記載の音声認識コンピュ
ータシステム。 - 【請求項３】 上記音声コマンド一覧表示手段が、次に
最も利用されると予想される音声コマンドに対して特別
な表示属性で表示することを特徴とする請求項１または
２に記載の音声認識コンピュータシステム。 - 【請求項４】 上記音声コマンド一覧表示手段が、パラ
メータの異なる複数の音声コマンドについて、パラメー
タ部分に関して記号を利用してまとめて表示することを
特徴とする請求項１または２に記載の音声認識コンピュ
ータシステム。 - 【請求項５】 上記音声コマンド認識手段が、音声コマ
ンドの使い方の問い合わせコマンドを含んでいることを
特徴とする請求項１から４のいずれかに記載の音声認識
コンピュータシステム。 - 【請求項６】 アプリケーションの動作中に、当該アプ
リケーションの一般的な操作方法を表示する操作方法提
示手段と、 上記一般的な操作方法に対応する音声コマンドの例示を
行なう音声コマンド例示手段と、 を設けたことを特徴とする請求項１から５のいずれかに
記載の音声認識コンピュータシステム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001060720A JP2002259114A (ja) | 2001-03-05 | 2001-03-05 | 音声認識コンピュータシステム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001060720A JP2002259114A (ja) | 2001-03-05 | 2001-03-05 | 音声認識コンピュータシステム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002259114A true JP2002259114A (ja) | 2002-09-13 |
Family
ID=18920106
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001060720A Pending JP2002259114A (ja) | 2001-03-05 | 2001-03-05 | 音声認識コンピュータシステム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2002259114A (ja) |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004070703A1 (ja) * | 2003-02-03 | 2004-08-19 | Mitsubishi Denki Kabushiki Kaisha | 車載制御装置 |
| JP2006215418A (ja) * | 2005-02-07 | 2006-08-17 | Nissan Motor Co Ltd | 音声入力装置及び音声入力方法 |
| JP2008053937A (ja) * | 2006-08-23 | 2008-03-06 | Nec Fielding Ltd | 音声認識／応答型携帯電話、携帯電話の操作方法、及び携帯電話の操作プログラム |
| JP2009505219A (ja) * | 2005-08-09 | 2009-02-05 | ディーア・アンド・カンパニー | ユーザに情報を配信する方法およびシステム |
| US7505910B2 (en) | 2003-01-30 | 2009-03-17 | Hitachi, Ltd. | Speech command management dependent upon application software status |
| JP2010197643A (ja) * | 2009-02-25 | 2010-09-09 | Gifu Univ | 対話型学習システム |
| JPWO2016174955A1 (ja) * | 2015-04-28 | 2018-02-15 | クラリオン株式会社 | 情報処理装置、及び、情報処理方法 |
| WO2019107224A1 (ja) * | 2017-12-01 | 2019-06-06 | ヤマハ株式会社 | 機器制御システム、機器制御方法、及びプログラム |
| JP2019158155A (ja) * | 2018-03-07 | 2019-09-19 | 株式会社パロマ | 加熱調理システム |
| JP2020144932A (ja) * | 2015-05-27 | 2020-09-10 | グーグル エルエルシー | 提案される音声ベースのアクションクエリの提供 |
| US10817243B2 (en) | 2013-11-06 | 2020-10-27 | Sony Corporation | Controlling a user interface based on change in output destination of an application |
| US10938595B2 (en) | 2018-01-24 | 2021-03-02 | Yamaha Corporation | Device control system, device control method, and non-transitory computer readable storage medium |
| JP7483487B2 (ja) | 2020-05-13 | 2024-05-15 | キヤノン株式会社 | 画像形成システム、画像形成システムの制御方法、及びプログラム |
| JP7489928B2 (ja) | 2021-02-04 | 2024-05-24 | Toa株式会社 | 音声により機器を操作するための情報処理装置、システム、機器制御装置、およびプログラム |
-
2001
- 2001-03-05 JP JP2001060720A patent/JP2002259114A/ja active Pending
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7505910B2 (en) | 2003-01-30 | 2009-03-17 | Hitachi, Ltd. | Speech command management dependent upon application software status |
| US7617108B2 (en) | 2003-02-03 | 2009-11-10 | Mitsubishi Denki Kabushiki Kaisha | Vehicle mounted control apparatus |
| WO2004070703A1 (ja) * | 2003-02-03 | 2004-08-19 | Mitsubishi Denki Kabushiki Kaisha | 車載制御装置 |
| JP2006215418A (ja) * | 2005-02-07 | 2006-08-17 | Nissan Motor Co Ltd | 音声入力装置及び音声入力方法 |
| JP2009505219A (ja) * | 2005-08-09 | 2009-02-05 | ディーア・アンド・カンパニー | ユーザに情報を配信する方法およびシステム |
| JP2008053937A (ja) * | 2006-08-23 | 2008-03-06 | Nec Fielding Ltd | 音声認識／応答型携帯電話、携帯電話の操作方法、及び携帯電話の操作プログラム |
| JP2010197643A (ja) * | 2009-02-25 | 2010-09-09 | Gifu Univ | 対話型学習システム |
| US10817243B2 (en) | 2013-11-06 | 2020-10-27 | Sony Corporation | Controlling a user interface based on change in output destination of an application |
| JPWO2016174955A1 (ja) * | 2015-04-28 | 2018-02-15 | クラリオン株式会社 | 情報処理装置、及び、情報処理方法 |
| JP6993466B2 (ja) | 2015-05-27 | 2022-01-13 | グーグル エルエルシー | 提案される音声ベースのアクションクエリの提供 |
| JP2020144932A (ja) * | 2015-05-27 | 2020-09-10 | グーグル エルエルシー | 提案される音声ベースのアクションクエリの提供 |
| US11238851B2 (en) | 2015-05-27 | 2022-02-01 | Google Llc | Providing suggested voice-based action queries |
| US11869489B2 (en) | 2015-05-27 | 2024-01-09 | Google Llc | Providing suggested voice-based action queries |
| CN111433736A (zh) * | 2017-12-01 | 2020-07-17 | 雅马哈株式会社 | 机器控制系统、机器控制方法、以及程序 |
| JP2019101730A (ja) * | 2017-12-01 | 2019-06-24 | ヤマハ株式会社 | 機器制御システム、機器制御方法、及びプログラム |
| WO2019107224A1 (ja) * | 2017-12-01 | 2019-06-06 | ヤマハ株式会社 | 機器制御システム、機器制御方法、及びプログラム |
| US11574631B2 (en) | 2017-12-01 | 2023-02-07 | Yamaha Corporation | Device control system, device control method, and terminal device |
| CN111433736B (zh) * | 2017-12-01 | 2024-05-07 | 雅马哈株式会社 | 机器控制系统以及机器控制方法 |
| US10938595B2 (en) | 2018-01-24 | 2021-03-02 | Yamaha Corporation | Device control system, device control method, and non-transitory computer readable storage medium |
| JP2019158155A (ja) * | 2018-03-07 | 2019-09-19 | 株式会社パロマ | 加熱調理システム |
| JP7483487B2 (ja) | 2020-05-13 | 2024-05-15 | キヤノン株式会社 | 画像形成システム、画像形成システムの制御方法、及びプログラム |
| JP7489928B2 (ja) | 2021-02-04 | 2024-05-24 | Toa株式会社 | 音声により機器を操作するための情報処理装置、システム、機器制御装置、およびプログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6392374B2 (ja) | ヘッドマウントディスプレイシステム及びヘッドマウントディスプレイ装置の操作方法 | |
| JP5706384B2 (ja) | 音声認識装置、音声認識システム、音声認識方法および音声認識プログラム | |
| US20120221321A1 (en) | Speech translation system, control device, and control method | |
| JP2002259114A (ja) | 音声認識コンピュータシステム | |
| JP6125138B2 (ja) | 情報提供システム | |
| JP3178426B2 (ja) | 自然言語対話システム及び自然言語対話プログラム記録媒体 | |
| JP5263875B2 (ja) | 発話入力の音声認識のためのコンピュータ・システム、並びにその方法及びコンピュータ・プログラム | |
| US11373638B2 (en) | Presentation assistance device for calling attention to words that are forbidden to speak | |
| JP6922920B2 (ja) | 情報処理装置及び情報処理方法 | |
| JP2008083100A (ja) | 音声対話装置及びその方法 | |
| EP2682931B1 (en) | Method and apparatus for recording and playing user voice in mobile terminal | |
| JP7200533B2 (ja) | 情報処理装置およびプログラム | |
| JP2002032370A (ja) | 情報処理装置 | |
| US10216732B2 (en) | Information presentation method, non-transitory recording medium storing thereon computer program, and information presentation system | |
| JP3104661B2 (ja) | 日本語文章作成装置 | |
| JP2010026686A (ja) | 統合的インタフェースを有する対話型コミュニケーション端末及びそれを用いたコミュニケーションシステム | |
| JPH08339288A (ja) | 情報処理装置及びその制御方法 | |
| JP6449181B2 (ja) | 音声翻訳システム、音声翻訳方法、及び音声翻訳プログラム | |
| JP2003167600A (ja) | 音声認識装置及び方法、ページ記述言語表示装置及びその制御方法、並びにコンピュータ・プログラム | |
| JP2003157095A (ja) | 音声認識装置及びその方法、プログラム | |
| JP2001125591A (ja) | 音声対話システム | |
| JP6962849B2 (ja) | 会議支援装置、会議支援制御方法およびプログラム | |
| JP2014186061A (ja) | 情報処理装置及びプログラム | |
| US9754582B2 (en) | Identifying a contact | |
| US20220201136A1 (en) | Information processing system that executes command corresponding to utterance, image processing apparatus, control method for information processing system, and storage medium storing control program for information processing system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040426 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060515 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060523 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060724 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070731 |