JP3286339B2 - ウインドウ画面制御装置 - Google Patents
ウインドウ画面制御装置Info
- Publication number
- JP3286339B2 JP3286339B2 JP06698992A JP6698992A JP3286339B2 JP 3286339 B2 JP3286339 B2 JP 3286339B2 JP 06698992 A JP06698992 A JP 06698992A JP 6698992 A JP6698992 A JP 6698992A JP 3286339 B2 JP3286339 B2 JP 3286339B2
- Authority
- JP
- Japan
- Prior art keywords
- window
- voice
- dictionary
- screen
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
- G10L2015/228—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context
Description
【０００１】
【産業上の利用分野】本発明は、キーボード、マウス等
の入力手段の他に、音声認識による入力機能を有するコ
ンピュータシステムにおけるウインドウ制御に関する。
の入力手段の他に、音声認識による入力機能を有するコ
ンピュータシステムにおけるウインドウ制御に関する。
【０００２】
【従来の技術】従来から、コンピュータの制御に音声入
力を応用した例は少なからずある。従来の音声認識シス
テムは、コンピュータからの指令により、入力された音
声を認識する処理を実行し、その結果をコンピュータに
出力した後、次の命令を持つ。コンピュータシステム、
例えば、パーソナルコンピュータやワークステーション
に代表されるシステムにおいて、グラフィック・ユーザ
・インターフェースとしてウインドウ画面が用いられ
る。しかし、音声入力をウインドウ画面の制御に用いた
例は少ない（たとえば、Ｃ．Ｓｃｈｍａｎｄｔ，６ｔｈ
Ｓｙｍｐｏｓｉｕｍ ｏｎ Ｈｕｍａｎ Ｉｎｔｅｒ
ｆａｃｅ １３２１，ｐ５３３〜５４０（１９９０ Ｔｏ
ｋｙｏ)）。
力を応用した例は少なからずある。従来の音声認識シス
テムは、コンピュータからの指令により、入力された音
声を認識する処理を実行し、その結果をコンピュータに
出力した後、次の命令を持つ。コンピュータシステム、
例えば、パーソナルコンピュータやワークステーション
に代表されるシステムにおいて、グラフィック・ユーザ
・インターフェースとしてウインドウ画面が用いられ
る。しかし、音声入力をウインドウ画面の制御に用いた
例は少ない（たとえば、Ｃ．Ｓｃｈｍａｎｄｔ，６ｔｈ
Ｓｙｍｐｏｓｉｕｍ ｏｎ Ｈｕｍａｎ Ｉｎｔｅｒ
ｆａｃｅ １３２１，ｐ５３３〜５４０（１９９０ Ｔｏ
ｋｙｏ)）。
【０００３】
【発明が解決しようとする課題】ウインドウ画面は、一
般的にはシステムのオペレーティングシステム（ＯＳ）
と密着して制御され、これを音声入力で動かすことは難
しい。従って、音声認識のため、キーボード、マウスと
同様の音声入力の並行動作を行わしめることが必要であ
る。
般的にはシステムのオペレーティングシステム（ＯＳ）
と密着して制御され、これを音声入力で動かすことは難
しい。従って、音声認識のため、キーボード、マウスと
同様の音声入力の並行動作を行わしめることが必要であ
る。
【０００４】さて、このような構成のコンピュータシス
テムにおいて、ウインドウ画面で音声入力を行う場合、
一般的には個々のウインドウ画面に名称をつけ、これを
呼ぶことにより画面をアクティブにすることが容易に考
えられる。従来のウインドウ画面の音声制御において
は、画面定義の言葉とその音声の標準パターンの双方を
登録する必要があった。そこで、ユーザが自分で各ウイ
ンドウ画面に名称（画面定義の言葉）を付け、それを呼
び出すことにより、そのウインドウ画面を呼び出してい
た。しかしながら、使用者にとっては、画面定義の言葉
を登録した上で、さらにその音声の標準パターンも登録
せねばならず、負担が大きかった。また、ウインドウ画
面の制御には、一般にポインティングデバイスとしてマ
ウスが用いられているが、マウスを用いて画面制御を行
う場合、必要なウインドウを一旦呼び出し、さらにその
後、その画面上の制御コマンドを検索実行するという手
間が必要であった。この場合、一般に、必要な画面をア
クセス(探索)するのに時間を要し、さらに、その画面上
での操作が必要となり、使用者の負担が大きかった。さ
らに、このような音声入力を用いたシステムの場合、常
に全ての単語を認識対象としていたため、認識率が低下
すると共に、処理時間を要していた。
テムにおいて、ウインドウ画面で音声入力を行う場合、
一般的には個々のウインドウ画面に名称をつけ、これを
呼ぶことにより画面をアクティブにすることが容易に考
えられる。従来のウインドウ画面の音声制御において
は、画面定義の言葉とその音声の標準パターンの双方を
登録する必要があった。そこで、ユーザが自分で各ウイ
ンドウ画面に名称（画面定義の言葉）を付け、それを呼
び出すことにより、そのウインドウ画面を呼び出してい
た。しかしながら、使用者にとっては、画面定義の言葉
を登録した上で、さらにその音声の標準パターンも登録
せねばならず、負担が大きかった。また、ウインドウ画
面の制御には、一般にポインティングデバイスとしてマ
ウスが用いられているが、マウスを用いて画面制御を行
う場合、必要なウインドウを一旦呼び出し、さらにその
後、その画面上の制御コマンドを検索実行するという手
間が必要であった。この場合、一般に、必要な画面をア
クセス(探索)するのに時間を要し、さらに、その画面上
での操作が必要となり、使用者の負担が大きかった。さ
らに、このような音声入力を用いたシステムの場合、常
に全ての単語を認識対象としていたため、認識率が低下
すると共に、処理時間を要していた。
【０００５】本発明の目的は、キーボード、マウス等の
入力手段とディスプレイ等の表示手段を有するコンピュ
ータシステム、例えば、パーソナルコンピュータやワー
クステーションに代表されるシステムにおいて、音声入
力を用いて効果的にウインドウ画面を制御するウインド
ウ画面制御装置を提供することである。
入力手段とディスプレイ等の表示手段を有するコンピュ
ータシステム、例えば、パーソナルコンピュータやワー
クステーションに代表されるシステムにおいて、音声入
力を用いて効果的にウインドウ画面を制御するウインド
ウ画面制御装置を提供することである。
【０００６】
【課題を解決するための手段】本発明に係るウインドウ
画面制御装置は、ウインドウを表示するディスプレイと
キーボードとを備え、キー入力データに対応して、ディ
スプレイでのウインドウ画面の切り替えを行うウインド
ウ画面制御装置において、アクティブなウインドウ画面
に対する、制御対象のウインドウ画面の相対的位置を示
すウインドウ画面選択用コマンドを表す、不特定話者向
けの音声の標準パターンを記憶する第１辞書と、選択さ
れたウインドウ画面における専用のウインドウ制御コマ
ンドの特定話者向けの音声の標準パターンを記憶する第
２辞書と、入力された音声から特徴量を抽出し、第１辞
書と第２辞書に登録されている音声の標準パターンと比
較演算し、その音声の認識を行う音声認識手段と、音声
認識手段から入力された認識結果を、対応するキー入力
データに変換する音声キーエミュレータ手段とを備え、
音声によりウインドウ画面を選択できることを特徴とす
る。また、ポインティングデバイスとしてのマウスを備
え、マウス移動時に、音声認識手段から入力された識別
結果を入力し、認識結果が、不特定話者向けの第１辞書
内のポインティング用単語である場合に、対応するマウ
ス入力データに変換する音声マウスエミュレータ手段と
を備え、マウスのポインティング動作を音声入力で代用
させる。また、音声入力よりウインドウが選択された時
に、上記の音声認識手段は、第２辞書のみを用いて次の
音声入力の認識を行う
画面制御装置は、ウインドウを表示するディスプレイと
キーボードとを備え、キー入力データに対応して、ディ
スプレイでのウインドウ画面の切り替えを行うウインド
ウ画面制御装置において、アクティブなウインドウ画面
に対する、制御対象のウインドウ画面の相対的位置を示
すウインドウ画面選択用コマンドを表す、不特定話者向
けの音声の標準パターンを記憶する第１辞書と、選択さ
れたウインドウ画面における専用のウインドウ制御コマ
ンドの特定話者向けの音声の標準パターンを記憶する第
２辞書と、入力された音声から特徴量を抽出し、第１辞
書と第２辞書に登録されている音声の標準パターンと比
較演算し、その音声の認識を行う音声認識手段と、音声
認識手段から入力された認識結果を、対応するキー入力
データに変換する音声キーエミュレータ手段とを備え、
音声によりウインドウ画面を選択できることを特徴とす
る。また、ポインティングデバイスとしてのマウスを備
え、マウス移動時に、音声認識手段から入力された識別
結果を入力し、認識結果が、不特定話者向けの第１辞書
内のポインティング用単語である場合に、対応するマウ
ス入力データに変換する音声マウスエミュレータ手段と
を備え、マウスのポインティング動作を音声入力で代用
させる。また、音声入力よりウインドウが選択された時
に、上記の音声認識手段は、第２辞書のみを用いて次の
音声入力の認識を行う
【０００７】
【作用】ウインドウを表示するディスプレイとキーボー
ドなどを備えたコンピュータシステムにおいて、第１辞
書に、ウインドウ制御コマンドの不特定話者向けの音声
の標準パターンを記憶する。ここで、第１辞書には、ア
クティブなウインドウ画面に対する、制御対象のウイン
ドウ画面の相対的位置を示すウインドウ画面選択用コマ
ンド（たとえば「前の画面」、「次の画面」）を表す、
不特定話者向けの音声の標準パターンを記憶する。一
方、第２辞書に、選択されたウインドウ画面における制
御コマンドを表す、特定話者向けの音声の標準パターン
を記憶する。ユーザ（特定話者）は、個々のウインドウ
画面における専用のコマンドを第２辞書に登録する。音
声認識手段は、入力された音声を第１辞書の標準パター
ンと比較し、その認識結果は、音声キーエミュレータ手
段において、キー入力データにエミュレートされる。こ
れにより、音声入力により、第１辞書を用いてウインド
ウ画面を相対的単語に選択できる。いいかえれば、ウイ
ンドウ画面の選択において、ウインドウ画面の直接的名
称は用いない。選択された個々のウインドウ画面におい
ては、音声認識手段は、入力された音声を第２辞書の標
準パターンと比較し、その認識結果は、音声キーエミュ
レータ手段において、キー入力データにエミュレートさ
れ、画像制御手段に入力される。このように、選択され
た個々のウインドウ画面において、ユーザが自分で登録
した第２辞書を用いてコマンドなどを音声で入力でき
る。同様に、ポインティングデバイスとしてのマウスを
も備えるコンピュータシステムにおいて、第１辞書に、
不特定話者向けの画面指示用の相対的単語のコマンド
（「ここ」、「この画面」など）の音声の標準パターン
を記憶する。また、第２辞書に、選択されたウインドウ
画面における制御コマンドを表す、特定話者向けの音声
の標準パターンを記憶する。ユーザ（特定話者）は、個
々のウインドウ画面における専用のコマンドを第２辞書
に登録する。マウス移動中に、音声認識手段の第１辞書
を用いての認識結果は、音声マウスエミュレータ手段に
おいて、マウス入力データにエミュレートされ、ウイン
ドウ画面が指示される。
ドなどを備えたコンピュータシステムにおいて、第１辞
書に、ウインドウ制御コマンドの不特定話者向けの音声
の標準パターンを記憶する。ここで、第１辞書には、ア
クティブなウインドウ画面に対する、制御対象のウイン
ドウ画面の相対的位置を示すウインドウ画面選択用コマ
ンド（たとえば「前の画面」、「次の画面」）を表す、
不特定話者向けの音声の標準パターンを記憶する。一
方、第２辞書に、選択されたウインドウ画面における制
御コマンドを表す、特定話者向けの音声の標準パターン
を記憶する。ユーザ（特定話者）は、個々のウインドウ
画面における専用のコマンドを第２辞書に登録する。音
声認識手段は、入力された音声を第１辞書の標準パター
ンと比較し、その認識結果は、音声キーエミュレータ手
段において、キー入力データにエミュレートされる。こ
れにより、音声入力により、第１辞書を用いてウインド
ウ画面を相対的単語に選択できる。いいかえれば、ウイ
ンドウ画面の選択において、ウインドウ画面の直接的名
称は用いない。選択された個々のウインドウ画面におい
ては、音声認識手段は、入力された音声を第２辞書の標
準パターンと比較し、その認識結果は、音声キーエミュ
レータ手段において、キー入力データにエミュレートさ
れ、画像制御手段に入力される。このように、選択され
た個々のウインドウ画面において、ユーザが自分で登録
した第２辞書を用いてコマンドなどを音声で入力でき
る。同様に、ポインティングデバイスとしてのマウスを
も備えるコンピュータシステムにおいて、第１辞書に、
不特定話者向けの画面指示用の相対的単語のコマンド
（「ここ」、「この画面」など）の音声の標準パターン
を記憶する。また、第２辞書に、選択されたウインドウ
画面における制御コマンドを表す、特定話者向けの音声
の標準パターンを記憶する。ユーザ（特定話者）は、個
々のウインドウ画面における専用のコマンドを第２辞書
に登録する。マウス移動中に、音声認識手段の第１辞書
を用いての認識結果は、音声マウスエミュレータ手段に
おいて、マウス入力データにエミュレートされ、ウイン
ドウ画面が指示される。
【０００８】
【実施例】以下、添付の図面を参照して本発明の実施例
を説明する。図１は、キーボード１、マウス２等の入力
手段とディスプレイ３等の表示手段を有するパーソナル
コンピュータ１０の一例を示す。ここで、マイクロフォ
ン５を備えた音声認識部２０（スタンドアロンタイプの
音声認識装置６、または、拡張バス用の音声認識ボード
７）が、パーソナルコンピュータ１０に接続されてい
る。
を説明する。図１は、キーボード１、マウス２等の入力
手段とディスプレイ３等の表示手段を有するパーソナル
コンピュータ１０の一例を示す。ここで、マイクロフォ
ン５を備えた音声認識部２０（スタンドアロンタイプの
音声認識装置６、または、拡張バス用の音声認識ボード
７）が、パーソナルコンピュータ１０に接続されてい
る。
【０００９】図２は、図１に示したシステムの基本的な
ハードウエアの構成例を示す。音声認識部２０では、マ
イクロフォン５から入力された音声信号は前処理部２１
において増幅、整形される。次に、特徴抽出部２２は、
前処理された信号から、認識処理に必要な特徴量を抽出
する。次に、認識部２３は、抽出された特徴量を、予め
作成されている標準パターン部２５の第１辞書２６と第
２辞書２７に登録されている単語の標準パターンと比較
照合し、最も類似性の高い単語を認識結果とする。この
時、この認識部２３は不特定話者向けの単語認識方式を
用いる。この認識方式は、例えば、フジモト（Ｊ．Ｆｕ
ｊｉｍｏｔｏ）著“Ｓｐｅａｋｅｒ Ｉｎｄｅｐｅｎｄ
ｅｎｔ Ｗｏｒｄ Ｒｅｃｏｇｎｉｔｉｏｎ Ｕｓｉｎ
ｇＦｕｚｚｙ Ｐａｔｔｅｒｎ Ｗａｔｃｈｉｎｇ”
（Ｆｕｚｚｙ Ｓｅｔ ａｎｄ Ｓｙｓｔｅｍｓ ３２
（１９８９）ｐ．１８１−１９１）に公開されているよ
うような方式を用いれば達成できる。標準パターン部２
５には、必要な単語に対する標準パターンが事前に作成
され、装備されている。結果処理部２４は、認識結果を
パーソナルコンピュータ部１０の音声キーエミュレータ
１４と音声マウスエミュレータ１５とに渡す。
ハードウエアの構成例を示す。音声認識部２０では、マ
イクロフォン５から入力された音声信号は前処理部２１
において増幅、整形される。次に、特徴抽出部２２は、
前処理された信号から、認識処理に必要な特徴量を抽出
する。次に、認識部２３は、抽出された特徴量を、予め
作成されている標準パターン部２５の第１辞書２６と第
２辞書２７に登録されている単語の標準パターンと比較
照合し、最も類似性の高い単語を認識結果とする。この
時、この認識部２３は不特定話者向けの単語認識方式を
用いる。この認識方式は、例えば、フジモト（Ｊ．Ｆｕ
ｊｉｍｏｔｏ）著“Ｓｐｅａｋｅｒ Ｉｎｄｅｐｅｎｄ
ｅｎｔ Ｗｏｒｄ Ｒｅｃｏｇｎｉｔｉｏｎ Ｕｓｉｎ
ｇＦｕｚｚｙ Ｐａｔｔｅｒｎ Ｗａｔｃｈｉｎｇ”
（Ｆｕｚｚｙ Ｓｅｔ ａｎｄ Ｓｙｓｔｅｍｓ ３２
（１９８９）ｐ．１８１−１９１）に公開されているよ
うような方式を用いれば達成できる。標準パターン部２
５には、必要な単語に対する標準パターンが事前に作成
され、装備されている。結果処理部２４は、認識結果を
パーソナルコンピュータ部１０の音声キーエミュレータ
１４と音声マウスエミュレータ１５とに渡す。
【００１０】パーソナルコンピュータ部１０において
は、ＣＰＵ１１は、ＯＳ（オペレーティング・システ
ム）１２に接続され、ＯＳ１２は、メモリ１３、ディス
プレイ３の他に、キーボードＢＩＯＳ１６、マウスＢＩ
ＯＳ１７に接続される。また、キーボード１は、キーボ
ードバッファ１８とキーボードＢＩＯＳ１６を介してＯ
Ｓ１２に接続され、マウス２は、マウスバッファ１９と
マウスＢＩＯＳ１７を介してＯＳ１２に接続される。
は、ＣＰＵ１１は、ＯＳ（オペレーティング・システ
ム）１２に接続され、ＯＳ１２は、メモリ１３、ディス
プレイ３の他に、キーボードＢＩＯＳ１６、マウスＢＩ
ＯＳ１７に接続される。また、キーボード１は、キーボ
ードバッファ１８とキーボードＢＩＯＳ１６を介してＯ
Ｓ１２に接続され、マウス２は、マウスバッファ１９と
マウスＢＩＯＳ１７を介してＯＳ１２に接続される。
【００１１】現在、コンピュータシステム、とりわけ、
パーソナルコンピュータやワークステーションにおいて
は、入力された認識結果を入力データとして取り扱う音
声処理ＢＩＯＳが標準的に備わっていないので、これを
疑似的に備える方法が必要となる。この一方法として、
本発明者により開示された単語認識による音声キーエミ
ュレータ（特開平３−２０６５２１号公報）が有効であ
る。すなわち、図２に示すように、キーボード１とキー
ボードＢＩＯＳ１６の間に設けられるキーボードバッフ
ァ１８に、音声認識部２０からの認識結果を処理した音
声キーエミュレータ１４の出力が入力され、キーボード
入力と同様に取り扱われる。ここで、音声キーエミュレ
ータ１４は、ウインドウ制御用のソフトウエアのコマン
ドの機能略称として記号化されたキー入力を音声入力と
してＯＳ１２に送る。すなわち、コマンドの機能略称の
単語の音声に対する標準パターンに対応するキーボード
入力ストリングが割り当ててあり、音声キーエミュレー
タ１４は、音声入力に対する認識結果に対して、それに
対し割り当てられたキーストリングをキーボードバッフ
ァ１８に転送し、キーボード１のキーがあたかも打たれ
たかのように動作させる。この動作は、当然、マウス２
に対して行っても同様の結果が得られる。すなわち、ポ
インティング用単語の音声に対する標準パターンに対応
するマウス入力ストリングが割り当ててあり、音声入力
に対する認識結果に対して、その割り当てられたマウス
ストリングをマウスバッファ１９を介してマウスＢＩＯ
Ｓ１７に送る。ＯＳ１２は、画面制御部１２１を備え、
以上に説明した音声入力システムを用いてウインドウ画
面を円滑に制御するが、エミュレータ１４、１５を用い
ているので、音声入力自体はキーボード入力やマウス入
力と同様に扱う。
パーソナルコンピュータやワークステーションにおいて
は、入力された認識結果を入力データとして取り扱う音
声処理ＢＩＯＳが標準的に備わっていないので、これを
疑似的に備える方法が必要となる。この一方法として、
本発明者により開示された単語認識による音声キーエミ
ュレータ（特開平３−２０６５２１号公報）が有効であ
る。すなわち、図２に示すように、キーボード１とキー
ボードＢＩＯＳ１６の間に設けられるキーボードバッフ
ァ１８に、音声認識部２０からの認識結果を処理した音
声キーエミュレータ１４の出力が入力され、キーボード
入力と同様に取り扱われる。ここで、音声キーエミュレ
ータ１４は、ウインドウ制御用のソフトウエアのコマン
ドの機能略称として記号化されたキー入力を音声入力と
してＯＳ１２に送る。すなわち、コマンドの機能略称の
単語の音声に対する標準パターンに対応するキーボード
入力ストリングが割り当ててあり、音声キーエミュレー
タ１４は、音声入力に対する認識結果に対して、それに
対し割り当てられたキーストリングをキーボードバッフ
ァ１８に転送し、キーボード１のキーがあたかも打たれ
たかのように動作させる。この動作は、当然、マウス２
に対して行っても同様の結果が得られる。すなわち、ポ
インティング用単語の音声に対する標準パターンに対応
するマウス入力ストリングが割り当ててあり、音声入力
に対する認識結果に対して、その割り当てられたマウス
ストリングをマウスバッファ１９を介してマウスＢＩＯ
Ｓ１７に送る。ＯＳ１２は、画面制御部１２１を備え、
以上に説明した音声入力システムを用いてウインドウ画
面を円滑に制御するが、エミュレータ１４、１５を用い
ているので、音声入力自体はキーボード入力やマウス入
力と同様に扱う。
【００１２】図３は、ディスプレイ３の画面上に複数個
開かれたウインドウ画面の例である。この例では、ディ
スプレイ画面３１に４個のウインドウ３２〜３５が開か
れている。最下層のウインドウ３２の上に、３個のウイ
ンドウ３３、３４、３５が順次開かれている。最上層の
ウインドウ３５には、マウス２により操作されるポイン
ティング用のカーソル３６が表示されている。また、ウ
インドウ３５の上部には、ファイル、編集などのコマン
ドが表示される。
開かれたウインドウ画面の例である。この例では、ディ
スプレイ画面３１に４個のウインドウ３２〜３５が開か
れている。最下層のウインドウ３２の上に、３個のウイ
ンドウ３３、３４、３５が順次開かれている。最上層の
ウインドウ３５には、マウス２により操作されるポイン
ティング用のカーソル３６が表示されている。また、ウ
インドウ３５の上部には、ファイル、編集などのコマン
ドが表示される。
【００１３】図４は、標準パターン部２５に登録される
各種ウインドウ画面制御辞書の構成を示す。本発明で
は、第１辞書２６に登録する画面選択用の第１種の制御
コマンドと、第２辞書２７に登録する、選択されたウイ
ンドウにおいて使用される第２種の制御コマンドを用い
る。ウインドウ画面を円滑に制御せしめるために必要な
第１種の制御語として、たとえば「前の画面」、「次の
画面」、「うしろの画面」、「右側の画面」、「最下層
の画面」等の相対的な表現を含むコマンドを備える。こ
れらの単語は、不特定話者用の第１辞書２６に登録され
る。このように、ウインドウ選択用の単語としては、ウ
インドウの直接名称ではなく、ディスプレイ画面３１上
に開かれたウインドウの相対的位置を示す名称を用い
る。ウインドウシステムの場合、一般に最上層にあるウ
インドウ画面上に対して、アクティブになっており、最
上層以外のウインドウはこのアクティブな画面に対して
「前の画面」、「うしろの画面」などということにな
り、ユーザは、これを発声してウインドウ画面を選択す
る。これらの単語は、不特定話者向けの標準パターンと
して登録されていて、もちろんユーザ（特定話者）が標
準パターンとして登録しないでも使用可能とする。な
お、マウス２によるウインドウ画面指示用の単語（「こ
こ」、「この画面」など）の標準パターンも不特定話者
むけの第１辞書２６に登録されている。これらの単語
は、マウス２により操作されるカーソル３６の位置を指
示する。
各種ウインドウ画面制御辞書の構成を示す。本発明で
は、第１辞書２６に登録する画面選択用の第１種の制御
コマンドと、第２辞書２７に登録する、選択されたウイ
ンドウにおいて使用される第２種の制御コマンドを用い
る。ウインドウ画面を円滑に制御せしめるために必要な
第１種の制御語として、たとえば「前の画面」、「次の
画面」、「うしろの画面」、「右側の画面」、「最下層
の画面」等の相対的な表現を含むコマンドを備える。こ
れらの単語は、不特定話者用の第１辞書２６に登録され
る。このように、ウインドウ選択用の単語としては、ウ
インドウの直接名称ではなく、ディスプレイ画面３１上
に開かれたウインドウの相対的位置を示す名称を用い
る。ウインドウシステムの場合、一般に最上層にあるウ
インドウ画面上に対して、アクティブになっており、最
上層以外のウインドウはこのアクティブな画面に対して
「前の画面」、「うしろの画面」などということにな
り、ユーザは、これを発声してウインドウ画面を選択す
る。これらの単語は、不特定話者向けの標準パターンと
して登録されていて、もちろんユーザ（特定話者）が標
準パターンとして登録しないでも使用可能とする。な
お、マウス２によるウインドウ画面指示用の単語（「こ
こ」、「この画面」など）の標準パターンも不特定話者
むけの第１辞書２６に登録されている。これらの単語
は、マウス２により操作されるカーソル３６の位置を指
示する。
【００１４】一方、個々のウインドウ画面については、
ユーザは、パーソナルコンピュータ部１０で、自分でウ
インドウ画面に名称（画面定義の言葉）を付ける。同時
に、第２種の制御語として、ユーザは、特定話者の第２
辞書２７へそのウインドウ画面で必要な専用のウインド
ウ制御用の単語（ウインドウ名称やコマンドなど）の登
録を行う。すなわち、これらのユーザ自身により定義さ
れる各ウインドウ画面における専用のコマンド（たとえ
ば図３におけるウインドウ３５の上層に表示された「フ
ァイル」、「編集」など）は、各処理によって異なるた
め、特定話者であるユーザが特定話者向けの第２辞書２
７に登録して用いる。従って、名称で特定された各ウイ
ンドウ画面に対する使用単語グループが、図４のように
特定話者辞書２７内の各グループ（グループ１、グルー
プ２、…）内にウインドウごとに構成されることにな
る。図の例では、最上層のウインドウ画面の上部に位置
された制御コマンド「ファイル」、「編集」などは、特
定話者辞書２７のグループ１にユーザにより登録されて
いる。なお、特定話者向けの第２辞書２７への単語の登
録において、マイクロフォン５から入力されたユーザの
音声は、前処理部２１で増幅、整形され、次に、特徴抽
出部２２で、前処理された信号から、周波数解析により
認識処理に必要な特徴量が抽出され、次に、認識部２３
を介して、抽出された特徴量が、標準パターン部２５の
第２辞書２７内の、定義されたウインドウに対応するグ
ループに登録される。
ユーザは、パーソナルコンピュータ部１０で、自分でウ
インドウ画面に名称（画面定義の言葉）を付ける。同時
に、第２種の制御語として、ユーザは、特定話者の第２
辞書２７へそのウインドウ画面で必要な専用のウインド
ウ制御用の単語（ウインドウ名称やコマンドなど）の登
録を行う。すなわち、これらのユーザ自身により定義さ
れる各ウインドウ画面における専用のコマンド（たとえ
ば図３におけるウインドウ３５の上層に表示された「フ
ァイル」、「編集」など）は、各処理によって異なるた
め、特定話者であるユーザが特定話者向けの第２辞書２
７に登録して用いる。従って、名称で特定された各ウイ
ンドウ画面に対する使用単語グループが、図４のように
特定話者辞書２７内の各グループ（グループ１、グルー
プ２、…）内にウインドウごとに構成されることにな
る。図の例では、最上層のウインドウ画面の上部に位置
された制御コマンド「ファイル」、「編集」などは、特
定話者辞書２７のグループ１にユーザにより登録されて
いる。なお、特定話者向けの第２辞書２７への単語の登
録において、マイクロフォン５から入力されたユーザの
音声は、前処理部２１で増幅、整形され、次に、特徴抽
出部２２で、前処理された信号から、周波数解析により
認識処理に必要な特徴量が抽出され、次に、認識部２３
を介して、抽出された特徴量が、標準パターン部２５の
第２辞書２７内の、定義されたウインドウに対応するグ
ループに登録される。
【００１５】不特定話者対応の相対的な画面制御により
ウインドウ画面を選択するたびに、選ばれた画面(基準
画面)の特定話者向けの第２辞書２７に音声認識対象が
切り換えられる。すなわち、音声入力よりウインドウを
選択した時に、その音声入力は、認識部２３で特定話者
向け第２辞書２７に登録されてウインドウ名称と比較さ
れ、認識され、この識別結果が音声キーエミュレータ１
４を介してＯＳ１２に入力される。ＯＳ１２の画面制御
部１２１は、グループ指示部１２２を介して、指定され
た特定話者の第２辞書２７をアクセスする。これによ
り、次の音声入力の認識は、選択されたウインドウで用
いる制御単語のみを認識対象としてを行う。特定話者向
けの第２辞書２７に各ユーザ（特定話者）により登録さ
れる単語数は少ない。したがって、認識対象となる語数
が制限でき、認識率の低下や処理時間の遅延を防ぐこと
が可能になる。
ウインドウ画面を選択するたびに、選ばれた画面(基準
画面)の特定話者向けの第２辞書２７に音声認識対象が
切り換えられる。すなわち、音声入力よりウインドウを
選択した時に、その音声入力は、認識部２３で特定話者
向け第２辞書２７に登録されてウインドウ名称と比較さ
れ、認識され、この識別結果が音声キーエミュレータ１
４を介してＯＳ１２に入力される。ＯＳ１２の画面制御
部１２１は、グループ指示部１２２を介して、指定され
た特定話者の第２辞書２７をアクセスする。これによ
り、次の音声入力の認識は、選択されたウインドウで用
いる制御単語のみを認識対象としてを行う。特定話者向
けの第２辞書２７に各ユーザ（特定話者）により登録さ
れる単語数は少ない。したがって、認識対象となる語数
が制限でき、認識率の低下や処理時間の遅延を防ぐこと
が可能になる。
【００１６】図５は、ＣＰＵ１１による音声認識を用い
たウインドウ画面制御のフローチャートを示す。まず、
第１辞書２６を認識対象とする（ステップＳ１０）。次
に、発声によりウインドウ画面の相対的指定が入力され
（ステップＳ１２）、選択されたウインドウ画面が表示
される。次に、グループ指示部１２２を介して、認識対
象を、選択されたウインドウ画面についての第２辞書２
７に変更する（ステップＳ１４）。次に、選択されたウ
インドウ画面での音声によるコマンド操作が行われる
（ステップＳ１６）。次に、そのウインドウ画面での処
理の終了（または、ウインドウ画面の変更）のコマンド
であるか否かが判定され（ステップＳ１８）、終了（変
更）のコマンドでなければ、ステップＳ１６に戻り、第
２辞書２７での音声認識を続ける。しかし、終了（また
は変更）のコマンドであれば、ステップＳ１０に戻り、
第１辞書２６での音声認識に切り換える。
たウインドウ画面制御のフローチャートを示す。まず、
第１辞書２６を認識対象とする（ステップＳ１０）。次
に、発声によりウインドウ画面の相対的指定が入力され
（ステップＳ１２）、選択されたウインドウ画面が表示
される。次に、グループ指示部１２２を介して、認識対
象を、選択されたウインドウ画面についての第２辞書２
７に変更する（ステップＳ１４）。次に、選択されたウ
インドウ画面での音声によるコマンド操作が行われる
（ステップＳ１６）。次に、そのウインドウ画面での処
理の終了（または、ウインドウ画面の変更）のコマンド
であるか否かが判定され（ステップＳ１８）、終了（変
更）のコマンドでなければ、ステップＳ１６に戻り、第
２辞書２７での音声認識を続ける。しかし、終了（また
は変更）のコマンドであれば、ステップＳ１０に戻り、
第１辞書２６での音声認識に切り換える。
【００１７】次に、マウス使用時の音声入力について説
明する。ポインティングデバイスとしてのマウス２は、
その座標をマウスＢＩＯＳ１７を通してＯＳ１２に知ら
せ、それに基づき、カーソル３６がディスプレイ３に表
示される。一般に、その座標の取得は、人間にとって高
速な割り込み処理を用いて行われている。従って、キー
ボード入力と同様に、音声入力との並行動作も可能とな
る。
明する。ポインティングデバイスとしてのマウス２は、
その座標をマウスＢＩＯＳ１７を通してＯＳ１２に知ら
せ、それに基づき、カーソル３６がディスプレイ３に表
示される。一般に、その座標の取得は、人間にとって高
速な割り込み処理を用いて行われている。従って、キー
ボード入力と同様に、音声入力との並行動作も可能とな
る。
【００１８】一般に、ウインドウ画面の制御には、ポイ
ンティングデバイスとしてマウス２が用いられている。
本実施例では、ポインティングを行うときに、必要なウ
インドウの切り替えが音声で指示できる。すなわち、マ
ウス移動時に入力された音声の認識結果が、不特定話者
向けの第１辞書２６に登録されたポインティング用の制
御単語の場合、その動作をマウス２の代わりに行わしめ
る。すなわち、マウス移動時に、必要なウインドウ画面
を音声で指示し、たとえばマウスポインタの指している
画面に対し「ここ」などと発声することにより、「こ
こ」または「この画面」といった不特定話者のポインテ
ィング用の標準パターンが認識された時に、その画面を
最上層にもってきてアクティブにする。このマウス２の
ための「ここ」などのウインドウ指定用の単語も、ウイ
ンドウ画面の名称ではなく、相対的位置をあらわす制御
単語である。その後、その指定された画面についての特
定話者向けの第２辞書の単語グループを音声認識対象と
する。マウスによるウインドウ指定における音声入力
も、図５のフローと同様に制御される。ここに、ステッ
プＳ１２において、マウス移動中の音声入力から、マウ
スのポインティング用単語が認識される。
ンティングデバイスとしてマウス２が用いられている。
本実施例では、ポインティングを行うときに、必要なウ
インドウの切り替えが音声で指示できる。すなわち、マ
ウス移動時に入力された音声の認識結果が、不特定話者
向けの第１辞書２６に登録されたポインティング用の制
御単語の場合、その動作をマウス２の代わりに行わしめ
る。すなわち、マウス移動時に、必要なウインドウ画面
を音声で指示し、たとえばマウスポインタの指している
画面に対し「ここ」などと発声することにより、「こ
こ」または「この画面」といった不特定話者のポインテ
ィング用の標準パターンが認識された時に、その画面を
最上層にもってきてアクティブにする。このマウス２の
ための「ここ」などのウインドウ指定用の単語も、ウイ
ンドウ画面の名称ではなく、相対的位置をあらわす制御
単語である。その後、その指定された画面についての特
定話者向けの第２辞書の単語グループを音声認識対象と
する。マウスによるウインドウ指定における音声入力
も、図５のフローと同様に制御される。ここに、ステッ
プＳ１２において、マウス移動中の音声入力から、マウ
スのポインティング用単語が認識される。
【００１９】
【発明の効果】音声入力を用いたウインドウ制御方式を
用いることにより、ウインドウの画面制御が効率的に、
高速に行える。したがって、音声入力の認識率の向上と
処理の高速化を図ることができる。ウインドウ画面の制
御用の単語に対し、不特定話者認識を用いているため、
標準パターンの登録の手間が省ける。
用いることにより、ウインドウの画面制御が効率的に、
高速に行える。したがって、音声入力の認識率の向上と
処理の高速化を図ることができる。ウインドウ画面の制
御用の単語に対し、不特定話者認識を用いているため、
標準パターンの登録の手間が省ける。
【図１】パーソナルコンピュータの斜視図である。
【図２】図１に示したシステムの基本的なハードウェア
の構成のブロック図である。
の構成のブロック図である。
【図３】ディスプレイ上に複数個開かれたウインドウ画
面の図である。
面の図である。
【図４】標準パターンにおける各種ウインドウ制御辞書
の構成を示す図である。
の構成を示す図である。
【図５】音声認識のフローチャートである。
１…キーボード、 ２…マウス、 ５…マイクロフォ
ン、 １０…パーソナルコンピュータ部、 １１…ＣＰＵ、
１２…ＯＳ、１４…音声キーエミュレータ、 １５…音
声マウスエミュレータ、２０…音声認識部、 ２５…標
準パターン部、２６…不特定話者向け第１辞書、 ２７
…特定話者向け第２辞書。
ン、 １０…パーソナルコンピュータ部、 １１…ＣＰＵ、
１２…ＯＳ、１４…音声キーエミュレータ、 １５…音
声マウスエミュレータ、２０…音声認識部、 ２５…標
準パターン部、２６…不特定話者向け第１辞書、 ２７
…特定話者向け第２辞書。
Claims (4)
- 【請求項１】 ウインドウを表示するディスプレイとキ
ーボードとを備え、キー入力データに対応して、ディス
プレイでのウインドウ画面の切り替えを行うウインドウ
画面制御装置において、 アクティブなウインドウ画面に対する、制御対象のウイ
ンドウ画面の相対的位置を示すウインドウ画面選択用コ
マンドを表す、不特定話者向けの音声の標準パターンを
記憶する第１辞書と、 選択されたウインドウ画面における専用のウインドウ制
御コマンドの特定話者向けの音声の標準パターンを記憶
する第２辞書と、 入力された音声から特徴量を抽出し、第１辞書と第２辞
書に登録されている音声の標準パターンと比較演算し、
その音声の認識を行う音声認識手段と、 音声認識手段から入力された認識結果を、対応するキー
入力データに変換する音声キーエミュレータ手段とを備
え、 音声によりウインドウ画面を選択できることを特徴とす
るウインドウ画面制御装置。 - 【請求項２】 音声入力よりウインドウが選択された時
に、上記の音声認識手段は、第２辞書のみを用いて次の
音声入力の認識を行うことを特徴とする請求項１に記載
されたウインドウ画面制御装置。 - 【請求項３】 ウインドウを表示するディスプレイとポ
インティングデバイスとしてのマウスとを備え、マウス
入力データに対応して、ディスプレイでのウインドウ画
面の切り替えを行うウインドウ画面制御装置において、 アクティブなウインドウ画面に対する、制御対象のウイ
ンドウ画面の相対的位置を示すポインティング用コマン
ドを表す、不特定話者向けの音声の標準パターンを記憶
する第１辞書と、 選択されたウインドウ画面における専用のウインドウ制
御コマンドの特定話者向けの音声の標準パターンを記憶
する第２辞書と、 入力された音声から特徴量を抽出し、第１辞書と第２辞
書に登録されている音声の標準パターンと比較演算し、
その音声の認識を行う音声認識手段と、 マウス移動時に、音声認識手段から入力された識別結果
を入力し、認識結果を対応するマウス入力データに変換
する音声マウスエミュレータ手段とを備え、 音声によりマウスのポインティング用の動作の代わりを
させることを特徴とするウインドウ画面制御装置。 - 【請求項４】 音声入力よりウインドウが選択された時
に、上記の音声認識手段は、第２辞書のみを用いて次の
音声入力の認識を行うことを特徴とする請求項３に記載
されたウインドウ画面制御装置。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP06698992A JP3286339B2 (ja) | 1992-03-25 | 1992-03-25 | ウインドウ画面制御装置 |
| US08/589,181 US5974384A (en) | 1992-03-25 | 1996-01-19 | Window control apparatus and method having function for controlling windows by means of voice-input |
| US09/420,406 US6477499B1 (en) | 1992-03-25 | 1999-10-18 | Window control apparatus and method having function for controlling windows by means of voice-input |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP06698992A JP3286339B2 (ja) | 1992-03-25 | 1992-03-25 | ウインドウ画面制御装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0643894A JPH0643894A (ja) | 1994-02-18 |
| JP3286339B2 true JP3286339B2 (ja) | 2002-05-27 |
Family
ID=13331938
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP06698992A Expired - Fee Related JP3286339B2 (ja) | 1992-03-25 | 1992-03-25 | ウインドウ画面制御装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (2) | US5974384A (ja) |
| JP (1) | JP3286339B2 (ja) |
Families Citing this family (52)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3286339B2 (ja) * | 1992-03-25 | 2002-05-27 | 株式会社リコー | ウインドウ画面制御装置 |
| US6668244B1 (en) * | 1995-07-21 | 2003-12-23 | Quartet Technology, Inc. | Method and means of voice control of a computer, including its mouse and keyboard |
| US6038534A (en) * | 1997-09-11 | 2000-03-14 | Cowboy Software, Inc. | Mimicking voice commands as keyboard signals |
| KR20000075828A (ko) * | 1997-12-30 | 2000-12-26 | 요트.게.아. 롤페즈 | 명령어 목록을 이용한 음성 인식 디바이스 |
| US6301560B1 (en) * | 1998-01-05 | 2001-10-09 | Microsoft Corporation | Discrete speech recognition system with ballooning active grammar |
| US6424357B1 (en) * | 1999-03-05 | 2002-07-23 | Touch Controls, Inc. | Voice input system and method of using same |
| US6728675B1 (en) * | 1999-06-03 | 2004-04-27 | International Business Machines Corporatiion | Data processor controlled display system with audio identifiers for overlapping windows in an interactive graphical user interface |
| US6615176B2 (en) * | 1999-07-13 | 2003-09-02 | International Business Machines Corporation | Speech enabling labeless controls in an existing graphical user interface |
| US6718308B1 (en) | 2000-02-22 | 2004-04-06 | Daniel L. Nolting | Media presentation system controlled by voice to text commands |
| US6937701B1 (en) * | 2000-06-16 | 2005-08-30 | Nortel Networks Limited | Telecommunications network having a switch equipped with an IVR provisioning/monitoring system |
| US7127401B2 (en) * | 2001-03-12 | 2006-10-24 | Ge Medical Systems Global Technology Company, Llc | Remote control of a medical device using speech recognition and foot controls |
| WO2003042975A1 (en) * | 2001-11-16 | 2003-05-22 | Koninklijke Philips Electronics N.V. | Device to edit a text in predefined windows |
| US6910911B2 (en) | 2002-06-27 | 2005-06-28 | Vocollect, Inc. | Break-away electrical connector |
| US7461352B2 (en) * | 2003-02-10 | 2008-12-02 | Ronald Mark Katsuranis | Voice activated system and methods to enable a computer user working in a first graphical application window to display and control on-screen help, internet, and other information content in a second graphical application window |
| US7605813B2 (en) | 2003-04-22 | 2009-10-20 | International Business Machines Corporation | Displaying arbitrary relationships in a tree-map visualization |
| WO2004109471A2 (en) * | 2003-06-06 | 2004-12-16 | The Trustees Of Columbia University In The City Of New York | System and method for voice activating web pages |
| US20050010418A1 (en) * | 2003-07-10 | 2005-01-13 | Vocollect, Inc. | Method and system for intelligent prompt control in a multimodal software application |
| US20050010892A1 (en) * | 2003-07-11 | 2005-01-13 | Vocollect, Inc. | Method and system for integrating multi-modal data capture device inputs with multi-modal output capabilities |
| NL1025098C2 (nl) * | 2003-12-22 | 2005-07-04 | Xelion B V | Inrichting, werkwijze, programmatuur en datadrager omvattende programmatuur voor het weergeven van informatie op een beeldscherm. |
| US8001479B2 (en) * | 2004-02-03 | 2011-08-16 | Ronald Mark Katsuranis | System and methods to access computer files and position and control application window(s) on a graphical user interface |
| US20060123220A1 (en) * | 2004-12-02 | 2006-06-08 | International Business Machines Corporation | Speech recognition in BIOS |
| JP4667138B2 (ja) * | 2005-06-30 | 2011-04-06 | キヤノン株式会社 | 音声認識方法及び音声認識装置 |
| US20070055520A1 (en) * | 2005-08-31 | 2007-03-08 | Microsoft Corporation | Incorporation of speech engine training into interactive user tutorial |
| US8139025B1 (en) | 2006-04-01 | 2012-03-20 | Rockwell Collins, Inc. | Cursor positioning via voice recognition |
| US7499858B2 (en) * | 2006-08-18 | 2009-03-03 | Talkhouse Llc | Methods of information retrieval |
| US8689203B2 (en) * | 2008-02-19 | 2014-04-01 | Microsoft Corporation | Software update techniques based on ascertained identities |
| USD626949S1 (en) | 2008-02-20 | 2010-11-09 | Vocollect Healthcare Systems, Inc. | Body-worn mobile device |
| US20090248397A1 (en) * | 2008-03-25 | 2009-10-01 | Microsoft Corporation | Service Initiation Techniques |
| US8418076B2 (en) * | 2008-05-15 | 2013-04-09 | Microsoft Corporation | Managing inputs from a plurality of user input device actuators |
| US20100100821A1 (en) * | 2008-10-17 | 2010-04-22 | Aibelive Co., Ltd. | Window detection system and method for operating the same |
| US8386261B2 (en) | 2008-11-14 | 2013-02-26 | Vocollect Healthcare Systems, Inc. | Training/coaching system for a voice-enabled work environment |
| US20110131040A1 (en) * | 2009-12-01 | 2011-06-02 | Honda Motor Co., Ltd | Multi-mode speech recognition |
| JP5463922B2 (ja) * | 2010-01-12 | 2014-04-09 | 株式会社デンソー | 車載機 |
| WO2011112533A1 (en) * | 2010-03-08 | 2011-09-15 | Stereotaxis, Inc. | Method for managing non-overlapping windows |
| US8659397B2 (en) | 2010-07-22 | 2014-02-25 | Vocollect, Inc. | Method and system for correctly identifying specific RFID tags |
| USD643400S1 (en) | 2010-08-19 | 2011-08-16 | Vocollect Healthcare Systems, Inc. | Body-worn mobile device |
| USD643013S1 (en) | 2010-08-20 | 2011-08-09 | Vocollect Healthcare Systems, Inc. | Body-worn mobile device |
| US9600135B2 (en) | 2010-09-10 | 2017-03-21 | Vocollect, Inc. | Multimodal user notification system to assist in data capture |
| US9432611B1 (en) | 2011-09-29 | 2016-08-30 | Rockwell Collins, Inc. | Voice radio tuning |
| US9922651B1 (en) | 2014-08-13 | 2018-03-20 | Rockwell Collins, Inc. | Avionics text entry, cursor control, and display format selection via voice recognition |
| US9377852B1 (en) | 2013-08-29 | 2016-06-28 | Rockwell Collins, Inc. | Eye tracking as a method to improve the user interface |
| US9132913B1 (en) | 2013-09-26 | 2015-09-15 | Rockwell Collins, Inc. | Simplified auto-flight system coupled with a touchscreen flight control panel |
| US9830910B1 (en) | 2013-09-26 | 2017-11-28 | Rockwell Collins, Inc. | Natrual voice speech recognition for flight deck applications |
| WO2014103035A1 (ja) * | 2012-12-28 | 2014-07-03 | 株式会社レイトロン | 音声認識デバイス |
| KR102009316B1 (ko) * | 2013-01-07 | 2019-08-09 | 삼성전자주식회사 | 대화형 서버, 디스플레이 장치 및 그 제어 방법 |
| USD746747S1 (en) | 2013-09-26 | 2016-01-05 | Rockwell Collins, Inc. | Flight control panel |
| US10051606B1 (en) | 2015-09-03 | 2018-08-14 | Rockwell Collins, Inc. | Efficient spectrum allocation system and method |
| JP6645779B2 (ja) * | 2015-09-11 | 2020-02-14 | 株式会社Ｎｔｔドコモ | 対話装置および対話プログラム |
| US9824689B1 (en) | 2015-12-07 | 2017-11-21 | Rockwell Collins Inc. | Speech recognition for avionic systems |
| US10360914B2 (en) * | 2017-01-26 | 2019-07-23 | Essence, Inc | Speech recognition based on context and multiple recognition engines |
| CN107147618B (zh) * | 2017-04-10 | 2020-05-15 | 易视星空科技无锡有限公司 | 一种用户注册方法、装置及电子设备 |
| US11487406B1 (en) * | 2021-09-01 | 2022-11-01 | Microsoft Technology Licensing, Llc | Windowing container |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS58195957A (ja) * | 1982-05-11 | 1983-11-15 | Casio Comput Co Ltd | 音声によるプログラム実行方式 |
| US4776016A (en) * | 1985-11-21 | 1988-10-04 | Position Orientation Systems, Inc. | Voice control system |
| US4821211A (en) * | 1987-11-19 | 1989-04-11 | International Business Machines Corp. | Method of navigating among program menus using a graphical menu tree |
| US5252951A (en) * | 1989-04-28 | 1993-10-12 | International Business Machines Corporation | Graphical user interface with gesture recognition in a multiapplication environment |
| US5157384A (en) * | 1989-04-28 | 1992-10-20 | International Business Machines Corporation | Advanced user interface |
| JP3088739B2 (ja) * | 1989-10-06 | 2000-09-18 | 株式会社リコー | 音声認識システム |
| JP2989211B2 (ja) * | 1990-03-26 | 1999-12-13 | 株式会社リコー | 音声認識装置における辞書制御方式 |
| US5297253A (en) * | 1992-01-09 | 1994-03-22 | Ehrlich Associates, Inc. | Computer user interface navigational tool |
| JP3286339B2 (ja) * | 1992-03-25 | 2002-05-27 | 株式会社リコー | ウインドウ画面制御装置 |
| US5790820A (en) * | 1995-06-07 | 1998-08-04 | Vayda; Mark | Radial graphical menuing system |
| US5745717A (en) * | 1995-06-07 | 1998-04-28 | Vayda; Mark | Graphical menu providing simultaneous multiple command selection |
| US5873064A (en) * | 1996-11-08 | 1999-02-16 | International Business Machines Corporation | Multi-action voice macro method |
| US5864819A (en) * | 1996-11-08 | 1999-01-26 | International Business Machines Corporation | Internal window object tree method for representing graphical user interface applications for speech navigation |
-
1992
- 1992-03-25 JP JP06698992A patent/JP3286339B2/ja not_active Expired - Fee Related
-
1996
- 1996-01-19 US US08/589,181 patent/US5974384A/en not_active Expired - Lifetime
-
1999
- 1999-10-18 US US09/420,406 patent/US6477499B1/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH0643894A (ja) | 1994-02-18 |
| US5974384A (en) | 1999-10-26 |
| US6477499B1 (en) | 2002-11-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3286339B2 (ja) | ウインドウ画面制御装置 | |
| US6570588B1 (en) | Editing support system including an interactive interface | |
| JP3530591B2 (ja) | 音声認識装置及びこれを用いた情報処理装置とそれらの方法 | |
| JPH0981364A (ja) | マルチモーダル情報入力方法及び装置 | |
| US20020178009A1 (en) | Voice controlled computer interface | |
| JPH08123648A (ja) | 対話ボックスを持つデータ処理装置 | |
| JP2000215022A (ja) | コンピュ―タ制御対話式表示システム、音声コマンド入力方法および記録媒体 | |
| JP2003241790A (ja) | 音声コマンド処理システム、コンピュータ装置、音声コマンド処理方法およびプログラム | |
| JP3399674B2 (ja) | 画面制御装置とその方法 | |
| Kasprzak et al. | Agent-based approach to the design of a multimodal interface for cyber-security event visualisation control | |
| JPH1124695A (ja) | 音声認識処理装置および音声認識処理方法 | |
| JP3762300B2 (ja) | テキスト入力処理装置及び方法並びにプログラム | |
| JPH086940A (ja) | 音声入力方式およびそれを用いた情報処理装置 | |
| JP3006497B2 (ja) | 音声認識装置 | |
| JP2002268667A (ja) | プレゼンテーションシステムおよびその制御方法 | |
| JP2603920B2 (ja) | 音声認識装置 | |
| JPH10111784A (ja) | パーソナルコンピュータおよびコマンド制御方法 | |
| JPS5864548A (ja) | 音声日本語処理システム | |
| JP2685429B2 (ja) | 音声認識装置 | |
| JP3592803B2 (ja) | 音声認識装置および音声認識方法 | |
| JPH03253938A (ja) | 音声認識システム | |
| JPH04238530A (ja) | 音声入力システム | |
| JPH05189139A (ja) | コマンド入力方法および情報処理装置 | |
| JPH05151259A (ja) | 文入力処理方式 | |
| JPH0269820A (ja) | 音声ウィンドウシステム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090308 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100308 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110308 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120308 Year of fee payment: 10 |
|
| LAPS | Cancellation because of no payment of annual fees |