JP2008293252A - 操作システム及び操作システムの制御方法 - Google Patents

Abstract

【課題】操作端末と装置で構成された操作システムにおいて、音声認識した操作命令の内容をユーザが確実に確認できるようにする。
【解決手段】操作端末から入力した音声の操作命令で装置を動作させる操作システムにおいて、前記入力した音声を認識し、認識した音声が予め定めた操作命令に該当するか否かを識別する音声認識手段と、前記音声認識手段が予め定めた操作命令に該当すると識別した場合に、前記入力した音声に対応する操作命令の内容を示した命令実行確認画面を表示する表示制御手段とを備え、操作命令の実行前にユーザが視覚で確認できるようにした。
【選択図】 図４

Description

この発明は、装置とこの装置を動作させるための操作端末とから構成され、この操作端末から音声入力によって装置を動作させることができる操作システムに関するものである。

操作端末で音声入力し、アプリケーションサーバへの指示を可能にした音声入力システムは、例えば特開２０００−７６０４０号公報に記載されているものがある。

また、音声入力できるシステムに関しては、例えば特開２００４−３７９９８号公報に記載されているものがあり、この公報に記載のものは、音声での操作命令を認識した場合、その操作命令を即実行し、その操作命令以降の操作命令を受け付けるための画面を表示することが記載されている。

特開２０００−７６０４０号公報 特開２００４−３７９９８号公報

前記特開２０００−７６０４０号公報に記載のシステムにおいては、アプリケーションを実行する際に、入力された音声によってその内容を確認しているものの、音声認識したその操作命令は即実行され、ユーザが、システムで認識された操作命令の内容を確認できるものではなかった。このため、似たような言葉の操作命令を発声した場合、誤認識されていることを確認できないまま、操作命令が実行される恐れがある。また、ユーザが誤った操作命令を発声した場合、その誤りに気づく間もなく、即実行される恐れがある。

また、特開２００４−３７９９８号公報に記載のものは、操作端末と装置とで構成されたものではなく、また、音声認識された操作命令の内容を画面上で確認させるものではなく、ユーザが誤った操作命令を発声した場合や、音声認識部が誤認識した場合、その誤った操作が即実行される恐れがある。

本発明は、上記の問題を解決するためになされたもので、操作端末と装置で構成された操作システムにおいて、音声認識した際に、その音声認識した内容をユーザが確認できるようにした操作システムを提供するものである。

本発明の請求項１に記載の操作システムは、
操作端末から入力した音声の操作命令で装置を動作させる操作システムにおいて、
前記入力した音声を認識し、認識した音声が予め定めた操作命令に該当するか否かを識別する音声認識手段と、
前記音声認識手段が予め定めた操作命令に該当すると識別した場合に、前記入力した音声に対応する操作命令の内容を示した命令実行確認画面を表示する表示制御手段とを備えたものである。

また、本発明の請求項２に記載の操作システムは、
前記音声認識手段が予め定めた操作命令に該当すると識別した場合に、前記入力した音声を、前記識別した操作命令の内容と関連付けて、音声データとして記憶するデータベースを更に備えたものである。

また、本発明の請求項３に記載の操作システムは、
前記データベースに記憶した操作命令の内容と関連付けた音声データの一覧を表示し、前記一覧から選択した音声データを前記データベースから抽出してその内容を音声出力する検索手段を更に備えたものである。

また、本発明の請求項４に記載の操作システムは、
前記音声認識手段は、前記入力した音声を認識し、認識した音声が予め登録された操作者の音声に該当するか否かを識別する操作者識別手段を更に備え、
前記表示制御手段は、前記操作者識別手段が予め登録された操作者の音声に該当すると識別した場合にのみ、操作の継続を許容する操作確認画面を表示するものである。

また、本発明の請求項５に記載の操作システムは、
前記装置を動作させる操作命令の種別に対応した許容操作者リストを予め備え、前記音声認識手段が予め定めた操作命令に該当すると識別し、更に前記操作者識別手段が予め登録された操作者の音声に該当すると識別した場合に、前記表示制御手段は、当該識別した操作命令と操作者が前記許容操作者リストに含まれる場合にのみ、操作の継続を許容する操作画面を表示するものである。

また、本発明の請求項６に記載の操作システムは、
前記操作確認画面の表示にもとづいて操作者が操作の継続を実行した場合に、前記入力した音声を、前記識別した操作命令の内容および操作者名と関連付けて、音声データとして記憶するデータベースを更に備えたものである。

また、本発明の請求項７に記載の操作システムは、
前記データベースに記憶した操作命令の内容および操作者名と関連付けた音声データの一覧を表示し、選択した音声データを前記データベースから抽出してその内容を音声出力する検索手段を更に備えたものである。

また、本発明の請求項８に記載の操作システムの制御方法は、
操作端末から入力した音声の操作命令で装置を動作させる操作システムの制御方法において、
前記入力した音声を認識し、認識した音声が予め定めた操作命令に該当するか否かを識別する認識ステップと、
前記認識ステップで予め定めた操作命令に該当すると識別した場合に、前記入力した音声に対応する操作命令の内容を示した命令実行確認画面を表示する第1の表示ステップとを備えたものである。

また、本発明の請求項９に記載の操作システムの制御方法は、
前記認識ステップで予め定めた操作命令に該当すると識別した場合に、前記入力した音声を、前記識別した操作命令の内容と関連付けて、音声データとして記憶する記憶ステップを更に備えたものである。

また、本発明の請求項１０に記載の操作システムの制御方法は、
前記記憶ステップで記憶した操作命令の内容と関連付けた音声データの一覧を表示し、前記一覧から選択した音声データを抽出してその内容を音声出力する検索ステップを更に備えたものである。

また、本発明の請求項１１に記載の操作システムの制御方法は、
前記認識ステップは、前記入力した音声を認識し、認識した音声が予め登録された操作者の音声に該当するか否かを識別する操作者認識ステップを更に備え、
前記操作者認識ステップが予め登録された操作者の音声に該当すると識別した場合にのみ、操作の継続を許容する操作確認画面を表示する第２の表示ステップを備えたものである。

また、本発明の請求項１２に記載の操作システムの制御方法は、
前記装置を動作させる操作命令の種別に対応した許容操作者リストを予め備え、
前記認識ステップが予め定めた操作命令に該当すると識別し、更に前記操作者認識ステップが予め登録された操作者の音声に該当すると識別した場合に、当該識別した操作命令と操作者が前記許容操作者リストに含まれる場合にのみ、操作の継続を許容する操作画面を表示する第３の表示ステップとを備えたものである。

また、本発明の請求項１３に記載の操作システムの制御方法は、
前記操作確認画面の表示にもとづいて操作者が操作の継続を実行した場合に、前記入力した音声を、前記識別した操作命令の内容および操作者名と関連付けて、音声データとして記憶する記憶ステップを更に備えたものである。

更に、本発明の請求項１４に記載の操作システムの制御方法は、
前記記憶ステップが記憶した操作命令の内容および操作者名と関連付けた音声データの一覧を表示し、前記一覧から選択した音声データを抽出してその内容を音声出力する検索ステップとを更に備えたものである。

このような本発明の操作システムや操作システムの制御方法によれば、その音声が認識された場合、その認識された操作命令の内容を示す確認画面を表示させているので、操作を実行する前に操作命令の内容を確認することができる。このため、操作システムが誤認識した場合や操作者が発声し間違えた場合があれば、操作命令の実行を中止することができ、誤った操作命令がすぐに実行されることを中止することができる。

本発明の第１実施例について、図１〜図６にもとづき説明する。最初に全体の構成について、図１〜図２にもとづき説明する。

図１は本発明の操作システムを示す説明図である。図１に示す１０１は操作端末、１０２は入力装置、１０３は表示部として機能するディスプレイ、１０４はマイク、１０５は端末本体、１０６はスピーカである。また、１０２Ａはキーボード、１０２Ｂはマウスで、入力装置１０２はこれらキーボード１０２Ａとマウス１０２Ｂとで構成されている。

１０７はネットワークで、例えばＬＡＮ（Local Area Network）を使用しているが、インターネットやＷＡＮ（Wide Area Network）を利用しても、ネットワークを介さずに直接ケーブル接続しても構わない。１０８は装置で、この装置１０８はネットワーク１０７につながれている。

そして、ユーザは操作端末１０１のキーボード１０２Ａやマウス１０２Ｂ等の入力装置１０２や、音声入力のためのマイク１０４を使用することによって、装置１０８を操作する。

図２は本発明の操作システムの機能を示す機能ブロック図である。この図２に示す２０１はキー入力部、２０２は画面表示部、２０３は音声認識手段として機能する音声認識部、２０４は音声記録部、２０５は検索手段として機能する音声検索再生部、２０６は処理部である。

前記処理部２０６は本発明の操作システム全体の処理を行うためのものであり、ＣＰＵ（中央処理装置、Central Processing Unit）等から構成され、他の各部と協働して、各機能手段を実現する。例えば、マイク１０４から入力した音声を音声認識部２０３で正当な操作命令と認識する音声認識手段として機能したり、後述する画像表示部２０２と協働してディスプレイ１０３にその認識した操作命令の内容を示した実行確認画面を表示させる表示制御手段として機能したりする。また、キー入力部２０１はキーボード１０２Ａやマウス１０２Ｂからの入力情報を処理するものであり、画面表示部２０２はディスプレイ１０３に表示する情報を処理するものである。また、音声認識部２０３はマイク１０４からの入力情報を処理するものであり、音声記録部２０４は入力された音声情報を記憶するもので、データベースとして機能する。更に、音声検索再生部２０５は音声記録部２０４に記憶された音声から音声を検索し、ヒットした音声をスピーカ１０６から出力するものである。尚、この音声検索再生部２０５やスピーカ１０６は、音声記録部２０４に記憶された音声データおよびそのときの操作命令の内容を後日確認できる確認機能を実現するための主な構成である。

２０７は制御部で、この制御部２０７は装置１０８に配置されており、この制御部２０７は処理部２０６からの操作命令で操作されるものである。

図３は本発明の操作システムの動作を示すフローチャート、図４は同操作システムの操作時における画面変遷を示す説明図、図５は同操作システムの検索時の動作を示すフローチャート、図６は同操作システムの検索時の操作履歴リストを示す説明図である。

次に、これらの図３〜図６を主に参照して第1実施例の動作について説明する。

最初に、操作者はディスプレイ１０３の画面４０３で表示される音声認識開始確認画面の操作実行確認ボタン４０１に、マウスポインタ４０２を合わせてクリックする（図３のステップ３０１、以下「ステップ」をＳと記す）。また、異なる入力方法として、キーボード１０２Ａからのキー操作でも入力できるのは勿論である。

音声認識開始確認画面における操作実行確認ボタン４０１がクリックされた事を認識した処理部２０６は音声認識部２０３に音声認識の開始を通知する。そして、操作者は、操作端末１０１に接続するマイク１０４に操作命令を発声する（Ｓ３０２）。音声認識部２０３はマイク１０４から入力された音声を解析し、入力を期待される単語と一致しているかどうか識別を行う（Ｓ３０３）。

この入力が期待された単語は、装置１０８を操作するためのものであり、例えば、アプリケーションの操作に関する特定の単語として予め決められている。そして、音声認識がなされて単語が認識され、ある操作命令の単語と認識されても、期待された単語として予め決まっているものでなければ、その単語に対する操作命令は受け付けないものである。

入力が期待された単語と一致していない場合（Ｓ３０３Ｎｏ）、音声認識部２０３は、処理部２０６に入力音声内容不一致を通知し音声認識を終了する。処理部２０６は、音声認識部２０３から入力音声不一致を通知された場合、画面表示部２０２と協働してディスプレイ１０３の操作画面に入力音声内容不一致のエラーメッセージを表示する。

入力が期待された単語と一致している場合（Ｓ３０３Ｙｅｓ）、音声認識部２０３は、処理部２０６に入力音声内容一致の旨と認識した操作命令を通知し、音声認識を終了する。処理部２０６は、音声認識部２０３から操作命令を通知されると、入力音声を操作時刻の情報と共に音声記録部２０４に記憶する（Ｓ３０４）。また、このとき、記憶される音声データは、操作命令の内容と関連づけて記憶される。

音声認識部２０３から入力音声の一致を通知された場合、処理部２０６は画面表示部２０２と協働してディスプレイ１０３に命令実行確認画面として画面４０４を表示する。操作者は、画面４０４に表示されている操作実行確認ボタン４０６にマウスポインタ４０２を合わせてクリックする（Ｓ３０５Ｙｅｓ）。操作実行確認ボタン４０６がクリックされた事を認識した処理部２０６は制御部２０７にユーザが操作確認をした操作命令を通知し、制御部２０７は装置１０８の動作を制御する（Ｓ３０６）。

このように、本発明の操作システムは、音声入力が特定の命令であると認識すると、Ｓ３０５に示すような認識された命令を実行するか否かの確認を行う。この確認は、図４に示す画面４０４のように、認識された操作命令の内容を具体的に表示（この場合、アプリケーションＡＡを起動すること）して、認識された操作命令を示すと共に、操作実行確認ボタン４０６および操作取消しボタン４０７を表示して操作者に選択させることである。このように、操作者が発声した操作命令を実行する前に、その操作者が発声し操作端末１０１で認識された操作命令を表示して、視覚的にも確認させているので、操作者の発声ミスや、操作端末１０１の誤認識の際に、その誤った操作の実行を中止することができる。

次の操作として、例えば、操作者が不要と考えるファイルを削除しようとして、「ファイル削除」を音声入力したとする。この場合、音声入力が音声認識部２０３で認識されると、図４の画面４０５のような命令実行確認画面が表示される。この画面４０５は、音声認識された「ファイル削除」という用語を表示して、操作者に視覚的に確認させると共に、ファイル削除の実行有無を確認させるものである。そして、操作者がマウス１０２Ｂやキーボード１０２Ａで「はい（Ｙ）」を選択する（操作実行確認ボタン４０６にマウスポインタ４０２を合わせクリックする）と、その操作命令が実行される。

このように、確認画面を表示するので、誤認識や入力間違いがあった場合でも、この確認画面で「いいえ（Ｎ）」を選択する（操作取消しボタン４０７にマウスポインタ４０２を合わせクリックする）ことにより、誤認識した音声入力の操作命令を実行させないようにすることができ、誤った操作の実行を中止することができる。

次に、操作端末１０１の音声記録部２０４に記憶された音声データを利用し、過去に操作命令を実行した操作者や操作内容を確認する動作について、図５と図６とに沿って説明する。

この確認動作を実行する操作者（確認者）は、初期メニュー等で「音声データの検査」を実行させ（Ｓ５０１）、図６に示すように操作履歴をディスプレイ１０３に表示させる（Ｓ５０２）。確認者は、ディスプレイ１０３に表示された操作履歴画面から確認したい操作を選択する。

具体的には、図６に示すように「スピーカアイコン」にマウスポインタ４０２を合わせて、クリックする。すると、音声検索再生部２０５は選択された操作の時刻の情報を元に該当する音声データを音声記録部２０４から検索し、スピーカ１０６を通してその音声データを再生する（Ｓ５０３）。この音声データを確認したい操作の選択の際に、操作時刻や操作内容を昇順や降順にソートするソートボタン６０１をクリックして、操作履歴の並びを変えて、確認したい操作を選択しやすくしても構わない。

そして、確認者は、再生される音声データの声から実際に操作をした者とその操作内容とを確認する（Ｓ５０４）。

確認者は、過去に操作命令を実行した操作者と操作内容とを確認し、特定した操作者に対し、ファイルの削除を控えて欲しいとか、特定のアプリケーションソフトを利用しないで欲しい等、注意したり要望したりすることができる。また、操作端末１０１を利用する作業手順等も確認することができる。

このように構成され、動作する本発明の操作システムでは次のような効果がある。

最初に、音声認識した操作命令をすぐに実行するのではなく、その音声認識した操作命令の内容を示した確認画面を表示し、操作者に視覚によっても確認できるように動作することである。このため、操作者が、音声認識を意識して、操作命令を明瞭に発音することにより、また、確認画面が表示されることにより、操作命令の内容を認識し、操作ミスを低減させることができる。

また、操作者は操作命令を発声して音声入力するので、周囲の人間もその音声入力時に操作命令を確認でき、誤った操作を実施しようとしている場合は、この操作を阻止することもできる。

更に、操作時の音声データが記憶されるようになっているため、管理者が、後日この音声データを再生し、操作者や操作内容を確認することもできる。

次に、第２実施例について、図７〜図９にもとづき説明する。

第1実施例のものと異なる点は、操作者を特定するために、その操作者の音声が予め登録（音声記録部２０４に記憶）されており、音声認識の際に、予め登録されている操作者からの音声操作しか受け付けないように設定されている点である。

つまり、処理部２０６は音声認識部２０３と協働して、予め登録された操作者の音声データにもとづき、入力された音声が予め登録された操作者の音声でなければ操作を不可とし、入力された音声が予め登録された操作者の音声であれば操作を可能とする操作者識別手段としても機能する。そのため、図７〜図９において、図３、４、６と同じ操作や同じ画面は同一の参照符号を付した。

ディスプレイ１０３での表示により、操作実行の確認がなされる、つまり、図７のＳ３０１で、「はい（Ｙ）」が選択される（操作実行確認ボタン４０１がクリックされる）と、音声の入力が受付け開始となる。そして、Ｓ３０２で、音声入力がなされると、Ｓ７０１で示すように、その音声が予め登録されている操作者の音声か否かを判断し、登録されている操作者の音声であれば誰の音声かを特定する。また、特定した操作者名を表示すると共に、音声操作の受付け開始の確認画面を表示する（図８の画面（操作確認画面）８０１参照）。

このとき、操作者が「いいえ（Ｎ）」の操作取消しボタン４０７をクリックすると、音声入力の記録およびそれ以降の処理は行わずに初期状態に戻る。また、この画面８０１で、操作実行確認ボタン４０６のクリック操作で、次の表示に進むこともできるが、数秒の表示の後に、自動的に次の画面に進むように動作させても良い。

画面８０１で操作実行確認ボタン４０６がクリックされると、入力された操作命令の音声が、音声記録部２０４に時刻情報や操作者名と共に記憶される。更に、このとき、記憶される音声データは、操作命令の内容と関連づけて記憶される。

入力された音声が記憶されると（Ｓ３０４）、次に、図８の画面４０４に示すような操作命令の確認画面が表示され、この画面４０４で操作実行確認ボタン４０６が選択されると、操作命令の実行が行われる（Ｓ３０６）。

このように図７に示すフローチャートにもとづき動作する第２実施例では、図３に示すフローチャートに比べて、Ｓ７０１で操作者の音声を特定する処理が追加されているものである。このため、予め操作が許可され、操作端末１０１に登録された操作者のみが操作可能となっている。

また、このように動作する操作システムでは、音声入力の音声（音声データ）とその操作時刻、操作者、そして操作内容を、音声記録部２０４に記憶している。このため、第1実施例と同様に、後に操作内容や操作者を確認することもできる。

その確認方法は、第1実施例のものとほぼ同じであるため、異なる部分について重点的に説明する。

この確認方法で説明する動作に関しては、第1実施例で説明した図５のフローチャートと同じであるため、同図にもとづき説明する。

音声データの検索を実行すると、ディスプレイ１０３には、図９に示すような操作履歴リストが表示される（Ｓ５０２）。この図９において、リストに操作者が表示されている点が、第1実施例の図６と異なっている。第２実施例では、入力した音声を認識した際に、その操作命令の認識だけでなく、操作者を識別して、予め音声登録され、操作しても良い者なのか否かを識別している。そして、その識別した操作者もリストに表示するように設定されている。

このように表示されるリストを見ると、確認者は、操作時刻や操作者や操作内容を視覚によって確認することができるが、第1実施例と同様に、更に聴覚によっても確認することができる。

聴覚によって確認するためには、確認者は操作履歴リストの確認したい操作を選択する。つまり、再生を行うための「スピーカアイコン」にマウスポインタ４０２を合わせてクリックする。すると、音声検索再生部２０５は操作時刻の情報を元に選択された操作内容に該当する音声データを音声記録部２０４から検索し、スピーカ１０６を通して音声データを再生する（Ｓ５０３）。そして、確認者は、再生される音声データの声から実際に操作した操作者や操作内容を聴覚によっても確認することができる（Ｓ５０４）。

このように構成され、動作する第２実施例の操作システムでは次のような効果がある。

最初に、音声入力する操作者が、予め登録された操作者か否かを判断しているので、装置１０８が誰によって操作されているか特定することが容易である。また音声登録されていない者には操作できないシステムとなっているため、ＩＤやパスワードを設定したり、入力したりする必要が無く、セキュリティー対策も容易になる。

また、操作者を音声入力の際に確認しているので、操作者と操作内容と対応させて履歴として記憶し、この履歴を操作端末１０１で、図９に示すリストのように呼び出せるようにでき、操作者や操作内容を視覚的にも、又聴覚的にも容易に確認することができる。

次に、第３の実施例について、図１０にもとづき説明する。

この第３の実施例の操作システムは、第２の実施例において、更に、操作者の利用できる操作命令（操作者に許容される操作命令）を、その操作者の職位や職責に応じて設定したものである。

図１０に、この第３実施例の操作システムで利用される許容操作者リストの一例を示す。このリストは、操作命令と、その操作命令が許容された操作者との関係を示している。操作命令は、種別毎に分けられている。つまり、一般社員に許容される一般社員レベルの操作命令と、操作担当者に許容される操作担当者レベルの操作命令と、責任者や管理者に許容される責任者レベルおよび管理者レベルの操作命令とに分けられている。

そして、この許容操作者リストの内容が、処理部２０６の記憶部（図示せず）に記憶されており、登録された操作者からの音声入力があった場合は、受け付けて良い操作命令かどうか、つまり利用できる操作命令か否かを、許容操作者リストにもとづいて判断している。

図１０に示すように、一般社員のＡさんは、アプリケーションの起動とファイルの閲覧とを行うことができ、また、操作担当者のＢさんは、一般社員に許容された操作に加えて、更に、ファイル作成や更新、ファイル削除、データ入力を行うことができ、更に、責任者や管理者は、操作担当者に許容された操作に加えて、更に、新規アプリケーションのインストールや、その他の操作等、全ての操作ができものである。

この第３実施例の操作システムによれば、一般社員レベルと操作担当者レベルと責任者レベルおよび管理者レベルとに、利用できる操作命令を分けているので、権限のない一般社員に重要なファイルを更新されたり、削除されたりすることを、また、権限のない操作担当者に新規のアプリケーションをインストールされたりすることを防止することができる。

本発明の第1実施例の操作システムを示す説明図である。 同操作システムの機能を示す機能ブロック図である。 同操作システムの動作を示すフローチャートである。 同操作システムの操作時における画面変遷を示す説明図である。 同操作システムの検索時の動作を示すフローチャートである。 同操作システムの操作履歴リストの一例を示す説明図である。 本発明の第２実施例の操作システムの動作を示すフローチャートである。 同第２実施例の操作システムの操作時における画面変遷を示す説明図である。 同第２実施例の操作システムの操作履歴リストの一例を示す説明図である。 本発明の第３実施例の操作システムで利用される許容操作者リストの一例を示す説明図である。

符号の説明

１０１ 操作端末
１０２ 入力装置
１０２Ａ キーボード
１０２Ｂ マウス
１０３ ディスプレイ
１０４ マイク
１０５ 端末本体
１０６ スピーカ
１０７ ネットワーク
１０８ 装置
２０１ キー入力部
２０２ 画面表示部
２０３ 音声認識部
２０４ 音声記録部
２０５ 音声検索再生部
２０６ 処理部
２０７ 制御部
４０１ 操作実行確認ボタン
４０２ マウスポインタ
４０３ 画面
４０４ 画面
４０５ 画面
４０６ 操作実行確認ボタン
４０７ 操作取消しボタン
６０１ ソートボタン
８０１ 画面

Claims (14)

1. 操作端末から入力した音声の操作命令で装置を動作させる操作システムにおいて、
   前記入力した音声を認識し、認識した音声が予め定めた操作命令に該当するか否かを識別する音声認識手段と、
   前記音声認識手段が予め定めた操作命令に該当すると識別した場合に、前記入力した音声に対応する操作命令の内容を示した命令実行確認画面を表示する表示制御手段と
   を備えたことを特徴とする操作システム。
2. 前記音声認識手段が予め定めた操作命令に該当すると識別した場合に、前記入力した音声を、前記識別した操作命令の内容と関連付けて、音声データとして記憶するデータベースを更に備えたことを特徴とする請求項1に記載の操作システム。
3. 前記データベースに記憶した操作命令の内容と関連付けた音声データの一覧を表示し、前記一覧から選択した音声データを前記データベースから抽出してその内容を音声出力する検索手段を更に備えたことを特徴とする請求項２に記載の操作システム。
4. 前記音声認識手段は、前記入力した音声を認識し、認識した音声が予め登録された操作者の音声に該当するか否かを識別する操作者識別手段を更に備え、
   前記表示制御手段は、前記操作者識別手段が予め登録された操作者の音声に該当すると識別した場合にのみ、操作の継続を許容する操作確認画面を表示する
   ことを特徴とする請求項１記載の操作システム。
5. 前記装置を動作させる操作命令の種別に対応した許容操作者リストを予め備え、前記音声認識手段が予め定めた操作命令に該当すると識別し、更に前記操作者識別手段が予め登録された操作者の音声に該当すると識別した場合に、前記表示制御手段は、当該識別した操作命令と操作者が前記許容操作者リストに含まれる場合にのみ、操作の継続を許容する操作画面を表示する
   ことを特徴とする請求項４記載の操作システム。
6. 前記操作確認画面の表示にもとづいて操作者が操作の継続を実行した場合に、前記入力した音声を、前記識別した操作命令の内容および操作者名と関連付けて、音声データとして記憶するデータベースを更に備えたことを特徴とする請求項４または請求項５記載の操作システム。
7. 前記データベースに記憶した操作命令の内容および操作者名と関連付けた音声データの一覧を表示し、選択した音声データを前記データベースから抽出してその内容を音声出力する検索手段を更に備えたことを特徴とする請求項６記載の操作システム。
8. 操作端末から入力した音声の操作命令で装置を動作させる操作システムの制御方法において、
   前記入力した音声を認識し、認識した音声が予め定めた操作命令に該当するか否かを識別する認識ステップと、
   前記認識ステップで予め定めた操作命令に該当すると識別した場合に、前記入力した音声に対応する操作命令の内容を示した命令実行確認画面を表示する第1の表示ステップと
   を備えたことを特徴とする操作システムの制御方法。
9. 前記認識ステップで予め定めた操作命令に該当すると識別した場合に、前記入力した音声を、前記識別した操作命令の内容と関連付けて、音声データとして記憶する記憶ステップを更に備えたことを特徴とする請求項８に記載の操作システムの制御方法。
10. 前記記憶ステップで記憶した操作命令の内容と関連付けた音声データの一覧を表示し、前記一覧から選択した音声データを抽出してその内容を音声出力する検索ステップを更に備えたことを特徴とする請求項９に記載の操作システムの制御方法。
11. 前記認識ステップは、前記入力した音声を認識し、認識した音声が予め登録された操作者の音声に該当するか否かを識別する操作者認識ステップを更に備え、
    前記操作者認識ステップが予め登録された操作者の音声に該当すると識別した場合にのみ、操作の継続を許容する操作確認画面を表示する第２の表示ステップ
    を備えたことを特徴とする請求項８記載の操作システムの制御方法。
12. 前記装置を動作させる操作命令の種別に対応した許容操作者リストを予め備え、
    前記認識ステップが予め定めた操作命令に該当すると識別し、更に前記操作者認識ステップが予め登録された操作者の音声に該当すると識別した場合に、当該識別した操作命令と操作者が前記許容操作者リストに含まれる場合にのみ、操作の継続を許容する操作画面を表示する第３の表示ステップと
    を備えたことを特徴とする請求項１１記載の操作システムの制御方法。
13. 前記操作確認画面の表示にもとづいて操作者が操作の継続を実行した場合に、前記入力した音声を、前記識別した操作命令の内容および操作者名と関連付けて、音声データとして記憶する記憶ステップを更に備えたことを特徴とする請求項１１または請求項１２記載の操作システムの制御方法。
14. 前記記憶ステップが記憶した操作命令の内容および操作者名と関連付けた音声データの一覧を表示し、前記一覧から選択した音声データを抽出してその内容を音声出力する検索ステップ
    を更に備えたことを特徴とする請求項１３記載の操作システムの制御方法。

Images