JP2007018090A - 音声操作指示装置、画像形成装置、音声操作方法、及びプログラム - Google Patents

Abstract

【課題】 階層構成の複数の表示画面を参照して音声操作指示によって動作設定を行う場合に、設定内容の確認、修正、追加を任意の階層の画面において容易に行うことを可能にする。
【解決手段】 表示部１７００に表示され得る階層構成の複数の画面のうち下位階層の画面において表示される設定項目を指定して、音声入力部１３３０から音声操作指示を行うと、表示部１７００に対してキー入力部１１００を介して操作指示を行う場合と同じように、表示制御部１６００が表示部１７００に、上位階層の画面から下位階層の画面に向けて順に、画面を表示し、しかも各階層の画面をそれぞれ所定時間に亘って表示するようにする。これにより、どの階層の画面にどのような設定項目があるか、またどの設定項目が選択されているかを順次確認しながら、下位階層の画面に進むことが可能である。
【選択図】 図１

Description

本発明は、音声操作指示装置、画像形成装置、音声操作方法、及びプログラムに関し、特に、音声を利用して操作指示を行うことが可能な音声操作指示装置、該音声操作指示装置を搭載した画像形成装置、音声操作指示装置に適用される音声操作方法、及び該音声操作をコンピュータに実行させるためのプログラムに関する。

操作指示を操作パネルに対して行う方式の画像形成装置においては、従来、操作パネルに設けられたタッチパネルを押下することにより操作入力が行われる。

一般に、操作パネルの画像表示装置に表示される操作指示の入力画面は階層構造を有した複数の画面からなっており、上位階層の画面から下位階層の画面に順に移行して、所要の階層の画面において、操作指示が行われる（例えば、特許文献１）。

近年は、ユーザによるタッチパネルの押下によって操作パネルに対する操作指示を行う他に、ユーザが操作指示内容を表わす音声を発し、該音声に従って操作パネルに対して操作指示を与えることが可能な装置も現れている。

ところで、下位階層の画面において操作指示を行いたい場合、タッチパネルの押下による操作指示では、画面ごとに操作指示を繰り返しながら上位階層の画面から徐々に下位階層の画面に移行することが行われる。これに対して、音声によって操作パネルに対して操作指示を与える場合には、最終的に操作指示を行いたい下位階層の画面における操作指示項目を、最初から音声によって発声するようにしてもよい。これによって、その下位階層の画面が、途中の階層の画面の表示を飛ばして、直接表示される。
特開２００４−１６４４３８号公報

しかしながら、上記の音声によって操作パネルに対して操作指示を与えることのできる従来の画像形成装置では、最終的に操作指示を行いたい下位階層の画面が、途中の階層の画面の表示を飛ばして直接表示されるので、下記のような問題点があった。

すなわち、途中の階層の画面において既に設定されている設定内容を確認したり、修正したり、未設定の設定項目について追加設定したりしたい場合がある。しかし、上記従来の画像形成装置では、複雑な操作指示を音声で容易に行うことができる反面、最終的に操作指示を行いたい下位階層の画面に至る途中のどの階層の画面において、上記の設定内容の確認、修正、追加を行うべきかが分からず、これらを簡単に行うことができないという問題点があった。

本発明はこのような問題点に鑑みてなされたものであって、階層構成の複数の表示画面を参照して音声操作指示によって動作設定を行う場合に、設定内容の確認、修正、追加を任意の階層の画面において容易に行うことを可能にした音声操作指示装置、画像形成装置、音声操作方法、及びプログラムを提供することを目的とする。

上記目的を達成するために、請求項１記載の発明によれば、音声を入力する音声入力手段と、前記音声入力手段によって入力された音声を認識する音声認識手段と、階層構成の複数の画面のうち、前記音声認識手段によって認識された音声が表わす指示に関連する画面を画像表示装置に表示させる第１の表示手段と、前記階層構成の複数の画面のうち、最上位階層の画面から前記第１の表示手段によって表示された画面までの途中階層の画面の少なくとも１つを前記画像表示装置に表示させる第２の表示手段とを有することを特徴とする音声操作指示装置が提供される。

また、請求項２記載の発明によれば、前記音声操作指示装置において、前記第２の表示手段が、前記途中階層の画面のすべてを順に、それぞれ所定時間に亘って前記画像表示装置に表示させることを特徴とする。

また、請求項５記載の発明によれば、前記音声操作指示装置において、前記途中階層の画面において設定されるべき項目からなる設定項目リストを前記画像表示装置に表示させる第３の表示手段を更に有することを特徴とする。

また、請求項７記載の発明によれば、前記第２の表示手段は、前記階層構成の複数の画面のうち、前記第３の表示手段によって表示された設定項目リストの中の指定された項目に関連する画面を前記画像表示装置に表示させることを特徴とする。

また、請求項１０記載の発明によれば、音声を入力する音声入力手段と、該音声入力手段によって入力された音声を認識する音声認識手段とを備えた音声操作指示装置に適用される音声操作方法において、階層構成の複数の画面のうち、前記音声認識手段によって認識された音声が表わす指示に関連する画面を画像表示装置に表示させる第１の表示ステップと、前記階層構成の複数の画面のうち、最上位階層の画面から前記第１の表示ステップにおいて表示された画面までの途中階層の画面の少なくとも１つを前記画像表示装置に表示させる第２の表示ステップとを有することを特徴とする音声操作方法が提供される。

さらに、上記音声操作方法をコンピュータに実行させるためのプログラムが提供される。

本発明によれば、操作パネルに表示され得る階層構成の複数の画面のうち下位階層の画面において表示される設定項目を指定して音声操作指示を行うと、操作パネルに対してキー入力部を介して操作指示を行う場合と同じように、上位階層の画面から下位階層の画面に向けて順に、表示画面が自動的に遷移され、しかも各階層の画面が所定時間に亘って表示される。

これにより、どの階層の画面にどのような設定項目があるか、またどの設定項目が選択されているかを順次確認しながら、下位階層の画面に進むことが可能である。

したがって、最上位階層の画面から下位階層の画面までの途中の階層の画面において、既に設定されている設定内容を確認したり、修正したり、未設定の設定項目について追加設定したりしたい場合に、どの階層の画面で行うべきかを容易に判断することが可能である。

また、階層構成の複数の表示画面を参照して音声操作指示によって動作設定を行う場合に、音声操作指示で表わされる設定項目が含まれる階層の画面を直接表示する。それとともに、該設定項目と関連し、該設定項目の設定の前提となる予め設定された項目を一覧表示する設定項目リストも表示することができる。さらに、表示された設定項目リスト上の設定項目を選択することにより、選択された設定項目に関連する階層の画面が表示される。この画面を利用して、既に設定されている設定内容を確認したり、修正したり、未設定の設定項目について追加設定したりすることが可能になる。

以下、本発明を実施するための最良の形態について、図面を参照して説明する。

〔第１の実施の形態〕
図１は、本発明の第１の実施の形態に係る音声操作指示装置を含む画像形成装置の制御部分の構成を示すブロック図である。

図１において、画像形成装置１は、操作処理部１０００と画像制御部２０００とから主に構成されている。

操作処理部１０００は、キー入力部１１００と、音声入力部１３００と、音声認識部１４００と、コマンド判定部１２００と、表示制御部１６００と、表示部１７００とから構成される。

キー入力部１１００は、図示を省略した操作部上のハードキーやタッチパネルのソフトキー等に対してユーザによって押下が行われたとき、各キーに対応する情報を入力する。音声入力部１３００は、マイク（不図示）等から入力された音声を電気信号に変換する。音声認識部１４００は、音声入力部１３００から送られた電気信号を基に音声認識アルゴリズムを用いて、ノイズを除去した上で周波数のスペクトラム解析を行い、これによって音声認識を行う。

コマンド判定部１２００は、キー入力部１１００または音声認識部１４００から送られたデータが有効なコマンドを表わしているか否かを判定する。表示制御部１６００は、操作制御データを表示部１７００に表示するとともに、コマンド判定部１２００から送られたコマンド判定データに基づいて、表示部１７００に表示されている操作制御データを変化させる。また表示制御部１６００は、コマンド判定部１２００から送られたコマンド判定データに応じて画像制御部２０００へ動作指示を行い、さらに、画像形成動作の状態に基づき、表示部１７００に表示されている操作制御データを変化させる。

画像制御部２０００は、画像形成に必要なセンサ等（不図示）からの信号を入力する入力部２１００と、画像形成に必要なモータやアクチュエータ等（不図示）の負荷装置の制御を行う出力部２２００と、本画像形成装置１の画像形成動作の制御を行う動作制御部２３００とを有している。

図２は、図１に示す画像形成装置１の機械部分の構成を示す断面図である。図２を参照して画像形成動作の詳細を説明する。

図２において１０は画像読取部、２０は画像形成部、３０は画像処理部である。

画像読取部１０において、１０１は原稿台ガラスであり、原稿自動送り装置１４２から給送された原稿が順次、原稿台ガラス１０１の所定位置に載置される。１０２は、例えばハロゲンランプから構成される原稿照明ランプであり、原稿台ガラス１０１に載置された原稿を露光する。１０３、１０４、１０５は走査ミラーであり、図示しない光学走査ユニットに収容され、往復動しながら、原稿からの反射光をＣＣＤユニット１０６に導く。ＣＣＤユニット１０６は、撮像素子１０８に原稿からの反射光を結像させる結像レンズ１０７、例えばＣＣＤ（Charge Coupled Device）から構成される撮像素子１０８、撮像素子１０８を駆動するＣＣＤドライバ１０９等から構成されている。撮像素子１０８から出力される画像信号出力は、例えば８ビットのデジタルデータに変換された後、画像処理部３０へ送られる。

コントローラ部１３９に入力される。

画像処理部３０は、コントローラ部１３９とマンマシンインターフェース装置１４０とで構成される。コントローラ部１３９は、マイクロコンピュータ、画像処理部等を備えており、画像形成装置１全体の制御を行うとともに、マンマシンインターフェース装置１４０からの指示に従って、画像形成処理を行う。

画像形成部２０において、１１０は感光ドラムであり、前露光ランプ１１２によって画像形成に備えて除電される。１１３は１次帯電器であり、感光ドラム１１０を一様に帯電させる。１１７は露光部であり、例えば半導体レーザ等で構成され、コントローラ部１３９から送られた画像データに基づいて感光ドラム１１０を露光し、静電潜像を形成する。

１１８は現像器であり、黒色の現像剤（トナー）が収容されており、該現像剤が、感光ドラム１１０上の静電潜像に付着されてトナー像が形成される。１１９は転写前帯電器であり、感光ドラム１１０上に現像されたトナー像を用紙に転写する前に感光ドラム１１０に高電圧をかける。１２０、１２２、１２４、１４２、１４４は給紙ユニットであり（１２０は手差し給紙ユニット）、給紙ローラ１２１、１２３、１２５、１４３、１４５のいずれか１つの駆動により、転写用紙が給送される。転写用紙は、レジストローラ１２６の配設位置で一旦停止し、トナー像が形成された感光ドラム１１０の回転位置と同期がとられ再給送される。

１２７は転写帯電器であり、感光ドラム１１０に形成されたトナー像を転写用紙に転写する。１２８は分離帯電器であり、転写動作の終了した転写用紙を感光ドラム１１０より分離する。転写されずに感光ドラム１１０上に残ったトナーはクリーナー１１１によって回収される。１２９は搬送ベルトであり、転写プロセスの終了した転写用紙を定着器１３０に搬送し、定着器１３０は例えば熱により定着を行う。

１３１はフラッパであり、定着プロセスの終了した転写用紙の搬送パスを、ソーター１３２または中間トレイ１３７の方向に振り分ける。また、１３３〜１３６は給送ローラであり、一度定着プロセスの終了した転写用紙を中間トレイ１３７に反転（多重）または非反転（両面）して給送する。１３８は再給送ローラであり、中間トレイ１３７に載置された転写用紙を再度、レジストローラ１２６の配設位置まで搬送する。

図３は、画像形成装置１に設けられる操作パネルの構成を示す平面図である。

図３において、操作パネル２００は、液晶画面２１０、リセットキー２１１、ガイドキー２１２、ユーザモードキー２１３、割り込みキー２１４、暗証キー２１５、テンキー２１６、クリアキー２１７、スタートキー２１８、ストップキー２１９、マイク２３０、及びマイクジャック２４０を有している。なお、液晶画面２１０は、図１に示す表示部１７００に対応し、各キー２１１〜２１９は、図１に示すキー入力部１１００に対応する。

液晶画面２１０は、図４に示すような画像形成装置における設定内容や動作状況を表示する画面表示部である。また、液晶画面２１０には、タッチパネル（不図示）が設けられ、タッチパネル上のソフトキー等の押下により設定情報が入力可能である。図４は、図３の液晶画面２１０に表示される最上位の階層の画面を示す図である。すなわち、液晶画面２１０に表示される画面は複数存在し、それらの複数の画面は互いに連携していて、階層構造をなしている。

リセットキー２１１は、設定内容を初期モードにリセットするキーである。ガイドキー２１２は、操作方法の説明が表示される画面を液晶画面２１０に表示させるためのキーである。ユーザモードキー２１３は、画像形成装置の各種設定を行うモードに入るためのキーである。割り込みキー２１４は、画像形成装置の動作を一旦停止させ、他のジョブ動作を実行させるためのキーである。暗証キー２１５は、暗証コードを入力しないと画像形成装置を使用することができない暗証コードのときに、テンキー２１６を用いて暗証コードを入力するためのキーである。テンキー２１６は、コピー枚数を入力したり、各種設定の値を入力したりするためのキーである。クリアキー２１７は、入力した値をクリアするためのキーである。スタートキー２１８は、画像形成装置に対して画像形成動作を開始する指示を入力するためのキーである。ストップキー２１９は画像形成動作を停止させるためのキーである。マイク２３０は音声を入力するための内蔵マイクであり、マイクジャック２４０は、自由な位置で使用できる外部マイクのコードプラグを差し込むためのジャックである。

なお、マイク２３０やマイクジャック２４０を使用して音声操作指示を行うか否かは、ユーザによって予め選択されて設定される。音声操作指示を行うことが選択され設定された場合、図４に示す液晶画面２１０に表示される最上位階層の画面における右側半分の上部に「音声」と表示される。

図５は、図１に示す音声入力部１３００及び音声認識部１４００の内部構成を示すブロック図である。

図５において、音声入力部１３００は、ユーザの音声を電気信号に変換する音声入力マイク１３１０（図３のマイク２３０やマイクジャック２４０に接続された外部マイクに相当）と、スペクトルパターンを検出する音響分析部１３２０とから構成される。なお、音声入力マイク１３１０を複数用いると、音声波形中に含まれる雑音成分を少なくすることができる。

音声認識部１４００は、照合部１４１０と参照パターン記憶部１４２０とから構成される。参照パターン記憶部１４２０は、音声認識対象のスペクトラムパターンをデータとして記憶している。照合部１４１０は、音声入力部１３００から送られてきたスペクトラムパターンを、参照パターン記憶部１４２０に記憶されているスペクトラムパターンと比較し、一致するパターンがある場合に、一致するパターンに対応するコマンドをコマンド判別部１２００（図１）へ出力する。

図６は、第１の実施の形態に係る音声操作指示装置において行なわれる音声操作処理の手順を示すフローチャートである。

まず、画像形成装置１の動作設定に音声指示を利用する音声操作設定モードに移行すべく、ユーザによって音声設定キー（不図示）が押下されたか否かを判別する（ステップＳ７０１）。音声設定キーが押下されたならば、音声操作設定モードに移行し、ステップＳ７０２に進む。

音声操作設定モードでは、操作連動を行う指示がユーザによって行われているか否かを判別する（ステップＳ７０２）。この操作連動とは、操作パネル２００の液晶画面２１０に表示すべき画面が下位階層の画面であって、この画面に関連する音声操作指示が行われた場合に、操作パネル２００に対してキー入力部１１００を介して操作指示を行った場合と同じように、液晶画面２１０に、上位階層の画面から下位階層の画面へと順に表示を行わせる方法である。

例えば、１ページに２ページ分の画像を縮小して収容し印刷を行う機能である「２ｉｎ１」の実行を操作指示したいとき、まず、操作パネル２００に対してキー入力部１１００を介してユーザが行う操作指示と、該操作指示で液晶画面２１０に表示される画面とを、以下に具体的に説明する。

操作パネル２００の液晶画面２１０には、当初、図４に示す最上位の階層の画面が表示されており、この画面におけるソフトキー「応用モード」をユーザが押下すると、図７に示す第１下位階層の「応用モード」画面が液晶画面２１０に表示される。なお、図７に示す画面は、図４の画面の左半分の位置に表示されるものであり、後述の図８および図９に示す画面も同様である。

この「応用モード」画面においてソフトキー「縮小レイアウト」をユーザが押下すると、図８に示す第２下位階層の「縮小レイアウト：原稿サイズの選択」画面が液晶画面２１０に表示される。さらに、この「縮小レイアウト：原稿サイズの選択」画面においてソフトキー「次へ」をユーザが押下すると、図９に示す第３下位階層の「縮小レイアウト：種類の選択」画面が液晶画面２１０に表示される。この「縮小レイアウト：種類の選択」画面においてソフトキー「２ｉｎ１」をユーザが押下すると、機能「２ｉｎ１」が設定される。

次に、ユーザが音声入力部１３００を介して機能「２ｉｎ１」を音声操作指示した場合、上記の操作連動を行う指示がユーザによって行われているならば、操作パネル２００の液晶画面２１０に各階層の画面が順に表示される。すなわち、当初表示されている図４の最上位階層の画面から、図７の「応用モード」画面、図８の「縮小レイアウト：原稿サイズの選択」画面、図９の「縮小レイアウト：種類の選択」画面が順に、それぞれが所定時間（連動時間）に亘って表示される。

図６に戻って、ステップＳ７０２において、操作連動を行う指示がユーザによって行われていると判別されたならばステップＳ７０３へ進み、操作連動を行う指示が行われていないと判別されたならばステップＳ７０５へ進む。

ステップＳ７０３では、操作連動において、各階層の画面をそれぞれ表示すべき期間である上記所定時間（連動時間）を任意に設定するか否かを判別し、設定するならばステップＳ７０４へ進み、設定しないならばステップＳ７０４をスキップしてステップＳ７０５へ進む。

ステップＳ７０４では、所定時間（連動時間）がユーザによって入力される。なお、所定時間（連動時間）を設定しない場合は（ステップＳ７０３でＮＯ）、予め決められたデフォルト値を所定時間（連動時間）とする。

つぎのステップＳ７０６では、操作連動モードで動作中であることを、操作パネル２００の液晶画面２１０に表示し（図４の画面の右半分の上部位置に表示）、本音声操作処理を終了する。

ステップＳ７０５では、操作連動モードではなく、最上位階層の画面から所定の下位階層の画面を直接表示する通常の音声モードで動作中であることを、操作パネル２００の液晶画面２１０に表示し（図４の画面の右半分の上部位置に表示）、本音声操作処理を終了する。

次に、音声操作指示によって印刷設定を行った場合の一連の印刷動作を、図１を参照して説明する。

例えば「２ｉｎ１」印刷を行う際に、ユーザが操作パネル２００に対してキー入力部１１００を介して操作指示を行う場合は、前述のように、図７の「応用モード」画面、図８の「縮小レイアウト：原稿サイズの選択」画面、図９の「縮小レイアウト：種類の選択」画面を順に選択表示させて下位階層の画面に遷移する。そして、「縮小レイアウト：種類の選択」画面においてソフトキー「２ｉｎ１」を最終的に押下げするという過程を経なければならない。

この複数階層の画面遷移では、キー入力部１１００を介して入力された操作指示が、コマンド判定部１２００により解釈され、その結果が表示制御部１６００に送られ、表示制御部１６００が、表示部１７００に表示すべき画面を制御する。操作指示が画面ごとに繰り返され、段階的に、より下位階層の画面へと表示が切り換えられる。

一方、この「２ｉｎ１」印刷を音声により操作指示する場合は、ユーザが「２ｉｎ１」と音声を入力すると、音声入力部１３００、音声認識部１４００、コマンド判定部１２００を経て、コマンドが表示制御部１６００に送られる。この際、ユーザによって操作連動が指示されていれば、表示制御部１６００は、表示部１７００に順次、複数の下位階層の画面を表示する。すなわち、図４の最上位階層の画面から、図９の「縮小レイアウト：種類の選択」画面に直接遷移するのではなく、「応用モード」画面、「縮小レイアウト：原稿サイズの選択」画面、「縮小レイアウト：種類の選択」画面を順に、それぞれ所定時間（連動時間）に亘って表示する。

なお、「２ｉｎ１」印刷を音声により操作指示する過程において、例えば原稿サイズの設定を変更したい場合、図９の「縮小レイアウト：種類の選択」画面が所定時間（連動時間）に亘って表示されている期間に、ユーザがソフトキー「戻る」を押下すればよい。これにより、上位階層の図８の「縮小レイアウト：原稿サイズの選択」画面が液晶画面２１０に表示され、この画面において原稿サイズを変更することが可能である。

こうした「２ｉｎ１」印刷機能の設定が行われた後、ユーザが図３のスタートキー２１８を押下すると、「２ｉｎ１」印刷機能に従った画像形成動作を開始するための指示が画像形成装置１に与えられる。操作処理部１０００では、表示制御部１６００が、コマンド判定部１２００から送られてくる「２ｉｎ１」印刷コマンド判定データに応じて画像制御部２０００へ動作指示を行う。画像制御部２０００では、動作制御部２３００が、入力部２１００と出力部２２００とを制御して、図２を参照して説明した画像形成動作により「２ｉｎ１」印刷が行われる。

以上のようにして、第１の実施の形態では、操作パネルに表示され得る階層構成の複数の画面のうち下位階層の画面において表示される設定項目を指定して音声操作指示を行うと、操作パネルに対してキー入力部を介して操作指示を行う場合と同じように、上位階層の画面から下位階層の画面に向けて順に、表示画面が自動的に遷移され、しかも各階層の画面が所定時間（連動時間）に亘って表示される。

これにより、どの階層の画面にどのような設定項目があるか、またどの設定項目が選択されているかを順次確認しながら、下位階層の画面に進むことが可能である。

したがって、最上位階層の画面から下位階層の画面までの途中の階層の画面において、既に設定されている設定内容を確認したり、修正したり、未設定の設定項目について追加設定したりしたい場合に、どの階層の画面で行うべきかを容易に判断することが可能である。

〔第２の実施の形態〕
次に、本発明の第２の実施の形態を説明する。

第２の実施の形態の構成は、基本的に第１の実施の形態の構成と同じであるので、第２の実施の形態の説明においては、第１の実施の形態の構成と同一部分には同一の参照符号を付して、第１の実施の形態の説明を流用する。

図１０は、第２の実施の形態に係る音声操作指示装置において行なわれる音声操作処理の手順を示すフローチャートである。

まず、画像形成装置１の動作設定に音声指示を利用する音声操作設定モードにおいて、操作処理部１０００の音声入力部１３００に対しての音声の入力を待ち（ステップＳ７０１）、音声が入力されるとステップＳ７０２へ進む。

ステップＳ７０２では、音声認識部１４００が、入力された音声を認識し、コマンド判別部１２００が、認識された音声の表す操作指示内容を判別する。

ステップＳ７０３では、表示制御部１６００が、表示部１７００（操作パネル２００の液晶画面２１０）に、操作指示内容に対応した階層の画面を表示させる。また、後述のソフトキー「リスト表示」が押下げられると、表示部１７００に設定項目リストを表示させる。

具体的には例えば、認識された音声の表す操作指示内容が「２ｉｎ１」である場合、液晶画面２１０の左側半分に、図９に示す「縮小レイアウト：種類の選択」画面を表示する。一方、液晶画面２１０の右側半分には、図４に示す最上位階層の画面における右側半分を表示するとともに、その中にソフトキー「リスト表示」を追加表示する。

図１１は、液晶画面２１０の左側半分に表示された「縮小レイアウト：種類の選択」画面において「２ｉｎ１」を選択した上で、液晶画面２１０の右側半分に表示されたソフトキー「リスト表示」を押下げたときに液晶画面２１０に表示される設定項目リストを示す図である。

図１１に示す設定項目リストは、「２ｉｎ１」設定の前提となる予め設定された項目を一覧表示するものであり、原則的に、最上位階層の画面から「縮小レイアウト：種類の選択」画面までの途中の階層の画面において設定されるべき項目からなる。「２ｉｎ１」選択時における設定項目リストに表示される設定項目としては、原稿のサイズや片面／両面を表す原稿タイプ、画像形成が行われる用紙のサイズや片面／両面を表す用紙タイプ、「２ｉｎ１」印刷のレイアウトの原稿順番を表すレイアウト順、その他細かい設定を表す詳細設定からなる。

図１０に戻って、ユーザが設定項目リストの中で設定変更を行いたい項目が存在する場合には、その項目を選択した上でソフトキー「ＯＫ」を押し下げると（ステップＳ７０４でＹＥＳ）、ステップＳ７０５へ進む。一方、設定項目リストの中で設定変更を行いたい項目が存在しない場合には、項目の選択を行わずソフトキー「ＯＫ」を押し下げると元の図９の「縮小レイアウト：種類の選択」画面にもどる。この画面でソフトキー「次へ」を押し下げると（ステップＳ７０４でＮＯ）、ステップＳ７０７へ進む。

ステップＳ７０５では、ステップＳ７０４で選択された設定項目に関連する階層の画面が液晶画面２１０に表示される。例えば、図１１に示す設定項目リストにおいて「用紙タイプ」が選択された場合、図８に示す「縮小レイアウト：原稿サイズの選択」画面が液晶画面２１０に表示される。

次にステップＳ７０６で、ステップＳ７０５で表示された画面において、ユーザによって設定項目の修正が行われ、ステップＳ７０４に戻る。

例えば、図８に示す「縮小レイアウト：原稿サイズの選択」画面において、ユーザによってソフトキー「両面原稿」が押下げられると、図１２に示す「両面原稿」画面が液晶画面２１０に表示される。ここで、ユーザが例えば「左右開き」を選択してソフトキー「ＯＫ」を押下げると、「片面」設定が、「両面」および「左右開き」の設定に修正されることになる。

ステップＳ７０７では、ユーザが図３のスタートキー２１８を押下し、例えば「２ｉｎ１」印刷機能に従った画像形成動作が、第１の実施の形態と同様に画像形成装置１において行われる。

以上のようにして、第２の実施の形態では、階層構成の複数の表示画面を参照して音声操作指示によって動作設定を行う場合に、音声操作指示で表わされる設定項目が含まれる階層の画面を直接表示する。それとともに、該設定項目と関連し、該設定項目の設定の前提となる予め設定された項目を一覧表示する設定項目リストも表示することができる。さらに、表示された設定項目リスト上の設定項目を選択することにより、選択された設定項目に関連する階層の画面が表示される。この画面を利用して、既に設定されている設定内容を確認したり、修正したり、未設定の設定項目について追加設定したりすることが可能になる。

〔他の実施の形態〕
上記の各実施の形態では、画像形成装置に搭載された音声操作指示装置を説明したが、本発明に係る音声操作指示装置は、音声によって操作指示が行われる一般の装置に搭載可能である。

また、本発明の目的は、上記の各実施の形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出して実行することによっても達成される。

この場合、記憶媒体から読み出されたプログラムコード自体が前述した各実施の形態の機能を実現することになり、そのプログラムコード及び該プログラムコードを記憶した記憶媒体は本発明を構成することになる。

また、プログラムコードを供給するための記憶媒体としては、例えば、フロッピー（登録商標）ディスク、ハードディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。または、プログラムコードをネットワークを介してダウンロードしてもよい。

また、コンピュータが読み出したプログラムコードを実行することにより、上記各実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。

更に、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。

本発明の第１の実施の形態に係る音声操作指示装置を含む画像形成装置の制御部分の構成を示すブロック図である。 図１に示す画像形成装置の機械部分の構成を示す断面図である。 画像形成装置に設けられる操作パネルの構成を示す平面図である。 画像形成装置における設定内容や動作状況を示す、液晶画面に表示される画面を示す図である。 図１に示す音声入力部及び音声認識部の内部構成を示すブロック図である。 第１の実施の形態に係る音声操作指示装置において行なわれる音声操作処理の手順を示すフローチャートである。 図４に示す画面におけるソフトキー「応用モード」を押下したとき、液晶画面に表示される「応用モード」画面を示す図である。 図７に示す「応用モード」画面においてソフトキー「縮小レイアウト」を押下したとき、液晶画面に表示される「縮小レイアウト：原稿サイズの選択」画面を示す図である。 図８に示す「縮小レイアウト：原稿サイズの選択」画面においてソフトキー「次へ」を押下したとき、液晶画面に表示される「縮小レイアウト：種類の選択」画面を示す図である。 第２の実施の形態に係る音声操作指示装置において行なわれる音声操作処理の手順を示すフローチャートである。 液晶画面の左側半分に表示された「縮小レイアウト：種類の選択」画面において「２ｉｎ１」を選択した上で、液晶画面の右側半分に表示されたソフトキー「リスト表示」を押下げたときに液晶画面に表示される設定項目リストを示す図である。 図８に示す「縮小レイアウト：原稿サイズの選択」画面においてソフトキー「両面原稿」が押下げられたとき液晶画面に表示される「両面原稿」画面を示す図である。

符号の説明

１ 画像形成装置
１０００ 操作処理部
１１００ キー入力部
１２００ コマンド判定部
１３００ 音声入力部（音声入力手段）
１３１０ 音声入力マイク
１３２０ 音声分析部
１４００ 音声認識部（音声認識手段）
１４１０ 照合部
１４２０ 参照パターン記憶部
１６００ 表示制御部（第１の表示手段、第２の表示手段）
１７００ 表示部
２０００ 画像制御部
２３００ 動作制御部

Claims (18)

1. 音声を入力する音声入力手段と、
   前記音声入力手段によって入力された音声を認識する音声認識手段と、
   階層構成の複数の画面のうち、前記音声認識手段によって認識された音声が表わす指示に関連する画面を画像表示装置に表示させる第１の表示手段と、
   前記階層構成の複数の画面のうち、最上位階層の画面から前記第１の表示手段によって表示された画面までの途中階層の画面の少なくとも１つを前記画像表示装置に表示させる第２の表示手段と
   を有することを特徴とする音声操作指示装置。
2. 前記第２の表示手段は、前記途中階層の画面のすべてを順に、それぞれ所定時間に亘って前記画像表示装置に表示させることを特徴とする請求項１記載の音声操作指示装置。
3. 前記所定時間をユーザの指定により設定する設定手段を更に有することを特徴とする請求項２記載の音声操作指示装置。
4. 前記第２の表示手段を動作させるか否かを、ユーザの指定により設定する設定手段を更に有することを特徴とする請求項１記載の音声操作指示装置。
5. 前記途中階層の画面において設定されるべき項目からなる設定項目リストを前記画像表示装置に表示させる第３の表示手段を更に有することを特徴とする請求項１記載の音声操作指示装置。
6. 前記第３の表示手段を動作させるか否かを、ユーザの指定により設定する設定手段を更に有することを特徴とする請求項５記載の音声操作指示装置。
7. 前記第２の表示手段は、前記階層構成の複数の画面のうち、前記第３の表示手段によって表示された設定項目リストの中の指定された項目に関連する画面を前記画像表示装置に表示させることを特徴とする請求項５記載の音声操作指示装置。
8. 前記第２の表示手段によって表示された画面において、ユーザによる設定内容の変更を受け付ける受付手段を更に有することを特徴とする請求項７記載の音声操作指示装置。
9. 請求項１乃至請求項８のいずれかに記載の音声操作指示装置を搭載したことを特徴とする画像形成装置。
10. 音声を入力する音声入力手段と、該音声入力手段によって入力された音声を認識する音声認識手段とを備えた音声操作指示装置に適用される音声操作方法において、
    階層構成の複数の画面のうち、前記音声認識手段によって認識された音声が表わす指示に関連する画面を画像表示装置に表示させる第１の表示ステップと、
    前記階層構成の複数の画面のうち、最上位階層の画面から前記第１の表示ステップにおいて表示された画面までの途中階層の画面の少なくとも１つを前記画像表示装置に表示させる第２の表示ステップと
    を有することを特徴とする音声操作方法。
11. 前記第２の表示ステップでは、前記途中階層の画面のすべてを順に、それぞれ所定時間に亘って前記画像表示装置に表示させることを特徴とする請求項１０記載の音声操作方法。
12. 前記所定時間をユーザの指定により設定する設定ステップを更に有することを特徴とする請求項１１記載の音声操作方法。
13. 前記第２の表示ステップを実行させるか否かを、ユーザの指定により設定する設定ステップを更に有することを特徴とする請求項１０記載の音声操作方法。
14. 前記途中階層の画面において設定されるべき項目からなる設定項目リストを前記画像表示装置に表示させる第３の表示ステップを更に有することを特徴とする請求項１０記載の音声操作方法。
15. 前記第３の表示ステップを実行させるか否かを、ユーザの指定により設定する設定ステップを更に有することを特徴とする請求項１４記載の音声操作方法。
16. 前記第２の表示ステップでは、前記階層構成の複数の画面のうち、前記第３の表示ステップによって表示された設定項目リストの中の指定された項目に関連する画面を前記画像表示装置に表示させることを特徴とする請求項１４記載の音声操作方法。
17. 前記第２の表示ステップにおいて表示された画面において、ユーザによる設定内容の変更を受け付ける受付ステップを更に有することを特徴とする請求項１６記載の音声操作方法。
18. 音声を入力する音声入力手段と、該音声入力手段によって入力された音声を認識する音声認識手段とを備えた音声操作指示装置に適用される音声操作方法を、コンピュータに実行させるためのプログラムにおいて、
    階層構成の複数の画面のうち、前記音声認識手段によって認識された音声が表わす指示に関連する画面を画像表示装置に表示させる第１の表示ステップと、
    前記階層構成の複数の画面のうち、最上位階層の画面から前記第１の表示ステップにおいて表示された画面までの途中階層の画面の少なくとも１つを前記画像表示装置に表示させる第２の表示ステップと
    を有することを特徴とするプログラム。

Images