JP7047592B2 - 操作画面の表示装置、画像処理装置及びプログラム - Google Patents

Description

この発明は、画像処理装置等により実行されるジョブの動作条件を設定するための操作画面を表示可能な操作画面の表示装置、この操作画面の表示装置を備えた画像処理装置及びプログラムに関する。

例えば、ＭＦＰ（Multi Function Peripheral）と称される多機能デジタル複合機等の画像処理装置として、ジョブの実行に際して動作条件の設定値の入力を、操作パネルや外部端末装置等からの操作により行うのに加え、マイク等の音声入力装置を介してユーザーの音声により行うことが可能な装置が、従来より知られている。

音声入力は直感的な操作を可能とし、また操作パネル等の操作による操作入力の場合のような階層構造の操作画面を辿っていく必要がないため、素早い入力が可能となる。

特開２００９－１６２６９１号公報

しかしながら、入力する音声を思いつかない場合や、複数の設定値の組み合わせによって機能を指定するような場合には、音声入力が困難であるという課題がある。

従って、音声入力による設定を行っている状況下であっても、上記のように音声入力が困難な場合には、音声入力と併せて操作パネル等の操作手段による操作入力も行われているのが現状であり、このため両入力方式を併用する場合に効率良く入力を行うための技術が求められている。

なお、特許文献１には、音声入力による操作が可能なメニューがどのメニューであるかをユーザに容易に認識してもらうことができる車載情報端末として、複数配置される操作ボタンと、前記操作ボタンによる手動操作が可能な複数のメニューが表示されるディスプレイと、前記ディスプレイの表示を制御する表示制御手段と、音声受付手段とを備え、前記操作ボタンによる手動操作が可能な複数のメニューは、前記音声受付手段による音声操作も可能な第１類のメニューと、前記音声受付手段による音声操作が不能な第２類のメニューとを含み、前記表示制御手段は、前記第１類のメニューを前記第２類のメニューと識別可能な異なる態様で前記ディスプレイ上に同時に表示するものが開示されている。

しかし、この技術では、音声入力可能な設定項目と不可能な設定項目をユーザーに明示することはできるものの、音声入力方式と操作入力方式が併用される場合に、効率良く入力を行うための解決策を提供するする技術ではなかった。

この発明は、このような技術的背景に鑑みてなされたものであって、音声入力方式と操作入力方式が併用される場合に、効率良くジョブの設定入力を行うことができる操作性に優れた操作画面の表示装置、画像処理装置及びプログラムを提供することを目的とする。

上記目的は、以下の手段によって達成される。
（１）画像形成装置を操作するための操作画面の表示装置であって、表示手段と、操作手段と、ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御手段と、前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付手段と、前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を、前記第１の受付手段によるユーザーの操作入力を受け付け可能な状態で受け付ける第２の受付手段と、を備え、前記第２の受付手段による音声入力の受付時には、前記表示制御手段は、音声入力に適した設定項目を操作画面から削除し、操作入力に適した設定項目を有する操作画面を前記表示手段に表示することを特徴とする操作画面の表示装置。
（２）前記表示制御手段は、削除した前記設定項目以外の設定項目を再配置した操作画面を前記表示手段に表示する前項１に記載の操作画面の表示装置。
（３）前記表示制御手段は、削除した前記設定項目に代えて、前記操作入力に適した設定項目を操作画面に追加表示する前項１または２に記載の操作画面の表示装置。
（４）前記操作入力に適した設定項目は、設定入力を図示によって行う項目、複数の設定の組み合わせによって機能を指定する項目、設定値が桁数の多い数値である項目、のうちの少なくとも何れかである前項３に記載の操作画面の表示装置。
（５）前記表示制御手段は、再配置される設定項目の大きさを変更した操作画面を前記表示手段に表示させる前項２～４の何れかに記載の操作画面の表示装置。
（６）前記表示制御手段は、前記第２の受付手段により音声入力が受け付けられた設定項目に関係した設定項目を優先して操作画面に表示する前項２～５の何れかに記載の操作画面の表示装置。
（７）前記表示制御手段は、前記第２の受付手段により音声入力が受け付けられた設定項目の下位階層の設定項目を優先して操作画面に表示する前項６に記載の操作画面の表示装置。
（８）表示手段と、操作手段と、ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御手段と、前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付手段と、前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を受け付ける第２の受付手段と、前記第２の受付手段により音声入力が受け付けられた設定項目を記憶する記憶手段と、を備え、前記第２の受付手段による音声入力の受付時には、前記表示制御手段は、音声入力に適した設定項目を削除した操作画面を、前記表示手段に表示するとともに、前記記憶手段に記憶されている、前記第２の受付手段により音声入力が受け付けられた設定項目を優先して削除することを特徴とする操作画面の表示装置。
（９）前記表示制御手段は、前記記憶手段に記憶されている設定項目であっても、その後に第１の受付手段により操作入力が受け付けられた設定項目については、削除しない前項８に記載の操作画面の表示装置。
（１０）表示手段と、操作手段と、ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御手段と、前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付手段と、前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を受け付ける第２の受付手段と、前記第１の受付手段により操作入力が受け付けられた設定項目を記憶する記憶手段と、を備え、前記第２の受付手段による音声入力の受付時には、前記表示制御手段は、音声入力に適した設定項目を削除した操作画面を、前記表示手段に表示するとともに、前記記憶手段に記憶されている、前記第１の受付手段により操作入力が受け付けられた設定項目を優先して操作画面に表示することを特徴とする操作画面の表示装置。
（１１）前記表示制御手段は、前記記憶手段に記憶されている、前記第１の受付手段により操作入力が受け付けられた設定項目であっても、その後に第２の受付手段により音声入力が受け付けられた設定項目は削除する前項１０に記載の操作画面の表示装置。
（１２）自装置が起動したときの初期状態では、前記表示制御手段は、前記操作入力に適した設定項目を有する操作画面を表示する前項１～１１の何れかに記載の操作画面の表示装置。
（１３）前記音声入力モードで自装置がスリープモードに移行したときは、スリープモードから復帰しても音声入力モードが維持される前項１２に記載の操作画面の表示装置。
（１４）前記第２の受付手段による音声入力の受付が連続的に行われた場合、前記表示制御手段はその都度、前記音声入力に適した設定項目を削除する前項１～１３の何れかに記
載の操作画面の表示装置。
（１５）前記第２の受付手段による音声入力の受付後に、前記第１の受付手段による操作入力の受付が連続して行われた場合、前記表示制御手段は、前記音声入力に適した設定項目を削除しない操作入力用の操作画面を前記表示手段に表示する前項１～１４の何れかに記載の操作画面の表示装置。
（１６）前記表示制御手段は、ユーザーに応じた操作画面を前記表示手段に表示する前項１～１５の何れかに記載の操作画面の表示装置。
（１７）ユーザーに応じた操作画面は、初期画面において表示される操作画面である前項１６に記載の操作画面の表示装置。
（１８）ユーザーに応じて表示される操作画面は、前記第２の受付手段による音声入力の受付後の操作画面である前項１６に記載の操作画面の表示装置。
（１９）表示手段と、操作手段と、ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御手段と、前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付手段と、前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を受け付ける第２の受付手段と、ユーザー毎の情報を記憶する記憶手段と、を備え、前記表示制御手段は、前記記憶手段に記憶された情報に基づいてユーザーに応じた操作画面を前記表示手段に表示し、前記記憶手段に記憶されるユーザー毎の情報は、前記第２の受付手段により音声入力が受け付けられた設定項目、前記第２の受付手段により音声入力が受け付けられた設定項目の設定順序、前記第２の受付手段により音声入力が受け付けられた設定項目の設定頻度、前記第１の受付手段により操作入力が受け付けられた設定項目、前記第１の受付手段により操作入力が受け付けられた設定項目の設定順序、前記第１の受付手段により操作入力が受け付けられた設定項目の設定頻度、のうちの少なくとも一つであることを特徴とする操作画面の表示装置。
（２０）前項１～１９の何れかに記載の操作画面の表示装置を備えた画像処理装置。
（２１）画像形成装置を操作するための操作画面の表示装置であって、表示手段と操作手段を有する操作画面の表示装置のコンピュータに、ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御ステップと、前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付ステップと、音声入力モードにおいて、前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を、前記第１の受付ステップによるユーザーの操作入力を受け付け可能な状態で受け付ける第２の受付ステップと、を実行させ、前記第２の受付ステップによる音声入力の受付時には、前記表示制御ステップでは、音声入力に適した設定項目を操作画面から削除し、操作入力に適した設定項目を有する操作画面を前記表示手段に表示する処理を、前記コンピュータに実行させるためのプログラム。

前項（１）に記載の発明によれば、画像形成装置を操作するための操作画面の表示装置は、表示手段に表示された操作画面に表示されたジョブの動作条件の１個または複数個の設定項目のうち、少なくとも１個の設定項目に対して操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付手段と、操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を、第１の受付手段によるユーザーの操作入力を受け付け可能な状態で受け付ける第２の受付手段とを備えている。そして、第２の受付手段による音声入力の受付時には、ユーザーは、音声入力に適した設定項目については音声入力を使用するものと考えられることから、音声入力に適した設定項目を削除し、操作入力に適した設定項目を有する操作画面を表示手段に表示する。これにより、効率良くジョブの設定入力を行うことができる操作性に優れた操作画面の表示装置とすることができる。

前項（２）に記載の発明によれば、削除した設定項目以外の設定項目を再配置した操作画面が表示されるから、ユーザーが効率的に操作しやすい操作画面を表示することができる。

前項（３）に記載の発明によれば、削除した設定項目に代えて、操作入力に適した設定項目が操作画面に追加表示されるから、操作入力に適した設定項目の表示個数を増やすことができ、より効率的な設定値の入力を行うことができる。

前項（４）に記載の発明によれば、設定入力を図示によって行う項目、複数の設定の組み合わせによって機能を指定する項目、設定値が桁数の多い数値である項目、のうちの少なくとも何れかの設定項目を、削除された設定項目に代えて操作画面に表示できる。

前項（５）に記載の発明によれば、再配置される設定項目の大きさを変更した操作画面が表示手段に表示されるから、ユーザーの見やすい大きさで表示することができる。

前項（６）に記載の発明によれば、第２の受付手段により音声入力が受け付けられた設定項目に関係した設定項目が優先して操作画面に表示されるから、操作入力と音声入力とを組み合わせたときの設定入力を効率よく行うことができる。

前項（７）に記載の発明によれば、第２の受付手段により音声入力が受け付けられた設定項目の下位階層の設定項目が優先して操作画面に表示されるから、操作入力と音声入力とを組み合わせたときの設定入力を効率よく行うことができる。

前項（８）に記載の発明によれば、記憶手段に記憶されている、音声入力が受け付けられた設定項目が優先して削除されるから、過去の実績に基づいて音声入力される可能性が低いと推測される設定項目を優先して削除することができる。

前項（９）に記載の発明によれば、記憶手段に記憶されている設定項目であっても、その後に操作入力が受け付けられた設定項目については、操作入力される可能性があると推測されることから、削除しないようにして、良好な操作性を確保する。

前項（１０）に記載の発明によれば、記憶手段に記憶されている、操作入力が受け付けられた設定項目が優先して操作画面に表示されるから、過去の実績に基づいて操作入力される可能性が高いと推測される設定項目を優先的に表示することができる。

前項（１１）に記載の発明によれば、記憶手段に記憶されている、操作入力が受け付けられた設定項目であっても、その後に音声入力が受け付けられた設定項目は、音声入力される可能性が高いと推測されることから、削除される。

前項（１２）に記載の発明によれば、自装置が起動したときの初期状態では、音声入力モードはオフになっており、従って操作入力に適した設定項目を有する操作画面が表示される。

前項（１３）に記載の発明によれば、音声入力モードで自装置がスリープモードに移行したときは、スリープモードから復帰しても音声入力モードが維持されるから、ユーザーはそのまま第２の受付手段による設定値の入力を行うことができる。

前項（１４）に記載の発明によれば、第２の受付手段による音声入力の受付が連続的に行われた場合はその都度、音声入力に適した設定項目が削除される。

前項（１５）に記載の発明によれば、音声入力の受付後に、操作入力の受付が連続して行われた場合、ユーザーは操作入力を行うことが予測されるから、音声入力に適した設定項目を削除しない操作入力用の操作画面が表示される。

前項（１６）に記載の発明によれば、表示する操作画面をユーザーに応じて変更することができ、各ユーザーにとって使い勝手の良いものとなる。

前項（１７）に記載の発明によれば、初期画面において表示される操作画面をユーザーに応じて表示することができる。

前項（１８）に記載の発明によれば、第２の受付手段による音声入力の受付後の操作画面を、ユーザーに応じて表示することができる。

前項（１９）に記載の発明によれば、第２の受付手段により音声入力が受け付けられた設定項目、音声入力が受け付けられた設定項目の設定順序、音声入力が受け付けられた設定項目の設定頻度、第１の受付手段により操作入力が受け付けられた設定項目、操作入力が受け付けられた設定項目の設定順序、操作入力が受け付けられた設定項目の設定頻度、のうちの少なくとも一つを記憶手段に記憶し、この記憶された情報に基づいてユーザーに応じた操作画面が表示される。

前項（２０）に記載の発明によれば、効率良く設定値の入力を行うことができる操作性に優れた操作画面の表示装置を備えた画像処理装置となる。

前項（２１）に記載の発明によれば、画像形成装置を操作するための操作画面の表示装置のコンピュータに、第２の受付ステップによる音声入力の受付時には、音声入力に適した設定項目を操作画面から削除し、操作入力に適した設定項目を有する操作画面を、表示手段に表示する処理を実行させることができる。

この発明の一実施形態に係る操作画面の表示装置を備えた画像処理装置としての画像形成装置の構成を示すブロック図である。 ジョブの実行に際し、ユーザーがジョブの動作条件を設定するための１個または複数個の設定項目に対して設定入力を行ったときの画像処理装置の動作を示すフローチャートである。 初期操作画面の一例を示す図である。 音声入力に適した設定項目を削除した操作画面の一例を示す図である。 削除した設定項目の代わりに、パネル入力に適した設定項目を追加した操作画面の一例を示す図である。 記憶装置に記憶されたユーザーの履歴情報の一例を示す図である。 ジョブの実行に際し、ユーザーがジョブの１個または複数個の設定項目に対して設定値の入力を行ったときに、ユーザーに応じたジョブの操作画面を表示する場合の画像処理装置の動作を示すフローチャートである。 この発明の他の実施形態の構成を示す図である。

以下、この発明の実施形態を図面に基づいて説明する。

図１は、この発明の一実施形態に係る操作画面の表示装置を備えた画像処理装置としての画像形成装置１の構成を示すブロック図である。この実施形態では、画像形成装置１として、コピー機能、プリンタ機能、ファクシミリ機能、スキャン機能等を備えた多機能デジタル複合機である前述したＭＦＰが用いられている。以下、画像形成装置をＭＦＰともいう。

図１に示すように、ＭＦＰ１は、制御部１００、記憶装置１１０、画像読取装置１２０、操作パネル１３０、画像出力装置１４０、プリンタコントローラ１５０及びネットワークインターフェイス（ネットワークＩ/Ｆ）１６０、無線通信インターフェース（無線通信Ｉ／Ｆ）１７０、認証部１８０、マイク１９０等を備え、互いにシステムバス１７５を介して接続されている。

制御部１００は、ＣＰＵ（Central Processing Unit）１０１、ＲＯＭ（Read Only Memory）１０２、Ｓ－ＲＡＭ（Static Random Access Memory）１０３、ＮＶ－ＲＡＭ（Non Volatile RAM）１０４及び時計ＩＣ１０５等を備えている。

ＣＰＵ１０１は、ＲＯＭ１０２等に保存されている動作プログラムを実行することにより、ＭＦＰ１の全体を統括的に制御する。例えばコピー機能、プリンタ機能、スキャン機能、ファクシミリ機能等を実行可能に制御したり、ユーザーによる操作パネル１３５の操作入力を受け付けて、指示されたジョブの動作条件の設定値を設定する処理を行う。更にこの実施形態では、音声入力モードにおいて、マイク１９０から入力されたユーザーの音声入力を受け付けると共に、この音声入力を公知の音声認識技術を用いて解析することにより、ユーザーによって指示されたジョブの動作条件の設定値を設定する処理を行ったり、音声入力モードにおいて操作パネルの表示部１３４に表示される操作画面の表示内容を変更する等の処理を行うが、詳細は後述する。

ＲＯＭ１０２は、ＣＰＵ１０１が実行するプログラムやその他のデータを格納する。

Ｓ－ＲＡＭ１０３は、ＣＰＵ１０１がプログラムを実行する際の作業領域となるものであり、プログラムやプログラムを実行する際のデータ等を一時的に保存する。

ＮＶ－ＲＡＭ１０４は、バッテリでバックアップされた不揮発メモリであり、画像形成に係わる各種の設定等を記憶するものである。

時計ＩＣ１０５は、時刻を計時すると共に、内部タイマーとして機能し処理時間の計測等を行う。

記憶装置１１０は、ハードディスク等からなり、プログラムや各種データ等を保存する。特にこの実施形態では、ジョブの動作条件の設定値の入力方式、設定項目、設定値等についてユーザー毎の過去の履歴を記憶する。

画像読取装置１２０は、スキャナ等を備え、プラテンガラス上にセットされた原稿を走査することによって読み取り、読み取った原稿を画像データに変換する。

操作パネル１３０は、操作手段として、ユーザーがＭＦＰ１へジョブ等の指示や各種設定を行う際に用いられるものであり、リセットキー１３１、スタートキー１３２、ストップキー１３３、表示部１３４及びタッチパネル１３５等を備えている。

リセットキー１３１は、設定をリセットする際に使用されるものであり、スタートキー１３２はスキャン等の開始操作に使用されるものであり、ストップキー１３３は動作を中断する場合等に押下されるものである。

表示部１３４は、例えば液晶表示装置からなりメッセージや各種の操作画面等を表示するものであり、タッチパネル１３５は表示部１３４の画面上に形成され、ユーザーのタッチ操作を検出する。

画像出力装置１４０は、画像読取装置１２０で読み取られた原稿の画像データや、端末装置３から送信されたプリントデータから生成された複写画像を用紙上に印字し印刷物として出力するものである。

プリンタコントローラ１５０は、ネットワークインターフェース１６０によって受信されたプリントデータから複写画像を生成するものである。

ネットワークＩ/Ｆ１６０は、ネットワーク４を介してデータの送受信を行う通信手段として機能し、無線通信Ｉ／Ｆ１７０は近距離無線通信により外部装置と通信を行うためのインターフェースである。

認証部１８０はログインするユーザーの認証用情報を取得し、この認証用情報を予め固定記憶装置１１０等に保存されている照合用の情報と比較照合して認証を行うものである。なお、ユーザーの認証用情報と照合用の情報との比較照合は、外部の認証サーバーにより行い、認証部１８０が認証サーバーから認証結果を受信することにより認証が行われても良い。

マイク１９０はユーザーの音声を入力する音声入力装置として機能するものである。

次に、例えば印刷ジョブ等のジョブの実行に際し、ユーザーがジョブの動作条件を設定するための１個または複数個の設定項目に対して設定入力を行ったときのＭＦＰ１の動作を、図２のフローチャートを参照して説明する。図２のフローチャートに示される動作は、ＭＦＰ１のＣＰＵ１０１がＲＯＭ１０２等の記録媒体に格納された動作プログラムに従って動作することにより実行される。

この実施形態では、操作パネル１３０の操作による操作入力（以下、パネル入力ともいう）と、マイク１９０を介してのユーザーの音声による音声入力が可能となっている。自装置が起動したときの初期状態や通常動作時には、音声入力モードはオフになっていてパネル入力が可能となっている。音声入力モードがオンになると、パネル入力と音声入力の両方が可能となる。従ってユーザーは音声入力を行いながら、音声入力が困難な設定項目についてはパネル入力により設定値を入力できるようになっている。

音声モードをオンにする方法としては、限定はされないが、ユーザーがマイク１９０のスイッチをオンにする方法や、表示画面上の音声モードボタンを押してオンにする等の方法を挙げることができる。あるいは、音声入力を検知したときにオンになっても良い。

なお、音声入力モードで操作パネル１３０を含む自装置がスリープモードに移行したときは、スリープモードから復帰しても音声入力モードが維持され、従ってユーザーはパネル入力と音声入力の両方が可能となっている。

ステップＳ０１でジョブ設定の開始指示を受け付ける。この例では、音声入力モードがオンとなっており、パネル入力と音声入力がいずれも可能となっているものとする。ジョブ設定の開始指示は、操作パネル１３０の操作によっても良いし、音声によっても良い。また、ＭＦＰ１がユーザー認証を必要としている場合は、認証部１８０によるユーザー認証を行っても良い。ユーザー認証は操作パネル１３０から認証に必要な項目を入力することにより行われる。また、音声による話者識別によりユーザー認証を行っても良い。

ステップＳ０２では、１個又は複数個の設定項目を有する初期操作画面を表示部１３４に表示したのち、ステップＳ０３で入力を受け付ける。

図３に初期操作画面の一例を示す。この初期操作画面はパネル入力を想定したものであり、「カラー」「部数」「濃度」「フィニッシング」「画質」「両面設定」の各設定項目のボタンと、「スタート」「ストップ」ボタンが表示されている。「フィニッシング」ボタンは後処理装置によるステープル処理やパンチ処理等を設定するためのボタンである。

ステップＳ０４では、受け付けた入力がジョブ生成指示の入力であるかどうかを調べ、ジョブ生成指示の入力でなければ（ステップＳ０４でＮＯ）、ステップＳ０５に進み、音声入力かどうかを判断する。音声入力であれば（ステップＳ０５でＹＥＳ）、ステップＳ０６で、操作画面から音声入力に適した設定項目のボタンを削除したのち、ステップＳ０７で、入力内容を反映すると共にパネル入力に適した設定項目のボタンのみを有する操作画面に変更する。そしてステップＳ０８で、表示内容を変更した操作画面を表示部１３４に表示したのち、ステップＳ０３に戻る。

ステップＳ０３で再度の入力を受け付け、それが音声入力であった場合（ステップＳ０５でＹＥＳ）、ステップＳ０６で、操作画面から音声入力に適した設定項目のボタンが削除される。このように、音声入力の受付が連続的に行われた場合、その都度、音声入力に適した設定項目が削除される。

ステップＳ０５において、音声入力でなければ（ステップＳ０５でＮＯ）、ステップＳ０７で、通常のパネル入力の場合と同様に、入力内容を反映するとともに音声入力に適した設定項目を削除しない操作画面を表示部１３４に表示したのち、ステップＳ０３に戻る。

なお、音声入力の受付後、操作入力の受付が連続して行われた場合に、音声入力に適した設定項目を削除しない操作入力用の操作画面を表示部１３４に表示する構成としても良い。音声入力の受付後、操作入力の受付が連続して行われた場合は、ユーザーは音声入力では無く操作入力を継続して行う可能性が高いことが予測されるからである。

ステップＳ０４で、受け付けた入力がジョブ生成指示であれば（ステップＳ０４でＹＥＳ）、入力済みの設定値が設定されたジョブを生成するため、本処理を終了する。

図４に、音声入力に適した設定項目のボタンを削除した操作画面の一例を示す。図４の例では、ステップＳ０３で受け付けた入力が音声入力によるカラーモードの設定入力であった場合に、図３に示した初期操作画面から「カラー」ボタンを削除すると共に、その他音声入力に適した項目として「部数」「両面設定」の各設定項目のボタンも併せて削除する。そして、図５に示すように、削除した設定項目のボタンの代わりに、パネル入力に適した設定項目のボタンとして、「拡大率」「レイアウト」「セキュリティ」の各ボタンを表示する。また、音声認識モード（音声入力モード）であることを示すメッセージと「戻す」ボタンも表示される。「戻す」ボタンが押されると、通常のパネル入力の場合の操作画面に戻る。

パネル入力に特に適した設定項目の一例としては、設定入力を図示によって行う設定項目、複数の設定の組み合わせによって機能を指定する設定項目、設定値が桁数の多い数値である設定項目、のうちの少なくとも何れかを挙げることができる。設定値の入力を図示によって行う設定項目としては、例えばステープルの位置を図示で設定する場合であり、複数の設定値の組み合わせによって機能を指定する設定項目としては、例えば、１枚の縦向き用紙に４ページを集約印刷する「縦向き４ｉｎ１」を指定する場合に、「縦向き」の設定と「４ｉｎ１」の設定の２回の設定で指定する場合である。

また、音声による話者識別によりユーザー認証が行われた場合、または、入力を音声認識で開始した場合は、図３に示す初期操作画面をパネル入力に適した設定項目のボタンのみが表示された画面としても良い。

なお、図５の例では、削除した設定項目の代わりに、パネル入力に適した設定項目のボタンである「拡大率」「レイアウト」「セキュリティ」の各ボタンを、削除した設定項目と同じ大きさで同じ位置に配置したが、削除した設定項目の代わりにパネル入力に適した設定項目のボタンを追加することなく、あるいは追加配置した状態で、各設定項目のボタンの大きさや配置を変えて、操作しやすくしてもよい。

また、削除した設定項目のボタンの代わりに、音声入力された設定項目に関係した設定項目のボタンを優先して操作画面に表示してもよいし、あるいは音声入力された設定項目の下位階層の設定項目のボタンを優先して操作画面に表示してもよい。音声入力された設定項目に関係した項目としては、例えば「カラー」設定を行った場合の「色調」の設定項目があり、音声入力された設定項目の下位階層の設定項目としては、「とじ代」をオン設定した場合の「とじ代長さ」の設定項目がある。

さらには、過去の入力内容に応じてパネル入力に適したもの、音声入力に適したものを変更してもよい。具体的には、各設定項目が音声入力及びパネル入力いずれで受け付けられたかを記憶装置１１０に記憶しておき、次回以降のジョブ設定時に反映してもよい。例えば、パネル表示をパネル入力に適したものに変更する際に、過去に音声入力で受け付けられている設定項目を優先して削除しても良い。この場合、音声入力で受け付けられている設定項目であっても、その後に操作入力が受け付けられたことのある設定項目については、その情報を記憶装置１１０に上書き保存しておき、操作画面から削除しないようにしても良い。あるいはさらに、操作入力で受け付けられている設定項目を優先して操作画面に表示してもよい。この場合、操作入力で受け付けられている設定項目であっても、その後に音声入力が受け付けられた設定項目については、その情報を記憶装置１１０に上書き保存しておき、削除しても良い。

このような設定項目についての過去の実績及びそれに基づく設定項目の操作画面からの削除や操作画面への追加表示、あるいは初期操作画面の表示等は、ユーザー毎に行われても良い。この場合、記憶装置１１０には図６に示すような管理テーブルで示される履歴情報がユーザー毎に記憶される。

図６の管理テーブルでは、「カラー」「部数」「濃度」「フィニッシング」などの各設定項目に対して、初期優先度及び音声操作可能かどうかが初期値として記憶されている。初期優先度は、音声入力が行われない場合の表示優先度である。

さらに、過去のパネル入力及び音声入力の設定回数（受け付け回数）、設定履歴が記憶されている。設定履歴は直近の実績であり、各設定項目に対して一定数（図６の例では５個）保存されているが、記憶装置１１０の記憶容量が大きい場合は全ての履歴を保存してもよい。また、図示は省略したが、音声入力に基づいて設定が行われた設定項目の順序や、操作入力に基づいて設定が行われた設定項目の順序も、履歴情報として管理テーブルに記憶されていても良い。

図６の管理テーブルに示したユーザー毎の履歴情報の内容を基に、操作画面を作成し表示部１３４に表示する。音声入力モードでない場合、操作画面にはパネル入力に適した設定項目のボタンと音声入力に適した設定項目のボタンの両方が表示されるため、過去に設定された回数が多い設定項目のボタンから順に表示するようにしても良い。

音声入力モードがオンになり音声入力による設定が開始された場合は、音声入力に適した設定項目のボタンを操作画面から削除し、パネル入力に適した設定項目のボタンのみが表示された操作画面に変更する。この場合は、例えば、過去にパネル入力で設定された回数が多い設定項目のボタンを優先して表示しても良い。また、パネル入力で設定された回数が多い設定項目であっても、音声入力で設定された回数がそれ以上多い場合は表示しないのが良い。さらに、設定履歴を基に、過去に音声入力を連続して行った設定項目のボタンは表示せず、過去にパネル入力を連続して行った設定項目のボタンは優先して表示するようにしても良い。

また、音声操作可能でない設定項目のボタンは、音声入力時の操作画面に優先して表示するのが良い。

図７は、印刷ジョブ等のジョブの実行に際し、ユーザーがジョブの１個または複数個の設定項目に対して設定値の入力を行ったときに、ユーザーに応じたジョブの操作画面を表示する場合のＭＦＰ１の動作を示すフローチャートである。図７のフローチャートに示される動作は、ＭＦＰ１のＣＰＵ１０１がＲＯＭ１０２等の記録媒体に格納された動作プログラムに従って動作することにより実行される。

ステップＳ１１でユーザー認証を行いユーザーを特定する。次いでステップＳ１２でジョブ設定の開始指示を受け付けたのち、ステップＳ１３で、ユーザー毎に記憶装置１１０に記憶され管理テーブル（図６に示す）で管理されている履歴情報を取得した後、ステップＳ１４で、履歴情報に応じた設定項目のボタンを有する操作画面を表示する。

次にステップＳ１５で入力を受け付け、ステップＳ１６で、受け付けた入力がジョブ生成指示の入力であるかどうかを調べる。ジョブ生成指示の入力でなければ（ステップＳ１６でＮＯ）、ステップＳ１７に進み、音声入力かどうかを判断する。音声入力であれば（ステップＳ１７でＹＥＳ）、ステップＳ１８で、履歴情報を基に、操作画面から音声入力に適した設定項目のボタンを削除する。ステップＳ１９では、入力内容を反映すると共に、履歴情報を基にパネル入力に適した設定項目のボタンのみを有する操作画面に変更したのち、ステップＳ２０に進む。

ステップＳ１７において、音声入力でなければ（ステップＳ１７でＮＯ）、そのままステップＳ２０に進む。

ステップＳ２０では、今回設定された設定項目や入力方式等をユーザーの管理テーブルに保存し、ステップＳ２１で、操作画面を表示部１３４に表示したのち、ステップＳ１５に戻る。パネル入力の場合は、通常のパネル入力の場合と同様に、入力内容を反映した操作画面を表示部１３４が表示される。

ステップＳ１６で、受け付けた入力がジョブ生成指示であれば（ステップＳ１６でＹＥＳ）、今までに入力された設定値が設定されたジョブを生成するため、本処理を終了する。

以上、本発明の一実施形態を説明したが、本発明は上記実施形態に限定されることはない。例えば、操作画面の表示装置がＭＦＰ１に備えられている場合を説明したが、図８に示すように、ＭＦＰ１等の画像処理装置を操作するための操作画面を、プリンタドライバ等のアプリケーションに基づいて表示部に表示可能で、かつ操作手段による操作画面の操作が可能であり、ジョブの動作条件の設定と共にジョブの実行指示をネットワーク３を介してＭＦＰ１に送信可能な情報処理装置である端末装置４に備えられていても良い。端末装置４としては、デスクトップ型パーソナルコンピュータ、ノート型パーソナルコンピュータ、タブレット端末、スマートフォン等を挙げることができる。

端末装置４は音声入力装置２を介してユーザーの音声入力データを受領し、ＭＦＰ１の場合と同様に、表示部の操作画面の表示内容を変更する。

また、音声入力装置２はＭＦＰ１や端末装置４に備えられていても良いし、ＭＦＰ１や端末装置４と別体で構成され、ネットワーク３を介して音声データがＭＦＰ１や端末装置４に入力される構成であっても良い。

１ ＭＦＰ（画像処理装置）
２ マイク（音声入力装置）
３ ネットワーク
４ 携帯端末装置（操作手段）
１００ 制御部
１０１ ＣＰＵ
１０２ ＲＯＭ
１０３ ＲＡＭ
１１０ 記憶装置
１３０ 操作パネル（操作手段）
１３４ 表示部
１４０ 画像出力装置
１６０ ネットワークインターフェース
１９０ マイク（音声入力装置）

Claims (21)

1. 画像形成装置を操作するための操作画面の表示装置であって、
   表示手段と、
   操作手段と、
   ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御手段と、
   前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付手段と、
   前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を、前記第１の受付手段によるユーザーの操作入力を受け付け可能な状態で受け付ける第２の受付手段と、
   を備え、
   前記第２の受付手段による音声入力の受付時には、前記表示制御手段は、音声入力に適した設定項目を操作画面から削除し、操作入力に適した設定項目を有する操作画面を前記表示手段に表示することを特徴とする操作画面の表示装置。
2. 前記表示制御手段は、削除した前記設定項目以外の設定項目を再配置した操作画面を前記表示手段に表示する請求項１に記載の操作画面の表示装置。
3. 前記表示制御手段は、削除した前記設定項目に代えて、前記操作入力に適した設定項目を操作画面に追加表示する請求項１または２に記載の操作画面の表示装置。
4. 前記操作入力に適した設定項目は、設定入力を図示によって行う項目、複数の設定の組み合わせによって機能を指定する項目、設定値が桁数の多い数値である項目、のうちの少なくとも何れかである請求項３に記載の操作画面の表示装置。
5. 前記表示制御手段は、再配置される設定項目の大きさを変更した操作画面を前記表示手段に表示させる請求項２～４の何れかに記載の操作画面の表示装置。
6. 前記表示制御手段は、前記第２の受付手段により音声入力が受け付けられた設定項目に関係した設定項目を優先して操作画面に表示する請求項２～５の何れかに記載の操作画面の表示装置。
7. 前記表示制御手段は、前記第２の受付手段により音声入力が受け付けられた設定項目の下位階層の設定項目を優先して操作画面に表示する請求項６に記載の操作画面の表示装置。
8. 表示手段と、
   操作手段と、
   ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御手段と、
   前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付手段と、
   前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を受け付ける第２の受付手段と、
   前記第２の受付手段により音声入力が受け付けられた設定項目を記憶する記憶手段と、
   を備え、
   前記第２の受付手段による音声入力の受付時には、前記表示制御手段は、音声入力に適した設定項目を削除した操作画面を、前記表示手段に表示するとともに、前記記憶手段に記憶されている、前記第２の受付手段により音声入力が受け付けられた設定項目を優先して削除することを特徴とする操作画面の表示装置。
9. 前記表示制御手段は、前記記憶手段に記憶されている設定項目であっても、その後に第１の受付手段により操作入力が受け付けられた設定項目については、削除しない請求項８に記載の操作画面の表示装置。
10. 表示手段と、
    操作手段と、
    ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御手段と、
    前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付手段と、
    前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を受け付ける第２の受付手段と、
    前記第１の受付手段により操作入力が受け付けられた設定項目を記憶する記憶手段と、
    を備え、
    前記第２の受付手段による音声入力の受付時には、前記表示制御手段は、音声入力に適した設定項目を削除した操作画面を、前記表示手段に表示するとともに、前記記憶手段に記憶されている、前記第１の受付手段により操作入力が受け付けられた設定項目を優先して操作画面に表示することを特徴とする操作画面の表示装置。
11. 前記表示制御手段は、前記記憶手段に記憶されている、前記第１の受付手段により操作入力が受け付けられた設定項目であっても、その後に第２の受付手段により音声入力が受け付けられた設定項目は削除する請求項１０に記載の操作画面の表示装置。
12. 自装置が起動したときの初期状態では、前記表示制御手段は、前記操作入力に適した設定項目を有する操作画面を表示する請求項１～１１の何れかに記載の操作画面の表示装置。
13. 音声入力モードで自装置がスリープモードに移行したときは、スリープモードから復帰しても音声入力モードが維持される請求項１２に記載の操作画面の表示装置。
14. 前記第２の受付手段による音声入力の受付が連続的に行われた場合、前記表示制御手段はその都度、前記音声入力に適した設定項目を削除する請求項１～１３の何れかに記載の操作画面の表示装置。
15. 前記第２の受付手段による音声入力の受付後に、前記第１の受付手段による操作入力の受付が連続して行われた場合、前記表示制御手段は、前記音声入力に適した設定項目を削除しない操作入力用の操作画面を前記表示手段に表示する請求項１～１４の何れかに記載の操作画面の表示装置。
16. 前記表示制御手段は、ユーザーに応じた操作画面を前記表示手段に表示する請求項１～１５の何れかに記載の操作画面の表示装置。
17. ユーザーに応じた操作画面は、初期画面において表示される操作画面である請求項１６に記載の操作画面の表示装置。
18. ユーザーに応じて表示される操作画面は、前記第２の受付手段による音声入力の受付後の操作画面である請求項１６に記載の操作画面の表示装置。
19. 表示手段と、
    操作手段と、
    ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御手段と、
    前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付手段と、
    前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を受け付ける第２の受付手段と、
    ユーザー毎の情報を記憶する記憶手段と、
    を備え、
    前記表示制御手段は、前記記憶手段に記憶された情報に基づいてユーザーに応じた操作画面を前記表示手段に表示し、
    前記記憶手段に記憶されるユーザー毎の情報は、前記第２の受付手段により音声入力が受け付けられた設定項目、前記第２の受付手段により音声入力が受け付けられた設定項目の設定順序、前記第２の受付手段により音声入力が受け付けられた設定項目の設定頻度、前記第１の受付手段により操作入力が受け付けられた設定項目、前記第１の受付手段により操作入力が受け付けられた設定項目の設定順序、前記第１の受付手段により操作入力が受け付けられた設定項目の設定頻度、のうちの少なくとも一つであることを特徴とする操作画面の表示装置。
20. 請求項１～１９の何れかに記載の操作画面の表示装置を備えた画像処理装置。
21. 画像形成装置を操作するための操作画面の表示装置であって、表示手段と操作手段を有する操作画面の表示装置のコンピュータに、
    ジョブの実行に際し、ジョブの動作条件の１個または複数個の設定項目を有する操作画面を、前記表示手段に表示させる表示制御ステップと、
    前記操作画面に表示された少なくとも１個の設定項目に対して前記操作手段を介して行われたユーザーの操作入力を受け付ける第１の受付ステップと、
    音声入力モードにおいて、前記操作画面における少なくとも１個の設定項目に対して音声入力装置を介して行われたユーザーの音声入力を、前記第１の受付ステップによるユーザーの操作入力を受け付け可能な状態で受け付ける第２の受付ステップと、
    を実行させ、
    前記第２の受付ステップによる音声入力の受付時には、前記表示制御ステップでは、音声入力に適した設定項目を操作画面から削除し、操作入力に適した設定項目を有する操作画面を前記表示手段に表示する処理を、前記コンピュータに実行させるためのプログラム。

Images