JP7459488B2 - 機器、表示制御方法およびプログラム - Google Patents

Description

本発明は、機器、表示制御方法およびプログラムに関する。

ＭＦＰ(Multifunction Peripheral/Printer/Product：複合機)等の画像処理機能を備えた機器には、処理機能や設定メニューをユーザに選択操作させるために、タッチパネル機能を有する操作パネルが装着されている。

また、ユーザ操作の手間を低減させるために、操作パネルに表示させる操作画面の表示形態を変更することで、ユーザに対する操作アシストを行う技術も知られている。例えば、特許文献１には、始動条件の成立が検知された特定の処理を実行させるための操作画像を、その他の処理を実行させるための操作画像とは異ならせて表示させる内容が開示されている。

しかしながら、従来の方法では、ユーザのリアルタイムな操作状況に応じた操作アシストができていないという課題があった。

上述した課題を解決すべく、請求項１に係る発明は、所定の入力操作を受け付ける操作パネルを備えた機器であって、ユーザが前記機器を用いた処理を行う場合に、当該機器に実行させる処理を選択可能な操作画面を前記操作パネルに表示させる表示制御手段と、前記操作画面が表示されている前記操作パネルで受け付けたユーザ操作を検知するユーザ操作検知手段と、前記機器に配置されたセンサから出力されたセンサ信号を含む機器情報を取得する機器情報取得手段と、前記ユーザ操作検知手段で検知された前記ユーザ操作であって、前記操作パネルで受け付けた前記ユーザ操作、の履歴を示す履歴情報に基づいて、操作中の当該ユーザに対する操作アシストが不要であるかを判断する判断手段と、を備え、前記表示制御手段は、前記判断手段で前記操作アシストが不要であると判断されなかった場合に、前記履歴情報および前記機器情報に基づいて前記ユーザの使用機能の推測が可能であれば、前記操作画面であって前記ユーザに対する操作アシストを行う画面、を前記操作パネルに表示させる機器である。

本発明によれば、ユーザの操作状況に応じた操作アシスト機能を提供することができるという効果を奏する。

実施形態に係る画像処理装置の一例の概略を説明するための図である。 実施形態に係る画像処理装置のハードウエア構成の一例を示す図である。 実施形態に係る画像処理装置のソフトウエア構成の一例を示す図である。 実施形態に係る画像処理装置の機能構成の一例を示す図である。 （Ａ）は、実施形態に係る操作履歴管理テーブルの一例を示す概念図であり、（Ｂ）は、実施形態に係る操作アシスト管理テーブルの一例を示す概念図である。 実施形態に係る権限情報管理テーブルの一例を示す概念図である。 実施形態に係る画像処理装置における操作アシスト処理の一例を示すフローチャートである。 実施形態に係る画像処理装置に表示される選択画面の一例を示す図である。 実施形態に係る画像処理装置に表示される表示画面の画面遷移の一例を説明するための図である。 実施形態に係る画像処理装置におけるユーザ使用機能推測処理の一例を示すフローチャートである。 （Ａ）は、実施形態に係る画像処理装置に表示される操作アシスト画面の一例を示す図であり、（Ｂ）は、実施形態に係る画像処理装置に表示されるレコメンド画面の一例を示す図である。 実施形態の変形例１に係る画像処理装置における操作アシスト処理の一例を示すフローチャートである。 実施形態の変形例２に係る画像処理装置におけるユーザ使用機能推測処理の一例を示すフローチャートである。 実施形態の変形例３に係る画像処理装置における操作アシスト処理の一例を示すフローチャートである。 実施形態の変形例４に係る画像処理装置におけるユーザ使用機能推測処理の一例を示すフローチャートである。

以下、図面を参照しながら、発明を実施するための形態を説明する。なお、図面の説明において同一要素には同一符号を付し、重複する説明は省略する。

●実施形態●
●画像処理装置の概略
図１は、実施形態に係る画像処理装置の一例の概略を説明するための図である。図１に示されている画像処理装置１０は、操作パネル３０５に対するユーザ操作の手間を低減させるために、ユーザ操作をアシストする操作画面を提供する。

画像処理装置１０は、例えば、ＭＦＰ(Multifunction Peripheral/Printer/Product：複合機)、ファクシミリ、スキャナ、またはプリンタ等の画像処理機能並びに通信機能を備える画像形成装置である。画像処理装置１０は、ケーブルによりデータ通信可能に接続された操作部３０と本体部５０とを備える。画像処理装置１０は、機器の一例である。

操作部３０は、画面表示およびユーザによるユーザ操作を受け付ける。本体部５０は、操作部３０によって受け付けられた入力に応じた動作を行う。なお、操作部３０と本体部５０は、ケーブルによる有線接続に代えて、無線（赤外線を含む）接続としてもよい。

画像処理装置１０は、操作部３０を本体部５０から独立させ、本体部５０の負荷が高くても操作レスポンスを低下させないようにすることが考えられる。例えば、操作部３０は、本体部５０と独立したＯＳ(Operating System)が搭載され、本体部５０と独立に動作する。

また、本体部５０には、画像処理の対象となる原稿の自動的な給紙を行うＡＤＦ(Auto Document Feeder)５３１、画像処理装置１０の周囲にいるユーザを検知する人感センサ５３３、および画像処理で使用する用紙を補給する給紙トレイ５３５を有している。

ＡＤＦ５３１、人感センサ５３３および給紙トレイ５３５は、本体部５０における特定の位置に配置されている周辺機器である。このような周辺機器には、本体部５０の処理または状態を検知するためのセンサが備えられている。周辺機器は、センサ信号を含む機器情報を出力する。ＡＤＦ５３１は、例えば、設置された原稿の有無、用紙サイズ、ＡＤＦ５３１の開閉等を機器情報として出力する。また、人感センサ５３３は、例えば、検知結果である人（ユーザ）の有無を機器情報として出力する。さらに、給紙トレイ５３５は、例えば、用紙サイズ、用紙の残量、用紙の有無、または給紙トレイ５３５の開閉情報等を機器情報として出力する。

なお、図１に示されている画像処理装置１０の周辺機器はこれに限られず、その他用途に応じた周辺機器（センサ）が具備されていてもよい。画像処理装置１０は、これらの周辺機器から、例えば、トナー残量やＬＡＮケーブルの挿抜等のセンサ信号を含む機器情報を出力することができる。また、画像処理装置１０は、管理者またはユーザによって特定の場所に設置された装置だけでなく、持ち運び可能なハンディプリンタまたはハンディスキャナ等であってもよい。

●ハードウエア構成
図２は、第１の実施形態に係る画像処理装置のハードウエア構成の一例を示す図である。なお、図２に示されているハードウエア構成は、必要に応じて構成要素が追加または削除されてもよい。画像処理装置１０は、プリンタ機能、コピー機能、スキャナ機能およびファックス機能等の各種の機能を実現可能な本体部５０と、ユーザ操作に応じた入力を受け付ける操作部３０とを備えている。操作部３０は、本体部５０の制御部、および、本体部５０とは独立した制御部を備えた本体部５０の操作部３０（操作パネル）である。

なお、ユーザの操作を受け付けるとは、ユーザの操作に応じて入力される情報（画面の座標値を示す信号等を含む）を受け付けることを含む概念である。本体部５０と操作部３０は、専用の通信路２００を介して相互に通信可能に接続されている。通信路２００は、例えば、ＵＳＢ（Universal Serial Bus）規格を用いることができるが、有線または無線を問わず任意の規格であってもよい。本体部５０は、操作部３０によって受け付けられた入力に応じた動作を行う。また、本体部５０は、例えば、通信ネットワークを介して、外部装置と通信可能であり、外部装置から受信される指示に応じた動作を行うこともできる。

まず、本体部５０のハードウエア構成について説明する。図３に示されているように、本体部５０は、ＣＰＵ(Central Processing Unit)５０１、ＲＯＭ(Read Only Memory)５０２、ＲＡＭ(Random Access Memory)５０３と、ＨＤＤ(Hard Disk Drive)５０４、スキャナエンジン５０５、プリンタエンジン５０６、ＦＡＸ制御ユニット５０７、通信Ｉ／Ｆ(Interface)５０８および接続Ｉ／Ｆ５０９を備えている。

ＣＰＵ５０１は、本体部５０全体の動作を制御する。ＲＯＭ５０２は、ＣＰＵ５０１の駆動に用いられるプログラムを記憶する不揮発性のメモリである。ＲＡＭ５０３は、ＣＰＵ５０１のワークエリアとして使用される揮発性のメモリである。ＨＤＤ５０４は、各種データまたはプログラムを記憶する不揮発性の記憶媒体である。ＣＰＵ５０１は、ＲＡＭ５０３をワークエリア（作業領域）として、ＲＯＭ５０２またはＨＤＤ５０４等に格納されたプログラムを実行することで、本体部５０全体の動作を制御する。また、ＣＰＵ５０１は、スキャナエンジン５０５、プリンタエンジン５０６またはＦＡＸ制御ユニット５０７によって、上述したプリンタ機能、コピー機能、スキャナ機能、ファックス機能等の各種機能を実現させる。

通信Ｉ／Ｆ５０８は、通信ネットワークを介して、外部装置と通信するためのインターフェースである。接続Ｉ／Ｆ５０９は、通信路２００を介して、操作部３０と通信するためのインターフェースである。機器Ｉ／Ｆ５１１は、図１に示されているＡＤＦ５３１、人感センサ５３３および給紙トレイ５３５等の周辺機器と接続するためのインターフェースである。また、本体部５０は、バスライン５１０を備えている。バスライン５１０は、ＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスまたはデータバス等である。

続いて、操作部３０のハードウエア構成について説明する。図３に示されているように、操作部３０は、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、フラッシュメモリ３０４、操作パネル３０５、通信Ｉ／Ｆ３０６および接続Ｉ／Ｆ３０７を備えている。

ＣＰＵ３０１は、操作部３０全体の動作を制御する。ＲＯＭ３０２は、ＣＰＵ３０１の駆動に用いられるプログラムを記憶する不揮発性のメモリである。ＲＡＭ３０３は、ＣＰＵ３０１のワークエリアとして使用される揮発性のメモリである。ＣＰＵ３０１は、ＲＡＭ３０３をワークエリア（作業領域）として、ＲＯＭ３０２またはフラッシュメモリ３０４等に格納されたプログラムを実行することで、操作部３０全体の動作を制御する。また、ＣＰＵ３０１は、ユーザ操作により受け付けられた入力に応じた情報（画像）を表示する等、各種機能を実現する。

操作パネル３０５は、ユーザ操作に応じた各種の入力を受け付けるとともに、各種の情報を表示する。例えば、各種の情報は、受け付けられた入力に応じた情報、画像処理装置１０の動作状況を示す情報、設定状態を示す情報等が挙げられる。操作パネル３０５は、例えば、タッチパネル機能を搭載した液晶表示装置（LCD：Liquid Crystal Display）、またはタッチパネル機能が搭載された有機ＥＬ（Electro Luminescence）表示装置等により構成される。また、操作パネル３０５は、これに加えてまたはこれに代えて、ハードウエアキー等の入力部やランプ等の表示部を設けることもできる。操作パネル３０５は、操作手段の一例である。通信Ｉ／Ｆ３０６は、通信ネットワークを介して外部装置等と通信するためのインターフェースである。接続Ｉ／Ｆ３０７は、通信路２００を介して本体部５０と通信するためのインターフェースである。また、操作部３０は、バスライン３０８を備えている。バスライン３０８は、ＣＰＵ３０１等の各構成要素を電気的に接続するためのアドレスバスまたはデータバス等である。

なお、上記各プログラムは、インストール可能な形式または実行可能な形式のファイルで、コンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。記録媒体の例として、ＣＤ－Ｒ(Compact Disc Recordable)、ＤＶＤ(Digital Versatile Disk)、Blu-ray（登録商標）ディスク、ＳＤカード、ＵＳＢメモリ等が挙げられる。また、記録媒体は、プログラム製品(Program Product)として、国内または国外へ提供されることができる。例えば、画像処理装置１０は、本発明に係るプログラムが実行されることで本発明に係る表示制御方法を実現する。

●ソフトウエア構成
次に、図３を用いて、画像処理装置１０のソフトウエア構成の概要について説明する。図３は、実施形態に係る画像処理装置のソフトウエア構成の一例を示す図である。図３に示すように、本体部５０は、アプリ層５５１、サービス層５５２、およびＯＳ（Operating System）層５５３を有している。アプリ層５５１、サービス層５５２およびＯＳ層５５３は、ＲＯＭ５０２またはＨＤＤ５０４等に格納されている各種ソフトウエアである。本体部５０は、ＣＰＵ５０１によって、これらのソフトウエアを実行することにより、各種機能を提供する。

アプリ層５５１のソフトウエアは、ハードウエア資源を動作させて所定の機能を提供す
るためのアプリケーションソフトウエア（以下、「アプリ」称する）である。例えば、アプリは、コピー機能を提供するためのコピーアプリ、スキャナ機能を提供するためのスキャナアプリ、ファクス機能を提供するためのファクスアプリ、プリンタ機能を提供するためのプリンタアプリ等である。

サービス層５５２のソフトウエアは、アプリ層５５１とＯＳ層５５３との間に介在する。サービス層５５２のソフトウエアは、本体部５０が備えるハードウエア資源を利用するためのインターフェースを、アプリに提供するためのソフトウエアである。具体的には、サービス層５５２のソフトウエアは、ハードウエア資源に対する動作要求の受け付け、および動作要求の調停を行う機能を提供するためのソフトウエアである。サービス層５５２によって受け付けられる動作要求は、例えば、スキャナエンジン５０５による読み取りまたはプリンタエンジン５０６による印刷等の要求である。

サービス層５５２によるインターフェースの機能は、本体部５０のアプリ層５５１だけではなく、操作部３０のアプリ層３５１にも提供される。すなわち、操作部３０のアプリ層３５１は、サービス層５５２のインターフェース機能を介して、本体部５０のハードウエア資源（例えば、スキャナエンジン５０５、プリンタエンジン５０６、ＦＡＸ制御ユニット５０７等）を利用した機能を実現することができる。

ＯＳ層５５３のソフトウエアは、本体部５０が備えるハードウエアを制御する基本機能を提供するための基本ソフトウエア（オペレーティングシステム）である。サービス層５５２のソフトウエアは、各種アプリからのハードウエア資源の利用要求を、ＯＳ層５５３が解釈可能なコマンドに変換してＯＳ層５５３に渡す。そして、ＯＳ層５５３のソフトウエアによりコマンドが実行されることで、ハードウエア資源は、アプリの要求に従った動作を行う。

操作部３０は、アプリ層３５１、サービス層３５２およびＯＳ層３５３を有する。操作部３０が備えるアプリ層３５１、サービス層３５２およびＯＳ層３５３の階層構造は、本体部５０と同様である。ただし、アプリ層３５１のアプリにより提供される機能や、サービス層３５２が受け付け可能な動作要求の種類は、本体部５０とは異なる。アプリ層３５１のアプリは、操作部３０が備えるハードウエア資源を動作させて所定の機能を提供するためのソフトウエアである。アプリ層３５１のアプリは、本体部５０が備える機能（プリンタ機能、コピー機能、スキャナ機能、ファックス機能）に関する操作や表示を行
なうためのＵＩ（User Interface）の機能を提供するためのソフトウエア等が含まれる。

画像処理装置１０において、機能の独立性を保つため、本体部５０のＯＳ層５５３のソフトウエアと操作部３０のＯＳ層３５３のソフトウエアは、互いに異なる。つまり、本体部５０と操作部３０は、異なるオペレーティングシステムで互いに独立して動作する。例えば、本体部５０のＯＳ層５５３のソフトウエアは、ＬＩＮＵＸ（登録商標）を採用し、操作部３０のＯＳ層３５３のソフトウエアは、Ａｎｄｒｏｉｄ（登録商標）を採用してもよい。

上述したように、図３に示されている画像処理装置１０において、本体部５０と操作部３０は、異なるオペレーティングシステムで動作するため、本体部５０と操作部３０との間の通信は、共通の装置内のプロセス間通信ではなく、異なる装置間の通信として行われる。例えば、操作部３０によって受け付けられた入力（ユーザ操作による指示内容）を本体部５０に伝達する動作（コマンド通信）、および本体部５０が操作部３０にイベントを通知する動作等は、異なる装置間の通信として行われる。これにより、操作部３０は、本体部５０にコマンド通信を行うことにより、本体部５０の機能を利用することができる。なお、本体部５０から操作部３０に通知されるイベントは、本体部５０における動作の実行状況、および本体部５０側で設定された内容等が挙げられる。

また、図３に示されている画像処理装置１０において、操作部３０への電力供給は、通信路２００を経由し、本体部５０から行われる。このため、操作部３０の電源制御は、本体部５０の電源制御とは別に（独立して）行うことができる。

●機能構成
次に、図４乃至図７を用いて、実施形態に係る画像処理装置の機能構成について説明する。図４は、実施形態に係る画像処理装置の機能構成の一例を示す図である。なお、図４には、画像処理装置１０において、後述の処理または動作に関連する機能構成が示されている。

画像処理装置１０は、上述のように、操作部３０および本体部５０によって構成される。このうち、操作部３０は、入出力部３１、受付部３２、表示制御部３３、判断部３４、ユーザ操作検知部３５、機器情報取得部３６、ユーザ使用機能推測部３７、操作アシスト決定部３８、通信部３９、判定部４１、認証部４２および記憶・読出部４９を有している。これら各部は、図２に示されている各構成要素のいずれかが、ＲＡＭ３０３上に展開されたプログラムに従ったＣＰＵ３０１からの命令によって動作することで実現される機能、または機能する手段である。また、操作部３０は、図２に示されているＲＯＭ３０２またはフラッシュメモリ３０４によって構築される記憶部３０００を有している。

入出力部３１は、図２に示されているＣＰＵ３０１からの命令、および接続Ｉ／Ｆ３０７によって実現され、本体部５０との間で各種データまたは情報のやり取りを行う機能である。入出力部３１は、例えば、本体部５０に対して、ユーザの入力操作により受け付けられた要求に応じた所定の要求信号を送信する。

受付部３２は、図２に示されているＣＰＵ３０１からの命令、および操作パネル３０５によって実現され、ユーザからの操作パネル３０５に対する各種入力を受け付ける機能である。表示制御部３３は、図２に示されているＣＰＵ３０１からの命令、および操作パネル３０５によって実現され、ユーザによる入力操作を受け付ける操作画面等の各種画面を、操作パネル３０５に表示させる機能である。表示制御部３３は、例えば、ＷＥＢブラウザを用いて、ＨＴＭＬ（HyperText Markup Language）等により作成されたＷｅｂページを、操作パネル３０５に表示させる。判断部３４は、図２に示されているＣＰＵ３０１からの命令によって実現され、操作部３０における各種判断を行う機能である。

ユーザ操作検知部３５は、図２に示されるＣＰＵ３０１からの命令によって実現され、受付部３２によって受け付けられたユーザ入力に応じたユーザ操作を検知する機能である。ユーザ操作検知部３５は、例えば、ユーザ操作として、操作間隔、操作回数またはユーザ操作に応じた画面遷移の情報を検知する。機器情報取得部３６は、図２に示されているＣＰＵ３０１からの命令によって実現され、入出力部３１を介して本体部５０から入力された機器情報を取得する機能である。

ユーザ使用機能推測部３７は、図２に示されているＣＰＵ３０１からの命令によって実現され、ユーザが使用したい画像処理装置１０の機能を推測する機能である。ユーザ使用機能推測部３７は、例えば、ユーザ操作検知部３５による検知結果または機器情報取得部３６によって取得された機器情報に応じてユーザ使用機能を推測する。

操作アシスト決定部３８は、図２に示されているＣＰＵ３０１からの命令によって実現され、ユーザに提供する操作アシストを決定する機能である。操作アシスト決定部３８は、例えば、ユーザ使用機能推測部３７による推測結果に応じて、操作アシストを行うための表示画面の表示形態を決定する。

通信部３９は、図２に示されているＣＰＵ３０１からの命令、および通信Ｉ／Ｆ３０６によって実現され、通信ネットワークを介して、外部装置との間で各種データまたは情報の通信を行う機能である。判定部４１は、図２に示されているＣＰＵ３０１からの命令によって実現され、操作パネル３０５に対する操作を行うユーザの操作習熟度を判定する機能である。認証部４２は、図２に示されているＣＰＵ３０１からの命令によって実現され、操作パネル３０５に対する操作を行うユーザの認証処理を行う機能である。

記憶・読出部４９は、図２に示されているＣＰＵ３０１からの命令によって実行され、記憶部３０００に各種データを記憶させ、または記憶部３０００から各種データを読み出す機能である。

○操作履歴管理テーブル
図５（Ａ）は、実施形態に係る操作履歴管理テーブルの一例を示す概念図である。記憶部３０００には、図５（Ａ）に示されているような操作履歴管理テーブルによって構成されている操作履歴管理ＤＢ３００１が構築されている。この操作履歴管理テーブルには、ユーザの操作の履歴を示す履歴情報として、ユーザ操作が受け付けられた日時とユーザ操作による発生した表示画面の画面遷移を示す画面遷移情報が関連づけられて記憶されている。また、操作履歴管理テーブルには、操作中のユーザの一連の操作履歴が蓄積されて記憶されている。例えば、図５（Ａ）の例では、操作履歴管理テーブルには、ユーザ操作１およびユーザ操作２が履歴情報として記憶されている。

○操作アシスト管理テーブル
図５（Ｂ）は、実施形態に係る操作アシスト管理テーブルの一例を示す概念図である。記憶部３０００には、図５（Ｂ）に示されているような操作アシスト管理テーブルによって構成されている操作アシスト管理ＤＢ３００３が構築されている。この操作アシスト管理テーブルには、操作アシストを行う操作項目を示すアシスト項目に対して、このアシスト項目の操作アシストを行うための各種条件が関連づけられて記憶されている。操作アシストを行うための条件には、ユーザ操作の操作間隔の閾値Ｔ、ユーザ操作の操作回数の閾値Ｃ、表示画面における特定の画面遷移を示す情報、操作アシストに用いるセンサ信号を送信したセンサ（周辺機器）の配置位置、およびユーザの権限を示すユーザ権限の情報が含まれている。ユーザ使用機能推測部３７は、ユーザ操作の操作履歴および周辺機器から取得される機器情報に基づいて、操作アシストを行うための条件を満たすアシスト項目が存在する場合、その項目をユーザ使用機能として推測する。

○権限情報管理テーブル
図６は、実施形態に係る権限情報管理テーブルの一例を示す概念図である。記憶部３０００には、図６に示されているような権限情報管理テーブルによって構成されている権限情報管理ＤＢ３００５が構築されている。この権限情報管理テーブルには、ユーザを識別するためのユーザＩＤに対して、各パスワードおよび画像処理装置１０に対する操作権限を示す権限情報が関連づけられて管理されている。例えば、図６に示されている権限情報管理テーブルにおいて、ユーザＩＤ「ｔｍ０１」のパスワードは「ａｂａｂ」であり、ユーザ権限は「一般」である。また、ユーザＩＤ「ｔｍ０２」のパスワードは「ａａｂｂ」であり、ユーザ権限は「管理者」である。画像処理装置１０は、この権限情報管理テーブルに基づいて、ユーザごとに操作権限に応じて操作アシストの内容を異ならせることができる。

続いて、本体部５０は、入出力部５１、画像処理部５２、機器情報取得部５３、通信部５４および記憶・読出部５９を有している。これら各部は、図２に示されている各構成要素のいずれかが、ＲＡＭ５０３上に展開されたプログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能、または機能する手段である。また、本体部５０は、図２に示されているＲＯＭ５０２またはＨＤＤ５０４によって構築される記憶部５０００を有している。

入出力部５１は、図２に示されているＣＰＵ５０１からの命令、および接続Ｉ／Ｆ５０９によって実現され、操作部３０との間で各種データまたは情報のやり取りを行う機能である。入出力部５１は、例えば、操作部３０から送信された所定の要求信号を受信する。また、入出力部５１は、例えば、操作部３０に対して、機器情報取得部５３によって取得された機器情報を送信する。

画像処理部５２は、図２に示されているＣＰＵ５０１からの命令、並びにスキャナエンジン５０５、プリンタエンジン５０６またはＦＡＸ制御ユニット５０７によって実現され、画像処理装置１０よる各種画像処理を実行する機能である。機器情報取得部５３は、図２に示されているＣＰＵ５０１からの命令、および機器Ｉ／Ｆ５１１によって実現され、画像処理装置１０の特定の位置に配置されたセンサからのセンサ信号を含む機器情報を取得する機能である。

通信部５４は、図２に示されているＣＰＵ５０１からの命令、および通信Ｉ／Ｆ５０８によって実現され、通信ネットワークを介して、外部装置との間で各種データまたは情報の通信を行う機能である。記憶・読出部５９は、図２に示されているＣＰＵ５０１からの命令によって実行され、記憶部５０００に各種データを記憶させ、または記憶部５０００から各種データを読み出す機能である。

●実施形態の処理または動作
次に、図７乃至図１１を用いて、実施形態に係る画像処理装置の処理または動作について説明する。図７は、実施形態に係る画像処理装置における操作アシスト処理の一例を示すフローチャートである。

まず、操作部３０の表示制御部３３は、図８に示されている選択画面６００を操作パネル３０５に表示させる（ステップＳ３１）。図８に示されている選択画面６００は、ユーザが画像処理装置１０を用いた各種処理を行う場合に押下される選択ボタンが含まれている。また、選択画面６００には、メニュー表示の初期画面であるホーム画面への画面遷移を行う場合に押下される「ホーム」ボタン６１０、および一つ前のユーザ操作が行われた画面に戻す場合に押下される「戻る」ボタン６３０が含まれている。ユーザは、例えば、タッチパネル式の操作パネル３０５にタッチして、所望の処理に該当するボタンを選択することで、所望の操作を行うことができる。選択画面６００は、操作画面の一例である。

次に、操作部３０のユーザ操作検知部３５は、受付部３２によって選択画面６００に含まれている所定のボタンの選択が受け付けられることで、ユーザ操作を検知する（ステップＳ１２）。また、ユーザ操作検知部３５は、検知されるユーザ操作の操作間隔を監視する。ここで、ユーザ操作の操作間隔とは、例えば、ユーザが最初に操作パネル３０５にタッチしてから次のボタンを選択するまでの時間、または省電力状態に表示画面が暗転してから次にボタンが選択されるまでの時間である。さらに、ユーザ操作検知部３５は、検知されたユーザ操作を操作履歴として、操作履歴管理ＤＢ３００１（図５（Ａ）参照）に記憶させる。

次に、操作部３０の判断部３４は、ユーザ操作検知部３５によって監視されている操作間隔が、閾値Ｔ以上であるかを判断する（ステップＳ１３）。具体的には、判断部３４は、操作アシスト管理ＤＢ３００３（図５Ｂ参照）に記憶されている操作間隔の閾値Ｔを参照し、ユーザ操作の操作間隔が閾値Ｔを経過したかを判断する。判断部３４は、操作間隔が閾値Ｔ以上である場合（ステップＳ１３のＹＥＳ）、処理をステップＳ１７へ移行させる。一方で、判断部３４は、操作間隔が閾値Ｔより短い場合（ステップＳ１３のＮＯ）、処理をステップＳ１４へ移行させる。

次に、操作部３０の記憶・読出部４９は、操作履歴管理ＤＢ３００１に記憶されている操作履歴を読み出して取得する（ステップ１４）。そして、操作部３０の判断部３４は、操作中のユーザに対する操作アシストをより高い精度で実現させるために、ユーザ操作の回数が閾値Ｃ以上であるかを判断する（ステップＳ１５）。具体的には、判断部３４は、操作アシスト管理ＤＢ３００３に記憶されている操作回数の閾値Ｃを参照し、ユーザ操作の操作回数が閾値Ｃを超えたかを判断する。判断部３４は、操作回数が閾値Ｃ以上である場合（ステップＳ１５のＹＥＳ）、処理をステップＳ１７へ移行させる。

一方で、判断部３４は、操作回数が閾値Ｃより少ない場合（ステップＳ１５のＮＯ）、処理をステップＳ１６へ移行させる。そして、判断部３４は、ユーザ操作に応じて特定の画面遷移が行われたかどうかを判断する（ステップＳ１６）。具体的には、判断部３４は、表示画面の画面遷移が操作アシスト管理ＤＢ３００３に記憶されている特定の画面遷移に該当するかを判断する。ここで、特定の画面遷移には、他の画面に遷移した後に、元の画面に戻る操作が行われた場合等が該当する。判断部３４は、ユーザ操作に応じた特定の画面遷移が行われた場合（ステップＳ１６のＹＥＳ）、処理をステップＳ１７へ移行させる。一方で、判断部３４は、ユーザ操作に応じた特定の画面遷移が行われていない場合（ステップＳ１６のＮＯ）、操作中のユーザに対する操作アシストが不要であると判断し、ステップＳ１２からの処理を繰り返す。

ここで、図９を用いて、操作部３０に表示された表示画面の特定の画面遷移の一例について説明する。図９は、実施形態に係る画像処理装置に表示される表示画面の画面遷移の一例を説明するための図である。まず、操作部３０の表示制御部３３は、図９に示されている画面Ａの「コピー」ボタンがユーザによって選択されると、画面Ｂに示されているようなコピーの詳細機能の選択画面に表示画面を遷移させる。また、画面Ｂにおいてユーザが「戻る」ボタン６３０を選択すると、表示制御部３３は、画面Ｂから元の画面Ａに表示画面を戻す。この場合、操作部３０は、「画面Ａ→画面Ｂ→画面Ａ」の画面遷移を検知し、検知した画面遷移が操作アシスト管理ＤＢ３００３に記憶されている特定の画面遷移に該当するかを判断する。

次に、操作部３０のユーザ使用機能推測部３７は、ユーザが使用したい所望の機能であるユーザ使用機能を推測する処理を実行する（ステップＳ１７）。ここで、図１０を用いて、画像処理装置１０によるユーザ使用機能推測処理の詳細を説明する。図１０は、実施形態に係る画像処理装置におけるユーザ使用機能推測処理の一例を示すフローチャートである。

まず、操作部３０の機器情報取得部３６は、画像処理装置１０に配置された周辺機器の機器情報を取得する（ステップＳ１７１）。具体的には、本体部５０の機器情報取得部５３は、機器Ｉ／Ｆ５１１を介して、各周辺機器が有するセンサからのセンサ信号を含む機器情報を取得する。また、本体部５０の入出力部５１は、操作部３０に対して、取得された機器情報を送信する。そして、操作部３０の機器情報取得部３６は、入出力部３１によって受信された機器情報を取得する。

次に、操作部３０の判断部３４は、機器情報取得部３６によって取得された機器情報を用いて、処理対象の原稿の有無を判断する(ステップＳ１７２)。具体的には、判断部３４は、ＡＤＦ５３１から送信された機器情報に含まれるセンサ信号が原稿のあることを示す場合（ステップＳ１７２のＹＥＳ）、処理をステップＳ１７３へ移行させる。そして、操作部３０のユーザ使用機能推測部３７は、処理対象の原稿がある場合、処理対象の原稿に対するコピー、スキャナまたはＦＡＸ機能の操作が次に行われる可能性が高いため、ユーザ使用機能がコピー、スキャンおよびＦＡＸのいずれかであると推測する（ステップＳ１７３）。

一方で、判断部３４は、ＡＤＦ５３１から送信された機器情報に含まれるセンサ信号が原稿のないことを示す場合（ステップＳ１７２のＮＯ）、処理をステップＳ１７４へ移行させる。そして、操作部３０のユーザ使用機能推測部３７は、処理対象の原稿がない場合、画像処理装置１０に対して何らかの設定操作が行われる可能性が高いため、ユーザ使用機能が設定メニューであると推測する（ステップＳ１７４）。次に、ユーザ使用機能推測部３７は、設定操作が行われる場合には、直前にいずれかの周辺機器が操作されている可能性が高いため、ステップＳ１７１で取得された機器情報に含まれるセンサ信号の変化の有無を特定する（ステップＳ１７５）。ここで、センサ信号の変化とは、例えば、給紙トレイ５３５の開閉、ＡＤＦ５３１の開閉、トナー補給、またはＬＡＮケーブルの挿抜等の各種周辺機器から出力されるセンサ信号の値の変化である。

そして、判断部３４は、操作アシスト管理ＤＢ３００３を検索することで、センサ信号の変化に応じた設定操作が存在するかどうかを判断する（ステップＳ１７６）。具体的には、判断部３４は、操作アシスト管理ＤＢ３００３に記憶されているアシスト項目のうち、センサ信号の変化のあるセンサ（センサ位置）に関連づけられたアシスト項目が存在する場合、センサ信号の変化に応じた設定操作が存在すると判断する。判断部３４は、センサ信号の変化に応じた設定操作が存在する場合（ステップＳ１７６のＹＥＳ）、処理をステップＳ１７７へ移行させる。一方で、判断部３４は、センサ信号の変化に応じた設定操作が存在しない場合（ステップＳ１７６のＮＯ）、ユーザ使用機能の推測ができないものとして、ユーザ使用機能推測処理を終了する。

そして、操作部３０のユーザ使用機能推測部３７は、ステップＳ１７３での推測結果またはステップＳ１７４～ステップＳ１７６での処理結果に基づいて、ユーザが使用したい所望の機能であるユーザ使用機能を推測する（ステップＳ１７７）。具体的には、ユーザ使用機能推測部３７は、操作アシスト管理ＤＢ３００３に記憶されているアシスト項目および各種条件を参照し、ユーザ操作の操作履歴およびステップＳ１７１で取得された機器情報の種類に対応するアシスト項目を検索することによって、ユーザ使用機能を推測する。図５（Ａ）および図５（Ｂ）に示されている例の場合、操作履歴に含まれている画面遷移情報が、アシスト項目「スキャン」に関連づけられた特定の画面遷移（画面Ａ→画面Ｂ→画面Ａ）に該当するため、ユーザ使用機能推測部３７は、スキャン機能をユーザ使用機能であると推測する。

これにより、画像処理装置１０は、ユーザ操作の操作履歴および画像処理装置１０に備えられた周辺機器からのセンサ信号に基づいて、ユーザが使用したい所望の機能をリアルタイムに推測することができる。

図７に戻り、画像処理装置１０における操作アシスト処理の説明を続ける。操作部３０の判断部３４は、図１０に示されている処理の結果に応じて、ユーザの使用機能の推測が可能かどうかを判断する（ステップＳ１８）。判断部３４は、ユーザの使用機能の推測が可能である場合（ステップＳ１８のＹＥＳ）、処理をステップＳ１９へ移行させる。操作部３０の操作アシスト決定部３８は、ユーザ使用機能推測部３７によって推測されたユーザ使用機能に応じた表示形態を決定する（ステップＳ１９）。そして、操作部３０の表示制御部３３は、操作アシスト決定部３８によって決定された表示形態の操作画面である操作アシスト画面７００を、操作パネル３０５に表示させる（ステップＳ２０）。

図１１（Ａ）は、実施形態に係る画像処理装置に表示される操作アシスト画面の一例を示す図である。図１１（Ａ）に示されている操作アシスト画面７００は、スキャン機能がユーザ使用機能推測部３７によってユーザ使用機能として推測された例である。操作アシスト画面７００には、図８に示されている選択画面６００に加えて、スキャン機能を示す機能メニューが拡大表示された拡大ボタン７５０が含まれている。図８に示されているような通常の選択画面６００の場合、異なる機能メニューを示す複数のボタンの中からユーザが使用したい機能を自発的に選択する必要がある。一方で、操作アシスト画面７００では、例えば、ユーザが操作に迷っているような場合、上記操作アシスト処理によって決定された表示形態を用いて、ユーザが使用したい機能として推測されたメニューを拡大表示することで、ユーザの操作アシストを行うことができる。なお、図１１（Ａ）に示されている操作アシスト画面７００には、拡大ボタン７５０を表示させる表示形態の例を説明したが、画像処理装置１０は、推測されたユーザ使用機能に対応するボタンの色を変更したり、点滅させたりして当該ボタンをユーザが区別可能な表示形態で操作アシストを行う構成であってもよい。操作アシスト画面７００は、操作画面の一例である。

一方で、操作部３０の判断部３４は、ユーザの使用機能の推測ができない場合（ステップＳ１８のＮＯ）、処理をステップＳ２０へ移行させる。そして、操作部３０の表示制御部３３は、レコメンド画面８００を表示させる（ステップＳ２０）。図１１（Ｂ）は、実施形態に係る画像処理装置に表示されるレコメンド画面の一例を示す図である。図１１（Ｂ）に示されているレコメンド画面８００は、ユーザ使用機能推測部３７によってユーザ使用機能が推測できなかった場合に、推測処理の過程において凡そ予想可能な機能をレコメンド機能（おすすめ機能）としてユーザに提示するための表示画面である。レコメンド画面８００には、図８に示されている選択画面６００に加えて、レコメンド領域８５０が追加されて表示されている。レコメンド領域８５０には、「あなたの利用したい機能は「ＦＡＸ」ですか？」等のレコメンドメッセージ、レコメンドメッセージに応じる場合に押下される「ＯＫ」ボタン８５１、およびレコメンドメッセージに応じずにレコメンド領域８５０を閉じる場合に押下される「閉じる」ボタン８５３が含まれている。ユーザがレコメンド領域８５０に含まれる「ＯＫ」ボタン８５１を選択した場合、画像処理装置１０は、レコメンドメッセージに示されている機能に対する操作アシストを実行する。なお、レコメンド画面８００の表示形態はこれに限られず、バナーやプッシュ通知等を用いてレコメンドメッセージを表示させてもよい。レコメンド画面８００は、操作画面の一例である。

●実施形態の効果
以上説明したように、画像処理装置１０は、ユーザ操作の操作間隔、操作回数またはユーザ操作に応じた画面遷移の情報等の操作履歴、並びに画像処理装置１０が有する周辺機器からのセンサ信号を用いて、ユーザに提供する操作アシストの内容を決定する。これにより、画像処理装置１０は、ユーザのリアルタイムの操作状況に応じた操作アシストを提供することができる。

●実施形態の変形例●
●変形例１
次に、図１２乃至図１５を用いて、実施形態の変形例に係る画像処理装置について説明する。なお、各変形例において、上記実施形態と同一構成および同一機能は、同一の符号を付して、その説明を省略する。まず、図９を用いて、実施形態の変形例１に係る画像処理装置の処理について説明する。変形例１に係る画像処理装置１０によって実行される処理は、ユーザごとの操作習熟度レベルに応じて、操作アシストレベルを設定する処理である。

図１２は、実施形態の変形例１に係る画像処理装置における操作アシスト処理の一例を示すフローチャートである。なお、ステップＳ３１～ステップＳ３４の処理は、図７に示されているステップＳ１１～ステップＳ１４の処理と同様であるため説明を省略する。

操作部３０の判定部４１は、ステップＳ３４で取得された操作履歴に基づいて、ユーザの操作の習熟度レベルを判定する（ステップＳ３５）。具体的には、判定部４１は、操作履歴に含まれている画面遷移情報を参照し、所定時間内に何らかの画面遷移が行われたかどうかを判定する。そして、判定部４１は、所定時間内に画面遷移が行われた場合、操作に慣れたユーザであると判断し、操作中のユーザの操作習熟度が高いと判定する。一方で、判定部４１は、所定時間内に画面遷移が行われていない場合、操作に不慣れなユーザであると判断し、操作中のユーザの操作習熟度が低いと判定する。

そして、判定部４１は、操作中のユーザの操作習熟度が高いと判定した場合（ステップＳ３６のＹＥＳ）、処理をステップＳ３８へ移行させる。ステップＳ３８以降の処理は、図７に示されているステップＳ１７以降の処理と同様であるため、説明を省略する。

一方で、判定部４１は、操作中のユーザの操作習熟度が低いと判定した場合（ステップＳ３６のＮＯ）、処理をステップＳ３７へ移行させる。そして、操作部３０は、操作アシストを停止させ、操作アシスト処理を終了する（ステップＳ３７）。なお、画像処理装置１０は、ステップＳ３７で操作アシスト機能を停止させた場合、人感センサ５３３等で操作中のユーザが画像処理装置１０の前から居なくなったことを検知した時点で、操作アシスト機能を再度起動させる等の構成であってもよい。

これにより、変形例１に係る画像処理装置１０は、操作習熟度が低いユーザには詳細な操作アシストを行い、操作習熟度の高いユーザには操作アシストを行わないようにすることで、不要な操作アシストを抑制することができ、ユーザビリティが向上させることができる。

●変形例２
次に、図１３を用いて、実施形態の変形例２に係る画像処理装置の処理について説明する。変形例２に係る画像処理装置１０によって実行される処理は、操作部３０の機器情報取得部３６によって取得された機器情報に含まれるセンサ信号の直前の変化を検知して、操作アシストを決定する処理である。

図１３は、実施形態の変形例２に係る画像処理装置におけるユーザ使用機能推測処理の一例を示すフローチャートである。まず、操作部３０の機器情報取得部３６は、画像処理装置１０に配置された周辺機器の機器情報を取得する（ステップＳ２７１）。具体的には、本体部５０の機器情報取得部５３は、機器Ｉ／Ｆ５１１を介して、各周辺機器が有するセンサからのセンサ信号を含む機器情報を取得する。また、本体部５０の入出力部５１は、操作部３０に対して、取得された機器情報を送信する。そして、操作部３０の機器情報取得部３６は、入出力部３１によって受信された機器情報を取得する。

次に、判断部３４は、ステップＳ１７１で取得された機器情報のうち、直前に取得された機器情報に含まれるセンサ信号の変化の有無を判断する（ステップＳ２７２）。ここで、直前に取得された機器情報とは、機器情報取得部５３によって直近に取得された機器情報である。

判断部３４は、直前のセンサ信号の変化がある場合（ステップＳ２７２のＹＥＳ）、処理をステップＳ２７３へ移行させる。一方で、判断部３４は、直前のセンサ信号の変化がない場合（ステップＳ２７３のＮＯ）、ステップＳ２７１からの処理を繰り返す。

次に、判断部３４は、操作アシスト管理ＤＢ３００３（図５（Ｂ）参照）を検索することで、直前のセンサ信号の変化に応じたアシスト項目が存在するかどうかを判断する（ステップＳ２７３）。具体的には、判断部３４は、操作アシスト管理ＤＢ３００３に記憶されているアシスト項目のうち、センサ信号の変化のあるセンサ（センサ位置）に関連づけられたアシスト項目が存在する場合、直前のセンサ信号の変化に応じたアシスト項目が存在すると判断する。判断部３４は、直前のセンサ信号の変化に応じたアシスト項目が存在する場合（ステップＳ２７３のＹＥＳ）、処理をステップＳ２７４へ移行させる。ステップＳ２７４以降の処理は、図１０に示されているステップＳ１７２以降の処理と同様であるため、説明を省略する。一方で、判断部３４は、直前のセンサ信号の変化に応じたアシスト項目が存在しない場合（ステップＳ２７３のＮＯ）、ステップＳ２７１からの処理を繰り返す。

これにより、変形例２に係る画像処理装置１０は、直前のセンサ信号の変化を優先的に操作アシストの判断に用いることで、ユーザ使用機能の推測精度を向上させることができる。また、変形例２に係る画像処理装置１０は、例えば、直前に変化のあったセンサ信号のみを操作アシストの判断に用いることで、センサ信号の通信量および操作アシスト処理に用いる情報量を抑制して、画像処理装置１０の処理負荷を低減させることができる。

●変形例３
次に、図１４を用いて、実施形態の変形例３に係る画像処理装置の処理について説明する。変形例３に係る画像処理装置１０によって実行される処理は、ユーザ認証結果を用いたユーザ権限に基づいて、ユーザ使用機能推測処理の推測レベルを設定する処理である。

図１４は、実施形態の変形例３に係る画像処理装置における操作アシスト処理の一例を示すフローチャートである。まず、操作部３０の受付部３２は、ユーザの操作パネルのユーザ情報の入力を受け付ける（ステップＳ５１）。ここで、ユーザ情報には、例えば、ユーザＩＤおよびパスワードが含まれている。次に、操作部３０の認証部４２は、ステップＳ５１で受け付けられたユーザ情報を利用してユーザの認証を行う（ステップＳ５２）。具体的には、記憶・読出部４９は、権限情報管理ＤＢ３００５（図６参照）において、ステップＳ５１で受け付けられたユーザＩＤおよびパスワードの組に対応するユーザＩＤおよびパスワードの組を検索する。対応する組がある場合には、認証部４２は、要求元のユーザを正当なユーザであると判断する。対応する組がない場合には、認証部４２は、要求元のユーザを不当な（正当でない）ユーザであると判断する。正当でない場合には、表示制御部３３が操作パネル３０５に対して正当でない旨の通知（表示）を行うが、以下では、正当である場合について説明を続ける。

次に、認証部４２は、認証されたユーザが操作アシスト機能を利用する際のユーザ権限を設定する（ステップＳ５３）。具体的には、記憶・読出部４９は、認証部４２は、権限情報管理ＤＢ３００５において、認証されたユーザのユーザＩＤおよびパスワードに関連づけられている権限情報を読み出す。そして、認証部４２は、読み出された権限情報に示されているユーザ権限の設定を行う。

そして、画像処理装置１０は、認証部４２によって設定されたユーザ権限に応じた操作アシスト処理を実行する（ステップＳ５４）。この場合、画像処理装置１０は、操作アシスト管理ＤＢ３００３（図５（Ｂ）参照）に記憶されているアシスト項目のうち、ステップＳ５３で設定されたユーザ権限に関連づけられたアシスト項目の範囲内で、操作アシスト処理を実行する。なお、ステップＳ５４における操作アシスト処理の詳細は、図１０に示されているような処理と同様である。

これにより、実施形態の変形例３に係る画像処理装置１０は、ユーザ権限によって提供可能な操作アシスト機能を制限することができるので、操作アシスト処理に掛かる処理負担を低減させることができる。

●変形例４
次に、図１５を用いて、実施形態の変形例４に係る画像処理装置の処理について説明する。変形例４に係る画像処理装置１０によって実行される処理は、周辺機器から送信される機器情報を活用して、画像処理装置１０の異常解消をアシストするための処理である。

図１５は、実施形態の変形例４に係る画像処理装置におけるユーザ使用機能推測処理の一例を示すフローチャートである。ステップＳ３７１～ステップＳ３７３の処理は、図１３に示されているステップＳ２７１～ステップＳ２７３の処理と同様である。特に、ステップＳ３７１の処理において、機器情報取得部３６は、例えば、ユーザが操作可能なＡＤＦ５３１または給紙トレイ５３５等のみならず、画像処理装置１０の異常状態を検知することができるセンサを有する周辺機器からセンサ信号を取得する。また、ステップＳ３７３において、ユーザ使用機能推測部３７は、異常解消アシスト項目が記憶された操作アシスト管理テーブルを用いて、アシスト項目が存在するかの判断を行う。そして、操作部３０のユーザ使用機能推測部３７は、センサ信号の変化に応じたアシスト項目が存在する場合、異常解消アシストの内容を推測する（ステップＳ３７４）。

これにより、実施形態の変形例４に係る画像処理装置１０は、取得された機器情報に基づいて画像処理装置１０のハードウエアの故障や不具合等の異常状態を判断することで、操作パネル３０５に対するユーザ操作の操作アシストのみでなく、画像処理装置１０の異常解消アシストを行うことができる。従来、画像処理装置に何らかの異常が発生した場合、それを解消するためのガイドや案内等を操作パネルに表示される技術は知られているが、変形例４に係る画像処理装置１０は、例えば、ユーザが何度も同じような操作を繰り返している場合等、表示された操作アシスト画面７００に沿って操作しても異常が解消しない場合に、周辺機器から送信された各種機器情報を活用して、異常解消アシストの内容を変更することできる。

●まとめ●
以上説明したように、本発明の一実施形態に係る機器は、所定の入力操作を受け付ける操作パネル３０５（操作手段の一例）を備えた画像処理装置１０である。画像処理装置１０は、操作パネル３０５に対して受け付けられたユーザ操作を検知するユーザ操作検知部３５（ユーザ操作検知手段の一例）と、画像処理装置１０の特定の位置に配置された周辺機器（センサの一例）から出力されたセンサ信号を含む機器情報を取得する機器情報取得部３６（機器情報取得手段の一例）と、検知されたユーザ操作の履歴を示す履歴情報および取得された機器情報に基づいて、画像処理装置１０に実行させる処理を選択可能な操作画面（例えば、操作アシスト画面７００）を操作パネル３０５に表示させる表示制御部３３（表示制御手段の一例）と、を備える。これにより、画像処理装置１０は、ユーザのリアルタイムな操作状況に応じた操作アシストを提供することができる。

また、本発明の一実施形態に係る画像処理装置１０（機器の一例）は、ユーザ操作の履歴を示す履歴情報および取得された機器情報に基づいて、所望の処理を推測するユーザ使用機能推測部３７（推測手段の一例）と、推測された処理に応じた操作アシストを行うための操作画面（例えば、操作アシスト画面７００）の表示形態を決定する操作アシスト決定部３８（決定手段の一例）と、を備え、決定された表示形態の操作画面を操作パネル３０５（操作手段の一例）に表示させる。また、画像処理装置１０は、操作パネル３０５に表示されている操作画面の表示形態（例えば、選択画面６００）を、決定された表示形態（例えば、操作アシスト画面７００）に変更する。これにより、画像処理装置１０は、ユーザのリアルタイムな操作状況に応じて操作パネル３０５に表示される操作画面の表示形態を変更させることで、ユーザが求める操作アシストの精度を向上させることができる。

さらに、本発明の一実施形態に係る画像処理装置１０（機器の一例）は、所定時間内における画面遷移の有無を判定する判定部４１（判定手段の一例）を備える。そして、操作アシスト決定部３８（決定手段の一例）は、判定部４１によって画面遷移があると判定された場合、操作アシストを終了する。これにより、画像処理装置１０は、画面操作に不慣れな操作習熟度が低いユーザには詳細な操作アシストを行い、画面操作に慣れた操作習熟度の高いユーザには操作アシストを行わないようにすることで、不要な操作アシストを抑制することができ、ユーザビリティが向上させることができる。

また、本発明の一実施形態に係る画像処理装置１０（機器の一例）は、所定の入力操作を行ったユーザの認証処理を行う認証部４２（認証手段の一例）を備える。そして、ユーザ使用機能推測部３７（推測手段の一例）は、認証されたユーザの権限に応じて、所望の処理を推測する。これにより、画像処理装置１０は、ユーザ権限によって提供可能な操作アシスト機能を制限することができるので、操作アシスト処理に掛かる処理負担を低減させることができる。

さらに、本発明の一実施形態に係る画像処理装置１０（機器の一例）において、ユーザ使用機能推測部３７（推測手段の一例）は、取得された機器情報に基づいて、画像処理装置１０の異常状態を推測し、操作アシスト決定部３８（決定手段の一例）は、推測された異常状態に応じた操作アシストを行うための操作画面（例えば、操作アシスト画面７００）の表示形態を決定する。これにより、画像処理装置１０は、取得された機器情報に基づいて画像処理装置１０のハードウエアの故障や不具合等の異常状態を判断することで、操作パネル３０５に対するユーザ操作の操作アシストのみでなく、画像処理装置１０の異常解消アシストを行うことができる。

●補足●
上記で説明した実施形態の各機能は、一または複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウエアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

また、上記で説明した実施形態の各種テーブルは、機械学習の学習効果によって生成されたものでもよく、関連づけられている各項目のデータを機械学習にて分類付けすることで、テーブルを使用しなくてもよい。ここで、機械学習とは、コンピュータに人のような学習能力を獲得させるための技術であり，コンピュータが，データ識別等の判断に必要なアルゴリズムを，事前に取り込まれる学習データから自律的に生成し，新たなデータについてこれを適用して予測を行う技術のことをいう。機械学習のための学習方法は、教師あり学習、教師なし学習、半教師学習、強化学習、深層学習のいずれかの方法でもよく、さらに、これらの学習方法を組み合わせた学習方法でもよく、機械学習のための学習方法は問わない。

これまで本発明の一実施形態に係る機器、表示制御方法およびプログラムについて説明してきたが、本発明は、上述した実施形態に限定されるものではなく、他の実施形態の追加、変更または削除等、当業者が想到することができる範囲内で変更することができ、いずれの態様においても本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。

１０ 画像処理装置（機器の一例）
３０ 操作部
３３ 表示制御部（表示制御手段の一例）
３５ ユーザ操作検知部（ユーザ操作検知手段の一例）
３６ 機器情報取得部（機器情報取得手段の一例）
３７ ユーザ使用機能推測部（推測手段の一例）
３８ 操作アシスト決定部（決定手段の一例）
５０ 本体部
３０５ 操作パネル（操作手段の一例）
５３１ ＡＤＦ（センサの一例）
５３３ 人感センサ（センサの一例）
５３５ 給紙トレイ（センサの一例）
６００ 選択画面（操作画面の一例）
７００ 操作アシスト画面（操作画面の一例）
８００ レコメンド画面（操作画面の一例）

特開２０１８－１５８５２９号公報

Claims (13)

1. 所定の入力操作を受け付ける操作パネルを備えた機器であって、
   ユーザが前記機器を用いた処理を行う場合に、当該機器に実行させる処理を選択可能な操作画面を前記操作パネルに表示させる表示制御手段と、
   前記操作画面が表示されている前記操作パネルで受け付けたユーザ操作を検知するユーザ操作検知手段と、
   前記機器に配置されたセンサから出力されたセンサ信号を含む機器情報を取得する機器情報取得手段と、
   前記ユーザ操作検知手段で検知された前記ユーザ操作であって、前記操作パネルで受け付けた前記ユーザ操作、の履歴を示す履歴情報に基づいて、操作中の当該ユーザに対する操作アシストが不要であるかを判断する判断手段と、
   を備え、
   前記表示制御手段は、前記判断手段で前記操作アシストが不要であると判断されなかった場合に、前記履歴情報および前記機器情報に基づいて前記ユーザの使用機能の推測が可能であれば、前記操作画面であって前記ユーザに対する操作アシストを行う画面、を前記操作パネルに表示させる機器。
2. 前記履歴情報および前記機器情報に基づいて、所望の処理を推測する推測手段と、
   推測された処理に応じた操作アシストを行うための前記操作画面の表示形態を決定する決定手段と、を備え、
   前記表示制御手段は、決定された表示形態の操作画面を前記操作パネルに表示させる請求項１に記載の機器。
3. 前記表示制御手段は、前記操作パネルに表示されている前記操作画面の表示形態を、前記決定手段によって決定された表示形態に変更する請求項２に記載の機器。
4. 前記履歴情報は、検知された前記ユーザ操作の操作間隔および所定時間内における操作回数の少なくともいずれかを含み、
   前記推測手段は、前記操作間隔および前記操作回数の少なくともいずれかに基づいて、所望の処理を推測する請求項２または３に記載の機器。
5. 前記履歴情報は、検知された前記ユーザ操作に応じた特定の画面遷移を示す画面遷移情報を含み、
   前記推測手段は、前記画面遷移情報に基づいて、所望の処理を推測する請求項２乃至４のいずれか一項に記載の機器。
6. 前記推測手段は、取得された前記機器情報に含まれるセンサ信号を送信した前記センサの配置位置に基づいて、所望の処理を推測する請求項２乃至５のいずれか一項に記載の機器。
7. 前記推測手段は、取得された前記機器情報に含まれる前記センサ信号の変化に基づいて、所望の処理を推測する請求項６に記載の機器。
8. 請求項２乃至７のいずれか一項に記載の機器であって、更に、
   所定時間内における画面遷移の有無を判定する判定手段を備え、
   前記決定手段は、前記画面遷移があると判定された場合、前記操作アシストを終了する機器。
9. 請求項２乃至８のいずれか一項に記載の機器であって、更に、
   前記入力操作を行ったユーザの認証処理を行う認証手段を備え、
   前記推測手段は、認証されたユーザの権限に応じて、所望の処理を推測する機器。
10. 前記推測手段は、取得された前記機器情報に基づいて、前記機器の異常状態を推測し、
    前記決定手段は、推測された前記異常状態に応じた操作アシストを行うための前記操作画面の表示形態を決定する請求項２乃至９のいずれか一項に記載の機器。
11. 前記機器は、画像処理を実行可能な画像処理装置である請求項１乃至１０のいずれか一項に記載の機器。
12. 所定の入力操作を受け付ける操作パネルを備えた機器が実行する表示制御方法であって、
    ユーザが前記機器を用いた処理を行う場合に、当該機器に実行させる処理を選択可能な操作画面を前記操作パネルに表示させる表示制御ステップと、
    前記操作画面が表示されている前記操作パネルで受け付けたユーザ操作を検知するユーザ操作検知ステップと、
    前記機器に配置されたセンサからのセンサ信号を含む機器情報を取得する機器情報取得ステップと、
    前記ユーザ操作検知ステップで検知された前記ユーザ操作であって、前記操作パネルで受け付けた前記ユーザ操作、の履歴を示す履歴情報に基づいて、操作中の当該ユーザに対する操作アシストが不要であるかを判断する判断ステップと、
    を有し、
    前記表示制御ステップは、
    前記判断ステップで前記操作アシストが不要であると判断されなかった場合に、前記履歴情報および前記機器情報に基づいて前記ユーザの使用機能の推測が可能であれば、前記操作画面であって前記ユーザに対する操作アシストを行う画面、を前記操作パネルに表示させる処理、
    を実行する表示制御方法。
13. 所定の入力操作を受け付ける操作パネルを備えた機器に、
    ユーザが前記機器を用いた処理を行う場合に、当該機器に実行させる処理を選択可能な操作画面を前記操作パネルに表示させる表示制御ステップと、
    前記操作画面が表示されている前記操作パネルで受け付けたユーザ操作を検知するユーザ操作検知ステップと、
    前記機器に配置されたセンサからのセンサ信号を含む機器情報を取得する機器情報取得ステップと、
    前記ユーザ操作検知ステップで検知された前記ユーザ操作であって、前記操作パネルで受け付けた前記ユーザ操作、の履歴を示す履歴情報に基づいて、操作中の当該ユーザに対する操作アシストが不要であるかを判断する判断ステップと、
    を実行させ、
    前記表示制御ステップおいて、
    前記判断ステップで前記操作アシストが不要であると判断されなかった場合に、前記履歴情報および前記機器情報に基づいて前記ユーザの使用機能の推測が可能であれば、前記操作画面であって前記ユーザに対する操作アシストを行う画面、を前記操作パネルに表示させる処理、
    を実行させるプログラム。