JP7415592B2 - 情報処理装置及びプログラム - Google Patents

Description

本発明は、情報処理装置及びプログラムに関する。

画像処理装置の利用中に利用者が不良な状態になった場合には、適切な対処案を提案する技術がある。例えば特許文献１には、画像処理装置の利用に関するユーザのストレスを解析し、その解析結果に基づいて画像形成システムの利用環境を最適化することが記載されている。特許文献２には、画像形成装置のユーザの状態が緊張状態である場合には、ジョブを停止させるための操作画面を表示することが記載されている。

特許第６２５６５３４号公報 特開２０１７－９４６７９号公報

利用者が処理に関する操作を行う場合、操作の方法が分からない場合がある。この場合、処理を進めるには、処理を進める操作を支援する情報が出力されるのが好ましい。しかし、利用者が操作の支援を所望しないタイミングで操作を支援する情報が出力されると、煩わしい場合がある。
本発明は、利用者が処理に関する操作を行っている間の利用者の心理状態に関係なく、操作中の処理を支援する場合と比して、利用者の利便性を向上させることを目的とする。

請求項１に係る発明は、プロセッサを備え、前記プロセッサは、利用者の生体情報を取得し、前記利用者により、処理に関する操作が行われている間に、前記生体情報により示される前記利用者の心理状態が、予め定められた状態になると、前記処理を支援する情報を出力することを特徴とする情報処理装置である。

請求項２に係る発明は、請求項１に記載の情報処理装置において、前記プロセッサは、前記操作が行われている画面に応じて、異なる前記情報を出力することを特徴とする。

請求項３に係る発明は、請求項１又は２に記載の情報処理装置において、前記プロセッサは、前記情報を端末装置で表示するために用いられる画像を表示部に表示することを特徴。

請求項４に係る発明は、請求項１に記載の情報処理装置において、前記情報は、アニメーションであり、ユーザが既に実行した操作の次に行うべき操作から再生が開始されることを特徴とする。

請求項５に係る発明は、請求項１から４のいずれか１項に記載の情報処理装置において、前記プロセッサは、前記利用者に関連付けられた端末装置に前記情報を送信することを特徴とする。

請求項６に係る発明は、請求項５に記載の情報処理装置において、前記プロセッサは、前記情報のデータ量又は前記情報処理装置の性能によって、自装置と前記端末装置との間で前記情報の出力先を切り替えることを特徴とする。

請求項７に係る発明は、請求項１に記載の情報処理装置において、前記プロセッサは、自装置の管理者に前記情報を送信することを特徴とする。

請求項８に係る発明は、請求項１から７のいずれか１項に記載の情報処理装置において、前記プロセッサは、前記処理に関する前記操作が行われている間に前記処理が妨げられる事象が発生した場合には、前記事象が解消されるまで前記情報の出力を中止することを特徴とする。

請求項９に係る発明は、請求項１から８のいずれか１項に記載の情報処理装置において、前記プロセッサは、複数の処理のうち特定の条件を満たす第１処理に関する操作が行われている間は、前記情報を出力しないことを特徴とする。

請求項１０に係る発明は、請求項９に記載の情報処理装置において、前記第１処理とは、前記利用者の利用頻度が閾値より高い処理であることを特徴とする。

請求項１１に係る発明は、コンピュータに、利用者の生体情報を取得するステップと、前記利用者により、処理に関する操作が行われている間に、前記生体情報により示される前記利用者の心理状態が、予め定められた状態になると、前記処理を支援する情報を出力するステップとを実行させるためのプログラムである。

請求項１に係る発明によれば、利用者が処理に関する操作を行っている間の利用者の心理状態に関係なく、操作中の処理を支援する場合と比して、利用者の利便性が向上する。
請求項２に係る発明によれば、利用者の心理状態が予め定められた状態になったときに利用者が操作していた画面に応じた、操作を支援する情報を閲覧することができる。
請求項３に係る発明によれば、支援する情報を端末装置で表示することができる。
請求項４に係る発明によれば、利用者を支援する情報がアニメーションである場合、利用者が次に行うべき操作から再生が開始されるアニメーションを閲覧することができる。
請求項５に係る発明によれば、操作を支援する情報を自装置で表示するのが困難な場合にも、利用者がこの情報を認識することができる。
請求項６に係る発明によれば、操作を支援する情報のデータ量又は情報処理装置の性能に応じた出力先にこの情報を出力することができる。
請求項７に係る発明によれば、利用者が管理者から支援を得ることができる。
請求項８に係る発明によれば、利用者が操作の支援を所望しないときに、操作を支援する情報が出力されるのを防ぐことができる。
請求項９に係る発明によれば、操作の支援が不要な処理については、利用者が予め定められた状態になっても、操作を支援する情報が出力されるのを防ぐことができる。
請求項１０に係る発明によれば、利用者の利用頻度が高い処理については、操作を支援する情報を出力されるのを防ぐことができる。
請求項１１に係る発明によれば、利用者が処理に関する操作を行っている間の利用者の心理状態に関係なく、操作中の処理を支援する場合と比して、利用者の利便性が向上する。

実施形態に係る画像処理システム１００の構成の一例を示す図である。 画像処理装置１２０の構成の一例を示す図である。 ユーザ端末１３０の構成の一例を示す図である。 画像処理システム１００が行う動作の一例を示すシーケンスチャートである。 画像処理システム１００が行う動作の一例を示すシーケンスチャートである。 画像処理装置１２０に表示される各種の画面の一例を示す図である。 支援情報の他の例を示す図である。 支援情報のさらに他の例を示す図である。 画像処理装置１２０が行う動作の他の例を示すフローチャートである。 エラー画面２５０の一例を示す図である。

１．構成
図１は、本実施形態に係る画像処理システム１００の構成の一例を示す図である。画像処理システム１００は、ウェアラブル端末１１０と、画像処理装置１２０と、ユーザ端末１３０とを備える。

ウェアラブル端末１１０は、利用者に装着され、利用者の生体情報を計測する。生体情報は、利用者の心理状態を示す情報である。この心理状態は、例えばストレスを感じている状態である。この生体情報には、例えば心拍数又は血圧が含まれてもよい。ウェアラブル端末１１０は、図１に示すように腕に装着するリストバンド型の形状を有していてもよい。ただし、ウェアラブル端末１１０の形状はリストバンド型に限定されない。例えばウェアラブル端末１１０の形状は、指に装着する指輪型、衣服に付けるクリップ型、頭部に装着する眼鏡型又はヘッドマウンド型等、どのような形状であってもよい。ウェアラブル端末１１０は、生体情報を計測する一又は複数のセンサ（図示せず）を有する。例えば生体情報に心拍数が含まれる場合、ウェアラブル端末１１０は心拍数を計測する心拍計を有する。生体情報に血圧が含まれる場合、ウェアラブル端末１１０は血圧を計測する血圧計を有する。また、ウェアラブル端末１１０は、通信部（図示せず）を有する。通信部は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）に従って他の装置とデータ通信を行う。ただし、通信部が従う通信規格は、Ｂｌｕｅｔｏｏｔｈ（登録商標）に限定されず、他の通信規格であってもよい。例えばウェアラブル端末１１０は、通信部から画像処理装置１２０に生体情報を送信する。

図２は、画像処理装置１２０の構成の一例を示す図である。画像処理装置１２０は、コピー機能、プリント機能、スキャン機能、ファクシミリ機能等の画像を処理する複数の機能を有する。画像処理装置１２０は、プロセッサ１２１と、メモリ１２２と、通信部１２３と、操作部１２４と、表示部１２５と、画像読取部１２６と、画像形成部１２７とを備える。これらの部位はバス１２８を介して接続されている。

プロセッサ１２１は、プログラムを実行することにより、画像処理装置１２０の各部を制御し又は各種の処理を行う。プロセッサ１２１には、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）が用いられてもよい。メモリ１２２には、プロセッサ１２１により実行されるプログラムが記憶される。メモリ１２２には、例えばＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）及びＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）が用いられてもよい。また、メモリ１２２には、ＲＯＭ及びＲＡＭに加えて、例えばハードディスクドライブ又はＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）が用いられてもよい。メモリ１２２には、画像処理装置１２０が有する複数の機能をそれぞれ実現するための複数のアプリケーションプログラム（以下、「アプリ」という。）が記憶されている。この複数のアプリには、例えばコピー機能を実現するためのコピーアプリ、プリント機能を実現するためのプリントアプリ、スキャン機能を実現するためのスキャンアプリ、ファクシミリ機能を実現するためのファクシミリアプリ、及び通信の設定を実現するための通信設定アプリが含まれる。通信部１２３は、通信回線を介して接続された他の装置とデータ通信を行う。この通信回線は、有線の通信回線であってもよいし、無線の通信回線であってもよい。通信部１２３が従う通信規格には、例えばＢｌｕｅｔｏｏｔｈ（登録商標）が含まれる。操作部１２４は、利用者による画像処理装置１２０の操作に用いられる。操作部１２４には、例えばタッチパネルとキーとが用いられてもよい。表示部１２５は、各種の情報を表示する。表示部１２５には、例えば液晶ディスプレイが用いられてもよい。画像読取部１２６は、画像を読み取って画像データに変換する。画像読取部１２６には、例えばイメージスキャナが用いられてもよい。画像形成部１２７は、画像データに応じた画像を用紙等の媒体上に形成する。画像形成部１２７には、例えばプリンターが用いられてもよい。

図３は、ユーザ端末１３０の構成の一例を示す図である。ユーザ端末１３０は、利用者により使用される。ユーザ端末１３０は、図１に示すように、利用者が持ち運び可能なスマートフォン又はタブレット端末であってもよい。ただし、ユーザ端末１３０は、スマートフォンやタブレット端末に限定されず、利用者が使用する端末装置であればどのような装置であってもよい。なお、ユーザ端末１３０は、本発明に係る端末装置の一例である。ユーザ端末１３０は、プロセッサ１３１と、メモリ１３２と、通信部１３３と、操作部１３４と、表示部１３５と、撮像部１３６とを備える。これらの部位は、バス１３７を介して接続されている。

プロセッサ１３１は、プログラムを実行することにより、ユーザ端末１３０の各部を制御し又は各種の処理を行う。プロセッサ１３１には、例えばＣＰＵが用いられてもよい。メモリ１３２には、プロセッサ１３１により実行されるプログラムが記憶される。メモリ１３２には、例えばＲＯＭ及びＲＡＭが用いられてもよい。また、メモリ１３２には、ＲＯＭ及びＲＡＭに加えて、例えばハードディスクドライブ又はＳＳＤが用いられてもよい。通信部１３３は、通信回線を介して接続された他の装置とデータ通信を行う。この通信回線は、有線の通信回線であってもよいし、無線の通信回線であってもよい。操作部１３４は、利用者によるユーザ端末１３０の操作に用いられる。操作部１３４には、例えばタッチパネルとキーとが用いられてもよい。表示部１３５は、各種の情報を表示する。表示部１３５には、例えば液晶ディスプレイが用いられてもよい。撮像部１３６は、画像を撮影する。撮像部１３６には、例えばデジタルカメラが用いられてもよい。ユーザ端末１３０は、撮像部１３６を用いて二次元コードを読み取る機能を有する。

２．動作
２－１．正常の場合
図４及び図５は、画像処理システム１００が行う動作の一例を示すシーケンスチャートである。この動作は、利用者が画像処理装置１２０の前に移動し、画像処理装置１２０を使用するときに行われる。図４及び図５に示す例は、利用者が処理に関する操作を行っている間にエラーが発生しない正常な場合の動作例を示す。なお、処理に関する操作とは、該処理を実行するために必要なあらゆる操作を含み、具体的には画像で表示されたソフトキーや、ハードキー等の操作ボタンのタッチ操作や押下操作などがあげられる。なお、以下の説明において、プロセッサ１２１又は１３１を処理の主体として記載する場合、これは、それぞれメモリ１２２又は１３２に記憶されたプログラムと、このプログラムを実行するプロセッサ１２１又は１３２との協働により、プロセッサ１２１又は１３１が演算を行い又は他のハードウェア要素の動作を制御することにより、処理が行われることを意味する。

ステップＳ１１において、利用者は画像処理装置１２０にログインする。画像処理装置１２０のプロセッサ１２１は、ログインした利用者の認証を行う。例えば利用者は、操作部１２４を用いて自分のユーザＩＤとパスワードを入力する操作を行う。プロセッサ１２１は、利用者により入力されたユーザＩＤとパスワードを用いて利用者の認証を行う。利用者の認証に成功すると、処理はステップＳ１２に進む。なお、利用者の認証に失敗した場合には処理は終了する。

ステップＳ１２において、プロセッサ１２１は、利用者のウェアラブル端末１１０とペアリングを行う。例えば利用者のユーザＩＤには、予め利用者のウェアラブル端末１１０の端末ＩＤが対応付けられている。ステップＳ１１において入力されたユーザＩＤに対応付けられた端末ＩＤが特定される。そして、この端末ＩＤに対応するウェアラブル端末１１０とＢｌｕｅｔｏｏｔｈ（登録商標）に従ってペアリングが行われる。これにより、画像処理装置１２０とウェアラブル端末１１０とが無線で接続される。なお、画像処理装置１２０が一のウェアラブル端末１１０とペアリングを行っている間は、他のウェアラブル端末１１０とのペアリングは行われない。

ステップＳ１３において、利用者が画像処理装置１２０にログインすると、プロセッサ１２１は、表示部１２５にメニュー画面１４０を表示する。利用者は、操作部１２４を用いてメニュー画面１４０を操作する。

図６は、画像処理装置１２０に表示される各種の画面の一例を示す図である。メニュー画面１４０は、利用者が画像処理装置１２０の複数の機能の中から所望の機能を選択する操作に用いられる。メニュー画面１４０には、画像処理装置１２０が有する各機能を選択する操作に用いられる操作ボタンが含まれる。例えば利用者は、コピー機能を利用する場合には、コピー機能に対応するコピーボタン１４１を押す操作を行う。この操作に応じて、コピーアプリが起動される。

ステップＳ１４において、プロセッサ１２１は、特定のアプリが起動されたか否かを判定する。画像処理装置１２０が有する複数の機能を実現するためのアプリには、特定のアプリと、それ以外の除外アプリとが含まれる。特定のアプリは、対応する機能を実現する処理に関する操作が単純ではなく、操作を支援した方がよいと考えられるアプリである。例えば特定のアプリには、コピーアプリ、スキャンアプリ等の処理を実行させるためのアプリと、通信設定アプリ等の操作手順の数が比較的多いアプリとが含まれる。一方、除外アプリは、対応する機能を実現する処理に関する操作が単純であり、操作を支援しなくてもよいと考えられるアプリである。例えば除外アプリには、処理の進捗状況や履歴を確認する機能を実現する処理確認アプリ等の操作手順の数が比較的少ないアプリが含まれる。この除外アプリの条件は、本発明に係る特定の条件の一例であり、除外アプリにより実行される処理は、本発明に係る第１処理の一例である。

例えば図６に示すメニュー画面１４０において利用者が操作部１２４を用いてコピーボタン１４１を押す操作を行うと、ステップＳ１４の判定はＹＥＳになり、処理はステップＳ１５に進む。また、この操作に応じて、表示部１２５には図６に示すコピー画面１５０が表示される。利用者は、コピー画面１５０において操作部１２４を用いてコピー処理に関する操作を行う。

ステップＳ１５において、プロセッサ１２１は、ウェアラブル端末１１０から生体情報を取得する。この生体情報の取得は、特定のアプリが起動されたことを契機に開始され、予め定められた時間間隔で繰り返し行われる。具体的にはプロセッサ１２１は、ステップＳ１２においてペアリングを行ったウェアラブル端末１１０に生体情報の取得要求を通信部１２３から送信する。ウェアラブル端末１１０は、この取得要求に応じて利用者から計測した生体情報を画像処理装置１２０に送信する。ウェアラブル端末１１０は、ウェアラブル端末１１０から送信された生体情報を通信部１２３にて受信する。

ステップＳ１６において、プロセッサ１２１は、ウェアラブル端末１１０から取得された最新の生体情報を分析し、利用者が処理に関する操作を行っている間にストレスを感じているか否かを判定する。このストレスを感じている状態は、本発明に係る予め定められた心理状態の一例である。例えば生体情報に心拍数又は血圧が含まれる場合、心拍数又は血圧が閾値以上になると、利用者がストレスを感じていると判定される。なお、この閾値は、例えば人がある程度の強度のストレスを感じたときに計測される心拍数又は血圧に予め設定されている。利用者がストレスを感じていないと判定された場合、ステップＳ１６の判定がＮＯになり、処理はステップＳ１５に戻る。一方、利用者がストレスを感じていると判定された場合、ステップＳ１６の判定がＹＥＳになり、処理はステップＳ１７に進む。

ステップＳ１７において、プロセッサ１２１は、利用者がストレスを感じたときに行っている操作を支援する支援画面を表示部１２５に表示する。この支援画面には、利用者がストレスを感じたときに行っている操作を支援する情報（以下、「支援情報」という。）を示す二次元コードが含まれる。二次元コードは、支援情報を符号化して得られる画像、すなわち、支援情報をユーザ端末１３０で表示するために用いられる画像である。支援情報は、例えば利用者がストレスを感じたときに起動中のアプリに関する操作をガイドする情報である。例えば利用者がストレスを感じたときに操作が行われている画面に応じて異なる支援情報が用いられる。なお、操作を支援することにより、操作の対象となる処理を支援することになる。

例えば図６に示すように、コピー画面１５０が表示されている間に利用者がストレスを感じていると判定された場合には、利用者がコピー処理に関する操作にストレスを感じていると考えられる。そこで、この場合には、コピー処理に関する操作を支援する支援情報１７０を符号化して二次元コード１６１が生成され表示される。この支援情報１７０には、例えばコピー処理の基本的な操作の手順、コピー処理の便利な操作方法、コピー処理の設定値を説明する情報が含まれる。

図７は、支援情報の他の例を示す図である。図７に示すように、コピー画面１５０には、コピー処理の設定画面１８０に遷移させる操作に用いられる設定ボタン１５１が含まれる。利用者が操作部１２４を用いて設定ボタン１５１を押す操作を行うと、設定画面１８０が表示部１２５に表示される。設定画面１８０は、コピー処理の設定値を設定する操作に用いられる。設定画面１８０が表示されている間に利用者がストレスを感じていると判定された場合には、利用者がコピー処理の設定値を設定する操作にストレスを感じていると考えられる。そこで、この場合には、コピー処理の設定値を設定する操作を支援する支援情報２００を符号化して二次元コード１９１が生成され、この二次元コード１９１を含む支援画面１９０が表示部１２５に表示される。この支援情報２００には、例えばコピー処理の各種の設定値を説明する詳細情報が含まれる。図６及び図７に示されるように、利用者がストレスを感じていると判定された時点に利用者が行っている操作又は利用者が操作している画面によって、異なる支援情報が表示される。

図８は、支援情報のさらに他の例を示す図である。例えば利用者が図６に示すメニュー画面１４０において機器設定ボタン１４２を押す操作をすると、図８に示す機器設定画面２１０が表示部１２５に表示される。機器設定画面２１０には、通信設定画面２２０に遷移させる操作に用いられる設定ボタン２１１が含まれる。利用者が操作部１２４を用いて設定ボタン２１１を押す操作を行うと、通信設定アプリが起動され、通信設定画面２２０が表示部１２５に表示される。通信設定画面２２０は、通信の設定を行う操作に用いられる。例えば通信設定画面２２０が表示されている間に利用者がストレスを感じていると判定された場合には、利用者が通信の設定を行う操作にストレスを感じていると考えられる。そこで、この場合には、通信の設定を行う操作を支援する支援情報２４０を符号化して二次元コード２３１が生成され、この二次元コード２３１を含む支援画面２３０が表示部１２５に表示される。この支援情報２４０には、例えば各通信規格に従った通信の設定を行う操作の手順、通信に関するその他の設定についての詳細情報が含まれる。

ステップＳ１８において、二次元コードが表示部１２５に表示されると、利用者は、ユーザ端末１３０を用いて二次元コードを読み取る。例えば利用者は、撮像部１３６を用いて二次元コードを撮影する。プロセッサ１３１は、撮像部１３６により撮影された二次元コードを復号して、二次元コードが示す支援情報を復元する。

ステップＳ１９において、プロセッサ１３１は、二次元コードから得られた支援情報を表示部１３５に表示する。例えば図６に示す二次元コード１６１が読み取られた場合、コピー処理に関する操作を支援する支援情報１７０が表示部１３５に表示される。これにより、利用者は、コピー処理に関する操作のやり方が分かる。図７に示す二次元コード１９１が読み取られた場合、コピー処理の設定値を設定する操作を支援する支援情報２００が表示部１３５に表示される。これにより、利用者は、コピー処理の設定値を設定する操作のやり方が分かる。図８に示す二次元コード２３１が読み取られた場合、通信の設定を行う操作を支援する支援情報２４０が表示部１３５に表示される。これにより、利用者は、通信の設定を行う操作のやり方が分かる。この場合、利用者は、ユーザ端末１３０の表示部１３５に表示された支援情報を参照しながら、画像処理装置１２０の操作を続けることができる。このように利用者による画像処理装置１２０の操作が再開されると、処理はステップＳ１５に戻ってもよい。

一方、上述したステップＳ１４において、例えば利用者が図６に示すメニュー画面１４０において、除外アプリに対応する操作ボタンを押す操作を行うと、ステップＳ１４の判定はＮＯになり、上述したステップＳ１５～Ｓ１７の処理は行われない。例えば利用者が処理の進捗状況や履歴を確認する機能を実現するための処理確認アプリに対応する操作ボタン１４３を押す操作を行うと、処理の進捗状況や履歴を示す処理確認画面が表示部１２５に表示される。処理確認画面において処理の進捗状況や履歴を確認する操作が行われている間は、生体情報が取得されないため支援情報は表示されない。この場合、利用者は、支援情報を参照せずに画像処理装置１２０の操作を続ける。

図５に示すステップＳ２０において、プロセッサ１２１は、処理の実行が指示されたか否かを判定する。処理の実行が指示されていない場合、ステップＳ２０の判定がＮＯになり、ステップＳ２０の処理が繰り返される。一方、例えば利用者が操作部１２４を用いて処理の実行を指示する操作を行うと、ステップＳ２０の判定がＹＥＳになり、処理はステップＳ２１に進む。なお、上述したステップＳ１６において利用者がストレスを感じていないと判定されている間に、利用者が処理の実行を指示する操作を行った場合にも、ステップＳ２０の判定はＹＥＳになり、処理はステップＳ２１に進む。

ステップＳ２１において、プロセッサ１２１は、利用者の操作に従って処理を実行する。例えばコピー処理の設定を行う操作の後、コピー処理の実行を指示する操作が行われると、画像読取部１２６と画像形成部１２７とを用いて設定された内容でコピー処理が行われる。

ステップＳ２２において、プロセッサ１２１は、起動中のアプリが停止されたことを契機に生体情報の取得を終了する。例えば利用者が操作部１２４を用いて起動中のアプリを停止させる操作を行うと、起動中のアプリが停止するとともにこのアプリに対応する画面が閉じられ、再び図６に示すメニュー画面１４０が表示部１２５に表示される。この操作が行われたことを契機に、ウェアラブル端末１１０からの生体情報の取得が終了される。なお、ステップＳ１４において特定のアプリが起動されていない場合には、ステップＳ２２の処理は行われない。

ステップＳ２３において、利用者が画像処理装置１２０からログアウトすると、ステップＳ２４において、プロセッサ１２１は、利用者がログアウトしたことを契機にウェアラブル端末１１０とのペアリングを解除する。例えば利用者は、操作部１２４を用いてログアウトする操作を行う。この操作が行われたことを契機にウェアラブル端末１１０とのペアリングが解除される。

２－２．エラーが発生した場合
図９は、画像処理装置１２０が行う動作の他の例を示すフローチャートである。この動作は、図５に示すステップＳ２１において処理が開始された後に行われる。図９に示す例は、コピー処理が開始された後にエラーが発生した場合の動作例を示す。

ステップＳ３１において、プロセッサ１２１は、エラーが発生したか否かを判定する。このエラーは、本発明に係る処理が妨げられる事象の一例である。処理を妨げる事象とは、該処理の続行が困難になる事象であり、具体的には紙詰まりや用紙切れやトナー切れ等があげられる。エラーが発生していない場合、ステップＳ３１の判定がＮＯになり、ステップＳ３１の判定が繰り返される。一方、例えばコピー処理が開始された後に紙詰まりのエラーが発生した場合、ステップＳ３１の判定はＹＥＳになる。この場合、コピー処理は中断され、処理はステップＳ３２に進む。

ステップＳ３２において、プロセッサ１２１は、ウェアラブル端末１１０からの生体情報の取得を停止する。生体情報の取得が停止されると、生体情報を用いて利用者がストレスを感じているか否かが判定されなくなる。その結果、利用者がエラーの発生によりストレスを感じても、支援情報が表示されなくなる。すなわち、支援情報の表示が中止される。なお、エラーが発生しても生体情報の取得は継続しつつも、支援情報の表示を中止するように制御してもよい。

ステップＳ３３において、プロセッサ１２１は、エラーの発生を通知するエラー画面２５０を表示部１２５に表示する。図１０は、エラー画面２５０の一例を示す図である。エラー画面２５０には、例えばエラーが発生したことを通知するメッセージとエラーの解除方法とが含まれる。利用者は、エラー画面２５０を見ることにより、エラーを解除することができる。エラーが発生した場合には、エラーが解除されないと処理が継続されないため、操作を支援するよりもエラーを通知した方が利用者にとって有益であると考えられる。そのため、エラーが発生した場合には、支援情報ではなくエラー画面２５０が表示される。

ステップＳ３４において、プロセッサ１２１は、エラーが解除されたか否かを判定する。例えば図１０に示すように、エラー画面２５０にはエラーを解除した後に処理を再開する操作に用いられる再開ボタン２５１が含まれる。利用者が操作部１２４を用いて再開ボタン２５１を押す操作をすると、エラーが解除されたと判定されてもよい。エラーが解除されていない場合、ステップＳ３４の判定がＮＯになり、ステップＳ３４の処理が繰り返される。一方、エラーが解除された場合、ステップＳ３４の判定がＹＥＳになり、処理はステップＳ３５に進む。

ステップＳ３５において、プロセッサ１２１は、ウェアラブル端末１１０からの生体情報の取得を再開する。ステップＳ３５の後、図５に示すステップＳ２１に戻って処理が再開される。

以上説明した実施形態によれば、利用者が処理に関する操作を行っている間にストレスを感じたときに、操作中の処理を支援する支援情報が表示されるため、利用者が処理に関する操作を行っている間の、利用者の心理状態に関係なく操作中の処理を支援する場合と比して、利用者の利便性が向上する。また、支援情報を符号化して得られる二次元コードが表示されるため、支援情報がそのまま表示される場合に比べて、表示部１２５に表示されるデータの量が減る。さらに、エラーが発生した場合には、支援情報が表示されず、支援情報に代えてエラー画面が表示されるため、利用者が操作の支援を所望しないときに、支援情報が出力されるのが防止される。さらに、除外アプリに対応する操作ボタンを押す操作が行われた場合には、生体情報が取得されず、支援情報が表示されないため、操作の支援が不要な処理については、利用者がストレスを感じていても、支援情報が出力されるのが防止される。

３．変形例
上述した実施形態は、本発明の一例である。本発明は、上述した実施形態に限定されない。また、上述した実施形態が以下の例のように変形して実施されてもよい。このとき、以下の２以上の変形例が組み合わせて用いられてもよい。

上述した実施形態において、支援情報は、操作に関するアニメーションであってもよい。このアニメーションは、例えば一連の操作の手順を順番に説明するチュートリアル動画であってもよい。例えばコピー処理の設定を行う操作の手順を説明するアニメーションでは、この操作において押下すべき操作ボタンが順番に示されてもよい。また、アニメーションは、ユーザが既に実行した操作の次に行うべき操作から再生が開始されてもよい。この場合、メモリ１２２には、利用者の操作の履歴が記憶される。例えばコピー処理の設定を行う操作は第１手順～第４手順を含み、利用者が第１手順及び第２手順の操作を行った後、第３手順の操作を行う前にストレスを感じていることが判定された場合を想定する。この場合、次に利用者が行うべき操作は、第３手順の操作になるため、第３手順の説明が開始される時点からアニメーションの再生が開始されてもよい。すなわち、このアニメーションにおいて第１手順及び第２手順を説明する部分は表示されなくてもよい。

上述した実施形態において、画像処理装置１２０のプロセッサ１２１は、利用者に関連付けられたユーザ端末１３０に支援情報送信してもよい。例えば利用者のユーザＩＤには、予め利用者のユーザ端末１３０の端末ＩＤが対応付けられている。ステップＳ１１において入力されたユーザＩＤに対応付けられた端末ＩＤが特定される。そして、この端末ＩＤに対応するユーザ端末１３０に支援情報が送信される。このとき、支援情報は符号化されずそのまま送信される。画像処理装置１２０から支援情報を通信部１３３にて受信すると、ユーザ端末１３０のプロセッサ１３１は、この支援情報を表示部１２５に表示する。この変形例によれば、画像処理装置１２０が支援情報を表示部１２５に表示するのが困難な場合にも、利用者が支援情報を認識することができる。

上述した実施形態において、画像処理装置１２０のプロセッサ１２１は、支援情報を符号化せずにそのまま表示部１２５に表示してもよい。また、プロセッサ１２１は、支援情報のデータ量又は画像処理装置１２０の性能によって、画像処理装置１２０の表示部１２５とユーザ端末１３０との間で支援情報の出力先を切り替えてもよい。支援情報のデータ量又は画像処理装置１２０の性能によっては、表示部１２５に支援情報を表示できない場合がある。このような場合には、ユーザ端末１３０に支援情報を表示することにより、利用者が支援情報を認識することができる。例えばプロセッサ１２１は、支援情報を表示部１２５に表示可能であるか否かを判定する。例えば支援情報のデータ量が閾値以上である場合には、支援情報を表示部１２５に表示できないと判定されてもよい。また、画像処理装置１２０の性能を示す値が閾値以下である場合には、支援情報を表示部１２５に表示できないと判定されてもよい。この性能を示す値には、例えば表示部１２５の画面サイズ又はプロセッサ１２１の処理速度が用いられてもよい。支援情報が表示部１２５に表示可能であると判定された場合、プロセッサ１２１は、支援情報を表示部１２５に表示してもよい。一方、支援情報が表示部１２５に表示できないと判定された場合、プロセッサ１２１は、利用者に関連付けられたユーザ端末１３０に支援情報送信してもよい。この変形例によれば、支援情報のデータ量又は画像処理装置１２０の性能に応じた出力先に支援情報が出力される。

上述した実施形態において、画像処理装置１２０のプロセッサ１２１は、利用者が処理に関する操作が分からなくなったときに管理者が利用者を支援できるように、管理者に支援情報を送信してもよい。管理者への送信は、支援情報を表示部１２５又は１３５に表示するのに加えて行われてもよいし、支援情報を表示部１２５又は１３５に表示するのに代えて行われてもよい。例えばプロセッサ１２１は、利用者が処理に関する操作を行っている間にストレスを感じていると判定された場合には、管理者による支援が必要か否かを問い合わせるメッセージを表示部１２５に表示する。このメッセージに応じて利用者が操作部１２４を用いて管理者による支援が必要であることを示す操作を行うと、プロセッサ１２１は、管理者が使用する予め定められた管理端末（図示せず）に支援情報を送信する。この管理端末は、上述したユーザ端末１３０と同様の構成を備える。ただし、管理端末は撮像部１３６を備えていなくてもよい。このとき、支援情報として、ステップＳ１１において入力された利用者のユーザＩＤや、ストレスを感じていると判定されたときに表示部１２５に表示されている画面を示す画面データ又は利用者の操作の履歴等、管理者が利用者を支援するために必要な情報が管理端末に送信される。画像処理装置１２０からこれらの情報が送信されると、管理端末はこれらの情報を受信して表示する。管理者は、管理端末に表示された情報を見ることにより、利用者がストレスを感じている対象の操作を認識することができるため、利用者にこの操作のやり方を教えることができる。このような管理者による支援は、例えばオンラインで行われてもよいし、管理者が利用者のところへ移動して、直接利用者と話すことにより行われてもよい。

上述した実施形態において、利用者の利用頻度が閾値以下の処理が行われている間に、利用者がストレスを感じていると判定された場合には、支援情報が表示されてもよい。すなわち、利用者の利用頻度が閾値より高い処理が行われている間に、利用者がストレスを感じていると判定された場合には、支援情報が表示されなくてもよい。利用頻度が低い処理に限り支援情報を出力するのは、利用者の利用頻度が高い処理は、利用者が操作に慣れている処理であり、操作を支援する必要がない可能性があると考えらえるためである。例えば利用者毎に各アプリの利用回数が計数され、この利用回数に基づいて単位期間における利用頻度が算出される。そして、この利用頻度が閾値以下のアプリが特定のアプリとして設定される。一方、この利用頻度が閾値以下のアプリが除外アプリとして設定される。この場合、除外アプリにより実行される処理には、利用頻度が閾値より高い処理が含まれる。この変形例によれば、利用者の利用頻度が低い処理については、支援情報が出力される。すなわち、利用者の利用頻度が高い処理については、支援情報が出力されない。他の例において、特定のアプリは、利用者又は管理者の操作に応じて変更されてもよい。

上述した実施形態において、画像処理装置１２０において利用者の認証が行われない場合、プロセッサ１２１は、利用者が画像処理装置１２０を使用するタイミングで画像処理装置１２０に最も近いウェアラブル端末１１０を検出し、検出したウェアラブル端末１１０とペアリングを行ってもよい。このタイミングは、例えば画像処理装置１２０が節電モードを有する場合には節電モードから復帰した時点であってもよいし、画像処理装置１２０の起動時であってもよい。また、この場合、プロセッサ１２１は、利用者が画像処理装置１２０を使用しなくなるタイミングでウェアラブル端末１１０とのペアリングを解除してもよい。このタイミングは、例えば画像処理装置１２０が節電モードを有する場合には節電モードに移行した時点であってもよい。

上述した実施形態において、生体情報の取得は、必ずしも特定のアプリの起動を契機として開始されなくてもよい。例えば、画像処理装置１２０とウェアラブル端末１１０とがペアリングしたことを契機に、生体情報の取得が開始されてもよい。

上述した実施形態において、処理に関する操作が行われている間にエラーが発生してもよい。例えば、コピー処理の設定値を設定する操作が行われている間に、その設定値に関するエラーが発生してもよい。この場合にも、上述した実施形態と同様に、エラーが解除されるまでは、支援情報の出力が中止される。また、上述した実施形態において、支援情報の出力が中止される原因は、エラーの発生に限定されない。例えば利用者の操作に応じて処理が行われている間においても、支援情報の出力が中止されてもよい。例えば利用者が通信の設定の変更を指示する操作に応じて設定を変更する処理が行われる場合において、この処理に時間がかかるときは、処理を実行中であることを表す画像が表示部１２５に表示される場合がある。これは、利用者が行った操作に対して画像処理装置１２０からの応答待ちの状態であることを示す。このような画像が表示されている間は、支援情報の出力が中止されてもよいし、生体情報の取得が停止されてもよい。

上述した実施形態において、エラーが発生した場合に生体情報の取得が停止されなくてもよい。この場合、エラー画面には、支援情報よりも高い優先度が予め付与される。そして、エラーが発生したときに利用者がストレスを感じていると判定された場合には、エラー画面が支援情報より優先して表示部１２５に表示される。優先してエラー画面が表示されるとは、支援情報の表示よりも目立つ形態でエラー画面が表示されることであり、エラー画面が目立つ色で表示されたり、支援情報の表示の上に表示されるなどがある。

上述した実施形態において、生体情報を用いて判定される利用者の心理状態は、ストレスを感じている状態に限定されない。この心理状態は、不安な状態、戸惑っている状態、緊張状態、いらだっている状態等、操作の支援を必要とするような心理状態であれば、どのような状態であってもよい。また、生体情報は、心拍数又は血圧に限定されず、このような利用者の心理状態を示す生体情報であれば、どのような情報であってもよい。

上述した実施形態において、画像処理装置１２０は本発明に係る情報処理装置の一例である。しかし、本発明に係る情報処理装置は、画像処理装置１２０に限定されない。例えば本発明に係る情報処理装置には、家電やオーディオ機器、コンピュータ等のあらゆる情報処理装置が含まれて良い。

上記実施形態において、プロセッサとは広義的なプロセッサを指し、汎用的なプロセッサ（例えばＣＰＵ： Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、等）や、専用のプロセッサ（例えばＧＰＵ： Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、ＡＳＩＣ： Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ、ＦＰＧＡ： Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ、プログラマブル論理デバイス、等）を含むものである。

また上記実施形態におけるプロセッサの動作は、１つのプロセッサによって成すのみでなく、物理的に離れた位置に存在する複数のプロセッサが協働して成すものであってもよい。また、プロセッサの各動作の順序は上記各実施形態において記載した順序のみに限定されるものではなく、適宜変更してもよい。

上述した実施形態において、画像処理システム１００において行われる処理の主体は、図４、図５、及び図９に示す例に限定されない。例えば画像処理装置１２０において行われる処理の少なくとも一部が他の装置において行われてもよい。

本発明は、画像処理装置１２０及びウェアラブル端末１１０のそれぞれにおいて実行されるプログラムとして提供されてもよい。なお、画像処理装置１２０及びウェアラブル端末１１０は、それぞれ本発明に係るコンピュータの一例である。このプログラムは、インターネットなどの通信回線を介してダウンロードされてもよいし、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどの、コンピュータが読取可能な記録媒体に記録した状態で提供されてもよい。

１００：画像処理システム、１１０：ウェアラブル端末、１２０：画像処理装置、１２１：プロセッサ、１２２：メモリ、１２３：通信部、１２４：操作部、１２５：表示部、１２６：画像読取部、１２７：画像形成部、１３０：ユーザ端末、１３１：プロセッサ、１３２：メモリ、１３３：通信部、１３４：操作部、１３５：表示部、１３６：撮像部

Claims (11)

1. プロセッサを備え、
   前記プロセッサは、
   利用者の生体情報を取得し、
   前記利用者により、処理に関する操作が行われている間に、前記生体情報により示される前記利用者の心理状態が、予め定められた状態になると、前記処理を支援する情報を出力し、
   自装置の管理者に前記情報を送信する
   ことを特徴とする情報処理装置。
2. プロセッサを備え、
   前記プロセッサは、
   利用者の生体情報を取得し、
   前記利用者により、処理に関する操作が行われている間に、前記生体情報により示される前記利用者の心理状態が、予め定められた状態になると、前記処理を支援する情報を出力し、
   前記処理に関する前記操作が行われている間に前記処理が妨げられる事象が発生した場合には、前記事象が解消されるまで前記情報の出力を中止する
   ことを特徴とする情報処理装置。
3. 前記プロセッサは、前記操作が行われている画面に応じて、異なる前記情報を出力する
   ことを特徴とする請求項１又は２に記載の情報処理装置。
4. 前記プロセッサは、前記情報を端末装置で表示するために用いられる画像を表示部に表示する
   ことを特徴とする請求項１から３のいずれかに記載の情報処理装置。
5. 前記情報は、アニメーションであり、ユーザが既に実行した操作の次に行うべき操作から再生が開始される
   ことを特徴とする請求項１又は２に記載の情報処理装置。
6. 前記プロセッサは、前記利用者に関連付けられた端末装置に前記情報を送信する
   ことを特徴とする請求項１から５のいずれか１項に記載の情報処理装置。
7. 前記プロセッサは、前記情報のデータ量又は前記情報処理装置の性能によって、自装置と前記端末装置との間で前記情報の出力先を切り替える
   ことを特徴とする請求項６に記載の情報処理装置。
8. 前記プロセッサは、複数の処理のうち特定の条件を満たす第１処理に関する操作が行われている間は、前記情報を出力しない
   ことを特徴とする請求項１から７のいずれか１項に記載の情報処理装置。
9. 前記第１処理とは、前記利用者の利用頻度が閾値より高い処理である
   ことを特徴とする請求項８に記載の情報処理装置。
10. コンピュータに、
    利用者の生体情報を取得するステップと、
    前記利用者により、処理に関する操作が行われている間に、前記生体情報により示される前記利用者の心理状態が、予め定められた状態になると、前記処理を支援する情報を出力するステップと、
    自装置の管理者に前記情報を送信するステップと
    を実行させるためのプログラム。
11. コンピュータに、
    利用者の生体情報を取得するステップと、
    前記利用者により、処理に関する操作が行われている間に、前記生体情報により示される前記利用者の心理状態が、予め定められた状態になると、前記処理を支援する情報を出力するステップと、
    前記処理に関する前記操作が行われている間に前記処理が妨げられる事象が発生した場合には、前記事象が解消されるまで前記情報の出力を中止するステップと
    を実行させるためのプログラム。

Images