JP2019091276A - 表示装置及びプログラム - Google Patents

Abstract

【課題】指示手段を用いて特定の表示要素を選択するよう構成された場合に比較して、接触する操作を検知しない表示面に表示された複数の表示要素から特定の表示要素を選択して別の表示面に表示する際の操作を容易にする。【解決手段】表示装置は、接触する操作を検知しないガイド表示部１０に複数の表示要素Ａ〜Ｈを表示する第１の表示手段と、ガイド表示部１０に表示された複数の表示要素Ａ〜Ｈのうち、操作台２０に接触する操作２４１により選択された特定の表示要素を、操作台２０に表示する第２の表示手段とを備える。【選択図】図１８

Description

本発明は、表示装置及びプログラムに関する。

複数の操作入力点を検知するタッチパネルと、タッチパネルで同時に複数の操作入力点が検知された場合に、検知された複数の操作入力点に基づき、外部ディスプレイに表示されているオブジェクトに対して制御を行う拡張操作手段と、を備える情報処理装置は、知られている（例えば、特許文献１参照）。

特開２０１５−０７６０４５号公報

ここで、接触する操作を検知しない表示面に表示された複数の表示要素から特定の表示要素を選択して別の表示面に表示するにあたって、指示手段を用いて特定の表示要素を選択する構成を採用した場合には、指示手段による指示子を特定の表示要素上で正確に位置決めする必要がある等、操作が容易ではない。

本発明の目的は、指示手段を用いて特定の表示要素を選択するよう構成された場合に比較して、接触する操作を検知しない表示面に表示された複数の表示要素から特定の表示要素を選択して別の表示面に表示する際の操作を容易にすることにある。

請求項１に記載の発明は、接触する操作を検知しない第１の表示面に複数の表示要素を表示する第１の表示手段と、前記第１の表示面に表示された前記複数の表示要素のうち、第２の表示面に接触する操作により選択された特定の表示要素を、当該第２の表示面に表示する第２の表示手段とを備えたことを特徴とする表示装置である。
請求項２に記載の発明は、前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、少なくとも１つの表示要素の全部又は一部を前記第２の表示面の第１の領域に表示し、当該少なくとも１つの表示要素のうち、当該第１の領域に接触する第１の操作により選択された前記特定の表示要素を、当該第２の表示面の第２の領域に表示することを特徴とする請求項１に記載の表示装置である。
請求項３に記載の発明は、前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、前記第２の表示面に近い側に表示された一の表示要素の全部又は一部を、前記少なくとも１つの表示要素の全部又は一部として、前記第１の領域に表示することを特徴とする請求項２に記載の表示装置である。
請求項４に記載の発明は、前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、前記少なくとも１つの表示要素の全部又は一部を、前記第２の表示面に接触する第２の操作に応じて、前記第１の領域に表示することを特徴とする請求項２に記載の表示装置である。
請求項５に記載の発明は、前記第１の操作は、前記第１の領域の接触する位置を第１の方向へ移動させる操作であり、前記第２の操作は、前記第１の領域の接触する位置を第２の方向へ移動させる操作であることを特徴とする請求項４に記載の表示装置である。
請求項６に記載の発明は、前記第１の操作は、前記第１の領域の接触する位置を移動させる操作であり、前記第２の操作は、前記第２の領域の接触する位置を移動させる操作であることを特徴とする請求項４に記載の表示装置である。
請求項７に記載の発明は、前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、操作者の操作によらずに順次選択された前記少なくとも１つの表示要素の全部又は一部を、前記第１の領域に表示することを特徴とする請求項２に記載の表示装置である。
請求項８に記載の発明は、前記第１の表示手段は、前記第１の表示面に表示された前記複数の表示要素を移動させ、前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、前記第２の表示面に接触する第１の操作がなされた時点で移動により予め定められた状態となっている表示要素を、前記特定の表示要素として、当該第２の表示面に表示することを特徴とする請求項１に記載の表示装置である。
請求項９に記載の発明は、前記第１の表示手段は、前記第２の表示面に接触する第２の操作に応じて、前記第１の表示面に表示された前記複数の表示要素を移動させることを特徴とする請求項８に記載の表示装置である。
請求項１０に記載の発明は、前記第１の表示手段は、操作者の操作によらずに、前記第１の表示面に表示された前記複数の表示要素を移動させることを特徴とする請求項８に記載の表示装置である。
請求項１１に記載の発明は、操作者の動作を検知する検知手段と、接触する操作を検知しない第１の表示面に複数の表示要素を表示する第１の表示手段と、前記第１の表示面に表示された前記複数の表示要素のうち、前記検知手段により検知された前記動作により選択された特定の表示要素を、第２の表示面に接触する操作に応じて、当該第２の表示面に表示する第２の表示手段とを備えたことを特徴とする表示装置である。
請求項１２に記載の発明は、前記動作は、前記特定の表示要素が表示された前記第１の表示面上の位置を示す動作であることを特徴とする請求項１１に記載の表示装置である。
請求項１３に記載の発明は、前記第１の表示面上の位置を示す動作は、当該位置を見る動作であることを特徴とする請求項１２に記載の表示装置である。
請求項１４に記載の発明は、前記第１の表示面上の位置を示す動作は、当該位置を指差す動作であることを特徴とする請求項１２に記載の表示装置である。
請求項１５に記載の発明は、前記動作は、前記特定の表示要素の識別情報を指で示す動作であることを特徴とする請求項１１に記載の表示装置である。
請求項１６に記載の発明は、コンピュータに、接触する操作を検知しない第１の表示面に複数の表示要素を表示する機能と、前記第１の表示面に表示された前記複数の表示要素のうち、第２の表示面に接触する操作により選択された特定の表示要素を、当該第２の表示面に表示する機能とを実現させるためのプログラムである。
請求項１７に記載の発明は、コンピュータに、操作者の動作を検知する機能と、接触する操作を検知しない第１の表示面に複数の表示要素を表示する機能と、前記第１の表示面に表示された前記複数の表示要素のうち、検知された前記動作により選択された特定の表示要素を、第２の表示面に接触する操作に応じて、当該第２の表示面に表示する機能とを実現させるためのプログラムである。

請求項１の発明によれば、指示手段を用いて特定の表示要素を選択するよう構成された場合に比較して、接触する操作を検知しない表示面に表示された複数の表示要素から特定の表示要素を選択して別の表示面に表示する際の操作が容易になる。
請求項２の発明によれば、特定の表示要素の候補を別の表示面に表示することなく別の表示面に接触する操作により特定の表示要素を選択するよう構成された場合に比較して、特定の表示要素を選択する際の確実性が高まる。
請求項３の発明によれば、特定の表示要素の候補を別の表示面に近いかどうかに関係なく別の表示面に表示するよう構成された場合に比較して、特定の表示要素の候補を別の表示面に表示するのに要する時間が短縮される。
請求項４の発明によれば、特定の表示要素の候補を別の表示面に接触する操作によらずに別の表示面に表示するよう構成された場合に比較して、特定の表示要素の候補を別の表示面に表示する際の確実性が高まる。
請求項５の発明によれば、別の表示面の一部の領域にしか接触できない場合であっても、特定の表示要素の候補を別の表示面に表示することができる。
請求項６の発明によれば、別の表示面の全領域を有効利用しながら、特定の表示要素の候補を別の表示面に表示することができる。
請求項７の発明によれば、特定の表示要素の候補を別の表示面に接触する操作によって別の表示面に表示するよう構成された場合に比較して、特定の表示要素の候補を別の表示面に表示する際の操作負担が軽減される。
請求項８の発明によれば、特定の表示要素の候補を別の表示面に表示した状態で別の表示面に接触する操作により特定の表示要素を選択するよう構成された場合に比較して、別の表示面に広い表示領域を確保することができる。
請求項９の発明によれば、特定の表示要素の候補を別の表示面に接触する操作によらずに元の表示面内で移動させるよう構成された場合に比較して、特定の表示要素の候補を移動させる際の確実性が高まる。
請求項１０の発明によれば、特定の表示要素の候補を別の表示面に接触する操作によって元の表示面内で移動させるよう構成された場合に比較して、特定の表示要素の候補を元の表示面内で移動させる際の操作負担が軽減される。
請求項１１の発明によれば、指示手段を用いて特定の表示要素を選択するよう構成された場合に比較して、接触する操作を検知しない表示面に表示された複数の表示要素から特定の表示要素を選択して別の表示面に表示する際の操作が容易になる。
請求項１２の発明によれば、接触する操作を検知しない表示面に表示された複数の表示要素から特定の表示要素をその表示位置によって直接選択することができる。
請求項１３の発明によれば、特定の表示要素の表示位置を動作で示す場合に比較して、特定の表示要素の表示位置を、体を動かさなくても示すことができる。
請求項１４の発明によれば、特定の表示要素の表示位置を視線で示す場合に比較して、特定の表示要素の表示位置を、正確に示すことができる。
請求項１５の発明によれば、接触する操作を検知しない表示面に表示された複数の表示要素から特定の表示要素をその識別情報によって直接選択することができる。
請求項１６の発明によれば、指示手段を用いて特定の表示要素を選択するよう構成された場合に比較して、接触する操作を検知しない表示面に表示された複数の表示要素から特定の表示要素を選択して別の表示面に表示する際の操作が容易になる。
請求項１７の発明によれば、指示手段を用いて特定の表示要素を選択するよう構成された場合に比較して、接触する操作を検知しない表示面に表示された複数の表示要素から特定の表示要素を選択して別の表示面に表示する際の操作が容易になる。

本発明の実施の形態が適用される画像処理装置の外観を示した図である。 本発明の実施の形態が適用される画像処理装置のハードウェア構成例を示した図である。 本発明の実施の形態における制御装置の機能構成例を示したブロック図である。 画像処理装置の待機中における画面表示例を示した図である。 画像処理装置のログイン完了時における画面表示例を示した図である。 画像処理装置の印刷操作開始時における画面表示例を示した図である。 画像処理装置のファイル内容確認時における画面表示例を示した図である。 画像処理装置の出力形式選択時における画面表示例を示した図である。 画像処理装置の印刷完了時における画面の表示例を示した図である。 ユーザが原稿を操作台に置いた時の画面表示例を示した図である。 ユーザが原稿を操作台に置いた時の画面表示例を示した図である。 画像処理装置の二次元スキャン完了時における画面表示例を示した図である。 画像処理装置の保存操作開始時における画面表示例を示した図である。 画像処理装置の三次元スキャン完了時における画面表示例を示した図である。 本発明の実施の形態における制御装置の動作例を示したフローチャートである。 プリント処理を行う際の制御装置の動作例を示したフローチャートである。 二次元スキャン処理を行う際の制御装置の動作例を示したフローチャートである。 公共プリント処理の第１の態様で表示される画面表示例を示した図である。 公共プリント処理の第２の態様で表示される画面表示例を示した図である。 公共プリント処理の第３の態様で表示される画面表示例を示した図である。 公共プリント処理の第４の態様で表示される画面表示例を示した図である。 公共プリント処理の第５の態様で表示される画面表示例を示した図である。 公共プリント処理の第１乃至第３の態様を行う際の制御装置の動作例を示したフローチャートである。 公共プリント処理の第４の態様を行う際の制御装置の動作例を示したフローチャートである。 公共プリント処理の第５の態様を行う際の制御装置の動作例を示したフローチャートである。 公共プリント処理の第６及び第７の態様を行う際の制御装置の動作例を示したフローチャートである。

以下、添付図面を参照して、本発明の実施の形態について詳細に説明する。

［画像処理装置の全体構成］
図１は、本実施の形態が適用される画像処理装置１００の外観を示した図である。図示するように、画像処理装置１００は、ガイド表示部１０と、操作台２０と、投影部３０と、操作検知部４０と、印刷部５０と、撮像部６０ａ〜６０ｄとを備える。

ガイド表示部１０は、画像処理装置１００の操作に対するガイド等のユーザに対するメッセージを表示するディスプレイである。ガイド表示部１０は、後述する操作台２０とは異なり、その表面に接触しても接触は検知されないようになっている。ここで、ガイド表示部１０としては、例えば、液晶ディスプレイを用いるとよい。本実施の形態では、接触する操作を検知しない第１の表示面の一例として、ガイド表示部１０を設けている。

操作台２０は、ユーザが携帯情報端末や原稿等を置いたり操作を行ったりすることができるように、ユーザ側にせり出すように設けられた略水平な台である。この場合の「略水平」は、操作台２０に置かれた携帯情報端末や原稿等がずれ落ちない程度の水平度合いであればよい。操作台２０は、後述する投影部３０の機能により、画像が表示されるようになっており、後述する操作検知部４０の機能により、その表面に接触した場合に接触が検知されるようになっている。但し、操作台２０自体をディスプレイで構成し、投影部３０を設けないようにしてもよい。本実施の形態では、表示面、第２の表示面、原稿台の一例として、操作台２０を設けている。

投影部３０は、操作台２０に画像を投影するプロジェクタである。投影部３０は、ガイド表示部１０の下部に設けてあるため、操作台２０に斜め上方向から画像を投影することになるが、操作台２０の鉛直上方に設けて、操作台２０に真上方向から画像を投影するようにしてもよい。或いは、投影部３０を操作台２０の鉛直下方に設けたり、投影部３０と共にミラーを用いたりして、操作台２０に真下方向から画像を投影するようにしてもよい。ここで、投影部３０としては、例えば、液晶プロジェクタを用いるとよい。

操作検知部４０は、操作台２０の表面に接触することによる操作を検知する。この操作の検知は、例えば、操作台２０に表面に放射状に赤外線を照射してユーザの指等がその赤外線を遮ることを感知することによって行えばよい。即ち、操作検知部４０としては、例えば、赤外線ＬＥＤ及び赤外線センサを用いるとよい。

印刷部５０は、紙等に画像を印刷するプリンタである。ここで、印刷部５０としては、例えば、感光体に付着させたトナーを記録媒体に転写して像を形成する電子写真方式や、インクを記録媒体上に吐出して像を形成するインクジェット方式のものを用いるとよい。或いは、印刷部５０は、版にインクを付けて紙等に押し付けて印刷物を作る印刷機であってもよい。本実施の形態では、印刷装置の一例として、印刷部５０を設けている。

撮像部６０ａ〜６０ｄは、操作台２０に置かれた原稿や携帯情報端末を撮像するカメラである。このうち、撮像部６０ａ，６０ｂは、ガイド表示部１０の上部に設けてあるため、主として、操作台２０に置かれた原稿や携帯情報端末を上方から撮像する。また、撮像部６０ｃ，６０ｄは、操作台２０の手前側に設けてあるため、主として、操作台２０に立体物が置かれた場合にそれを斜め下方向から撮像する。このように、撮像部６０ａ〜６０ｄは、その設けられた位置によって用途が異なるが、以下では、これらを区別しない場合は、撮像部６０と称することにする。この場合、撮像部６０はスキャナとして設けられているので、以下では、撮像部６０について「撮像する」を「スキャンする」とも表記するものとする。本実施の形態では、読取装置の一例として、撮像部６０を設けている。また、図では、撮像部６０を４つのみ示しているが、その数はこれに限られるものではない。例えば、ユーザの視線や動作を検知するための撮像部６０をそのような検知が可能な位置に設けてもよい。

［画像処理装置のハードウェア構成］
図２は、本実施の形態が適用される画像処理装置１００のハードウェア構成例を示した図である。図示するように、画像処理装置１００は、ＣＰＵ（Central Processing Unit）１と、ＲＡＭ（Random Access Memory）２と、ＲＯＭ（Read Only Memory）３と、ＨＤＤ（Hard Disk Drive）４と、通信インターフェース（以下、「通信Ｉ／Ｆ」と表記する）５と、ガイド表示部１０と、投影部３０と、操作検知部４０と、印刷部５０と、撮像部６０とを備える。

ＣＰＵ１は、ＲＯＭ３等に記憶された各種プログラムをＲＡＭ２にロードして実行することにより、後述する各機能を実現する。ＲＡＭ２は、ＣＰＵ１の作業用メモリ等として用いられるメモリである。ＲＯＭ３は、ＣＰＵ１が実行する各種プログラム等を記憶するメモリである。ＨＤＤ４は、撮像部６０がスキャンしたデータや印刷部５０における印刷で用いられるデータ等を記憶する例えば磁気ディスク装置である。通信Ｉ／Ｆ５は、通信回線を介して他の装置との間で各種情報の送受信を行う。

ガイド表示部１０、投影部３０、操作検知部４０、印刷部５０、及び、撮像部６０については、図１を参照して既に説明したので、ここでの説明は省略する。

［制御装置の機能構成］
図３は、このような画像処理装置１００を制御する制御装置７０の機能構成例を示したブロック図である。ここで、制御装置７０は、表示装置、画像読取装置の一例であり、画像処理装置１００のＣＰＵ１（図２参照）が、後述する各機能部を実現するプログラムを例えばＲＯＭ３（図２参照）からＲＡＭ２（図２参照）に読み込んで実行することにより、実現される装置として捉えられる。制御装置７０は、図示するように、表示制御部７１と、投影制御部７２と、検知制御部７３と、印刷制御部７４と、撮像制御部７５と、通信制御部７６と、支払い処理部７７と、原稿種類認識部７８と、スキャンデータ処理部７９とを備える。

表示制御部７１は、ガイド表示部１０に各種ガイド及び各種画面を表示する。本実施の形態では、第１の表示面に情報を表示する第１の表示手段の一例として、表示制御部７１を設けている。

投影制御部７２は、投影部３０を用いて、操作台２０に各種画面を表示する。本実施の形態では、表示面、第２の表示面、原稿台に情報を表示する第２の表示手段の一例として、投影制御部７２を設けている。

検知制御部７３は、操作台２０の表面に接触することによる操作を操作検知部４０が検知したかどうかを判定する。また、ユーザの接近を人感センサ（図示せず）が検知したかどうかも判定する。

印刷制御部７４は、印刷部５０による印刷を制御する。

撮像制御部７５は、操作台２０に置かれた原稿や携帯情報端末を撮像するように撮像部６０を制御し、撮像部６０による撮像で得られた画像を取得する。特に、操作台２０に原稿が置かれてから予め定められた時間が経過すると原稿をスキャンするように撮像部６０を制御し、このスキャンにより得られた電子データであるスキャンデータを取得する。本実施の形態では、画像を読み取る読取手段の一例として、撮像制御部７５を設けている。また、撮像制御部７５は、ユーザの視線や動作を検知するための撮像部６０から、その検知結果を取得することもある。この場合、撮像制御部７５は、操作者の動作を検知する検知手段の一例である。

通信制御部７６は、カードに記録された情報をカードリーダ（図示せず）が読み取ると、カードリーダから情報を受信する。また、携帯情報端末に記憶された情報をＮＦＣ（Near Field Communication）リーダ（図示せず）が受信すると、ＮＦＣリーダから情報を受信する。更に、携帯情報端末に記憶された情報をＷｉ−Ｆｉ（登録商標）により受信する。尚、Ｗｉ−Ｆｉの代わりに、Ｂｌｕｅｔｏｏｔｈ（登録商標）を用いてもよいが、以下では、Ｗｉ−Ｆｉを用いるものとして説明する。本実施の形態では、情報を読み取る読取手段の一例として、通信制御部７６を設けている。

また、通信制御部７６は、通信Ｉ／Ｆ５を介して、外部のクラウドシステムからファイルを受信したり、外部のクラウドシステムへファイルを送信したりする。本実施の形態では、他の装置からデータを受信する受信手段の一例として、また、他の装置へデータを送信する送信手段の一例として、通信制御部７６を設けている。

支払い処理部７７は、通信制御部７６がカードリーダから受信した情報や、通信制御部７６がＷｉ−Ｆｉにより受信した情報に基づいて、支払い情報の作成等の支払いに関する処理を行う。

原稿種類認識部７８は、操作台２０に原稿が置かれると、原稿の種類を認識する。この原稿の種類の認識は、例えば、原稿の種類ごとに予め記憶された画像データとのパターンマッチングにより行えばよい。

スキャンデータ処理部７９は、撮像制御部７５が取得したスキャンデータに対して各種処理を行う。ここで、各種処理は、スキャンデータを加工する処理、複数のスキャンで得られたスキャンデータを一体化する処理等を含む。本実施の形態では、２つの画像を一体化した画像を出力する出力手段の一例として、スキャンデータ処理部７９を設けている。

［画像処理装置の画面表示例］
本実施の形態では、最終的なプリント及びスキャンは画像処理装置１００で行われるが、そのための事前の操作はスマートフォン等の携帯情報端末で行われる。

そこで、画像処理装置１００の画面表示例を説明するに先立ち、携帯情報端末における事前の操作について説明する。携帯情報端末には、画像処理装置１００を利用するためのアプリケーションソフトウェア（以下、「アプリ」という）がインストールされており、ユーザはこのアプリを用いて事前の操作を行う。尚、本実施の形態で用いられるアプリは、画像処理装置１００を利用するためのアプリだけであるので、本明細書で「アプリ」というときは、この画像処理装置１００を利用するためのアプリを指すものとする。

まず、携帯情報端末における初回の操作について説明する。ユーザは、画像処理装置１００を利用するサービスに加入する際に、携帯情報端末でアプリを起動し、認証を行うための認証情報とその他の各種情報とを登録する。

携帯情報端末に登録された各種情報（以下、「登録情報」という）は、支払い方法、印刷設定、保存先等を含む。

本実施の形態において、画像処理装置１００は、公共の空間に設置されて利用されるものであることを前提とするので、支払い方法の登録が必要である。即ち、支払い方法は、プリントやスキャンに対してどのような方法で支払いを行うかを示すものであり、例えば、クレジットカードによる支払い、電子マネー型のＩＣカードによる支払い等を含む。

また、印刷設定は、プリントする際にどのようなプリント結果を得たいかを示すものである。印刷設定は、例えば、白黒印刷かカラー印刷か、片面印刷か両面印刷か等の通常の印刷設定に加えて、ステープル留めをするか、封筒に入れるか、ビニールに入れるか等の特殊な出力形式の印刷設定も含む。

更に、保存先は、原稿をスキャンすることにより得られたスキャンデータをどこに保存するかを示すものである。保存先は、経費精算クラウドシステム、文書管理クラウドシステム、名刺管理クラウドシステム等を含む。これらの保存先は、原稿の種類ごとに、その種類の原稿のスキャンデータが保存される場所として登録しておくとよい。例えば、原稿の種類がレシートであれば、そのスキャンデータは経費精算クラウドシステムに、原稿の種類がＡ４用紙であれば、そのスキャンデータは文書管理クラウドシステムに、原稿の種類が名刺であれば、そのスキャンデータは名刺管理クラウドシステムに、それぞれ保存されるように登録しておけばよい。

次に、携帯情報端末における２回目以降の操作について説明する。ユーザは、例えばクラウドシステムに格納されたファイルを印刷する際に、携帯情報端末でアプリを起動し、クラウドシステムからファイルのリストを取得して、携帯情報端末の表示部に表示する。この状態で、ユーザは、印刷したいファイルを指定することにより、印刷を予約する。以下、この印刷が予約されたファイルを「印刷予約ファイル」と呼ぶことにする。また、ユーザは、印刷予約ファイルに対して、各種情報を登録する。例えば、印刷予約ファイルに対して、出力形式を設定し、支払い方法を設定する。或いは、印刷予約ファイルに対して、出力形式や支払い方法は設定しないままにしておいてもよい。

その後、ユーザが実際にプリントする際には、公共の空間における画像処理装置１００の設置場所に行く必要がある。携帯情報端末のアプリは、この場合の情報の提供も行う。例えば、ユーザが携帯情報端末で印刷予約ファイルを指定して検索ボタンを押下すると、アプリは、ユーザの周辺の地図を携帯情報端末の表示部に表示し、指定された印刷予約ファイルに対して設定された出力形式等を考慮して、その印刷予約ファイルを印刷可能な画像処理装置１００の設置場所を地図上に表示する。これにより、ユーザは、画像処理装置１００の設置場所に行き、印刷したい印刷予約ファイルをプリントすることが可能となる。

以下、画像処理装置１００における画面表示例について説明する。

（待機中の画面表示例）
図４は、画像処理装置１００の待機中における画面表示例を示した図である。図示するように、画像処理装置１００は、待機中において、ガイド表示部１０に待機中画面１０１を表示する。待機中画面１０１は、画像処理装置１００の設置場所でユーザが必要とすると思われる情報を表す表示要素の一例である図形を含む。図では、このような情報の例として、情報Ａ〜Ｈを示している。待機中画面１０１には、画像処理装置１００の設置場所に応じて様々なバージョンがあり、情報Ａ〜Ｈは、待機中画面１０１のバージョンによって異なる。例えば、画像処理装置１００が駅に設置されていれば、待機中画面１０１は駅バージョンであり、情報Ａ〜Ｈは、運行、時刻表、旅行等に関する情報である。尚、図では、情報Ａ〜Ｈを示す図形は、全て同じ大きさとしているが、ユーザが必要とする度合いが高いと推測される情報を表す図形は大きくする等、情報の重要度に応じて変更してもよい。

図４の待機中画面１０１が表示された状態で、ユーザが携帯情報端末９０、原稿９５、及び、立体物９７の何れかを操作台２０に置くと、画像処理装置１００は、プリント処理、二次元スキャン処理、三次元スキャン処理のうち、操作台２０に置かれた物に応じた処理へ移行する。具体的には、画像処理装置１００は、ユーザが携帯情報端末９０を操作台２０に置くと、携帯情報端末９０でアプリが起動されており、アプリが送信した認証情報に基づいて認証が成功すれば、プリント処理へ移行する。一方、ユーザが原稿９５を操作台２０に置くと、二次元スキャン処理へ移行し、ユーザが立体物９７を操作台２０に置くと、三次元スキャン処理へ移行する。

（プリント処理時の画面表示例）
図５は、画像処理装置１００のログイン完了時における画面表示例を示した図である。ユーザが携帯情報端末９０を操作台２０に置き、認証が成功すると、画像処理装置１００は、プリント処理を開始する。その際、認証が成功することによりログイン処理が完了するので、画像処理装置１００は、まず、ガイド表示部１０及び操作台２０にログイン完了画面１０２を表示する。ログイン完了画面１０２は、図示するように、携帯情報端末９０と、操作台２０と、ガイド表示部１０とをアニメーションにより連携した画面となっている。

図６は、画像処理装置１００の印刷操作開始時における画面表示例を示した図である。操作台２０に置かれた携帯情報端末９０で印刷予約ファイルが指定されていれば、画像処理装置１００は、操作台２０に印刷指示画面１０３を表示する。印刷指示画面１０３は、印刷予約ファイルを表す画像（以下、「ファイル画像」という）を含む。図では、このようなファイル画像の例として、ファイル画像９１１〜９１３を示している。また、図では、印刷予約ファイルの属性に応じて印刷料金を算出し、印刷指示画面１０３にこの印刷料金も表示している。一方、画像処理装置１００は、ガイド表示部１０に、編集に関するガイド１２１と、印刷に関するガイド１２２とを表示する。このとき、携帯情報端末９０では、図示するように、アプリが表示部に印刷ボタンを表示する。

図７は、画像処理装置１００のファイル内容確認時における画面表示例を示した図である。ユーザが、図６のガイド１２１に従って、拡大ジェスチャを行うと、画像処理装置１００は、操作台２０にファイル内容表示画面１０４を表示する。ファイル内容表示画面１０４は、実際のサイズで文書等を表示し、その編集を可能とする画面である。例えばファイル画像９１３上で拡大ジェスチャを行った場合、ファイル画像９１３により表される印刷予約ファイルの内容が表示される。一方、画像処理装置１００は、ガイド表示部１０に、内容確認に関するガイド１２３と、出力形式に関するガイド１２４とを表示する。社内文書等の機密を保持すべき文書は、まずは、文字をぼかして表示し、ユーザがガイド１２３に従って指でなぞることにより、文字を見えるように表示するとよい。或いは、手のひらでなぞることにより文字を見えるように表示してもよい。

図８は、画像処理装置１００の出力形式選択時における画面表示例を示した図である。ユーザが、図７のガイド１２４に従って、製本ボタン（図示せず）を押下すると、画像処理装置１００は、操作台２０に出力形式表示画面１０５を表示する。出力形式表示画面１０５は、様々な出力形式を含み、その中から好みの出力形式を選択可能とする。ユーザが何れかの出力形式を選択すると、画像処理装置１００は、画面を元の画面に戻す。

その後、図６の印刷指示画面１０３が表示された状態で、ユーザが印刷料金を支払い、印刷ボタンを押下すると、画像処理装置１００は、印刷を開始する。その際、画像処理装置１００は、ファイル画像９１１〜９１３を手前にフェードアウトするように移動させる。

図９は、画像処理装置１００の印刷完了時における画面の表示例を示した図である。印刷が完了すると、画像処理装置１００は、操作台２０にログアウトガイド画面１０６を表示する。ログアウトガイド画面１０６は、携帯情報端末９０を外す操作を促すように、携帯情報端末９０の周囲のぼんやりと光る部分を含む。一方、画像処理装置１００は、ガイド表示部１０に、ログアウトに関するガイド１２５と、荷物に関するガイド１２６とを表示する。このとき、携帯情報端末９０では、図示するように、アプリが表示部にチェックマークを表示することにより、印刷が完了したことをユーザに知らせる。

これにより、ユーザが携帯情報端末９０を操作台２０から外すと、画像処理装置１００は、ログアウト処理を行い、ガイド表示部１０及び操作台２０に、ログアウトが完了した旨を表示する。また、携帯情報端末９０でも、アプリが表示部に、ログアウトした旨を表示する。

（二次元スキャン処理時の画面表示例）
図１０，１１は、ユーザが原稿９５を操作台２０に置いた時の画面表示例を示した図である。ユーザが原稿９５を操作台２０に置くと、画像処理装置１００は、ガイド表示部１０に、原稿９５の位置調整に関するガイド１７１を表示する。まず、ユーザが、ガイド１７１に従い、図１０に示すように、原稿９５として、レシート９５１、Ａ４用紙９５２、及び、名刺９５３を互いに近付けて操作台２０に置いた場合を考える。この場合、画像処理装置１００は、原稿９５の種類を文書と認識し、操作台２０に、その旨を示す原稿種類認識結果１５０を表示する。次に、ユーザが、ガイド１７１に従い、図１１に示すように、原稿９５として、レシート９５１、Ａ４用紙９５２、及び、名刺９５３を互いに離して操作台２０に置いた場合を考える。この場合、画像処理装置１００は、原稿９５の種類をレシート、Ａ４用紙、及び、名刺と認識し、操作台２０に、その旨を示す原稿種類認識結果１５１〜１５３を表示する。

その後、図１１のように原稿９５が置かれた状態で、予め定められた時間が経過すると、画像処理装置１００は、原稿９５をスキャンする。

図１２は、画像処理装置１００のスキャン完了時における画面表示例を示した図である。スキャンが完了すると、画像処理装置１００は、ガイド表示部１０に、原稿９５の取り去りに関するガイド１７２と、保存先に関するガイド１７３とを表示する。ユーザが、ガイド１７２に従って、レシート９５１、Ａ４用紙９５２、及び、名刺９５３を操作台２０から取り去ると、画像処理装置１００は、操作台２０に、レシートのスキャン画像９２１、Ａ４用紙のスキャン画像９２２、及び、名刺のスキャン画像９２３を表示する。その際、画像処理装置１００は、スキャン画像９２１〜９２３を、正立した状態で表示する。

図１３は、画像処理装置１００の保存操作開始時における画面表示例を示した図である。ユーザが、携帯情報端末９０を操作台２０に置くと、画像処理装置１００は、操作台２０に保存指示画面１５４を表示する。保存指示画面１５４は、スキャン画像９２１〜９２３に加え、携帯情報端末９０に原稿の種類ごとに登録された保存先を表す保存先アイコン９２４〜９２６を含む。ここで、保存先アイコン９２４は、レシートのスキャンデータの保存先として登録された経費精算クラウドシステムを表す。また、保存先アイコン９２５は、Ａ４用紙のスキャンデータの保存先として登録された文書管理クラウドシステムを表す。更に、保存先アイコン９２６は、名刺のスキャンデータの保存先として登録された名刺管理クラウドシステムを表す。その際、携帯情報端末９０では、アプリが表示部に保存ボタンを表示する。ユーザが、保存指示画面１５４において、保存料金を支払い、保存ボタンを押下すると、画像処理装置１００は、レシート、Ａ４用紙、及び、名刺のスキャンデータを、それぞれ対応するクラウドシステムに保存する。

その後、画像処理装置１００は、図９に示したように、ガイド表示部１０に、ログアウトに関するガイド１２５と、荷物に関するガイド１２６とを表示する。これにより、ユーザが携帯情報端末９０を操作台２０から外すと、画像処理装置１００は、ログアウト処理を行い、ガイド表示部１０及び操作台２０に、ログアウトが完了した旨を表示する。また、携帯情報端末９０でも、アプリが表示部に、ログアウトした旨を表示する。

（三次元スキャン処理の画面表示例）
ユーザが立体物９７を操作台２０に置いた状態で、予め定められた時間が経過すると、画像処理装置１００は、立体物９７をスキャンする。そして、ユーザが立体物９７を操作台２０から取り去ると、画像処理装置１００は、ガイド表示部１０及び操作台２０に立体物９７のスキャン結果を表示する。

図１４は、画像処理装置１００のスキャン完了時における画面表示例を示した図である。スキャンが完了すると、画像処理装置１００は、操作台２０にスキャン結果の平面画像９７１を表示する。一方、画像処理装置１００は、ガイド表示部１０にスキャン結果の三次元イメージ９７２を表示する。この三次元イメージ９７２は、図中、矢印で示すように、回転しながら表示され、ユーザがスキャン結果の立体形状を確認できるようになっている。また、画像処理装置１００は、ガイド表示部１０に、保存先の確認に関するガイド１７６と、支払い方法の確定に関するガイド１７７とを表示する。この状態で、ユーザが、携帯情報端末９０を操作台２０に置くと、画像処理装置１００は、操作台２０に保存指示画面１５５を表示する。保存指示画面１５５は、スキャン結果の平面画像９７１に加え、携帯情報端末９０に登録された保存先を表す保存先アイコン９２７を含む。ここで、保存先アイコン９２７は、立体物のスキャンデータの保存先として登録されたクラウドシステムを表す。その際、携帯情報端末９０では、アプリが表示部に保存ボタンを表示する。ユーザが、保存指示画面１５５において、保存料金を支払い、保存ボタンを押下すると、画像処理装置１００は、立体物９７のスキャンデータを、対応するクラウドシステムに保存する。

その後、画像処理装置１００は、図９に示したように、ガイド表示部１０に、ログアウトに関するガイド１２５と、荷物に関するガイド１２６とを表示する。これにより、ユーザが携帯情報端末９０を操作台２０から外すと、画像処理装置１００は、ログアウト処理を行い、ガイド表示部１０及び操作台２０に、ログアウトが完了した旨を表示する。また、携帯情報端末９０でも、アプリが表示部に、ログアウトした旨を表示する。

［制御装置の動作例］
図１５は、このような画面表示を行う制御装置７０の動作例を示したフローチャートである。

図示するように、制御装置７０では、まず、表示制御部７１が、ガイド表示部１０に待機中画面１０１を表示する（ステップ７０１）。

次に、検知制御部７３が、ユーザの接近を人感センサが検知したかどうかを判定する（ステップ７０２）。ユーザの接近を人感センサが検知したと判定されなければ、検知制御部７３は、ステップ７０２を繰り返すが、ユーザの接近を人感センサが検知したと判定されれば、制御装置７０は、公共空間でユーザが必要とする情報をプリントする公共プリント処理を行う（ステップ７０３）。

次いで、撮像制御部７５が、操作台２０に何かが置かれたことを撮像部６０が検知したかどうかを判定する（ステップ７０４）。操作台２０に何かが置かれたことを撮像部６０が検知したと判定されなければ、制御装置７０は、公共プリント処理を継続する。

一方、操作台２０に何かが置かれたことを撮像部６０が検知したと判定されれば、撮像制御部７５は、操作台２０に原稿９５が置かれたことを撮像部６０が検知したかどうかを判定する（ステップ７０５）。その結果、操作台２０に原稿９５が置かれたことを撮像部６０が検知したと判定されれば、制御装置７０は、二次元スキャン処理を行う（ステップ７０６）。

また、操作台２０に原稿９５が置かれたことを撮像部６０が検知したと判定されなければ、撮像制御部７５は、操作台２０に携帯情報端末９０が置かれたことを撮像部６０が検知したかどうかを判定する（ステップ７０７）。その結果、操作台２０に携帯情報端末９０が置かれたことを撮像部６０が検知したと判定されれば、制御装置７０は、プリント処理を行う（ステップ７０８）。尚、このとき、制御装置７０では、プリント処理を行うに先立ち、通信制御部７６が、ＮＦＣにより、携帯情報端末９０に登録された認証情報を取得し、認証情報に基づいて認証及びＷｉ−Ｆｉの接続設定を行い、Ｗｉ−Ｆｉにより、携帯情報端末９０から登録情報を受信しておくものとする。一方、操作台２０に携帯情報端末９０が置かれたことを撮像部６０が検知したと判定されなければ、制御装置７０は、三次元スキャン処理を行う（ステップ７０９）。

図１６は、図１５のステップ７０８のプリント処理を行う際の制御装置７０の動作例を示したフローチャートである。

図示するように、制御装置７０は、まず、ガイド表示部１０及び操作台２０にログイン完了画面１０２を表示する（ステップ７２１）。具体的には、表示制御部７１が、ログイン完了画面１０２の一部をガイド表示部１０に表示し、投影制御部７２が、ログイン完了画面１０２の残りの一部を、投影部３０を用いて操作台２０に表示する。

次に、投影制御部７２が、投影部３０を用いて操作台２０に印刷予約ファイルの印刷を指示するための印刷指示画面１０３を表示する印刷指示画面表示処理を行う（ステップ７２２）。

次いで、支払い処理部７７等が、登録情報において印刷予約ファイルに対して登録された支払い方法又はその場で選択された支払い方法で支払い処理を行う（ステップ７２３）。そして、通信制御部７６が、携帯情報端末９０で印刷ボタンが押下された旨をＷｉ−Ｆｉにより受信したかどうかを判定する（ステップ７２４）。携帯情報端末９０で印刷ボタンが押下された旨をＷｉ−Ｆｉにより受信したと判定されなければ、通信制御部７６は、ステップ７２４を繰り返すが、携帯情報端末９０で印刷ボタンが押下された旨をＷｉ−Ｆｉにより受信したと判定されれば、印刷制御部７４が、印刷部５０で印刷を行うように制御する（ステップ７２５）。

その後、印刷部５０による印刷が終了すると、投影制御部７２が、投影部３０を用いて操作台２０にログアウトガイド画面１０６を表示する（ステップ７２６）。

図１７は、図１５のステップ７０６の二次元スキャン処理を行う際の制御装置７０の動作例を示したフローチャートである。

図示するように、制御装置７０は、まず、操作台２０に原稿種類認識結果を表示する（ステップ７４１）。具体的には、撮像制御部７５が、撮像部６０が撮像した原稿９５の画像を取得し、原稿種類認識部７８が、例えばパターンマッチングにより原稿９５の種類を認識し、投影制御部７２が、投影部３０を用いて操作台２０にその認識の結果を表示する。

次に、撮像制御部７５が、原稿９５の位置が変更されたことを撮像部６０が検知したかどうかを判定する（ステップ７４２）。原稿９５の位置が変更されたことを撮像部６０が検知したと判定されれば、制御装置７０は、再び、ステップ７４１を行う。原稿９５の位置が変更されたことを撮像部６０が検知したと判定されなければ、撮像制御部７５は、予め定められた時間が経過したかどうかを判定する（ステップ７４３）。予め定められた時間が経過したと判定されなければ、撮像制御部７５は、再び、ステップ７４２を行う。

一方、予め定められた時間が経過したと判定されれば、撮像制御部７５は、撮像部６０を用いて、操作台２０に置かれた原稿９５をスキャンする（ステップ７４４）。これにより、投影制御部７２が、投影部３０を用いて操作台２０にスキャン画像９２を表示するスキャン画像表示処理を行う（ステップ７４５）。

次に、撮像制御部７５は、操作台２０に携帯情報端末９０が置かれたことを撮像部６０が検知したかどうかを判定する（ステップ７４６）。操作台２０に携帯情報端末９０が置かれたことを撮像部６０が検知したと判定されなければ、撮像制御部７５は、ステップ７４６を繰り返すが、操作台２０に携帯情報端末９０が置かれたことを撮像部６０が検知したと判定されれば、投影制御部７２が、投影部３０を用いて操作台２０にスキャンデータの保存を指示するための保存指示画面を表示する（ステップ７４７）。尚、このとき、通信制御部７６は、ＮＦＣにより、携帯情報端末９０に登録された認証情報を取得し、認証情報に基づいて認証及びＷｉ−Ｆｉの接続設定を行い、Ｗｉ−Ｆｉにより、携帯情報端末９０から登録情報を受信しておくものとする。

次いで、支払い処理部７７等が、登録情報において原稿９５の種類に対して登録された支払い方法又はその場で選択された支払い方法で支払い処理を行う（ステップ７４８）。そして、通信制御部７６が、携帯情報端末９０で保存ボタンが押下された旨をＷｉ−Ｆｉにより受信したかどうかを判定する（ステップ７４９）。携帯情報端末９０で保存ボタンが押下された旨をＷｉ−Ｆｉにより受信したと判定されなければ、通信制御部７６は、ステップ７４９を繰り返すが、携帯情報端末９０で保存ボタンが押下された旨をＷｉ−Ｆｉにより受信したと判定されれば、投影制御部７２は、保存指示画面１５４を消去する保存指示画面消去処理を行う（ステップ７５０）。そして、通信制御部７６は、原稿９５のスキャンデータを原稿９５の種類に対して登録された保存先に通信Ｉ／Ｆ５を介して送信し、保存する（ステップ７５１）。

［画像処理装置の公共プリント処理時の画面表示例］
本実施の形態において、図１５のステップ７０３の公共プリント処理で表示される画面は、大きく２つに分けられる。１つは、ガイド表示部１０に表示された情報Ａ〜Ｈを表す図形のうち、操作台２０に接触する操作により選択された図形を操作台２０に表示する、というものであり、もう１つは、ガイド表示部１０に表示された情報Ａ〜Ｈを表す図形のうち、ユーザの動作により選択された図形を操作台２０に表示する、というものである。

このうち、前者は、まず、ガイド表示部１０に表示された図形を操作台２０にはみ出させて、操作台２０での操作により選択させるものを含む。そして、これには、ガイド表示部１０に表示された図形のうち、操作台２０に近い側に表示された図形を操作台２０にはみ出させる態様（以下、「第１の態様」という）と、ガイド表示部１０に表示された図形のうち、はみ出させる領域での操作により選択された図形をはみ出させる態様（以下、「第２の態様」という）と、ガイド表示部１０に表示された図形のうち、はみ出させる領域以外の領域での操作により選択された図形をはみ出させる態様（以下、「第３の態様」という）と、ガイド表示部１０に表示された図形のうち、ユーザの操作によらずに選択された図形をはみ出させる態様（以下、「第４の態様」という）とが含まれる。尚、第２の態様と第３の態様とは、ガイド表示部１０に表示された図形のうち、操作台２０での操作により選択された図形をはみ出させる態様として捉えてもよい。

また、前者は、ガイド表示部１０に表示された図形を操作台２０にはみ出させずに、操作台２０での操作により選択させる態様（以下、「第５の態様」という）も含む。

一方、後者は、ガイド表示部１０に表示された情報Ａ〜Ｈを表す図形のうち、ユーザの動作により示された位置に表示された図形を操作台２０に表示する態様（以下、「第６の態様」という）と、ガイド表示部１０に表示された情報Ａ〜Ｈを表す図形のうち、ユーザの動作により示された識別情報に対応する図形を操作台２０に表示する態様（以下、「第７の態様」という）とを含む。

以下、これらの公共プリント処理の第１乃至第７の態様について、具体的に説明する。

図１８は、図１５のステップ７０３の公共プリント処理の第１の態様で表示される画面表示例を示した図である。図４の待機中画面１０１が表示された状態で、ユーザが接近すると、画像処理装置１００は、ガイド表示部１０に、情報Ａ〜Ｈを表す図形を縦一列に整列させた公共プリント画面２０１を表示する。その際、画像処理装置１００は、操作台２０の第１の領域の一例である選択候補表示領域２１１に、最も下の情報Ａを表す図形の一部を表示するものとする。この状態で、ユーザが、選択候補表示領域２１１内の情報Ａを表す図形にタッチし、破線矢印２３１の方へスワイプする操作を行うと、公共プリント画面２０１では、情報Ｂ〜Ｈを表す図形が、情報Ａ〜Ｇを表す図形があった位置に落ちてきて、情報Ａを表す図形が、情報Ｈを表す図形があった位置に移動する。このようにして情報Ａ〜Ｈを表す図形を移動させる操作を行いながら、欲しい情報を表す図形が選択候補表示領域２１１に来たときに、ユーザが、その欲しい情報を表す図形を、第１の操作の一例である実線矢印２４１の方向へスワイプする操作を行うと、画像処理装置１００は、操作台２０の第２の領域の一例である印刷対象表示領域２２１に、その図形を表示する。

図１９は、図１５のステップ７０３の公共プリント処理の第２の態様で表示される画面表示例を示した図である。図４の待機中画面１０１が表示された状態で、ユーザが接近すると、画像処理装置１００は、ガイド表示部１０に、情報Ａ〜Ｈを表す図形を円形に整列させた公共プリント画面２０２を表示する。その際、画像処理装置１００は、操作台２０の第１の領域の一例である選択候補表示領域２１２に、最も下の情報Ａを表す図形の一部を表示するものとする。この状態で、ユーザが、選択候補表示領域２１２にタッチし、第２の操作の一例である破線矢印２３２の方へスワイプする操作を行うと、公共プリント画面２０２では、情報Ａ〜Ｈを表す図形からなる円が左回りに回転する。つまり、情報Ａを表す図形が情報Ｈを表す図形があった位置に移動し、情報Ｂ〜Ｈを表す図形が情報Ａ〜Ｇを表す図形があった位置に移動する。このようにして情報Ａ〜Ｈを表す図形を移動させる操作を行いながら、欲しい情報を表す図形が選択候補表示領域２１２に来たときに、その欲しい情報を表す図形を、第１の操作の一例である実線矢印２４２の方向へスワイプする操作を行うと、画像処理装置１００は、操作台２０の第２の領域の一例である印刷対象表示領域２２２に、その図形を表示する。尚、上記では、実線矢印２４２を下方向とし、破線矢印２３２を右方向としたが、これには限らない。より一般化して、前者を第１の方向とし、後者を第１の方向とは異なる第２の方向としてよい。

図２０は、図１５のステップ７０３の公共プリント処理の第３の態様で表示される画面表示例を示した図である。図４の待機中画面１０１が表示された状態で、ユーザが接近すると、画像処理装置１００は、ガイド表示部１０に、情報Ａ〜Ｈを表す図形を縦一列に整列させた公共プリント画面２０３を表示する。その際、画像処理装置１００は、操作台２０の第１の領域の一例である選択候補表示領域２１３に、最も下の情報Ａを表す図形の一部を表示するものとする。この状態で、ユーザが、第２の領域の一例である印刷対象表示領域２２３にタッチし、第２の操作の一例である破線矢印２３３の方へスワイプする操作を行うと、公共プリント画面２０３では、情報Ｂ〜Ｈを表す図形が、情報Ａ〜Ｇを表す図形があった位置に落ちてきて、情報Ａを表す図形が、情報Ｈを表す図形があった位置に移動する。このようにして情報Ａ〜Ｈを表す図形を移動させる操作を行いながら、欲しい情報を表す図形が選択候補表示領域２１３に来たときに、ユーザが、その欲しい情報を表す図形を、第１の操作の一例である実線矢印２４３の方向へスワイプする操作を行うと、画像処理装置１００は、操作台２０の印刷対象表示領域２２３に、その図形を表示する。

図２１は、図１５のステップ７０３の公共プリント処理の第４の態様で表示される画面表示例を示した図である。図４の待機中画面１０１が表示された状態で、ユーザが接近すると、画像処理装置１００は、ガイド表示部１０に、情報Ａ〜Ｈを表す図形を縦一列に整列させた公共プリント画面２０４を表示する。その際、画像処理装置１００は、操作台２０の第１の領域の一例である選択候補表示領域２１４に、最も下の情報Ａを表す図形の一部を表示するものとする。その後、画像処理装置１００は、情報Ａ〜Ｈを表す図形を、ユーザの操作によらずに移動させる。即ち、公共プリント画面２０４では、予め定められた時間が経過すると、情報Ｂ〜Ｈを表す図形が、情報Ａ〜Ｇを表す図形があった位置に落ちてきて、情報Ａを表す図形が、情報Ｈを表す図形があった位置に移動する。このようにして情報Ａ〜Ｈを表す図形が移動する途中で、欲しい情報を表す図形が選択候補表示領域２１４に来たときに、ユーザが、その欲しい情報を表す図形を、第１の操作の一例である実線矢印２４４の方向へスワイプする操作を行うと、画像処理装置１００は、操作台２０の第２の領域の一例である印刷対象表示領域２２４に、その図形を表示する。

図２２は、図１５のステップ７０３の公共プリント処理の第５の態様で表示される画面表示例を示した図である。図４の待機中画面１０１が表示された状態で、ユーザが接近すると、画像処理装置１００は、ガイド表示部１０に、情報Ａ〜Ｈを表す図形を横一列に整列させた公共プリント画面２０５を表示する。この状態で、ユーザが、操作台２０にタッチし、第２の操作の一例である破線矢印２３５の方へスワイプする操作を行うと、公共プリント画面２０５では、情報Ｂ〜Ｈを表す図形が、情報Ａ〜Ｇを表す図形があった位置に移動し、情報Ａを表す図形が、情報Ｈを表す図形があった位置に移動する。このようにして情報Ａ〜Ｈを表す図形を移動させる操作を行いながら、欲しい情報を表す図形が、中央位置（太線で囲んで示す）に来たときに、ユーザが、その欲しい情報を表す図形を、第１の操作の一例である実線矢印２４５の方向へスワイプする操作を行うと、画像処理装置１００は、操作台２０に、その図形を表示する。尚、上記では、公共プリント画面２０５において、ユーザが右方向へスワイプする操作を行うことにより図形を移動させるようにしたが、これには限らない。ユーザの操作によらずに、例えば、予め定められた時間が経過すると図形を移動させるようにしてもよい。また、上記では、欲しい情報を表す図形がガイド表示部１０の中央位置に来たときにユーザがスワイプ操作を行うと、操作台２０にその図形が表示されるようにしたが、これには限らない。より一般化して、欲しい情報を表す図形が予め定めた状態となったときにユーザがスワイプ操作を行うと、操作台２０にその図形が表示されるようにしてもよい。

尚、これら第１乃至第５の態様では、情報Ａ〜Ｈを表す図形を整列させる際の順序について述べなかったが、この順序は、例えば、操作台２０の選択候補表示領域２１１〜２１４にユーザが必要とする度合いが高い情報を表す図形から順に表示させる順序とすればよい。ここで、ユーザが必要とする度合いは、例えば、撮像部６０が撮像したユーザの画像からユーザの性別、年齢等の属性を求め、この属性に基づいて算出すればよい。

また、図１５のステップ７０３の公共プリント処理において、ガイド表示部１０に表示された情報Ａ〜Ｈを表す図形から欲しい情報を表す図形を操作台２０に移動させる方法としては、上述した第６及び第７の態様も考えられる。

まず、図１５のステップ７０３の公共プリント処理の第６の態様を説明する。この第６の態様では、ガイド表示部１０上の位置を示す動作をユーザが行うと、画像処理装置１００が、ガイド表示部１０に表示された情報Ａ〜Ｈを表す図形のうち、ユーザが欲しい情報を表す図形が表示された位置を特定する。ここで、「位置を示す動作」としては、欲しい情報を表す図形が表示された位置に視線を向ける動作、欲しい情報を表す図形が表示された位置を指差す動作等がある。これにより、画像処理装置１００は、特定した位置に表示された図形の表示態様を変更する。例えば、特定した位置に表示された図形を、他の図形よりも大きくしたり、他の図形を離すことで目立たせたりする。その後、ユーザが操作台２０でスワイプ操作を行うと、画像処理装置１００は、特定した位置に表示された図形を操作台２０に移動させる。

次に、図１５のステップ７０３の公共プリント処理の第７の態様を説明する。この第７の態様では、ガイド表示部１０上の図形の識別情報を指で示す動作をユーザが行うと、画像処理装置１００が、ガイド表示部１０に表示された情報Ａ〜Ｈを表す図形のうち、ユーザが欲しい情報を表す図形に関連付けられた識別情報を特定する。ここで、「識別情報を指で示す動作」としては、識別情報が番号である場合に、その番号に応じた本数の指を立てる動作等がある。これにより、画像処理装置１００は、特定した識別情報に関連付けられた図形の表示態様を変更する。例えば、特定した識別情報に関連付けられた図形を、他の図形よりも大きくしたり、他の図形を離すことで目立たせたりする。その後、ユーザが操作台２０でスワイプ操作を行うと、画像処理装置１００は、特定した識別情報に関連付けられた図形を操作台２０に移動させる。

尚、これら第６及び第７の態様では、情報Ａ〜Ｈを表す図形を整列させることについて述べなかったが、これは、ガイド表示部１０上の図形をユーザの動作によって直接特定するので、情報Ａ〜Ｈを表す図形を選択候補とする順序を考慮しなくてよいからである。

［制御装置の公共プリント処理時の動作例］
図２３は、図１５のステップ７０３の公共プリント処理の第１乃至第３の態様を行う際の制御装置７０の動作例を示したフローチャートである。

図示するように、制御装置７０では、まず、表示制御部７１が、ガイド表示部１０に、情報を表す図形を整列させて表示する（ステップ８０１）。具体的には、情報を表す図形を、第１及び第３の態様では、図１８及び図２０のように縦方向に整列させて表示し、第２の態様では、図１９のように円形に整列させて表示する。

次に、検知制御部７３が、操作台２０での第１のスワイプ操作を操作検知部４０が検知したかどうかを判定する（ステップ８０２）。ここで、第１のスワイプ操作とは、第１の態様では、図１８の破線矢印２３１の方向へスワイプする操作であり、第２の態様では、図１９の破線矢印２３２の方向へスワイプする操作であり、第３の態様では、図２０の破線矢印２３３の方向へスワイプする操作である。

操作台２０での第１のスワイプ操作を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了する。一方、操作台２０での第１のスワイプ操作を操作検知部４０が検知したと判定されれば、表示制御部７１が、ガイド表示部１０に、図形を移動させて表示し、投影制御部７２が、投影部３０を用いて、操作台２０に、選択候補表示領域内の図形を変更して表示する（ステップ８０３）。具体的には、第１及び第３の態様では、図１８及び図２０のように図形を縦方向に移動させて表示し、第２の態様では、図１９のように図形を円周方向に移動させて表示する。

次いで、検知制御部７３が、操作台２０での第２のスワイプ操作を操作検知部４０が検知したかどうかを判定する（ステップ８０４）。ここで、第２のスワイプ操作とは、第１の態様では、図１８の実線矢印２４１の方向へスワイプする操作であり、第２の態様では、図１９の実線矢印２４２の方向へスワイプする操作であり、第３の態様では、図２０の実線矢印２４３の方向へスワイプする操作である。

操作台２０での第２のスワイプ操作を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了する。一方、操作台２０での第２のスワイプ操作を操作検知部４０が検知したと判定されれば、投影制御部７２が、投影部３０を用いて、操作台２０に、選択候補表示領域から印刷対象表示領域へ図形を移動させて表示する（ステップ８０５）。

その後、検知制御部７３が、操作台２０での印刷ボタンの押下を操作検知部４０が検知したかどうかを判定する（ステップ８０６）。操作台２０での印刷ボタンの押下を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了するが、操作台２０での印刷ボタンの押下を操作検知部４０が検知したと判定されれば、印刷制御部７４が、印刷部５０で印刷を行うように制御する（ステップ８０７）。

図２４は、図１５のステップ７０３の公共プリント処理の第４の態様を行う際の制御装置７０の動作例を示したフローチャートである。

図示するように、制御装置７０では、まず、表示制御部７１が、ガイド表示部１０に、情報を表す図形を整列させて表示する（ステップ８２１）。具体的には、情報を表す図形を、図２１のように縦方向に整列させて表示する。

次に、表示制御部７１は、予め定められた時間が経過したかどうかを判定する（ステップ８２２）。

予め定められた時間が経過したと判定されなければ、表示制御部７１は、処理を終了する。一方、予め定められた時間が経過したと判定されれば、表示制御部７１は、ガイド表示部１０に、図形を移動させて表示し、投影制御部７２が、投影部３０を用いて、操作台２０に、選択候補表示領域内の図形を変更して表示する（ステップ８２３）。具体的には、図２１のように図形を縦方向に移動させて表示する。

次いで、検知制御部７３が、操作台２０でのスワイプ操作を操作検知部４０が検知したかどうかを判定する（ステップ８２４）。ここで、スワイプ操作とは、図２１の実線矢印２４４の方向へスワイプする操作である。

操作台２０でのスワイプ操作を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了する。一方、操作台２０でのスワイプ操作を操作検知部４０が検知したと判定されれば、投影制御部７２が、投影部３０を用いて、操作台２０に、選択候補表示領域から印刷対象表示領域へ図形を移動させて表示する（ステップ８２５）。

その後、検知制御部７３が、操作台２０での印刷ボタンの押下を操作検知部４０が検知したかどうかを判定する（ステップ８２６）。操作台２０での印刷ボタンの押下を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了するが、操作台２０での印刷ボタンの押下を操作検知部４０が検知したと判定されれば、印刷制御部７４が、印刷部５０で印刷を行うように制御する（ステップ８２７）。

図２５は、図１５のステップ７０３の公共プリント処理の第５の態様を行う際の制御装置７０の動作例を示したフローチャートである。

図示するように、制御装置７０では、まず、表示制御部７１が、ガイド表示部１０に、情報を表す図形を整列させて表示する（ステップ８４１）。具体的には、情報を表す図形を、図２２のように横方向に整列させて表示する。

次に、検知制御部７３が、操作台２０での第１のスワイプ操作を操作検知部４０が検知したかどうかを判定する（ステップ８４２）。ここで、第１のスワイプ操作とは、図２２の破線矢印２３５の方向へスワイプする操作である。

操作台２０での第１のスワイプ操作を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了する。一方、操作台２０での第１のスワイプ操作を操作検知部４０が検知したと判定されれば、表示制御部７１が、ガイド表示部１０に、図形を移動させて表示し、投影制御部７２が、投影部３０を用いて、操作台２０に、選択候補表示領域内の図形を変更して表示する（ステップ８４３）。具体的には、図２２のように図形を横方向に移動させて表示する。

次いで、検知制御部７３が、操作台２０での第２のスワイプ操作を操作検知部４０が検知したかどうかを判定する（ステップ８４４）。ここで、第２のスワイプ操作とは、図２２の実線矢印２４５の方向へスワイプする操作である。

操作台２０での第２のスワイプ操作を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了する。一方、操作台２０での第２のスワイプ操作を操作検知部４０が検知したと判定されれば、表示制御部７１及び投影制御部７２が、ガイド表示部１０の中央位置に表示された図形を操作台２０へ移動する（ステップ８４５）。具体的には、表示制御部７１が、ガイド表示部１０において、中央位置に表示された図形を消去し、投影制御部７２が、投影部３０を用いて、操作台２０に、その消去した図形を表示する。

その後、検知制御部７３が、操作台２０での印刷ボタンの押下を操作検知部４０が検知したかどうかを判定する（ステップ８４６）。操作台２０での印刷ボタンの押下を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了するが、操作台２０での印刷ボタンの押下を操作検知部４０が検知したと判定されれば、印刷制御部７４が、印刷部５０で印刷を行うように制御する（ステップ８４７）。

図２６は、上記の公共プリント処理の第６及び第７の態様を行う制御装置７０の動作例を示したフローチャートである。

図示するように、制御装置７０では、まず、撮像制御部７５が、ユーザの予め定められた動作を撮像部６０が検知したかどうかを判定する（ステップ８６１）。ここで、予め定められた動作とは、第６の態様では、ガイド表示部１０上の図形を見たり指差したりすることによりその図形を指定する動作であり、第７の態様では、ガイド表示部１０上の図形の識別情報を指で示すことによりその図形を指定する動作である。

ユーザの予め定められた動作を撮像部６０が検知したと判定されなければ、撮像制御部７５は、処理を終了する。一方、ユーザの予め定められた動作を撮像部６０が検知したと判定されれば、表示制御部７１は、ガイド表示部１０に、指定された図形をその表示態様を変更して表示する（ステップ８６２）。具体的には、指定された図形を、他の図形よりも大きくしたり、他の図形を離すことで目立たせたりする。

次いで、検知制御部７３が、操作台２０でのスワイプ操作を操作検知部４０が検知したかどうかを判定する（ステップ８６３）。ここで、スワイプ操作とは、例えば、操作台２０の手前の方向へスワイプする操作である。

操作台２０でのスワイプ操作を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了する。一方、操作台２０でのスワイプ操作を操作検知部４０が検知したと判定されれば、表示制御部７１及び投影制御部７２が、ガイド表示部１０上の指定された図形を操作台２０へ移動する（ステップ８６４）。具体的には、表示制御部７１が、ガイド表示部１０において、指定された図形を消去し、投影制御部７２が、投影部３０を用いて、操作台２０に、その消去した図形を表示する。

その後、検知制御部７３が、操作台２０での印刷ボタンの押下を操作検知部４０が検知したかどうかを判定する（ステップ８６５）。操作台２０での印刷ボタンの押下を操作検知部４０が検知したと判定されなければ、検知制御部７３は、処理を終了するが、操作台２０での印刷ボタンの押下を操作検知部４０が検知したと判定されれば、印刷制御部７４が、印刷部５０で印刷を行うように制御する（ステップ８６６）。

［プログラム］
本実施の形態における制御装置７０が行う処理は、例えば、アプリケーションソフトウェア等のプログラムとして用意される。

即ち、本実施の形態を実現するプログラムは、コンピュータに、接触する操作を検知しない第１の表示面に複数の表示要素を表示する機能と、第１の表示面に表示された複数の表示要素のうち、第２の表示面に接触する操作により選択された特定の表示要素を、第２の表示面に表示する機能とを実現させるためのプログラムとして捉えられる。

また、本実施の形態を実現するプログラムは、コンピュータに、操作者の動作を検知する機能と、接触する操作を検知しない第１の表示面に複数の表示要素を表示する機能と、第１の表示面に表示された複数の表示要素のうち、検知された動作により選択された特定の表示要素を、第２の表示面に接触する操作に応じて、第２の表示面に表示する機能とを実現させるためのプログラムとしても捉えられる。

尚、本実施の形態を実現するプログラムは、通信手段により提供することはもちろん、ＣＤ−ＲＯＭ等の記録媒体に格納して提供することも可能である。

１０…ガイド表示部、２０…操作台、３０…投影部、４０…操作検知部、５０…印刷部、６０…撮像部、７０…制御装置、７１…表示制御部、７２…投影制御部、７３…検知制御部、７４…印刷制御部、７５…撮像制御部、７６…通信制御部、７７…支払い処理部、７８…原稿種類認識部、７９…スキャンデータ処理部、１００…画像処理装置

Claims (17)

1. 接触する操作を検知しない第１の表示面に複数の表示要素を表示する第１の表示手段と、
   前記第１の表示面に表示された前記複数の表示要素のうち、第２の表示面に接触する操作により選択された特定の表示要素を、当該第２の表示面に表示する第２の表示手段と
   を備えたことを特徴とする表示装置。
2. 前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、少なくとも１つの表示要素の全部又は一部を前記第２の表示面の第１の領域に表示し、当該少なくとも１つの表示要素のうち、当該第１の領域に接触する第１の操作により選択された前記特定の表示要素を、当該第２の表示面の第２の領域に表示することを特徴とする請求項１に記載の表示装置。
3. 前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、前記第２の表示面に近い側に表示された一の表示要素の全部又は一部を、前記少なくとも１つの表示要素の全部又は一部として、前記第１の領域に表示することを特徴とする請求項２に記載の表示装置。
4. 前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、前記少なくとも１つの表示要素の全部又は一部を、前記第２の表示面に接触する第２の操作に応じて、前記第１の領域に表示することを特徴とする請求項２に記載の表示装置。
5. 前記第１の操作は、前記第１の領域の接触する位置を第１の方向へ移動させる操作であり、
   前記第２の操作は、前記第１の領域の接触する位置を第２の方向へ移動させる操作であることを特徴とする請求項４に記載の表示装置。
6. 前記第１の操作は、前記第１の領域の接触する位置を移動させる操作であり、
   前記第２の操作は、前記第２の領域の接触する位置を移動させる操作であることを特徴とする請求項４に記載の表示装置。
7. 前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、操作者の操作によらずに順次選択された前記少なくとも１つの表示要素の全部又は一部を、前記第１の領域に表示することを特徴とする請求項２に記載の表示装置。
8. 前記第１の表示手段は、前記第１の表示面に表示された前記複数の表示要素を移動させ、
   前記第２の表示手段は、前記第１の表示面に表示された前記複数の表示要素のうち、前記第２の表示面に接触する第１の操作がなされた時点で移動により予め定められた状態となっている表示要素を、前記特定の表示要素として、当該第２の表示面に表示することを特徴とする請求項１に記載の表示装置。
9. 前記第１の表示手段は、前記第２の表示面に接触する第２の操作に応じて、前記第１の表示面に表示された前記複数の表示要素を移動させることを特徴とする請求項８に記載の表示装置。
10. 前記第１の表示手段は、操作者の操作によらずに、前記第１の表示面に表示された前記複数の表示要素を移動させることを特徴とする請求項８に記載の表示装置。
11. 操作者の動作を検知する検知手段と、
    接触する操作を検知しない第１の表示面に複数の表示要素を表示する第１の表示手段と、
    前記第１の表示面に表示された前記複数の表示要素のうち、前記検知手段により検知された前記動作により選択された特定の表示要素を、第２の表示面に接触する操作に応じて、当該第２の表示面に表示する第２の表示手段と
    を備えたことを特徴とする表示装置。
12. 前記動作は、前記特定の表示要素が表示された前記第１の表示面上の位置を示す動作であることを特徴とする請求項１１に記載の表示装置。
13. 前記第１の表示面上の位置を示す動作は、当該位置を見る動作であることを特徴とする請求項１２に記載の表示装置。
14. 前記第１の表示面上の位置を示す動作は、当該位置を指差す動作であることを特徴とする請求項１２に記載の表示装置。
15. 前記動作は、前記特定の表示要素の識別情報を指で示す動作であることを特徴とする請求項１１に記載の表示装置。
16. コンピュータに、
    接触する操作を検知しない第１の表示面に複数の表示要素を表示する機能と、
    前記第１の表示面に表示された前記複数の表示要素のうち、第２の表示面に接触する操作により選択された特定の表示要素を、当該第２の表示面に表示する機能と
    を実現させるためのプログラム。
17. コンピュータに、
    操作者の動作を検知する機能と、
    接触する操作を検知しない第１の表示面に複数の表示要素を表示する機能と、
    前記第１の表示面に表示された前記複数の表示要素のうち、検知された前記動作により選択された特定の表示要素を、第２の表示面に接触する操作に応じて、当該第２の表示面に表示する機能と
    を実現させるためのプログラム。