JP2016071676A - 情報処理装置、携帯端末装置、および情報処理システム - Google Patents

Abstract

【課題】操作用画像を表示可能な表示面積をより増やすことを可能とし、かつ、携帯端末装置を所持するユーザーが所望の操作用画像を携帯端末装置に表示させて情報処理装置の操作を行うことを可能とする。【解決手段】画像形成装置は、表示部、検出部、記憶部、通信部、通信制御部、および指示受付部を備える。表示部は、第１の操作用画像を表示する。検出部は、予め定められた携帯端末装置が表示部に接近する接近方向を検出する。記憶部は、第１の操作用画像に加えて、複数の第２の操作用画像を接近方向に対応付けて記憶する。通信制御部は、検出部が検出した接近方向に対応付けられた第２の操作用画像を前記通信部に前記携帯端末装置へ送信させるとともに、携帯端末装置において入力された第２の操作用画像に対する操作に対応する指示を携帯端末装置から受信させる。指示受付部は、通信部が受信した指示を受け付ける。【選択図】図９

Description

本発明は、情報処理装置、携帯端末装置、および情報処理システムに関し、特に、ユーザーによる操作の用に供する操作用画像を表示する技術に関する。

画像形成装置等の情報処理装置は、ユーザーによる操作の用に供する操作用画像を表示する表示部を備えている。ユーザーは、当該表示部に表示された操作用画像に含まれる操作ボタンを選択する操作等を行うことにより、情報処理装置に対して様々な指示を入力することができる。

また、情報処理装置の表示部に加えて、外部の携帯端末装置の表示部に操作用画像を表示する技術が知られている（例えば、特許文献１や特許文献２等参照）。外部の携帯端末装置を情報処理装置の操作用画像を表示する表示部として用いることで、操作用画像を表示可能な表示面積を増やすことができるため、操作用画像の視認性や操作性が向上する。また、操作用画像を表示可能な表示面積を確保しつつ、情報処理装置の表示部を小型化することが可能となるため、情報処理装置の製造コストを抑えることができる。

特開２０１３−４１５１９号公報 特開２０１２−２１２４０２号公報

上記の技術では、携帯端末装置に表示される操作用画像が情報処理装置側で指定された操作用画像に限られるため、携帯端末装置を所持するユーザーが所望の操作用画像を携帯端末装置に表示させて操作を行うことができない。また、操作用画像を表示可能な表示面積を増やすことができるものの、その増加面積は携帯端末装置の表示部の面積に限られる。

本発明は、上記の事情に鑑みなされたものであり、操作用画像を表示可能な表示面積をより増やすことが可能であり、かつ、携帯端末装置を所持するユーザーが所望の操作用画像を携帯端末装置に表示させて情報処理装置の操作を行うことが可能にすることを目的とする。

本発明の一局面にかかる情報処理装置は、ユーザーによる操作の用に供する第１の操作用画像を表示する表示部と、前記表示部による表示動作を制御する表示制御部と、予め定められた携帯端末装置が前記表示部に接近する接近方向を検出する検出部と、前記表示部に表示される前記第１の操作用画像に加えて、複数の第２の操作用画像を前記接近方向に対応付けて記憶する記憶部と、前記携帯端末装置とデータの送受信が可能な通信部と、前記検出部が検出した接近方向に対応付けられた第２の操作用画像を前記記憶部から読み出して、前記通信部に、当該読み出した第２の操作用画像を前記携帯端末装置へ送信させるとともに、前記携帯端末装置において入力された前記第２の操作用画像に対する操作に対応する指示を前記携帯端末装置から受信させる通信制御部と、前記表示部に表示させる第１の操作用画像に対する操作に対応する指示に加えて、前記通信部が受信した指示を受け付ける指示受付部と、前記指示受付部が受け付けた指示に対応する処理を実行する実行部と、を備える情報処理装置である。

また、本発明の別の一局面にかかる携帯端末装置は、外部の情報処理装置とデータの送受信が可能な通信部と、前記通信部による通信動作を制御する通信制御部であって、前記情報処理装置に記憶された複数の操作用画像のうち、本携帯端末装置が前記情報処理装置の表示部に接近する接近方向に対応付けられて記憶された操作用画像を、前記通信部に前記情報処理装置から受信させる通信制御部と、表示部と、前記通信部が受信した操作用画像を前記表示部に表示させる表示制御部と、前記表示部に表示される操作用画像に対する操作に対応する指示を受け付ける指示受付部と、を備え、前記通信制御部は、前記通信部に、前記指示受付部が受け付けた指示を前記情報処理装置へ送信させる、携帯端末装置である。

また、本発明の別の一局面にかかる情報処理システムは、上記の情報処理装置と携帯端末装置とを備える情報処理システムである。

上記の本発明によれば、操作用画像を表示可能な表示面積をより増やすことが可能であり、かつ、携帯端末装置を所持するユーザーが所望の操作用画像を携帯端末装置に表示させて情報処理装置の操作を行うことができる。

本発明の一実施形態にかかる情報処理システムの構成を示す斜視図である。 本発明の一実施形態にかかる情報処理システムの内部構成を示すブロック図である。 本発明の一実施形態にかかる画像形成装置の表示部の構成を示す正面図である。 本発明の一実施形態にかかる携帯端末装置の構成を示す正面図である。 本発明の一実施形態にかかる画像形成装置の記憶部に記憶されるデータの内容を示す図である。 本発明の一実施形態にかかる携帯端末装置に表示される第２の操作用画像を画像形成装置の表示部の上下左右方向に仮想的に配置した図である。 本発明の一実施形態にかかる携帯端末装置を画像形成装置の表示部に上方向から接近させた場合に、携帯端末装置に表示される第２の操作用画像を示す図である。 本発明の一実施形態にかかる携帯端末装置を画像形成装置の表示部に右方向から接近させた場合に、携帯端末装置に表示される第２の操作用画像を示す図である。 本発明の一実施形態にかかる画像形成装置および携帯端末装置の動作の流れを示すフローチャートである。 変形例にかかる画像形成装置の記憶部に記憶されるデータの内容を示す図である。 変形例にかかる携帯端末装置を横向きの姿勢で画像形成装置の表示部の右方向から接近させた場合に、携帯端末装置に表示される第２の操作用画像を示す図である。 、変形例１にかかる画像形成装置および携帯端末装置の動作の流れを示すフローチャートである。 変形例２にかかる画像形成装置において、表示部に表示される表示画像の一例を示す図である。 変形例３にかかる携帯端末装置の内部構成を示すブロック図である。 変形例３にかかる画像形成装置および携帯端末装置の動作の流れを示すフローチャートである。

以下、本発明の一実施形態にかかる情報処理装置、携帯端末装置、および情報処理システムについて図面を参照して説明する。図１は、本発明の一実施形態にかかる情報処理システムの構成を示す斜視図である。図２は、本発明の一実施形態にかかる情報処理システムの内部構成を示すブロック図である。

情報処理システム１は、情報処理装置の一例としての画像形成装置１０と、画像形成装置１０と通信可能な携帯端末装置２０とを備えている。まず、画像形成装置１０の構成について説明する。

画像形成装置１０は、例えば、コピー機能、プリンター機能、スキャナー機能、及びファクシミリ機能等の複数の機能を兼ね備えた複合機である。画像形成装置１０は、装置本体１１と、装置本体１１の上方に配置された画像読取部１１０と、画像読取部１１０と装置本体１１との間に設けられた連結部１２とから概略構成される。

装置本体１１は、画像形成部１２０や給紙部１３等を備えて構成されている。

画像形成装置１０が画像形成動作を行う場合は、画像読取部１１０により読み取られた画像等に基づいて、画像形成部１２０（実行部）が、給紙部１３から給紙される記録紙にトナー像を形成する。その後、記録紙上に形成されたトナー像は、不図示の定着部により熱定着される。定着処理の完了した画像形成済みの記録紙は、排出トレイ１４に排出される。

画像形成装置１０の外郭を構成する筐体の前面には、表示部１３０が配置されている。図３は、表示部１３０の構成を示す正面図である。表示部１３０は、ディスプレイ部１３２およびディスプレイ部１３２を収容する筐体部１３１からなる。ディスプレイ部１３２は、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（ＯＬＥＤ：Organic Light-Emitting Diode）ディスプレイを含んで構成され、ユーザーによる操作の用に供する第１の操作用画像Ｄ１等を表示する。第１の操作用画像Ｄ１は、画像形成や画像読取に関する指示に対応付けられた複数の指示ボタンを含む。例えば図３に示す例では、第１の操作用画像Ｄ１には、画像形成対象の記録紙を選択する指示に対応付けられた用紙選択ボタンｄ１やコピー濃度を選択する指示に対応付けられたコピー濃度ボタンｄ２等が設けられている。

筐体部１３１の四方の端部には、それぞれ、予め定められた携帯端末装置２０が予め定められた距離以内に位置するか否かを検出する接近検出センサーとしてＮＦＣ（Near Field Communication）リーダー１６Ａ、１６Ｂ、１６Ｃ、１６Ｄが設けられている。ＮＦＣリーダー１６Ａは、検出方向を上方向に向けて設置され、ＮＦＣリーダー１６Ｂは、検出方向を左方向に向けて設置され、ＮＦＣリーダー１６Ｃは、検出方向を下方向に向けて設置され、ＮＦＣリーダー１６Ｄは、検出方向を右方向に向けて設置されている。検出部１６０は、ＮＦＣリーダー１６Ａ、１６Ｂ、１６Ｃ、１６Ｄのうち、何れのＮＦＣリーダーから検出信号が出力されているかを特定することにより、携帯端末装置２０が表示部１３０に接近する接近方向を検出することができる。例えば、検出部１６０は、ＮＦＣリーダー１６Ａから検出信号が出力されている場合に、携帯端末装置２０が表示部１３０の上方向から接近していることを検出する。

なお、ＮＦＣリーダー１６Ａ、１６Ｂ、１６Ｃ、１６Ｄは、その配置位置を除いて同じ構成である。このため以下では、ＮＦＣリーダーごとに区別して説明する場合に符号「１６」の末尾に「Ａ」や「Ｂ」等を付けて表記し、ＮＦＣリーダーごとに区別しないで説明する場合に符号「１６」の末尾に「Ａ」や「Ｂ」等を付けずに「ＮＦＣリーダー１６」と表記する。

ＮＦＣリーダー１６は、携帯端末装置２０に設けられた被検出部としてのＮＦＣタグ２４１（図４参照）との間でデータの送受信を行うＮＦＣコイル（不図示）を備える。携帯端末装置２０がＮＦＣリーダー１６に接近すると、携帯端末装置２０のＮＦＣタグ２４１に内蔵されたアンテナコイル（不図示）とＮＦＣリーダー１６に内蔵されたＮＦＣコイルとの間の電磁誘導により、ＮＦＣタグ２４１のアンテナコイルに電力が供給される。ＮＦＣタグ２４１は、当該供給された電力を用いて、ＮＦＣタグ２４１のメモリーに記憶された携帯端末装置２０に固有の識別番号、および、携帯端末装置２０のＭＡＣアドレス（アドレス情報）をＮＦＣリーダー１６へ送信する。

検出部１６０は、ＮＦＣリーダー１６を介して、上記の識別番号およびＭＡＣアドレスを示す情報を受信する。検出部１６０は、受信した識別番号を用いて、ＮＦＣリーダー１６に接近した携帯端末装置２０が予め定められた装置であるか否かを判定する。記憶部１５０には、操作用画像の送信を許可する装置を識別するための識別番号が予め記憶されている。検出部１６０は、受信した識別番号と記憶部１５０に記憶される識別番号とが一致する場合に、ＮＦＣリーダー１６に接近した携帯端末装置２０が予め定められた装置であると判定する。これにより、検出部１６０は、操作用画像の送信を許可する予め定められた携帯端末装置２０が、表示部１３０に接近する接近方向を検出することができる。

記憶部１５０は、ＨＤＤ（Hard Disk Drive）等の大容量の記憶装置である。

ネットワークインターフェイス部１７０（通信部）は、無線ＬＡＮボード等の通信モジュールから構成される。当該ネットワークインターフェイス部１７０は、後述する通信制御部１０４により制御される。

画像形成装置１０は、更に、制御ユニット１００を備えている。制御ユニット１００は、ＣＰＵ(Central Processing Unit)、ＲＡＭ、及びＲＯＭ等から構成される。制御ユニット１００は、上記のＲＯＭ又は記憶部１５０に記憶された情報処理プログラムが上記のＣＰＵに実行されることにより、制御部１０１、表示制御部１０２、指示受付部１０３、および通信制御部１０４として機能する。なお、制御ユニット１００の制御部１０１、表示制御部１０２、指示受付部１０３、および通信制御部１０４は、情報処理プログラムに基づく動作によらず、それぞれハード回路により構成されてもよい。

制御部１０１は、画像形成装置１０の全体的な動作制御を司る。制御部１０１は、画像読取部１１０、画像形成部１２０、表示部１３０、操作部１４０、記憶部１５０、検出部１６０、およびネットワークインターフェイス部１７０等と接続されている。制御部１０１は、接続されている上記各機構の動作制御や、各機構との間での信号又はデータの送受信を行う。

表示制御部１０２は、表示部１３０による表示動作を制御する機能を有する。

指示受付部１０３は、表示部１３０に表示された第１の操作用画像に対する操作に対応する指示を受け付ける機能を有する。また、詳細は後述するが、指示受付部１０３は、携帯端末装置２０において入力された指示を受け付ける機能を有する。

通信制御部１０４は、ネットワークインターフェイス部１７０を制御して、携帯端末装置２０等とデータの送受信を行う機能を有する。具体的には、通信制御部１０４は、検出部１６０がＮＦＣタグ２４１から取得した携帯端末装置２０のＭＡＣアドレスを用いて、携帯端末装置２０との間で通信経路を確立する。そして、通信制御部１０４は、記憶部１５０から第１の操作用画像Ｄ１とは異なる第２の操作用画像Ｄ２〜Ｄ５（図５参照）を読み出し、当該読み出した第２の操作用画像Ｄ２〜Ｄ５のうちの何れか１つの操作用画像を、ネットワークインターフェイス部１７０に携帯端末装置２０へ送信させる。

続いて、携帯端末装置２０の構成について説明する。携帯端末装置２０は、スマートフォン等の携帯モバイル機器であって、制御ユニット２００、表示部２１０、向きセンサー２２０、記憶部２３０、およびネットワークインターフェイス部２４０等を備えている。

ネットワークインターフェイス部２４０は、無線ＬＡＮチップ等の通信モジュールから構成される。当該ネットワークインターフェイス部２４０は、後述する通信制御部２０４により制御される。

表示部２１０は、液晶ディスプレイや有機ＥＬディスプレイ等から構成されるディスプレイ２１１（表示部）および当該ディスプレイ２１１の表示画面部分の前面に配置されるタッチパネル２１２を有している。

携帯端末装置２０は、画像形成装置１０から送信された第２の操作用画像をディスプレイ２１１が表示する動作モード（操作用画像表示モード）を有している。当該操作用画像表示モードにおいて、ディスプレイ２１１は、後述する表示制御部２０２による制御のもと、図４に示す表示画像Ｄ６を表示する。そして、ネットワークインターフェイス部２４０が画像形成装置１０から送信された第２の操作用画像を受信すると、ディスプレイ２１１は、当該第２の操作用画像を表示画像Ｄ６の空白部分に表示する。なお、ディスプレイ２１１は、画像形成装置１０に搭載された表示部１３０のディスプレイよりも、高輝度、高解像度、高応答速度を有するディスプレイである。

タッチパネル２１２は、ディスプレイ２１１に表示された第２の操作用画像に対する操作を受け付ける操作部としての役割を果たす。

向きセンサー２２０は、所謂ジャイロセンサーであって、携帯端末装置２０の向きを検出する。向きセンサー２２０は、携帯端末装置２０の向きを検出すると、当該検出した向きを示す検出信号を後述する制御ユニット２００の通信制御部２０４等に出力する。

記憶部２３０は、ＨＤＤ（Hard Disk Drive）等の大容量の記憶装置である。

制御ユニット２００は、ＣＰＵ、ＲＡＭ、及びＲＯＭ等から構成される。制御ユニット２００は、上記のＲＯＭ又は記憶部２３０に記憶された携帯端末装置制御プログラムが上記のＣＰＵに実行されることにより、制御部２０１、表示制御部２０２、指示受付部２０３、および通信制御部２０４として機能する。なお、制御ユニット２００の制御部２０１、表示制御部２０２、指示受付部２０３、および通信制御部２０４は、上記の携帯端末装置制御プログラムに基づく動作によらず、それぞれハード回路により構成されてもよい。

制御部２０１は、携帯端末装置２０の全体的な動作制御を司る。制御部２０１は、表示部２１０、向きセンサー２２０、記憶部２３０、ネットワークインターフェイス部２４０等と接続されている。制御部２０１は、接続されている上記各機構の動作制御や、各機構との間での信号又はデータの送受信を行う。

表示制御部２０２は、ディスプレイ２１１による表示動作を制御する機能を有する。

通信制御部２０４は、ネットワークインターフェイス部２４０を制御して、画像形成装置１０とデータの送受信を行う。通信制御部２０４は、画像形成装置１０から送信された第２の操作用画像を受信する機能を有する。また、通信制御部２０４は、ネットワークインターフェイス部２４０を制御して、後述する指示受付部２０３が受け付けた第２の操作用画像に対する操作に対応する指示を画像形成装置１０に送信する機能を有する。

指示受付部２０３は、タッチパネル２１２から出力される検知信号に基づきユーザーにより入力されたユーザー操作を特定する。そして、指示受付部２０３は、表示部１３０に表示された第２の操作用画像に対する操作に対応する指示を受け付ける。

続いて、図５〜図８を用いて、上記の構成を備える情報処理システム１について更に詳細に説明する。

図５は、記憶部１５０に記憶されるデータの内容を示す図である。本図に示されるように、記憶部１５０には、第１の操作用画像Ｄ１および第２の操作用画像Ｄ２〜Ｄ５が記憶されている。第２の操作用画像Ｄ２〜Ｄ５は、携帯端末装置２０が表示部１３０に接近する接近方向に対応付けて記憶部１５０に記憶されている。図５に示す例では、第２の操作用画像Ｄ２〜Ｄ５は、表示部１３０に対する上下左右方向の何れかの方向に対応付けられている。

本実施の形態にかかる画像形成装置１０では、携帯端末装置２０が表示部１３０に接近する接近方向に対応付けられた第２の操作用画像Ｄ２〜Ｄ５を携帯端末装置２０に表示させるため、表示部１３０の上下左右方向の空間には、図６の破線で示すような第２の操作用画像Ｄ２〜Ｄ５が仮想的に配置されていると考えることができる。そして、携帯端末装置２０を表示部１３０の上下左右方向の空間に位置させると、仮想的に配置された第２の操作用画像Ｄ２〜Ｄ５が携帯端末装置２０のディスプレイ２１１に表示される。例えば、携帯端末装置２０を表示部１３０の上方向から接近させた場合、図７に示すように、携帯端末装置２０のディスプレイ２１１には、表示画像Ｄ６の空白部分に第２の操作用画像Ｄ２が表示された画像が表示される。第２の操作用画像Ｄ２には、コピー濃度や原稿サイズが設定された印刷ジョブプログラム１に対応付けられたプログラムボタンｄ４等が設けられている。ユーザーにより当該プログラムボタンｄ４の選択操作がなされた場合、指示受付部２０３は、印刷ジョブプログラム１の実行指示を受け付ける。

また、第２の操作用画像Ｄ２には、画像形成対象の画像を表示するプレビュー画面が設けられている。携帯端末装置２０のディスプレイ２１１は、画像形成装置１０に搭載された表示部１３０のディスプレイよりも、高解像度を有するディスプレイであるため、画質が高い方が好ましいプレビュー画面等の画像を、画像形成装置１０側の表示部１３０に表示させるのではなく、携帯端末装置２０側のディスプレイ２１１に表示させることで、画像の視認性を向上させることができる。

また、例えば、携帯端末装置２０を表示部１３０の右方向から接近させた場合、図８に示すように、携帯端末装置２０のディスプレイ２１１には、表示画像Ｄ６の空白部分に第２の操作用画像Ｄ５が表示された画像が表示される。第２の操作用画像Ｄ５には、画像読取部１１０に対する画像読取処理や画像形成部１２０に対する画像形成処理の実行開始指示に対応付けられた指示ボタンであるスタートボタンｄ５等が設けられている。ユーザーにより当該スタートボタンｄ５の選択操作がなされた場合、指示受付部２０３は、画像読取処理や画画像形成処理の実行開始指示を受け付ける。

ここで、記憶部１５０には、第２の操作用画像Ｄ２〜Ｄ５を表示するときに、表示部１３０による表示動作を停止させる否かを示す消灯フラグが、第２の操作用画像Ｄ２〜Ｄ５毎に記憶されている。例えば、上記の第２の操作用画像Ｄ５のように画像読取部１１０に対する画像読取処理や画像形成部１２０に対する画像形成処理の実行開始指示に対応付けられた指示ボタンを含む操作用画像については、当該消灯フラグが記憶されている。消灯フラグが記憶された第２の操作用画像を携帯端末装置２０が表示するとき、表示制御部１０２は、表示部１３０による表示動作を停止させる。第２の操作用画像Ｄ５のような操作用画像が携帯端末装置２０側に表示されている場合は、画像形成装置１０側で第１の操作用画像Ｄ１等を表示させなくても、画像読取処理や画像形成処理をユーザーが指示することが可能である。このため、表示部１３０による表示動作を停止させることで、画像形成装置１０の消費電力を抑えることができる。

単に、画像形成装置等の情報処理装置の操作用画像を携帯端末装置側で表示する技術では、操作用画像を表示可能な表示面積を増やすことができるものの、その増加面積は携帯端末装置の表示部の面積に限られる。これに対して、本実施形態にかかる画像形成装置１０および携帯端末装置２０では、図６〜図８に示すように、表示部１３０の上下左右方向の空間において操作用画像を表示することが可能となり、操作用画像を表示可能な表示面積をより増やすことができる。

また、本実施形態にかかる画像形成装置１０および携帯端末装置２０では、表示部１３０に接近する接近方向に対応付けられた操作用画像を携帯端末装置２０で表示するため、携帯端末装置２０を所持するユーザーが携帯端末装置２０を表示部１３０に接近させる操作を行うことで、所望の操作用画像を用いて画像形成装置１０の操作を行うことが可能になる。

続いて、上記の構成を備える画像形成装置１０および携帯端末装置２０の動作について説明する。図９は、画像形成装置１０および携帯端末装置２０の動作の流れを示すフローチャートである。

図９に示すように、画像形成装置１０の制御部１０１は、画像形成装置１０の動作モードが、携帯端末装置２０に操作用画像を送信する操作用画像送信モードであるか否かを判定する（ステップＳ１０）。制御部１０１は、指示受付部１０３が操作部１４０等を用いたユーザー操作に基づき操作用画像送信モードに遷移すべき指示を受け付けた場合に、画像形成装置１０の動作モードを操作用画像送信モードに切り替える。

動作モードが操作用画像送信モードである場合（ステップＳ１０においてＹＥＳ）、表示制御部１０２は、記憶部１５０から第１の操作用画像を読み出して、当該読み出した第１の操作用画像を表示部１３０に表示させる（ステップＳ１１）。

ステップＳ１１の処理後、検出部１６０は、携帯端末装置２０が表示部１３０に接近する接近方向を検出したか否かを判定する（ステップＳ１２）。

接近方向を検出した場合（ステップＳ１２においてＹＥＳ）、検出部１６０は、ＮＦＣリーダー１６を介して、ＮＦＣタグ２４１のメモリーに記憶された識別番号およびＭＡＣアドレスを示す情報を受信する。そして、検出部１６０は、受信した識別番号を用いて、表示部１３０に接近した携帯端末装置２０が予め定められた装置であるか否かを判定する（ステップＳ１３）。

表示部１３０に接近した携帯端末装置２０が予め定められた装置でない場合（ステップＳ１３においてＮＯ）、ステップＳ１２の処理に戻る。一方、表示部１３０に接近した携帯端末装置２０が予め定められた装置である場合（ステップＳ１３においてＹＥＳ）、通信制御部１０４は、ステップＳ１３の処理で検出部１６０が受信したＭＡＣアドレスを用いて、第２の操作用画像を送信する送信対象の携帯端末装置２０を特定する（ステップＳ１４）。

その後、通信制御部１０４は、ステップＳ１２の処理で検出部１６０が検出した接近方向に対応付けられた第２の操作用画像を記憶部１５０から読み出して（ステップＳ１５）、ネットワークインターフェイス部１７０に当該読み出した第２の操作用画像を携帯端末装置２０に向けて送信させる（ステップＳ１６）。

第２の操作用画像の送信後、表示制御部１０２は、記憶部１５０に記憶されているデータを参照して、ステップＳ１６の処理で送信した第２の操作用画像に消灯フラグが記憶されているか否かを判定する（ステップＳ１７）。消灯フラグが記憶されている場合（ステップＳ１７においてＹＥＳ）、表示制御部１０２は、表示部１３０による画像の表示動作を停止させる（ステップＳ１８）。

その後、通信制御部１０４は、ネットワークインターフェイス部１７０に、携帯端末装置２０において入力された第２の操作用画像に対する操作に対応する指示を携帯端末装置２０から受信させる（ステップＳ１９）。

画像読取部１１０や画像形成部１２０等の実行部は、ステップＳ１９で受信した指示に対応する画像読取処理や画像形成処理を実行する（ステップＳ２０）。

一方、携帯端末装置２０の制御部２０１は、携帯端末装置２０の動作モードが、画像形成装置１０から送信された操作用画像を表示する操作用画像表示モードであるか否かを判定する（ステップＳ３０）。制御部２０１は、指示受付部２０３がタッチパネル２１２等を用いたユーザー操作に基づき操作用画像表示モードに遷移すべき指示を受け付けた場合に、携帯端末装置２０の動作モードを操作用画像表示モードに切り替える。

動作モードが操作用画像表示モードである場合（ステップＳ３０においてＹＥＳ）、通信制御部２０４は、ネットワークインターフェイス部２４０に、画像形成装置１０から送信された第２の操作用画像を受信させる（ステップＳ３１）。

その後、表示制御部２０２は、ステップＳ３１の処理で受信した第２の操作用画像をディスプレイ２１１に表示させる（ステップＳ３２）。

第２の操作用画像を表示後、指示受付部２０３が第２の操作用画像に対する操作に対応する指示を受け付けると（ステップＳ３３においてＹＥＳ）、通信制御部２０４は、ネットワークインターフェイス部２４０に、当該受け付けた指示を画像形成装置１０に向けて送信させる（ステップＳ３４）。

なお、本発明は、上記の実施の形態の構成に限られず種々の変形が可能である。

＜変形例１＞
上記の実施の形態では、画像形成装置１０が、携帯端末装置２０の接近方向に対応付けられた第２の操作用画像を携帯端末装置２０へ送信する場合を説明した。これに対して、変形例１にかかる画像形成装置１０では、携帯端末装置２０の接近方向および携帯端末装置２０の向きの組み合わせに対応付けられた第２の操作用画像を携帯端末装置２０へ送信する。

図１０は、変形例１にかかる画像形成装置１０の記憶部１５０に記憶されるデータの内容を示す図である。図１０に示す例では、第２の操作用画像Ｄ２〜Ｄ８が、携帯端末装置２０が表示部１３０に接近する接近方向、および、携帯端末装置２０の向きの組み合わせに対応付けて記憶部１５０に記憶されている。

図１１は、携帯端末装置２０を横向きの姿勢で表示部１３０の右方向から接近させた場合に、携帯端末装置２０のディスプレイ２１１に表示させる画像を示す図である。この場合、携帯端末装置２０のディスプレイ２１１には、接近方向「右方向」、向き「横向き」に対応付けられた第２の操作用画像Ｄ８が表示される。第２の操作用画像Ｄ８には、コピー濃度や原稿サイズが設定された印刷ジョブプログラム７に対応付けられたプログラムボタンｄ６等が設けられている。一方、携帯端末装置２０を縦向きの姿勢で表示部１３０の右方向から接近させた場合には、図８に示されるように、携帯端末装置２０のディスプレイ２１１には、接近方向「右方向」、向き「縦向き」に対応付けられた第２の操作用画像Ｄ５が表示される。

図１２は、変形例１にかかる画像形成装置１０および携帯端末装置２０の動作の流れを示すフローチャートである。なお、図９に示すフローチャートと同処理については同符号を付して説明を略する。

ステップＳ１４の処理後、画像形成装置１０の通信制御部１０４は、ネットワークインターフェイス部１７０に、携帯端末装置２０の向きを示す情報を送信すべき旨の送信要求を携帯端末装置２０に向けて送信させる（ステップＳ４０）。

携帯端末装置２０の通信制御部２０４は、ネットワークインターフェイス部２４０に、ステップＳ４０の処理で画像形成装置１０から送信された送信要求を受信させる（ステップＳ５０）。

ステップＳ５０の処理後、制御部２０１は、向きセンサー２２０から出力された検出信号に基づき携帯端末装置２０の向きを取得する（ステップＳ５１）。

通信制御部２０４は、ステップＳ５１の処理で取得した携帯端末装置２０の向きを示す情報を、ネットワークインターフェイス部２４０に画像形成装置１０に向けて送信させる（ステップＳ５２）。

画像形成装置１０の通信制御部１０４は、ネットワークインターフェイス部１７０に、携帯端末装置２０から送信された携帯端末装置２０の向きを示す情報を受信させる（ステップＳ４１）。

ステップＳ４１の処理後、通信制御部１０４は、携帯端末装置２０の接近方向および向きの組み合わせに対応付けられた第２の操作用画像を記憶部１５０から読み出す（ステップＳ４２）。

以上のように、変形例１にかかる画像形成装置１０および携帯端末装置２０によれば、携帯端末装置２０の接近方向に加えて、携帯端末装置２０の向きに応じて、携帯端末装置２０のディスプレイ２１１に表示される操作用画像の種類を変えることができる。

＜変形例２＞
変形例２にかかる画像形成装置１０では、表示制御部１０２が、第１の操作用画像に加えて、携帯端末装置２０を表示部１３０に接近させた場合に携帯端末装置２０に表示される第２の操作用画像の内容、および、当該第２の操作用画像に関連付けられた接近方向を示す画像を表示部１３０に表示させる。

図１３は、変形例２にかかる画像形成装置１０において、表示部１３０に表示される表示画像Ｄ９の一例を示す図である。表示画像Ｄ９には、携帯端末装置２０に表示される第２の操作用画像の内容、および、当該第２の操作用画像に関連付けられた接近方向を示す画像ｄ７〜ｄ１０が設けられている。当該表示画像Ｄ９は、画像形成装置１０の動作モードが操作用画像送信モードに切り替わったタイミングで、表示部１３０に表示される。ユーザーは、当該表示画像Ｄ９により、携帯端末装置２０に表示される第２の操作用画像の内容を確認することができる。

＜変形例３＞
図１４は、変形例３にかかる携帯端末装置２０の内部構成を示すブロック図である。なお、図２に示す構成と同じ構成については同符号を付して説明を省略する。

撮像部２７０は、画像を撮像する撮像素子を有するカメラデバイスである。

判定部２５０は、撮像部２７０が撮像した画像に対してパターンマッチング等の画像処理を行い、当該画像に画像形成装置１０の表示部１３０を示す画像が含まれるか否かを判定する。

画像合成部２６０は、撮像部２７０が撮像した画像に表示部１３０を示す画像が含まれる場合に、撮像部２７０が撮像した画像に第２の操作用画像を当該第２の操作用画像に関連付けられた接近方向の位置に合成した合成画像を生成する。画像合成部２６０は、例えば図６に示すような画像を合成画像として生成する。

図１５は、変形例３にかかる携帯端末装置２０の動作の流れを示すフローチャートである。撮像部２７０により画像が撮像された場合（ステップＳ６０においてＹＥＳ）、判定部２５０は、撮像した画像に表示部１３０を示す画像が含まれるか否かを判定する（ステップＳ６１）。

表示部１３０を示す画像が含まれない場合（ステップＳ６１においてＮＯ）、携帯端末装置２０は処理を終える。一方、表示部１３０を示す画像が含まれる場合（ステップＳ６１においてＹＥＳ）、通信制御部２０４は、ネットワークインターフェイス部２４０に、第２の操作用画像と当該第２の操作用画像に関連付けられた接近方向を示す情報とを送信すべき旨の送信要求を画像形成装置１０に向けて送信させる（ステップＳ６２）。

画像形成装置１０がステップＳ６２の処理で送信された送信要求を受信すると（ステップＳ７０）、通信制御部１０４は、記憶部１５０から第２の操作用画像と当該第２の操作用画像に関連付けられた接近方向を示す情報とを読み出して（ステップＳ７１）、当該読み出した情報をネットワークインターフェイス部１７０に携帯端末装置２０に向けて送信させる（ステップＳ７２）。

携帯端末装置２０がステップＳ７２の処理で送信された情報を受信すると（ステップＳ６３）、当該受信した情報を用いて画像合成部２６０が合成画像を生成する（ステップＳ６４）。そして、表示制御部２０２は、ディスプレイ２１１にステップＳ６４の処理で生成された合成画像を表示させる（ステップＳ６５）。

以上のように、変形例３にかかる携帯端末装置２０によれば、撮像部２７０を用いて表示部１３０を撮像するという操作をユーザーが行うことにより、携帯端末装置２０に表示される第２の操作用画像の内容を確認することができる。

＜その他の変形例＞
上記の実施形態および上記の各変形例をそれぞれ組み合わせるとしてもよい。

また、上記の実施形態や変形例で説明した情報処理プログラムや携帯端末装置制御プログラム等をコンピューター読み取り可能な非一時的な記録媒体、例えば、ハードディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリーなどに記録されたものとしてもよい。この場合、当該情報処理プログラムや携帯端末装置制御プログラム等を記録したコンピューター読み取り可能な非一時的な記録媒体が、本発明の一実施形態となる。

１ 情報処理システム
１０ 画像形成装置
１６ ＮＦＣリーダー
２０ 携帯端末装置
１００ 制御ユニット
１０１ 制御部
１０２ 表示制御部
１０３ 指示受付部
１０４ 通信制御部
１１０ 画像読取部
１２０ 画像形成部
１３０ 表示部
１４０ 操作部
１５０ 記憶部
１６０ 検出部
２００ 制御ユニット
２０１ 制御部
２０２ 表示制御部
２０３ 指示受付部
２０４ 通信制御部
２１０ 表示部
２１１ ディスプレイ
２１２ タッチパネル
２２０ 向きセンサー
２３０ 記憶部
２４１ ＮＦＣタグ
２５０ 判定部
２６０ 画像合成部
２７０ 撮像部

Claims (13)

1. ユーザーによる操作の用に供する第１の操作用画像を表示する表示部と、
   前記表示部による表示動作を制御する表示制御部と、
   予め定められた携帯端末装置が前記表示部に接近する接近方向を検出する検出部と、
   前記表示部に表示される前記第１の操作用画像に加えて、複数の第２の操作用画像を前記接近方向に対応付けて記憶する記憶部と、
   前記携帯端末装置とデータの送受信が可能な通信部と、
   前記検出部が検出した接近方向に対応付けられた第２の操作用画像を前記記憶部から読み出して、前記通信部に、当該読み出した第２の操作用画像を前記携帯端末装置へ送信させるとともに、前記携帯端末装置において入力された前記第２の操作用画像に対する操作に対応する指示を前記携帯端末装置から受信させる通信制御部と、
   前記表示部に表示させる第１の操作用画像に対する操作に対応する指示に加えて、前記通信部が受信した指示を受け付ける指示受付部と、
   前記指示受付部が受け付けた指示に対応する処理を実行する実行部と、を備える情報処理装置。
2. 前記検出部は、前記携帯端末装置が予め定められた距離以内に位置する場合に検出信号を出力する複数の接近検出センサーを含み、
   前記複数の接近検出センサーは、それぞれ、検出方向を前記各接近方向に向けて設置されており、
   前記検出部は、前記複数の接近検出センサーのうち前記検出信号を出力した接近検出センサーの検出方向を前記接近方向として検出する、請求項１に記載の情報処理装置。
3. 前記表示制御部は、前記記憶部に記憶された前記複数の第２の操作用画像のうち、予め定められた操作用画像を前記通信部が前記携帯端末装置へ送信する場合に、前記表示部による表示動作を停止させる、請求項１または請求項２に記載の情報処理装置。
4. 前記予め定められた操作用画像は、前記実行部に対する処理の実行開始指示に対応付けられた指示ボタンを含む操作用画像である、請求項３に記載の情報処理装置。
5. 前記検出部は、更に、前記携帯端末装置の向きを検出し、
   前記記憶部は、前記接近方向および前記携帯端末装置の向きの組み合わせに対応付けて、前記複数の第２の操作用画像を記憶しており、
   前記通信制御部は、前記検出部が検出した接近方向および前記携帯端末装置の向きの組み合わせに対応付けられた第２の操作用画像を前記記憶部から読み出して、前記通信部に、当該読み出した第２の操作用画像を前記携帯端末装置へ送信させる、請求項１乃至請求項４の何れか１項に記載の情報処理装置。
6. 前記通信制御部は、前記通信部に、前記携帯端末装置に内蔵されたセンサーが出力する前記携帯端末装置の向きを示す情報を前記携帯端末装置から受信させ、
   前記検出部は、前記通信部が受信した情報を取得することで前記携帯端末装置の向きを検出する、請求項５に記載の情報処理装置。
7. 前記表示制御部は、前記第１の操作用画像に加えて、前記携帯端末装置を前記表示部に接近させた場合に前記携帯端末装置に表示される第２の操作用画像の内容、および、当該第２の操作用画像に関連付けられた前記接近方向を示す画像を前記表示部に表示させる、請求項１乃至請求項６の何れか１項に記載の情報処理装置。
8. 前記表示部は、本情報処理装置の外郭を構成する筐体の前面に設けられており、
   前記検出部が検出する接近方向は、前記表示部に対する上下左右方向である、請求項１乃至請求項７の何れか１項に記載の情報処理装置。
9. 前記第１の操作用画像および前記第２の操作用画像は、画像形成処理に関する指示を受け付けるための操作用画像であり、
   前記実行部は、前記指示受付部が受け付けた画像形成処理に関する指示を実行する画像形成部を有する、請求項１乃至請求項８の何れか１項に記載の情報処理装置。
10. 外部の情報処理装置とデータの送受信が可能な通信部と、
    前記通信部による通信動作を制御する通信制御部であって、前記情報処理装置に記憶された複数の操作用画像のうち、本携帯端末装置が前記情報処理装置の表示部に接近する接近方向に対応付けられて記憶された操作用画像を、前記通信部に前記情報処理装置から受信させる通信制御部と、
    表示部と、
    前記通信部が受信した操作用画像を前記表示部に表示させる表示制御部と、
    前記表示部に表示される操作用画像に対する操作に対応する指示を受け付ける指示受付部と、を備え、
    前記通信制御部は、前記通信部に、前記指示受付部が受け付けた指示を前記情報処理装置へ送信させる、携帯端末装置。
11. 前記情報処理装置に設けられた接近検出センサーにより検出される被検出部を、更に備える、請求項１０に記載の携帯端末装置。
12. 画像を撮像する撮像部と、
    前記撮像部が撮像した画像に前記情報処理装置の表示部を示す画像が含まれるか否かを判定する判定部と、
    前記撮像部が撮像した画像を用いて合成画像を生成する画像合成部と、を更に備え、
    前記通信制御部は、前記判定部が前記画像に前記情報処理装置の表示部を示す画像が含まれると判定した場合に、前記通信部に、前記操作用画像と当該操作用画像に関連付けられた接近方向の情報とを前記情報処理装置から受信させ、
    前記画像合成部は、前記撮像部が撮像した画像に対して、前記通信部が受信した操作用画像を当該操作用画像に関連付けられた接近方向の位置に合成した合成画像を生成し、
    前記表示制御部は、前記画像合成部が合成した合成画像を前記表示部に表示させる、請求項１０または請求項１１に記載の携帯端末装置。
13. 情報処理装置と、当該情報処理装置と通信可能な携帯端末装置とを備え、
    前記情報処理装置は、
    ユーザーによる操作の用に供する第１の操作用画像を表示する表示部と、
    前記表示部による表示動作を制御する表示制御部と、
    前記携帯端末装置が前記表示部に接近する接近方向を検出する検出部と、
    前記表示部に表示される前記第１の操作用画像に加えて、複数の第２の操作用画像を前記接近方向に対応付けて記憶する記憶部と、
    通信部と、
    前記検出部が検出した接近方向に対応付けられた第２の操作用画像を前記記憶部から読み出して、前記通信部に、当該読み出した第２の操作用画像を前記携帯端末装置へ送信させるとともに、前記携帯端末装置に入力された前記第２の操作用画像に対する操作に対応する指示を前記携帯端末装置から受信させる通信制御部と、
    前記表示部に表示させる第１の操作用画像に対する操作に対応する指示に加えて、前記通信部が受信した指示を受け付ける指示受付部と、
    前記指示受付部が受け付けた指示に対応する処理を実行する実行部と、を備え、
    前記携帯端末装置は、
    端末側通信部と、
    前記端末側通信部による通信動作を制御する端末側通信制御部であって、前記情報処理装置に記憶された複数の第２の操作用画像のうち、本携帯端末装置が前記情報処理装置の表示部に接近する接近方向に対応付けられて記憶された第２の操作用画像を、前記端末側通信部に前記情報処理装置から受信させる端末側通信制御部と、
    端末側表示部と、
    前記端末側通信部が受信した第２の操作用画像を前記端末側表示部に表示させる端末側表示制御部と、
    前記端末側表示部に表示される第２の操作用画像に対する操作に対応する指示を受け付ける端末側指示受付部と、を備え、
    前記端末側通信制御部は、前記端末側通信部に、前記端末側指示受付部が受け付けた指示を前記情報処理装置へ送信させる、情報処理システム。