JP6264742B2 - 装置、方法、プログラム - Google Patents

Description

本発明は、装置、方法、プログラムに関する。

例えば、第１の装置が記憶している画像等を第２の装置の表示画面の特定の位置に貼り付ける場合のように、複数の装置にまたがった処理が必要になる場合がある。

しかしながら、従来、このような場合には、例えば、第１の装置から記録媒体を取り出して、第２の装置へと取り付け、第２の装置で読み出して貼付位置を指定し、貼付操作をするなど、ユーザが複数の装置にまたがった操作をする必要があり煩雑であったという課題がある。

本発明の第１の態様においては、情報処理装置の表示画面に表示された表示画像を取得する表示画像取得部と、撮像装置により撮像された前記表示画面の撮像画像を取得する撮像画像取得部と、前記表示画像および前記撮像画像を比較して前記撮像画像上の位置と前記表示画像上の位置の対応を付ける画像比較部と、前記撮像画像上の位置が指定されたことに応じて、当該位置に対応する前記表示画像上の位置に対する操作を入力する操作入力部と、を備える装置を提供する。

本発明の第２の態様においては、情報処理装置の表示画面に表示された表示画像を取得する表示画像取得段階と、撮像装置により撮像された前記表示画面の撮像画像を取得する撮像画像取得段階と、前記表示画像および前記撮像画像を比較して前記撮像画像上の位置と前記表示画像上の位置の対応を付ける画像比較段階と、前記撮像画像上の位置が指定されたことに応じて、当該位置に対応する前記表示画像上の位置に対する操作を入力する操作入力段階と、を備える方法を提供する。

本発明の第３の態様においては、情報処理装置の表示画面に表示された表示画像を取得する表示画像取得機能と、撮像装置により撮像された前記表示画面の撮像画像を取得する撮像画像取得機能と、前記表示画像および前記撮像画像を比較して前記撮像画像上の位置と前記表示画像上の位置の対応を付ける画像比較機能と、前記撮像画像上の位置が指定されたことに応じて、当該位置に対応する前記表示画像上の位置に対する操作を入力する操作入力機能と、をコンピュータに実行させるプログラムを提供する。

本発明の第４の態様においては、複数の情報処理装置のそれぞれの表示画面に表示された複数の表示画像を取得する表示画像取得部と、撮像装置により撮像された、前記複数の情報処理装置のいずれかの前記表示画面の撮像画像を取得する撮像画像取得部と、前記複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された前記表示画面がいずれの情報処理装置に対応するかを特定する画像比較部と、を備える装置を提供する。

本発明の第５の態様においては、複数の情報処理装置のそれぞれの表示画面に表示された複数の表示画像を取得する表示画像取得段階と、撮像装置により撮像された、前記複数の情報処理装置のいずれかの前記表示画面の撮像画像を取得する撮像画像取得段階と、前記複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された表示画面がいずれの情報処理装置に対応するかを特定する画像比較段階と、を備える方法を提供する。

本発明の第６の態様においては、複数の情報処理装置のそれぞれの表示画面に表示された複数の表示画像を取得する表示画像取得機能と、撮像装置により撮像された、前記複数の情報処理装置のいずれかの前記表示画面の撮像画像を取得する撮像画像取得機能と、前記複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された表示画面がいずれの情報処理装置に対応するかを特定する画像比較機能と、をコンピュータに実行させるプログラムを提供する。

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。

本実施形態に係る転送システム１０の構成を示す。 本実施形態に係る転送システム１０のブロック図である。 転送装置１６の制御部５６によって実行される転送処理のフローチャートである。 表示画面１８に表示された表示画像ＤＧの図である。 表示画像ＤＧを前方から撮像した撮像画像ＰＧの図である。 表示画像ＤＧを斜め前方から撮像した撮像画像ＰＧの図である。 使用者による貼付範囲ＤＡの選択を説明する図である。 記憶画像ＭＧが貼り付けられた表示画面１８を説明する図である。 使用者が貼付範囲ＤＡの大きさを変更できる形態を説明する図である。 使用者が貼付範囲ＤＡの大きさを変更できる形態を説明する図である。 使用者が貼付範囲ＤＡの大きさを変更できる形態を説明する図である。 使用者が貼付範囲ＤＡの位置を変更できる形態を説明する図である。 使用者が貼付範囲ＤＡの位置を変更できる形態を説明する図である。 本実施形態に係るコンピュータ１９００のハードウェア構成の一例を示す。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

図１は、本実施形態に係る転送システム１０の構成を示す。転送システム１０では、転送装置１６が、情報処理装置１４の表示画面１８に表示されている表示画像ＤＧと、撮像装置１２が表示画面１８を撮像した撮像画像ＰＧとを比較して、撮像装置１２に撮像された表示画像ＤＧを表示している情報処理装置１４を特定する。更に、転送装置１６は、特定した情報処理装置１４へ転送して、撮像装置１２に記憶されている記憶画像ＭＧを表示画面１８に貼り付けて表示させる。このように、転送システム１０は、使用者が撮像装置１２及び情報処理装置１４にまたがった処理を簡便に行うことができる環境を提供する。転送システム１０は、撮像装置１２と、情報処理装置１４と、転送装置１６とを備える。転送システム１０は、複数の撮像装置１２及び複数の情報処理装置１４を備えていてもよい。図１の示す例では、転送システム１０は、２個の情報処理装置１４ａ、１４ｂを含む。尚、後述の説明において、いずれかの情報処理装置１４ａ、１４ｂを個別に特定する必要がない場合、符号「１４」と表す。

撮像装置１２は、被写体を撮像することにより画像を生成して、当該画像を記憶画像ＭＧとして記憶する。また、撮像装置１２は、ライブビュー等による撮像中の画像、及び、記憶画像ＭＧ等を表示する。

情報処理装置１４は、各種のアプリケーションプログラムを実行することができるコンピュータである。情報処理装置１４は、大型コンピュータであってもよく、携帯型コンピュータであってもよい。情報処理装置１４は、記憶している画像（例えば、情報処理装置１４で動作するプログラムが表示する画像）、撮像装置１２から転送装置１６を介して転送された記憶画像ＭＧ等を表示画面１８上に表示する。

転送装置１６は、撮像装置１２及び情報処理装置１４のそれぞれと無線通信等によって接続される。また、転送装置１６は、撮像装置１２に記憶されている記憶画像ＭＧを取得して、情報処理装置１４へと転送して、表示画面１８に貼り付けて表示させる。ここで、転送装置１６は、撮像装置１２が撮像している情報処理装置１４の表示画面１８の撮像画像ＰＧ、及び、スクリーンキャプチャ等によって取得した表示画面１８の表示画像ＤＧから、撮像装置１２が撮像中の表示画面１８を表示している情報処理装置１４を、転送先の情報処理装置１４として特定する。図１に示す例では、転送装置１６は、撮像装置１２によって表示画面１８を撮像された情報処理装置１４ａに記憶画像を転送する。これにより、転送装置１６は、情報処理装置１４にマーク等が付与されていなくても、転送先の情報処理装置１４を特定できる。

図２は、本実施形態に係る転送システム１０のブロック図である。

撮像装置１２は、処理部３０と、撮像部３２と、記憶部３４と、表示部３６と、入力部３８と、通信部４０とを有する。処理部３０は、例えば、ＣＰＵ（Central Processing Unit）等を含む演算及び制御回路である。処理部３０は、記憶部３４に記憶されているプログラムを実行する。処理部３０は、撮像部３２、記憶部３４、表示部３６、入力部３８、及び、通信部４０と接続され、それぞれを制御する。撮像部３２は、使用者の操作に応じて、被写体を撮像して撮像画像ＰＧを生成する。記憶部３４は、撮像部３２により撮像された撮像画像ＰＧの一部を記憶画像ＭＧとして記憶する。表示部３６は、撮像装置１２の背面に設けられた液晶表示装置等を有する。表示部３６は、使用者による操作に応じて、記憶部３４に記憶されている画像を表示する。入力部３８は、表示部３６の全面に設けられたタッチパネル等を有する。入力部３８は、使用者の表示操作を受け付ける。通信部４０は、転送装置１６と無線通信等によってデータを送受信する。

情報処理装置１４は、処理部４２と、表示画面１８と、入力部４６と、通信部４８と、記憶部５０とを有する。処理部４２は、例えば、ＣＰＵ等を含む演算及び制御回路である。処理部４２は、記憶部５０に記憶されているプログラムを実行する。処理部４２は、表示画面１８、入力部４６、通信部４８、及び、記憶部５０と接続され、それぞれを制御する。処理部４２は、表示画面１８に表示されている表示画像ＤＧをスクリーンキャプチャ等によって記憶部５０に記憶させる。処理部４２は、通信部４８を介して、記憶させた表示画像ＤＧを転送装置１６とへと送信する。表示画面１８は、処理部４２の制御に応じて、転送装置１６を介して、撮像装置１２から転送された記憶画像ＭＧ等の画像を表示する。入力部４６は、使用者からの入力を受け付ける。通信部４８は、転送装置１６と無線通信等によりデータの送受信をする。

転送装置１６は、一例として、コンピュータである。転送装置１６は、通信部５２と、記憶部５４と、制御部５６とを有する。

通信部５２は、撮像装置１２及び情報処理装置１４との間でデータを送受信する。通信部５２は、制御部５６と接続されている。通信部５２は、撮像装置１２及び情報処理装置１４から受信したデータを制御部５６へと出力する。通信部５２は、制御部５６から入力されたデータを、撮像装置１２及び情報処理装置１４へと送信する。

記憶部５４は、転送プログラム等のプログラム、及び、画像等のデータを記憶する。記憶部５４は、制御部５６と接続されている。記憶部５４は、制御部５６から入力されるデータを記憶するとともに、記憶しているデータを制御部５６へと出力する。例えば、記憶部５４は、撮像装置１２及び情報処理装置１４から受信した撮像画像ＰＧ及び表示画像ＤＧのデータを記憶する。

制御部５６は、例えば、ＣＰＵ等を含む演算及び制御回路である。制御部５６は、表示画像取得部６０と、撮像画像取得部６２と、画像比較部６４と、操作入力部６６と、画像貼付部６８とを有する。例えば、制御部５６は、記憶部５４から転送プログラムを読み込むことによって、表示画像取得部６０と、撮像画像取得部６２と、画像比較部６４と、操作入力部６６と、画像貼付部６８として機能する。

表示画像取得部６０は、情報処理装置１４の表示画面１８に表示された表示画像ＤＧを情報処理装置１４から取得して、画像比較部６４へと出力する。例えば、表示画像取得部６０は、情報処理装置１４の処理部４２が、表示画面１８の画像をスクリーンキャプチャすることによって生成した表示画像ＤＧを取得する。

撮像画像取得部６２は、撮像装置１２が撮像した情報処理装置１４の表示画面１８に表示された表示画像ＤＧの撮像画像ＰＧを撮像装置１２から取得して、画像比較部６４へと出力する。撮像画像取得部６２は、撮像装置１２が表示画像ＤＧを撮像した旨の撮像通知を情報処理装置１４へと送信する。

画像比較部６４は、表示画像ＤＧ及び撮像画像ＰＧを比較して、撮像画像ＰＧ上の位置と表示画像ＤＧ上の位置の対応を付ける。また、画像比較部６４は、表示画像ＤＧ及び撮像画像ＰＧの間の傾きが生じている場合、ホモグラフィー行列等により、当該傾きに応じた撮像画像ＰＧ上の位置と表示画像ＤＧ上の位置とを対応付ける。

操作入力部６６は、撮像画像ＰＧ上の位置が指定されたことに応じて、当該位置に対応する表示画像ＤＧ上の位置に対する操作を入力する。また、操作入力部６６は、撮像装置１２に対する使用者の操作に応じて、複数の貼付範囲ＤＡのうち、一の貼付範囲ＤＡから他の貼付範囲ＤＡに変更させる。操作入力部６６は、通信部５２を介して、入力された操作を情報処理装置１４に対して送信する。

画像貼付部６８は、操作に応じて、撮像装置１２に記憶された記憶画像ＭＧを、情報処理装置１４の表示画面１８に表示された表示画像ＤＧ上の対応する位置に貼り付ける。例えば、画像貼付部６８は、貼付操作を受け付けると、撮像装置１２が表示した撮像画像ＰＧ上の貼付範囲ＤＡに対応する表示画像ＤＧ上の範囲に記憶画像ＭＧを貼り付ける。尚、貼付範囲ＤＡとは、記憶画像ＭＧを貼り付ける表示画面１８内の範囲のことである。また、画像貼付部６８は、表示画像ＤＧ及び撮像画像ＰＧの間の傾きに応じた形状の貼付範囲ＤＡを設定してもよい。例えば、画像貼付部６８は、ホモグラフィー行列により、表示画像ＤＧ及び撮像画像ＰＧの間の傾きに応じた貼付範囲を設定する。

図３は、転送装置１６の制御部５６によって実行される転送処理のフローチャートである。

図３に示すように、撮像装置１２では、処理部３０が、使用者が入力部３８を介して入力した撮像指示に応じて、撮像部３２に情報処理装置１４の表示画面１８を撮像させて、撮像画像ＰＧを生成する（ＳＡ１０）。処理部３０は、通信部４０を介して、撮像画像ＰＧを転送装置１６へ送信する（ＳＡ１２）。

転送装置１６では、撮像画像取得部６２が、通信部５２を介して、撮像装置１２から撮像画像ＰＧを取得する（ＳＢ３０）。次に、撮像画像取得部６２は、撮像装置１２が表示画面１８を撮像したことを通知する撮像通知を情報処理装置１４に送信する（ＳＢ３２）。

情報処理装置１４では、処理部４２が、通信部４８を介して、撮像通知を受信すると、表示画面１８に表示された表示画像ＤＧを生成して記憶部５０に保存する（ＳＣ５０）。処理部４２は、表示画像ＤＧを転送装置１６へと送信する（ＳＣ５２）。

転送装置１６では、表示画像取得部６０が、情報処理装置１４から表示画像ＤＧを取得する（ＳＢ３４）。尚、転送装置１６の周囲に複数の情報処理装置１４が存在する場合、表示画像取得部６０は、複数の情報処理装置１４から複数の表示画像ＤＧを取得する場合もある。画像比較部６４は、撮像装置１２から取得した撮像画像ＰＧと、情報処理装置１４から取得した表示画像ＤＧとを比較して、撮像画像ＰＧ上の位置と、表示画像ＤＧ上の位置とを対応付ける（ＳＢ３６）。画像比較部６４は、撮像画像ＰＧに対して位置の対応付けができた表示画像ＤＧを送信した情報処理装置１４を送信先として特定する（ＳＢ３８）。画像比較部６４は、特定した情報処理装置１４の情報、例えば、情報処理装置１４のＩＤを記憶部５４へ記憶させる。

ここで、複数の表示画像ＤＧを取得した場合、画像比較部６４は、複数の表示画像ＤＧのそれぞれと撮像画像ＰＧを比較して、撮像装置１２により撮像された表示画面１８がいずれの情報処理装置１４に対応するかを特定する。例えば、画像比較部６４は、複数の表示画像ＤＧのそれぞれと撮像画像ＰＧとの一致度を算出し、一致度が基準以上である表示画像ＤＧを表示する情報処理装置１４を、転送先として特定する。ここでいう一致度は、例えば、位置の対応付けができなかった個数に対する位置の対応付けができた個数の割合である。また、基準とは予め定められた閾値である。従って、画像比較部６４は、複数の表示画像ＤＧを取得しても、全ての一致度が基準未満である場合、いずれの情報処理装置１４も転送先として特定しない。

撮像装置１２では、使用者が、記憶部３４に記憶された画像のいずれかと、撮像画像ＰＧに含まれる表示画面１８上の特定の領域とを選択する。これにより、入力部３８は、選択された画像を記憶画像ＭＧとして受け付けるとともに、選択された領域を貼付範囲ＤＡとして受け付ける（ＳＡ１４）。貼付範囲ＤＡ及び記憶画像ＭＧの選択が、貼付操作の一例である。撮像装置１２は、貼付範囲ＤＡとともに、記憶画像ＭＧを転送装置１６へと送信する（ＳＡ１６）。尚、撮像装置１２は、使用者によって貼付範囲ＤＡが変更された場合、当該変更された貼付範囲ＤＡを転送装置１６へと送信する。

転送装置１６では、画像貼付部６８が、撮像装置１２から貼付範囲ＤＡとともに、記憶画像ＭＧを受信する。画像貼付部６８が、画像比較部６４が特定した情報処理装置１４の情報を記憶部５４から取得して、記憶画像ＭＧ及び貼付範囲ＤＡを特定した情報処理装置１４へ送信するとともに、操作入力部６６が記憶画像ＭＧを表示画面１８に貼り付けさせる旨の貼付指示を特定した情報処理装置１４へと送信する（ＳＢ４０）。

情報処理装置１４では、処理部４２が、記憶画像ＭＧ、貼付範囲ＤＡ及び貼付指示を受信すると、貼付範囲ＤＡに対応する表示画面１８上の位置に記憶画像ＭＧを貼り付ける（ＳＣ５４）。

次に、表示画像ＤＧ、撮像画像ＰＧ、記憶画像ＭＧの表示形態について説明する。

図４は、表示画面１８に表示された表示画像ＤＧの図である。情報処理装置１４の表示画面１８は、図４に示す表示画像ＤＧを表示しているとする。

図５は、表示画像ＤＧを前方から撮像した撮像画像ＰＧの図である。撮像装置１２が、図４に示す表示画像ＤＧが表示されている情報処理装置１４を撮像した撮像画像ＰＧである。

画像比較部６４は、図４に示す表示画像ＤＧ及び図５に示す撮像画像ＰＧを取得すると、表示画像ＤＧ及び撮像画像ＰＧを比較して、表示画像ＤＧ及び撮像画像ＰＧの位置を対応付ける。位置の対応付けの一例では、画像比較部６４は、表示画像ＤＧ及び撮像画像ＰＧのそれぞれに含まれるオブジェクトの辺及び頂点等のエッジを検出して、それぞれを対応付ける。例えば、画像比較部６４は、図４に示す位置ＰＡ１と、図５に示す位置ＰＢ１とに含まれるエッジが同じ傾向を示していると判定すると、位置ＰＡ１と位置ＰＢ１とを対応付ける。ここでいう、傾向とは、色の変化、色が変化する間隔等を含む。画像比較部６４は、互いのエッジが同じ傾向を示していると判定した、表示画像ＤＧ及び撮像画像ＰＧの数カ所の位置をそれぞれ対応付ける。画像比較部６４は、表示画像ＤＧ及び撮像画像ＰＧの数カ所の位置の対応付けができ、互いのエッジの位置関係の対応付けができた場合、撮像画像ＰＧが当該表示画像ＤＧを撮像したものであると判定して、対応付けができた情報処理装置１４を転送先として特定する。

図６は、表示画像ＤＧを斜め前方から撮像した撮像画像ＰＧの図である。図６に示すように、撮像装置１２が情報処理装置１４の斜め前方、例えば、左前方に配置されている場合、撮像画像ＰＧ内の表示画像ＤＧは、左右に圧縮された画像となる。この場合、画像比較部６４は、図５に示すような画像に補正して、位置を対応付けてもよい。例えば、画像比較部６４は、ホモグラフィー行列によって、図６に示す撮像画像ＰＧを図５に示す撮像画像ＰＧに補正することができる。

図７は、使用者による貼付範囲ＤＡの選択を説明する図である。図７に示すように、撮像画像ＰＧに含まれる表示画像ＤＧは複数の貼付範囲ＤＡを含む。図７に示す状態で、使用者が入力部３８のいずれかの領域を指ＦＮ等でタッチすると、入力部３８は複数の貼付範囲ＤＡのうち、当該領域に対応する貼付範囲ＤＡを選択された貼付範囲ＤＡとして受け付ける。ここでは、貼付範囲ＤＡ１が選択されたとする。

処理部３０は、入力部３８から選択された貼付範囲ＤＡを取得して、記憶画像ＭＧとともに貼付範囲ＤＡのデータを転送装置１６へと送信する。貼付範囲ＤＡのデータは、一例として、表示画像ＤＧ内の貼付範囲ＤＡの座標である。転送装置１６では、画像貼付部６８が、撮像装置１２から記憶画像ＭＧ及び貼付範囲ＤＡを受信する。画像貼付部６８は、受信した記憶画像ＭＧ及び貼付範囲ＤＡとともに、貼付指示を情報処理装置１４へ送信する。

図８は、記憶画像ＭＧが貼り付けられた表示画面１８を説明する図である。情報処理装置１４では、処理部４２が、転送装置１６から記憶画像ＭＧ及び貼付範囲ＤＡとともに、貼付指示を受信する。これにより、処理部４２は、図８に示すように、表示画面１８内の複数の貼付範囲ＤＡのうち、受信した貼付範囲ＤＡに記憶画像ＭＧを貼り付けて表示する。

上述した転送システム１０では、転送装置１６の画像比較部６４が、表示画像取得部６０が取得した表示画像ＤＧと、撮像画像取得部６２の取得した撮像画像ＰＧとを比較して、位置の対応付けをしている。これにより、転送システム１０では、情報処理装置１４にマーク等が付与されていなくても、転送装置１６は、転送先の情報処理装置１４を特定することができる。従って、転送装置１６は、転送先の自由度を向上させることができる。

上述の転送システム１０では、転送装置１６が撮像装置１２から記憶画像ＭＧを取得すると、操作入力部６６が画像比較部６４によって転送先として特定された情報処理装置１４に貼付指示を送信する。情報処理装置１４は、貼付指示を受信すると、記憶画像ＭＧを表示画面１８上に貼り付ける。これにより、使用者は、撮像装置１２で記憶画像ＭＧの選択等の簡易な操作をすることにより、情報処理装置１４に記憶画像ＭＧを貼り付けて表示させることができる。この結果、転送システム１０は、使用者が撮像装置１２及び情報処理装置１４にまたがった処理を簡便に行うことができる環境を提供できる。

上述の転送システム１０では、撮像装置１２が撮像画像ＰＧ上に貼付範囲ＤＡを表示するので、使用者は、撮像画像ＰＧ上の貼付範囲ＤＡを選択するだけで、情報処理装置１４の表示画面１８上の希望する領域に記憶画像ＭＧを貼り付けることができる。また、使用者は、撮像装置１２の入力部３８によって貼付範囲ＤＡを変更することによって、容易に表示画面１８上の貼付位置を変更することができる。

上述の転送システム１０では、撮像装置１２が情報処理装置１４の斜め前方から表示画面１８を撮像した場合であっても、画像比較部６４は、ホモグラフィー行列等により、表示画像ＤＧ及び撮像画像ＰＧの傾きに応じて、それぞれの位置を対応付ける。これにより、画像比較部６４は、撮像装置１２及び情報処理装置１４の位置関係によらず、転送先の情報処理装置１４を特定できる。

上述の転送システム１０では、撮像装置１２が表示画面１８を撮像すると、転送装置１６が、撮像通知を情報処理装置１４へと送信する。情報処理装置１４は、撮像通知を受信すると、表示画面１８に表示された表示画像ＤＧを保存するので、撮像画像ＰＧと表示画像ＤＧとの時間のずれを小さくすることができる。これにより、転送装置１６は、撮像画像ＰＧと表示画像ＤＧとに基づいて、特定する転送先の情報処理装置１４の精度を向上させることができる。

上述の転送システム１０では、転送装置１６は、撮像画像ＰＧと表示画像ＤＧとの一致度が基準以上である情報処理装置１４を転送先として特定している。これにより、転送装置１６は、撮像画像ＰＧと表示画像ＤＧとの一致度が完全に一致する場合に転送先を特定する場合に比べて、精度を保ちつつ、高確率で転送先の情報処理装置１４を特定することができる。

次に、上述した実施形態の一部を変更した形態について説明する。

図９、図１０、図１１は、使用者が貼付範囲ＤＡの大きさを変更できる形態を説明する図である。図９、図１０は、撮像装置１２の表示部３６を示す。図１１は、情報処理装置１４の表示画面１８を示す。

図９に示すように、撮像装置１２が、貼付範囲ＤＡを含む表示画像ＤＧを表示している情報処理装置１４の表示画面１８を撮像している。この状態で、使用者が、撮像装置１２の入力部３８に対して、操作を入力する。例えば、使用者が、図９に示すように、入力部３８上の貼付範囲ＤＡの周囲に２本の指ＦＮを接触させる。次に、使用者が、図１０に示すように、入力部３８上の指ＦＮを互いに離れる方向へと移動させると、入力部３８は、指ＦＮの移動を制御部５６へと出力する。これにより、制御部５６は、指ＦＮが移動する軌跡を座標にして転送装置１６へ送信する。

転送装置１６では、操作入力部６６が、使用者の指ＦＮの座標を取得する。操作入力部６６は、指ＦＮの移動に合わせて、貼付範囲ＤＡを変更させる。図１１に示す例では、操作入力部６６は、指ＦＮの移動に合わせて、点線で示す大きさから実線で示す大きさへと貼付範囲ＤＡを拡大する。尚、使用者が２本の指ＦＮを互いに近づく方向に移動させた場合、操作入力部６６は、指ＦＮの移動に合わせて、貼付範囲ＤＡを縮小させる。

図１２、図１３は、使用者が貼付範囲ＤＡの位置を変更できる形態を説明する図である。図１２は、撮像装置１２の表示部３６を示す。図１３は、情報処理装置１４の表示画面１８を示す。

図１２に示すように、撮像装置１２が、貼付範囲ＤＡを含む表示画像ＤＧを表示している表示画面１８を撮像している。この状態で、使用者が、入力部３８上において、図１２に点線で示す位置に指ＦＮを接触させた後、実線で示す位置まで指ＦＮを移動させると、入力部３８は、指ＦＮの移動を制御部５６へと出力する。これにより、制御部５６は、指ＦＮが移動する軌跡を座標にして転送装置１６へ送信する。

転送装置１６では、操作入力部６６が、使用者の指ＦＮの座標を取得する。操作入力部６６は、指ＦＮの移動に合わせて、貼付範囲ＤＡを変更させる。図１３に示す例では、操作入力部６６は、指ＦＮの移動に合わせて、貼付範囲ＤＡの位置を移動させる。

このように、転送システム１０では、転送装置１６の操作入力部６６が、使用者の操作によって、貼付範囲ＤＡの大きさ及び位置を変更するので、転送装置１６は、使用者の要望に対してより広く対応できる。

上述の実施形態では、操作入力部６６が、撮像指示を情報処理装置１４に送信することによって、記憶画像ＭＧを情報処理装置１４に貼り付けて表示する例を示したが、記憶画像ＭＧの表示は、これに限られない。例えば、使用者が撮像装置１２の入力部３８で貼付範囲ＤＡを選択すると、画像貼付部６８は、情報処理装置１４の表示画面１８上に貼付範囲ＤＡを表示させ、貼付範囲ＤＡ内に撮像装置１２に記憶された記憶画像ＭＧのプレビューを表示させてもよい。

上述の実施形態では、使用者が情報処理装置１４の表示画面１８に表示された貼付範囲ＤＡを見つつ操作する例を示したが、使用者の操作用の表示は、これに限られない。例えば、操作入力部６６が、情報処理装置１４の表示画面１８における操作対象となる位置にマーク画像を表示させてもよい。マーク画像は、一例として、アイコン、カーソル、アバター等である。この形態では、操作入力部６６は、使用者が撮像画像ＰＧ上で位置を指定したことに応じて、情報処理装置１４の表示画面１８上の対応する位置にマーク画像を表示させる。この場合、操作入力部６６は、撮像画像ＰＧ上の座標を、表示画面１８上の座標に変換して、マーク画像を表示させる。また、操作入力部６６は、撮像装置１２上で撮像画像ＰＧ内に撮像されたマーク画像に対する操作を受けたことに応じて、情報処理装置１４の表示画面上の対応する位置にマーク画像を移動させてもよい。

更に、複数の撮像装置１２が存在する場合、操作入力部６６は、撮像装置１２毎に異なるマーク画像を１個の情報処理装置１４の表示画面１８に表示させてもよい。一方、複数の撮像装置１２が存在する場合であっても、操作入力部６６は、情報処理装置１４の使用者が選択した撮像装置１２によるマーク画像を優先して表示してもよい。優先して表示する形態では、一例として、操作入力部６６は、当該マーク画像のみを表示画面１８に表示させる、または、当該マーク画像を強調して表示画面１８に表示させる。

操作入力部６６は、情報処理装置１４の表示画面１８上に複数のマーク画像を表示させた場合、一定の範囲の領域毎に、マーク画像をカウントしてもよい。例えば、画像貼付部６８が、複数の撮像装置１２の複数の記憶画像ＭＧを表示画面１８に表示させている状態において、操作入力部６６が、各記憶画像ＭＧが表示されている領域上に表示されているマーク画像をカウントすることにより、転送装置１６は記憶画像ＭＧの投票を実行することができる。

また、操作入力部６６が、使用者によるマーク画像の位置の受け付けを適宜変更してもよい。例えば、操作入力部６６は、撮像装置１２が表示画面１８を動画として表示、即ち、ライブビューの状態で使用者の入力を受け付けてマーク画像を表示画面１８に表示させてもよい。また、操作入力部６６は、撮像装置１２が表示画面１８を静止画として表示させている状態で使用者の入力を受け付けてマーク画像を表示させてもよい。

上述の実施形態では、画像貼付部６８が、画像が表示されていない貼付範囲ＤＡに記憶画像ＭＧを貼り付ける例を示したが、貼り付ける形態はこれに限られない。例えば、画像貼付部６８は、記憶画像ＭＧが貼り付けられている貼付範囲ＤＡに新たな記憶画像ＭＧを置換して貼り付けてもよい。この場合、画像貼付部６８は、先の記憶画像ＭＧの位置及び大きさに一致させて、新たな記憶画像ＭＧを貼り付けてもよい。また、画像貼付部６８は、撮像装置１２から転送された記憶画像ＭＧ以外の画像が貼り付けられている領域に記憶画像ＭＧを貼り付けてもよい。画像貼付部６８は、使用者によって選択された記憶画像ＭＧの位置に新たな記憶画像ＭＧを貼り付けてもよい。更に、画像貼付部６８は、新たな記憶画像ＭＧを貼り付ける場合、使用者によって選択された置換対象の先の記憶画像ＭＧを記憶部５４から削除してもよい。

上述した実施形態では、画像貼付部６８は記憶画像ＭＧを貼り付ける例をあげたが、画像貼付部６８は、記憶画像ＭＧに代えて貼付情報、または、記憶画像ＭＧに加えて貼付情報を表示画面１８に表示させてもよい。例えば、画像貼付部６８は、記憶画像ＭＧを説明するキャプション情報を貼付情報として表示画面１８に表示させてもよい。また、画像貼付部６８は、撮像装置１２の記憶部３４及び情報処理装置１４の記憶部５０を検索することにより、貼り付ける記憶画像ＭＧに関連する情報を抽出して、貼付情報を生成してもよい。例えば、画像貼付部６８は、記憶画像ＭＧに含まれる撮像した位置及び日時に基づいて、予定表の情報を検索して予定の名称を含む貼付情報を生成してもよい。また、画像貼付部６８は、記憶画像ＭＧに含まれる情報を画像認識によって認識して、認識した対象に関連する貼付情報を生成してもよい。例えば、画像貼付部６８は、記憶画像ＭＧに含まれる人物を画像認識によって判別して、当該人物の名前、メールアドレス等を貼付情報としてもよい。更に、画像貼付部６８は、記憶画像ＭＧを貼り付ける貼付範囲ＤＡがアプリケーションのアイコンであった場合、当該アプリケーションを起動して、記憶画像ＭＧを貼り付けてもよい。例えば、アプリケーションがメールに関するアプリケーションであった場合、画像貼付部６８は、メールのアプリケーションを起動させて、送信メールに記憶画像ＭＧを添付してもよい。

上述した実施形態における各構成の接続関係、機能等は適宜変更してよい。また、上述した実施形態を組み合わせてもよい。

例えば、上述した実施形態では、転送装置１６が、表示画像取得部６０と、撮像画像取得部６２と、画像比較部６４と、操作入力部６６と、画像貼付部６８とを有する例を示したが、これに限定されない。表示画像取得部６０、撮像画像取得部６２、画像比較部６４、操作入力部６６、及び、画像貼付部６８の一部または全てを、撮像装置１２または情報処理装置１４に設けてもよい。

図１４は、本実施形態に係るコンピュータ１９００のハードウェア構成の一例を示す。本実施形態に係るコンピュータ１９００は、情報処理部の一例である。コンピュータ１９００は、ホスト・コントローラ２０８２により相互に接続されるＣＰＵ２０００、ＲＡＭ２０２０、グラフィック・コントローラ２０７５、及び表示部２０８０を有するＣＰＵ周辺部と、入出力コントローラ２０８４によりホスト・コントローラ２０８２に接続される通信インターフェイス２０３０、及び、ハードディスクドライブ２０４０を有する入出力部と、入出力コントローラ２０８４に接続されるＲＯＭ２０１０、メモリドライブ２０５０及び入出力チップ２０７０を有するレガシー入出力部とを備える。

ホスト・コントローラ２０８２は、ＲＡＭ２０２０と、高い転送レートでＲＡＭ２０２０をアクセスするＣＰＵ２０００及びグラフィック・コントローラ２０７５とを接続する。ＣＰＵ２０００は、ＲＯＭ２０１０及びＲＡＭ２０２０に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィック・コントローラ２０７５は、ＣＰＵ２０００等がＲＡＭ２０２０内に設けたフレーム・バッファ上に生成する画像データを取得し、表示部２０８０上に表示させる。これに代えて、グラフィック・コントローラ２０７５は、ＣＰＵ２０００等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。

入出力コントローラ２０８４は、ホスト・コントローラ２０８２と、比較的高速な入出力装置である通信インターフェイス２０３０、ハードディスクドライブ２０４０を接続する。通信インターフェイス２０３０は、ネットワークを介して他の装置と通信する。ハードディスクドライブ２０４０は、コンピュータ１９００内のＣＰＵ２０００が使用する表示プログラム等のプログラム及びデータを格納する。

また、入出力コントローラ２０８４には、ＲＯＭ２０１０と、メモリドライブ２０５０、及び入出力チップ２０７０の比較的低速な入出力装置とが接続される。ＲＯＭ２０１０は、コンピュータ１９００が起動時に実行するブート・プログラム、及び／又は、コンピュータ１９００のハードウェアに依存するプログラム等を格納する。メモリドライブ２０５０は、メモリカード２０９０から例えば表示プログラム等のプログラム又はデータを読み取り、ＲＡＭ２０２０を介してハードディスクドライブ２０４０に提供する。入出力チップ２０７０は、メモリドライブ２０５０を入出力コントローラ２０８４へと接続すると共に、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を入出力コントローラ２０８４へと接続する。

ＲＡＭ２０２０を介してハードディスクドライブ２０４０に提供されるプログラムは、メモリカード２０９０、又はＩＣカード等の記録媒体に格納されて利用者によって提供される。表示プログラム等のプログラムは、記録媒体から読み出され、ＲＡＭ２０２０を介してコンピュータ１９００内のハードディスクドライブ２０４０にインストールされ、ＣＰＵ２０００において実行される。

コンピュータ１９００にインストールされ、コンピュータ１９００を転送装置１６として機能させるプログラムは、表示画像取得モジュール、撮像画像取得モジュール、画像比較モジュール、操作入力モジュール、及び、画像貼付モジュールとを備える。これらのプログラム又はモジュールは、ＣＰＵ２０００等に働きかけて、コンピュータ１９００を、表示画像取得モジュール、撮像画像取得モジュール、画像比較モジュール、操作入力モジュール、及び、画像貼付モジュールとしてそれぞれ機能させる。

これらのプログラムに記述された情報処理は、コンピュータ１９００に読込まれることにより、ソフトウェアと上述した各種のハードウェア資源とが協働した具体的手段である表示画像取得モジュール、撮像画像取得モジュール、画像比較モジュール、操作入力モジュール、及び、画像貼付モジュールとして機能する。そして、これらの具体的手段によって、本実施形態におけるコンピュータ１９００の使用目的に応じた情報の演算又は加工を実現することにより、使用目的に応じた特有の転送装置１６が構築される。

一例として、コンピュータ１９００と外部の装置等との間で通信を行う場合には、ＣＰＵ２０００は、ＲＡＭ２０２０上にロードされた通信プログラムを実行し、通信プログラムに記述された処理内容に基づいて、通信インターフェイス２０３０に対して通信処理を指示する。通信インターフェイス２０３０は、ＣＰＵ２０００の制御を受けて、ＲＡＭ２０２０、ハードディスクドライブ２０４０、又はメモリカード２０９０等の記憶装置上に設けた送信バッファ領域等に記憶された送信データを読み出してネットワークへと送信し、もしくは、ネットワークから受信した受信データを記憶装置上に設けた受信バッファ領域等へと書き込む。このように、通信インターフェイス２０３０は、ＤＭＡ（ダイレクト・メモリ・アクセス）方式により記憶装置との間で送受信データを転送してもよく、これに代えて、ＣＰＵ２０００が転送元の記憶装置又は通信インターフェイス２０３０からデータを読み出し、転送先の通信インターフェイス２０３０又は記憶装置へとデータを書き込むことにより送受信データを転送してもよい。

また、ＣＰＵ２０００は、ハードディスクドライブ２０４０、メモリドライブ２０５０（メモリカード２０９０）等の外部記憶装置に格納されたファイルまたはデータベース等の中から、全部または必要な部分をＤＭＡ転送等によりＲＡＭ２０２０へと読み込ませ、ＲＡＭ２０２０上のデータに対して各種の処理を行う。そして、ＣＰＵ２０００は、処理を終えたデータを、ＤＭＡ転送等により外部記憶装置へと書き戻す。このような処理において、ＲＡＭ２０２０は、外部記憶装置の内容を一時的に保持するものとみなせるから、本実施形態においてはＲＡＭ２０２０および外部記憶装置等をメモリ、記憶部、または記憶装置等と総称する。本実施形態における各種のプログラム、データ、テーブル、データベース等の各種の情報は、このような記憶装置上に格納されて、情報処理の対象となる。なお、ＣＰＵ２０００は、ＲＡＭ２０２０の一部をキャッシュメモリに保持し、キャッシュメモリ上で読み書きを行うこともできる。このような形態においても、キャッシュメモリはＲＡＭ２０２０の機能の一部を担うから、本実施形態においては、区別して示す場合を除き、キャッシュメモリもＲＡＭ２０２０、メモリ、及び／又は記憶装置に含まれるものとする。

また、ＣＰＵ２０００は、ＲＡＭ２０２０から読み出したデータに対して、プログラムの命令列により指定された、本実施形態中に記載した各種の演算、情報の加工、条件判断、情報の検索・置換等を含む各種の処理を行い、ＲＡＭ２０２０へと書き戻す。例えば、ＣＰＵ２０００は、条件判断を行う場合においては、本実施形態において示した各種の変数が、他の変数または定数と比較して、大きい、小さい、以上、以下、等しい等の条件を満たすかどうかを判断し、条件が成立した場合（又は不成立であった場合）に、異なる命令列へと分岐し、またはサブルーチンを呼び出す。また、ＣＰＵ２０００は、記憶装置内のファイルまたはデータベース等に格納された情報を検索することができる。

以上に示したプログラム又はモジュールは、外部の記録媒体に格納されてもよい。記録媒体としては、メモリカード２０９０の他に、ＤＶＤ又はＣＤ等の光学記録媒体、ＭＯ等の光磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリ等を用いることができる。また、専用通信ネットワーク又はインターネットに接続されたサーバシステムに設けたハードディスク又はＲＡＭ等の記憶装置を記録媒体として使用し、ネットワークを介してプログラムをコンピュータ１９００に提供してもよい。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。なお、本明細書によれば、以下の各項目もまた実施形態として開示される。
［項目１］
情報処理装置の表示画面に表示された表示画像を取得する表示画像取得部と、
撮像装置により撮像された前記表示画面の撮像画像を取得する撮像画像取得部と、
前記表示画像および前記撮像画像を比較して前記撮像画像上の位置と前記表示画像上の位置の対応を付ける画像比較部と、
前記撮像画像上の位置が指定されたことに応じて、当該位置に対応する前記表示画像上の位置に対する操作を入力する操作入力部と、
を備える装置。
［項目２］
前記操作入力部は、入力された操作を前記情報処理装置に対して送信する、
項目１に記載の装置。
［項目３］
前記操作に応じて前記撮像装置に記憶された記憶画像を前記表示画像上の対応する位置に貼り付ける画像貼付部を更に備える項目１または２に記載の装置。
［項目４］
前記撮像装置は前記撮像画像上に貼付範囲を表示し、
前記画像貼付部は、貼付操作を受けると当該貼付範囲に対応する前記表示画像上の範囲に前記記憶画像を貼り付ける、
項目３に記載の装置。
［項目５］
前記操作入力部は、前記撮像装置に対する使用者の操作に応じて貼付範囲を変更させる、
項目４に記載の装置。
［項目６］
前記画像貼付部は、前記表示画像および前記撮像画像の間の傾きに応じた形状の前記貼付範囲を設定する、
項目４または５に記載の装置。
［項目７］
前記情報処理装置の前記表示画面上に貼付範囲を表示させ、
前記操作入力部は、前記撮像装置に対する使用者の操作に応じて前記表示画面上の前記貼付範囲を変更させる、
項目１から３のいずれか１項に記載の装置。
［項目８］
前記情報処理装置の前記表示画面上に前記貼付範囲を表示させ、前記貼付範囲内に前記撮像装置に記憶された記憶画像のプレビューを表示させる画像貼付部を更に備える、
項目７に記載の装置。
［項目９］
前記撮像画像取得部は、前記撮像装置が前記表示画面を撮像したことを前記情報処理装置に通知し、
前記情報処理装置は、当該通知を受けたことに応じて前記表示画像を保存する、
項目１から８のいずれか１項に記載の装置。
［項目１０］
前記画像比較部は、複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された前記表示画面がいずれの情報処理装置に対応するかを特定する、
項目１から９のいずれか１項に記載の装置。
［項目１１］
前記画像比較部は、複数の表示画像のそれぞれと前記撮像画像との一致度を算出し、一致度が基準以上である前記表示画像を表示する前記情報処理装置を特定する、
項目１０に記載の装置。
［項目１２］
情報処理装置の表示画面に表示された表示画像を取得する表示画像取得段階と、
撮像装置により撮像された前記表示画面の撮像画像を取得する撮像画像取得段階と、
前記表示画像および前記撮像画像を比較して前記撮像画像上の位置と前記表示画像上の位置の対応を付ける画像比較段階と、
前記撮像画像上の位置が指定されたことに応じて、当該位置に対応する前記表示画像上の位置に対する操作を入力する操作入力段階と、
を備える方法。
［項目１３］
情報処理装置の表示画面に表示された表示画像を取得する表示画像取得機能と、
撮像装置により撮像された前記表示画面の撮像画像を取得する撮像画像取得機能と、
前記表示画像および前記撮像画像を比較して前記撮像画像上の位置と前記表示画像上の位置の対応を付ける画像比較機能と、
前記撮像画像上の位置が指定されたことに応じて、当該位置に対応する前記表示画像上の位置に対する操作を入力する操作入力機能と、
をコンピュータに実行させるプログラム。
［項目１４］
複数の情報処理装置のそれぞれの表示画面に表示された複数の表示画像を取得する表示画像取得部と、
撮像装置により撮像された、前記複数の情報処理装置のいずれかの前記表示画面の撮像画像を取得する撮像画像取得部と、
前記複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された前記表示画面がいずれの情報処理装置に対応するかを特定する画像比較部と、
を備える装置。
［項目１５］
複数の情報処理装置のそれぞれの表示画面に表示された複数の表示画像を取得する表示画像取得段階と、
撮像装置により撮像された、前記複数の情報処理装置のいずれかの前記表示画面の撮像画像を取得する撮像画像取得段階と、
前記複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された表示画面がいずれの情報処理装置に対応するかを特定する画像比較段階と、
を備える方法。
［項目１６］
複数の情報処理装置のそれぞれの表示画面に表示された複数の表示画像を取得する表示画像取得機能と、
撮像装置により撮像された、前記複数の情報処理装置のいずれかの前記表示画面の撮像画像を取得する撮像画像取得機能と、
前記複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された表示画面がいずれの情報処理装置に対応するかを特定する画像比較機能と、
をコンピュータに実行させるプログラム。

１０ 転送システム
１２ 撮像装置
１４ 情報処理装置
１６ 転送装置
１８ 表示画面
３０ 処理部
３２ 撮像部
３４ 記憶部
３６ 表示部
３８ 入力部
４０ 通信部
４２ 処理部
４６ 入力部
４８ 通信部
５０ 記憶部
５２ 通信部
５４ 記憶部
５６ 制御部
６０ 表示画像取得部
６２ 撮像画像取得部
６４ 画像比較部
６６ 操作入力部
６８ 画像貼付部
１９００ コンピュータ
２０００ ＣＰＵ
２０１０ ＲＯＭ
２０２０ ＲＡＭ
２０３０ 通信インターフェイス
２０４０ ハードディスクドライブ
２０５０ メモリドライブ
２０７０ 入出力チップ
２０７５ グラフィック・コントローラ
２０８０ 表示部
２０８２ ホスト・コントローラ
２０８４ 入出力コントローラ
２０９０ メモリカード

Claims (19)

1. 情報処理装置の表示画面に表示された表示画像を取得する表示画像取得部と、
   撮像装置により撮像された前記表示画面の撮像画像を取得し、前記撮像装置が前記表示画面を撮像したことを前記情報処理装置に通知することにより、前記通知を受けた前記情報処理装置により前記表示画像を保存させる撮像画像取得部と、
   前記表示画像および前記撮像画像を比較して前記撮像画像上の位置と前記表示画像上の位置の対応を付ける画像比較部と、
   前記撮像画像上の位置が指定されたことに応じて、当該位置に対応する前記表示画像上の位置に対する操作を入力する操作入力部と、
   を備える装置。
2. 前記操作入力部は、入力された操作を前記情報処理装置に対して送信する
   請求項１に記載の装置。
3. 前記操作入力部は、前記撮像装置に対する使用者の操作に応じて貼付範囲を変更させる
   請求項１または２に記載の装置。
4. 前記撮像画像は静止画像であり、
   当該装置は、
   撮影した前記撮像画像上において貼付範囲を選択／変更する操作を前記撮像装置が受け付けると、前記貼付範囲に対応する前記表示画像上の範囲に前記撮像装置に記憶された記憶画像を貼り付けるように前記情報処理装置に指示する画像貼付部
   を更に備える
   請求項１〜３のいずれか１項に記載の装置。
5. 前記画像貼付部は、前記表示画像および前記撮像画像の間の傾きに応じた形状の前記貼付範囲を設定する
   請求項４に記載の装置。
6. 前記画像貼付部は、前記情報処理装置の前記表示画面上に前記貼付範囲を表示させ、前記貼付範囲内に前記撮像装置に記憶された記憶画像のプレビューを表示させるようにさらに構成される、
   請求項５に記載の装置。
7. 前記情報処理装置の前記表示画面上に貼付範囲を表示させ、
   前記操作入力部は、前記撮像装置に対する使用者の操作に応じて前記表示画面上の前記貼付範囲を変更させる
   請求項１から６のいずれか１項に記載の装置。
8. 前記画像比較部は、複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された前記表示画面がいずれの情報処理装置に対応するかを特定する
   請求項１から７のいずれか１項に記載の装置。
9. 前記画像比較部は、複数の表示画像のそれぞれと前記撮像画像との一致度を算出し、一致度が基準以上である前記表示画像を表示する前記情報処理装置を特定する
   請求項８に記載の装置。
10. 情報処理装置の表示画面に表示された表示画像を取得する表示画像取得段階と、
    撮像装置により撮像された前記表示画面の撮像画像を取得する撮像画像取得段階と、
    前記撮像装置が前記表示画面を撮像したことを前記情報処理装置に通知することにより、前記通知を受けた前記情報処理装置により前記表示画像を保存させる撮像通知段階と、
    前記表示画像および前記撮像画像を比較して前記撮像画像上の位置と前記表示画像上の位置の対応を付ける画像比較段階と、
    前記撮像画像上の位置が指定されたことに応じて、当該位置に対応する前記表示画像上の位置に対する操作を入力する操作入力段階と、
    を備える方法。
11. 前記撮像画像は静止画像であり、
    当該方法は、
    撮影した前記撮像画像上において貼付範囲を選択／変更する操作を前記撮像装置が受け付けると、前記貼付範囲に対応する前記表示画像上の範囲に前記撮像装置に記憶された記憶画像を貼り付けるように前記情報処理装置に指示する画像貼付段階、
    を更に備える
    請求項１０に記載の方法。
12. 情報処理装置の表示画面に表示された表示画像を取得する表示画像取得機能と、
    撮像装置により撮像された前記表示画面の撮像画像を取得する撮像画像取得機能と、
    前記撮像装置が前記表示画面を撮像したことを前記情報処理装置に通知することにより、前記通知を受けた前記情報処理装置により前記表示画像を保存させる撮像通知機能と、
    前記表示画像および前記撮像画像を比較して前記撮像画像上の位置と前記表示画像上の位置の対応を付ける画像比較機能と、
    前記撮像画像上の位置が指定されたことに応じて、当該位置に対応する前記表示画像上の位置に対する操作を入力する操作入力機能と、
    をコンピュータに実行させるプログラム。
13. 前記撮像画像は静止画像であり、
    前記コンピュータに、
    撮影した前記撮像画像上において貼付範囲を選択／変更する操作を前記撮像装置が受け付けると、前記貼付範囲に対応する前記表示画像上の範囲に前記撮像装置に記憶された記憶画像を貼り付けるように前記情報処理装置に指示する画像貼付機能、
    を更に実行させる
    請求項１２に記載のプログラム。
14. 複数の情報処理装置のそれぞれの表示画面に表示された複数の表示画像を取得する表示画像取得部と、
    撮像装置により撮像された、前記複数の情報処理装置のいずれかの前記表示画面の撮像画像を取得し、前記撮像装置が前記表示画面を撮像したことを前記複数の情報処理装置に通知することにより、前記通知を受けた情報処理装置により前記表示画像を保存させる撮像画像取得部と、
    前記複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された前記表示画面がいずれの情報処理装置に対応するかを特定する画像比較部と、
    を備える装置。
15. 前記撮像画像は静止画像であり、
    当該装置は、
    撮影した前記撮像画像上において貼付範囲を選択／変更する操作を前記撮像装置が受け付けると、前記貼付範囲に対応する前記表示画像上の範囲に前記撮像装置に記憶された記憶画像を貼り付けるように前記情報処理装置に指示する画像貼付部、
    を更に備える
    請求項１４に記載の装置。
16. 複数の情報処理装置のそれぞれの表示画面に表示された複数の表示画像を取得する表示画像取得段階と、
    撮像装置により撮像された、前記複数の情報処理装置のいずれかの前記表示画面の撮像画像を取得する撮像画像取得段階と、
    前記撮像装置が前記表示画面を撮像したことを前記複数の情報処理装置に通知することにより、前記通知を受けた情報処理装置により前記表示画像を保存させる撮像通知段階と、
    前記複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された表示画面が前記複数の情報処理装置の中のいずれに対応するかを特定する画像比較段階と、
    を備える方法。
17. 前記撮像画像は静止画像であり、
    当該方法は、
    撮影した前記撮像画像上において貼付範囲を選択／変更する操作を前記撮像装置が受け付けると、前記貼付範囲に対応する前記表示画像上の範囲に前記撮像装置に記憶された記憶画像を貼り付けるように前記情報処理装置に指示する画像貼付段階、
    を更に備える
    請求項１６に記載の方法。
18. 複数の情報処理装置のそれぞれの表示画面に表示された複数の表示画像を取得する表示画像取得機能と、
    撮像装置により撮像された、前記複数の情報処理装置のいずれかの前記表示画面の撮像画像を取得する撮像画像取得機能と、
    前記撮像装置が前記表示画面を撮像したことを前記複数の情報処理装置に通知することにより、前記通知を受けた情報処理装置により前記表示画像を保存させる撮像通知機能と、
    前記複数の表示画像のそれぞれと前記撮像画像を比較して、前記撮像装置により撮像された表示画面が前記複数の情報処理装置の中のいずれに対応するかを特定する画像比較機能と、
    をコンピュータに実行させるプログラム。
19. 前記撮像画像は静止画像であり、
    前記コンピュータに、
    撮影した前記撮像画像上において貼付範囲を選択／変更する操作を前記撮像装置が受け付けると、前記貼付範囲に対応する前記表示画像上の範囲に前記撮像装置に記憶された記憶画像を貼り付けるように前記情報処理装置に指示する画像貼付機能、
    を更に実行させる
    請求項１８に記載のプログラム。

Images