JP2021009265A

JP2021009265A - 情報処理装置、情報処理方法、およびプログラム

Info

Publication number: JP2021009265A
Application number: JP2019124163A
Authority: JP
Inventors: 小山　徹; Toru Koyama; 小山　　徹
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2019-07-03
Filing date: 2019-07-03
Publication date: 2021-01-28

Abstract

【課題】投写装置による投写画像の投写面上での位置の調整を支援する。【解決手段】情報処理装置は、画像投写装置による投写画像を撮像して得た撮像画像３００に基づいて、投写面上における投写画像の位置を示す第１ポインタ５００、５０１、５０２、５０３と、撮像画像内の座標系で設定された投写画像の目標位置を示す第２ポインタ３１０、３１１、３１２、３１３を表示装置に表示させる。【選択図】図５

Description

本発明は、情報処理装置、情報処理方法、およびプログラムに関し、特に、投写装置による投写画像の投写面上での位置の調整を支援する技術に関する。

投写装置によって投写面に画像を投写する場合、投写面上に投写される画像の位置を目標となる位置（以下、目標位置という）に合わせる必要がある。

特許文献１は、複数のプロジェクタから投写される複数の画像を用いて１つの画像を投写面上に形成するシステムを開示している。このシステムでは、各プロジェクタが他のプロジェクタの担当投写領域の画像表示と一部が重畳した担当投写領域の画像表示を担当する。プロジェクタは、投写可能領域が担当投写領域を包含しない場合、プロジェクタの位置を調整する際にユーザにより参照されるガイド図形を生成する。プロジェクタは、投写可能領域が担当投写領域を包含する場合、ガイド図形と組み合わされて位置調整の基準としてユーザにより参照される参照図形を生成する。

特開２０１５−１２１７７９号公報

しかしながら、特許文献１には、少なくとも１台のプロジェクタの投写可能領域が担当投写領域を包含しないと、参照画像を生成することができず、プロジェクタによる画像のスクリーン上での位置の調整を支援できない可能性があった。

本発明は、投写装置による投写画像の投写面上での位置の調整を支援することを目的とする。

本発明の一態様に係る情報処理装置は、投写装置による投写画像を撮像して得た撮像画像に基づいて、投写面上における前記投写画像の位置を取得する取得手段と、前記撮像画像内の座標系で前記投写画像の目標位置を設定する設定手段と、前記取得手段により取得された前記投写画像の位置を示す第１ポインタと、前記設定手段により設定された前記投写画像の目標位置を示す第２ポインタを表示手段に表示させる表示制御手段と、を備えることを特徴とする。

本発明によれば、投写装置による投写画像の投写面上での位置の調整を支援することができる。

システムの概略構成例を示す図画像投写装置による投写画像の投写面上での位置の調整を支援する処理の手順例を示すフローチャート目標投写位置の設定時の表示例を示す図投写面上の投写画像の位置取得方法を説明するための図各画像投写装置による投写画像の位置表示例を示す図投写画像の位置の移動可能領域を取得する処理の手順例を示すフローチャート投写画像の位置の移動可能領域の表示例を示す図各投写画像の位置と目標投写位置の対応の表示例を示す図各投写画像の位置の目標投写位置への移動の判定結果例を示す図投写画像の位置の補正方法を説明するための図投写画像の投写領域の補正処理の手順例を示すフローチャート投写画像の投写領域の補正処理の手順例を示すフローチャート投写画像の位置の移動可能領域を導出する処理の手順例を示すフローチャート光学ズーム倍率を調整する処理の手順例を示すフローチャートレンズシフト機構による投写画像の位置の移動可能領域の導出方法を説明するための図光学ズーム倍率最大時の投写領域を導出する処理の手順例を示すフローチャート投写位置移動機構により目標投写領域が投写可能な投写位置領域の表示例を示す図投写画像への情報重畳表示例を示す図情報処理装置の構成例を示す図

以下、本発明を実施するための形態について図面を用いて説明する。ただし、この実施形態に記載されている構成要素はあくまで例示であり、本発明の範囲をそれらに限定する趣旨のものではない。また、実施形態で説明されている構成要素の組み合わせのすべてが、課題を解決するための手段に必須のものとは限らず、種々の変形及び変更が可能である。

＜実施形態１＞
図１は、本実施形態に係るシステムの概略構成例を示す図である。図１に示す投写面１００は、後述の、第１画像投写装置１０１、第２画像投写装置１０２、第３画像投写装置１０３、第４画像投写装置１０４それぞれが投写する投写面を示している。

本実施形態のシステムは、投写面１００、第１画像投写装置１０１、第２画像投写装置１０２、第３画像投写装置１０３、第４画像投写装置１０４、撮像装置１０５、情報処理装置１０６、表示装置１０７、入力装置１０８を有する。

上述の各画像投写装置１０１〜１０４はそれぞれ情報処理装置１０６に接続されており、情報処理装置１０６から送信された画像（以下、投写画像ともいう）を受信し、受信した画像を投写面１００に投写する。各画像投写装置１０１〜１０４と情報処理装置１０６とは、例えば、無線ＬＡＮなどの無線や有線ＬＡＮなどの有線で接続され、データを送受信可能であれば、その接続形態を問わない。各画像投写装置１０１〜１０４は、レンズのズーム機構、画像投写装置の設置位置を移動することなく、画像投写位置を移動することができる投写位置移動機構を備える。画像投写位置とは、投写面上における投写画像の中心位置であり、投写画像の投写領域の中心部（重心）となる位置である。本実施形態における投写位置移動機構は、光学的に投写位置を水平方向および垂直方向に移動するレンズシフト機構、光学的に投写領域を拡縮する光学ズーム機構、投写画像を内部の画像処理により幾何変換する幾何変換機構を含む。各画像投写装置１０１〜１０４は、情報処理装置１０６又はリモートコントローラ（不図示）や各画像投写装置に備え付けられるボタン（不図示）の操作による指示等に基づき、投写位置移動機構を駆動し投写領域の拡縮、投写位置の移動を実行することができる。すなわち、レンズシフト機構、光学ズーム機構、幾何変換機構を駆動し投写領域の拡縮、投写位置の移動を実行することができる。本実施形態のシステムは、投写装置を第１〜第４画像投写装置１０１〜１０４の４台有する。システムが有する投写装置の台数は４台に限定されず、３台以下としてもよいし５台以上としてもよい。

撮像装置１０５は、投写面１００を撮像するための装置であり、詳細につき後述する投写面１００上の目標投写領域全体を撮像できるように設置される。撮像装置１０５は、情報処理装置１０６に接続されており、撮像して取得した撮像画像を情報処理装置１０６に送信する。撮像装置１０５と情報処理装置１０６とは、例えば、無線ＬＡＮなどの無線や有線ＬＡＮなどの有線で接続され、データを送受信可能であれば、その接続形態を問わない。

情報処理装置１０６として、例えばＰＣ（パーソナル・コンピュータ）のような汎用の計算機を用いることができる。情報処理装置１０６は、内部のＣＰＵ（セントラル・プロセッシング・ユニット）上で動作するプログラムによって後述する各処理を実行する。情報処理装置１０６は、前述したように接続されている各画像投写装置１０１〜１０４に投写画像や、レンズのズーム機構、レンズシフト機構、光学ズーム機構、幾何変換機構の制御情報などを送信する。また、情報処理装置１０６は、撮像装置１０５から送信された撮像画像を受信する。情報処理装置１０６は、受信した撮像画像を解析して各画像投写装置１０１〜１０４の現在の投写位置を導出するなどの様々な情報処理を実行する。処理内容の詳細な説明は後述する。

表示装置１０７は情報処理装置１０６に接続され、情報処理装置１０６から送信される、撮像画像やユーザが操作可能なＧＵＩ（グラフィック・ユーザ・インターフェース）等を含む画像を受信して表示画面に表示するモニタやディスプレイ等の表示装置である。

入力装置１０８は、情報処理装置１０６に対するユーザの指示を受け付けるためのマウスやキーボードなどの入力装置である。

表示装置１０７と入力装置１０８は一体となっていてもよく、タッチパネル対応ディスプレイなどであってもよい。

また、撮像装置１０５と情報処理装置１０６と表示装置１０７と入力装置１０８は一体となっていてもよく、カメラ付きのスマートフォンやタブレット端末であってもよい。

次に、システムにおける、画像投写装置による投写画像の投写面上での位置の調整を支援する処理について、図２を参照して説明する。図２は、上述したシステムにおける、画像投写装置による投写面上の投写画像の位置の調整を支援する処理の手順例を示すフローチャートである。ステップ毎に説明する。なお、各処理の説明における符号「Ｓ」は、当該フローチャートにおけるステップであることを意味する。

先ず、Ｓ２００では、ユーザによる操作で、撮像装置１０５は、各画像投写装置１０１〜１０４に投写させたい投写面１００上の領域全体を含むように投写面１００を撮像して撮像画像を取得する。撮像装置１０５は、取得した撮像画像を情報処理装置１０６に送信する。情報処理装置１０６は、撮像装置１０５から送信された撮像画像を受信し、受信した撮像画像にユーザ操作用のメニューなどを重畳して重畳画像を生成する。情報処理装置１０６は、生成した重畳画像を入力装置１０８からのユーザ操作による指示を受け付けるＧＵＩとして表示装置１０７に送信して表示装置１０７の表示画面に表示させる。

Ｓ２０１では、情報処理装置１０６は、表示装置１０７の表示画面に表示されたＧＵＩ上において、入力装置１０８からのユーザ操作により指定された情報を基に、第１〜第４画像投写装置１０１〜１０４それぞれに対応する投写領域の目標投写位置を決定する。情報処理装置１０６は、決定した、第１〜第４画像投写装置１０１〜１０４それぞれに対応する投写領域の目標投写位置に関する目標投写位置情報を送信して表示装置１０７に受信させる。情報処理装置１０６は、情報処理装置１０６から受信した、第１〜第４画像投写装置１０１〜１０４それぞれに対応する目標投写位置情報を基に、投写領域の目標投写位置（領域）を撮像画像に重畳して表示装置１０７の表示画面に表示させる。

図３は、Ｓ２０１において、表示装置１０７の表示画面上に表示される撮像画像を含むＧＵＩ例を示す図である。本実施形態では、上述の画像投写装置１０１〜１０４の４台から投写された投写画像を組み合わせて１台の画像投写装置で投写可能な投写領域よりも、より大きな１枚の投写画像を投写するマルチプロジェクションを例に説明する。

図３（ａ）は、全体の目標投写領域３０１をＧＵＩ上で設定する方法を説明する図である。ＧＵＩ上の撮像画像３００は、撮像装置１０５によって撮像された画像である。撮像画像３００における全体の目標投写領域３０１は、ユーザによって設定される領域であって、第１〜第４画像投写装置１０１〜１０４全てから投写される画像が組み合わされて１つの画像として投写される領域である。全体の目標投写領域３０１の始点位置３０２は、ＧＵＩ上のカーソルで示された位置であり、ユーザが撮像画像３００上で全体の目標投写領域３０１を設定する際に始点となる位置である。同様に、目標投写領域指定の終点位置３０３は、ＧＵＩ上のカーソルで示された位置であり、ユーザが撮像画像３００上で全体の目標投写領域３０１を設定する際に終点となる位置である。ユーザは、入力装置１０８を用いてカーソルを操作し始点位置３０２にてドラッグ操作を開始し終点位置３０３にてドラッグ操作を終了する（解除する）。このようなユーザ操作により、情報処理装置１０６は、ドラッグ開始位置およびドラッグ終了位置をそれぞれ領域指定の始点および終点と認識する。さらに、情報処理装置１０６は、始点位置３０２と終点位置３０３を結ぶ直線３０４を対角線とする長方形領域を全体の目標投写領域３０１として設定してＧＵＩ上の撮像画像３００に重畳して表示装置１０７の表示画面に表示させる。全体の目標投写領域３０１の領域設定方法として、例えば、ＧＵＩ上に表示されたメニュー画面にて撮像画像上の座標を数値で入力装置１０８からのユーザ操作に設定させてもよい。また、後述のＳ２０３における各画像投写装置１０１〜１０４の投写位置の取得結果を基に、情報処理装置１０６が全体の目標投写領域３０１の領域を推定してユーザ操作なしに自動的に設定してもよい。全体の目標投写領域３０１の領域設定方法は、これらの方法に限定されず、その他いかなる方法で行われてもよい。また、全体の目標投写領域３０１の水平方向の幅は、始点位置３０２と終点位置３０３の水平方向の差分から導出される。なお、全体の目標投写領域３０１の水平方向の幅の導出方法は、これに限定されず他のいかなる方法を用いて行ってもよい。

次に、全体の目標投写領域３０１として設定された投写領域を複数の画像投写装置で部分領域毎に分担して投写する場合の投写領域の分割方法を設定する。すなわち、全体の目標投写領域３０１を画像投写装置の数量に対応した複数の部分領域で構成するように分割するための分割位置を設定する。図３（ｂ）は、分割方法設定時の表示装置１０７の表示画面上の表示画像例を示す図である。本実施形態では、全体の目標投写領域３０１を垂直方向および水平方向にてそれぞれ２等分した４つの部分領域を第１〜第４画像投写装置１０１〜１０４で分担する。担当する部分領域に対して第１〜第４画像投写装置１０１〜１０４がそれぞれ画像を投写するものとする。分割数の設定方法として、例えば、ＧＵＩ上に表示されたメニュー画面にて水平方向および垂直方向の分割数をそれぞれ数値で入力装置１０８からのユーザ操作により設定させてもよい。本実施形態では、全体の目標投写領域３０１の水平方向の分割数が２に、全体の目標投写領域３０１の垂直方向の分割数が２に設定される。

分割数が設定された後、水平方向（横方向）および垂直方向（横方向に直交する縦方向）それぞれに全体の目標投写領域３０１を２等分する位置に分割領域の境界を示す線がＧＵＩ上に表示される。太線３０５は、全体の目標投写領域３０１にて垂直方向上端と下端に接続しており全体の目標投写領域３０１を水平方向にて分割する境界である分割境界を示している。太線３０６は、全体の目標投写領域３０１にて水平方向左端と右端に接続しており、全体の目標投写領域３０１を垂直方向にて分割する境界である分割境界を示している。ただし、各画像投写装置１０１〜１０４による投写画像の投写面１００上における投写領域の面積が必ずしも等しくなるように全体の目標投写領域３０１を分割しなくてもよい。分割境界の位置を変更する方法としては、例えば、水平方向の分割境界の位置を変更する場合、入力装置１０８を用いた次の操作をユーザに行わせることにより、水平方向の分割境界を所望の位置に移動することができる。すなわち、ユーザが入力装置１０８を用いてＧＵＩ上の水平方向の分割境界３０５に対しドラッグ操作を行い、水平方向の所望の位置に移動した後にドラッグ操作を解除することで、水平方向の分割境界を所望の位置へ移動することができる。分割境界の位置の変更は、ドラッグ操作に限定されない。例えば、ＧＵＩ上に表示されたメニュー画面にて分割境界の位置を数値で入力装置１０８からのユーザ操作により設定させるなど他のいかなる方法で設定させてもよい。垂直方向の分割境界３０６も、水平方向の分割境界３０５の位置の変更と同様の操作で移動することができる。

次に、ユーザは、隣接する分割投写領域同士のエッジブレンディング幅を設定する。エッジブレンディングは、複数の画像投写装置による投写画像の投写面上での投写領域を繋ぎ合わせる場合に繋ぎ目を目立たなくするために、互いの投写領域の端同士を一部重ね合わせるようにする方法である。エッジブレンティングは、マルチプロジェクション時には通常利用される方法である。本実施形態において、エッジブレンティングは必須のものではない。エッジブレンディングを使用しない場合、エッジブレンディング幅の設定を省略できる。図３（ｃ）は、エッジブレンディング領域を設定した後の表示装置１０７の表示画面上の表示画像例を示す図である。エッジブレンディング領域３０８は、全体の目標投写領域３０１にて垂直方向上端から下端にわたる領域であって、水平方向（横方向）にて隣接する部分領域の端が重なる領域を示している。エッジブレンディング領域３０９は、全体の目標投写領域３０１にて水平方向左端から右端にわたる領域であって、垂直方向（縦方向）にて隣接する部分領域の端が重なる領域を示している。

エッジブレンディング領域の設定は、表示装置１０７の表示画面に表示されるＧＵＩにて入力装置１０８からのユーザ操作により設定される。例えば水平方向のエッジブレンディング幅を設定する場合、ＧＵＩ上に表示したメニュー画面で分割境界３０５を全体の目標投写領域３０１の水平方向で中央位置としたエッジブレンディング幅を数値で入力装置１０８からのユーザ操作により設定させてもよい。数値としては、例えば、全体の目標投写領域３０１の水平方向の幅に対する割合が挙げられる。垂直方向のエッジブレンディング幅を設定する場合も、水平方向のエッジブレンディング幅の設定方法と同様の方法で、設定することができる。エッジブレンディング幅の設定方法は一例であり、ＧＵＩ上でエッジブレンディング領域の始点位置および終点位置を選択して設定するなど他のいかなる方法を用いて行ってもよい。

全体の目標投写領域、全体の目標投写領域の分割方法、エッジブレンディング幅が設定されると、情報処理装置１０６は、各画像投写装置が投写すべき目標投写領域を確定する。全体の目標投写領域とは、全ての画像投写装置を用いて画像を投写面に投写したときに、投写面において、全ての画像投写装置から投写された画像を１つに統合した画像全体が目標の位置に目標の大きさで投写される領域である。図３（ｄ）は、各目標投写領域の重心位置を目標投写位置として表示した状態の表示装置１０７の表示画面上の表示画像例を示す図である。白丸印のポインタで示される位置３１０〜３１３それぞれが全体の目標投写領域３０１を４つに分割した部分領域の重心位置であって、第１〜第４目標投写位置に対応する。以降、位置３１０を第１目標投写位置とし、位置３１１を第２目標投写位置とし、位置３１２を第３目標投写位置とし、位置３１３を第４目標投写位置とする。なお、各目標投写領域における重心位置は、公知の技術により導出される。

図３（ｅ）は、第１目標投写位置３１０に対応する部分領域である第１目標投写領域３１４を表示した状態の表示装置１０７の表示画面上の表示画像例を示す図である。第１目標投写領域３１４は、全体の目標投写領域３０１内で水平および垂直方向のエッジブレンディング領域３０８、３０９を含む太い破線で囲まれた領域で、全体の目標投写領域３０１を４つに分割した部分領域のうち左上の部分領域に対応する領域である。第２〜第４の目標投写位置３１１〜３１３に対応する第２〜第４目標投写領域の表示についても、第１目標投写領域３１４の表示と同様に、実行することができる。第１目標投写位置３１０は、第１目標投写領域３１４の重心位置として導出されて表示される。第２〜第４目標投写位置３１１〜３１３の位置についても、第１目標投写位置３１０と同様の方法で、各目標投写領域の重心位置として導出されて表示される。

Ｓ２０２では、情報処理装置１０６は、現在設置している第１〜第４画像投写装置１０１〜１０４のそれぞれに所定のマーカ画像を送信し各画像投写装置１０１〜１０４から投写面１００に所定のマーカ画像（マーカ）を投写させる。所定のマーカ画像は、後述する情報処理装置１０６の二次記憶装置１９０４などに予め格納されている。本実施形態においては、マーカ画像の投写は、情報処理装置１０６が備える上述の幾何変換機構を使用しない状態で実行される。ただし、マーカ画像投写時の幾何変換状態を情報処理装置１０６に記憶しておき、後で逆変換により幾何変換機構を使用しない状態の投写領域を導出可能であれば、マーカ画像の投写は、幾何変換機構を使用した状態で実行してもよい。

Ｓ２０３では、情報処理装置１０６は、先ず、Ｓ２０２でマーカ画像が投写された投写面１００を撮像装置１０５に撮像させる。撮像装置１０５が投写面１００を撮像して得た撮像画像を情報処理装置１０６に送る。情報処理装置１０６は、撮像装置１０５から送られた撮像画像を受け取り、受け取った撮像画像内でマーカ画像の位置（以下、マーカ位置ともいう）を検出して第１〜第４画像投写装置１０１〜１０４それぞれの投写位置を取得する。マーカ位置の検出方法として、パターンマッチングなどの公知の技術を用いることが可能である。図４は、Ｓ２０３にて、マーカ画像が投写された投写面１００を撮像装置１０５により撮像して得た撮像画像例を示す図である。ここでは、第１画像投写装置１０１に対応するマーカ位置を取得する方法について詳述する。上述の第２〜第４画像投写装置１０２〜１０４に対応するマーカ位置の取得方法に関しても、第１画像投写装置１０１と同様の方法で取得することができる。

撮像画像４００は、Ｓ２０３のマーカ位置取得時において第１画像投写装置１０１からマーカ画像が投写された投写面１００を撮像装置１０５により撮像して得た画像である。撮像画像４００は、太線でＬ字状をなし後述の長方形状の投写領域４０１の左上角部を示す第１のマーカ画像４０２と、太線でＬ字状をなし投写領域４０１の右下角部を示す第２のマーカ画像４０３とを含む。また、撮像画像４００は、太線で十字状をなし投写領域４０１の中心部（重心）を示す第３のマーカ画像４０４を含む。第１、第２、第３のマーカ画像４０２、４０３、４０４によって、撮像画像４００には、長方形状の投写領域４０１が示される。

情報処理装置１０６は、第１画像投写装置１０１に投写を指示したマーカ画像の形状と同じ形状の画像を撮像画像４００内から探索する。情報処理装置１０６は、探索結果に基づき、第１のマーカ画像４０２、第２のマーカ画像４０３、第３のマーカ画像４０４の各マーカ画像に関し、撮像画像４００内での位置（撮像画像内の座標系での位置）を取得することができる。図４に示す、第１のマーカ画像４０２、第２のマーカ画像４０３、第３のマーカ画像４０４の各マーカ画像の形状は一例でありこれらの形状に限定されない。また、撮像画像４００上での第１画像投写装置１０１の投写領域の水平方向および垂直方向の幅（大きさ）と、第１画像投写装置１０１の投写領域の重心位置とを導出可能であれば、投写する各マーカ位置や個数はいかなるものであってもよい。

情報処理装置１０６は、取得した撮像画像４００内でのマーカ位置のうち第３のマーカ画像４０４の位置を第１画像投写装置１０１の投写位置として取得する。また、情報処理装置１０６は、第１のマーカ画像４０２と第２のマーカ画像４０３の位置の水平方向の差分を導出して水平方向の投写領域幅として取得する。情報処理装置１０６は、第１のマーカ画像４０２と第２のマーカ画像４０３の位置の垂直方向の差分を導出して垂直方向の投写領域幅を取得し、以降の処理にて、垂直方向の投写領域幅を水平方向の投写領域幅の代わりに用いてもよい。

他の第２、第３、第４画像投写装置１０２、１０３、１０４により投写されたマーカ画像の投写位置についても、第１画像投写装置１０１と同様の手法で取得することができる。具体的には、第２画像投写装置１０２から第４画像投写装置１０４の各画像投写装置に順番に１台ずつ次の処理を実行する。すなわち、マーカ画像の投写面１００への投写、撮像装置１０５による投写面１００の撮像画像の取得、情報処理装置１０６による撮像画像上のマーカ画像の探索を繰り返して行い、マーカ画像の投写位置を取得する。その他の方法としては、第１〜第４画像投写装置１０１〜１０４それぞれで形状や色などのパターンを異ならせたマーカ画像を第１〜第４画像投写装置１０１〜１０４から同時に投写面に投写させる。そして、撮像装置１０５により投写面が撮像された撮像画像上にて、情報処理装置１０６がそれぞれのパターンを探索することで第１〜第４画像投写装置１０１〜１０４それぞれから投写されたマーカ画像の位置を取得してもよい。その他いかなる方法でマーカ画像の位置を取得してもよい。第２〜第４画像投写装置１０２〜１０４についても、第１画像投写装置１０１の場合と同様、取得したマーカ画像の位置から投写位置と水平方向の投写領域幅を導出する。

Ｓ２０４では、情報処理装置１０６は、Ｓ２０３で取得したマーカ画像の位置に基づき各投写装置の投写位置を示す画像を、投写面１００の撮像画像に重畳して表示装置１０７の表示画面への表示を実行する。第１画像投写装置１０１の投写位置は、Ｓ２０３で検出された、投写領域の重心を示す第３のマーカ画像４０４の撮像画像４００上の位置とすることができる。第２〜第４画像投写装置１０２〜１０４についても、第１画像投写装置１０１の場合と同様である。

図５は、図３（ｄ）に示す表示装置１０７の表示画面上の表示画像に、さらにＳ２０４で第１〜第４画像投写装置１０１〜１０４の投写位置を示す画像を重畳表示した状態を示す図である。第１画像投写装置１０１から画像を投写面１００に投写する現在の位置は、黒丸印のポインタで示され、第１投写位置５００となる。第２画像投写装置１０２から画像を投写面１００に投写する現在の位置は、黒丸印のポインタで示され、第２投写位置５０１となる。第３画像投写装置１０３から画像を投写面１００に投写する現在の位置は、黒丸印のポインタで示され、第３投写位置５０２となる。第４画像投写装置１０４から画像を投写面１００に投写する現在の位置は、黒丸印のポインタで示され、第４投写位置５０３となる。付帯する文字ＩＤ１は、第１投写位置５００に対応する第１画像投写装置１０１の識別文字列である。付帯する文字ＩＤ２は、第２投写位置５０１に対応する第２画像投写装置１０２の識別文字列である。付帯する文字ＩＤ３は、第３投写位置５０２に対応する第３画像投写装置１０３の識別文字列である。付帯する文字ＩＤ４は、第４投写位置５０３に対応する第４画像投写装置１０４の識別文字列である。

以上説明した様に、表示装置１０７の表示画面上に図５に示す画像を表示することで、ユーザは、第１〜第４画像投写装置１０１〜１０４それぞれの第１〜第４投写位置５００〜５０３と第１〜第４目標投写位置３１０〜３１３との位置関係を容易に把握できる。

Ｓ２０５では、情報処理装置１０６は、撮像画像において、第１〜第４画像投写装置１０１〜１０４それぞれに対応する投写画像の投写面上の位置の移動可能な領域（以下、投写位置の移動可能領域ともいう）を取得する。本実施形態における投写位置の移動可能領域とは、第１〜第４画像投写装置１０１〜１０４の設置位置を変更せずに、第１〜第４画像投写装置１０１〜１０４が備える投写位置移動機構を使用して投写位置を移動させることができる領域を指している。情報処理装置１０６は、投写位置の移動可能領域を以下の方法で取得する。

Ｓ２０５の処理の詳細について、図６を参照して説明する。図６は、画像投写装置による投写画像の位置の移動可能領域の取得処理の手順例を示すフローチャートである。第１画像投写装置１０１の投写位置の移動可能領域を取得する場合を例に説明する。

先ず、Ｓ６００では、情報処理装置１０６は、第１画像投写装置１０１の仕様上の、光学ズーム機構による光学ズーム駆動範囲、光学ズームの単位駆動量当たりのズーム倍率変化量に関する情報を取得する。情報処理装置１０６は、さらに、第１画像投写装置１０１の仕様上の、レンズシフト機構によるレンズシフト機構の駆動範囲、レンズシフト機構の単位駆動量当たりの位置変化量などに関する情報を取得する。すなわち、情報処理装置１０６は、第１画像投写装置１０１の設計値から各情報を取得する。情報の取得方法として、例えば一般の画像投写装置の製品の型番ごとの情報を情報処理装置１０６の二次記憶装置などに予め記憶させておき、対象の画像投写装置の型番と合致する型番をユーザがＧＵＩ上などで選択することで取得する方法としてもよい。また、情報の取得方法として、第１画像投写装置１０１の仕様上の、光学ズーム機構による光学ズーム駆動範囲、光学ズームの単位駆動量当たりのズーム倍率変化量などの情報を情報処理装置１０６の二次記憶装置などに予め記憶しておく。第１画像投写装置１０１の仕様上の、レンズシフト機構によるレンズシフト駆動範囲、レンズシフトの単位駆動量当たりの位置変化量などの情報も情報処理装置１０６の二次記憶装置などに予め記憶しておく。そして、予め記憶した情報を二次記憶装置から取得する方法としもよい。すなわち、情報処理装置１０６は、第１画像投写装置１０１の設定値から各情報を取得してもよい。その他、いかなる方法で情報を取得してもよい。

Ｓ６０１では、第１画像投写装置１０１の光学ズーム倍率を調整し、第１画像投写装置１０１の投写領域のサイズを目標投写領域３１４のサイズに合わせる。情報処理装置１０６は、Ｓ６００で取得した単位駆動量当たりのズーム倍率変化量と、Ｓ２０３で取得した第１画像投写装置１０１の水平方向の投写領域幅と目標投写領域の水平方向の幅の比とから必要な光学ズームの駆動量を導出して取得する。なお、情報処理装置１０６は、取得した必要な光学ズームの駆動量を第１画像投写装置１０１に送信して必要な光学ズームの駆動量に基づき光学ズーム機構を駆動させる。このように光学ズーム機構を駆動することで、第１画像投写装置１０１の投写領域のサイズが目標投写領域３１４のサイズと等しくなる。

Ｓ６０２では、情報処理装置１０６は、第１画像投写装置１０１の投写領域の撮像画像３００上における、レンズシフト機構による投写位置（投写画像の中心位置）５００の移動可能領域を導出する。投写位置５００の移動可能領域の導出方法は、Ｓ６００で取得したレンズシフト機構の仕様上の水平及び垂直方向の駆動範囲と、Ｓ２０３で取得した撮像画像３００上での第１画像投写装置１０１の投写領域の水平及び垂直方向の範囲の比から実行できる。

Ｓ６０３では、第１画像投写装置１０１の現在のレンズシフト機構の駆動状態において、光学ズーム倍率を最大とした場合の撮像画像３００上の投写領域を導出する。情報処理装置１０６は、第１画像投写装置１０１の現在の光学ズーム機構の駆動状態と仕様上の最大倍率の光学ズーム機構の駆動状態の駆動量の差分と、単位駆動量当たりの光学ズーム変化量とから、光学ズーム倍率最大にしたときの投写領域の拡大率を導出する。仕様上の最大倍率の光学ズーム機構の駆動状態の駆動量は、例えばＳ６００で取得される。そして、情報処理装置１０６は、現在の投写領域に対して重心を固定して前記導出した拡大率で拡大することで光学ズーム最大時の投写領域を導出する。

情報処理装置１０６は、第１画像投写装置１０１の場合と同様、第２〜第４画像投写装置１０２〜１０４についても、Ｓ６００からＳ６０３の処理を実施することで、レンズシフト機構による投写位置の移動可能領域、光学ズーム最大時の投写領域を導出する。

Ｓ２０６では、情報処理装置１０６は、表示装置１０７に指示して、Ｓ２０５で導出した撮像画像３００上における、レンズシフト機構による投写位置５００の移動可能領域を示す画像を表示装置１０７の表示画面上に表示させる。さらに、情報処理装置１０６は、表示装置１０７に指示して、Ｓ２０５で導出した撮像画像３００上における光学ズーム倍率を最大としたときの投写領域を表示装置１０７の表示画面上に表示させる。図７は、投写位置移動機構による投写位置の移動可能領域の表示例を示す図である。図７（ａ）は、図５に示す画像に、さらに第１画像投写装置１０１のレンズシフト機構による投写位置５００の移動可能領域７００と光学ズーム倍率最大時の投写領域７０１を重畳表示した図である。表示の見易さのため、図７（ａ）には、第１画像投写装置１０１の投写位置５００とそれに対応するレンズシフト機構による投写位置の移動可能領域７００、光学ズーム倍率最大時の投写領域７０１のみを図示している。レンズシフト機構による投写位置の移動可能領域７００が楕円形を示す太線の輪郭線（ポインタ）で表示されている。光学ズーム倍率最大時の投写領域７０１が長方形を示す１点鎖線の輪郭線（ポインタ）で表示されている。ユーザが入力装置１０８からＧＵＩ上の操作を実行することで、表示装置１０７の表示画面上で表示可能な情報を取捨選択した表示と、非表示とを切替えられるようにしてもよい。

レンズシフト機構による投写位置の移動可能領域７００は、第１画像投写装置１０１のレンズシフト機構により第１画像投写装置１０１の投写位置５００を移動できる領域である。目標投写位置３１０が投写位置の移動可能領域７００に含まれる（投写位置の移動可能領域７００内に存在する）場合、レンズシフト機構により第１画像投写装置１０１の投写位置を当該目標投写位置に移動できることを示している。

領域７０１は、第１画像投写装置１０１の光学ズーム倍率最大時の投写領域を示している。目標投写領域が領域７０１に包含される（領域７０１内に存在する）場合、光学ズーム倍率の調整と幾何変換処理により当該目標投写領域に所望の画像を投写することができることを示している。

光学ズーム倍率最大時の投写領域は、レンズシフト機構の駆動状態に合わせて移動する。そのため、領域７０１に目標投写領域が包含されていなくても、レンズシフト機構を併用することで包含するようにできる場合がある。図７（ｂ）は、ユーザが把握しやすくするための情報をさらに重畳表示した状態を示す図である。

レンズシフト機構による仮想的な移動中の投写位置７０２は、破線の丸印で示されている。レンズシフト機構による仮想的な移動中の投写位置７０２の表示は、ユーザによる入力装置１０８を用いた投写位置５００に対するドラッグ操作時にＧＵＩ上の撮像画像３００上にて実行される。

光学ズーム倍率最大時のレンズシフト機構による仮想的の投写位置の移動可能領域７０３は、破線で示される領域である。光学ズーム倍率を変更すると、レンズシフト機構の単位駆動量に対する撮像画像３００上での投写位置の移動量が変化するため、上述の投写位置の移動可能領域７０３の表示を実行する。投写位置の移動可能領域７０３の表示は、レンズシフト機構による仮想的な移動中の投写位置７０２の画像表示と同じ期間に実行される。

仮想の投写位置７０２に対する投写領域７０４は、破線が示す矩形領域で示されている。この領域７０４は、第１画像投写装置１０１の投写位置５００をレンズシフト機構による仮想的な移動中の投写位置７０２へ移動した場合に、その向きと移動量と同じだけ光学ズーム倍率最大時の投写領域７０１を平行移動した領域である。この表示は、仮想の投写位置７０２の移動に追従して移動される。仮想の投写位置７０２に対する投写領域７０４は、仮想の投写位置７０２、光学ズーム倍率最大時のレンズシフト機構による仮想の投写位置の移動可能領域７０３の表示と同じ期間に実行される。仮想の投写位置７０２、光学ズーム倍率最大時のレンズシフト機構による仮想の投写位置の移動可能領域７０３、仮想の投写位置７０２に対する投写領域７０４を表示するためのユーザの操作方法は一例であり、他のいかなる方法で行われてもよい。

このようにすることでユーザは、第１画像投写装置１０１の投写位置５００に対するドラッグ操作中に、仮想の投写位置７０２を光学ズーム倍率最大時のレンズシフト機構による仮想の投写位置の移動可能領域７０３内で移動できる。それに応じて、投写領域７０４が示すレンズシフト機構による仮想的な移動中の投写位置７０２に対応する仮想的な光学ズーム最大時の投写領域を確認できる。そのため、レンズシフト機構により、光学ズーム倍率最大時の投写領域７０１が目標投写領域を包含し得るかを容易に調べることができる。

第２〜第４画像投写装置１０２〜１０４についても、第１画像投写装置１０１と同様、図７に示す情報を表示装置１０７上に表示させることができる。

Ｓ２０７では、Ｓ２０６までに表示装置１０７の表示画像上に表示されたＧＵＩの表示情報を参考に、ＧＵＩにて入力装置１０８からのユーザ操作により、以下に示すように、移動先となる各投写位置の目標投写位置が選択される。すなわち、第１〜第４画像投写装置１０１〜１０４の投写位置５００〜５０３と投写位置５００〜５０３の移動先となる目標投写位置３１０〜３１３との対応付けを実行する。

図８は、第１〜第４画像投写装置１０１〜１０４の投写位置５００〜５０３と投写位置５００〜５０３の移動先となる目標投写位置３１０〜３１３との対応付けを実行する方法を説明する図である。例えば、ユーザは、入力装置１０８を用い投写位置５００に対しドラッグ操作を行い目標投写位置３１０へ移動させて、投写位置５００が目標投写位置３１０に至ると、目標投写位置３１０にてドラッグ操作を解除する。このようなドラッグ操作によって、第１画像投写装置１０１の投写位置５００を第１目標投写位置３１０に対応付けることができる。他の第２〜第４画像投写装置１０２〜１０４についても、第１画像投写装置１０１の場合と同様の操作を行うことで、第２〜第４画像投写装置１０２〜１０４の投写位置５０１〜５０３を目標投写位置３１１〜３１３に対応付けることができる。本実施形態における各投写位置と目標投写位置の対応付けの操作方法は一例であり、他のいかなる方法で行われてもよい。

本実施形態における各投写位置と目標投写位置の対応付けの状態を示す表示装置１０７の表示画面上の表示画像８００〜８０３は、破線矢印（ポインタ）で示されている。具体的には、表示装置１０７の表示画面上の表示画像８００は、第１投写位置５００を第１目標投写位置３１０に対応付ける状態を示している。表示装置１０７の表示画面上の表示画像８０１は、第２投写位置５０１を第２目標投写位置３１１に対応付ける状態を示している。表示装置１０７の表示画面上の表示画像８０２は、第３投写位置５０２を第３目標投写位置３１２に対応付ける状態を示している。表示装置１０７の表示画面上の表示画像８０３は、第４投写位置５０３を第４目標投写位置３１３に対応付ける状態を示している。

Ｓ２０８では、情報処理装置１０６は、各投写位置５００〜５０３に対応する目標投写位置３１０〜３１３の投写領域へ各投写位置５００〜５０３からの画像投写が各画像投写装置１０１〜１０４の投写位置移動処理によって投写可能であるか否かを判定する。各投写位置５００〜５０３は、Ｓ２０７で決定された位置である。第１〜第４画像投写装置１０１〜１０４の投写位置の移動処理は、レンズシフト機構による光学的な投写位置の移動、光学ズーム機構による光学ズーム倍率調整、幾何変換機構による幾何変換処理を含む。情報処理装置１０６は、判定結果を表示装置１０７の表示画面に表示させる。判定結果は、表示装置１０７の表示画面に表示されることから表示情報であるといえる。

上記判定は、Ｓ２０６で導出された各投写装置１０１〜１０４のレンズシフト機構による投写位置の移動可能領域と光学ズーム倍率最大時の投写領域に基づいて行うことができる。一般に、レンズシフト機構による投写位置の移動は、光学的な補正であるため画素補間などの画像処理を伴う幾何変換と比較し画質の低下が小さい。また、光学ズーム倍率を上げることは投写面１００上の投写画像の単位面積当たりの光量や解像度を低下させる。したがって、本実施形態においては、判定結果として次の３つの場合を区別して表示する。１つ目は、各画像投写装置１０１〜１０４についてレンズシフト機構の操作のみで目標投写領域の投写が可能な場合の表示である。２つ目は、レンズシフト機構の操作に加えて、光学ズーム、幾何変換処理を実行することで目標投写領域の投写が可能な場合の表示である。３つ目は、現在の画像投写装置１０１〜１０４の設置位置では、目標投写領域を投写できない場合の表示である。

図９は、Ｓ２０８における判定結果の表示例を示す図である。表示装置１０７の表示画面上に表示される丸印は、各目標投写領域に対する判定結果がレンズシフト機構の操作のみで目標投写領域の投写が可能であることを示す画像（ポインタ）である。表示装置１０７の表示画面上に表示される三角印は、各目標投写領域に対する判定結果がレンズシフト機構の操作に加えて、光学ズーム倍率変更、幾何変換処理を実行することで目標投写領域の投写が可能であることを示す画像（ポインタ）である。表示装置１０７の表示画面上に表示されるバツ印は、各目標投写領域に対する判定結果が現在の画像投写装置の設置位置では目標投写領域を投写できないことを示す画像（ポインタ）である。

図９では、第１画像投写装置１０１に対する判定結果を示す領域９００には、三角印の画像（ポインタ）が表示されている。よって、レンズシフト機構を用いても第１投写位置５００から第１目標投写位置３１０へ移動することができないが、光学ズーム倍率変更、幾何変換処理を用いることで、第１投写位置５００から第１目標投写位置３１０へ移動することができることを示している。すなわち、第１画像投写装置１０１が第１目標投写位置３１０に対応する目標投写領域を投写可能であることを示している。第２画像投写装置１０２に対する判定結果を示す領域９０１には、バツ印の画像（ポインタ）が表示されている。よって、レンズシフト機構を用いても、第２投写位置５０１から第２目標投写位置３１１へ移動することができず、かつ、ズーム倍率変更、幾何変換処理を用いても、第２投写位置５０１から第２目標投写位置３１１へ移動することができないことを示している。すなわち、第２画像投写装置１０２が第２目標投写位置３１１に対応する目標投写領域を投写できないことを示している。第３画像投写装置１０３に対する判定結果を示す領域９０２にも、領域９０１と同様、バツ印の画像（ポインタ）が表示されている。よって、レンズシフト機構を用いても、第３投写位置５０２から第３目標投写位置３１２へ移動することができず、かつ、ズーム倍率変更、幾何変換処理を用いても、第３投写位置５０２から第３目標投写位置３１２へ移動することができないことを示している。すなわち、第３画像投写装置１０３が第３目標投写位置３１２に対応する目標投写領域を投写できないことを示している。第４画像投写装置１０４に対する判定結果を示す領域９０３には、丸印の画像（ポインタ）が表示されている。よって、第４投写位置５０３をレンズシフト機構の操作のみで第４目標投写位置３１３へ移動可能であることを示している。

本実施形態における投写画像の位置の移動可能判定結果の表示は一例であり、表示する印の形状や表示位置に制限を与えるものではない。

Ｓ２０９は、分岐条件であり、情報処理装置１０６は、第１〜第４画像投写装置１０１〜１０４の設置位置を移動する必要性があるか否かを判定する。すなわち、情報処理装置１０６は、全ての画像投写装置が各々の目標投写領域に画像を投写可能であるか否かを判定する。情報処理装置１０６は、Ｓ２０８の判定結果表示にバツ印が存在しない場合（Ｓ２０９のＹＥＳ）、処理をＳ２１０に移行する。すなわち、情報処理装置１０６は、全ての画像投写装置が各々の目標投写領域に画像を投写可能であるとの判定結果を得た場合（Ｓ２０９のＹＥＳ）、処理をＳ２１０に移行する。情報処理装置１０６は、Ｓ２０８の判定結果表示にバツ印が存在する場合（Ｓ２０９のＮＯ）、処理をＳ２１１へ移行する。また、画質を優先させるためＳ２０９の判定結果に三角印が存在することを許容できない場合には、情報処理装置１０６は、Ｓ２０８の判定結果表示に三角印が存在する場合（Ｓ２０９のＮＯ）は、処理をＳ２１１へ移行する。すなわち、情報処理装置１０６は、全ての画像投写装置が各々の目標投写領域に画像を投写可能ではないとの判定結果を得た場合（Ｓ２０９のＮＯ）、処理をＳ２１１に移行する。

Ｓ２１１では、ユーザがＳ２０８の表示情報を参考に、設置位置の移動が必要と判断された画像投写装置の設置位置の移動を実行する。画像投写装置の設置位置の移動を実行した後、処理をＳ２０２へ移行する。そして、設置位置を移動した画像投写装置のみに対してＳ２０２〜Ｓ２０８までの処理が行われ、Ｓ２０９にて、情報処理装置１０６は、第１〜第４画像投写装置１０１〜１０４の設置位置を移動する必要性があるか否かを判定する。設置位置を移動する必要性がないと判定されるまで、Ｓ２０２〜Ｓ２０９、Ｓ２１１の処理が繰り返し行われる。

Ｓ２１０では、第１〜第４画像投写装置１０１〜１０４による各投写画像の投写領域の補正を実行する。すなわち、第１〜第４画像投写装置１０１〜１０４による各投写画像の投写領域の位置および大きさを調整する。補正は、ユーザが入力装置１０８を用いて表示装置１０７の表示画面上に表示されたＧＵＩ上で実行する。図１０（ａ）〜（ｄ）は、第１画像投写装置１０１の画像投写領域補正時の表示装置１０７の表示画面の表示状態を示す図である。ここでは、第１画像投写装置１０１の投写領域補正を、レンズシフト機構による投写位置移動、光学ズーム倍率変更、幾何変換処理によって実施する例を示している。

図１０（ａ）は、表示装置１０７の表示画面上に表示される撮像画像例を示す図である。撮像画像３００上には、全体の目標投写領域３０１、第１目標投写位置３１０、第１目標投写位置３１０に対応する第１目標投写領域３１４、第１画像投写装置１０１の投写位置５００と、第１画像投写装置１０１の投写領域１０００が表示されている。また、投写位置５００をレンズシフト機構で移動可能な領域７００が楕円形を示す太線の輪郭線（ポインタ）で表示されている。この状態で、ＧＵＩ上にて、入力装置１０８からのユーザ操作により第１画像投写装置１０１の投写領域の補正を実行する。

図１１は、Ｓ２１０における第１画像投写装置１０１の投写領域の補正処理の手順例を示すフローチャートである。

先ず、Ｓ１１００は、条件分岐であり、情報処理装置１０６は、第１画像投写装置１０１のレンズシフト機構の操作により投写位置５００（投写画像の位置（中心位置））を第１目標投写位置３１０に移動可能か否かを判定する。すなわち、情報処理装置１０６は、第１画像投写装置１０１のレンズシフト機構の操作により投写画像の投写領域の中心部（重心）の位置の移動可能領域７００が目標投写位置３１０を含むか否かを判定する。情報処理装置１０６は、レンズシフト機構の操作による移動可能領域７００内に目標投写位置３１０が存在する場合（Ｓ１１００のＹＥＳ）、処理をＳ１１０１へ移行する。すなわち、情報処理装置１０６は、レンズシフト機構の操作により投写位置５００を目標投写位置３１０に移動可能であるとの判定結果を取得した場合（Ｓ１１００のＹＥＳ）、処理をＳ１１０１へ移行する。

Ｓ１１０１では、ユーザにより、投写位置５００に対してドラッグ操作が行われ、投写位置５００が目標投写位置３１０まで移動されドラッグ操作が解除される。この操作により、情報処理装置１０６は、第１画像投写装置１０１に対して投写位置５００を目標投写位置３１０へ移動させるためにレンズシフト機構を駆動する指示情報を第１画像投写装置１０１に送信する。そして、第１画像投写装置１０１が実際にレンズシフト機構を駆動する。指示情報に基づくレンズシフト機構の駆動量は、単位駆動量当たりの撮像画像３００上の投写位置の移動量から決定される。レンズシフト機構の単位駆動量当たりの撮像画像３００上の投写位置の移動量は、Ｓ６００で取得したレンズシフト機構の水平、垂直方向の単位駆動量当たりの投写位置移動量と目標投写領域３１４の水平、垂直方向の撮像画像３００上での幅との比で導出される。以上で投写領域の補正処理は終了となる。

Ｓ１１００では、投写位置５００を目標投写位置３１０に移動できないとの判定結果を得た場合（Ｓ１１００のＮＯ）、処理をＳ１１０２へ移行する。

Ｓ１１０２では、Ｓ１１０１と同様、ユーザにより、投写位置５００に対してドラッグ操作が行われ、投写位置５００の移動先が設定される。移動先としては、後述の処理の光学ズーム倍率変更や幾何変換の駆動量を最小限に抑えて画質低下を防ぐために、レンズシフト機構の操作によって移動可能領域７００内でできるだけ目標投写位置３１０に近い位置が設定されることが望ましい。

Ｓ１１０３では、Ｓ１１０２で指定された位置まで、Ｓ１１０１と同様、レンズシフト機構を駆動させて投写位置５００を移動させる。

図１０（ｂ）は、Ｓ１１０２で第１画像投写装置１０１のレンズシフト機構の駆動後の表示装置１０７の表示画面上の表示状態を示す図である。投写位置５００は、ドラッグ操作が解除された位置に移動することになる。移動後の投写位置５００は、第１画像投写装置１０１のレンズシフト機構駆動後の投写位置を示している。また、同様に、投写領域１０００も、投写位置５００の移動量と同じだけ平行移動させて表示装置１０７の表示画面上に表示させる。投写領域１０００は、第１画像投写装置１０１のレンズシフト機構駆動後の投写領域を表している。このように実際のレンズシフト機構の駆動に追従して投写位置５００、投写領域１０００の表示を移動させる。

Ｓ１１０４では、ＧＵＩにて、入力装置１０８からのユーザ操作により光学ズーム倍率の調整が実行される。投写領域１０００の領域境界を示す太線部分がユーザによるドラッグ操作で移動され、ドラッグ操作が解除されるとドラッグ操作の解除位置に前記領域境界が移動するように、重心位置を固定した状態で投写領域１０００が表示装置１０７の表示上で拡縮される。Ｓ１１０５では、本操作による拡縮率に応じて光学ズームを駆動する信号が情報処理装置１０６から第１画像投写装置１０１に送信され、実際の光学ズーム機構の駆動が行われる。

図１０（ｃ）は、前記光学ズーム機構駆動処理を実施した後の表示装置１０７の表示画面上の表示例を示す図である。光学ズーム倍率を上げて目標投写領域３１４を包含するように投写領域１０００が拡大される。画質の面からはズーム倍率を、目標投写領域を包含できる最小倍率に調整することが望ましい。また、レンズシフト機構による投写位置の移動可能領域７００も光学ズーム倍率の変化に追従して拡縮する。これは、光学ズーム倍率の変化に応じてレンズシフト機構の単位駆動量当たりの撮像画像３００上での移動量が変化するためである。

最後に、幾何変換処理により投写画像を目標投写位置に投写する。

先ず、Ｓ１１０６では、情報処理装置１０６は、図１０（ｃ）に示す投写領域１０００を目標投写領域３１４に変換するための幾何変換係数を導出する。変換としては、例えば、公知の技術である幾何変換係数を用いた射影変換などが挙げられる。すなわち、情報処理装置１０６は、図１０（ｃ）に示す投写領域１０００を目標投写領域３１４に変換するための射影変換で用いられる幾何変換係数を導出する。

Ｓ１１０７では、情報処理装置１０６は、Ｓ１１０６で導出した幾何変換係数を第１画像投写装置１０１に送信し、情報処理装置１０６から送信された幾何変換係数を投写画像に乗じてから投写を第１画像投写装置１０１に実行させる。すなわち、情報処理装置１０６は、情報処理装置１０６から送信された幾何変換係数を用いて投写画像に対し射影変換処理を行って得られた画像の投写を第１画像投写装置１０１に実行させる。

図１０（ｄ）は、幾何変換処理後の表示装置１０７の表示画面上の表示状態例を示す図である。幾何変換形係数が投写領域１０００に対しても乗じられて表示される。図１０（ｄ）では、変換処理後にあっては、変換処理の画像の投写領域１０００が目標投写領域３１４に重なり、また、変換処理の画像の重心位置である投写位置５００が目標投写位置３１０に重なった状態となる。

以上の操作により、第１画像投写装置１０１の投写領域の補正処理が完了する。第２〜第４画像投写装置１０２〜１０４についても、第１画像投写装置と同様の手順で投写領域の補正処理を実行することができる。

全ての画像投写装置の投写領域の補正処理が完了すると、本実施形態における一連の処理が完了することになる。

以上、説明したように、本実施形態によれば、画像投写装置による投写画像の投写面上での位置の調整を支援することができる。

＜実施形態２＞
実施形態１では、Ｓ２１０における各画像投写装置１０１〜１０４の投写領域の補正をＧＵＩによるユーザ操作で実施する場合について説明した。Ｓ２１０における各画像投写装置１０１〜１０４の投写領域の補正を自動で実施してもよい。

本実施形態では、図２に示すＳ２００〜Ｓ２１１のうち、Ｓ２００〜Ｓ２０９、Ｓ２１１については実施形態１と同じ処理が実施され、Ｓ２１０については実施形態１と異なる処理が実施される。以降では、本実施形態におけるＳ２１０の処理の詳細について、図１２を用いて説明する。図１２は、本実施形態のシステムで実施されるＳ２１０の詳細であって、第１画像投写装置１０１の投写領域の補正処理の手順例を示すフローチャートである。

Ｓ１２００は、条件分岐であり、情報処理装置１０６は、第１画像投写装置１０１のレンズシフト機構の操作による投写位置の移動可能領域７００が第１目標投写位置３１０を含むか否かを判定する。情報処理装置１０６は、第１画像投写装置１０１のレンズシフト機構による投写位置（投写画像の位置（中心位置））の移動可能領域７００が第１目標投写位置３１０を含むとの判定結果を得た場合（Ｓ１２００のＹＥＳ）、処理をＳ１２０１に移行する。情報処理装置１０６は、第１画像投写装置１０１のレンズシフト機構による投写位置（投写画像の位置（中心位置））の移動可能領域７００が第１目標投写位置３１０を含まないとの判定結果を得た場合（Ｓ１２００のＮＯ）、処理をＳ１２０２に移行する。

Ｓ１２０１では、情報処理装置１０６は、第１投写位置５００の第１目標投写位置３１０へのレンズシフト指示を第１画像投写装置１０１へ送信し、レンズシフト指示に基づき第１画像投写装置１０１にレンズシフト機構を駆動させる。レズシフト機構の駆動により第１投写位置５００を移動して第１目標投写位置３１０と一致すると、レンズシフト機構の駆動が停止される。このように第１画像投写装置１０１のレンズシフト機構による投写位置の移動可能領域７００が第１目標投写位置３１０を含む場合、Ｓ１２０１の処理で投写領域の補正処理が完了することになる。

Ｓ１２０２では、情報処理装置１０６は、投写位置の移動可能領域７００内にて第１目標投写位置３１０に対する最近傍位置を導出する。なお、最近傍位置は、公知の技術により導出される。

Ｓ１２０３では、情報処理装置１０６は、Ｓ１２０２で導出した第１目標投写位置３１０に対する最近傍位置へのレンズシフト指示を第１画像投写装置１０１へ送信し、このレンズシフト指示に基づき、第１画像投写装置１０１にレンズシフト機構を駆動させる。

次に、Ｓ１２０４では、情報処理装置１０６は、Ｓ１２０２で導出し第１目標投写位置３１０に対する最近傍位置を包含するような最小の光学ズーム倍率を導出する。

Ｓ１２０５では、情報処理装置１０６は、Ｓ１２０４で導出した光学ズーム倍率となるように光学ズーム倍率変更指示を第１画像投写装置１０１へ送信し、光学ズーム倍率変更指示に基づき、第１画像投写装置１０１の光学ズーム機構を駆動させる。

Ｓ１２０６では、情報処理装置１０６は、Ｓ１２０５で光学ズーム機構が調整された後の第１投写装置１０１の投写領域１０００を目標投写領域３１４へ変換する幾何変換係数を導出する。

Ｓ１２０７では、情報処理装置１０６は、Ｓ１２０６で導出した幾何変換係数を第１画像投写装置１０１へ送信し、情報処理装置１０６から送信された幾何変換係数を投写画像に乗じてから投写を第１画像投写装置１０１に実行させる。すなわち、情報処理装置１０６は、情報処理装置１０６から送信された幾何変換係数を用いて投写画像に対し射影変換処理を行って得られた画像の投写を第１画像投写装置１０１に実行させる。

以上の手順によって自動で投写領域の補正処理が行われる。投写位置を目標投写位置に移動可能である場合、レンズシフト機構の駆動により、投写位置は、目標投写位置に移動される。投写位置を目標投写位置に移動可能でない場合、レンズシフト機構、光学ズーム機構、幾何変換機構それぞれの設定および駆動によって、投写位置は、目標投写位置に移動される。これにより、ユーザがレンズシフト機構、光学ズーム機構、幾何変換機構による投写領域の拡縮、投写位置の移動をＧＵＩ上の操作で行う手間を省くことができ、ユーザの作業負荷を軽減できる。

＜実施形態３＞
実施形態１、２では、Ｓ２０５における図６の処理フローにおいて画像投写装置の仕様上の光学ズーム駆動範囲、レンズシフト駆動範囲を取得することによって投写位置の移動可能領域（範囲）とズーム倍率最大時の投写領域を取得するとした。また、実施形態１、２では、Ｓ２１０における投写位置の補正時にレンズシフトの単位駆動量当たりの撮像画像３００上での移動量、光学ズームの単位駆動量当たりの撮像画像３００上での拡大率を導出し、これらに基づき各駆動量を決定するとした。

本実施形態では、Ｓ２０５にて実際にレンズシフト機構、光学ズーム機構を駆動させてその結果をフィードバックしてレンズシフト駆動範囲と、光学ズーム倍率最大時の投写領域を取得する。また、Ｓ２１０においても、実際にレンズシフト機構、光学ズーム機構を駆動させて、その結果をフィードバックして目標投写位置へ投写位置をレンズシフト（移動）し、また、目標倍率へ光学ズーム機構の駆動を実行する。

本実施形態では、図２に示すＳ２００〜Ｓ２１１のうち、Ｓ２００〜Ｓ２０４、Ｓ２０６〜Ｓ２０９、Ｓ２１１については実施形態１，２と同じ処理が実施され、Ｓ２０５およびＳ２１０については実施形態１、２と異なる処理が実施される。以降では、本実施形態におけるＳ２０５およびＳ２１０の処理の詳細について説明する。

先ず、本実施形態のシステムによるＳ２０５の処理について図１３を用いて説明する。図１３は、本実施形態のシステムで実施されるＳ２０５の詳細であって、情報処理装置１０６による投写位置の移動可能領域の導出処理の手順例を示すフローチャートである。本実施形態では、図６に示すＳ６００〜Ｓ６０３のうちＳ６００が省略され、Ｓ６０１〜Ｓ６０３の各処理が実施される。すなわち、本実施形態では、Ｓ６０１〜Ｓ６０３に対応する図１３に示すＳ１３００〜Ｓ１３０２の各処理が実施される。Ｓ１３００〜Ｓ１３０２の各処理について、以下に説明する。

Ｓ１３００では、情報処理装置１０６は、光学ズーム倍率を目標投写領域のサイズに合わせる処理を実行する。Ｓ１３００の処理の詳細について、図１４を用いて説明する。図１４は、Ｓ１３００の処理の詳細であって、光学ズーム倍率を目標投写領域のサイズに合わせる処理（光学ズーム倍率の調整処理）の手順例を示すフローチャートである。

先ず、Ｓ１４００では、情報処理装置１０６は、マーカ画像を投写させる信号を第１画像投写装置１０１に送信して、第１画像投写装置１０１にマーカ画像の投写を行わせる。情報処理装置１０６は、他の第２〜第４画像投写装置１０２〜１０４に何も投写させない状態、もしくは画像全域が黒の画像を投写させた状態とする。マーカ画像として、例えば、図４に示した第１、第２、第３のマーカ画像４０２、４０３、４０４と同じものを使用可能である。

Ｓ１４０１では、情報処理装置１０６は、投写面１００を撮像させる信号を撮像装置１０５に送信して、第１画像投写装置１０１によりマーカ画像が投写された投写面１００の撮像を撮像装置１０５に行わせて撮像画像を取得させる。そして、情報処理装置１０６は、撮像装置１０５に対し、撮像装置１０５が取得した撮像画像を情報処理装置１０６へ送信させる。情報処理装置１０６は、撮像装置１０５から送信された撮像画像を受信し、受信した撮像画像に基づき、上述のパターンマッチング手法により、撮像画像上のマーカ画像の位置情報（以下、マーカ位置ともいう）を導出して取得する。

Ｓ１４０２は、条件分岐であり、情報処理装置１０６は、Ｓ１４０１で導出したマーカ位置から投写領域のサイズを取得し、取得した投写領域のサイズが目標投写領域のサイズと等しいか否かを判定する。情報処理装置１０６は、投写領域のサイズが目標投写領域のサイズと等しいとの判定結果を得た場合（Ｓ１４０２のＹＥＳ）、本処理を終了する。情報処理装置１０６は、投写領域のサイズが目標投写領域のサイズと等しくないとの判定結果を得た場合（Ｓ１４０２のＮＯ）、処理をＳ１４０３へ移行する。

Ｓ１４０３では、条件分岐であり、情報処理装置１０６は、Ｓ１４０１で導出したマーカ位置を基に取得した投写領域のサイズが目標投写領域のサイズより小さいか否かを判定する。情報処理装置１０６は、投写領域のサイズが目標投写領域のサイズより小さくないとの判定結果を得た場合（Ｓ１４０３のＮＯ）、処理をＳ１４０４へ移行する。情報処理装置１０６は、投写領域のサイズが目標投写領域のサイズより小さいとの判定結果を得た場合（Ｓ１４０３のＹＥＳ）、処理をＳ１４０５へ移行する。

Ｓ１４０４では、情報処理装置１０６は、第１画像投写装置１０１の光学ズームを所定量縮小方向に駆動させる。

Ｓ１４０５では、情報処理装置１０６は、第１画像投写装置１０１光学ズームを所定量拡大方向に駆動させる。

情報処理装置１０６は、上述のＳ１４０４またはＳ１４０５の処理の後、処理をＳ１４０１へ移行する。そのため、情報処理装置１０６は、Ｓ１４０１で取得されるマーカ位置を基に導出される第１画像投写装置１０１の投写領域がＳ１４０２の条件を満たすまで、Ｓ１４０１〜Ｓ１４０５の処理を繰り返し実行する。

なお、Ｓ１４０４、Ｓ１４０５における１回の光学ズーム機構の駆動量は、初めは大きめにとって、少しずつ値を小さくしていけばよい。例えば、１回目から３回目までは１０ステップ分の駆動量で光学ズーム機構を駆動し、４回目以降は２ステップ分の駆動量で光学ズームを駆動する。

次に、Ｓ１３０１では、情報処理装置１０６は、第１画像投写装置１０１の投写領域の撮像画像３００上における、レンズシフト機構による投写位置（投写画像の中心位置）５００の移動可能領域を導出する。Ｓ１３０１における、撮像画像３００上の、第１画像投写装置１０１のレンズシフト機構による投写位置５００の移動可能領域の導出方法について、図１５を用いて説明する。図１５は、仕様上の第１画像投写装置１０１のレンズシフト機構による投写位置の移動可能領域（範囲）と本実施形態で導出されるレンズシフト機構による投写位置（投写画像の中心位置）の移動可能領域（範囲）の関係と処理の流れを説明する図である。

図１５内にて、破線で示される楕円形領域は、仕様上のレンズシフト機構による第１画像投写装置１０１の投写位置５００の移動可能領域１５１１を示している。

位置（基準位置）１５００から位置１５１０は、本実施形態でレンズシフト機構を駆動したときの移動先の第１投写装置１０１の撮像画像３００上の投写位置を示している。位置１５００は、レンズシフト機構の基準位置である。情報処理装置１０６は、レンズシフト機構を基準位置１５００に駆動させる指示を第１画像投写装置１０１へ送信し、基準位置１５００を基に第１画像投写装置１０１のレンズシフト機構を駆動させることで第１画像投写装置１０１の投写位置を移動できる。

位置（上端位置）１５０１は、位置（基準位置）１５００から垂直上方向に可能な限りレンズシフト機構を駆動した状態の投写位置である。位置１５０２は、位置１５００と位置１５０１の間であって、位置１５０１から所定量だけ垂直下方向にレンズシフト機構を駆動させた状態の投写位置を示している。位置１５０３は、位置１５０２の位置から水平左方向に可能な限りレンズシフト機構を駆動した状態の投写位置である。位置１５０４は、位置１５０３から水平右方向に可能な限りレンズシフト機構を駆動した状態の投写位置である。位置１５０５（左端位置）は、位置１５０４の位置から基準位置１５００にレンズシフト機構を戻した後、水平左方向に可能な限りレンズシフト機構を駆動した状態の投写位置である。位置１５０６（右端位置）は、位置１５０５の位置から水平右方向に可能な限りレンズシフト機構を駆動した状態の投写位置である。位置１５０７（下端位置）は、位置１５０６から基準位置１５００にレンズシフト機構を戻した後、垂直下方向に可能な限りレンズシフト機構を駆動した状態の投写位置である。位置１５０８は、位置１５００と位置１５０７の間であって、位置１５０７から所定量だけ垂直上方向にレンズシフト機構を駆動した状態の投写位置である。位置１５０９は、位置１５０８から水平左方向に可能な限りレンズシフト機構を駆動した状態の投写位置である。位置１５１０は、位置１５０９の位置から水平右方向に可能な限りレンズシフト機構を駆動した状態の投写位置である。

位置１５０１、位置１５０３から位置１５０７、位置１５０９、位置１５１０は、それぞれの位置へのレンズシフト機構駆動時に投写位置へのマーカ投写と撮像装置１０５による投写されたマーカの撮像、位置検出を繰り返して導出される。より具体的には、所定方向へ情報処理装置１０６から第１画像投写装置１０１に駆動を指示しても撮像画像３００上で投写されたマーカ位置の変化が起きなくなったことを検出することで当該位置に到達したことを判定できる。マーカ画像としては、Ｓ２０２で使用した第４のマーカ画像４０４を用いることができる。位置１５０１、位置１５０３、位置１５０４、位置１５０５、位置１５０６、位置１５０７、位置１５０９、位置１５１０にレンズシフト機構を駆動しているときの撮像画像３００上のマーカ位置は、情報処理装置１０６に取得される。情報処理装置１０６は、位置１５０１、位置１５０３〜位置１５０７、位置１５０９、位置１５１０、位置１５０１の順に位置を直線で結んだ多角形領域１５１２をレンズシフト機構による投写位置の移動可能領域７００として導出される。

本実施形態で示したレンズシフト機構による投写位置５００の移動可能領域の導出方法は、一例であり、取得するマーカ位置の個数はこれに制限されるものではない。マーカ位置の個数を増やすことでより仕様上のレンズシフト機構による投写位置５００の移動可能領域１５１１に本実施形態で得られる多角形領域１５１２の形状を近づけることができる。また、本実施形態では、仕様上のレンズシフト機構による投写位置５００の移動可能領域１５１１の形状は楕円形とした。レンズシフト機構による投写位置５００の移動可能領域１５１１の形状は楕円形に限定されず、他の形状としてもよい。

Ｓ１３０２では、第１画像投写装置１０１の現在のレンズシフト機構の駆動状態において、光学ズーム倍率を最大とした場合の撮像画像３００上の投写領域を導出する。Ｓ１３０２の処理の詳細について、図１６を用いて説明する。

図１６は、Ｓ１３０２の詳細であって、第１画像投写装置１０１の光学ズーム倍率最大時の投写領域を取得する取得処理の手順例を示すフローチャートである。

先ず、Ｓ１６００では、情報処理装置１０６は、第１画像投写装置１０１にマーカ画像の投写を行わせる。マーカ画像としては、図４で示した第１、第２、第３のマーカ画像４０２、４０３、４０４と同じものを使用できる。

Ｓ１６０１では、情報処理装置１０６は、第１画像投写装置１０１に対して光学ズーム倍率拡大の駆動指示を行い、第１画像投写装置１０１の光学ズームを拡大方向に駆動させる。

Ｓ１６０２では、情報処理装置１０６は、Ｓ１６０１で光学ズーム機構駆動完了後に撮像装置１０５により投写面１００を撮像し撮像画像上の各マーカ位置を取得する。

Ｓ１６０３は条件分岐である。情報処理装置１０６は、Ｓ１６０１およびＳ１６０２の処理を繰り返し行い、前回のＳ１６０２の処理で取得した各マーカ位置と今回のＳ１６０２の処理で取得した各マーカ位置が同じかどうかを判定する。すなわち、情報処理装置１０６は、これ以上光学ズームできない状態になったかどうかを判定する。情報処理装置１０６は、前回のＳ１６０２の処理で取得した各マーカ位置と今回のＳ１６０２の処理で取得した各マーカ位置が異なり、これ以上光学ズームできない状態ではないとの判定結果を得た場合（Ｓ１６０３のＮＯ）、処理をＳ１６０１へ移行する。情報処理装置１０６は、前回のＳ１６０２の処理で取得した各マーカ位置と今回のＳ１６０２の処理で取得した各マーカ位置が同じであり、これ以上光学ズームできない状態であるとの判定結果を得た場合（Ｓ１６０３のＹＥＳ）、処理をＳ１６０４に移行する。

Ｓ１６０４では、情報処理装置１０６は、Ｓ１６０１の処理で変更された光学ズーム倍率を元に戻す。これは、Ｓ１６０１にてマーカ位置が変化しなくなるまでに駆動させた光学ズーム量の合計を記憶しておき、逆の縮小方向に同じ駆動量駆動することで実行することができる。

以上のようにマーカ画像の位置が変化しなくなった時点のＳ１６０２の処理で取得したマーカ位置によって光学ズーム倍率最大時の投写領域７０１を得ることができる。

以上にようにして本実施形態のＳ２０５の処理を実施できる。

次に、本実施形態におけるＳ２１０の処理について、実施形態１、２との差分についてのみ述べる。第１画像投写装置１０１の投写領域の補正を実行する場合について説明する。他の画像投写装置１０２〜１０４に対しても、第１画像投写装置１０１の投写領域の補正処理と同様の方法を適用できる。

レンズシフト機構の駆動については、図１４に示した光学ズームの調整フローと同様な方法を適用する。具体的には、先ず、ユーザ操作または自動で定まる撮像画像３００上の投写位置５００の移動方向と移動先終点位置を検出する。情報処理装置１０６は、第１画像投写装置１０１に指示して、投写位置にマーカ画像を投写させる。情報処理装置１０６は、第１画像投写装置１０１に対し前記移動方向へ所定量レンズシフト機構を駆動させた後、撮像画像３００上のマーカ位置から移動後の投写位置を検出し、終点位置との位置の差分を導出する。そして、再度終点位置へ所定量レンズシフト機構を駆動して撮像画像３００上のマーカ位置を検出する。これらの操作を撮像画像３００上のマーカ位置が前記移動先終点位置に達するまで繰り返し実行する。レンズシフト機構の駆動量は、初めは大きめにとって、繰り返し毎に少しずつ値を小さくしていけばよい。

光学ズーム倍率の変更については、ユーザ操作または自動で決定される撮像画像３００上のズーム倍率変更後の投写領域を目標投写領域として図１２に示す処理フローを適用することで実行することができる。

以上によって、本実施形態のＳ２１０の処理を実行できる。

このようにすることで、第１〜第４画像投写装置１０１〜１０４の光学ズーム、レンズシフト機構の仕様に関する情報を取得できない場合でも、レンズシフト機構による投写位置の移動可能領域、光学ズーム倍率最大時の投写領域を取得することができる。また、目標位置へのレンズシフト機構による投写位置の移動も可能となる。目標倍率への光学ズームの駆動も可能となる。

＜実施形態４＞
本実施形態は、実施形態１から３と比較してＳ２０６における投写位置の移動可能領域の表示方法のみが異なる。本実施形態のＳ２０６の処理内容について、実施形態１から３との差分のみについて、以下に説明する。

図１７は、本実施形態におけるＳ２０６での表示装置１０７の表示画面の表示例を示す図である。図７（ａ）との違いは次の２点である。

１点目は、表示装置１０７に表示する画像のうち、レンズシフト機構による投写領域の移動可能領域７００が移動可能領域１７００に置き換わっている点である。移動可能領域１７００は、投写位置５００がこの領域内にあればレンズシフト機構により投写位置を目標投写位置３１０に移動できることを示す領域である。移動可能領域１７００は、実施形態１−３で導出されたレンズシフト機構による投写位置５００の移動可能領域７００を、投写位置５００を目標投写位置３１０へ移動するのと同じ方向に同じ距離だけ平行移動して表示装置１０７の表示画面に表示させればよい。移動可能領域１７００が楕円形を示す太線の輪郭線（ポインタ）で表示されている。

２点目は、表示装置１０７の表示画面に表示する画像のうち、図７（ａ）に示す光学ズーム倍率最大時の投写領域７０１が図１５に示す光学ズーム倍率最大時の投写領域１７０１に置き換わっている点である。光学ズーム倍率最大時の投写領域１７０１は、投写位置５００が投写領域１７０１内に存在する場合、光学ズーム倍率調整と幾何変換処理により第１画像投写装置１０１が図３（ｅ）に示す第１目標投写領域３１４に所望の画像を投写できる領域を示している。この光学ズーム倍率最大時の投写領域１７０１は、図７（ａ）に示す光学ズーム倍率最大時の第１画像投写装置１０１の投写領域７０１内に第１目標投写領域３１４を包含するような投写位置５００の範囲として導出することができる。光学ズーム倍率最大時の投写領域１７０１が長方形を示す１点鎖線の輪郭線（ポインタ）で表示されている。

また、領域１７０２は、この領域１７０２内に投写位置５００が存在す場合、レンズシフトと光学ズーム倍率調整、幾何変換処理を用いて第１画像投写装置１０１が第１目標投写領域３１４に所望の画像を投写できることを示している。この領域１７０２は、Ｓ２０６において図７（ｂ）に示す仮想的な投写位置７０２の移動操作によって対応する光学ズーム倍率最大時の投写領域７０４が図３（ｅ）に示す第１目標投写領域３１４を包含し得る投写位置５００の範囲として導出することができる。領域１７０２が角丸長方形を示す破線の輪郭線（ポインタ）で表示されている。

領域１７０１、１７０２は、目標投写位置３１０に連動する表示領域であるが、投写位置５００に連動する表示領域としてもよい。領域１７０１、１７０２を投写位置５００に連動する表示領域とする場合、領域１７０１、１７０２の表示位置に対して目標投写位置３１０を投写位置５００へ移動するのと同じ向きに同じ距離だけ平行移動させた位置に表示させる。すなわち、相対的な位置関係を保持するように表示させる。このとき、領域１７０１は、その領域１７０１に目標投写位置３１０が含まれる場合、ズーム倍率調整、幾何変換処理を用いて、第１画像投写装置１０１が第１目標投写領域３１４に所望の画像を投写できることを示している。また、領域１７０２は、その領域１７０２に目標投写位置３１０が含まれる場合、レンズシフト（投写位置の移動）、ズーム倍率調整、幾何変換処理を用いて第１画像投写装置１０１が第１目標投写領域３１４に所望の画像を投写できることを示す領域である。すなわち、領域１７０２は、その領域１７０２に目標投写位置３１０が含まれる場合、投写位置移動機構を用いた、投写領域の拡縮、投写位置の移動処理により第１画像投写装置１０１が第１目標投写領域３１４に所望の画像を投写できることを示す領域である。

このようにすることでレンズシフト（投写位置の移動）、ズーム倍率調整、幾何変換の何れの操作を用いて第１画像投写装置１０１が目標投写領域３１４に画像を投写することができるようになるかを表示装置１０７の表示画面上の表示で確認することができる。また、現在の第１画像投写装置１０１の設置位置では、目標投写領域３１４に画像を投写できない場合、どの程度設置位置を移動すれば目標投写領域３１４への画像の投写が可能になるかを表示装置１０７の表示画面上の表示で確認することができる。第２〜第４画像投写装置１０２〜１０４についても、第１画像投写装置１０１と同様の方法を適用可能である。

＜実施形態５＞
実施形態１から４においては、Ｓ２０４、Ｓ２０６、Ｓ２０８、Ｓ２１０における各表示を表示装置１０７の表示画面上で実行するとした。本実施形態では、表示装置１０７の表示画面上での表示に加えて、情報処理装置１０６が第１〜第４画像投射装置１０１〜１０４の投写制御を行って、表示装置１０７の表示画面の表示内容を投写画像に重畳して投写面１００に投写させる。このようにすることで、投写面を見て現在の投写位置と目標投写位置の位置関係を把握できるようになる。

図１８は、本実施形態における表示装置１０７の表示画面上の表示と対応する投写面１００上の投写画像例を示す図である。図１８（ａ）は、ある時点の表示装置１０７の表示画面上の表示例を示す図である。表示装置１０７の表示画面上に表示された撮像画像３００内には、第１目標投写位置３１０、第２目標投写位置３１１、第３目標投写位置３１２、第４目標投写位置３１３、第１目標投写領域３１４が表示されている状態である。また、本実施形態においては、画像投写装置の投写位置を捕捉するため常にマーカ画像を投写した状態とする。マーカ画像としては、実施形態１から４で使用した第１、第２、第３のマーカ画像４０２、４０３、４０４を同様に用いることができる。図１８（ａ）では、第１画像投写装置１０１のみがマーカ画像を投写面１００に投写している状態であるとし、第１、第２、第３のマーカ画像４０２、４０３、４０４は、撮像装置１０５により撮像されたマーカである。ただし、マーカ画像のパターンを異ならせるなどして識別可能にすれば、複数の画像投写装置が同時に投写面１００にマーカ画像を投写していてもよい。

情報処理装置１０６は、第１、第２、第３のマーカ画像４０２、４０３、４０４から第１画像投写装置１０１の投写領域４０１を導出して取得する。情報処理装置１０６は、この投写領域４０１内に存在する各表示画像を第１画像投写装置１０１が投写する投写画像に重畳した状態で第１画像投写装置１０１に送信し投写させる。図１８（ｂ）は、表示装置１０７の表示画面上の表示が図１８（ａ）の時点における投写面１００上の第１画像投写装置１０１の投写画像である場合の画像例を示す図である。図１８（ａ）に示す投写領域４０１内に存在していた第１目標投写位置３１０、第３目標投写位置３１２と、第１目標投写領域３１４を示す枠のうち投写領域４０１内に含まれていた部分がそのまま投写面１００上に投写される。ここで、投写面１００上では、第１画像投写装置１０１と第１目標投写位置３１０との対応関係に基づき、第１目標投写位置３１０は、太線になり強調表示される。すなわち、第１〜第４目標投写位置３１０〜３１４を示すポインタのうち、画像投写装置に対応する目標位置に関連する少なくとも１つの第１目標投写位置３１０を示すポインタが強調表示される。このように第１画像投写装置１０１の目標投写位置に関連する第１目標投写位置３１０のみが他の画像投写装置の目標投写位置より強調して表示されることで、投写面１００上で位置合わせの対象を把握しやすくなる。

図１８（ｃ）は、図１８（ａ）の時点から第１画像投写装置１０１の設置位置を移動したことにより投写領域４０１が図１８（ａ）の状態と比較して左上側に移動している様子を示す図である。マーカ画像を常に投写させているので情報処理装置１０６は撮像画像３００からリアルタイムに投写領域４０１の位置を捕捉可能である。図１８（ｄ）は、表示装置１０７の表示画面上の表示が図１８（ｃ）の時点における投写面１００上の第１画像投写装置１０１の投写画像である場合の画像例を示す図である。投写領域４０１の移動に伴い投写領域４０１内での第１目標投写位置３１０や第１目標投写領域３１４の投写位置は変化しているが、投写面１００上での位置は変化していない。すなわち、相対的な位置関係を保持するように投写される。

このように第１画像投写装置１０１の設置位置を移動しても投写面１００上での第１目標投写位置３１０や、第２目標投写領域３１４の位置は変化しないため、第１画像投写装置１０１の設置位置調整時の目印として利用できる。

上記では、第１画像投写装置１０１に関して説明した。第２、第３、第４画像投写装置１０２、１０３、１０４についても、第１画像投写装置１０１と同様に適用できる。実施形態１−４で説明したレンズシフト機構による移動可能領域７００、光学ズーム倍率最大時の投写領域７０１など表示装置１０７上に表示されるいかなる画像も同様に画像投写装置の投写画像に重畳して投写面１００に投写させることができる。

図１９は、上述した情報処理装置１０６を説明するための図である。図１９（ａ）は、
情報処理装置１０６のハードウェアの構成例を示す図である。情報処理装置１０６は、ＣＰＵ１９０１、ＲＡＭ１９０２、ＲＯＭ１９０３、二次記憶装置１９０４、汎用Ｉ／Ｆ１９０５、及び出力Ｉ／Ｆ１９０６を有する。各構成要素は、バス１９１０を介して相互にデータを送受信可能に接続されている。

ＣＰＵ１９０１は、ＲＯＭ１９０３又は二次記憶装置１９０４に格納されたプログラムを実行して、情報処理装置１０６を統括的に制御する。ＲＡＭ１９０２は、ＣＰＵ１９０１がプログラムを実行する際のメインメモリとして機能し、一時記憶領域として用いられる。ＲＯＭ１９０３は、情報処理装置１０６の制御プログラムを格納する。二次記憶装置１９０４は、ＨＤＤ（ＨａｒｄＤｉｓｋＤｒｉｖｅ）やＳＳＤ（ＳｏｌｉｄＳｔａｔｅＤｒｉｖｅ）などの記憶媒体であり、画像データや各種プログラムなどを記憶する。

汎用Ｉ／Ｆ１９０５は、例えばＵＳＢやＩＥＥＥ１３９４などの規格に対応したインタフェースであって、各画像投写装置１０１〜１０４、撮像装置１０５、入力装置１０８などをバス１９１０に接続する。出力Ｉ／Ｆ２０６は、ＤＶＩやＨＤＭＩ（登録商標）などの規格に対応したインタフェースであって、表示装置１０７とＣＰＵ１９０１とを接続する。

なお、情報処理装置１０６がＣＰＵ１９０１とは異なる専用の１又は複数のハードウェアあるいはＧＰＵ（ＧｒａｐｈｉｃｓＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）を有してもよい。その場合、ＣＰＵ１９０１による処理の少なくとも一部をＧＰＵあるいは専用のハードウェアが行うようにしてもよい。専用のハードウェアの例としては、ＡＳＩＣ（特定用途向け集積回路）、及びＤＳＰ（デジタルシグナルプロセッサ）などがある。

以上、情報処理装置１０６のハードウェア構成例を説明した。情報処理装置１０６のハードウェア構成は、上述の構成に限定されない。ＣＰＵ１９０１がＲＯＭ１９０３や二次記憶装置１９０４などに記憶されたプログラムをＲＡＭ１９０２に読み出して実行することで、ＣＰＵ１９０１が後述する図１９（ｂ）に示す各部として機能する形態でもよい。すなわち、情報処理装置１０６は、ソフトウェアのモジュールとして図１９（ｂ）に示す各モジュールを実現してもよい。

図１９（ｂ）は、情報処理装置１０６の機能構成例を示す図である。情報処理装置１０６は、投写位置取得部１９２０、目標位置設定部１９２１、表示制御部１９２２として機能するブロックを有する。

投写位置取得部１９２０は、第１〜第４画像投写装置１０１〜１０４による投写画像を取得して得た撮像画像に基づいて、投写面１００上における投写画像の位置を取得する。

目標位置設定部１９２１は、撮像画像内の座標系で投写画像の目標位置を設定する。

表示制御部１９２２は、第１ポインタと第２ポインタとを表示装置１０７の表示画面に表示させる。第１ポインタは、投写位置取得部１９２０により取得された投写画像の位置を示すポインタである。第２ポインタは、目標位置設定部１９２１により設定された投写画像の目標位置を示すポインタである。

［その他の実施形態］
実施形態１から５では撮像装置１０５を１台としているが、撮像装置の設置位置の制限などにより投写面１００上の目標投写領域全体を１台の撮像装置では撮像できない場合、複数台の撮像装置を用いてもよい。すなわち、目標投写領域を部分的に含むように撮像する撮像装置を複数台用い、それらの各撮像画像を受信した情報処理装置１０６が統合し、投写面１００上の目標投写領域全体を含む１枚の画像にする。このようにすることで１台の撮像装置で目標投写領域全体を撮像した場合と同様の画像を得ることができる。

また、実施形態１から５では、１台の画像投写装置で投写可能な投写領域よりも、より大きな１枚の投写画像を投写するマルチプロジェクションを例として説明を行った。しかし、本発明は、１台の画像投写装置のみを使用して画像の投写を実行する場合にも、複数台の画像投写装置を使用する場合と同様に適用可能である。さらに、複数台の投写装置が同じ投写面上の領域を投写することで、１台の画像投写装置で投写する場合よりも広い明るさのダイナミックレンジを持つ画像を投写するスタック投写の場合にも同様に適用可能である。

実施形態１から５では、領域７０１、領域７０３、領域７０４、領域１７００、領域１７０１の表示はズーム倍率最大時に対応する領域とした。画質の面からはズーム倍率を最大にすることが許容できない場合もある。よって、許容できる最大倍率をユーザに入力装置１０８からＧＵＩ上で設定させ、その値に最大ズーム倍率を置きかえて前記領域７０１、領域７０３、領域７０４、領域１７００、領域１７０１を表示させてもよい。

実施形態１から５では、パターンマッチングにより、画像投写装置から投写面に投写したマーカ画像を撮像して得た撮像画像内からマーカ画像を探索することで画像投写装置の投写位置を取得する場合について説明した。画像投写装置の投写位置を取得方法は、これに限定されない。例えば、画像投写装置から投写面に投写した投写画像を撮像して得た撮像画像にて、先ず輝度勾配が局所的極大となる画素（第１画素）を特徴点（第１特徴点）として取得する。この第１特徴点の周囲の複数方向の輝度勾配パターン（第１輝度勾配パターン）を特徴量（第１特徴量）として取得する。同様に、投写画像（情報処理装置１０６から画像投写装置１０１〜１０４に送信される投写画像）においても、特徴点とこの特徴点に対応する特徴量を取得する。すなわち、投写画像において、輝度勾配が局所的極大となる画素（第２画素）を特徴点（第２特徴点）として取得する。この第２特徴点の周囲の複数方向の輝度勾配パターン（第２輝度勾配パターン）を特徴量（第２特徴量）として取得する。そして、両画像の特徴量（第１特徴量および第２特徴量）が一致する特徴点（第１特徴点および第２特徴点）同士を対応付けることにより画像投写装置の投写位置を取得してもよい。

本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記録媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１以上のプロセッサがプログラムを読み出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１０６情報処理装置
１９２０投写位置取得部
１９２１目標位置設定部
１９２２表示制御部

Claims

投写装置による投写画像を撮像して得た撮像画像に基づいて、投写面上における前記投写画像の位置を取得する取得手段と、
前記撮像画像内の座標系で前記投写画像の目標位置を設定する設定手段と、
前記取得手段により取得された前記投写画像の位置を示す第１ポインタと、前記設定手段により設定された前記投写画像の目標位置を示す第２ポインタを表示手段に表示させる表示制御手段と、
を備える、ことを特徴とする情報処理装置。
前記投写画像は、所定のマーカを含み、
前記取得手段は、前記撮像画像において前記マーカを探索して特定した前記マーカの位置に基づき前記投写画像の位置を取得する
ことを特徴とする請求項１に記載の情報処理装置。
前記取得手段は、前記撮像画像において輝度勾配が局所的極大となる第１画素と、前記第１画素の周囲の複数方向の第１輝度勾配パターンと、前記投写画像において輝度勾配が局所的極大となる第２画素と、前記第２画素の周囲の複数方向の第２輝度勾配パターンとに基づき前記投写画像の位置を取得する
ことを特徴とする請求項１に記載の情報処理装置。
前記取得手段は、前記第１輝度勾配パターンと前記第２輝度勾配パターンが一致する前記第１画素と前記第２画素を対応付けることにより前記投写画像の位置を取得する
ことを特徴とする請求項３に記載の情報処理装置。
前記設定手段は、前記取得手段により取得された前記投写画像の位置に基づき、前記投写画像の目標位置を設定する
ことを特徴とする請求項１から４の何れか一項に記載の情報処理装置。
前記表示制御手段は、前記投写画像の位置と、前記投写装置が備える移動手段による前記投写画像の位置を移動可能な領域とに基づいて、前記撮像画像内の座標系で前記投写画像の位置を移動可能な領域を示す第３ポインタを前記表示手段に表示させる
こと特徴とする請求項１から５の何れか一項に記載の情報処理装置。
前記投写画像の位置を移動可能な領域は、前記投写装置の設計値、または、前記情報処理装置の記憶手段に予め設定された設定値に基づき決定される
ことを特徴とする請求項６に記載の情報処理装置。
前記投写画像の位置を移動可能な領域は、前記移動手段の駆動による前記投写画像の位置の変化量に基づき決定される
ことを特徴とする請求項６または７に記載の情報処理装置。
前記移動手段は、前記投写画像の位置を光学的に移動するシフト手段、前記投写装置の光学ズーム倍率を調整する調整手段、前記投写装置が投写する画像を幾何変換する変換手段のうち少なくとも１つを含む
ことを特徴とする請求項６から８の何れか一項に記載の情報処理装置。
前記表示制御手段は、前記シフト手段による前記投写画像の位置を移動可能な領域と、前記シフト手段、前記調整手段および前記変換手段による前記投写画像の位置を移動可能な領域とを区別した前記第３ポインタを前記表示手段に表示させる
ことを特徴とする請求項９に記載の情報処理装置。
前記表示制御手段は、前記投写画像の位置を移動可能な領域内に前記投写画像の位置が存在するか存在しないかを示す第４ポインタを前記表示手段に表示させる
ことを特徴とする請求項９または１０に記載の情報処理装置。
前記表示制御手段は、前記移動手段により前記投写画像の位置を移動させた場合、前記投写画像の位置に対応する前記投写装置が、前記目標位置に対応する投写領域に投写可能であることを示す、第５ポインタを前記表示手段にさらに表示させる
ことを特徴とする請求項９または１０に記載の情報処理装置。
前記撮像画像内の座標系における前記投写画像の位置と、前記撮像画像内の座標系における前記第１ポインタから前記第５ポインタの位置との相対的な位置関係を保持するように、前記投写画像の位置に対応する前記投写装置の投写画像に前記第１ポインタから前記第５ポインタを重畳した重畳画像を前記投写装置に投写させる投写制御手段をさらに備えることを特徴とする請求項１２に記載の情報処理装置。
前記投写制御手段は、前記投写装置と前記目標位置の対応関係に基づき、前記投写装置が投写する画像に重畳させる前記第１ポインタから前記第５ポインタのうち前記投写装置に対応する目標位置に関連する少なくとも一つを強調表示させる
ことを特徴とする請求項１３に記載の情報処理装置。
前記表示制御手段により前記表示手段に表示された前記第１ポインタおよび前記第２ポインタに基づき、前記投写画像と前記目標位置の対応をユーザに指定させる指定手段と、
前記指定手段により対応付けられた前記投写画像の位置と前記目標位置に基づき、前記投写画像の位置を前記目標位置に重ならせる動作を行うよう前記投写装置に対して指示する指示手段と、
をさらに備える、ことを特徴とする請求項９から１４の何れか一項に記載の情報処理装置。
前記指示手段による指示は、前記投写装置の前記シフト手段に対する指示、前記投写装置の前記調整手段に対する指示、前記投写装置の前記変換手段に対する指示のうち少なくとも１つを含む
ことを特徴とする請求項１５に記載の情報処理装置。
投写装置による投写画像を撮像して得た撮像画像に基づいて、投写面上における前記投写画像の位置を取得する取得ステップと、
前記撮像画像内の座標系で前記投写画像の目標位置を設定する設定ステップと、
前記取得ステップにて取得された前記投写画像の位置を示す第１ポインタと、前記設定ステップにより設定された前記投写画像の目標位置を示す第２ポインタを表示手段に表示させる表示制御ステップと、
を備える、ことを特徴とする情報処理方法。
コンピュータを、請求項１から１６の何れか一項に記載の情報処理装置の各手段として機能させるためのプログラム。