JP7163943B2 - 情報生成方法、情報生成システム、及びプログラム - Google Patents

Description

本開示は、情報生成方法、情報生成システム、及びプログラム、に関する。

プロジェクションマッピングでは、非平面のスクリーンに対してプロジェクターから投写画像を投写することが通常である。非平面のスクリーンに投写された投写画像は、観覧者からは歪んで見える。このため、プロジェクションマッピングでは、スクリーンの形状に応じた歪みを考慮して投写画像を予め補正しておく必要がある。特許文献１には、非平面のスクリーンに投写され、歪んで見える画像をカメラで撮像し、カメラの撮像画像に基づいて投写画像を補正する技術が開示されている。プロジェクションマッピングにおける非平面のスクリーンの一例としては、三次元形状を有する被投写物が挙げられる。三次元形状を有する被投写物に投写される投写画像には被投写物に投写する投写オブジェクトが含まれ、投写画像において投写オブジェクトの配置先となる表示領域の設定に被投写物の撮像画像を利用することも考えられる。

特開２０１０－２８３６７４号公報

被投写物の形状によっては、撮像画像を利用した表示領域の設定に支障が生じる場合がある。例えば、被投写物が大きすぎてカメラの撮像範囲に収まりきらない場合、又は被投写物の形状が複雑でカメラからの死角となる部分がある場合のように、撮像画像に被投写物の一部が写っていない場合には、写っていない部分に対して表示領域を正しく設定することはできない。

以上の課題を解決するために、本開示の情報生成方法は、プロジェクターから投写される第１画像と、前記第１画像が投写されている状態の被投写物を第１撮像位置から撮像して得られる第２画像と、前記第１撮像位置とは異なる第２撮像位置から前記被投写物を撮像して得られる第３画像と、を取得し、前記第１画像と前記第２画像とに基づいて、前記プロジェクターが投写する投写画像上の位置を表す第１座標系と前記第１撮像位置から撮像される撮像画像上の位置を表す第２座標系との第１対応関係を特定し、前記第１画像と前記第３画像とに基づいて、前記第１座標系と前記第２撮像位置から撮像される撮像画像上の位置を表す第３座標系との第２対応関係を特定し、前記第１撮像位置からの前記被投写物の撮像画像を表示装置に表示させることにより、前記プロジェクターから前記被投写物に投写する投写オブジェクトの前記第２座標系における配置先となる第１表示領域の指定をユーザーに促し、前記ユーザーにより指定される前記第１表示領域を前記第３座標系において前記投写オブジェクトの配置先となる第２表示領域に変換する変換情報を、前記第１対応関係及び前記第２対応関係に基づいて生成する。

また、上記課題を解決するために、本開示の情報生成システムは、表示装置と、入力装置と、処理装置と、を備え、前記処理装置は、プロジェクターから投写される第１画像と、前記第１画像が投写されている状態の被投写物を第１撮像位置から撮像して得られる第２画像と、前記第１撮像位置とは異なる第２撮像位置から前記被投写物を撮像して得られる第３画像と、を取得すること、前記第１画像と前記第２画像とに基づいて、前記プロジェクターが投写する投写画像上の位置を表す第１座標系と前記第１撮像位置から撮像された撮像画像上の位置を表す第２座標系との第１対応関係を特定すること、前記第１画像と前記第３画像とに基づいて、前記第１座標系と前記第２撮像位置から撮像された撮像画像上の位置を表す第３座標系との第２対応関係を特定すること、前記第１撮像位置からの前記被投写物の撮像画像を前記表示装置に表示させることにより、前記プロジェクターから前記被投写物に投写する投写オブジェクトの前記第２座標系における配置先となる第１表示領域の指定をユーザーに促すこと、及び、前記入力装置に対する操作により前記ユーザーにより指定される前記第１表示領域を前記第３座標系において前記投写オブジェクトの配置先となる第２表示領域に変換する変換情報を、前記第１対応関係及び前記第２対応関係に基づいて生成すること、を実行する。

また、上記課題を解決するために、本開示のプログラムは、コンピューターに、プロジェクターから投写される第１画像と、前記第１画像が投写されている状態の被投写物を第１撮像位置から撮像して得られる第２画像と、前記第１撮像位置とは異なる第２撮像位置から前記被投写物を撮像して得られる第３画像と、を取得すること、前記第１画像と前記第２画像とに基づいて、前記プロジェクターが投写する投写画像上の位置を表す第１座標系と前記第１撮像位置から撮像された撮像画像上の位置を表す第２座標系との第１対応関係を特定すること、前記第１画像と前記第３画像とに基づいて、前記第１座標系と前記第２撮像位置から撮像された撮像画像上の位置を表す第３座標系との第２対応関係を特定すること、前記第１撮像位置からの前記被投写物の撮像画像を表示装置に表示させることにより、前記プロジェクターから前記被投写物に投写する投写オブジェクトの前記第２座標系における配置先となる第１表示領域の指定をユーザーに促すこと、及び、前記ユーザーにより指定される前記第１表示領域を前記第３座標系において前記投写オブジェクトの配置先となる第２表示領域に変換する変換情報を、前記第１対応関係及び前記第２対応関係に基づいて生成すること、を実行させる。

本開示の実施形態に係る情報生成方法を実行する情報生成装置１Ａを含む画像表示システム５Ａの構成例を示すブロック図である。 本実施形態における第１撮像位置Ｐ１、第２撮像位置Ｐ２及び被投写物ＳＣの位置関係の一例を示す図である。 本実施形態における計測パターンの一例を示す図である。 情報生成装置１Ａの処理装置４０が、第１表示領域Ａ１の設定を促すために表示装置に表示させる画像の一例、及び第１表示領域Ａ１の設定例を示す図である。 第１表示領域Ａ１を変換することで得られる第１領域Ｒ１の一例を示す図である。 処理装置４０が、第２表示領域Ａ２をユーザーに確認させるために表示装置に表示させる画像の一例を示す図である。 処理装置４０がプログラムＰＡに従って実行する情報生成方法の流れを示すフローチャートである。 第１撮像位置、第２撮像位置、及び被投写物の位置関係の他の例を示す図である。 変形例（４）の画像表示システム５Ｂの一例を示す図である。

以下、図面を参照して本開示の実施形態を説明する。以下に述べる実施形態には技術的に好ましい種々の限定が付されている。しかし、本開示の実施形態は、以下に述べる形態に限られるものではない。

１．実施形態
図１は、本開示の実施形態に係る情報生成方法を実行する情報生成装置１Ａを含む画像
表示システム５Ａの構成例を示すブロック図である。画像表示システム５Ａには、情報生
成装置１Ａの他に、情報生成装置１Ａと通信するプロジェクター２が含まれる。プロジェ
クター２は、情報生成装置１Ａから供給される画像データに応じた投写画像Ｇ１を被投写
物ＳＣの表面に投写する。図１では、詳細な図示を省略したが、プロジェクター２は、光
源と、光変調装置としての３つの表示パネルと、投写レンズと、表示パネル駆動部とを備
える。３つの表示パネルの各々は、夫々赤、緑及び青の各色に対応する。本実施形態では
、表示パネルは液晶ライトバルブである。表示パネル駆動部は、情報生成装置１Ａから供
給される画像データに応じて上記３つの表示パネルの各々における光の透過率を制御する
。プロジェクター２は、光源から射出された光を３つの表示パネルの各々で変調して画像
光を形成し、この画像光を投写レンズから投写して被投写物ＳＣの表面に投写画像を表示
する。本実施形態における被投写物ＳＣは、図１に示すように直方体であるが、三角錐或
いは四角錐等の多角形の連結により構成される三次元形状、又は曲面を有する三次元形状
であってもよい。

情報生成装置１Ａは、例えばスマートフォンである。情報生成装置１Ａは、撮像機能、及びプロジェクター２と通信する通信機能、を有する。情報生成装置１Ａは、スマートフォンに限らず、例えば、通信機能と撮像機能とを有するタブレット端末でもよい。情報生成装置１Ａとプロジェクター２とがネットワーク接続されると、情報生成装置１Ａは、プロジェクター２と通信し、プロジェクター２からプロジェクター情報を取得する。プロジェクター情報には、解像度情報、及びプロジェクター２において復号化可能な圧縮形式を示す圧縮形式情報が含まれる。解像度情報は、プロジェクター２における表示パネルの解像度を示す情報である。解像度情報は、プロジェクター２により被投写物ＳＣに投写される投写画像の位置を計測するための計測パターンを生成する際に情報生成装置１Ａによって利用される。詳細については後述するが、本実施形態では、計測パターンとしてバイナリコードパターンが用いられる。圧縮形式情報は、計測パターンを示す計測パターンデータを圧縮して情報生成装置１Ａからプロジェクター２へ送信する場合における計測パターンデータの圧縮形式の決定に利用される。情報生成装置１Ａからプロジェクター２へ計測パターンデータを圧縮して送信する場合の圧縮形式は、ランレングス、ＬＺＨ、ＰＮＧ、及びＧＩＦ等の可逆圧縮形式が望ましい。

情報生成装置１Ａは、プロジェクター２から取得した解像度情報を用いて複数の計測パターンの各々を表す計測パターンデータを生成し、生成した計測パターンデータをプロジェクター２に与える。プロジェクター２は、情報生成装置１Ａから与えられる計測パターンデータの示す複数の計測パターンの各々の画像を被投写物ＳＣに投写する。なお、情報生成装置１Ａからプロジェクター２へコマンドを送信し、このコマンドに基づいて計測パターンデータをプロジェクター２が生成してもよく、この場合、プロジェクター情報に圧縮形式情報を含めておく必要はない。プロジェクター２で計測パターンデータを生成する態様であれば、情報生成装置１Ａからプロジェクター２に計測パターンを伝達するための通信時間が短縮される。情報生成装置１Ａは、計測パターン毎に、計測パターンの画像を投写されている状態の被投写物ＳＣを第１撮像位置と第１撮像位置とは異なる第２撮像位置とから撮像することをユーザーに促す。ユーザーは、まず、計測パターン毎に、計測パターンの画像を投写されている状態の被投写物ＳＣを第１撮像位置から情報生成装置１Ａの撮像機能を用いて撮像する。その後、ユーザーは、情報生成装置１Ａを持って第１撮像位置から第２撮像位置へ移動し、計測パターン毎に、計測パターンの画像を投写されている状態の被投写物ＳＣを第２撮像位置から情報生成装置１Ａの撮像機能を用いて撮像する。

図２は、本実施形態における第１撮像位置Ｐ１と第２撮像位置Ｐ２、及び被投写物ＳＣの位置関係の一例を示す図である。図２は、被投写物ＳＣが設置される空間を鉛直上方から見下ろした俯瞰図である。図２に示すように、本実施形態では、第２撮像位置Ｐ２は、第１撮像位置Ｐ１と被投写物ＳＣの重心ＣＰとを通る直線Ｌ１上の位置とは異なる位置である。図２における破線は第１撮像位置Ｐ１から被投写物ＳＣを撮像する際の情報生成装置１Ａの撮像範囲を示す。また、図２における一点鎖線は第２撮像位置Ｐ２から被投写物ＳＣを撮像する際の情報生成装置１Ａの撮像範囲を示す。図２を参照すれば明らかなように、第１撮像位置Ｐ１からの撮像画像には被投写物ＳＣの面Ｓ１及び面Ｓ２が写る。これに対して、第２撮像位置Ｐ２からの撮像画像には被投写物ＳＣの面Ｓ２のみが写る。

情報生成装置１Ａは、計測パターンの画像を投写されている状態の被投写物ＳＣの撮像画像と計測パターンの画像とからプロジェクター座標系とカメラ座標系との対応関係を特定する。プロジェクター座標系とはプロジェクター２による投写画像上の位置を示す座標系である。プロジェクター座標系の一例としては、投写画像の左上隅を原点とする二次元座標系が挙げられる。カメラ座標系とは、撮像画像上の位置を示す座標系である。カメラ座標系の具体例としては撮像画像の左上隅を原点とする二次元座標系が挙げられる。本実施形態のカメラ座標系には、第１撮像位置からの被投写物ＳＣの撮像画像における座標系である第１カメラ座標系と、第２撮像位置からの被投写物ＳＣの撮像画像における座標系である第２カメラ座標系の２種類がある。情報生成装置１Ａは、プロジェクター座標系と第１カメラ座標系との対応関係である第１対応関係と、プロジェクター座標系と第２カメラ座標系との対応関係である第２対応関係と、を特定する。

プロジェクター座標系とカメラ座標系との対応関係を特定するとは、一方の座標系から他方の座標系への射影変換のための変換行列を生成することをいう。本実施形態では、情報生成装置１Ａは、第１対応関係を示す第１変換行列と、第２対応関係を示す第２変換行列とを生成する。本実施形態では、第１対応関係と第２対応関係とを利用することで、第１カメラ座標系において指定された投写オブジェクトの表示領域を第２カメラ座標系における表示領域に変換することが可能になる。

図１に示すように、情報生成装置１Ａは、タッチパネル１０と、通信装置２０と、記憶装置３０と、処理装置４０と、撮像装置５０と、を含む。通信装置２０は、無線通信モジュール又は有線通信モジュールである。通信装置２０が有線通信モジュールである場合、通信装置２０は通信線を介してプロジェクター２に接続される。情報生成装置１Ａとプロジェクター２との接続は、無線アクセスポイント装置又はルーター等の中継装置を介さない直接接続であってもよいし、中継装置を介する間接接続であってもよい。通信装置２０が無線通信モジュールである場合、直接接続の具体例としてはアドホック接続が挙げられ、間接接続の具体例としては無線アクセスポイント装置を介するアクセスポイント接続が挙げられる。また、通信装置２０が有線通信モジュールである場合、直接接続の具体例としてはピアトゥーピア接続が挙げられ、間接接続の具体例としては有線ルーター又は有線ハブを介する接続が挙げられる。通信装置２０は、処理装置４０による制御の下、プロジェクター２と通信する。撮像装置５０はカメラである。撮像装置５０は、処理装置４０による制御の下で撮像を行い、撮像画像を表す画像データを処理装置４０に供給する。

タッチパネル１０は、画像を表示する表示装置と、ユーザーによる情報が入力される入力装置とが、一体化された装置である。入力装置は、例えば透明なシート状の接触センサーである。入力装置は、表示装置の表示面を覆うように設けられる。入力装置は、当該入力装置に接触する物体と当該入力装置とによって特定される静電容量を用いてタッチ位置を検出し、検出したタッチ位置を示すデータを処理装置４０へ出力する。これにより、タッチパネル１０に対するユーザーの操作内容が処理装置４０へ伝達される。

記憶装置３０は、処理装置４０が読み取り可能な記録媒体である。記憶装置３０は、例えば、不揮発性メモリーと揮発性メモリーとを含む。不揮発性メモリーは、例えば、ＲＯＭ（Read Only Memory）、ＥＰＲＯＭ（Erasable Programmable Read Only Memory）又はＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）である。揮発性メモリーは、例えば、ＲＡＭ（Radom Access Memory）である。

記憶装置３０の不揮発性メモリーには、処理装置４０によって実行されるプログラムＰＡが記憶される。記憶装置３０の揮発性メモリーはプログラムＰＡを実行する際のワークエリアとして処理装置４０によって利用される。プログラムＰＡは、「アプリケーションプログラム」、「アプリケーションソフトウェア」又は「アプリ」とも称され得る。プログラムＰＡは、例えば、通信装置２０を介して不図示のサーバー等から取得され、その後、記憶装置３０に記憶される。プログラムＰＡは、記憶装置３０に予め記憶されてもよい。

処理装置４０は、例えばＣＰＵ（Central Processing Unit）等のプロセッサーを含んで構成される。処理装置４０は、単一のプロセッサーで構成されてもよいし、複数のプロセッサーで構成されてもよい。処理装置４０は、プログラムＰＡの実行開始を指示する操作がタッチパネル１０に対して為されたことを契機としてプログラムＰＡを不揮発性メモリーから揮発性メモリーに読み出し、プログラムＰＡの実行を開始する。プログラムＰＡに従って作動中の処理装置４０は、図１に示す取得部４１０、第１特定部４２０、第２特定部４３０、設定支援部４４０、生成部４５０、及び確認支援部４６０として機能する。図１に示す取得部４１０、第１特定部４２０、第２特定部４３０、設定支援部４４０、生成部４５０、及び確認支援部４６０は、処理装置４０をプログラムＰＡに従って動作させることで実現されるソフトウェアモジュールである。

取得部４１０は、以下の第１画像、第２画像、及び第３画像、を取得する。第１画像とは、プロジェクター２から投写される計測パターンの画像である。第２画像とは、計測パターンの画像を投写されている状態の被投写物ＳＣを第１撮像位置Ｐ１から撮像装置５０で撮像して得られる画像である。第３画像とは、計測パターンの画像を投写されている状態の被投写物ＳＣを第２撮像位置Ｐ２から撮像装置５０で撮像して得られる画像である。

より詳細に説明すると、取得部４１０は、まず、情報生成装置１Ａとプロジェクター２とがネットワーク接続された状況下においてタッチパネル１０に対する操作により特定開始を指示されたことを契機として、プロジェクター情報を取得する。次いで、取得部４１０は、プロジェクター情報に含まれる解像度情報から計測パターンデータを生成する。前述したように、本実施形態では計測パターンとしてバイナリコードパターンが用いられる。バイナリコードパターンとは、バイナリコードを使って表示装置の座標を表現するための画像のことをいう。バイナリコードとは、任意の数値を２進数で表現した場合の各桁の値をスイッチのオン／オフによって表現する技法である。計測パターンとしてバイナリコードパターンを用いる場合、プロジェクター２により投写される画像が上記のスイッチにあたり、座標値を表す２進数の桁数分の画像が必要となる。また、Ｘ座標とＹ座標とで夫々別個の画像が必要となる。例えば、プロジェクター２の表示パネルの解像度が１２０×９０である場合、１２０及び９０は夫々７桁の２進数で表現されるため、Ｘ座標を表現するために７枚の画像が必要となり、Ｙ座標を表現するために７枚の画像が必要となる。

また、バイナリコードパターンを計測パターンとして用いる場合、照明等の外乱光の影響により計測のロバスト性が低下することが一般的に知られている。このため、バイナリコードパターンを計測パターンとして用いる場合には、外乱光の影響を抑え、計測のロバスト性を向上させるために相補パターンを併用することが一般的である。相補パターンとは、白黒を反転した画像のことをいう。以下では、１を白で表し、０を黒で表すバイナリコードパターンを「ポジティブパターン」と呼び、それを反転させた相補パターンを「ネガティブパターン」と呼ぶ。解像度情報の示す解像度が１２０×９０である場合、図３に示すように、ポジティブパターンが１４枚、ネガティブパターンが１４枚の合計２８枚の計測パターンを表す計測パターンデータが取得部４１０によって生成される。本実施形態では、計測パターンとしてバイナリコードパターンが用いられるが、ドットパターン、矩形パターン、多角形パターン、チェッカーパターン、グレイコードパターン、位相シフトパターン、又はランダムドットパターン等の他の構造化光が用いられてもよい。

取得部４１０は、計測パターンデータの表す複数の計測パターンの各々を順次投写するようにプロジェクター２を制御する。また、取得部４１０は、被投写物ＳＣに順次投写される複数の計測パターンの各々を第１撮像位置Ｐ１及び第２撮像位置Ｐ２から同じ拡大率で撮像するようユーザーに促し、ユーザーの操作に応じて撮像装置５０に撮像を行わせる。本実施形態における第２画像及び第３画像は、被投写物ＳＣを同じ拡大率で同じカメラにより撮像した画像である。

第１特定部４２０は、第１画像と第２画像とに基づいて、プロジェクター座標系と第１カメラ座標系との対応関係、即ち第１対応関係を特定する。プロジェクター座標系は本開示における第１座標系の一例である。第１カメラ座標系は本開示における第２座標系の一例である。より詳細に説明すると、第１特定部４２０は、第２画像における計測パターンの座標をプロジェクター２の表示パネルにおける計測パターンの座標に射影変換するための第１変換行列を複数の第１画像と複数の第２画像とから生成する。

第２特定部４３０は、第１画像と第３画像と基づいて、プロジェクター座標系と第２カメラ座標系との対応関係、即ち第２対応関係を特定する。第２カメラ座標系は本開示における第３座標系の一例である。より詳細に説明すると、第２特定部４３０は、第３画像における計測パターンの座標をプロジェクター２の表示パネルにおける計測パターンの座標に射影変換するための第２変換行列を複数の第１画像と複数の第３画像とから生成する。

設定支援部４４０は、第１撮像位置Ｐ１からの被投写物ＳＣの撮像画像をタッチパネル１０の表示装置に表示させる。プロジェクター２から被投写物ＳＣに投写する投写オブジェクトの第１カメラ座標系における配置先となる第１表示領域の指定をユーザーに促すためである。この撮像画像については、第１対応関係の特定の際に撮像した複数の第２画像のうちの何れかを流用してもよい。第１表示領域を指定する操作の具体例としては、タッチパネル１０に対するタップ等により、第１表示領域の輪郭線を描くように第１表示領域の頂点を順に指定する操作が挙げられる。例えば、矩形の第１表示領域を指定する場合には、左上隅の頂点、右上隅、右下隅、左下隅の順に矩形の頂点をタップすればよい。第１表示領域を指定する操作の他の具体例としては、第１表示領域の輪郭線を描くようにスワイプする操作が挙げられる。

図４は、第１表示領域の指定をユーザーに促すために設定支援部４４０が表示装置に表示させる画像Ｇ２の一例を示す図である。図４にて斜め線のハッチングを付与した領域は、ユーザーの操作により設定された第１表示領域Ａ１の一例である。図４に示す例では、被投写物ＳＣの面Ｓ１と面Ｓ２に跨る第１表示領域Ａ１が設定されている。設定支援部４４０は、第１表示領域を指定する操作に応じて、第１表示領域Ａ１の各頂点の位置及び各頂点を結ぶ順を示す第１頂点情報を生成する。第１頂点情報の具体例としては、第１カメラ座標系、即ち第２座標系、における各頂点の座標を示す情報と頂点を結ぶ順を示す情報とを対応付けて配列した情報が挙げられる。頂点を結ぶ順を示す情報の具体例としては、頂点のタッチ順に値が大きくなるＩＤが挙げられる。

生成部４５０は、ユーザーにより指定された第１表示領域を第３座標系において投写オブジェクトの配置先となる第２表示領域に変換する変換情報を、第１対応関係及び第２対応関係に基づいて生成する。この変換情報には、第１表示領域を第１対応関係に基づいて第１座標系における第１領域に変換する第１変換情報と、第１領域を第２対応関係に基づいて第２表示領域に変換する第２変換情報とが含まれる。第１変換情報の具体例としては、第１対応関係を示す第１変換行列が挙げられる。第２変換情報の具体例としては、第２対応関係を示す第２変換行列が挙げられる。そして、上記変換情報の具体例としては、第１変換行列と第２変換行列の積が挙げられる。

図５は、プロジェクター２から被投写物ＳＣに投写される投写画像Ｇ３、及び第１対応関係に基づいて第１表示領域Ａ１を変換することで得られる第１領域Ｒ１の一例を示す図である。本実施形態における被投写物ＳＣは三次元形状を有するため、第１撮像位置Ｐ１からの第１撮像画像に写っている被投写物ＳＣの部分のうちの一部が第２撮像位置Ｐ２からの第２撮像画像に写っていない場合がある。具体的には、被投写物ＳＣの面Ｓ１は第２撮像画像には写っていない。このような状況下で、図４に示すように面Ｓ１と面Ｓ２とに跨る第１表示領域Ａ１が設定されたとする。この場合、第１表示領域Ａ１は、図４に示すように、第１撮像画像と第２撮像画像の両方に写っている部分に対応する第２領域Ｒ２と、第１撮像画像には写っている一方、前記第２撮像画像に写っていない部分に対応する第３領域Ｒ３と、に区分けされる。第１領域Ｒ１のうち第１対応関係に基づいて第２領域に対応付けられる部分については、第２対応関係に基づいて第２カメラ座標系における第４領域に変換することができる。一方、第１領域のうち第１対応関係に基づいて第３領域に対応付けられる部分については、第２対応関係が存在しないため、第２対応関係を用いて第２カメラ座標系の領域に変換することはできない。生成部４５０は、第３領域に対応付けられる部分については第４領域に基づいて第２カメラ座標系の第５領域に変換する。つまり、本実施形態では、生成部４５０は、第２表示領域を第４領域と第５領域とに分けて変換する第２変換情報を生成する。

例えば、図５に示す投写画像Ｇ３では、頂点Ａ、Ｂ、Ｃ及びＤを有する四角形の領域が被投写物ＳＣの面Ｓ２に対応し、この領域については第２対応関係を特定済である。図５では、頂点ａ、ｂ、ｃ及びｄを有する四角形が第１領域Ｒ１である。頂点ａ、ｂ、ｃ、ｆ及びｅを有する五角形の領域は第１対応関係に基づいて第２領域Ｒ２に対応付けられる領域である。頂点ｄ、ｅ及びｆを有する三角形の領域は第１対応関係に基づいて第３領域Ｒ３に対応付けられる領域である。なお、頂点ｅは線分ＤＡと線分ｄａの交点であり、頂点ｆは線分ＤＡと線分ｃｄの交点である。

生成部４５０は、第１領域の４つの頂点のうち頂点ａ、ｂ、及びｃの第２カメラ座標における座標を第２変換行列を用いて算出する。次いで、生成部４５０は、プロジェクター座標系における線分ＤＡ、ｄａ、ｃｄを求め、頂点ｅ及び頂点ｆのプロジェクター座標系における座標を算出する。次いで、生成部４５０は、第２変換行列を用いて頂点ｅ及び頂点ｆの第２カメラ座標系における座標を求め、第２カメラ座標系において点ａと点ｅとを通る第１の直線及び点ｃと点ｆとを通る第２の直線を求める。そして、生成部４５０は、第２カメラ座標系における第１の直線と第２の直線の交点を求め、当該交点の座標を第２カメラ座標系における頂点ｄの座標とする。生成部４５０は、頂点ｄのプロジェクター座標系における座標と第２カメラ座標系における座標とを対応付けるテーブルと第２変換行列との組を、上記第２変換情報として生成する。

確認支援部４６０は、図６に示すように、頂点ｄの座標に応じた余白の画像Ｇ５と、第２撮像位置Ｐ２からの被投写物ＳＣの撮像画像Ｇ４から当該余白の分だけ狭めて切り出した画像Ｇ６と、からなる画像Ｇ７に第２表示領域Ａ２の画像を重ねて表示装置に表示させる。このとき、確認支援部４６０は、第２表示領域の輪郭線の内側を第１色で塗りつぶし、かつ第２表示領域の輪郭線を第２色で表示装置に表示させる。第１色の具体例としては赤色が挙げられ、第２色の具体例としては青色が挙げられる。なお、本実施形態では第２表示領域の輪郭線を第２色で描画するが、第１色で描画してもよい。また、本実施形態では、第２表示領域の輪郭線の内側を第１色で塗りつぶすが、第１色による塗りつぶしは省略されてもよい。また、第２表示領域の輪郭線の描画も省略し、第２頂点情報の示す頂点の描画のみで第２表示領域を表現してもよい。

また、プログラムＰＡに従って作動している処理装置４０は、本開示の情報生成方法を実行する。図７は、処理装置４０がプログラムＰＡに従って実行する情報生成方法の流れを示す図である。図７に示すように、本開示の情報生成方法には、取得処理ＳＡ１１０、第１特定処理ＳＡ１２０、第２特定処理ＳＡ１３０、設定支援処理ＳＡ１４０、第１判定処理ＳＡ１５０、生成処理ＳＡ１６０、及び確認支援処理ＳＡ１７０が含まれる。

取得処理ＳＡ１１０では、処理装置４０は、取得部４１０として機能する。取得処理ＳＡ１１０では、処理装置４０は、タッチパネル１０に対する操作により、ユーザーから特定開始を指示されたことを契機としてプロジェクター２に対してプロジェクター情報の送信を要求し、プロジェクター２から返信されるプロジェクター情報を取得する。次いで、処理装置４０は、プロジェクター２から取得したプロジェクター情報に含まれる解像度情報に基づいて複数の計測パターンを生成する。処理装置４０は、計測パターンデータの表す複数の計測パターンの各々を順次投写するようにプロジェクター２を制御する。また、処理装置４０は、被投写物ＳＣに順次投写される複数の計測パターンの各々を第１撮像位置Ｐ１及び第２撮像位置Ｐ２から撮像するようにユーザーに促し、ユーザーの操作に応じて撮像装置５０に撮像を行わせ、第２画像と第３画像と取得する。

取得処理ＳＡ１１０に後続する第１特定処理ＳＡ１２０では、処理装置４０は、第１特定部４２０として機能する。第１特定処理ＳＡ１２０では、処理装置４０は、第１対応関係を特定する。つまり、第１特定処理ＳＡ１２０では、処理装置４０は、第１変換行列を生成する。第１特定処理ＳＡ１２０に後続する第２特定処理ＳＡ１３０では、処理装置４０は、第２特定部４３０として機能する。第２特定処理ＳＡ１３０では、処理装置４０は、第２対応関係を特定する。つまり、第２特定処理ＳＡ１３０では、処理装置４０は、第２変換行列を生成する。

第２特定処理ＳＡ１３０に後続する設定支援処理ＳＡ１４０では、処理装置４０は設定支援部４４０として機能する。設定支援処理ＳＡ１４０では、処理装置４０は、第１撮像位置Ｐ１からの被投写物ＳＣの撮像画像をタッチパネル１０の表示装置に表示させることにより、プロジェクター２から被投写物ＳＣに投写する投写オブジェクトの第１カメラ座標系における配置先となる第１表示領域を指定することをユーザーに促す。なお、投写画像に複数の投写オブジェクトを配置する場合には、投写画像に配置する投写オブジェクトの数だけ設定支援処理ＳＡ１４０以降の処理を繰り返せばよい。処理装置４０は、タッチパネル１０に対して第１表示領域を指定する操作が為されると、前述の第１頂点情報を生成する。第１表示領域の設定を完了すると、ユーザーはタッチパネル１０に対する操作により第１表示領域の設定完了を情報生成装置１Ａに指示する。

第１判定処理ＳＡ１５０では、処理装置４０は、タッチパネル１０に対する操作により、第１表示領域の設定完了を指示されたか否かを判定する。第１判定処理ＳＡ１５０の判定結果が“Ｎｏ”である場合には、処理装置４０は、設定支援処理ＳＡ１４０を再度実行する。第１判定処理ＳＡ１５０の判定結果が“Ｙｅｓ”である場合には、処理装置４０は、生成処理ＳＡ１６０を実行する。生成処理ＳＡ１６０では、処理装置４０は生成部４５０として機能する。生成処理ＳＡ１６０では、処理装置４０は、設定支援処理ＳＡ１４０にて生成した第１頂点情報を、第２頂点情報に変換するための変換情報を生成する。

確認支援処理ＳＡ１７０では、処理装置４０は、確認支援部４６０として機能する。確認支援処理ＳＡ１７０では、処理装置４０は、第２撮像位置からの撮像画像に、輪郭線の内側を第１色で塗りつぶし、かつ第２色で輪郭線を描画した第２表示領域の画像を重ねてタッチパネル１０の表示装置に表示させる。

本実施形態の情報生成装置１Ａによれば、第１撮像位置Ｐ１からの被投写物ＳＣの撮像画像上で指定された表示領域を第２撮像位置Ｐ２からの被投写物の撮像画像上での表示領域に変換することが可能になる。第１撮像位置Ｐ１からの撮像画像には、表示領域の配置先となる面Ｓ１と面Ｓ２とが写っているものの、当該撮像画像における面Ｓ１及び面Ｓ２の形状の歪みは大きい。一方、第２撮像位置Ｐ２からの撮像画像には面Ｓ２のみが写っているものの、当該撮像画像における面Ｓ２の形状の歪みは小さい。本実施形態によれば、大きな歪みを伴う撮像画像を参考に設定された表示領域を歪みの小さな撮像画像上の表示領域に変換してユーザーに確認させることが可能になる。加えて、本実施形態によれば、第２撮像位置Ｐ２からの撮像画像に写っていない範囲を含めて第１撮像位置からの撮像画像に対して表示領域を設定することが可能になる。このように、本実施形態の情報生成装置１Ａによれば、投写オブジェクトの配置先となる表示領域を被投写物ＳＣの形状に依らずに設定することが可能になる。更に本実施形態によれば、第２カメラ座標系における表示領域を、色彩を通じてユーザーに把握させることが可能になる。

２．変形例
上記各実施形態は、以下のように変更されてもよい。
（１）上記実施形態では、第１表示領域の輪郭線を描くように第１表示領域の頂点を順にタップ等により指定する操作で第１表示領域を設定した。しかし、各種の多角形或いは楕円等の予め定められた図形を用いて第１表示領域をユーザーに指定させてもよい。例えば、予め定められた複数種の図形のうちの何れかを選択させるためのプルダウンメニューを表示する場合には、当該プルダウンメニューに表示される図形を選択する操作と選択された図形の位置及び形状の少なくとも一方を変更する操作とにより第１表示領域を設定すればよい。また、被投写物ＳＣの全体の形状或いは被投写物ＳＣの各面の形状をエッジ検出等を利用して特定し、当該特定された形状に対応する図形を上記プルダウンメニューに含めてもよい。

（２）上記実施形態では、被投写物ＳＣの一部が第２撮像位置Ｐ２からの撮像画像に写っておらず、第１表示領域が第２領域と第３領域とに区分けされる場合、第１領域のうち第２領域に対応する部分については第２変換行列を用いて第４領域に変換し、第３領域に対応する部分ついては第４領域に基づいて第５領域に変換した。しかし、第３領域に対応する部分の第５領域への変換を省略し、第４領域のみで第２表示領域を構成してもよい。

（３）上記実施形態では、第１撮像位置Ｐ１と第２撮像位置Ｐ２のうちの一方は、他方と被投写物ＳＣとを結ぶ直線上の位置とは異なる位置であり、第２画像と第３画像とは、被投写物ＳＣを同じ拡大率で撮像した画像であった。しかし、第２撮像位置Ｐ２は、図８に示すように、第１撮像位置Ｐ１と被投写物ＳＣとを結ぶ直線Ｌ１上の位置であってもよい。この場合、第３画像における被投写物ＳＣの拡大率と第２画像における被投写物ＳＣの拡大率とが異なってもよい。例えば、図８に示す例では、第３画像における被投写物ＳＣの拡大率は、第２画像における被投写物ＳＣの拡大率よりも大きくてもよい。本態様によれば、ユーザーは第１撮像位置Ｐ１からの撮像画像を参考に表示領域を設定した面Ｓ１及び面Ｓ２の細部をより拡大率の大きい第２撮像位置Ｐ２からの撮像画像を参考に確認しつつ、面Ｓ１及び面Ｓ２の詳細な形状に応じた表示領域を設定することが可能になる。

（４）上記実施形態における情報生成装置１Ａは撮像装置５０を有するスマートフォンで
あったが、撮像装置を備えるタブレット端末或いは撮像装置を備えるノート型或いは据え
置き型のパーソナルコンピューターであってもよい。ノート型或いは据え置き型のパーソ
ナルコンピューターを本開示の情報生成装置として用いる場合には、マウス又はキーボー
ドを入力装置として第１表示領域の指定を受け付けてもよい。また、情報生成装置がＬＡ
Ｎ等のネットワーク経由のデータ通信により撮像画像を取得できる場合には、情報生成装
置が撮像装置を備えている必要はない。この場合、例えば、図９に示すように、タッチパ
ネル１０と通信装置２０と処理装置４０とを有する情報生成装置１Ｂに、第１撮像位置Ｐ
１に設置される撮像装置５０Ａと、第２撮像位置Ｐ２に設置される撮像装置５０Ｂとを接
続して画像表示システム５Ｂを構成してもよい。図９に示す画像表示システム５Ｂでは、
第２画像と第３画像とを同時並列に撮像することができる。このため、図９に示す画像表
示システム５Ｂでは、ユーザーは、情報生成装置１Ｂを持って第１撮像位置Ｐ１から第２
撮像位置Ｐ２へ移動する必要はない。また、スマートフォン或いはタブレット端末等の携
帯端末とＬＡＮ又はインターネットを介して携帯端末と通信するサーバー装置とを有する
コンピューターシステムにおいて、サーバー装置の処理装置を取得部４１０、第１特定部
４２０、第２特定部４３０、設定支援部４４０、及び生成部４５０として機能させ、当該
携帯端末に表示装置及び入力装置の役割を担わせてもよい。このコンピューターシステム
は本開示の情報生成システムの一例である。

（５）上記第１実施形態における取得部４１０、第１特定部４２０、第２特定部４３０、設定支援部４４０、生成部４５０、及び確認支援部４６０はソフトウェアモジュールであった。しかし、取得部４１０、第１特定部４２０、第２特定部４３０、設定支援部４４０、生成部４５０、及び確認支援部４６０の一部又は全部は、ハードウェアであってもよい。このハードウェアの一例としては、ＤＳＰ（Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、及びＦＰＧＡ（Field Programmable Gate Array）が挙げられる。取得部４１０、第１特定部４２０、第２特定部４３０、設定支援部４４０、生成部４５０、及び確認支援部４６０の一部又は全部がハードウェアであっても、上記実施形態と同一の効果が奏される。

（６）上記実施形態では、プログラムＰＡが記憶装置３０に記憶済であった。しかし、プログラムＰＡを単体で製造又は配布してもよい。プログラムＰＡの具体的な配布方法としては、フラッシュＲＯＭ（Read Only Memory）等のコンピューター読み取り可能な記録媒体に上記プログラムＰＡを書き込んで配布する態様、又はインターネット等の電気通信回線経由のダウンロードにより配布する態様が考えられる。当該プログラムＰＡをパーソナルコンピューター等の一般的な情報処理装置にインストールし、当該情報処理装置のＣＰＵ等のコンピューターを当該プログラムに従って作動させることで当該情報処理装置を本開示の情報生成装置として機能させることが可能になる。

３．実施形態及び各変形例の少なくとも１つから把握される態様
本開示は、上述した実施形態及び変形例に限られるものではなく、その趣旨を逸脱しない範囲において種々の態様で実現することができる。例えば、本開示は、以下の態様によっても実現可能である。以下に記載した各態様中の技術的特徴に対応する上記実施形態中の技術的特徴は、本開示の課題の一部又は全部を解決するために、或いは本開示の効果の一部又は全部を達成するために、適宜、差し替えや、組み合わせを行うことが可能である。また、その技術的特徴が本明細書中に必須なものとして説明されていなければ、適宜、削除することが可能である。

以上に説明した課題を解決するため、本開示の情報生成方法の一態様は、取得処理ＳＡ１１０、第１特定処理ＳＡ１２０、第２特定処理ＳＡ１３０、設定支援処理ＳＡ１４０、及び生成処理ＳＡ１６０を含む。

取得処理ＳＡ１１０では、プロジェクター２から被投写物ＳＣへ投写される計測パターンの画像と、計測パターンの画像を投写されている状態の被投写物ＳＣを第１撮像位置Ｐ１から撮像して得られる撮像画像と、計測パターンの画像を投写されている状態の被投写物ＳＣを第２撮像位置Ｐ２から撮像して得られる撮像画像と、が取得される。計測パターンの画像は本開示における第１画像の一例である。計測パターンの画像を投写されている状態の被投写物ＳＣを第１撮像位置Ｐ１から撮像して得られる撮像画像は本開示における第２画像の一例である。計測パターンの画像を投写されている状態の被投写物ＳＣを第２撮像位置Ｐ２から撮像して得られる撮像画像は本開示における第３画像の一例である。

第１特定処理ＳＡ１２０では、第１画像と第２画像とに基づいて、プロジェクター２が投写する投写画像上の位置を表す第１座標系と、第１撮像位置Ｐ１から撮像される撮像画像上の位置を表す第２座標系との第１対応関係が特定される。第２特定処理ＳＡ１３０では、第１画像と第３画像とに基づいて、第１座標系と第２撮像位置Ｐ２から撮像される撮像画像上の位置を表す第３座標系との第２対応関係が特定される。

設定支援処理ＳＡ１４０では、第１撮像位置Ｐ１からの被投写物ＳＣの撮像画像をタッチパネル１０の表示装置に表示させることにより、プロジェクター２から被投写物ＳＣに投写する投写オブジェクトの第２座標系における配置先となる第１表示領域Ａ１の指定をユーザーに促す。そして、生成処理ＳＡ１６０では、第１表示領域Ａ１を第３座標系において投写オブジェクトの配置先となる第２表示領域Ａ２に変換する変換情報が、第１対応関係及び第２対応関係に基づいて生成される。

本態様の情報生成方法によれば、第１撮像位置Ｐ１からの被投写物ＳＣの撮像画像上で指定された第１表示領域を第２撮像位置Ｐ２からの被投写物ＳＣの撮像画像上での第２表示領域に変換することができる。例えば、第１撮像位置Ｐ１と第２撮像位置Ｐ２のうちの一方が、他方と被投写物ＳＣとを結ぶ直線上の位置であり、第２画像と第３画像とでは被投写物ＳＣの拡大率が異なっていたとする。この場合、ユーザーは、投写オブジェクトの配置先となる表示領域を拡大率を変えて確認することができる。

また、第１撮像位置Ｐ１と第２撮像位置Ｐ２のうちの一方が、他方と被投写物ＳＣとを結ぶ直線上の位置とは異なる位置であり、第２画像と第３画像とは被投写物を同じ拡大率で撮像した画像である場合には、被投写物を見る方向を変えて表示領域を確認するための変換情報が生成される。このため、一方の撮像画像に写っていない部分があったとしても、当該写っていない部分を含めて表示領域を設定することができる。このように本態様の情報生成方法によれば、投写オブジェクトの配置先となる表示領域を被投写物の形状に依らずに設定することが可能になる。

より好ましい態様の情報生成方法において変換情報は、第１表示領域Ａ１を第１対応関係に基づいて第１座標系における第１領域Ｒ１に変換する第１変換情報と、第１領域Ｒ１を第２対応関係に基づいて第２表示領域Ａ２に変換する第２変換情報と、を含んでもよい。

別の好ましい態様の情報生成方法では、第１撮像位置Ｐ１から被投写物ＳＣを撮像して得られる第１撮像画像に写っている被投写物ＳＣの部分のうちの一部が第２撮像位置Ｐ２から被投写物ＳＣを撮像して得られる第２撮像画像に写っておらず、第１表示領域Ａ１が第２領域Ｒ２と第３領域Ｒ３と、に区分けされる場合、生成処理ＳＡ１６０では以下の第２変換情報が生成される。第２領域Ｒ２は、第１表示領域Ａ１のうち第１撮像画像と第２撮像画像の両方に写っている部分に対応する。第３領域Ｒ３は、第１表示領域Ａ１のうち第１撮像画像には写っている一方、第２撮像画像に写っていない部分に対応する。この場合、以下の第４領域と第５領域とに分けて第２表示領域Ａ２に変換する第２変換情報が生成される。第４領域は、第１領域Ｒ１のうち第１対応関係に基づいて第２領域Ｒ２に対応付けられる部分を第２対応関係に基づいて変換することにより得られる領域である。第５領域は、第１領域のうち第１対応関係に基づいて第３領域Ｒ３に対応付けられる部分を第４領域に基づいて変換することにより得られる領域である。本態様によれば、第２撮像画像に写っていない範囲を含めて第１表示領域Ａ１を設定することが可能になる。

更に好ましい態様の情報生成方法では、第２画像は第１撮像位置Ｐ１に設置される撮像装置５０により撮像され、第３画像は第２撮像位置Ｐ２に設置される撮像装置５０により撮像されてもよい。本態様によれば、第２画像と第３画像とを１つの撮像装置で撮像できる。

更に好ましい態様の情報生成方法では、第２画像は第１撮像位置Ｐ１に設置される撮像装置５０Ａにより撮像され、第３画像は第２撮像位置Ｐ２に設置される撮像装置５０Ｂにより撮像されてもよい。撮像装置５０Ａは本開示における第１カメラの一例であり、撮像装置５０Ｂは本開示における第２カメラの一例である。本態様によれば、第２画像と第３画像とを同時に撮像できる。

また、上記課題を解決するため、本開示の情報生成システムの一態様は、表示装置と、入力装置と、以下の処理装置４０と、を備える。そして、処理装置４０は、前述の取得処理ＳＡ１１０、第１特定処理ＳＡ１２０、第２特定処理ＳＡ１３０、設定支援処理ＳＡ１４０、及び生成処理ＳＡ１６０を実行する。本態様の情報生成システムによっても、投写オブジェクトの配置先となる表示領域を被投写物の形状に依らずに設定することが可能になる。

より好ましい態様の情報生成システムでは、処理装置４０は、確認支援処理ＳＡ１７０を更に実行する。確認支援処理ＳＡ１７０では、処理装置４０は、第２撮像位置Ｐ２からの撮像画像を、第２表示領域Ａ２を第１色で塗りつぶした状態で表示装置に表示させる。本態様によれば、ユーザーは、第２表示領域を、色彩を通じて一目で把握することができる。

更に好ましい態様の情報生成システムでは、確認支援処理ＳＡ１７０において処理装置４０は、第２表示領域Ａ２の輪郭線を第２色で表示装置に表示させる。本態様によれば、ユーザーは、第２表示領域の輪郭を、色彩を通じて一目で把握することができる。

また、上記課題を解決するため、本開示のプログラムの一態様は、前述の取得処理ＳＡ１１０、第１特定処理ＳＡ１２０、第２特定処理ＳＡ１３０、設定支援処理ＳＡ１４０、及び生成処理ＳＡ１６０をコンピューターに実行させる。本態様のプログラムによっても、投写オブジェクトの配置先となる表示領域を被投写物の形状に依らずに設定することが可能になる。

１Ａ，１Ｂ…情報生成装置、２…プロジェクター、１０…タッチパネル、２０…通信装置、３０…記憶装置、４０…処理装置、４１０…取得部、４２０…第１特定部、４３０…第２特定部、４４０…設定支援部、４５０…生成部、４６０…確認支援部、５０，５０Ａ，５０Ｂ…撮像装置、ＰＡ…プログラム、ＳＣ…被投写物、５Ａ，５Ｂ…画像表示システム。

Claims (11)

1. プロジェクターから投写される第１画像と、前記第１画像が投写されている状態の被投
   写物を第１撮像位置から撮像して得られる第２画像と、前記第１撮像位置とは異なる第２
   撮像位置から前記被投写物を撮像して得られる第３画像と、を取得し、
   前記第１画像と前記第２画像とに基づいて、前記プロジェクターが投写する投写画像上
   の位置を表す第１座標系と前記第１撮像位置から撮像される撮像画像上の位置を表す第２
   座標系との第１対応関係を特定し、
   前記第１画像と前記第３画像とに基づいて、前記第１座標系と前記第２撮像位置から撮
   像される撮像画像上の位置を表す第３座標系との第２対応関係を特定し、
   前記第１撮像位置からの前記被投写物の撮像画像を表示装置に表示させることにより、
   前記プロジェクターから前記被投写物に投写する投写オブジェクトの前記第２座標系にお
   ける配置先となる第１表示領域の指定する操作を受け付け、
   前記ユーザーにより指定される前記第１表示領域を前記第３座標系において前記投写オ
   ブジェクトの配置先となる第２表示領域に変換する変換情報を、前記第１対応関係及び前
   記第２対応関係に基づいて生成する、
   情報生成方法。
2. 前記変換情報は、
   前記第１表示領域を前記第１対応関係に基づいて前記第１座標系における第１領域に変
   換する第１変換情報と、
   前記第１領域を前記第２対応関係に基づいて前記第２表示領域に変換する第２変換情報
   と、を含む、請求項１に記載の情報生成方法。
3. 前記第１撮像位置から前記被投写物を撮像して得られる第１撮像画像に写っている前記
   被投写物の部分のうちの一部が前記第２撮像位置から前記被投写物を撮像して得られる第
   ２撮像画像に写っておらず、前記第１表示領域が前記第１撮像画像と前記第２撮像画像の
   両方に写っている部分に対応する第２領域と、前記第１撮像画像には写っている一方、前
   記第２撮像画像に写っていない部分に対応する第３領域と、に区分けされる場合、
   前記第１領域のうち前記第１対応関係に基づいて前記第２領域に対応付けられる部分を
   前記第２対応関係に基づいて変換することにより得られる第４領域と、前記第１領域のう
   ち前記第１対応関係に基づいて前記第３領域に対応付けられる部分を前記第４領域に基づ
   いて変換することにより得られる第５領域と、に前記第２表示領域を分けて変換する前記
   第２変換情報を生成する、請求項２に記載の情報生成方法。
4. 前記第１撮像位置と前記第２撮像位置のうちの一方は、他方と前記被投写物とを結ぶ直
   線上の位置であり、前記第２画像と前記第３画像とでは前記被投写物の拡大率が異なる、
   請求項１乃至３の何れか１項に記載の情報生成方法。
5. 前記第１撮像位置と前記第２撮像位置のうちの一方は、他方と前記被投写物とを結ぶ直
   線上の位置とは異なる位置であり、前記第２画像と前記第３画像とは、前記被投写物を同
   じ拡大率で撮像した画像である、請求項１乃至３の何れか１項に記載の情報生成方法。
6. 前記第２画像は前記第１撮像位置に設置されるカメラにより撮像され、前記第３画像は
   前記第２撮像位置に設置される前記カメラにより撮像される、請求項１乃至５のうちの何
   れか１項に記載の情報生成方法。
7. 前記第２画像は前記第１撮像位置に設置される第１カメラにより撮像され、前記第３画
   像は前記第２撮像位置に設置される第２カメラにより撮像される、請求項１乃至５のうち
   の何れか１項に記載の情報生成方法。
8. 表示装置と、
   入力装置と、
   処理装置と、を備え、
   前記処理装置は、
   プロジェクターから投写される第１画像と、前記第１画像が投写されている状態の被投
   写物を第１撮像位置から撮像して得られる第２画像と、前記第１撮像位置とは異なる第２
   撮像位置から前記被投写物を撮像して得られる第３画像と、を取得すること、
   前記第１画像と前記第２画像とに基づいて、前記プロジェクターが投写する投写画像上
   の位置を表す第１座標系と前記第１撮像位置から撮像された撮像画像上の位置を表す第２
   座標系との第１対応関係を特定すること、
   前記第１画像と前記第３画像とに基づいて、前記第１座標系と前記第２撮像位置から撮
   像された撮像画像上の位置を表す第３座標系との第２対応関係を特定すること、
   前記第１撮像位置からの前記被投写物の撮像画像を前記表示装置に表示させることによ
   り、前記プロジェクターから前記被投写物に投写する投写オブジェクトの前記第２座標系
   における配置先となる第１表示領域の指定する操作を受け付けること、及び、
   前記入力装置に対する操作により前記ユーザーにより指定される前記第１表示領域を前
   記第３座標系において前記投写オブジェクトの配置先となる第２表示領域に変換する変換
   情報を、前記第１対応関係及び前記第２対応関係に基づいて生成すること、を実行する、
   情報生成システム。
9. 前記処理装置は、前記第２撮像位置からの撮像画像を、前記第２表示領域を第１色で塗
   りつぶした状態で前記表示装置に表示させることを、更に実行する請求項８に記載の情報
   生成システム。
10. 前記処理装置は、前記第２表示領域の輪郭線を第２色で前記表示装置に表示させる、請
    求項８又は請求項９に記載の情報生成システム。
11. コンピューターに、
    プロジェクターから投写される第１画像と、前記第１画像が投写されている状態の被投
    写物を第１撮像位置から撮像して得られる第２画像と、前記第１撮像位置とは異なる第２
    撮像位置から前記被投写物を撮像して得られる第３画像と、を取得すること、
    前記第１画像と前記第２画像とに基づいて、前記プロジェクターが投写する投写画像上
    の位置を表す第１座標系と前記第１撮像位置から撮像された撮像画像上の位置を表す第２
    座標系との第１対応関係を特定すること、
    前記第１画像と前記第３画像とに基づいて、前記第１座標系と前記第２撮像位置から撮
    像された撮像画像上の位置を表す第３座標系との第２対応関係を特定すること、
    前記第１撮像位置からの前記被投写物の撮像画像を表示装置に表示させることにより、
    前記プロジェクターから前記被投写物に投写する投写オブジェクトの前記第２座標系にお
    ける配置先となる第１表示領域の指定する操作を受け付けること、及び、
    前記ユーザーにより指定される前記第１表示領域を前記第３座標系において前記投写オ
    ブジェクトの配置先となる第２表示領域に変換する変換情報を、前記第１対応関係及び前
    記第２対応関係に基づいて生成すること、
    を実行させるプログラム。

Images