JP2021145233A - 撮影システム、撮影方法およびプログラム - Google Patents

Abstract

【課題】演者の負担を軽減しつつ低コストで撮影を行うことができる撮影システム、撮影方法およびプログラムを提案する。【解決手段】撮影システム１は、カメラ１４０と、プロジェクタ１２０と、シャッタ装置１３０と、を有する。シャッタ装置は、カメラまたはプロジェクタと同期し、プロジェクタから投射されカメラへ入射する光を遮蔽し、プロジェクタから投射される光を遮蔽する遮蔽時間を前記カメラの露光時間に合わせて動的に変更する。【選択図】図１

Description

本発明は、撮影システム、撮影方法およびプログラムに関する。

映画やドラマのリハーサルでは、演者の立ち位置や移動経路などがテープでマーキングされる。テープは撮影シーンごとに張り替えられる。そのため、テープによるマーキングをプロジェクションマッピングによって代替することが検討されている。演者の負担を減らすために、リハーサルだけでなく本番の撮影でも移動経路などの情報を投射することも考えられる。この場合、撮影画像に投射光が映り込まないようにする必要がある。投射光が撮影画像に映り込まないようにする技術としては、特許文献１の技術が知られている。特許文献１では、カメラの撮影周期とプロジェクタの投射周期とを同期させている。

特開２０１５−１８６２４８号公報

しかしながら、上記の従来技術では、カメラとプロジェクタの双方に、同期処理を行うための専用の構造を作り込む必要がある。そのため、カメラとプロジェクタを汎用機で代替することができず、開発コストが高くなる。

そこで、本開示では、演者の負担を軽減しつつ低コストで撮影を行うことができる撮影システム、撮影方法およびプログラムを提案する。

本開示によれば、カメラと、プロジェクタと、前記カメラまたは前記プロジェクタと同期し、前記プロジェクタから投射され前記カメラへ入射する光を遮蔽するシャッタ装置と、を有する撮影システムが提供される。また、本開示によれば、前記撮影システムの情報処理がコンピュータにより実行される撮影方法、および、前記撮影システムの情報処理をコンピュータに実現させるプログラムが提供される。

第１実施形態の撮影システムの概略図である。 撮影方法の一例を説明するフローチャートである。 カメラとシャッタ装置とを同期させる処理の一例を説明するフローチャートである。 プロジェクタ、シャッタ装置、カメラおよび送信機の動作の一例を示すタイミングチャートである。 プロジェクタ、シャッタ装置、カメラおよび送信機の動作の一例を示すタイミングチャートである。 撮影画像の明るさと投射映像の明るさとの関係を示す図である。 演者へのコンテンツの提示処理の一例を示すフローチャートである。 補正映像の生成方法の他の例を示す図である。 プロジェクタから投射される補正映像の一例を示す図である。 第２実施形態の撮影システムの要部を示す図である。 プロジェクタ、シャッタ装置、カメラおよび送信機の動作の一例を示すタイミングチャートである。 撮影方法の一例を説明するフローチャートである。 第３実施形態の撮影システムの概略図である。 投射時間設定画面の一例を示す図である。 撮影方法の一例を示すフローチャートである。 プロジェクタ、送信機、シャッタ装置およびカメラの動作の一例を示すタイミングチャートである。 プロジェクタ、送信機、シャッタ装置およびカメラの動作の一例を示すタイミングチャートである。 撮影画像の明るさと投射映像の明るさとの関係を示す図である。 第４実施形態の撮影システムの要部を示す図である。 プロジェクタ、送信機、シャッタ装置およびカメラの動作の一例を示すタイミングチャートである。 撮影方法の一例を説明するフローチャートである。 シャッタ装置ごしに測定された光強度の測定結果の一例を示す図である。

以下に、本開示の実施形態について図面に基づいて詳細に説明する。以下の各実施形態において、同一の部位には同一の符号を付することにより重複する説明を省略する。

なお、説明は以下の順序で行われる。
［１．第１実施形態］
［１−１．撮影システムの構成］
［１−２．撮影方法］
［１−３．効果］
［２．第２実施形態］
［２−１．撮影システムの構成］
［２−２．撮影方法］
［２−３．効果］
［３．第３実施形態］
［３−１．撮影システムの構成］
［３−２．撮影方法］
［３−３．効果］
［４．第４実施形態］
［４−１．撮影システムの構成］
［４−２．撮影方法］
［４−３．効果］
［５．変形例］

［１．第１実施形態］
［１−１．撮影システムの構成］
図１は、第１実施形態の撮影システム１の概略図である。

撮影システム１は、例えば、情報処理装置１１０と、プロジェクタ１２０と、シャッタ装置１３０と、カメラ１４０と、送信機１５０と、を有する。

情報処理装置１１０は、プロジェクタ１２０によって投射される映像を生成する。情報処理装置１１０は、例えば、３Ｄモデル記憶部１１１と、パラメータ記憶部１１２と、表示コンテンツ生成部１１３と、補正映像生成部１１４と、を有する。

３Ｄモデル記憶部１１１は、例えば、情報処理装置１１０に入力された情報から、スタジオＳＴの３Ｄモデルを読み込み記憶する。パラメータ記憶部１１２は、例えば、プロジェクタ１２０の内部パラメータおよび３Ｄモデル内のプロジェクタ１２０の位置姿勢情報を入力情報から読み込み記憶する。

表示コンテンツ生成部１１３は、例えば、スタジオＳＴに投射されるコンテンツを生成する。コンテンツは、演者ＡＣの演技をサポートする情報を含む。コンテンツは、例えば、演者ＡＣの立ち位置、演者ＡＣの移動経路を示す導線、および、演者ＡＣの周囲に存在するＣＧキャラクタなどを含む。

補正映像生成部１１４は、例えば、ユーザが編集したコンテンツ、３Ｄモデルおよびプロジェクタ１２０の内部パラメータおよび３Ｄモデル中のプロジェクタ１２０の位置姿勢情報を用いて、コンテンツを幾何補正し、補正映像を生成する。補正映像生成部１１４は、補正映像の映像ソースをプロジェクタ１２０に送信する。

情報処理装置１１０は、例えば、プロセッサとメモリとで構成されるコンピュータである。情報処理装置１１０のメモリには、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）およびＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）が含まれる。情報処理装置１１０は、図示略の情報処理プログラムを実行することにより、表示コンテンツ生成部１１３および補正映像生成部１１４として機能する。

プロジェクタ１２０は、例えば、映像出力部１２１と、投射部１２２と、を有する。

映像出力部１２１は、プロジェクタ１２０内のプロセッサである。映像出力部１２１は、補正映像生成部１１４から受け取った映像ソースを投射映像信号に変換して投射部１２２に出力する。

投射部１２２は、映像ソースに基づく映像をスタジオＡＴの目的とする場所に投射する。スタジオＳＴには、３Ｄモデルおよびプロジェクタ１２０の位置姿勢情報に応じて歪み補正されたコンテンツの映像が投射される。投射部１２２は、所定のリフレッシュレートで映像を投射する。投射部１２２としては、３ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）方式、ＬＣＯＳ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ ｏｎ Ｓｉｌｉｃｏｎ）方式およびＤＬＰ（Ｄｉｇｉｔａｌ Ｌｉｇｈｔ Ｐｒｏｃｅｓｓｉｎｇ；登録商標）方式などの公知の投射方式が採用される。

映像出力部１２１および投射部１２２は、公知の構造を有する。プロジェクタ１２０には、汎用機が用いられる。

カメラ１４０は、スタジオＳＴで演技する演者ＡＣを撮影する。カメラ１４０は、所定のフレームレートで撮影を行う。カメラ１４０は、例えば、露光時間設定部１４１と、同期制御部１４２と、同期信号出力部１４３と、露光制御部１４４と、撮像部１４５と、記録部１４６と、を有する。

露光時間設定部１４１は、カメラ１４０のフレームレートおよび１フレーム期間内のカメラ１４０の露光時間（シャッタスピード）を設定する。フレームレートは、例えば、ユーザが入力した設定値に設定される。露光時間は、例えば、手動または自動で設定される。手動モードでは、露光時間は、ユーザが入力した設定値に設定される。自動モードでは、露光時間は、例えば、撮影環境の明るさに基づいて自動で設定される。露光時間設定部１４１は、例えば、フレームレートおよび露光時間の少なくとも１つが変更されることにより露光タイミングが変更された場合に、変更後の露光タイミングに関する情報（フレームレートおよび露光時間）を同期制御部１４２に出力する。

同期制御部１４２は、露光時間に基づいて同期信号を生成する。同期制御部１４２は、同期信号を同期信号出力部１４３および露光制御部１４４に出力する。

同期信号出力部１４３は、同期信号に基づいて、カメラ１４０の露光タイミングを示す信号を送信機１５０から送信させる。露光制御部１４４は、同期信号に合わせてカメラシャッタを開閉させる。カメラシャッタは、例えば、カメラ１４０の内部に設けられたフォーカルプレーンシャッタまたはレンズシャッタである。カメラシャッタは、カメラ１４０の撮像素子に対して、撮影時のみ光があたるように、カメラ１４０の露光期間中のみ開き、それ以外の期間は光を遮蔽する。

送信機１５０は、例えば、赤外線信号を送信するＩＲ（Ｉｎｆｒａｒｅｄ）エミッタである。送信機１５０は、例えば、同期信号線によってカメラ１４０と接続される。

同期信号出力部１４３は、例えば、同期信号に合わせて送信機１５０を所定の時間だけ点滅させる。同期信号出力部１４３は、例えば、カメラ１４０の露光時（カメラシャッタが開いているとき）は送信機１５０が点灯し、カメラの非露光時（カメラシャッタが閉じているとき）は送信機１５０が消灯するようなパターンで送信機１５０を点滅させる。カメラ１４０の露光タイミングと送信機１５０の点灯タイミングはこれとは逆でもよい。

点滅時間（送信機１５０から信号が送信される時間）は、カメラ１４０の露光タイミングとシャッタ装置１３０の遮蔽タイミングとを同期させるのに必要な時間に基づいて決定される。例えば、点滅時間は、１フレーム期間以上で且つ１０フレーム期間以下の時間である。

撮像部１４５は、カメラシャッタの開閉タイミングに合わせて所定のフレームレートで間欠的に画像を撮影する。記録部１４６は、撮像部１４５で撮影された画像を記録する。

シャッタ装置１３０は、プロジェクタ１２０から投射されカメラ１４０へ入射する光を遮蔽する。シャッタ装置１３０は、例えば、送信機１５０から送信された信号を受信し、この信号に基づいて遮蔽時間を制御する。シャッタ装置１３０は、カメラ１４０と同期し、カメラ１４０の露光タイミングに合わせて、プロジェクタ１２０から投射される光を遮蔽する。

シャッタ装置１３０は、例えば、受信部１３１と、記憶部１３２と、シャッタ制御信号生成部１３３と、シャッタ制御部１３４と、シャッタ部材１３５と、を有する。

受信部１３１は、送信機１５０から送信された信号を受信する。受信部１３１は、例えば、受信した光の光量を２値化処理して、送信機１５０の点灯状態と非点灯状態とを検出する。受信部１３１は、受信した信号に基づいて、露光タイミングを検出する。例えば、受信部１３１は、送信機１５０の点灯時間および点灯周期に基づいて、カメラ１４０の露光時間および露光周期（フレームレート）を検出する。受信部１３１は、カメラ１４０の露光タイミングを示す情報をシャッタ制御信号生成部１３３に出力する。

シャッタ制御信号生成部１３３は、受信部１３１で受信した信号に基づいて、シャッタ制御信号を生成する。シャッタ制御信号は、例えば、送信機１５０の点灯時間および点灯周期に対応する遮蔽時間および遮蔽周期の情報を有する信号である。シャッタ制御部１３４は、シャッタ制御信号に基づいて、シャッタ部材１３５の遮蔽タイミングを制御する。これにより、シャッタ装置１３０は、プロジェクタ１２０から投射される光を遮蔽する遮蔽時間をカメラ１４０の露光時間に合わせて動的に変更する。

シャッタ部材１３５は、例えば、電圧によって可視光の透過率が変化する液晶シャッタである。シャッタ部材１３５は、例えば、投射部１２２から投射される光の光軸上に配置される。シャッタ部材１３５は、例えば、電圧非印加時に投射部１２２から投射された光を透過する。シャッタ部材１３５は、例えば、閾値以上の電圧が印加されたときに投射部１２２から投射された光を遮蔽する。

シャッタ装置１３０は、プロセッサとメモリとで構成されるコンピュータを含む。記憶部１３２は、シャッタ装置１３０の処理をコンピュータに実行させるプログラムＰＧを記憶する。シャッタ装置１３０は、プログラムＰＧを実行することにより、受信部１３１、記憶部１３２、シャッタ制御信号生成部１３３およびシャッタ制御部１３４として機能する。

記憶部１３２は、例えば、半導体記憶媒体および磁気記憶媒体などの任意の非一過的な記憶媒体を含む。記憶部１３２は、例えば、光ディスク、光磁気ディスクまたはフラッシュメモリを含んで構成される。プログラムは、例えば、コンピュータにより読み取り可能な非一過的な記憶媒体に記憶されている。

［１−２．撮影方法］
図２は、本実施形態の撮影方法の一例を説明するフローチャートである。

ステップＳ１において、同期制御部１４２は、露光時間設定部１４１で設定された露光時間に基づいて、送信機１５０の点滅パターンを決定する。

ステップＳ２において、送信機１５０は、同期制御部１４２で決定された点滅パターンで点滅を開始する。送信機１５０は、光の点滅を用いた信号を、カメラ１４０の露光タイミングを示す信号として送信する。

ステップＳ３において、受信部１３１は、送信機１５０から送信された信号を受信する。シャッタ制御信号生成部１３３は、受信部１３１で受信した信号に基づいて、シャッタ制御信号を生成する。シャッタ制御部１３４は、シャッタ制御信号に基づいて、シャッタ部材１３５の遮蔽タイミングをカメラ１４０の露光タイミングと同期させる。

ステップＳ４において、露光時間設定部１４１は、露光時間が変更されたか否かを判定する。露光時間設定部１４１は、例えば、ユーザが手動で露光時間を設定した場合、または、撮影環境の明るさの変化に基づいて露光時間を自動で変更された場合に、露光時間が変更されたと判定する。

ステップＳ４において露光時間が変更されたと判定された場合には（ステップＳ４：Ｙｅｓ）、ステップＳ１に戻る。

ステップＳ４において露光時間が変更されていないと判定された場合には（ステップＳ４：Ｎｏ）、ステップＳ５に進む。ステップＳ５において、カメラ１４０は、撮影を終了するか否かを判定する。カメラ１４０は、例えば、カメラ１４０に設けられた図示略の撮影終了ボタンが操作された場合に、撮影が終了されたと判定する。

ステップＳ５において撮影が終了すると判定された場合には（ステップＳ５：Ｙｅｓ）、カメラ１４０は撮影を終了する。ステップＳ５において撮影が終了すると判定されない場合には（ステップＳ５：Ｎｏ）、ステップＳ４に戻る。

図３は、カメラ１４０とシャッタ装置１３０とを同期させる処理の一例を説明するフローチャートである。

ステップＳ１１において、受信部１３１は、送信機１５０が点滅を開始したか否かを判定する。送信機１５０は、露光時間が変更された場合に、露光時間に応じた所定の点灯時間および点灯周期を有する点滅パターンで所定の時間だけ点滅する。例えば、カメラ１４０のフレームレートが６０ｆｐｓ（ｆｒａｍｅ ｐｅｒ ｓｅｃ）で露光時間が４ミリ秒である場合、送信機１５０は、１／６０秒のうち４ミリ秒だけ点灯し、残りの時間（＝ 約１２．７ミリ秒）は消灯するように点灯と消灯とを繰り返す。受信部１３１は、送信機１５０の最初の点灯を検出したときに点滅が開始したと判定する。受信部１３１は、最初の点灯が検出され始めたタイミングを点滅開始タイミングとして検出する。

ステップＳ１１において点滅が開始されたと判定された場合（ステップＳ１１：Ｙｅｓ）、ステップＳ１２に進む。ステップＳ１２において、受信部１３１は、点灯開始タイミングからの１周期分の点灯時間の計測を開始する。ステップＳ１１において点滅が開始されたと判定されなかった場合（ステップＳ１１：Ｎｏ）、点滅が開始されるまでステップＳ１を繰り返す。

ステップＳ１３おいて、受信部１３１は、１周期分の点灯が終了したか否かを判定する。

ステップＳ１３において１周期分の点灯が終了したと判定された場合（ステップＳ１３：Ｙｅｓ）、受信部１３１は、１周期分の点灯が終了したタイミングを点灯終了タイミング（消灯開始タイミング）として検出する。そして、ステップＳ１４において、点灯時間の計測を終了する。ステップＳ１３において１周期分の点灯が終了したと判定されなかった場合（ステップＳ１３：Ｎｏ）、点灯が終了するまでステップＳ１３を繰り返す。

ステップＳ１５において、受信部１３１は、１周期分の消灯時間の計測を開始する。そして、ステップＳ１６において、受信部１３１は、消灯時間経過後の次周期の点灯開始タイミングを検出したか否かを判定する。ステップＳ１６において次周期の点灯開始タイミングを検出したと判定された場合（ステップＳ１６：Ｙｅｓ）、１周期分の消灯時間の計測を終了する。受信部１３１は、次周期の点灯が開始したタイミングを１周期分の消灯終了タイミングとして検出する。ステップＳ１６において次周期の点灯開始タイミングを検出したと判定されなかった場合（ステップＳ１６：Ｎｏ）、次周期の点灯開始タイミングが検出されるまでステップＳ１６を繰り返す。

ステップＳ１８において、受信部１３１は、検出された１周期分の点灯開始タイミング、点灯終了タイミング（消灯開始タイミング）および消灯終了タイミングに基づいて、１周期分の点灯時間、消灯時間および点灯周期を検出する。シャッタ制御信号生成部１３３は、例えば、１周期分の点灯時間および点灯周期に基づいて、１フレーム期間中の光の遮蔽タイミング（遮蔽開始時間および遮蔽時間）を決定する。シャッタ制御信号生成部１３３は、決定された遮蔽タイミングに基づいて、シャッタ制御信号を生成する。

図４および図５はプロジェクタ１２０、シャッタ装置１３０、カメラ１４０および送信機１５０の動作の一例を示すタイミングチャートである。

露光期間（カメラシャッタ開）では、シャッタ装置１３０は遮蔽状態（ＯＮ）である。非露光期間（カメラシャッタ閉）では、シャッタ装置１３０は非遮蔽状態（ＯＦＦ）である。プロジェクタ１２０は常に映像を投射している。シャッタ装置１３０は、プロジェクタ１２０の投射とカメラ１４０の撮影とが重なるタイミングで、プロジェクタ１２０からの投射光を遮蔽する。プロジェクタ１２０から投射される映像は、カメラ１４０の露光タイミングに合わせて、シャッタ装置１３０によって間欠的に遮蔽される。送信機１５０も同様に、露光期間は点灯し、非露光期間は消灯する。

図４は、カメラ１４０の露光期間（カメラシャッタ開）と非露光期間（カメラシャッタ閉）とが等しい場合のタイミングチャートである。図４の例では、カメラ１４０の露光時間とシャッタ装置１３０の非遮蔽時間が等しい。そのため、投射映像の明るさを大きく損なわずに、明るい画像が撮影される。図５は、非露光時間が露光時間よりも長い場合のタイミングチャートである。図５の例では、明るい映像が投射されるが、撮影画像の明るさは図４の例に比べて小さい。

図６は、撮影画像の明るさと投射映像の明るさとの関係を示す図である。

撮影画像の明るさと投射映像の明るさはカメラ１４０の露光時間によって変化する。露光時間が長いほど明るい画像が撮影される。一方、露光時間が長いほど、シャッタ装置１３０による遮蔽時間は長くなる。そのため、プロジェクタ１２０の投射映像は暗くなる。よって、撮影画像の明るさと投射映像の明るさはトレードオフの関係となる。ユーザは、これらのトレードオフを加味して、撮影時のフェーズおよびスタジオＳＴの環境などに基づいて、露光時間を手動で設定することができる。また、受信部１３１で検出された露光タイミングの情報を映像出力部１２１に出力し、映像出力部１２１によって、投射映像の明るさを補正することもできる。

図７は、プロジェクタ１２０による演者ＡＣへのコンテンツの提示処理の一例を示すフローチャートである。

ステップＳ２１において、３Ｄモデル記憶部１１１は、情報処理装置１１０に入力された情報から、スタジオＳＴの３Ｄモデルを読み込み記憶する。ステップＳ２２において、パラメータ記憶部１１２は、例えば、プロジェクタ１２０の内部パラメータおよび３Ｄモデル内のプロジェクタ１２０の位置姿勢情報を入力情報から読み込み記憶する。

ステップＳ２３において、表示コンテンツ生成部１１３は、演者ＡＣの演技をサポートする情報を含む投射用コンテンツを生成する。補正映像生成部１１４は、３Ｄモデルおよびプロジェクタ１２０の内部パラメータおよび３Ｄモデル中のプロジェクタ１２０の位置姿勢情報を用いて、投射用コンテンツを幾何補正し、補正映像を生成する。

ステップＳ２４において、プロジェクタ１２０は、補正映像をスタジオＳＴに投射する。ステップＳ２５において、補正映像は、カメラ１４０と同期したシャッタ装置１３０によって、カメラ１４０の露光タイミングに合わせて間欠的に遮蔽される。

ステップＳ２６において、プロジェクタ１２０は投射を終了するか否かを判定する。プロジェクタ１２０は、例えば、プロジェクタ１２０に設けられた図示略の投射終了ボタンが操作された場合に、投射が終了されたと判定する。ステップＳ２６において投射が終了されたと判定された場合には（ステップＳ２６：Ｙｅｓ）、プロジェクタ１２０は投射を終了する。ステップＳ２６において投射が終了されたと判定されない場合には（ステップＳ２６：Ｎｏ）、ステップＳ２３に戻る。

なお、補正映像の生成方法は上述のものに限られない。図８は、補正映像ＰＩの生成方法の他の例を示す図である。図９は、プロジェクタ１２０から投射される補正映像ＰＩの一例を示す図である。

図８は、３Ｄモデル上に、２人の演者の演技をサポートする補正映像ＰＩを入力した状態が示されている。図８では、補正映像ＰＩとして、演者ＡＣ１用の立ち位置ＰＩ１および導線ＰＩ２と、演者ＡＣ２用の立ち位置ＰＩ３および導線ＰＩ４と、が示されている。この３Ｄモデルに対し、現在のプロジェクタの位置姿勢及び内部パラメータが同じ仮想カメラを配置し、入力したコンテンツを撮影する。撮影された映像をプロジェクタ１２０の投射映像として出力することで、図９に示すような、幾何補正された映像がスタジオＳＴの床面に表示される。

［１−３．効果］
撮影システム１は、カメラ１４０とプロジェクタ１２０とシャッタ装置１３０とを有する。シャッタ装置１３０は、カメラ１４０と同期し、プロジェクタ１２０から投射されカメラ１４０へ入射する光を遮蔽する。本実施形態の撮影方法は、上述した撮影システムの情報処理がコンピュータにより実行される。本実施形態のプログラムは、上述した撮影システムの情報処理をコンピュータに実現させる。

この構成によれば、プロジェクタ１２０から投射された光は、カメラ１４０に入射する前にシャッタ装置１３０によって遮蔽される。そのため、カメラ１４０で撮影される画像にプロジェクタ１２０から投射された光（映像）は映り込まない。投射映像の映り込みは、カメラ１４０と同期したシャッタ装置１３０によって抑制される。そのため、プロジェクタ１２０には汎用機を用いることができる。よって、演者ＡＣの負担を軽減しつつ低コストで撮影を行うことができる撮影システム１が提供される。

シャッタ装置１３０は、例えば、プロジェクタ１２０から投射される光を遮蔽する遮蔽時間をカメラ１４０の露光時間に合わせて動的に変更する。

この構成によれば、カメラ１４０の露光時間が変化してもカメラの映像に投射光が映り込むことが抑制される。

撮影システム１は、例えば、送信機１５０を有する。送信機１５０は、例えば、カメラ１４０の露光タイミングを示す信号を送信する。シャッタ装置１３０は、例えば、送信機１５０から送信された信号を受信し、この信号に基づいて遮蔽タイミングを制御する。

この構成によれば、カメラ１４０とシャッタ装置１３０との配置の自由度が高まる。

［２．第２実施形態］
［２−１．撮影システムの構成］
図１０は、第２実施形態の撮影システム２の要部を示す図である。

本実施形態において第１実施形態と異なる点は、カメラ１４０の露光タイミングが変更されてから、シャッタ装置１３６の遮蔽タイミングが変更後のカメラ１４０の露光タイミングと同期するまでの期間中は、プロジェクタ１２５による光の投射が停止される点である。以下、第１実施形態との相違点を中心に説明を行う。

受信部１３７は、例えば、送信機１５０から送信された信号に基づいて、プロジェクタ１２５の投射停止信号を生成する。受信部１３７は、例えば、露光時間の変動が閾値よりも大きい場合には、送信機１５０から信号を受信している期間だけ、プロジェクタ１２５に投射停止信号を出力する。受信部１３７は、例えば、露光時間の変動が閾値以内である場合には、プロジェクタ１２５に投射停止信号を出力しない。

映像出力部１２６は、例えば、投射停止信号に基づいて、送信機１５０が信号の送信を開始してから所定の時間だけ、投射部１２２への投射映像信号の出力を停止する。送信機１５０から信号が送信される時間は、カメラ１４０とシャッタ装置１３６とを同期させるのに必要な時間に基づいて設定される。そのため、カメラ１４０の露光タイミングが変更されてから、シャッタ装置１３６の遮蔽タイミングが変更後のカメラ１４０の露光タイミングと同期するまでの期間中は、プロジェクタ１２５による光の投射は停止される。露光時間の変動が閾値以内である場合には、プロジェクタ１２５には投射停止信号は出力されない。そのため、遮蔽時間は変更されない。

シャッタ制御信号生成部１３８は、例えば、シャッタ装置１３６の遮蔽時間をカメラ１４０の露光時間よりも長く設定する。例えば、シャッタ装置１３６の遮蔽期間は、カメラ１４０の１フレーム期間において、遮蔽開始タイミングが露光開始タイミングよりも早く、遮蔽終了タイミングが露光終了タイミングよりも遅くなるように設定される。シャッタ制御部１３４は、遮蔽時間が露光時間よりも長く設定されたシャッタ制御信号に基づいて、シャッタ部材１３５の遮蔽タイミングを制御する。

図１１は、プロジェクタ１２５、シャッタ装置１３６、カメラ１４０および送信機１５０の動作の一例を示すタイミングチャートである。

シャッタ装置１３６の遮蔽期間には、遮蔽開始側および遮蔽終了側にそれぞれΔｔのバッファ期間が設けられている。遮蔽開始タイミングは露光開始タイミングよりもΔｔだけ早く、遮蔽終了タイミングは露光終了タイミングよりもΔｔだけ遅い。受信部１３７は、例えば、バッファ期間を投射停止判定の基準となる閾値として用いる。受信部１３７は、例えば、露光時間がバッファ期間を超えて変動する場合には、投射停止信号を生成する。受信部１３７は、例えば、露光時間の変動がバッファ期間内に収まる場合には、投射停止信号を生成しない。

［２−２．撮影方法］
図１２は、本実施形態の撮影方法の一例を説明するフローチャートである。

ステップＳ３１において、プロジェクタ１２５はスタジオＳＴに、演者ＡＣの演技をサポートする映像を投射する。

ステップＳ３２において、受信部１３７は、送信機１５０から送信された信号に基づいて、カメラ１４０の露光時間が変更されたか否かを判定する。ステップＳ３２において露光時間が変更されたと判定されない場合には（ステップＳ３２：Ｎｏ）、露光時間が変更されるまでステップＳ３２を繰り返す。

ステップＳ３２において露光時間が変更されたと判定された場合には（ステップＳ３２：Ｙｅｓ）、ステップＳ３３に進む。ステップＳ３３において、受信部１３７は、露光時間の変動が閾値を超えるか否かを判定する。

ステップＳ３３において露光時間の変動が閾値を超えると判定された場合には（ステップＳ３３：Ｙｅｓ）、ステップＳ３４に進む。ステップＳ３４において、受信部１３７は、プロジェクタ１２５に投射停止信号を出力する。プロジェクタ１２５は、投射停止信号に基づいて、映像の投射を停止する。そして、ステップＳ３５において、シャッタ制御信号生成部１３３は、受信部１３７で検出された露光タイミングの情報に基づいてシャッタ制御信号を生成する。

シャッタ制御信号生成部１３８は、シャッタ装置１３６の遮蔽時間をカメラ１４０の露光時間よりも長く設定する。シャッタ制御部１３４は、遮蔽時間が露光時間よりも長く設定されたシャッタ制御信号に基づいて、シャッタ部材１３５の遮蔽タイミングを制御する。

ステップＳ３３において露光時間の変動が閾値を超えると判定されない場合には（ステップＳ３３：Ｎｏ）、ステップＳ３５に進む。

遮蔽タイミングの変更後、ステップＳ３６において、カメラ１４０は、撮影を終了するか否かを判定する。ステップＳ３６において撮影が終了すると判定された場合には（ステップＳ３６：Ｙｅｓ）、カメラ１４０は撮影を終了する。ステップＳ３６において撮影が終了すると判定されない場合には（ステップＳ３６：Ｎｏ）、ステップＳ３１に戻る。

［２−３．効果］
本実施形態では、カメラ１４０の露光タイミングが変更されてから、シャッタ装置１３０の遮蔽タイミングが変更後のカメラ１４０の露光タイミングと同期するまでの期間中は、プロジェクタ１２０による光の投射は停止される。

この構成によれば、遮蔽タイミングの調整期間中に、投射光がカメラ１４０の撮影画像に映り込むことが抑制される。

露光時間の変動が閾値以内である場合には、例えば、遮蔽時間は変更されない。

この構成によれば、遮蔽時間の変更が生じない不感帯領域が設けられる。そのため、露光時間が頻繁に変更される場合でも、プロジェクタ１２０による情報の提示に支障が生じにくい。例えば、遮蔽タイミングの調整期間中に光の投射が停止される構成では、露光時間が頻繁に変更されると、プロジェクタ１２０による情報の提示に支障が生じる可能性がある。露光時間に不感帯領域を設けることで、このような問題は抑制される。

カメラ１４０の１フレーム期間におけるシャッタ装置１３６の遮蔽時間は、例えば、カメラ１４０の露光時間よりも長い。

この構成によれば、シャッタ装置１３６の遮蔽期間において露光期間の外側に設定されたバッファ期間内で露光時間が変動しても、投射映像が撮影画像に映り込まない。また、遮蔽期間にバッファ期間が設けられることで、各種機器の処理にラグがある場合でも、ラグに起因して撮影画像に投射映像が映り込むことが抑制される。例えば、シャッタ装置１３０が遮蔽を開始してから遮蔽が終了するまでの期間およびカメラシャッタが閉じ始められてから閉じ終わるまでの期間に、カメラ１４０の撮影画像にプロジェクタ１２０の投射光が映り込むことが抑制される。

［３．第３実施形態］
［３−１．撮影システムの構成］
図１３は、第３実施形態の撮影システム３の概略図である。

本実施形態において第１実施形態と異なる点は、シャッタ装置２３０が、プロジェクタ２２０と同期し、プロジェクタ２２０から投射されカメラ２４０へ入射する光を遮蔽する点である。以下、第１実施形態との相違点を中心に説明を行う。

情報処理装置２１０は、例えば、第１実施形態の構成に加えて、投射時間設定部２１５を有する。プロジェクタ２２０は、例えば、第１実施形態の構成に加えて、同期制御部２２３と、同期信号出力部２２４と、投射時間制御部２２５と、を有する。

投射時間設定部２１５は、例えば、プロジェクタ２２０のリフレッシュレートおよび１リフレッシュ期間内のプロジェクタ２２０の投射時間を設定する。リフレッシュレートおよび投射時間は、例えば、ユーザが入力した設定値に設定される。投射時間設定部２１５は、例えば、リフレッシュレートおよび投射時間の少なくとも１つが変更された場合に、変更後のリフレッシュレートおよび投射時間を同期制御部２２３に出力する。

図１４は、投射時間設定画面の一例を示す図である。

情報処理装置２１０は、例えば、表示装置２１６に投射時間設定画面を表示する。表示装置２１６は、例えば、タッチパネル内蔵型の表示装置であり、投射時間設定画面への入力を行う入力装置を兼ねる。

投射時間設定画面は、例えば、プロジェクタ２２０のリフレッシュレートを設定する領域と、プロジェクタ２２０の投射時間を設定する領域と、を有する。例えば、リフレッシュレートは、ユーザがラジオボタンをクリックすることによって設定される。選択肢として提示されるリフレッシュレートの大きさは、例えば、映画やドラマの撮影で用いられるフレームレート（２４ｆｐｓ）よりも大きい。どの選択肢が選択された場合でも、プロジェクタ２２０のリフレッシュレートはカメラ２４０のフレームレートよりも大きい。

投射時間の設定可能範囲は、リフレッシュレートに連動して変化する。例えば、リフレッシュレートが６０Ｈｚである場合には、投射時間の設定可能範囲は０．０〜１６．７ミリ秒の範囲である。リフレッシュレートが１２０Ｈｚである場合には、投射時間の設定可能範囲は０．０〜８．３ミリ秒の範囲である。投射時間は、例えば、スライドバーＳＢを用いて設定される。例えば、リフレッシュレートが６０Ｈｚに設定され、投射時間がｔ秒に設定された場合、１リフレッシュ期間内の時刻０秒から時刻ｔ秒までの期間が投射期間（映像が投射される期間）となり、残りの時刻ｔ秒から時刻１６，７秒までの期間が非投射期間（映像が投射される期間）となる。

図１３に戻って、同期制御部２２３は、投射時間に基づいて同期信号を生成する。同期制御部２２３は、同期信号を同期信号出力部２２４および投射時間制御部２２５に出力する。

同期信号出力部２２４は、同期信号に基づいて、プロジェクタ２２０の投射タイミングを示す信号を送信機１５０から送信させる。投射時間制御部２２５は、投射タイミングに関する情報を映像出力部２２１に出力する。映像出力部２２１は、例えば、１リフレッシュ期間中に、設定された投射時間だけ映像が投射されるように、投射映像信号を生成する。これにより、投射部１２２からは、同期信号に合わせて間欠的に映像が投射される。

送信機１５０は、例えば、同期信号線によってプロジェクタ１２０と接続される。同期信号出力部２２４は、例えば、同期信号に合わせて送信機１５０を所定時間だけ点滅させる。同期信号出力部２２４は、例えば、プロジェクタの投射時は送信機１５０が点灯し、プロジェクタ２２０の非投射時は送信機１５０が消灯するようなパターンで送信機１５０を点滅させる。プロジェクタ２２０の投射タイミングと送信機１５０の点灯タイミングはこれとは逆でもよい。

点滅時間（送信機１５０から信号が送信される時間）は、プロジェクタ２２０の投射タイミングとシャッタ装置１３０の遮蔽タイミングとを同期させるのに必要な時間に基づいて決定される。例えば、点滅時間は、１リフレッシュ期間以上で且つ１０リフレッシュ期間以下の時間である。

カメラ２４０は、第１実施形態の構成と比較して、同期制御部１４２および同期信号出力部１４３を有しない。露光時間設定部１４１、露光制御部１４４および記録部１４６は、公知の構造を有する。カメラ２４０には、汎用機が用いられる。

シャッタ装置１３０の構成は、第１実施形態と同様である。シャッタ装置１３０は、例えば、送信機１５０から送信された信号を受信し、この信号に基づいて遮蔽時間を制御する。

シャッタ部材１３５は、例えば、カメラ２４０に入射する光の光軸上に配置される。シャッタ制御信号生成部１３３は、受信部１３１で受信した信号に基づいて、シャッタ制御信号を生成する。シャッタ制御信号は、例えば、送信機１５０の点灯時間および点灯周期に対応する遮蔽時間および遮蔽周期の情報を有する信号である。シャッタ制御部１３４は、シャッタ制御信号に基づいて、シャッタ部材１３５の遮蔽タイミングを制御する。これにより、シャッタ装置１３０は、プロジェクタ２２０の投射時間に合わせて、カメラ２４０へ入射する光を遮蔽する遮蔽時間を動的に変更する。

［３−２．撮影方法］
図１５は、本実施形態の撮影方法の一例を示すフローチャートである。

ステップＳ４１において、３Ｄモデル記憶部１１１は、情報処理装置１１０に入力された情報から、スタジオＳＴの３Ｄモデルを読み込み記憶する。ステップＳ４２において、パラメータ記憶部１１２は、例えば、プロジェクタ２２０の内部パラメータおよび３Ｄモデル内のプロジェクタ２２０の位置姿勢情報を入力情報から読み込み記憶する。

ステップＳ４３において、受信部１３１は、送信機１５０から送信された信号を受信する。シャッタ制御信号生成部１３３は、受信部１３１で受信した信号に基づいて、シャッタ制御信号を生成する。シャッタ制御部１３４は、シャッタ制御信号に基づいて、シャッタ部材１３５の遮蔽タイミングをプロジェクタ２２０の投射タイミングと同期させる。

ステップＳ４４において、表示コンテンツ生成部１１３は、演者ＡＣの演技をサポートする情報を含む投射用コンテンツを生成する。補正映像生成部１１４は、３Ｄモデルおよびプロジェクタ２２０の内部パラメータおよび３Ｄモデル中のプロジェクタ２２０の位置姿勢情報を用いて、投射用コンテンツを幾何補正し、補正映像を生成する。

ステップＳ４５において、プロジェクタ１２０は、補正映像をスタジオＳＴに投射する。カメラ２４０は、スタジオＳＴで演技する演者を撮影する。カメラ２４０に入射する光は、プロジェクタ２２０と同期したシャッタ装置１３０によって、プロジェクタ２２０の投射タイミングに合わせて間欠的に遮蔽される。これにより、カメラ２４０の撮影画像に投射映像が映り込むことが抑制される。

ステップＳ４６において、投射時間設定部２１５は、投射時間が変更されたか否かを判定する。投射時間設定部２１５は、例えば、ユーザが手動で投射時間を設定した場合に、投射時間が変更されたと判定する。

ステップＳ４６において投射時間が変更されたと判定された場合には（ステップＳ４６：Ｙｅｓ）、ステップＳ４３に戻る。

ステップＳ４６において投射時間が変更されていないと判定された場合には（ステップＳ４６：Ｎｏ）、ステップＳ４７に進む。ステップＳ４７において、プロジェクタ２２０は投射を終了するか否かを判定する。ステップＳ４７において投射が終了されたと判定された場合には（ステップＳ４７：Ｙｅｓ）、プロジェクタ２２０は投射を終了する。ステップＳ４７において投射が終了されたと判定されない場合には（ステップＳ４７：Ｎｏ）、ステップＳ４４に戻る。

図１６および図１７はプロジェクタ２２０、送信機１５０、シャッタ装置１３０およびカメラ２４０の動作の一例を示すタイミングチャートである。

投射期間では、シャッタ装置１３０は遮蔽状態（ＯＮ）である。非投射期間では、シャッタ装置１３０は非遮蔽状態（ＯＦＦ）である。プロジェクタ２２０は、カメラ２４０のフレームレートよりも大きいリフレッシュレート、より好ましくはフレームレートの２倍以上のリフレッシュレートで映像を投射する。シャッタ装置１３０は、プロジェクタ２２０の投射とカメラ２４０の撮影とが重なるタイミングで、カメラ２４０に入射する光を遮蔽する。カメラ２４０に入射する光は、プロジェクタ２２０の投射タイミングに合わせて、シャッタ装置１３０によって間欠的に遮蔽される。送信機１５０も同様に、投射期間は点灯し、非投射期間は消灯する。

図１６は、投射時間と非投射時間とが等しい場合のタイミングチャートである。図１６の例では、プロジェクタ２２０の投射時間とシャッタ装置１３０の非遮蔽時間とが等しい。そのため、投射映像の明るさを大きく損なわずに、明るい画像が撮影される。図１７は、非投射時間が投射時間よりも長い場合のタイミングチャートである。図１７の例では、投射される映像は暗くなるが、カメラシャッタによる遮蔽時間は短くなるため、撮影画像の明るさは図１６の例に比べて明るい。

図１８は、撮影画像の明るさと投射映像の明るさとの関係を示す図である。

撮影画像の明るさと投射映像の明るさはプロジェクタ２２０の投射時間によって変化する。投射時間が長いほど明るい映像が投射される。一方、投射時間が長いほど、シャッタ装置１３０による遮蔽時間は長くなる。そのため、撮影画像は暗くなる。よって、撮影画像の明るさと投射映像の明るさはトレードオフの関係となる。ユーザは、これらのトレードオフを加味して、撮影時のフェーズおよびスタジオＳＴの環境などに基づいて、投射時間を手動で設定することができる。また、投射時間設定部２１５で設定された投射時間の情報を映像出力部２２１に出力し、映像出力部２２１によって、投射映像の明るさを補正することもできる。

［３−３．効果］
本実施形態では、シャッタ装置１３０は、プロジェクタ２２０の投射時間に合わせて、カメラ２４０へ入射する光を遮蔽する遮蔽時間を動的に変更する。

この構成によれば、プロジェクタ２２０の投射時間が変化してもカメラ２４０の映像に投射光が映り込むことが抑制される。

プロジェクタ２２０のリフレッシュレートは、例えば、カメラ２４０のフレームレートよりも大きい。

この構成によれば、１フレーム期間中、常にカメラ２４０への入射光がシャッタ装置１３０によって遮蔽されるという不具合が生じにくい。

撮影システム３は、例えば、送信機１５０を有する。送信機１５０は、例えば、プロジェクタ２２０の投射タイミングを示す信号を送信する。シャッタ装置１３０は、例えば、送信機１５０から送信された信号を受信し、この信号に基づいて遮蔽時間を制御する。

この構成によれば、プロジェクタ２２０とシャッタ装置１３０との配置の自由度が高まる。

［４．第４実施形態］
［４−１．撮影システムの構成］
図１９は、第４実施形態の撮影システム４の要部を示す図である。

本実施形態において第３実施形態と異なる点は、プロジェクタ２２６の投射タイミングが変更されてから、シャッタ装置２３０の遮蔽タイミングが変更後のプロジェクタ２２６の投射タイミングと同期するまでの期間中は、プロジェクタ２２６による光の投射は停止される点である。以下、第３実施形態との相違点を中心に説明を行う。

同期制御部２２７は、例えば、投射時間設定部２１５から出力された投射時間の情報に基づいて、プロジェクタ２２６の投射停止信号を生成する。同期制御部２２７は、例えば、投射時間の変動が閾値よりも大きい場合には、送信機１５０が信号の送信を開始してから所定の時間だけ、映像出力部２２８に投射停止信号を出力する。同期制御部２２７は、例えば、投射時間の変動が閾値以内である場合には、映像出力部２２８に投射停止信号を出力しない。

映像出力部２２８は、例えば、投射停止信号に基づいて、送信機１５０が信号の送信を開始してから所定の時間だけ、投射部１２２への投射映像信号の出力を停止する。送信機１５０から信号が送信される時間は、プロジェクタ２２６とシャッタ装置２３０とを同期させるのに必要な時間に基づいて設定される。そのため、プロジェクタ２２６の投射タイミングが変更されてから、シャッタ装置２３０の遮蔽タイミングが変更後のプロジェクタ２２６の投射タイミングと同期するまでの期間中は、プロジェクタ２２６による光の投射は停止される。投射時間の変動が閾値以内である場合には、映像出力部２２８には投射停止信号は出力されない。そのため、遮蔽時間は変更されない。

シャッタ制御信号生成部２３３は、例えば、プロジェクタ２２６の１リフレッシュ期間におけるシャッタ装置２３０の遮蔽時間をプロジェクタ２２６の投射時間よりも長く設定する。例えば、シャッタ装置２３０の遮蔽期間は、プロジェクタ２２６の１リフレッシュ期間において、遮蔽開始タイミングが投射開始タイミングよりも早く、遮蔽終了タイミングが投射終了タイミングよりも遅くなるように設定される。シャッタ制御部１３４は、遮蔽時間が投射時間よりも長く設定されたシャッタ制御信号に基づいて、シャッタ部材１３５の遮蔽タイミングを制御する。

図２０は、プロジェクタ２６６、送信機１５０、シャッタ装置２３０およびカメラ２４０の動作の一例を示すタイミングチャートである。

シャッタ装置２３０の遮蔽期間には、遮蔽開始側および遮蔽終了側にそれぞれΔｓのバッファ期間が設けられている。遮蔽開始タイミングは投射開始タイミングよりもΔｓだけ早く、遮蔽終了タイミングは投射終了タイミングよりもΔｓだけ遅い。同期制御部２２７は、例えば、バッファ期間を投射停止判定の基準となる閾値として用いる。同期制御部２２７は、例えば、投射時間がバッファ期間を超えて変動する場合には、投射停止信号を生成する。同期制御部２２７は、例えば、投射時間の変動がバッファ期間内に収まる場合には、投射停止信号を生成しない。

［４−２．撮影方法］
図２１は、本実施形態の撮影方法の一例を説明するフローチャートである。

ステップＳ５１において、プロジェクタ２２６はスタジオＳＴに、演者ＡＣの演技をサポートする映像を投射する。

ステップＳ５２において、同期制御部２２７は、投射時間設定部２１５から出力された投射時間の情報に基づいて、プロジェクタ２２６の投射時間が変更されたか否かを判定する。ステップＳ５２において投射時間が変更されたと判定されない場合には（ステップＳ５２：Ｎｏ）、投射時間が変更されるまでステップＳ５２を繰り返す。

ステップＳ５２において投射時間が変更されたと判定された場合には（ステップＳ５２：Ｙｅｓ）、ステップＳ５３に進む。ステップＳ５３において、同期制御部２２７は、投射時間の変動が閾値を超えるか否かを判定する。

ステップＳ５３において投射時間の変動が閾値を超えると判定された場合には（ステップＳ５３：Ｙｅｓ）、ステップＳ５４に進む。ステップＳ５４において、同期制御部２２７は、映像出力部２２８に投射停止信号を出力する。プロジェクタ２２６は、投射停止信号に基づいて、映像の投射を停止する。そして、ステップＳ５５において、シャッタ制御信号生成部２３３は、受信部１３１で検出された投射タイミングの情報に基づいてシャッタ制御信号を生成する。

シャッタ制御信号生成部２３３は、シャッタ装置２３０の遮蔽時間を、プロジェクタ２２６の投射時間よりも長く設定する。シャッタ制御部１３４は、遮蔽時間が投射時間よりも長く設定されたシャッタ制御信号に基づいて、シャッタ部材１３５の遮蔽タイミングを制御する。

ステップＳ５３において投射時間の変動が閾値を超えると判定されない場合には（ステップＳ５３：Ｎｏ）、ステップＳ５５に進む。

遮蔽タイミングの変更後、ステップＳ５６において、カメラ２４０は、撮影を終了するか否かを判定する。ステップＳ５６において撮影が終了すると判定された場合には（ステップＳ５６：Ｙｅｓ）、カメラ２４０は撮影を終了する。ステップＳ５６において撮影が終了すると判定されない場合には（ステップＳ５６：Ｎｏ）、ステップＳ５１に戻る。

［４−３．効果］
本実施形態では、プロジェクタ２２６の投射タイミングが変更されてから、シャッタ装置２３０の遮蔽タイミングが変更後のプロジェクタ２２６の投射タイミングと同期するまでの期間中は、例えば、プロジェクタ２２６による光の投射は停止される。

この構成によれば、遮蔽タイミングの調整期間中に、投射光がカメラ２４０の映像に映り込むことが抑制される。

投射時間の変動が閾値以内である場合には、例えば、遮蔽時間は変更されない。

この構成によれば、遮蔽時間の変更が生じない不感帯領域が設けられる。そのため、投射時間が頻繁に変更される場合でも、プロジェクタ２２６による情報の提示に支障が生じにくい。

プロジェクタ２２６の１リフレッシュ期間におけるシャッタ装置２３０の遮蔽時間は、例えば、プロジェクタ２２６の投射時間よりも長い。

この構成によれば、シャッタ装置２３０の遮蔽期間において投射期間の外側に設定されたバッファ期間内で投射時間が変動しても、投射映像が撮影画像に映り込まない。また、遮蔽期間にバッファ期間が設けられることで、各種機器の処理にラグがある場合でも、ラグに起因して撮影画像に投射映像が映り込むことが抑制される。例えば、シャッタ装置２３０が遮蔽を開始してから遮蔽が終了するまでの期間およびプロジェクタ２２６が１画面の映像を表示し始めてから表示し終わるまでの期間に、カメラ２４０の映像に投射光が映り込むことが抑制される。

［５．変形例］
上記実施形態では、スタジオＳＴにプロジェクタが１台だけ設置された例が示されているが、プロジェクタの数は１台に限られない。スタジオＳＴの全領域に投射できるように複数台のプロジェクタがスタジオＳＴに設置されてもよい。第１実施形態および第２実施形態において複数のプロジェクタがスタジオＳＴに設置される場合には、プロジェクタごとにシャッタ装置が設けられる。第３実施形態および第４実施形態において複数のプロジェクタがスタジオＳＴに設置される場合には、プロジェクタどうし、および、送信機どうしが同期される。少数のプロジェクタでスタジオＳＴの全領域を投射する場合には、駆動機構によって任意の方向に映像を投射可能なプロジェクタを用いてもよい。

第１実施形態では、送信機１５０の点灯および消灯のタイミングとシャッタ装置１３０の遮蔽および透過のタイミングとは一致している。しかし、第２実施形態のように、シャッタ装置１３０の遮蔽期間にバッファ期間を設けてもよい。この場合、カメラ１４０の１フレーム期間におけるシャッタ装置１３０の遮蔽時間はカメラ１４０の露光時間よりも長い。この構成によれば、各種機器の処理にラグがある場合でも、ラグに起因して撮影画像に投射映像が映り込むことが抑制される。

機器のラグとしては、以下のようなものが考えらえる。
（ａ）撮影カメラ
カメラシャッタが閉じ始めてから、完全に光が遮蔽されるまで、あるいはその逆の動作のラグが存在する。
（ｂ）プロジェクタ
レーザプロジェクタを使用する場合、ラスタスキャン方式による映像投射、あるいは映像投射から非投射までのラグが存在する。
（ｃ）シャッタ装置
液晶シャッタを使用する場合、遮蔽を開始してから、画面全体が遮蔽されるまで、あるいはその逆の動作のラグが存在する。

例えば、シャッタ装置１３０のラグの大きさを決定する場合には、次のような測定が行われる。第１実施形態の構成の場合、まず、シャッタ装置１３０の光射出側にフォトダイオードが設置される。そして、シャッタ装置ごしにプロジェクタ１２０の投射光の強度が測定される。

図２２は、シャッタ装置ごしに測定された光強度の測定結果の一例を示す図である。シャッタ装置がオン状態からオフ状態へ変化する場合、および、オフ状態からオン状態に変化する場合には、シャッタ装置１３０の切り替えタイミングと光強度が切り替わるタイミングとの間に僅かなずれが生じる。このずれを計測することで、必要なバッファ期間の大きさが検出される。

上記の実施形態では、シャッタ装置として液晶シャッタが用いられたが、シャッタ装置は液晶シャッタに限られない。光透過窓が設けられた回転ホイールを用いて光の透過状態と遮蔽状態とが切り替えられてもよい。回転ホイールの回転速度を変化させることで、遮蔽の周期が変更される。光透過窓の大きさを連続的に変化させることが可能な機構を設けることで、遮蔽時間が変更される。

上記の実施形態では、送信機１５０としてＩＲエミッタが用いられたが、送信機１５０はＩＲエミッタに限定されない。シャッタ装置がカメラまたはプロジェクタと有線または無線の通信を行うことで同期が行われてもよい。

なお、本明細書に記載された効果はあくまで例示であって限定されるものでは無く、また他の効果があってもよい。

なお、本技術は以下のような構成も取ることができる。

（１）
カメラと、
プロジェクタと、
前記カメラまたは前記プロジェクタと同期し、前記プロジェクタから投射され前記カメラへ入射する光を遮蔽するシャッタ装置と、
を有する撮影システム。
（２）
前記シャッタ装置は、前記プロジェクタから投射される光を遮蔽する遮蔽時間を前記カメラの露光時間に合わせて動的に変更する
前記（１）に記載の撮影システム。
（３）
前記カメラの露光タイミングを示す信号を送信する送信機を有し、
前記シャッタ装置は、前記送信機から送信された前記信号を受信し、前記信号に基づいて前記遮蔽時間を制御する
前記（２）に記載の撮影システム。
（４）
前記カメラの露光タイミングが変更されてから、前記シャッタ装置の遮蔽タイミングが変更後の前記カメラの露光タイミングと同期するまでの期間中は、前記プロジェクタによる光の投射は停止される
前記（３）に記載の撮影システム。
（５）
前記露光時間の変動が閾値以内である場合には、前記遮蔽時間は変更されない
前記（４）に記載の撮影システム。
（６）
前記カメラの１フレーム期間における前記シャッタ装置の遮蔽時間は前記カメラの露光時間よりも長い
前記（５）に記載の撮影システム。
（７）
前記シャッタ装置は、前記プロジェクタの投射時間に合わせて、前記カメラへ入射する光を遮蔽する遮蔽時間を動的に変更する
前記（１）に記載の撮影システム。
（８）
前記プロジェクタのリフレッシュレートは前記カメラのフレームレートよりも大きい
前記（７）に記載の撮影システム。
（９）
前記プロジェクタの投射タイミングを示す信号を送信する送信機を有し、
前記シャッタ装置は、前記送信機から送信された前記信号を受信し、前記信号に基づいて前記遮蔽時間を制御する
前記（７）または（８）に記載の撮影システム。
（１０）
前記プロジェクタの投射タイミングが変更されてから、前記シャッタ装置の遮蔽タイミングが変更後の前記プロジェクタの投射タイミングと同期するまでの期間中は、前記プロジェクタによる光の投射は停止される
前記（９）に記載の撮影システム。
（１１）
前記プロジェクタの１リフレッシュ期間における前記シャッタ装置の遮蔽時間は前記プロジェクタの投射時間よりも長い
前記（７）ないし（１０）のいずれか１つに記載の撮影システム。
（１２）
前記投射時間の変動が閾値以内である場合には、前記遮蔽時間は変更されない
前記（１１）に記載の撮影システム。
（１３）
カメラまたはプロジェクタと同期したシャッタ装置によって、前記プロジェクタから投射され前記カメラへ入射する光を遮蔽する、
ことを有する、コンピュータにより実行される撮影方法。
（１４）
カメラまたはプロジェクタと同期したシャッタ装置によって、前記プロジェクタから投射され前記カメラへ入射する光を遮蔽する、
ことをコンピュータに実現させるプログラム。

１，２，３，４ 撮影システム
１２０，１２５，２２０，２２６ プロジェクタ
１３０，１３６，２３０ シャッタ装置
１４０，２４０ カメラ
１５０ 送信機
ＰＧ プログラム

Claims (14)

1. カメラと、
   プロジェクタと、
   前記カメラまたは前記プロジェクタと同期し、前記プロジェクタから投射され前記カメラへ入射する光を遮蔽するシャッタ装置と、
   を有する撮影システム。
2. 前記シャッタ装置は、前記プロジェクタから投射される光を遮蔽する遮蔽時間を前記カメラの露光時間に合わせて動的に変更する
   請求項１に記載の撮影システム。
3. 前記カメラの露光タイミングを示す信号を送信する送信機を有し、
   前記シャッタ装置は、前記送信機から送信された前記信号を受信し、前記信号に基づいて前記遮蔽時間を制御する
   請求項２に記載の撮影システム。
4. 前記カメラの露光タイミングが変更されてから、前記シャッタ装置の遮蔽タイミングが変更後の前記カメラの露光タイミングと同期するまでの期間中は、前記プロジェクタによる光の投射は停止される
   請求項３に記載の撮影システム。
5. 前記露光時間の変動が閾値以内である場合には、前記遮蔽時間は変更されない
   請求項４に記載の撮影システム。
6. 前記カメラの１フレーム期間における前記シャッタ装置の遮蔽時間は前記カメラの露光時間よりも長い
   請求項５に記載の撮影システム。
7. 前記シャッタ装置は、前記プロジェクタの投射時間に合わせて、前記カメラへ入射する光を遮蔽する遮蔽時間を動的に変更する
   請求項１に記載の撮影システム。
8. 前記プロジェクタのリフレッシュレートは前記カメラのフレームレートよりも大きい
   請求項７に記載の撮影システム。
9. 前記プロジェクタの投射タイミングを示す信号を送信する送信機を有し、
   前記シャッタ装置は、前記送信機から送信された前記信号を受信し、前記信号に基づいて前記遮蔽時間を制御する
   請求項７に記載の撮影システム。
10. 前記プロジェクタの投射タイミングが変更されてから、前記シャッタ装置の遮蔽タイミングが変更後の前記プロジェクタの投射タイミングと同期するまでの期間中は、前記プロジェクタによる光の投射は停止される
    請求項９に記載の撮影システム。
11. 前記プロジェクタの１リフレッシュ期間における前記シャッタ装置の遮蔽時間は前記プロジェクタの投射時間よりも長い
    請求項７に記載の撮影システム。
12. 前記投射時間の変動が閾値以内である場合には、前記遮蔽時間は変更されない
    請求項１１に記載の撮影システム。
13. カメラまたはプロジェクタと同期したシャッタ装置によって、前記プロジェクタから投射され前記カメラへ入射する光を遮蔽する、
    ことを有する、コンピュータにより実行される撮影方法。
14. カメラまたはプロジェクタと同期したシャッタ装置によって、前記プロジェクタから投射され前記カメラへ入射する光を遮蔽する、
    ことをコンピュータに実現させるプログラム。

Images