JP2012165212A - 撮像装置及びその制御方法 - Google Patents

Abstract

【課題】被写体の人物が所望の位置関係となる多重露光画像を容易に撮影する。
【解決手段】第１の撮影において得られた画像から被写体である人物がいた位置を特定し、第１の撮影より後に行われる第２の撮影において、第１の撮影の被写体である人物がいた位置を示す指標を投影する。このようにすることで、多重露光撮影のように、第１の撮影の被写体である人物が必ずしも第２の撮影において存在しない場合であっても、第２の撮影の被写体である人物は、第１の撮影の被写体である人物との位置関係を把握することができる。
【選択図】図３

Description

本発明は、多重露光により撮像された画像を合成する技術に関する。

近年、デジタルカメラ等の撮像装置には、ポートレートモードや夜景モード等の撮影モードが予め設定されているものがあり、撮影者は当該撮影モードを選択することで、様々な撮影を簡単に行うことができる。撮影モードの中には合成画像を生成するモードもあり、複数回の撮像を行って得られた画像を合成する多重露光撮影モードを用いることで、様々な合成画像を得ることができる。例えば集合写真等で、１回目の撮影の撮影者が２回目の撮影の際に撮影者の役割を交代してもらうことができるため、１回目の撮影の撮影者を含めた合成画像を得ることも可能である。

一方、撮像装置は電子ビューファインダとしても機能するＬＣＤ等の表示装置を備え、撮影者に対して様々な情報を提示することができる。撮像装置の中には、予め記憶された構図の情報に基づき、撮影者に対して撮影のアドバイスを提示することが可能なものがある。撮影者はこのように提示されたアドバイスに基づいて、被写体である人物に対して指示をしたり、構図に合致するよう撮像装置を動かしたりすることができる。

特許文献１には、被写体である人物を撮影する際に、ファインダ内における被写体の配置をアドバイスするためのアシスト画像を表示装置に表示すると共に、撮影者が当該配置での撮影を行うために撮像装置を動かす方向等を指示する技術が開示されている。

また近年では、ＬＥＤ等の消費電力の低い光源を使用したプロジェクタ等の投影装置を搭載した撮像装置も存在する。このような撮像装置では、撮影者に提示されているファインダの画像を、投影装置を用いて投影することで、被写体である人物に対しても撮影される構図を提示することが可能である。

特許文献２には、撮影において顔認識がなされていない場合に、撮影者に提示されている顔認識結果の情報を含む画像を投影することで、被写体の人物を所望の状態に促すことが可能な撮像装置が開示されている。

特開２００９−２３２１５１号公報 特開２００９−０９４６８６号公報

しかしながら、特許文献１のように撮影者に対して撮影のアドバイスを提示する方法では、撮影者がファインダを見ながら被写体である人物に対して立ち位置等の指示を口頭で行わなければならず、撮影までに時間を要すことがあった。また特許文献２のように、前に行われた撮影の被写体を合成したファインダの画像を投影する場合、投影されたファインダの画像は２次元画像であるため、撮影方向によっては被写体となる人物は奥行き方向の位置を具体的に把握することは困難であった。

特に、上述したような複数回の撮影で得られた画像を合成する多重露光撮影を行う場合、被写体となる人物は構図を考慮し、前に行われた撮影の被写体と所望の位置関係となるような位置に移動する必要がある。しかしながら多重露光撮影の場合、それぞれの撮影において被写体である人物が移動していたり、存在しないこともあるため、被写体となる人物は、前に行われた撮影の被写体との位置関係を把握することは困難である。即ち、所望の構図とするための撮影者の口頭指示を、被写体である人物が把握しにくい、あるいは前に行われた撮影の被写体が存在しない画像では好適な立ち位置を判断できない可能性がある。

本発明は、上述の問題点に鑑みてなされたものであり、被写体の人物が所望の位置関係となる多重露光画像を容易に撮影することを目的とする。

前述の目的を達成するために、本発明の撮像装置は、以下の構成を備える。
第１の撮影と第２の撮影とで得られた画像を合成した合成画像を記録する撮像装置であって、被写体を撮像して画像を出力する撮像手段と、撮像手段により出力された画像から、被写体のうちの人物を検出する検出手段と、検出手段により検出された人物の３次元的な位置であって、撮像装置との相対的な位置を特定する特定手段と、特定手段により特定された人物の３次元的な位置に、当該人物の３次元的な位置を示す指標を投影する投影手段と、を備え、合成画像を記録する場合、特定手段は、撮像手段による第１の撮影において出力された画像から検出手段が検出した人物の３次元的な位置を特定し、 投影手段は、第１の撮影が行われた後、第２の撮影が行われるまでの期間において、第１の撮影の被写体である人物の３次元的な位置に、指標を投影することを特徴とする。

このような構成により本発明によれば、被写体の人物が所望の位置関係となる多重露光画像を容易に撮影することを可能とする。

本発明の実施形態に係るデジタルカメラの機能構成を示すブロック図 実施形態の多重露光撮影処理のフローチャート 実施形態に係る多重露光撮影を説明するための図 実施形態１に係る多重露光撮影の第１の撮影を説明するための図 実施形態１の、投影される第１の撮影の被写体である人物がいた位置の指標となる画像を説明するための図 実施形態の多重露光撮影に係る撮影制御を説明するための図 実施形態１に係る位置関係を異ならせて合成する場合の指標となる画像の位置を説明するための図 実施形態１に係る位置関係を異ならせて合成された合成画像の例 実施形態２に係る投影される画像を説明するための図

（実施形態１）
以下、本発明の好適な一実施形態について、図面を参照して詳細に説明する。なお、以下に説明する一実施形態は、撮像装置の一例としての、投影手段を用いて被写体の人物に情報を提示可能なデジタルカメラに、本発明を適用した例を説明する。しかし、本発明は、投影手段を用いて被写体の人物に情報を提示することが可能な任意の機器に適用可能である。

図１は、本発明の実施形態に係るデジタルカメラ１００の機能構成を示すブロック図である。
制御部１０１は、例えばＣＰＵであり、デジタルカメラ１００が備える各ブロックの動作を制御する。制御部１０１は、例えばＲＯＭ１０２に記憶されているデジタルカメラ１００が備える各ブロックの動作プログラムを読み出し、ＲＡＭ１０３に展開して実行することにより、各ブロックの動作を制御する。なお、本実施形態ではデジタルカメラ１００が備える各ブロックの動作を当該ブロックの動作プログラムにより制御するものとして説明するが、本発明の実施はこれに限らず、各ブロックは当該動作プログラムと同様の処理を行う回路で構成されてもよい。

ＲＯＭ１０２は、書き換え可能な不揮発性メモリであり、デジタルカメラ１００が備える各ブロックの動作プログラムに加え、各ブロックの動作に必要なパラメータや設定値等を記憶する。ＲＡＭ１０３は、揮発性メモリであり、デジタルカメラ１００が備える各ブロックの動作において得られた中間データ等を一時的に格納する記憶領域である。

撮像部１０５は、例えばＣＣＤやＣＭＯＳセンサ等の撮像素子であり、光学系１０４を介して撮像素子に結像された光学像を光電変換し、後述するＡ／Ｄ変換部１０７にアナログ画像信号を出力する。光学系駆動部１０６は、光学系１０４が備える焦点レンズや絞り等の駆動を制御するブロックであり、制御部１０１からの動作信号を受けて光学系１０４を制御する。Ａ／Ｄ変換部１０７は、入力されたアナログ画像信号に対してＤ／Ａ変換を適用し、得られたデジタル画像データを出力する。

画像処理部１０８は、入力されたデジタル画像データに対し、例えば色変換、輝度調整等の所定の画像処理を適用するブロックである。また画像処理部１０８は、入力された２つのデジタル画像データから差分抽出を行うことにより特定の領域を切り出す切り出し処理や、入力された２つのデジタル画像データを合成する合成処理を実行する。さらに画像処理部１０８は、後述する投影部１１３で投影する画像を生成する。

表示部１０９は、例えば小型ＬＣＤ等のデジタルカメラ１００が備える表示装置である。表示部１０９は、撮像部１０５から間欠的に出力されたアナログ画像信号を表示することにより、電子ビューファインダとして機能する（スルー表示）。

顔検出部１１０は、入力されたデジタル画像データから、パターンマッチング等により人物の顔を検出し、当該顔が存在する画像内の位置を距離検出部１１１に出力する。距離検出部１１１は、デジタルカメラ１００と被写体の人物との距離を測定するブロックである。距離検出部１１１は、例えば位相差検出方式やコントラスト検出方式等の方式で、顔検出部１１０から入力された人物の顔が存在している位置の対象との距離を測定する。具体的には、例えば、前記検出方式を用いて、人物の顔に焦点を合わせるときに光学系駆動部１０６が光学系１０４を駆動した結果から、下式を用いて距離を算出する。

… 式１
ａは光学系１０４内のＡＦレンズから被写体までの距離、ｂは光学系１０４内のＡＦレンズから撮像部１０５内の撮像センサまでの距離、ｆはＡＦレンズの焦点距離とする。

投影部１１３は、デジタルカメラ１００が備える投影手段であり、１枚または３枚で構成された液晶パネル上に形成された画像を、光源から照射された光により、投影光学系１１２を介して投影面に投影するブロックである。

投影光学系駆動部１１４は、投影光学系１１２が備えるレンズを制御することにより、投影方向を制御するブロックであり、制御部１０１からの動作信号を受けて投影光学系１１２を制御する。なお、本実施形態では、投影光学系駆動部１１４は投影光学系１１２を駆動させる事により投影方向を制御するものとして説明したが、本発明の実施はこれに限らない。例えば、投影光学系駆動部１１４は、投影光学系１１２及び投影部１１３から構成される投影ユニット１２０自体を回転駆動することにより投影方向を制御する構成であっても構わない。

位置姿勢検出部１１５は、デジタルカメラ１００の高さ方向の位置及び姿勢を検出するブロックであり、例えば磁気センサ、超音波センサ、角度センサ等によりデジタルカメラ１００の状態を検出し、制御部１０１に伝送する。

（多重露光撮影処理）
このような構成をもつ本実施形態のデジタルカメラ１００の多重露光撮影処理について、図２のフローチャートを用いて具体的な処理を説明する。当該フローチャートに対応する処理は、制御部１０１が、例えばＲＯＭ１０２に記憶されている対応する処理プログラムを読み出し、ＲＡＭ１０３に展開して実行することにより実現することができる。なお、本多重露光撮影処理は、例えば撮影者により撮影モードが多重露光撮影モードに切り替えられた際に開始されるものとして説明する。また、本実施形態では簡単のため、当該多重露光撮影は、第１の撮影及び第２の撮影の、２回の撮影により得られた画像を合成して出力するものとして説明するが、本発明の実施はこれに限らない。

Ｓ２０１で、制御部１０１は不図示のレリーズボタンを撮影者が撮影に係る操作したことを検出すると、撮像部１０５に第１の撮影の撮影動作を開始させる。具体的には制御部１０１は、撮像部１０５により光電変換されて入力されたアナログ画像信号を、Ａ／Ｄ変換部１０７にＡ／Ｄ変換させ、得られたデジタル画像データを画像処理部１０８に出力させると共に、顔検出部１１０に出力させる。

Ｓ２０２で、制御部１０１は顔検出部１１０に、入力されたデジタル画像データから人物の顔を検出させ、当該人物の顔が存在する画像内の位置の情報を距離検出部１１１に出力させる。本実施形態において、第１の撮影では図３（ａ）に示すように、人物３０３が撮影者となり、被写体である人物３０１及び３０２の撮影を行う。また本実施形態において、第２の撮影では図３（ｂ）に示すように、第１の撮影で撮影者であった人物３０３が被写体となり、被写体であった人物３０２が撮影者となり撮影を行う。

Ｓ２０３で、制御部１０１は距離検出部１１１に、入力された人物の顔が存在する画像内の位置までの相対的な距離を検出させる。具体的には、距離検出部１１１が例えばコントラスト検出方式で距離の測定を行う場合、制御部１０１は光学系駆動部１０６を制御し、光学系１０４が備える焦点レンズを駆動させる。そして制御部１０１は、距離検出部１１１に顔検出部１１０により得られた人物３０１及び３０２の顔の位置でコントラスト検出方式を用いて焦点位置を検出させる。焦点位置の計算方法は、式１と同様である。この結果から、光学系１０４が備える焦点レンズを駆動させ、それぞれの顔に対応するデジタルカメラ１００との距離を検出する。

Ｓ２０４で、制御部１０１は、第１の撮影の後、当該撮影の後に行われる第２の撮影までの期間において、投影する画像を画像処理部１０８に生成させる。本実施形態では、図３（ｂ）に示すような投影する画像は第１の撮影において被写体である人物が存在していた３次元的な位置の指標となる画像であり、当該画像は第１の撮影の後、第２の撮影までの期間において投影される。

ここで、投影する画像の生成方法について、図を参照して詳細に説明する。
図４（ａ）は、第１の撮影において被写体である人物３０１及び３０２が図４（ｂ）のように撮影範囲に含まれている場合の、デジタルカメラ１００に対する立ち位置を示した上面図である。当該上面図では、デジタルカメラ１００が備える光学系１０４に原点を設け、当該光学系１０４の光軸をｚ軸、当該ｚ軸と直角をなすｘ軸からなるｘ−ｚ平面が示されている。また、距離検出部１１１により、式１から、デジタルカメラ１００から人物３０１までの距離ＬＡおよびデジタルカメラ１００から３０２までの距離ＬＢが検出される。撮像された解像度Ｐ_ｘ×Ｐ_ｙをとし、撮像された画像の中心を原点とした際の人物３０１の顔の座標が（ａ_ｘ，ａ_ｙ）、人物３０２の顔の座標が（ｂ_ｘ，ｂ_ｙ）とする。また、デジタルカメラ１００の画角をθ_ｘとする。画角θ_ｘは、光学系駆動部１０６から検出可能であり、ズーム率によって変化する。デジタルカメラ１００から人物３０１の直線とＺ軸のなす角をθ_Ａ、デジタルカメラから人物３０２の直線とＺ軸のなす角をθ_Ｂとする。なす角θ_Ａとなす角θ_Ｂは次式から求まる。

上式を用いて、人物３０１とｘ軸の距離Ｌ_ＡＺ、人物３０２とｘ軸の距離Ｌ_ＢＺは、次式で算出できる。

このとき、人物３０１及び３０２が光軸となす距離Ｌ_Ａｘ及びＬ_Ｂｘは、撮像された解像度Ｐ_ｘ×Ｐ_ｙの画像における人物の顔の位置の座標を用いて次式で算出される。撮像された画像の中心を原点とした際の人物３０１の顔の座標が（ａ_ｘ，ａ_ｙ）、人物３０２の顔の座標が（ｂ_ｘ，ｂ_ｙ）とすると、
で表される。なお、θ_ｘは、光学系１０４の水平画角である。

第１の撮影の後、第２の撮影が行われるまでの期間において投影される指標の画像は、図５（ａ）に示される。当該指標の画像は投影部１１３が有する液晶パネル上に形成される画像を示しており、投影されることにより、第１の撮影で人物３０１及び３０２が存在していた３次元的な位置の指標を提示することができる。本実施形態では、投影方向は第１の撮影の被写体である人物のうち、最もデジタルカメラ１００に近接している人物のいた位置が、投影部１１３が投影する画像の中央に位置するように決定する。即ち、例えば投影ユニット１２０が図５（ｂ）に示すように投影面である地面からｈの高さにあり、投影方向のヨー方向が光軸と同一である場合、ピッチ方向が鉛直線となす角φは、
で表される。

デジタルカメラ１００の地面からの高さｈの入力は、撮影者が手入力で指定するか、高さｈの検出用に、デジタルカメラ１００の下部に、鉛直下方向の向きに超音波などを用いる距離センサを備えて検出する方法でもよい。

このとき指標の画像の解像度はＰ’_ｘ×Ｐ’_ｙであり、人物３０１の位置を示す指標の座標（ａ’_ｘ，０）、人物３０２の指標の座標が（ｂ’_ｘ，ｂ’_ｙ））である場合、それぞれのｘ座標は
で表される。なお、θ’_ｘは、投影光学系１１２の水平画角である。また本実施形態では、投影方向は第１の撮影の被写体である人物のうち、最もデジタルカメラ１００に近接している人物のいた位置が、投影部１１３が投影する画像の中央に位置するように決定しているが、本発明の実施はこれに限らないことは容易に理解されよう。

さらに、人物３０２のｙ座標ｂ’_ｙは、投影光学系１１２の垂直画角θ’_ｙを用いて
で表される。

本実施形態では、このように算出された座標に指標となる円形図を描画した画像を投影することで、第２の撮影が行われるまでの期間において、第１の撮影の被写体である人物の３次元的な位置を、第２の撮影の被写体である人物に提示することができる。

Ｓ２０５で、制御部１０１は、第２の撮影を行うことにより得られる、第１の撮影の被写体である人物の画像が合成して得られた合成画像を表示部１０９に表示させる。具体的には制御部１０１は、第１の撮影で得られたデジタル画像データから、被写体の人物の画像を画像処理部１０８に切り出させる。被写体の人物の画像の切り出し方法は、例えば予め人物がいない状態で撮影された画像との差分により抽出する等の処理を行って取得すればよい。そして制御部１０１はさらに、撮像部１０５から電子ビューファインダ用に順次出力されている画像と、当該切り出された画像とを位置関係を合わせ、例えば第１の撮影の被写体である人物の画像を半透明に調整して画像処理部１０８に合成させる。位置関係は、第１の撮影での画角や人物までの距離データと、第２の撮影時の画角、焦点距離とを比較して合わせる。画角と焦点距離は、光学系駆動部１０６から得られる。制御部１０１は得られた合成画像を表示部１０９に出力して表示させ、第２の撮影の指示を受け付けられる状態とする。

なお、当該合成画像は電子ビューファインダように連続して画像が出力されるごとに更新され、第１の撮影の被写体である人物が合成された電子ビューファインダとして機能する。なお、第１の撮影と第２の撮影とで光学系１０４に設定されるズーム倍率の設定が異なる場合、第１の撮影で得られた画像から抽出された人物の画像は電子ズームが適用され、位置関係を合わせて合成されることは言うまでもない。

Ｓ２０６で、制御部１０１は、投影光学系駆動部１１４により投影光学系１１２をＳ２０３で得られた角度φの方向を投影方向として駆動させ、投影部１１３にＳ２０４で生成された指標の画像を投影させる。なお、投影方向は上述したように、第１の撮影の被写体である人物のうち、最もデジタルカメラ１００に近接している人物のいた３次元的な位置が、投影部１１３が投影する画像の中央に位置するような方向に決定される。

Ｓ２０７で、制御部１０１は、第２の撮影の被写体である人物３０３の位置を顔検出部１１０及び距離検出部１１１により検出させ、当該人物３０３の位置が、第１の撮影の被写体である人物３０１及び３０２のいずれかの位置と重なっているかを判断する。即ち、第１の撮影及び第２の撮影で得られた画像を合成した場合に、被写体の画像が重なって合成されるか否かを判断する。具体的には、Ｓ２０５で合成した第１の被写体の人物の位置と、第２の撮影において顔検出部１１０によって検出された被写体の人物の位置を比較することで、判断してよい。制御部１０１は例えば図６（ａ）に示すように、第１の撮影において人物３０１のいた位置と、人物３０３の位置が合成画像において遮蔽関係となる場合は、第２の撮影を禁止して当該Ｓ２０７の処理を繰り返す。また、制御部１０１は人物３０１のいた位置と、人物３０３の位置が合成画像において互いに遮蔽しない関係である場合は、第２の撮影を許可して処理をＳ２０８に移す。

なお、本実施形態では、複数の撮影における被写体である人物が合成された際に遮蔽関係とならないように撮影を制御する方法について説明したが、本発明の実施はこれに限らない。即ち、例えば図６（ｂ）のように意図的に被写体である人物が合成画像において重なった合成画像を撮影したい場合は、重なっていない場合に撮影を禁止するようにしてもよい。このような合成画像の構図を考慮した撮影の制御については、例えば多重露光撮影モードが選択された際に、ユーザに選択させればよい。

Ｓ２０８で、制御部１０１は不図示のレリーズボタンを撮影者が撮影に係る操作したことを検出すると、撮像部１０５に第２の撮影の撮影動作を開始させる。そして制御部１０１は、得られた第２の撮影に係るデジタル画像データを、画像処理部１０８に出力する。

Ｓ２０９で、制御部１０１は、第２の撮影で得られたデジタル画像データに対し、第１の撮影で得られたデジタル画像データから抽出した人物の画像を画像処理部１０８に合成させ、得られた合成画像データを不図示の記録媒体に記録する。

なお、投影部１１３はプロジェクタ等の画像を提示できるものとして説明したが、本実施形態は前の撮影の被写体である人物がいた位置を、後の撮影の被写体である人物に示せればよく、例えばレーザポインタ等の指標のみを投影可能な構成であってもよい。

また、本実施形態では画像処理部１０８で行われる合成画像の生成について、位置関係を合わせて合成するものとして説明したが、例えば実際に撮影された位置とは異なる位置に前の撮影の被写体である人物を移動させて合成してもよい。例えば、実際の撮影では、図７（ａ）のように前の撮影の被写体である人物７０１のいた位置と、後の撮影の被写体である人物７０２の位置とが配置されている場合を考える。このとき、図７（ｂ）に示すような位置に人物７０１を配置した、図８のような画像を合成する場合、投影部１１３が投影する指標の画像は、当該移動させた人物７０１の位置に指標を投影すればよい。

以上説明したように、本実施形態の撮像装置は、複数回の撮影を行って得られた画像を合成する場合に、前の撮影で被写体の人物がいた位置を、後の撮影の被写体に対して提示することができる。具体的には撮像装置は、第１の撮影において得られた画像から被写体である人物がいた位置を特定し、第１の撮影が行われた後、第２の撮影が行われるまでの期間において、第１の撮影の被写体である人物がいた位置を示す指標を投影する。

このようにすることで、多重露光撮影のように、第１の撮影の被写体である人物が必ずしも第２の撮影において存在しない場合であっても、第２の撮影の被写体である人物は、第１の撮影の被写体である人物との位置関係を把握することができる。即ち、撮影者は、第２の撮影の被写体である人物に第１の撮影の被写体の位置を把握させた上で、当該人物に対して立ち位置の指示をすることができるため、所望の構図での撮影を容易に行うことができる。

（実施形態２）
上述した実施形態１では、第２の撮影の被写体である人物に対して、第１の撮影の被写体である人物がいた位置を把握させるために、実際に第１の撮影の被写体である人物がいた位置の指標を投影する方法について説明した。本実施形態では、第２の撮影の被写体である人物に対して、第１の撮影の被写体である人物がいた位置を把握させるとともに、第２の撮影の被写体である人物への立ち位置のアドバイスを提示する方法について説明する。なお、本実施形態の撮像装置の一例としてのデジタルカメラ１００の機能構成は、上述した実施形態と同一であるものとする。

本実施形態のデジタルカメラ１００は、第１の撮影が行われた後、第２の撮影が行われるまでの期間において、Ｓ２０５で生成された電子ビューファインダに表示する合成画像、即ち第１の撮影の被写体である人物が合成された画像を投影する。即ち、撮影者だけでなく、第２の撮影の被写体である人物３０３に対しても、第１の撮影の被写体である人物のいた位置、及び第２の撮影を行って得られる合成画像を提示することができる。これにより、被写体である人物は撮影者からの立ち位置の指示を容易に理解できるかつ、自分の意志で合成画像が所望の構図となるように立ち位置を変更することができる。なお、合成画像を投影する際に左右反転及び上下反転して投影することにより、被写体である人物３０３に対して鏡像関係にある画像を提示することが可能となるため、被写体である人物３０３は得られる合成画像を理解しやすい。

また、２次元画像の提示だけでは、撮影方向によっては奥行き方向の位置関係を被写体である人物が把握しづらい状況があるため、本実施形態ではさらに被写体である人物が移動すべき位置への指示を、図９のように合成画像と合わせて提示する。被写体である人物が移動すべき位置は撮影者により指定されてもよいし、制御部１０１により例えば次の方法で決定されてもよい。

即ち、制御部１０１は第１の撮影の後、第２の撮影が行われるまでの期間において、被写体である人物の位置を判断し、
・デジタルカメラ１００となす距離が、第１の撮影の被写体である人物と同一となる位置
・顔検出部１１０により検出された顔の面積が、合成後の画像における第１の撮影の被写体である人物の顔の面積と所定の比率となる位置
に移動させるための指示を、合成画像とともに投影部１１３に投影させる。当該移動させるための指示は、具体的に移動方向及び歩数を文字で示してもよいし、矢印を提示して大きさを異ならせることで移動量を表現してもよい。

なお、本実施形態では、第２の撮影の被写体である人物の前後方向の位置を決定し、当該位置に移動するための指示を提示する方法について示したが、第２の撮影の被写体である人物への移動指示は前後方向だけに限らなくてよい。例えば、第２の撮影の被写体である人物の画角における立ち位置を判断し、当該人物を画角の中央に移動させる指示を、予め構図が設定されたテンプレートに従って決定してもよい。

以上説明したように、本実施形態の撮像装置は、複数回の撮影を行って得られた画像を合成する場合に、前の撮影で被写体の人物がいた位置を、後の撮影の被写体に対して提示することができる。具体的には撮像装置は、第１の撮影において得られた画像から被写体である人物がいた位置を特定し、第１の撮影の後、第２の撮影までの期間において、第１の撮影の被写体である人物を抽出した画像を、撮像手段から出力された画像に合成して投影する。さらに、第２の撮影の被写体である人物が移動すべき位置を決定し、当該位置への移動指示を合成画像とともに投影する。

このようにすることで、多重露光撮影のように、第１の撮影の被写体である人物が必ずしも第２の撮影において存在しない場合であっても、第２の撮影の被写体である人物は、第１の撮影の被写体である人物との位置関係を把握することができる。さらに、撮影者または画像認識により決定された、好適な立ち位置への誘導表示を示すことで、被写体は撮影者からの立ち位置の指示を容易に理解することができるため、所望の構図での撮影を容易に行うことができる。

なお、上述した実施形態１及び実施形態２では、第２の撮影において、それぞれ
・第１の撮影の被写体である人物がいた位置に指標を提示（実施形態１）
・第１の撮影の被写体である人物を合成した画像を提示（実施形態２）
・第２の撮影の被写体である人物が移動すべき位置への移動指示を提示（実施形態２）
するものとして説明したが、本発明は当該提示方法がいかように組み合わせられても実施可能であることは容易に理解できよう。さらに発明は、第１の撮影が行われた後、第２の撮影が行われるまでの期間において、上述した提示に加え、当該第２の撮影の被写体である人物が移動すべき位置に実施形態１のような指標を提示してもよい。このようにすることで、被写体は、撮影者が所望する第２の撮影での立ち位置を容易に理解して移動できるため、撮影に係る時間を短縮することができる。さらに、第２の撮影の被写体である人物が、指定された移動すべき位置に存在していない場合は第２の撮影を禁止することで、所望の合成画像を確実に得るようにしてもよい。

（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

Claims (13)

1. 第１の撮影と第２の撮影とで得られた画像を合成した合成画像を記録する撮像装置であって、
   被写体を撮像して画像を出力する撮像手段と、
   前記撮像手段により出力された画像から、前記被写体のうちの人物を検出する検出手段と、
   前記検出手段により検出された前記人物の３次元的な位置であって、前記撮像装置との相対的な位置を特定する特定手段と、
   前記特定手段により特定された前記人物の３次元的な位置に、当該人物の３次元的な位置を示す指標を投影する投影手段と、を備え、
   前記合成画像を記録する場合、
   前記特定手段は、前記撮像手段により前記第１の撮影で出力された画像から前記検出手段が検出した人物の３次元的な位置を特定し、
   前記投影手段は、前記第１の撮影が行われた後、前記第２の撮影が行われるまでの期間において、前記第１の撮影の被写体である人物の３次元的な位置に、前記指標を投影する、
   ことを特徴とする撮像装置。
2. 前記第１の撮影の被写体である人物の３次元的な位置に基づいて、前記第２の撮影の被写体である人物が移動すべき３次元的な位置を決定する決定手段をさらに備え、
   前記投影手段はさらに、前記決定手段により決定された位置に当該位置を示す指標を投影することを特徴とする請求項１に記載の撮像装置。
3. 第１の撮影と第２の撮影とで得られた画像を合成した合成画像を記録する撮像装置であって、
   被写体を撮像して画像を出力する撮像手段と、
   前記撮像手段により出力された画像から、前記被写体のうちの人物を検出する検出手段と、
   前記検出手段により検出された前記人物の３次元的な位置であって、前記撮像装置との相対的な位置を特定する特定手段と、
   前記撮像手段により前記第１の撮影で出力された画像から、前記検出手段により検出された前記第１の撮影の被写体である人物の画像を抽出する抽出手段と、
   前記第１の撮影より後に行われる前記第２の撮影において、前記第１の撮影の被写体である人物の３次元的な位置に基づいて、当該第２の撮影の被写体である人物が移動すべき位置を決定する決定手段と、
   前記第１の撮影が行われた後、前記第２の撮影が行われるまでの期間において、
   前記撮像手段が連続した撮像を行うことにより順次出力された画像と、前記抽出手段により抽出された前記第１の撮影の被写体である人物の画像とを合成した合成画像を順次出力する合成手段と、
   前記撮像手段により順次出力される画像から前記検出手段により検出された前記第２の撮影の被写体である人物の３次元的な位置と、前記決定手段により決定された位置とから、当該第２の撮影の被写体である人物が移動すべき方向を決定し、決定した移動方向を示す移動指示と、前記合成手段により順次出力された前記合成画像とを投影する投影手段と、
   を備えることを特徴とする撮像装置。
4. 前記合成手段は、前記撮像手段により順次出力される画像における前記第１の撮影の被写体である人物の３次元的な位置に当該第１の撮影の被写体である人物が表示されるように、前記第１の撮影の被写体である人物の画像を合成することを特徴とする請求項３に記載の撮像装置。
5. 前記投影手段は、前記第１の撮影が行われた後、前記第２の撮影が行われるまでの期間において、前記第１の撮影の被写体である人物の３次元的な位置に当該位置を示す指標を投影することを特徴とする請求項３または４に記載の撮像装置。
6. 前記投影手段は、前記決定手段により決定された位置に当該位置を示す指標をさらに投影することを特徴とする請求項３乃至５のいずれか１項に記載の撮像装置。
7. 前記決定手段は、前記撮像手段により順次出力される画像における、前記第１の撮影の被写体である人物の顔の大きさと、前記第２の撮影の被写体である人物の顔の大きさとが、所定の比率となるように前記移動すべき位置を決定することを特徴とする請求項２乃至６のいずれか１項に記載の撮像装置。
8. 前記決定手段は、前記撮像手段により順次出力される画像において、前記第２の撮影の被写体である人物と、前記第１の撮影の被写体である人物とが互いに遮蔽しないように前記移動すべき位置を決定することを特徴とする請求項２乃至７のいずれか１項に記載の撮像装置。
9. 前記決定手段は、前記撮像手段により出力される画像において、前記第２の撮影の被写体である人物と、前記第１の撮影の被写体である人物とが遮蔽関係となるように前記移動すべき位置を決定することを特徴とする請求項２乃至７のいずれか１項に記載の撮像装置。
10. 前記撮像手段は、前記第２の撮影の被写体である人物が前記移動すべき位置に存在しない場合、前記第２の撮影を禁止することを特徴とする請求項２乃至９のいずれか１項に記載の撮像装置。
11. 前記検出手段は、前記撮像手段により出力された画像から前記人物の顔を検出し、
    前記特定手段は、コントラスト検出方式または位相差検出方式により検出した、前記撮像手段により出力された画像における前記人物の顔の位置までの距離と、当該人物の顔が検出された画像を撮像した前記撮像装置の高さとを用いて、前記検出手段により検出された前記人物の３次元的な位置を特定する、ことを特徴とする請求項１乃至１０のいずれか１項に記載の撮像装置。
12. 第１の撮影と第２の撮影とで得られた画像を合成した合成画像を記録する撮像装置の制御方法であって、
    撮像手段が、被写体を撮像して画像を出力する撮像工程と、
    検出手段が、前記撮像工程において出力された画像から、前記被写体のうちの人物を検出する検出工程と、
    特定手段が、前記検出工程において検出された前記人物の３次元的な位置であって、前記撮像装置との相対的な位置を特定する特定工程と、
    投影手段が、前記特定工程において特定された前記人物の３次元的な位置に、当該人物の３次元的な位置を示す指標を投影する投影工程と、を備え、
    前記合成画像を記録する場合、
    前記特定工程において前記特定手段は、前記撮像工程において前記第１の撮影で出力された画像から前記検出工程で検出した人物の３次元的な位置を特定し、
    前記投影工程において前記投影手段は、前記第１の撮影が行われた後、前記第２の撮影が行われるまでの期間において、前記第１の撮影の被写体である人物の３次元的な位置に、前記指標を投影する、
    ことを特徴とする撮像装置の制御方法。
13. 第１の撮影と第２の撮影とで得られた画像を合成した合成画像を記録する撮像装置の制御方法であって、
    撮像手段が、被写体を撮像して画像を出力する撮像工程と、
    検出手段が、前記撮像工程において出力された画像から、前記被写体のうちの人物を検出する検出工程と、
    特定手段が、前記検出工程において検出された前記人物の３次元的な位置であって、前記撮像装置との相対的な位置を特定する特定工程と、
    抽出手段が、前記撮像工程において前記第１の撮影で出力された画像から、前記検出工程において検出された前記第１の撮影の被写体である人物の画像を抽出する抽出工程と、
    決定手段が、前記第１の撮影より後に行われる前記第２の撮影において、前記第１の撮影の被写体である人物の３次元的な位置に基づいて、当該第２の撮影の被写体である人物が移動すべき位置を決定する決定工程と、
    前記第１の撮影が行われた後、前記第２の撮影が行われるまでの期間において、
    合成手段が、前記撮像工程で連続した撮像を行うことにより順次出力された画像と、前記抽出工程において抽出された前記第１の撮影の被写体である人物の画像とを合成した合成画像を順次出力する合成工程と、
    投影手段が、前記撮像工程において順次出力される画像から前記検出工程において検出された前記第２の撮影の被写体である人物の３次元的な位置と、前記決定工程において決定された位置とから、当該第２の撮影の被写体である人物が移動すべき方向を決定し、決定した移動方向を示す移動指示と、前記合成工程において順次出力された前記合成画像とを投影する投影工程と、
    を備えることを特徴とする撮像装置の制御方法。