JP2010245613A - カメラ、表示画像制御方法および表示画像制御用プログラム - Google Patents

Abstract

【課題】多重露光撮影中のライブビュー画像として、現在の画像と既に撮影された画像が識別できるようなライブビュー画像を表示する。
【解決手段】撮影される被写体全体の中から主被写体に係る部分を抽出する抽出部３３と、撮影中に被写体視認用のライブビュー画像を作成し上記表示部に表示させる表示画像制御部２８とを備え、上記表示画像制御部２８は、上記多重露光撮影中のライブビュー画像として、現在の被写体全体を示す現在画像に既に撮影された画像の主被写体の画像を重畳し、あわせて当該既に撮影された画像の主被写体の画像と現在画像の中の主被写体の画像とを識別するための識別情報を付加した合成ライブビュー画像を作成し上記表示部２９に表示させる。
【選択図】図３

Description

本発明は、多重露光撮影におけるカメラ、表示画像制御方法および表示画像制御用プログラムに関する。

多重露光（多重露出）と呼ばれる、特殊な撮影の方法がある。この多重露光撮影とは、画面内で特定の被写体の位置や向きを変更させながら、複数回撮影して、複数回の撮影で得られた被写体像を１つに合成して、1枚の合成画像を作成する撮影である。特殊な目的（芸術的な）で撮影する場合や、面白い画像を撮影する場合に用いられる撮影モードである。

多重露光撮影は、銀塩フィルムカメラの時代から知られていた方法ではあるが、デジタルカメラでは、画像がデジタル信号で取り扱えることから、画像合成自体がより簡単でかつ高精度にできるようになり、さらに各画像の輝度やサイズが自由にコントロールできることから、フィルムに比べて、デジタルカメラではより多重露光撮影が活用できる環境になっている。

デジタルカメラでも、多重露光に関する提案がいくつかある。例えば従来一律に加算平均処理して決められていた露光量を設定された各デジタルゲインに応じて露光値を決めるようにするような提案がある（特許文献１）。

特開２００６−１２８７４０号公報

従来の多重露光のできるカメラで多重露光撮影をする際に、最初の1枚目の撮影前には通常のライブビュー画像だけが表示されるが、1枚目を撮影した以降は、画面のライブビュー画像にそれまでに撮影した画像が合成して表示される。被写体の位置を決めやすくするためである。しかし画面に新旧の被写体が同時に表示されていると、いずれが、現在のライブビュー画像なのか撮影済みの画像なのかの直ぐには区別がつき難いという問題があった。

本願発明は、上記課題に鑑み、多重露光撮影中のライブビュー画像として、現在の画像と既に撮影された画像が識別できるようなライブビュー画像を表示するカメラ、その表示画像制御方法および表示画像制御用プログラムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明にかかるカメラは、複数回の撮影による画像を合成して多重露光画像を得る多重露光撮影機能を備えるカメラにおいて、画像を表示する表示部と、上記多重露光撮影において、撮影される被写体全体の中から主被写体に係る部分を抽出する抽出部と、撮影中に被写体視認用のライブビュー画像を作成し上記表示部に表示させる表示画像制御部とを備え、上記表示画像制御部は、上記多重露光撮影中のライブビュー画像として、現在の被写体全体を示す現在画像に既に撮影された画像の主被写体の画像を重畳し、あわせて当該既に撮影された画像の主被写体の画像と現在画像の中の主被写体の画像とを識別するための識別情報を付加した合成ライブビュー画像を作成し上記表示部に表示させることを特徴とする。

また、本発明にかかる操作制御装置は、上記発明において、上記識別情報として、当該既に撮影された画像の主被写体画像の周りに輪郭線を付加することを特徴とする。

本発明によれば、多重露光撮影中のライブビュー画像として、現在の画像と既に撮影された画像が識別できるようなライブビュー画像を表示するカメラ、その表示画像制御方法および表示画像制御用プログラムを提供することができる。

図１は、本発明の実施の形態のカメラのシステム構成例を示すブロック図である。 図２は、多重露光撮影の具体的な撮影場面の例を説明するための図である。 図３は、多重露光撮影時の操作と操作に対応する処理を示すタイミングチャートである。 図４は、上記タイミングチャートでの各タイミングで表示部に表示されるライブビュー画像の例を順番に説明する図である。 図５は、多重露光撮影時に、カメラで実行される処理手順の概略を説明するフローチャートである。 図６は、図５のフローチャートのサブルーチンである。

以下、図面を参照して、本発明を実施するための形態について説明する。図１は、本実施の形態のデジタルカメラ（以下カメラと称す）のシステム構成例を示すブロック図である。本実施の形態では、レンズ交換式の一眼レフタイプのカメラを例にして説明する。カメラ１は、本体部とこの本体部に着脱可能な交換レンズとから構成される。

交換レンズ内には、被写体光を結像されるための撮影レンズ群１０と、被写体光束を調整するための絞り１１が内蔵される。本体部には、可動ミラー１２、シャッター１３、撮像素子１４、ＡＦセンサ１５、ファインダーレンズ群１６、ファインダー測光素子１７が内蔵される。

可動ミラー１２は、図１で示されている位置であるダウン位置と上端を中心に時計方向に約４５度回動した位置であるアップ位置を移動する。ダウン位置にある可動ミラー１２が、撮影レンズ群１０を通過した被写体光をファインダー側にファインダー光として反射させる。ファインダー光はペンタプリズムで反射され、ファインダーレンズ群１６に導かれる。ファインダーレンズ群１６は、ファインダー光を被写体像として撮影者の目に映し出す。ファインダー測光素子１７は、ファインダー光の一部から被写体光量を検出する。被写体光の一部は可動ミラー１２を通過して、ＡＦセンサ１５に導かれる。ＡＦセンサ１５では、被写体光の位相差を検出する。

シャッター１３は、アップされた可動ミラー１２を通過する被写体光を、設定された時間だけ通過させる。撮像素子１４は、ＣＣＤやＣＭＯＳから構成され、シャッター１３を通過して結像された被写体光を光電変換して、電気信号として出力する。

ファインダーによる撮影であるファインダー撮影モードでは、撮影の瞬間以外には可動ミラー１２はダウン位置にある。測光はファインダー測光素子１７により行われ、合焦検出はＡＦセンサ１５により行われる。

ファインダーを使用しないライブビュー画像による撮影であるライブビュー撮影モードでは、可動ミラー１２は、アップ位置で保持される。測光及び合焦は、いずれも撮像素子１４の画像信号を利用して検出される。

次に電気系統の説明をする。カメラ１には、カメラ１を構成する各部に対する指示やデータ転送等を行い、カメラ１の動作を統括的に制御するためのＣＰＵからなる制御部２１を備えられる。

カメラ１には、プログラムデータ記憶部２２、操作部２３が備えられる。プログラムデータ記憶部２２は、例えばフラッシュメモリ等の電気的に書換えが可能な不揮発性メモリである。このプログラムデータ記憶部２２は、カメラ１を動作させ、このデジタルカメラ１が備える種々の機能を実現するためのＣＰＵ用のプログラム（例えば、多重露光撮影制御用プログラム）や、このプログラムの実行中に使用されるデータ、例えば、アイコンのデータや後述する識別情報用のデータ（輪郭線のデータ）が予め格納されている。

制御部２１は、操作制御用プログラムにより実行される機能部として、多重露光制御部２１ａを備える。多重露光制御部２１ａは、撮影者により多重露光撮影モードが設定された場合に起動される。多重露光制御部２１ａは、予め設定された枚数（２枚以上）の撮影を行い、各撮影で抽出された主被写体を最後に撮影された画像にまとめて重畳させて、その合成画像のみを撮影画像として記録する。もちろん、主被写体だけを抽出して重畳するのではなく、各撮影画像全体を重畳させるようにしてもよい。詳細は後述する。

また、制御部２１は、光学系の制御として上記の撮影レンズ群１０のＡＦ・ズーム、絞り１１、可動ミラー１２、シャッター１３を、それぞれ駆動制御する。

操作部２３は、制御部２１に撮影者の操作指示を通知するためのもので、例えばカメラ本体の上面に配設されて撮影タイミングを指示するためのレリーズボタン等からなる。

また、カメラ１は、撮像処理部２４、ＳＤＲＡＭ２５、ＡＦ/ＡＥ制御部２６、画像処理部２７、表示画像制御部２８、表示部２９、圧縮伸長部３０、記録・再生部３１、画像記憶部３２、主被写体抽出部３３等の各部を備える。これら各部は、制御部１１に対してバスライン３５によって接続されている。

撮像処理部２４は、撮像素子１４から出力された画像信号について、ＡＧＣ処理，ＣＤＳ処理、Ａ／Ｄ変換等をしてデジタル画像データとして出力するものである。ＳＤＲＡＭ２５は、一時記憶メモリやワーキングエリアとして利用されるメモリであり、撮像処理部２４から出力される画像データや、画像処理部２７や表示画像制御部２８によるデジタル処理中の画像データ等を一時的に記憶する。

ＡＦ/ＡＥ制御部２６は、被写体の位置から撮影レンズ群の合焦レンズの位置を制御し、また被写体の輝度によりシャッター速や絞り値を設定する。ファインダー撮影モードでは、ＡＦ/ＡＥ制御部２６は、合焦に関しては、ＡＦセンサの出力である位相差により、被写体に対する現合焦レンズの位置のずれを算出して、合焦レンズの合焦位置を決定して、合焦レンズその位置に移動させるよう制御部２１に通知する。ＡＦ/ＡＥ制御部２６は、露出に関しては、ファインダー測光素子１７の出力から、被写体の輝度を算出して、プログラム線図や撮影者により設定された撮影条件からシャッター速や絞り量を決定して、その値を制御部２１に通知する。

ライブビュー撮影モードでは、ＡＦ/ＡＥ制御部２６は、合焦に関しては、合焦レンズを移動させながら得られた撮像素子１４の画像信号のコントラストピークから合焦位置を決定して、合焦レンズをその位置に移動させるよう制御部２１に通知する。ＡＦ/ＡＥ制御部２６は、露出に関しては、撮像素子１４の画像信号の出力から、被写体の輝度を算出して、プログラム線図や撮影者により設定された撮影条件からシャッター速や絞り量を決定して、その値を制御部２１に通知する。

画像処理部２７は、撮像処理部２４から出力される画像データに対して画素補間処理、色補正処理、ガンマ処理等の各種の画像処理を施すとともに、記録用、表示用等に適した画像データに変換する処理を行う。すなわち、画像処理部２７は、記録時（撮影時）には、記録画像に対しては記録用の画像処理を施し、表示用のライブビュー画像に対しては表示用の簡易な画像処理を施す。さらに、画像と画像を重畳する画像合成機能も備える。画像処理部２７は、多重露光撮影においては、前に撮影された1以上の主被写体画像を、最後に撮影された全体画像に合成する。

表示画像制御部２８は、表示部２９に表示するライブビュー画像や再生画像を作成するものである。表示画像制御部２８は、画像処理された画像データを表示部用の変換するリサイズ機能や、メニュー画面を作成表示する機能を有する。また、表示画像制御部２８は
画像同士あるいは画像にアイコン等の情報を合成する画像合成機能も有する。

上記表示画像制御部２８は、画像合成機能として、多重露光用の表示の際には、撮影中に被写体視認用のライブビュー画像を作成し上記表示部に表示させ、上記多重露光撮影中のライブビュー画像として、現在の被写体全体を示す現在画像に既に撮影された画像の主被写体画像を重畳し、あわせて当該既に撮影された画像の主被写体画像と現在画像の中の主被写体とを識別するための識別情報を付加した合成ライブビュー画像を作成し表示させる。主被写体画像は、主被写体抽出部３３によって、抽出作成される。

そして、表示画像制御部２８は、当該既に撮影された画像の主被写体画像として複数回の撮影による各回の主被写体画像を上記合成ライブビュー画像に重畳させ、上記識別情報として、当該各回の主被写体画像が当該多重露光の何枚目に相当するかの情報を含ませる。

上記識別情報として、例えば、表示画像制御部２８は、当該既に撮影された画像の主被写体画像の周りに輪郭線を付加する。また、表示画像制御部２８は、何枚目かの情報として、輪郭線の色や種類を変えるようにしてもよい。例えば、1枚目の主被写体画像の輪郭線は赤、2枚目は青、3枚目は緑 、あるいは、１枚目は点線、２枚目は１点鎖線、３枚目は２点鎖線という具合である。また、主被写体画像自体の色合いで区別させるようにしてもよい。例えば、1枚目の主被写体画像は赤系にし、2枚目は青系、3枚目は緑系 という具合である。これらを組み合わせてもよい。

さらに表示画像制御部２８は、合成ライブビュー画像を作成する際に、前の画像の主被写体については、ハーフトーン処理して表示するようにしてもよい。この前の画像の主被写体によって後ろに隠れてしまう現ライブビュー画像が認識できるようにするためである。

表示部２９は、カメラ本体の背面に配置され、ＬＣＤやＥＬＤ等の薄型表示装置で実現されている。この表示部２９は、撮影画像やライブビュー画像の他に、ＧＵＩ画面を含め、各種設定情報等を表示するためのものである。

圧縮伸長部３０は、撮影画像の画像データを画像記憶部３２に記録する際、あるいは画像記憶部３２に記録されている画像データを表示する際等において、周知のＪＰＥＧ方式等に基づく画像データの圧縮処理や伸長処理を行う。

記録・再生部３１は、画像記憶部３２に対する画像データの書き込みや画像記憶部３２からの画像データの読出しを行うためのものであり、画像記憶部３２の種類に応じたものが用いられる。ここで、画像記憶部３２は、例えばｘＤ−ピクチャーカード（登録商標）やコンパクトフラッシュ（登録商標）カード等のカメラ本体に着脱自在な記録媒体や、ＨＤＤである。

主被写体抽出部３３は、多重露光撮影の際に、撮像処理部２４から出力された画像データを解析して、撮影画像の中から主被写体を検出して、その部分の画像データを抽出するものである。主被写体抽出部３３は、顔情報、ピントの情報、コントラストあるいは色等の各種情報から画面内で一定以上のサイズを占めるオブジェクトを探す。

主被写体抽出部３３は、画像データの中に顔のパーツの有無を探して、画面の中に顔があるかを検出する顔検出機能を有する。主被写体抽出部３３は、画面で一定以上サイズの顔があると判断した場合には、その顔の人物を主被写体と認識する。

また、抽出するための条件は、カメラのメニューで撮影者に事前に設定させるようにしても良い。例えば、よりカメラに近い位置にあるオブジェクトを優先する というような条件、あるいは、被写体の種類を選択させても良い。被写体の種類とは、例えば、人、花、車、絵等である。このような補助情報を活用すれば、主被写体抽出部３３は、より高精度に主被写体を検出することができる。

図２は、多重露光撮影の具体的な撮影場面の例を説明するための図である。多重露光撮影の代表的な２つの撮影例を、主被写体を花として説明する。もちろん、この２例に限定されるものではない。

図２（１）の例では、背景として青や白のモノトーンスクリーンが用意され、そのモノトーンスクリーンの前に主被写体である花が置かれている。そして、撮影者は、自身の持つカメラ１の画角あるいは撮影位置を順次変えることで、画面内の花の位置を変化させながら、何枚かを撮影する。そして撮影された複数の画像が合成され、一つの画面の異なる位置に同じ花が配置された合成画像（多重露光画像）が作成される。この例では、背景がモノトーンなので、主被写体抽出の精度が向上して高画質の撮影ができる。また、主被写体抽出の機能がなくても、背景の重なりが目立たないので多重露光画像として破綻が目立たない。

図２（２）の例では、多重露光させたい被写体を移動させて撮影する例である。この例では、三脚に固定されたカメラで、向かって右端に現在ある主被写体である花を、画面内で点線の位置にあるように移動させながら、２回撮影を行う。そして、撮影された複数の画像を合成して、合成画像が作成される。この例では、主被写体だけを移動させて撮影し、カメラは固定されていることで、撮影される背景はほとんど一定であることが期待できるので、主被写体抽出の機能がなくても、多重露光画像として破綻は少ない。

以上のように、撮影場面を工夫することで、主被写体抽出機能がなくても多重露光撮影は可能であるが、主被写体抽出機能が搭載されたカメラであれば、上記のような制約がなくなり、より多重露光撮影の機会を増やすことができる。

図３は、本実施形態における、多重露光撮影時の操作と操作に対応する処理を示すタイミングチャートである。なお、多重露光の撮影回数ｎは種々設定可能であるが、本例では理解の容易化のためｎ＝３回として説明する。

ａ）は、撮影の実行を指示する２ｎｄレリース（操作部２３に含まれる）のタイミングを示す。ｂ）は、ａ）の２ｎｄレリースにより実行される一連の撮影処理の中での、多重露光撮影に関する処理のタイミングを示す。ｃ）は、２ｎｄレリースのタイミングに応じて、表示部２９に表示される画像の態様を示す。また、図４は、図３ｃ）で表示部２９に表示される画面の具体例を示す。図３，４をあわせて説明する。

まず、最初の撮影開始前は、表示画像制御部２８は表示部２９には画面０としてライブビュー画像（以下ＬＶとも略す）を表示させる。図４（１）が、画面０の例である。画面０では、主被写体（花）Ｐは画面の右端に位置している。

制御部２１が操作部２３の２ｎｄレリースから１回目の撮影指示を受けると、以下の処理（多重露光撮影）を実行する。制御部２１の多重露光制御部２１ａは、１枚目の撮影処理を行い、得られた画像データを一旦ＳＤＲＡＭ２５に記憶させる。主被写体抽出部３３は、この画像データから主被写体を検出して、その主被写体部分を１枚目の主被写体画像ＲＥ１として抽出し、その部分画像データをＳＤＲＡＭ２５に記憶させる。この場合に、画像処理部２７による表示用の画像処理は省略してもよい。

表示画像制御部２８は、主被写体抽出部３３が部分画像データの記憶が完了する前では、画像処理部２７で表示用処理されたライブビュー画像を、表示部２９に出力する（画面０）。表示画像制御部２８は、部分画像データの記憶が完了後は、リアルタイムで得られたライブビュー画像に主被写体画像ＲＥ１と主被写体画像ＲＥ１の輪郭線ＲＥ１ａを合成して、１枚目合成ライブビュー画像を作成する。ここで、輪郭線ＲＥ１ａは破線で表示される。表示画像制御部２８は、通常のライブビュー画像に代えて合成された１枚目合成ライブビュー画像を表示部２９に表示する。この画面の例が、図４（２）の画面１である。ここでは、１回目の撮影指示後に、主被写体Ｐが右端から中央に移動されたとする。画面１では、主被写体Ｐは画面の中央に位置し、前画像である主被写体画像ＲＥ１は右端に表示されている。

その後、多重露光制御部２１ａは、２ｎｄレリースから２回目の撮影指示を受けると、２枚目の撮影を実行する。多重露光制御部２１ａは、１枚目と同様に、２枚目の画像データから主被写体を検出して、その主被写体部分を２枚目の主被写体画像ＲＥ２として抽出し、ＳＤＲＡＭ２５に記憶させる。

表示画像制御部２８は、主被写体抽出部３３が部分画像データの記憶が完了する前では１枚目合成ライブビュー画像を出力し続ける。

表示画像制御部２８は、主被写体画像ＲＥ１と主被写体画像ＲＥ１の輪郭線ＲＥ１ａおよび主被写体画像ＲＥ２と主被写体画像ＲＥ２の輪郭線ＲＥ２ａを合成して、２枚目合成ライブビュー画像を作成する。ここで、輪郭線ＲＥ２ａは１点鎖線で表示される。表示画像制御部２８は、２枚目合成ライブビュー画像を表示部２９に表示させる。表示画像制御部２８は、通常のライブビュー画像に代えて合成された２枚目合成ライブビュー画像を毎回リフレッシュして表示部２９に表示する。この画面の例が、図４（３）の画面２である。

ここでは、２回目の撮影指示後に、主被写体Ｐが中央から左端に移動されたとする。画面２では、現在の画像である主被写体Ｐは画面の左端に位置し、前の画像は中央と右端に表示されている。1枚目と2枚目をより識別できるようにするために、２枚目ＲＥ２の画像については表示輝度を下げている。識別させる方法としては、主被写体画像ＲＥ１の輪郭線を赤の点線、主被写体画像ＲＥ２の輪郭線を青の点線に変えてもよいし、主被写体画像ＲＥ１を赤系、主被写体画像ＲＥ２を青系に表示上変るようにしてもよい。

そして、多重露光制御部２１ａは、２ｎｄレリースから３回目の撮影指示を受けると、３枚目の撮影を実行する。多重露光制御部２１ａは、１、２枚目と同様に、３枚目の画像データから主被写体を検出して、その主被写体部分を３枚目の主被写体画像ＲＥ３として抽出し、ＳＤＲＡＭ２５に記憶させる。

表示画像制御部２８は、主被写体画像ＲＥ１と主被写体画像ＲＥ２とを３枚目の全体の撮影画像に合成して、最終的な多重露光画像を作成する。この合成画像は、最終的な多重露光画像として、表示部２９に所定時間表示される。この画面の例が、図４（４）の画面３である。この場合には、輪郭線表示は不要である。

また、記録用の多重露光画像は、画像処理部２７で、ＳＤＲＡＭ２５に記憶された主被写体画像ＲＥ１と主被写体画像ＲＥ１を３回目の撮影画像に合成処理され、合成処理された画像データがさらに圧縮伸長部３０で圧縮処理され記録再生部３１を介して画像記憶部３２に保存記録される。

図５、図６は、多重露光撮影において、カメラで実行される処理手順の概略を説明するフローチャートである。図５，６により、上述したような多重露光撮影を実現するための制御部２１、多重露光制御部２１ａ、表示画像制御部２８等による動作制御例についてを説明する。本実施の形態で対象とする制御処理は、設定用ボタン等の操作により、撮影モードが指定されることにより実行される。

カメラ１は撮影モードに設定されているものとする。次に、ライブビュー撮影モードに設定されているかを判断する（Ｓ１１）。撮影モードとして、ライブビュー撮影モードとファインダー撮影モードを選択が可能である。ライブビュー撮影モードとは、可動ミラー１２を常時アップさせ、撮像素子１４で得られた画像を表示部２９に出力表示させ、表示部２９で画像を視認させて撮影するモードである。この場合にはファインダーを利用することはできない。

ファインダー撮影モードとは、通常は可動ミラー１２をダウンさせて被写体光をファインダ側に導き、ファインダーで被写体を視認できるようにして、撮影の瞬間だけ可動ミラー１２をアップさせて、被写体光を撮像素子１４に結像させて撮影するようなモードである。今回の多重露光撮影はライブビュー撮影モードで行われるものとする。

ライブビュー撮影モードが設定されている場合は（Ｓ１１ＹＥＳ）、可動ミラー１２を退避位置（アップ位置）に移動させ（Ｓ１２）、シャッター１３を開放させる（Ｓ１３）よう駆動制御する。撮像素子１４に被写体光が結像され、表示画像制御部２８で 得られた画像データから表示用画像データを作成し、ライブビュー画像として表示部２９に表示させる（Ｓ１４）。表示レートは例えば30回/ｓｅｃである。

次に、撮影モードとして多重露光モードが選択されているかを判断する（Ｓ１５）。撮影モードはメニュー画面で予め選択されるものとする。多重露光モードが選択されている場合には（Ｓ１５ＹＥＳ）、まずイメージャ測光・露光量演算を行う（Ｓ１６）。撮像素子１４で得られた画像データに基づきＡＥ・ＡＦ制御部２６で、露光量を算出し、撮像素子１４で適正な露光量になるように、絞り１１の値、撮像素子１４の素子シャッターの速度あるいは撮像処理部２４のＡＧＣのゲインを調整する。これにより、表示部２９に表示されるライブビュー画像の輝度も適正に保たれる。

次に、多重露光での撮影の回数によって判断を分ける処理を行う（Ｓ１７、Ｓ１８）。多重露光の１回目の撮影なのか、あるいは２回目か、あるいは３回目にあるかで判断を分ける。この回数は、図３（ａ）で使った回数と同じ意味である。

まず、多重露光の１回目の撮影なので（Ｓ１７ＮＯ、Ｓ１８ＮＯ）、通常のライブビュー画像の表示を継続させる（Ｓ１９）。このようなライブビュー画像の表示を継続して行いながら、操作部２３の１ｓｔレリース（１Ｒ）および２ｎｄレリース（２Ｒ）の操作を待つ。

１ｓｔレリースが押下されるまでは、２ｎｄは押下されないので、まず、１ｓｔレリースの押下を検出されるまでは（Ｓ２０ＮＯ、Ｓ２１ＮＯ）、ステップ１６に戻り、Ｓ１６からＳ２１を巡回する。１ｓｔレリースの押下を検出すると（Ｓ２１ＹＥＳ）、ＡＦ処理を行わせる（Ｓ２２）。ＡＦ処理は、既に説明したように、撮像素子１４の画像データによってＡＥ/ＡＦ制御部２６が合焦位置を検出して、その位置に合焦レンズを移動させる。そして、ステップ１７に戻る。合焦後は１ｓｔレリースの押下が解除されない限り、その位置でピントは固定される。この状態で、２ｎｄレリースが押下されるまで（Ｓ２０）、表示画像制御部２８によりライブビュー画像が表示され続ける。

１回目の撮影：２ｎｄレリースが押下されると（Ｓ２０ＹＥＳ）、撮影処理を実行する（Ｓ３０）。撮影処理は、図６のサブルーチンのフローチャートによって簡単に説明する。まず、撮像素子１４から画像信号を読出し（Ｓ７０）、読み出された画像信号を撮像処理部２４で処理後に画像データに変換する。更に、画像処理部２７で画像データに所定の画像処理を施し（Ｓ７１）、画像処理された画像データをＳＤＲＡＭ２５に一旦記憶する（Ｓ７２）。ステップ３１に戻る。

次、多重露光の最後の撮影であるかを否か（Ｓ３１）で処理を変える。まずは、多重露光の最初の撮影なので（Ｓ３１ＮＯ）、ステップ３２に進み、Ｓ７２でＳＤＲＡＭ２５に記憶させた画像データから、主被写体抽出部３３により 主被写体を抽出させる処理を行わせる。

主被写体抽出部３３は、上述したように、撮影画像の中にある主被写体を、顔検出、コントラスト、色、ピント情報あるいは事前に指定された被写体の種類情報等を総合的に判断して、主被写体を抽出する（Ｓ３２）。主被写体抽出部３３は、抽出した主被写体の画像データ、つまり撮影された画像データの一部の画像データを、ＳＤＲＡＭ２５に記憶させる（Ｓ３３）。この画像が図３，４で説明した１枚目の主被写体画像ＲＥ１となる。そして、ステップＳ１６に戻る。

２回目の撮影：イメージャ測光は前述通り継続させる（Ｓ１６）。そして、１回目の撮影が終わり２回の撮影になるので（Ｓ１７ＹＥＳ）、表示画像制御部２８は、主被写体画像ＲＥ１と主被写体画像ＲＥ１の輪郭線ＲＥ１ａをライブビュー画像に合成して、１枚目合成ライブビュー画像を作成する（Ｓ４０）。ここで、輪郭線ＲＥ１ａは、図４で説明したように例えば点線や赤で表示させる。表示画像制御部２８は、通常のライブビュー画像に代えて合成された１枚目合成ライブビュー画像を毎回リフレッシュして表示部２９に表示させる（Ｓ４１）。１枚目合成ライブビュー画像を表示させてステップ２０に進み、再度１ｓｔレリース・２ｎｄレリースの押下を検出する（Ｓ２０〜Ｓ２２）。

１ｓｔレリースが押下されたら（Ｓ２１ＹＥＳ）、ＡＦをやり直させる（Ｓ２２）。さらに２ｎｄレリースの押下が検出されたら（Ｓ２０ＹＥＳ）、再度撮影処理を実行する（Ｓ３０）。これが２回目の撮影開始になる。ステップ３０のの撮影処理は、既に説明済みなの省略する。

続いて、１回目の撮影後と同様に、多重露光は未終了なので（Ｓ３１ＮＯ）、主被写体抽出部３３に、主被写体を抽出させ（Ｓ３２）、抽出した主被写体の画像データ、つまり撮影された画像データの一部の画像データを、ＳＤＲＡＭ２５に記憶させる（Ｓ３３）。この画像が図３，４で説明した２枚目の主被写体画像ＲＥ２となる。その後、ステップ１６に戻る。

３回目の撮影：イメージャ測光は前述通り継続させる（Ｓ１６）。そして、２回目の撮影が終わり３回の撮影になるので（Ｓ１７ＮＯ、Ｓ１８ＹＥＳ）、表示画像制御部２８は、主被写体画像ＲＥ１と主被写体画像ＲＥ１の輪郭線および主被写体画像ＲＥ２と主被写体画像ＲＥ２の輪郭線ＲＥ２ａを合成して、２枚目合成ライブビュー画像を作成する（Ｓ４２）。主被写体画像ＲＥ２の輪郭線ＲＥ２ａは、図４で説明したように主被写体画像ＲＥ１の輪郭線ＲＥ１ａと区別して１点鎖線で色は青とする。これにより、新たな主被写体画像ＲＥ２を主被写体画像ＲＥ１と明確に識別できる。もちろん、主被写体画像ＲＥ２の輪郭線を主被写体画像ＲＥ１の輪郭線と同じ色にしてもよい。図４で説明したように、1枚目と2枚目をより識別できるようにするために、２枚目ＲＥ２の画像については表示輝度を下げてもよい。

表示画像制御部２８は、通常のライブビュー画像に代えて合成された２枚目合成ライブビュー画像を表示部２９に表示する（Ｓ４３）。２枚目合成ライブビュー画像は、所定サイクルでリフレッシュされて表示される。２枚目合成ライブビュー画像を表示させてステップ２０に進み、１ｓｔレリース・２ｎｄレリースの押下を検出する（Ｓ２０〜Ｓ２２）。

１ｓｔレリースが押下されたら（Ｓ２１ＹＥＳ）、ＡＦをやり直す（Ｓ２２）。２ｎｄレリースの押下が検出されたら（Ｓ２０ＹＥＳ）、再度撮影処理を実行する（Ｓ３０）。これで、３回目（最後）の撮影となる。撮影処理は、既に説明済みなの省略する。ここでは、多重露光の撮影回数を３回としているので、多重露光の撮影は終了となる（Ｓ３１ＹＥＳ）。

画像処理部２７に、この３回目で撮影記憶された画像に、ＳＤＲＡＭ２５に記憶されている過去２回の主被写体画像ＲＥ１と主被写体画像ＲＥ１を合成して、最終の多重露光画像である合成画像を作成させる。この合成画像は保存記録用の画像である。

また、画像表示制御部２８は、この合成画像から表示用画像を作成して表示する（Ｓ５１）。この合成画像の表示は、撮影確認用なので、数秒間の表示で良く、また、最終画像なので、輪郭線も不要である。図４（４）の表示である。

記録再生部３１にこの合成画像を画像記憶部３２に保存記録させる（Ｓ５２）。終了後は、パワーオフ操作を判断し（Ｓ５３）、パワーオフ操作がなされたと判断したら（Ｓ５３ＹＥＳ）、カメラ１の電源オフ処理を行う。パワーオフ操作がされなければ（Ｓ５３ＮＯ）、Ｓ１１に戻り、ライブビュー画像を表示させて、新たな多重露光の開始に備える。

一方、Ｓ１１において、ファインダー画像モードが選択されている場合には（Ｓ１１ＮＯ）は、ステップ６０以降に進むが、多重露光撮影ではないので、簡単に説明する。撮影指示があったとし（Ｓ６０）、位相差ＡＦとファインダー素子測光による露光量演算を行なわせ（Ｓ６１、Ｓ６２）、続いて通常の撮影処理を実行させる（Ｓ６３）。その後、得られた画像データを画像記憶部３２に保存記録を行わせる（Ｓ５２）。

また、ステップ１５において、多重露光モードでないかあるいは多重露光モードが解除されたと判断した場合には（Ｓ１５ＮＯ）、通常のライブビュー撮影モードで撮影を行う。
Ｓ１６と同様にイメージャ測光・露光量演算を行う（Ｓ６５）。撮影指示を検出して（Ｓ６６）、通常の撮影処理を実行させる（Ｓ６３）。その後は、得られた画像データを画像記憶部３２に保存記録を行わせる（Ｓ５２）。以降のＳ５２、Ｓ５３の処理は、説明済みのため省略する。

以上本実施形態で説明したように、前の画像の主被写体を新たなライブビュー画像に重畳するように表示させる際に、前の画像の主被写体であること識別できるように表示させるので、撮影中でも被写体同士の位置やサイズが容易に比較でき、より多重露光撮影が便利になる。

なお、制御部２１がフラッシュメモリ等のプログラムデータ記憶部２２に格納された操作制御用プログラムを読み出して実行されることで、上記多重露光処理が実現されるので、このようなソフトウェア処理に関する操作制御用プログラムも本発明となる。また、このような操作制御用プログラムが記録された記録媒体も本発明となる。なお、プログラムを格納する記録媒体としては、フラッシュメモリに限定されるものではなく、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ等の光学記録媒体、ＭＤ等の磁気記録媒体、テープ媒体、ＩＣカードなどの半導体メモリであってもよい。

上記本実施形態では、多重露光処理の実行を、ソフトウェア処理とハードウェア処理の組み合わせで説明したが、これに限られるものではなく、その組合わせは選択事項である。

また、本実施の形態では、デジタルカメラ１での例で説明したが、当然これに限られるものではない。カメラは、デジタルカメラに限らず、パソコンのカメラ部や携帯電話のカメラ部等に適用してもよい。

１・・・カメラ、１０・・・撮影レンズ群、１１・・・絞り、１２・・・可動ミラー、１３・・・シャッター，１４・・・撮像素子，１５・・・ＡＦセンサ，１６・・・ファインダーレンズ群，１７・・・ファインダー測光素子，２１・・・制御部，２２・・・プログラムデータ記憶部，２３・・・操作部，２４・・・撮像処理部、２５・・・ＳＤＲＡＭ、２６・・・ＡＦ/ＡＥ制御部、２７・・・画像処理部，２８・・・表示画像制御部，２９・・・表示部，３０・・・圧縮伸長部，３１・・・記録・再生部，３２・・・画像記憶部，３３・・・主被写体抽出部、３５・・・バスライン

Claims (5)

1. 複数回の撮影による画像を合成して多重露光画像を得る多重露光撮影機能を備えるカメラにおいて、
   画像を表示する表示部と、
   上記多重露光撮影において、撮影される被写体全体の中から主被写体に係る部分を抽出する抽出部と、
   撮影中に被写体視認用のライブビュー画像を作成し上記表示部に表示させる表示画像制御部とを備え、
   上記表示画像制御部は、上記多重露光撮影中のライブビュー画像として、現在の被写体全体を示す現在画像に既に撮影された画像の主被写体の画像を重畳し、あわせて当該既に撮影された画像の主被写体の画像と現在画像の中の主被写体の画像とを識別するための識別情報を付加した合成ライブビュー画像を作成し上記表示部に表示させる、
   ことを特徴とするカメラ。
2. 上記表示画像制御部は、上記識別情報として、当該既に撮影された画像の主被写体の画像の周りに輪郭線を付加する
   ことを特徴とする請求項１に記載のカメラ。
3. 上記表示画像制御部は、当該既に撮影された画像の主被写体の画像として複数回の撮影による各回の主被写体の画像を上記合成ライブビュー画像に重畳させ、上記識別情報として、当該各回の主被写体の画像が当該多重露光の何枚目に相当するかの情報を含む
   ことを特徴とする請求項１に記載のカメラ。
4. 複数回の撮影による画像を合成して多重露光画像を得る多重露光撮影部と、該多重露光撮影される被写体全体の中から主被写体に係る部分を抽出する抽出部と、該多重露光撮影中に被写体視認用のライブビュー画像を作成し表示部に表示させる表示画像制御部とを備えるカメラの表示画像制御方法において、
   上記多重露光撮影中のライブビュー画像として、現在の被写体全体を示す現在画像に既に撮影された画像の主被写体画像を重畳し、あわせて当該既に撮影された画像の主被写体画像と現在画像の中の主被写体とを識別するための識別情報を付加した合成ライブビュー画像を作成し上記表示部に表示させる、
   ことを特徴とする表示画像制御方法。
5. 複数回の撮影による画像を合成して多重露光画像を得る多重露光部と、多重露光撮影される被写体全体の中から主被写体に係る部分を抽出する抽出部と、多重露光撮影中に被写体視認用のライブビュー画像を作成し表示部に表示させる表示画像制御部とを備えるカメラのコンピュータに表示画像制御を実行させる表示画像制御用プログラムにおいて、
   上記多重露光撮影中のライブビュー画像として、現在の被写体全体を示す現在画像に既に撮影された画像の主被写体画像を重畳し、あわせて当該既に撮影された画像の主被写体画像と現在画像の中の主被写体とを識別するための識別情報を付加した合成ライブビュー画像を作成し上記表示部に表示させる、
   ことを特徴とする表示画像制御用プログラム。

Images