JP2015106776A - 撮像装置、制御方法およびそのプログラム - Google Patents

Abstract

【課題】 異なる側を撮影する複数の撮像装置のそれぞれに対応させて個々に専用の発光装置を設けることなく、良好な明るさでの撮影を可能にする。【解決手段】 表示手段と、表示手段の側とは異なる側の被写体を撮像する第１の撮像手段と、表示手段の側の被写体を撮像する第２の撮像手段と、第１の撮像手段で撮像する被写体輝度と第２の撮像手段で撮像する被写体輝度を測光する測光手段と、第１の撮像手段で撮像する被写体輝度と第２の撮像手段で撮像する被写体輝度の輝度差を算出する算出手段と、前記輝度差に応じて第２の撮像手段で被写体を撮像する際に第２の撮像手段が撮像する被写体を照明する照明画像を表示させるか否かを制御する表示制御手段とを有し、表示制御手段は、輝度差が第１の輝度差よりも小さい場合は照明画像を表示手段に表示させず、輝度差が第１の輝度差以上の場合は照明画像を表示手段に表示させることを特徴とする構成とした。【選択図】 図３

Description

本発明は、撮像手段を複数備えた撮像装置とその制御方法およびにプログラムに関する。

従来、人物や風景などの主たる被写体の撮影をする際に、撮影者側の撮影もしたいという要望がある。

このような要望に対して、特許文献１には、主たる被写体を撮像するメインカメラと撮影者を撮像するサブカメラとを有する処理装置について記載されている。そして、メインカメラで撮像したメイン画像とサブカメラで撮像したサブ画像とを合成した合成画像を、記録媒体に記録する処理装置について提案されている。

特開２００５−７３１６１号公報

しかしながら、特許文献１には、メイン画像とサブ画像の画質の関係については記載されていない。したがって、サブカメラの側が、メインカメラの側よりも大幅に暗い場合は、サブ画像の輝度とメイン画像の輝度が大きく異なる合成画像が生成されてしまう場合がある。

一般的に、撮影の対象となる被写体が暗い場合は、当該被写体を撮像する際にストロボなどの発光装置によって被写体を明るくすることが知られている。

しかし、サブカメラの側を明るくするために、サブカメラ側に専用の発光装置を設けると、撮像装置の構成が複雑化してしまう。この場合、構成の複雑化に伴い、撮像装置が大型化してしまう。

本発明の目的は、複数の撮像手段によってそれぞれ異なる側を撮影する場合であっても、複数の撮像装置のそれぞれに対応させて個々に専用の発光装置を設けることなく、良好な明るさでの撮影を可能にすることである。

上記目的を達成するために本発明にかかる撮像装置は、画像を表示する表示手段と、前記表示手段が配置された側とは異なる側の被写体を撮像する第１の撮像手段と、前記表示手段が配置された側の被写体を撮像する第２の撮像手段と、前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度を測光する測光手段と、前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度の輝度差を算出する算出手段と、前記算出手段によって算出された前記輝度差に応じて、前記第２の撮像手段で被写体を撮像する際に前記第２の撮像手段が撮像する被写体を照明する照明画像を前記表示手段に表示させるか否かを制御する表示制御手段と、を有し、前記表示制御手段は、前記輝度差が第１の輝度差よりも小さい場合は前記照明画像を前記表示手段に表示させず、前記輝度差が前記第１の輝度差以上の場合は前記照明画像を前記表示手段に表示させることを特徴とする。

また、上記目的を達成するために他の本発明にかかる撮像装置は、画像を表示する表示手段と、前記表示手段が配置された側とは異なる側の被写体を撮像する第１の撮像手段と、前記表示手段が配置された側の被写体を撮像する第２の撮像手段と、前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度を測光する測光手段と、前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度の輝度差を算出する算出手段と、前記算出手段によって算出された前記輝度差に応じて、前記第２の撮像手段で被写体を撮像する際の前記表示手段の表示制御を行う表示制御手段と、を有し、前記表示制御手段は、前記輝度差が第１の輝度差のときよりも前記輝度差が前記第１の輝度差よりも大きい第２の輝度差のときの方が、前記表示手段を明るく表示させるように前記表示手段の表示制御を行うことを特徴とする。

本発明によれば、複数の撮像手段によってそれぞれ異なる側を撮影する場合であっても、複数の撮像手段のそれぞれに対応させて個々に専用の発光装置を設けることなく、良好な明るさでの撮影を可能にすることができる。

本発明を実施した撮像装置の第１実施形態であるカメラ１００を説明する図である。 本発明を実施した撮像装置の第１実施形態であるカメラ１００の内部構成を説明するブロック図である。 本発明を実施した撮像装置の第１実施形態であるカメラ１００の撮影処理を説明するフローチャートである。 本発明を実施した撮像装置の第１実施形態であるカメラ１００のサブカメラＢ側での撮影処理を説明するフローチャートである。 本発明を実施した撮像装置の第１実施形態であるカメラ１００における表示画像を説明する図である。 本発明を実施した撮像装置の第１実施形態であるカメラ１００における照明画像を説明した図である。 本発明を実施した撮像装置の第２実施形態であるカメラ１００の撮影処理を説明するフローチャートである。 本発明を実施した撮像装置の第２実施形態であるカメラ１００における表示画像を説明する図である。 本発明を実施した撮像装置の第２実施形態であるカメラ１００における照明画像表示処理を説明するフローチャートである。 本発明を実施した撮像装置の第２実施形態であるカメラ１００において表示させる照明画像の大きさの割合を説明した図である。

（第１実施形態）
本発明にかかる第１実施形態としてのデジタルカメラ（以下、単にカメラと称す）１００について図１〜６を参照して説明する。

図１は、本発明を実施した撮像装置の第１実施形態であるカメラ１００を説明する図であって、カメラ１００の背面図を示している。以下、図１に記載された各部を説明する。

カメラ１００の正面側には主被写体を撮像するための第１の光学系１Ａが配置されている。また、カメラ１００の背面側には、撮影者（ユーザ）を撮像するための第２の光学系１Ｂが配置されている。すなわち、本実施形態において、第１の光学系１Ａと第２の光学系１Ｂはそれぞれ異なる側の被写体を撮像可能に配置されている。

カメラ１００の背面側であって前述の第２の光学系１Ｂが設けられている側には、表示手段である表示部１４が配置されている。

カメラ１００の上面には、第１の光学系１Ａの側を照明するストロボ発光部２０が配置されている。なお、図１において、ストロボ発光部２０は、カメラ１００の内部に収納された状態を示している。そして、ストロボ発光部２０は、この収納された状態からポップアップした状態に移動することで、第１の光学系１Ａの側を照明することが可能である。

カメラ１００の上面には、電源スイッチ１０１と、レリーズスイッチ１０２が配置されている。電源スイッチ１０１をオンすることで、不図示の二次電池からカメラ１００の内部に電力が供給される。

電源スイッチ１０１がオンされている状態でレリーズスイッチ１０２が押下されると、第１の光学系１Ａおよび、第２の光学系１Ｂを介して主被写体および撮影者の静止画が取得される。

図２は、本発明を実施した撮像装置の第１実施形態であるカメラ１００の内部構成を説明するブロック図である。以下、図２を参照して、カメラ１００の内部構成について説明する。

第１の光学系１Ａは、ズームレンズ群２及びフォーカスレンズ群３を備えるとともに絞り４を有している。絞り４はズームレンズ群２およびフォーカスレンズ群３を透過した光量を調整する。なお、第１の光学系１Ａは、主被写体側を撮像対象とするものである。

第１の光学系１Ａの後段には、ＣＣＤやＣＭＯＳなどの固体撮像素子からなる第１の撮像素子（第１の撮像手段）５Ａが配置されている。第１の光学系１Ａを通過することで導かれた被写体の光学像は第１の撮像素子５Ａに結像し、第１の撮像素子５Ａは光電変換によって光学像に応じた電気信号（以下、第１のアナログ画像信号と称す）を出力する。

第１の撮像素子５Ａには第１のＡ／Ｄ変換部６Ａが接続されている。第１の撮像素子５Ａから受けた第１のアナログ画像信号は、第１のＡ／Ｄ変換部６ＡによってＡ／Ｄ変換されて第１のデジタル画像信号（第１の画像データ）となる。

第１のＡ／Ｄ変換部６Ａには第１の画像処理部７Ａが接続されている。第１の画像処理部７Ａは、第１のＡ／Ｄ変換部６Ａから受けた第１のデジタル画像信号に対して、シェーディングなどの各種センサ補正処理や、色補正、輪郭強調、画素補間などの各種の画像処理を施す。

一方、第２の光学系１Ｂは、フォーカスレンズ群８を有している。なお、第２の光学系１Ｂは、撮影者（ユーザ）側を撮像対象とするものである。

第２の光学系１Ｂの後段には、ＣＣＤやＣＭＯＳなどの固体撮像素子からなる第２の撮像素子（第２の撮像手段）５Ｂが配置されている。第２の光学系１Ｂを通過することで導かれた被写体の光学像は第２の撮像素子５Ｂに結像して、第２の撮像素子５Ｂは光電変換によって光学像に応じた電気信号（以下、第２のアナログ画像信号と称す）を出力する。

第２の撮像素子５Ｂには第２のＡ／Ｄ変換部６Ｂが接続されている。第２の撮像素子５Ｂから受けた第２のアナログ画像信号は、第２のＡ／Ｄ変換部６ＢによってＡ／Ｄ変換されて第２のデジタル画像信号（第２の画像データ）となる。

第２のＡ／Ｄ変換部６Ｂには第２の画像処理部７Ｂが接続されている。第２の画像処理部７Ｂは、第２のＡ／Ｄ変換部６Ｂから受けた第２の画像データに対して、シェーディングなどの各種センサ補正処理や、色補正、輪郭強調、画素補間などの各種の画像処理を施す。

本実施形態では、第１の光学系１Ａから第１の撮像素子５Ａまでの第１の撮像ユニットをメインカメラＡとする。また、第２の光学系１Ｂから第２の撮像素子５Ｂまでの第２の撮像ユニットをサブカメラＢと称する。

なお、本実施形態では、カメラ１００に対して、図１を用いて前述した表示部１４が配置されている側とは反対側の被写体を、第１の撮像ユニットであるメインカメラＡで撮像する。また、カメラ１００に対して、表示部１４が配置されている側の被写体を、第２の撮像ユニットであるサブカメラＢで撮像する。

以上説明した構成はその要旨の範囲で種々の変形が可能である。例えば、本実施形態では、カメラ１００が大型化することを防ぐために、サブカメラＢは、ズームレンズや絞りが設けられていない単純な構成としたが、これらを設けるような構成であっても良い。

また、本実施形態では、デジタル画像信号（画像データ）に対する画像処理について言及したが、アナログ画像信号に種々の画像処理を施すような構成であっても良い。

図２に戻って、第１の画像処理部７Ａおよび第２の画像処理部７Ｂは、バス９を介して合成処理部１０に接続されている。第１および第２のデジタル画像データはバス９を介して合成処理部１０に与えられる。そして、合成処理部１０は、第１および第２の画像データを合成することで合成画像データを生成する。この合成画像データは、所定フォーマットに変換されて一時的にメモリ（ＶＲＡＭ）１１に記録される。

なお、前述した第１の画像データおよび第２の画像データも、所定フォーマットに変換されてメモリ１１に一時的に記録される。

メモリ１１はＤＲＡＭなどの記録素子からなる記録部であり、バス９を介してカメラ１００内の各部へと接続されている。メモリ１１には本実施形態において使用される種々のデータの格納と、カメラ１００の撮影処理に応じて出力されるデータの記録が行われる。例えば、カメラ１００内の各部の駆動タイミングや種々の露出条件、カメラ１００内の処理で使用する算出式が、メモリ１１に格納されている。また、図３や図４に示すフローと同様の動作を指示するためのプログラムや、図６に示す照明画像の設定条件などのデータがメモリ１１に格納されている。

また、バス９にはＤ／Ａ変換部１３が接続されている。Ｄ／Ａ変換部１３は、メモリ１１に記録された画像データを読み出してアナログ信号に変換した後に、再生出力に適した信号である表示用の画像信号（表示画像）に変換する。そして、この表示画像は図１を用いて前述した表示部１４に表示される。

表示部１４はＤ／Ａ変換部１３の後段に接続されている。表示部１４は、合成画像データ、第１の画像データおよび第２の画像データに応じた表示画像を表示する。また、表示部１４は、後述する照明画像も表示させることができる。なお、後述の表示制御部１２によって表示部１４に画像を表示させる。

バス９には圧縮／伸長部（記録用Ｉ／Ｆ）１５が接続されている。圧縮／伸長部１５はメモリ１１に記録された画像データを読み出して、当該画像データに対して圧縮処理および符号化処理を施して符号化画像データとする。

圧縮／伸長部１５は、カメラ１００に対して挿抜可能なＳＤカードなどの記録媒体１６と接続可能である。カメラ１００に記録媒体１６が挿入された状態で、圧縮／伸長部１５で処理を施した符号化画像データが記録媒体１６に記録される。

圧縮／伸長部１５は記録媒体１６に記録された符号化画像データを読み出して、当該符号化画像データに対して復号化処理および伸長処理を施すことで画像データとする。そして、圧縮／伸長部１５は、当該画像データをメモリ１１に一時的に記録する。

また、バス９には顔検出部１７が接続されている。顔検出部１７は、第１の画像処理部７Ａから第１の画像データ、および第２の画像処理部７Ｂから第２の画像データをそれぞれ受け、これら第１および第２の画像データにおける主被写体および撮影者の顔位置および顔の大きさなどの顔情報を検出する。検出された顔情報は顔情報信号として、バス９に接続された測光演算部１９に送られる。

本実施形態における顔情報としては、目および眉などの顔を特徴付ける部位を画探索して、画像における人物の顔の位置を求める。さらに、顔検出部１７は、顔の大きさおよび傾きなどを、顔を特徴付ける部位間隔などの位置関係に応じて求める。これら顔情報は、公知の顔検出方法を用いて取得される。

また、バス９には測光演算部１９が接続されている。測光演算部１９は、第１の画像データと第２の画像データを受け、メインカメラＡで撮像した被写体の輝度値である第１の輝度値Ｘ１と、サブカメラＢで撮像した被写体の輝度値である第２の輝度値Ｘ２を算出する。

なお、本実施形態では測光演算部１９は、メインカメラＡが撮像する被写体の輝度とサブカメラＢが撮像する被写体を測光し、それぞれの被写体の輝度値を算出する測光手段であるが、これに限定されるものではない。例えば、メインカメラＡが撮像する被写体の測光をする測光演算部と、サブカメラＢが撮像する被写体の測光をする測光演算部とを、それぞれ別に設けるような構成において、これら２つの測光演算部を測光手段とするような構成であっても良い。

輝度値の算出方法の詳細とし、測光演算部１９は、メインカメラＡとサブカメラＢで取得したそれぞれの画像（一画面分）を複数のブロックに分割する。そして、測光演算部１９は、これらのブロックごとに平均輝度値を算出する。算出した平均輝度値と基準となるブロック（基準ブロック）との輝度値の差、および、ブロックの位置に応じた重みづけを行った後、輝度値の加算処理を行う。そして、重みづけ加算された輝度値を、後述の撮影処理などに用いる。

なお、本実施形態では、ブロックの位置に応じた重みづけとして、顔検出部１７によって検出された顔領域にあたるブロックの重みづけの度合いを、他のブロックよりも強くする。すなわち、第１の輝度値Ｘ１と第２の輝度値Ｘ２は、第１の画像データおよび第２の画像データの顔領域の輝度値に基づいて算出される。なお、輝度値の算出方法は、公知の手段であればどのようなものを使用しても良い。

測光演算部１９は、メインカメラＡを介して取得した第１の画像データの第１の輝度値Ｘ１と、サブカメラＢを介して取得した第２の画像データの第２の輝度値Ｘ２との差分（輝度差）を算出し、ＣＰＵ１８およびメモリ１１へと送る。

さらに、測光演算部１９はＣＰＵ１８の制御下において、前述した重みづけ加算された各画像データの輝度値に対する露出量を算出する。そして、算出した露出量に応じたメインカメラＡの露出量の制御や処理が、ＣＰＵ１８からカメラ１００内の各部に対して指示される。

図２に戻り、バス９にはストロボ発光部２０が接続されている。ＣＰＵ１８は、前述の測光演算部１９で算出された第１の輝度値Ｘ１および、輝度値Ｘ１に対する露出量に応じて、ストロボ発光部２０を発光するか否かを判定する。

また、表示制御部１２はバス９に接続され、後段に前述したＤ／Ａ変換部１３および表示部１４が接続されている。表示制御部１２は、バス９を介してタイミング発生部（不図示）からの信号に応じて、メモリ１１に保存された第１の画像データおよび第２の画像データをＤ／Ａ変換部１３においてデジタル画像データから表示画像へと変換させる。

そして、表示制御部１２は、変換されたアナログ画像データを表示部１４に表示させる。以下、第１の画像データからＤ／Ａ変換された表示画像を単に第１の画像と称し、第２の画像データからＤ／Ａ変換された表示画像を単に第２の画像と称する。

なお、表示制御部１２がメモリ１１（ＶＲＡＭ）を読み出し、上述した処理を実行することで、表示部１４に表示画像が更新される。この動作を連続的におこなうことで、表示部１４に表示画像を逐次表示（ライブビュー表示）をさせることができる。なお、動画を取得する場合は、取得した動画のデータをメモリ１１および記録媒体１６に記録する。

また、表示制御部１２は、第１の画像の撮影指示（例えば、図１のレリーズスイッチ１０２の押下）に応じて、メインカメラＡを介して第１の画像データの静止画を取得し、当該取得した第１の画像を表示部１４にレビュー表示させる。例えば、表示部１４に、第１の画像のライブビュー表示をさせている状態で第１の画像の静止画の取得（撮影）が指示されると、当該第１の画像のライブビュー表示が終了する。そして、メインカメラＡを介して取得した第１の画像の静止画が表示部１４にレビュー表示される。

なお、ＶＩＤＥＯ用やＨＤＭＩ（登録商標）用の出力端子（不図示）とケーブル（不図示）を介して、カメラ１００の外部に設けられた外部表示部（不図示）に、上述した種々の表示用の画像を表示させるような構成でも良い。

さらに、表示制御部１２は、前述した第１の輝度値Ｘ１と第２の輝度値Ｘ２との輝度差に応じて、第２の画像を取得する際にサブカメラＢの側を照明するための照明画像を表示部１４に表示させることも可能である。この詳細については後述する。

また、バス９にはＣＰＵ１８が接続されている。ＣＰＵ１８は、バス９に接続されたカメラ１００内の各部を統括的に制御する。本実施形態では、ＣＰＵ１８は、第１画像処理部７Ａ、第２の画像処理部７Ｂ、合成処理部１０、表示制御部１２、顔検出部１７、測光演算部１９に対する制御を指示する。なお、上述したような制御部や処理部を設けずに、ＣＰＵ１８がカメラ１００内の各部の駆動を制御するような構成であっても良い。また、ＣＰＵ１８を設けずに上述した各部が連動して、カメラ１００の制御（処理）をおこなうような構成であってもよい。

なお、本実施形態では、静止画および動画の撮影指示に応じて、前述した被写体像の撮像工程からＡ／Ｄ変換工程、画像処理工程、画像記録工程、画像表示工程などが実行される。

以下、本発明の第１実施形態における撮影処理について図３〜５を参照して説明する。図３は本発明を実施した撮像装置の第１実施形態であるカメラ１００の撮影処理を説明するフローチャートである。

図４は本発明を実施した撮像装置の第１実施形態であるカメラ１００のサブカメラＢの側での撮影処理を説明するフローチャートである。

図５は、本発明を実施した撮像装置の第１実施形態であるカメラ１００における表示画像を説明する図であって、時間の経過における第１の画像、第２の画像、合成画像の様子を説明している。

なお、本実施形態では、メインカメラＡの側で撮像する主被写体の明るさの方が、サブカメラＢの側で撮像する撮影者の明るさよりも明るい場合について説明する。

図３に図示するように、ユーザによって前述の電源スイッチ１０１がオン状態にされると、ステップＳ１００でＣＰＵ１８は撮影処理を開始する。

撮影処理が開始されると、ＣＰＵ１８はカメラ１００内の各部に駆動を指示し、メインカメラＡとサブカメラＢの撮像準備を完了する。

ステップＳ１０１で表示制御部１２は、メインカメラＡを介して取得した第１の画像を表示部１４にライブビュー表示させる（図５〈Ａ〉）。なお、第１の撮像素子５Ａでの主被写体の撮像から、表示部１４に表示画像を表示するまでの工程は前述した通りに行われるものとする。

さらに、ステップＳ１０１でＣＰＵ１８は、サブレンズＢを介して第２の画像を取得させる（図５〈Ｂ〉）。ここで、図５の〈Ｂ〉で表す図は、サブカメラＢで撮像した被写体が暗い状態であることを示している。なお、このタイミングでは、表示部１４に第２の画像は表示させない。また、第２の撮像素子５Ｂによる撮影者の撮像から、表示部１４に表示画像を表示するまでの工程は前述した通りに行われるものとする。

次に、ステップＳ１０２で測光演算部１９は、ステップＳ１０１で取得された第２の画像データをメモリ１１から読み出し、第２の画像データのブロック毎に、平均輝度値を算出する。

次に、ステップＳ１０３で顔検出部１７は、ステップＳ１０１で取得された第２の画像データをメモリ１１から読み出し、第２の画像データにおける顔情報を検出する。顔検出部１７によって検出された顔情報は測光演算部１９に送られる。

次に、ステップＳ１０４で測光演算部１９は、先に算出された顔情報と、ブロックごとの平均輝度値から、第２の画像データにおける重みづけ加算された輝度値を算出する。すなわち、測光演算部１９は、前述したように第２の画像データの第２の輝度値Ｘ２を算出する。

次に、ステップＳ１０５でＣＰＵ１８は、ユーザ（撮影者）によって主被写体の（静止画）撮影指示があるか否かを判定する。ここで、静止画の撮影指示とは、前述のレリーズスイッチ１０２の押下などである。

主被写体の静止画の撮影が指示された場合はステップＳ１０５へと進み、撮影指示がない場合はステップＳ１０１に戻る。すなわち、図３に図示するステップＳ１０１からＳ１０４までの工程は、カメラ１００の電源がオン状態にされてから主被写体の静止画の撮影が指示されるまでの動作である。そして、カメラ１００の電源がオン状態の場合は、この動作が常に行われる。

次に、ステップＳ１０６でＣＰＵ１８は、メインカメラＡ（第１の撮像素子５Ａ）を介して第１の画像データを取得させ、取得した第１の画像データをメモリ１１に格納する（図５〈Ｃ〉）。

次に、ステップＳ１０７で測光演算部１９は、ステップＳ１０６で取得された第１の画像データをメモリ１１から読み出し、第１の画像データのブロック毎に、平均輝度値を算出する。

次に、ステップＳ１０８で顔検出部１７は、ステップＳ１０６で取得された第１の画像データをメモリ１１から読み出す。読み出された第１の画像データにおける顔情報を検出し、測光演算部１９に顔情報を送る。

次に、ステップＳ１０９で測光演算部１９は、先に算出された顔情報と、ブロックごとの平均輝度値から、第１の画像データにおける重みづけ加算された輝度値を算出する。すなわち、測光演算部１９は、第１の画像データの第１の輝度値Ｘ１を算出する。

次に、ステップＳ１１０で測光演算部１９は、先に算出した第１の画像データの第１の輝度値Ｘ１と第２の画像データの第２の輝度値Ｘ２から、第１の輝度値Ｘ１と第２の輝度値Ｘ２の輝度差Ｄｙを算出する（Ｄｙ＝Ｘ１−Ｘ２）。すなわち、主被写体の明るさ（輝度値）と撮影者の明るさ（輝度値）の差を算出する。

次に、ステップＳ１１１でＣＰＵ１８は、サブカメラＢを介して第２の撮像素子５Ｂに第２の画像データを取得させ、取得した第２の画像データをメモリ１１に格納する。

以下、図４を参照して、撮影者の撮影処理についての詳細を説明する。図４に図示するように、ステップＳ２００で撮影者の撮影処理を開始する。次に、ステップＳ２０１で表示制御部１２は、図３で算出した輝度差Ｄｙが、表示部１４に照明画像を表示するための閾値となる輝度差（第１の輝度差）Ｔｈ１以上であるか否かを判定する。

輝度差Ｄｙが第１の輝度差Ｔｈ１よりも小さい（Ｄｙ＜Ｔｈ１）と判定された場合はステップＳ２０５に進み、輝度差Ｄｙが第１の輝度差以上である（Ｄｙ≧Ｔｈ１）と判定された場合はステップＳ２０２に進む。

輝度差Ｄｙ＜Ｔｈ１の場合は、第１の画像と第２の画像の輝度差が小さいため、メインカメラＡで撮像する主被写体と、サブカメラＢで撮像する撮影者の明るさに大きな差がない状態である。したがって、第１の画像と第２の画像とを合成して生成された合成画像は、違和感が生じない良好なものとなる。

なお、第１の輝度差Ｔｈ１は、合成画像に違和感が生じない程度の輝度差であれば良い。例えば、第１の画像と第２の画像とを並べて表示した際に、二つの画像の明るさに大きな差がないような輝度差であれば、どの様なものでも良い。

輝度差Ｄｙ≧Ｔｈ１の場合は、第１の画像と第２の画像の輝度差が大きいため、メインカメラＡで撮像する主被写体と、サブカメラＢで撮像する撮影者の明るさに差がある状態である。したがって、双方の被写体を撮像した画像の明るさの違いにより、第１の画像と第２の画像とを合成して生成された合成画像は、違和感が生じるものとなる可能性がある。すなわち、サブカメラＢによって撮影者を撮像した第２の画像の明るさは、メインカメラＡによって主被写体を撮像した第１の画像の明るさよりも暗くなってしまう。

そこで、本実施形態では、サブカメラＢによって第２の画像を取得する際に、サブカメラＢの側に配置された表示部１４に照明画像を表示させることで上述の問題を解決する。すなわち、輝度差Ｄｙが第１の輝度差Ｔｈ１よりも小さい輝度差である場合は表示部１４に照明画像を表示させないで第２の画像を取得する。そして、輝度差Ｄｙが第１の輝度差Ｔｈ１以上の輝度差である場合は表示部１４に照明画像を表示させて第２の画像を取得する。

図４に戻り、ステップＳ２０２で表示制御部１２は、表示部１４に表示させる照明画像を設定する。以下、ステップＳ２０２で設定される照明画像の詳細について図５、６を参照して説明する。

図５に図示するように、第１の画像のライブビュー表示の終了からレビュー表示の開始までの間で、表示部１４に照明画像を表示させる（図５〈Ｄ〉）。

上述した図５〈Ｄ〉の期間は、静止画の撮影に応じて、ライブビュー表示とレビュー表示とを切り替える期間である。従来、第１の画像を連続的に表示させるライブビュー表示中に静止画の撮影が指示された場合、第１の画像のライブビュー表示の終了後、無表示の期間を挟んで、すぐに第１の画像のレビュー表示を開始していた。すなわち、ライブビュー表示の終了からレビュー表示の開始までの期間において、特定の画像の表示は行っていなかった。

本実施形態では、この期間内において、表示部１４に照明画像を表示させるため、照明画像を表示するための期間を新たに設ける必要がない。

表示部１４に表示させる照明画像の明るさは、輝度差Ｄｙに応じて白色と黒色の階調のうち、図６のグラフに従って設定された任意の階調レベルの明るさで表現される。

図６は、本発明を実施した撮像装置の第１実施形態であるカメラ１００で表示させる照明画像を説明した図であって、輝度（信号）を８ビットの２５６段階で表現した例を示している。図６において、横軸は輝度差Ｄｙを示し、縦軸は輝度差Ｄｙに応じた照明画像の階調レベルを示している。なお、図６に図示するように、第１の輝度差Ｔｈ１は例示的に、照明画像が３２レベルの明るさである場合に、主被写体の明るさと撮影者の明るさとの差が違和感の生じない程度となる輝度差Ｄｙであるとする。

図６に図示するように、輝度差Ｄｙが大きくなるに従って、表示部１４に表示させる照明画像の階調レベルを変化させ、照明画像を明るくする。例えば、輝度差Ｄｙが第１の輝度差Ｔｈ１である場合に表示させる照明画像の明るさよりも、輝度差Ｄｙが図中の地点Ｐ１における輝度差（第２の輝度差）Ｔｈ２である場合に表示させる照明画像の明るさを明るくさせる。なお、第１の輝度差Ｔｈ１よりも第２の輝度差Ｔｈ２の方が、第１の画像の輝度と第２の画像の輝度の輝度差は大きい。

すなわち、輝度差Ｄｙが大きくなるに従って、白色の成分を強めた照明画像を表示部１４に表示させる。逆に、輝度差Ｄｙが小さくなるに従って、黒色の成分を強めた照明画像を表示部１４に表示させる。

なお、図６に図示するように、本実施形態では、輝度差Ｄｙが第１の輝度差Ｔｈ１よりも更に小さい第３の輝度差Ｔｈ３（地点Ｐ２）である場合、照明画像を０レベルの明るさとする。すなわち、表示部１４には何も表示させない。したがって、本実施形態において表示部１４に表示させる照明画像の色合いは、実質的に灰色から白色のうちから設定されることになる。

以上の構成に基づいて、照明画像を表示させる期間と、表示部１４に表示させる照明画像の明るさをそれぞれ設定する。

図４に戻り、ステップＳ２０２で照明画像の設定が終了したら、ステップＳ２０３で表示制御部１２は、表示部１４に先に設定した照明画像を表示させる（図５〈Ｄ〉）。

次に、ステップＳ２０４でＣＰＵ１８は、サブカメラＢを介して第２の画像データを取得させ、取得した第２の画像データをメモリ１１に格納する（図５〈Ｅ〉）。そして、ステップＳ２０５でＣＰＵ１８は撮影者の撮影処理を終了する。以上が、本実施形態における撮影者の撮影処理である。

図３に戻り、ステップＳ１１２で合成処理部１０は、先に取得した第１の画像と第２の画像に合成処理を施して合成画像を生成する。生成した合成画像（合成画像データ）はメモリ１１に記録される。

次に、ステップＳ１１３で表示制御部１２は、先に生成した合成画像データをメモリ１１から読み出し、表示用のアナログ信号に変換した合成画像を表示部１４に表示させる（図５〈Ｆ〉）。この際、表示部１４に第１の画像（主被写体）のみをレビュー表示させても良い。（図５〈Ｇ〉）。

なお、本実施形態において、表示部１４に表示させる合成画像は、図５〈Ｆ〉に示すように、第１の画像の被写体（主被写体）と第２の画像の被写体（撮影者）とが略同じ大きさとなるようなものであるが、これに限定されるわけではない。例えば、第１の画像をメイン画像とし、第２の画像をサブ画像とする合成画像（ＰｉｎＰ画像）でも良い。

次に、ステップＳ１１４でＣＰＵ１８は、現在の撮影モード（静止画撮影モード）からの切り替え指示（例えば、動画撮影モードなどへの切り替え指示）がされたか否かを判定する。撮影モード切り替えがあるとＣＰＵ１８が判定した場合は、ステップＳ１１５でＣＰＵ１８は現在の撮影モードを終了し、撮影処理を終了する。撮影モード切り替えがないとＣＰＵ１８が判定した場合は、ステップＳ１０１に戻り、第１の画像のライブビュー表示（図５〈Ｈ〉）と、第２の画像の取得（図５〈Ｉ〉）を継続する。以上が、本実施形態の撮影処理である。

以上説明したように、本実施形態のカメラ１００は、主被写体の明るさに応じて表示部１４に照明画像を表示することで、主被写体の明るさに応じた明るさで撮影者を撮像することができる。

この構成によって、例えば、周囲が暗いため、ストロボ発光部２０を発光させてメインカメラＡで主被写体を撮像したとしても、主被写体と撮影者の明るさに大きな差がない良好な画像を取得することができる。

また、撮影者の背後に光源があり撮影者が逆光状態となるような場合も、主被写体と撮影者の明るさに大きな差がない良好な画像を取得することができる。

したがって、本実施形態のカメラ１００は、複数の撮像手段によってそれぞれ異なる側を撮影する場合であっても、サブカメラＢに対応した専用の発光装置を設けることなく、良好な明るさでの撮影を可能にすることができる。

なお、本実施形態では、サブカメラＢを介して取得した第２の画像はライブビュー表示しないような構成であるが、これに限定されるものではない。例えば、メインカメラＡを介して取得した第１の画像と同時に、第２の画像をライブビュー表示するような構成であっても良い。

また、本実施形態では、照明画像を表示部１４の表示枠に合わせて表示させるような構成であるが、これに限定されるものではない。例えば、第１の画像のライブビュー表示の終了とレビュー表示の開始までの期間において、表示部１４の表示枠内の一部分に照明画像を表示するような構成であっても良い。

また、本実施形態では、輝度差Ｄｙが第１の輝度差Ｔｈ１よりも小さい場合は、第１の画像のライブビュー表示の終了からレビュー表示の開始まで期間において、表示部１４に何も表示させないような構成であるが、これに限定されるものではない。例えば、輝度差Ｄｙが第１の輝度差Ｔｈ１よりも小さい場合であっても、当該期間に何らかの表示をさせておくような構成であっても良い。また、種々の情報を示すために表示部１４に表示させているアイコンなどの表示画像の明るさを、輝度差Ｄｙに応じて変更するような構成であっても良い。

さらに、本実施形態では、輝度差Ｄｙに応じて、表示部１４に表示させる照明画像の階調レベルを変化させることで、主被写体と撮影者の明るさに大きな差がない良好な画像を取得するような構成であるが、これに限定されるものではない。

例えば、表示部１４が、バックライトを備えた液晶ディスプレイなどである場合は、輝度差Ｄｙに応じて当該バックライトの明るさを変更するような構成であっても良い。この場合、輝度差Ｄｙが大きくなるほど、バックライトの明るさを明るくさせるような構成であれば良い。

なお、本実施形態では、第１の画像のライブビュー表示の終了からレビュー表示の開始までの期間において、表示部１４に照明画像を表示させるような構成であるが、これに限定されるものではない。

例えば、第１の画像の撮像と同じタイミングで、表示部１４に照明画像を表示させるような構成であっても良い。この場合、撮影者による、第１の画像の撮像（ＳＷ２など）が指示された際に表示部１４に照明画像を表示させ、第１の画像と第２の画像の両方を撮像するような構成が考えられる。

また、第１の画像を撮像するよりも前のタイミングで、表示部１４に照明画像を表示させるような構成であっても良い。この場合、撮影者による、第１の画像の撮像準備（ＳＷ１など）が指示された際に表示部１４に照明画像を表示させ、第２の画像を撮像する。そして、第１の画像の撮像（ＳＷ２など）が指示された際に第１の画像を撮像するような構成が考えられる。更に、撮影者による被写体の撮像（ＳＷ２）が指示された後に、第２の画像、第１の画像の順で、それぞれの画像を取得するような構成も考えられる。通常、撮影者による被写体の撮像（ＳＷ２）の指示から第１の画像の露光が開始されるまでの間では、絞り４や不図示のシャッタなどを駆動させるための所謂レリーズタイムラグが発生する。上述したような構成であれば、このレリーズタイムラグにおいて第２の画像を取得させることも可能となる。

さらに、本実施形態では、撮影者による主被写体の撮像指示がされた場合に、メインカメラＡで撮像した被写体の輝度値である第１の輝度値Ｘ１を算出するような構成であるが、これに限定されるものではない。例えば、サブカメラＢで撮像した被写体の輝度値である第２の輝度値Ｘ２と同様に、電源スイッチ１０１がオン状態にされたことに応じて、輝度値Ｘ１を算出するような構成であっても良い。すなわち、第１の画像のライブビュー表示中に、輝度差Ｄｙを算出するために用いる第１の輝度値Ｘ１と第２の輝度値Ｘ２とを、常に算出しておく構成であっても良い。この場合、図３のステップＳ１０７〜Ｓ１０９の工程を、ステップＳ１０２〜Ｓ１０４の工程と並列しておこなうような構成となる。

（第２実施形態）
本発明の第２実施形態における撮影処理について図７〜１０を参照して説明する。図１、図２に図示したようなカメラ１００の基本構成は前述の第１実施形態と同様であるので説明は省略する。なお、本実施形態では、図７や図９に示すフローと同様の動作を指示するためのプログラムや、図１０に示す照明画像の設定条件などのデータがメモリ１１に記憶されている。

図７は本発明を実施した撮像装置の第２実施形態であるカメラ１００の撮影処理を説明するフローチャートである。

図８は、本発明を実施した撮像装置の第２実施形態であるカメラ１００における表示画像を説明する図であって、時間の経過における第１の画像、第２の画像、合成画像の様子を説明している。

本実施形態では、主被写体および撮影者の動画を取得する場合の処理について説明する。なお、本実施形態でも、メインカメラＡの側で撮像する主被写体の明るさの方が、サブカメラＢの側で撮像する撮影者の明るさよりも明るい場合について説明する。

図７に図示するように、ユーザによって、前述の電源スイッチ１０１がオン状態にされると、ステップＳ３００でＣＰＵ１８は撮影処理を開始する。そして、撮影処理が開始されると、ＣＰＵ１８はカメラ１００内の各部に駆動を指示し、メインカメラＡとサブカメラＢの撮像準備を完了する。

ステップＳ３０１で表示制御部１２は、メインカメラＡを介して取得した第１の画像を表示部１４にライブビュー表示させる（図８〈Ａ〉）。また、ステップＳ１０１で表示制御部１２は、サブカメラＢを介して第２の画像を取得させる（図８〈Ｂ〉）。なお、このタイミングでは、表示部１４に第２の画像を表示させない。

次に、ステップＳ３０２で測光演算部１９は、ステップＳ３０１で取得された第１の画像データと第２の画像データをメモリ１１から読み出し、第２の画像データのブロックごとに平均輝度値を算出する。

次に、ステップＳ３０３で顔検出部１７は、ステップＳ３０１で取得された第１の画像データと第２の画像データをメモリ１１から読み出し、第１の画像データと第２の画像データにおける顔情報を検出する。検出された顔情報は測光演算部１９に送られる。

次に、ステップＳ３０４で測光演算部１９は、先に算出された顔情報と、ブロックごとの平均輝度値から、第１の画像データと第２の画像データにおける重みづけ加算された輝度値を算出する。すなわち、測光演算部１９は、第１の画像データの第１の輝度値Ｘ１と第２の画像データの第２の輝度値Ｘ２を算出する。

次に、ステップＳ３０５で測光演算部１９は、算出した第１の画像データの第１の輝度値Ｘ１と、第２の画像データの第２の輝度値Ｘ２から、第１の輝度値Ｘ１と第２の輝度値Ｘ２の輝度差Ｄｙを算出する（Ｄｙ＝Ｘ１−Ｘ２）。すなわち、主被写体の明るさ（輝度値）と撮影者の明るさ（輝度値）の差を算出する。

次に、ステップＳ３０６でＣＰＵ１８は、サブカメラＢの側における照明画像表示処理を実行する。以下、図９を参照して、この照明画像表示処理について説明する。図９は本発明を実施した撮像装置の第２実施形態であるカメラ１００における照明画像表示処理を説明するフローチャートである。

図９に図示するように、ステップＳ４００で撮影者の撮影処理を開始した後、ステップＳ４０１で表示制御部１２は、図７で算出した輝度差Ｄｙが、表示部１４に照明画像を表示するための閾値となる輝度差（第１の輝度差）Ｔｈ１以上であるか否かを判定する。

輝度差Ｄｙが第１の輝度差Ｔｈ１よりも小さい（Ｄｙ＜Ｔｈ１）と判定された場合はステップＳ４０４に進み、輝度差Ｄｙが第１の輝度差以上である（Ｄｙ≧Ｔｈ１）と判定された場合はステップＳ４０２に進む。

前述した第１実施形態と同様に、輝度差Ｄｙ＜Ｔｈ１の場合は、主被写体の明るさと撮影者の明るさに大きな差がない状態なので、第１の画像と第２の画像とを合成して生成された合成画像は、違和感が少ない良好なものとなる。

また、輝度差Ｄｙ≧Ｔｈ１の場合は、主被写体の明るさと撮影者の明るさに差がある状態なので、第１の画像と第２の画像とを合成して生成された合成画像は、違和感が生じるものとなる可能性がある。

そこで、本実施形態では、サブカメラＢで被写体を撮像する際に、メインカメラＡを介して取得した第１の画像と照明画像とを、表示部１４に同時に表示させることで上述の問題を解決する。

すなわち、輝度差Ｄｙが第１の輝度差Ｔｈ１よりも小さい場合は、前述の第１実施形態と同様に、表示部１４に照明画像を表示させないで第２の画像を取得する。そして、輝度差Ｄｙが第１の輝度差Ｔｈ１以上の場合は、第１の画像と照明画像とを表示部１４に表示させた状態で第２の画像を取得する。

図９に戻り、ステップＳ４０２で表示制御部１２は、表示部１４に表示させる照明画像を設定する。以下、ステップＳ２０２で設定される照明画像の詳細について図１０を参照して説明する。

本実施形態では、メインカメラＡを用いて主被写体の動画を取得するので、第１実施形態で説明したようなタイミングで、表示部１４に照明画像を表示させることは出来ない。そこで、本実施形態では、メインカメラＡを介して取得した第１の画像を表示部１４に表示しつつ、当該第１の画像の外縁部分に照明画像を表示させる。なお、本実施形態では、表示部１４に表示させる照明画像は白色である。

図１０は、本発明を実施した撮像装置の第２実施形態であるカメラ１００において表示させる照明画像の大きさの割合を説明した図であって、輝度（信号）を８ビットの２５６段階で表現した例を示している。図１０において、横軸は輝度差Ｄｙを示し、縦軸は輝度差Ｄｙに応じて表示部１４に表示させる、第１の画像の大きさ（の割合）を示している。

図１０に図示するように、輝度差Ｄｙが大きくなるに従って、表示部１４に表示させる照明画像の大きさの割合を大きくさせる。例えば、輝度差Ｄｙが第１の輝度差Ｔｈ１である場合よりも、輝度差Ｄｙが図中の地点Ｐ３における輝度差（第２の輝度差）Ｔｈ２である場合の方が、表示部１４に照明画像を大きく表示させる。ここで、第２の輝度差Ｔｈ２は、第１の輝度差Ｔｈ１よりも輝度差が大きいものとする。

なお、本実施形態では、表示部１４において、第１の画像の外縁部分の全ての領域に照明画像を表示させる構成である。したがって、輝度差Ｄｙの変化によって照明画像の大きさが変化することに伴い、表示部１４に表示させる第１の画像の大きさも変化する。

例えば、輝度差Ｄｙが大きくなると、表示部１４の表示枠の中央に表示される第１の画像は小さくなり、当該第１の画像の外縁部分に表示される照明画像は大きくなる。逆に、輝度差Ｄｙが小さくなると、第１の画像は表示部１４に大きく表示され、当該第１の画像の外縁部分に表示させる照明画像は小さくなる。

したがって、メインカメラＡを介して取得した第１の画像の明るさに応じて、サブカメラＢ側を照明する照明画像の明るさを変化させて、撮影者を適切な明るさで撮影することができる。

なお、図１０に図示するように、本実施形態では、輝度差Ｄｙが第１の輝度差Ｔｈ１よりも更に小さい第３の輝度差Ｔｈ３（地点Ｐ４）である場合、表示部１４の表示枠には照明画像を表示させない。

また、図１０に図示するように、ライブビュー表示中の第１の画像の視認性を補償するために、表示部１４に表示する照明画像の上限は８０％に設定している。すなわち、輝度差Ｄｙが大きい場合であっても、表示部１４の表示枠の２０％には、常に第１の画像をライブビュー表示させる。なお、表示部１４に表示させるおける照明画像の大きさの上限は撮影者が自由に設定できるような構成であっても良い。

以上の構成に基づいて、表示部１４に表示させる照明画像の大きさの割合（照明画像の情報）を設定する。

図９に戻り、ステップＳ４０２で照明画像の設定が終了したら、ステップＳ４０３で表示制御部１２は、先に設定した照明画像を表示部１４に表示させる（図８〈Ｃ〉）。そして、ステップＳ４０４でＣＰＵ１８は照明画像表示処理を終了する。以上が、本実施形態における照明画像表示処理である。

図３に戻り、ステップＳ３０７でＣＰＵ１８は、ユーザ（撮影者）によって、主被写体の動画撮影が指示されたか否かを判定する。ここで、動画の撮影指示はレリーズスイッチ１０２や、動画撮影スイッチ（不図示）の押下などである。

ステップＳ３０７において、動画撮影が指示されていないとＣＰＵ１８が判定した場合は、ステップＳ３１１に進む。

ステップＳ３０７において、動画撮影が指示されたとＣＰＵ１８が判定した場合は、ステップＳ３０８に進み、ＣＰＵ１８はメインカメラＡとサブカメラＢによる動画撮影を開始する。そして、取得された第１の画像データと第２の画像データを随時、メモリ１１と記録媒体１６に記録させる（図８〈Ｄ〉〜〈Ｇ〉）。

次に、ステップＳ３０９でＣＰＵ１８は、ユーザ（撮影者）によって動画撮影の終了が指示されたか否か、または、動画の撮影時間が制限時間に達したか否かを判定する。

ＣＰＵ１８が動画撮影を終了させないと判定した場合は、ステップＳ３０９に戻り、動画撮影を継続する。ＣＰＵ１８が動画撮影を終了させると判定した場合はステップＳ３１０に進む。

次に、ステップＳ３１０で合成処理部１０は、先に取得した第１の画像データと第２の画像データに合成処理を施して合成画像データを生成する。なお、取得した画像の再生時などにおいて、生成した合成画像データをメモリ１１から読み出し、表示用のアナログ信号に変換した合成画像を、表示部１４に連続的に表示させることができる（図８〈Ｈ〉〜〈Ｉ〉）。

次に、ステップＳ３１１でＣＰＵ１８は、現在の撮影モード（動画撮影モード）からの切り替え指示（例えば、静止画撮影モードなどへの切り替え指示）がされたか否かを判定する。ＣＰＵ１８が、撮影モード切り替えがあると判定した場合は、ステップＳ３１２でＣＰＵ１８は現在の撮影モードを終了する。そして、ＣＰＵ１８は撮影処理を終了する。ＣＰＵ１８が、撮影モード切り替えがないと判定した場合は、表示部１４における照明画像の表示を終了する。そして、ステップＳ３０１に戻り、第１の画像のライブビュー表示（図８〈Ｊ〉）と、第２の画像の取得（図８〈Ｋ〉）を継続する。以上が、本実施形態の撮影処理である。

以上説明したように、本実施形態のカメラ１００は、主被写体の明るさに応じて表示部１４に照明画像を表示することで、主被写体の明るさに応じた明るさで撮影者を撮影することができる。この構成によって、主被写体と撮影者の明るさに大きな差がない良好な画像を取得することができる。

また、本実施形態のカメラ１００は、メインカメラＡとサブカメラＢによって、主被写体と撮影者を動画撮影する場合であっても、主被写体と撮影者の明るさに大きな差がない良好な動画を取得することができる。

したがって、本実施形態のカメラ１００は、複数の撮像手段によってそれぞれ異なる側を撮影する場合であっても、サブカメラＢに対応した専用の発光装置を設けることなく、良好な明るさでの撮影を可能にすることができる。

なお、本実施形態では、表示部１４に照明画像を表示させる場合、当該照明画像の明るさは変更しない構成であるが、これに限定されるものではない。例えば、図９のステップＳ４０２の工程において、前述した第１実施形態と同様に、輝度差Ｄｙに応じて照明画像の階調を変化させるような構成であってもよい。この場合、照明画像の大きさの割合を加味した上で照明画像の階調を設定する。

また、本実施形態では、メインカメラＡとサブカメラＢの両方で動画の撮影をおこなう場合について説明したが、これに限定されるものではない。例えば、メインカメラＡとサブカメラＢのどちらか一方は静止画を撮影させるような構成であっても良い。

さらに、本実施形態の構成を、第１実施形態で前述したような主被写体と撮影者との静止画の撮影時に適用しても良い。この場合、ライブビュー表示の終了からレビュー表示の開始までの間に照明画像を表示する必要がない。したがって、第１の画像（主被写体）を取得するタイミングと略同一のタイミングで、第２の画像（撮影者）を取得することが出来る。

さらに、本実施形態では、照明画像を表示部１４に表示させる場合、図８〈Ｃ〉などに示すように、第１の画像を表示部１４の表示枠の略中央に表示するような構成であるがこれに限定されるものではない。例えば、表示部１４の表示枠に沿った一部分に第１の画像を表示させ、当該第１の画像が表示されている以外の部分（例えば、第１の画像の外縁部分の一部）に照明画像を表示させるような構成であっても良い。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

前述した実施形態では、メインカメラＡで撮像した主被写体の顔領域と、サブカメラＢで撮像した撮影者の顔領域において重みづけの度合いを強めるような構成であった。これは、メインカメラＡで撮像する主被写体と、サブカメラＢで撮像する撮影者の明るさ（輝度値）の違いを精度良く検出するための構成であるが、本発明はこれに限定されるものではない。

例えば、主被写体および撮影者がそれぞれメインカメラＡおよびサブカメラＢの画角の略中心に位置すると仮定すれば、各画像データにおいて、画角の中心に近いブロックの重みづけの度合いを強めるような構成であっても良い。この構成でも、メインカメラＡで撮像する主被写体の明るさと、サブカメラＢで撮像する撮影者の明るさとの違いを検出することが可能である。

さらに、本発明における重みづけの方法はこれらに限らず、メインカメラＡの側の主被写体の輝度値とサブカメラＢの側の撮影者の輝度値を検出できるような方法であれば、どの様なもの用いても良い。

また、前述した実施形態では、メインカメラＡとサブカメラＢとは、カメラ１００の筐体において、それぞれの撮像可能な被写体の方向が反対方向となるように構成されているがこれに限定されるものではない。例えば、カメラ１００の筐体において、撮像可能な被写体の方向がそれぞれ略９０度となるように、メインカメラＡとサブカメラＢが配置されるような構成であっても良い。

この場合、サブカメラＢは、表示部１４が配置されている側の被写体を撮像し、メインカメラＡはそれ以外の方向の被写体を撮像する。すなわち、カメラ１００の筐体において、表示部１４が配置された側の被写体をサブカメラＢで撮像し、サブカメラＢで撮像する被写体とは異なる側の被写体をメインカメラＡで撮像するような構成であれば、２つの撮像ユニットはどのように配置しても良い。

さらに、カメラ１００の筐体に対して移動可能に表示部１４を配置し、サブカメラＢを、この表示部１４が画像を表示する方向の被写体を撮像するような位置に配置する構成であっても良い。すなわち、バリアングルが可能な表示部１４の表示面の側にサブカメラＢを配置するような構成であってもよい。

この場合、表示制御部１２は、表示部１４の移動方向に応じて照明画像を表示部１４に表示させないように表示制御を行うようにすればよい。例えば、メインカメラＡが撮像する主被写体の向きに表示部１４が可動された場合は、サブカメラＢで被写体を撮像する必要性は低い。たとえ、サブカメラＢで被写体を撮像する場合であっても、メインカメラＡとサブカメラＢは同一の方向の被写体を撮像するので、各カメラによって取得される画像の明るさが異なることはない。したがって、このような場合には、表示制御部１２は、前述した表示制御を行わないような構成とすることが望ましい。

また、前述した実施形態では、サブカメラＢの側を照明するための照明画像を、表示部１４に新たに表示させるような構成であるが、これに限定されるものではない。例えば、表示部１４に予め表示させているアイコンなどの大きさや明るさを変更することで、サブカメラＢの側を照明する明るさを変更するような構成であっても良い。

また、前述した実施形態では、メインカメラＡの側の被写体よりも、サブカメラＢの側の被写体の明るさの方が暗い場合について説明した。ここで、サブカメラＢの側の被写体よりも、メインカメラＡの側の被写体の明るさの方が暗い場合は、メインカメラＡでの露出量の制御やストロボ発光部２０を発光させることで対応する。

さらに、本発明においてカメラ１００内の各部の駆動は、ＣＰＵ１８は、第１画の像処理部７Ａ、第２の画像処理部７Ｂ、合成処理部１０、表示制御部１２、顔検出部１７、測光演算部１９などによって制御されるがこれに限定されるものではない。例えば、前述した図３、図４、図７、および図９のフローに従ったプログラムをメモリ１１に記憶させておき、ＣＰＵ１８が該プログラムを実行することでカメラ１００内の各部の駆動を制御するような構成であってもよい。

なお、前述した実施形態では、デジタルカメラ１００を、本発明を実施する撮像装置の一例として説明したが、これに限定されるものではない。例えば、デジタルビデオカメラやスマートフォンなどの可搬型デバイスなど、本発明はその要旨の範囲内で種々の撮像装置に適用することが可能である。

（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワークまたは各種記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

１Ａ 第１の光学系
１Ｂ 第２の光学系
５Ａ 第１の撮像素子
５Ｂ 第２の撮像素子
１２ 表示制御部（表示制御手段）
１４ 表示部（表示手段）
１９ 測光演算部（測光手段、算出手段）

Claims (16)

1. 画像を表示する表示手段と、
   前記表示手段が配置された側とは異なる側の被写体を撮像する第１の撮像手段と、
   前記表示手段が配置された側の被写体を撮像する第２の撮像手段と、
   前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度を測光する測光手段と、
   前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度の輝度差を算出する算出手段と、
   前記算出手段によって算出された前記輝度差に応じて、前記第２の撮像手段で被写体を撮像する際に前記第２の撮像手段が撮像する被写体を照明する照明画像を前記表示手段に表示させるか否かを制御する表示制御手段と、
   を有し、
   前記表示制御手段は、前記輝度差が第１の輝度差よりも小さい場合は前記照明画像を前記表示手段に表示させず、前記輝度差が前記第１の輝度差以上の場合は前記照明画像を前記表示手段に表示させることを特徴とする撮像装置。
2. 前記表示制御手段は、前記第１の撮像手段で撮像した被写体の画像を前記表示手段の一部分に表示させることが可能であって、前記輝度差が前記第１の輝度差以上の場合に、前記第１の撮像手段で撮像した被写体の画像を前記表示手段の一部分に表示させ、前記表示手段の、前記第１の撮像手段で撮像した被写体の画像が表示されている以外の部分に前記照明画像を表示させることを特徴とする請求項１に記載の撮像装置。
3. 前記表示制御手段は、前記照明画像の大きさの変更が可能であって、前記輝度差が前記第１の輝度差である場合の前記照明画像の大きさよりも、前記輝度差が前記第１の輝度差よりも大きい第２の輝度差である場合の前記照明画像の大きさを大きくさせることを特徴とする請求項１又は２に記載の撮像装置。
4. 前記表示手段は、前記第１の撮像手段で連続して撮像した被写体の画像を逐次表示するライブビュー表示と、前記第１の撮像手段での被写体の撮像が指示されたことに応じて前記第１の撮像手段で撮像した被写体の静止画を表示するレビュー表示とが可能であって、
   前記表示制御手段は、前記輝度差が前記第１の輝度差以上の場合に、前記第１の撮像手段での被写体の撮像が指示されたことに応じて、前記表示手段によるライブビュー表示の終了からレビュー表示の開始までの間に前記照明画像を表示させることを特徴とする請求項１乃至３の何れか一項に記載の撮像装置。
5. 前記表示手段は、前記第１の撮像手段で連続して撮像した被写体の画像を逐次表示するライブビュー表示が可能であって、
   前記表示制御手段は、前記輝度差が前記第１の輝度差以上の場合に、前記第１の画像のライブビュー表示中に前記照明画像を前記表示手段に表示させることを特徴とする請求項１乃至３の何れか一項に記載の撮像装置。
6. 前記表示制御手段は、前記輝度差が前記第１の輝度差以上の場合に、前記第１の撮像手段で撮像した被写体の画像を前記表示手段の中央に表示させ、前記照明画像を前記第１の撮像手段で撮像した被写体の画像の外縁部分に表示させることを特徴とする請求項５に記載の撮像装置。
7. 前記表示制御手段は、前記輝度差に応じて前記照明画像の明るさの変更が可能であって、前記輝度差が前記第１の輝度差の場合の前記照明画像の明るさよりも、前記輝度差が前記第１の輝度差よりも大きい第２の輝度差である場合の前記照明画像の明るさを明るくさせることを特徴とする請求項１乃至６の何れか一項に記載の撮像装置。
8. 前記第１の撮像手段で撮像した被写体の画像と前記第２の撮像手段で撮像した被写体の画像の中から顔領域を検出する顔検出手段を有し、
   前記算出手段は、前記顔検出手段で検出した前記第１の撮像手段で撮像した被写体の画像の顔領域の輝度と前記第２の撮像手段で撮像した被写体の画像の顔領域の輝度に基づいて前記輝度差を算出することを特徴とする請求項１乃至７の何れか一項に記載の撮像装置。
9. 画像を表示する表示手段と、
   前記表示手段が配置された側とは異なる側の被写体を撮像する第１の撮像手段と、
   前記表示手段が配置された側の被写体を撮像する第２の撮像手段と、
   前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度を測光する測光手段と、
   前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度の輝度差を算出する算出手段と、
   前記算出手段によって算出された前記輝度差に応じて、前記第２の撮像手段で被写体を撮像する際の前記表示手段の表示制御を行う表示制御手段と、
   を有し、
   前記表示制御手段は、前記輝度差が第１の輝度差のときよりも前記輝度差が前記第１の輝度差よりも大きい第２の輝度差のときの方が、前記表示手段を明るく表示させるように前記表示手段の表示制御を行うことを特徴とする撮像装置。
10. 前記表示制御部は、前記第２の撮像手段で被写体を撮像する際に前記第２の撮像手段で撮像する被写体を照明する照明画像を表示させることが可能であって、前記輝度差が第１の輝度差のときよりも前記輝度差が前記第１の輝度差よりも大きい第２の輝度差のときの方が、前記表示手段に表示させる前記照明画像の明るさを明るくさせるように前記表示手段の表示制御を行うことを特徴とする請求項９に記載の撮像装置。
11. 前記表示制御部は、前記第２の撮像手段で被写体を撮像する際に前記第２の撮像手段で撮像する被写体を照明する照明画像を表示させることが可能であって、前記輝度差が第１の輝度差のときよりも前記輝度差が前記第１の輝度差よりも大きい第２の輝度差のときの方が、前記表示手段に表示させる前記照明画像の大きさを大きくさせるように前記表示手段の表示制御を行うことを特徴とする請求項９又は１０に記載の撮像装置。
12. 前記表示制御部は、前記表示手段のバックライトの明るさを変更することが可能であって、前記輝度差が第１の輝度差のときよりも前記輝度差が前記第１の輝度差よりも大きい第２の輝度差のときの方が、前記表示手段のバックライトを明るくさせるように前記表示手段の表示制御を行うことを特徴とする請求項９に記載の撮像装置。
13. 前記表示制御手段は、前記第１の撮像手段で撮像した被写体の画像と前記第２の撮像手段で撮像した被写体の画像とを合成した合成画像を前記表示手段に表示させることを特徴とする請求項１乃至１１の何れか一項に記載の撮像装置。
14. 画像を表示する表示手段と、前記表示手段が配置された側とは異なる側の被写体を撮像する第１の撮像手段と、前記表示手段が配置された側の被写体を撮像する第２の撮像手段と、を備えた撮像装置の制御方法であって、
    前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度を測光する測光工程と、
    前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度の輝度差を算出する算出工程と、
    前記算出工程によって算出された前記輝度差に応じて、前記第２の撮像手段で被写体を撮像する際に前記第２の撮像手段が撮像する被写体を照明する照明画像を前記表示手段に表示させるか否かを制御する表示制御工程と、
    を有し、
    前記表示制御工程は、前記輝度差が第１の輝度差よりも小さい場合は前記照明画像を前記表示手段に表示させず、前記輝度差が前記第１の輝度差以上の場合は前記照明画像を前記表示手段に表示させることを特徴とする撮像装置の制御方法。
15. 画像を表示する表示手段と、前記表示手段が配置された側とは異なる側の被写体を撮像する第１の撮像手段と、前記表示手段が配置された側の被写体を撮像する第２の撮像手段と、を備えた撮像装置の制御方法であって、
    前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度を測光する測光工程と、
    前記第１の撮像手段で撮像する被写体の輝度と前記第２の撮像手段で撮像する被写体の輝度の輝度差を算出する算出工程と、
    前記算出工程によって算出された前記輝度差に応じて、前記第２の撮像手段で被写体を撮像する際の前記表示手段の表示制御を行う表示制御工程と、
    を有し、
    前記表示制御工程は、前記輝度差が第１の輝度差のときよりも前記輝度差が前記第１の輝度差よりも大きい第２の輝度差のときの方が、前記表示手段による照明を明るくさせるように前記表示手段の表示制御を行うことを特徴とする撮像装置の制御方法。
16. 請求項１４または１５に記載の撮像装置の制御方法をコンピュータに実行させるためのコンピュータで読み取り可能なプログラム。

Images