JP2015126372A - 撮像装置、その制御方法、および制御プログラム - Google Patents

Abstract

【課題】撮影画角の急激な変動においても、複数の撮像系について常に適切なＡＥ制御を行う。
【解決手段】ブロック積分算出部１０６は第１の撮像系１３０で得られた第１の画像と第２の撮像系１３１で得られた第２の画像とを選択的に画像処理する。制御部１０２は第１の画像が所定の表示モードで表示部１０７されている際に第２の撮像系から第２の画像をブロック積分算出部に与える周期を、所定の表示モードではない場合において第２の撮像系から第２の画像をブロック積分算出部に与える周期と異なるように制御する。
【選択図】図１

Description

本発明は、複数の撮像系を備える撮像装置、その制御方法、および制御プログラムに関し、特に、当該撮像装置における自動露出制御に関する。

一般に、複数の撮像系を備える撮像装置が知られており、この撮像装置では、撮像装置の前面側に配置された撮像系で撮影者以外の被写体を撮像する。そして、撮像装置の背面側に配置された撮像系で、撮影者の状況を把握するため撮影者を撮像する（特許文献１参照）。

この撮像装置では、背面側に配置された撮像系で得られた画像に応じて撮影者の視野角を検知して、前面側に配置された撮像系の撮影画角を変更するようにしている。

特許文献１に記載の撮像装置においては、背面側に配置された撮像系によって撮影者の目の画像を撮像し、当該画像を解析して視野枠の中心に対する撮影者の目までの距離および方向を算出する。そして、算出した情報と視野枠のサイズおよび縦横比の情報とに基づいて、撮影者が視野枠を介して観察している範囲が撮影範囲となるように前面側に配置された撮像系の光学的なズームおよびシフトを行うようにしている。

特開２００５−１２１８３８号公報

ところで、上述の複数の撮像系を備える撮像装置においては、撮像系毎に撮像素子が備えられており、この結果、撮像系毎に最適な自動露出（ＡＥ）制御を行うことができる。ＡＥ制御の際には、撮像素子から得られる出力画像を積分回路によってブロック画像化して、当該ブロック画像に応じてＡＥ評価値を算出し適正輝度に収束させるようにしている。

ところが、撮像系毎に撮像素子は備えられているものの、撮像装置自体には積分回路が１つだけ備えられていることもある。このような場合には、前面側に配置された撮像系と背面側に配置された撮像系とを排他的に動作させて積分回路を用いる必要がある。

つまり、ＡＥ制御に当たっては、撮影画角の変動頻度が高い前面側の撮像系で得られた画像について優先的にＡＥ評価値を検出して、前面側の撮像系における検出周期よりも背面側の撮像系における検出周期を長く設定している。

ところが、撮影の際には、前面側の撮像系は被写体の方向に向けられているものの、所謂レックレビューの状態となると、撮影者は撮像装置の背面に配置された表示部に表示された画像を確認するため撮像装置を下方向に向けることが多い。

この際には、撮影画角が急激に変動して、例えば、ライブビューにおいては順光であった撮影者がレックレビューの際に急に逆光となってしまうことがある。

このような状態で、上述のような検出周期設定が行われていると、撮影画角の急変動について追従できずに（つまり、適切なＡＥ制御が行われず）、背面側の撮像系で得られた画像が所謂逆光シーンになってしまうことがある。

従って、本発明の目的は、撮影画角の急激な変動においても、複数の撮像系に対して常に適切なＡＥ制御を行うことのできる撮像装置、その制御方法、および制御プログラムを提供することにある。

上記の目的を達成するため、本発明による撮像装置は、少なくとも第１の撮像系および第２の撮像系を備える撮像装置であって、前記第１の撮像系で得られた第１の画像と前記第２の撮像系で得られた第２の画像とを選択的に画像処理してそれぞれ第１の処理済み画像および第２の処理済み画像とする画像処理手段と、前記第１の画像が所定の表示モードで表示部されている際に前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期を、前記所定の表示モードではない場合において前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期と異なるように制御する制御手段と、を有することを特徴とする。

また、上記の目的を達成するため、本発明による撮像装置は、少なくとも第１の撮像系および第２の撮像系を備える撮像装置であって、前記第１の撮像系で得られた第１の画像と前記第２の撮像系で得られた第２の画像とを選択的に画像処理してそれぞれ第１の処理済み画像および第２の処理済み画像とする画像処理手段と、前記撮像装置の姿勢が予め定められた変動量を超えて変化した際に前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期を、前記撮像装置の姿勢が前記予め定められた変動量を超えて変化する前において前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期と異なるように制御する制御手段と、を有することを特徴とする。

本発明によれば、前記第１の画像が所定の表示モードで表示されている際に第２の撮像系で得られた第２の画像を画像処理する周期を、所定の表示モード以外において第２の撮像系で得られた第２の画像を画像処理する周期と異ならせるようにしたので、撮影画角の急激な変動においても、複数の撮像系において常に適切なＡＥ制御を行うことができる。

本発明の実施の形態による撮像装置の一例についてその構成を示すブロック図である。 図１に示す表示部に表示される合成画像の一例を説明するための図であり、（ａ）は撮影者側の画角と被写体側の画角とを示す図、（ｂ）は表示部に表示された合成画像を示す図である。 図１に示すカメラで行われる撮影処理を説明するためのフローチャートである（その１）。 図１に示すカメラで行われる撮影処理を説明するためのフローチャートである（その２）。 図１に示すカメラにおいて第１の撮像系と第２の撮像系との画角差を説明するための図であり、（ａ）は第１の撮像系における画角の一例を示す図、（ｂ）は第２の撮像系における画角の一例を示す図である。 撮影者がレックビュー画像を確認する際の状態を説明するための図であり、（ａ）は撮影者が被写体を撮影する状態を示す図、（ｂ）は撮影者がレックビュー画像を確認する際の状態を示す図である。

以下に、本発明の実施の形態による撮像装置の一例について、図面を参照して説明する。

図１は、本発明の実施の形態による撮像装置の一例についてその構成を示すブロック図である。

図示の撮像装置は、例えば、デジタルカメラ（以下単にカメラと呼ぶ）１００であり、第１の撮像系１３０および第２の撮像系１３１を有している。そして、第１の撮像系１３０はカメラ１００の前面側に向かって配置されて、撮影者以外の被写体を撮像する。第２の撮像系１３１はカメラ１００の背面側に向かって配置されて、撮影者（つまり、ユーザ）を撮像する。

第１の撮像系１３０は撮影レンズユニット（以下単にレンズと呼ぶ）１０８ａ、メカ機構１０９ａ、センサ部１０３、およびＡ／Ｄ変換部１０４を有している。レンズ１０８ａを介して入射した光学像（ここでは、被写体像）は、メカ機構（例えば、絞りおよびシャッタ）１０９ａを介してセンサ部１０３に結像する。センサ部１０３は、例えば、ＣＣＤ又はＣＭＯＳ素子などの撮像素子を有しており、被写体像に応じた電気信号（アナログ信号）を出力する。

Ａ／Ｄ変換部１０４はセンサ部１０３の出力であるアナログ信号を受けて、当該アナログ信号に対してサンプリング、ゲイン調整、およびＡ／Ｄ変換などの処理を行って、デジタル画像信号を出力する。そして、当該デジタル画像信号は、前面画像処理部１０５およびブロック積分算出部１０６に与えられる。

同様に、第１の撮像系１３０は背面レンズ１１６ａ、背面メカ機構１１７ａ、背面センサ部１１８、および背面Ａ／Ｄ変換部１１９を有している。背面レンズ１１６ａを介して入射した光学像（ここでは、ユーザ像）は、メカ機構（例えば、絞りおよびシャッタ）１１７ａを介して背面センサ部１１８に結像する。背面センサ部１１８はユーザ像に応じた電気信号（アナログ信号）を出力する。

背面Ａ／Ｄ変換部１１９は背面センサ部１１８の出力であるアナログ信号を受けて、当該アナログ信号に対してサンプリング、ゲイン調整、およびＡ／Ｄ変換などの処理を行って、デジタル画像信号を出力する。そして、当該デジタル画像信号は、背面画像処理部１２０およびブロック積分算出部１０６に与えられる。

なお、以下の説明では、Ａ／Ｄ変換部１０４の出力であるデジタル画像信号を第１のデジタル画像信号と呼び、背面Ａ／Ｄ変換部１１９の出力であるデジタル画像信号を第２のデジタル画像信号と呼ぶ。

図示のカメラ１００には操作部１０１が備えられており、当該操作部１０１はユーザが各種の指示を入力するためのスイッチおよびボタンなどを備えている。そして、操作部１０１には、シャッタースイッチおよびタッチセンサ（表示部をタッチすることによって各種操作を行うためのセンサ）が含まれている。

制御部１０２は、カメラ１００全体の制御を司り、例えば、操作部１０１の操作に応じてカメラ１００を制御する。

前面画像処理部１０５は、第１のデジタル画像信号に対して各種の画像処理を行って処理済みのデジタル画像信号を第１の画像データとして出力する。例えば、前面画像処理部１０５は、第１のデジタル画像信号をＹＵＶ画像信号に変換して第１の画像データとして出力する。

ブロック積分算出部１０６は、第１のデジタル画像信号を受けて、後述するように、当該画像信号が示す画像をブロック画像化してブロック積分を行って第１の積分値（第１の処理済み画像）を出力する。

また、ブロック積分算出部１０６は、第２のデジタル画像信号を受けて、後述するように、当該画像信号が示す画像をブロック画像化してブロック積分を行い第２の積分値（第２の処理済み画像）を出力する。

制御部１０２は前述の第１の画像データおよび第２の画像データに応じた画像を表示部１０７にそれぞれ第１の画像および第２の画像として表示する。当該表示部１０７は、例えば、液晶表示装置である。

ＡＦ処理部１０８は、制御部１０２の制御下で、第１の画像データに応じてレンズ１０８ａを駆動制御してそのピントを合わせる。ＡＥ処理部１０９は、制御部１０２の制御下で、第１のデジタル画像信号に応じてメカ機構１０９ａを駆動制御する。

背面画像処理部１２０は、第２のデジタル画像信号に対して各種の画像処理を行って処理済みのデジタル画像信号を第２の画像データとして出力する。例えば、背面画像処理部１２０は、第２のデジタル画像信号をＹＵＶ画像信号に変換して第２の画像データとして出力する。

背面ＡＦ処理部１１６は、制御部１０２の制御下で、第２の画像データに応じて背面レンズ１１６ａを駆動制御してそのピントを合わせる。背面ＡＥ処理部１１７は、制御部１０２の制御下で、第２のデジタル画像信号に応じて背面メカ機構１１７ａを駆動制御する。

ＥＦ処理部１１０は、制御部１０２によって発光判別がなされると、被写体の輝度が適正となるような光量でフラッシュ部１１１に発光させる。画像合成部１１５は、第１の画像データおよび第２の画像データを受けて、これら第１の画像データおよび第２の画像データを画像合成して合成画像データとする。

エンコーダー部１１２は、合成画像データについて、そのフォーマットをＪＰＥＧなどのフォーマットに変換して画像記録部１１３に出力する。画像記録部１１３は、エンコーダー部１１２の出力であるフォーマット変換済みの画像データを、カメラ１００に備えられたメモリ（図示せず）又はカメラ１００に装着された外部メモリ（図示せず）などに記録する。

なお、図示のように、表示部１０７には外部接続部１１４が接続されており、この外部接続部１１４には、例えば、ＰＣなどの外部機器（図示せず）が接続される。そして、表示部１０７に表示された画像が外部接続部１１４を介して外部機器に送られる。

図１に示すカメラ１００を用いて撮影を行う際には、ユーザは操作部１０１に備えられた電源スイッチをオンとする。制御部１０２はこのオン操作を検知すると、カメラ１００を構成する各部に電源を供給する。

カメラ１００を構成する各部に電源が供給されると、メカ機構１０９ａおよび背面メカ機構１１７ａに備えられたシャッターが開く。これによって、センサ部１０３および背面センサ部１１８には光が入射（つまり、結像）することになる。

光の入射によって、センサ部１０３には電荷が蓄積され、制御部１０２はセンサ部１０３に蓄積された電荷を読み出してアナログ画像信号としてＡ／Ｄ変換部１０４に送る。そして、Ａ／Ｄ変換部１０４は、前述のようにして、当該アナログ画像信号に応じた第１のデジタル画像信号を出力する。前面画像処理部１０５は第１のデジタル画像信号を画像処理して第１の画像データを出力する。

この際、ブロック積分算出部１０６は、第１のデジタル画像信号に応じてブロック積分値（第１の積分値）を求めて、当該第１の積分値を制御部１０２に送る。ブロック積分算出部１０６は、第１のデジタル画像信号を複数のブロック領域に分割する（例えば、横方向に７ブロック、縦方向に５ブロックの合計３５のブロック領域に分割する）。そして、ブロック積分算出部１０６は、ブロック領域の各々についてその画素値を積分して、第１の積分値を算出する。そして、制御部１０２は第１の積分値に応じてＡＥ処理部１０９を制御して、第１の画像輝度と所定の適正輝度との差分輝度（第１の差分輝度）を算出して、当該差分輝度に応じた露出値でメカ機構１０９ａを駆動制御する。

なお、それぞれのブロック積分値をＹ［ｉ］、当該ブロックの重み付け係数をα［ｉ］とした際、当該ブロック積分値が示す輝度と適正輝度ｔａｒｇｅｔＹとの輝度差分ΔＢｖは次の式（１）によって算出される。

ΔＢｖ＝Ｌｏｇ（（Σ（α［ｉ］Ｙ［ｉ］）／３５）／ｔａｒｇｅｔＹ） （１）
ここで、制御部１０２は、主被写体が存在する領域と位置が重なるブロックの重み付け係数α［ｉ］の値を大きくする。主被写体が存在する領域は、顔検出機能による顔検出結果やＡＦ処理部１０８から得られるＡＦ結果に基づいて、定めることができる。あるいは、中央のブロックに主被写体が存在するとみなしてもよい。

シーン判定部１２１は、ブロック積分算出部１０６で得られた第１の積分値を用いて、その画像が逆光シーンであるか否かを判定するシーン判別を行う。もし逆光シーンであると判別された場合には、制御部１０２は、後述するように、式（１）とは異なる方法で露出値を算出する。

ここで、前述のように、カメラ１００の電源オンによって、センサ部１０３だけではなく背面センサ部１１８にも光が入射する。そして、制御部１０２は背面センサ部１１８に蓄積された電荷を読み出して、第２のアナログ信号を背面Ａ／Ｄ変換部１１９に送る。

前述のように、背面Ａ／Ｄ変換部１１９は第２のアナログ信号に応じた第２のデジタル画像信号を出力する。そして、背面画像処理部１２０は、第２のデジタル画像信号を画像処理して第２の画像データを出力する。

ブロック積分算出部１０６は、背面Ａ／Ｄ変換部１１９から出力された第２のデジタル画像信号についても、画像を複数のブロック領域に分割してブロック積分値（第２の積分値）を算出する。

そして、第１の撮像系１３０と同様にして、背面ＡＦ処理部１１６および背面ＡＥ処理部１１７は、制御部１０２の制御下でそれぞれＡＦ処理およびＡＥ処理を行う。

なお、ブロック積分算出部１０６は１つしかないため、制御部１０２の制御下で、第１のデジタル画像信号および第２のデジタル画像信号を選択的に取り込む。

つまり、ブロック積分算出部１０６は第１の撮像系（以下前面カメラとも呼ぶ）１３０および第２の撮像系（背面カメラとも呼ぶ）１３１に関して排他的に動作して、周期的に第１のデジタル画像信号および第２のデジタル画像信号の取り込みを切り替える。

前述のように、第１の画像データおよび第２の画像データは画像合成部１１５によって合成処理される。そして、合成画像データはエンコーダー部１１２に与えられるとともに、表示部１０７に与えられて、表示部１０７に合成画像データに応じた合成画像が表示される。

図２は、図１に示す表示部１０７に表示される合成画像の一例を説明するための図である。そして、図２（ａ）は撮影者側の画角と被写体側の画角とを示す図であり、図２（ｂ）は表示部１０７に表示された合成画像を示す図である。

いま、図２（ａ）に示すように、撮影者３０１がカメラ１００によって被写体３０２を撮影するものとする。この際、第１の撮像系１３０の画角（被写体側画角）は第２の撮像系１３１の画角（撮影者側画角）よりも狭い。

表示部１０７に合成画像を表示する際には、例えば、図２（ｂ）に示すように、表示部１０７上のメイン画面（メインウィンドウ）３０３に第１の画像データに応じた画像（つまり、被写体）が表示される。そして、第２の画像データに応じた画像（つまり、撮影者）は、メインウィンドウ３０３中に規定されたサブウィンドウ３０４に表示される。

ところで、操作部１０１に備えられたシャッタボタンが半押しされると、第１のシャッタースイッチＳＷ１がオンとなって、制御部１０２は前述のようにしてＡＦ処理およびＡＥ処理を行って、撮影に最適なピントおよび露出設定条件とする。

本撮影に移行すると、つまり、シャッタボタンが全押しされて、第２のシャッタースイッチＳＷ２がオンとなる。すると、制御部１０２はセンサ部１０３および背面センサ部１１８の読み出しを行って、前述のようにして、画像合成部１１５によって第１の画像データおよび第２の画像データを合成して合成画像データとする。その後、当該合成画像データはエンコーダー部１１２においてフォーマット変換されて、画像記録部１１３によってメモリに記録される。

図３Ａおよび図３Ｂは、図１に示すカメラ１００で行われる撮影処理を説明するためのフローチャートである。なお、図示のフローチャートに係る処理は、制御部１０２の制御下で行われる。

撮影処理が開始されると、まず、制御部１０２は前面カメラ１３０および背面カメラ１３１に対するブロック積分算出部１０６の検出周期を予め定められた初期周期に設定する（ステップＳ４０１）。ここでは、前面カメラ１３０で撮影される被写体については画角の変動頻度が高いとして、制御部１０２は、初期周期として前面カメラ１３０の検出周期を１００ｍｓ／回、背面カメラ１３１の検出周期を６００ｍｓ／回に設定する。すなわち、前面カメラ１３０に対するＡＥ処理を１００ｍｓ周期で、背面カメラ１３１に対するＡＥ処理を６００ｍｓ周期で実行できることになる。

次に、制御部１０２は前面カメラ１３０においてセンサ部１０３からアナログ信号を読み出す（ステップＳ４０２）。続いて、制御部１０２は背面カメラ１３１において背面センサ部１１８からアナログ信号を読み出す（ステップＳ４０３）。これらのアナログ信号を後段の回路で適宜処理することによって、前面カメラ１３０および背面カメラ１３１で得られた画像が表示部１０７にライブビュー表示されることになる。前面カメラ１３０と背面カメラ１３１は、ともに３０フレーム／秒あるいは６０フレーム／秒のフレームレートで撮像を行っており、ライブビュー表示された画像も同じフレームレートを有する。なお、ステップＳ４０２の処理とステップＳ４０３の処理を並行して行っても良い。

続いて、制御部１０２は、ブロック積分算出部１０６の検出周期が前面カメラ１３０の検出周期に該当するか否か（背面カメラ１３１の検出周期に該当しないか否か）を判定する（ステップＳ４０４）。前述のように、ステップＳ４０１において、初期周期として前面カメラ１３０に対する検出周期が１００ｍｓ／回、背面カメラ１３１に対する検出周期が６００ｍｓ／回に設定される。前面カメラ１３０に対する検出周期と背面カメラ１３１に対する検出周期が一致する場合には、背面カメラに対する検出周期であると判断する。よって、前面カメラ１３０について５回連続して第１のデジタル画像信号がブロック積分算出部１０６に取り込まれて、その後、背面カメラ１３１について１回、第２のデジタル画像信号がブロック積分算出部１０６に取り込まれる。

検出周期が前面カメラ１３０に対する検出周期に該当すると（ステップＳ４０４において、ＹＥＳ）、制御部１０２は、前面カメラ１３０から生成された第１のデジタル画像信号をブロック積分算出部１０６に取り込ませる。そして、ブロック積分算出部１０６は、第１のデジタル画像信号に応じてブロック積分値（第１の積分値）を算出する（ステップＳ４０５）。

そして、第１の積分値がシーン判定部１２１に与えられて、シーン判定部１２１は当該第１の積分値に応じてシーン判別を行う（ステップＳ４０６）。シーン判定部１２１は、シーン判別として逆光シーン判定を行う。

逆光シーン判定を行う際には、シーン判定部１２１は互いに隣接するブロック領域におけるブロック積分値Ｙ［ｉ］において輝度値の差が所定の閾値ＴＨ以下（閾値以下）となるブロック領域を一つの領域とするブロック領域統合を行う。こうすることで、複数の統合ブロック領域を得る。ただし、統合されたブロックの数が所定値に達しない領域については、統合ブロック領域とみなさないものとする。

シーン判定部１２１は、輝度値の最も低い統合ブロック領域Ｇおよび輝度値の最も高い統合ブロック領域Ｓについてそれぞれ平均輝度ＹｇおよびＹｓを求めて、次の式（２）に基づいて輝度段差ΔＢｖ＿Ｇを算出する。

ΔＢｖ＿Ｇ＝Ｌｏｇ２（Ｙｇ／Ｙｓ） （２）
シーン判定部１２１は、平均輝度Ｙｇが逆光被写体用閾値Ｙｇ＿ＴＨ（輝度閾値）よりも低く、かつ輝度段差が所定の段差閾値ΔＢｖ＿Ｇ＿ＴＨを越えると、逆光シーンであると判定する。

制御部１０２は、シーン判定部１２１からシーン判別結果を受け取り、当該撮影シーンが逆光シーンであるか否かを判定する（ステップＳ４０７）。逆光シーンであると判定すると（ステップＳ４０７において、ＹＥＳ）、制御部１０２は、輝度値の最も低い統合ブロック領域Ｇを逆光被写体領域とする。そして、制御部１０２は、式（３）を用いてこの逆光被写体領域が適正となるための輝度差分であるΔＢｖを求め、この値に基づいて露出値（前面逆光露出補正値）を算出する（ステップＳ４０８）。

ΔＢｖ＝Ｌｏｇ（Ｙｇ／ｔａｒｇｅｔＹ） （３）
そして、制御部１０２はＡＥ処理部１０９に当該前面逆光露出補正値をフィードバックして、ＡＥ処理部１０９によって前面カメラ１３０のＡＥ処理を行う（ステップＳ４０９）。

逆光シーンでないと判定すると（ステップＳ４０７において、ＮＯ）、制御部１０２は上述した式（１）を用いて露出補正値を算出する（ステップＳ４１０）。そして、制御部１０２はステップＳ４０９の処理に進む。

初期設定された検出周期が前面カメラ１３０の検出周期に該当しないと（ステップＳ４０４において、ＮＯ）、つまり、検出周期が背面カメラ１３１の検出周期に該当すると、制御部１０２は、前面カメラ１３０の場合と同様にして背面カメラ１３１からブロック積分算出部１０６に第２のデジタル画像信号を取り込む。そして、ブロック積分算出部１０６は、第２のデジタル画像信号に応じてブロック積分値（第２の積分値）を算出する（ステップＳ４１１）。

そして、第２の積分値がシーン判定部１２１に与えられて、シーン判定部１２１は当該第２の積分値に応じて逆光シーン判定を行う（ステップＳ４１２）。ステップＳ４１２の処理においては、前面カメラ１３０について説明したように、式（２）に基づいて輝度段差を算出することになる。

続いて、制御部１０２は、シーン判定部１２１からシーン判別結果を受け取り、撮影者を撮影したシーンが逆光シーンであるか否かを判定する（ステップＳ４１３）。逆光シーンであると判定すると（ステップＳ４１３において、ＹＥＳ）、制御部１０２は式（３）を用いて、背面カメラ１３１における逆光撮影者領域が適正となる露出値（背面逆光露出補正値）を算出する（ステップＳ４１４）。そして、制御部１０２はＡＥ処理部１０９に当該露出値をフィードバックして、背面ＡＥ処理部１１７によって背面カメラ１３１のＡＥ処理を行う（ステップＳ４１５）。

背面カメラ１３１が逆光シーンでないと判定すると（ステップＳ４１３において、ＮＯ）、制御部１０２は上述した式（１）を用いて露出補正値を算出する（ステップＳ４１６）。そして、制御部１０２はステップＳ４１５の処理に進む。

なお、前面カメラ１３０と背面カメラ１３１とにおいて、被写体の画角位置と撮影者の画角位置とが異なることがあるので、シーン判定用の際には、前面カメラ１３０と背面カメラ１３１とにおいて用いるパラメータ（例えば、閾値）を個別に設定してもよい。

図４は、図１に示すカメラ１００において第１の撮像系（前面カメラ）と第２の撮像系（背面カメラ）との画角差を説明するための図である。そして、図４（ａ）は第１の撮像系における画角の一例を示す図であり、図４（ｂ）は第２の撮像系における画角の一例を示す図である。

図４（ａ）に示す画像（前面画像）７０１においては、カメラ１００から被写体７０２まで距離が大きいので、つまり、画角が広いので、カメラ１００を振ることができる。このため、前面画像においては、統合ブロック領域としてみなすためのブロック数の所定値を小さくすることができる。

一方、図４（ｂ）に示す画像（背面画像）７０３においては、カメラ１００から撮影者７０４までの距離が所定の距離以上離れることがない（つまり、画角が狭い）。このため、統合ブロック領域としてみなすためのブロック数の所定値を大きくすることができる。

再び図３Ａおよび図３Ｂを参照して、ステップＳ４０９又はＳ４１５の処理に続いて、制御部１０２は、第１の画像データおよび第２の画像データを画像合成部１１５に与えて、第１の画像データおよび第２の画像データを合成して合成画像データを得る（ステップＳ４１７）。

続いて、制御部１０２は第１のシャッタースイッチＳＷ１がオンとなったか否かを判定する（ステップＳ４１８）。第１のシャッタースイッチＳＷ１がオフであると（ステップＳ４１８において、ＮＯ）、制御部１０２はステップＳ４０２の処理に戻る。

一方、第１のシャッタースイッチＳＷ１がオンとなると（ステップＳ４１８において、ＹＥＳ）、制御部１０２は、前述のようにして前面カメラ１３０における露出値を決定する（ステップＳ４１９）。その後、制御部１０２は第２のシャッタースイッチＳＷ２がオンとなったか否かを判定する（ステップＳ４２０）。

第２のシャッタースイッチＳＷ２がオフであると（ステップＳ４２０において、ＮＯ）、制御部１０２はステップＳ４１８の処理に戻る。第２のシャッタースイッチＳＷ２がオンとなると（ステップＳ４２０において、ＹＥＳ）、制御部１０２は前面カメラ１３０における本露光を開始する（ステップＳ４２１）。

本露光の終了後、制御部１０２は前面画像処理部１０５で得られた第１の画像データ（つまり、前面画像）を簡易現像して、表示部１０７にレックレビュー画像として表示する（ステップＳ４２２）。この際、背面カメラ１３１は撮影者の表情（つまり、顔）を撮影するため動作している。

図５は、撮影者がレックビュー画像を確認する際の状態を説明するための図である。そして、図５（ａ）は撮影者が被写体を撮影する状態を示す図であり、図５（ｂ）は撮影者がレックビュー画像を確認する際の状態を示す図である。

図５（ａ）に示すように、撮影者８０１がカメラ１００によって被写体（図示せず）を撮影する際には、前面カメラ１３０を被写体に向けて、撮影者は表示部１０７で見て前面画像の画角など決定する。この際には、例えば、背面画像８０２が得られる。

一方、表示部１０７において、レックビュー画像を確認する際には、撮影者はカメラ１００を下側に向けて表示部１０７を上げることになる。

この際には、背面カメラ１３１で得られる背面画像８０３は、レックビュー画像を確認する前の背面画像８０２から急激に変化することになる。このような背面画像の急激な変化に対処するため、制御部１０２は背面カメラ１３１に対する検出周期を変更する（ステップＳ４２３）。

レックビュー画像の表示（レックビュー表示）を開始すると、制御部１０２は背面カメラ１３１で得られた第２のデジタル画像信号をブロック積分算出部１０６にと取り込む。そして、制御部１０２は前述したように、シーン判定部１２１によって背面画像のシーン判別を行う。

その後、図示の例では、さらに、レックビュー画像の表示が終了するまで、制御部１０２は背面カメラ１３１で得られた第２のデジタル画像信号をブロック積分算出部１０６にと取り込み、シーン判定を行う。

なお、ステップＳ４２３の処理では、制御部１０２は背面カメラの検出周期を１００ｍｓ／回に変更する。

続いて、制御部１０２は、レックレビュー画像および背面カメラ１３１で得られた背面画像を画像記録部１１３に記録する処理を開始する（ステップＳ４２４）。そして、制御部１０２の制御下で、シーン判定部１２１はブロック積分算出部１０６で得られた第２の積分値に応じて逆光シーン判定を行う（ステップＳ４２５）。

続いて、制御部１０２は、シーン判定部１２１からシーン判別結果を受け取り、撮影者を撮影したシーンが逆光シーンであるか否かを判定する（ステップＳ４２６）。逆光シーンであると判定すると（ステップＳ４２６において、ＹＥＳ）、制御部１０２は上述した式（３）を用いて、背面カメラ１３１における逆光撮影者領域が適正となる背面逆光露出補正値を算出する（ステップＳ４２７）。そして、制御部１０２はＡＥ処理部１０９に背面逆光露出補正値をフィードバックして、背面ＡＥ処理部１１７によって背面カメラ１３１のＡＥ処理を行う（ステップＳ４２８）。

背面カメラ１３１が逆光シーンでないと判定すると（ステップＳ４２６において、ＮＯ）、制御部１０２は上述した式（１）を用いて露出補正値を算出する（ステップＳ４２９）。そして、制御部１０２はステップＳ４２８の処理に進む。

ステップＳ４２７又はＳ４２９の処理に続いて、制御部１０２は、第１の画像データおよび第２の画像データを画像合成部１１５に与えて、第１の画像データおよび第２の画像データを合成して合成画像データを得る（ステップＳ４３０）。

ここでは、画像合成部１１５は、レックレビュー画像と第２の画像データとを合成することになる。

続いて、制御部１０２はレックビュー画像の表示が終了したか否かを判定する（ステップＳ４３１）。レックビュー画像の表示が終了しないと（ステップＳ４３１において、ＮＯ）、制御部１０２はステップＳ４２５の処理に戻って逆光判定を行う。

一方、レックビュー画像の表示が終了すると（ステップＳ４３１において、ＹＥＳ）、制御部１０２は前面カメラ１３０の検出周期を１００ｍｓ／回、背面カメラ１３１の検出周期を６００ｍｓ／回、つまり、初期設定に戻す。そして、制御部１０２は前面カメラ１３０で得られた第１のデジタル画像信号をブロック積分算出部１０６に取り込む。

次に、制御部１０２は、カメラ１００の電源がオフされたか否かを判定する（ステップＳ４３２）。電源がオフされないと（ステップＳ４３２において、ＮＯ）、制御部１０２はステップＳ４０１の処理に戻る。電源がオフされると（ステップＳ４３２において、ＹＥＳ）、制御部１０２は撮影処理を終了する。

なお、上述の説明では、所定の表示モードであるレックビュー画像が表示する期間において、背面カメラ１３１で得られた背面画像（第２の画像）をブロック積分算出部１０６に与える周期（つまり、検出周期）を短くするようにした。しかしながらこれに限られるわけではなく、カメラ１００の姿勢を検知して当該姿勢検知結果に応じて、背面カメラ１３１で得られた背面画像（第２の画像）をブロック積分算出部１０６に与える周期を短くするようにしてもよい。

カメラ１００にはカメラ１００の姿勢を検知する姿勢検知センサ（例えば、ジャイロ）が備えられている。そして、制御部１０２は姿勢検知センサで検知されるカメラ１００の姿勢が予め定められた変動量（変動量閾値）を超えて変化すると、背面カメラ１３１で得られた背面画像（第２の画像）をブロック積分算出部１０６に与える周期を短くする。これによっても、背面画像の急激な変化に対処することができる。

つまり、レックビュー表示が行われる所定の表示モードの代わりに、カメラ１００の姿勢が予め定められた変動量閾値を超えて変化した際に第２の撮像系１３１から送られる第２の画像を画像処理（つまり、ブロック積分）する周期を、カメラ１００の姿勢が変動量閾値以下である際に第２の撮像系１３１から送られる第２の画像を画像処する周期と異ならせるようにしてもよい。

このように、本発明の実施の形態によれば、撮影画角の急激な変動においても、第１の撮像系１３０および第２の撮像系１３１において常に適切なＡＥ制御を行うことができる。

以上、本発明について実施の形態に基づいて説明したが、本発明は、これらの実施の形態に限定されるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。

例えば、上記の実施の形態の機能を制御方法として、この制御方法を撮像装置に実行させるようにすればよい。また、上述の実施の形態の機能を有するプログラムを制御プログラムとして、当該制御プログラムを撮像装置が備えるコンピュータに実行させるようにしてもよい。なお、制御プログラムは、例えば、コンピュータに読み取り可能な記録媒体に記録される。

上記の制御方法および制御プログラムの各々は、少なくとも画像処理ステップおよび制御ステップを有している。

また、本発明は、以下の処理を実行することによっても実現される。つまり、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種の記録媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵなど）がプログラムを読み出して実行する処理である。

１０２ 制御部
１０３ センサ部
１０５ 前面画像処理部
１０６ ブロック積分算出部
１０７ 表示部
１１５ 画像合成部
１１６ 背面ＡＦ処理部
１１８ 背面センサ部
１２０ 背面画像処理部
１２１ シーン判定部

Claims (18)

1. 少なくとも第１の撮像系および第２の撮像系を備える撮像装置であって、
   前記第１の撮像系で得られた第１の画像と前記第２の撮像系で得られた第２の画像とを選択的に画像処理してそれぞれ第１の処理済み画像および第２の処理済み画像とする画像処理手段と、
   前記第１の画像が所定の表示モードで表示部されている際に前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期を、前記所定の表示モードではない場合において前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期と異なるように制御する制御手段と、
   を有することを特徴とする撮像装置。
2. 前記所定の表示モードは、前記第１の画像をレックビュー表示する表示モードであることを特徴とする請求項１に記載の撮像装置。
3. 前記制御手段は、前記所定の表示モードにおいては、前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期を、前記所定の表示モードではない場合において前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期よりも短くすることを特徴とする請求項１又は２に記載の撮像装置。
4. 前記制御手段は、前記所定の表示モードにおいて第２の撮像系による撮像を行うことを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
5. 少なくとも第１の撮像系および第２の撮像系を備える撮像装置であって、
   前記第１の撮像系で得られた第１の画像と前記第２の撮像系で得られた第２の画像とを選択的に画像処理してそれぞれ第１の処理済み画像および第２の処理済み画像とする画像処理手段と、
   前記撮像装置の姿勢が予め定められた変動量を超えて変化した際に前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期を、前記撮像装置の姿勢が前記予め定められた変動量を超えて変化する前において前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期と異なるように制御する制御手段と、
   を有することを特徴とする撮像装置。
6. 前記制御手段は、前記撮像装置の姿勢が予め定められた変動量を超えて変化した際には、前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期を、前記撮像装置の姿勢が前記予め定められた変動量を超えて変化する前において前記第２の撮像系から前記第２の画像を前記画像処理手段に与える周期よりも短くすることを特徴とする請求項５に記載の撮像装置。
7. 前記画像処理手段は、前記第１の画像および前記第２の画像を予め定められたブロック領域に分割して、当該ブロック領域における画素値を積分してそれぞれ第１の積分値および第２の積分値を前記第１の処理済み画像および前記第２の処理済み画像として出力することを特徴とする請求項１乃至６のいずれか１項に記載の撮像装置。
8. 前記第１の処理済み画像および前記第２の処理済み画像に応じてそれぞれ前記第１の撮像系および前記第２の撮像系における露出値を算出する算出手段を有することを特徴とする請求項１乃至７のいずれか１項に記載の撮像装置。
9. 前記第１の処理済み画像および前記第２の処理済み画像に応じてそれぞれ前記第１の撮像系および前記第２の撮像系における撮影シーンを判別するシーン判別手段を有することを特徴とする請求項１乃至８のいずれか１項に記載の撮像装置。
10. 前記シーン判別手段は、前記撮影シーンが逆光シーンであるか否かを判別することを特徴とする請求項９に記載の撮像装置。
11. 前記シーン判別手段は、前記第１の積分値および前記第２の積分値の各々に関して、互いに隣接するブロック領域における積分値である輝度の差が所定の閾値以下であるブロック領域を統合して統合ブロック領域を得て、当該統合ブロック領域における平均輝度に応じて前記撮影シーンが逆光シーンであるか否かを判定することを特徴とする請求項１０に記載の撮像装置。
12. 前記シーン判別手段によるシーン判別結果に応じて、前記第１の撮像系および前記第２の撮像系における露出値を算出する算出手段を有することを特徴とする請求項９乃至１１のいずれか１項に記載の撮像装置。
13. 前記第１の画像および前記第２の画像を合成して、前記表示部においてメインウィンドウに前記第１の画像を表示し、前記第２の画像を前記メインウィンドウに規定されたサブウィンドウに表示する画像合成手段を有することを特徴とする請求項１乃至１２のいずれか１項に記載の撮像装置。
14. 前記第１の撮像系は、撮影者以外の被写体を撮像し、前記第２の撮像系は撮影者を撮像することを特徴とする請求項１乃至１３のいずれか１項に記載の撮像装置。
15. 少なくとも第１の撮像系および第２の撮像系を備える撮像装置の制御方法であって、
    前記第１の撮像系で得られた第１の画像と前記第２の撮像系で得られた第２の画像とを選択的に画像処理してそれぞれ第１の処理済み画像および第２の処理済み画像とする画像処理ステップと、
    前記第１の画像が所定の表示モードで表示部されている際に前記第２の撮像系から送られる前記第２の画像を前記画像処理ステップで処理する周期を、前記所定の表示モードではない場合において前記第２の撮像系から送られる前記第２の画像を前記画像処理ステップで処理する周期と異ならせる制御ステップと、
    を有することを特徴とする制御方法。
16. 少なくとも第１の撮像系および第２の撮像系を備える撮像装置の制御方法であって、
    前記第１の撮像系で得られた第１の画像と前記第２の撮像系で得られた第２の画像とを選択的に画像処理してそれぞれ第１の処理済み画像および第２の処理済み画像とする画像処理ステップと、
    前記撮像装置の姿勢が予め定められた変動量を超えて変化した際に前記第２の撮像系から送られる前記第２の画像を前記画像処理ステップで処理する周期を、前記撮像装置の姿勢が前記予め定められた変動量を超えて変化する前において前記第２の撮像系から送られる前記第２の画像を前記画像処理ステップで処理する周期と異ならせる制御ステップと、
    を有することを特徴とする制御方法。
17. 少なくとも第１の撮像系および第２の撮像系を備える撮像装置で用いられる制御プログラムであって、
    前記撮像装置が備えるコンピュータに、
    前記第１の撮像系で得られた第１の画像と前記第２の撮像系で得られた第２の画像とを選択的に画像処理してそれぞれ第１の処理済み画像および第２の処理済み画像とする画像処理ステップと、
    前記第１の画像が所定の表示モードで表示部されている際に前記第２の撮像系から送られる前記第２の画像を前記画像処理ステップで処理する周期を、前記所定の表示モードではない場合において前記第２の撮像系から送られる前記第２の画像を前記画像処理ステップで処理する周期と異ならせる制御ステップと、
    を実行させることを特徴とする制御プログラム。
18. 少なくとも第１の撮像系および第２の撮像系を備える撮像装置で用いられる制御プログラムであって、
    前記撮像装置が備えるコンピュータに、
    前記第１の撮像系で得られた第１の画像と前記第２の撮像系で得られた第２の画像とを選択的に画像処理してそれぞれ第１の処理済み画像および第２の処理済み画像とする画像処理ステップと、
    前記撮像装置の姿勢が予め定められた変動量を超えて変化した際に前記第２の撮像系から送られる前記第２の画像を前記画像処理ステップで処理する周期を、前記撮像装置の姿勢が前記予め定められた変動量を超えて変化する前において前記第２の撮像系から送られる前記第２の画像を前記画像処理ステップで処理する周期と異ならせる制御ステップと、
    を実行させることを特徴とする制御プログラム。

Images