JP2007281873A

JP2007281873A - 撮像装置

Info

Publication number: JP2007281873A
Application number: JP2006105364A
Authority: JP
Inventors: Kiyoshige Shibazaki; 清茂芝崎
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2006-04-06
Filing date: 2006-04-06
Publication date: 2007-10-25
Anticipated expiration: 2026-04-06
Also published as: US20070236588A1; CN101052131B; EP1843293A3; US20110317026A1; US9165377B2; JP4882462B2; CN101052131A; EP1843293B1; EP1843293A2; US8035707B2

Abstract

【課題】、ＲＡＷデータから画像を生成してシーン解析を行なうと、解析処理に必要な時間が長くなるという問題を解決する。
【解決手段】サブＣＰＵ５３は、機能的に処理部５４およびシーン解析部５４を有し、Ａ／Ｄ変換回路３５から入力される撮影用撮像素子１３からのディジタル画像信号（ＲＡＷデータ）を用いて、シーン解析を行う。サブＣＰＵ５３は、シーン解析によって得られる光源（色温度）や撮影場所、主要被写体の色、主要被写体の特徴などの情報を、メインＣＰＵ３１を介して画像処理回路３０へ出力する。シーン解析の結果は、単写撮影や連写撮影、動画撮影およびスルー画表示における画像処理に用いられる。また、連写撮影、動画撮影およびスルー画表示においては、２枚目以降の撮影画像に対して露出値などの撮影条件の設定にも用いられる。
【選択図】図２

Description

本発明は、撮像素子から出力される画像データでシーン解析を行う撮像装置に関する。

下記特許文献１には、撮像素子からのＲＡＷデータに画像処理を施し、生成した画像に基づいてシーン解析を行うものが開示されている。
特開２００１−１０３５０８号公報

しかし、ＲＡＷデータから画像を生成してシーン解析を行なうと、解析処理に必要な時間が長くなるという問題がある。

請求項１の発明による撮像装置は、複数の色成分を有する画像信号を出力する撮像素子と、撮像素子から出力される線形性を有する画像信号に基づいて、撮像した画像を解析する解析手段とを備えることを特徴とする。
請求項２に記載の発明は、請求項１に記載の撮像装置において、解析手段は、画像信号の複数の色成分の離散的な分光分布に基づいて画像を解析することを特徴とする。
請求項３に記載の発明は、請求項１に記載の撮像装置において、解析手段は、画像信号の複数の色成分の離散的な分光特性に基づいて、画面全体の色の連続性を算出して光源を解析することを特徴とする。
請求項４に記載の発明は、請求項２または３に記載の撮像装置において、解析手段は、画面全体の分光特性の連続性と、画面全体を分割した小領域の分光特性の連続性とに基づいて、画面内の無彩色領域を抽出することを特徴とする。
請求項５に記載の発明は、請求項２乃至４のいずれか１項に記載の撮像装置において、解析手段は、画面全体の各色成分の離散的な分光特性と、画面全体を分割した小領域の各色成分の離散的な分光特性とに基づいて、画面内の特徴抽出を行なうことを特徴とする。
請求項６に記載の発明は、請求項１乃至５のいずれか１項に記載の撮像装置において、解析手段は、画面全体における各色成分の輝度値から画面全体の絶対輝度値を算出し、この絶対輝度値に基づいて撮影場所を推定することを特徴とする。
請求項７に記載の発明は、請求項６に記載の撮像装置において、解析手段は、画面全体における色温度を算出し、この色温度と絶対輝度値とに基づいて、撮影状況を推定することを特徴とする。
請求項８に記載の発明は、請求項１乃至７のいずれか１項に記載の撮像装置において、解析手段の解析結果に基づいて撮像素子による撮影条件を演算する演算手段をさらに備えることを特徴とする。
請求項９に記載の発明は、請求項１乃至８のいずれか１項に記載の撮像装置において、解析手段の解析結果に基づいて画像信号に対する画像処理を実行する画像処理手段をさらに備えることを特徴とする。
請求項１０に記載の発明は、請求項１乃至９のいずれか１項に記載の撮像装置において、撮像素子は撮影用撮像素子であることを特徴とする。
請求項１１に記載の発明は、請求項１乃至９のいずれか１項に記載の撮像装置において、撮像素子とは別に撮影用撮像素子を有することを特徴とする。
請求項１２の発明による撮像装置は、撮影レンズを通過する被写体像を撮像して複数の色成分を有する撮影用画像信号を出力する撮影用撮像素子と、撮影レンズに対して撮影用撮像素子と等価な位置に配置され、被写体像を受光して複数の色成分を有する補助画像信号を出力する補助撮像素子と、補助撮像素子から出力される線形性を有する補助画像信号に基づいて、撮像した画像を解析する解析手段とを備えることを特徴とする。
請求項１３の発明による撮像装置は、第１の分光特性を有し、複数の色成分を有する画像信号を出力する第１の撮像素子と、第１の分光特性と異なる第２の分光特性を有し、複数の色成分を有する画像信号を出力する第２の撮像素子と、第１および第２の撮像素子から出力される線形性を有する画像信号に基づいて、撮影した画像を解析する解析手段とを備えることを特徴とする。

本発明によれば、撮像素子から出力される線形性を有する画像信号に基づいて解析を行なうことが可能な撮像装置を提供できる。

―第一の実施の形態―
以下、図面を参照して本発明における実施の形態について説明する。図１は、本発明の第一の実施の形態による一眼レフ電子カメラの要部構成を説明する図である。図１において、カメラ本体１０に対して着脱可能に構成されるファインダ装置２０と、交換レンズ２４とがカメラ本体１０に装着されている。

交換レンズ２４を通過してカメラ本体１０に入射した被写体光は、レリーズ前は破線で示すように位置するクイックリターンミラー１１で上方へ導かれてファインダマット１４に結像する。被写体光はさらにペンタプリズム１５へ入射される。ペンタプリズム１５は、入射された被写体光を接眼レンズ１６へ導く一方、その一部をプリズム１７へも導く。プリズム１７へ入射された光はレンズ１８を介して補助撮像素子１９に入射され、その撮像面上に被写体像を結像する。補助撮像素子１９は、交換レンズ２４に対して撮影用撮像素子１３と光学的に等価な位置に配設される。補助撮像素子１９は、画素に対応する複数の光電変換素子を備えたＣＣＤイメージセンサなどによって構成され、撮像面上に結像されている被写体像を撮像し、被写体像の明るさに応じた光電変換信号を出力する。第一の実施の形態では、補助撮像素子１９の出力信号により被写体の輝度値を演算する。すなわち、補助撮像素子１９は露出演算に用いられる。

レリーズ後はクイックリターンミラー１１が実線で示される位置へ回動し、被写体光がシャッタ１２を介して撮影用撮像素子１３へ導かれ、その撮像面上に被写体像が結像する。撮影用撮像素子１３は、画素に対応する複数の光電変換素子を備えたＣＣＤイメージセンサなどによって構成され、撮像面上に結像されている被写体像を撮像し、被写体像の明るさに応じた光電変換信号を出力する。

撮影用撮像素子１３の画素数は補助撮像素子１９の画素数より多い。撮影用撮像素子１３の画素数は、たとえば数百万画素以上であり、補助撮像素子１９の画素数は、たとえば数十万画素である。撮影用撮像素子１３および補助撮像素子１９の撮像面には、それぞれＲ（赤）、Ｇ（緑）およびＢ（青）のカラーフィルタが画素位置に対応するように設けられている。撮像素子がカラーフィルタを通して被写体像を撮像するため、各撮像素子から出力される撮像信号は、それぞれＲＧＢ表色系の色情報を有する。

図２は、上述した電子カメラにおける第一の実施の形態の回路構成を表すブロック図である。第一の実施の形態の電子カメラにおいては、撮影用撮像素子１３から出力される画像データ（ＲＡＷデータ）を用いてシーン解析を行う。なお、第一の実施の形態では、補助撮像素子１９の出力信号は露出演算に用いられ、シーン解析には用いられないので、図２では図示を省略する。
タイミングジェネレータ(TG)３２は、メインＣＰＵ３１から送出される指令に応じてタイミング信号を発生し、ドライバ３３、ＡＦＥ(Analog Front End)回路３４およびＡ／Ｄ変換回路３５のそれぞれにタイミング信号を供給する。ドライバ３３は、撮影用撮像素子１３に電荷を蓄積させ、蓄積電荷を掃き出させるための駆動信号を上記タイミング信号を用いて生成し、生成した駆動信号を撮影用撮像素子１３へ供給する。ＡＦＥ回路３４は、撮影用撮像素子１３から出力される光電変換信号（蓄積電荷）に対するアナログ処理（ゲインコントロールなど）を行う。Ａ／Ｄ変換回路３５は、アナログ処理後の撮像信号をディジタル信号に変換する。このディジタル信号がＲＡＷデータであり、画像処理回路３０とサブＣＰＵ５３にそれぞれ出力される。サブＣＰＵ５３は後述するようにＲＡＷデータを用いてシーン解析を行なう。

画像処理回路３０とサブＣＰＵ５３とはメインＣＰＵ３１と接続されている。メインＣＰＵ３１は、画像処理回路３０とサブＣＰＵ５３とを含む各ブロックから出力される信号を入力して所定の演算を行い、演算結果に基づく制御信号を各ブロックへ出力する。画像処理回路３０は、たとえばＡＳＩＣとして構成され、メインＣＰＵ３１を介してサブＣＰＵ５３から入力されるシーン解析結果に基づいて、Ａ／Ｄ変換回路３５から入力されるディジタル画像信号に対する画像処理を行う。画像処理回路３０が行う画像処理には、画像前処理、および画像後処理が含まれる。

画像前処理は、撮影用撮像素子１３による撮像画像（ディジタルＲＡＷ画像信号）に対して輪郭強調や色温度調整（ホワイトバランス調整）などを行う処理である。画像前処理は、後述のシーン解析処理で得られた解析結果に基づいて行われる。画像後処理は、画像前処理後のディジタル画像信号に対してフォーマット変換を行う処理である。フォーマット変換とは、ディジタル画像信号を画像圧縮に適した画像データに変換する処理である。

サブＣＰＵ５３は、Ａ／Ｄ変換回路３５から入力されるディジタル画像信号（ＲＡＷデータ）を用いて、後述のシーン解析を行う。サブＣＰＵ５３は、シーン解析によって得られる光源（色温度）や撮影場所、主要被写体の色、主要被写体の特徴などの情報を、メインＣＰＵ３１を介して画像処理回路３０へ出力する。シーン解析の結果は、単写撮影や連写撮影、動画撮影およびスルー画表示における画像処理に用いられる。また、連写撮影、動画撮影およびスルー画表示においては、２枚目以降の画像に対して露出値などの撮影条件の設定にも用いられる。

画像圧縮回路４４は、画像処理回路３０による画像後処理後のディジタル画像信号に対して、JPEG方式などの所定の方式にて画像圧縮処理を行う。表示画像作成回路４２は、画像前処理後のディジタル画像信号を用いて、外部モニタ４３に撮像画像を表示するための表示データを作成する。外部モニタ４３はＬＣＤなどによって構成され、表示データによる画像を再生表示する。

バッファメモリ４１は、画像前処理、画像後処理、画像圧縮処理および表示データ作成処理の途中や処理後のデータを一時的に格納するために使用される。また、連写撮影および動画撮影時に連続して撮像した複数駒の画像信号を一時記憶するためにも用いられる。電子カメラ本体１０に対して着脱可能なメモリカードなどで構成される記録媒体４５には、画像圧縮処理後の画像データが記録される。

レリーズボタン（不図示）の押下操作に連動してオン／オフする半押しスイッチ４７および全押しスイッチ４８は、それぞれオン信号もしくはオフ信号をメインＣＰＵ３１へ出力する。

モード切替スイッチ５２は、たとえば電子カメラの動作を撮影モードやスルー画表示モード、再生モードなどへ切り替える。撮影モードでは、連写モード、単写モード、動画モードなどが選択可能である。連写モードが選択されると、所定の連写速度未満の場合は、撮影コマごとにクイックリターンミラー１１のアップ・ダウン駆動を行い、所定の連写速度以上の場合は、クイックリターンミラー１１を図１の実線で示すアップ位置で保持させた状態で撮影を行う。また、スルー画表示モードは画像を動画として外部モニタ４３に表示するが撮影や記録処理を行なわないモードであり、コマごとにクイックリターンミラー１１をアップ・ダウン駆動させるか、もしくは図１の実線のアップ位置で保持させたままの状態とするかを、撮影者の操作により選択することができる。再生モードでは、記録媒体４５に記録されている画像データを読み出し、画像を外部モニタ４３に再生表示する。

焦点検出装置４９は、メインＣＰＵ３１から送出される指令に応じてレンズ２５による焦点調節状態を検出し、検出信号をメインＣＰＵ３１へ送出する。レンズ駆動装置５０は、メインＣＰＵ３１からの指令に応じてレンズ２５を光軸方向に進退駆動する。レンズ情報入力部５１は、交換レンズ２４の絞り値などのレンズ情報を検出し、検出信号をメインＣＰＵ３１へ送出する。

撮影地設定部６０は、外部モニタ４３に表示される地図に基づいて、撮影者が撮影地のタイムゾーン選択操作を行うことにより、内蔵の時計を撮影地の現地時刻に設定し、時刻信号をメインＣＰＵ３１へ出力する。もしくは、GPS（Global Positioning System）から受信した情報に基づいて、撮影地の緯度、経度、標高、UTC（Coordinated Universal Time）データなどを設定するようにしてもよい。

―ＲＡＷデータでのシーン解析―
以下、サブＣＰＵ５３で行なわれるシーン解析について詳細に説明する。
サブＣＰＵ５３は、機能的に、処理部５４とシーン解析部５５とを備える。処理部５４は、Ａ／Ｄ変換回路３５から入力されるＲＡＷデータに対する処理を行う。処理部５４は、撮影用撮像素子１３のＲ、ＧおよびＢの各カラーフィルタを通して出力される撮像信号の光強度分布に基づいて、撮像画面全体の分光分布を検出して、シーン解析部５５へ出力する。また、撮影用撮像素子１３の画素を所定領域ごとにブロック分割し、ブロック領域ごとの画像信号として取り扱えるようにする。これにより、ブロック領域ごとの分光分布、およびブロック領域ごとの絶対輝度値を検出して、シーン解析部５５へ出力する。

シーン解析部５５は、処理部５４から入力した撮像画面全体の分光分布、ブロック領域ごとの分光分布および絶対輝度値と、メインＣＰＵ３１から入力した撮影距離、焦点距離、撮影時間および撮影地などの撮影情報とに基づいて、データベース５６に格納されている種々のテーブルを参照しながらシーン解析を行う。シーン解析部５５は、光源情報（色温度）の検出、撮影場所の特定、主要被写体の色情報の検出、および主要被写体の特徴抽出によりシーン解析を行う。シーン解析の結果は、メインＣＰＵ３１へ出力される。

―色温度―
処理部５４で検出された撮像画面全体の分光分布に基づいて、光源情報（色温度）が検出される。ＲＡＷデータにおけるＲ、Ｇ、Ｂ出力は、図３（ａ）に示すスペクトラムのように離散的な分光分布を示す。この離散的なデータに基づいて図３（ｂ）の太線に示すように、分光分布の連続性を推定して、連続的な曲線の形状から光源を検出する。図３（ｃ）には、分光分布曲線と光源との対応関係の一例を示す。実線は色温度が約２８５０Kの白熱電球、破線は色温度が約６５００Kの昼光、一点鎖線は標準の光を光源とする分光分布曲線である。なお、このような対応関係はテーブルなどの形式により予めデータベース５６に格納され、光源情報を検出する際に読み出される。

―撮影場所の特定―
処理部５４で検出した絶対輝度値に基づいて、撮影場所が推定される。ブロック領域ごとの絶対輝度値は、ＲＡＷデータにおけるＲ、Ｇ、Ｂ出力から、以下の式（１）により算出される。
Ｙ＝０．３Ｒ＋０．５９Ｇ＋０．１１Ｂ（１）

上記の式（１）で算出された絶対輝度値に基づいて、撮影場所が屋内か屋外かなどの判定を行う。たとえば、絶対輝度値が所定の閾値以上であれば屋外であると判定する。また、前述の光源情報をも用いて撮影場所の状況をさらに特定する。すなわち、絶対輝度値と色温度とに基づいて、撮影場所が蛍光灯で照明された室内である、白熱光で照明された室内であるなどのように判定することができる。たとえば、絶対輝度値と色温度と光源との関係がテーブルなどの形式でデータベース５６に格納され、判定を行う際にこのテーブルを参照するようにする。さらに、メインＣＰＵ３１を介して撮影地設定部６０から入力した撮影時刻および撮影地域に関する情報を用いて、撮影地がハワイの海岸である、香港の夜景であるなどのように撮影地域を特定することもできる。

―被写体の色情報―
ブロック領域ごとの分光分布に基づいて、主要被写体の色情報が検出される。たとえば、図４（ａ）に示ようにブロック分割された画面において、ブロックｒ１〜ブロックｒｎの領域では図４（ｂ）に示すような分光分布が検出されたとする。この分光分布がＲ成分を多く含むことにより、この領域に存在する被写体の色が赤色と判定される。さらに、Ｒ成分を多く出力する領域の形状がほぼ円形に近いことに基づいて、この領域に存在する被写体は赤色の丸い物体、たとえば赤いボールやリンゴであると推定することができる。また、ブロックｒ１〜ブロックｒｎの領域における分光分布から、この領域の被写体の色が肌色と判定されると、この領域には人の顔が撮影されていると推定することができる。さらに、メインＣＰＵ３１から入力される撮影距離および焦点距離の情報を用いて、顔の大きさを判定し、被写体が赤ん坊か大人かを推定することもできる。もし、被写体が赤ん坊であれば、不図示の閃光装置の発光を制限するようにしてもよい。

―被写体の特徴抽出―
撮像画面全体の分光分布、すなわち光源情報（色温度）と各ブロック領域ごとの分光分布とを比較することにより、被写体の特徴が抽出される。すなわち、光源の影響を受けたブロック領域の分光分布から被写体が本来有する分光反射率を導き出すことにより、被写体の色が特定される。シーン解析部５５は、データベース５６に格納されている画面全体のＲ、Ｇ、Ｂ値の比、色温度および係数の対応関係を表すテーブル１と、ブロック領域のＲ、Ｇ、Ｂ値の比と色温度との対応関係を表すテーブル２とを参照して、各ブロック領域ごとの色を決定する。たとえば、画面全体のＲ、Ｇ、Ｂ値の比がそれぞれ２：５：１０であり、色温度が６０００Ｋと判別されたとする。これらの値に基づいて、図５（ａ）に示すテーブル１を参照し、係数Ａ１を決定する。さらに、あるブロック領域のＲ、Ｇ、Ｂ値のそれぞれにこの係数Ａ１を乗じた値の比が１０：５：１になったとする。この比率に基づいて、図５（ｂ）に示すテーブル２を参照して、このブロック領域の色を赤色と決定する。また、図６に示すように、破線で示した画面全体の分光分布曲線の形状と、実線で示したブロック領域の分光分布曲線の形状とが類似していれば、このブロック領域は無彩色と判定する。

以上で説明した電子カメラにおける撮影処理について、図７に示すフローチャートを用いて説明する。図７の処理を行うプログラムはメインＣＰＵ３１内のＲＯＭ（不図示）に格納されており、カメラの電源からオン信号がメインＣＰＵ３１に入力されると起動される。

図７のステップＳ１において、カメラ電源オン処理を行なってステップＳ２へ進む。これにより不図示の電源回路から各ブロック（撮像素子およびその周辺回路を除く）へ電源が供給される。ステップＳ２において、ポート設定など自身の初期化を行なってステップＳ３へ進む。ステップＳ３において、デフォルトの撮影モード、表示、画像処理のための初期設定を行なってステップＳ４へ進む。

ステップＳ４において、撮影モードが単写モードか否かの判定を行う。単写モードである場合は、ステップＳ４が肯定判定されてステップＳ５へ進み、単写モードにおける撮影処理を行う。単写モードでない場合は、ステップＳ４が否定判定されてステップＳ６へ進む。ステップＳ６においては、撮影モードが連写モードか否かの判定を行う。連写モードである場合は、ステップＳ６が肯定判定されてステップＳ７へ進み、連写モードにおける撮影処理を行う。連写モードでない場合は、ステップＳ６が否定判定されてステップＳ８へ進む。ステップＳ８においては、撮影モードが動画モードか否かの判定を行う。動画モードである場合は、ステップＳ８が肯定判定されてステップＳ９へ進み、動画モードにおける処理を行なう。動画モードでない場合、すなわちスルー画モードである場合は、ステップＳ８が否定判定されて、ステップＳ１０へ進みスルー画における処理を行なう。

―単写―
図８を用いて、ステップＳ５における単写モードによる撮影処理を説明する。単写モードにおいては、シーン解析の結果に基づいて撮影画像に対して画像処理が施される。
ステップＳ１０１において、レリーズボタンが半押し操作されたか否かを判定する。半押しスイッチ４７から半押し信号が入力されるとステップＳ１０１を肯定判定してステップＳ１０２へ進み、半押し信号が入力されていない場合にはステップＳ１０１を否定判定し、当該判定処理を繰り返す。

ステップＳ１０２において、焦点検出装置４９はレンズ２５による焦点調節状態を検出し、レンズ駆動装置５０は、焦点検出結果に基づいて焦点調節を行う。ステップＳ１０３において、レリーズボタンが全押し操作されたか否かを判定する。全押しスイッチ４８から全押し信号が入力されるとステップＳ１０３が肯定判定されてステップＳ１０５へ進み、全押し信号が入力されていない場合にはステップＳ１０３が否定判定されて、ステップＳ１０４へ進む。

ステップＳ１０５において、撮影シーケンスを開始する。具体的には、不図示のシーケンス装置にミラーアップを開始させてステップＳ１０６へ進む。ステップＳ１０６において、撮影用撮像素子１３およびその周辺回路（ＡＦＥ回路３４、Ａ／Ｄ変換回路３５、タイミングジェネレータ３２、ドライバ３３）への電源オン処理、および撮影用撮像素子１３の初期化を行ってステップＳ１０７へ進む。

ステップＳ１０７において、撮影用撮像素子１３による撮像を開始する。すなわち、撮影用撮像素子１３の電荷蓄積および蓄積電荷掃き出しを行なう。ステップＳ１０８において、サブＣＰＵ５３は撮影用撮像素子１３から出力された画像データ（ＲＡＷデータ）に対してシーン解析を行う。なお、シーン解析の詳細処理については、図１０に示すフローチャートを用いて後述する。

ステップＳ１０９において、不図示のシーケンス装置によりミラーダウンを開始してステップＳ１１０へ進む。ステップＳ１１０において、画像処理回路３０は、ステップＳ１０８で得られたシーン解析の結果に基づいて、撮影用撮像素子１３による撮像画像に対して画像処理（画像前処理および画像後処理）を行う。

ステップＳ１１１において、画像圧縮回路４４は、画像後処理後のディジタル画像信号に対して画像圧縮処理を行う。そして、圧縮処理された画像データを記録媒体４５に記録してステップＳ１１２へ進む。ステップＳ１１２において、表示画像作成回路４２は、画像前処理後のディジタル画像信号を用いて表示データを作成し、ステップＳ１１３において、撮影画像を外部モニタ４３に再生表示する。以上で単写モードにおける一連の撮影動作が終了する。

一方、ステップＳ１０３が否定判定されて進んだステップＳ１０４においては、半押し操作が開始されてから所定時間が経過したか否かを判定する。半押しスイッチ４７から半押し信号が入力されていない状態が所定時間継続している場合は、ステップＳ１０４が肯定判定されてステップＳ１０１へ戻る。一方、半押しスイッチ４７から半押し信号を入力されている、もしくは半押し信号が入力されていない状態が所定時間に満たない場合は、ステップＳ１０４が否定判定されてステップＳ１０３へ戻る。

―連写―
一方、図９を用いて、図７のステップＳ７における連写モードでの撮影処理を説明する。連写モードにおいては、シーン解析の結果に基づいて、撮影画像に対して画像処理が施されるとともに、２枚目以降の撮影画像に対する露出値などの撮影条件が設定される。
ステップＳ２０１（レリーズボタン半押し判定）からステップＳ２０８（シーン解析）までの処理は、図８におけるステップＳ１０１（レリーズ半押し判定）からステップＳ１０８（シーン解析）までの処理と同様の処理を行なう。

ステップＳ２０９において、画像処理回路３０は、撮影用撮像素子１３による撮像画像に対してシーン解析の結果に基づいた画像処理（画像前処理および画像後処理）を行い、ステップＳ２１０へ進む。ステップＳ２１０において、画像圧縮回路４４は、画像後処理後のディジタル画像信号に対して画像圧縮処理を行い、圧縮処理された画像データを記録媒体４５に記録してステップＳ２１１へ進む。

ステップＳ２１１において、表示画像作成回路４２は、画像前処理後のディジタル画像信号を用いて表示データを作成し、ステップＳ２１２において、撮影画像を外部モニタ４３に再生表示する。ステップＳ２１３において、連写速度が所定以上であるか否かを判定する。連写速度が所定以上の場合はステップＳ２１３が肯定判定されてステップＳ２１４へ進み、連写速度が所定未満の場合はステップＳ２１３が否定判定されてステップＳ２１７へ進む。

ステップＳ２１４において、連写終了か否かを判定する。連写継続の場合、たとえば、全押しスイッチ４８からのオン信号が継続しているときは、ステップＳ２１４が否定判定されステップＳ２１６へ進み、ステップＳ２０８で得られたシーン解析の結果に基づいて撮影条件を設定してステップＳ２０６へ戻る。連写終了の場合、たとえば、全押しスイッチ４８からのオン信号が解除しているときは、ステップＳ２１４が肯定判定されてステップＳ２１５へ進み、不図示のシーケンス装置によりミラーダウンを行い、連写モードによる一連の処理を終了する。

一方、ステップＳ２１３が否定判定されて進んだステップＳ２１７において、ステップＳ２１５と同様に不図示のシーケンス装置によりミラーダウンを開始し、ステップＳ２１８へ進む。ステップＳ２１８において、ステップＳ２１４と同様に連写終了か否かを判定する。連写継続の場合はステップＳ２１８が否定判定されステップＳ２０５へ戻る。連写終了の場合はステップＳ２１８が肯定判定されて連写モードによる一連の処理を終了する。

―動画―
図７のステップＳ９における動画モードでの処理を図１０に示す。動画モードにおいても、連写モードと同様にシーン解析の結果に基づいて、撮影画像に対して画像処理が施されるとともに、２枚目以降の撮影画像に対する露出値などの撮影条件が設定される。なお、ステップＳ３０１（レリーズボタン半押し判定）からステップＳ３１２（画像表示）までの各処理は、図９の連写モードにおけるステップＳ２０１（レリーズボタン半押し判定）からステップＳ２１２（画像表示）までの各処理と同様の処理を行なう。ステップＳ３１３においては、動画終了か否かの判定を行う。動画継続の場合ステップＳ３１３が否定判定されステップＳ３１５へ進み、図９の連写モードにおけるステップＳ２１６と同様に、ステップＳ３０８のシーン解析結果を用いて撮影条件を設定してステップＳ３０６へ戻る。動画終了の場合ステップＳ３１３が肯定判定されてステップＳ３１４へ進み、不図示のシーケンス回路によりミラーダウンを行い一連の動作を終了する。

―スルー画―
図７のステップＳ１０におけるスルー画モードにおける処理を図１１に示す。スルー画モードにおいて、クイックリターンミラー１１を図１の実線のアップ位置で保持させた状態でスルー画表示を行なう場合は、シーン解析の結果に基づいて表示画像に対して画像処理が施されるとともに、２枚目以降の表示画像に対する露出値などの撮影条件が設定される。また、コマごとにクイックリターンミラー１１をアップ・ダウン駆動させる場合は、シーン解析の結果に基づいて表示画像に対して画像処理が施される。

ステップＳ４０１（レリーズボタン半押し判定）からステップＳ４０４（レリーズボタン半押し継続時間判定）までの各処理は、図１０の動画モードにおけるステップＳ３０１（レリーズボタン半押し判定）からステップＳ３０４（レリーズボタン半押し継続時間判定）までの各処理と同様の処理を行う。ステップＳ４０４が肯定判定されて進んだステップＳ４０５においては、スルー画表示をクイックリターンミラー１１を図１の実線のアップ位置に保持させた状態で行なうか否かを判定する。クイックリターンミラー１１をアップ位置に保持させた状態で表示を行なう場合は、ステップＳ４０５が肯定判定されてステップＳ４０６へ進む。クイックリターンミラー１１をコマごとにアップ・ダウン駆動させて表示を行なう場合は、ステップＳ４０５が否定判定されてステップＳ４１５へ進む。

ステップＳ４０６（ミラーアップ）からステップＳ４１０（画像処理）までの各処理は、図１０の動画モードにおけるステップＳ３０５（ミラーアップ）からステップＳ３０９（画像処理）までの各処理と同様の処理を行なう。ステップＳ４１１において、表示画像作成回路４２により、スルー画を外部モニタ４３に表示してステップＳ４１２へ進む。ステップＳ４１２においては、スルー画表示を継続するか否かを判定する。スルー画表示を終了する場合は、ステップＳ４１２が肯定判定されてステップＳ４１３へ進み、クイックリターンミラー１１をダウンして一連の処理を終了する。スルー画表示を継続する場合は、ステップＳ４１２が否定判定されてステップＳ４１４へ進み、図１０の動画モードにおけるステップＳ３１５と同様に、ステップＳ４０９のシーン解析の結果を用いて撮影条件の設定を行なってステップＳ４０７へ戻る。

一方、ステップＳ４０５が否定判定されて進んだ、ステップＳ４１５（ミラーアップ）からステップＳ４２０（画像処理）までの各処理は、図８の単写モードにおけるステップＳ１０５（ミラーアップ）からステップＳ１１０（画像処理）までの各処理と同様の処理を行なう。ステップＳ４２１において、ステップＳ４１１と同様にして、表示画像作成回路４２により外部モニタ４３にスルー画を表示する。ステップＳ４２２においては、ステップＳ４１２と同様にスルー画表示を継続するか否かを判定する。スルー画表示を終了する場合はステップＳ４２２が肯定判定されて、一連の処理を終了する。スルー画表示を継続する場合は、ステップＳ４２２が否定判定されてステップＳ４１５へ戻る。

―シーン解析処理―
図８のステップＳ１０８と、図９のステップＳ２０８と、図１０のステップＳ３０８と、図１１のステップＳ４０９およびステップＳ４１８におけるシーン解析処理について、図１２に示すフローチャートを用いて説明する。なお、図１２の処理を行なうプログラムは、サブＣＰＵ５３により実行される。
ステップＳ５１１において、処理部５４により、撮像画面全体の分光分布を検出してステップＳ５１２へ進む。ステップＳ５１２において、処理部５４により、ブロック領域ごとの分光分布を検出してステップＳ５１３へ進む。ステップＳ５１３において、処理部５４により、ブロック領域ごとの絶対輝度値を算出してステップＳ５１４へ進む。

ステップＳ５１４において、シーン解析部５５は、ステップＳ５１１で検出した撮像画面全体の分光分布に基づいて、データベース５６に格納されているテーブルを参照しながら、撮像画面の色温度、すなわち、光源情報を検出する。続いて進んだステップＳ５１５では、シーン解析部５５は、ステップＳ５１３で算出された絶対輝度値と、撮影場所や撮影時刻などに関する撮影情報とに基づいて、撮影地域を特定してステップＳ５１６へ進む。

ステップＳ５１６では、シーン解析部５５は、ステップＳ５１２で検出されたブロック領域ごとの分光分布に基づいて、被写体の色情報を検出してステップＳ５１７へ進む。ステップＳ５１７では、シーン解析部５５は、ステップＳ５１１で検出した撮像画面全体の分光分布と、ステップＳ５１２で検出したブロック領域ごとの分光分布とに基づいて、データベース５６に格納されているテーブルを参照しながら被写体の特徴を抽出する。

図２４の符号１５１に、第一の実施の形態においける撮影モードと実行する処理との一覧を示す。
単写モードの場合は、シーン解析結果を撮影画像の画像処理に反映させる。連写モード、動画モードおよびスルー画モードの場合は、シーン解析結果に基づいて撮影画像もしくは表示画像の画像処理を行なうとともに、２枚目以降の画像に対する露出値などの撮影条件が設定される。

以上で説明した第一の実施の形態における電子カメラによれば、以下の作用効果が得られる。
（１）撮影用撮像素子１３から出力される複数の色成分を有するディジタル画像信号において、ディジタル画像信号の線形性出力（ＲＡＷデータ）を用いて撮影画像に対するシーン解析を行なうようにした。したがって、ディジタル画像信号を画像データに変えてからシーン解析を行なうよりも処理時間を短縮することができる。

（２）ディジタル画像信号の複数の色成分の離散的な分光分布に基づいて、撮影画面全体の色の連続性を算出してシーン解析を行なうようにした。したがって、ＲＡＷデータを用いたシーン解析により撮影画面の光源を解析することができる。

（３）撮影画面全体の分光特性の連続性と、撮影画面全体を分割した小領域の分光特性の連続性とに基づいてシーン解析を行なうようにした。したがって、ＲＡＷデータを用いたシーン解析により、撮影画面内における無彩色の領域を抽出することができる。

（４）撮影画面全体におけるＲ、Ｇ、Ｂの各色成分の離散的な分光特性と、撮影画面を分割した小領域におけるＲ、Ｇ、Ｂの各色成分の離散的な分光特性とに基づいてシーン解析を行なうようにした。したがって、ＲＡＷデータを用いたシーン解析により、光源の影響を受けた小領域の分光特性から小領域が本来有する分光反射率を導き出して、小領域の色の特徴を抽出することができる。

（５）撮影画面全体のＲ、Ｇ、Ｂの各色成分の輝度値を用いて、撮影画面全体の絶対輝度値を算出してシーン解析を行なうようにした。したがって、絶対輝度値に基づいて、たとえば、室内で撮影したものである、あるいは屋外で撮影したものであるなどのように撮影場所を推定することができる。

（６）撮影画面全体の色温度と絶対輝度値とを用いてシーン解析を行なうようにした。したがって、たとえば、撮影場所が蛍光灯で照明された室内である、白熱光で照明された室内であるなどのように撮影状況を推定することができる。

（７）撮影用撮像素子１３から出力されるＲＡＷデータによるシーン解析の解析結果を用いて、露出値などの撮影条件を演算するようにした。したがって、ディジタル画像信号を画像データに変えてからシーン解析を行なうよりも処理時間を短縮することができるので、連写撮影のように撮影条件を高速で演算処理する場合に有効である。

（８）撮影用撮像素子１３の出力データを用いてシーン解析を行なうので、単写撮影の画像に対する画像処理にシーン解析結果を反映できる。さらに連写撮影、動画撮影およびスルー画表示の画像に対する画像処理にもシーン解析結果を反映できるとともに、２枚目以降の撮影条件設定に解析結果を利用できる。

―第二の実施の形態―
図１３は図１の要部構成を有する電子カメラにおいて、補助撮像素子１９から出力される画像データ（ＲＡＷデータ）を用いてシーン解析を行う第二の実施の形態の電子カメラの回路構成を表すブロック図である。以下で、図２に示す第一の実施の形態の回路構成と相違する点について主に説明する。
タイミングジェネレータ(TG)３６は、メインＣＰＵ３１から送出される指令に応じてタイミング信号を発生し、ドライバ３７、ＡＦＥ回路３９およびＡ／Ｄ変換回路４０のそれぞれにタイミング信号を供給する。ドライバ３７は、補助撮像素子１９に電荷を蓄積させ、蓄積電荷を掃き出させるための駆動信号を上記タイミング信号を用いて生成し、生成した駆動信号を補助撮像素子１９へ供給する。ＡＦＥ回路３９は、補助撮像素子１９から出力される光電変換信号（蓄積電荷）に対するアナログ処理（ゲインコントロールなど）を行う。Ａ／Ｄ変換回路４０は、アナログ処理後の撮像信号をディジタル信号に変換する。このディジタル信号がＲＡＷデータであり、メインＣＰＵ３１に出力され、メインＣＰＵ３１によりシーン解析を行なう。

画像処理回路３０は、Ａ／Ｄ変換回路３５から入力されるディジタル画像信号に対する画像処理を行う。メインＣＰＵ３１は、Ａ／Ｄ変換回路４０から入力される補助撮像素子１９からのＲＡＷデータに基づいてシーン解析を行い、単写撮影や連写撮影、動画撮影およびスルー画表示においてシーン解析結果に基づいて撮影条件を設定するとともに、Ａ／Ｄ変換回路３５から入力されるディジタル画像信号に対してシーン解析に基づいた画像処理を行う。なお、シーン解析は第一の実施の形態においてサブＣＰＵ５３にて行なった手法と同様の手法により行なわれる。

上記構成の第二の実施の形態の電子カメラにおける撮影動作の処理を説明する。第二の実施の形態においては、モード切替スイッチ５２により単写モードに設定された場合はシーン解析結果に基づいて撮影条件を設定し、連写モードおよびスルー画モードに設定された場合にはシーン解析に基づいて撮影条件の設定、および撮影画像もしくは表示画像に対する画像処理を行なう。動画モードに設定された場合は、１枚目の撮影画像を取得した際のシーン解析に基づいて撮影条件の設定および撮影画像に対する画像処理を行なう。なお、単写モードにおいてもシーン解析結果に基づいて画像処理を行なってもよい。この場合、クイックリターンミラー１１が図１のアップ位置へ回動する前までに補助撮像素子１９から出力された画像データによるシーン解析結果に基づいて、撮影用撮像素子１３から出力される画像データに対して画像処理を施す。

―単写―
図１４に示すフローチャートを用いて、単写モードにおける撮影動作について、図８に示すフローチャートと相違する処理を主に説明する。
ステップＳ６０１におけるレリーズボタンの半押し操作が肯定判定されて進んだステップＳ６０２において、補助撮像素子１９およびその周辺回路（ＡＦＥ回路３９、Ａ／Ｄ変換回路４０、タイミングジェネレータ３６、ドライバ３７）への電源オン処理、および補助撮像素子１９の初期化を行ってステップＳ６０３へ進む。

ステップＳ６０３において、図８のステップＳ１０２と同様にして焦点検出および調節が行われて進んだステップＳ６０４において、補助撮像素子１９による撮像を開始する。すなわち、補助撮像素子１９の電荷蓄積および蓄積電荷掃き出しを行なう。ステップＳ６０５においては、メインＣＰＵ３１は補助撮像素子１９から出力された画像データ（ＲＡＷデータ）に対してシーン解析を行う。なお、シーン解析の詳細処理については、図１２に示すフローチャートと同様であるので説明を省略する。

ステップＳ６０６において、ステップＳ６０５で得られたシーン解析の結果に基づいて撮影条件を設定してステップＳ６０７へ進む。ステップＳ６０７（レリーズボタン全押し判定）からステップＳ６１１（撮影用撮像素子１３の電荷蓄積、掃き出し）までの処理については、図８のステップＳ１０３（レリーズボタン全押し判定）からステップＳ１０７（撮影用撮像素子１３の電荷蓄積、掃き出し）までの処理と同様の処理を行なう。また、ステップＳ６１２（ミラーダウン）からステップＳ６１６（画像表示）までの処理についても、図８のステップＳ１０９（ミラーダウン）からステップＳ１１３（画像表示）までの処理と同様の処理を行なう。なお、ステップＳ６１３における画像処理に際しては、レリーズボタン全押し直前にステップＳ６０５で取得したシーン解析結果を使用する。

―連写―
図１５に示すフローチャートを用いて連写モードにおける撮影動作を示す。連写モードにおいては、シーン解析に基づいて撮影条件の設定および撮影画像に対する画像処理を行なう。
図１５のステップＳ７０１（レリーズボタン半押し判定）からステップＳ７１１（撮影用撮像素子１９の電荷蓄積、掃き出し）までの各処理については、図１４の単写モードにおけるステップＳ６０１（レリーズボタン半押し判定）からステップＳ６１１（撮影用撮像素子１９の電荷蓄積、掃き出し）までの各処理と同様の処理を行なう。また、図１５のステップＳ７１２（画像処理）からステップＳ７１８（ミラーダウン）までの各処理については、図９のステップＳ２０９（画像処理）からステップＳ２１５（ミラーダウン）までの各処理と同様の処理を行なう。なお、ステップＳ７１２の画像処理に際しては、ステップＳ７０５のシーン解析結果、または、ステップＳ７２２のシーン解析結果を使用する。

図１５のステップＳ７１９およびＳ７２０は、図９のステップＳ２１７およびＳ２１８と同様にクイックリターンミラー１１をダウンした後、連写を終了するか否かを判定する。連写を継続する場合は、ステップＳ７２０が否定判定されてステップＳ７２１へ進む。ステップＳ７２１（補助撮像素子１９の電荷蓄積および掃き出し）からステップＳ７２３（撮影条件設定）までの各処理は、ステップＳ７０４（補助撮像素子１９の電荷蓄積および掃き出し）からステップＳ７０６（撮影条件設定）までの各処理と同様の処理を行なう。

―動画―
図１６に示すフローチャートを用いて動画モードにおける撮影動作を説明する。動画モードにおいては、１枚目の撮影画像を取得した際のシーン解析に基づいて撮影条件の設定および撮影画像に対する画像処理を行なう。
図１６のステップＳ８０１（レリーズボタン半押し判定）からステップＳ８１５（画像表示）までの各処理については、図１５の連写モードにおけるステップＳ７０１（レリーズボタン半押し判定）からステップＳ７１５（画像表示）までの各処理と同様の処理を行なう。なお、ステップＳ８１２の画像処理に際しては、ステップＳ８０５のシーン解析の結果を使用する。また、図１６のステップＳ８１６（動画終了判定）およびステップＳ８１７（ミラーダウン）の各処理については、図１０のステップＳ３１３（動画終了判定）およびステップＳ３１４（ミラーダウン）までの各処理と同様の処理を行なう。

―スルー画―
図１７に示すフローチャートを用いてスルー画モードにおける動作を説明する。スルー画モードにおいては、シーン解析に基づいて撮影条件の設定および表示画像に対する画像処理を行なう。
図１７のステップＳ９０１（レリーズボタン半押し判定）からステップＳ９０８（レリーズ半押し継続時間判定）までの各処理は、図１６の動画モードにおけるステップＳ８０１（レリーズボタン半押し判定）からステップＳ８０８（レリーズボタン半押し継続時間判定）までの各処理と同様の処理を行なう。

ステップＳ９０９においては、図１１のステップＳ４０５と同様に、スルー画表示をクイックリターンミラー１１を図１の実線のアップ位置に保持させた状態で行なうか否かを判定する。クイックリターンミラー１１をアップ位置に保持させた状態で表示を行なう場合は、ステップＳ９０９が肯定判定されてステップＳ９１０へ進む。クイックリターンミラー１１をコマごとにアップ・ダウン駆動させて表示を行なう場合は、ステップＳ９０９が否定判定されてステップＳ９１７へ進む。

ステップＳ９１０（ミラーアップ）からステップＳ９１３（画像処理）までの各処理は図１６の動画モードにおけるステップＳ８０９（ミラーアップ）からステップＳ８１２（画像処理）までの各処理と同様の処理を行なう。なお、ステップＳ９１３の画像処理に際しては、ステップＳ９０５のシーン解析結果を使用する。ステップＳ９１４においては、表示画像作成回路４２により、スルー画を外部モニタ４３に表示してステップＳ９１５へ進む。ステップＳ９１５においては、スルー画モードを終了するか否かを判定する。スルー画モードを継続する場合はステップＳ９１５が否定判定されてステップＳ９１１へ戻り、スルー画モードを終了する場合はステップＳ９１５が肯定判定されてステップＳ９１６へ進み、クイックリターンミラー１１をダウンして一連の処理を終了する。

一方、ステップＳ９０９が否定判定されて進んだ、ステップＳ９１７（ミラーアップ）からステップＳ９２１（画像処理）までの各処理は、図１４の単写モードにおけるステップＳ６０９（ミラーアップ）からステップＳ６１３（画像処理）までの各処理と同様の処理を行なう。なお、ステップＳ９２１の画像処理に際しては、１枚目はステップＳ９０５の、２枚目以降はステップＳ９２５のシーン解析結果を用いる。ステップＳ９２２においては、ステップＳ９１３と同様に、表示画像作成回路４２により、スルー画を外部モニタ４３に表示してステップＳ９２３へ進む。

ステップＳ９２３においては、ステップＳ９１５と同様にスルー画モードを終了するか否かの判定を行う。スルー画モードを終了する場合はステップＳ９２３が肯定判定されて一連の処理を終了する。スルー画モードを継続する場合はステップＳ９２３が否定判定されて、ステップＳ９２４へ進む。ステップＳ９２４（補助撮像素子１９の電荷蓄積および掃き出し）からステップＳ９２６（撮影条件設定）までの各処理は、ステップＳ９０４（補助撮像素子１９の電荷蓄積および掃き出し）からステップＳ９０６（撮影条件設定）までの各処理と同様の処理を行なう。

図２４の符号１５２に、第二の実施の形態における撮影モードと実行する処理との一覧を示す。
単写モードの場合は、シーン解析結果を撮影条件の設定に用いる。また、ミラーアップ前までのシーン解析の結果に基づいて撮影画像に対して画像処理を施す。連写モードおよびスルー画モードの場合は、シーン解析結果に基づいて撮影条件を設定するとともに、撮影画像もしくは表示画像に対して画像処理を行なう。動画モードの場合は、１枚目の画像取得時のシーン解析の結果に基づいて撮影条件の設定と画像処理とを行なう。

以上で説明した第二の実施の形態における電子カメラによれば、第一の実施の形態における（２）〜（６）の効果に加えて、以下の作用効果が得られる。
（１）補助撮像素子１９から出力される複数の色成分を有するディジタル画像信号において、ディジタル画像信号の線形性出力（ＲＡＷデータ）を用いて撮影画像に対するシーン解析を行なうようにした。したがって、ディジタル画像信号を画像データに変えてからシーン解析を行なうよりも処理時間を短縮することができる。

（２）補助撮像素子１９から出力されるＲＡＷデータによるシーン解析の解析結果を用いて、露出値などの撮影条件を演算するようにした。したがって、ディジタル画像信号を画像データに変えてからシーン解析を行なうよりも処理時間を短縮することができる。さらに、補助撮像素子１９の出力データを用いてシーン解析を行なうので、シーン解析の結果を単写撮影、連写撮影、動画撮影およびスルー画表示における１枚目の画像に対する撮影条件の演算に利用できる。

（３）補助撮像素子１９から出力されるＲＡＷデータによるシーン解析の解析結果を用いて、撮影用撮像素子１３からの出力データに対して画像処理を実行するようにした。したがって、ディジタル画像信号を画像データに変えてからシーン解析を行なうよりも処理時間を短縮することができるので、連写撮影のように撮影条件を高速で演算処理する場合に有効である。

（４）撮影用撮像素子１３よりも画素数の少ない補助撮像素子１９からのＲＡＷデータに基づいてシーン解析を行なうことにより、処理時間を短縮することができる。

―第三の実施の形態―
図１８は図１の要部構成を有する電子カメラにおいて、撮影用撮像素子１３および補助撮像素子１９から出力される画像データ（ＲＡＷデータ）を用いてシーン解析を行う第二の実施の形態の電子カメラの回路構成を表すブロック図である。第三の実施の形態においては、第一の実施の形態と同様にサブＣＰＵ５３を備え、撮影用撮像素子１３から出力される画像データ（ＲＡＷデータ）を用いてシーン解析を行なう。さらに、第二の実施の形態と同様に補助撮像素子１９から出力される画像データ（ＲＡＷデータ）を用いてメインＣＰＵ３１においてシーン解析を行なう。

上述の構成を有する第三の実施の形態による電子カメラの動作を、単写モードの場合を図１９のフローチャートに、連写モードの場合を図２０のフローチャートに、動画モードの場合を図２１のフローチャートに、スルー画モードの場合を図２１のフローチャートに示す。
図１９に示す単写モードにおけるフローチャートは、図８および図１４に示す単写モードにおけるフローチャートを組み合わせたものである。したがって、第三の実施の形態による単写モードにおいては、補助撮像素子１９からの画像データに基づいてステップＳ１００５でシーン解析を行い、このシーン解析結果を用いて撮影条件の設定を行なう。さらに、撮影用撮像素子１３からの画像データに基づいてステップＳ１０１２でシーン解析を行い、このシーン解析結果を用いて撮影画像に画像処理を施す。

図２０に示す連写モードにおけるフローチャートは、図９および図１５に示す連写モードにおけるフローチャートを組み合わせたものである。したがって、第三の実施の形態による連写モードにおいては、補助撮像素子１９からの画像データに基づいてステップＳ１１０５でシーン解析を行い、このシーン解析結果を用いて撮影条件の設定を行なう。さらに、撮影用撮像素子１３からの画像データに基づいてステップＳ１１１２でシーン解析を行い、このシーン解析結果を用いて撮影画像に画像処理を施す。連写速度が所定値以上であれば、ステップＳ１１１２のシーン解析結果を用いて２枚目以降の撮影画像に対する撮影条件の設定と画像処理とを行なう。また、連写速度が所定値未満の場合、ステップＳ１１２４のシーン解析結果を用いて２枚目以降の撮影画像に対する撮影条件を設定するとともに、ステップＳ１１１２のシーン解析結果を用いて２枚目以降の撮影画像に対して画像処理を行なう。

図２１に示す動画モードにおけるフローチャートは、図１０および図１６に示す動画モードにおけるフローチャートを組み合わせたものである。したがって、第三の実施の形態による動画モードにおいては、補助撮像素子１９からの画像データに基づいてステップＳ１２０５でシーン解析を行い、このシーン解析結果を用いて１枚目の撮影画像に対する撮影条件の設定を行なう。さらに、撮影用撮像素子１３からの画像データに基づいてステップＳ１２１２でシーン解析を行い、このシーン解析結果を用いて撮影画像に画像処理を施すとともに、２枚目以降の撮影画像に対する撮影条件の設定を行なう。

図２２に示すスルー画モードにおけるフローチャートは、図１１および図１７に示すスルー画モードにおけるフローチャートを組み合わせたものである。したがって、第三の実施の形態によるスルー画モードにおいては、撮影用撮像素子１３および補助撮像素子１９からの画像データに基づいてシーン解析を行い、このシーン解析結果を用いて撮影条件を設定するとともに、表示画像に対する画像処理を施す。なお、撮影用撮像素子１３と補助撮像素子１９とから出力される画像データのうち、どちらの画像データをシーン解析に用いるかは、スルー画表示をクイックリターンミラー１１をアップ位置に保持した状態で行なうか、コマごとにアップ・ダウン駆動を行うかにより決定される。

第三の実施の形態における電子カメラによれば、第一および第二の実施の形態において得られた効果が得られる。

以上で説明した実施の形態を以下のように変形することができる。
（１）撮影用撮像素子１３と補助撮像素子１９の分光感度特性を変えてもよい。この場合、図２３（ａ）に示すように、撮影用撮像素子１３のＲ、Ｇ、Ｂ各色の分光感度に対して、補助撮像素子１９のＲ、Ｇ、Ｂ各色の分光感度の幅を狭く設定すればよい。もしくは、図２３（ｂ）に示すように、撮影用撮像素子１３のＲ、Ｇ、Ｂ各色の分光感度に対して、補助撮像素子１９のＲ、Ｇ、Ｂ各色の分光感度のピークをずらして設定するものであってもよい。上述のように設定することで、撮影用撮像素子１３で取得しきれない色情報を補助撮像素子１９で補うことができるので、色を確実に判定することができる。

（２）上述した実施の形態の説明において、撮影モードが連写モードの場合は、連写速度に応じてクイックリターンミラー１１を図１の実線で示すアップ位置で保持させた状態で撮影を行うか、撮影コマごとにクイックリターンミラー１１のアップ・ダウン駆動を行うかが決まるものとしたが、スルー画モードにおける場合と同様に、撮影者の設定操作によりクイックリターンミラー１１の駆動を決めるものであってもよい。

（３）第三の実施の形態によるスルー画モードにおいて、撮影用撮像素子１３と補助撮像素子１９とから出力される画像データのうち、どちらの画像データをシーン解析に用いるかは、スルー画撮影をクイックリターンミラー１１をアップ位置に保持した状態で行なうか、撮影コマごとにアップ・ダウン駆動を行うかにより決定されるものとして説明した。しかし、撮影者の設定操作により、撮影用撮像素子１３からの画像データに基づいたシーン解析を行なうか、もしくは補助撮像素子１９からの画像データに基づいたシーン解析を行なうかを選択して、選択結果に応じてクイックリターンミラー１１の駆動が決定されるようにしてもよい。

また、本発明の特徴を損なわない限り、本発明は上記実施の形態に限定されるものではなく、本発明の技術的思想の範囲内で考えられるその他の形態についても、本発明の範囲内に含まれる。

本発明の実施の形態による一眼レフ電子カメラの要部構成を説明する図である。本発明の第一の実施の形態による一眼レフ電子カメラの回路構成を説明するブロック図である。ＲＡＷデータによる撮影画面の分光分布の一例を説明する図であり、（ａ）はＲＡＷデータのスペクトラムを示し、（ｂ）は（ａ）のデータに基づいて分光分布の連続性を推定したグラフを示し、（ｃ）は、分光分布曲線と光源との対応関係の一例を示す。ブロック領域ごとの分光分布に基づいて主要被写体の色情報の検出の一例を説明する図であり、（ａ）は画面全体を所定のブロック領域に分割した状態を示し、（ｂ）はブロック領域ｒ１からｒｎにおける分光分布を示す。被写体の特徴を抽出する際に用いるテーブルの一例を説明する図であり、（ａ）は画面全体のＲ、Ｇ、Ｂ値の比、色温度および係数の対応関係を表すテーブル１を示し、（ｂ）はブロック領域のＲ、Ｇ、Ｂ値の比と色温度との対応関係を表すテーブル２を示す。ブロック領域が無彩色と判定される場合における、画面全体とブロック領域の分光分布曲線の一例を説明する図である。実施の形態における一眼レフ電子カメラの全体動作を説明するフローチャートである。第一の実施の形態における単写モードの動作を説明するフローチャートである。第一の実施の形態における連写モードの動作を説明するフローチャートである。第一の実施の形態における動画モードの動作を説明するフローチャートである。第一の実施の形態におけるスルー画モードの動作を説明するフローチャートである。実施の形態におけるシーン解析処理の動作を説明するフローチャートである。本発明の第二の実施の形態による一眼レフ電子カメラの回路構成を説明するブロック図である。第二の実施の形態における単写モードの動作を説明するフローチャートである。第二の実施の形態における連写モードの動作を説明するフローチャートである。第二の実施の形態における動画モードの動作を説明するフローチャートである。第二の実施の形態におけるスルー画モードの動作を説明するフローチャートである。本発明の第三の実施の形態による一眼レフ電子カメラの回路構成を説明するブロック図である。第三の実施の形態における単写モードの動作を説明するフローチャートである。第三の実施の形態における連写モードの動作を説明するフローチャートである。第三の実施の形態における動画モードの動作を説明するフローチャートである。第三の実施の形態におけるスルー画モードの動作を説明するフローチャートである。撮影用撮像素子と補助撮像素子の分光感度特性を変える場合の分光分布を説明する図である。各実施の形態において、シーン解析に使用する撮像素子と実行する処理との対応関係をまとめた図である。

符号の説明

１３撮影用撮像素子１９補助撮像素子
３０画像処理回路３１メインＣＰＵ
５３サブＣＰＵ５４処理部
５５シーン解析部５６データベース

Claims

複数の色成分を有する画像信号を出力する撮像素子と、
前記撮像素子から出力される線形性を有する画像信号に基づいて、撮像した画像を解析する解析手段とを備えることを特徴とする撮像装置。
請求項１に記載の撮像装置において、
前記解析手段は、前記画像信号の複数の色成分の離散的な分光分布に基づいて画像を解析することを特徴とする撮像装置。
請求項１に記載の撮像装置において、
前記解析手段は、前記画像信号の複数の色成分の離散的な分光特性に基づいて、画面全体の色の連続性を算出して光源を解析することを特徴とする撮像装置。
請求項２または３に記載の撮像装置において、
前記解析手段は、画面全体の分光特性の連続性と、画面全体を分割した小領域の分光特性の連続性とに基づいて、前記画面内の無彩色領域を抽出することを特徴とする撮像装置。
請求項２乃至４のいずれか１項に記載の撮像装置において、
前記解析手段は、画面全体の各色成分の離散的な分光特性と、画面全体を分割した小領域の各色成分の離散的な分光特性とに基づいて、画面内の特徴抽出を行なうことを特徴とする撮像装置。
請求項１乃至５のいずれか１項に記載の撮像装置において、
前記解析手段は、画面全体における各色成分の輝度値から画面全体の絶対輝度値を算出し、この絶対輝度値に基づいて撮影場所を推定することを特徴とする撮像装置。
請求項６に記載の撮像装置において、
前記解析手段は、画面全体における色温度を算出し、この色温度と前記絶対輝度値とに基づいて、撮影状況を推定することを特徴とする撮像装置。
請求項１乃至７のいずれか１項に記載の撮像装置において、
前記解析手段の解析結果に基づいて前記撮像素子による撮影条件を演算する演算手段をさらに備えることを特徴とする撮像装置。
請求項１乃至８のいずれか１項に記載の撮像装置において、
前記解析手段の解析結果に基づいて前記画像信号に対する画像処理を実行する画像処理手段をさらに備えることを特徴とする撮像装置。
請求項１乃至９のいずれか１項に記載の撮像装置において、
前記撮像素子は撮影用撮像素子であることを特徴とする撮像装置。
請求項１乃至９のいずれか１項に記載の撮像装置において、
前記撮像素子とは別に撮影用撮像素子を有することを特徴とする撮像装置。
撮影レンズを通過する被写体像を撮像して複数の色成分を有する撮影用画像信号を出力する撮影用撮像素子と、
前記撮影レンズに対して前記撮影用撮像素子と等価な位置に配置され、前記被写体像を受光して複数の色成分を有する補助画像信号を出力する補助撮像素子と、
前記補助撮像素子から出力される線形性を有する補助画像信号に基づいて、撮像した画像を解析する解析手段とを備えることを特徴とする撮像装置。
第１の分光特性を有し、複数の色成分を有する画像信号を出力する第１の撮像素子と、
前記第１の分光特性と異なる第２の分光特性を有し、複数の色成分を有する画像信号を出力する第２の撮像素子と、
前記第１および第２の撮像素子から出力される線形性を有する画像信号に基づいて、撮影した画像を解析する解析手段とを備えることを特徴とする撮像装置。