JP2012119981A - 電子カメラ - Google Patents

Abstract

【課題】 本発明は、画像処理用のパラメータを設定するまでの処理時間の高速化を図る電子カメラを提供する。
【解決手段】 電子カメラは、第１撮像部と、第２撮像部と、解析部と、設定部と、画像処理部とを備える。第１撮像部は、撮像光学系の光軸に沿った第１光路からの光束を撮像し、第１画像を生成する。第２撮像部は、第１撮像部の撮像待機時に第１光路と異なる第２光路が設定されることにより、第２光路からの光束を撮像し、第２画像を生成する。解析部は、第２画像を解析する。設定部は、解析部の解析結果に基づいて、第１画像の画像処理用のパラメータを設定する。画像処理部は、パラメータに基づいて、第１画像の画像処理を行なう。
【選択図】 図３

Description

本発明は、電子カメラに関する。

従来から、複数の撮影モードの中から最適な撮影モードを自動的に設定する電子カメラが知られている（例えば、特許文献１参照）。

特許文献１では、一眼レフレックス型の電子カメラにおいて、いわゆるミラーダウン時に記録用の本画像を撮像する撮像素子とは異なる撮像素子を用いて、例えば被写体の顔検出処理を行っている。この場合、特許文献１の電子カメラでは、顔検出処理の検出結果に応じて、撮影モードを選択して自動露出等の撮影用のパラメータを設定する。

特開２００３−３４４８９１号公報

しかし、上記の技術では、本画像取得後に、その本画像の画像処理用のパラメータを設定するための解析処理を開始する。そのため、上記の技術では、解析処理に要する分、画像処理用のパラメータを設定するまでの処理時間がかかるという問題点が生じる。

そこで、本発明は、上記事情に鑑み、画像処理用のパラメータを設定するまでの処理時間の高速化を図る電子カメラを提供することを目的とする。

第１の発明に係る電子カメラは、第１撮像部と、第２撮像部と、解析部と、設定部と、画像処理部とを備える。第１撮像部は、撮像光学系の光軸に沿った第１光路からの光束を撮像し、第１画像を生成する。第２撮像部は、第１撮像部の撮像待機時に第１光路と異なる第２光路が設定されることにより、第２光路からの光束を撮像し、第２画像を生成する。解析部は、第２画像を解析する。設定部は、解析部の解析結果に基づいて、第１画像の画像処理用のパラメータを設定する。画像処理部は、パラメータに基づいて、第１画像の画像処理を行なう。

第２の発明は、第１の発明において、選択部をさらに備える。選択部は、第２画像の解析を行なう第１解析モードと、第１画像及び第２画像の解析を行なう第２解析モードとを選択する。解析部は、選択部の選択結果に基づいて、解析を行なう。

第３の発明は、第２の発明において、解析部は、第２画像の解析結果に基づいて、第１画像をさらに解析する。

第４の発明は、第２又は第３の発明において、選択部は、第１画像を連続して撮像する連写撮影の場合には、第１解析モードを選択し、第１画像を１枚撮像する単写撮影の場合には、第２解析モードを選択する。

第５の発明は、第２又は第３の発明において、シーン認識部をさらに備える。シーン認識部は、第２画像に基づいて、撮影シーンの種別を認識する。選択部は、撮影シーンの種別に応じて、第１解析モード又は第２解析モードを選択する。

第６の発明は、第２又は第３の発明において、選択部は、被写体を追尾して撮影する追尾撮影の場合には、第１解析モードを選択することを特徴とする電子カメラ。

第７の発明は、第１から第６の何れか１の発明において、補正部をさらに備える。補正部は、第１撮像部の特性と第２撮像部の特性との差異に基づいて、第２画像の解析結果を補正する。設定部は、補正が行なわれた解析結果に基づいて、パラメータを設定する。

本発明によれば、画像処理用のパラメータを設定するまでの処理時間の高速化を図る電子カメラを提供できる。

電子カメラ１の要部の構成例を示す側面図 第２センサ１０８が出力する画像信号に基づく画像の画素の配列例を示した図 図１に示す電子カメラ１の内部構成例を示す図 画像解析部１８ａの内部構成例を示す図 電子カメラ１の動作の一例を示すフローチャート 電子カメラ１の動作の一例を示すフローチャート 第２センサ１０８の撮像領域に収まる被写体の一例を示す図 第２センサ１０８が出力する画像信号に基づく顔検出の一例を示す図 補正部１８ｅによる補正処理の一例を説明する図 画像処理パラメータの設定処理の一例を模式的に説明する図 被写体を追尾して撮影する場合の本画像の画像処理の一例を説明する図

以下、図面に基づいて本発明の実施の形態を詳細に説明する。図１は、電子カメラ１の要部の構成例を示す側面図である。

電子カメラ１は、例えば一眼レフレックス型の電子カメラであり、電子カメラ本体１００と撮影レンズユニット５０とを備える。撮影レンズユニット５０は、被写体光を電子カメラ本体１００に導くために、電子カメラ本体１００の前面に形成されたレンズマウント１００ａに着脱自在に取り付けられる。なお、電子カメラ本体１００と撮影レンズユニット５０とは、撮影レンズユニット５０の装着時にレンズマウント１００ａの接点を介して電気的に接続される。

撮影レンズユニット５０は、レンズ系５１及び絞り５２を備える。レンズ系５１は、フォーカスレンズやズームレンズを含む複数枚のレンズにより構成される。ここでは、説明の便宜上１枚のレンズで図示する。絞り５２は、入射光量を絞り羽根の開閉で調整する。

また、被写体に照射光を照射するための閃光装置１５０が、電子カメラ本体１００の上面に形成されたホットシュー（接続用端子）１５０ａに着脱自在に取り付けられる。なお、電子カメラ本体１００と閃光装置１５０とは、閃光装置１５０の装着時にホットシュー（接続用端子）１５０ａの接点を介して電気的に接続される。

電子カメラ本体１００は、第１センサ１０、クイックリターンミラー１０１、サブミラー１０２、焦点検出部１０３、拡散スクリーン１０４と、コンデンサレンズ１０５と、ペンタダハプリズム１０６、ハーフミラー１０７、第２センサ１０８、接眼レンズ１０９、光学式ファインダ１１０、レリーズ釦１１１及び機械式シャッタ１１２を備える。

第１センサ１０は、レンズ系５１の光軸に沿った第１光路からの光束（被写体光）を撮像し、記録用の本画像を生成する。第１センサ１０は、例えば、ＸＹアドレス指定により任意のラインを読み出し可能なＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ−Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の撮像素子である。この第１センサ１０の撮像領域には、被写体像をカラー検出するために、赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）の３種類のカラーフィルタが、一例としてベイヤー配列で配置されている。なお、第１センサ１０は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）型の撮像素子であっても良い。

クイックリターンミラー１０１は、図中、一点鎖線で示す光軸Ｌ上に回動自在に設けられる。クイックリターンミラー１０１は、本画像を撮像する撮像時において、回動により図の点線で示す位置に退避する。これにより、電子カメラ本体１００に入射された被写体光は、第１センサ１０に導かれる。

一方、クイックリターンミラー１０１は、本画像の撮像を行わない撮像待機時において、光軸Ｌに対して斜めの位置に配置される。ここで、クイックリターンミラー１０１の中央部は、ハーフミラーとなっている。そして、クイックリターンミラー１０１を透過した一部の被写体光は、サブミラー２４によって下方に屈折されて焦点検出部１０３に導かれる。焦点検出部１０３は、被写体像の像ズレ量を検出し、いわゆる位相差検出式の焦点検出を行なう。

また、クイックリターンミラー１０１は、撮像待機時において、レンズ系５１を介して電子カメラ本体１００に入射された被写体光を受光し、被写体光を反射させて拡散スクリーン１０４に導く。すなわち、クイックリターンミラー１０１は、第１センサ１０の撮像待機時に第１光路と異なる第２光路を設定する。

拡散スクリーン１０４は、クイックリターンミラー１０１により導かれた被写体光を拡散する。コンデンサレンズ１０５は、拡散された被写体光をペンタダハプリズム１０６に導く。ペンタダハプリズム１０６は、拡散された被写体光を反射させてハーフミラー１０７に導く。ハーフミラー１０７は、被写体光を第２センサ１０８及び接眼レンズ１０９に導く。これにより、撮影者は、光学式ファインダ１１０を介して、接眼レンズ１０９により結像される被写体像を見ることで、被写体の構図等を確認できる。

第２センサ１０８は、第１センサ１０の撮像待機時に第２光路が設定されることにより、第２光路からの光束（被写体光）を撮像し、スルー画像を生成する。第２センサ１０８は、例えば、ＣＭＯＳ型の撮像素子を有する。この撮像素子の撮像領域には、第１センサ１０と同様、被写体像をカラー検出するために、赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）の３種類のカラーフィルタが、一例としてベイヤー配列で配置されている。なお、本実施形態では、第２センサ１０８の撮像素子の画素数が、第１センサ１０に比較して少ないこととする。

図２は、第２センサ１０８が出力する画像信号に基づく画像の画素の配列例を示した図である。本実施形態では、説明をわかりやすくするため、画素の配列は、一例として、画像の横方向の座標をｉで表して、０〜１９までの値をとるものとし、画像の縦方向の座標をｊで表して０〜２９までの値をとるものとする。また、Ａ／Ｄ変換後の各画素の出力は、受光した光量に比例して０〜１０２３のデジタル値をとるものとする。

第２センサ１０８の撮像素子が出力する画像信号は、第２センサ１０８内部でゲイン調整やＡ／Ｄ変換等が施されて、後述するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１２又はＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１８内のメモリ（不図示）に一時的に記録される。

接眼レンズ１０９は、ハーフミラー１０７を介して導かれた被写体光を被写体像として結像する。レリーズ釦１１１は、半押し操作（撮影前におけるオートフォーカス（ＡＦ）や自動露出（ＡＥ）等の撮影準備動作）の指示入力と全押し操作（撮像動作開始）との指示入力とを受け付ける。機械式シャッタ１１２は、開閉式のシャッタ幕を備え、第１センサ１０への被写体光を遮光する遮光状態と、第１センサ１０に被写体光を到達させる非遮光状態とをシャッタ幕の開閉により切り替える。

図３は、図１に示す電子カメラ１の内部構成例を示す図である。電子カメラ１は、上述した通り、電子カメラ本体１００と撮影レンズユニット５０とを有している。なお、図３では、重複説明を省略するため、図１に示したサブミラー１０２、焦点検出部１０３、拡散スクリーン１０４、コンデンサレンズ１０５、ペンタダハプリズム１０６、接眼レンズ１０９、光学式ファインダ１１０、機械式シャッタ１１２等の図示を省略する。

撮影レンズユニット５０は、レンズ系５１及び絞り５２を備える。また、電子カメラ本体１００は、クイックリターンミラー１０１と、ハーフミラー１０７と、第２センサ１０８と、第１センサ１０と、信号処理部１１と、ＲＡＭ１２と、画像処理部１３と、フラッシュＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１４と、記録インターフェース部（以下、「記録Ｉ／Ｆ部」という。）１５と、表示モニタ１６と、操作部１７と、レリーズ釦１１１と、ＣＰＵ１８と、データバス１９と、レンズマウント１００ａと、ホットシュー１５０ａとを備える。

このうち、信号処理部１１、画像処理部１３、ＲＡＭ１２、フラッシュＲＯＭ１４、記録Ｉ／Ｆ部１５、表示モニタ１６及びＣＰＵ１８は、データバス１９を介して互いに接続されている。

信号処理部１１は、第１センサ１０が生成する画像信号に対して信号処理を施す回路である。この信号処理部１１は、画像信号のゲイン調整やＡ／Ｄ変換などを行なう。この信号処理部１１が出力する画像信号は、画像データとしてＲＡＭ１２に一時的に記録される。ＲＡＭ１２は、画像データを一時的に記録するバッファメモリの領域を有する。

画像処理部１３は、ＲＡＭ１２に記録されている画像データを読み出し、各種の画像処理（例えば輪郭強調処理、ホワイトバランス処理等）を行なう。なお、画像処理部１３は、後述する第２設定部１８ｃが設定した本画像の画像処理用のパラメータ（以下「画像処理パラメータ」という）に基づいて、各種の画像処理を行なう。

フラッシュＲＯＭ１４は、電子カメラ１の制御を行なうプログラム等を予め記憶している不揮発性のメモリである。ＣＰＵ１８は、このプログラムに従い、一例として後述の図５、図６に示すフローの処理を実行する。

記録Ｉ／Ｆ部１５には、着脱自在の記録媒体３０を接続するためのコネクタ（不図示）が形成されている。そして、記録Ｉ／Ｆ部１５は、ＣＰＵ１８からの指示により、そのコネクタに接続された記録媒体３０にアクセスして本画像の記録処理等を行なう。この記録媒体３０は、例えば、不揮発性のメモリカードである。図３では、コネクタに接続された後の記録媒体３０を示している。

表示モニタ１６は、例えば、本画像や電子カメラ１の操作メニュー等を表示する。表示モニタ１６には、液晶モニタ等を適宜選択して用いることができる。

操作部１７は、例えば、コマンド選択用のコマンドダイヤル、電源ボタン等を有している。そして、操作部１７は、電子カメラ１を操作するための指示入力を受け付ける。また、操作部１７は、コマンドダイヤルを介して、例えば、撮影に関するモードの切替えの指示入力を受け付ける。一例として、操作部１７は、１枚の本画像の撮影を行なう単写モードと、所定の時間間隔で連続的に本画像を撮影する連写モードとの切替えの指示入力を受け付ける。これにより、操作部１７は、単写モードと、連写モードとの切替えを行なう。

ＣＰＵ１８は、電子カメラ１の統括的な制御を行なうプロセッサである。ＣＰＵ１８は、フラッシュＲＯＭ１４に予め格納されたプログラムを実行することにより電子カメラ１の各部を制御する。ＣＰＵ１８は、上記のプログラムを実行することにより、電子カメラ１の各部の制御等を行なう。また、ＣＰＵ１８は、画像解析部１８ａ、第１設定部１８ｂ、第２設定部１８ｃ、選択部１８ｄ及び補正部１８ｅとしても機能する。

画像解析部１８ａは、第２センサ１０８が時系列に生成するスルー画像を解析する。また、画像解析部１８ａは、スルー画像の解析結果に基づいて、本画像をさらに解析する。これにより、画像解析部１８ａは、画像解析の精度を向上させることができる。

なお、画像解析部１８ａは、画像処理パラメータを設定するための被写体情報を取得するため、オートホワイトバランス検出部（以下「ＡＷＢ検出部」という）２１、顔検出部２２、顔認証部２３、測光データ解析部２４、被写体追尾部２５、撮影シーン判定部２６としても機能する。

図４は、画像解析部１８ａの内部構成例を示す図である。ＡＷＢ検出部２１は、例えば、後述する第１解析モードの場合、スルー画像のＲＧＢの画像信号に基づいて光源の色温度（被写体情報）を検出する。具体的には、色温度は、例えば、（Ｒ値の平均値／Ｇ値の平均値（以下、「Ｒ／Ｇ」と称する））を縦軸に取り、（Ｂ値の平均値／Ｇ値の平均値（以下、「Ｂ／Ｇ」と称する））を横軸に取った色空間内に対応付けられている。したがって、ＡＷＢ検出部２１は、スルー画像のＲＧＢの画像信号に基づいて、Ｒ／Ｇ及びＢ／Ｇを算出することにより、色温度を検出することができる。なお、ＡＷＢ検出部２１は、例えば、後述する第２、第３解析モードの場合、本画像のＲＧＢの画像信号に基づいて光源の色温度を検出しても良い。

顔検出部２２は、例えば、第１解析モードの場合、スルー画像の中から顔の領域を検出し、その顔を含む領域を設定する。具体的には、顔検出部２２は、スルー画像の画像信号の輝度分布に基づいて、肌色領域を顔の領域として抽出する。そして、顔検出部２２は、顔の肌色領域を含む矩形領域を顔領域に設定する。ＣＰＵ１８は、顔領域の位置座標、サイズ（範囲）等の被写体情報をＲＡＭ１２に記録する。

顔認証部２３は、例えば、第２解析モードの場合、例えば、特開２００１−１６５７３号公報等に記載された顔認識処理によって、顔領域から眼、鼻、口等の顔の器官を被写体情報として抽出する。そして、顔認証部２３は、予め登録されている顔の画像と照合して、顔の認証を行なう。

測光データ解析部２４は、撮影パラメータを検出する。測光データ解析部２４は、例えば、スルー画像の画像信号に基づいて画像内の明るさを検出する。具体的には、測光データ解析部２４は、スルー画像を複数の領域に分割してその領域毎に測光値を検出する多分割測光を行なう。測光データ解析部２４は、例えば、分割した領域毎にＲＧＢ信号の画像データを輝度信号（Ｙ信号）と、色差信号（Ｃｒ、Ｃｂ信号）の画像データに変換（ＹＣ変換）することで多分割測光を行なう。これにより、測光データ解析部２４は、被写体情報を考慮して自動露出（ＡＥ）演算を行なう。また、測光データ解析部２４は、焦点検出部１０３の焦点検出に基づいて、レンズ系５１に含まれるフォーカスレンズのデフォーカス量を演算する。

被写体追尾部２５は、スルー画像から追尾対象の被写体の特徴を示すテンプレート画像のデータを生成する。本実施形態では、人間、動物、乗物等の各種の物体を追尾対象としてテンプレート画像を生成することができる。なお、本実施形態では、説明の便宜上、人物の顔を含む領域をテンプレート画像とする。被写体追尾部２５は、テンプレート画像を用いて、撮影画面内における追尾対象（主要被写体）の位置をテンプレートマッチング処理により継続的に検出する。

撮影シーン判定部２６は、スルー画像を解析することにより、撮影シーンの種別を被写体情報として認識する。具体的には、撮影シーン判定部２６は、被写体像に含まれる空や海等を輝度分布やＲＧＢ信号の分布に基づいて認識する。例えば、撮影シーン判定部２６は、一例として特開２００６−２０３３４６号公報に開示された方法により、撮影シーンの種別を認識することができる。また、撮影シーン判定部２６は、顔検出部２２がスルー画像から１人の顔を検出した場合、ポートレートの撮影シーンと判定する。したがって、選択部１８ｄは、撮影シーン判定部２６の認識結果に応じて、解析モードを選択することができる。

図３の説明に戻り、第１設定部１８ｂは、測光データ解析部２４の解析結果に基づいて、撮影パラメータを設定する。具体的には、第１設定部１８ｂは、レンズ系５１に含まれるフォーカスレンズの位置、適正露出値（絞り５２の絞り値）、第１センサ１０での電荷蓄積時間（シャッタスピード）、信号処理部１１のゲイン（撮像感度）等の撮影パラメータをそれぞれ設定する。なお、ＣＰＵ１８は、レリーズ釦１１１を介して全押しの指示入力を受け付けた場合、撮影パラメータに基づいて本画像の撮像を実行する。

第２設定部１８ｃは、画像解析部１８ａの解析結果に基づいて、画像処理パラメータを設定する。具体的には、第２設定部１８ｃは、被写体情報に基づいて、各種の画像処理の用いる画像処理パラメータを設定する。

選択部１８ｄは、画像処理パラメータを設定するために、以下の解析モードを選択する。具体的には、選択部１８ｄは、スルー画像の解析を行なう第１解析モードと、スルー画像及び本画像の解析を行なう第２解析モードとを選択する。

さらに、選択部１８ｄは、本画像のみの解析を行なう第３解析モードを選択しても良い。なお、第１解析モードでは、第２センサ１０８のみ使用し、第２解析モードでは、第１センサ１０及び第２センサ１０８を使用し、第３解析モードでは、いわゆるライブビューの状態であって、クイックリターンミラー１０１が図１に示す点線で示す位置に退避している場合、第１センサ１０のみを使用する。これにより、第１センサ１０が出力するライブビュー画像は、表示モニタ１６に表示される。

選択部１８ｄは、一例として、連写撮影の場合には、第１解析モードを選択する。また、選択部１８ｄは、単写撮影の場合には、必要に応じて第２解析モードを選択する。つまり、連写撮影を行なう場合には高速性が要求されるので、選択部１８ｄは、第１解析モードを選択することが好ましい。また、例えば、顔認証を行なう場合には、本画像を解析することが好ましいので、選択部１８ｄは、第２解析モードを選択する。これにより、選択部１８ｄは、撮影の目的に応じて、解析モードを選択することができる。画像解析部１８ａは、選択部１８ｄの選択結果に基づいて解析を行なう。これにより、画像解析部１８ａは、解析モードに応じた画像解析を行なうことができる。

補正部１８ｅは、第１センサ１０の特性と第２センサ１０８の特性との差異に基づいて、スルー画像の解析結果を補正する。第２設定部１８ｃは、補正部１８ｅにより補正が行なわれた解析結果に基づいて、画像処理用パラメータを設定する。

また、図３において、閃光装置１５０には、例えばキセノン管が備えられており、このキセノン管の放電により発光を行なう。閃光装置１５０は、キセノン管の発光量等を示す発光情報をＣＰＵ１８から受信し、受信した発光情報に基づいて予備発光や本発光を行なう。

次に、電子カメラ１の動作について説明する。図５及び図６は、電子カメラ１の動作の一例を示すフローチャートである。ＣＰＵ１８は、電子カメラ１の電源オンの指示入力を受け付けた後、操作部１７を介して、撮影者からの撮影モードの選択入力を受け付ける。そして、ＣＰＵ１８は、図５及び図６に示すフローの処理を開始させる。

ステップＳ１０１：ＣＰＵ１８は、スルー画像の取得処理を開始する。具体的には、ＣＰＵ１８は、図１に示す通り、クイックリターンミラー１０１を光軸に対して斜めの位置に配置させる。これにより、クイックリターンミラー１０１は、被写体光を反射させて拡散スクリーン１０４に導く。拡散スクリーン１０４は、クイックリターンミラー１０１により導かれた被写体光を拡散する。コンデンサレンズ１０５は、拡散された被写体光をペンタダハプリズム１０６に導く。ペンタダハプリズム１０６は、拡散された被写体光を反射させてハーフミラー１０７に導く。ハーフミラー１０７は、被写体光を第２センサ１０８及び接眼レンズ１０９に導く。第２センサ１０８は、被写体光を撮像してスルー画像を生成する。

ステップＳ１０２：ＣＰＵ１８の画像解析部１８ａは、被写体情報の取得処理を行なう。具体的には、画像解析部１８ａは、第２センサ１０８が時系列に生成するスルー画像に基づいて、顔検出やＡＷＢデータの検出等の画像解析を行なう。例えば、画像解析部１８ａの顔検出部２２は、顔検出処理により、顔関連の被写体情報（顔の有無、顔の数、顔の位置座標、顔領域の大きさ等）を取得する。

図７は、第２センサ１０８の撮像領域に収まる被写体の一例を示す図である。図８は、第２センサ１０８が出力する画像信号に基づく顔検出の一例を示す図である。図８において、顔検出部２２は、図７に示す人物Ｐ１の顔を検出し、顔の肌色領域を含む矩形領域を顔領域Ａに設定する。なお、図８に示す画像は、説明の便宜上、図２に示す第２センサ１０８の画素の配列との対応関係がわかるように描画している。そのため、実際には、格子状に描かれている画素の配列は、画像には現れないこととする。ＣＰＵ１８は、顔領域Ａの位置座標、サイズ（範囲）等をＲＡＭ１２に記録する。

また、画像解析部１８ａのＡＷＢ検出部２１は、スルー画像のＲＧＢの画像信号に基づいて光源の色温度を検出する。また、撮影シーン判定部２６は、スルー画像を解析することにより、撮影シーンの種別を認識する。なお、撮影シーン判定部２６は、顔検出部２２の検出結果に基づいて、撮影シーンの種別を認識しても良い。例えば、撮影シーン判定部２６は、顔検出部２２の検出結果に基づいて、撮影シーンの種別をポートレートと認識する。

ステップＳ１０３：ＣＰＵ１８は、レリーズ釦１１１の半押し操作の指示入力の有無を判定する。半押し操作の指示入力が無い場合（ステップＳ１０３：Ｎｏ）、ＣＰＵ１８は、ステップＳ１０１の処理に戻る。

一方、半押し操作の指示入力が有った場合（ステップＳ１０３：Ｙｅｓ）、ＣＰＵ１８は、ステップＳ１０４の処理に移行する。

ステップＳ１０４：ＣＰＵ１８の選択部１８ｄは、画像処理パラメータを設定するために解析モードの選択をする。例えば、選択部１８ｄは、撮影モードに基づいて、第１解析モード、第２解析モード、第３解析モードのうち、何れか１つを選択する。なお、選択部１８ｄは、撮影シーンの種別に応じて、何れか１つの解析モードを選択しても良い。

ステップＳ１０５：ＣＰＵ１８は、第３解析モードが選択されたか否かを判定する。第３解析モードが選択された場合（ステップＳ１０５：Ｙｅｓ）、第２設定部１８ｃは、撮影後の本画像の被写体情報に基づいて画像処理パラメータを設定するので、ＣＰＵ１８は、ステップＳ１０７の処理に移行する。この場合、後述するステップＳ１１４にて、画像解析部１８ａは、被写体情報を取得するため、本画像に対して画像解析を行なう。

第３解析モードが選択されていない場合（ステップＳ１０５：Ｎｏ）、ＣＰＵ１８は、ステップＳ１０６の処理に移行する。

ステップＳ１０６：ＣＰＵ１８の第２設定部１８ｃは、画像処理パラメータを設定する。具体的には、第２設定部１８ｃは、画像解析部１８ａの解析結果に基づいて、画像処理パラメータを設定する。一例として、第２設定部１８ｃは、顔検出がなされた場合、顔領域Ａの位置座標、サイズ（範囲）等の被写体情報に基づいて、例えば、顔領域の色処理を行なうための画像処理パラメータを設定する。

また、第２設定部１８ｃは、一人の顔検出がなされた場合、ポートレート撮影を行なうため、ポートレート撮影用の画像処理パラメータを設定する。この場合、第２設定部１８ｃは、本画像に対して、ソフトフォーカス処理を施す画像処理パラメータを設定する（詳細は後述する）。なお、第２設定部１８ｃは、撮影シーンの種別が、ポートレートであり、かつ、夜景である場合、夜景も考慮した画像処理パラメータを設定する。

ステップＳ１０７：ＣＰＵ１８の第１設定部１８ｂは、撮影パラメータを設定する。具体的には、第１設定部１８ｂは、測光データ解析部２４の解析結果に基づいて、フォーカスレンズの位置、適正露出値、第１センサ１０での電荷蓄積時間、信号処理部１１の撮像感度等の撮影パラメータをそれぞれ設定する。ここでは、一例として、ポートレート撮影用の適正露出値を設定する。第１設定部１８ｂは、例えば、適正露出値をオーバー側に設定することにより、ポートレート用の撮影画像を得られやすくする。

ステップＳ１０８：ＣＰＵ１８は、レリーズ釦１１１の全押し操作による撮影の指示入力の有無を判定する。予め設定された時間内に撮影の指示入力が無い場合（ステップＳ１０８：Ｎｏ）、ＣＰＵ１８は、画像処理パラメータや撮影パラメータの設定を解除し、ステップＳ１０１の処理に戻る。一方、撮影の指示入力が有った場合（ステップＳ１０８：Ｙｅｓ）、ＣＰＵ１８は、ステップＳ１０９の処理に移行する。

ステップＳ１０９：ＣＰＵ１８は、撮影処理を開始する。具体的には、ＣＰＵ１８は、クイックリターンミラー１０１を上に跳ね上げさせ、機械式シャッタ１１２のシャッタ幕を開けさせる。

ステップＳ１１０：ＣＰＵ１８は、第１センサ１０を駆動する。信号処理部１１は、画像信号のゲイン調整やＡ／Ｄ変換等を行なう。この信号処理部１１が出力する画像信号は、ＲＡＭ１２に画像データとして一旦記録される。ＣＰＵ１８は、クイックリターンミラー１０１を元の位置に戻させ、機械式シャッタ１１２のシャッタ幕を閉じさせる。なお、撮影シーンの種別が例えば夜景の場合には、ＣＰＵ１８は、第１センサ１０の駆動と同期させて、閃光装置１５０から閃光を発光させる。

ステップＳ１１１：ＣＰＵ１８は、第１解析モード又は第２解析モードが選択されたか否かを判定する。第１解析モード又は第２解析モードが選択された場合（ステップＳ１１１：Ｙｅｓ）、ＣＰＵ１８は、補正処理を行なう必要があるため、ステップＳ１１２の処理に移行する。一方、第３解析モードが選択された場合（ステップＳ１１１：Ｎｏ）、ＣＰＵ１８は、補正処理を行なう必要が無いため、ステップＳ１１４の処理に移行する。

ステップＳ１１２：ＣＰＵ１８の補正部１８ｅは、第１センサ１０の特性と第２センサ１０８の特性との差異に基づいて、スルー画像の解析結果を補正する。これにより、補正部１８ｅは、解析結果の精度を向上させることができる。

図９は、補正部１８ｅによる補正処理の一例を説明する図である。補正部１８ｅは、図８に示す画像を拡大し、第１センサ１０の撮像領域のサイズに合わせる座標変換の補正を行なう。例えば、補正部１８ｅは、バイキュービック法又はニヤレストネイバー法といった補間処理により、図８に示す画像を拡大する。ここで、バイキュービック法では、例えば、複数の近傍画素の値に対して３次補間法と呼ばれる関数処理を行った後、その関数処理で求めた画素の値を注目画素の値に割り当てる。また、ニヤレストネイバー法では、例えば、注目画素に対して近傍画素の値を割り当てる。

図９では、図８に示す画像が拡大された後の状態を模式的に描いている。これにより、図８に示す顔領域Ａは、第１センサ１０の撮像領域の対応する顔領域Ｂになる。ＣＰＵ１８は、顔領域Ｂの位置座標、サイズ（範囲）等をＲＡＭ１２に記録する。

なお、補正部１８ｅが行なう補正処理は、図９で説明した補正処理に限られない。例えば、補正部１８ｅは、第２センサ１０８の出力特性に所定の変換係数を乗算することにより、第１センサ１０の出力特性に合わせる。これにより、補正部１８ｅは、スルー画像の解析結果を第１センサ１０が出力する画像信号の出力特性に合うように補正する。なお、補正部１８ｅは、第２センサ１０８の出力特性と第１センサ１０の出力特性との対応関係を示すルックアップテーブルに基づいて、スルー画像の解析結果を第１センサ１０が出力する画像信号の出力特性に合うように補正しても良い。

ステップＳ１１３：ＣＰＵ１８は、第１解析モードが選択されたか否かを判定する。第１解析モードが選択された場合（ステップＳ１１３：Ｙｅｓ）、画像解析部１８ａは、被写体情報を取得するために本画像の画像解析を行なう必要が無く、かつ、第２設定部１８ｃは、既にステップＳ１０６の処理で、画像処理パラメータも設定しているので、ＣＰＵ１８は、ステップＳ１１６の処理に移行する。

一方、第１解析モードが選択されていない場合（ステップＳ１１３：Nｏ）、画像解析部１８ａは、被写体情報を取得するために本画像の画像解析を行なう必要があるため、ＣＰＵ１８は、ステップＳ１１５の処理に移行する。

ステップＳ１１４：画像解析部１８ａは、第２解析モードや第３解析モードの場合、本画像の画像解析を行なう。例えば、顔認証を行なう場合、顔認証部２３は、顔領域Ｂに対して顔認識処理を行なうことにより、本画像から眼、鼻、口等の顔の器官を抽出する。

ステップＳ１１５：第２設定部１８ｃは、画像解析部１８ａの解析結果に基づいて、本画像の画像処理パラメータを設定する。

図１０は、画像処理パラメータの設定処理の一例を模式的に説明する図である。図１０（ａ）は、従来例を表している。この場合、従来例では、本画像に対して、先ず顔検出処理を行なう必要が生じる。つまり、従来例では、一例として図１０（ａ）に示す検出窓Ｗを用いて、顔領域の探索を行なう。

一方、図１０（ｂ）は、本実施形態における第１解析モードを表している。第１解析モードの場合、第２設定部１８ｃは、既にステップＳ１０６の処理で、画像処理パラメータを設定しているので、画像処理部１３は、ステップＳ１１２にて補正部１８ｅにより補正処理がされた後の顔領域Ｂの位置座標、サイズ（範囲）等をＲＡＭ１２から読み出すだけで良い。そのため、第２設定部１８ｃは、画像処理パラメータの設定の処理時間について、図１０（ａ）に示す従来例に比べて高速化できる。

また、第２解析モードの場合、画像解析部１８ａは、第２センサ１０８の被写体情報と第１センサ１０の被写体情報を考慮した詳細な被写体情報（例えば、顔認証の被写体情報）を取得しても良い。第２設定部１８ｃは、詳細な被写体情報に基づいて、最終的な画像処理パラメータを設定する。すなわち、第２解析モードの場合、画像解析部１８ａは、第１センサ１０の被写体情報を取得する際、第２センサ１０８の被写体情報を利用することができる。これにより、画像解析部１８ａは、第１センサ１０の被写体情報を取得する際の時間短縮と効率化を図ることができる。

また、第２設定部１８ｃは、第３解析モードの場合、第１センサ１０の被写体情報に基づいて、画像処理パラメータを設定する。

ステップＳ１１６：画像処理部１３は、第２設定部１８ｃが設定した画像処理用のパラメータに基づいて、画像処理を行なう。例えば、輪郭強調処理の画像処理パラメータが設定された場合、画像処理部１３は、被写体の顔の輪郭を強調する先鋭化処理を施す。例えば、画像処理部１３は、先鋭化処理の１つであるアンシャープマスク処理を行って、顔の輪郭を強調する。このアンシャープマスク処理により、画像処理部１３は、顔がはっきりとした画像を生成することができる。

或いは、ポートレートの画像処理パラメータが設定された場合、画像処理部１３は、ソフトフォーカス処理を行なう。ソフトフォーカス処理では、軟焦点調の画像処理が行われる。具体的には、画像処理部１３は、例えば、所定のソフトフォーカス効果を示すフィルタやローパスフィルタ等の処理を本画像に施す。

また、ホワイトバランス処理の画像処理パラメータが設定された場合、画像処理部１３は、検出された色温度に基づいて、本画像にホワイトバランス処理を施す。

また、顔認証を行なう設定の場合には、顔認証部２３は、例えば、記録媒体３０に記録されている画像に含まれている顔領域と本画像の顔領域とのパターンマッチングを行なう。そして、顔認証できた場合、ＣＰＵ１８は、例えば、表示モニタ１６に人物の名前を表示させる。

ステップＳ１１７：ＣＰＵ１８は、画像処理部１３で画像処理が施された画像データを、記録Ｉ／Ｆ部１５を介して、記録媒体３０に記録する。ＣＰＵ１８は、図５及び図６に示すフローの処理を終了させる。

以上より、本実施形態の電子カメラ１は、例えば第１解析モードにおいて、本画像取得前に画像処理パラメータを設定することができる。したがって、本実施形態の電子カメラ１は、本画像取得後に、画像処理パラメータの設定をせずに画像処理を行なうことができるため、画像処理パラメータを設定するまでの処理時間の高速化を図ることができる。
（上記実施形態の補足事項）
（１）上記実施形態では、主に静止している被写体を対象として説明した。例えば、動いている被写体を追尾して撮影する場合にも、本発明を適用しても良い。

図１１は、被写体を追尾して撮影する場合の本画像の画像処理の一例を説明する図である。図１１（ａ）は、第２センサ１０８の撮像領域に収まる被写体の一例を示す図である。ここでは、人物Ｐ２が、紙面に沿って右から左へと移動していることとする。

ここで、被写体追尾部２５は、撮影画面内における追尾対象（主要被写体）の位置をテンプレートマッチング処理により継続的に検出する。図１１（ｂ）は、第２センサ１０８が出力する画像信号に基づく追尾処理の一例を示す図である。図１１（ｂ）において、
先ず、顔検出部２２は、人物Ｐ２の顔を検出する。被写体追尾部２５は、人物Ｐ２の顔を囲む領域Ｃをテンプレート画像に設定する。なお、図１１（ｂ）に示す画像は、説明の便宜上、図２に示す第２センサ１０８の画素の配列との対応関係がわかるように描画している。そのため、実際には、格子状に描かれている画素の配列は、画像には現れないこととする。

被写体追尾部２５は、撮影画面内における追尾対象（主要被写体）の位置をテンプレートマッチング処理により継続的に検出する。ＣＰＵ１８は、顔領域Ｃの位置座標、サイズ（範囲）等の画像処理パラメータをＲＡＭ１２に記録する。

さらに、ＣＰＵ１８は、全押し操作に基づいて本画像の撮像を行なう。本画像の画像データは、一旦、ＲＡＭ１２に記録される。ここで、補正部１８ｅは、補正処理を行なう際、例えば、半押し操作からの被写体の移動に基づくズレを考慮して、顔の検出座標を推定しても良い。図１１（ｃ）は、被写体の移動に基づくズレを考慮して本画像内から顔検出を行なう場合の一例を示す図である。この場合も、被写体の顔の領域を探索する領域は狭められるので、図８（ａ）のように、顔検出部２２は、本画像内のすべての領域に対して探索する必要がない。そのため、電子カメラ１は、画像処理用パラメータを設定するまでの処理時間の高速化を図ることができる。

（２）上記実施形態では、顔認証を行なう場合には、第２解析モードを選択したが、第２センサ１０８を高解像度化することにより、第１解析モードで顔認証をしても良い。

１・・・電子カメラ、１０・・・第１センサ、１０８・・・第２センサ、１８ａ・・・画像解析部、１８ｃ・・・第２設定部、１３・・・画像処理部

Claims (7)

1. 撮像光学系の光軸に沿った第１光路からの光束を撮像し、第１画像を生成する第１撮像部と、
   前記第１撮像部の撮像待機時に前記第１光路と異なる第２光路が設定されることにより、前記第２光路からの光束を撮像し、第２画像を生成する第２撮像部と、
   前記第２画像を解析する画像解析部と、
   前記画像解析部の解析結果に基づいて、前記第１画像の画像処理用のパラメータを設定する設定部と、
   前記パラメータに基づいて、前記第１画像の画像処理を行なう画像処理部と、
   を備えることを特徴とする電子カメラ。
2. 請求項１に記載の電子カメラにおいて、
   前記第２画像の解析を行なう第１解析モードと、前記第１画像及び前記第２画像の解析を行なう第２解析モードとを選択する選択部をさらに備え、
   前記画像解析部は、前記選択部の選択結果に基づいて解析を行なうことを特徴とする電子カメラ。
3. 請求項２に記載の電子カメラにおいて、
   前記画像解析部は、前記第２画像の解析結果に基づいて、前記第１画像をさらに解析することを特徴とする電子カメラ。
4. 請求項２又は請求項３に記載の電子カメラにおいて、
   前記選択部は、前記第１画像を連続して撮像する連写撮影の場合には、前記第１解析モードを選択し、前記第１画像を１枚撮像する単写撮影の場合には、前記第２解析モードを選択することを特徴とする電子カメラ。
5. 請求項２又は請求項３に記載の電子カメラにおいて、
   前記画像解析部は、第２画像を解析することにより、撮影シーンの種別を認識し、
   前記選択部は、前記撮影シーンの種別に応じて、前記第１解析モード又は前記第２解析モードを選択することを特徴とする電子カメラ。
6. 請求項２又は請求項３に記載の電子カメラにおいて、
   前記選択部は、被写体を追尾して撮影する追尾撮影の場合には、前記第１解析モードを選択することを特徴とする電子カメラ。
7. 請求項１から請求項６の何れか１項に記載の電子カメラにおいて、
   前記第１撮像部の特性と前記第２撮像部の特性との差異に基づいて、前記第２画像の解析結果を補正する補正部をさらに備え、
   前記設定部は、前記補正が行なわれた解析結果に基づいて、前記パラメータを設定することを特徴とする電子カメラ。

Images