JP5512878B2 - 撮影装置及び表示制御方法 - Google Patents

Description

本発明は、少なくとも撮像範囲を特定して表示するファインダーであって、光学的に入力される光学画像を表示するオプチカルビューファインダー（ＯＶＦ）、並びに前記撮像素子によって撮像した電子画像を表示するエレクトリカルビューファインダー（ＥＶＦ）モードを備えた撮影装置及び表示制御方法に関するものである。

従来より、光学式（或いは枠式）ビューファインダー（ＯＶＦ）に入射した光学画像と、電子ビューファインダー（ＥＶＦ）によって表示された電子画像とをそれぞれハーフミラーを介して接眼部へ導く光学系を備えたハイブリッドビューファインダー（ＨＶＦ）が提案されている（特開平３−２９２０６７号公報参照）。

ＯＶＦでは、レンズを透過した像が直接、或いはミラーを介して、ユーザーの目に届くため、被写体の動きに対して電気的なタイムラグがなく即時性の高い撮影が可能となる。一方、ＯＶＦでは、ＥＶＦのように露出設定やホワイトバランス（ＷＢ）、被写界深度等の撮影条件の設定効果は表示されないため、ユーザーは設定効果を把握することができない。このため、ＯＶＦを使用して通常のＡＵＴＯ設定のまま撮影すると、条件によっては、ピントが合っていなかった、夜景で明るすぎた、ＷＢが合わなかったなどの失敗が起こり得る。

このような失敗を回避するために、ユーザーに現在の撮影条件の効果をリアルタイムに伝える必要があるが、これらの撮影条件の設定効果をユーザーが確認するためには、一旦ＥＶＦに変更しなくてはない。このファインダーの表示の切り替えがユーザーの使い勝手を損なうものとなっており、リアルタイムに状況が把握できるとは言い難いものとなっていた。

また、ＡＵＴＯ設定のような露出、ＷＢを標準に合わせる場合にはファインダーとしてＯＶＦを使用してもよいが、シーン認識など、撮影設定を極端に変更する場合には、その効果がＯＶＦのイメージと大きく異なるものとなるため、ユーザーに違和感を与える可能性がある。従って、ユーザーにリアルタイムに設定効果の情報を提示できないＯＶＦを使用して撮影設定することは困難である。

なお、特開平３−２９２０６７号公報に記載されているように、ＨＶＦでは、ＯＶＦとＥＶＦ（ＥＶＦにおいてはＯＶＦ窓（ファインダーシャッター）を閉める）とを切り替えて使い分ける他に、ファインダーシャッターを閉めずにＯＶＦ画像にＥＶＦ画像を重畳させるような使い方も可能である。

しかしながら、上記背景技術（特開平３−２９２０６７号）では、ファインダーの表示状態の切り替え時期についての言及はなく、ＯＶＦ使用時に撮影設定の変更が行われた場合に、ＯＶＦの使用感（即時性）を損なうことなく、リアルタイムに撮影効果をユーザーに提示するための技術は何ら開示されていない。

本発明は上記事実を考慮し、接眼部に電子画像や合成画像が表示されておらず光学画像が表示されている際に撮影条件の変更が行われた場合に、光学画像の即時性を損なうことなく、リアルタイムに撮影条件の変更の効果をユーザーに提示することが可能な撮影装置及び表示制御方法を提供することを目的とする。

本発明の撮影装置は、撮影レンズを介して被写体を撮影することにより得られ且つ設定された撮影条件に応じた電子画像が表示部に表示されるように制御する表示制御部と、前記表示部に表示された電子画像、及び光学的に入射された前記被写体の光学画像のいずれか一方、或いは双方を合成した合成画像を接眼部に案内するための案内部と、前記光学画像が前記接眼部に案内され前記電子画像及び前記合成画像が前記接眼部に案内されていない状態で、前記撮影条件が変更されたときに、前記合成画像が前記接眼部に案内されるよう前記案内部を制御する第１の制御と、該第１の制御の後予め定められた時間が経過したとき又は該第１の制御の後ユーザーにより予め定められた操作が行われたときに、前記光学画像が前記接眼部に案内され前記電子画像及び前記合成画像が前記接眼部に案内されないよう前記案内部を制御する第２の制御とを行なう案内制御部と、を備えている。

このように、電子画像や合成画像は接眼部には案内されず光学画像が接眼部に案内された状態で撮影条件が変更された場合に、合成画像が接眼部に案内されるように制御され、その後、予め定められた時間が経過したとき又はユーザーにより予め定められた操作が行われたときに、光学画像が接眼部に案内され電子画像及び合成画像が接眼部に案内されないよう制御するため、光学画像の即時性を損なうことなく、リアルタイムに撮影条件の変更の効果をユーザーに提示することが可能となる。

なお、本発明の撮影装置は、撮影シーンを認識するシーン認識部と、前記シーン認識部によって認識された撮影シーンに応じて前記撮影条件を変更する変更部と、を更に備えていることを特徴としている。

なお、前記表示制御部は、前記案内制御部による前記第１の制御を行っている期間に、前記電子画像の輝度が前記電子画像の視認性が向上する輝度となるように制御するようにしてもよい。

また、前記接眼部に案内される合成画像は、前記光学画像の予め定められた領域に前記電子画像の少なくとも一部を配置した画像としてもよい。

更にまた、本発明の撮影装置は、前記電子画像の輝度と、前記撮影環境の明るさとを比較する比較部を更に備え、前記案内制御部は、前記比較部の比較結果に基づいて前記電子画像の輝度を調整しても前記電子画像の視認性が向上しないと判断した場合には、前記光学画像の前記予め定められた領域の画像を遮光して得られる合成画像が前記接眼部に案内されるように前記案内部を制御するものとしてもよい。

更にまた、本発明の撮影装置は、前記電子画像の輝度と、撮影環境の明るさとを比較する比較手段を更に備え、前記案内制御手段は、前記比較手段の比較結果に基づいて前記電子画像の輝度を調整しても前記電子画像の視認性が向上しないと判断した場合には、前記光学画像の前記予め定められた領域の画像を遮光して得られる合成画像が前記接眼部に案内されるように前記案内手段を制御するものとしてもよい。

また、本発明の撮影装置は、前記電子画像の輝度と、撮影環境の明るさとを比較する比較手段、を更に備え、前記案内制御手段は、前記比較手段の比較結果に基づいて前記電子画像の輝度を調整しても前記電子画像の視認性が向上しないと判断した場合には、前記第１の制御の代わりに、前記電子画像が前記接眼部に案内され前記光学画像及び前記合成画像が前記接眼部に案内されないように前記案内手段を制御する第３の制御を行なうようにしてもよい。

また、本発明の撮影装置は、被写体距離を測定する測定部と、前記測定された被写体距離に基づいて、前記電子画像と前記光学画像とのずれを補正するための補正量を導出する補正量導出部と、を更に備え、前記接眼部に案内される合成画像は、前記光学画像の前記検出された位置を前記導出された補正量に応じて補正した位置に前記検出された被写体を含む前記電子画像を重ね合わせた画像としてもよい。

また、本発明の表示制御方法は、撮影レンズを介して被写体を撮影することにより得られ且つ設定された撮影条件に応じた電子画像が表示部に表示されるように制御し、前記表示部に表示された電子画像、及び光学的に入射された前記被写体の光学画像のいずれか一方、或いは双方を合成した合成画像を接眼部に案内するための案内部により、前記光学画像が前記接眼部に案内され前記電子画像及び前記合成画像が前記接眼部に案内されていない状態で、前記撮影条件が変更されたときに、前記合成画像が前記接眼部に案内されるよう前記案内部を制御する第１の制御と、該第１の制御の後予め定められた時間が経過したとき又は該第１の制御の後ユーザーにより予め定められた操作が行われたときに、前記光学画像が前記接眼部に案内され前記電子画像及び前記合成画像が前記接眼部に案内されないよう前記案内部を制御する第２の制御とを行なうことを特徴としている。

本発明の表示制御方法も、本発明の撮影装置と同様に作用するため、光学画像の即時性を損なうことなく、リアルタイムに撮影条件の変更の効果をユーザーに提示することが可能となる。

以上説明した如く本発明では、光学画像の即時性を損なうことなく、リアルタイムに撮影条件の変更の効果をユーザーに提示することが可能となる。

（Ａ）は本実施の形態に係るデジタルカメラの正面図、（Ｂ）は背面図である。 本実施の形態に係るデジタルカメラの内部構成を示す概略ブロック図である。 本実施の形態に係るデジタルカメラにおける撮像制御系を主体とした制御ブロック図である。 （Ａ）は、ＯＶＦ画像を示す図であり、（Ｂ）は、ＥＶＦ画像を示す図であり、（Ｃ）は、ＯＶＦ画像とＥＶＦ画像とを重畳させた状態を示す図である。 ファインダーの表示切替制御処理の流れの一例を示すフローチャートである。 （Ａ）は、ＯＶＦ画像の全面にＥＶＦ画像を重畳させた状態を示す図であり、（Ｂ）は、ＥＶＦ画像を縮小してＯＶＦ画像の端部に配置して表示した状態（ＥＶＦ縮小表示）を示す図であり、（Ｃ）は、ＯＶＦ画像の半分に縮小しないＥＶＦ画像を重畳して表示した状態（ＥＶＦ半面表示）を示す図である。 シーン認識機能実行時の表示切替制御処理の流れの一例を示すフローチャートである。 環境の明るさに応じてＥＶＦ画像が見えにくくなる状態を説明する説明図である。 ＥＶＦ画像の輝度を調整して表示制御する表示制御処理の流れの一例を示すフローチャートである。 環境の明るさの変動範囲と、ＥＶＦ画像の輝度の調整可能範囲との関係を示す図である。 ＥＶＦ画像の輝度を調整すると共にファインダーシャッターの開閉を制御する表示制御処理の流れの一例を示すフローチャートである。 ファインダーシャッターを制御して得られた遮光領域にＥＶＦ画像を表示したときの状態を示す図である。 ＥＶＦ画像の輝度の調整しても環境の明るさに追従できない場合の処理を含む表示制御処理の流れの一例を示すフローチャートである。 手ブレ量が許容範囲を超えた場合にＥＶＦ表示モードに切り替える表示制御処理の一例を示すフローチャートである。 （Ａ）は、ＯＶＦ画像を示す図であり、（Ｂ）はＥＶＦ画像を示す図であり、（Ｃ）は、ＥＶＦ半面表示を示す図であり、（Ｄ）は、検出した被写体（ここでは人物の顔）を含む領域にＥＶＦ画像を重畳した状態を示す図である。 （Ａ）はパララクス補正なしのＨＶＦ表示状態、（Ｂ）はパララクス補正ありのＨＶＦ表示状態を示す図である。 パララクス補正処理の流れの一例を示すフローチャートである。

図１（Ａ）に示される如く、撮影装置としてのデジタルカメラ１０の正面には、被写体像を結像させるためのレンズ１２Ｌを備えた鏡筒１２が備えられており、上面には、撮像（撮影）を実行する際にユーザーによって押圧操作されるレリーズボタン（所謂シャッター）１４と、電源スイッチ１６と、が備えられている。

なお、本実施の形態に係るレリーズボタン１４は、中間位置まで押下される状態（以下、「半押し状態」、又は「Ｓ１オン状態」という。）と、当該中間位置を超えた最終押下位置まで押下される状態（以下、「全押し状態」又は「Ｓ２オン状態」という。）と、の２段階の押圧操作が検出可能に構成されている。

デジタルカメラ１０は、レリーズボタン１４を前記半押し状態にすることによりＡＥ（Ａｕｔｏｍａｔｉｃ Ｅｘｐｏｓｕｒｅ、自動露出）機能が働いて露出状態（シャッタースピード、絞りの状態）が設定された後、ＡＦ（Ａｕｔｏ Ｆｏｃｕｓ、自動合焦）機能が働いて合焦制御され、その後、引き続き、前記全押し状態にすると撮影（撮像）が可能に構成されている。なお、露出等の撮影条件は自動制御だけでなく、ユーザーにより手動で設定可能に構成されている。

一方、図１（Ｂ）に示される如く、デジタルカメラ１０の背面には、オプチカルビューファインダー（以下、［ＯＶＦ」という）と、エレクトリカルビューファインダー（以下、「ＥＶＦ」という）とが併用された接眼部１８が設けられている。ＥＶＦとＯＶＦについての詳細は後述する。なお、接眼部１８に対向するように、デジタルカメラ１０の正面（図１（Ａ）参照）には、対物レンズ２０が設けられている。

また、デジタルカメラ１０の背面には、撮影によって得られたデジタル画像データにより示される被写体像や各種メニュー画面、メッセージ等を表示するための背面ＬＣＤ２２と、撮影を行なうモードである撮影モード及び撮影によって得られたデジタル画像データにより示される被写体像を背面ＬＣＤ２２に表示（再生）するモードである再生モードのいずれかのモードに設定するために操作されるモード切替スイッチ２４と、背面ＬＣＤ２２の表示領域における上下左右の４方向の移動方向を示す４つの矢印キー及び当該４つの矢印キーの中央部に位置された決定キーの合計５つのキーを含んで構成された十字カーソルボタン２６と、が備えられている。なお、入力操作系は、前記モード切替スイッチ２４、十字カーソルボタン２６に限定されるものではなく、背面ＬＣＤ２２にタッチパネル２２ＴＰ（図２参照）機能を持たせるようにしてもよい。従って、必要に応じて全ての入力操作系を総称する場合、「操作部２８（図２参照）」と呼ぶ場合がある。

図２には、デジタルカメラ１０における内部の光路構成と、撮像画像の処理を行なう制御のハード資源である制御ブロック図とが示されている。

前記鏡筒１２のレンズ１２Ｌから入射した光は、撮像素子（本実施の形態ではＣＣＤ３０であるが、ＣＭＯＳ等でもよい）で受光され、電気信号に変換されるようになっている。入射光に応じた電気信号は、メインコントローラ３２に入力され、各種処理が実行される。メインコントローラ３２には、鏡筒駆動ドライバ３４が接続されており、鏡筒１２を光軸方向に移動させ、撮影倍率や焦点距離を変更するようになっている。なお、ＣＣＤ３０にはシャッター装置が設けられ、該シャッター装置のシャッタースピードを制御することによりＣＣＤ３０の電荷の蓄積時間を制御することもできる。

また、メインコントローラ３２には、ＬＣＤＩ／Ｆ３６を介して、前記背面ＬＣＤ２２が接続されると共に、モード切替スイッチ２４や十字カーソルボタン２６を含む操作部２８が接続されている（背面ＬＣＤ２２がタッチパネル機能を備える場合は、このタッチパネル２２ＴＰも含むものとする）。

更に、メインコントローラ３２には、外部メモリＩ／Ｆ３８（リーダ／ライタ兼用）が接続され、この外部メモリＩ／Ｆ３８に装填されるメモリカード４０へ画像データを記録したり、メモリカード４０から画像データを取得する。

ここで、本実施の形態では、メインコントローラ３２に、ＥＶＦ及びＯＶＦの併用ファインダー（ハイブリッドビューファインダー、以下ＨＶＦという）を実現するために、ＬＣＤＩ／Ｆ４２を介して表示部としてＥＶＦＬＣＤ４４が接続されると共に、遮光部としてのファインダーシャッター４６が接続されている。ファインダーシャッター４６は、ＯＶＦ画像（光学画像）を接眼部１８へ案内するときは開放され、ＥＶＦ画像（電子画像）のみを接眼部１８へ案内するときに閉止される。

このファインダーシャッター４６は、液晶シャッターであって、縦横に配列された画素単位で開閉可能であるが、所謂メカニカルなシャッターであってもよい。メカニカルなシャッターの場合は、接眼部１８からの見える画像は、四方の辺の一つから徐々に遮光膜が出没する構成となっている。

すなわち、図２に示される如く、デジタルカメラ１０の内部において、光学的に対物レンズ２０を介して入射された被写体画像（ＯＶＦ画像）の光路４８、表示部としてのＥＶＦＬＣＤ４４に表示された画像（ＥＶＦ画像）の光路５０は、前記接眼部１８の手前でハーフミラー５２によって一致される（同軸）ようになっている。このため、ファインダーがＯＶＦ及びＥＶＦを併用したＨＦＶとなっている場合には、ユーザーが接眼部１８を覗くと、ＯＶＦ画像とＥＶＦ画像の双方を見ることが可能となっている。なお、本実施の形態では、デフォルト設定として、ＥＶＦＬＣＤ４４の表示はオフとし、ＯＶＦ画像のみで撮影するようになっている。

また、本実施の形態に係るデジタルカメラ１０では、ＥＶＦＬＣＤ４４として発光ダイオード式バックライト（以下、「ＬＥＤ式バックライト」という。）を備えたＬＣＤが適用され、前記背面ＬＣＤ２２として光電管式バックライトを備えたＬＣＤが適用されているが、これに限定されるものではない。

次に、図３を参照して、本実施の形態に係るデジタルカメラ１０における、主として撮像処理制御系の構成を説明する。

デジタルカメラ１０は、前述のレンズ１２Ｌを含んで構成され、鏡筒駆動ドライバ３４によって光軸方向へ移動する鏡筒１２と、鏡筒１２の光軸後方に配設されたＣＣＤ３０と、相関二重サンプリング回路（以下、「ＣＤＳ」という。）を含んで構成されたアナログ信号処理部５４と、入力されたアナログ信号をデジタルデータに変換するアナログ／デジタル変換器（以下、「ＡＤＣ」という。）５６と、所定容量のラインバッファを内蔵し、かつ入力されたデジタル画像データを後述するメモリ５８の所定領域に直接記憶させる制御を行なうと共に、デジタル画像データに対して各種の画像処理を行なうデジタル信号処理部６０と、を含んで構成されている。

ここで、アナログ信号処理部５４のＣＤＳによる相関二重サンプリング処理は、固体撮像素子の出力信号に含まれるノイズ（特に熱雑音）等を軽減することを目的として、固体撮像素子の１画素毎の出力信号に含まれるフィードスルー成分レベルと画素信号成分レベルとの差をとることにより正確な画素データを得る処理である。

一方、デジタルカメラ１０は、デジタル画像データにより示される画像やメニュー画面等を背面ＬＣＤ２２に表示させるための信号を生成して背面ＬＣＤ２２に供給するＬＣＤＩ／Ｆ３６と、デジタル画像データにより示される画像やメニュー画面等をＥＶＦＬＣＤ４４に表示させるための信号を生成してＥＶＦＬＣＤ４４に供給するＬＣＤＩ／Ｆ４２と、デジタルカメラ１０全体の動作を司るＣＰＵ（中央処理装置）６６と、主として撮影により得られたデジタル画像データを記憶するＶＲＡＭ（Ｖｉｄｅｏ ＲＡＭ）により構成されたメモリ５８と、スマートメディア（Ｓｍａｒｔ Ｍｅｄｉａ(登録商標)）により構成されたメモリカード４０をデジタルカメラ１０でアクセス可能とするための外部メモリＩ／Ｆ３８と、所定の圧縮形式でデジタル画像データに対して圧縮処理を施す一方、圧縮処理されたデジタル画像データに対して圧縮形式に応じた伸張処理を施す圧縮・伸張処理回路６８と、を含んで構成されている。

また、デジタルカメラ１０には、デジタル信号処理部６０により画像処理されたデジタル画像データに基づいて、被写体（本実施の形態では人物の顔）の位置を検出する顔検出部７４と、レンズ１２Ｌから被写体までの距離を測定する測距部７６とが備えられている。

なお、顔検出部７４の顔検出は、公知の方法を用いて行なう。例えば、予め人の肌色に対応する、後述する色差信号（クロマ信号）の範囲を決定しておき、撮像画像情報の各画素の色差信号が、当該範囲内にあるか否かを判定することにより肌色の領域の有無を判定し、撮像画像情報により示される被写体に対する肌色を有する領域の割合が予め定められた大きさ以上であれば、当該肌色を有する領域を肌色領域として抽出する。次いで、抽出した肌色領域内の予め定められた位置範囲内に目、鼻、口、眉などの肌色でないパターンが含まれるか否かを判定し、これらのパターンが含まれている場合に、該肌色領域を顔の領域であるものと判定する。また、色相や彩度の２次元ヒストグラムからクラスターを求め、クラスターの内部構造、形状、接続する外部構造から顔を判定する方法などを利用しても良い。

メモリ５８、デジタル信号処理部６０、ＬＣＤＩ／Ｆ３６、４２、ＣＰＵ６６、外部メモリＩ／Ｆ３８、圧縮・伸張処理回路６８、顔検出部７４、及び測距部７６はシステムバス７０を介して相互に接続されている。従って、ＣＰＵ６６は、デジタル信号処理部６０、圧縮・伸張処理回路６８、顔検出部７４、及び測距部７６の作動の制御、背面ＬＣＤ２２及びＥＶＦＬＣＤ４４に対する各種情報の表示、メモリ５８及びメモリカード４０へのアクセスを行なうことができる。

一方、デジタルカメラ１０には、主としてＣＣＤ３０を駆動させるためのタイミング信号を生成してＣＣＤ３０に供給するタイミングジェネレータ７２が備えられており、ＣＣＤ３０の駆動はＣＰＵ６６によりタイミングジェネレータ６６を介して制御される。

ＣＰＵ６６は、ＣＣＤ３０による撮像によって得られた画像のコントラスト値が最大となるように合焦制御を行なう（ＴＴＬ「Ｔｈｒｏｕｇｈ Ｔｈｅ Ｌｅｎｓ」方式）。

なお、図３の破線で囲まれた各構成要素が、メモリコントローラ３２を構成する構成要素である。ところで、ここでは図示を省略したが、デジタルカメラ１０には、メインコントローラ３２により絞り径の調整が可能な絞り機構がレンズ１２Ｌに対して設けられている。撮影条件の１つである露出は、絞り機構や上記ＣＣＤ３０のシャッタースピードにより調整される。また、撮影条件として、絞りや被写界深度を調整する場合には、絞り機構が調整される。また、ホワイトバランスを調整する場合には、画像処理を行なうデジタル信号処理部６０が制御される。メインコントローラ３２は、設定された撮影条件が反映された撮影がなされるように、該設定に応じて、絞り機構やＣＣＤのシャッタースピード、ホワイトバランス調整のためのゲイン等を制御する。なお、デジタルカメラ１０の撮影条件は、予め定められた記憶部（例えばメモリ５８など）に記憶され上記各種制御に用いられる。撮影条件を変更するときは該記憶されている撮影条件を変更する。

以下に本実施の形態の作用を説明する。

（通常の撮像／再生動作）

デジタルカメラ１０が、撮像モードに切り替えられている場合、鏡筒１２内のレンズ１２Ｌを介した撮像によってＣＣＤ３０から出力された被写体像を示す信号は順次アナログ信号処理部５４に入力されて相関二重サンプリング処理等のアナログ信号処理が施された後にＡＤＣ５６に入力され、ＡＤＣ５６は、アナログ信号処理部５４から入力されたＲ（赤）、Ｇ（緑）、Ｂ（青）の信号を各々８〜１２ビットのＲ、Ｇ、Ｂ信号（デジタル画像データ）に変換してデジタル信号処理部３０に出力する。

デジタル信号処理部６０は、ラインバッファにＡＤＣ５６から順次入力されるデジタル画像データを蓄積して一旦メモリ５８の所定領域に格納する。

メモリ５８の所定領域に格納されたデジタル画像データは、ＣＰＵ６６による制御下でデジタル信号処理部６０によって読み出され、これらに所定の物理量に応じたデジタルゲインをかけることでホワイトバランス調整を行なうと共に、ガンマ処理及びシャープネス処理を行なって８ビットのデジタル画像データを生成し、更にＹＣ信号処理を施して輝度信号Ｙとクロマ信号Ｃｒ、Ｃｂ（以下、「ＹＣ信号」という。）を生成し、ＹＣ信号をメモリ５８の上記所定領域とは異なる領域に格納する。

なお、本実施の形態に係る背面ＬＣＤ２２は、ＣＣＤ３０による連続的な撮像によって得られた動画像（スルー画像、或いはスルー画ともいう。）を表示してファインダーとして使用することができるものとして構成されているが、このように背面ＬＣＤ２２をファインダーとして使用する場合には、生成したＹＣ信号（映像信号）を、ＬＣＤＩ／Ｆ６２を介して順次背面ＬＣＤ２２に出力する。これによって背面ＬＣＤ２２にスルー画像が表示されることになる。これは、ＥＶＦＬＣＤ４４においても同様である。

ここで、レリーズボタン１４がユーザーによって半押し状態（Ｓ１）とされた場合、前述のようにＡＥ機能が働いて露出状態が設定された後、ＡＦ機能が働いて合焦制御され、その後、引き続き全押し状態（Ｓ２）とされた場合、この時点でメモリ５８に格納されているＹＣ信号を、圧縮・伸張処理回路６８によって所定の圧縮形式（本実施の形態では、ＪＰＥＧ形式）で圧縮した後に外部メモリＩ／Ｆ３８を介してメモリカード４０に記録することによって、撮影が行われる。

一方、メモリカード４０（又はメモリ６６）に記憶された画像データは、背面ＬＣＤ２２（又は、ＥＶＦＬＣＤ４４）に表示させることができる。すなわち、デジタルカメラ１１を、撮像モードから再生モードに切り替えると、背面ＬＣＤ２２（ＥＶＦＬＣＤ４４）は、前述のようなスルー画像ではなく、既にメモリカード４０（又はメモリ６６）に記憶された画像データを読み出して表示する。この表示は背面ＬＣＤ２２（ＥＶＦＬＣＤ４４）の表示領域に１枚分の画像を表示することを基準として、２枚以上、或いは１枚の画像のトリミング画像を操作部２８の操作によって表示させることができる。

（ファインダーの表示モードの切り替え）

本実施の形態に係るデジタルカメラ１０において、接眼部１８にＯＶＦ画像を表示する場合（ＯＶＦ表示モードという）には、メインコントローラ３２は、ファインダーシャッター４６を制御して開放状態にし、対物レンズ２０の光路４８を遮光しないようにする。また、ＥＶＦＬＣＤ４４をオフ状態にして、ＥＶＦ画像が接眼部１８に表示されないように制御する。

また、接眼部１８にＥＶＦ画像を表示する場合（ＥＶＦ表示モードという）には、メインコントローラ３２は、ファインダーシャッター４６を制御して閉止状態にし、対物レンズ２０の光路４８を遮光する。また、ＥＶＦＬＣＤ４４をオン状態にして、ＥＶＦ画像が接眼部１８に表示されるように制御する。

また、接眼部１８にＯＶＦ画像及びＥＶＦ画像を同時に表示、すなわち重畳して表示する場合（ＨＶＦ表示モードという）には、メインコントローラ３２は、ファインダーシャッター４６を制御して開放状態にし、対物レンズ２０の光路４８を遮光しないようにすると共に、ＥＶＦＬＣＤ４４をオン状態にして、ＯＶＦ画像及びＥＶＦ画像の双方が接眼部１８に表示（すなわち、ＯＶＦ画像とＥＶＦ画像が合成された合成画像が表示）されるように制御する。

（撮影設定の変更）

本実施の形態に係るデジタルカメラ１０は、シーン認識機能を備えている。シーン認識機能は、画像信号や輝度値に基づいて撮影シーン（例えば、人物、風景、夜景、接写など）を認識し、該認識されたシーンに応じて自動的に撮影設定を変更する機能である。なお、撮影シーンをユーザーが手動で設定することも可能である。なお、撮影シーンを自動で認識する場合及び手動で設定する場合のいずれにおいても、撮影シーンに応じて撮影条件の設定（露出、ＷＢ、或いは絞りの少なくとも１つを含むものとする）が変更されるため、極端に露出、ＷＢ、或いは絞りが変更されることもある。更にまた、ユーザー自身が、露出やホワイトバランス（ＷＢ）、或いは絞りを個別に調整することもできる。これにより、ユーザーは、露出やＷＢ、絞り等を設定可能な範囲内で自由に設定することができる。以下、撮影条件の設定を、単に撮影設定という場合もある。

このシーン認識は、メインコントローラ３２により行われる。

なお、露出やＷＢ等の撮影設定が変更されると、デジタル信号処理部６０により該撮影設定の変更に応じた画像処理が施されたデジタル画像データが生成されるため、表示されるＥＶＦ画像は撮影効果が反映されたものとなる。従って、ユーザーは、接眼部１８にＥＶＦ画像が表示されている場合には、撮影設定が変更されたときの撮影効果を把握することができる。また、背面ＬＣＤ２２をファインダーとして使用している場合も同様に、該撮影設定の変更が反映されたＥＶＦ画像が表示される。一方、ＯＶＦ画像には、撮影設定の変更は反映されないため、接眼部１８にＯＶＦ画像のみが表示されている状態では、露出の設定や、ホワイトバランス（ＷＢ）の設定や、絞り（被写界深度）の設定等の撮影設定が変更された場合には、ユーザーは設定変更の効果を把握できない（画像に反映されない）。ＯＶＦ表示モード中に該効果を確認するためには、従来の技術では、ＥＶＦ表示モードに切り替えたり、背面ＬＣＤ２２にＥＶＦ画像を表示させるようにする等の切り替えが必要となるが、これらの切り替えを行なうことは、撮影までのタイムラグを発生させ、ＯＶＦ表示モードによる動作の即時性が損なってしまうこととなる。

（表示切替制御処理）

そこで、本実施の形態では、ＯＶＦ表示モード中に撮影設定が変更された場合には、設定変更から予め定められた時間が経過するまでＨＶＦ表示モードに切り替えて、該設定変更に応じて画像処理が施されたＥＶＦ画像（図４（Ｂ）も参照。）をＯＶＦ画像（図４（Ａ）も参照。）に重畳させた合成画像（ＨＶＦ画像ともいう。図４（Ｃ）も参照。）を接眼部１８に表示させるようにする。

図５は、表示切替制御処理の流れの一例を示すフローチャートである。なお、表示切替制御処理のプログラムは、メインコントローラ３２のＣＰＵ６６により実行されるプログラムの１つとして、不図示の記憶部に記憶されている。

ステップ１００では、撮影設定の変更を行なう。なお、この撮影設定は、露出の設定、ＷＢの設定、及び絞り（被写界深度）の設定の少なくとも1つを含む。

ステップ１０２では、現在の表示状態を判断する。現在の表示状態が、ＯＶＦ表示モードである場合には、ステップ１０４に進む。

ステップ１０４では、ＥＶＦ／ＯＶＦ同時表示を行なうモード、すなわちＨＶＦ表示モードに切り替える。これにより、図４（Ｃ）に示すように、上記撮影設定の変更内容が反映されたＥＶＦ画像とＯＶＦ画像とが重畳された合成画像が接眼部１８に表示される。

ステップ１０６では、ＨＶＦ表示モードに切替えてから所定時間が経過したか否かを判断する。所定時間が経過するまでは、ＨＶＦ表示モードを継続し、所定時間が経過したときには、ステップ１０８に進み、ＥＶＦ／ＯＶＦ同時表示を行なうモード、すなわちＨＶＦ表示モードを解除し、ＯＶＦ表示モードに切り替える。これにより、接眼部１８の表示状態は、図４（Ａ）に示すようにＯＶＦ画像のみが表示された状態となる。

一方、ステップ１０２で、現在の表示状態が、ＥＶＦ表示モードである場合、或いは、背面ＬＣＤ２２にＥＶＦ画像が表示されている場合には、ステップ１０４〜ステップ１０８を行なわずに表示切替制御処理を終了する。

このように、本実施の形態では、撮影設定の変更時に一定時間自動でＨＶＦ画像を表示し、その後ＨＦＶ表示をオフする（ＯＶＦ表示に戻す）制御を行なうことで、ＯＶＦ使用時に撮影設定の変更が行われた場合でも、ＯＶＦの使用感（即時性）を損なうことなく、リアルタイムに撮影効果をユーザーに提示することが可能となる。

なお、このＨＶＦ表示モード中に、ユーザーが操作部２８を操作することにより、所定時間が経過する前に、ＯＶＦ表示モードに復帰させることが可能に構成してもよい。また、ＯＶＦ表示モードに切り替えた後に、露出の設定値、ＷＢの設定値、及び絞りの設定値の少なくとも１つが、該切り替え時の値から予め定められた閾値以上変更された場合に、ステップ１０４でＨＶＦ表示モードに切り替えるようにしてもよい。

ところで、ＯＶＦ画像にＥＶＦ画像を単純に重ねただけでは、ＯＶＦ画像とＥＶＦ画像とで二重像となるため、露出など撮影設定効果は確認できるが視認性の悪い状態になってしまうこともある（図６（Ａ）も参照）。

そこで、ＯＶＦ画像の全面にＥＶＦ画像の全面を重ねるのではなく、図６（Ｂ）に示すように、ＥＶＦ画像を縮小し、該縮小画像をＯＶＦ画像の縁辺に配置するようにしてもよい。これにより、ＯＶＦ画像の見た目を損なわずリアルタイムに撮影設定状態をユーザーに提示することができる。以下、ＨＶＦ表示モードにおいて、このようにＥＶＦ画像の縮小画像を重畳する表示方法をＥＶＦ縮小表示という。

なお、ユーザーの設定によらず、シーン認識機能により撮影シーンを自動的に認識したときの認識結果をそのまま用いて撮影設定を変更して撮影する場合もあるが、ユーザーが該認識結果を最終的に承認して設定する（確定する）か或いはキャンセルするかの操作入力を可能に構成した場合には、ユーザーが撮影シーンの認識結果を確定するまでシーン認識を継続することができる。

このような撮影設定の変更課程において、撮影シーンの認識結果が確定していない期間は、図６（Ｂ）に示すように、ＥＶＦ画像の縮小画像をＯＶＦ画像に重畳させて表示させ、撮影シーンの認識結果が確定した時に、図６（Ｃ）に示すように、ＯＶＦ画像の左半分或いは右半分の領域を重畳領域として、ＥＶＦ画像から該重畳領域に対応する画像部分を縮小せずに該重畳領域に重ねて表示してもよい。以下、ＨＶＦ表示モードにおいて、このようにＯＶＦ画像の半面にＥＶＦ画像の半面を重畳する表示方法をＥＶＦ半面表示という。ここで、図６（Ｃ）では、ＯＶＦ画像の左半分にＥＶＦ画像を重畳させているが、前述したように、ＥＶＦ画像を重畳する重畳領域は、ＯＶＦ画像の右半分でもよい。また、該重畳領域は、上半分であってもよいし、下半分であってもよい。

なお、確定前の段階であっても、ＥＶＦ半面表示を行なうようにしてもよい。これにより、ＥＶＦ縮小表示における縮小されたＥＶＦ画像だけでは確認できない細部のイメージまでユーザーに伝えることができ、ＯＶＦ画像とＥＶＦ画像を比較しながらの撮影を行なうことが可能となる。以下、図７を参照して説明する。

図７は、シーン認識機能実行時の表示切替制御処理の流れの一例を示すフローチャートである。なお、以下では、シーン認識機能によってシーン認識結果が出ることを「シーン確定」といい、ユーザーによって該認識結果が承認されて撮影シーンが設定される「確定」とは区別して説明する。

ステップ２００では、シーン認識機能によりシーン認識が開始される。シーン認識機能による認識結果に応じて撮影設定の変更が行われる。

ステップ２０２では、現在の表示状態を判断する。現在の表示状態が、ＯＶＦ表示モードである場合には、ステップ２０４に進む。

ステップ１０４では、ＥＶＦ／ＯＶＦ同時表示を行なうモード、すなわちＨＶＦ表示モードに切り替える。なお、このとき、ＥＶＦ画像を示すデジタル画像データに縮小処理を施し、ＥＶＦ画像を縮小した縮小画像をＯＶＦ画像の端部に重ねて表示させて、ＥＶＦ縮小表示状態にする。

なお、シーン確定するまでは、シーン認識動作が継続される（ステップ２０６、２０８）。ステップ２０８で、シーン確定した後は、撮影条件を該シーン確定した撮影シーンに応じた撮影条件に変更し、該変更の効果が反映されたＥＶＦ画像を表示する。次に、ステップ２１０で、ユーザーが、操作部２８を介して設定変更を入力した（ユーザーが認識結果を確定せずにキャンセルして、再度シーン認識させる指示が入力された）か否かを判断する。ここで、設定変更が入力されたと判断した場合には、ステップ２１２に進み、設定変更を行い（すなわち、認識結果をキャンセルし）、ステップ２０６に戻って、再度シーン認識を行なう。なお、ユーザーにより認識結果が確定されるまでは、ＥＶＦ縮小表示が継続される。

一方、ステップ２１０で、設定変更が入力されなかった、すなわち、シーン認識機能による認識結果をユーザーが確定した場合には、ステップ２１６に進む。

ステップ２１４では、ＥＶＦ縮小表示からＥＶＦ半面表示に切り替える。

ステップ２１６では、Ｓ１がＯＮ状態とされたか否かを判断する。ステップ２１６で否定判断した場合には、ステップ２１８に進む。

ステップ２１８では、ＥＶＦ半面表示を開始してから所定時間が経過したか否かを判断する。所定時間が経過するまでは、ＥＶＦ半面表示のＨＶＦ表示モードを継続し、所定時間が経過したときには、ステップ２２０に進み、ＥＶＦ半面表示のＨＶＦ表示モードを解除し、ＯＶＦ表示モードに切り替える。

一方、ステップ２１６で肯定判断した場合には、ステップ２１８をスキップして、ステップ２２０に進み、ＥＶＦ半面表示のＨＶＦ表示モードを解除し、ＯＶＦ表示モードに切り替える。

また、ステップ２０４で、現在の表示状態が、ＥＶＦ表示モードである場合、或いは、背面ＬＣＤ２２にＥＶＦ画像が表示されている場合には、ステップ２２２に進み、すなわち、ＥＶＦ画像が接眼部１８或いは背面ＬＣＤ２２に表示されるように制御する通常の処理が行われる。

このように、シーン認識結果が確定するまでの通常状態ではＥＶＦ縮小表示を行い、シーン認識結果が確定した後は、ＥＶＦ半面表示に切り替え、Ｓ１がＯＮされたことによるＥＶＦ半面表示の解除、或いは一定時間経過後の解除を行なう。これにより、ユーザーがＯＶＦ画像から目を離して、ＥＶＦ表示モードへの切り替えを行なうことなく、撮影時の設定を確認することが可能となり、ＨＶＦに適したシーン認識の提示と迅速な撮影とが可能となる。

なお、ここでは、撮影シーンを認識した結果が確定していない期間は、ＥＶＦ縮小表示とし、撮影シーン確定時に、ＥＶＦ半面表示に切り替える例について説明したが、これに限定されない。

例えば、シーン認識機能により撮影設定を変更するのではなく、ユーザー自身が操作部２８を操作して直接撮影設定の変更を行なう場合には、例えば露出等の値を変化させている期間（すなわち撮影設定が確定する前の段階）は、ＥＶＦ縮小表示とし、ユーザーが操作部２８の確定ボタンなどを押下することにより、露出、ＷＢ等の撮影設定を確定させたときに、ＥＶＦ半面表示に切り替えるようにしてもよい。

また、撮影シーンの確定などによらず、撮影設定の変更を行なう際には、常にＥＶＦ半面表示で表示するようにしてもよい。また、Ｓ１がＯＮ状態になったことにより、ＥＶＦ半面表示を解除してＯＶＦ表示モードに切り替わる例について説明したが、操作部２８のレリーズボタン１４以外のスイッチやボタンを操作することで、ＥＶＦ半面表示を解除してＯＶＦ表示モードに切り替わるようにしてもよい。

以上説明したように、ＯＶＦ画像上にＥＶＦ画像を部分的に配置することで、ＯＶＦ画像とＥＶＦ画像の重ね合わせによる全体的な視認性の悪化を最小限に抑え、ＯＶＦの即時性を維持したまま、シーン認識、露出、ＷＢなどの撮影効果が確認できるようになる。

ところで、ＥＶＦ画像とＯＶＦ画像とを透過同時表示するＨＶＦ表示モードでは、上記の二重像の問題の他に、明るすぎる環境や、暗すぎる環境では正確なＷＢや露出が判断しづらいことがある。具体的には、図８の下段に示すように、環境の明るさに応じたＯＶＦ画像の輝度が中輝度となる場合には、ＥＶＦ画像が外光（ＯＶＦ画像）に対して弱すぎる（輝度が低すぎる）こともなく、見えやすいためＨＶＦ表示モードによる撮影設定の効果はわかりやすいが、図８の上段に示すように、例えば、環境の明るさが明るすぎる（ＯＶＦ画像の輝度が高すぎる）場合には、ＥＶＦ画像が外光に対して弱すぎ（輝度が低すぎ）、撮影設定の効果がわかりにくくなることがある。また、環境が暗すぎる（輝度が低すぎる）場合も同様である。

そこで、このような環境による見えにくさ改善のため、ＥＶＦ画像の輝度を視認性が向上するように調整して表示するようにしてもよい。具体的には、例えば、シーン認識機能による認識結果は、通常、環境の明るさに応じたものとなるため、予め撮影シーン毎に視認性が向上するＥＶＦ画像の輝度の値をデジタルカメラ１０に登録しておき、シーン認識結果に応じてＥＶＦ画像の輝度を変更するようにしてもよい。以下、図９を参照して説明する。

図９は、ＥＶＦ画像の輝度を調整して表示制御する表示制御処理の流れの一例を示すフローチャートである。なお、撮影シーン毎にＥＶＦ画像の目標輝度が、撮影シーン毎に予めデジタルカメラ１０の記憶部（ここでは不図示）に記憶（登録）されているものとする。以下、ＥＶＦ画像の目標輝度を登録輝度と呼称する。

ステップ３００では、シーン認識機能によるシーン認識結果を取得する。ステップ３０２では、ＥＶＦ画像の表示輝度を取得する。

ステップ３０４では、上記取得したＥＶＦ画像の表示輝度と、シーン認識結果が示す撮影シーンにおけるＥＶＦ画像の目標輝度として予め記憶されている登録輝度（以下、シーン認識時の登録輝度と呼称する）とを比較する。

ステップ３０６では、ステップ３０４の比較結果に基づいて、ＥＶＦ画像の輝度を調整する必要があるか否かを判断する。例えば、ＥＶＦ画像の表示輝度と、シーン認識時の登録輝度との差分が予め定められた閾値を超えている場合には、ＥＶＦ画像の輝度を調整する必要があると判断し、該差分が閾値以下の場合には、ＥＶＦ画像の輝度を調整する必要がないと判断してもよい。ステップ３０６で、ＥＶＦ画像の輝度を調整する必要があると判断した場合には、ステップ３０８で、デジタル信号処理部６０を制御して、ＥＶＦ画像の輝度が該登録輝度となるように画像処理を実行させ、ＥＶＦ画像の輝度を調整する。

そして、ＨＶＦ表示モードでは、当該調整されたＥＶＦ画像が表示されるように制御する（図５のステップ１０４、図７のステップ２０４、ステップ２１４も参照）。

なお、ここでは、シーン認識結果が示す撮影シーンに応じてＥＶＦ画像の輝度を調整するようにしたが、シーン認識結果の代わりに環境の明るさを取得して、環境の明るさに応じてＥＶＦ画像の視認性が向上するようＥＶＦ画像の輝度を調整するようにしてもよい。

また、ここでは、ＥＶＦ画像の輝度を調整するようにしたが、対物レンズ２０とファインダーシャッター４６との間に、光量を制限するＮＤフィルターを移動可能に設け、該ＮＤフィルターによりＯＶＦ画像の輝度を調整するようにしてもよい。

以上説明したように、ＥＶＦ画像の輝度を調整することで、環境による見えにくさの改善を図ることができるが、図１０に示すように、環境の明るさの変動範囲は、ＥＶＦ画像の輝度の調整可能範囲よりも広いため、ＥＶＦ画像の輝度と外光（環境の明るさ）との差がある程度大きくなると、輝度調整だけでは改善されないことがある。

そこで、このような場合にはＥＶＦ画像の輝度調整だけでなく、ファインダーシャッター４６におけるＥＶＦ画像の表示範囲に対応する部分を閉じる物理的な制御を行なうことで、ＥＶＦ画像の下地となる外光（ＯＶＦ画像）を遮り、ＥＶＦ画像の見えにくさを改善を行なうようにしてもよい。以下、図１１を参照して説明する。

図１１は、ＥＶＦ画像の輝度を調整すると共にファインダーシャッター４６の開閉を制御する表示制御処理の流れの一例を示すフローチャートである。

ステップ４００では、シーン認識機能によるシーン認識結果を取得する。ステップ４０２では、ＥＶＦ画像（シーン認識結果に応じた撮影設定が反映されている画像）の表示輝度を取得する。

ステップ４０４では、デジタル信号処理部６０により撮影設定に応じた画像処理が施される前のスルー画から撮影環境の明るさを示す値を取得する。なお、ここではスルー画に基づいて環境の明るさを示す値を取得する場合を例に挙げて説明したが、デジタルカメラ１０に被写体の光量を測定する測光部を別途設け、該光量から環境の明るさを検出して取得するようにしてもよい。

ステップ４０６では、撮影環境の明るさとＥＶＦ画像の表示輝度とを比較する。なお、ここで、撮影環境の明るさに応じて定まるＯＶＦ画像の輝度と、ＥＶＦ画像の表示輝度とを比較するようにしてもよい。

ステップ４０８では、ステップ４０６の比較結果に基づいて、ＥＶＦ画像の輝度を調整する必要があるか否かを判断する。例えば、撮影環境の明るさに応じて定まるＯＶＦ画像の輝度と、ＥＶＦ画像の表示輝度との差分が予め定められた閾値を超えている場合には、ＥＶＦ画像の輝度を調整する必要があると判断し、該差分が閾値以下の場合には、ＥＶＦ画像の輝度を調整する必要がないと判断してもよい。

ステップ４０８で、ＥＶＦ画像の輝度を調整する必要がないと判断した場合には、ＥＶＦ画像の輝度調整やファインダーシャッター制御は行われない。

一方、ステップ４０８で、ＥＶＦ画像の輝度を調整する必要があると判断した場合には、ステップ４１０で、ＥＶＦ画像の輝度の調整で環境の明るさに追従できるか否かを判断する。ここで、追従可能とは、撮影環境の明るさに対してＥＶＦ画像の輝度調整でＥＶＦ画像の視認性を向上させることが可能となることをいう。

ステップ４１０で、追従可能と判断した場合には、ステップ４１２に進む。ステップ４１２では、撮影環境の明るさに応じてＥＶＦ画像の輝度が視認性が向上する輝度となるようにデジタル信号処理部６０を制御して画像処理を実行させる。

ステップ４１０で、追従不可能と判断した場合には、ファインダーシャッター４６をハーフ動作（液晶シャッターにおいて、ＥＶＦ画像を表示させる部分に対応する領域を閉状態にし、残りを開状態にする）させ、ＯＶＦ画像においてＥＶＦ画像が配置される部分が遮光されるように制御する。接眼部１８の該遮光領域に相当する部分には、ＯＶＦ画像が表示されなくなる。

ステップ４１２では、ＥＶＦ画像の輝度が、視認性が向上する方向に可能な限り補正されるようデジタル信号処理部６０を制御する。

そして、ＨＶＦ表示モードでは、当該輝度補正されたＥＶＦ画像が表示されるように制御する。これにより、図１２に示すように、接眼部１８において、ファインダーシャッター４６の遮光領域上にはＥＶＦ画像のみが表示されるため、ＯＶＦ画像の影響を受けずに撮影効果を判断できる。

以上説明したように、撮影環境に応じたＥＶＦの輝度制御とファインダーシャッター制御を同時に行なうことで、ＥＶＦ画像とＯＶＦ画像の同時表示でも、環境の明るさによらず正確な撮影効果の判断ができるようになる。

なお、図９，図１１では、シーン認識機能を使用して撮影設定を変更する際のＥＶＦ画像輝度制御（及びファインダーシャッター４６の駆動制御）を行なう例について説明したが、手動で撮影設定が変更される場合等、撮影設定が変更される他の場合においても、上記と同様に、ＥＶＦ画像の輝度調整やファインダーシャッター４６の駆動制御を行なうことができる。

上記説明したように、環境の明るさに応じてＥＶＦ画像の輝度の補正を行っても、更に明るすぎる環境や暗すぎる環境では、メカ的な限界により補正で追従できなくなりＯＶＦ画像の視界とＥＶＦ画像との差分が拡がり、撮影設定の効果を同時表示で確認するには難しい環境があり得る。このような状況では、撮影設定に応じたＥＶＦ画像の輝度と環境の明るさとを比較し、輝度調整ではＥＶＦ画像の視認性が向上しないと判断した場合に、ＥＶＦ表示モードに切り替えるようにしてもよい。以下、図１３を参照して説明する。なお、図１３に示す処理は、デジタルカメラ１０がＯＶＦ表示モードからＨＶＦ表示モードに切り替えられた後（図５及び図７も参照）に実行されるものとする。

ステップ５００では、撮影環境の明るさ（環境の明るさ）を示す値を取得する。

ステップ５０２では、ＥＶＦ画像の表示輝度を取得する。

ステップ５０４では、前述のステップ４０６と同様に、撮影環境の明るさとＥＶＦ画像の表示輝度とを比較する。

ステップ５０６では、前述したステップ４０８の処理と同様に、ステップ５０４の比較結果に基づいてＥＶＦ画像の輝度を調整する必要があるか否かを判断する。

ステップ５０６で、ＥＶＦ画像の輝度を調整する必要がないと判断した場合には、ＥＶＦ画像の輝度調整やファインダーの表示モードの切り替えは行われない。

一方、ステップ５０６で、ＥＶＦ画像の輝度を調整する必要があると判断した場合には、ステップ５０８で、ＥＶＦ画像の輝度の調整で環境の明るさに追従できるか否かを判断する。ステップ５０８で、追従可能と判断した場合には、ステップ５１０に進む。ステップ５１０では、撮影環境の明るさに応じてＥＶＦ画像の輝度が視認性が向上する輝度となるようにデジタル信号処理部６０を制御して画像処理を実行させる。

また、ステップ５０８で、追従不可能と判断した場合には、ＨＶＦ表示モードからＥＶＦ表示モードに切り替える。

なお、ＥＶＦ表示モードに切り替えた後は、例えば、Ｓ１がＯＮされた場合、或いは予め定められた時間が経過した場合に、ＯＶＦ表示モードに切り替えるようにしてもよいし、そのままＥＶＦ表示モードを継続してもよい。

以上説明したように、ＯＶＦ画像とＥＶＦ画像の同時表示（ＨＶＦ表示モード）において、ＯＶＦ画像とＥＶＦ画像の輝度差が大きい場合には、これを撮影環境から自動でデジタルカメラ１０側が判断して、ＥＶＦ表示モードに表示変更するようにしたため、ユーザーは撮影設定の効果を正確に判断できる。

なお、ここでは、ＥＶＦ表示モードに切り替える場合を例に挙げて説明したが、ＯＶＦ表示モードに切り替えてもよい。また、ユーザーの選択でＥＶＦ表示モードとＯＶＦ表示モードのどちらを優先するか決定する機能が設けられていてもよい。

ところで、手ブレなどの要因でＥＶＦ画像の視界とＯＶＦ画像の差が大きくなりすぎることがある。そこで、ＨＶＦ表示モードでカメラを構えたときに、手ブレを検出し、検出した手ブレが大きければ手ブレ補正をしたＥＶＦ画像を表示するＥＶＦ表示モードに自動で切り替えるように構成してもよい。この場合には、手ブレを検出する手ブレ検出部がデジタルカメラ１０に設けられているものとするが、ここでは図示を省略する。ここで、図１４を参照して詳細に説明する。図１４に示す処理は、デジタルカメラ１０がＯＶＦ表示モードからＨＶＦ表示モードに切り替えられた後（図５及び図７も参照）に実行されるものとする。

ステップ６００では、手ブレ検出部からブレ量を取得する。

ステップ６０２では、取得したブレ量が予め定められた許容範囲内であるか否かを判断する。ステップ６０２で否定判断した場合には、ステップ６０４で、手ブレ補正がされたＥＶＦ画像を表示するＥＶＦ表示モードに切り替える。また、ステップ６０２で肯定判断した場合には、ＨＶＦ表示モードを継続する。

なお、表示が切り替えられた場合には手ブレしている状態であるため、ＥＶＦ表示モードに切り替えられた後は、Ｓ１がＯＮ状態とされても、ＥＶＦ表示モードを解除せず、そのまま撮影まで（Ｓ２がＯＮとされるまで）ＥＶＦ表示モードを継続してもよい。

以上説明したように、ＯＶＦ画像は手ブレが直接見えてしまうが、ＥＶＦ表示モードに自動で切り替えることで、安定したフォーカスを行なうことができる。

なお、上記では、ＥＶＦ画像を縮小しないでＯＶＦ画像に重ねる場合の具体例として、ＯＶＦ画像の全面にＥＶＦ画像を重畳させる表示（図６（Ａ）も参照）や、ＥＶＦ半面表示（図６（Ｃ）も参照）を例に挙げて説明したが、これに限定されない。例えば、顔検出部７４により顔検出を行ったり、不図示のオブジェクト認識部によりオブジェクト認識を行ったりする場合には、具体的に、検出された顔や認識されたオブジェクトがユーザーが撮りたいものであろうことが予測される。従って、この場合には、ＯＶＦ画像の半分にＥＶＦ画像を重畳する（図１５（Ｃ）も参照。）代わりに、検出された顔や認識されたオブジェクトを含む領域（ユーザーが主被写体として指定するであろう被写体の部分）にＥＶＦ画像を重畳させるようにしてもよい（図１５（Ｄ）も参照）。

例えば、図１５に示す例では、撮像領域の右側に人物の顔が存在している。従って、ユーザーが撮影効果を確認したいと予測される領域は、左側の領域ではなく、右側であって人物の顔が存在する領域である。従って、人物が存在しない左半分にＥＶＦ画像を重畳させて表示するよりは、人物の顔が存在する領域にＥＶＦ画像を重畳するようにすることで、ユーザーが撮影効果を知りたい箇所の画像について撮影効果の確認ができるため、ユーザーにとってより好ましい表示形態となる。

このように、顔検出した場合には、検出した顔の位置にＥＶＦ画像を重畳させることによって、ＯＶＦ表示モードからＥＶＦ表示モードへの切り替えを行なわずに、撮影時の色味や階調等の撮影効果をユーザーに把握させることができる。なお、顔検出に限定されず、前述したようにユーザーにより指定されたオブジェクトを認識させる機能がデジタルカメラ１０に設けられている場合には、該認識されたオブジェクトを含む領域にＥＶＦ画像を重畳すればよく、これによっても、同様の効果が得られる。

なお、上記のように、被写体認識した箇所にＥＶＦ画像を重畳する場合、パララクスにより、図１６（Ａ）に示すように、ＯＶＦ画像に対してＥＶＦ画像が正しい位置に表示されない可能性がある。

ここで、パララクスは、ファインダー用の対物レンズ２０が、撮影用のレンズ１２Ｌとは別に設けられているために生じるものである。ＯＶＦ画像は対物レンズ２０から入射した光により表される光学画像であり、ＥＶＦ画像は、撮影用のレンズ１２Ｌから入射した光を撮像素子３０により受光して得られた電子画像であるため、ＯＶＦ画像とＥＶＦ画像とで位置ずれが生じることがある。なお、近接撮影ほど（被写体が近いほど）、パララクス（被写体像のずれ）は大きくなる。

そこで、顔検出したときの被写体距離（デジタルカメラから被写体までの距離）に基づいて、ＥＶＦ画像とＯＶＦ画像のパララクス量を補正するようにしてもよい。

図１７は、パララクス補正処理の流れの一例を示すフローチャートである。なお、このパララクス補正処理は、ＨＶＦ表示モードによる表示中に実行される。

ステップ７００では、顔検出部７４で被写体（ここでは人物の顔）を検出させる。

ステップ７０２では、顔検出部７４からの検出結果に基づいて、撮影領域に被写体が存在するか否かを判断する。ステップ７０２で肯定判断した場合には、ステップ７０４に進む。

ステップ７０４では、測距部７６で検出された被写体距離（以下、被写体検出距離という）に基づいて、パララクス補正量（ＥＶＦ画像の位置の補正量）を算出する。前述したように、被写体検出距離が短いほどパララクスは大きくなるため、被写体検出距離が短いほどパララクス補正量が大きくなる算出式を用いて算出する。なお、被写体検出距離とパララクス補正量とを対応付けたテーブルを記憶部に記憶しておき、該テーブルを参照してパララクス補正量を求めるようにしてもよい。

ところで、被写体検出距離が短すぎるため、パララクスが大きくなりすぎて、検出された被写体の多くの部分がＯＶＦ画像に存在しない場合がある。このような場合には、上記算出したパララクス補正量によりＥＶＦ画像の位置をずらしてＯＶＦ画像に重畳したとしても、被写体の撮影効果を確認することができない。このような被写体検出距離はパララクス補正可能な距離とはいえない。そこで、ステップ７０６で、検出された被写体の位置と上記算出したパララクス補正量から、被写体検出距離がパララクス補正可能な距離かを判断し、可能であると判断した場合には、ステップ７０８で、デジタル信号処理部６０を制御し、上記算出したパララクス補正量によりＥＶＦ画像の位置を補正してＥＶＦ画像を表示する（図１６（Ｂ）も参照。）。

一方、ステップ７０６で、被写体検出距離がパララクス補正不可能な距離であると判断した場合には、ステップ７１０で、通常の表示、すなわち、パララクス補正しない位置（被写体検出位置）にＥＶＦ画像を表示する。

以上説明したように、ＨＶＦ表示モード中は、ＥＶＦ画像及びＯＶＦ画像のパララクスを考慮し、両方の画像が表示できるように補正することで、被写体の位置にだけＥＶＦ画像を重畳させる状態でもパララクスの影響を少なくでき正しい位置にＥＶＦ画像を表示することが可能となる。

なお、接眼部１８にユーザーが眼を近づけたか否かを検出するセンサを設けてもよい。この場合、例えば、撮影条件の設定変更がなされた後、ＯＶＦ表示モードからＨＶＦ表示モードに切り替えられる前（例えば、図５のステップ１００とステップ１０２の間、或いは図７のステップ２００とステップ２０２の間）に、接眼部１８にユーザーが眼を近づけたか否かを検出して判断するステップを設け、眼を近づけたと判断した場合に、次のステップ、すなわち、ＨＶＦ表示モードに切り替える処理を行うようにしてもよい。これにより、設定変更した後、接眼部１８をのぞいたタイミングで表示を切り替えることができる。

Claims (9)

1. 撮影レンズを介して被写体を撮影することにより得られ且つ設定された撮影条件に応じた電子画像が、表示部に表示されるように制御する表示制御部と、
   前記表示部に表示された電子画像、及び光学的に入射された前記被写体の光学画像のいずれか一方、或いは双方を合成した合成画像を接眼部に案内する案内部と、
   前記光学画像が前記接眼部に案内され前記電子画像及び前記合成画像が前記接眼部に案内されていない状態で、前記撮影条件が変更されたときに、前記合成画像が前記接眼部に案内されるよう前記案内部を制御する第１の制御と、該第１の制御の後予め定められた時間が経過したとき又は該第１の制御の後ユーザーにより予め定められた操作が行われたときに、前記光学画像が前記接眼部に案内され前記電子画像及び前記合成画像が前記接眼部に案内されないよう前記案内部を制御する第２の制御とを行なう案内制御部と、
   を備えた撮影装置。
2. 撮影シーンを認識するシーン認識部と、
   前記シーン認識部によって認識された撮影シーンに応じて前記撮影条件を変更する変更部と、
   を更に備えた、請求項１の撮影装置。
3. 前記表示制御部は、前記案内制御部による前記第１の制御を行っている期間に、前記電子画像の輝度が前記電子画像の視認性が向上する輝度となるように制御する、
   請求項１の撮影装置。
4. 前記接眼部に案内される合成画像は、前記光学画像の予め定められた領域に前記電子画像の少なくとも一部を配置した画像である、
   請求項１の撮影装置。
5. 前記電子画像の輝度と、撮影環境の明るさとを比較する比較部を更に備え、
   前記案内制御部は、前記比較部の比較結果に基づいて前記電子画像の輝度を調整しても前記電子画像の視認性が向上しないと判断した場合には、前記光学画像の前記予め定められた領域の画像を遮光して得られる合成画像が前記接眼部に案内されるように前記案内部を制御する、
   請求項４の撮影装置。
6. 前記電子画像の輝度と、撮影環境の明るさとを比較する比較部を更に備え、
   前記案内制御部は、前記比較部の比較結果に基づいて前記電子画像の輝度を調整しても前記電子画像の視認性が向上しないと判断した場合には、前記第１の制御の代わりに、前記電子画像が前記接眼部に案内され前記光学画像及び前記合成画像が前記接眼部に案内されないように前記案内部を制御する第３の制御を行なう、
   請求項３に記載の撮影装置。
7. 前記電子画像から被写体の位置を検出する検出部を更に備え、
   前記接眼部に案内される合成画像は、前記光学画像の前記検出部により検出された被写体の位置に前記被写体を含む前記電子画像を重ね合わせた画像である、
   請求項１の撮影装置。
8. 被写体距離を測定する測定部と、
   前記測定部により測定された被写体距離に基づいて、前記電子画像と前記光学画像とのずれを補正するための補正量を導出する補正量導出部と、
   を更に備え、
   前記接眼部に案内される合成画像は、前記光学画像の前記検出された位置を前記導出された補正量に応じて補正した位置に前記検出された被写体を含む前記電子画像を重ね合わせた画像である
   請求項７の撮影装置。
9. 撮影レンズを介して被写体を撮影することにより得られ且つ設定された撮影条件に応じた電子画像が、表示部に表示されるように制御し、
   前記表示部に表示された電子画像、及び光学的に入射された前記被写体の光学画像のいずれか一方、或いは双方を合成した合成画像を接眼部に案内するための案内部により、前記光学画像が前記接眼部に案内され前記電子画像及び前記合成画像が前記接眼部に案内されていない状態で、前記撮影条件が変更されたときに、前記合成画像が前記接眼部に案内されるよう前記案内部を制御する第１の制御と、該第１の制御の後予め定められた時間が経過したとき又は該第１の制御の後ユーザーにより予め定められた操作が行われたときに、前記光学画像が前記接眼部に案内され前記電子画像及び前記合成画像が前記接眼部に案内されないよう前記案内部を制御する第２の制御とを行う、
   表示制御方法。