JP5767755B2 - 画像処理装置、撮像装置、画像処理方法及びプログラム - Google Patents

Description

本発明は画像処理装置、撮像装置、画像処理方法及びプログラムに係り、特に、複数の表示手段におけるスプリットイメージの表示手法に関する。

カメラ（撮像装置）のピント合わせの手法として、ユーザ（撮影者）が手動でピント合わせを行うマニュアルフォーカス方式と、自動でピント合わせを行うオートフォーカス方式とがあり、両方式のうち任意の方式を選択可能とするカメラが知られている。

マニュアルフォーカスは、ユーザの目視によりピント合わせを行う必要があり、被写体像の特性や撮影状況によっては、目視によるピント合わせを正確に行うことが難しい場合がある。そのため、マニュアルフォーカス時のピント合わせを補助する技法として、いわゆるスプリットイメージを表示部（ビューファインダ、背面液晶ディスプレイ等）に表示させる手法が提案されている。

スプリットイメージはマニュアルフォーカス時のピント確認に使用される画像であり、例えば２種類の位相差画素から得られる画像同士を並置することでスプリットイメージを構成することが可能である。このようなスプリットイメージでは、ピントが合っていない箇所は位相がずれるため画像がずれて表示され、ピントが合っている箇所は画像のずれもなくクリアに表示される。ユーザは、このスプリットイメージのずれ具合を目視で確認しながら、ピント合わせを精度良く行うことができる。

スプリットイメージを利用した装置として、例えば特許文献１は、２つの測距位置でそれぞれ撮像された２つの被写体画像からスプリットイメージを形成するマニュアルフォーカス装置を開示する。

また特許文献２は、２つの光学像の位相差に対応するスプリットイメージを生成し、マニュアルフォーカス時にスプリットイメージと部分画像とを表示手段に切り換え表示する撮像装置を開示する。

特開２００４−０４０７４０号公報 特開２００９−２３７２１４号公報

上述のように、マニュアルフォーカス時に合焦状態の確認を補助するスプリットイメージは、ビューファインダや背面液晶ディスプレイ等の表示部に表示される。ユーザは、これらの表示部に表示されるスプリットイメージを確認しながら、ピント合わせを行う。

したがって、カメラが複数の表示系を備える場合、それぞれの表示系にスプリットイメージを表示可能とすることが好ましい。例えば、ユーザがＥＶＦ（エレクトリックビューファインダ）を覗き込んでピント合わせをする場合には、ＥＶＦにスプリットイメージを表示することが好ましい。一方、ユーザがＥＶＦを覗き込んでおらず背面液晶ディスプレイを介してピント合わせを行っていると推測される場合には、背面液晶ディスプレイにスプリットイメージを表示させることが好ましい。

これらの複数の表示部は、必ずしも解像度特性が一致しておらず、例えばＥＶＦの解像度が背面液晶ディスプレイの解像度よりも高い場合もある。複数の表示部の解像度が異なる場合、スプリットイメージの表示（大きさ、拡縮率等）に関して表示部間で適切に整合させないと、使用感の悪いカメラになってしまう。

特に、位相差を検出する撮像画素（位相差画素）の撮像信号に基づいてスプリットイメージが作成される場合、位相差画素は、通常画素と比べて画素数が少なかったり、撮像素子上における配置エリアが限定されていたり、まばらに配置されていたりする。したがって位相差画素を利用する場合には、位相差画素の配置特性と各表示部の解像度とを考慮し、それぞれの表示部に表示するスプリットイメージの表示形態を最適化することが、使用感を向上させる観点からは好ましい。

しかしながら、複数の表示部の各々におけるスプリットイメージの最適化表示を実現する手法を開示乃至提案する従来技術文献は見当たらない。

例えば特許文献１は、画像処理回路からの出力画像とフォーカス画像出力回路から出力されたスプリットイメージとをバックモニタやファインダ内のモニタに表示出力することを開示しているが、バックモニタ及びファインダの各々におけるスプリットイメージの具体的な表示調整手法に関しては、開示も示唆もしていない。また特許文献２は、表示部１９（液晶ディスプレイ等）に表示されるスプリットイメージの位置や大きさを変更可能とすることを開示しているが、スプリットイメージの表示を複数の表示部間で調整する手法に関しては、開示も示唆もしていない。

本発明は上述の事情に鑑みてなされたものであり、複数の表示手段間でスプリットイメージ（合焦確認画像）の表示に関して調和を持たせ、ユーザの使用感を向上させる技術を提供することを目的とする。

本発明の一態様は、撮影レンズの第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１の画素群及び第２の画素群を有する撮像素子から出力される画像信号に基づいて第１の表示用画像を生成し、かつ第１の画素群及び第２の画素群から出力された第１の画像信号及び第２の画像信号に基づく第１の画像及び第２の画像から合焦確認に使用する第２の表示用画像を生成する画像生成手段と、第１の表示用画像及び第２の表示用画像を表示する第１の表示手段及び第２の表示手段と、第１の表示手段及び第２の表示手段のうち少なくとも一方に対し、画像生成手段により生成された第１の表示用画像を表示させ、かつ第１の表示用画像の表示領域内に画像生成手段により生成された第２の表示用画像を表示させる制御を行う表示制御手段と、を備え、画像生成手段は、第１の表示用画像及び第２の表示用画像の間引き率、拡大率及び縮小率のうち少なくともいずれか１つが、第１の表示用画像と第２の表示用画像との間で異なるように第１の表示用画像及び第２の表示用画像を生成し、画像生成手段は、第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素、第２の表示用画像の拡大率及び縮小率、及び第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを、第１の表示手段と第２の表示手段との間で異ならせる画像処理装置に関する。

本態様によれば、第１の表示手段に表示する第２の表示用画像と第２の表示手段に表示する第２の表示用画像とを、第２の表示用画像の生成に使用する画素、第２の表示用画像の拡縮率（拡大率及び縮小率）、及び第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを異ならせることで調和させることが可能である。

なお、「第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素」を第１の表示手段と第２の表示手段との間で異ならせるというは、第１の表示手段に表示する第２の表示用画像の生成に実質的に寄与する画素と第２の表示手段に表示する第２の表示用画像の生成に実質的に寄与する画素とが、少なくとも一部分において異なることを意味する。したがって、第１の表示手段に表示する第２の表示用画像の生成に実質的に寄与する画素は、第２の表示手段に表示する第２の表示用画像の生成に実質的に寄与する画素の全部又は一部を含んでいてもよい。これにより、第１の表示手段の解像度に最適化された「第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素」により第１の表示手段に表示する第２の表示用画像を生成し、また第２の表示手段の解像度に最適化された「第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素」により第２の表示手段に表示する第２の表示用画像を生成することで、第１の表示手段及び第２の表示手段に表示する第２の表示用画像に調和を持たせることが可能である。

また、「第２の表示用画像の拡大率及び縮小率」を第１の表示手段と第２の表示手段との間で異ならせるというは、第１の表示手段に表示する第２の表示用画像の拡大率／縮小率が第２の表示手段に表示する第２の表示用画像の拡大率／縮小率と異なることを意味する。したがって、第１の表示手段の解像度に最適化された「撮像素子の第１の画素群及び第２の画素群から得られる画素データ（画像）に対する拡大率又は縮小率」により第１の表示手段に表示する第２の表示用画像を生成し、また第２の表示手段の解像度に最適化された「撮像素子の第１の画素群及び第２の画素群から得られる画素データ（画像）に対する拡大率又は縮小率」により第２の表示手段に表示する第２の表示用画像を生成することで、第１の表示手段及び第２の表示手段に表示する第２の表示用画像に調和を持たせることが可能である。

また、「第２の表示用画像を表示する画素領域」を第１の表示手段と第２の表示手段との間で異ならせるというは、第１の表示手段に表示する第２の表示用画像の画素領域（表示領域）が第２の表示手段に表示する第２の表示用画像と異なることを意味し、表示領域全体に対する構成画素数、表示位置、等の要素の少なくともいずれか１つが異なっていればよい。したがって、第１の表示手段の解像度に最適化された「第２の表示用画像を表示する画素領域」に対応するように第１の表示手段に表示する第２の表示用画像を生成し、また第２の表示手段の解像度に最適化された「第２の表示用画像を表示する画素領域」に対応するように第２の表示手段に表示する第２の表示用画像を生成することで、第１の表示手段及び第２の表示手段に表示する第２の表示用画像に調和を持たせることが可能である。

また、「第１の表示用画像及び第２の表示用画像の間引き率、拡大率及び縮小率のうち少なくともいずれか１つが、第１の表示用画像と第２の表示用画像との間で異なる」場合には、例えば、第１の表示手段及び／又は第２の表示手段に表示される第１の表示用画像及び第２の表示用画像との間で、「画像生成に寄与する撮像素子上の画素の間引きの程度（撮像素子上における画素ピッチ（インターバル））」や「画像生成に寄与する撮像素子上の画素に対する表示用画像の構成画素数の比率」が異なる場合が含まれうる。

なお、本明細書における「同じ」、「同一」、「一致」或いはこれらに準ずる表記は、必ずしも完全な「同じ」、「同一」或いは「一致」している場合のみ示すとは限らず、実質的に「同じ」、「同一」或いは「一致」している場合も含みうる。

望ましくは、第１の表示手段の表示領域の画素数は、第２の表示手段の表示領域の画素数よりも多い。

本態様のように、第１の表示手段の表示領域の画素数と第２の表示手段の表示領域の画素数とが異なる場合にユーザの使用感が悪くなりやすいが、本態様によれば、第１の表示手段に表示する第２の表示用画像と第２の表示手段に表示する第２の表示用画像とを調和させて、使用感を向上させることが可能である。

望ましくは、画像生成手段は、間引き処理、拡大処理、縮小処理のうち少なくともいずれか１つを実施して第２の表示用画像を生成し、第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素の間引き率、第２の表示用画像の拡大率、及び第２の表示用画像の縮小率のうち少なくともいずれか１つを、第１の表示手段に表示させる第２の表示用画像と第２の表示手段に表示させる第２の表示用画像との間で一致させる。

本態様によれば、第１の表示手段に表示する第２の表示用画像と第２の表示手段に表示する第２の表示用画像との間で、第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素の間引き率、第２の表示用画像の拡大率、及び第２の表示用画像の縮小率のうち少なくともいずれか１つを一致させて調和させることができる。なお、ここでいう「一致」とは、「完全に一致する場合」には必ずしも限定されず、「略一致する場合」も該当しうる。

望ましくは、画像生成手段は、第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素を、第１の表示手段に表示させる第２の表示用画像と第２の表示手段に表示させる第２の表示用画像との間で異ならせる。

本態様によれば、第１の表示手段に表示させる第２の表示用画像と第２の表示手段に表示させる第２の表示用画像との間で、第２の表示用画像の生成に使用する画素を異ならせて調和させることができる。

ここでいう「第２の表示用画像の生成に使用する画素を異ならせる」というのは、第１の表示手段に表示する第２の表示用画像と第２の表示手段に表示する第２の表示用画像との間で、完全に同一の画素を使用する場合を除外することを意味する。したがって、必ずしも、第１の表示手段に表示させる第２の表示用画像と第２の表示手段に表示させる第２の表示用画像との間で、完全に異なる画素を第２の表示用画像の生成に使用する場合に限定されるものではなく、両者間で共通の画素が含まれていてもよい。

望ましくは、画像生成手段は、第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する撮像素子上の画素範囲を、第１の表示手段に表示させる第２の表示用画像と第２の表示手段に表示させる第２の表示用画像との間で異ならせる。

本態様によれば、第１の表示手段に表示させる第２の表示用画像と第２の表示手段に表示させる第２の表示用画像との間で、第２の表示用画像の生成に使用する撮像素子上の画素範囲を異ならせて調和させることができる。

ここでいう「第２の表示用画像の生成に使用する撮像素子上の画素範囲を異ならせる」というのは、第１の表示手段に表示する第２の表示用画像と第２の表示手段に表示する第２の表示用画像との間で、完全に同一の画素範囲の画素を使用する場合を除外することを意味する。したがって、必ずしも、第１の表示手段に表示させる第２の表示用画像と第２の表示手段に表示させる第２の表示用画像との間で、完全に異なる画素範囲の画素を第２の表示用画像の生成に使用する場合に限定されるものではなく、両者間で共通の画素範囲が含まれていてもよい。

望ましくは、画像生成手段は、第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する撮像素子上の画素範囲に含まれる全画素を第２の表示用画像の生成に使用する。

本態様によれば、第２の表示用画像の生成に使用する撮像素子上の画素範囲に含まれる第１の画素群及び第２の画素群の全画素が第２の表示用画像の生成に使用されるため、高品質の第２の表示用画像を生成することが可能である。

望ましくは、第１の表示手段に表示させる第２の表示用画像と第２の表示手段に表示させる第２の表示用画像のうち少なくともいずれか一方の生成に使用する撮像素子上の画素は、第１の画素群及び第２の画素群を構成する全画素である。

望ましくは、第１の表示手段に表示させる第２の表示用画像と第２の表示手段に表示させる第２の表示用画像のうち少なくともいずれか一方の生成に使用する撮像素子上の画素は、第１の画素群及び第２の画素群を構成する画素の一部である。

望ましくは、画像生成手段は、第１の表示手段に表示させる第２の表示用画像の画角範囲と第２の表示手段に表示させる第２の表示用画像の画角範囲とが同じになるように、第２の表示用画像の拡大率及び縮小率を第１の表示手段と第２の表示手段との間で異ならせる。

本態様によれば、第２の表示用画像の拡縮率を第１の表示手段と第２の表示手段との間で異ならせることで、第１の表示手段に表示させる第２の表示用画像の画角範囲と第２の表示手段に表示させる第２の表示用画像の画角範囲とが同じになるため、ユーザは、第１の表示手段及び第２の表示手段のいずれにおいても同じ画角範囲の第２の表示用画像を確認することができる。

望ましくは、第１の表示手段における第２の表示用画像の表示領域を構成する画素数と、第１の表示手段に表示させる第２の表示用画像の生成に寄与する第１の画素群及び第２の画素群の画素数とは同じである。

本態様によれば、第１の表示手段に表示させる第２の表示用画像の生成に寄与する第１の画素群及び第２の画素群の画素数が第１の表示手段における第２の表示用画像の表示領域を構成する画素数と同じであるため、画像を拡大又は縮小させることなく、第２の表示用画像を第１の表示手段に表示することができる。

望ましくは、第２の表示手段における第２の表示用画像の表示領域を構成する画素数と、第２の表示手段に表示させる第２の表示用画像の生成に寄与する第１の画素群及び第２の画素群の画素数とは同じである。

本態様によれば、第２の表示手段に表示させる第２の表示用画像の生成に寄与する第１の画素群及び第２の画素群の画素数が第２の表示手段における第２の表示用画像の表示領域を構成する画素数と同じであるため、画像を拡大又は縮小させることなく、第２の表示用画像を第２の表示手段に表示することができる。

望ましくは、画像生成手段は、第１の表示手段における表示領域全体に対する第２の表示用画像の表示領域の相対的なサイズが、第２の表示手段における表示領域全体に対する第２の表示用画像の表示領域の相対的なサイズと異なるように、且つ、第１の表示手段に表示させる第２の表示用画像の画角範囲と第２の表示手段に表示させる第２の表示用画像の画角範囲とが同じになるように、第１の表示手段に表示させる第２の表示用画像及び第２の表示手段に表示させる第２の表示用画像を生成する。

本態様によれば、第１の表示手段及び第２の表示手段において、表示領域全体に対する第２の表示用画像の表示領域の相対的なサイズが異なるが、画角範囲の同じ第２の表示用画像を表示することができる。

望ましくは、画像生成手段は、第１の表示手段における表示領域全体に対する第２の表示用画像の表示領域の相対的なサイズが、第２の表示手段における表示領域全体に対する第２の表示用画像の表示領域の相対的なサイズと異なるように、第１の表示手段に表示させる第２の表示用画像及び第２の表示手段に表示させる第２の表示用画像を生成する。

本態様によれば、第１の表示手段及び第２の表示手段において、表示領域全体に対する表示領域の相対的なサイズが異なる第２の表示用画像を表示することができる。

望ましくは、画像生成手段は、第１の表示手段における表示領域全体に対する第２の表示用画像の表示領域の相対的なサイズが、第２の表示手段における表示領域全体に対する第２の表示用画像の表示領域の相対的なサイズと同じになるように、第１の表示手段に表示させる第２の表示用画像及び第２の表示手段に表示させる第２の表示用画像を生成する。

本態様によれば、第１の表示手段及び第２の表示手段において、表示領域全体に対する表示領域の相対的なサイズが同じ第２の表示用画像を表示することができる。

望ましくは、撮像素子は、被写体像が瞳分割されずに結像される第３の画素群であって、第３の画像信号を出力する第３の画素群を更に有し、画像生成手段は、第３の画像信号に基づき第１の表示用画像を生成する。

本態様によれば、被写体像が瞳分割されずに結像される第３の画素群からの第３の画像信号に基づいて、第１の表示用画像が生成される。

望ましくは、第１の表示手段及び第２の表示手段のうちの少なくとも一方において、第１の表示用画像及び第２の表示用画像の間引き率、拡大率及び縮小率を含むパラメータのうち、画像生成手段が第１の表示用画像及び第２の表示用画像を生成する際に行う処理に関連するパラメータが第１の表示用画像と第２の表示用画像との間で同じである。

本態様によれば、第１の表示手段及び第２の表示手段のうちの少なくとも一方における第１の表示用画像と第２の表示用画像との間で、第１の表示用画像及び第２の表示用画像の間引き率、拡大率及び縮小率を含むパラメータのうち、画像生成手段が第１の表示用画像及び第２の表示用画像を生成する際に行う処理に関連するパラメータを同じにして調和させることができる。

本発明の他の態様は、撮影レンズの第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１の画素群及び第２の画素群を有する撮像素子と、上記のいずれかの画像処理装置と、を備える撮像装置に関する。

本発明の他の態様は、撮影レンズの第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１の画素群及び第２の画素群を有する撮像素子から出力される画像信号に基づいて第１の表示用画像を生成し、かつ第１の画素群及び第２の画素群から出力された第１の画像信号及び第２の画像信号に基づく第１の画像及び第２の画像から合焦確認に使用する第２の表示用画像を生成するステップと、第１の表示手段及び第２の表示手段のうち少なくとも一方に対し、第１の表示用画像を表示させ、かつ第１の表示用画像の表示領域内に第２の表示用画像を表示させるステップと、を備え、第１の表示用画像及び第２の表示用画像の間引き率、拡大率及び縮小率のうち少なくともいずれか１つが、第１の表示用画像と第２の表示用画像との間で異なるように第１の表示用画像及び第２の表示用画像が生成され、第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素、第２の表示用画像の拡大率及び縮小率、及び第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを、第１の表示手段と第２の表示手段との間で異ならせる画像処理方法に関する。

本発明の他の態様は、撮影レンズの第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１の画素群及び第２の画素群を有する撮像素子から出力される画像信号に基づいて第１の表示用画像を生成し、かつ第１の画素群及び第２の画素群から出力された第１の画像信号及び第２の画像信号に基づく第１の画像及び第２の画像から合焦確認に使用する第２の表示用画像を生成する手順と、第１の表示手段及び第２の表示手段のうち少なくとも一方に対し、第１の表示用画像を表示させ、かつ第１の表示用画像の表示領域内に第２の表示用画像を表示させる手順と、をコンピュータに実行させるためのプログラムであって、第１の表示用画像及び第２の表示用画像の間引き率、拡大率及び縮小率のうち少なくともいずれか１つが、第１の表示用画像と第２の表示用画像との間で異なるように第１の表示用画像及び第２の表示用画像が生成され、第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素、第２の表示用画像の拡大率及び縮小率、及び第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを、第１の表示手段と第２の表示手段との間で異ならせるプログラムに関する。

本発明の他の態様は、撮影レンズの第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１の画素群及び第２の画素群を有する撮像素子から出力される画像信号に基づいて合焦確認に使用する第２の表示用画像を生成する画像生成手段であって、第１の画素群及び第２の画素群から出力された第１の画像信号及び第２の画像信号に基づく第１の画像及び第２の画像から合焦確認に使用する第２の表示用画像を生成する画像生成手段と、第２の表示用画像を表示する第１の表示手段及び第２の表示手段と、第１の表示手段及び第２の表示手段のうち少なくとも一方に対し、第２の表示用画像を表示させる制御を行う表示制御手段と、を備え、画像生成手段は、第１の画素群及び第２の画素群のうち第２の表示用画像の生成に使用する画素、第２の表示用画像の拡大率及び縮小率、及び第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを、第１の表示手段と第２の表示手段との間で異ならせる画像処理装置に関する。

本態様によれば、第１の表示手段及び第２の表示手段において第２の表示用画像のみが表示される場合であっても、第１の表示手段に表示する第２の表示用画像と第２の表示手段に表示する第２の表示用画像とを、第２の表示用画像の生成に使用する画素、第２の表示用画像の拡縮率、及び第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを異ならせることで、調和させることが可能である。

本発明によれば、第１の表示手段に表示する第２の表示用画像と第２の表示手段に表示する第２の表示用画像とを、第２の表示用画像の生成に使用する画素、第２の表示用画像の拡大率及び縮小率、及び第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを異ならせることで、調和させることが可能である。したがって、ユーザは、第１の表示手段及び第２の表示手段の両者において、調和された第２の表示用画像を合焦確認に使用することができるため、本発明によれば快適な使用感を実現することができる。

デジタルカメラの外観構成の概略を示す図であり、（ａ）部分は正面図を示し、（ｂ）部分は背面図を示し、（ｃ）部分は上面図を示し、（ｄ）部分はレンズユニットの斜視図を示す。 デジタルカメラを構成する各部間の接続関係を示すブロック図である。 操作部の構成を示すブロック図である。 カラー撮像素子の平面図である。 カラー撮像素子の画素配列がベイヤ配列の場合の位相差画素配置領域の一部を拡大した平面図である。 位相差画素の構成を示す断面図であり、（ａ）部分は第１位相差画素を示し、（ｂ）部分は第２位相差画素を示す。 カラー撮像素子（位相差画素配置領域）の他の画素配列例を示す平面図である。 カラー撮像素子（位相差画素配置領域）の他の画素配列例を示す平面図である。 カラー撮像素子及び画像処理回路の機能構成を示すブロック図であり、主としてスプリットイメージ作成に関わる機能構成を示す。 表示制御部の機能構成を示すブロック図であり、主としてスプリットイメージの合成及び出力に関わる機能構成を示す。 画像処理回路の一変形例を示すブロック図である。 表示部（ＥＶＦ、背面ＬＣＤ）に表示される通常画像及びスプリットイメージ（スプリットイメージ合成画像）の一例を示す図であり、（ａ）部分は合焦状態を示し、（ｂ）部分は非合焦状態を示す。 マニュアルフォーカスモード時の撮影処理フローを示すフローチャートである。 第１実施形態においてスプリットイメージの生成に使用する位相差画素の範囲を示す概略図である。 第１実施形態において通常画像及びスプリットイメージを表示する表示部を示し、（ａ）部分はＥＶＦの画像表示例を示し、（ｂ）部分は背面ＬＣＤの画像表示例を示す。 第２実施形態において通常画像及びスプリットイメージを表示する表示部を示し、（ａ）部分はＥＶＦの画像表示例を示し、（ｂ）部分は背面ＬＣＤの画像表示例を示す。

以下、図面を参照して、本発明の実施形態について詳細に説明する。まず、本発明の一適用例であるデジタルカメラの基本構成について説明し（図１〜図１３参照）、その後、複数の表示部におけるスプリットイメージの具体的な表示手法について説明する（図１４〜図１６参照）。

図１は、デジタルカメラの外観構成の概略を示す図であり、（ａ）部分は正面図を示し、（ｂ）部分は背面図を示し、（ｃ）部分は上面図を示し、（ｄ）部分はレンズユニットの斜視図を示す。

デジタルカメラ（画像処理装置および撮像装置）１０は、カメラ本体１２と、カメラ本体１２の前面に交換可能に取り付けられたレンズユニット１４とを備える。またカメラ本体１２の前面には、ストロボ発光部１６やフォーカスモード切替レバー１８が設けられている。

レンズユニット１４は、レンズ等の撮像光学系を含み、マニュアルフォーカス操作時のピント合わせ（合焦操作）に使われるフォーカスリング２６が回転自在に取り付けられている（図１の（ｄ）部分参照）。

フォーカスモード切替レバー１８はフォーカスモードを切り替えるレバーであり、ユーザは、フォーカスモード切替レバー１８を操作してオートフォーカスモード（シングルＡＦ、コンティニュアスＡＦ）とマニュアルフォーカスモードとを適宜切り替えることができる。フォーカスモード切替レバー１８の設置箇所はカメラ本体１２の前面に限定されず、例えばカメラ本体１２の上面やレンズユニット１４にフォーカスモード切替レバー１８が設けられてもよい。

カメラ本体１２の上面（図１の（ｃ）部分参照）には、シャッタボタン２０、電源スイッチ２２及びホットシュー２４が設けられている。電源スイッチ２２は、デジタルカメラ１０（カメラ本体１２）の電源ＯＮ／ＯＦＦを切り替えるスイッチである。ホットシュー２４は、外付け機器類（フラッシュ、ビューファインダ等）が必要に応じて取り付けられる。

シャッタボタン２０は、中間位置まで押し下げられる状態（以下、「半押し状態」という）と、中間位置を超えた最終押下位置まで押し下げられる状態（以下、「全押し状態」という）との、２段階の押圧操作を検出可能に構成されている。オートフォーカスモードでは、シャッタボタン２０を半押し状態にすることによりＡＥ（Ａｕｔｏｍａｔｉｃ Ｅｘｐｏｓｕｒｅ：自動露出）機能が働いて露出状態（シャッタスピード及び絞り値）が設定された後、ＡＦ（Ａｕｔｏ Ｆｏｃｕｓ：自動合焦）機能が働いて合焦制御される。その後、引き続きシャッタボタン２０を全押し状態にすることで、露光（撮影）が行われる。

カメラ本体１２の背面（図１の（ｂ）部分参照）には、内蔵型のＥＶＦ（Ｅｌｅｃｔｒｏｎｉｃ Ｖｉｅｗ Ｆｉｎｄｅｒ：第１の表示手段）２８、背面ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ：第２の表示手段）３０、モード切替ボタン３４、十字キー３５、実行キー３６及びバックボタン３７が設けられている。

ＥＶＦ２８及び背面ＬＣＤ３０は、撮影画像を表示する表示部として機能する。特に本例のＥＶＦ２８及び背面ＬＣＤ３０は、マニュアルフォーカスモード時に、通常画像（第１の表示用画像）及びスプリットイメージ（第２の表示用画像）を表示する。ＥＶＦ２８の画像表示領域及び背面ＬＣＤ３０の画像表示領域は、解像度（構成画素数）が異なる。以下の例では、ＥＶＦ２８の画像表示領域の解像度が背面ＬＣＤ３０の画像表示領域の解像度よりも高く、ＥＶＦ２８の画像表示領域の構成画素数が背面ＬＣＤ３０の画像表示領域の構成画素数よりも多い場合について説明する。

モード切替ボタン３４は、撮影モードと画像（静止画／動画）再生モードとを切り替えるボタンとして機能する。十字キー３５及び実行キー３６は、背面ＬＣＤ３０にメニュー画面や設定画面を表示したり、メニュー画面や設定画面において選択カーソルを移動したり、デジタルカメラ１０の各種設定を確定したりする際などに操作される。バックボタン３７は、メニュー画面や設定画面における直前の操作をキャンセルするボタンとして機能する。これらのボタン、キー類には複数の機能が割り当てられてもよく、例えばバックボタン３７を、ＥＶＦ２８や背面ＬＣＤ３０に表示させる情報（撮影条件等）を切り替えるボタンとして機能させてもよい。

カメラ本体１２の底面には、図示は省略するが、メモリカードが装填されるカードスロットと、このカードスロットの開口を開閉する装填蓋とが設けられている。

図２は、デジタルカメラ１０を構成する各部間の接続関係を示すブロック図である。なお本例では、図２に示される構成のうち、レンズユニット１４以外の各部がカメラ本体１２に設けられる例について説明するが、必要に応じて各部をレンズユニット１４に設けてもよい。

レンズユニット１４は、ズームレンズ４１及びフォーカスレンズ４２を含む撮影光学系４０、メカシャッタ４３などを備える。

ズームレンズ４１及びフォーカスレンズ４２は、それぞれズーム機構４４及びフォーカス機構４５によって駆動され、撮影光学系４０の光軸Ｏ１に沿って前後移動される。ズーム機構４４及びフォーカス機構４５は、ギアやモータなどで構成されている。

フォーカス機構４５は、図示しないギアを介してフォーカスリング２６（図１の（ｄ）部分参照）と接続している。マニュアルフォーカスモード時にフォーカスリング２６がユーザにより回転操作（フォーカス操作）されることに伴い、フォーカス機構４５はフォーカスレンズ４２を光軸Ｏ１の方向（以下、光軸方向という）に沿って移動させる。なお、フォーカスリング２６とフォーカス機構４５との接続方式は特に限定されず、例えばフォーカスリング２６とフォーカス機構４５とを機械的に接続し、フォーカスリング２６の回転動作によってフォーカスレンズ４２を直接的に駆動するようにしてもよい。またフォーカスリング２６の回転動作をＣＰＵ５０において電気信号に置き換え、レンズドライバ４６及びフォーカス機構４５がこの電気信号に基づいてフォーカスレンズ４２を駆動するようにしてもよい。

メカシャッタ４３は、カラー撮像素子４７への被写体光の入射を阻止する閉鎖位置と、被写体光の入射を許容する開放位置との間で移動する可動部（図示は省略）を有する。可動部を開放位置／閉鎖位置に移動させることによって、撮影光学系４０からカラー撮像素子４７へと至る光路が開放／遮断される。また、メカシャッタ４３には、カラー撮像素子４７に入射する被写体光の光量を制御する絞りが含まれる。メカシャッタ４３、ズーム機構４４及びフォーカス機構４５は、レンズドライバ４６を介してＣＰＵ５０によって駆動制御される。

カメラ本体１２に設けられるＣＰＵ５０は、操作部３２からの制御信号に基づき、メモリ５６から読み出した各種プログラムやデータを逐次実行し、デジタルカメラ１０の各部を統括的に制御する。メモリ５６のＲＡＭ領域は、ＣＰＵ５０が処理を実行するためのワークメモリや、各種データの一時保管先として機能する。

操作部３２は、ユーザによって操作されるボタン・キー類を含む。本例の操作部３２は、図３に示すように、上述の電源スイッチ２２、シャッタボタン２０、フォーカスモード切替レバー１８、フォーカスリング２６、モード切替ボタン３４、十字キー３５、実行キー３６及びバックボタン３７を含んで構成される。

図２に示すカラー撮像素子４７は、撮影光学系４０及びメカシャッタ４３を通過した被写体光を、電気的な出力信号に変換して出力する。このカラー撮像素子４７は、多数の画素が水平方向及び垂直方向に並置されて構成され、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）等の任意の方式を採用可能である。

カラー撮像素子４７を構成する各画素は、詳細については後述するが、集光率を向上させるためのマイクロレンズと、ＲＧＢ等のカラーフィルタと、マイクロレンズ及びカラーフィルタを通過した光を受光するフォトダイオードとを含む。特に本例のカラー撮像素子４７は、被写体像が瞳分割されずに結像される通常画素群（第３の画素群）に加え、撮影光学系４０（撮影レンズ）の第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１位相差画素群（第１の画素群）及び第２位相差画素（第２の画素群）を有する。

撮像素子ドライバ５１は、ＣＰＵ５０の制御の下でカラー撮像素子４７を駆動制御し、カラー撮像素子４７の画素から画像処理回路５２に撮像信号を出力させる。

画像処理回路（画像生成手段）５２は、カラー撮像素子４７からの出力信号（出力）に対して階調変換、ホワイトバランス補正、γ補正処理などの各種処理を施して撮影画像データを生成する。

本例の画像処理回路５２は、詳細については後述するが、マニュアルフォーカスモード時には、カラー撮像素子４７から出力される画像信号に基づいて通常画像（第１の表示用画像）を生成し、かつ第１位相差画素群（第１の画素群）及び第２位相差画素群（第２の画素群）から出力される第１の画像信号及び第２の画像信号に基づく第１の画像及び第２の画像から合焦確認に使用するスプリットイメージ（第２の表示用画像）を生成する。このとき、通常画像及びスプリットイメージの間引き率、拡大率及び縮小率のうち少なくともいずれか１つが、通常画像とスプリットイメージとの間で異なるように、画像処理回路５２は、通常画像及びスプリットイメージを生成する。通常画像データやスプリットイメージデータは、メモリ５６のＶＲＡＭ領域（ＶＲＡＭを別途設けても可）に一時的に格納される。ＶＲＡＭ領域は、連続した２フィールド画分を記憶するライブビュー画像用のメモリエリアを有しており、撮影画像データやスプリットイメージデータを逐次上書き格納する。

圧縮伸長処理回路５４は、シャッタボタン２０がユーザによって押し下げ操作されたときに、ＶＲＡＭ領域に格納された撮影画像データに対して圧縮処理を施す。また圧縮伸長処理回路５４は、メディアインターフェース５３を介してメモリカード５７から得られる圧縮画像データに対し、圧縮伸長処理を施す。メディアインターフェース５３は、メモリカード５７に対する撮影画像データの記録及び読み出しなどを行う。

表示制御部（表示制御手段）５５は、マニュアルフォーカスモード撮影時には、ＥＶＦ２８及び背面ＬＣＤ３０のうち少なくとも一方に対し、画像処理回路５２により生成された通常画像を表示させ、かつ画像処理回路５２により生成されたスプリットイメージを通常画像の表示領域内に表示させる制御を行う。すなわち、表示制御部５５は、マニュアルフォーカスモード撮影時にはＶＲＡＭ領域に格納された撮影画像データやスプリットイメージデータを読み出して、ＥＶＦ２８及び／又は背面ＬＣＤ３０へ逐次出力する。

また表示制御部５５は、オートフォーカスモード撮影時には、ＥＶＦ２８及び背面ＬＣＤ３０のうち少なくとも一方に対し、画像処理回路５２により生成された通常画像をライブビュー画像として表示する。なお、画像再生モード時には、表示制御部５５は、圧縮伸長処理回路５４で伸長された撮影画像データを背面ＬＣＤ３０（及び／又はＥＶＦ２８）へ出力する。

デジタルカメラ１０（カメラ本体１２）には、上記以外の他の処理回路等が設けられており、例えばオートフォーカス用のＡＦ検出回路が設けられている。ＡＦ検出回路は、後述の第１位相差画素の出力信号により構成される画像と、第２位相差画素の出力信号により構成される画像とを解析して、両画像のずれ方向及び両画像間のずれ量を検知することで撮影光学系４０のフォーカス調整量（デフォーカス量ともいう）を求める。このフォーカス調整量に基づき、ＣＰＵ５０はレンズドライバ４６を制御し、フォーカス機構４５を介してフォーカスレンズ４２を駆動することで焦点調節を行う。なお、このような位相差方式のＡＦ処理については公知であるので、ここでは具体的な説明は省略する。

また、図示は省略するが、デジタルカメラ１０（カメラ本体１２）にはＡＥ検出回路が設けられている。ＣＰＵ５０は、ＡＥ検出回路の検出結果に基づき、レンズドライバ４６を介してメカシャッタ４３を駆動することでＡＥ処理を実行する。

次に、カラー撮像素子４７について説明する。

図４は、カラー撮像素子４７の平面図である。本例のカラー撮像素子４７は、中央部に位置する位相差画素配置領域４９と、周辺部に位置する通常画素領域４８とを有する。

通常画素領域４８は通常画素６０のみによって構成される（位相差画素を含まない）領域であり、位相差画素配置領域４９は通常画素と位相差画素とが混在する領域である。位相差画素はオートフォーカス時に利用される画素であるため、位相差画素配置領域４９はＡＦ領域（オートフォーカス領域）に対応するように設けられる。

本例では、カラー撮像素子４７の水平方向及び垂直方向に関して１／２の領域を位相差画素配置領域４９とし、カラー撮像素子４７を構成する全画素の１／４に相当する画素（通常画素及び位相差画素）によって位相差画素配置領域４９が構成される。したがって、例えばカラー撮像素子４７が水平方向に６０００画素及び垂直方向に４５００画素（全画素＝６０００×４５００＝２７，０００，０００画素）によって構成される場合、中央部の水平方向に３０００画素及び垂直方向に２２５０画素（全画素＝３０００×２２５０＝６，７５０，０００画素）によって構成される領域が位相差画素配置領域４９に相当する。

図５は、カラー撮像素子４７の画素配列がベイヤ配列の場合の位相差画素配置領域４９の一部を拡大した平面図である。

ベイヤ配列は、水平方向及び垂直方向に２画素×２画素の計４画素によって構成される画素配列を基本配列Ｐとし、水平方向に並置される「Ｒ（赤）画素及びＧ（緑）画素」及び「Ｇ画素及びＢ（青）画素」が垂直方向に並置されて基本配列Ｐが構成される。この基本配列Ｐが水平方向及び垂直方向に連続的に複数並置されることで、ベイヤタイプのカラー撮像素子４７が構成される。

図５に示す例では、位相差画素配置領域４９において、水平方向及び垂直方向の各々に関し、４画素おき（４画素間隔）に配置されるＧ画素の位置に位相差画素（第１位相差画素６１、第２位相差画素６２）が配置される。後述するように、第１位相差画素６１及び第２位相差画素６２を一ペアとし、瞳分割されて左右に分割された光束の各々が第１位相差画素６１及び第２位相差画素６２によって受光される。図５に示す例では、４画素おきに配置される位相差画素位置において、水平方向及び垂直方向の各々に関し、第１位相差画素６１と第２位相差画素６２とが交互に配置される。したがって、本例のカラー撮像素子４７では、スプリットイメージに使用する画素（第１位相差画素６１、第２位相差画素６２）は、本来的に数画素おき（図５に示す例では４画素おき）にしか配置されていないため、通常画像を生成するための通常画素に比べて、解像度レベルが低くなっている。

図６は位相差画素の構成を示す断面図であり、（ａ）部分は第１位相差画素を示し、（ｂ）部分は第２位相差画素を示す。

第１位相差画素６１及び第２位相差画素６２は、撮影光学系４０及びメカシャッタ４３を通過した光の進行方向に順次配置されるマイクロレンズＬ、カラーフィルタＣＦ、遮光部材６６（６６Ａ、６６Ｂ）及びフォトダイオードＰＤを有し、とりわけマイクロレンズＬ及び遮光部材６６は瞳分割手段として機能する。

第１位相差画素６１に配置される遮光部材６６Ａは、フォトダイオードＰＤの受光面のうち図６の左半分を遮光する。この構成により、第１位相差画素６１では、撮影レンズの射出瞳を通過する光束のうち光軸の左側を通過する光束のみがフォトダイオードＰＤによって受光される。一方、第２位相差画素６２に配置される遮光部材６６Ｂは、フォトダイオードＰＤの受光面のうち図６の右半分を遮光する。この構成により、第２位相差画素６２では、撮影レンズの射出瞳を通過する光束のうち光軸の右側を通過する光束のみがフォトダイオードＰＤによって受光される。したがって、射出瞳を通過する光束は、瞳分割手段であるマイクロレンズＬ及び遮光部材６６により左右に分割され、それぞれ第１位相差画素６１及び第２位相差画素６２に入射する。

なお、通常画素領域４８及び位相差画素配置領域４９に配置される通常画素６０は、図６に示す第１位相差画素６１及び第２位相差画素６２の構成において遮光部材６６が設けられていない。したがって通常画素６０では、マイクロレンズＬ及びカラーフィルタＣＦを通過した光束が、遮断されることなく、フォトダイオードＰＤに入射されるようになっている。

これらの第１位相差画素６１及び第２位相差画素６２は、図４に示すように、カラー撮像素子４７の撮像領域中央部のＡＦ領域である位相差画素配置領域４９に設けられている。第１位相差画素６１及び第２位相差画素６２は、位相差検出方向に数１０画素から１００画素程度配置することが好ましい。なお、位相差画素配置領域４９は、図４に示す例に限らず、カラー撮像素子４７の任意の位置及び範囲としてもよく、配置パターンも特に限定されない。例えばカラー撮像素子４７の撮影領域内に複数の位相差画素配置領域４９を設けてもよいし、撮影領域の全域を位相差画素配置領域４９としてもよい。

またカラー撮像素子４７は、上述のベイヤ配列の例に限定されず、任意の画素配列、画素数、カラーフィルタ等を有することが可能である。

図７は、カラー撮像素子４７（位相差画素配置領域４９）の他の画素配列例を示す平面図である。図７に示す例では、水平方向及び垂直方向に６画素×６画素の計３６画素によって構成される画素配列を基本配列Ｐとし、水平方向に並置される「ＧＢＧＧＲＧ画素」、「ＲＧＲＢＧＢ画素」、「ＧＢＧＧＲＧ画素」、「ＧＲＧＧＢＧ画素」、「ＢＧＢＲＧＲ画素」及び「ＧＲＧＧＢＧ画素」が垂直方向に並置されて基本配列Ｐが構成される。各基本配列Ｐは第１位相差画素６１及び第２位相差画素６２をそれぞれ１つ含み、水平方向に関して３画素おき（３画素間隔）に第１位相差画素６１及び第２位相差画素６２が交互に配置される。一方、垂直方向に関しても第１位相差画素６１及び第２位相差画素６２が交互に配置されるが、垂直方向に並置される第１位相差画素６１及び第２位相差画素６２が、第１の画素間隔（図７に示す例では４画素間隔（４画素おき））及び第２の画素間隔（図７に示す例では８画素間隔（８画素おき））を交互に持つように配置される。

図８は、カラー撮像素子４７（位相差画素配置領域４９）の他の画素配列例を示す平面図であり、（ａ）部分はＡ面及びＢ面が重ね合わされて構成される全体図であり、（ｂ）部分はＡ面を示し、（ｃ）部分はＢ面を示す。図８に示すカラー撮像素子４７は、水平方向及び垂直方向に４５度傾いて画素が隣接配置されたいわゆるハニカム配列構造を有する。図８の（ｂ）部分及び（ｃ）部分に示すように、Ａ面及びＢ面の各々は水平方向及び垂直方向に関して上述のベイヤ配列構成を有しており、Ａ面のＲＧＢに相当するカラーフィルタは「ＲＡ」、「ＧＡ」及び「ＢＡ」の符号が付され、Ｂ面のＲＧＢに相当するカラーフィルタは「ＲＢ」、「ＧＢ」及び「ＢＢ」の符号が付されている。本例では、Ａ面に第１位相差画素６１が「水平方向及び垂直方向の各々に関して３画素おき（３画素分の間隔）」に配置されており、Ｂ面に第２位相差画素６２が「水平方向及び垂直方向の各々に関して３画素おき（３画素分の間隔）」に配置されており、全体としてＡ面の第１位相差画素６１とＢ面の第２位相差画素６２とが、水平方向及び垂直方向と４５度を成す斜め方向に隣接する。

なお、上述の第１位相差画素６１及び第２位相差画素６２は、同色画素（図５及び図７に示す例ではＧ画素）に配置されてもよいし、異色画素（図８に示す例ではＲＧＢ画素）に配置されてもよい。同色画素（Ｇ画素）に配置される場合には、第１位相差画素６１及び第２位相差画素６２からの出力信号を輝度信号として扱って、後述のスプリットイメージを白黒画像として構成することも可能である。一方、異色画素（ＲＧＢ画素）に配置される場合には、第１位相差画素６１及び第２位相差画素６２からの出力信号に対して画素データ補間処理を行うことで、後述のスプリットイメージをカラー画像として構成することも可能である。

また、上述の例では遮光部材６６を持たない通常画素６０と遮光部材６６を持つ位相差画素（第１位相差画素６１、第２位相差画素６２）とが混在しているが、カラー撮像素子４７の全画素を位相差画素（第１位相差画素６１、第２位相差画素６２）としてもよい。例えば、図８に示す例において、Ａ面（図８の（ｂ）部分参照）の全画素を第１位相差画素６１によって構成し、Ｂ面（図８の（ｃ）部分参照）の全画素を第２位相差画素６２によって構成し、これらのＡ面及びＢ面を組み合わせることでカラー撮像素子４７の全画素を構成してもよい。この場合、後述のスプリットイメージは、下述の実施形態と同様に第１位相差画素６１及び第２位相差画素６２の出力値に基づいて生成される。一方、通常画像（通常画像データ）は、第１位相差画素６１及び第２位相差画素６２のうちのいずれか一方の出力値に基づいて生成してもよいし、第１位相差画素６１及び第２位相差画素６２の両者の出力値に基づいて生成してもよい。また、マニュアルフォーカスモードにおいて、通常画像をＥＶＦ２８／背面ＬＣＤ３０に表示させずに、スプリットイメージのみがＥＶＦ２８／背面ＬＣＤ３０に表示されるようにしてもよい。この場合、後述の合成処理部（図１０参照）における通常画像データとスプリットイメージデータとの合成は行われず、スプリットイメージデータのみが後段の表示部（ＥＶＦ２８、背面ＬＣＤ３０）に送られる。

このような構成を有するデジタルカメラ１０において、オートフォーカスモードでは、第１位相差画素６１の出力信号（画像データ）及び第２位相差画素６２の出力信号（画像データ）が比較されて撮影光学系４０のフォーカス調整量（デフォーカス量ともいう）が求められるいわゆる「位相差ＡＦ」制御が行われる。なお、オートフォーカス手法は位相差ＡＦ制御に限定されるものではなく、いわゆる「コントラストＡＦ」制御が適宜採用されてもよい。

一方、マニュアルフォーカスモードではスプリットイメージが作られ、ユーザは、表示部（ＥＶＦ２８、背面ＬＣＤ３０）に表示されるスプリットイメージを確認することで、マニュアルでフォーカスを正確に合わせることができる。

以下、スプリットイメージの作成手法及び表示手法について、詳細に説明する。

図９は、カラー撮像素子４７及び画像処理回路５２の機能構成を示すブロック図であり、主としてスプリットイメージの作成に関わる機能構成を示す。図１０は、表示制御部５５の機能構成を示すブロック図であり、主としてスプリットイメージの合成及び出力に関わる機能構成を示す。

カラー撮像素子４７は、上述のように、通常画素領域４８及び位相差画素配置領域４９に配置される通常画素６０と、位相差画素配置領域４９に配置される位相差画素（第１位相差画素６１、第２位相差画素６２）とを含む。カラー撮像素子４７を構成するこれらの画素のうち、通常画素６０によって構成される通常画素群６０’は、通常画像の生成に供される。一方、第１位相差画素６１によって構成される第１位相差画素群６１’及び第２位相差画素６２によって構成される第２位相差画素群６２’は、スプリットイメージの生成に供される。

すなわち、カラー撮像素子４７から出力される画像信号のうち、通常画素群６０’から出力される画像信号（画像データ；第３の画像信号）は、画像処理回路５２の通常画像処理部７０に送られる。通常画像処理部７０は、通常画素群６０’からの画像信号に基づいて各種画像処理を行うことで、通常画像データＤ１（第１の表示用画像）を生成及び出力する。

一方、第１位相差画素群６１’及び第２位相差画素群６２’から出力される画像信号は、画像処理回路５２のスプリットイメージ処理部７１に送られる。スプリットイメージ処理部７１は、第１位相差画素群６１’及び第２位相差画素群６２’からの画像信号に各種画像処理を施すことで、スプリットイメージデータＤ２（第２の表示用画像）を生成及び出力する。本例では、間引き率、拡大率及び縮小率のうち少なくともいずれか１つが通常画像とスプリットイメージとの間で異なるように、通常画像処理部７０における通常画像データＤ１の生成及びスプリットイメージ処理部７１におけるスプリットイメージデータＤ２の生成が行われる。

なお、通常画像データＤ１及びスプリットイメージデータＤ２の生成時における間引き処理は、任意の手法によって行うことができる。例えば、カラー撮像素子４７から画像データ（画素データ）を読み出す際に、所望の間引き率を達成するために必要な画素のみから画素データを読み出すようにしてもよい。また、カラー撮像素子４７の全ての画素から画像データ（画素データ）を読み出してメモリ等に記憶しておき、このメモリ等に記憶された画像データから所望の画素データのみを抽出する（間引く）処理によって、所望の間引き率を達成するようにしてもよい。

スプリットイメージ処理部７１は、入力画像（スプリットイメージ）の画素データ補間処理を行う画素補間処理部７２を有する。画素補間処理部７２は、必要に応じて、第１位相差画素群６１’及び第２位相差画素群６２’からの画像データの画素データ補間処理を行う。画素補間処理部７２における画素データ補間処理は、任意の補間処理を適宜採用することが可能である。

このようにして作成された通常画像データＤ１及びスプリットイメージデータＤ２は、メモリ５６のＶＲＡＭ領域等を経て、表示制御部５５の合成処理部７４に送られる。合成処理部７４は、マニュアルフォーカスモード時に表示部（ＥＶＦ２８、背面ＬＣＤ３０）に表示するためのライブビュー画像（スプリットイメージ合成画像）を生成する。すなわち、合成処理部７４は、受信した通常画像データＤ１及びスプリットイメージデータＤ２に基づいて、通常画像及びスプリットイメージの合成画像データ（スプリットイメージ合成画像）Ｄ４を作成する。このようにして作成されたスプリットイメージ合成画像データＤ４は、表示制御部５５の表示選択部７６において判定された表示対象となる表示部（ＥＶＦ２８、背面ＬＣＤ３０）に送られる。表示部（ＥＶＦ２８、背面ＬＣＤ３０）は、送られてくるスプリットイメージ合成画像データＤ４に基づく画像をライブビュー画像として表示し、このライブビュー画像はマニュアルフォーカス時のフォーカス確認に使用される。

表示選択部７６における「スプリットイメージ合成画像の表示対象の判定」は、任意の手法によって行うことができる。例えば、ユーザがＥＶＦ２８を覗き込んだか否かを検知するセンサをカメラ本体１２に設けて、このセンサからの検知信号が表示選択部７６に入力されるようにしてもよい。この場合、ユーザのＥＶＦ２８の覗き込みをセンサが検知した際にはＥＶＦ２８にスプリットイメージ合成画像データＤ４を出力し、ユーザのＥＶＦ２８の覗き込みを検知しない場合には背面ＬＣＤ３０にスプリットイメージ合成画像データＤ４を出力するようにしてもよい。また、スプリットイメージ合成画像（ライブビュー画像）を表示する表示部を切り替えるためのスイッチ類をデジタルカメラ１０（カメラ本体１２、レンズユニット１４）に設け、このスイッチ類からの切替信号が表示選択部７６に入力されるようにしてもよい。この場合、この切替信号に基づいて、スプリットイメージ合成画像データＤ４をＥＶＦ２８及び／又は背面ＬＣＤ３０に出力するようにしてもよい。また、表示選択部７６は、ＥＶＦ２８及び背面ＬＣＤ３０のうちいずれか一方にスプリットイメージ合成画像データＤ４を出力するようにしてもよいし、両者にスプリットイメージ合成画像データＤ４を出力するようにしてもよい。

なお、表示制御部５５は、合成処理部７４及び表示選択部７６の他に、撮影画像データＤ３を受信する再生処理部７５を有する。再生処理部７５は、画像再生モードにおいて表示部（ＥＶＦ２８、背面ＬＣＤ３０）に再生表示する画像を、メモリカード５７やメモリ５６に記憶される撮影画像データＤ３から生成する。再生処理部７５は、ＥＶＦ２８及び／又は背面ＬＣＤ３０に表示可能な形式の画像データを生成する画像処理を行い、例えば圧縮された撮影画像データＤ３に対しては圧縮伸長処理回路５４により圧縮伸長処理を行ったり、またＲＡＷ形式の撮影画像データＤ３に対しては現像処理を施す。そして、再生処理部７５において生成される画像データは、表示選択部７６において判定される表示部（ＥＶＦ２８、背面ＬＣＤ３０）に出力される。

上述の例では、画像処理回路５２において作成された通常画像データＤ１及びスプリットイメージデータＤ２を表示制御部５５で合成する例について説明したが、画像処理回路５２において通常画像データＤ１及びスプリットイメージデータＤ２を合成してもよい。図１１は、画像処理回路５２の一変形例を示すブロック図である。この変形例において画像処理回路５２は、通常画像処理部７０及びスプリットイメージ処理部７１の他に合成処理部７４を有する。この合成処理部７４は、通常画像処理部７０からの通常画像データＤ１及びスプリットイメージ処理部７１からのスプリットイメージデータＤ２を合成してスプリットイメージ合成画像データＤ４を作成する。この場合、表示制御部５５は合成処理部７４を有していなくてもよく、合成処理部７４（画像処理回路５２）で作成されたスプリットイメージ合成画像（スプリットイメージ合成画像データＤ４）が表示制御部５５の表示選択部７６で判定された表示対象（ＥＶＦ２８及び／又は背面ＬＣＤ３０）に出力される。

次に、表示部（ＥＶＦ２８、背面ＬＣＤ３０）に表示される通常画像及びスプリットイメージについて説明する。

図１２は、表示部（ＥＶＦ２８、背面ＬＣＤ３０）に表示される通常画像及びスプリットイメージ（スプリットイメージ合成画像）の一例を示す図であり、（ａ）部分は合焦状態を示し、（ｂ）部分は非合焦状態を示す。

画像処理回路５２のスプリットイメージ処理部７１（図９参照）は、第１位相差画素群６１’からの出力信号に基づき、被写体の中央領域の図１２中上半分の領域をＬ視点側から見たときのスプリットイメージデータＤ２−Ｌ（第１スプリットイメージ８３）を生成する。また、スプリットイメージ処理部７１は、第２位相差画素群６２’からの出力信号に基づき、被写体の中央領域の図中下半分の領域をＲ視点側から見たときのスプリットイメージデータＤ２−Ｒ（第２スプリットイメージ８４）を生成する。第１スプリットイメージ８３及び第２スプリットイメージ８４が水平方向に延在する分割ライン８５を境界として隣接配置されることで、スプリットイメージ８２（スプリットイメージデータＤ２）が構成される。

第１スプリットイメージ８３及び第２スプリットイメージ８４は、フォーカスレンズ４２（図２参照）の合焦状態に応じて図１２中左右方向（水平方向（第１の方向））にシフトする。第１スプリットイメージ８３と第２スプリットイメージ８４とのずれ量は、フォーカスレンズ４２の焦点のずれ量に対応する。すなわち、図１２中左右方向が、撮影光学系４０によりカラー撮像素子４７の撮像面４７ａ上に結像された各被写体光像のずれ方向に対応する位相差方向となる。したがって、第１スプリットイメージ８３及び第２スプリットイメージ８４は、フォーカスレンズ４２が合焦しているときに、ずれ量がゼロ（ほぼゼロを含む）となる（図１２の（ａ）部分参照）。

一方、フォーカスレンズ４２の焦点がずれるほど、第１スプリットイメージ８３と第２スプリットイメージ８４とのずれ量も大きくなる（図１２の（ｂ）部分参照）。これにより、ユーザは、表示部におけるライブビュー画像のスプリットイメージ８２（第１スプリットイメージ８３、第２スプリットイメージ８４）のずれ量を確認しながらフォーカスリング２６を回転操作することで、フォーカス調整を行うことができる。

図１３は、マニュアルフォーカスモード時の撮影処理フローを示すフローチャートである。

モード切替ボタン３４（図１の（ｂ）部分参照）を介して撮影モードが選択され（図１３のステップＳ１）、またフォーカスモード切替レバー１８（図１の（ａ）部分参照）を介してマニュアルフォーカスモードが選択されると（Ｓ２）、ＣＰＵ５０（図２参照）はレンズドライバ４６を介してメカシャッタ４３の動作を制御するとともに、撮像素子ドライバ５１を介してカラー撮像素子４７を駆動する（Ｓ３）。なお、ＡＦモードが設定された場合のデジタルカメラ１０の動作は公知であるのでここでは具体的な説明は省略する。

マニュアルフォーカスモードに設定されると（Ｓ２）、カラー撮像素子４７の通常画素６０（通常画素群６０’）からの出力信号は、画像処理回路５２の通常画像処理部７０に入力される（Ｓ４）。通常画像処理部７０は、通常画素６０からの出力信号に基づき通常画像データＤ１を生成し（Ｓ５）、メモリ５６のＶＲＡＭ領域に格納する。

一方、第１位相差画素６１及び第２位相差画素６２からの出力信号は、スプリットイメージ処理部７１に入力され（Ｓ６）、スプリットイメージ処理部７１の画素補間処理部７２が画素データの補間処理を行う（Ｓ７）。スプリットイメージ処理部７１は、第１位相差画素６１（第１位相差画素群６１’）からの出力信号（及び補間画素データ）に基づき第１スプリットイメージ８３を生成し、第２位相差画素６２（第２位相差画素群６２’）からの出力信号（及び補間画素データ）に基づき第２スプリットイメージ８４を生成する。これにより、第１スプリットイメージ８３と第２スプリットイメージ８４とを含むスプリットイメージ８２（スプリットイメージデータＤ２）が生成される（Ｓ８）。スプリットイメージデータＤ２は、メモリ５６のＶＲＡＭ領域に格納される。

表示制御部５５は、メモリ５６から通常画像データＤ１及びスプリットイメージデータＤ２を読み出して、通常画像データＤ１とスプリットイメージデータＤ２とを合成した後に、表示部（ＥＶＦ２８、背面ＬＣＤ３０）へ合成画像データ（スプリットイメージ合成画像データＤ４）を出力する。これにより、図１２に示すように、通常画像データＤ１に基づく通常画像８１内に、スプリットイメージデータＤ２に基づくスプリットイメージ８２を含むライブビュー画像が表示部（ＥＶＦ２８、背面ＬＣＤ３０）に表示される（Ｓ９）。

第１スプリットイメージ８３と第２スプリットイメージ８４とは、フォーカスレンズ４２の合焦状態に応じて図１２中左右方向にシフトするので、ユーザは、フォーカスリング２６を回転操作してフォーカスレンズ４２を光軸方向に沿って移動させる。フォーカスレンズ４２が被写体に合焦する合焦位置に近づくのに伴って、第１スプリットイメージ８３と第２スプリットイメージ８４とのずれ量は次第に小さくなる。これによりユーザは、表示部のライブビュー画像を確認しながらフォーカス調整を行うことができる。

フォーカスレンズ４２が合焦位置にセットされると、第１スプリットイメージ８３と第２スプリットイメージ８４とのずれ量がゼロになる（図１２の（ａ）部分参照）。これにより、フォーカスレンズ４２が被写体に合焦して、フォーカス調整が完了する（Ｓ１０）。以下、シャッタボタン２０が押し下げられるまで、上記処理（Ｓ３〜Ｓ１０）が繰り返し実行される。

シャッタボタン２０が押し下げられると、通常画像処理部７０にて１フレーム分の通常画像データＤ１が生成されてメモリ５６のＶＲＡＭ領域に一時的に格納される。この通常画像データＤ１は、圧縮伸長処理回路５４にて圧縮された後、メディアインターフェース５３を介してメモリカード５７に記録される（Ｓ１１）。以下、マニュアルフォーカスモードが終了するまで上述の処理（Ｓ３〜Ｓ１１）が繰り返し実行される。

上述のようなスプリットイメージを利用したマニュアルフォーカスモードにおいて、以下の各実施形態では、複数の表示手段（ＥＶＦ２８、操作部３２、等）間でスプリットイメージの表示に関して調和を持たせることで、ユーザの使用感を向上させる。複数の表示部を持つカメラにおいてスプリットイメージを表示する表示部を切り替えるときには、撮像素子からの画素データの読み出し手法や、画像表示処理を異ならせる必要がある。そこで、以下の各実施形態の画像生成手段（画像処理回路５２、表示制御部５５）は、スプリットイメージの生成に使用する画素（位相差画素）、スプリットイメージの拡大率及び縮小率、及びスプリットイメージを表示する画素領域のうち少なくともいずれか１つを、ＥＶＦ２８（第１の表示手段）と背面ＬＣＤ３０（第２の表示手段）との間で異ならせる。

ＥＶＦ２８及び背面ＬＣＤ３０の「解像度（表示画素数）」や「通常画像８１及びスプリットイメージ８２の表示割合」については、カメラ本体１２のＣＰＵ５０を介し、予め把握可能である。したがって、通常画像処理部７０及びスプリットイメージ処理部７１における通常画像データＤ１及びスプリットイメージデータＤ２の生成時、或いは合成処理部７４におけるスプリットイメージ合成画像データＤ４の生成時に、ＥＶＦ２８及び背面ＬＣＤ３０の表示領域に最適化されたデータフォーマットで各種画像データを作成することが可能である。

例えばＥＶＦ２８において、８００画素×６００画素の画像表示領域に通常画像８１及びスプリットイメージ８２を表示し、そのうち４００画素×３００画素の範囲にスプリットイメージ８２を表示する場合、「８００画素×６００画素」の通常画像データＤ１及び「４００画素×３００画素」のスプリットイメージデータＤ２を通常画像処理部７０及びスプリットイメージ処理部７１において生成したり、合成処理部７４における合成処理時に所望の画素数の通常画像８１及びスプリットイメージ８２を合成生成したりすることも可能である。

また、通常画像処理部７０及びスプリットイメージ処理部７１における通常画像データＤ１及びスプリットイメージデータＤ２（ライブビュー画像）の作成時に、画像処理回路５２は、カラー撮像素子４７の全画素（通常画素、位相差画素）のデータを取得してもよいし、通常画像データＤ１及びスプリットイメージデータＤ２の作成に必要な画素のデータのみを取得するようにしてもよい。通常画像データＤ１及びスプリットイメージデータＤ２の作成に必要な画素のデータのみを取得することで、画素データの取得処理（読み込み処理）やデータ作成時の演算処理の負荷を軽減して、処理速度を高速化することが可能である。

以下、複数の表示手段におけるスプリットイメージの具体的な表示手法に関する実施形態の各々について説明する。

なお、以下の各実施形態では、複数の表示手段としてＥＶＦ２８及び背面ＬＣＤ３０を想定するが、表示手段はこれらに限定されず、例えばホットシュー２４に装着される外付け型ＥＶＦを複数の表示手段に含めてもよい。

また、以下の各実施形態において、スプリットイメージの生成に使用する画素の間引き率、スプリットイメージの拡大率、或いはスプリットイメージの縮小率の調整は、ＣＰＵ５０の制御下において、撮像素子ドライバ５１によるカラー撮像素子４７の駆動制御、画像処理回路５２及び表示制御部５５における画像処理制御、等によって行われる。例えば、スプリットイメージの生成に使用する画素の間引き率は、撮像素子ドライバ５１によってカラー撮像素子４７から画像処理回路５２に送られる画素データをコントロールしたり、画像処理回路５２（スプリットイメージ処理部７１）で作成されるスプリットイメージデータＤ２をコントロールしたり、合成処理部７４で作成されるスプリットイメージ合成画像データＤ４をコントロールしたりすることで、調整可能である。また、スプリットイメージの拡大率或いは縮小率は、画像処理回路５２（スプリットイメージ処理部７１）におけるスプリットイメージデータＤ２の作成時や、合成処理部７４におけるスプリットイメージ合成画像データＤ４の作成時に、各処理部において適切な拡大処理・縮小処理が画像データに施されることで調整可能である。

また、以下の各実施形態において、表示部（ＥＶＦ２８、背面ＬＣＤ３０）に表示されるスプリットイメージ合成画像（通常画像８１、スプリットイメージ８２）のフレームレートは、ＣＰＵ５０が表示制御部５５をコントロールすることで調整されている。

また、以下の各実施形態では、マニュアルフォーカスモードにおける表示部（ＥＶＦ２８及び背面ＬＣＤ３０）に表示される通常画像８１（通常画像データＤ１）に関し、カラー撮像素子４７によって撮像取得される画像の全体が表示部に表示されるように、画像処理回路５２（通常画像処理部７０）において、表示部の構成画素数に応じた画像縮小処理が通常画素群６０’からの画素データ（画像データ）に施されている。

＜第１実施形態＞
まずは、マニュアルフォーカスモードにおけるスプリットイメージの表示に関して２つの表示部（ＥＶＦ２８、背面ＬＣＤ３０）を切り替える場合に、両表示部間でスプリットイメージの表示倍率を異ならせないようにして、ユーザに違和感を与えないようにする実施形態について説明する。

本実施形態に係る画像生成手段（画像処理回路５２、表示制御部５５）は、間引き処理、拡大処理、縮小処理のうち少なくともいずれか１つを実施してスプリットイメージを生成し、位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）のうちスプリットイメージの生成に使用する画素の間引き率、スプリットイメージの拡大率、及びスプリットイメージの縮小率のうち少なくともいずれか１つを、ＥＶＦ２８に表示させるスプリットイメージと背面ＬＣＤ３０に表示させるスプリットイメージとの間で一致させる。

一般に、表示部の解像度は６４０画素×４８０画素（ＶＧＡ）、８００画素×６００画素（ＳＶＧＡ）、１０２４画素×７６８画素（ＸＧＡ）、１２８０画素×１０２４画素（ＳＸＧＡ）などがある。本実施形態では、ＥＶＦ２８の表示領域が８００画素×６００画素（ＳＶＧＡ）の画素数を有し、背面ＬＣＤ３０の表示領域が６４０画素×４８０画素（ＶＧＡ）の画素数を有する場合について説明する。

図１４は、第１実施形態においてスプリットイメージの生成に使用する位相差画素の範囲を示すカラー撮像素子の概略図である。図１５は、第１実施形態において通常画像及びスプリットイメージを表示する表示部を示し、（ａ）部分はＥＶＦの画像表示例を示し、（ｂ）部分は背面ＬＣＤの画像表示例を示す。

本実施形態に係る画像生成手段（画像処理回路５２、表示制御部５５）は、位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）のうちスプリットイメージの生成に使用する画素を、ＥＶＦ２８に表示させるスプリットイメージと背面ＬＣＤ３０に表示させるスプリットイメージとの間で異ならせる。より具体的には、画像生成手段（画像処理回路５２、表示制御部５５）は、位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）のうちスプリットイメージの生成に使用するカラー撮像素子４７上の画素範囲を、ＥＶＦ２８に表示させるスプリットイメージと背面ＬＣＤ３０に表示させるスプリットイメージとの間で異ならせる。

図１４に示す例において、スプリットイメージの生成に使用するカラー撮像素子４７の画素範囲に関し、ＥＶＦ２８に表示するスプリットイメージに使用される位相差画素の範囲４９Ｅは、位相差画素配置領域４９の全体範囲の一部となっている。また、背面ＬＣＤ３０に表示するスプリットイメージに使用される位相差画素の範囲４９Ｌは、「ＥＶＦ２８に表示されるスプリットイメージに使用される位相差画素の範囲４９Ｅ」の全体範囲の一部となっている。すなわち、カラー撮像素子４７において、ＥＶＦ２８用スプリットイメージ使用画素範囲４９Ｅは背面ＬＣＤ３０用スプリットイメージ使用画素範囲４９Ｌよりも大きく、背面ＬＣＤ３０用スプリットイメージ使用画素（位相差画素）はＥＶＦ２８用スプリットイメージ使用画素の一部と重複する。

例えば６０００画素×４５００画素の表示領域を持つカラー撮像素子４７において、スプリットイメージ用の画素（位相差画素）が中心付近に５０％のエリアに４画素おきに配置されているとすると、スプリットイメージ用の位相差画素は７５０画素×５６２画素含まれることになる。

一方、図１５の（ａ）部分に示すように、８００画素×６００画素（ＳＶＧＡ）の画素数を有するＥＶＦ２８において、例えば画角範囲の中心５割（画素数比率で２．５割）の部分にスプリットイメージ８２を表示する場合には、ＥＶＦ２８のスプリットイメージ表示領域を構成する画素数は４００画素×３００画素となる。

ＥＶＦ２８の４００画素×３００画素のスプリットイメージ表示領域にスプリットイメージ８２を１００％等倍表示するため、カラー撮像素子４７の位相差画素配置領域４９の一部範囲であって４００画素×３００画素の位相差画素を含む範囲が「ＥＶＦ２８に表示されるスプリットイメージに使用される位相差画素の範囲４９Ｅ」に設定される。この場合、ＥＶＦ２８の画像表示に関し、周囲の通常画像８１よりもスプリットイメージ８２が拡大表示されるが、マニュアルフォーカス時におけるピント合わせを精度良く行う観点からは、１００％等倍表示でスプリットイメージ８２を表示部に表示したほうが好ましい場合もある。また、スプリットイメージ８２が拡大表示されることで、ユーザは合焦状態を把握し易く確認が容易になるというメリットもある。

一方、図１５の（ｂ）部分に示すように、６４０画素×４８０画素（ＶＧＡ）の画素数を有する背面ＬＣＤ３０において、例えば画角範囲の中心５割（画素数比率で２．５割）の部分にスプリットイメージを表示する場合には、背面ＬＣＤ３０のスプリットイメージ表示領域を構成する画素数は３２０画素×２４０画素となる。

この背面ＬＣＤ３０の３２０画素×２４０画素のスプリットイメージ表示領域にスプリットイメージ８２を１００％等倍表示するため、カラー撮像素子４７の位相差画素配置領域４９の「ＥＶＦ２８に表示されるスプリットイメージに使用される位相差画素の範囲４９Ｅ」の一部範囲であって３２０画素×２４０画素の位相差画素を含む範囲が「背面ＬＣＤ３０に表示するスプリットイメージに使用される位相差画素の範囲４９Ｌ」に設定される。この場合、背面ＬＣＤ３０の画像表示に関し、周囲の通常画像８１よりもスプリットイメージ８２が拡大されたような画像になり、ＥＶＦ２８の場合（図１５の（ａ）部分参照）よりも狭い範囲の画像がスプリットイメージ８２として背面ＬＣＤ３０に表示される。

なお、ここでいうスプリットイメージ８２の１００％等倍表示とは、画素データの補間や位相差画素からの画素データの間引きを行うことなく、カラー撮像素子４７上で相互に隣接する位相差画素の画素データのみから作られるスプリットイメージ８２を表示することをいう。したがって、スプリットイメージ８２の「１００％等倍表示」を達成するために、画像生成手段（画像処理回路５２、表示制御部５５）は、位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）のうちスプリットイメージ８２の生成に使用するカラー撮像素子４７上の画素範囲（４９Ｅ、４９Ｌ）に含まれる全位相差画素を、スプリットイメージ８２の生成に使用する。

スプリットイメージ８２の表示が表示デバイス毎に異なる場合、合焦時におけるスプリットイメージ８２の表示態様が表示デバイス間で異なってしまうため、ユーザは、スプリットイメージ８２（第１スプリットイメージ８３、第２スプリットイメージ８４）のずれ具体に基づく合焦状態の判断を、表示デバイス毎に別個の基準で行う必要がある。

そのため、解像度が異なる複数の表示デバイス（ＥＶＦ２８、背面ＬＣＤ３０）を具備するカメラで、スプリットイメージ合成画像（通常画像８１、スプリットイメージ８２）を表示する表示部を切り替える場合、スプリットイメージ８２に使用する位相差画素の領域（範囲）を図１４に示すように表示部毎に異ならせることで、いずれの表示部においても同じ倍率（図１５に示す例では１００％等倍表示）でスプリットイメージ８２を表示することができる。これにより、スプリットイメージ８２を表示する表示部を切り替えたときの合焦操作の違和感を解消することができる。

なお、カラー撮像素子４７上の「ＥＶＦ２８に表示されるスプリットイメージに使用される位相差画素の範囲４９Ｅ」及び「背面ＬＣＤ３０に表示するスプリットイメージに使用される位相差画素の範囲４９Ｌ」の位置、サイズ、等は特に限定されない。ただし、ユーザは撮影画像の中心部で合焦させることが多いため、カラー撮像素子４７（配列画素）の中心部を基準にして、これらの範囲４９Ｅ、４９Ｌが定められることが好ましい。

＜変形例１−１＞
上述の例において、画像生成手段（画像処理回路５２、表示制御部５５）は、位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）のうちスプリットイメージ８２の生成に使用する画素（位相差画素）の間引き率を、ＥＶＦ２８に表示させるスプリットイメージと背面ＬＣＤ３０に表示させるスプリットイメージとの間で一致させている。すなわち、図１４及び図１５に示す例では、スプリットイメージ８２に使用される位相差画素の範囲４９Ｅ、４９Ｌに含まれる全ての位相差画素を使用して、ＥＶＦ２８及び背面ＬＣＤ３０にスプリットイメージ８２を１００％等倍表示する。

ただし、２つの表示部（ＥＶＦ２８、背面ＬＣＤ３０）間でスプリットイメージ８２の表示倍率を異ならせないようにするためには、必ずしも、スプリットイメージ８２に使用される位相差画素の範囲４９Ｅ、４９Ｌに含まれる全ての位相差画素を使用してスプリットイメージ８２を生成する必要はない。例えば、スプリットイメージ８２に使用される位相差画素範囲４９Ｅ、４９Ｌのうち一定比率（同一比率）で間引かれた位相差画素によってスプリットイメージ８２を生成する場合にも、２つの表示部（ＥＶＦ２８、背面ＬＣＤ３０）間でスプリットイメージ８２の表示倍率を同じにすることができる。

また、ＥＶＦ２８及び背面ＬＣＤ３０においてスプリットイメージ８２を拡大表示又は縮小表示する場合には、スプリットイメージ８２の生成に使用される位相差画素範囲４９Ｅ、４９Ｌのうち、スプリットイメージ８２の生成に実際に使用する位相差画素の出力値に基づくスプリットイメージ８２の拡大率／縮小率を、ＥＶＦ２８に表示するスプリットイメージ８２と背面ＬＣＤ３０に表示するスプリットイメージ８２との間で一致させることで、２つの表示部（ＥＶＦ２８、背面ＬＣＤ３０）間でスプリットイメージ８２の表示倍率を同じにすることが可能である。

＜変形例１−２＞
図１５に示す例では、ＥＶＦ２８及び背面ＬＣＤ３０のいずれにおいても、画角範囲の中心５割の部分にスプリットイメージ８２が表示されるが、ＥＶＦ２８及び背面ＬＣＤ３０におけるスプリットイメージ８２の表示領域は特に限定されない。したがって、例えば表示領域全体に対するスプリットイメージ８２の表示領域の割合を５割よりも大きくしてもよいし５割よりも小さくしてもよく、また画角範囲の中心以外の箇所をスプリットイメージ８２の表示領域としてもよい。

また、表示領域全体に対するスプリットイメージ８２の表示領域の割合を、ＥＶＦ２８と背面ＬＣＤ３０との間で異ならせてもよい。したがって、画像生成手段（画像処理回路５２、表示制御部５５）は、ＥＶＦ２８における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズが、背面ＬＣＤ３０における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズと異なるように、ＥＶＦ２８に表示させるスプリットイメージ８２及び背面ＬＣＤ３０に表示させるスプリットイメージ８２を生成してもよい。

また、画像生成手段（画像処理回路５２、表示制御部５５）は、ＥＶＦ２８における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズが、背面ＬＣＤ３０における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズと同じになるように、ＥＶＦ２８用のスプリットイメージ８２及び背面ＬＣＤ３０用のスプリットイメージ８２を生成してもよい。

また、例えばＥＶＦ２８のスプリットイメージ表示領域を構成する画素数と背面ＬＣＤ３０のスプリットイメージ表示領域を構成する画素数とを一致又は近似させてもよく、同じ画角範囲（例えば４００画素×３００画素）のスプリットイメージ８２がＥＶＦ２８及び背面ＬＣＤ３０の両者に表示されるようにしてもよい。この場合、ＥＶＦ２８に表示するスプリットイメージ８２の生成に使用される位相差画素と背面ＬＣＤ３０に表示するスプリットイメージ８２の生成に使用される位相差画素とは一致するが、表示領域全体に対するスプリットイメージ表示領域の相対的なサイズはＥＶＦ２８と背面ＬＣＤ３０との間で相違する。したがって、画像生成手段（画像処理回路５２、表示制御部５５）は、ＥＶＦ２８における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズが、背面ＬＣＤ３０における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズと異なるように、且つ、ＥＶＦ２８に表示させるスプリットイメージ８２の画角範囲と背面ＬＣＤ３０に表示させるスプリットイメージ８２の画角範囲とが同じになるように、ＥＶＦ２８に表示させるスプリットイメージ８２及び背面ＬＣＤ３０に表示させるスプリットイメージ８２を生成する。

＜変形例１−３＞
表示部（ＥＶＦ２８、背面ＬＣＤ３０）間で、マニュアルフォーカスモード時のライブビュー画像（スプリットイメージ合成画像）のフレームレートを異ならせてもよい。この場合、背面ＬＣＤ３０に表示するスプリットイメージ合成画像のフレームレートを、ＥＶＦ２８に表示するスプリットイメージ合成画像のフレームレートよりも高速にしてもよい。

背面ＬＣＤ３０の解像度はＥＶＦ２８の解像度よりも低く、スプリットイメージ合成画像の表示領域の構成画素数は背面ＬＣＤ３０のほうがＥＶＦ２８よりも少ない。そのため、背面ＬＣＤ３０に表示するスプリットイメージ合成画像に必要とされる画素データは、ＥＶＦ２８に表示するスプリットイメージ合成画像に必要とされる画素データよりもデータ量が少なくて済む。したがって、マニュアルフォーカスモード時のライブビュー画像の生成時にスプリットイメージ合成画像の生成に必要とされる画素データのみをカラー撮像素子４７から読み出すようにすることで、背面ＬＣＤ３０に表示するスプリットイメージ合成画像の生成に必要な「カラー撮像素子４７における読み出し画素領域」をＥＶＦ２８の場合よりも小さくすることができ、背面ＬＣＤ３０に表示するスプリットイメージ合成画像のフレームレートをＥＶＦ２８よりも速くすることが可能である。

＜変形例１−４＞
上述の例では、ＥＶＦ２８に表示させるスプリットイメージ８２と背面ＬＣＤ３０に表示させるスプリットイメージ８２のうち少なくともいずれか一方の生成に使用するカラー撮像素子４７上の位相差画素が、位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）を構成する位相差画素の一部である例を示した。しかしながら、ＥＶＦ２８に表示するスプリットイメージ８２と背面ＬＣＤ３０に表示するスプリットイメージ８２のうち少なくともいずれか一方の生成に使用するカラー撮像素子４７上の位相差画素は、位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）を構成する全画素であってもよい。

例えば、カラー撮像素子４７の位相差画素配置領域４９の位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）を構成する全位相差画素を用いて、背面ＬＣＤ３０の３２０画素×２４０画素のスプリットイメージ表示領域に表示するスプリットイメージ８２を生成したり、ＥＶＦ２８の４００画素×３００画素のスプリットイメージ表示領域に表示するスプリットイメージ８２を生成してもよい。このように、カラー撮像素子４７の位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）を構成する全位相差画素を用いてスプリットイメージ８２を生成することで、精度の高いスプリットイメージ８２を生成することが可能となる。

この場合、ＥＶＦ２８又は背面ＬＣＤ３０のスプリットイメージ表示領域を構成する全画素数と、カラー撮像素子４７の位相差画素配置領域４９に含まれる位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）を構成する全位相差画素数とを一致させることが好ましい。この場合、ＥＶＦ２８又は背面ＬＣＤ３０のスプリットイメージ表示領域において、スプリットイメージ８２を１００％等倍表示することが可能である。

＜変形例１−５＞
ＥＶＦ２８及び背面ＬＣＤ３０のうちの少なくとも一方において合焦時に表示される通常画像８１とスプリットイメージ８２との間に、画像段差がなく、連続的に繋がった画像が表示されるようにしてもよい。すなわち、図１２の（ａ）部分に示すように、ピントが合っている状態で、表示部に表示される通常画像８１とスプリットイメージ８２とによって一連の画像が形成されるようにしてもよい。通常画像８１及びスプリットイメージ８２の表示拡縮率や構成画素の間引き率が同じである場合に、表示部に表示される通常画像８１とスプリットイメージ８２とが連続的に繋がる。例えば、「通常画像８１を構成する隣接画素のカラー撮像素子４７上における画素間隔」と「スプリットイメージ８２を構成する隣接画素のカラー撮像素子４７上における画素間隔」とが同じであって、「通常画像８１とスプリットイメージ８２との境界ラインを挟んだ表示部上における隣接画素の、カラー撮像素子４７上における画素間隔」が「通常画像８１及びスプリットイメージ８２を構成する隣接画素のカラー撮像素子４７上における画素間隔」と同じ場合に、表示部に表示される通常画像８１とスプリットイメージ８２とによって一連の画像を形成することが可能である。

したがって、画像生成手段（画像処理回路５２、表示制御部５５）は、ＥＶＦ２８及び背面ＬＣＤ３０のうちの少なくとも一方に表示する通常画像８１及びスプリットイメージ８２の間引き率、拡大率及び縮小率を含むパラメータのうち、通常画像８１及びスプリットイメージ８２を生成する際に行う処理に関連するパラメータを、通常画像８１とスプリットイメージ８２との間で同じにしてもよい。

＜第２実施形態＞
次に、２つの表示部のうち一方の表示部を優先する実施形態について説明する。本実施形態では、ＥＶＦ２８にスプリットイメージは１００％等倍表示され、背面ＬＣＤ３０に表示するスプリットイメージは、ＥＶＦ２８に１００％等倍表示されるスプリットイメージと同じ画角範囲を持つように生成される。

本実施形態において、上述の第１実施形態と同一又は類似の構成については、同一の符号を付し、詳細な説明は省略する。

図１６は、第２実施形態において通常画像８１及びスプリットイメージ８２を表示する表示部を示し、（ａ）部分はＥＶＦ２８の画像表示例を示し、（ｂ）部分は背面ＬＣＤ３０の画像表示例を示す。

本実施形態に係る画像生成手段（画像処理回路５２、表示制御部５５）は、ＥＶＦ２８に表示するスプリットイメージ８２の画角範囲と背面ＬＣＤ３０に表示するスプリットイメージ８２の画角範囲とが同じになるように、スプリットイメージ８２の拡縮率（拡大率、縮小率）をＥＶＦ２８と背面ＬＣＤ３０との間で異ならせる。

ＥＶＦ２８にはスプリットイメージ８２が１００％等倍表示されるので、ＥＶＦ２８におけるスプリットイメージ８２の表示領域を構成する画素数と、カラー撮像素子４７の位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）のうちＥＶＦ２８に表示するスプリットイメージ８２の生成に寄与する位相差画素の画素数とは同じである。

本実施形態においても、上述の第１実施形態と同様に、カラー撮像素子４７が６０００画素×４５００画素（通常画素及び位相差画素を含む）によって構成され、スプリットイメージ用の画素（位相差画素）が画素領域の中心付近に５０％のエリアに４画素おきに配置され、７５０画素×５６２画素の位相差画素をカラー撮像素子４７が含む（図１４参照）。一方、図１６に示すように、ＥＶＦ２８の表示領域は８００画素×６００画素（ＳＶＧＡ）の画素数を有し、背面ＬＣＤ３０の表示領域は６４０画素×４８０画素（ＶＧＡ）の画素数を有し、ＥＶＦ２８及び背面ＬＣＤ３０の各々において画角範囲の中心５割の部分にスプリットイメージ８２が表示される。したがって、ＥＶＦ２８のスプリットイメージ表示領域を構成する画素数は４００画素×３００画素であり、背面ＬＣＤ３０のスプリットイメージ表示領域を構成する画素数は３２０画素×２４０画素となる。

ＥＶＦ２８では、４００画素×３００画素のスプリットイメージ表示領域にスプリットイメージ８２が１００％等倍表示され、「ＥＶＦ２８に表示されるスプリットイメージに使用される位相差画素の範囲４９Ｅ」は上述の第１実施形態と共通する。

一方、背面ＬＣＤ３０の３２０画素×２４０画素によって構成されるスプリットイメージ表示領域に表示させるスプリットイメージ８２は、「ＥＶＦ２８に表示されるスプリットイメージに使用される位相差画素の範囲４９Ｅ」に含まれる位相差画素の画像データに対して８０％の画像縮小処理が施されて生成される。

本実施形態では、ＥＶＦ２８及び背面ＬＣＤ３０の両者において、同じ画角範囲のスプリットイメージ８２が表示されるように、背面ＬＣＤ３０に表示されるスプリットイメージ８２がコントロールされる。背面ＬＣＤ３０のスプリットイメージ表示領域は、ＥＶＦ２８の表示領域に対し水平方向及び垂直方向の各々に関して８０％の画素数によって構成される。したがって、ＥＶＦ２８に表示されるスプリットイメージ８２に対し、水平方向及び垂直方向の各々に関して８０％の縮小処理を施すことで、縮小処理後のスプリットイメージ８２を構成する画素数が背面ＬＣＤ３０のスプリットイメージ表示領域の画素数に一致し、ＥＶＦ２８及び背面ＬＣＤ３０の両者において、同じ画角範囲のスプリットイメージ８２を表示することができる。

なお、ここでいう画像縮小処理は特に限定されず、公知の手法（画素間引き処理等）を適宜使用することが可能である。

＜変形例２−１＞
上述の例では、ＥＶＦ２８のスプリットイメージ表示を背面ＬＣＤ３０のスプリットイメージ表示よりも優先し、ＥＶＦ２８においてスプリットイメージ８２を１００％等倍表示させる一方で、背面ＬＣＤ３０に表示するスプリットイメージ８２が画像縮小処理によって得られているが、背面ＬＣＤ３０のスプリットイメージ表示をＥＶＦ２８のスプリットイメージ表示よりも優先してもよい。

すなわち、背面ＬＣＤ３０においてスプリットイメージ８２を１００％等倍表示し、背面ＬＣＤ３０におけるスプリットイメージ８２の表示領域を構成する画素数と、カラー撮像素子４７の位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）のうち背面ＬＣＤ３０に表示するスプリットイメージ８２の生成に寄与する位相差画素の画素数とを同じにしてもよい。

例えば、背面ＬＣＤ３０において上述の第１実施形態と同様にスプリットイメージ８２を１００％等倍表示させる場合、ＥＶＦ２８に表示するスプリットイメージ８２を画像拡大処理によって取得してもよい。すなわち、背面ＬＣＤ３０では、３２０画素×２４０画素のスプリットイメージ表示領域にスプリットイメージ８２が１００％等倍表示され、「背面ＬＣＤ３０に表示するスプリットイメージに使用される位相差画素の範囲４９Ｌ」は上述の第１実施形態と共通する。

一方、ＥＶＦ２８の４００画素×３００画素によって構成されるスプリットイメージ表示領域に表示するスプリットイメージ８２は、「背面ＬＣＤ３０に表示するスプリットイメージに使用される位相差画素の範囲４９Ｌ」に含まれる位相差画素の画像データに対して１２５％の画像拡大処理が施されて生成される。ＥＶＦ２８のスプリットイメージ表示領域は、背面ＬＣＤ３０の表示領域に対して水平方向及び垂直方向の各々に関して１２５％の構成画素数によって構成されている。したがって、背面ＬＣＤ３０に表示されるスプリットイメージ８２に対し、水平方向及び垂直方向の各々に関して１２５％の画像拡大処理を施すことで、拡大処理後のスプリットイメージ８２を構成する画素数がＥＶＦ２８のスプリットイメージ表示領域の画素数に一致し、ＥＶＦ２８及び背面ＬＣＤ３０の両者において、同じ画角範囲のスプリットイメージ８２が表示される。

なお、ここでいう画像拡大処理は特に限定されず、公知の手法（画素補間処理等）を適宜使用することが可能である。

＜変形例２−２＞
上述の例ではＥＶＦ２８（又は背面ＬＣＤ３０）にはスプリットイメージ８２が１００％等倍表示されるが、ＥＶＦ２８及び背面ＬＣＤ３０の両者において同じ画角範囲のスプリットイメージ８２を表示できれば、必ずしも、スプリットイメージ８２を１００％等倍表示させる必要はない。

例えば、ＥＶＦ２８及び背面ＬＣＤ３０のうちの一方に表示するスプリットイメージ８２に関し、スプリットイメージ８２の生成に使用される位相差画素範囲（４９Ｅ、４９Ｌ）のうち一定比率で間引かれた位相差画素によってスプリットイメージ８２を生成する場合にも、２つの表示部（ＥＶＦ２８、背面ＬＣＤ３０）間で同じ画角範囲のスプリットイメージ８２が表示されるように、ＥＶＦ２８及び背面ＬＣＤ３０のうちの他方に表示するスプリットイメージ８２を画像拡大処理や画像縮小処理によって生成することが可能である。

また、ＥＶＦ２８及び背面ＬＣＤ３０のうちの一方に表示されるスプリットイメージ８２を画像拡大処理又は画像縮小処理によって生成する場合、その拡大又は縮小後のスプリットイメージと同じ画角範囲のスプリットイメージを、ＥＶＦ２８及び背面ＬＣＤ３０のうちの他方のスプリットイメージ表示領域の構成画素数に応じて、各種画像処理（拡大処理、縮小処理等）により作成すればよい。

＜変形例２−３＞
図１６に示す上述の例では、ＥＶＦ２８及び背面ＬＣＤ３０のいずれにおいても、画角範囲の中心５割の部分にスプリットイメージ８２が表示されるが、ＥＶＦ２８及び背面ＬＣＤ３０におけるスプリットイメージ８２の表示領域は特に限定されない。したがって、例えば表示領域全体に対するスプリットイメージ８２の表示領域の割合を５割よりも大きくしてもよいし５割よりも小さくしてもよく、また画角範囲の中心以外の箇所をスプリットイメージ８２の表示領域としてもよい。また、表示領域全体に対するスプリットイメージ８２の表示領域の割合を、ＥＶＦ２８と背面ＬＣＤ３０との間で異ならせてもよい。

これらの場合においても、ＥＶＦ２８及び背面ＬＣＤ３０に表示されるスプリットイメージ８２の画角範囲が同じになるように、スプリットイメージデータＤ２に対して各種画像処理（拡大処理、縮小処理）がスプリットイメージ処理部７１において行われる。

また、画像生成手段（画像処理回路５２、表示制御部５５）は、ＥＶＦ２８における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズが、背面ＬＣＤ３０における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズと異なるように、ＥＶＦ２８に表示させるスプリットイメージ８２及び背面ＬＣＤ３０に表示させるスプリットイメージ８２を生成してもよい。

また、画像生成手段（画像処理回路５２、表示制御部５５）は、ＥＶＦ２８における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズが、背面ＬＣＤ３０における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズと同じになるように、ＥＶＦ２８用のスプリットイメージ８２及び背面ＬＣＤ３０用のスプリットイメージ８２を生成してもよい。

また、例えばＥＶＦ２８のスプリットイメージ表示領域を構成する画素数と背面ＬＣＤ３０のスプリットイメージ表示領域を構成する画素数とを一致又は近似させてもよく、同じ画角範囲（例えば４００画素×３００画素）のスプリットイメージ８２がＥＶＦ２８及び背面ＬＣＤ３０の両者に表示されるようにしてもよい。したがって、画像生成手段（画像処理回路５２、表示制御部５５）は、ＥＶＦ２８における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズが、背面ＬＣＤ３０における表示領域全体に対するスプリットイメージ８２の表示領域の相対的なサイズと異なるように、且つ、ＥＶＦ２８に表示させるスプリットイメージ８２の画角範囲と背面ＬＣＤ３０に表示させるスプリットイメージ８２の画角範囲とが同じになるように、ＥＶＦ２８に表示させるスプリットイメージ８２及び背面ＬＣＤ３０に表示させるスプリットイメージ８２を生成する。

＜変形例２−４＞
スプリットイメージ８２の縮小処理を画素間引き処理によって実現する場合、縮小処理後のスプリットイメージ８２の生成に必要なカラー撮像素子４７の画素数は、縮小処理前のスプリットイメージ８２の生成に必要なカラー撮像素子４７の画素数よりも少なくなる。

したがって、スプリットイメージ処理部７１におけるスプリットイメージ８２の生成時に、スプリットイメージ８２の生成に必要なカラー撮像素子４７の画素のみから画素データを読み出し取得する場合には、ＥＶＦ２８に表示するスプリットイメージ８２の生成時よりも背面ＬＣＤ３０に表示するスプリットイメージ８２の生成時のほうが画素データの読み出し取得量が少なくて済むため、画素データの読み出し取得を高速化することが可能である。したがって、ＥＶＦ２８におけるスプリットイメージ合成画像（通常画像８１、スプリットイメージ８２）のフレームレートよりも、背面ＬＣＤ３０におけるスプリットイメージ合成画像のフレームレートを高くすることが容易である。

＜変形例２−５＞
上述の実施形態では、ＥＶＦ２８に表示するスプリットイメージ８２と背面ＬＣＤ３０に表示するスプリットイメージ８２のうち少なくともいずれか一方の生成に使用するカラー撮像素子４７上の位相差画素は、位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）を構成する位相差画素の一部である例を示した。しかしながら、ＥＶＦ２８に表示させるスプリットイメージ８２と背面ＬＣＤ３０に表示させるスプリットイメージ８２のうち少なくともいずれか一方の生成に使用するカラー撮像素子４７上の位相差画素は、位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）を構成する全画素であってもよい。

この場合、ＥＶＦ２８又は背面ＬＣＤ３０のスプリットイメージ表示領域を構成する全画素数と、カラー撮像素子４７の位相差画素配置領域４９に含まれる位相差画素群（第１位相差画素群６１’及び第２位相差画素群６２’）を構成する全位相差画素数とを一致させることが好ましい。この場合、ＥＶＦ２８又は背面ＬＣＤ３０のスプリットイメージ表示領域において、スプリットイメージ８２を１００％等倍表示することが可能である。

＜変形例２−６＞
ＥＶＦ２８及び背面ＬＣＤ３０のうちの少なくとも一方において合焦時に表示される通常画像８１とスプリットイメージ８２との間に、画像段差がなく、連続的に繋がった画像が表示されるようにしてもよい。すなわち、図１２の（ａ）部分に示すように、ピントが合っている状態で、表示部に表示される通常画像８１とスプリットイメージ８２とによって一連の画像が形成されるようにしてもよい。通常画像８１及びスプリットイメージ８２の表示拡縮率や構成画素の間引き率が同じである場合に、表示部に表示される通常画像８１とスプリットイメージ８２とが連続的に繋がる。また、「通常画像８１を構成する隣接画素のカラー撮像素子４７上における画素間隔」と「スプリットイメージ８２を構成する隣接画素のカラー撮像素子４７上における画素間隔」とが同じであって、「通常画像８１とスプリットイメージ８２との境界ラインを挟んだ表示部上における隣接画素の、カラー撮像素子４７上における画素間隔」が「通常画像８１及びスプリットイメージ８２を構成する隣接画素のカラー撮像素子４７上における画素間隔」と同じ場合に、表示部に表示される通常画像８１とスプリットイメージ８２とによって一連の画像を形成することが可能である。

したがって、画像生成手段（画像処理回路５２、表示制御部５５）は、ＥＶＦ２８及び背面ＬＣＤ３０のうちの少なくとも一方に表示する通常画像８１及びスプリットイメージ８２の間引き率、拡大率及び縮小率を含むパラメータのうち、通常画像８１及びスプリットイメージ８２を生成する際に行う処理に関連するパラメータを、通常画像８１とスプリットイメージ８２との間で同じにしてもよい。

以上、本発明の好ましい実施形態について説明したが、本発明は上述の実施形態に限定されるものではなく、他の形態に対しても適宜応用可能である。

例えば、上記実施形態ではデジタルカメラについて説明したが、画像処理装置および撮像装置の構成はこれに限定されない。例えば、内蔵型又は外付け型のＰＣ用カメラ、撮影機能を有する携帯端末装置（携帯電話、スマートフォン、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、携帯型ゲーム機、等）等に対しても、本発明を適用することが可能である。

また、上述の各処理ステップをコンピュータに実行させるプログラム（ソフトウエア）および該プログラムを記録したコンピュータ読み取り可能な（非一時的）媒体に対しても、本発明を適用することが可能である。

１０…デジタルカメラ、１２…カメラ本体、１４…レンズユニット、１６…ストロボ発光部、１８…フォーカスモード切替レバー、２０…シャッタボタン、２２…電源スイッチ、２４…ホットシュー、２６…フォーカスリング、３０…背面ＬＣＤ、３２…操作部、３４…モード切替ボタン、３５…十字キー、３６…実行キー、３７…バックボタン、４０…撮影光学系、４１…ズームレンズ、４２…フォーカスレンズ、４３…メカシャッタ、４４…ズーム機構、４５…フォーカス機構、４６…レンズドライバ、４７…カラー撮像素子、４７ａ…撮像面、４８…通常画素領域、４９…位相差画素配置領域、４９Ｅ…ＥＶＦ用スプリットイメージ使用画素範囲、４９Ｌ…背面ＬＣＤ用スプリットイメージ使用画素範囲、５０…ＣＰＵ、５１…撮像素子ドライバ、５２…画像処理回路、５３…メディアインターフェース、５４…圧縮伸長処理回路、５５…表示制御部、５６…メモリ、５７…メモリカード、６０…通常画素、６１…第１位相差画素、６２…第２位相差画素、６６…遮光部材、７０…通常画像処理部、７１…スプリットイメージ処理部、７２…画素補間処理部、７４…合成処理部、７５…再生処理部、７６…表示選択部、８１…通常画像、８２…スプリットイメージ、８３…第１スプリットイメージ、８４…第２スプリットイメージ、８５…分割ライン

Claims (20)

1. 撮影レンズの第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１の画素群及び第２の画素群を有する撮像素子から出力される画像信号に基づいて第１の表示用画像を生成し、かつ前記第１の画素群及び前記第２の画素群から出力された第１の画像信号及び第２の画像信号に基づく第１の画像及び第２の画像から合焦確認に使用する第２の表示用画像を生成する画像生成手段と、
   前記第１の表示用画像及び前記第２の表示用画像を表示する第１の表示手段及び第２の表示手段と、
   前記第１の表示手段及び前記第２の表示手段のうち少なくとも一方に対し、前記画像生成手段により生成された前記第１の表示用画像を表示させ、かつ該第１の表示用画像の表示領域内に前記画像生成手段により生成された前記第２の表示用画像を表示させる制御を行う表示制御手段と、を備え、
   前記画像生成手段は、前記第１の表示用画像及び前記第２の表示用画像の間引き率、拡大率及び縮小率のうち少なくともいずれか１つが、前記第１の表示用画像と前記第２の表示用画像との間で異なるように前記第１の表示用画像及び前記第２の表示用画像を生成し、
   前記画像生成手段は、前記第１の画素群及び前記第２の画素群のうち前記第２の表示用画像の生成に使用する画素、前記第２の表示用画像の拡大率及び縮小率、及び前記第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを、前記第１の表示手段と前記第２の表示手段との間で異ならせる画像処理装置。
2. 前記第１の表示手段の表示領域の画素数は、前記第２の表示手段の表示領域の画素数よりも多い請求項１に記載の画像処理装置。
3. 前記画像生成手段は、間引き処理、拡大処理、縮小処理のうち少なくともいずれか１つを実施して前記第２の表示用画像を生成し、前記第１の画素群及び前記第２の画素群のうち前記第２の表示用画像の生成に使用する画素の間引き率、前記第２の表示用画像の拡大率、及び前記第２の表示用画像の縮小率のうち少なくともいずれか１つを、前記第１の表示手段に表示させる前記第２の表示用画像と前記第２の表示手段に表示させる前記第２の表示用画像との間で一致させる請求項１又は２に記載の画像処理装置。
4. 前記画像生成手段は、前記第１の画素群及び前記第２の画素群のうち前記第２の表示用画像の生成に使用する画素を、前記第１の表示手段に表示させる前記第２の表示用画像と前記第２の表示手段に表示させる前記第２の表示用画像との間で異ならせる請求項１から３のいずれか１項に記載の画像処理装置。
5. 前記画像生成手段は、前記第１の画素群及び前記第２の画素群のうち前記第２の表示用画像の生成に使用する前記撮像素子上の画素範囲を、前記第１の表示手段に表示させる前記第２の表示用画像と前記第２の表示手段に表示させる前記第２の表示用画像との間で異ならせる請求項１から４のいずれか１項に記載の画像処理装置。
6. 前記画像生成手段は、前記第１の画素群及び前記第２の画素群のうち前記第２の表示用画像の生成に使用する前記撮像素子上の画素範囲に含まれる全画素を前記第２の表示用画像の生成に使用する請求項１から５のいずれか１項に記載の画像処理装置。
7. 前記第１の表示手段に表示させる前記第２の表示用画像と前記第２の表示手段に表示させる前記第２の表示用画像のうち少なくともいずれか一方の生成に使用する前記撮像素子上の画素は、前記第１の画素群及び前記第２の画素群を構成する全画素である請求項１から６のいずれか１項に記載の画像処理装置。
8. 前記第１の表示手段に表示させる前記第２の表示用画像と前記第２の表示手段に表示させる前記第２の表示用画像のうち少なくともいずれか一方の生成に使用する前記撮像素子上の画素は、前記第１の画素群及び前記第２の画素群を構成する画素の一部である請求項１から６のいずれか１項に記載の画像処理装置。
9. 前記画像生成手段は、前記第１の表示手段に表示させる前記第２の表示用画像の画角範囲と前記第２の表示手段に表示させる前記第２の表示用画像の画角範囲とが同じになるように、前記第２の表示用画像の拡大率及び縮小率を前記第１の表示手段と前記第２の表示手段との間で異ならせる請求項１又は２に記載の画像処理装置。
10. 前記第１の表示手段における前記第２の表示用画像の表示領域を構成する画素数と、前記第１の表示手段に表示させる前記第２の表示用画像の生成に寄与する前記第１の画素群及び前記第２の画素群の画素数とは同じである請求項９に記載の画像処理装置。
11. 前記第２の表示手段における前記第２の表示用画像の表示領域を構成する画素数と、前記第２の表示手段に表示させる前記第２の表示用画像の生成に寄与する前記第１の画素群及び前記第２の画素群の画素数とは同じである請求項９に記載の画像処理装置。
12. 前記画像生成手段は、前記第１の表示手段における表示領域全体に対する前記第２の表示用画像の表示領域の相対的なサイズが、前記第２の表示手段における表示領域全体に対する前記第２の表示用画像の表示領域の相対的なサイズと異なるように、且つ、前記第１の表示手段に表示させる前記第２の表示用画像の画角範囲と前記第２の表示手段に表示させる前記第２の表示用画像の画角範囲とが同じになるように、前記第１の表示手段に表示させる前記第２の表示用画像及び前記第２の表示手段に表示させる前記第２の表示用画像を生成する請求項１又は２に記載の画像処理装置。
13. 前記画像生成手段は、前記第１の表示手段における表示領域全体に対する前記第２の表示用画像の表示領域の相対的なサイズが、前記第２の表示手段における表示領域全体に対する前記第２の表示用画像の表示領域の相対的なサイズと異なるように、前記第１の表示手段に表示させる前記第２の表示用画像及び前記第２の表示手段に表示させる前記第２の表示用画像を生成する請求項１から１１のいずれか１項に記載の画像処理装置。
14. 前記画像生成手段は、前記第１の表示手段における表示領域全体に対する前記第２の表示用画像の表示領域の相対的なサイズが、前記第２の表示手段における表示領域全体に対する前記第２の表示用画像の表示領域の相対的なサイズと同じになるように、前記第１の表示手段に表示させる前記第２の表示用画像及び前記第２の表示手段に表示させる前記第２の表示用画像を生成する請求項１から１１のいずれか１項に記載の画像処理装置。
15. 前記撮像素子は、前記被写体像が瞳分割されずに結像される第３の画素群であって、第３の画像信号を出力する第３の画素群を更に有し、
    前記画像生成手段は、前記第３の画像信号に基づき前記第１の表示用画像を生成する請求項１から１４のいずれか１項に記載の画像処理装置。
16. 前記第１の表示手段及び前記第２の表示手段のうちの少なくとも一方において、前記第１の表示用画像及び前記第２の表示用画像の間引き率、拡大率及び縮小率を含むパラメータのうち、前記画像生成手段が前記第１の表示用画像及び前記第２の表示用画像を生成する際に行う処理に関連するパラメータが前記第１の表示用画像と前記第２の表示用画像との間で同じである請求項１から１５のいずれか１項に記載の画像処理装置。
17. 撮影レンズの第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１の画素群及び第２の画素群を有する撮像素子と、
    請求項１から１６のいずれか１項に記載の画像処理装置と、を備える撮像装置。
18. 撮影レンズの第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１の画素群及び第２の画素群を有する撮像素子から出力される画像信号に基づいて第１の表示用画像を生成し、かつ前記第１の画素群及び前記第２の画素群から出力された第１の画像信号及び第２の画像信号に基づく第１の画像及び第２の画像から合焦確認に使用する第２の表示用画像を生成するステップと、
    第１の表示手段及び第２の表示手段のうち少なくとも一方に対し、前記第１の表示用画像を表示させ、かつ該第１の表示用画像の表示領域内に前記第２の表示用画像を表示させるステップと、を備え、
    前記第１の表示用画像及び前記第２の表示用画像の間引き率、拡大率及び縮小率のうち少なくともいずれか１つが、前記第１の表示用画像と前記第２の表示用画像との間で異なるように前記第１の表示用画像及び前記第２の表示用画像が生成され、
    前記第１の画素群及び前記第２の画素群のうち前記第２の表示用画像の生成に使用する画素、前記第２の表示用画像の拡大率及び縮小率、及び前記第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを、前記第１の表示手段と前記第２の表示手段との間で異ならせる画像処理方法。
19. 撮影レンズの第１の領域及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１の画素群及び第２の画素群を有する撮像素子から出力される画像信号に基づいて第１の表示用画像を生成し、かつ前記第１の画素群及び前記第２の画素群から出力された第１の画像信号及び第２の画像信号に基づく第１の画像及び第２の画像から合焦確認に使用する第２の表示用画像を生成する手順と、
    第１の表示手段及び第２の表示手段のうち少なくとも一方に対し、前記第１の表示用画像を表示させ、かつ該第１の表示用画像の表示領域内に前記第２の表示用画像を表示させる手順と、をコンピュータに実行させるためのプログラムであって、
    前記第１の表示用画像及び前記第２の表示用画像の間引き率、拡大率及び縮小率のうち少なくともいずれか１つが、前記第１の表示用画像と前記第２の表示用画像との間で異なるように前記第１の表示用画像及び前記第２の表示用画像が生成され、
    前記第１の画素群及び前記第２の画素群のうち前記第２の表示用画像の生成に使用する画素、前記第２の表示用画像の拡大率及び縮小率、及び前記第２の表示用画像を表示する画素領域のうち少なくともいずれか１つを、前記第１の表示手段と前記第２の表示手段との間で異ならせるプログラム。
20. 請求項１９に記載のプログラムを記録したコンピュータ読み取り可能な媒体。