JPWO2014054498A1 - 撮像装置及び画像表示方法 - Google Patents

Abstract

撮像装置１００は、撮影レンズ１６の第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群を有する撮像素子２０から第１の表示用画像を生成し且つ第１及び第２の画素群から合焦確認に使用する第２の表示用画像６０及び合焦確認を補助する第３の表示用画像６１を生成する生成部と、第２及び第３の表示用画像の表示部２１３への交互表示を制御し、第１及び第２の表示用画像とを、又は第１及び第３の表示用画像とを表示部２１３に表示させる表示制御部とを備える。

Description

本発明は撮像装置及び画像表示方法に係り、特に合焦を確認する技術に関する。

デジタルカメラにおいて、焦点を合わせる（フォーカスを行う）場合に、位相差検出方式やコントラスト検出方式を用いたオートフォーカス技術が知られている。一方、使用者が手動で焦点を合わせることができる、いわゆるマニュアルフォーカスモードを備えるものも知られている。

マニュアルフォーカスモードを有するデジタルカメラとしては、撮影した被写体を確認しながらフォーカス調整ができるようにレフレックスミラーを設けて、目視によるコントラストの確認を行う方法が知られている。

しかしながら、目視によるコントラストの確認を行う方法では、フォーカスレンズを合焦点前後に動かすことで合焦点を探すため、フォーカスレンズを動かさない状態では被写体が合焦したか否かを判別することが困難であった。

ところで、近年普及しているレフレックスミラーを省略したデジタルカメラでは、レフレックスミラーがないため位相差を表示しながら被写体像を確認する方法がなく、コントラスト検出方式に頼らざるを得なかった。しかし、この場合には、ＬＣＤ等の表示装置の解像度以上のコントラストの表示ができず、一部画像を拡大するなどして表示する方法を採らざるを得なかった。

そこで、近年では、マニュアルフォーカスモード時に、操作者が被写体に対してピントを合わせる作業を容易にするために、スプリットイメージをライブビュー画像（スルー画像ともいう）内に表示している。ここで、スプリットイメージとは、２分割された上下画像がピントのずれに応じて左右方向にずれ、ピントが合った状態だと上下画像の左右方向のずれがなくなる画像をいう。使用者は、スプリットイメージの上下画像のずれがなくなるように、マニュアルフォーカスリングを操作してピントを合わせる（合焦させる）。

スプリットイメージを表示する撮像装置の例として、特許文献１に記載の撮像装置は、撮像光学系からの光束のうち、瞳分割部によって分割された光束により形成された第１の被写体像及び第２の被写体像をそれぞれ光電変換した第１の画像及び第２の画像を生成し、これらの第１及び第２の画像を用いてスプリットイメージを生成すると共に、瞳分割部によって分割されない光束により形成された第３の被写体像を光電変換して第３の画像を生成する。そして、上記第３の画像を表示部に表示すると共に、第３の画像内に上記生成したスプリットイメージを表示し、かつ第３の画像から抽出した色情報をスプリットイメージに付加するようにしている。

一方、スプリットイメージとは異なるが、右目画像と左目画像を高速に交互表示する立体画像表示方法が特許文献２に記載されている。

特開２００９−１４７６６５号公報 特開２００５−２２９５６０号公報

しかしながら、特許文献１に記載の技術では、スプリットイメージが表示されるものの、所望の被写体に合焦しているか否かを判断することが困難な場合がある。又、特許文献２に記載の技術では、所望の被写体に合焦しているか否かを判断することは、考慮されていない。

本発明はこのような事情に鑑みてなされたもので、表示部に表示されている画像が合焦点に有る否かの確認を容易に行うことができる撮像装置及び画像表示方法の提供を目的とする。

上記目的を達成するために、本発明の一の態様に係る撮像装置は、撮影レンズにおける第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群を有する撮像素子から出力された画像信号に基づいて、第１の表示用画像を生成し且つ第１及び第２の画素群から出力された第１及び第２の画像信号に基づく第１及び第２の画像から合焦確認に使用する第２の表示用画像及び合焦確認を補助する第３の表示用画像を生成する生成部と、第２の表示用画像及び第３の表示用画像を交互表示可能な表示部と、第２の表示用画像及び第３の表示用画像の表示部への交互表示を制御し、表示部に対して第１の表示用画像と第２の表示用画像とを、又は第１の表示用画像と第３の表示用画像とを表示させる制御を行う表示制御部と、を備える。

これにより、第２の表示用画像と第３の表示用画像が表示部に交互表示されることにより、所望の被写体の画像が合焦点に有る否かの確認を容易に行うことができる。

また、本発明の他の態様に係る撮像装置は、撮影レンズにおける第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群を有する撮像素子から出力された画像信号に基づいて、第１及び第２の画素群から出力された第１及び第２の画像信号に基づく第１及び第２の画像から合焦確認に使用する第２の表示用画像及び合焦確認を補助する第３の表示用画像を生成する生成部と、第２の表示用画像及び第３の表示用画像を交互表示可能な表示部と、第２の表示用画像及び第３の表示用画像の表示部への交互表示を制御し、表示部に対して第２の表示用画像を又は第３の表示用画像を表示させる制御を行う表示制御部と、を備える。

これにより、表示部の広範囲に第２の表示用画像と第３の表示用画像が交互表示されることにより、所望の被写体の画像が合焦点に有る否かの確認を容易に行うことができる。

撮像装置において、好ましくは、撮像素子は、被写体像が瞳分割されずに結像される第３の画素群を有し、生成部は、第３の画素群から出力された第３の画像信号に基づいて第１の表示用画像を生成する。これにより、より画質のよい第１の表示用画像を得ることが可能となる。

撮像装置において、好ましくは、撮像素子は、撮像素子の少なくとも中央付近に第１、第２の画素群を有する。

撮像装置において、好ましくは、生成部は、第１、第２の表示範囲を有し、第１の表示範囲には第１の画像が使用され、第２の表示範囲には第２の画像が使用される第２の表示用画像と、第１、第２の表示範囲のうちの少なくとも一方に使用される画像が第２の表示用画像と異なる第３の表示用画像と、を生成する。

撮像装置において、好ましくは、表示制御部は、第１の表示用画像と第２の表示用画像との画像と、第１の表示用画像と第３の表示用画像との画像とを交互表示、又は第２の表示用画像と第３の表示用画像とを交互表示させる第１のモードによる制御と、第１の表示用画像と第２の表示用画像との画像、又は第２の表示用画像のみを交互表示の代わりに表示させる第２のモードによる制御と、を切り替える。

これにより、使用条件に応じて表示部の表示を切り替えることが可能であり、撮影時において、表示部の表示画像を快適に見ることが可能である。

撮像装置において、好ましくは、表示制御部は、第１の表示用画像と第２の表示用画像との画像と、第１の表示用画像と第３の表示用画像との画像とを交互表示、又は第２の表示用画像と第３の表示用画像とを第１の周波数により交互表示させる第１のモードによる制御と、第１の表示用画像と第２の表示用画像との画像と、第１の表示用画像と第３の表示用画像との画像とを交互表示、又は第２の表示用画像と第３の表示用画像とを第１の周波数よりも高い第２の周波数により交互に表示させる第２のモードによる制御と、を切り替える。これにより、使用条件に応じて表示部の表示を切り替えることが可能であり、撮影時において、表示部の表示画像を快適に見ることが可能である。

撮像装置において、好ましくは、表示制御部は、第１の表示用画像と第２の表示用画像との画像と、第１の表示用画像と第３の表示用画像との画像とを交互表示、又は第２の表示用画像と第３の表示用画像とを交互表示させる第１のモードによる制御と、第１の表示用画像のみを表示させる第２のモードによる制御と、を切り替える。これにより、使用条件に応じて表示部の表示を切り替えることが可能であり、撮影時において、表示部の表示画像を快適に見ることが可能である。

撮像装置において、好ましくは、撮影レンズは、マニュアルフォーカス機能を有し、表示制御部は、マニュアルフォーカス機能を使用中は、第１のモードにより制御を行い、マニュアルフォーカス機能を不使用中は、第２のモードにより制御を行う。これにより、使用条件に応じて表示部の表示を切り替えることが可能であり、撮影時において、表示部の表示画像を快適に見ることが可能である。

撮像装置において、好ましくは、撮影準備指令及び撮影指令を出力するシャッタ部を更に備え、表示制御部は、シャッタ部から撮影準備指令が出力されている間は、第１のモードに切り替える。これにより、使用条件に応じて表示部の表示を切り替えることが可能であり、撮影時において、表示部の表示画像を快適に見ることが可能である。

撮像装置において、好ましくは、撮影レンズはズーム機能を有し、表示制御部は、ズーム機能を使用中は、第１のモードにより制御を行い、ズーム機能を不使用中は、第２のモードにより制御を行う。これにより、使用条件に応じて表示部の表示を切り替えることが可能であり、撮影時において、表示部の表示画像を快適に見ることが可能である。

上記目的を達成するために、本発明の一の態様に係る画像表示方法は、撮影レンズにおける第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群を有する撮像素子から出力された画像信号に基づいて、第１の表示用画像を生成し且つ第１及び第２の画素群から出力された第１及び第２の画像信号に基づく第１及び第２の画像から合焦確認に使用する第２の表示用画像及び合焦確認を補助する第３の表示用画像を生成するステップと、第２の表示用画像及び第３の表示用画像を交互表示可能な表示部に、第２の表示用画像及び第３の表示用画像の表示部への交互表示を制御することにより、第１の表示用画像と第２の表示用画像とを、又は第１の表示用画像と第３の表示用画像とを表示させるステップ、とを備える。

これにより、第２の表示用画像と第３の表示用画像が表示部に交互表示されることにより、所望の被写体の画像が合焦点に有る否かの確認を容易に行うことができる。

上記目的を達成するために、本発明の他の態様に係る画像表示方法は、撮影レンズにおける第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群を有する撮像素子から出力された画像信号に基づいて、第１及び第２の画素群から出力された第１及び第２の画像信号に基づく第１及び第２の画像から合焦確認に使用する第２の表示用画像及び合焦確認を補助する第３の表示用画像を生成するステップと、第２の表示用画像及び第３の表示用画像を交互表示可能な表示部に、第２の表示用画像及び第３の表示用画像の表示部への交互表示を制御することにより、第２の表示用画像又は第３の表示用画像を表示させるステップ、とを備える。

これにより、表示部の広範囲に第２の表示用画像と第３の表示用画像が交互表示されることにより、所望の被写体の画像が合焦点に有る否かの確認を容易に行うことができる。

本発明によれば、第２の表示用画像及び第３の表示用画像を交互表示することにより、表示部に表示されている画像が合焦点に有るか否かの確認を容易に行うことができる。

図１は、本発明の一の態様に係る撮像装置を斜め前方から見た斜視図である。 図２は、図１に示した撮像装置の背面図である。 図３は、図１に示した撮像装置の実施形態を示すブロック図である。 図４Ａは、本発明の撮像装置に用いる撮像素子に設けられているカラーフィルタのカラーフィルタ配列及び遮光部材を示す図である。 図４Ｂは、本発明の撮像装置に用いる撮像素子に設けられているカラーフィルタのカラーフィルタ配列及び遮光部材を示す図（Ａ面）である。 図４Ｃは、本発明の撮像装置に用いる撮像素子に設けられているカラーフィルタのカラーフィルタ配列及び遮光部材を示す図（Ｂ面）である。 図５Ａは、位相差画素である第１の画素の構成例を示す図である。 図５Ｂは、位相差画素である第２の画素の構成例を示す図である。 図６は、第２の表示用画像の例を示す図である。 図７は、第２の表示用画像の他の例を示す図である。 図８Ａは、第２の表示用画像と第３の表示用画像の交互表示の例を示す図である。 図８Ｂは、第２の表示用画像と第３の表示用画像の交互表示の例を示す図である。 図９Ａは、第２の表示用画像と第３の表示用画像の交互表示の他の例を示す図である。 図９Ｂは、第２の表示用画像と第３の表示用画像の交互表示の他の例を示す図である。 図１０は、第１の表示用画像、及び第２の表示用画像の表示例を示す図である。 図１１は、本発明における撮像装置の要部の機能ブロック図である。 図１２は、本発明における第１の実施形態のフロー図である。 図１３は、本発明における第２の実施形態のフロー図である。 図１４は、本発明における第３の実施形態のフロー図である。 図１５は、本発明における第４の実施形態のフロー図である。 図１６は、本発明における第５の実施形態のフロー図である。 図１７は、本発明の撮像装置に用いる撮像素子に設けられている他のカラーフィルタのカラーフィルタ配列及び遮光部材を示す図である。 図１８は、本発明の他の態様に係る撮像装置であるスマートフォンの外観図である。 図１９は、スマートフォンの要部構成を示すブロック図である。

以下、添付図面にしたがって、本発明の例に関して説明を行う。尚、以下の説明において、位相差画素を第１の画素及び第２の画素とし、通常画素（位相差画素でない画素）を第３の画素とする。又、第１の画素からは第１の画像信号が出力され第１の画像が生成され、第２の画素からは第２の画像信号が出力され第２の画像が生成され、第３の画素からは第３の画像信号が出力される。第１の表示用画像（通常画像又は通常スルー画像）は、第１の画像及び／又は第２画像から生成される。第１の表示用画像（通常画像又は通常スルー画像）は、第３の画像信号からも生成される。又、第２の表示用画像は、第１の画像及び第２の画像から生成される。又、合焦確認を補助する第３の表示用画像は第１の画像及び／又は第２の画像から生成される。

［撮像装置の外観］
図１は本発明の一の態様に係るズームレンズを備えたカメラである撮像装置１００を斜め前方から見た斜視図であり、図２は撮像装置１００の背面図である。

撮像装置１００は、カメラ本体２００と、カメラ本体２００に装着されるズームレンズ３００（撮影レンズ（レンズ部）１６（符号図示せず）、フォーカスリング３０２（手動操作部））とから構成され、レフレックスミラーを持たないデジタルカメラである。

カメラ本体２００の前面には、光学ビューファインダのファインダ窓２４１、ファインダ切替えレバー（ファインダ切替え部）２１４等が設けられている。ファインダ切替えレバー２１４を矢印ＳＷ方向に回動させると、光学ビューファインダで視認可能な像が光学像と電子像（ライブビュー画像）との間で切り換わるようになっている（後述）。尚、光学ビューファインダの光軸Ｌ２は、ズームレンズ３００の光軸Ｌ１とは異なる光軸である。又、カメラ本体２００の上面には、主としてシャッターボタン２１１（レリーズボタン）及び撮影モード等の設定用のダイヤル２１２が設けられている。

カメラ本体２００の背面には、主として、光学ビューファインダのファインダ接眼部２４２、表示部２１３、十字キー２２２、ＭＥＮＵ／ＯＫキー２２４、ＢＡＣＫ／ＤＩＳＰボタン２２５が設けられている。尚、シャッターボタン２１１が半押し状態の場合は、撮影準備指令の信号が操作部１４からＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１２に伝えられる（図３参照）。又、シャッターボタン２１１が全押し状態の場合は、撮影指令の信号が操作部１４からＣＰＵ１２に伝えられる（図３参照）。

十字キー２２２は、メニューの選択、ズームやコマ送り等の各種の指令信号を出力するマルチファンクションのキーとして機能する。ＭＥＮＵ／ＯＫキー２２４は、表示部２１３の画面上にメニューを表示させる指令を行うためのメニューボタンとしての機能と、選択内容の確定及び実行などを指令するＯＫボタンとしての機能とを兼備した操作キーである。ＢＡＣＫ／ＤＩＳＰボタン２２５は、選択項目など所望の対象の消去や指示内容の取消し、あるいは１つ前の操作状態に戻らせるときなどに使用される。

表示部２１３は、撮影モード時のライブビュー画像（スルー画像）の表示や再生モード時の再生画像の表示に用いられる他、メニュー画面等の表示に用いられる。尚、以下の説明で表示部２１３と記載するが、本発明の撮像装置における表示部は、図２においてのファインダ（ファインダは、図２のファインダ接眼部２４２が取り付けられている箇所に存在する）や表示部２１３（液晶画面表示）も含めることを意味する。又、ファインダや表示部２１３での画像表示の切り替えは、ファインダ切替えレバー２１４にその切り替え機能を持たせてもよいし、ダイヤル２１２にその切り替え機能を持たせてもよい。

又、図１においては、ズームレンズを備える撮像装置１００を示したが、本発明の撮像装置１００は、ズームレンズを備える撮像装置１００に限定されるものではない。すなわち、単焦点のレンズを備える撮像装置１００も、本発明の撮像装置１００として使用することができる。又、本発明の撮像装置１００は、交換レンズ式の撮像装置１００であってもよい。

［撮像装置の内部構成］
図３は本発明に係る撮像装置１００の実施形態を示すブロック図である。

この撮像装置１００は、撮影した静止画や動画を記録するデジタルカメラであり、カメラ全体の動作は、中央処理装置（ＣＰＵ）１２によって統括制御されている。

撮像装置１００の操作部１４は、図１及び図２に示すようにシャッターボタン２１１、撮影モード等を選択するダイヤル（フォーカスモード切替え部）２１２、ファインダ切替えレバー２１４、十字キー２２２、ＭＥＮＵ／ＯＫキー２２４、ＢＡＣＫ／ＤＩＳＰボタン２２５を含む。この操作部１４からの各種の操作信号は、ＣＰＵ１２に加えられるようになっている。

撮影モードが設定されると、被写体を示す画像光は、手動操作により移動可能なフォーカスレンズを含む撮影レンズ１６及びシャッタ１８を介してカラーの撮像素子（ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサ）２０の受光面に結像される。撮像素子２０に蓄積された信号電荷は、デバイス制御部２２から加えられる読出し信号によって信号電荷（電圧）に応じたデジタル信号として順次読み出される。尚、撮像素子２０は、読出し信号のタイミングによって各フォトセンサの電荷蓄積時間（シャッタスピード）を制御する、いわゆる電子シャッタ機能を有している。

上記構成の撮像素子２０からは、第１の画素群から第１の画像信号が、第２の画素群から第２の画像信号がそれぞれ読み出され、ＡＤ変換部によってＡＤ変換されて、ＳＤＲＡＭ（Ｓｙｎｃｈｒｏｎｏｕｓ Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などのメモリ２６に一時記憶される。尚、本発明で使用する撮像素子２０は、第１の画素群、第２の画素群、及び第３の画素群を備えることも可能である。この第３の画素群を撮像素子２０が備えた場合は、撮像素子２０の第１の画素群から第１の画像信号、第２の画素群から第２の画像信号、及び第３の画素群から第３の画像信号が読み出され、ＳＤＲＡＭなどのメモリ２６に一時記憶される。

画像処理部２８は、図３に示すように、通常処理部３０とスプリットイメージ処理部３２を有する。通常処理部３０は、撮像素子２０が持つ第３の画素群に対応する第３の画像信号（Ｒ、Ｇ、Ｂ信号）を処理し、第１の表示用画像を生成する。一方、スプリットイメージ処理部３２は、第１の画素群及び第２の画素群に対応する第１の画素信号及び第２の画素信号（Ｒ、Ｇ、Ｂ信号）を処理し、第２の表示用画像、及び第３の表示用画像を生成する。

尚、撮像素子２０が第１の画素群、第２の画素群、及び第３の画素群を有する場合には、どの画像信号を使用して、第１の表示用画像を生成するか選択することができる。すなわち、第１の表示用画像を第１の画素群及び第２の画素群を基に生成してもよいし、第１の表示用画像を第３の画素群を基に生成してもよい。

通常処理部３０及びスプリットイメージ処理部３２は、それぞれＲ、Ｇ、Ｂ信号のゲインを調整してホワイトバランス（ＷＢ）補正を行うＷＢゲイン部（図示せず）、ＷＢ補正された各Ｒ、Ｇ、Ｂ信号をガンマ補正するガンマ補正部（図示せず）、撮像素子２０のカラーフィルタ配列に対応したデモザイク（色補間）処理を行い、デモザイク処理を施した（同時化した）Ｒ、Ｇ、Ｂ信号を生成するデモザイク（同時化）処理部（図示せず）等を有しており、メモリ２６に一次記憶された元のデジタル信号（ＲＡＷデータ）に対して各処理部で順次信号処理を行う。

ここで、デモザイク処理（デモザイキング処理）とは、単板式のカラー撮像素子のカラーフィルタ配列に対応したモザイク画像から画素毎に全ての色情報を算出する処理であり、同時化処理ともいう。例えば、ＲＧＢの３色のカラーフィルタからなる撮像素子の場合、ＲＧＢの３色からなるモザイク画像から画素毎にＲＧＢ全ての色情報を算出する処理である。

通常処理部３０により処理されたＲ、Ｇ、Ｂ信号は、エンコーダ３４により記録用の信号にエンコーディングされ、記録部４０（図１１参照）に記録される。

通常処理部３０により処理された表示用のカラー画像（第１の表示用画像）と、スプリットイメージ処理部３２により処理された表示用のカラー画像（第２、第３の表示用画像）は、それぞれ表示部グラフィックコントローラ３６（表示制御部）に加えられる。表示部グラフィックコントローラ３６は、入力する第１の表示用画像の表示領域内にカラーの第２、第３の表示用画像を合成し、合成した画像データを表示部２１３に出力する。

第１の表示用画像（通常のカラー画像）に第２、第３の表示用画像を合成する方法としては、第１の表示用画像の一部の画像に代えて、第２、第３の表示用画像を嵌め込む合成に限らず、第１の表示用画像の上に第２、第３の表示用画像を重畳させる合成でもよい。又、第２、第３の表示用画像を重畳する際に、第２、第３の表示用画像が重畳される第１の表示用画像の一部の画像と第２、第３の表示用画像との透過率を適宜調整して重畳させてもよい。

これにより、撮影している被写体像を示すライブビュー画像が表示部２１３の画面上に連続的に表示されるが、表示されるライブビュー画像は、第１の表示用画像の表示領域内に第２、第３の表示用画像が表示された画像となる（図１０参照）。

更に、第２、第３の表示用画像を表示部２１３の一面に表示することも可能である。この場合、第１の表示用画像は表示部２１３に表示されず、表示部２１３には第２、第３の表示用画像が表示されることになる。

又、撮像装置１００は、ダイヤル２１２（フォーカスモード切替え部）によりマニュアルフォーカスモードとオートフォーカスモードとを切り替えることができるようになっており、マニュアルフォーカスモードが選択されると、第２、第３の表示用画像が合成されたライブビュー画像を表示部２１３に表示させることが好ましい。

一方、ダイヤル２１２によりオートフォーカスモードが選択されると、ＣＰＵ１２は、位相差検出部及び自動焦点調整部として機能する。位相差検出部は、位相差画素である第１の画素群の第１の画像と及び第２の画素群の第２の画像との位相差を検出する。自動焦点調整部は、検出された位相差に基づいて撮影レンズ１６のデフォーカス量（第１、第２の画像間の位相ずれ）がゼロになるように、デバイス制御部２２からマウント２５６、３４６を介して図示しないレンズ駆動部を制御し、撮影レンズ１６を合焦位置に移動させる。

［撮像素子］
次に、図４Ａから図４Ｃに示された撮像素子２０の構成について説明する。

図４Ａから図４Ｃは、撮像素子２０に設けられているカラーフィルタのカラーフィルタ配列及び遮光部材に関して示している。図４ＡのＲＡ、ＧＡ、ＢＡは、図４Ｂに示されたＡ面のＲ（赤）、Ｇ（緑）、Ｂ（青）のカラーフィルタを示す。又、図４ＡのＲＢ、ＧＢ、ＢＢは、図４Ｃに示されたＢ面のＲ（赤）、Ｇ（緑）、Ｂ（青）のカラーフィルタを示す。又、２０Ａ及び２０Ｂで示される遮光部材をカラーフィルタに備える画素は、位相差画素である。

図４Ａに示すように撮像素子２０は、各画素上に配置されている赤（Ｒ）、緑（Ｇ）、青（Ｂ）のカラーフィルタとして、ベイヤ配列のＡ面の画素群とＢ面の画素群とが、水平方向及び垂直方向に互いに半ピッチずれて配置されている（図４Ｂ、図４Ｃ参照）。

本発明の撮像素子２０は、撮影レンズ１６における第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群（図５Ａ、図５Ｂ参照）を有する。第１及び第２の画素群が撮像素子２０内に存在することにより、第１の画素群から第１の画素信号を得て、第２の画素群から第２の画素信号を得ることができる。そして、第１の画素信号及び／又は第２の画素信号より第２の表示用画像を生成することがでる。又、第１の画素信号及び／又は第２の画素信号より第３の表示用画像を生成することができる。

更に、第１の画素信号及び第２画素信号により、第１の表示用画像を生成することもできる。

一方、撮像素子２０は、上記被写体が瞳分割されずに結像される第３の画素群を備えることも可能である。撮像素子２０が第３の画素群を備えた場合には、第１の表示用画像は、第１及び第２の画像信号から生成することもできるし、第３の画像信号からも生成することができる。第１の表示用画像を第３の画像信号から生成した場合は、第１の表示用画像は、より良い画質を有する。

又、Ａ面の画素群及びＢ面の画素群は、それぞれ通常画素群（第３の画素群）と、位相差検出用の位相差画素群（第１の画素群、第２の画素群）とから構成されている。

図５Ａ及び図５Ｂは撮像素子２０の第１の画素群と第２の画素群を構成する位相差画素の一例を示す図である。

図５Ａに示す第１の画素は、フォトダイオードＰＤの前面側（マイクロレンズＬ側）に、受光面の左半分を遮光する遮光部材２０Ａが配設される。一方、図５Ｂに示す第２の画素は、フォトダイオードＰＤの前面側に、受光面の右半分を遮光する遮光部材２０Ｂが配設されている。尚、説明の都合上、図５Ａを第１の画素、図５Ｂを第２画素として説明したが、図５Ａが第２の画素、図５Ｂが第１の画素であってもよい。

マイクロレンズＬ及び遮光部材２０Ａ、２０Ｂは瞳分割部として機能し、第１の画素は、撮影レンズ１６の射出瞳を通過する光束の光軸の左側のみを受光し、第２の画素は、撮影レンズ１６の射出瞳を通過する光束の光軸の右側のみを受光する。このように、瞳分割部であるマイクロレンズＬ及び遮光部材２０Ａ、２０Ｂにより、射出瞳を通過する光束が左右に分割され、それぞれ第１の画素及び第２の画素（位相差画素）に入射する。

又、撮影レンズ１６の射出瞳を通過する光束のうちの左半分の光束に対応する被写体像と、右半分の光束に対応する被写体像のうち、ピントが合っている部分は、撮像素子２０上の同じ位置に結像するが、前ピン又は後ピンの部分は、それぞれ撮像素子２０上の異なる位置に入射する（位相がずれる）。これにより、左半分の光束に対応する被写体像と、右半分の光束に対応する被写体像とは、視差が異なる視差画像（左目画像、右目画像）として取得することができる。尚、この実施形態の撮像素子２０は、ＣＭＯＳ型のイメージセンサであるが、これに限らず、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサでもよい。

尚、第１の画素群と第２の画素群は、撮像素子２０の中央付近に配置されることが好ましい。なぜならば、合焦をさせたい画像が画角の中央付近にあることが多いため、第１の画素群と第２の画素群が中央付近にあると合焦させやすくなるからである。尚、ここで中央付近とは、撮像素子２０の中心点を含むある一定の領域のことをいう。

図６は、第１の画像及び第２の画像により生成された第２の表示用画像６０の例を示す。第２の表示用画像６０には、第１の表示範囲６０Ａと第２の表示範囲６０Ｂが含まれる。そして、第１の表示範囲６０Ａには第１の画像が表示され、第２の表示範囲６０Ｂには第２の画像が表示される。すなわち、第２の表示用画像６０は、いわゆるスプリットイメージとなる。

第１及び第２の画素群は、第２の表示用画像６０のサイズに対応して設けられている。スプリットイメージは、第１の画素群に基づいて生成される第２の表示用画像６０の第１の表示範囲６０Ａの画像（視差画像）と、第２の画素群に基づいて生成される第２の表示用画像６０の第２の表示範囲６０Ｂの画像（視差画像）とにより構成されている。

図６に示した第２の表示用画像６０内には、焦点距離の異なる被写体（ａ）、（ｂ）、及び（ｃ）が存在している。そして、図６で示される例では、被写体（ａ）に焦点が合っている状態であり、被写体（ｂ）及び（ｃ）には焦点が合っていない状態である。すなわち、被写体（ａ）は、第１の表示範囲６０Ａと第２の表示範囲６０Ｂとの境界で、視差方向（水平方向）に画像のズレが生じていない。一方、被写体（ｂ）及び被写体（ｃ）は、第１の表示範囲６０Ａと第２の表示範囲６０Ｂとの境界で、視差方向（水平方向）に画像のズレが生じている。したがって、図６に示された第２の表示用画像６０では、被写体（ａ）に焦点が合っている。

図７は、図６と同様に、第１の画像及び第２の画像により生成された第２の表示用画像６０の例を示す。又、第２の表示用画像６０内には、焦点距離の異なる被写体（ａ）、（ｂ）、及び（ｃ）が存在している。

図７の場合には、被写体（ｂ）に焦点が合っている状態である。すなわち、被写体（ａ）及び被写体（ｃ）は、第１の表示範囲６０Ａと第２の表示範囲６０Ｂとの境界で、視差方向（水平方向）に画像のズレが生じている。一方、被写体（ｂ）は、第１の表示範囲６０Ａと第２の表示範囲６０Ｂとの境界で、視差方向（水平方向）に画像のズレが生じていない。したがって、図７に示された第２の表示用画像６０では、被写体（ｂ）に焦点が合っている。

尚、第３の表示用画像は、図６及び図７で示した第２の表示用画像６０と同様に、第１の表示範囲と第２の表示範囲を有する。又、第３の表示用画像における第１の表示範囲及び第２の表示範囲のうちの少なくとも一方に使用される画像が、第２の表示用画像６０と異なる（図８Ａ及び図９Ａにおける符号６１を参照）。

例えば、第２の表示用画像６０において、第１の表示範囲６０Ａで第１の画像が表示され、第２の表示範囲６０Ｂで第２の画像が表示されるので、第３の表示用画像では、第１の表示範囲及び第２の表示範囲に第１の画像を使用する場合、第１の表示範囲及び第２の表示範囲に第２の画像を使用する場合、及び第１の表示範囲に第２の画像、第２の表示範囲に第１の画像を使用する場合が考えられる。

図８Ａ、図８Ｂ、図９Ａ及び図９Ｂは、第２の表示用画像６０と第３の表示用画像との交互表示の例を示す。図８Ａは、第３の表示用画像６１であり、第３の表示用画像６１における第１の表示範囲及び第２の表示範囲には第２の画像が使用されている。一方、図８Ｂには、図６で示された第２の表示用画像６０が示されている。

又、図９Ａは、第３の表示用画像６１であり、第３の表示用画像６１における第１の表示範囲及び第２の表示範囲には第２の画像が使用されている。一方、図９Ｂは、図７で示された第２の表示用画像６０が示されている。

交互表示とは、図８Ａ、図８Ｂ、図９Ａ及び図９Ｂに示すように、図８Ａに示される第３の表示用画像６１と図８Ｂに示される第２の表示用画像６０とを、又は、図９Ａに示される第３の表示用画像６１と図９Ｂに示される第２の表示用画像６０とを所定の周波数で交互に表示することをいう。

このように、第２の表示用画像６０と第３の表示用画像６１とを交互表示することにより、現在表示されている画像の何処に合焦するか（ピントが合っているか）を簡単に確認することが可能となる。すなわち、図８Ａに示された画像（第３の表示用画像６１）及び図８Ｂに示された画像（第２の表示用画像６０）を交互表示することにより、ピントが合っている被写体の画像（図８Ａ及び図８Ｂでは、被写体（ａ））は、交互表示を行っても画像が変わらない（動かない）。一方、ピントが合ってない被写体の画像（図８Ａ及び図８Ｂでは被写体（ｂ）及び（ｃ））は、交互表示を行うことにより画像が変化する（動く）。よって、第２の表示用画像６０と第３の表示用画像６１とを交互表示することにより、現在表示されている画像の何処に合焦点があるか（ピントが合っているか）を簡単に確認することが可能となる。

図１０は、表示部２１３又はファインダ（ファインダは図２のファインダ接眼部２４２と同じ箇所に設置される）に表示される画像の例を示している。図１０に示されている例では、表示部２１３又はファインダに第１の表示用画像を表示し且つ第２の表示用画像６０（第２の表示用画像６０は第１の画像と第２の画像とから構成されている）が表示されている。図１０に示された例では、第３の表示用画像６１は示されていないが、第２の表示用画像６０と第３の表示用画像６１とを交互表示する場合は、第２の表示用画像６０又は第３の表示用画像６１が表示される。言い換えると、表示部２１３又はファインダに対して、第１の表示用画像と第２の表示用画像６０とを、又は第１の表示用画像と第３の表示用画像６１とを表示させることが可能となる。

表示部２１３に、第１の表示用画像、第２の表示用画像、及び第３の表示用画像の表示のさせ方は、種々の形態を採ることができる。例えば、表示のさせ方には、第１のモードと第２のモードとがあり、第１のモードと第２のモードを切り替えることを可能としてもよい。

そして、第１のモードでは、第１の表示用画像と第２の表示用画像６０とを若しくは第１の表示用画像と第３の表示用画像６１とを、又は第２の表示用画像６０と第３の表示用画像６１とを交互表示させてもよい。

又、第１のモードとして、第１の表示用画像と第２の表示用画像６０とを若しくは第１の表示用画像と第３の表示用画像６１とを、又は第２の表示用画像６０と第３の表示用画像６１とを第１の周波数で交互表示を行い、第２のモードとして、第１の表示用画像と第２の表示用画像６０とを若しくは第１の表示用画像と第３の表示用画像６１とを、又は第２の表示用画像６０と第３の表示用画像６１とを第２の周波数（第２の周波数は第１の周波数よりも高い）で交互表示を行ってもよい。尚、第１の周波数及び第２の周波数は、ピントが合っているか否かを判断する観点より、０．５Ｈｚから２０Ｈｚ、好ましくは１Ｈｚから１８Ｈｚ、更に好ましくは２Ｈｚから１６Ｈｚの範囲である。

更に又、第１のモードとして、第１の表示用画像と第２の表示用画像６０とを若しくは第１の表示用画像と第３の表示用画像６１とを、又は第２の表示用画像６０と第３の表示用画像６１とを交互表示し、第２のモードとして、第１の表示用画像を表示部一面に表示してもよい。

図１１は、撮像装置１００の要部の機能ブロック図である。尚、図３に示したブロック図と共通する部分には同一の符号が付されている。

図１１において、通常処理部３０には、インターフェース（Ｉ／Ｆ）ブロック（部）２４から出力されるＲ、Ｇ、ＢのＲＡＷデータ（ＲＡＷ画像）が入力され、第１、第２の画素群の位置のＲ、Ｇ、Ｂの画素を、第３の画素群のうちの同色の周辺画素により補間して生成する。これにより、第３の画素群のみを有する撮像素子２０と同様に、１画面分の第３の画素群のＲＡＷ画像を得ることができ、第３の画素群のＲＡＷ画像に基づいて記録用の第１の表示用画像を生成することができる。

通常処理部３０は、生成した記録用の第１の表示用画像の画像データをエンコーダ３４及び表示部グラフィックコントローラ３６に出力する。

一方、スプリットイメージ処理部（スプリット画像処理ブロック）３２は、メモリ２６に一旦記憶されたＲＡＷデータから第１の画素群及び第２の画素群のＲ、Ｇ、Ｂ信号を抽出し、第１の画素群及び第２の画素群のＲ、Ｇ、Ｂ信号に基づいて第２の表示用画像６０及び第３の表示用画像６１を生成する。

スプリットイメージ処理部３２は、第１の画素群及び第２の画素群のＲ、Ｇ、Ｂ信号に基づいて、通常処理部３０と同様のデモザイク（同時化）処理等を含む画像処理を行うことで、左右の視差画像（第１の画像及び第２の画像）を生成することができる。そして、スプリットイメージ処理部３２は、図６、図７に示した第２の表示用画像６０の第１の表示範囲６０Ａの画像と、図６、図７に示した第２の表示用画像６０の第２の表示範囲６０Ｂの画像とを合成することによりスプリットイメージを生成し、生成したスプリットイメージの画像データを表示部グラフィックコントローラ３６に出力する。

又、スプリットイメージ処理部３２は、第３の表示用画像６１も生成し、表示部グラフィックコントローラ３６に出力する。表示部グラフィックコントローラ３６では、上記した第１の画像及び第２の画像により、第３の表示用画像６１の第１の表示範囲及び第２の表示範囲のうち少なくとも一方に使用される画像が上記第２の表示用画像６０と異なる、第３の表示用画像６１を生成する。

尚、第１の画素群及び第２の画素群は、受光面の左半分又は右半分が遮光されているため、第１の画素群及び第２の画素群のＲ、Ｇ、Ｂ信号は、第３の画素群のＲ、Ｇ、Ｂ信号よりも小さい値になる。したがって、スプリットイメージ処理部３２は、スプリットイメージの明るさが、第３の画素群から生成される画像と同じ明るさになるように明るさの補正を行うことが好ましい。

又、上記通常処理部３０とスプリットイメージ処理部３２は、撮像素子２０により１画面分のＲＡＷデータが取得される毎に、そのＲＡＷデータに対して並列に画像処理を行う。

表示部グラフィックコントローラ３６は、通常処理部３０から加えられる第３の画素群に対応する記録用の画像データと、スプリットイメージ処理部３２から加えられる第１、第２の画素群に対応するスプリットイメージの画像データとに基づいて表示用の画像データを生成する。

すなわち、表示部グラフィックコントローラ３６は、表示部２１３の画面サイズ（縦横の画素数）に応じて、第１の表示用画像、第２の表示用画像６０、及び第３の表示用画像６１をリサイズし、記録用の画像のリサイズ後の画像（表示用の画像）の一部に、スプリットイメージを合成することにより、表示用の画像データを生成する。

スプリットイメージが合成された画像データは、表示部２１３に出力される。これにより、表示部２１３には、第１の表示用画像と第２の表示用画像及び／又は第３の表示用画像が合成された、被写体像を示すライブビュー画像が表示される。

又、ダイヤル２１２により撮影モードとして動画モードが選択されている場合には、通常処理部３０により生成された記録用の画像データ（動画データ）がエンコーダ３４を介して記録部４０に記録され、撮影モードとして静止画モードが選択されている場合には、シャッタレリーズ時に通常処理部３０により生成された記録用の画像データ（静止画データ）がエンコーダ３４を介して記録部４０に記録される。

［ハイブリッドファインダ］
図１１において、カメラ本体２００に設けられているハイブリッドファインダ２２０は、光学ビューファインダ（ＯＶＦ）２４０又は電子ビューファインダ（ＥＶＦ）２４８として使用されるものである。ＯＶＦ２４０は、対物レンズ２４４と接眼レンズ２４６とを含む逆ガリレオ式ファインダである。ＥＶＦ２４８は、液晶表示部（ＬＣＤ）２４７、プリズム（合成部）２４５、及び接眼レンズ２４６を含んでいる。

又、対物レンズ２４４の前方には、液晶シャッタ２４３が配設されている。液晶シャッタ２４３は、ハイブリッドファインダ２２０をＥＶＦとして使用する際に、対物レンズ２４４に光学像が入射しないように遮光する。

プリズム２４５は、ＬＣＤ２４７に表示される電子像、又は各種の情報を反射させて接眼レンズ２４６に導くと共に、光学像とＬＣＤ２４７に表示される情報（電子像、各種の情報）とを合成する。

ここで、ファインダ切替えレバー２１４を矢印ＳＷ方向に回動させると、回動させる毎にＯＶＦにより光学像を視認することができるＯＶＦモードと、ＥＶＦにより電子像を視認することができるＥＶＦモードとが交互に切り替えられる。

表示部グラフィックコントローラ３６は、ＯＶＦモードの場合、液晶シャッタ２４３が非遮光状態になるように制御し、接眼部から光学像が視認できるようにする。又、ＬＣＤ２４７には、スプリットイメージのみを表示させる。これにより、光学像の一部にスプリットイメージが重畳されたファインダ像を表示させることができる。

一方、表示部グラフィックコントローラ３６は、ＥＶＦモードの場合、液晶シャッタ２４３が遮光状態になるように制御し、接眼部からＬＣＤ２４７に表示される電子像のみが視認できるようにする。尚、ＬＣＤ２４７には、表示部２１３に出力されるスプリットイメージが合成された画像データと同等の画像データが加えられる。これにより、表示部２１３と同様に通常画像の一部にスプリットイメージが合成された電子像を表示させることができる。

［第１の実施形態］
図１２は、第１の実施形態を説明したフロー図である。以下に、フロー図について説明を行う。

先ず、ＣＰＵ１２により、撮像装置１００がマニュアルフォーカスモードであるか否かを判断（ステップＳ１０）する。操作部１４におけるダイヤル２１２でマニュアルフォーカスモードの設定になっている場合は、ＣＰＵ１２はマニュアルフォーカスモードであると判断することができる。マニュアルフォーカスモードで無い場合（ステップＳ１０においてＮｏの場合）は、戻って新たにマニュアルフォーカスモードであるか判断を行う。

一方、マニュアルフォーカスモードである場合（ステップＳ１０のＹｅｓの場合）、第２の表示用画像６０と第３の表示用画像６１とを、周波数５Ｈｚにより交互表示（ステップＳ２０）させる。

その後、ＣＰＵ１２により、マニュアルフォーカス操作中であるか否かの判断を行う（ステップＳ３０）。ここでマニュアルフォーカス操作中の判断は、種々の基準を設けることが可能である。例えば、フォーカスリング３０２が動いている時をマニュアルフォーカス操作中であると判断してもよいし、フォーカスレンズが動いている時をマニュアルフォーカス操作中であると判断してもよいし、使用者の手がフォーカスリング３０２に触れている時をマニュアルフォーカス操作中と判断してもよい。尚、この場合フォーカスリング３０２は操作部１４に含まれ、操作部１４からの信号がＣＰＵ１２に伝えられ、ＣＰＵ１２によりマニュアルフォーカス操作中であるか否かの判断が行われる。

そして、マニュアルフォーカス操作中であるか否かの判断を行う（ステップＳ３０）。マニュアルフォーカス操作中でないと判断された場合（ステップＳ３０において、Ｎｏの場合）は、ステップＳ２０に戻って第２の表示用画像６０と第３の表示用画像６１とを、周波数５Ｈｚで、表示部グラフィックコントローラ３６により交互表示させる。一方、マニュアルフォーカス操作中と判断された場合（ステップＳ３０のＹｅｓの場合）は、表示部グラフィックコントローラ３６により第２の表示用画像６０（スプリットイメージ）を表示させる（ステップＳ４０）。

その後、シャッターボタン２１１が半押し状態であるか否かをＣＰＵ１２により判断する（ステップＳ５０）。シャッターボタン２１１は、操作部１４に含まれ、シャッターボタン２１１が半押し状態であるか否かの判断をＣＰＵ１２が行う。

シャッターボタン２１１が半押し状態でない場合（ステップＳ５０においてＮｏの場合）には、ステップＳ３０に戻ってマニュアルフォーカス操作中であるか否かを判断（ステップＳ３０）する。

一方、シャッターボタン２１１が半押し状態の場合（ステップＳ５０においてＹｅｓの場合）は、表示部２１３には、第１の表示用画像のみ、表示部グラフィックコントローラ３６により表示させる（ステップＳ６０）。

その後、シャッターボタン２１１が全押しであるか否かを判断する（ステップＳ７０）。シャッターボタン２１１は、操作部１４に含まれ、シャッターボタン２１１が全押し状態であるか否かの判断をＣＰＵ１２が行う。

シャッターボタン２１１が全押しでないと判断された場合（ステップＳ７０においてＮｏの場合）は、ステップＳ３０に戻ってマニュアルフォーカス操作中であるかの判断（ステップＳ３０）を行う。

シャッターボタン２１１が全押しであるか否かを判断し（ステップＳ７０）、シャッターボタン２１１が全押しと判断された場合（ステップＳ７０においてＹｅｓの場合）、撮影を行う（ステップＳ８０）。

その後、撮影終了か否かを判断し（ステップＳ９０）、撮影終了でない場合（ステップＳ９０においてＮｏの場合）は、ステップＳ１０に戻ってマニュアルフォーカスモードあるか否かを判断する（ステップＳ１０）。撮影終了の場合（ステップＳ９０においてＹｅｓの場合）は、エンドとなる。尚、撮影終了か否かの判断は、ＣＰＵ１２で行われるが、様々の基準で判断を行うことができる。例えば、カメラ本体２００の電源がＯＦＦになった場合に撮影終了とする。

このような、図１２に示す第１の実施形態を採用することにより、マニュアルフォーカスモードにおいて、第２の表示用画像６０と第３の表示用画像６１との交互表示を行うので、ピントが何処に合っているか確認を行い易い。又、マニュアルフォーカス操作中は、第２の表示用画像６０を表示することにより、ピントを合わせ易い。又更に、シャッターボタン２１１半押し状態で第１の表示用画像を表示させることにより、撮影しようとする画像を正確に把握することが可能である。

［第２の実施形態］
図１３は、第２の実施形態を説明したフロー図である。以下に、フロー図について説明を行う。尚、図１２と同様のステップには同じ符号を付し、その説明は省略する。

図１２に示された第１の実施形態のフロー図と、図１３に示された第２の実施形態のフロ−図では、図１３に示された第２の実施形態のフロー図は、マニュアルフォーカス操作が行われたと判断された場合（ステップＳ３０において、Ｙｅｓと判断された場合）は、第２の表示用画像６０と第３の表示用画像６１とを、周波数２Ｈｚで、表示部グラフィックコントローラ３６により交互表示させる（ステップＳ４５）点で異なる。

すなわち、図１３に示された第２の実施形態では、マニュアルフォーカスモードである場合に、第２の表示用画像６０と第３の表示用画像６１とを５Ｈｚで交互表示させ（ステップＳ２０）、更にマニュアルフォーカス操作中にも第２の表示用画像６０と第３の表示用画像６１とを２Ｈｚで交互表示させる。

このような、図１３に示す第２の実施形態を採用することにより、マニュアルフォーカス操作中であっても、第２の表示用画像６０と第３の表示用画像６１とを２Ｈｚで交互表示させる。したがって、ピントが合っているか否かを容易に判断しながら、フォーカス操作を行うことができる。

［第３の実施形態］
図１４は、第３の実施形態を説明したフロー図である。以下に、フロー図について説明を行う。尚、図１２と同様のステップには同じ符号を付し、その説明は省略する。

先ず、第３の実施形態では、マニュアルフォーカスモードであるか否かの判断を行う（ステップＳ１０）。マニュアルフォーカスモードでない場合（ステップＳ１０においてＮｏの場合）は、始めに戻る。一方、マニュアルフォーカスモードである場合（ステップＳ１０においてＹｅｓの場合）は、第２の表示用画像を表示させる（ステップＳ４０）。

その後、シャッターボタン２１１が半押し状態であるか否かの判断を行う（ステップＳ５０）。シャッターボタン２１１が半押しされていない場合（ステップＳ５０においてＮｏの場合）は、ステップＳ４０に戻って第２の表示用画像６０を表示させる（ステップＳ４０）。一方、シャッターボタン２１１が半押し状態である場合（ステップＳ５０においてＹｅｓの場合）は、周波数５Ｈｚにより、第２の表示用画像６０と第３の表示用画像６１とを交互表示させる（ステップＳ６５）。

その後、シャッターボタン２１１が全押し状態であるか否かの判断を行う（ステップＳ７０）。シャッターボタン２１１が全押し状態である場合（ステップＳ７０においてＮｏの場合）は、ステップＳ５０に戻ってシャッターボタン２１１が半押し状態であるか否かの判断を行う（ステップＳ５０）。一方、シャッターボタン２１１が全押し状態の場合（ステップＳ７０においてＹｅｓの場合）は、撮影を行う（ステップＳ８０）。

その後、撮影終了の判断を行い（ステップＳ９０）、撮影終了でない場合（ステップＳ９０においてＮｏの場合）は、ステップＳ１０に戻ってマニュアルフォーカスモードであるか否かの判断を行う（ステップＳ１０）。一方、撮影終了と判断した場合（ステップＳ９０においてＹｅｓの場合）は、エンドとなる。

マニュアルフォーカスモードとして判断された場合（ステップＳ１０）は、表示部グラフィックコントローラ３６により、表示部２１３に、第２の表示用画像６０を表示させる（ステップＳ４０）。その後、シャッターボタン２１１が半押し状態であるか否かの判断（ステップＳ５０）を、ＣＰＵ１２により行う。

第３の実施形態のように、シャッターボタン２１１が半押し状態の場合（ステップＳ５０でＹｅｓの場合）に、第２の表示用画像６０と第３の表示用画像６１との交互表示（５Ｈｚ）を行うことにより、撮影される画像に関してピントが合っているか否かの判断を容易に行うことができる。

［第４の実施形態］
図１５は、第４の実施形態を説明したフロー図である。以下に、フロー図について説明を行う。尚、図１２と同様のステップには同じ符号を付し、その説明は省略する。

図１５に示された第４の実施形態と図１４に示された第３の実施形態とを比較すると、図１５に示された第４の実施形態では、図１４に示された第３の実施形態での第２の表示用画像を表示させる（ステップＳ４０）代わりに、第２の表示用画像６０と第３の表示用画像とを、周波数５Ｈｚにより交互表示させている（ステップＳ２０）。また、図１５に示された第４の実施形態では、図１４に示された第３の実施形態でのシャッターボタン２１１が半押し状態であるか否かの判断（ステップＳ５０）の代わりに、ズーム機能使用中であるか否かの判断（ステップＳ３５）を行っている。また、図１５に示された第４の実施形態では、図１４に示された第３の実施形態での第２の表示用画像６０と第３の表示用画像６１とを交互表示させる（ステップＳ６５）の代わりに、シャッターボタン２１１が全押し状態であるか否かの判断（ステップＳ７０）を行っている。

尚、ズーム機能使用中であるか否かの判断（ステップＳ３５）を、ＣＰＵ１２により行う。ズーム機能使用中の基準は様々なものを採用することができる。例えば、ズームリングが動いている、ズームレンズが動いている、表示用画像がズームされている等の場合に、ズーム機能使用中と、操作部１４を介してＣＰＵ１２により判断することが可能である。

第４の実施形態のように、ズーム機能を使用中の場合（ステップＳ３５のＹｅｓの場合）には、第１の表示用画像を表示させる（ステップＳ７０）ことにより、ズームを行っている画像を正確に把握することが可能である。

［第５の実施形態］
図１６は、第５の実施形態を説明したフロー図である。第５の実施形態では、一定期間なんの操作も行われない場合は、表示を元に戻す例である。すなわち、マニュアルフォーカスモードが開始されてからマニュアルフォーカス操作、ズーム操作、及びシャッターボタン２１１の半押しが行われるまでは、第２の表示用画像６０と第３の表示用画像６１の交互表示が周波数５Ｈｚで行われる。そして、マニュアルフォーカス操作、ズーム操作、又はシャッターボタン２１１の半押しが行われると、第２の表示用画像６０と第３の表示用画像６１の交互表示が周波数２Ｈｚで行われる。更にその後、一定時間、マニュアルフォーカス操作、ズーム操作、又はシャッターボタン２１１の半押しが行われないと、再び第２の表示用画像６０と第３の表示用画像６１の交互表示が周波数５Ｈｚで行われる。以下に、図１６のフロー図を説明する。尚、図１２と同様のステップには同じ符号を付す。

先ず、マニュアルフォーカスモードであるか否かを判断する（ステップＳ１０）。そして、マニュアルフォーカスモードでない場合（ステップＳ１０においてＮｏの場合）は始めに戻る。一方、マニュアルフォーカスモードであった場合（ステップＳ１０においてＹｅｓ）は、ＣＰＵ１２により表示部グラフィックコントローラ３６にフラッグＦ＝１をセットし且つ表示部グラフィックコントローラ３６のタイマＴのカウントをスタートさせる（ステップＳ１２）。

その後、ＣＰＵ１２により、表示部グラフィックコントローラ３６にフラッグＦ＝１がセットされているか否かの判断する（ステップＳ１４）。フラッグＦ＝１であった場合（ステップＳ１４においてＹｅｓの場合）は、第２の表示用画像６０と第３の表示用画像６１との交互表示を周波数５Ｈｚにより行う（ステップＳ２０）。一方、フラッグＦ＝１でない場合（ステップＳ１４においてＮｏの場合）は、第２の表示用画像６０と第３の表示用画像６１との交互表示を周波数２Ｈｚにより行う（ステップＳ４５）。

その後、マニュアルフォーカス操作中であるか否かの判断を行う（ステップＳ３０）。マニュアルフォーカス操作中の場合（ステップＳ３０においてＹｅｓの場合）は、ＣＰＵ１２により表示部グラフィックコントローラ３６のフラッグＦ＝０とし且つタイマＴをリセットする（ステップＳ３７）。一方、マニュアルフォーカス操作中でない場合（ステップＳ３０においてＮｏの場合）は、ズーム機能使用中であるか否かの判断を行う（ステップＳ３５）。ズーム機能使用中である場合（ステップＳ３５においてＹｅｓの場合）は、フラッグＦ＝０とし且つタイマＴをリセットする（ステップＳ３７）。一方、ズーム機能不使用中である場合（ステップＳ３５のＮｏの場合）は、ＣＰＵ１２により、タイマＴが３秒以上経過しているか否かの判断を行う（ステップＳ４２）。尚、タイマＴの設定秒数は適宜決めることができ、例えば１秒、５秒、７秒等に設定することが可能である。タイマＴが３秒以上経過していない場合（ステップＳ４２のＮｏの場合）は、そのままシャッターボタン２１１が半押し状態であるか否かの判断（ステップＳ５０）に進む。

タイマＴが３秒以上経過している場合（ステップＳ４２のＹｅｓの場合）は、ＣＰＵ１２によりフラッグＦ＝０であるか否かの判断（ステップＳ４４）を行う。フラッグＦ＝０でない場合（ステップＳ４４においてＮｏの場合）は、そのままシャッターボタン２１１半押しか否かの判断（ステップＳ５０）に進む。一方、フラッグＦ＝０である場合（ステップＳ４４においてＹｅｓの場合）は、ＣＰＵ１２により、表示部グラフィックコントローラ３６にフラッグＦ＝１と設定する（ステップＳ４７）。

シャッターボタン２１１が半押しされているか否かの判断（ステップＳ５０）において、シャッターボタン２１１が半押しされていない場合（ステップＳ５０においてＮｏの場合）は、ステップＳ１４に戻ってフラッグＦ＝１の判断（ステップＳ１４）を行う。一方、シャッターボタン２１１が半押し状態である場合（ステップＳ５０においてＹｅｓの場合）は、フラッグＦ＝０に設定し且つタイマＴを０にリセットする（ステップＳ５２）。

その後、シャッターボタン２１１が全押し状態であるか否かの判断を行う（ステップＳ７０）。シャッターボタン２１１が全押し状態でない場合（ステップＳ７０においてＮｏの場合）は、ステップＳ１４に戻ってフラッグＦ＝１の判断（ステップＳ１４）を行う。一方、シャッターボタン２１１が全押し状態の場合（ステップＳ７０においてＹｅｓの場合）は、撮影（ステップＳ８０）に進む。

その後、撮影終了の判断（ステップＳ９０）が行われ、撮影を終了しない場合（Ｓ９０においてＮｏの場合）は、戻ってマニュアルフォーカスモードであるか否かの判断（ステップＳ１０）を行い、撮影を終了する場合（ステップＳ９０においてＹｅｓの場合）は、エンドとなる。

このように、図１６に示された第５の実施形態をとることにより、一定時間、操作が行われなかった場合に、再び初期の表示状態に戻すことが可能となる。これにより、撮像装置１００の使用状態に適した画像表示を行うことが可能となり、ピントが合っているかの確認が容易になる。

［撮像素子の他の実施形態］
図１７は、本発明に適用される撮像素子２０の他の実施形態を示す図であり、特に撮像素子２０に設けられているカラーフィルタのカラーフィルタ配列及び遮光部材に関して示している。

図１７に示された撮像素子２０のカラーフィルタ配列は、６×６画素に対応する正方配列パターンからなる基本配列パターンＰ（太枠で示したパターン）を含み、この基本配列パターンＰが水平方向及び垂直方向に繰り返し配置されている。即ち、このカラーフィルタ配列は、Ｒ、Ｇ、Ｂの各色のフィルタが所定の周期性をもって配列されている。尚、図１７中の、Ｒは赤色のカラーフィルタ、Ｇは緑色のカラーフィルタ、Ｂは青色のカラーフィルタを示す。更に、２０Ａ及び２０Ｂは遮光部材であり、遮光部材２０Ａを有するものを第１の画素群とし、遮光部材２０Ｂを有するものを第２の画素群とし、遮光部材を有さないものを第３の画素群とする。

図１７に示した撮像素子２０に含まれる左右の位相画素群（第１の画素群、第２の画素群）のみを取り出すと左右の位相画素群のカラーフィルタ配列は、それぞれベイヤ配列になっている。即ち、左右の位相差画素群のカラーフィルタ配列がそれぞれベイヤ配列になるように、撮像素子２０の全画素群のうちの一部の画素が位相画素として配置されている。

図１７に示す撮像素子２０のカラーフィルタ配列は、６×６画素の基本配列パターンＰを有し、２×２画素の基本配列パターンを有するベイヤ配列よりも複雑になっている。このため、デモザイク（同時化）処理等の信号処理が複雑になるが、上記のように左右の位相画素群のカラーフィルタ配列がそれぞれベイヤ配列になるように位相差画素を配置することにより、スプリットイメージを生成するためのデモザイク（同時化）処理等の信号処理を容易に行うことができるようにしている。

＜スマートフォンの構成＞
図１８は、撮像装置１００の他の実施形態であるスマートフォン５００の外観を示すものである。図１８に示すスマートフォン５００は、平板状の筐体５０２を有し、筐体５０２の一方の面に表示部２１３としての表示パネル５２１と、入力部としての操作パネル５２２とが一体となった表示入力部５２０を備えている。又、筐体５０２は、スピーカ５３１と、マイクロホン５３２、操作部５４０と、カメラ部５４１とを備えている。尚、筐体５０２の構成はこれに限定されない。例えば、表示部２１３と入力部とが独立した構成を採用したり、筐体５０２が、折り畳み構造やスライド機構を有する構成を採用することもできる。

図１９は、図１８に示すスマートフォン５００の構成を示すブロック図である。図１９に示すように、スマートフォンの主たる構成要素として、無線通信部５１０と、表示入力部５２０と、通話部５３０と、操作部５４０と、カメラ部５４１と、記憶部５５０と、外部入出力部５６０と、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）受信部５７０と、モーションセンサ部５８０と、電源部５９０と、主制御部５０１とを備える。又、スマートフォン５００の主たる機能として、基地局装置ＢＳと移動通信網ＮＷとを介した移動無線通信を行う無線通信機能を備える。

無線通信部５１０は、主制御部５０１の指示にしたがって、移動通信網ＮＷに収容された基地局装置ＢＳに対し無線通信を行うものである。この無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータなどの送受信や、Ｗｅｂデータやストリーミングデータなどの受信を行う。

表示入力部５２０は、主制御部５０１の制御により、画像（静止画像及び動画像）や文字情報などを表示して視覚的にユーザに情報を伝達すると共に、表示した情報に対するユーザ操作を検出する、いわゆるタッチパネルであって、表示パネル５２１と、操作パネル５２２とを備える。生成された３Ｄ画像を鑑賞する場合には、表示パネル５２１は、３Ｄ表示パネルであることが好ましい。

表示パネル５２１は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、ＯＥＬＤ（Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）などを表示デバイスとして用いたものである。操作パネル５２２は、表示パネル５２１の表示面上に表示される画像を視認可能に載置され、ユーザの指や尖筆によって操作される一又は複数の座標を検出するデバイスである。このデバイスをユーザの指や尖筆によって操作すると、操作に起因して発生する検出信号を主制御部５０１に出力する。次いで、主制御部５０１は、受信した検出信号に基づいて、表示パネル５２１上の操作位置（座標）を検出する。

図１８に示すように、スマートフォン５００の表示パネル５２１と操作パネル５２２とは一体となって表示入力部５２０を構成しているが、操作パネル５２２が表示パネル５２１を完全に覆うような配置となっている。この配置を採用した場合、操作パネル５２２は、表示パネル５２１の外の領域についても、ユーザ操作を検出する機能を備えてもよい。換言すると、操作パネル５２２は、表示パネル５２１に重なる重畳部分についての検出領域（以下、表示領域と称する）と、それ以外の表示パネル５２１に重ならない外縁部分についての検出領域（以下、非表示領域と称する）とを備えていてもよい。

尚、表示領域の大きさと表示パネル５２１の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。又、操作パネル５２２が、外縁部分と、それ以外の内側部分の２つの感応領域を備えていてもよい。更に、外縁部分の幅は、筐体５０２の大きさなどに応じて適宜設計されるものである。更に又、操作パネル５２２で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式などが挙げられ、いずれの方式を採用することもできる。

通話部５３０は、スピーカ５３１やマイクロホン５３２を備え、マイクロホン５３２を通じて入力されたユーザの音声を主制御部５０１にて処理可能な音声データに変換して主制御部５０１に出力したり、無線通信部５１０あるいは外部入出力部５６０により受信された音声データを復号してスピーカ５３１から出力するものである。又、図１８に示すように、例えば、スピーカ５３１を表示入力部５２０が設けられた面と同じ面に搭載し、マイクロホン５３２を筐体５０２の側面に搭載することができる。

操作部５４０は、キースイッチなどを用いたハードウェアキーであって、ユーザからの指示を受け付けるものである。例えば、図１８に示すように、操作部５４０は、スマートフォン５００の筐体５０２の表示部の下部、下側面に搭載され、指などで押下されるとオンとなり、指を離すとバネなどの復元力によってオフ状態となる押しボタン式のスイッチである。

記憶部５５０は、主制御部５０１の制御プログラムや制御データ、通信相手の名称や電話番号などを対応づけたアドレスデータ、送受信した電子メールのデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータや、ダウンロードしたコンテンツデータを記憶し、又ストリーミングデータなどを一時的に記憶するものである。又、記憶部５５０は、スマートフォン内蔵の内部記憶部５５１と、外部メモリを着脱自在な外部メモリスロットを有する外部記憶部５５２により構成される。尚、記憶部５５０を構成するそれぞれの内部記憶部５５１と外部記憶部５５２は、フラッシュメモリタイプ（ｆｌａｓｈ ｍｅｍｏｒｙ ｔｙｐｅ）、ハードディスクタイプ（ｈａｒｄ ｄｉｓｋ ｔｙｐｅ）、マルチメディアカードマイクロタイプ（ｍｕｌｔｉｍｅｄｉａ ｃａｒｄ ｍｉｃｒｏ ｔｙｐｅ）、カードタイプのメモリ（例えば、Ｍｉｃｒｏ ＳＤ（登録商標）メモリ等）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）などの格納媒体を用いて実現される。

外部入出力部５６０は、スマートフォン５００に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等（例えば、ユニバーサルシリアルバス（ＵＳＢ）、ＩＥＥＥ１３９４など）又はネットワーク（例えば、インターネット、無線ＬＡＮ、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ（登録商標））、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）、赤外線通信（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ：ＩｒＤＡ）（登録商標）、ＵＷＢ（Ｕｌｔｒａ Ｗｉｄｅｂａｎｄ）（登録商標）、ジグビー（ＺｉｇＢｅｅ）（登録商標）など）により直接的又は間接的に接続するためのものである。

スマートフォン５００に連結される外部機器としては、例えば、有／無線ヘッドセット、有／無線外部充電器、有／無線データポート、カードソケットを介して接続されるメモリカード（Ｍｅｍｏｒｙ ｃａｒｄ）やＳＩＭ（Ｓｕｂｓｃｒｉｂｅｒ Ｉｄｅｎｔｉｔｙ Ｍｏｄｕｌｅ Ｃａｒｄ）／ＵＩＭ（Ｕｓｅｒ Ｉｄｅｎｔｉｔｙ Ｍｏｄｕｌｅ Ｃａｒｄ）カード、オーディオ・ビデオＩ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）端子を介して接続される外部オーディオ・ビデオ機器、無線接続される外部オーディオ・ビデオ機器、有／無線接続されるスマートフォン、有／無線接続されるパーソナルコンピュータ、有／無線接続されるＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、有／無線接続されるパーソナルコンピュータ、イヤホンなどがある。外部入出力部５６０は、このような外部機器から伝送を受けたデータをスマートフォン５００の内部の各構成要素に伝達することや、スマートフォン５００の内部のデータが外部機器に伝送されるようにすることができる。

ＧＰＳ受信部５７０は、主制御部５０１の指示にしたがって、ＧＰＳ衛星ＳＴ１〜ＳＴｎから送信されるＧＰＳ信号を受信し、受信した複数のＧＰＳ信号に基づく測位演算処理を実行し、当該スマートフォン５００の緯度、経度、高度からなる位置を検出する。ＧＰＳ受信部５７０は、無線通信部５１０や外部入出力部５６０（例えば、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ））から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。

モーションセンサ部５８０は、例えば、３軸の加速度センサなどを備え、主制御部５０１の指示にしたがって、スマートフォン５００の物理的な動きを検出する。スマートフォン５００の物理的な動きを検出することにより、スマートフォン５００の動く方向や加速度が検出される。この検出結果は、主制御部５０１に出力されるものである。

電源部５９０は、主制御部５０１の指示にしたがって、スマートフォン５００の各部に、バッテリ（図示しない）に蓄えられる電力を供給するものである。

主制御部５０１は、マイクロプロセッサを備え、記憶部５５０が記憶する制御プログラムや制御データにしたがって動作し、スマートフォン５００の各部を統括して制御するものである。又、主制御部５０１は、無線通信部５１０を通じて、音声通信やデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。

アプリケーション処理機能は、記憶部５５０が記憶するアプリケーションソフトウェアにしたがって主制御部５０１が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部５６０を制御して対向機器とデータ通信を行う赤外線通信機能や、電子メールの送受信を行う電子メール機能、Ｗｅｂページを閲覧するＷｅｂブラウジング機能、本発明に係る２Ｄ画像から３Ｄ画像を生成する機能などがある。

又、主制御部５０１は、受信データやダウンロードしたストリーミングデータなどの画像データ（静止画像や動画像のデータ）に基づいて、映像を表示入力部５２０に表示する等の画像処理機能を備える。画像処理機能とは、主制御部５０１が、上記画像データを復号し、この復号結果に画像処理を施して、画像を表示入力部５２０に表示する機能のことをいう。

更に、主制御部５０１は、表示パネル５２１に対する表示制御と、操作部５４０、操作パネル５２２を通じたユーザ操作を検出する操作検出制御を実行する。

表示制御の実行により、主制御部５０１は、アプリケーションソフトウェアを起動するためのアイコンや、スクロールバーなどのソフトウェアキーを表示したり、あるいは電子メールを作成するためのウィンドウを表示する。尚、スクロールバーとは、表示パネル５２１の表示領域に収まりきらない大きな画像などについて、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。

又、操作検出制御の実行により、主制御部５０１は、操作部５４０を通じたユーザ操作を検出したり、操作パネル５２２を通じて、上記アイコンに対する操作や、上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、あるいは、スクロールバーを通じた表示用画像のスクロール要求を受け付ける。

更に、操作検出制御の実行により主制御部５０１は、操作パネル５２２に対する操作位置が、表示パネル５２１に重なる重畳部分（表示領域）か、それ以外の表示パネル５２１に重ならない外縁部分（非表示領域）かを判定し、操作パネル５２２の感応領域や、ソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。

又、主制御部５０１は、操作パネル５２２に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指などによって軌跡を描いたり、複数の位置を同時に指定したり、あるいはこれらを組み合わせて、複数の位置から少なくとも１つについて軌跡を描く操作を意味する。

カメラ部５４１は、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）やＣＣＤ（Ｃｈａｒｇｅ−Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）などの撮像素子２０を用いて電子撮影するデジタルカメラであり、図１等に示した撮像装置１００と同様の機能を備えている。

即ち、カメラ部５４１は、マニュアルフォーカスモードとオートフォーカスモードとを切り替えることができるように構成されている。マニュアルフォーカスモードが選択されると、操作部５４０又は表示入力部５２０に表示されるフォース用のアイコンボタン等を操作することにより、カメラ部５４１の撮影レンズのピント合わせを行うことができる。そして、マニュアルフォーカスモード時には、スプリットイメージが合成されたライブビュー画像を表示パネル５２１に表示させ、これによりマニュアルフォーカス時の合焦状態を確認できるようにしている。尚、図８に示したハイブリッドファインダ２２０をスマートフォン５００に設けるようにしてもよい。

又、カメラ部５４１は、主制御部５０１の制御により、撮像によって得た画像データを例えばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）などの圧縮した画像データに変換し、記憶部５５０に記録したり、外部入出力部５６０や無線通信部５１０を通じて出力することができる。図１８に示すスマートフォン５００において、カメラ部５４１は表示入力部５２０と同じ面に搭載されているが、カメラ部５４１の搭載位置はこれに限らず、表示入力部５２０の背面に搭載されてもよいし、あるいは、複数のカメラ部５４１が搭載されてもよい。尚、複数のカメラ部５４１が搭載されている場合には、撮影に供するカメラ部５４１を切り替えて単独にて撮影したり、あるいは、複数のカメラ部５４１を同時に使用して撮影することもできる。

又、カメラ部５４１はスマートフォン５００の各種機能に利用することができる。例えば、表示パネル５２１にカメラ部５４１で取得した画像を表示することや、操作パネル５２２の操作入力のひとつとして、カメラ部５４１の画像を利用することができる。又、ＧＰＳ受信部５７０が位置を検出する際に、カメラ部５４１からの画像を参照して位置を検出することもできる。更には、カメラ部５４１からの画像を参照して、３軸の加速度センサを用いずに、或いは、３軸の加速度センサと併用して、スマートフォン５００のカメラ部５４１の光軸方向を判断することや、現在の使用環境を判断することもできる。勿論、カメラ部５４１からの画像をアプリケーションソフトウェア内で利用することもできる。

その他、静止画又は動画の画像データにＧＰＳ受信部５７０により取得した位置情報、マイクロホン５３２により取得した音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、モーションセンサ部５８０により取得した姿勢情報等などを付加して記憶部５５０に記録したり、外部入出力部５６０や無線通信部５１０を通じて出力することもできる。

又、本発明は上述した実施形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。

１２…ＣＰＵ、１４…操作部、１６…撮影レンズ、１８…シャッタ、２０…撮像素子、２０Ａ…遮光部材、２０Ｂ…遮光部材、２２…デバイス制御部、２４…インターフェース部、２６…メモリ、２８…画像処理部、３０…通常処理部、３２…スプリットイメージ処理部、３４…エンコーダ、３６…表示部グラフィックコントローラ、４０…記録部、６０…第２の表示用画像、６０Ａ…第１の表示範囲、６０Ｂ…第２の表示範囲、１００…撮像装置、２００…カメラ本体、３００…ズームレンズ、３０２…フォーカスリング、５００…スマートフォン

通常処理部３０及びスプリットイメージ処理部３２は、それぞれＲ、Ｇ、Ｂ信号のゲインを調整してホワイトバランス（ＷＢ）補正を行うＷＢゲイン部（図示せず）、ＷＢ補正された各Ｒ、Ｇ、Ｂ信号をガンマ補正するガンマ補正部（図示せず）、撮像素子２０のカラーフィルタ配列に対応したデモザイク（色補間）処理を行い、デモザイク処理を施した（同時化した）Ｒ、Ｇ、Ｂ信号を生成するデモザイク（同時化）処理部（図示せず）等を有しており、メモリ２６に一時記憶された元のデジタル信号（ＲＡＷデータ）に対して各処理部で順次信号処理を行う。

即ち、カメラ部５４１は、マニュアルフォーカスモードとオートフォーカスモードとを切り替えることができるように構成されている。マニュアルフォーカスモードが選択されると、操作部５４０又は表示入力部５２０に表示されるフォーカス用のアイコンボタン等を操作することにより、カメラ部５４１の撮影レンズのピント合わせを行うことができる。そして、マニュアルフォーカスモード時には、スプリットイメージが合成されたライブビュー画像を表示パネル５２１に表示させ、これによりマニュアルフォーカス時の合焦状態を確認できるようにしている。尚、図８に示したハイブリッドファインダ２２０をスマートフォン５００に設けるようにしてもよい。

Claims (13)

1. 撮影レンズにおける第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群を有する撮像素子から出力された画像信号に基づいて、第１の表示用画像を生成し且つ前記第１及び第２の画素群から出力された第１及び第２の画像信号に基づく第１及び第２の画像から合焦確認に使用する第２の表示用画像及び合焦確認を補助する第３の表示用画像を生成する生成部と、
   前記第２の表示用画像及び前記第３の表示用画像を交互表示可能な表示部と、
   前記第２の表示用画像及び前記第３の表示用画像の前記表示部への交互表示を制御し、前記表示部に対して前記第１の表示用画像と前記第２の表示用画像とを、又は前記第１の表示用画像と前記第３の表示用画像とを表示させる制御を行う表示制御部と、
   を備える撮像装置。
2. 撮影レンズにおける第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群を有する撮像素子から出力された画像信号に基づいて、前記第１及び第２の画素群から出力された第１及び第２の画像信号に基づく第１及び第２の画像から合焦確認に使用する第２の表示用画像及び合焦確認を補助する第３の表示用画像を生成する生成部と、
   前記第２の表示用画像及び前記第３の表示用画像を交互表示可能な表示部と、
   前記第２の表示用画像及び前記第３の表示用画像の前記表示部への交互表示を制御し、前記表示部に対して前記第２の表示用画像を又は前記第３の表示用画像を表示させる制御を行う表示制御部と、
   を備える撮像装置。
3. 前記撮像素子は、前記被写体像が瞳分割されずに結像される第３の画素群を有し、
   前記生成部は、前記第３の画素群から出力された第３の画像信号に基づいて前記第１の表示用画像を生成する請求項１に記載の撮像装置。
4. 前記撮像素子は、前記撮像素子の少なくとも中央付近に第１、第２の画素群を有する請求項１又は３に記載の撮像装置。
5. 前記生成部は、
   第１、第２の表示範囲を有し、前記第１の表示範囲には前記第１の画像が使用され、前記第２の表示範囲には前記第２の画像が使用される前記第２の表示用画像と、
   前記第１、第２の表示範囲のうちの少なくとも一方に使用される画像が前記第２の表示用画像と異なる前記第３の表示用画像と、
   を生成する請求項１から４のいずれか１項に記載の撮像装置。
6. 前記表示制御部は、
   前記第１の表示用画像と前記第２の表示用画像との画像と、前記第１の表示用画像と前記第３の表示用画像との画像とを交互表示、又は前記第２の表示用画像と前記第３の表示用画像とを交互表示させる第１のモードによる制御と、
   前記第１の表示用画像と前記第２の表示用画像との画像、又は前記第２の表示用画像のみを前記交互表示の代わりに表示させる第２のモードによる制御と、
   を切り替える請求項１、３及び４のいずれか１項に記載の撮像装置。
7. 前記表示制御部は、
   前記第１の表示用画像と前記第２の表示用画像との画像と、前記第１の表示用画像と前記第３の表示用画像との画像とを交互表示、又は前記第２の表示用画像と前記第３の表示用画像とを第１の周波数により交互表示させる第１のモードによる制御と、
   前記第１の表示用画像と前記第２の表示用画像との画像と、前記第１の表示用画像と前記第３の表示用画像との画像とを交互表示、又は前記第２の表示用画像と前記第３の表示用画像とを前記第１の周波数よりも高い第２の周波数により交互に表示させる第２のモードによる制御と、
   を切り替える請求項１、３及び４のいずれか１項に記載の撮像装置。
8. 前記表示制御部は、
   前記第１の表示用画像と前記第２の表示用画像との画像と、前記第１の表示用画像と前記第３の表示用画像との画像とを交互表示、又は前記第２の表示用画像と前記第３の表示用画像とを交互表示させる第１のモードによる制御と、
   前記第１の表示用画像のみを表示させる第２のモードによる制御と、
   を切り替える請求項１、３及び４のいずれか１項に記載の撮像装置。
9. 前記撮影レンズは、マニュアルフォーカス機能を有し、
   前記表示制御部は、
   前記マニュアルフォーカス機能を使用中は、前記第１のモードにより制御を行い、
   前記マニュアルフォーカス機能を不使用中は、前記第２のモードにより制御を行う請求項６から８のいずれか１項に記載の撮像装置。
10. 撮影準備指令及び撮影指令を出力するシャッタ部をさらに備え、
    前記表示制御部は、
    前記シャッタ部から撮影準備指令が出力されている間は、前記第１のモードに切り替える請求項６から８のいずれか１項に記載の撮像装置。
11. 前記撮影レンズはズーム機能を有し、
    前記表示制御部は、
    前記ズーム機能を使用中は、前記第１のモードにより制御を行い、
    前記ズーム機能を不使用中は、前記第２のモードにより制御を行う、請求項６から８のいずれか１項に記載の撮像装置。
12. 撮影レンズにおける第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群を有する撮像素子から出力された画像信号に基づいて、第１の表示用画像を生成し且つ前記第１及び第２の画素群から出力された第１及び第２の画像信号に基づく第１及び第２の画像から合焦確認に使用する第２の表示用画像及び合焦確認を補助する第３の表示用画像を生成するステップと、
    前記第２の表示用画像及び前記第３の表示用画像を交互表示可能な表示部に、前記第２の表示用画像及び前記第３の表示用画像の前記表示部への交互表示を制御することにより、前記第１の表示用画像と前記第２の表示用画像とを、又は前記第１の表示用画像と前記第３の表示用画像とを表示させるステップ、とを備える画像表示方法。
13. 撮影レンズにおける第１及び第２の領域を通過した被写体像が瞳分割されてそれぞれ結像される第１及び第２の画素群を有する撮像素子から出力された画像信号に基づいて、前記第１及び第２の画素群から出力された第１及び第２の画像信号に基づく第１及び第２の画像から合焦確認に使用する第２の表示用画像及び合焦確認を補助する第３の表示用画像を生成するステップと、
    前記第２の表示用画像及び前記第３の表示用画像を交互表示可能な表示部に、前記第２の表示用画像及び前記第３の表示用画像の前記表示部への交互表示を制御することにより、前記第２の表示用画像又は前記第３の表示用画像を表示させるステップ、とを備える画像表示方法。

Images