JP2019041300A - 撮像装置 - Google Patents

Abstract

【課題】異なる複数の視点の画像に対する処理負荷を軽減することが可能な制御装置を提供する。【解決手段】制御装置（１０３）は、撮像光学系を介して、異なる複数の視点の画像データを取得する取得手段（１０３ａ）と、主被写体の距離情報を検出する検出手段（１０３ｂ）と、主被写体の距離情報に基づいて、複数の視点の画像データから主被写体に関するリフォーカス効果が得られるか否かを判定する判定手段（１０３ｃ）とを有する。【選択図】図３

Description

本発明は、位相の異なる複数の画像を撮影する撮像装置に関する。

従来、撮影レンズ（撮像光学系）の射出瞳を複数の領域に瞳分割し、分割された瞳領域に応じた異なる複数の視点の画像を同時に撮影することが可能な撮像装置が提案されている。特許文献１には、撮影後に撮像画像の合焦位置を変更するリフォーカス処理を行う撮像装置が開示されている。特許文献２には、リフォーカス処理が可能な撮像装置において、被写体の距離情報に応じて撮影モードを変更する撮像装置が開示されている。

特開２０１５−１１９４１６号公報 特開２０１５−０８２７２１号公報

しかしながら、異なる複数の視点の画像を撮像素子から取得して記録しようとすると、一つの画像を取得して記録する場合と比べて、画像処理に要する時間が長くなり、連写性能の低下や消費電力の増加等の問題が生じる。また、取得した複数の視点の画像において主被写体が被写界深度以内に存在しない等により適切なリフォーカス効果を得ることができない場合があり、このような場合に複数の視点の画像を取得するための画像処理を行うと、処理負荷が増大する。

そこで本発明は、異なる複数の視点の画像に対する処理負荷を軽減することが可能な制御装置、撮像装置、制御方法、および、プログラムを提供することを目的とする。

本発明の一側面としての制御装置は、撮像光学系を介して、異なる複数の視点の画像データを取得する取得手段と、主被写体の距離情報を検出する検出手段と、前記主被写体の前記距離情報に基づいて、前記複数の視点の画像データから前記主被写体に関するリフォーカス効果が得られるか否かを判定する判定手段とを有し、前記判定手段は、前記リフォーカス効果が得られないと判定した場合、表示手段に警告情報を出力し、前記リフォーカス効果が得られると判定した場合、前記表示手段に前記警告情報を出力しない。

本発明の他の側面としての撮像装置は、撮像光学系の互いに異なる瞳領域を通過する光束を受光する複数の光電変換部を有する撮像素子と、前記制御装置とを有する。

本発明の他の側面としての制御方法は、撮像光学系を介して、異なる複数の視点の画像データを取得するステップと、主被写体の距離情報を検出するステップと、前記主被写体の前記距離情報に基づいて、前記複数の視点の画像データから前記主被写体に関するリフォーカス効果が得られるか否かを判定するステップと、前記リフォーカス効果が得られないと判定した場合、表示手段に警告情報を出力するステップとを有する。

本発明の他の側面としてのプログラムは、前記制御方法をコンピュータに実行させる。

本発明の他の目的及び特徴は、以下の実施形態において説明される。

本発明によれば、異なる複数の視点の画像に対する処理負荷を軽減することが可能な制御装置、撮像装置、制御方法、および、プログラムを提供することができる。

本実施形態における撮像装置のブロック図である。 本実施形態における撮像素子の画素配列図である。 本実施形態における主被写体の位置と被写界深度とを示す図である。 本実施形態における主被写体距離検出の時間間隔と被写界深度とを示す図である。

以下、本発明の実施形態について、図面を参照しながら詳細に説明する。

まず、図１を参照して、本実施形態における撮像装置について説明する。図１は、撮像装置１０のブロック図である。図１において、撮像素子１００は、第１レンズ１１６と第２レンズ１１８と第３レンズ１１９とを備えて構成される撮像光学系を介して形成された光学像（被写体像）を光電変換してアナログ画像信号を出力する。撮像素子１００は、後述する中央処理装置１０３等により制御され、静止画または動画を撮影する。アナログフロントエンド（ＡＦＥ）１０１は、撮像素子１００から出力されたアナログ画像信号に対して、ゲイン調整や所定の量子化ビットに対応してデジタル変換を行う。タイミングジェネレータ（ＴＧ）１０２は、撮像素子１００およびＡＦＥ１０１の駆動タイミングを制御する。本実施形態では、撮像素子１００の外部にＡＦＥ１０１、ＴＧ１０２を配置しているが、これに限定されるものではなく、ＡＦＥ１０１およびＴＧ１０２の少なくとも一方が撮像素子１００に内蔵されていてもよい。

中央処理装置（ＣＰＵ）１０３は、撮像装置１０の各部を制御するためのプログラムを実行する。ＣＰＵ１０３は、取得手段１０３ａ、検出手段１０３ｂ、および、判定手段１０３ｃを有する。なお、これらの各手段の詳細については後述する。操作部１０４は、撮影命令や撮影条件等の設定をＣＰＵ１０３に対して行う。表示部１０５は、撮影した静止画像や動画像およびメニュー等の表示を行う。ＲＡＭ１０６は、ＡＦＥ１０１でデジタル変換された画像データや、後述の画像処理部１０８で処理された画像データを記憶する画像データ記憶手段としての機能と、ＣＰＵ１０３が動作を行う際のワークメモリとしての機能とを兼備する。なお本実施形態では、これらの機能はＲＡＭ１０６により実行されるが、アクセス速度が十分に速く動作上問題のないレベルのメモリであれば、他のメモリを用いてもよい。ＲＯＭ１０７は、ＣＰＵ１０３が各部の動作を制御するためにロードして実行するプログラムと、各種回路で用いられる係数群とを格納する。ここで本実施形態では、ＲＯＭ１０７としてフラッシュメモリが用いられるが、これに限定されるものではない。アクセス速度が十分に速く動作上問題のないレベルのメモリであれば、他のメモリを用いてもよい。画像処理部１０８は、撮影された静止画または動画の補正や圧縮等の処理を行う。また画像処理部１０８は、後述するＡ像データとＢ像データへの分離機能やＡ像データとＢ像データの合成機能、その他の画像の補正機能、および、静止画像または動画像の生成機能を備える。

ＡＦ演算部１０９は、相関演算部１２０から出力される相関演算の結果を用いて、フォーカスレンズ（第３レンズ１１９）の駆動量を算出する。フラッシュメモリ１１０は、静止画データおよび動画データを記録するための、着脱可能な記憶媒体である。本実施形態では、記録媒体としてフラッシュメモリを用いているが、これに限定されるものではなく、その他のデータ書き込み可能な不揮発メモリでもよい。またフラッシュメモリ１１０は、撮像装置１０に内蔵していてもよい。

フォーカルプレーンシャッタ１１１は、静止画撮影の際に露光秒時を調節する。本実施形態では、フォーカルプレーンシャッタ１１１を用いて撮像素子１００の露光秒時を調節するが、これに限定されるものではない。例えば、撮像素子１００が電子シャッタ機能を有し、制御パルスで露光秒時を調節するように構成してもよい。フォーカス駆動回路１１２は、撮像光学系の焦点位置を変更する（焦点調節を行う）ため、ＡＦ演算部１０９の焦点検出結果に基づいてフォーカスアクチュエータ１１４を駆動し、第３レンズ１１９を光軸ＯＡに沿った方向（光軸方向）に移動させる。絞り駆動回路１１３は、絞りアクチュエータ１１５を駆動し、絞り１１７の開口径を制御する。

第１レンズ１１６は、撮像光学系（共通光学系）の先端に配置され、光軸方向に移動可能（進退可能）に保持される。絞り１１７は、その開口径を調節することにより、撮影時の光量を調節する。絞り１１７および第２レンズ１１８は、一体的に光軸方向に移動し、第１レンズ１１６の移動（進退動作）と連動して、変倍作用（ズーミング）を実現する。第３レンズ１１９は、光軸方向に移動して撮像光学系の焦点調節（フォーカシング）を行う。相関演算部１２０は、撮像素子１００から出力される画素信号を用いて相関演算を行う。

次に、図２を参照して、撮像素子１００の画素配列について説明する。図２は、撮像素子１００の画素配列図である。撮像素子１００は、ベイヤー配列を有し、撮像光学系の互いに異なる瞳領域を通過する光束を受光する複数の光電変換部を有する。図２において、Ｒは赤のカラーフィルタを、Ｂは青のカラーフィルタを、Ｇｒ、Ｇｂは緑のカラーフィルタをそれぞれ示す。マイクロレンズ１００ａは、マイクロレンズアレイを構成する。フォトダイオード（ＰＤ）１００ｂ、１００ｃは、光電変換を行う光電変換部として、後述するＡ像用光電変換部、Ｂ像用光電変換部をそれぞれ構成する。

各画素は、２つのＰＤ１００ｂ、１００ｃに対して１つのマイクロレンズ１００ａがその上部に配置された構成を有する。すなわち各画素は、１つのマイクロレンズ１００ａに対して複数の光電変換部を備えている。マイクロレンズ１００ａを共有する撮像領域を１画素とする場合、この画素が水平方向にｈ画素、垂直方向にｖ画素並んで配置されることにより、画素アレイが構成される。ＰＤ１００ｂ、１００ｃに蓄積された信号は、後述する画素転送動作により、同時または独立して電圧信号に変換され、撮像素子１００の読み出し動作により外部に出力される。ＰＤ１００ｂ、１００ｃは瞳分割構成を有する。このためＰＤ１００ｂ、１００ｃには、互いに位相差を有する異なる像（すなわち、撮像光学系の互いに異なる瞳領域を通過した光束に対応する、異なる複数の視点の画像）が入射される。このような構成により、ＰＤ１００ｂ、１００ｃの信号を独立に読み出し、前述の相関演算部１２０において相関演算処理を行い、その結果を用いてＡＦ演算部１０９においてフォーカスレンズ（第３レンズ１１９）の駆動量等を算出することができる。また、位相差を有する複数の画像（互いに異なる複数の視点の画像）は、撮影後のリフォーカス処理に用いることができる。

本実施形態では、ＰＤ１００ｃをＡ像用光電変換部（第１光電変換部）、ＰＤ１００ｂをＢ像用光電変換部（第２光電変換部）とする。撮像素子１００は、１つのマイクロレンズに対して第１光電変換部および第２光電変換部を有し、複数のマイクロレンズが２次元状に配列されている。なお図２では、１つのマイクロレンズ１００ａに対して２つのＰＤ１００ｂ、１００ｃが配置されているが、これに限定されるものではない。１つのマイクロレンズに対してＰＤが上下または左右に複数配置される構成でも、本発明を適用することが可能である。または、４つ以上に瞳分割を行うこともできる。

次に、撮像装置１０による撮影動作を説明する。操作部１０４に撮影命令が入力されると、撮像素子１００のＰＤ１００ｂ、１００ｃから出力信号、すなわちＡ像データおよびＢ像データ、または、Ａ像データおよびＡ像データとＢ像データとの加算データが出力される。これらの出力信号（出力データ）は、ＡＦＥ１０１およびＣＰＵ１０３を経て、画像処理部１０８へ出力される。画像処理部１０８は、Ａ像データおよびＢ像データを加算して撮像信号を生成する。撮像信号は、表示部１０５に表示される。また、Ａ像データ、Ｂ像データ、および、Ａ像データとＢ像データとの加算データは、フラッシュメモリ１１０に記録される。なお、Ａ像データ、および、Ａ像データとＢ像データとの加算データのみをフラッシュメモリ１１０に記録させるように構成してもよい。

操作部１０４にリフォーカス命令が入力されると、画像処理部１０８は、フラッシュメモリ１１０にＡ像データおよびＢ像データが記録されている場合には、フラッシュメモリ１１０からＡ像データおよびＢ像データを読み出す。フラッシュメモリ１１０にＡ像データおよびＡ像データとＢ像データとの加算データのみが記録されている場合には、Ａ像データおよびＡ像データとＢ像データとの加算データを読み出し、Ａ像データと加算データとの差分に基づいてＢ像データを生成する。リフォーカス処理を行う場合、画像処理部１０８は、操作部１０４からの指令に従い、Ａ像データおよびＢ像データの位相差を調整する。画像処理部１０８は、位相差を調整した後、Ａ像データとＢ像データとを加算し、加算した画像（リフォーカス画像）を表示部１０５に表示するとともに、フラッシュメモリ１１０に記録する。

次に、図３を参照して、主被写体の位置（被写体距離）と被写界深度に応じてリフォーカス処理の効果（リフォーカス効果）が得られる場合、リフォーカス効果が得られない場合、および、警告表示について説明する。

図３（ａ）は、撮像装置１０からの主被写体３０２（第１の被写体）および主被写体３０３（第２の被写体）それぞれの距離（被写体距離）が過焦点距離よりも遠い距離にある場合を示す模式図である。この場合、主被写体３０２および主被写体３０３それぞれに略合焦しているため、リフォーカス処理を行っても効果が少ない。このためＣＰＵ１０３は、主被写体３０２、３０３が過焦点距離よりも遠い距離にあることを示す警告を表示部１０５に表示する。このような警告が表示された場合、撮影者は、警告に従って、主被写体３０２、３０３に近づくか、または、絞り１１７を開くように絞り調整を行うことにより、主被写体３０２、３０３に対してリフォーカス効果を得るための条件を設定することができる。

図３（ｂ）は、撮像装置１０からの主被写体３０２および主被写体３０３の距離が被写界深度内にない場合を示す模式図である。この場合、主被写体３０２または主被写体３０３のいずれかを被写界深度内に設定すると、他方は被写界深度外となるため、リフォーカス処理を行った場合でもリフォーカス効果を得ることができない。このためＣＰＵ１０３は、主被写体３０２、３０３が被写界深度外であることを示す警告を表示部１０５に表示する。このような警告が表示された場合、撮影者は、警告に従って、絞り１１７を絞るように絞り調整を行うことにより、主被写体３０２、３０３に対してリフォーカス効果を得るための条件を設定することができる。

図３（ｃ）は、撮像装置１０からの主被写体３０２および主被写体３０３の距離が被写界深度内で略同じ距離に存在する場合を示す模式図である。この場合、主被写体３０２および主被写体３０３のそれぞれの合焦位置も略同じであるため、リフォーカス処理を行った場合でもリフォーカス効果を得ることができない。このためＣＰＵ１０３は、主被写体３０２、３０３が同距離であることを示す警告を表示部１０５に表示する。このような警告が表示された場合、撮影者は、警告に従って、絞り１１７を開くように絞り調整を行うことにより、主被写体３０２、３０３に対してリフォーカス効果を得るための条件を設定することができる。

図３（ｄ）は、撮像装置１０からの主被写体３０２および主被写体３０３の距離が被写界深度内である程度離れた距離にいる場合を示す模式図である。この場合、主被写体３０２または主被写体３０３のいずれかに焦点を合わせることができるため、リフォーカス処理を行ってリフォーカス効果を得ることが可能である。このためＣＰＵ１０３は、警告の表示を行わない。

ＣＰＵ１０３は、撮像装置１０が起動時に主被写体の判定を開始する。そしてＣＰＵ１０３は、主被写体が検出された後、主被写体３０２と主被写体３０３との間の距離、および、被写界深度の情報を常に取得し続け、表示部１０５に所定の警告を表示することが可能な状態となっている。またＣＰＵ１０３は、主被写体の大きさを監視している。主被写体の大きさが変わらない場合、ＣＰＵ１０３は、撮像装置１０と主被写体との間の距離が変化していないと判定し、被写体距離に関する情報の取得を中止する。一方、主被写体の大きさが変わった場合、ＣＰＵ１０３は、撮像装置１０と主被写体との間の距離が変化したと判定し、被写体距離に関する情報を再取得することもできる。主被写体が検出されなくなった場合、ＣＰＵ１０３は、リフォーカス処理が必要な被写体が存在しなくなったと判定し、警告のための被写体距離に関する情報を取得するための処理を中止する。

次に、図４を参照して、主被写体の距離と被写界深度に応じて主被写体の距離を検出する時間間隔について説明する。図４（ａ）は、撮像装置１０からの主被写体４０２（第１の被写体）および主被写体４０３（第２の被写体）の距離が過焦点距離の直前にあり、主被写体４０２および主被写体４０３が被写界深度内に存在する場合を示す。図４（ｂ）は、撮像装置１０からの主被写体４０２および主被写体４０３の距離が図４（ａ）の場合よりも近い距離にあり、主被写体４０２および主被写体４０３が被写界深度内に存在する場合を示す。

図４（ａ）の被写界深度は、図４（ｂ）での被写界深度よりも深い。このため、図４（ａ）の主被写体４０２と主被写体４０３との間の距離が図４（ｂ）の場合と同じでも、被写界深度から主被写体が出る時間は長くなる。このため、主被写体が遠い距離に存在する場合、主被写体の距離を検出する時間間隔を長くすることができる。一方、主被写体が近い距離に存在する場合、主被写体の動きにより主被写体が被写界深度外に出る時間が短くなるため、主被写体の距離を検出する時間間隔を短くする。このように検出手段１０３ｂは、主被写体の距離情報に応じて、距離情報を検出する時間間隔を変更する。好ましくは、検出手段１０３ｂは、距離情報が主被写体の距離が第１の距離にあることを示す情報である場合、時間間隔を第１の時間間隔に設定する。一方、検出手段１０３ｂは、距離情報が主被写体の距離が第１の距離よりも小さい第２の距離であることを示す情報である場合、時間間隔を第１の時間間隔よりも短い第２の時間間隔に設定する。

なお、主被写体の遠近の変化の判定は、主被写体の大きさの変化を利用することもできる。この場合、検出手段１０３ｂは、主被写体の大きさの変化を検出する。そして判定手段１０３ｃは、主被写体の大きさが変化したと判定した場合、検出手段１０３ｂから距離情報を取得する。一方、主被写体の大きさが変化しないと判定した場合、検出手段１０３ｂから距離情報を取得しない。また好ましくは、検出手段１０３ｂは、主被写体が大きくなったと判定された場合、時間間隔を短くする。一方、検出手段１０３ｂは、主被写体が小さくなったと判定された場合、時間間隔を長くする。また検出手段１０３ｃは、主被写体の大きさが一定以下になった場合、距離の検出を停止する。

このように本実施形態において、ＣＰＵ（制御装置）１０３は、取得手段１０３ａ、検出手段１０３ｂ、および、判定手段１０３ｃを有する。取得手段１０３ａは、撮像光学系を介して、異なる複数の視点の画像データを取得する。検出手段１０３ｂは、主被写体の距離情報（例えば、撮像装置１０から主被写体までの距離）を検出する。判定手段１０３ｃは、主被写体の距離情報に基づいて、複数の視点の画像データから主被写体に関するリフォーカス効果が得られるか否かを判定する。判定手段１０３は、リフォーカス効果が得られないと判定した場合、表示手段（表示部１０５）に警告情報を出力する。一方、判定手段１０３ｃは、リフォーカス効果が得られると判定した場合、表示手段に警告情報を出力しない。

好ましくは、判定手段１０３ｃは、距離情報が主被写体が所定の被写体距離（過焦点距離）よりも大きいことを示す情報である場合、リフォーカス効果が得られないと判定する。また好ましくは、判定手段１０３ｃは、被写体の距離情報と被写界深度とに基づいて、リフォーカス効果が得られるか否かを判定する。より好ましくは、判定手段１０３ｃは、主被写体としての第１の被写体（主被写体３０２、４０２）と第２の被写体（主被写体３０３、４０３）との間の距離が被写界深度よりも大きい場合、リフォーカス効果が得られないと判定する。

好ましくは、判定手段１０３ｃは、主被写体としての第１の被写体と第２の被写体との間の距離が所定の距離よりも小さい場合、前記リフォーカス効果が得られないと判定する。また好ましくは、判定手段１０３ｃは、主被写体の奥行きが所定の奥行きよりも小さい場合、リフォーカス効果が得られないと判定する。また好ましくは、判定手段１０３ｃは、リフォーカス効果が得られないと判定する理由に応じて、表示部１０５に表示する警告情報を変更する。検出手段１０３ｂは、主被写体を検出した場合、主被写体の距離情報の検出を開始する。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

本実施形態によれば、異なる複数の視点の画像に対する処理負荷を軽減することが可能な制御装置、撮像装置、制御方法、および、プログラムを提供することができる。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

１０３ ＣＰＵ（制御装置）
１０３ａ 取得手段
１０３ｂ 検出手段
１０３ｃ 判定手段

Claims (16)

1. 撮像光学系を介して、異なる複数の視点の画像データを取得する取得手段と、
   主被写体の距離情報を検出する検出手段と、
   前記主被写体の前記距離情報に基づいて、前記複数の視点の画像データから前記主被写体に関するリフォーカス効果が得られるか否かを判定する判定手段と、を有し、
   前記判定手段は、
   前記リフォーカス効果が得られないと判定した場合、表示手段に警告情報を出力し、
   前記リフォーカス効果が得られると判定した場合、前記表示手段に前記警告情報を出力しない、ことを特徴とする制御装置。
2. 前記判定手段は、前記距離情報が前記主被写体が所定の被写体距離よりも大きいことを示す情報である場合、前記リフォーカス効果が得られないと判定することを特徴とする請求項１に記載の制御装置。
3. 前記判定手段は、前記被写体の前記距離情報と被写界深度とに基づいて、前記リフォーカス効果が得られるか否かを判定することを特徴とする請求項１または２に記載の制御装置。
4. 前記判定手段は、前記主被写体としての第１の被写体と第２の被写体との間の距離が前記被写界深度よりも大きい場合、前記リフォーカス効果が得られないと判定することを特徴とする請求項３に記載の制御装置。
5. 前記判定手段は、前記主被写体としての第１の被写体と第２の被写体との間の距離が所定の距離よりも小さい場合、前記リフォーカス効果が得られないと判定することを特徴とする請求項１乃至４のいずれか１項に記載の制御装置。
6. 前記判定手段は、前記主被写体の奥行きが所定の奥行きよりも小さい場合、前記リフォーカス効果が得られないと判定することを特徴とする請求項１乃至５のいずれか１項に記載の制御装置。
7. 前記判定手段は、リフォーカス効果が得られないと判定する理由に応じて、前記表示手段に表示する前記警告情報を変更することを特徴とする請求項１乃至６のいずれか１項に記載の制御装置。
8. 前記検出手段は、前記主被写体を検出した場合、前記主被写体の前記距離情報の検出を開始することを特徴とする請求項１乃至７のいずれか１項に記載の制御装置。
9. 前記検出手段は、前記主被写体の前記距離情報に応じて、前記距離情報を検出する時間間隔を変更することを特徴とする請求項１乃至８のいずれか１項に記載の制御装置。
10. 前記検出手段は、
    前記距離情報が前記主被写体の距離が第１の距離にあることを示す情報である場合、前記時間間隔を第１の時間間隔に設定し、
    前記距離情報が前記主被写体の前記距離が前記第１の距離よりも小さい第２の距離にあることを示す情報である場合、前記時間間隔を前記第１の時間間隔よりも短い第２の時間間隔に設定することを特徴とする請求項９に記載の制御装置。
11. 前記検出手段は、前記主被写体の大きさの変化を検出し、
    前記判定手段は、
    前記主被写体の大きさが変化したと判定した場合、前記検出手段から前記距離情報を取得し、
    前記主被写体の大きさが変化しないと判定した場合、前記検出手段から前記距離情報を取得しないことを特徴とする請求項１乃至１０のいずれか１項に記載の制御装置。
12. 前記検出手段は、
    前記主被写体の大きさの変化を検出し、
    前記主被写体が大きくなったと判定された場合、前記時間間隔を短くし、
    前記主被写体が小さくなったと判定された場合、前記時間間隔を長くすることを特徴とする請求項９または１０に記載の制御装置。
13. 撮像光学系の互いに異なる瞳領域を通過する光束を受光する複数の光電変換部を有する撮像素子と、
    前記複数の光電変換部からの出力信号のそれぞれに対応した、異なる複数の視点の画像データを取得する取得手段と、
    主被写体の距離情報を検出する検出手段と、
    前記主被写体の前記距離情報に基づいて、前記複数の視点の画像データから前記主被写体に関するリフォーカス効果が得られるか否かを判定する判定手段と、を有し、
    前記判定手段は、
    前記リフォーカス効果が得られないと判定した場合、表示手段に警告情報を出力し、
    前記リフォーカス効果が得られると判定した場合、前記表示手段に前記警告情報を出力しない、ことを特徴とする撮像装置。
14. 前記撮像素子は、１つのマイクロレンズに対して前記複数の光電変換部を有し、該マイクロレンズが２次元状に配列されていることを特徴とする請求項１３に記載の撮像装置。
15. 撮像光学系を介して、異なる複数の視点の画像データを取得するステップと、
    主被写体の距離情報を検出するステップと、
    前記主被写体の前記距離情報に基づいて、前記複数の視点の画像データから前記主被写体に関するリフォーカス効果が得られるか否かを判定するステップと、
    前記リフォーカス効果が得られないと判定した場合、表示手段に警告情報を出力するステップと、を有することを特徴とする制御方法。
16. 撮像光学系を介して、異なる複数の視点の画像データを取得するステップと、
    主被写体の距離情報を検出するステップと、
    前記主被写体の前記距離情報に基づいて、前記複数の画像データから前記主被写体に関するリフォーカス効果が得られるか否かを判定するステップと、
    前記リフォーカス効果が得られないと判定した場合、表示手段に警告情報を出力するステップと、をコンピュータに実行させることを特徴とすることを特徴とするプログラム。