JP7767167B2 - 選択方法、撮像方法、及び撮像装置 - Google Patents

Description

本開示の技術は、選択方法、撮像方法、及び撮像装置に関する。

特許文献１には、撮像画像から所定のオブジェクトの領域を検出し、検出した領域に自動合焦する機能を有する撮像装置が開示されている。特許文献１に記載の撮像装置は、画像センサと、第１の検出部と、第２の検出部と、フォーカス位置決定部と、ＡＦ制御部とを備える。

特許文献１に記載の撮像装置において、画像センサは、被写体を撮像し、撮像画像を示す画像データを生成する。第１の検出部は、撮像画像から所定のオブジェクトを含む領域を検出する。第２の検出部は、撮像画像から、撮像画像に設定された複数の小領域のそれぞれに対して、各小領域に含まれる被写体までの距離を示す距離情報を検出する。フォーカス位置決定部は、第１の検出部により検出された領域と、第２の検出部により検出された距離情報とから、検出された領域におけるフォーカス位置を決定する。ＡＦ制御部は、フォーカス位置に基づき自動合焦動作を制御する。

特許文献１に記載の撮像装置において、フォーカス位置決定部は、検出された領域内における所定位置の小領域の被写体距離が所定値以下の場合、所定位置の小領域に合焦するようにフォーカス位置を設定する。また、フォーカス位置決定部は、所定位置の小領域の被写体距離が所定値よりも大きい場合、所定位置の小領域の周囲に配置された小領域において、被写体距離が所定値以下であって、所定位置の小領域からの距離が最も小さくなる小領域に合焦するようにフォーカス位置を設定する。

特許文献２には、焦点検出手段と、距離検出手段と、制御手段とを有する撮像装置が開示されている。特許文献２に記載の撮像装置において、焦点検出手段は、設定された焦点検出領域の合焦位置を、撮影画像から得られる焦点評価値に基づいて検出するＡＦスキャンを実行する。距離検出手段は、ＡＦスキャンにより得られる焦点評価値に基づいて、撮影シーンに含まれる被写体距離の分布を求める。制御手段は、距離検出手段によって求められた被写体距離の分布に基づいて、撮像装置の動作を制御する。距離検出手段は、焦点検出領域ごとに、焦点評価値がピークとなるフォーカスレンズ位置を検出した後、検出した焦点評価値がピークとなるフォーカスレンズ位置を焦点検出領域の位置に応じて補正して、被写体距離の分布を求める。

特許文献３には、オートフォーカス装置が開示されている。特許文献３に記載のオートフォーカス装置では、連続撮影中に、検出された被写体距離と前回被写体距離との差が所定値より大きいと判定された場合、すなわち、測距エリアが主要被写体から外れた場合、そのときに検出される被写体距離ではなく前回被写体距離に基づいて合焦動作が行われる。このとき、前回被写体距離は主要被写体の被写体距離となっているため、主要被写体にピントの合った画像が撮影される。

特許文献４には、カメラが開示されている。特許文献４に記載のカメラは、時間間隔を空けて被写体の像を撮影する撮像素子と、被写体までの距離を測定する測距部と、連写撮影時に測距部により測定された単位時間あたりの距離の変化量が増大した場合に、撮像素子による撮影のフレームレートを増大させる撮影間隔調節部と、を備える。

特開２０２０－０６７５３４号公報 特開２０１４－１２６８５８号公報 特開２００６－２４３６０９号公報 特開２００９－１１８１６２号公報

本開示の技術に係る実施形態は、１つの側面として、ユーザが注目している被写体に対してピントを合わせ易くすることができる選択方法及び撮像装置を提供する。また、本開示の技術に係る実施形態は、他の側面として、レリーズとピント合わせとをバランス良く両立させることができる撮像方法を提供する。

本開示の技術に係る第１の態様は、第１領域と複数の第２領域を含む複数の候補領域に含まれる被写体を撮像する第１撮像工程と、第１領域における第１被写体の距離である第１距離、及び複数の第２領域における複数の第２被写体の距離である複数の第２距離を算出する第１算出工程と、複数の第２距離のうちの第１条件を満たす第２距離に対応する第１特定領域を複数の第２領域の中から特定する第１特定工程と、複数の第２領域に対しての第１特定領域の割合である第１割合に基づいて、第１被写体及び第１特定領域内の第２被写体から、合焦させる第１合焦被写体を選択する第１選択工程と、を備える選択方法である。

本開示の技術に係る第２の態様は、イメージセンサと、プロセッサと、を備え、プロセッサが、第１領域と複数の第２領域を含む複数の候補領域に含まれる被写体をイメージセンサに対して撮像させ、第１領域における第１被写体の第１距離、及び複数の第２領域における複数の第２被写体の距離である複数の第２距離を取得し、複数の第２距離のうちの第１条件を満たす第２距離に対応する第１特定領域を複数の第２領域の中から特定し、第１特定領域の複数の第２領域に対する割合である第１割合に基づいて、第１被写体及び第１特定領域内の第２被写体から、合焦する第１合焦被写体を選択する撮像装置である。

本開示の技術に係る第３の態様は、第１フレーム期間の第１フレームデータに含まれる第１被写体の第１距離を算出する第１算出工程と、第１距離に基づいて、第１位置にフォーカスレンズを移動させる第１移動工程と、第１フレーム期間の後の第２フレーム期間の第２フレームデータに含まれる第２被写体の第２距離を算出する第２算出工程と、第２距離に基づいて、フォーカスレンズを移動させる位置として、第２位置、又は、第２位置よりも第１位置に近い第３位置を選択する選択工程と、選択された第２位置又は第３位置にフォーカスレンズを移動させ、かつ、第２被写体を撮像する撮像工程と、を備える撮像方法である。

第１実施形態に係る撮像装置の外観の一例及びＡＦ枠の一例を示す概念図である。 第１実施形態に係るＡＦ枠の一例を示す概念図である。 第１実施形態に係る撮像装置のハードウェア構成の一例を示す概略構成図である。 第１実施形態に係るプロセッサの機能の一例を示すブロック図である。 第１実施形態に係る第１撮像制御部、第１算出部、及び表示制御部の処理内容の一例を示す概念図である。 第１実施形態に係る第１算出部及び第１特定部の処理内容の一例を示す概念図である。 第１実施形態に係る第１特定部及び第１選択部の処理内容の一例を示す概念図である。 第１実施形態に係る第１特定部及び第１選択部の処理内容の一例を示す概念図である。 第１実施形態に係る第１特定部及び第１選択部の処理内容の一例を示す概念図である。 第１実施形態に係る第１撮像制御部、第１算出部、表示制御部、及び第１選択部の処理内容の一例を示す概念図である。 第１実施形態に係る第１撮像制御部の処理内容の一例を示す概念図である。 第１実施形態に係る撮像処理の流れの一例を示すフローチャートである。 第１実施形態に係る第１特定部の処理内容の変形例を示す概念図である。 第２実施形態に係るプロセッサの機能の一例を示すブロック図である。 第２実施形態に係る第１撮像制御部、第２撮像制御部、及び第１算出部の一例を示すブロック図である。 第２実施形態に係る第１算出部及び第２選択部の処理内容の一例を示す概念図である。 第２実施形態に係る第２撮像制御部、第１算出部、表示制御部、及び第２選択部の処理内容の一例を示す概念図である。 第２実施形態に係る撮像処理の流れの一例を示すフローチャートである。 図１８Ａに示すフローチャートの続きである。 図１８Ｂに示すフローチャートの変形例である。 第３実施形態に係るＡＦ枠の一例を示す概念図である。 第３実施形態に係るプロセッサの機能の一例を示すブロック図である。 第３実施形態に係る第１撮像制御部、第２算出部、及び表示制御部の処理内容の一例を示す概念図である。 第３実施形態に係る第２算出部及び第２特定部の処理内容の一例を示す概念図である。 第３実施形態に係る第２特定部及び第３選択部の処理内容の一例を示す概念図である。 第３実施形態に係る第２特定部及び第３選択部の処理内容の一例を示す概念図である。 第３実施形態に係る第１撮像制御部、第２算出部、表示制御部、及び第３選択部の処理内容の一例を示す概念図である。 第３実施形態に係る第１撮像制御部、第２撮像制御部、及び第２算出部の処理内容の一例を示す概念図である。 第３実施形態に係る第２算出部及び第２選択部の処理内容の一例を示す概念図である。 第３実施形態に係る第２撮像制御部、第２算出部、表示制御部、及び第２選択部の処理内容の一例を示す概念図である。 第３実施形態に係る撮像処理の流れの一例を示すフローチャートである。 図３０Ａに示すフローチャートの続きである。 図３０Ａ及び図３０Ｂに示すフローチャートの続きである。 従来既知の連写の処理の流れの一例を示すタイムチャートである。 第４実施形態に係るプロセッサの機能の一例を示すブロック図である。 第４実施形態に係る合焦位置演算部、合焦位置予測部、及び制御部の処理内容の一例を示す概念図である。 第４実施形態に係るプロセッサによって行われる処理の内容の一例を示す概念図である。 第４実施形態に係る制御部の処理内容の一例を示す概念図である。 第４実施形態に係るレリーズ優先範囲、ピント合わせ優先範囲、及び待機優先範囲とぼけ量との関係の一例を示す概念図である。 第４実施形態に係る撮像装置によって行われる連写の処理の流れの一例を示すタイムチャートである。 第４実施形態に係る連写制御処理の流れの一例を示すフローチャートである。 図３８Ａに示すフローチャートの続きである。 図３８Ｂに示すフローチャートの続きである。 図３８Ｃに示すフローチャートの続きである。

以下、添付図面に従って本開示の技術に係る選択方法、撮像方法、及び撮像装置の実施形態の一例について説明する。

［第１実施形態］
一例として図１に示すように、本開示の技術に係る「撮像装置」の一例である撮像装置１０は、被写体として指定された撮像対象領域１２を撮像する。撮像対象領域１２の範囲は、撮像装置１０のユーザ（以下、「ユーザ」と称する）によって指定された画角によって定められる。図１に示す例では、撮像対象領域１２に、人物１４と道路１６が含まれている。また、図１に示す例では、道路１６に人物１４が立っている態様が示されている。

例えば、撮像装置１０は、レンズ交換式のデジタルカメラである。撮像装置１０は、撮像装置本体１８及び交換レンズ２０を備えている。交換レンズ２０は、撮像装置本体１８に交換可能に装着される。なお、ここでは、撮像装置１０の一例として、レンズ交換式のデジタルカメラを挙げているが、これはあくまでも一例に過ぎず、レンズ固定式のデジタルカメラであってもよい。また、本開示の技術は、スマートデバイス、ウェアラブル端末、細胞観察装置、眼科観察装置、又は外科顕微鏡等の各種の電子機器に搭載されるデジタルカメラであっても成立する。

撮像装置本体１８には、ダイヤル２２、レリーズボタン２４、タッチパネル・ディスプレイ２６、及び指示キー２８等が設けられている。

ダイヤル２２は、動作モード等の設定の際に操作される。撮像装置１０では、ダイヤル２２が操作されることによって、各種の動作モードが選択的に設定される。動作モードには、撮像系の動作モードが含まれる。撮像系の動作モードの一例としては、ライブビュー撮像モード、静止画像用撮像モード、動画像用撮像モード、及び連写モード等が挙げられる。ライブビュー撮像モードは、ライブビュー画像用の連続的な撮像（以下、「ライブビュー撮像」とも称する）を行う動作モードである。静止画像用撮像モードは、１フレーム分の本露光を伴う静止画像用の撮像を行う動作モードである。動画像用撮像モードは、動画像用フレームレート（例えば、数十ｆｐｓ）に従って被写体を撮像することで記録用の動画像を取得する動作モードである。連写モードは、連写（すなわち、静止画像の連続的な撮像）を行う動作モードである。

レリーズボタン２４は、撮像準備指示部及び撮像指示部として機能し、撮像装置１０に対する撮像準備指示を示す撮像準備指示状態と撮像装置１０に対する撮像指示を示す撮像指示状態との２段階の押圧操作が検出可能である。撮像準備指示状態とは、例えば、待機位置から中間位置（半押し位置）まで押下される状態を指し、撮像指示状態とは、中間位置を超えた最終押下位置（全押し位置）まで押下される状態を指す。なお、以下では、「待機位置から半押し位置まで押下される状態」を「半押し状態」といい、「待機位置から全押し位置まで押下される状態」を「全押し状態」という。撮像装置１０の構成によっては、撮像準備指示状態とは、ユーザの指がレリーズボタン２４に接触した状態であってもよく、撮像指示状態とは、操作するユーザの指がレリーズボタン２４に接触した状態から離れた状態に移行した状態であってもよい。

レリーズボタン２４は、撮像装置１０に対して連写の指示を与える場合にも操作される。連写は、本露光を伴う連続的な静止画像用の撮像である。撮像装置１０に対して撮像モードが設定されている状況下で、レリーズボタン２４の全押し状態が一定時間（例えば、０．５秒）以上継続されると、連写モードとなり、連写が開始される。連写は、全押状態が解除されるまで行われる。撮像装置１０では、既定時間間隔で連続的に本露光が行われることにより連写が実現される。ここで、既定時間間隔とは、例えば、数ｆｐｓ～数十ｆｐｓの連写用フレームレートによって定められる１フレーム分の時間間隔を指す。

タッチパネル・ディスプレイ２６は、ディスプレイ３０及びタッチパネル３２を備えている。タッチパネル・ディスプレイ２６の一例としては、アウトセル型、オンセル型、又はインセル型のタッチパネル・ディスプレイが挙げられる。ディスプレイ３０の一例としては、有機ＥＬディスプレイ又は液晶ディスプレイが挙げられる。

ディスプレイ３０は、撮像装置１０に対してレリーズボタン２４を介して静止画像用の撮像の指示が与えられた場合に、静止画像用の撮像が行われることで得られた静止画像の表示にも用いられる。更に、ディスプレイ３０は、撮像装置１０が再生モードの場合の再生画像の表示及びメニュー画面等の表示にも用いられる。

タッチパネル３２は、ユーザからの指示を受け付ける。例えば、ユーザからの指示には、撮像準備指示、撮像指示、及び連写の指示等が含まれる。撮像準備指示、撮像指示、及び連写の指示等は、ソフトキーに対して操作が行われることによって実現される。例えば、ディスプレイ３０に表示されたソフトキーをユーザがタッチパネル３２を介してオンすることによって撮像準備指示、撮像指示、及び連写の指示等が撮像装置１０に対して与えられる。

指示キー２８は、各種の指示を受け付ける。ここで、「各種の指示」とは、例えば、各種メニューを選択可能なメニュー画面の表示の指示、１つ又は複数のメニューの選択の指示、選択内容の確定の指示、選択内容の消去の指示、ズームイン、ズームアウト、及びコマ送り等の各種の指示等を指す。また、これらの指示はタッチパネル３２によってされてもよい。

図１には、撮像装置１０によって撮像されることで得られたライブビュー画像３４（図１に示す例では、撮像対象領域１２が像として含まれた画像）がディスプレイ３０に表示されている態様の一例が示されている。撮像装置１０は、ＡＦ（Auto Focus）機能を有しており、ライブビュー画像３４には、ＡＦ枠３６が重畳表示される。撮像装置１０は、ＡＦ枠３６に含まれる被写体、すなわち、ＡＦ枠３６内に表示される画像により示される被写体（すなわち、実空間上の被写体）に対してピント合わせを行う。

ディスプレイ３０の画面３０Ａは、短辺３０Ａ１と長辺３０Ａ２とを有する長方形状の画面である。ＡＦ枠３６は、矩形状の枠であり、画面３０Ａの中央部３０Ｂに表示される。ＡＦ枠３６は、３×３のマトリクス状に配置された複数の領域３８を含む。領域３８は、矩形状の枠で規定された領域である。複数の領域３８は、本開示の技術に係る「複数の候補領域」の一例である。

ＡＦ枠３６には、上下方向４０が設定されている。上下方向４０は、短辺３０Ａ１に沿った方向である。また、上下方向４０は、ＡＦ枠３６に対して事前に固定されている。従って、撮像装置１０の姿勢が変化したとしても、ＡＦ枠３６に対する上下方向４０は不変である。すなわち、撮像装置１０の姿勢が変化したとしても、上下方向４０は、短辺３０Ａ１に沿った方向のままである。例えば、撮像装置１０の姿勢が横向きから縦向きに変化した場合であっても、縦向きから横向きに変化した場合であっても、ＡＦ枠３６に対する上下方向４０は不変である。

複数の領域３８は、中央領域４２と複数の周辺領域４４とを含む。複数の周辺領域４４は、画面３０Ａ内で中央領域４２を取り囲むように、中央領域４２の八方に配置されている。中央領域４２は、本開示の技術に係る「第１領域」及び「中央領域」の一例である。また、複数の周辺領域４４は、本開示の技術に係る「複数の第２領域」の一例である。また、周辺領域４４は、本開示の技術に係る「周辺領域」の一例である。

図１に示す例では、複数の周辺領域４４として、８個の周辺領域４４が示されている。図１に示す例において、８個の周辺領域４４とは、周辺領域４４Ａ～４４Ｈを指す。周辺領域４４Ａ～４４Ｃは、上下方向４０において中央領域４２よりも下方に位置しており、上下方向４０に対して画面３０Ａ内で直交する方向（以下、「横方向」とも称する）に沿って、図１に示す横向きの撮像装置１０の背面視左下から背面視右下にかけて配置されている。周辺領域４４Ｄ及び４４Ｅは、中央領域４２を介して横方向に隣接している。具体的には、周辺領域４４Ｄが、図１に示す横向きの撮像装置１０において中央領域４２の背面視左側に配置されており、周辺領域４４Ｅが、図１に示す横向きの撮像装置１０において中央領域４２の背面視右側に配置されている。周辺領域４４Ｆ～４４Ｈは、上下方向４０において中央領域４２よりも上方に位置しており、図１に示す横向きの撮像装置１０において横方向に沿って背面視左上から背面視右上にかけて配置されている。

一例として図２に示すように、複数の領域３８には、被写体が含まれている。撮像装置１０を用いた撮像方法には、複数の領域３８に含まれる被写体を撮像する工程が含まれる。複数の領域３８に含まれる被写体は、中央領域４２における第１被写体４６と周辺領域４４Ａ～４４Ｈにおける第２被写体４８Ａ～４８Ｈである。第１被写体４６は、本開示の技術に係る「第１被写体」の一例であり、第２被写体４８Ａ～４８Ｈは、本開示の技術に係る「複数の第２被写体」の一例である。なお、「被写体」は、各領域３８に含まれる人物又は物体のことであり、例えば、図６に示すように、一人の人物が複数の領域３８に跨って含まれている場合は、各領域３８に写っている人物の一部分が「被写体」となる。

第１被写体４６は、中央領域４２に含まれている。第２被写体４８Ａは、周辺領域４４Ａに含まれている。第２被写体４８Ｂは、周辺領域４４Ｂに含まれている。第２被写体４８Ｃは、周辺領域４４Ｃに含まれている。第２被写体４８Ｄは、周辺領域４４Ｄに含まれている。第２被写体４８Ｅは、周辺領域４４Ｅに含まれている。第２被写体４８Ｆは、周辺領域４４Ｆに含まれている。第２被写体４８Ｇは、周辺領域４４Ｇに含まれている。第２被写体４８Ｈは、周辺領域４４Ｈに含まれている。以下では、説明の便宜上、第２被写体４８Ａ～４８Ｈを区別して説明する必要がない場合、「第２被写体４８」と称する。

撮像装置１０では、複数の領域３８に対する測距が行われる。すなわち、撮像装置１０では、撮像装置１０の基準位置（例えば、後述のイメージセンサ５０の撮像面５２Ａ）から第１被写体４６及び複数の第２被写体４８までの距離が算出される。本第１実施形態では、位相差画素（例えば、像面位相差画素）を用いた位相差測距方式による測距が行われる。なお、像面位相差画素を用いた位相差測距方式による測距は、あくまでも一例に過ぎず、ＴＯＦ（Time of Flight）センサを用いたＴＯＦ方式による測距でもよいし、ＬｉＤＡＲ（Light Detection and Ranging）スキャナを用いた測距であってよく、第１被写体４６及び複数の第２被写体４８に対する測距を実現することができる測距方式であれば、如何なる測距方式であってもよい。

一例として図３に示すように、撮像装置本体１８は、イメージセンサ５０を備えている。イメージセンサ５０は、光電変換素子５２を備えている。光電変換素子５２は、撮像面５２Ａを有する。光電変換素子５２は、位相差画素区分領域及び非位相差画素区分領域を有する。位相差画素区分領域は、複数の位相差画素による位相差画素群であり、被写体光を受光して受光量に応じた電気信号として位相差画像データを生成する。位相差画像データは、例えば、測距に用いられる。ここで言う測距とは、例えば、位相差画像データを用いた相関演算が行われることによって得られた演算結果から撮像面５２Ａから被写体までの距離（以下、「被写体距離」とも称する）を算出する処理を指す。非位相差画素区分領域は、複数の非位相差画素による非位相差画素群であり、被写体光を受光して受光量に応じた電気信号として非位相差画像データを生成する。非位相差画像データは、例えば、可視光画像を示す画像データであり、記録用画像として用いられたり、表示用画像（例えば、ライブビュー画像３４（図１参照））として用いられたりする。

交換レンズ２０は、撮像レンズ５４、制御装置５６、及びアクチュエータ５８を備えている。撮像レンズ５４は、対物レンズ５４Ａ及びフォーカスレンズ５４Ｂ等を有する。対物レンズ５４Ａ及びフォーカスレンズ５４Ｂは、被写体側（物体側）から撮像装置本体１８にかけて、光軸ＯＡに沿って、対物レンズ５４Ａ及びフォーカスレンズ５４Ｂの順に配置されている。

制御装置５６は、撮像装置本体１８からの指示に従って交換レンズ２０の全体を制御する。制御装置５６は、例えば、プロセッサ（例えば、ＣＰＵ（Central Processing Unit））、ＮＶＭ（Non-volatile memory）、及びＲＡＭ（Random Access Memory）等を含むコンピュータを有する装置である。なお、ここでは、コンピュータを例示しているが、これは、あくまでも一例に過ぎず、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）、又はＰＬＤ（Programmable Logic Device）を含むデバイスを適用してもよい。また、制御装置５６として、例えば、ハードウェア構成及びソフトウェア構成の組み合わせによって実現される装置を用いてよい。

アクチュエータ５８は、フォーカス用スライド機構（図示省略）及びフォーカス用モータ（図示省略）を備えている。フォーカス用モータは、制御装置５６に接続されており、制御装置５６によってフォーカス用モータの駆動が制御される。フォーカス用スライド機構には、光軸ＯＡに沿ってスライド可能にフォーカスレンズ５４Ｂが取り付けられている。また、フォーカス用スライド機構にはフォーカス用モータが接続されており、フォーカス用スライド機構は、フォーカス用モータの動力を受けて作動することでフォーカスレンズ５４Ｂを光軸ＯＡに沿って移動させる。撮像装置１０では、撮像装置本体１８が被写体距離に応じた合焦位置の演算（以下、「ＡＦ演算」とも称する）を行い、演算して得た合焦位置に向けてフォーカスレンズ５４Ｂを移動させることで、焦点を調節する。ここで、合焦位置とは、ピントが合っている状態でのフォーカスレンズ５４Ｂの光軸ＯＡ上での位置を指す。

撮像装置本体１８は、コントローラ６０、画像メモリ６２、ＵＩ（User Interface）系デバイス６４、外部Ｉ／Ｆ（Interface）６６、光電変換素子ドライバ７０、及び入出力インタフェース７２を備えている。また、イメージセンサ５０は、信号処理回路７４を備えている。

入出力インタフェース７２には、コントローラ６０、画像メモリ６２、ＵＩ系デバイス６４、外部Ｉ／Ｆ６６、光電変換素子ドライバ７０、及び信号処理回路７４が接続されている。また、入出力インタフェース７２には、交換レンズ２０の制御装置５６も接続されている。

コントローラ６０は、プロセッサ７６、ＮＶＭ７８、及びＲＡＭ８０を備えている。プロセッサ７６、ＮＶＭ７８、及びＲＡＭ８０は、バス８２を介して接続されており、バス８２は入出力インタフェース７２に接続されている。

ＮＶＭ７８は、非一時的記憶媒体であり、各種パラメータ及び各種プログラムを記憶している。例えば、ＮＶＭ７８は、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）である。但し、これは、あくまでも一例に過ぎず、他種類の不揮発性のメモリであってもよい。また、ＲＡＭ８０は、各種情報を一時的に記憶し、ワークメモリとして用いられる。

プロセッサ７６は、本開示の技術に係る「プロセッサ」の一例であり、ＣＰＵ及びＧＰＵ（Graphics Processing Unit）を有する。ＧＰＵは、ＣＰＵの制御下で動作し、画像に関する処理の実行を担う。なお、プロセッサ７６は、少なくとも１つのＣＰＵであってもよい。また、プロセッサ７６に、複数のＧＰＵが組み込まれていてもよい。プロセッサ７６は、ＮＶＭ７８から必要なプログラムを読み出し、読み出したプログラムをＲＡＭ８０で実行する。プロセッサ７６は、ＲＡＭ８０上で実行するプログラムに従って撮像装置１０の全体を制御する。図３に示す例では、制御装置５６、画像メモリ６２、ＵＩ系デバイス６４、外部Ｉ／Ｆ６６、光電変換素子ドライバ７０、及び信号処理回路７４がプロセッサ７６によって制御される。

光電変換素子５２は、光電変換素子ドライバ７０の制御下で、撮像面５２Ａによって受光された被写体光を光電変換し、被写体光の光量に応じた電気信号を、被写体光を示すアナログ画像データとして信号処理回路７４に出力する。

信号処理回路７４は、光電変換素子５２から読み出したアナログ画像データをデジタル化することでデジタル画像データ８４を生成する。デジタル画像データ８４には、上述した位相差画像データ及び非位相差画像データが含まれる。

画像メモリ６２には、信号処理回路７４によって生成されたデジタル画像データ８４が格納される。すなわち、プロセッサ７６の制御下で、信号処理回路７４が画像メモリ６２にデジタル画像データ８４を格納する。プロセッサ７６は、画像メモリ６２からデジタル画像データ８４を取得し、取得したデジタル画像データ８４を用いて各種処理を実行する。

ＵＩ系デバイス６４は、ディスプレイ３０を備えており、プロセッサ７６は、ディスプレイ３０に対して各種情報を表示させる。また、ＵＩ系デバイス６４は、受付デバイス８６を備えている。受付デバイス８６は、タッチパネル３２及びハードキー部８８を備えている。ハードキー部８８は、ダイヤル２２、レリーズボタン２４、及び指示キー２８（図１参照）を含む複数のハードキーである。プロセッサ７６は、受付デバイス８６によって受け付けられた各種指示に従って動作する。

外部Ｉ／Ｆ６６は、撮像装置１０の外部に存在する装置（以下、「外部装置」とも称する）との間の各種情報の授受を司る。外部Ｉ／Ｆ６６の一例としては、ＵＳＢ（Universal Serial Bus）インタフェースが挙げられる。ＵＳＢインタフェースには、スマートデバイス、パーソナル・コンピュータ、サーバ、ＵＳＢメモリ、メモリカード、又はプリンタ等の外部装置（図示省略）が直接的又は間接的に接続される。なお、本第１実施形態では、ハードキー部８８がＵＩ系デバイス６４に含まれているが、本開示の技術はこれに限定されず、例えば、ハードキー部８８は、外部Ｉ／Ｆ６６に接続されていてもよい。

ところで、撮像装置１０では、いわゆるゾーンＡＦが行われる。ゾーンＡＦでは、ＡＦの対象とされる領域が複数のゾーンに分けられ、各ゾーンに対して測距が行われ、選択されたゾーンに対して測距結果（すなわち、被写体距離）に基づくピント合わせが行われる。従って、複数のゾーンに分けられていない１つの領域に対するＡＦよりも被写体を捉えやすく、動体を撮像するときにも有効である。

従来のゾーンＡＦでは、中央ゾーンと中央ゾーンを取り囲む複数の周辺ゾーンとのうちの中央ゾーンに対して複数の周辺ゾーンよりも高い重みが付与された状態で、全ゾーンの被写体距離の平均値に基づいてＡＦが行われる。しかし、この場合、ユーザが注目している被写体に対するピント合わせが正しく行われないことがある。また、新たな被写体がゾーンに入ってきたときにピントがぶれる虞もある。ピントがぶれると、ユーザが注目している被写体に対するピント合わせが正しく行われないこととなる。

また、従来のゾーンＡＦの第１の手法としては、中央ゾーンよりも手前の周辺ゾーン（例えば、図１に示す周辺領域４４Ａ～４４Ｃに相当する周辺ゾーン）を優先して、ピント合わせの対象となる被写体を探索する手法が知られている。また、従来のゾーンＡＦの第２の手法としては、中央ゾーン（例えば、図１に示す中央領域４２に相当する中央ゾーン）を優先して、ピント合わせの対象となる被写体を探索する手法が知られている。しかし、第１の手法を用いたとしても、手前の周辺ゾーン以外のゾーンに、ユーザが注目している被写体が入った場合には、ユーザが意図する被写体に対してピントが合わない。また、第２の手法を用いたとしても、中央ゾーン以外のゾーンに、ユーザが注目している被写体が入った場合には、ユーザが意図する被写体に対してピントが合わない。

そこで、このような事情に鑑み、撮像装置１０は、プロセッサ７６によって撮像処理（図４～図１２参照）が行われるように構成されている。一例として図４に示すように、ＮＶＭ７８には、撮像処理プログラム９０が記憶されている。プロセッサ７６は、ＮＶＭ７８から撮像処理プログラム９０を読み出し、読み出した撮像処理プログラム９０をＲＡＭ８０上で実行する。プロセッサ７６は、ＲＡＭ８０上で実行する撮像処理プログラム９０に従って第１撮像制御部７６Ａ、第１算出部７６Ｂ、第１特定部７６Ｃ、第１選択部７６Ｄ、及び表示制御部７６Ｅとして動作することで撮像処理を行う。

なお、第１撮像制御部７６Ａによって行われる処理は、本開示の技術に係る「第１撮像工程」の一例である。また、第１算出部７６Ｂによって行われる処理は、本開示の技術に係る「第１算出工程」の一例である。また、第１特定部７６Ｃによって行われる処理は、本開示の技術に係る「第１特定工程」の一例である。また、第１選択部によって行われる処理は、本開示の技術に係る「第１選択工程」の一例である。

一例として図５に示すように、受付デバイス８６は、ユーザ等からの指示を受け付け、受け付けた指示に従ってライブビュー撮像開始信号を第１撮像制御部７６Ａに出力する。例えば、撮像系の動作モードが設定されると、受付デバイス８６は、ライブビュー撮像開始信号を第１撮像制御部７６Ａに出力する。第１撮像制御部７６Ａは、ライブビュー撮像開始信号が入力されると、光電変換素子ドライバ７０を介してイメージセンサ５０を制御することで、イメージセンサ５０に対してライブビュー撮像を行わせる。

受付デバイス８６は、ユーザ等からの指示を受け付け、受け付けた指示に従って撮像準備指示信号を第１算出部７６Ｂに出力する。例えば、受付デバイス８６は、撮像準備指示を受け付けると、撮像準備指示信号を第１算出部７６Ｂに出力する。第１算出部７６Ｂは、撮像準備指示信号が入力されると、中央領域４２及び複数の周辺領域４４に対する測距を行う。この場合、例えば、第１算出部７６Ｂは、画像メモリ６２からデジタル画像データ８４を取得し、デジタル画像データ８４に含まれる位相差画像データに基づいて、中央領域４２に含まれる第１被写体４６（図２参照）に関する被写体距離である第１距離を算出する。また、例えば、第１算出部７６Ｂは、デジタル画像データ８４に含まれる位相差画像データに基づいて複数の第２距離を算出する。複数の第２距離は、複数の周辺領域４４に含まれる複数の第２被写体４８（図２参照）に関する複数の被写体距離である。

本第１実施形態では、第１被写体４６の複数の箇所に対して測距が行われる。そのため、第１被写体４６について複数の被写体距離が算出される。第１算出部７６Ｂは、第１被写体４６についての複数の被写体距離から、最も短い被写体距離を第１距離として取得する。なお、ここでは、第１被写体４６についての複数の被写体距離のうちの最も短い被写体距離を第１距離としたが、これは、あくまでも一例に過ぎず、第１被写体４６についての代表的な被写体距離を第１距離にすればよい。第１被写体４６についての代表的な被写体距離としては、例えば、第１被写体４６についての複数の被写体距離の平均値、中央値、又は最頻値等が挙げられる。

本第１実施形態では、複数の周辺領域４４の各々について、複数の第２被写体４８の複数の箇所に対して測距が行われる。そのため、複数の第２被写体４８について複数の被写体距離が算出される。第１算出部７６Ｂは、複数の第２被写体４８についての複数の被写体距離から、最も短い被写体距離を第２距離として取得する。なお、ここでは、第２被写体４８についての複数の被写体距離のうちの最も短い被写体距離を第２距離としたが、これは、あくまでも一例に過ぎず、第２被写体４８についての代表的な被写体距離を第２距離にすればよい。第２被写体４８についての代表的な被写体距離としては、例えば、第２被写体４８についての複数の被写体距離の平均値、中央値、又は最頻値等が挙げられる。

表示制御部７６Ｅは、第１算出部７６Ｂによる算出で用いられたデジタル画像データ８４を取得し、取得したデジタル画像データ８４に基づいてライブビュー画像３４を生成する。そして、表示制御部７６Ｅは、ディスプレイに対して、ライブビュー画像３４を表示させ、かつ、ライブビュー画像３４上にＡＦ枠３６を重畳表示させる。なお、以下では、ＡＦ枠３６が重畳表示されたライブビュー画像３４を「ＡＦ枠３６入りのライブビュー画像３４」とも称する。

一例として図６に示すように、第１特定部７６Ｃは、第１算出部７６Ｂから第１距離、複数の第２距離、及びデジタル画像データ８４を取得する。第１特定部７６Ｃは、複数の第２距離の中に第１条件を満たす第２距離が存在するか否かを判定する。例えば、第１条件とは、第２距離が第１距離よりも短いという条件を指す。ここで、複数の第２距離の中に第１条件を満たす第２距離が存在する場合、第１特定部７６Ｃは、デジタル画像データ８４を用いて、複数の第２距離のうちの第１条件を満たす第２距離に対応する第１特定領域９２を複数の周辺領域４４の中から特定する。図６に示す例では、周辺領域４４Ａ～４４Ｄの各々が第１条件を満たす第２距離に対応する第１特定領域９２として示されている。

一例として図７に示すように、第１選択部７６Ｄは、第１算出部７６Ｂからデジタル画像データ８４を取得する。第１選択部７６Ｄは、第１特定部７６Ｃによって複数の第２距離の中に第１条件を満たす第２距離が存在しないと判定された場合（すなわち、複数の第２距離が第１距離以上の場合）、デジタル画像データ８４を用いて、中央領域４２に含まれる第１被写体４６を、合焦させる被写体である第１合焦被写体９４として選択する。

一方、第１特定部７６Ｃによって第１条件を満たす第２距離に対応する第１特定領域９２が特定された場合、一例として図８に示すように、第１選択部７６Ｄは、第１特定部７６Ｃからデジタル画像データ８４を取得する。そして、第１選択部７６Ｄは、複数の周辺領域４４に対しての第１特定領域９２の割合である第１割合を算出する。例えば、第１割合は、第１特定領域９２の個数である。但し、これは、あくまでも一例に過ぎず、複数の周辺領域４４の総面積に対する第１特定領域９２とされた複数の周辺領域４４（図８に示す例では、周辺領域４４Ａ～４４Ｄ）の総面積の割合であってもよく、第１特定領域９２の個数に対応する値であればよい。

第１選択部７６Ｄは、第１割合に基づいて、デジタル画像データ８４を用いて第１被写体４６及び第２被写体４８Ａ～４８Ｈから第１合焦被写体９４を選択する。具体的には、先ず、第１選択部７６Ｄは、第１割合が第１閾値を超過しているかを判定する。例えば、第１閾値とは、上下方向４０において中央領域４２よりも下方に位置する周辺領域４４の個数（ここでは、一例として、周辺領域４４Ａ～４４Ｃの３個）を指す。第１閾値は、本開示の技術に係る「閾値」の一例である。

第１選択部７６Ｄは、第１割合が第１閾値を超過していると判定した場合、第１特定領域９２内の第２被写体４８を第１合焦被写体９４として選択する。すなわち、第１割合が第１閾値を超過している場合は、第１割合が第１閾値以下の場合に比べ、ユーザが第１特定領域９２内の第２被写体４８に注目している可能性が高いと判断されて、第１特定領域９２内の第２被写体４８が第１合焦被写体９４として選択される。

図８に示す例では、第１特定領域９２として特定された周辺領域４４Ｄに含まれる第２被写体４８Ｄが第１合焦被写体９４として選択されている。より詳細に説明すると、周辺領域４４Ｄに含まれる第２被写体４８Ｄである人物１４の被写体距離（すなわち、第２距離）は、中央領域４２に含まれる道路１６の被写体距離（すなわち、第１距離）より短い。また、周辺領域４４Ｂと４４Ｃに含まれる道路１６の被写体距離（すなわち、第２距離）は、中央領域４２に含まれる道路の被写体距離（すなわち、第１距離）より短い。この場合、第１距離よりも短いという第１条件を満たす第２距離に対応する周辺領域４４（すなわち、第１特定領域９２）が４個となり、第１閾値である３個を超える。よって、図８に示す例では、複数の第２距離のうちの最も被写体距離が短い箇所が第１合焦被写体９４として選択されている。図８に示す例では、人物１４の頭部のうちの周辺領域４４Ｄと重なっている箇所が第１合焦被写体９４として選択されている（図８に示す斜線ハッチング箇所を参照）。

なお、ここでは、第１特定領域９２として特定された周辺領域４４Ｄに含まれる第２被写体４８Ｄが第１合焦被写体９４として選択される形態例を挙げているが、これは、あくまでも一例に過ぎずない。例えば、第１特定領域９２に含まれる第２被写体４８に対する被写体距離の中央値、平均値、又は最頻値に位置する箇所が第１合焦被写体９４として選択されてもよい。また、第１選択部７６Ｄは、第１特定領域９２として特定された複数の周辺領域４４間で、被写体距離の中央値を比較し、比較結果に基づいて特定した周辺領域４４内の第２被写体４８を第１合焦被写体９４として選択してもよい。例えば、この場合、第１特定領域９２として特定された周辺領域４４Ａ～４４Ｄのうち、被写体距離の中央値が最も小さい周辺領域４４が第１合焦被写体９４として選択される。ここでは、中央値を例示したが、中央値に代えて、平均値又は最頻値を用いてもよい。

一方、一例として図９に示すように、第１選択部７６Ｄは、第１割合が第１閾値以下（例えば、第１特定領域９２の数が３個以下）であると判定した場合、中央領域４２内の第１被写体４６を第１合焦被写体９４として選択する。すなわち、第１割合が第１閾値以下の場合は、第１割合が第１閾値を超過している場合に比べ、ユーザが注目している可能性がある周辺領域４４の個数が少なく、かつ、ユーザが周辺領域４４よりも中央領域４２を注目している可能性が高いと判断されて、中央領域４２内の第１被写体４６が第１合焦被写体９４として選択される。

このように、第１合焦被写体９４が選択されると、一例として図１０に示すように、第１選択部７６Ｄは、第１合焦被写体９４に関連する情報である第１合焦被写体情報９６を第１撮像制御部７６Ａに出力する。第１合焦被写体情報９６は、第１選択部７６Ｄによって選択された第１合焦被写体９４の位置を特定する位置特定情報を含む。ここで、第１合焦被写体９４の位置とは、第１合焦被写体９４を選択するために用いられたデジタル画像データ８４により示される画像内での第１合焦被写体９４に対応する画素の位置を指す。

第１撮像制御部７６Ａは、第１選択部７６Ｄから入力された第１合焦被写体情報９６に対応する被写体距離を第１算出部７６Ｂから取得する。例えば、第１合焦被写体情報９６に対応する被写体距離とは、第１算出部７６Ｂによって算出された第１距離及び複数の第２距離のうち、第１合焦被写体情報９６に含まれる位置特定情報から特定される画素の位置に対応する第１距離又は第２距離を指す。

なお、ここでは、第１撮像制御部７６Ａによって第１算出部７６Ｂから被写体距離が取得される形態例を挙げて説明しているが、これは、あくまでも一例に過ぎない。例えば、第１合焦被写体９４を選択するために用いられたデジタル画像データ８４により示される画像内での第１合焦被写体９４に対応する被写体距離（第１距離又は第２距離）が第１合焦被写体情報９６に含まれていてもよい。この場合、第１撮像制御部７６Ａは、第１選択部７６Ｄから入力された第１合焦被写体情報９６から被写体距離を取得すればよい。

第１撮像制御部７６Ａは、第１合焦被写体情報９６に対応する被写体距離を用いて合焦位置を算出する。そして、第１撮像制御部７６Ａは、制御装置５６を介してアクチュエータ５８を制御することで、合焦位置にフォーカスレンズ５４Ｂを移動させる。これにより、第１合焦被写体９４に対するピント合わせが実現される。

一方、第１選択部７６Ｄは、第１合焦被写体９４を選択するために用いられたデジタル画像データ８４と第１合焦被写体情報９６を表示制御部７６Ｅに出力する。表示制御部７６Ｅは、デジタル画像データ８４と第１合焦被写体情報９６に基づいてＡＦ枠３６入りのライブビュー画像３４をディスプレイ３０に表示させる。ＡＦ枠３６には、第１選択部７６Ｄによって選択された第１合焦被写体９４が含まれる領域３８が強調表示される。強調表示とは、第１選択部７６Ｄによって選択された第１合焦被写体９４が含まれる領域３８と残りの領域３８とが区別可能な表示を指す。例えば、強調表示は、第１選択部７６Ｄによって選択された第１合焦被写体９４が含まれる領域３８の輪郭の太さ、濃さ、色、又は線種等を残りの領域３８と異ならせることによって実現される。なお、図１０に示す例では、周辺領域４４Ｄが強調表示されている。

第１合焦被写体９４に対してピント合わせが行われ、かつ、受付デバイス８６によって撮像指示が受け付けられると、一例として図１１に示すように、第１撮像制御部７６Ａは、光電変換素子ドライバ７０に対して本露光制御を行う。本露光制御とは、イメージセンサ５０に対して本露光を伴う撮像を行わせる制御を指す。例えば、本露光を伴う撮像とは、撮像面５２Ａに含まれる使用可能な全ての感光画素を対象としたデジタル画像データ８４を得る処理を指す。本露光を伴う撮像には、撮像面５２Ａに含まれる使用可能な全ての感光画素を露光させ、露光された全ての感光画素からアナログ画像データを信号処理回路７４に出力させて、信号処理回路７４に対してデジタル画像データ８４を生成させる処理を含む。

次に、撮像装置１０のプロセッサ７６によって行われる撮像処理の流れの一例を図１２に示すフローチャートを参照しながら説明する。

図１２に示す撮像処理では、先ず、ステップＳＴ１０で、第１撮像制御部７６Ａは、光電変換素子ドライバ７０を制御することで、イメージセンサ５０に対してライブビュー撮像を行わせてデジタル画像データ８４を取得させる。これにより、デジタル画像データ８４は、画像メモリ６２に格納される（図５参照）。ステップＳＴ１０の処理が実行された後、撮像処理は、ステップＳＴ１２へ移行する。

ステップＳＴ１２で、表示制御部７６Ｅは、画像メモリ６２からデジタル画像データ８４を取得し、取得したデジタル画像データ８４に基づいてライブビュー画像３４を生成する。そして、表示制御部７６Ｅは、ＡＦ枠３６入りのライブビュー画像３４をディスプレイ３０に表示させる（図５参照）。ステップＳＴ１２の処理が実行された後、撮像処理は、ステップＳＴ１４へ移行する。

ステップＳＴ１４で、第１算出部７６Ｂは、画像メモリ６２からデジタル画像データ８４を取得し、取得したデジタル画像データ８４に基づいて、第１被写体４６（図２参照）に関する第１距離と、複数の第２被写体４８（図２参照）に関する複数の第２距離を算出する。ステップＳＴ１４の処理が実行された後、撮像処理は、ステップＳＴ１６へ移行する。

ステップＳＴ１６で、第１特定部７６Ｃは、ステップＳＴ１４で算出された第１距離及び複数の第２距離を用いて、複数の第２距離の中に第１条件を満たす第２距離が存在するか否かを判定する（図６参照）。ステップＳＴ１６において、複数の第２距離の中に第１条件を満たす第２距離が存在しない場合は、判定が否定されて、撮像処理は、ステップＳＴ１８へ移行する。ステップＳＴ１６において、複数の第２距離の中に第１条件を満たす第２距離が存在する場合は、判定が肯定されて、撮像処理は、ステップＳＴ２０へ移行する。

ステップＳＴ１８で、第１選択部７６Ｄは、中央領域４２における第１被写体４６（図２参照）を第１合焦被写体９４として選択する（図７及び図９参照）。ステップＳＴ１８の処理が実行された後、撮像処理は、ステップＳＴ２８へ移行する。

ステップＳＴ２０で、第１特定部７６Ｃは、第１条件を満たす第２距離に対応する第１特定領域９２を複数の周辺領域４４から特定する（図６参照）。ステップＳＴ２０の処理が実行された後、撮像処理は、ステップＳＴ２２へ移行する。

ステップＳＴ２２で、第１選択部７６Ｄは、第１割合を算出する（図８参照）。すなわち、第１選択部７６Ｄは、第１特定領域９２が特定されたデジタル画像データ８４を第１特定部７６Ｃから取得し、取得したデジタル画像データ８４に基づいて、複数の周辺領域４４に対しての第１特定領域９２の割合を第１割合として算出する。ステップＳＴ２２の処理が実行された後、撮像処理は、ステップＳＴ２４へ移行する。

ステップＳＴ２４で、第１選択部７６Ｄは、ステップＳＴ２２で算出した第１割合が第１閾値を超過しているか否かを判定する（図８及び図９参照）。ステップＳＴ２４において、第１割合が第１閾値以下の場合は（図９参照）、判定が否定されて、撮像処理は、ステップＳＴ１８へ移行する。ステップＳＴ２４において、第１割合が第１閾値を超過している場合は（図８参照）、判定が肯定されて、撮像処理は、ステップＳＴ２６へ移行する

ステップＳＴ２６で、第１選択部７６Ｄは、第１特定領域９２内の第２被写体４８を第１合焦被写体９４として選択する（図８参照）。ステップＳＴ２６の処理が実行された後、撮像処理は、ステップＳＴ２８へ移行する。

ステップＳＴ２８で、第１撮像制御部７６Ａは、ステップＳＴ１８又はＳＴ２６で選択された第１合焦被写体９４に対してピント合わせを行う（図１０参照）。また、表示制御部７６Ｅは、ＡＦ枠３６入りのライブビュー画像３４をディスプレイ３０に表示させ、かつ、第１合焦被写体９４に対応する領域３８を強調表示させる（図１０参照）。ステップＳＴ２８の処理が実行された後、撮像処理は、ステップＳＴ３０へ移行する。

ステップＳＴ３０で、第１撮像制御部７６Ａは、受付デバイス８６によって撮像指示が受け付けられたか否かを判定する。ステップＳＴ３０において、受付デバイス８６によって撮像指示が受け付けられていない場合は、判定が否定されて、撮像処理は、ステップＳＴ１０へ移行する。ステップＳＴ３０において、受付デバイス８６によって撮像指示が受け付けられた場合は、判定が肯定されて、撮像処理は、ステップＳＴ３２へ移行する。

ステップＳＴ３２で、第１撮像制御部７６Ａは、光電変換素子ドライバ７０に対して本露光制御を行うことで、イメージセンサ５０に対して本露光を伴う撮像を行わせる。これにより、画像メモリ６２には、本露光を伴う撮像が行われることによって得られたデジタル画像データ８４が格納される。ステップＳＴ３２の処理が実行された後、撮像処理は、ステップＳＴ３４へ移行する。

ステップＳＴ３４で、第１撮像制御部７６Ａは、撮像処理を終了させる条件（以下、「撮像処理終了条件」と称する）を満足したか否かを判定する。撮像処理終了条件の第１例としては、撮像処理を終了させる指示が受付デバイス８６によって受け付けられた、という条件が挙げられる。撮像処理終了条件の第２例としては、受付デバイス８６によって撮像指示が受け付けられることなく一定時間（例えば、数十秒）が経過した、という条件が挙げられる。ステップＳＴ３４において、撮像処理終了条件を満足していない場合は、判定が否定されて、撮像処理は、ステップＳＴ１０へ移行する。ステップＳＴ３４において、撮像処理終了条件を満足した場合は、判定が肯定されて、撮像処理が終了する。

以上説明したように、撮像装置１０では、複数の領域３８に含まれる第１被写体４６及び第２被写体４８Ａ～４８Ｈが撮像される。また、第１被写体４６に関する被写体距離である第１距離と第２被写体４８Ａ～４８Ｈに関する複数の被写体距離である複数の第２距離とが算出される（図５参照）。また、複数の第２距離のうちの第１条件を満たす第２距離に対応する第１特定領域９２が複数の周辺領域４４の中から特定される（図６参照）。そして、複数の周辺領域４４に対しての第１特定領域９２の割合が第１割合として算出される（図８及び図９参照）。

ここで、例えば、第１割合が大きければ（例えば、第１割合が第１閾値を超過していれば）、第１特定領域９２内の第２被写体４８が中央領域４２内の第１被写体４６よりもユーザによって注目されている可能性が高いと判断される。一方、第１割合が小さければ（例えば、第１割合が第１閾値以下であれば）、複数の周辺領域４４にはユーザによって注目されている第２被写体４８が存在していない可能性が高いと判断される。そのため、第１割合が大きければ、第１被写体４６に対してよりも、第１特定領域９２内の第２被写体４８に対してピント合わせが行われた方がユーザの意図に合ったピント合わせが実現され易くなる。逆に、第１割合が小さければ、第１特定領域９２内の第２被写体４８に対してよりも、第１被写体４６に対してピント合わせが行われた方がユーザの意図に合ったピント合わせが実現され易くなる。よって、撮像装置１０では、第１割合に基づいて、第１被写体４６及び第１特定領域９２内の第２被写体４８から、合焦させる被写体である第１合焦被写体９４が選択される（図７～図９参照）。

これにより、ユーザが注目している被写体に対してピントを合わせ易くすることができる。例えば、ユーザが第２被写体４８よりも第１被写体４６を注目している可能性が高い場合には、第１被写体４６に対してピント合わせを行うことができ、逆に、ユーザが第１被写体４６よりも第２被写体４８を注目している可能性が高い場合には、ユーザが注目している第２被写体４８（すなわち、第１特定領域９２内の第２被写体４８）に対してピント合わせを行うことができる。換言すると、これは、ユーザが注目していない被写体にピントを合わせ難くすることを意味する。

また、撮像装置１０では、複数の第２距離のうちの第１距離よりも短い第２距離に対応する第１特定領域９２が複数の周辺領域４４の中から特定される（図６参照）。これにより、中央領域４２内の第１被写体４６に関する被写体距離よりも被写体距離が短い周辺領域４４内の第２被写体４８に対してピント合わせが行われる。従って、ユーザが注目している被写体が中央領域４２内の第１被写体４６よりも手前側（ユーザに近い側）に存在している場合、ユーザが注目している被写体に対してピントを合わせ易くすることができる。

また、撮像装置１０では、第１特定領域９２の個数（図７、図８及び図９参照）が、上下方向４０において中央領域４２よりも下方に位置する周辺領域４４Ａ～４４Ｃの個数に対応する第１閾値（すなわち、３）以下の場合、ユーザによって注目されている第２被写体４８が第１特定領域９２に存在していない可能性が高いと判断される。逆に、第１特定領域９２の個数が、第１閾値を超えている場合、ユーザによって注目されている第２被写体４８が第１特定領域９２に存在している可能性が高いと判断される。そのため、撮像装置１０では、第１特定領域９２の個数が第１閾値を超えている場合に、第１特定領域９２内の第２被写体４８が第１合焦被写体９４として選択される。よって、ユーザが第１特定領域９２内の第２被写体４８を注目している場合に、ユーザが注目している第２被写体４８に対してピントを合わせ易くすることができる。

また、撮像装置１０では、周辺領域４４Ａ～４４Ｈに対応する複数の第２距離が中央領域４２に対応する第１距離よりも長い場合、中央領域４２内の第１被写体４６が周辺領域４４Ａ～４４Ｈ内の第２被写体４８Ａ～４８Ｈよりもユーザが注目している可能性が高いと判断される。そのため、撮像装置１０では、周辺領域４４Ａ～４４Ｈに対応する複数の第２距離が中央領域４２に対応する第１距離よりも長い場合、中央領域４２内の第１被写体４６が第１合焦被写体９４として選択される。よって、ユーザが中央領域４２内の第１被写体４６を注目している場合に、ユーザが注目している第１被写体４６に対してピントを合わせ易くすることができる。

なお、上記第１実施形態では、隣接する４個の周辺領域４４Ａ～４４Ｄの各々が第１特定領域９２として特定される形態例を挙げて説明したが（図６参照）、これは、あくまでも一例に過ぎず、本開示の技術はこれに限定されない。例えば、隣接していない周辺領域４４が第１特定領域９２として特定されるようにしてもよい。図１３に示す例では、第１特定部７６Ｃによって周辺領域４４Ａ～４４Ｃ及び４４Ｈの各々が第１特定領域９２として特定されている。第１特定領域９２として特定された周辺領域４４Ｈには第２被写体４８Ｈの一部として鳥９８が含まれている。

このように、第１特定領域９２として特定された周辺領域４４Ｈが、第１特定領域９２として特定された他の周辺領域４４（図１３に示す例では、周辺領域４４Ａ～４４Ｃ）と隣接していなくても、第１特定領域９２の個数は“４”と判断される。そして、第１特定領域９２の個数の“４”は、第１割合として用いられ、第１閾値と比較される。そして、上記実施形態と同様の条件を満たした場合、第１特定領域９２内の第２被写体４８に関する最も短い被写体距離の箇所が第１合焦被写体９４として選択される。

［第２実施形態］
上記第１実施形態では、プロセッサ７６によって撮像処理プログラム９０（図４参照）に従って撮像処理が行われる形態例を挙げて説明したが、本第２実施形態では、プロセッサ７６によって撮像処理プログラム１００（図１４参照）に従って撮像処理が行われる場合について説明する。なお、本第２実施形態では、上記第１実施形態と同様の構成要素については同一の符号を付して、その説明を省略し、上記第１実施形態と異なる箇所を中心に説明する。

一例として図１４に示すように、ＮＶＭ７８には、撮像処理プログラム１００が記憶されている。プロセッサ７６は、ＮＶＭ７８から撮像処理プログラム１００を読み出し、読み出した撮像処理プログラム１００をＲＡＭ８０上で実行する。プロセッサ７６は、ＲＡＭ８０上で実行する撮像処理プログラム１００に従って第１撮像制御部７６Ａ、第１算出部７６Ｂ、第１特定部７６Ｃ、第１選択部７６Ｄ、表示制御部７６Ｅ、第２撮像制御部７６Ｆ、及び第２選択部７６Ｇとして動作することで、本第２実施形態に係る撮像処理を行う。

なお、第２撮像制御部７６Ｆによって行われる処理は、本開示の技術に係る「第２撮像工程」の一例である。また、第２選択部７６Ｇによって行われる処理は、本開示の技術に係る「第２選択工程」の一例である。

一例として図１５に示すように、第１撮像制御部７６Ａの制御下で１フレーム分のライブビュー撮像が終了した場合、第２撮像制御部７６Ｆは、次のフレームのライブビュー撮像を行うタイミング（以下、「ライブビュー撮像タイミング」とも称する）が到来したか否かを判定する。第２撮像制御部７６Ｆは、ライブビュー撮像タイミングが到来したと判定した場合、イメージセンサ５０に対してライブビュー撮像を行わせる。これにより、上記第１実施形態と同様に、第１被写体４６及び第２被写体４８Ａ～４８Ｈ（図２参照）が撮像され、画像メモリ６２には、１フレーム分のライブビュー画像を示すデジタル画像データ８４が格納される。そして、上記第１実施形態と同様の要領で、第１算出部７６Ｂは、デジタル画像データ８４に基づいて第１距離及び複数の第２距離を算出する。

このように、第１算出部７６Ｂによって第１距離及び複数の第２距離が算出されると、一例として図１６に示すように、第２選択部７６Ｇは、第１算出部７６Ｂから第１距離及び複数の第２距離を取得する。第２選択部７６Ｇは、第１算出部７６Ｂから取得した第１距離及び複数の第２距離に基づいて各領域３８、すなわち、中央領域４２に含まれる第１被写体４６及び周辺領域４４Ａ～４４Ｈに含まれる第２被写体４８Ａ～４８Ｈの合焦位置を予測する。

そして、第２選択部７６Ｇは、予測した複数の合焦位置（すなわち、第１被写体４６及び第２被写体４８Ａ～４８Ｈに対する複数の合焦位置）のうち、合焦位置間の距離が現在の合焦位置から最短距離の合焦位置に対応する被写体を第２合焦被写体１０２として選択する。図１６に示す例では、第２被写体４８Ａの複数の箇所に対して行われた測距の結果である複数の被写体距離のうちの最も短い被写体距離である第２距離に基づく合焦位置に対応する箇所（図１６に示す例では、人物１４のうちの周辺領域４４Ａと重なっている箇所）が第２合焦被写体１０２として選択されている。

このように、第２合焦被写体１０２が選択されると、一例として図１７に示すように、第２選択部７６Ｇは、第２合焦被写体１０２に関連する情報である第２合焦被写体情報１０４を第２撮像制御部７６Ｆに出力する。第２合焦被写体情報１０４は、第２選択部７６Ｇによって選択された第２合焦被写体１０２の位置を特定する位置特定情報を含む。ここで、第２合焦被写体１０２の位置とは、第２合焦被写体１０２を選択するために用いられたデジタル画像データ８４により示される画像内での第２合焦被写体１０２に対応する画素の位置を指す。

第２撮像制御部７６Ｆは、第２選択部７６Ｇから入力された第２合焦被写体情報１０４に対応する被写体距離を第１算出部７６Ｂから取得する。例えば、第２合焦被写体情報１０４に対応する被写体距離とは、第１算出部７６Ｂによって算出された第１距離及び複数の第２距離のうち、第２合焦被写体情報１０４に含まれる位置特定情報から特定される画素の位置に対応する第１距離又は第２距離を指す。

なお、ここでは、第２撮像制御部７６Ｆによって第１算出部７６Ｂから被写体距離が取得される形態例を挙げて説明しているが、これは、あくまでも一例に過ぎない。例えば、第２合焦被写体１０２を選択するために用いられたデジタル画像データ８４により示される画像内での第２合焦被写体１０２に対応する被写体距離（第１距離又は第２距離）が第２合焦被写体情報１０４に含まれていてもよい。この場合、第２撮像制御部７６Ｆは、第２選択部７６Ｇから入力された第２合焦被写体情報１０４から被写体距離を取得すればよい。

第２撮像制御部７６Ｆは、第２合焦被写体情報１０４に対応する被写体距離を用いて合焦位置を算出する。そして、第２撮像制御部７６Ｆは、制御装置５６を介してアクチュエータ５８を制御することで、合焦位置にフォーカスレンズ５４Ｂを移動させる。これにより、第２合焦被写体１０２に対するピント合わせが実現される。

一方、第２選択部７６Ｇは、第２合焦被写体１０２を選択するために用いられたデジタル画像データ８４と第２合焦被写体情報１０４を表示制御部７６Ｅに出力する。表示制御部７６Ｅは、デジタル画像データ８４と第２合焦被写体情報１０４に基づいてＡＦ枠３６入りのライブビュー画像３４をディスプレイ３０に表示させる。上記第１実施形態と同様の要領で、ＡＦ枠３６には、第２選択部７６Ｇによって選択された第２合焦被写体１０２が含まれる領域３８が強調表示される。図１７に示す例では、周辺領域４４Ａが強調表示されている。

次に、撮像装置１０のプロセッサ７６によって行われる本第２実施形態に係る撮像処理の流れの一例を図１８Ａ及び図１８Ｂに示すフローチャートを参照しながら説明する。

なお、ここでは、図１２に示すフローチャートに示される処理と同一の処理を行うステップについては、図１２に示すフローチャートと同一のステップ番号を付し、説明を省略する。図１８Ａ及び図１８Ｂに示す撮像処理は、図１２に示す撮像処理に比べ、ステップＳＴ３０の処理に代えてステップＳＴ３０Ａの処理が適用されている点、及び、ステップＳＴ３６～ステップＳＴ５０の処理が追加されている点が異なる。

図１８Ａに示すステップＳＴ３０Ａで、第１撮像制御部７６Ａは、受付デバイス８６によって撮像指示が受け付けられたか否かを判定する。ステップＳＴ３０Ａにおいて、受付デバイス８６によって撮像指示が受け付けられた場合は、判定が肯定されて、撮像処理は、ステップＳＴ３２へ移行する。ステップＳＴ３０Ａにおいて、受付デバイス８６によって撮像指示が受け付けられていない場合は、判定が否定されて、撮像処理は、図１８Ｂに示すステップＳＴ３６へ移行する。

図１８Ｂに示すステップＳＴ３６で、第２撮像制御部７６Ｆは、ライブビュー撮像タイミングが到来したか否かを判定する。ステップＳＴ３６において、ライブビュー撮像タイミングが到来していない場合は、判定が否定されて、撮像処理は、ステップＳＴ４８へ移行する。ステップＳＴ３６において、ライブビュー撮像タイミングが到来した場合は、判定が肯定されて、撮像処理は、ステップＳＴ３８へ移行する。

ステップＳＴ３８で、第２撮像制御部７６Ｆは、光電変換素子ドライバ７０を制御することで、イメージセンサ５０に対してライブビュー撮像を行わせてデジタル画像データ８４を取得させる。これにより、デジタル画像データ８４は、画像メモリ６２に格納される（図１５参照）。ステップＳＴ３８の処理が実行された後、撮像処理は、ステップＳＴ４０へ移行する。

ステップＳＴ４０で、第１算出部７６Ｂは、画像メモリ６２からデジタル画像データ８４を取得し、取得したデジタル画像データ８４に基づいて、第１被写体４６（図２参照）に関する第１距離と、複数の第２被写体４８（図２参照）に関する複数の第２距離を算出する。ステップＳＴ４０の処理が実行された後、撮像処理は、ステップＳＴ４２へ移行する。

ステップＳＴ４２で、第２選択部７６Ｇは、ステップＳＴ４０で算出された第１距離及び複数の第２距離に基づいて、各領域３８（図１及び図２参照）、すなわち、中央領域４２に含まれる第１被写体４６及び周辺領域４４Ａ～４４Ｈに含まれる第２被写体４８Ａ～４８Ｈの合焦位置を予測する。ステップＳＴ４２の処理が実行された後、撮像処理は、ステップＳＴ４４へ移行する。

ステップＳＴ４４で、第２選択部７６Ｇは、ステップＳＴ４２で予測した複数の合焦位置（すなわち、第１被写体４６及び第２被写体４８Ａ～４８Ｈに対する複数の合焦位置）のうち、合焦位置間の距離が現在の合焦位置から最短距離の合焦位置に対応する被写体を第２合焦被写体１０２として選択する。ステップＳＴ４４の処理が実行された後、撮像処理は、ステップＳＴ４６へ移行する。

ステップＳＴ４６で、第２撮像制御部７６Ｆは、ステップＳＴ４４で選択された第２合焦被写体１０２に対してピント合わせを行う（図１７参照）。また、表示制御部７６Ｅは、ＡＦ枠３６入りのライブビュー画像３４をディスプレイ３０に表示させ、かつ、第２合焦被写体１０２に対応する領域３８を強調表示させる（図１７参照）。ステップＳＴ４６の処理が実行された後、撮像処理は、ステップＳＴ４８へ移行する。

ステップＳＴ４８で、第２撮像制御部７６Ｆは、受付デバイス８６によって撮像指示が受け付けられたか否かを判定する。ステップＳＴ４８において、受付デバイス８６によって撮像指示が受け付けられた場合は、判定が肯定されて、撮像処理は、ステップＳＴ３６へ移行する。ステップＳＴ４８において、受付デバイス８６によって撮像指示が受け付けられていない場合は、判定が否定されて、撮像処理は、ステップＳＴ５０へ移行する。

ステップＳＴ５０で、第２撮像制御部７６Ｆは、光電変換素子ドライバ７０に対して本露光制御を行うことで、イメージセンサ５０に対して本露光を伴う撮像を行わせる。これにより、画像メモリ６２には、本露光を伴う撮像が行われることによって得られたデジタル画像データ８４が格納される。ステップＳＴ５０の処理が実行された後、撮像処理は、図１８Ａに示すステップＳＴ３４へ移行する。

以上説明したように、本第２実施形態に係る撮像装置１０では、撮像処理に含まれるステップＳＴ１０（図１８Ａ参照）で１フレーム分のライブビュー撮像が行われた後に、ステップＳＴ３８（図１８Ｂ参照）で次の１フレーム分のライブビュー撮像が行われる。１フレーム分のライブビュー撮像が行われた後に、ステップＳＴ３８で次の１フレーム分のライブビュー撮像が行われるということは、第１合焦被写体９４に対してピント合わせが行われた状態（図１８ＡのステップＳＴ２８参照）で、次の１フレーム分のライブビュー撮像が行われるということである。現時点でピントが合っている被写体は、ユーザによって注目されている被写体である可能性が高い。現時点でピントが合っている被写体は、次のフレームでは、１つ前のフレームと合焦位置間の距離が近い可能性が高い。

そこで、本第２実施形態に係る撮像装置１０では、ステップＳＴ３８で撮像された第１被写体４６及び第２被写体４８Ａ～４８Ｈから、第１合焦被写体９４と合焦位置間の距離が近い被写体が、合焦させる第２合焦被写体１０２として選択される。具体的には、ステップＳＴ３８で撮像された第１被写体４６及び第２被写体４８Ａ～４８Ｈのうち、第１合焦被写体９４と合焦位置間の距離が最も近い被写体が第２合焦被写体１０２として選択される。そして、選択された第２合焦被写体１０２に対してピント合わせが行われる（図１８ＢのステップＳＴ４６参照）。これにより、ユーザによって注目されている被写体に対するピント合わせを、フレームを跨いで継続することができる。

なお、上記第２実施形態では、第１合焦被写体９４から第２合焦被写体１０２へのピント合わせの引き継ぎが１フレーム間隔で行われるが、これは、あくまでも一例に過ぎず、第１合焦被写体９４から第２合焦被写体１０２へのピント合わせの引き継ぎが数フレーム～数十フレーム間隔で行われてもよい。また、ステップＳＴ３６～ステップＳＴ４８の処理が１フレーム間隔で行われるが、これも、数フレーム～数十フレーム間隔で行われてもよい。

また、上記第２実施形態では、ステップＳＴ３８で撮像された第１被写体４６及び第２被写体４８Ａ～４８Ｈから、第１合焦被写体９４と合焦位置間の距離が近い被写体が第２合焦被写体１０２として選択される形態例を挙げて説明したが、これは、あくまでも一例に過ぎない。例えば、ステップＳＴ３８で撮像された第１被写体４６及び第２被写体４８Ａ～４８Ｈから、前後するフレームを重ねた場合の２次元平面上での距離が第１合焦被写体９４と近い被写体（例えば、最短距離の被写体）が第２合焦被写体１０２として選択されるようにしてもよい。また、例えば、ステップＳＴ３８で撮像された第１被写体４６及び第２被写体４８Ａ～４８Ｈから、被写体距離が第１合焦被写体９４と近い被写体（例えば、最短距離の被写体）が第２合焦被写体１０２として選択されるようにしてもよい。

また、上記第２実施形態では、予測した複数の合焦位置のうち、合焦位置間の距離が現在の合焦位置から最短距離の合焦位置に対応する被写体が第２合焦被写体１０２として選択される形態例が挙げられているが、本開示の技術はこれに限定されない。例えば、予測された複数の合焦位置のうち、合焦位置間の距離が現在の合焦位置から既定距離（例えば、数ミリメートル）未満の範囲内で最短距離の合焦位置に対応する被写体が第２合焦被写体１０２として選択されるようにしてもよい。

この場合、例えば、図１９に示すように、撮像処理においてステップＳＴ４２の処理とステップＳＴ４４の処理との間にステップＳＴ４３の処理を挿入すればよい。ステップＳＴ４３で、第２選択部７６Ｇは、ステップＳＴ４２で予測した複数の合焦位置のうち、合焦位置間の距離が現在の合焦位置（例えば、１つ前のフレームの第１合焦被写体９４又は第２合焦被写体１０２に対応する合焦位置）から既定距離未満の範囲内で最短距離の合焦位置に対応する被写体が存在するか否かを判定する。ステップＳＴ４３において、ステップＳＴ４２で予測した複数の合焦位置のうち、合焦位置間の距離が現在の合焦位置から既定距離未満の範囲内で最短距離の合焦位置に対応する被写体が存在しない場合は、判定が否定されて、撮像処理は、ステップＳＴ４８へ移行する。ステップＳＴ４３において、ステップＳＴ４２で予測した複数の合焦位置のうち、合焦位置間の距離が現在の合焦位置から既定距離未満の範囲内で最短距離の合焦位置に対応する被写体が存在する場合は、判定が肯定されて、撮像処理は、ステップＳＴ４４へ移行する。

このように、撮像処理においてステップＳＴ４３の処理が行われることによって、ステップＳＴ４２で予測された複数の合焦位置のうち、合焦位置間の距離が現在の合焦位置から既定距離を超える範囲で最短距離の合焦位置に対応する被写体は第２合焦被写体１０２として選択されない。つまり、現在の合焦位置から著しく離れた合焦位置に対応する被写体は、ユーザによって注目されている可能性が低い被写体であると判断され、第２合焦被写体１０２として選択されない。従って、ユーザが注目していない被写体に対してピント合わせが行われることを抑制することができる。

［第３実施形態］
上記第１及び第２実施形態では、３×３の領域３８からなるＡＦ枠３６を用いた形態例について説明したが、本第３実施形態では、５×５の領域３９からなるＡＦ枠４１（図２０参照）を用いた形態例について説明する。なお、本第３実施形態では、上記第１及び第２実施形態と同様の構成要素については同一の符号を付して、その説明を省略し、上記第１及び第２実施形態と異なる箇所を中心に説明する。

一例として図２０に示すように、本第３実施形態に係る撮像装置１０は、上記実施形態で説明したＡＦ枠３６に代えてＡＦ枠４１を有する。ＡＦ枠４１は、ＡＦ枠３６よりも一回り大きな矩形状の枠である。ＡＦ枠４１には、複数の領域３９が含まれている。複数の領域３９は、本開示の技術に係る「複数の第３領域」の一例である。

複数の領域３９は、５×５のマトリクス状に配置されている。ＡＦ枠４１に含まれる複数の領域３９は、中央領域４２及び複数の周辺領域４３からなる。複数の周辺領域４３は、周辺領域４３Ａ～４３Ｘである。周辺領域４３Ａ～４３Ｘの各々には、互いに異なる第３被写体が含まれている。周辺領域４３Ａ～４３Ｘには、周辺領域４４Ａ～４４Ｈが周辺領域４３Ｇ、４３Ｈ、４３Ｉ、４３Ｌ、４３Ｍ、４３Ｐ、４３Ｑ及び４３Ｒとして含まれている。すなわち、複数の領域３９には、３×３のマトリクス状態に配置された複数の領域３８（図１及び図２参照）が、３×３のマトリクス状態に配置された複数の領域３９（すなわち、中央領域４２及び周辺領域４３Ｇ、４３Ｈ、４３Ｉ、４３Ｌ、４３Ｍ、４３Ｐ、４３Ｑ及び４３Ｒ）として含まれている。

ＡＦ枠４１では、５×５の領域３９と３×３の領域３９との２段階で、合焦させる被写体が選択される。５×５の領域３９と３×３の領域３９との２段階で、合焦させる被写体が選択されるようにするために、一例として図２１に示すように、ＮＶＭ７８には、撮像処理プログラム１０６が記憶されている。プロセッサ７６は、ＮＶＭ７８から撮像処理プログラム１０６を読み出し、読み出した撮像処理プログラム１０６をＲＡＭ８０上で実行する。プロセッサ７６は、ＲＡＭ８０上で実行する撮像処理プログラム１０６に従って第１撮像制御部７６Ａ、第１算出部７６Ｂ、第１特定部７６Ｃ、第１選択部７６Ｄ、表示制御部７６Ｅ、第２撮像制御部７６Ｆ、第２選択部７６Ｇ、第２算出部７６Ｈ、第２特定部７６Ｉ、及び第３選択部７６Ｊとして動作することで、本第３実施形態に係る撮像処理を行う。

なお、第２算出部７６Ｈによって行われる処理は、本開示の技術に係る「第２算出工程」の一例である。また、第２特定部７６Ｉによって行われる処理は、本開示の技術に係る「第２特定工程」の一例である。また、第３選択部７６Ｊによって行われる処理は、本開示の技術に係る「第３選択工程」の一例である。

一例として図２２に示すように、受付デバイス８６は、撮像準備指示を受け付けると、撮像準備指示信号を第２算出部７６Ｈに出力する。第２算出部７６Ｈは、ＡＦ枠４１内の全領域３９に対する距離算出処理を行う。距離算出処理は、中央領域４２及び全ての周辺領域４３に対する測距を行う処理である。この場合、例えば、第２算出部７６Ｈは、上記第１実施形態と同様の要領で、第１距離を算出する。また、例えば、第２算出部７６Ｈは、第１距離を算出するのと同様の要領で、デジタル画像データ８４に含まれる位相差画像データに基づいて複数の第３距離を算出する。複数の第３距離は、ＡＦ枠４１内の全ての周辺領域４３に含まれる全ての第３被写体（図２０参照）に関する複数の被写体距離である。

本第３実施形態では、周辺領域４３内の第３被写体の複数の箇所に対して測距が行われる。そのため、周辺領域４３内の第３被写体について複数の被写体距離が算出される。第２算出部７６Ｈは、周辺領域４３内の第３被写体についての複数の被写体距離から、最も短い被写体距離を第３距離として取得する。なお、ここでは、周辺領域４３内の第３被写体についての複数の被写体距離のうちの最も短い被写体距離を第３距離としたが、これは、あくまでも一例に過ぎず、周辺領域４３内の第３被写体についての代表的な被写体距離を第３距離にすればよい。周辺領域４３内の第３被写体についての代表的な被写体距離としては、例えば、周辺領域４３内の第３被写体についての複数の被写体距離の平均値、中央値、又は最頻値等が挙げられる。

表示制御部７６Ｅは、第２算出部７６Ｈによる算出で用いられたデジタル画像データ８４を取得し、取得したデジタル画像データ８４に基づいてライブビュー画像３４を生成する。そして、表示制御部７６Ｅは、ディスプレイに対して、ライブビュー画像３４を表示させ、かつ、ライブビュー画像３４上にＡＦ枠４１を重畳表示させる。なお、以下では、ＡＦ枠４１が重畳表示されたライブビュー画像３４を「ＡＦ枠４１入りのライブビュー画像３４」とも称する。

一例として図２３に示すように、第２算出部７６Ｈは、ＡＦ枠４１内の全領域３９に対する距離算出処理が成功したか否か（すなわち、第１被写体４６に関する第１距離及び複数の第３被写体に関する複数の第３距離を算出したか否か）を判定する。ＡＦ枠４１内の全領域３９に対する距離算出処理が成功した場合、第２特定部７６Ｉは、第２算出部７６Ｈから第１距離、複数の第３距離、及びデジタル画像データ８４を取得する。第２特定部７６Ｉは、複数の第３距離の中に第２条件を満たす第３距離が存在するか否かを判定する。例えば、第２条件とは、第３距離が第１距離よりも短いという条件を指す。ここで、複数の第３距離の中に第２条件を満たす第３距離が存在する場合、第２特定部７６Ｉは、デジタル画像データ８４を用いて、複数の第３距離のうちの第２条件を満たす第３距離に対応する第２特定領域１０８を複数の周辺領域４３の中から特定する。図２３に示す例では、周辺領域４３Ａ～４３Ｋの各々が第２条件を満たす第３距離に対応する第２特定領域１０８として示されている。

一方、ＡＦ枠４１内の全領域３９に対する距離算出処理が失敗した場合（すなわち、第１被写体４６に関する第１距離及び複数の第３被写体に関する複数の第３距離のうちの少なくとも１つが第２算出部７６Ｈによって算出されなかった場合）、第２特定部７６Ｉによる第２特定領域１０８の特定は行われない。そして、上記第１又は第２実施形態と同様の撮像処理（すなわち、３×３の領域３９を用いた撮像処理）がプロセッサ７６によって実行される。

第２特定部７６Ｉによって第２条件を満たす第３距離に対応する第２特定領域１０８が特定された場合、一例として図２４に示すように、第３選択部７６Ｊは、第２特定部７６Ｉからデジタル画像データ８４を取得する。そして、第３選択部７６Ｊは、複数の周辺領域４３に対しての第２特定領域１０８の割合である第２割合を算出する。例えば、第２割合は、第２特定領域１０８の個数である。但し、これは、あくまでも一例に過ぎず、複数の周辺領域４３の総面積に対する第２特定領域１０８とされた複数の周辺領域４３（図８に示す例では、周辺領域４３Ａ～４３Ｋ）の総面積の割合であってもよく、第２特定領域１０８の個数に対応する値であればよい。

第３選択部７６Ｊは、第２割合に基づいて、デジタル画像データ８４を用いて第１被写体４６及び第３被写体から、合焦させる第３合焦被写体１１０を選択する。具体的には、先ず、第３選択部７６Ｊは、第２割合が第２閾値を超過しているかを判定する。例えば、第２閾値とは、上下方向４０において中央領域４２よりも下方に位置する周辺領域４３の個数（ここでは、一例として、周辺領域４３Ａ～４３Ｊの１０個）を指す。第３選択部７６Ｊは、第２割合が第２閾値を超過していると判定した場合、第２特定領域１０８内の第３被写体を第３合焦被写体１１０として選択する。すなわち、第２割合が第２閾値を超過している場合は、第２割合が第２閾値以下の場合に比べ、ユーザが第２特定領域１０８内の第３被写体に注目している可能性が高いと判断されて、第２特定領域１０８内の第３被写体が第３合焦被写体１１０として選択される。

一方、一例として図２５に示すように、第３選択部７６Ｊは、第２割合が第２閾値以下であると判定した場合、中央領域４２内の第１被写体４６を第３合焦被写体１１０として選択する。すなわち、第２割合が第２閾値以下の場合は、第２割合が第２閾値を超過している場合に比べ、ユーザが注目している可能性がある周辺領域４３の個数が少なく、かつ、ユーザが周辺領域４３よりも中央領域４２を注目している可能性が高いと判断されて、中央領域４２内の第１被写体４６が第３合焦被写体１１０として選択される。

このように、第３合焦被写体１１０が選択されると、一例として図２６に示すように、第３選択部７６Ｊは、第３合焦被写体１１０に関連する情報である第３合焦被写体情報１１２を第１撮像制御部７６Ａに出力する。第３合焦被写体情報１１２は、第３選択部７６Ｊによって選択された第３合焦被写体１１０の位置を特定する位置特定情報を含む。ここで、第３合焦被写体１１０の位置とは、第３合焦被写体１１０を選択するために用いられたデジタル画像データ８４により示される画像内での第３合焦被写体１１０に対応する画素の位置を指す。

第１撮像制御部７６Ａは、第３選択部７６Ｊから入力された第３合焦被写体情報１１２に対応する被写体距離を第２算出部７６Ｈから取得する。例えば、第３合焦被写体情報１１２に対応する被写体距離とは、第２算出部７６Ｈによって算出された第１距離及び複数の第３距離のうち、第３合焦被写体情報１１２に含まれる位置特定情報から特定される画素の位置に対応する第１距離又は第３距離を指す。

なお、ここでは、第１撮像制御部７６Ａによって第２算出部７６Ｈから被写体距離が取得される形態例を挙げて説明しているが、これは、あくまでも一例に過ぎない。例えば、第３合焦被写体１１０を選択するために用いられたデジタル画像データ８４により示される画像内での第３合焦被写体１１０に対応する被写体距離（第１距離又は第２距離）が第３合焦被写体情報１１２に含まれていてもよい。この場合、第１撮像制御部７６Ａは、第３選択部７６Ｊから入力された第３合焦被写体情報１１２から被写体距離を取得すればよい。

第１撮像制御部７６Ａは、第３合焦被写体情報１１２に対応する被写体距離を用いて合焦位置を算出する。そして、第１撮像制御部７６Ａは、制御装置５６を介してアクチュエータ５８を制御することで、合焦位置にフォーカスレンズ５４Ｂを移動させる。これにより、第３合焦被写体１１０に対するピント合わせが実現される。

一方、第３選択部７６Ｊは、第３合焦被写体１１０を選択するために用いられたデジタル画像データ８４と第３合焦被写体情報１１２を表示制御部７６Ｅに出力する。表示制御部７６Ｅは、デジタル画像データ８４と第３合焦被写体情報１１２に基づいてＡＦ枠４１入りのライブビュー画像３４をディスプレイ３０に表示させる。ＡＦ枠４１には、第３選択部７６Ｊによって選択された第３合焦被写体１１０が含まれる領域３９が強調表示される。図２６に示す例では、周辺領域４３Ｋが強調表示されている。なお、第３合焦被写体１１０に対してピント合わせが行われ、かつ、受付デバイス８６によって撮像指示が受け付けられると、第１撮像制御部７６Ａによって光電変換素子ドライバ７０に対して本露光制御が行われる（図１１参照）。

一例として図２７に示すように、第１撮像制御部７６Ａの制御下で１フレーム分のライブビュー撮像が終了した場合、第２撮像制御部７６Ｆは、ライブビュー撮像タイミングが到来したか否かを判定する。第２撮像制御部７６Ｆは、ライブビュー撮像タイミングが到来したと判定した場合、イメージセンサ５０に対してライブビュー撮像を行わせる。これにより、第１被写体４６及び全ての第３被写体（図２０参照）が撮像され、画像メモリ６２には、１フレーム分のライブビュー画像を示すデジタル画像データ８４が格納される。そして、図２２に示す例と同様の要領で、第２算出部７６Ｈは、ＡＦ枠４１内の全領域３９に対する距離算出処理を実行する。

一例として図２８に示すように、第２算出部７６Ｈは、ＡＦ枠４１内の全領域３９に対する距離算出処理が成功したか否かを判定する。ＡＦ枠４１内の全領域３９に対する距離算出処理が成功した場合、第２選択部７６Ｇは、第２算出部７６Ｈから第１距離及び複数の第３距離を取得する。第２選択部７６Ｇは、第２算出部７６Ｈから取得した第１距離及び複数の第３距離に基づいて、中央領域４２に含まれる第１被写体４６及び周辺領域４３Ａ～４３Ｘに含まれる第３被写体（図２０参照）の合焦位置を予測する。

そして、第２選択部７６Ｇは、予測した複数の合焦位置（すなわち、第１被写体４６及び複数の第３被写体に対する複数の合焦位置）のうち、合焦位置間の距離が現在の合焦位置から最短距離の合焦位置に対応する被写体を第４合焦被写体１１４として選択する。図２８に示す例では、周辺領域４３Ａに含まれる第３被写体の複数の箇所に対して行われた測距の結果である複数の被写体距離のうちの最も短い被写体距離である第３距離に基づく合焦位置に対応する箇所（図２８に示す例では、人物１４のうちの周辺領域４３Ａと重なっている箇所）が第４合焦被写体１１４として選択されている。

一方、図２８に示す例において、ＡＦ枠４１内の全領域３９に対する距離算出処理が失敗した場合、第２選択部７６Ｇによって第４合焦被写体１１４の選択は行われない。そして、上記第１又は第２実施形態と同様の撮像処理（すなわち、３×３の領域３８を用いた撮像処理）がプロセッサ７６によって実行される。

第２選択部７６Ｇによって第４合焦被写体１１４が選択されると、一例として図２９に示すように、第２選択部７６Ｇは、第４合焦被写体１１４に関連する情報である第４合焦被写体情報１１６を第２撮像制御部７６Ｆに出力する。第４合焦被写体情報１１６は、第２選択部７６Ｇによって選択された第４合焦被写体１１４の位置を特定する位置特定情報を含む。ここで、第４合焦被写体１１４の位置とは、第４合焦被写体１１４を選択するために用いられたデジタル画像データ８４により示される画像内での第４合焦被写体１１４に対応する画素の位置を指す。

第２撮像制御部７６Ｆは、第２選択部７６Ｇから入力された第４合焦被写体情報１１６に対応する被写体距離を第２算出部７６Ｈから取得する。例えば、第４合焦被写体情報１１６に対応する被写体距離とは、第２算出部７６Ｈによって算出された第１距離及び複数の第３距離のうち、第４合焦被写体情報１１６に含まれる位置特定情報から特定される画素の位置に対応する第１距離又は第３距離を指す。

なお、ここでは、第２撮像制御部７６Ｆによって第２算出部７６Ｈから被写体距離が取得される形態例を挙げて説明しているが、これは、あくまでも一例に過ぎない。例えば、第４合焦被写体１１４を選択するために用いられたデジタル画像データ８４により示される画像内での第４合焦被写体１１４に対応する被写体距離（第１距離又は第３距離）が第４合焦被写体情報１１６に含まれていてもよい。この場合、第２撮像制御部７６Ｆは、第２選択部７６Ｇから入力された第４合焦被写体情報１１６から被写体距離を取得すればよい。

第２撮像制御部７６Ｆは、第４合焦被写体情報１１６に対応する被写体距離を用いて合焦位置を算出する。そして、第２撮像制御部７６Ｆは、制御装置５６を介してアクチュエータ５８を制御することで、合焦位置にフォーカスレンズ５４Ｂを移動させる。これにより、第４合焦被写体１１４に対するピント合わせが実現される。

一方、第２選択部７６Ｇは、第４合焦被写体１１４を選択するために用いられたデジタル画像データ８４と第４合焦被写体情報１１６を表示制御部７６Ｅに出力する。表示制御部７６Ｅは、デジタル画像データ８４と第４合焦被写体情報１１６に基づいてＡＦ枠４１入りのライブビュー画像３４をディスプレイ３０に表示させる。上記第１実施形態と同様の要領で、ＡＦ枠４１には、第２選択部７６Ｇによって選択された第４合焦被写体１１４が含まれる領域３９が強調表示される。図２９に示す例では、周辺領域４３Ａが強調表示されている。

次に、撮像装置１０のプロセッサ７６によって行われる本第３実施形態に係る撮像処理の流れの一例を図３０Ａ～図３０Ｃに示すフローチャートを参照しながら説明する。

なお、ここでは、図１２に示すフローチャートに示される処理と同一の処理を行うステップについては、図１２に示すフローチャートと同一のステップ番号を付し、説明を省略する。図３０Ａ～図３０Ｃに示す撮像処理は、図１２に示す撮像処理に比べ、ステップＳＴ１０の処理の前にステップＳＴ６０～ステップＳＴ１０２の処理が挿入されている点、ステップＳＴ３０の処理に代えてステップＳＴ３０Ｂの処理が適用されている点、ステップＳＴ３２の処理が除かれている点、及びステップＳＴ３４の処理が除かれている点が異なる。

図３０Ａに示す撮像処理では、先ず、ステップＳＴ６０で、第１撮像制御部７６Ａは、光電変換素子ドライバ７０を制御することで、イメージセンサ５０に対してライブビュー撮像を行わせてデジタル画像データ８４を取得させる。これにより、デジタル画像データ８４は、画像メモリ６２に格納される（図２２参照）。ステップＳＴ６０の処理が実行された後、撮像処理は、ステップＳＴ６２へ移行する。

ステップＳＴ６２で、表示制御部７６Ｅは、画像メモリ６２からデジタル画像データ８４を取得し、取得したデジタル画像データ８４に基づいてライブビュー画像３４を生成する。そして、表示制御部７６Ｅは、ＡＦ枠４１入りのライブビュー画像３４をディスプレイ３０に表示させる（図２２参照）。ステップＳＴ６２の処理が実行された後、撮像処理は、ステップＳＴ６４へ移行する。

ステップＳＴ６４で、第２算出部７６Ｈは、画像メモリ６２からデジタル画像データ８４を取得し、取得したデジタル画像データ８４に基づいて、ＡＦ枠４１内の全領域３９に対する距離算出処理を実行する（図２２参照）。ステップＳＴ６４の処理が実行された後、撮像処理は、ステップＳＴ６６へ移行する。

ステップＳＴ６６で、第２算出部７６Ｈは、ＡＦ枠４１内の全領域３９に対する距離算出処理が成功したか否かを判定する（図２３参照）。ステップＳＴ６６において、ＡＦ枠４１内の全領域３９に対する距離算出処理が失敗した場合は、判定が否定されて、撮像処理は、図３０Ｃに示すステップＳＴ１０へ移行する。ステップＳＴ６６において、ＡＦ枠４１内の全領域３９に対する距離算出処理が成功した場合は、判定が肯定されて、撮像処理は、ステップＳＴ６８へ移行する。

ステップＳＴ６８で、第２特定部７６Ｉは、ステップＳＴ６４で距離算出処理が実行されることによって算出された第１距離及び複数の第３距離を用いて、複数の第３距離の中に第２条件を満たす第３距離が存在するか否かを判定する（図２３参照）。ステップＳＴ６８において、複数の第３距離の中に第２条件を満たす第３距離が存在しない場合は、判定が否定されて、撮像処理は、図３０Ｃに示すステップＳＴ１０へ移行する。ステップＳＴ６８において、複数の第３距離の中に第２条件を満たす第３距離が存在する場合は、判定が肯定されて、撮像処理は、ステップＳＴ７０へ移行する。

ステップＳＴ７０で、第２特定部７６Ｉは、第２条件を満たす第３距離に対応する第２特定領域１０８を複数の周辺領域４３から特定する。ステップＳＴ７０の処理が実行された後、撮像処理は、ステップＳＴ７２へ移行する。

ステップＳＴ７２で、第３選択部７６Ｊは、第２割合を算出する（図２４参照）。すなわち、第３選択部７６Ｊは、第２特定領域１０８が特定されたデジタル画像データ８４を第２特定部７６Ｉから取得し、取得したデジタル画像データ８４に基づいて、複数の周辺領域４３に対しての第２特定領域１０８の割合を第２割合として算出する。ステップＳＴ７２の処理が実行された後、撮像処理は、ステップＳＴ７４へ移行する。

ステップＳＴ７４で、第３選択部７６Ｊは、ステップＳＴ７２で算出した第２割合が第２閾値を超過しているか否かを判定する（図２４及び図２５参照）。ステップＳＴ７４において、第２割合が第２閾値以下の場合は（図２５参照）、判定が否定されて、撮像処理は、ステップＳＴ７６へ移行する。ステップＳＴ７４において、第２割合が第２閾値を超過している場合は（図２４参照）、判定が肯定されて、撮像処理は、ステップＳＴ７８へ移行する。

ステップＳＴ７６で、第３選択部７６Ｊは、中央領域４２における第１被写体４６を第３合焦被写体１１０として選択する（図２５参照）。ステップＳＴ７６の処理が実行された後、撮像処理は、ステップＳＴ８０へ移行する。

ステップＳＴ７８で、第３選択部７６Ｊは、第２特定領域１０８内の第３被写体を第３合焦被写体１１０として選択する（図２４参照）。ステップＳＴ７８の処理が実行された後、撮像処理は、ステップＳＴ８０へ移行する。

ステップＳＴ８０で、第１撮像制御部７６Ａは、ステップＳＴ７６又はＳＴ７８で選択された第３合焦被写体１１０に対してピント合わせを行う（図２６参照）。また、表示制御部７６Ｅは、ＡＦ枠４１入りのライブビュー画像３４をディスプレイ３０に表示させ、かつ、第３合焦被写体１１０に対応する領域３９を強調表示させる（図２６参照）。ステップＳＴ８０の処理が実行された後、撮像処理は、ステップＳＴ８２へ移行する。

ステップＳＴ８２で、第１撮像制御部７６Ａは、受付デバイス８６によって撮像指示が受け付けられたか否かを判定する。ステップＳＴ８２において、受付デバイス８６によって撮像指示が受け付けられていない場合は、判定が否定されて、撮像処理は、図３０Ｂに示すステップＳＴ８８へ移行する。ステップＳＴ８２において、受付デバイス８６によって撮像指示が受け付けられた場合は、判定が肯定されて、撮像処理は、ステップＳＴ８４へ移行する。

ステップＳＴ８４で、第１撮像制御部７６Ａは、光電変換素子ドライバ７０に対して本露光制御を行うことで、イメージセンサ５０に対して本露光を伴う撮像を行わせる。これにより、画像メモリ６２には、本露光を伴う撮像が行われることによって得られたデジタル画像データ８４が格納される。ステップＳＴ８４の処理が実行された後、撮像処理は、ステップＳＴ８６へ移行する。

一方、図３０Ｂに示すステップＳＴ８８で、第２撮像制御部７６Ｆは、ライブビュー撮像タイミングが到来したか否かを判定する。ステップＳＴ８８において、ライブビュー撮像タイミングが到来していない場合は、判定が否定されて、撮像処理は、ステップＳＴ１０２へ移行する。ステップＳＴ８８において、ライブビュー撮像タイミングが到来した場合は、判定が肯定されて、撮像処理は、ステップＳＴ９０へ移行する。

ステップＳＴ９０で、第２撮像制御部７６Ｆは、光電変換素子ドライバ７０を制御することで、イメージセンサ５０に対してライブビュー撮像を行わせてデジタル画像データ８４を取得させる。これにより、デジタル画像データ８４は、画像メモリ６２に格納される（図２７参照）。ステップＳＴ９０の処理が実行された後、撮像処理は、ステップＳＴ９２へ移行する。

ステップＳＴ９２で、第２算出部７６Ｈは、画像メモリ６２からデジタル画像データ８４を取得し、取得したデジタル画像データ８４に基づいて、ＡＦ枠４１内の全領域３９に対する距離算出処理を実行する（図２７参照）。ステップＳＴ９２の処理が実行された後、撮像処理は、ステップＳＴ９４へ移行する。

ステップＳＴ９４で、第２算出部７６Ｈは、ＡＦ枠４１内の全領域３９に対する距離算出処理が成功したか否かを判定する（図２８参照）。ステップＳＴ９４において、ＡＦ枠４１内の全領域３９に対する距離算出処理が失敗した場合は、判定が否定されて、撮像処理は、図３０Ｃに示すステップＳＴ１０へ移行する。ステップＳＴ９４において、ＡＦ枠４１内の全領域３９に対する距離算出処理が成功した場合は、判定が肯定されて、撮像処理は、ステップＳＴ９６へ移行する。

ステップＳＴ９６で、第２選択部７６Ｇは、ステップＳＴ９２で距離算出処理が実行されることによって得られた第１距離及び複数の第３距離を取得し、取得した第１距離及び複数の第３距離に基づいて、各領域３９（図２０参照）、すなわち、中央領域４２に含まれる第１被写体４６及び周辺領域４３Ａ～４３Ｘに含まれる複数の第３被写体の合焦位置を予測する。ステップＳＴ９６の処理が実行された後、撮像処理は、ステップＳＴ９８へ移行する。

ステップＳＴ９８で、第２選択部７６Ｇは、ステップＳＴ９６で予測した複数の合焦位置（すなわち、第１被写体４６及び複数の第３被写体に対する複数の合焦位置）のうち、合焦位置間の距離が現在の合焦位置から最短距離の合焦位置に対応する被写体を第４合焦被写体１１４として選択する（図２８参照）。ステップＳＴ９８の処理が実行された後、撮像処理は、ステップＳＴ１００へ移行する。

ステップＳＴ１００で、第２撮像制御部７６Ｆは、ステップＳＴ９８で選択された第４合焦被写体１１４に対してピント合わせを行う（図２９参照）。また、表示制御部７６Ｅは、ＡＦ枠４１入りのライブビュー画像３４をディスプレイ３０に表示させ、かつ、第４合焦被写体１１４に対応する領域３９を強調表示させる（図２９参照）。ステップＳＴ１００の処理が実行された後、撮像処理は、ステップＳＴ１０２へ移行する。

ステップＳＴ１０２で、第２撮像制御部７６Ｆは、受付デバイス８６によって撮像指示が受け付けられたか否かを判定する。ステップＳＴ１０２において、受付デバイス８６によって撮像指示が受け付けられた場合は、判定が肯定されて、撮像処理は、図３０Ａに示すステップＳＴ８４へ移行する。ステップＳＴ１０２において、受付デバイス８６によって撮像指示が受け付けられていない場合は、判定が否定されて、撮像処理は、ステップＳＴ８８へ移行する。

一方、図３０Ｃに示す撮像処理では、上記第１実施形態で説明したステップＳＴ１０～ステップＳＴ２８の処理がプロセッサ７６によって行われる。ステップＳＴ３０Ｂで、第１撮像制御部７６Ａは、受付デバイス８６によって撮像指示が受け付けられたか否かを判定する。ステップＳＴ３０Ｂにおいて、受付デバイス８６によって撮像指示が受け付けられていない場合は、判定が否定されて、撮像処理は、ステップＳＴ１８へ移行する。ステップＳＴ３０Ｂにおいて、受付デバイス８６によって撮像指示が受け付けられた場合は、判定が肯定されて、撮像処理は、図３０Ａに示すステップＳＴ８４へ移行する。

図３０Ａに示すステップＳＴ８６で、第１撮像制御部７６Ａは、撮像処理終了条件を満足したか否かを判定する。ステップＳＴ８６において、撮像処理終了条件を満足していない場合は、判定が否定されて、撮像処理は、ステップＳＴ６０へ移行する。ステップＳＴ８６において、撮像処理終了条件を満足した場合は、判定が肯定されて、撮像処理が終了する。

以上説明したように、本第３実施形態に係る撮像装置１０では、ＡＦ枠３６（図１及び図２参照）よりも広いＡＦ枠４１（図２０参照）に含まれる中央領域４２内の第１被写体４６に関する第１距離と、ＡＦ枠４１に含まれる周辺領域４３Ａ～４３Ｘ内の複数の第３被写体に関する複数の第３距離とが算出される。そして、複数の第３距離のうちの第２条件を満たす第３距離に対応する第２特定領域１０８が複数の領域３９の中から特定される（図２３参照）。そして、複数の周辺領域４３に対しての第２特定領域１０８の割合が第２割合として算出される（図２４及び図２５参照）。

ここで、例えば、第２割合が大きければ（例えば、第２割合が第２閾値を超過していれば）、第２特定領域１０８内の第３被写体が中央領域４２内の第１被写体４６よりもユーザによって注目されている可能性が高いと判断される。一方、第２割合が小さければ（例えば、第２割合が第２閾値以下であれば）、複数の周辺領域４３にはユーザによって注目されている第３被写体が存在していない可能性が高いと判断される。そのため、第２割合が大きければ、第１被写体４６に対してよりも、第２特定領域１０８内の第３被写体に対してピント合わせが行われた方がユーザの意図に合ったピント合わせが実現され易くなる。逆に、第２割合が小さければ、第２特定領域１０８内の第３被写体に対してよりも、第１被写体４６に対してピント合わせが行われた方がユーザの意図に合ったピント合わせが実現され易くなる。よって、撮像装置１０では、第２割合に基づいて、第１被写体４６及び第２特定領域１０８内の第３被写体から、合焦させる被写体である第３合焦被写体１１０が選択される（図２４及び図２５参照）。

これにより、ＡＦ枠３６（図１及び図２参照）よりも広いＡＦ枠４１（図２０参照）内でユーザが注目している被写体に対してピントを合わせ易くすることができる。例えば、ユーザが第３被写体よりも第１被写体４６を注目している可能性が高い場合には、第１被写体４６に対してピント合わせを行うことができ、逆に、ユーザが第１被写体４６よりも第３被写体を注目している可能性が高い場合には、ユーザが注目している第３被写体（すなわち、第２特定領域１０８内の第３被写体）に対してピント合わせを行うことができる。換言すると、これは、ＡＦ枠３６よりも広いＡＦ枠４１内でユーザが注目していない被写体にピントを合わせ難くすることを意味する。

また、本第３実施形態に係る撮像装置１０では、複数の第３距離のうちの第１距離よりも短い第３距離に対応する第２特定領域１０８が複数の周辺領域４３の中から特定される（図２３参照）。これにより、中央領域４２内の第１被写体４６に関する被写体距離よりも被写体距離が短い周辺領域４３内の第３被写体に対してピント合わせが行われる。従って、ＡＦ枠３６（図１及び図２参照）よりも広いＡＦ枠４１（図２０参照）内でユーザが注目している被写体が中央領域４２内の第１被写体４６よりも手前側（ユーザに近い側）に存在している場合、ユーザが注目している被写体に対してピントを合わせ易くすることができる。

また、本第３実施形態に係る撮像装置１０では、ＡＦ枠３６よりも広いＡＦ枠４１が用いられている。そのため、ＡＦ枠４１内の全ての領域３９に対しての測距は、ＡＦ枠３６内の全ての領域３８に対しての測距よりも、成功する可能性が低い。ＡＦ枠４１内の全ての領域３９に対しての測距が成功しない場合に、常に中央領域４２に対してピント合わせが行われると、ユーザが注目している被写体が中央領域４２に存在していない場合、ユーザが注目していない被写体に対してピント合わせが行われてしまう。そこで、本第３実施形態に係る撮像装置１０では、全領域３９に対する距離算出処理が失敗したことに起因して第２特定領域１０８が特定されなかった場合に、上記第１又は第２実施形態で説明した撮像処理（例えば、図３０Ｃに示すステップＳＴ１０～ステップＳＴ２８に示す処理）が行われる。上記第１又は第２実施形態で説明した撮像処理は、ＡＦ枠４１よりも狭いＡＦ枠３６を用いた撮像処理である。そのため、全領域３９に対する距離算出処理が失敗したことに起因して第２特定領域１０８が特定されなかったとしても、ユーザが注目している被写体がＡＦ枠３６内の周辺領域４４に入っていれば、中央領域４２内の第１被写体４６ではなく、周辺領域４４内の第２被写体４８に対してピント合わせを行うことが可能となる。この結果、ＡＦ枠４１のみを用いた撮像処理が行われる場合に比べ、ユーザが注目している被写体に対してピントを合わせ易くすることができる。

また、本第３実施形態に係る撮像装置１０では、５×５のマトリクス状に配置された複数の領域３９を用いた撮像処理と、３×３のマトリクス状に配置された複数の領域３８を用いた撮像処理とが２段階方式で行われる。そのため、複数の領域３９に対する距離算出処理が失敗したことに起因して第２特定領域１０８が特定されなかったとしても、ユーザが注目している被写体が複数の領域３８に入っていれば、中央領域４２内の第１被写体４６ではなく、周辺領域４４内の第２被写体４８に対してピント合わせを行うことが可能となる。この結果、５×５のマトリクス状に配置された複数の領域３９のみを用いた撮像処理が行われる場合に比べ、ユーザが注目している被写体に対してピントを合わせ易くすることができる。

なお、上記第３実施形態では、５×５のマトリクス状に配置された複数の領域３９と３×３のマトリクス状に配置された複数の領域３８とを例示しているが、本開示の技術はこれに限定されない。例えば、７×７のマトリクス状に配置された複数の領域を用いた撮像処理と、５×５のマトリクス状に配置された複数の領域３９を用いた撮像処理とが行われてもよい。つまり、Ｎを３以上の奇数とした場合、Ｎ×Ｎのマトリクス状に配置された複数の領域を用いた撮像処理と、（Ｎ＋２）×（Ｎ＋２）のマトリクス状に配置された複数の領域を用いた撮像処理とが行われるようにすればよい。

また、Ｍを２以上の偶数とした場合、Ｎ×Ｎのマトリクス状に配置された複数の領域を用いた撮像処理と、（Ｎ＋Ｍ）×（Ｎ＋Ｍ）のマトリクス状に配置された複数の領域を用いた撮像処理とが行われるようにしてもよい。

また、上記第３実施形態では、図３０Ｃに示すステップＳＴ３０Ｂにおいて判定が否定された場合に撮像処理が図３０ＡのステップＳＴ３４へ移行する形態例を挙げて説明したが、本開示の技術はこれに限定されない。例えば、図３０Ｃに示すステップＳＴ３０Ｂにおいて判定が否定された場合に、図１８Ｂ又は図１９のフローチャートに示される処理がプロセッサ７６によって行われるようにしてもよい。

［第４実施形態］
本第４実施形態では、撮像装置１０によって連写が行われる場合（すなわち、撮像装置１０に対して連写モードが設定されている場合）の形態例について説明する。なお、本第４実施形態では、上記第１～第３実施形態と同様の構成要素については同一の符号を付して、その説明を省略し、上記第１～第３実施形態と異なる箇所を中心に説明する。

先ず、従来既知の連写の処理の流れの一例について図３１を参照しながら説明する。一例として図３１に示すように、ライブビュー撮像期間では、ライブビュー撮像が行われる。ライブビュー撮像期間では、ライブビュー撮像が行われることによってデジタル画像データ８４に含まれる非位相差画像データが、画像メモリ６２に格納される。そして、プロセッサ７６によって画像メモリ６２から非位相差画像データが読み出され、読み出された非位相差画像データにより示される画像がライブビュー画像としてディスプレイ３０に表示される。

また、ライブビュー撮像期間では、ライブビュー撮像が行われることによってデジタル画像データ８４に含まれる位相差画像データが、画像メモリ６２に格納される。プロセッサ７６は、画像メモリ６２から位相差画像データを読み出し、読み出した位相差画像データに基づいて、合焦対象領域に関する被写体距離を算出する。合焦対象領域は、例えば、ＡＦ枠３６内の領域、ＡＦ枠４１内の領域、又はユーザによって受付デバイス８６を介して指定された領域である。

なお、合焦対象領域は、固定された領域であってもよいし、撮像範囲内での位置が変更される領域、例えば、画像データ等に基づく画像認識処理がプロセッサ７６によって行われることで認識された特定の動体（例えば、特定の人物、特定の自動車、特定の自転車、又は特定の航空機など）を追従する領域であってもよい。

ライブビュー撮像期間において、プロセッサ７６は、算出した被写体距離に基づいてＡＦ演算を行う。また、ライブビュー撮像期間において、プロセッサ７６は、ＡＦ演算を行って得た合焦位置に基づいて、連写の１フレーム目の本露光が開始されるタイミングでの合焦対象領域に対するフォーカスレンズ５４Ｂの合焦位置を予測する。合焦位置の予測は、例えば、最新の複数のＡＦ演算（例えば、現時点から過去に遡って最新の２回のＡＦ演算）によって得られた複数の合焦位置と、連写の１フレーム目の予測が完了してから現時点までの経過時間とに基づいて行われる。プロセッサ７６は、制御装置５６を介してアクチュエータ５８を制御することで、予測した合焦位置に向けてフォーカスレンズ５４Ｂを光軸ＯＡに沿って移動させる。

レリーズボタン２４が全押しされ、全押し状態が一定時間以上継続すると、やがて連写を開始するタイミング（以下、「連写開始タイミング」とも称する）が到来する。連写開始タイミングが到来すると、ディスプレイ３０のライブビュー画像は非表示される。すなわち、ライブビュー画像が表示される表示領域がブラックアウトされる。また、連写開始タイミングが到来すると、連写が開始される。

プロセッサ７６は、本露光が開始されるタイミングで、フォーカスレンズ５４Ｂを停止させる。本露光中にフォーカスレンズ５４Ｂが移動していると、撮像されて得られた画像に対してフォーカスレンズ５４Ｂの移動に起因する歪みが生じてしまうからである。フォーカスレンズ５４Ｂが停止したことを条件に、先ず、連写の１フレーム目の本露光が開始される。

連写の１フレーム目の本露光が行われている間、プロセッサ７６は、ＡＦ演算を行って得た最新の合焦位置に基づいて、連写の２フレーム目の本露光が行われるタイミングでの合焦対象領域に対するフォーカスレンズ５４Ｂの合焦位置を予測する。この場合も、合焦位置の予測は、例えば、ライブビュー撮像期間で得られた最新の複数のＡＦ演算によって得られた複数の合焦位置と、連写の１フレーム目の予測が完了してから現時点までの経過時間とに基づいて行われる。

連写の１フレーム目の本露光が終了すると、連写の１フレーム目のデジタル画像データ８４の読み出しが開始される。ここで、デジタル画像データ８４の読み出しとは、連写の１フレーム目のデジタル画像データが画像メモリ６２に格納され、プロセッサ７６によって画像メモリ６２からデジタル画像データ８４が読み出されて既定の記憶領域（ここでは、一例としてＮＶＭ７８）に記憶されるまでの処理を指す。

また、連写の１フレーム目の本露光が終了すると、プロセッサ７６は、本露光によって得られた位相差画像データに基づいて被写体距離を算出し、算出した被写体距離に基づいてＡＦ演算を行う。そして、プロセッサ７６は、ＡＦ演算を行って得た最新の合焦位置に基づいて、連写の２フレーム目の本露光が行われるタイミングでの合焦対象領域に対するフォーカスレンズ５４Ｂの合焦位置を予測する。

また、連写の１フレーム目の本露光が終了すると、フォーカスレンズ５４Ｂは、予想された合焦位置に向けて移動を開始する。デジタル画像データの読み出しが終了すると、３フレーム分のライブビュー撮像が行われ、これによって得られた非位相差画像データにより示される画像がライブビュー画像としてディスプレイ３０に表示される。なお、ここでは、３フレーム分のライブビュー撮像が例示されているが、これはあくまでも一例に過ぎず、１又は２フレーム分のライブビュー撮像であってもよいし、４フレーム以上のライブビュー撮像であってもよく、ライブビュー撮像のフレームレートに応じて定まるフレーム数分のライブビュー撮像が行われる。

また、ここで、ライブビュー撮像が行われる毎に、ライブビュー撮像が行われることによって得られた位相差画像データに基づいて、プロセッサ７６によって、ＡＦ演算が行われる。そして、ＡＦ演算が行われる毎に、最新の複数のＡＦ演算から得られた複数の合焦位置に基づいて、プロセッサ７６によって、連写の次のフレームの本露光が行われるタイミングでの合焦対象領域に対するフォーカスレンズ５４Ｂの合焦位置が予測される。

一方で、３フレーム分のライブビュー撮像が行われている間も、フォーカスレンズ５４Ｂは、連写の１フレーム目の本露光が行われている間に予想された合焦位置に向けて移動し続けている。つまり、プロセッサ７６は、３フレーム分のライブビュー撮像が行われている間を利用して、フォーカスレンズ５４Ｂを、予想された最新の合焦位置に向けて移動させ続けている。

３フレーム目のライブビュー撮像が終了すると、プロセッサ７６は、制御装置５６を介してアクチュエータ５８を制御することで、３フレーム目のライブビュー撮像が行われることに伴って予測された最新の合焦位置に向けてフォーカスレンズ５４Ｂを光軸ＯＡに沿って移動させる。

連写の２フレーム目以降の各フレームでは、レリーズボタン２４の全押し状態が解除されるまでの間、連写開始タイミングが到来してからの連写の１フレーム目の処理と同様の処理が繰り返し行われる。

一般的に、連写の本露光は一定の時間間隔で行われる。例えば、連続する複数のフレーム期間の各々で１回ずつ本露光が行われ、各フレーム期間内で本露光後に数フレーム分の（図３１に示す例では、３フレーム分）のライブビュー撮像が行われる。

しかし、フレーム期間が固定されている場合、次のフレーム期間の本露光が開始されるまでに、フォーカスレンズ５４Ｂを、予測された最新の合焦位置に到達させることができないことがある。これは、フレーム期間内の最後のライブビュー撮像が行われることに伴って予測された最新の合焦位置が現在の合焦位置から離れ過ぎているからである。

連写のレリーズ間隔（すなわち、連写の本露光を行う時間間隔）よりも、ピント合わせを優先させるのであれば、フレーム期間を制限なく延ばすことで、フォーカスレンズ５４Ｂを、予測された最新の合焦位置に到達させることはできる。しかし、そうすると、当然ながら、連写が行われることによって得られる単位時間当たりのフレーム枚数は、連写のレリーズ間隔を優先した場合よりも、少なくなってしまう。

そこで、このような事情に鑑み、本第４実施形態に係る撮像装置１０は、プロセッサ７６によって連写制御処理（図３２～図３８Ｃ参照）が行われるように構成されている。一例として図３２に示すように、ＮＶＭ７８には、連写制御処理プログラム１１８が記憶されている。プロセッサ７６は、ＮＶＭ７８から連写制御処理プログラム１１８を読み出し、読み出した連写制御処理プログラム１１８をＲＡＭ８０上で実行する。プロセッサ７６は、ＲＡＭ８０上で実行する連写制御処理プログラム１１８に従って合焦位置演算部７６Ｋ、合焦位置予測部７６Ｌ、及び制御部７６Ｍとして動作することで連写制御処理を行う。

なお、合焦位置演算部７６Ｋ及び合焦位置予測部７６Ｌによって行われる処理は、本開示の技術に係る「第１算出工程」、「第２算出工程」、及び「選択工程」の一例である。また、制御部７６Ｍによって行われる処理は、本開示の技術に係る「第１移動工程」及び「撮像工程」の一例である。

一例として図３３に示すように、制御部７６Ｍは、光電変換素子ドライバ７０を介してイメージセンサ５０に対して撮像制御を行うことで、イメージセンサ５０に対してライブビュー撮像及び連写等の各種の撮像を行わせる。このように撮像が行われることで、画像メモリ６２にデジタル画像データ８４が格納される。制御部７６Ｍは、画像メモリ６２からデジタル画像データ８４に含まれる非位相差画像データをライブビュー画像データとして取得する。制御部７６Ｍは、ライブビュー画像データにより示される画像をライブビュー画像としてディスプレイ３０に対して表示させる。

ライブビュー撮像期間から連写開始タイミングが到来するまでの間に、合焦位置演算部７６Ｋは、画像メモリ６２から最新の位相差画像データを取得し、取得した位相差画像データに基づいて合焦対象領域に関する被写体距離を算出する。そして、合焦位置演算部７６Ｋは、算出した被写体距離に基づいてＡＦ演算を行うことで、合焦対象領域に対するフォーカスレンズ５４Ｂの現在の合焦位置（以下、「現在合焦位置」と称する）を算出する。

ＲＡＭ８０には、合焦位置時系列情報が記憶されている。合焦位置時系列情報は、ＡＦ演算が行われる毎に得られた現在合焦位置の時系列を示す情報である。現在合焦位置の時系列は、例えば、直近の過去３回分のＡＦ演算によって得られた現在合焦位置の時系列である。合焦位置演算部７６Ｋは、現在合焦位置を算出する毎に、算出した最新の現在合焦位置をＲＡＭ８０に格納することで合焦位置時系列情報を更新する。ここでは、現在合焦位置の時系列として、直近の過去３回分のＡＦ演算によって得られた現在合焦位置の時系列を例示しているが、これはあくまでも一例に過ぎず、現在合焦位置の時系列は、過去の複数回分のＡＦ演算によって得られた現在合焦位置の時系列であればよく、過去の複数回分のＡＦ演算が、現時点に近い期間に行われた複数回分のＡＦ演算であれば更によい。

合焦位置予測部７６Ｌは、イメージセンサ５０による連写が開始される前段階で、連写の１フレーム目の合焦対象領域に対するフォーカスレンズ５４Ｂの合焦位置を予測する。また、合焦位置予測部７６Ｌは、イメージセンサ５０による連写が開始されてから、連写のフレーム毎に、後続するフレーム（例えば、次のフレーム）の合焦対象領域に対するフォーカスレンズ５４Ｂの合焦位置を予測する。具体的に説明すると、合焦位置予測部７６Ｌは、ＲＡＭ８０から合焦位置時系列情報を取得し、取得した合焦位置時系列情報に基づいて、後続するフレーム（例えば、次のフレーム）の合焦対象領域に対するフォーカスレンズ５４Ｂの合焦位置（以下、「後続フレーム合焦位置」とも称する）を予測する。

制御部７６Ｍは、フォーカスレンズ移動制御を行う。合焦位置予測部７６Ｌによって予測された合焦位置へのフォーカスレンズ５４Ｂの移動を指示したり、フォーカスレンズ５４Ｂの停止を指示したりするレンズ制御信号を生成して制御装置５６に出力する。図３３に示す例では、合焦位置予測部７６Ｌによって後続フレーム合焦位置が予測されるので、例えば、制御部７６Ｍによって生成されて出力されるレンズ制御信号は、合焦位置予測部７６Ｌによって予測された後続フレーム合焦位置へのフォーカスレンズ５４Ｂの移動を指示する信号である。制御装置５６は、制御部７６Ｍから入力されたレンズ制御信号に応じてアクチュエータ５８を作動させることで、後続フレーム合焦位置に向けてフォーカスレンズ５４Ｂを光軸ＯＡに沿って移動させる。

一例として図３４に示すように、制御部７６Ｍは、合焦位置演算部７６Ｋによって算出された現在合焦位置と合焦位置予測部７６Ｌによって予測された後続フレーム合焦位置とに基づいてフォーカス移動量を算出する。フォーカス移動量は、フォーカスレンズ５４Ｂを光軸ＯＡに沿って移動させる移動量である。また、フォーカス移動量は、イメージセンサ５０によって撮像されることで得られた画像のぼけ量の大きさに相当する。

制御部７６Ｍは、フォーカス移動量が第１基準値を超過しているか否かを判定する。第１基準値は、本開示の技術に係る「閾値」の一例である。例えば、第１基準値は、後ピンが生じる虞があるぼけ量に対応するフォーカス移動量として事前に定められた値である。制御部７６Ｍは、フォーカス移動量が第１基準値を超過している場合に、レンズ制御信号を制御装置５６に出力することで、一定時間だけフォーカスレンズ５４Ｂを停止させる。一定時間だけフォーカスレンズ５４Ｂを停止させるのは、被写体の状況が変わるのを待機するためである。被写体の状況の変化次第で、後ピンが生じる状態から脱することが可能となる。

一定時間だけフォーカスレンズ５４Ｂが停止したことを条件に、合焦位置演算部７６Ｋは、被写体距離を算出し、算出した被写体距離に基づいて、現在合焦位置を算出する。また、合焦位置演算部７６Ｋは、現在合焦位置を用いて合焦位置時系列情報を更新する。そして、合焦位置予測部７６Ｌは、合焦位置時系列情報を用いて後続フレーム合焦位置を予測する。

制御部７６Ｍは、最新のフォーカス移動量が第１基準値以下の場合に、フォーカス移動量が第２基準値を超過しているか否かを判定する。第２基準値は、第１基準値よりも小さな値である。第２基準値は、連写のフレームレート及びフォーカスレンズ５４Ｂの移動速度等に基づいて事前に定められた固定値であってもよいし、ユーザ等から与えられた指示に従って変更される可変値であってもよい。制御部７６Ｍは、フォーカス移動量が第２基準値を超過している場合に、レンズ制御信号を制御装置５６に出力することで、フォーカスレンズ５４Ｂを光軸ＯＡに沿って制限範囲内で移動させる。一方、制御部７６Ｍは、フォーカス移動量が第２基準値以下の場合、レンズ制御信号を制御装置５６に出力することで、フォーカスレンズ５４Ｂを光軸ＯＡに沿って後続フレーム合焦位置に移動させる。

第２基準値を超過しているフォーカス移動量をそのまま用いてフォーカスレンズ５４Ｂを光軸ＯＡに沿って移動させた場合、フォーカスレンズ５４Ｂが制限範囲から外れてしまったり、後続フレーム合焦位置からずれてしまったりする虞がある。そのため、フォーカスレンズ５４Ｂを光軸ＯＡに沿って制限範囲内で移動させる場合、フォーカスレンズ５４Ｂが制限範囲から外れてしまったり、後続フレーム合焦位置からずれてしまったりしないように、フォーカス移動量が調整される。一例として図３５に示すように、制御部７６Ｍは、フォーカスレンズ５４Ｂを光軸ＯＡに沿って制限範囲内で移動させる場合、関数１２０から係数を取得し、取得した係数をフォーカス移動量に乗じることでフォーカス移動量を調整する。関数１２０は、ぼけ量と係数との相関を規定している。係数は、１未満の値であり、ぼけ量が増加に従って線形的に減少し、ぼけ量が一定値以上の範囲で一定となる。

制御部７６Ｍは、フォーカス移動量を調整した後、レンズ制御信号を制御装置５６に出力することで、調整後のフォーカス移動量だけフォーカスレンズ５４Ｂを光軸ＯＡに沿って移動させる。

一例として図３６に示すように、連写モードでは、フォーカス移動量の範囲として、レリーズ優先範囲、ピント合わせ優先範囲、及び待機優先範囲が規定されている。レリーズ優先範囲は、既定時間（例えば、連写のデフォルトのフレームレートに従って規定された時間）間隔での連写を優先する範囲である。ピント合わせ優先範囲は、既定時間間隔での連写ができなくてもピント合わせを優先する範囲である。待機優先範囲は、フォーカスレンズ５４Ｂの待機を優先する範囲である。撮像装置１０では、連写が行われる場合に、プロセッサ７６によって図３４及び図３５に示す処理が行われることで、フォーカスレンズ５４Ｂが、レリーズ優先範囲、ピント合わせ優先範囲、又は待機優先範囲で光軸ＯＡに沿って移動する。

レリーズ優先範囲は、フォーカス移動量が少ない範囲とフォーカス移動量が多い範囲とに大別される。制御部７６Ｍは、レリーズ優先範囲でフォーカスレンズ５４Ｂを移動させる場合、関数１２０において線形的に減少している範囲の係数（図３５参照）をぼけ量に応じて用いてフォーカス移動量を調整し、調整後のフォーカス移動量だけフォーカスレンズ５４Ｂを光軸ＯＡに沿って移動させる。レリーズ優先範囲のうちのフォーカス移動量が少ない範囲では、制御部７６Ｍは、フォーカスレンズ５４Ｂを既定時間内に後続フレーム合焦位置まで移動させる。レリーズ優先範囲のうちのフォーカス移動量が多い範囲では、制御部７６Ｍは、フォーカスレンズ５４Ｂを既定時間内に後続フレーム合焦位置に向けて最大限移動させる。

制御部７６Ｍは、ピント合わせ優先範囲でフォーカスレンズ５４Ｂを移動させる場合、関数１２０においてぼけ量が一定値以上の範囲の一定の係数を用いてフォーカス移動量を調整し、調整後のフォーカス移動量だけフォーカスレンズ５４Ｂを光軸ＯＡに沿って移動させる。ピント合わせ優先範囲では、制御部７６Ｍは、既定時間を超えて（すなわち、既定時間を無視して）後続フレーム合焦位置までフォーカスレンズ５４Ｂを移動させる。

待機優先範囲では、ぼけ量が大きいことから後ピンになることが予想されるため、制御部７６Ｍは、一定時間だけフォーカスレンズ５４Ｂを停止させる。被写体の状況が変化するのを待つ（すなわち、後ピンにならない状況になるのを待つ）ためである。

図３７には、連写制御処理がプロセッサ７６によって実行された場合の連写の処理の流れの一例が示されている。図３７に示すライブビュー撮像期間及び連写期間のうちの１フレーム目までは、図３１に示すライブビュー撮像期間及び連写期間のうちの１フレーム目と同じである。図３７に示す例において、連写の２フレーム目において、本露光期間に、プロセッサ７６は、合焦位置時系列情報に基づいて後続フレーム合焦位置を予測する。そして、連写の２フレーム目の本露光が終了すると、プロセッサ７６は、予測した最新の後続フレーム合焦位置に向けてフォーカスレンズ５４Ｂを移動させる。

本露光によって得られたデジタル画像データ８４の読み出しが終了すると、プロセッサ７６は、最新のデジタル画像データ８４に含まれる位相差画像データに基づいて被写体距離を算出し、算出した被写体距離に基づいてＡＦ演算を行う。プロセッサ７６は、ＡＦ演算を行うことで得た現在合焦位置を用いて合焦位置時系列情報を更新する。そして、プロセッサ７６は、最新の合焦位置時系列情報に基づいて後続フレーム合焦位置を予測し、予測した最新の後続フレーム合焦位置に向けたフォーカスレンズ５４Ｂの移動を継続させる。

その後、連写の２フレーム目では、既定フレーム数（例えば、３フレーム）のライブビュー撮像が行われる。プロセッサ７６は、ライブビュー撮像が行われること毎に得られた最新のデジタル画像データ８４に含まれる位相差画像データに基づいて被写体距離を算出し、算出した被写体距離に基づいてＡＦ演算を行う。プロセッサ７６は、ＡＦ演算を行うことで得た現在合焦位置を用いて合焦位置時系列情報を更新する。そして、プロセッサ７６は、最新の合焦位置時系列情報に基づいて後続フレーム合焦位置を予測し、予測した最新の後続フレーム合焦位置と現在合焦位置とからフォーカス移動量を算出する。

ここで、プロセッサ７６は、既定フレーム数のライブビュー撮像が終了して得た最新のフォーカス移動量を用いて、図３４及び図３５に示す処理を実行することにより、レリーズ優先範囲、ピント合わせ優先範囲、又は待機優先範囲でフォーカスレンズ５４Ｂの移動を制御する。レリーズ優先範囲でフォーカスレンズ５４Ｂを移動させるのであれば、既定時間内で連写の２フレーム目が終了する。ピント合わせ優先範囲でフォーカスレンズ５４Ｂを移動させるのであれば、後続フレーム合焦位置に向けたフォーカスレンズ５４Ｂの移動が続行され、かつ、ライブビュー撮像も続行される。図３７に示す例では、連写の１フレーム目においてライブビュー撮像が続行されず、連写の２フレーム目においてライブビュー撮像が続行された結果、連写の１フレーム目のライブビュー画像のフレーム数が“３”であるのに対し、連写の２フレーム目のライブビュー画像のフレーム数が“７”になっている。

次に、本第４実施形態に係る撮像装置１０のプロセッサ７６によって行われる連写制御処理の流れの一例を図３８Ａ～図３８Ｄに示すフローチャートを参照しながら説明する。

図３８Ａに示す連写制御処理では、ステップＳＴ２００で、制御部７６Ｍは、ライブビュー撮像タイミングが到来したか否かを判定する。ステップＳＴ２００において、ライブビュー撮像タイミングが到来していない場合は、判定が否定されて、連写制御処理は、ステップＳＴ２１２へ移行する。ステップＳＴ２００において、ライブビュー撮像タイミングが到来した場合は、判定が肯定されて、連写制御処理は、ステップＳＴ２０２へ移行する。

ステップＳＴ２０２で、制御部７６Ｍは、イメージセンサ５０に対してライブビュー撮像を行わせる。ステップＳＴ２０２の処理が実行された後、連写制御処理は、ステップＳＴ２０４へ移行する。

ステップＳＴ２０４で、合焦位置演算部７６Ｋは、ステップＳＴ２０２のライブビュー撮像が行われることによって得られたデジタル画像データ８４に含まれる位相差画像データに基づいて被写体距離を算出する。ステップＳＴ２０４で算出された被写体距離は、本開示の技術に係る「第１フレーム期間の第１フレームデータに含まれる第１被写体の距離である第１距離」の一例である。また、ステップＳＴ２０４の処理は、本開示の技術に係る「第１算出工程」の一例である。ステップＳＴ２０４の処理が実行された後、連写制御処理は、ステップＳＴ２０６へ移行する。

ステップＳＴ２０６で、合焦位置演算部７６Ｋは、ステップＳＴ２０４で算出した被写体距離に基づいて現在合焦位置を算出してＲＡＭ８０に格納することで、合焦位置時系列情報を更新する。ステップＳＴ２０６の処理が実行された後、連写制御処理は、ステップＳＴ２０８へ移行する。

ステップＳＴ２０８で、合焦位置予測部７６Ｌは、合焦位置時系列情報に基づいて後続フレーム合焦位置を予測する。ステップＳＴ２０８の処理が実行された後、連写制御処理は、ステップＳＴ２１０へ移行する。

ステップＳＴ２１０で、制御部７６Ｍは、ステップＳＴ２０８で予測された後続フレーム合焦位置に向けてフォーカスレンズ５４Ｂを移動させる。ステップＳＴ２１０の処理は、本開示の技術に係る「第１移動工程」の一例である。ステップＳＴ２１０の処理が実行された後、連写制御処理は、ステップＳＴ２１２へ移行する。

ステップＳＴ２１２で、制御部７６Ｍは、連写開始タイミングが到来したか否かを判定する。ステップＳＴ２１２において、連写開始タイミングが到来していない場合は、判定が否定されて、連写制御処理は、ステップＳＴ２００へ移行する。ステップＳＴ２１２において、連写開始タイミングが到来した場合は、判定が肯定されて、連写制御処理は、ステップＳＴ２１４へ移行する。

なお、ステップＳＴ２００の処理が実行されてから、ステップＳＴ２１２の判定が肯定されるまでの期間は、本開示の技術に係る「第１フレーム期間」の一例である。また、ステップＳＴ２０２のライブビュー撮像が行われることによって得られるデジタル画像データ８４は、本開示の技術に係る「第１フレームデータ」の一例である。

ステップＳＴ２１４で、制御部７６Ｍは、フォーカスレンズ５４Ｂを停止させる。ステップＳＴ２１４の処理が実行された後、連写制御処理は、ステップＳＴ２１６へ移行する。

ステップＳＴ２１６で、制御部７６Ｍは、イメージセンサ５０に対して本露光を開始させる。ステップＳＴ２１６の処理が実行された後、連写制御処理は、ステップＳＴ２１８へ移行する。

ステップＳＴ２１８で、合焦位置予測部７６Ｌは、ＲＡＭ８０から合焦位置時系列情報を取得する。ステップＳＴ２１８の処理が実行された後、連写制御処理は、ステップＳＴ２２０へ移行する。

ステップＳＴ２２０で、合焦位置予測部７６Ｌは、ステップＳＴ２１８で取得した合焦位置時系列情報に基づいて後続フレーム合焦位置を予測する。ステップＳＴ２２０の処理が実行された後、連写制御処理は、ステップＳＴ２２２へ移行する。

ステップＳＴ２２２で、制御部７６Ｍは、本露光が終了したか否かを判定する。ステップＳＴ２２２において、本露光が終了していない場合は、判定が否定されて、ステップＳＴ２２２の判定が再び行われる。ステップＳＴ２２２において、本露光が終了した場合は、判定が肯定されて、連写制御処理は、ステップＳＴ２２４へ移行する。

ステップＳＴ２２４で、制御部７６Ｍは、イメージセンサ５０からデジタル画像データ８４を読み出して画像メモリ６２に格納する。ステップＳＴ２２４の処理が実行された後、連写制御処理は、ステップＳＴ２２６へ移行する。

ステップＳＴ２２６で、制御部７６Ｍは、ステップＳＴ２２０で予測された後続フレーム合焦位置に向けてフォーカスレンズ５４Ｂの移動を開始させる。ステップＳＴ２２６の処理が実行された後、連写制御処理は、図３８Ｂに示すステップＳＴ２２８へ移行する。

ステップＳＴ２２８で、制御部７６Ｍは、ライブビュー撮像タイミングが到来したか否かを判定する。ステップＳＴ２２８において、ライブビュー撮像タイミングが到来していない場合は、判定が否定されて、ステップＳＴ２２８の判定が再び行われる。ステップＳＴ２２８において、ライブビュー撮像タイミングが到来した場合は、判定が肯定されて、連写制御処理は、ステップＳＴ２３０へ移行する。

ステップＳＴ２３０で、制御部７６Ｍは、イメージセンサ５０に対してライブビュー撮像を行わせる。ステップＳＴ２３０の処理が実行された後、連写制御処理は、ステップＳＴ２３２へ移行する。

ステップＳＴ２３２で、合焦位置演算部７６Ｋは、ステップＳＴ２３０のライブビュー撮像が行われることによって得られたデジタル画像データ８４に含まれる位相差画像データに基づいて被写体距離を算出する。ステップＳＴ２３２の処理が実行された後、連写制御処理は、ステップＳＴ２３４へ移行する。

ステップＳＴ２３４で、合焦位置演算部７６Ｋは、ステップＳＴ２３２で算出した被写体距離に基づいて現在合焦位置を算出してＲＡＭ８０に格納することで、合焦位置時系列情報を更新する。ステップＳＴ２３４の処理が実行された後、連写制御処理は、ステップＳＴ２３６へ移行する。

ステップＳＴ２３６で、合焦位置予測部７６Ｌは、ＲＡＭ８０から合焦位置時系列情報を取得する。ステップＳＴ２３６の処理が実行された後、連写制御処理は、ステップＳＴ２３８へ移行する。

ステップＳＴ２３８で、合焦位置予測部７６Ｌは、ステップＳＴ２３６で取得した合焦位置時系列情報に基づいて後続フレーム合焦位置を予測する。ステップＳＴ２３８の処理が実行された後、連写制御処理は、ステップＳＴ２４０へ移行する。

ステップＳＴ２４０で、制御部７６Ｍは、ライブビュー撮像を終了させる条件（以下、「ライブビュー撮像終了条件」と称する）を満足したか否かを判定する。ライブビュー撮像終了条件の一例としては、既定フレーム数のライブビュー撮像が行われた、という条件が挙げられる。ステップＳＴ２４０において、ライブビュー撮像終了条件を満足していない場合は、判定が否定されて、連写制御処理は、ステップＳＴ２２８へ移行する。ステップＳＴ２４０において、ライブビュー撮像終了条件を満足した場合は、判定が肯定されて、連写制御処理は、図３８Ｃに示すステップＳＴ２４２へ移行する。

図３８Ｃに示すステップＳＴ２４２で、制御部７６Ｍは、本露光を開始させるタイミング（以下、「本露光タイミング」と称する）を満足したか否かを判定する。本露光タイミングの一例としては、光電変換素子５２のリセットが完了したタイミングが挙げられる。ステップＳＴ２４２において、本露光タイミングを満足していない場合は、判定が否定されて、ステップＳＴ２４２の判定が再び行われる。ステップＳＴ２４２において、本露光タイミングを満足した場合は、判定が肯定されて、連写制御処理は、ステップＳＴ２４４へ移行する。

ステップＳＴ２４４で、制御部７６Ｍは、フォーカスレンズ５４Ｂを停止させる。最初にステップＳＴ２４４の処理が実行されることによって停止したフォーカスレンズ５４Ｂの位置は、本開示の技術に係る「第１位置」の一例である。ステップＳＴ２４４の処理が実行された後、連写制御処理は、ステップＳＴ２４６へ移行する。

ステップＳＴ２４６で、制御部７６Ｍは、イメージセンサ５０に対して本露光を開始させる。ステップＳＴ２４６の処理が実行された後、連写制御処理は、ステップＳＴ２４８へ移行する。

ステップＳＴ２４８で、合焦位置予測部７６Ｌは、ＲＡＭ８０から合焦位置時系列情報を取得する。ステップＳＴ２４８の処理が実行された後、連写制御処理は、ステップＳＴ２５０へ移行する。

ステップＳＴ２５０で、合焦位置予測部７６Ｌは、ステップＳＴ２４８で取得した合焦位置時系列情報に基づいて後続フレーム合焦位置を予測する。ステップＳＴ２５０の処理が実行された後、連写制御処理は、ステップＳＴ２５２へ移行する。

ステップＳＴ２５２で、制御部７６Ｍは、本露光が終了したか否かを判定する。ステップＳＴ２５２において、本露光が終了していない場合は、判定が否定されて、ステップＳＴ２５２の判定が再び行われる。ステップＳＴ２５２において、本露光が終了した場合は、判定が肯定されて、連写制御処理は、ステップＳＴ２５４へ移行する。

ステップＳＴ２５４で、制御部７６Ｍは、イメージセンサ５０からデジタル画像データ８４を読み出して画像メモリ６２に格納する。ステップＳＴ２５４の処理が実行された後、連写制御処理は、ステップＳＴ２５６へ移行する。

ステップＳＴ２５６で、制御部７６Ｍは、ライブビュー撮像タイミングが到来したか否かを判定する。ステップＳＴ２５６において、ライブビュー撮像タイミングが到来していない場合は、判定が否定されて、ステップＳＴ２５６の判定が再び行われる。ステップＳＴ２５６において、ライブビュー撮像タイミングが到来した場合は、判定が肯定されて、連写制御処理は、ステップＳＴ２５８へ移行する。

ステップＳＴ２５８で、制御部７６Ｍは、イメージセンサ５０に対してライブビュー撮像を行わせる。ステップＳＴ２５８の処理が実行された後、連写制御処理は、ステップＳＴ２６０へ移行する。

ステップＳＴ２６０で、合焦位置演算部７６Ｋは、ステップＳＴ２５８のライブビュー撮像が行われることによって得られたデジタル画像データ８４に含まれる位相差画像データに基づいて被写体距離を算出する。ステップＳＴ２６０で算出された被写体距離は、本開示の技術に係る「第１フレーム期間の後の第２フレーム期間の第２フレームデータに含まれる第２被写体の距離である第２距離」の一例である。また、ステップＳＴ２６０の処理は、本開示の技術に係る「第２算出工程」の一例である。ステップＳＴ２６０の処理が実行された後、連写制御処理は、ステップＳＴ２６２へ移行する。

ステップＳＴ２６２で、合焦位置演算部７６Ｋは、ステップＳＴ２６０で算出した被写体距離に基づいて現在合焦位置を算出してＲＡＭ８０に格納することで、合焦位置時系列情報を更新する。ステップＳＴ２６２の処理が実行された後、連写制御処理は、ステップＳＴ２６４へ移行する。

ステップＳＴ２６４で、合焦位置予測部７６Ｌは、ＲＡＭ８０から合焦位置時系列情報を取得する。ステップＳＴ２６４の処理が実行された後、連写制御処理は、ステップＳＴ２６６へ移行する。

ステップＳＴ２６６で、合焦位置予測部７６Ｌは、ステップＳＴ２６４で取得した合焦位置時系列情報に基づいて後続フレーム合焦位置を予測する。ステップＳＴ２６６の処理が実行された後、連写制御処理は、ステップＳＴ２６８へ移行する。

ステップＳＴ２６８で、制御部７６Ｍは、ライブビュー撮像終了条件を満足したか否かを判定する。ステップＳＴ２６８において、ライブビュー撮像終了条件を満足していない場合は、判定が否定されて、連写制御処理は、ステップＳＴ２５６へ移行する。ステップＳＴ２６８において、ライブビュー撮像終了条件を満足した場合は、判定が肯定されて、連写制御処理は、図３８Ｄに示すステップＳＴ２７０へ移行する。

図３８Ｄに示すステップＳＴ２７０で、制御部７６Ｍは、現在合焦位置とステップＳＴ２６６で予測された後続フレーム合焦位置とに基づいてフォーカス移動量を算出する。ステップＳＴ２７０で算出されたフォーカス移動量は、本開示の技術に係る「移動量」の一例である。ステップＳＴ２７０の処理が実行された後、連写制御処理は、ステップＳＴ２７２へ移行する。

ステップＳＴ２７２で、制御部７６Ｍは、ステップＳＴ２７０又はＳＴ２８４で算出したフォーカス移動量が第１基準値を超過しているか否かを判定する。ステップＳＴ２７０において、ステップＳＴ２７０又はＳＴ２８４で算出したフォーカス移動量が第１基準値を超過していない場合は、判定が否定されて、連写制御処理は、ステップＳＴ２８６へ移行する。ステップＳＴ２７２において、ステップＳＴ２７０又はＳＴ２８４で算出したフォーカス移動量が第１基準値を超過している場合は、判定が肯定されて、連写制御処理は、ステップＳＴ２７４へ移行する。

ステップＳＴ２７４で、制御部７６Ｍは、フォーカスレンズ５４Ｂを一定時間だけ停止させる。ステップＳＴ２７４の処理が実行された後、連写制御処理は、ステップＳＴ２７６へ移行する。

ステップＳＴ２７６で、制御部７６Ｍは、イメージセンサ５０に対してライブビュー撮像を行わせる。そして、合焦位置演算部７６Ｋは、ライブビュー撮像が行われることによって得られたデジタル画像データ８４に含まれる位相差画像データに基づいて被写体距離を算出する。ステップＳＴ２７６の処理が実行された後、連写制御処理は、ステップＳＴ２７８へ移行する。

ステップＳＴ２７８で、合焦位置演算部７６Ｋは、ステップＳＴ２７６で算出した被写体距離に基づいて現在合焦位置を算出してＲＡＭ８０に格納することで、合焦位置時系列情報を更新する。ステップＳＴ２７８の処理が実行された後、連写制御処理は、ステップＳＴ２８０へ移行する。

ステップＳＴ２８０で、合焦位置予測部７６Ｌは、ＲＡＭ８０から合焦位置時系列情報を取得する。ステップＳＴ２８０の処理が実行された後、連写制御処理は、ステップＳＴ２８２へ移行する。

ステップＳＴ２８２で、合焦位置予測部７６Ｌは、ステップＳＴ２８０で取得した合焦位置時系列情報に基づいて後続フレーム合焦位置を予測する。ステップＳＴ２８２の処理が実行された後、連写制御処理は、ステップＳＴ２８４へ移行する。

ステップＳＴ２８４で、制御部７６Ｍは、現在合焦位置とステップＳＴ２８２で予測された後続フレーム合焦位置とに基づいてフォーカス移動量を算出する。ステップＳＴ２８４で算出されたフォーカス移動量は、本開示の技術に係る「移動量」の一例である。ステップＳＴ２８４の処理が実行された後、連写制御処理は、ステップＳＴ２７２へ移行する。

ステップＳＴ２８６で、ステップＳＴ２７０又はＳＴ２８４で算出したフォーカス移動量が第２基準値を超過しているか否かを判定する。ステップＳＴ２８６において、ステップＳＴ２７０又はＳＴ２８４で算出したフォーカス移動量が第２基準値を超過している場合は、判定が肯定されて、連写制御処理は、ステップＳＴ２８８へ移行する。ステップＳＴ２８６において、ステップＳＴ２７０又はＳＴ２８４で算出したフォーカス移動量が第２基準値を超過していない場合は、判定が否定されて、連写制御処理は、ステップＳＴ２９０へ移行する。

ステップＳＴ２８８で、制御部７６Ｍは、フォーカスレンズ５４Ｂの制限範囲内での移動を開始させる。すなわち、制御部７６Ｍは、ステップＳＴ２６６又はＳＴ２８２で予測された後続フレーム合焦位置までのフォーカスレンズ５４Ｂの既定時間内での移動を開始させる。ここで、フォーカスレンズ５４Ｂの移動で用いられるフォーカス移動量は、関数１２０からぼけ量に応じて得られた係数によって調整されたフォーカス移動量である。ステップＳＴ２８８の処理が実行されることによって、フォーカスレンズ５４Ｂは、ステップＳＴ２６６又はＳＴ２８２で予測された後続フレーム合焦位置に到達しないが、ステップＳＴ２４４で停止したフォーカスレンズ５４Ｂの位置よりもステップＳＴ２６６又はＳＴ２８２で予測された後続フレーム合焦位置に近い位置に到達する。ステップＳＴ２８８の処理が実行されることによってフォーカスレンズ５４Ｂが移動した先の位置（例えば、図３８Ｃに示すステップＳＴ２４４で停止したフォーカスレンズ５４Ｂの位置）は、本開示の技術に係る「第３位置」の一例である。ステップＳＴ２８８の処理が実行された後、連写制御処理は、ステップＳＴ２９２へ移行する。

ステップＳＴ２９０で、制御部７６Ｍは、ステップＳＴ２６６又はＳＴ２８２で予測された後続フレーム合焦位置までのフォーカスレンズ５４Ｂの移動を開始させる。ここで、フォーカスレンズ５４Ｂの移動で用いられるフォーカス移動量は、関数１２０からぼけ量に応じて得られた係数によって調整されたフォーカス移動量である。ステップＳＴ２９０の処理が実行されることによって、フォーカスレンズ５４Ｂは、ステップＳＴ２６６又はＳＴ２８２で予測された後続フレーム合焦位置に到達する。ステップＳＴ２９０の処理が実行されることによってフォーカスレンズ５４Ｂが移動した先の位置（例えば、図３８Ｃに示すステップＳＴ２４４で停止したフォーカスレンズ５４Ｂの位置）は、本開示の技術に係る「第２位置」の一例である。ステップＳＴ２９０の処理が実行された後、連写制御処理は、ステップＳＴ２９２へ移行する。

なお、連写制御処理では、ステップＳＴ２７０の処理又はステップＳＴ２８４の処理とステップＳＴ２８６の処理とが実行されることによってフォーカスレンズ５４Ｂが移動する先の位置が選択される。ステップＳＴ２７０の処理、ステップＳＴ２８４の処理、及びステップＳＴ２８６の処理は、本開示の技術に係る「選択工程」の一例である。また、ステップＳＴ２８８の処理、ステップＳＴ２９０の処理、及びステップＳＴ２４６の処理は、本開示の技術に係る「撮像工程」の一例である。

ステップＳＴ２９２で、制御部７６Ｍは、連写制御処理を終了させる条件（以下、「連写制御処理終了条件」と称する）を満足したか否かを判定する。連写制御処理終了条件の一例としては、連写モードが解除されたという条件が挙げられる。ステップＳＴ２９２において、連写制御処理終了条件を満足していない場合は、判定が否定されて、連写制御処理は、図３８Ｃに示すステップＳＴ２４２へ移行する。ステップＳＴ２９２において、連写制御処理終了条件を満足した場合は、判定が肯定されて、連写制御処理が終了する。

以上説明したように、本第４実施形態に係る撮像装置１０では、連写期間の前段階であるライブビュー撮像期間のライブビュー撮像によって得られたデジタル画像データ８４に基づいて被写体距離が算出される（ステップＳＴ２０４参照）。そして、連写期間で、ライブビュー撮像期間に算出された被写体距離に基づいて予測された後続フレーム合焦位置（ステップＳＴ２２０参照）に向けてフォーカスレンズ５４Ｂを移動させる。ここで、連写のフレーム間隔がレリーズを優先した時間間隔で定められている場合、後続フレーム合焦位置にフォーカスレンズ５４Ｂを到達させることなく本露光が開始されることがあり、ぼけた画像が得られてしまう。一方、連写のフレーム間隔を無視してピント合わせを優先した場合、ぼけが少ない画像は得られるものの、連写によって得られるフレーム数が少なくなってしまう。

そこで、本第４実施形態に係る撮像装置１０では、例えば、連写の２フレーム目のライブビュー撮像で得られたデジタル画像データ８４に基づいて被写体距離が算出され、算出された被写体距離に基づいてフォーカス移動量が算出される。そして、フォーカス移動量が第２基準値を超えているか否かによって、予測された後続フレーム合焦位置にフォーカスレンズ５４Ｂを到達させるか、又は、予測された後続フレーム合焦位置にフォーカスレンズ５４Ｂを最大限近付けるかが選択される。

例えば、フォーカス移動量が第２基準値を超えている場合は、既定時間内に、予測された後続フレーム合焦位置にフォーカスレンズ５４Ｂを到達させることができないと判断される。この場合、後続フレーム合焦位置にフォーカスレンズ５４Ｂを最大限近付けるという選択肢が選ばれる（ステップＳＴ２８８参照）。フォーカス移動量が第２基準値以下の場合は、既定時間内に、予測された後続フレーム合焦位置にフォーカスレンズ５４Ｂを到達させることができると判断される。この場合、予測された後続フレーム合焦位置にフォーカスレンズ５４Ｂを到達させるという選択肢が選ばれる（ステップＳＴ２９０参照）。

予測された後続フレーム合焦位置にフォーカスレンズ５４Ｂを到達させてから本露光が行われると、レリーズ間隔を拡げることなく、ピントが合った状態での本露光が可能となる。また、予測された後続フレーム合焦位置に最大限近付けてから本露光が行われると、連写のフレーム間隔が拡がり過ぎることなく、かつ、ピントが合った状態に近い状態で本露光が可能となる。よって、レリーズとピント合わせとをバランス良く両立させることができる。この結果、例えば、連写モードの場合、連写のスピードを落とし過ぎることなく、ぼけが少ない画像を得ることができる。

また、本第４実施形態に係る撮像装置１０では、算出されたフォーカス移動量が大き過ぎると、既定時間内でのピント合わせが困難となる。そこで、フォーカス移動量が第１基準値を超過している場合に、フォーカスレンズ５４Ｂが一定時間だけ留められる。この間に被写体の状況が変化すれば、改めて算出されるフォーカス移動量が小さくなることが期待できる。フォーカス移動量が小さくなれば、既定時間内でピントが合った状態での本露光、又は、既定時間内でピントが合った状態に近い状態での本露光を実現することができる。

なお、上記第４実施形態では、連写モードの場合を例示したが、本開示の技術はこれに限定されない。例えば、上記第４実施形態で開示した技術は、記録用の動画像を得るために行われる撮像等のように、複数のフレームを連続的に得るために行われる撮像に対して適用される。

また、上記各実施形態では、ＮＶＭ７８に各種プログラムが記憶されている形態例を挙げて説明したが、本開示の技術はこれに限定されない。例えば、各種プログラムがＳＳＤ（Solid State Drive）又はＵＳＢメモリなどの可搬型のコンピュータ読取可能な非一時的記憶媒体に記憶されていてもよい。非一時的記憶媒体に記憶されている各種プログラムは、撮像装置１０にインストールされる。プロセッサ７６は、各種プログラムに従って、上記各実施形態で説明した各種処理を実行する。

また、ネットワークを介して撮像装置１０に接続される他のコンピュータ又はサーバ装置等の記憶装置に各種プログラムを記憶させておき、撮像装置１０の要求に応じて各種プログラムがダウンロードされ、撮像装置１０にインストールされるようにしてもよい。

なお、撮像装置１０に接続される他のコンピュータ又はサーバ装置等の記憶装置、又はＮＶＭ７８に各種プログラムの全てを記憶させておく必要はなく、各種プログラムの一部を記憶させておいてもよい。

また、図３に示す撮像装置１０にはコントローラ６０が内蔵されているが、本開示の技術はこれに限定されず、例えば、コントローラ６０が撮像装置１０の外部に設けられるようにしてもよい。

上記各実施形態では、本開示の技術がソフトウェア構成によって実現される形態例を挙げて説明しているが、本開示の技術はこれに限定されず、ＡＳＩＣ、ＦＰＧＡ、又はＰＬＤを含むデバイスを適用してもよい。また、ハードウェア構成及びソフトウェア構成の組み合わせを用いてもよい。

上記各実施形態で説明した各種処理を実行するハードウェア資源としては、次に示す各種のプロセッサを用いることができる。プロセッサとしては、例えば、ソフトウェア、すなわち、プログラムを実行することで、各種処理を実行するハードウェア資源として機能する汎用的なプロセッサであるＣＰＵが挙げられる。また、プロセッサとしては、例えば、ＦＰＧＡ、ＰＬＤ、又はＡＳＩＣなどの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電子回路が挙げられる。何れのプロセッサにもメモリが内蔵又は接続されており、何れのプロセッサもメモリを使用することで各種処理を実行する。

各種処理を実行するハードウェア資源は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ、又はＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、各種処理を実行するハードウェア資源は１つのプロセッサであってもよい。

１つのプロセッサで構成する例としては、第１に、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが、各種処理を実行するハードウェア資源として機能する形態がある。第２に、ＳｏＣ（System-on-a-chip）などに代表されるように、各種処理を実行する複数のハードウェア資源を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種処理は、ハードウェア資源として、上記各種のプロセッサの１つ以上を用いて実現される。

更に、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子などの回路素子を組み合わせた電子回路を用いることができる。また、上記の各種処理はあくまでも一例である。従って、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。

以上に示した記載内容及び図示内容は、本開示の技術に係る部分についての詳細な説明であり、本開示の技術の一例に過ぎない。例えば、上記の構成、機能、作用、及び効果に関する説明は、本開示の技術に係る部分の構成、機能、作用、及び効果の一例に関する説明である。よって、本開示の技術の主旨を逸脱しない範囲内において、以上に示した記載内容及び図示内容に対して、不要な部分を削除したり、新たな要素を追加したり、置き換えたりしてもよいことは言うまでもない。また、錯綜を回避し、本開示の技術に係る部分の理解を容易にするために、以上に示した記載内容及び図示内容では、本開示の技術の実施を可能にする上で特に説明を要しない技術常識等に関する説明は省略されている。

本明細書において、「Ａ又はＢ」という文法的な概念には、「ＡとＢの何れか１つ」という概念の他に、「Ａ及びＢのうちの少なくとも１つ」と同義の概念も含まれる。つまり、「Ａ又はＢ」には、Ａだけであってもよいし、Ｂだけであってもよいし、Ａ及びＢの組み合わせであってもよい、という意味が含まれる。また、本明細書において、３つ以上の事柄を「又は」で結び付けて表現する場合も、「Ａ又はＢ」と同様の考え方が適用される。

本明細書に記載された全ての文献、特許出願及び技術規格は、個々の文献、特許出願及び技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。

１０ 撮像装置
１２ 撮像対象領域
１４ 人物
１６ 道路
１８ 撮像装置本体
２０ 交換レンズ
２２ ダイヤル
２４ レリーズボタン
２６ タッチパネル・ディスプレイ
２８ 指示キー
３０ ディスプレイ
３０Ａ 画面
３０Ａ１ 短辺
３０Ａ２ 長辺
３０Ｂ 中央部
３２ タッチパネル
３４ ライブビュー画像
３６，４１ ＡＦ枠
３８，３９ 領域
４０ 上下方向
４２ 中央領域
４３，４３Ａ～４３Ｘ，４４，４４Ａ～４４Ｈ 周辺領域
４６ 第１被写体
４８，４８Ａ～４８Ｈ 第２被写体
５０ イメージセンサ
５２ 光電変換素子
５２Ａ 撮像面
５４ 撮像レンズ
５４Ａ 対物レンズ
５４Ｂ フォーカスレンズ
５６ 制御装置
５８ アクチュエータ
６０ コントローラ
６２ 画像メモリ
６４ ＵＩ系デバイス
６６ 外部Ｉ／Ｆ
７０ 光電変換素子ドライバ
７２ 入出力インタフェース
７４ 信号処理回路
７６ プロセッサ
７６Ａ 第１撮像制御部
７６Ｂ 第１算出部
７６Ｃ 第１特定部
７６Ｄ 第１選択部
７６Ｅ 表示制御部
７６Ｆ 第２撮像制御部
７６Ｇ 第２選択部
７６Ｈ 第２算出部
７６Ｉ 第２特定部
７６Ｊ 第３選択部
７６Ｋ 合焦位置演算部
７６Ｌ 合焦位置予測部
７６Ｍ 制御部
７８ ＮＶＭ
８０ ＲＡＭ
８２ バス
８４ デジタル画像データ
８６ 受付デバイス
８８ ハードキー部
９０，１００，１０６ 撮像処理プログラム
９２ 第１特定領域
９４ 第１合焦被写体
９６ 第１合焦被写体情報
９８ 鳥
１０２ 第２合焦被写体
１０４ 第２合焦被写体情報
１０８ 第２特定領域
１１０ 第３合焦被写体
１１２ 第３合焦被写体情報
１１４ 第４合焦被写体
１１６ 第４合焦被写体情報
１１８ 連写制御処理プログラム
１２０ 関数
ＯＡ 光軸

Claims (9)

1. 第１領域と複数の第２領域を含む複数の候補領域に含まれる被写体を撮像する第１撮像工程と、
   前記第１領域における第１被写体の距離である第１距離、及び前記複数の第２領域における複数の第２被写体の距離である複数の第２距離を算出する第１算出工程と、
   複数の第２距離のうちの第１条件を満たす前記第２距離に対応する第１特定領域を前記複数の第２領域の中から特定する第１特定工程と、
   前記複数の第２領域に対しての前記第１特定領域の割合である第１割合に基づいて、前記第１被写体及び前記第１特定領域内の前記第２被写体から、合焦させる第１合焦被写体を選択する第１選択工程と、を備え、
   前記第１条件は、前記第２距離が前記第１距離よりも短いという条件であり、
   前記第１領域は、中央領域であり、
   前記第２領域は、周辺領域であり、
   前記第１割合は、前記第１特定領域の個数に対応する値であり、
   前記第１選択工程は、前記値が閾値を超えている場合に、前記第２被写体を前記第１合焦被写体として選択する工程である
   選択方法。
2. 前記閾値は、前記複数の候補領域に対して事前に固定された上下方向において前記中央領域よりも下方に位置する前記周辺領域の個数に対応する
   請求項１に記載の選択方法。
3. 前記第１選択工程は、前記複数の第２距離が前記第１距離よりも長い場合、前記第１被写体を前記第１合焦被写体として選択する工程である
   請求項１又は請求項２に記載の選択方法。
4. 前記第１撮像工程の後に、前記第１被写体及び前記複数の第２被写体を撮像する第２撮像工程と、
   前記第２撮像工程で撮像した前記第１被写体及び前記複数の第２被写体から、前記第１合焦被写体と距離が近い被写体を、合焦させる第２合焦被写体として選択する第２選択工程と、を更に備える
   請求項１から請求項３の何れか一項に記載の選択方法。
5. 前記第２選択工程は、前記第２撮像工程で撮像した前記第１被写体及び前記複数の第２被写体から、既定距離未満の範囲内で前記第１合焦被写体と距離が近い被写体を前記第２合焦被写体として選択する工程である
   請求項４に記載の選択方法。
6. 前記複数の候補領域は、複数の第３領域を含み、
   前記複数の第３領域は、前記複数の第２領域を含み、
   前記第１距離と前記複数の第３領域における複数の第３被写体の距離である複数の第３距離とを算出する第２算出工程と、
   前記複数の第３距離に対して第２条件を満たす前記第３距離に対応する第２特定領域を特定する第２特定工程と、
   前記複数の第３領域に対しての前記第２特定領域の割合である第２割合に基づいて、前記第１被写体及び前記第２特定領域内の前記第３被写体から、合焦させる第３合焦被写体を選択する第３選択工程と、を更に備え、
   前記第２条件は、前記第３距離が前記第１距離よりも短いという条件である
   請求項１から請求項５の何れか一項に記載の選択方法。
7. 前記第２特定工程で前記第２特定領域が特定されなかった場合に前記第１特定工程及び前記第１選択工程を行う
   請求項６に記載の選択方法。
8. Ｎを３以上の奇数とした場合、
   前記複数の第２領域は、Ｎ×Ｎのマトリクス状に配置された複数の領域であり、
   前記複数の第３領域は、（Ｎ＋２）×（Ｎ＋２）のマトリクス状に配置された複数の領域である
   請求項６又は請求項７に記載の選択方法。
9. イメージセンサと、
   プロセッサと、を備え、
   前記プロセッサは、
   第１領域と複数の第２領域を含む複数の候補領域に含まれる被写体を前記イメージセンサに対して撮像させ、
   前記第１領域における第１被写体の距離である第１距離、及び前記複数の第２領域における複数の第２被写体の距離である複数の第２距離を算出し、
   複数の第２距離のうちの第１条件を満たす前記第２距離に対応する第１特定領域を前記複数の第２領域の中から特定し、
   前記複数の第２領域に対しての前記第１特定領域の割合である第１割合に基づいて、前記第１被写体及び前記第１特定領域内の前記第２被写体から、合焦させる第１合焦被写体を選択し、
   前記第１条件は、前記第２距離が前記第１距離よりも短いという条件であり、
   前記第１領域は、中央領域であり、
   前記第２領域は、周辺領域であり、
   前記第１割合は、前記第１特定領域の個数に対応する値であり、
   前記プロセッサは、前記値が閾値を超えている場合に、前記第２被写体を前記第１合焦被写体として選択する
   撮像装置。