JP3752510B2

JP3752510B2 - 画像の自動被写体検出方法

Info

Publication number: JP3752510B2
Application number: JP09249796A
Authority: JP
Inventors: 恭一小俣; 学喜利; 俊樹宮野
Original assignee: イーストマンコダックカンパニー
Priority date: 1996-04-15
Filing date: 1996-04-15
Publication date: 2006-03-08
Anticipated expiration: 2016-04-15
Also published as: JPH09281386A; US5877809A

Description

【０００１】
【発明の属する技術分野】
本発明は、例えば電子スチルカメラといった自動焦点撮像装置で所望の被写体に焦点レンズを合焦させ続ける際に用いられる画像の自動被写体検出方法に関し、特に、焦点レンズを通じて結像される画像をその照度に応じた電気信号に変換する光電変換センサと、前記電気信号に含まれる高周波成分量の指標となる焦点評価値を算出し、その焦点評価値に基づいて、前記焦点レンズを移動させて画像の合焦を確立させる焦点合わせ機構とを備える自動焦点撮像装置に用いられるものに関する。
【０００２】
【従来の技術】
例えばカメラといった自動焦点撮像装置で、連続的に所望の被写体に焦点レンズを合焦させ続けるには、所望の被写体が撮像画面内で移動したこと（撮影場面が変化したこと）を迅速に検出し、移動した被写体が占める撮像画面内の位置を再検出する必要がある。その一方で、必ずしも被写体の再検出を実行しなくとも合焦状態が維持される場面で、被写体の微妙な動きによって被写体位置の再検出動作すなわち被写体検出動作が実行されると、カメラの使用者に違和感を与えてしまう。
【０００３】
【発明が解決しようとする課題】
従来、カメラでは、撮像画面内の明るさの変化を検出して被写体の移動を検出する画像の自動被写体検出方法が提案されている。提案された自動被写体検出方法では、カメラの使用者がカメラをパンして撮影場面の変化が起こった場合でも明るさの変化が小さければ撮影場面の変化を検出することができない。その結果、所望の被写体に焦点を合わせ続けることはできない。
【０００４】
また、従来のカメラでは、一旦合焦状態が得られると、焦点レンズの位置を固定した上で、明るさの変化と焦点評価値の変化とに基づいて撮影場面の変化を検出していた。こういった自動被写体検出方法で、被写体の微妙な動きを誤検出して撮影場面の変化とみなさないように明るさの変化および焦点評価値の変化に閾値を設定すると、合焦中の被写体の前に新たに小さな被写体が現れた場合でも明るさ変化および焦点評価値変化が小さいことから撮影場面の変化として認識されないことがある。
【０００５】
さらに、従来のカメラでは、一旦合焦状態が得られると焦点レンズの位置を固定していたことから、合焦中の被写体が前後に移動すると、撮影場面の変化が検出されて再度被写体検出動作が実行された。この場合、撮像画面内における被写体の位置は変化しないことから、同一の位置で合焦が得られる。したがって、合焦を得るまでに再び被写体検出動作の全行程を実行することは、時間の無駄である。被写体の前後移動に対しては、単にその被写体位置の焦点評価値が最大になるように焦点レンズを移動させることが望ましい。
【０００６】
本発明は、上記実情に鑑みてなされたもので、特別なハードウェアを用いることなく、撮像画面の構図変化を的確に把握し、被写体の合焦状態を保持し続けることができる画像の自動被写体検出方法を提供することを目的とする。
【０００７】
【課題を解決するための手段】
上記目的を達成するために、本発明によれば、光電変換センサを用いて、焦点レンズを通じて結像される画像の照度に応じた電気信号を得る工程と、画像を複数個の細分化領域に分割する工程と、分割された細分化領域ごとに、前記電気信号に含まれる高周波成分量の指標となる焦点評価値を算出する工程と、焦点評価値に基づいて細分化領域ごとに被写体距離を抽出し、その被写体距離に基づいて被写体を選択する工程と、焦点レンズを移動させて、選択された被写体を対象として合焦動作を実行する工程とを備える画像の自動被写体検出方法において、前記合焦動作の実行中、前記選択された被写体の被写体距離より大きい被写体距離を有する遠方細分化領域に、前記選択された被写体の被写体距離より小さい被写体距離を有する新たな被写体を検出した場合には、前記合焦動作を実行する被写体を選択し直す工程を含む。
【０００８】
また、無限遠に向かって前記焦点レンズを移動させ、前記選択された被写体が属する被写体細分化領域で焦点評価値が最大となるレンズ位置を確立する際、前記被写体細分化領域で焦点評価値の減少を検出する前に、任意の遠方細分化領域で焦点評価値の減少を検出した場合には、前記合焦動作を実行する被写体を選択し直すこともできる。
【０００９】
さらに、最近点に向かって前記焦点レンズを移動させ、前記被写体細分化領域で焦点評価値が最大となるレンズ位置を確立する際、前記被写体細分化領域で焦点評価値の減少を検出し、任意の遠方細分化領域で焦点評価値の所定値以上の増加を検出した場合には、前記合焦動作を実行する被写体を選択し直すこともできる。
【００１０】
さらにまた、前記選択された被写体に対し合焦が確立された際に前記焦点レンズを前後方向に振動させる工程と、その振動に基づいて、前記被写体細分化領域の焦点評価値が最大値をとることを確認する工程と、前記振動中、前記遠方細分化領域に、前記選択された被写体の被写体距離より小さい被写体距離を有する新たな被写体を検出した場合には、前記合焦動作を実行する被写体を選択し直す工程とを備えることもできる。
【００１１】
さらにまた、前記所定値は、細分化領域ごとに被写体距離を抽出する際に得られる細分化領域ごとの焦点評価値の最大値に基づいて決定されることもできる。
【００１２】
そして、本発明は、前記被写体細分化領域、前記選択された被写体の被写体距離と等しい被写体距離を有する等距離細分化領域、および前記選択された被写体の被写体距離と異なる被写体距離を有する異距離細分化領域に各々重み付けを行う工程と、レンズ位置を固定したまま各細分化領域の明るさ値の加重和および焦点評価値の加重和を算出する工程と、被写体細分化領域の焦点評価値の変化量が一定範囲内であって明るさ値の加重和の変化量が閾値以下の場合には、焦点評価値の最大値を確立するレンズ位置に焦点レンズを移動させる工程と、明るさ値の加重和の変化量が閾値より大きい場合または焦点評価値の加重和が一定値以上の場合には、前記合焦動作を実行する被写体を選択し直す工程とを備えることを特徴とする。
【００１３】
【発明の実施の形態】
以下、添付図面を参照しつつ本発明の好適な実施形態を説明する。
【００１４】
図１は本発明の一実施形態に係る自動焦点撮像装置の概略的な全体構成を示す。自動焦点撮像装置としての電子スチルカメラＳＣは、適切なレンズ位置で被写体ＯＢを捕らえる焦点レンズ１０と、焦点レンズ１０を通じて結像される画像をその照度に応じた電気信号に変換する光電変換センサとしてのＣＣＤ（電荷結合素子）１１とを備える。ＣＣＤ１１で捕らえられた画像は、例えばＡ／Ｄ変換器１２等でデジタル化され、メモリカードといった記録媒体１３に記録される。
【００１５】
焦点レンズ１０の合焦は焦点合わせ機構１４によって確立される。この焦点合わせ機構１４は、図２に示すように、ＣＣＤ１１の駆動信号を供給するＣＣＤドライバ１５と、焦点レンズ１０を光軸に沿って前後に移動させるレンズ駆動機構１６と、これらＣＣＤドライバ１５およびレンズ駆動機構１６を制御するコントローラ１７とを備える。コントローラ１７の制御下で、ＣＣＤドライバ１５からの駆動信号に従って、画像の各画素ごとの照度に応じた大きさの電流がシリアルな信号系列としてＣＣＤ１１から出力される。
【００１６】
ＣＣＤ１１から出力された信号系列は増幅器１８によって増幅される。増幅された電気信号は、Ａ／Ｄ変換器１９によって線形にデジタル信号に変換される。領域分割器２０は、画像を複数個の細分化領域に分割し、変換で得られたデジタル信号が細分化領域ごとに区別することができるようにデジタル信号を出力する。出力されたデジタル信号は、明るさ評価器２１および焦点評価器２２に供給される。明るさ評価器２１は、供給されたデジタル信号に基づいて、分割された細分化領域ごとに、画像の明るさの指標となる明るさ値を算出する。焦点評価器２２は、供給されたデジタル信号に基づいて、分割された細分化領域ごとに、電気信号に含まれる高周波成分量の指標となる焦点評価値を算出する。この焦点評価値は、画素ごとの高周波成分量が細分化領域内で総和されることによって得られる。焦点評価値が最大値をとる焦点レンズ１０のレンズ位置で、コントローラ１７は焦点レンズ１０の合焦を推定する。この合焦の推定は、ピンぼけ状態にある画像に比べて合焦状態にある画像では電気信号の高周波成分量が多くなるといった原理に基づく。
【００１７】
コントローラ１７は、プログラムメモリ２３に記憶されたプログラムに従って、供給された焦点評価値および明るさ値を処理する。コントローラ１７には、画像の合焦時の焦点評価値および明るさ値を参照値として保存する参照値メモリ２４と、算出された様々なデータを保存するデータメモリ２５とが接続される。なお、本実施形態では、プログラムメモリ２３、参照値メモリ２４およびデータメモリ２５を別個に設けたが、これらの用途に共通して１個のメモリ装置を用いることもできる。
【００１８】
次に図３に示すフローチャートを参照しつつ本実施形態に係る画像の被写体検出方法を説明する。撮像が開始されると、第１ステップＳ１で全域スキャン動作を通じて最初の被写体選別が実行される。この全域スキャン動作では、最近点から無限遠まで焦点レンズ１０が少なくとも１回移動させられ、この移動を通じて画像の構図の中から主被写体が選別される。第２ステップＳ２では、選択された主被写体に対する合焦動作が実行される。この合焦動作中に、主被写体を再び選択する必要があるか否かが検出される。第３ステップＳ３で、合焦状態が確立されたまま被写体の再選択が必要性がないことが検出されると、第４ステップＳ４に進み、ここで撮影者が撮像を行えば、画像は記録媒体１３（図１参照）に記録される。その後、再び撮像を行う場合には第１ステップＳ１に復帰する。仮に、第３ステップＳ３で、主被写体の再選択の必要性が認められると、第１ステップＳ１に戻って主被写体の選択をやり直す。
【００１９】
合焦後、撮影者が非撮像状態を保持すると、第５ステップＳ５で構図変化が発生するか否かが観察される。この観察動作では、被写体の移動や姿勢変化といった画像の構図変化を検出することによって、選別された主被写体に対する合焦が維持されることが企図される。例えば、画像の中央に位置していた主被写体が画像隅に移動したり、新たな被写体が画像に導入されて主被写体が入れ替わったり、画像の中央に位置する主被写体が焦点レンズ１０の光軸方向に沿って前後に移動したりすることが簡単に検出される。
【００２０】
第６ステップＳ６で構図変化はないと判断されると、第４ステップＳ４に戻って撮像終了か否かが判断される。撮像が終了するまで、構図変化の検出動作は繰り返し継続的に実行される。一方で、構図変化があったと判断されると、第１ステップＳ１に復帰する。
【００２１】
図４を参照しつつ全域スキャンによる被写体選別動作を詳述する。第１ステップＴ１で、コントローラ１７は、レンズ駆動機構１６を通じて最近点から無限遠まで焦点レンズ１０を一定速度で移動させる。この移動の最中、コントローラ１７は、一定の時間間隔で、ＣＣＤ１１から画像の照度に応じた電気信号を繰り返し出力させる。焦点評価器２２は、出力された電気信号から高周波成分量の指標となる焦点評価値を算出する。明るさ評価器２１は、同様に、画像の明るさの指標となる明るさ値を算出する。これらの焦点評価値や明るさ値は、領域分割器２０の働きによって細分化領域ごとに得られる。すなわち、時間軸に沿った複数枚の画像ごとに各細分化領域の焦点評価値および明るさ値が得られる。
【００２２】
第２ステップＴ２で、コントローラ１７は、合焦状態の検出に基づいて、細分化領域ごとに被写体距離を算出する。コントローラ１７は、各細分化領域の焦点評価値が最大値をとるレンズ位置をデータメモリ２５に記憶する。例えば、図５に示す画像を撮像する場合を想定する。画像ＧＧは、領域分割器２０によって複数の格子状細分化領域Ｇ（１、１）〜Ｇ（８、６）に分割されている。距離算出によって、図６に示す被写体距離データが得られることとなる。
【００２３】
第３ステップＴ３では、コントローラ１７は、被写体距離に基づいて、主被写体が属する被写体細分化領域を特定する。コントローラ１７は、まず、同一の被写体距離を目安に画像を範囲分けする。範囲分けの結果に基づいて、コントローラ１７では、同一の被写体距離を有する等距離細分化領域Ｇ（２、３）〜Ｇ（４、５）に囲まれて該被写体距離を有する細分化領域Ｇ（４、３）が被写体細分化領域として選び出される。
【００２４】
図７を参照しつつ、図３の第２ステップＳ２に係る合焦動作を詳述する。第１ステップＰ１で、コントローラ１７は、前述した全域スキャンに続いて、最近点から無限遠に向けて焦点レンズ１０を移動させるか、無限遠から最近点に向けて焦点レンズ１０を移動させるかする。この移動中、ＣＣＤ１１から電気信号を出力させ、焦点評価器２２から焦点評価値を出力させるとともに明るさ評価器２１から明るさ評価値を出力させる（第２ステップＰ２）。選び出された被写体細分化領域Ｇ（４、３）では、焦点レンズ１０が主被写体に合焦されるまで焦点評価値が増加し続ける。
【００２５】
第３ステップＰ３では、焦点レンズ１０の移動中、各細分化領域Ｇ（ｘ，ｙ）の明るさ値の変化を観察し、明るさ値の変化の大きさが閾値以上であると判断されると、図３の第３ステップＳ３で被写体の再選択が必要であることを認識させる（第４ステップＰ４）。
【００２６】
第５ステップＰ５では、焦点レンズ１０が最近点側から無限遠に向かって移動しているか、反対に無限遠側から最近点に向かって移動しているか、すなわち、焦点レンズ１０の移動方向が特定される。焦点レンズ１０が無限遠に向かって移動している場合には、第６ステップＰ６で、被写体細分化領域Ｇ（４，３）で焦点評価値の減少を検出する前に、主被写体より大きい被写体距離を有する任意の遠方細分化領域で焦点評価値の減少を検出すると、図３の第３ステップＰ３で被写体の再選択が必要であることを認識させる（第７ステップＰ７）。任意の遠方細分化領域で焦点評価値の減少が観察されないと、第８ステップＰ８に進む。
【００２７】
その一方で、焦点レンズ１０が最近点に向かって移動している場合には、第９ステップＰ９で、任意の遠方細分化領域の焦点評価値が所定値以上増加したことが観察されると、図３の第３ステップＰ３で被写体の再選択が必要があることを認識させる（第７ステップＰ７）。任意の遠方細分化領域で焦点評価値の所定値以上の増加が観察されないと、第８ステップＰ８に進む。
【００２８】
第８ステップＰ８では、被写体細分化領域Ｇ（４，３）で焦点評価値が減少したか否かが判断される。この焦点評価値の減少によって、焦点評価値の最大値を確立するレンズ位置を通り越したことが推測される。減少していなければ、焦点評価値の最大値に達していないと判断され、第１ステップＰ１に戻る。焦点評価値の最大値を確立する位置が通り越されるまで、これらの一通りの手順が繰り返される。
【００２９】
第８ステップＰ８で、被写体細分化領域Ｇ（４、３）で焦点評価値の最大値を確立するレンズ位置が通り越されたと判断されると、第１０ステップＰ１０で、最大値を確立するレンズ位置に焦点レンズ１０が戻される。こうして所望の被写体に対する合焦状態が得られる。
【００３０】
このように、第６ステップＰ６や第９ステップＰ９で、合焦動作の実行中、主被写体の被写体距離より大きい被写体距離を有する遠方細分化領域に、主被写体の被写体距離より小さい被写体距離を有する新たな被写体を検出した場合には、合焦動作を実行する主被写体を選択し直すことから、明るさ値の変化のみに基づいて主被写体を選択し直す場合に比べ、一層確実に撮影場面の変化を検出することができ、その結果、主被写体に合焦を合わせ続けることが可能となる。
【００３１】
続いて、図８に示すフローチャートを参照しつつ図３の第５ステップＳ５に係る構図変化の検出動作を説明する。第１ステップＱ１では、光軸に沿って焦点レンズ１０を前後方向に微小振動させる。この微小振動の振動幅は、焦点評価値が最大値をとるレンズ位置すなわち合焦を確立するレンズ位置を挟んで前後等距離に設定される。この微小振動の最中、等間隔で焦点評価値および明るさ値が算出される（第２ステップＱ２）。
【００３２】
第３ステップＱ３では、焦点レンズ１０の移動中、各細分化領域Ｇ（ｘ，ｙ）の明るさ値の変化を観察し、明るさ値の変化の大きさが閾値以上であると判断されると、図３の第３ステップＳ３で被写体の再選択が必要であることを認識させる（第４ステップＱ４）。明るさ値の変化の大きさが閾値に満たないと判断されると、第５ステップＱ５で、焦点評価値の最大値を確立するレンズ位置が微小振動の中心位置にあるか否かが判断される。中心位置に保持されていれば、第１ステップＱ１に戻って処理が繰り返される。
【００３３】
焦点評価値の最大値を確立するレンズ位置が微小振動の中心にないと判断されると、第６ステップＱ６で、焦点評価値が増加する方向に焦点レンズ１０を移動させる。この移動中、焦点評価値を観察し続け（第７ステップＱ７）、遠方細分化領域に、主被写体の被写体距離より小さい被写体距離を有する新たな被写体を検出した場合（第８ステップＱ８）には、合焦動作を実行する主被写体を選択し直す（第９ステップＱ９）。選択をし直す必要がなければ、第１０ステップＱ１０で、そのまま焦点レンズ１０を合焦位置に戻す。なお、第７ステップＱ７〜第１０ステップＱ１０の処理は、例えば、図７の第５ステップＰ５〜第１１ステップＰ１１に代表される。
【００３４】
このような方法によって、主被写体が前後移動したことによって撮影場面の変化が検出されても、最初から合焦動作の手順を繰り返すことなく、焦点レンズ１０の追従といった素早い処理で合焦状態を確立することができる。
【００３５】
前述した図７や図８の処理工程の中で、焦点評価値の変化の増加を判断する際に用いられる所定値は、細分化領域ごとに被写体距離を抽出する際に得られる細分化領域ごとの焦点評価値の最大値に基づいて決定される。すなわち、図３の第１ステップＳ１で全域スキャンを実行する際に、各細分化領域Ｇ（ｘ，ｙ）で焦点評価値がとる最大値を記憶しておき、その最大値が大きいときには大きな所定値を設定し、最大値が小さいときには小さな所定値を設定するのである。その結果、細分化領域Ｇ（ｘ，ｙ）ごとに異なる被写体のコントラストに応じて、適切に被写体の移動を検出することができる。
【００３６】
図９は他の実施形態に係る構図変化の観察動作を示す。第１ステップＲ１では、被写体細分化領域と、主被写体の被写体距離と等しい被写体距離を有する等距離細分化領域と、選択された被写体の被写体距離と異なる被写体距離を有する異距離細分化領域とに異なった重み付けが行われる。この重み付けとしては、例えば図１０に示すように、被写体細分化領域ＣＬ１に対し大きな第１重みを与え、等距離細分化領域ＣＬ２に第１重みより小さい第２重みを与え、異距離細分化領域（空白）に第２重みより小さい第３重みを与えることが考えられる。
【００３７】
第２ステップＲ２で、焦点レンズ１０のレンズ位置を固定したまま、重み付けを用いて、全細分化領域Ｇ（ｘ，ｙ）の明るさ値の加重和および焦点評価値の加重和を算出する。第３ステップＲ３で、全細分化領域の明るさ値の加重和の変化量が任意の閾値より大きいと判断されると、第４ステップＲ４で、主被写体を再選択する動作を実行する。
【００３８】
第３ステップＲ３で明るさ値の変化量が閾値以下であると判断されると、第５ステップＲ５で、被写体細分化領域ＣＬ１の焦点評価値の変化量が判定される。その変化量が一定範囲内であれば、第６ステップＲ６で、焦点評価値の最大値を確立するレンズ位置に焦点レンズ１０を移動させる。第７ステップＲ７で、全細分化領域の焦点評価値の加重和が一定値以上の場合には、主被写体を選択し直す動作を実行する（第８ステップＲ８）。焦点評価値の加重和が一定値に満たない場合には第２ステップＲ２に戻って同様の処理を繰り返す。
【００３９】
このような観察動作によって、小さな撮影場面の変化を検出して、しかも、被写体の前後移動に追従することができる。
【００４０】
【発明の効果】
以上のように第１ないし第３発明によれば、明るさ値の変化のみに基づいて主被写体を選択し直す場合に比べ、一層確実に撮影場面の変化を検出することができ、その結果、主被写体に合焦を合わせ続けることが可能となる。
【００４１】
また、第４発明によれば、主被写体が前後移動したことによって撮影場面の変化が検出されても、最初から合焦動作の手順を繰り返すことなく、焦点レンズの追従といった素早い処理で合焦状態を確立することができる。
【００４２】
さらに、第５発明によれば、細分化領域ごとに異なる被写体のコントラストに応じて、適切に被写体の移動を検出することができる。
【００４３】
さらにまた、第６発明によれば、小さな撮影場面の変化を検出して、しかも、被写体の前後移動に追従することができる。
【図面の簡単な説明】
【図１】本発明に係る電子スチルカメラの概略的な全体構成図である。
【図２】焦点合わせ機構の全体構成を示すブロック図である。
【図３】撮像動作の手順を示すフローチャートである。
【図４】被写体選別動作の手順を示すフローチャートである。
【図５】画像の一具体例を示す図である。
【図６】細分化領域ごとの被写体距離を示す図である。
【図７】合焦動作の手順を示すフローチャートである。
【図８】構図変化の観察動作の手順を示すフローチャートである。
【図９】他の実施形態に係る観察動作の手順を示すフローチャートである。
【図１０】画像の細分化領域の区分を示す図である。
【符号の説明】
１０焦点レンズ、１１光電変換センサとしてのＣＣＤ、１４焦点合わせ機構、１７コントローラ、２０領域分割器、２１明るさ評価器、２２焦点評価器。

Claims

光電変換センサを用いて、焦点レンズを通じて結像される画像の照度に応じた電気信号を得る工程と、画像を複数個の細分化領域に分割する工程と、分割された細分化領域ごとに、前記電気信号に含まれる高周波成分量の指標となる焦点評価値を算出する工程と、焦点評価値に基づいて細分化領域ごとに被写体距離を抽出し、その被写体距離に基づいて被写体を選択する工程と、焦点レンズを移動させて、選択された被写体を対象として合焦動作を実行する工程とを備える画像の自動被写体検出方法において、
前記合焦動作の実行中、前記選択された被写体の被写体距離より大きい被写体距離を有する遠方細分化領域に、前記選択された被写体の被写体距離より小さい被写体距離を有する新たな被写体を検出した場合には、前記合焦動作を実行する被写体を選択し直す工程を含み、
前記選択し直す工程は、
前記被写体細分化領域、前記選択された被写体の被写体距離と等しい被写体距離を有する等距離細分化領域、および前記選択された被写体の被写体距離と異なる被写体距離を有する異距離細分化領域に各々重み付けを行う工程と、
レンズ位置を固定したまま各細分化領域の明るさ値の加重和および焦点評価値の加重和を算出する工程と、被写体細分化領域の焦点評価値の変化量が一定範囲内であって明るさ値の加重和の変化量が閾値以下の場合には、焦点評価値の最大値を確立するレンズ位置に焦点レンズを移動させる工程と、
明るさ値の加重和の変化量が閾値より大きい場合または焦点評価値の加重和が一定値以上の場合には、前記合焦動作を実行する被写体を選択し直すことを特徴とする画像の自動被写体検出方法。
請求項１に記載の画像の自動被写体検出方法において、
無限遠に向かって前記焦点レンズを移動させ、前記選択された被写体が属する被写体細分化領域で焦点評価値が最大となるレンズ位置を確立する際、前記被写体細分化領域で焦点評価値の減少を検出する前に、任意の遠方細分化領域で焦点評価値の減少を検出した場合には、前記合焦動作を実行する被写体を選択し直すことを特徴とする画像の自動被写体検出方法。
請求項１または２に記載の画像の自動被写体検出方法において、
前記選択された被写体に対し合焦が確立された際に前記焦点レンズを前後方向に振動させる工程と、その振動に基づいて、前記被写体細分化領域の焦点評価値が最大値をとることを確認する工程と、前記振動中、前記遠方細分化領域に、前記選択された被写体の被写体距離より小さい被写体距離を有する新たな被写体を検出した場合には、前記合焦動作を実行する被写体を選択し直す工程とを備えることを特徴とする画像の自動被写体検出方法。