JP2013025108A - フォーカス制御装置 - Google Patents

Abstract

【課題】撮像装置や被写体が不安定な条件下であっても、コントラスト方式のオートフォーカス動作を高速に行うことが可能なフォーカス制御装置を提供すること。
【解決手段】ＡＦ処理中の合焦方向判断処理において、被写体のコントラスト状態を示す水平方向の評価値と垂直方向の評価値とをそれぞれ得る。水平方向の評価値の変化に基づいてフォーカスレンズの移動方向を判断するともに、垂直方向の評価値の変化に基づいてフォーカスレンズの移動方向を判断する。水平方向の評価値の変化に基づいて判断されたフォーカスレンズの移動方向と垂直方向の評価値の変化に基づいて判断されたフォーカスレンズの移動方向とが同一方向の場合に、その判断された移動方向を、それ以後のフォーカスレンズの移動方向として確定する。
【選択図】図４

Description

本発明は、撮像装置のためのフォーカス制御装置に関する。

オートフォーカス（以下、ＡＦという）制御方式の一つとして、コントラスト方式が知られている。コントラスト方式は、フォーカスレンズをその光軸方向に沿って移動させながら被写体のコントラストを評価し、被写体のコントラストが極大となるレンズ位置を合焦位置として、この合焦位置にフォーカスレンズを移動させる方式である。コントラスト方式においては、通常、撮像部に設けられた画素部を走査して得られる信号から算出される評価値（ＡＦ評価値）を評価することによって、被写体のコントラストを評価する。

このようなコントラスト方式に関する技術として、例えば特許文献１や特許文献２で提案されている技術がある。
特許文献１は、撮像部に設けられた画素部を垂直方向に走査して得られる信号から算出された評価値と画素部を水平方向に走査して得られる評価値との両方を使用してフォーカスレンズの移動を制御することを提案している。さらに、特許文献１は、大きいほう、即ち高周波成分が多いほうの評価値に重みを付けてフォーカスレンズの移動を制御することも提案している。
また、特許文献２は、画素部を垂直方向に走査して得られる信号から算出された評価値と画素部を水平方向に走査して得られる評価値の両方を使用してフォーカスレンズの移動を制御する撮像装置において、画素部を走査して得られる信号から画像の動きベクトルを算出し、この動きベクトルに基づいて評価値の重み付けを行った上で評価値を加算し、この加算した評価値を用いてフォーカスレンズの移動を制御することを提案している。

特開２００７−５７７６３号公報 特開２００９−２１９２９号公報

ここで、特許文献１や特許文献２の技術は、フォーカスレンズの移動中に垂直方向の評価値の変化と水平方向の評価値の変化とがともに安定していることを前提としている。言い換えれば、特許文献１及び特許文献２は、フォーカスレンズの移動中に被写体ブレ等が発生して評価値の変化が不安定となった場合についての対策については特に言及していない。

例えば、人は、てきぱきと歩いている時には頭部の上下動が大きくなり易い。このような人物を被写体として撮影する場合において、特許文献１の技術や特許文献２の技術を用いてＡＦ処理をした場合には、水平方向の評価値に重みが付けられる。しかしながら、このような場合において実際に評価値として安定しているのは垂直方向の評価値である。例えば、図１６は、てきぱきと歩いている場合等の頭部の上下動が大きい人物を撮影した場合に得られる画像の例を示す図である。図１６に示すような画像が得られる場合における評価値の変化は、図１７に示すようになる。具体的には、図１７に示すように、ｎ＋１フレーム目において、水平方向の評価値が大きく増加する。これは、図１６に示すように、ＡＦエリアの水平方向で見た場合に、ｎ＋１フレームの画像が、他のフレームの画像に比べて顔と背景との境界部であるエッジ部をより多く含んでいるためである。

図１７に示すような評価値が得られた場合、特許文献１や特許文献２の技術では、水平方向の評価値に従ってフォーカスレンズの移動が行われる。このため、ｎ＋１フレーム目が本来のコントラストの極大でなかったとしても、ｎ＋１フレーム目がコントラストの極大であると誤判断されてしまうおそれがある。

このようなコントラストの極大の誤判断を起こさないようにするためには、判断結果を確定するための条件を厳しくすることが考えられる。しかしながら、この場合には、判断に時間がかかり易くなる。一般に、コントラストの極大を検出するためには、実際にコントラストが極大となる合焦位置よりも余分にフォーカスレンズを駆動する必要がある。このため、合焦方向判断を確定するまでに時間がかかると、フォーカスレンズの余分な駆動量も大きくなる。

フォーカスレンズの余分な駆動量が多くなると、ＡＦ処理が完了するまでにかかる時間が長くなってしまう。特に、ＡＦ処理中にスルー画表示を行っていた場合には、フォーカスレンズが余分に駆動されてしまう分だけスルー画表示にも影響を与えてしまう。このため、制御アルゴリズムとしてはできるかぎり、フォーカスレンズの余分な駆動量を少なくすることが望ましい。

本発明は、前記の課題を解決するためになされたものであり、その目的とするところは、撮像装置や被写体が不安定な条件下であっても、コントラスト方式のオートフォーカス動作を高速に行うことが可能なフォーカス制御装置を提供することを目的とする。

前記の目的を達成するために、本発明の一態様のフォーカス制御装置は、光軸方向に移動自在なフォーカスレンズを有して被写体の光学像を生成する光学系と、複数の画素部を有して前記光学像を撮像する撮像部と、を有する撮像装置のためのフォーカス制御装置であって、前記画素部を第１の方向に走査することによって前記画素部から出力された第１の信号に基づいて前記被写体のコントラスト状態を示す第１の評価値を得るとともに、前記画素部を前記第１の方向とは異なる第２の方向に走査することによって前記画素部から出力された第２の信号に基づいて前記被写体のコントラスト状態を示す第２の評価値を得る評価値生成部と、前記フォーカスレンズを移動させている状態で前記第１の評価値と前記第２の評価値とのそれぞれの変化に基づいて前記フォーカスレンズを合焦させるために必要な前記フォーカスレンズの移動方向を判断し、前記第１の評価値に基づいて判断した第１の移動方向と前記第２の評価値に基づいて判断した第２の移動方向とが同一方向の場合に、該同一方向であると判断した移動方向に前記フォーカスレンズを移動させるようにオートフォーカス動作を行う制御部と、を具備することを特徴とする。

本発明によれば、撮像装置や被写体が不安定な条件下であっても、コントラスト方式のオートフォーカス動作を高速に行うことが可能なフォーカス制御装置を提供することができる。

本発明の一実施形態に係るフォーカス制御装置を有する撮像装置の構成図である。 本発明の一実施形態に係るフォーカス制御装置のＡＦ処理の概要を示す図である。 本発明の一実施形態に係るＡＦ処理についてのフローチャートである。 スキャン動作時の合焦方向判断処理の一例のフローチャートである。 Ｓ２０２の合焦方向判断の例を示す図である。 Ｓ２０４の合焦方向判断の例を示す図である。 Ｓ２０５の合焦方向判断の例を示す図である。 Ｓ２０６の合焦方向判断の例を示す図である。 合焦位置が存在する方向とウォブリング方向とが同方向である場合の評価値の変化について示す図である。 合焦位置が存在する方向とウォブリング方向とが逆方向である場合の評価値の変化について示す図である。 判断テーブルの例を示す図である。 ウォブリング動作時の合焦方向判断処理の一例のフローチャートである。 検出回路の出力波形の一例を示す図である。 テンプレートマッチングにより主要被写体の移動を検出して動きベクトルを求める処理を示す図である。 動きベクトル出力の時間変化の例及び閾値と被写体ブレ発生中と判断される範囲を示す図である。 頭部の上下動が大きい人物を撮影した場合に得られる画像の例を示す図である。 頭部の上下動が大きい人物に対する評価値の変化の例を示す図である。

以下、図面を参照して本発明の実施形態を説明する。
図１は、本発明の一実施形態に係るフォーカス制御装置を有する撮像装置の構成図である。図１に示す撮像装置は、交換レンズ１００とカメラ本体２００と、を有している。本撮像装置において、交換レンズ１００は、カメラ本体２００に設けられた不図示のレンズマウントを介してカメラ本体２００に着脱自在になされている。

交換レンズ１００は、撮像レンズ１０１と、モータドライバ１０２と、レンズ制御部１０３と、記憶部１０４と、を有している。ここで、実際の交換レンズ１００は、絞り制御機構やズーム機構等をさらに有しているが、図１では図示を省略している。
撮像レンズ１０１は、フォーカスレンズを含む光学系であり、図示しない被写体の光学像を、カメラ本体２００の撮像素子２０１上に生成する。モータドライバ１０２は、モータ（フォーカスモータ）等の駆動機構を有しており、レンズ制御部１０３からの制御信号に従ってフォーカスレンズをその光軸方向（図示Ａ方向）に移動させる。

レンズ制御部１０３は、マイクロコンピュータと、交換レンズ１００内の各部を制御する制御回路とを一体化したＬＳＩである。レンズ制御部１０３は、カメラ本体２００の本体制御部２０３から出力された制御信号に基づき、モータドライバ１０２に制御信号を送る。また、レンズ制御部１０３は、本体制御部２０３から送られた同期信号と、この同期信号に対する位相を示す情報とに基づき、フォーカスレンズのＡＦ処理を行う。ＡＦ処理の詳細については後述する。

記憶部１０４は、交換レンズ１００毎に固有の特性情報を記憶している。レンズ制御部１０３は、本体制御部２０３の要求に応じて、記憶部１０４に記憶されている特性情報を本体制御部２０３に送信する。
ここで、本実施形態における交換レンズ１００は、ウォブリング動作を行うことが可能な交換レンズであることが望ましい。ウォブリング動作とは、フォーカスレンズをその光軸方向に沿って振動的に移動させながら、徐々に合焦位置まで移動させる動作のことを言うものである。一般に、ウォブリング動作の可否は、交換レンズ１００内のフォーカスモータの性能やレンズ群特性によって決定される。通常、ウォブリング動作においては、１５Ｈｚ〜３０Ｈｚ程度の周波数（ウォブリング周波数と言う）でフォーカスレンズをその光軸方向に沿って振動させる必要がある。したがって、交換レンズ１００は、１５Ｈｚ〜３０Ｈｚ程度でのフォーカスレンズの振動を可能とするフォーカスモータを有しており、そのような比較的高速の振動を可能とする程度に軽量なフォーカスレンズを有していることが望ましい。

また、上述の例において、レンズ制御部１０３は、マイクロコンピュータと、交換レンズ１００内の各部を制御する制御回路とを一体化したＬＳＩであるとしている。しかしながら、マイクロコンピュータと制御回路とは必ずしも一体化する必要はない。これらは、複数のＬＳＩで構成されても良い。

カメラ本体２００は、撮像素子２０１と、表示部２０２と、本体制御部２０３と、マウント接点２０４と、ジャイロセンサ２０５と、検出回路２０６と、を有している。ここで、実際のカメラ本体２００は、使用者が撮影動作を指示するためのレリーズボタンや、撮影動作によって得られた画像データを記憶する記憶部等をさらに有しているが、図１では図示を省略している。

撮像素子２０１は、画素部を有している。画素部は、交換レンズ１００を介して入射する光学像を電気信号（画像信号）に変換するための光電変換素子が２次元状に配置されて構成されている。撮像素子２０１は、ＣＣＤイメージセンサやＭＯＳイメージセンサ等として構成されている。
表示部２０２は、例えばカメラ本体２００の背面に設けられている。表示部２０２は、撮像素子２０１から出力された画像信号に基づいて本体制御部２０３で生成された表示用の画像データに基づく画像を表示する。

本体制御部２０３は、ＣＰＵと、カメラ本体２００内の各部を制御する制御回路と、各種の信号処理を行う信号処理回路とを一体化したＬＳＩである。本体制御部２０３は、カメラ本体２００における各部を制御して各種動作シーケンスを実行する。また、本体制御部２０３は、制御部としての機能を有し、レンズマウントを介してレンズ制御部１０３に対して制御信号、及び撮像素子２０１の露光動作とフォーカスレンズの駆動動作との同期を取るための同期信号を出力することも行う。本体制御部２０３は、撮像素子２０１の動作を制御し、撮像素子２０１から出力される画像信号をデジタル信号である画像データに変換することも行う。本体制御部２０３は、画像データに対してホワイトバランス制御等の各種信号処理を施すことも行う。本体制御部２０３は、各種信号処理により得られた画像データを表示部２０２に出力して表示部２０２における画像の表示を制御することも行う。さらに、本体制御部２０３は、評価値生成部としての機能も有し、撮像素子２０１から出力された画像データから、ＡＦ処理用の評価値を生成することも行う。評価値は、画像データに対してハイパスフィルタ（ＨＰＦ）処理を施すことによって画像データにおける高周波成分を抽出し、撮影画面中で予め設定されたＡＦエリア内で抽出した高周波成分を積算することによって生成される。また、本体制御部２０３は、動きベクトル検出部としての機能も有し、複数フレームにおける画像データの変化から動きベクトルを検出する。

前述の例において、本体制御部２０３は、マイクロコンピュータと、カメラ本体２００内の各部を制御する制御回路と、各種信号処理を行う信号処理回路とを一体化したＬＳＩであるとしている。しかしながら、これらを複数のＬＳＩで構成するようにしても良い。

マウント接点２０４は、レンズマウント内に設けられており、レンズ制御部１０３と本体制御部２０３とを通信可能に接続するための接点である。
動き検出部の一例として機能するジャイロセンサ２０５は、２軸方向の角速度に応じた信号を発生する。以下の説明においては、カメラ本体２００を横向きで構えた場合に、地表に対して水平となる方向をＸ軸、地表に対して垂直となる方向をＹ軸とする。ジャイロセンサ２０５は、このように定義されたＸ軸、Ｙ軸にそれぞれ沿った方向のカメラ本体２００の移動に伴う角速度を検出するように構成されている。検出回路２０６は、ジャイロセンサ２０５の出力信号に対してフィルタ処理（微分処理）等を行い、処理後の出力信号を本体制御部２０３に出力する。本体制御部２０３は、検出回路２０６の出力に基づいて、カメラ本体２００の動き量を検出し、この動き量によってカメラ本体２００がパン移動やチルト移動していることを検出する。ここでは、パン移動が、地表に対して水平な方向に沿ったカメラ本体２００の移動を示す。また、チルト移動が、地表に対して垂直な方向に沿ったカメラ本体２００の移動を示す。なお、本実施形態による「パン移動」及び「チルト移動」は、使用者が自発的にカメラ本体２００を移動させることによって発生するものと、使用者が意図しない例えば手ブレによって発生するものと、の両方を含むものである。

以下、本実施形態に係るフォーカス制御装置の動作について説明する。図２は、本実施形態に係るフォーカス制御装置のＡＦ処理の概要を示す図である。
図２に示すように、本実施形態におけるＡＦ処理においては、撮像装置の状態がウォブリング動作状態、スキャン動作状態、待機状態の３種類の何れかに遷移する。

まず、ウォブリング動作状態では、フォーカスレンズの位置を合焦位置に移動させるためのウォブリング動作を行う。このとき、本体制御部２０３は、ウォブリング動作を行うようにレンズ制御部１０３に指示を送る。ウォブリング動作の細かい技術は、例えば特開２０１０−９００９号公報において開示された公知の技術を用いることができる。したがって、ここでは詳しい説明については省略する。ウォブリング動作の実行後、本体制御部２０３は、微小振動させたときの評価値の変化から、フォーカスレンズの移動方向を判断する。具体的には、本体制御部２０３は、評価値が増加する側のフォーカスレンズの移動方向を判断する。この合焦方向判断の詳細については後述する。本体制御部２０３は、判断した移動方向に従って、フォーカスレンズの位置を合焦位置まで徐々に移動させるようにレンズ制御部１０３に指示を送る。

ウォブリング動作状態において、ウォブリング動作のみでは被写体が追従しきれないほど合焦位置がずれている場合には、撮像装置の状態をスキャン動作状態に遷移させる。このとき、本体制御部２０３は、山登りＡＦ用のスキャン動作を行うようにレンズ制御部１０３に指示を送る。具体的には、本体制御部２０３は、合焦位置に向けてフォーカスレンズを微小量ずつ移動させるようにレンズ制御部１０３に指示を送る。この場合においても、本体制御部２０３は、フォーカスレンズの移動方向を判断する。ここで、ウォブリング動作可能な交換レンズ１００が装着されている場合には、ＡＦ評価値の極大値を越えるまでのフォーカスレンズのスキャン動作は行わず、合焦位置への最後のフォーカスレンズの合わせ込みをウォブリング動作で行う。一方、ウォブリング動作不能な交換レンズ１００が装着されている場合には、合焦位置への最後のフォーカスレンズの合わせ込みもスキャン動作で行う。スキャン動作状態における山登りＡＦの完了後、撮像装置の状態を待機状態に遷移させる。

フォーカスレンズが合焦したときには、撮像装置の状態が待機状態となる。待機状態において、本体制御部２０３は、待機状態への遷移前の評価値と現在の評価値とを比較し、両者の差が一定以上であるか否かを判断する。待機状態への遷移前の評価値と現在の評価値との差が一定以上となった場合は、コントラスト状態が変化したことを示す。この場合には、待機状態を終了させる。また、コントラスト状態が変化していなくとも、カメラの向きが大きく変化した場合、即ちパン移動又はチルト移動が発生した場合も合焦状態が悪化している可能性が高い。したがって、この場合も待機状態を終了させる。待機状態終了時にウォブリング動作可能な交換レンズ１００が装着されていた場合には、撮像装置の状態をウォブリング動作状態に遷移させる。一方、待機状態終了時にウォブリング動作不能な交換レンズ１００が装着されていた場合には、撮像装置の状態をスキャン動作状態に遷移させる。
動画記録中等においては、図２に示す３つの状態を使い分けながらＡＦ処理を継続する。これにより、被写体にピントを合わせ続けることが可能である。

次に、本実施形態に係るＡＦ処理の例について図３を参照して説明する。図３に示す例では、まず、本体制御部２０３は、ウォブリング動作を開始する（Ｓ１０１）。このために、本体制御部２０３は、フォーカスレンズを微小振動させるようにレンズ制御部１０３に指示を送る。ウォブリング動作を開始した後、本体制御部２０３は、ウォブリング動作中の評価値の変化に従って合焦方向判断処理を行う（Ｓ１０２）。ウォブリング動作中の合焦方向判断処理の詳細については後述する。

合焦方向判断処理の後、本体制御部２０３は、スキャン動作が必要であるか否かを判断する（Ｓ１０３）。この判断において、例えば、使用者が撮像装置のパン動作やチルト動作を行う等して被写体の合焦状態が大きく変化した時にスキャン動作が必要であると判断する。

Ｓ１０３において、スキャン動作が必要であると判断した場合に、本体制御部２０３は、スキャン動作を開始する（Ｓ１０４）。スキャン動作を開始した後、本体制御部２０３は、スキャン動作中の評価値の変化に従って合焦方向判断処理を行う（Ｓ１０５）。スキャン動作中の合焦方向判断処理については後述する。

合焦方向判断処理の後、本体制御部２０３は、フォーカスレンズが合焦状態になったか否かを判断する（Ｓ１０６）。なお、Ｓ１０６の「合焦状態」は、前述したスキャン状態における、合焦位置への最後のフォーカスレンズの合わせ込みを行うことができる状態をいう。したがって、Ｓ１０６においては、例えば評価値が、ウォブリング動作を開始することが可能な所定値だけ増加したか否かを判断する。Ｓ１０６において、フォーカスレンズが合焦状態になっていないと判断した場合、本体制御部２０３は、処理をＳ１０４に戻してスキャン動作を継続する。また、Ｓ１０６において、フォーカスレンズが合焦状態になったと判断した場合、本体制御部２０３は、処理をＳ１０１に戻してフォーカスレンズの合わせ込みのためのウォブリング動作を行う。

Ｓ１０３において、スキャン動作が必要でないと判断した場合、本体制御部２０３は、ウォブリング動作を継続しつつ、フォーカスレンズが合焦状態になったか否かを判断する（Ｓ１０７）。なお、Ｓ１０７の「合焦状態」は、フォーカスレンズが合焦位置に達した状態をいう。Ｓ１０７において、フォーカスレンズが合焦状態になっていないと判断した場合、本体制御部２０３は、処理をＳ１０１に戻してウォブリング動作を継続する。また、Ｓ１０７において、フォーカスレンズが合焦状態になったと判断した場合、本体制御部２０３は、ウォブリング動作を終了して待機状態となる（Ｓ１０８）。

待機状態となった後、本体制御部２０３は、評価値が変化したか否かを判断する（Ｓ１０９）。Ｓ１０９において、評価値に変化がないと判断した場合に、本体制御部２０３は、処理をＳ１０８に戻して待機状態を継続する。また、Ｓ１０９において、評価値に変化があると判断した場合に、本体制御部２０３は、処理をＳ１０１に戻す。

次に、合焦方向判断処理の詳細について説明する。
まず、スキャン動作時の合焦方向判断処理について説明する。スキャン動作時においては、フォーカスレンズの移動方向（以下、スキャン方向という）を、基準の評価値AFval_base_xと合焦方向判断を行うフレームｎＶＤにおける評価値AFval_x(n)との大小関係にて判断する。基準の評価値AFval_base_xは、例えばスキャン動作の開始時の評価値とする。また、ｘは、ｈ、ｖの何れかである。「ｈ」は、水平方向の評価値、即ち撮像素子２０１の画素部を水平方向に走査して得られた画像信号に従って算出された評価値（第１の評価値）であることを示している。「ｖ」は、垂直方向の評価値、即ち撮像素子２０１の画素部を垂直方向に走査して得られた画像信号に従って算出された評価値（第２の評価値）であることを示している。

合焦方向判断処理の具体的な処理としては、フレームｎＶＤの評価値AFval_x(n)が、以下の２つの条件の何れを満足するかを判断する。
（条件１） 基準の評価値AFval_base_xに対するフレームｎＶＤの評価値AFval_x(n)の増加量が閾値以上である場合、即ち、下記（式１）を満足する場合、スキャン方向の判断が可能であるとする。
AFval_x(n) ≧ AFval_base_x ＋閾値 （式１）
（条件１）を満足する場合には、現在のスキャン方向と同方向に合焦位置が存在していると考えることができる。したがって、（条件１）を満足すると判断された場合には、それ以後のフレームにおけるスキャン方向を、それまでのスキャン方向と同方向と判断する。
（条件２） 基準の評価値AFval_base_xに対する現在フレームｎＶＤの評価値AFval_x(n)の減少量が閾値以下である場合、即ち下記（式２）を満足する場合、スキャン方向の判断が可能であるとする。
AFval_x(n) ≦ AFval_base_x −閾値 （式２）
（条件２）を満足する場合には、現在のスキャン方向と逆方向に合焦位置が存在していると考えることができる。したがって、（条件２）を満足すると判断された場合、それ以後のフレームにおけるスキャン方向を、それまでのスキャン方向と逆方向と判断する。
ここで、（条件１）と（条件２）の何れの条件も満足しない場合、スキャン方向の判断が不能であるとする。
また、各条件を満たすか否かを判断するための閾値は、下記（式３）を基準の閾値として算出される。
閾値＝AFval_base_x×Coeff （式３）
なお、（式３）の係数Coeffは、例えば０.１から０.２とする。

図４は、スキャン動作時の合焦方向判断処理の一例を示すフローチャートである。図４において、本体制御部２０３は、評価値の変化が不安定な状態であるか否かを判断する（Ｓ２０１）。ここで、Ｓ２０１における評価値の変化が不安定な状態とは、パン移動及びチルト移動等のカメラ本体２００の動き、並びに被写体ブレといった評価値の変化を不安定にする要因が存在している状態のことをいう。このような状態を判断するため、Ｓ２０１においては、例えば検出回路２０６によって検出されるカメラ本体２００の動き量又は本体制御部２０３が算出する動きベクトル量が、所定の閾値を超えたか否かを判断する。閾値を超えた場合には不安定状態であると判断する。Ｓ２０１の判断の詳細については後述する。

Ｓ２０１において、評価値の変化が不安定な状態にないと判断した場合に、本体制御部２０３は、閾値を基準の値よりも小さく（例えば基準の閾値の１/２倍）して、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断とを行う。そして、本体制御部２０３は、水平方向の評価値に基づく合焦方向判断により判断されたスキャン方向と垂直方向の評価値に基づく合焦方向判断により判断されたスキャン方向とが同一方向であるか否かを判断する（Ｓ２０２）。

図５は、Ｓ２０２の合焦方向判断の例を示す図である。ここで、図５は、合焦方向判断の開始位置Ｐ０からフォーカスレンズの位置を、被写体距離が近距離となる方向に徐々に移動させたときの例を示している。以下、被写体距離が近距離となるフォーカスレンズの移動方向を近距離方向という。逆に、被写体距離が遠距離となるフォーカスレンズの移動方向を遠距離方向という。

図５の例においては、本体制御部２０３は、レンズ位置Ｐ０での水平方向の評価値及び垂直方向の評価値を、それぞれ、基準の評価値AFval_base_h、AFval_base_vとする。そして、本体制御部２０３は、撮像素子２０１の撮像フレームに同期するように、フォーカスレンズの位置を、レンズ位置Ｐ１、Ｐ２、Ｐ３、…、と移動させつつ、評価値を取得する。

評価値を取得する毎に、本体制御部２０３は、評価値AFval_h(n)及びAFval_v(n)が、（条件１）及び（条件２）の何れかを満足しているかを判断する。図５の例では、レンズ位置Ｐ１における水平方向の評価値AFval_h(1)が、（基準の評価値AFval_base_h ＋閾値/２）を超え、レンズ位置Ｐ１における垂直方向の評価値AFval_v(1)も、（基準の評価値AFval_base_v ＋閾値/２）を超える。この場合、本体制御部２０３は、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断の両方で（条件１）を満足していると判断する。また、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断の両方で（条件１）を満足しているので、本体制御部２０３は、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断とでそれぞれ判断されたスキャン方向が同一方向、即ちそれまでのスキャン方向と同一方向であると判断する。

Ｓ２０２において、スキャン方向が同一であると判断した場合、本体制御部２０３は、合焦方向判断を最終的に確定する（Ｓ２０３）。この場合、水平方向の評価値に基づく合焦方向判断の結果と垂直方向の評価値に基づく合焦方向判断の結果の何れを最終的なスキャン方向として採用しても良い。合焦方向判断を最終的に確定した後、本体制御部２０３は、処理を図３のＳ１０６に移行させる。一旦、合焦方向判断が確定した後は、それ以後の合焦方向判断処理を省略することができる。

Ｓ２０２において、スキャン方向が同一でないと判断した場合、本体制御部２０３は、閾値を基準の値として、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断とを行う。そして、本体制御部２０３は、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断の少なくとも何れかでスキャン方向が判断できたか否かを判断する（Ｓ２０４）。

図６は、Ｓ２０４の合焦方向判断の例を示す図である。Ｓ２０４においても、本体制御部２０３は、評価値AFval_h(n)及びAFval_v(n)が、（条件１）及び（条件２）の何れかを満足しているかを判断する。図６の例では、レンズ位置Ｐ３における垂直方向の評価値AFval_v(3)が、（基準の評価値AFval_base_v ＋閾値）を超える。この場合、本体制御部２０３は、垂直方向の評価値に基づく合焦方向判断で（条件１）を満足している、即ちスキャン方向がそれまでのスキャン方向と同一方向であると判断する。

Ｓ２０４において、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断の少なくとも何れかでスキャン方向を判断できたと判断した場合、本体制御部２０３は、処理をＳ２０３に移して、合焦方向判断を最終的に確定する。この場合、最終的なスキャン方向は、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断とのうちでスキャン方向の判断が可能であったほうの結果を採用する。両方でスキャン方向が判断できた場合には、例えば垂直方向の評価値に基づく合焦方向判断により判断されたスキャン方向を優先する。合焦方向判断を最終的に確定した後、本体制御部２０３は、処理を図３のＳ１０６に移行させる。

Ｓ２０４において、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断の何れでもフォーカス方向を判断できなかったと判断した場合、本体制御部２０３は、処理をＳ２０１に戻す。この場合には、次のフレームにおいて、Ｓ２０１からの処理が実行される。

Ｓ２０１において、評価値の変化が不安定な状態にあると判断した場合に、本体制御部２０３は、閾値を基準の値として、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断とを行う。そして、本体制御部２０３は、水平方向の評価値に基づく合焦方向判断により得られたスキャン方向と垂直方向の評価値に基づく合焦方向判断により得られたスキャン方向とが同一方向であるか否かを判断する（Ｓ２０５）。

図７は、Ｓ２０５の合焦方向判断の例を示す図である。Ｓ２０５においても、本体制御部２０３は、評価値AFval_h(n)及びAFval_v(n)が、（条件１）及び（条件２）の何れかを満足しているかを判断する。図７の例では、レンズ位置Ｐ３における水平方向の評価値AFval_h(3)が、（基準の評価値AFval_base_h ＋閾値）を超え、レンズ位置Ｐ３における垂直方向の評価値AFval_v(3)も、（基準の評価値AFval_base_v ＋閾値）を超える。この場合、本体制御部２０３は、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断の両方で（条件１）を満足しているので、本体制御部２０３は、スキャン方向が同一方向である、即ちスキャン方向がそれまでのスキャン方向と同一方向であると判断する。

Ｓ２０５において、スキャン方向が同一であると判断した場合、本体制御部２０３は、処理をＳ２０３に移して合焦方向判断を最終的に確定する。この場合、水平方向の評価値に基づく合焦方向判断の結果と垂直方向の評価値に基づく合焦方向判断の結果の何れを最終的なスキャン方向として採用しても良い。合焦方向判断を最終的に確定した後、本体制御部２０３は、処理を図３のＳ１０６に移行させる。

Ｓ２０５において、スキャン方向が同一でないと判断した場合、本体制御部２０３は、閾値を基準の値よりも大きく（例えば基準の閾値の２倍）して、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断とを行う。そして、本体制御部２０３は、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断の少なくとも何れかでスキャン方向を判断できたか否かを判断する（Ｓ２０６）。

図８は、Ｓ２０６の合焦方向判断の例を示す図である。例えば、てきぱきと歩いている人物の頭部に合焦させようとＡＦ処理をした場合、図８に示すように水平方向の評価値が増減を繰り返す。このような場合には、垂直方向の評価値のみを用いた合焦方向判断によって、最終的な合焦方向判断を確定する。図８の例では、レンズ位置Ｐ４における垂直方向の評価値AFval_v(4)が、（基準の評価値AFval_base_v ＋閾値×２）を超える。この場合、本体制御部２０３は、垂直方向の評価値に基づく合焦方向判断で（条件１）を満足している、即ちスキャン方向がそれまでのスキャン方向と同一方向であると判断する。

Ｓ２０６において、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断の少なくとも何れかでスキャン方向を判断できたと判断した場合、本体制御部２０３は、処理をＳ２０３に移して、合焦方向判断を最終的に確定する。この場合、最終的なスキャン方向は、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断とのうちでスキャン方向の判断が可能であったほうの結果を採用する。両方でスキャン方向が判断できた場合には、例えば垂直方向の評価値に基づく合焦方向判断により判断されたスキャン方向を優先する。合焦方向判断を最終的に確定した後、本体制御部２０３は、処理を図３のＳ１０６に移行させる。

また、Ｓ２０６において、水平方向の評価値に基づく合焦方向判断と垂直方向の評価値に基づく合焦方向判断の何れも合焦方向判断を確定できなかったと判断した場合、本体制御部２０３は、処理をＳ２０１に戻す。この場合には、次のフレームにおいて、Ｓ２０１からの処理が実行される。

以上説明したように、スキャン動作時の合焦方向判断処理においては、まず、水平方向の評価値に基づく合焦方向判断の結果と垂直方向の評価値に基づく合焦方向判断の結果とが同一方向であるかを判断するようにしている。二方向の評価値に基づく合焦方向判断の結果を考慮して最終的に合焦方向判断を確定することで、高い信頼性の合焦方向判断を行うことができる。また、この際には、各方向の評価値に基づく合焦方向判断においてスキャン方向を判断するための閾値を基準の閾値よりも小さくしても、合焦方向判断の信頼性を損なうことなく、スキャン方向の誤判断や偽合焦が発生する可能性を抑制することが可能である。そして、閾値を小さくすることにより、スキャン方向を早期に判断することが可能となる。このため、例えばスキャン方向が逆方向である等の判断も早期に確定され、より少ない期間でスキャン方向を変えることが可能である。これにより、逆方向への不必要なレンズ駆動が抑制される。このような作用により、例えば、ＡＦ処理中のスルー画表示中において、ピンボケした画像が表示されてしまう時間を短縮することが可能である。

これに対し、一方向の評価値のみで最終的に合焦方向判断を確定する場合には、二方向の評価値を用いて最終的な合焦方向判断の確定を行う場合よりもスキャン方向を判断するための閾値を大きくしている。これにより、スキャン方向の判断には時間がかかるようになるが合焦方向判断の信頼性を担保でき、スキャン方向の誤判断や偽合焦が発生する可能性を抑制することが可能である。

さらに、評価値の変化が不安定状態である場合も評価値の変化が不安定状態でない場合と同様の判断を行うが、評価値の変化が不安定状態である場合には、評価値の変化が不安定状態でない場合よりも、スキャン方向を判断するための閾値を大きくしている。これにより、スキャン方向の判断には時間がかかるようになるが合焦方向判断の信頼性を担保でき、スキャン方向の誤判断や偽合焦が発生する可能性を抑制することが可能である。

次に、ウォブリング動作時の合焦方向判断処理について説明する。ウォブリング動作の場合には、スキャン動作時と異なり、合焦方向判断の対象となる現在フレームｎＶＤの評価値とその１フレーム前のフレーム（ｎ−１）とその２フレーム前のフレーム（ｎ−２）ＶＤの評価値との大小関係に従って合焦方向判断を確定する。詳しくは、以下の（式４）で示される評価値変化量AFval_dlt_x（ｘは、ｈ１、ｈ２、ｈ３、ｖ）から合焦方向判断を確定する。
AF_val_dlt_x(n) ＝ ｛AFval_x（n）-AFval_x(n-1)｝−｛AFval_x（n-1）-AFval_x(n-2)｝ (式４)
ここで、「ｈ」は、水平方向の評価値であることを示している。「ｖ」は、垂直方向の評価値であることを示している。また、「ｈ」の添字「１」、「２」、「３」は、評価値を生成するためのＨＰＦ処理におけるカットオフ周波数の種類を示している。本実施形態の例では、「１」が、カットオフ周波数が最も低く、「３」が、カットオフ周波数が最も高い。

図９は、合焦位置が存在する方向とウォブリング方向とが同方向である（例えば被写体が近距離方向に存在していて近距離方向に向けてウォブリング動作させる）場合の評価値の変化について示す図である。また、図１０は、合焦位置が存在する方向とウォブリング方向とが逆方向である（例えば被写体が遠距離方向に存在していて近距離方向に向けてウォブリング動作させる）場合の評価値の変化について示す図である。

ウォブリング動作では、フォーカスレンズを微小振動させるように移動させながら合焦位置を探索する。ここで、ウォブリング周波数を撮像フレームと同期させるようにすれば、フレームｎＶＤで評価値を得たときのフォーカスレンズの移動方向と（ｎ−２）ＶＤで評価値を得たときのフォーカスレンズの移動方向とは同方向となる。また、ウォブリング動作では、評価値が増加する方向にフォーカスレンズを徐々に移動させる。したがって、評価値変化量AFval_dlt_x(n)が正の値であれば、図９に示すように、現在のウォブリング方向（同図のWob_move）に対して同方向に被写体が存在していると判断できる。逆に、評価値変化量AFval_dlt_x(n)が負の値であれば、図１０に示すように、現在のウォブリング方向（同図のWob_move）に対して逆方向に被写体が存在していると判断できる。このように、評価値変化量AFval_dlt_x(n)の符号から、ウォブリング方向を判断する。

実際には、評価値変化量AFval_dlt_x(n)が所定の正の閾値以上となった場合には、それ以後のウォブリング方向がそれまでのウォブリング方向と同方向であると判断し、評価値変化量AFval_dlt_x(n)が所定の負の閾値以下となった場合には、それ以後のウォブリング方向がそれまでのウォブリング方向と逆方向であると判断する。また、評価値変化量AFval_dlt_x(n)が正負の閾値の何れも超えていない場合には、ウォブリング方向を判断できないとする。

ここで、カメラ本体２００と被写体とがともに固定されている等して、評価値の変化が安定していれば、評価値変化量AFval_dlt_h1(n)、AFval_dlt_h2(n)、AFval_dlt_h3(n)、AFval_dlt_v(n)の符号は同一となる。この場合には、評価値の変化が、フォーカスレンズの位置変化にほぼ依存しているためである。

これに対し、評価値の変化が安定していなければ、AFval_dlt_h1(n)、AFval_dlt_h2(n)、AFval_dlt_h3(n)、AFval_dlt_v(n)の符号は必ずしも同一とはならない。例えば、てきぱきと歩いている人物の頭部に合焦させようとした場合、図８に示すように、ウォブリング動作を実行していなくとも水平方向の評価値が増減を繰り返す。これに対し、垂直方向の評価値は、レンズ位置の変化に依存して変化する。
このような状況においてウォブリング動作を実行すると、水平方向の評価値変化量AFval_dlt_h1(n)、AFval_dlt_h2(n)、AFval_dlt_h3(n)は、ウォブリング動作によって変化するだけでなく、頭部の上下動の影響も受けて変化する。一方、垂直方向の評価値変化量AFval_dlt_vは、頭部の上下動の影響を殆ど受けない。したがって、ウォブリング動作時において、合焦方向判断を最終的に確定する際には、垂直方向の評価値変化量を用いた合焦方向判断の結果を最優先するようにすれば、合焦方向判断の信頼性を最も高くして、ウォブリング方向の誤判断や偽合焦が発生する可能性を低減することができる。

また、評価値変化量AFval_dlt_h1(n)、AFval_dlt_h2(n)、AFval_dlt_h3(n)は、ＨＰＦ処理のカットオフ周波数を異ならせて得られる。そして、ＨＰＦ処理のカットオフ周波数が高い場合には、頭部の上下動の影響を受けていたとしても、被写体に対する合焦状態が悪ければ、カットオフ周波数を超える程の高周波成分を抽出できず、評価値変化量も殆ど変化しない。したがって、ウォブリング動作時において、合焦方向判断を最終的に確定する際には、カットオフ周波数の高い評価値変化量を用いた合焦方向判断の結果を優先するようにすれば、合焦方向判断の信頼性を確保して、ウォブリング方向の誤判断や偽合焦が発生する可能性を低減することができる。

以上の考え方に基づいて、本体制御部２０３は、図１１（ａ）及び図１１（ｂ）に示す判断テーブルを用いて合焦方向判断を最終的に確定する。図１１（ａ）及び図１１（ｂ）に示す判断テーブルは、本体制御部２０３に設けられたメモリに予め記憶されているものであり、合焦方向判断を最終的に確定するための条件を項目分けしたものである。図１１（ａ）及び図１１（ｂ）の例では、番号の小さい順に合焦方向判断の信頼性が高くなる。

ここで、図１１（ａ）及び図１１（ｂ）の「水平１」、「水平２」、「水平３」は、それぞれ、評価値変化量AFval_dlt_h1(n)を用いた合焦方向判断に関する条件、AFval_dlt_h2(n)を用いた合焦方向判断に関する条件、AFval_dlt_h3(n)を用いた合焦方向判断に関する条件であることを示している。「垂直」は、評価値変化量AFval_dlt_vを用いた合焦方向判断に関する条件であることを示している。「同一」は、同一項番中の「同一」が付されている評価値変化量を用いた合焦方向判断によって判断されたウォブリング方向が全て同一となることを示す。「丸印」は、その評価値変化量を用いた合焦方向判断によってウォブリング方向を判断することができたことを示す。「−」は、その評価値変化量を用いた合焦方向判断によってウォブリング方向を判断することができていても、判断できていなくても良いことを示す。「確定」は、合焦方向判断を最終的に確定できることを示す。「確定できない」は、合焦方向判断を最終的に確定できないことを示す。

図１２は、ウォブリング動作時の合焦方向判断処理の一例のフローチャートである。図１２おいて、本体制御部２０３は、評価値の変化が不安定状態であるか否かを判断する（Ｓ３０１）。Ｓ３０１の判断は、Ｓ２０１の判断と同様にして行えば良い。判断の詳細については後述する。

Ｓ３０１において、評価値の変化が不安定状態でないと判断した場合に、本体制御部２０３は、第１の判断テーブルを用いてウォブリング方向を判断する（Ｓ３０２）。Ｓ３０２の判断において、本体制御部２０３は、評価値変化量AFval_dlt_h1(n)を用いた合焦方向判断の結果と、評価値変化量AFval_dlt_h2(n)を用いた合焦方向判断の結果と、評価値変化量AFval_dlt_h3(n)を用いた合焦方向判断の結果と、評価値変化量AFval_dlt_v(n)を用いた合焦方向判断の結果とが、図１１（ａ）に示す９項目の条件の何れを満足しているかを判断する。図１１（ａ）に示すように、第１の判断テーブルは、「１」〜「９」の何れかの条件を満足していれば、合焦方向判断を最終的に確定できる。

以下、具体的に第１の判断テーブルを用いた判断について説明する。本体制御部２０３は、まず、図１１（ａ）の「１」〜「４」の条件を満足しているかを、項番が小さい順に判断していく。例えば、「１」の条件の判断では、本体制御部２０３は、垂直方向の評価値変化量AFval_dlt_v(n)を用いた合焦方向判断により判断されたウォブリング方向が、水平方向の評価値変化量AFval_dlt_h3(n)及びAFval_dlt_h2(n)を用いた合焦方向判断により判断されたウォブリング方向と同一方向であるかを判断する。同一方向であると判断した場合に、本体制御部２０３は、垂直方向の評価値変化量AFval_dlt_v(n)を用いた合焦方向判断により判断されたウォブリング方向を、最終的なウォブリング方向と判断する。「１」の条件を満足していないと判断した場合に、本体制御部２０３は、「１」の条件の判断と同様にして、「２」の条件を満足しているか否かを判断する。以後同様に、本体制御部２０３は、「３」の条件を満足しているか否か、「４」の条件を満足しているか否かを順次判断する。

また、「１」〜「４」の何れの条件も満足していないと判断した場合、本体制御部２０３は、図１１（ａ）の「５」の条件を満足しているか否かを判断する。即ち、本体制御部２０３は、水平方向の評価値変化量AFval_dlt_h3(n)を用いた合焦方向判断により判断されたウォブリング方向と水平方向の評価値変化量AFval_dlt_h2(n)を用いた合焦方向判断により確定されたウォブリング方向が同一方向であるか否かを判断する。同一方向であると判断した場合に、本体制御部２０３は、水平方向の評価値変化量AFval_dlt_h3(n)を用いた合焦方向判断により確定されたウォブリング方向を、最終的なウォブリング方向として確定する。

また、「５」の条件を満足していないと判断した場合、本体制御部２０３は、図１１（ａ）の「６」〜「９」の条件を満足しているか否かを、項番が小さい順に判断していく。例えば、「６」の条件の判断では、本体制御部２０３は、垂直方向の評価値変化量AFval_dlt_v(n)を用いた合焦方向判断によりウォブリング方向を確定できたか否かを判断する。ウォブリング方向を確定できたと判断した場合に、本体制御部２０３は、そのときの、垂直方向の評価値変化量AFval_dlt_v(n)を用いた合焦方向判断により確定されたウォブリング方向を、最終的なウォブリング方向として確定する。「６」の条件を満足していないと判断した場合に、本体制御部２０３は、「６」の条件の判断と同様にして、「７」の条件を満足しているか否かを判断する。以後同様に、本体制御部２０３は、「８」の条件を満足しているか否か、「９」の条件を満足しているか否かを順次判断する。

Ｓ３０１において、評価値の変化が不安定状態であると判断した場合に、本体制御部２０３は、第２の判断テーブルを用いてウォブリング方向を判断する（Ｓ３０３）。Ｓ３０３の判断において、本体制御部２０３は、評価値変化量AFval_dlt_h1(n)を用いた合焦方向判断の結果と、評価値変化量AFval_dlt_h2(n)を用いた合焦方向判断の結果と、評価値変化量AFval_dlt_h3(n)を用いた合焦方向判断の結果と、評価値変化量AFval_dlt_v(n)を用いた合焦方向判断の結果とが、図１１（ｂ）に示す９項目の条件の何れを満足しているかを判断する。図１１（ｂ）に示すように、第１の判断テーブルにおける９項目の条件は、図１１（ａ）に示す第１の判断テーブルにおける条件と同一である。したがって、第２の判断テーブルを用いた判断も、基本的には、第１の判断テーブルを用いた判断と同様に実行される。ただし、図１１（ｂ）に示すように、第２の判断テーブルは、「１」〜「４」の条件を満足していなければ、合焦方向判断を最終的に確定できないと判断する。即ち、評価値の変化が不安定状態である場合には、ウォブリング方向の誤判断や偽合焦が発生する可能性が高いので、水平方向の評価値変化量を用いた合焦方向判断により判断されたウォブリング方向と垂直方向の評価値変化量を用いた合焦方向判断により判断されたウォブリング方向とが同一方向の場合に合焦方向判断を最終的に確定するようにする。

Ｓ３０２又はＳ３０３の後、本体制御部２０３は、合焦方向判断が最終的に確定できたか否かを判断する（Ｓ３０４）。Ｓ３０４において、合焦方向判断を最終的に確定できたと判断した場合、本体制御部２０３は、処理を図３のＳ１０３に移行させる。また、Ｓ３０４において、合焦方向判断を最終的に確定できなかったと判断した場合、本体制御部２０３は、処理をＳ３０１に戻す。この場合には、次のフレームにおいて、Ｓ３０１からの処理が実行される。

以上説明したように、ウォブリング動作時の合焦方向判断処理においては、まず、水平方向の評価値変化量に基づく合焦方向判断の結果と垂直方向の評価値変化量に基づく合焦方向判断の結果とが同一方向であるかを、合焦方向判断の信頼性の高い順に判断するようにしている。二方向の評価値変化量に基づく合焦方向判断の結果を考慮して最終的に合焦方向判断を確定することで、高い信頼性の合焦方向判断を行うことができる。
ここで、スキャン動作時の合焦方向判断処理と同様、ウォブリング動作時の合焦方向判断処理においても、ウォブリング方向を判断するための閾値を基準の閾値よりも小さくしてウォブリング方向を判断するようにしても良い。

また、ウォブリング動作時の合焦方向判断処理においては、カットオフ周波数の異なる複数の水平方向の評価値変化量を併用して合焦方向判断を、信頼性の高い順に行うようにしている。これにより、合焦方向判断の信頼性を担保でき、ウォブリング方向の誤判断や偽合焦が発生する可能性を抑制することが可能である。

ここで、本実施形態では、カットオフ周波数の異なる３種類の水平方向の評価値変化量を求めて合焦方向判断を行うようにしている。しかしながら、カットオフ周波数の異なる２種類の水平方向の評価値変化量を求めて合焦方向判断を行うようにしても良いし、カットオフ周波数の異なる４種類以上の水平方向の評価値変化量を求めて合焦方向判断を行うようにしても良い。

次に、Ｓ２０１及びＳ３０１の判断の詳細について説明する。前述したように、Ｓ２０１及びＳ３０１において判断する評価値の変化が不安定な状態とは、パン移動及びチルト移動等のカメラ本体２００の動き、並びに被写体ブレといった評価値の変化を不安定にする要因が存在している状態のことである。

まず、パン移動及びチルト移動等のカメラ本体２００の動きによる判断について説明する。本実施形態では、例えばジャイロセンサ２０５の出力（検出回路２０６の出力）が、下記の何れかの条件を満たした場合、パン移動又はチルト移動が発生しており、評価値の変化が不安定な状態であると判断する。
（条件３） ａｂｓ（ｘ）≧パン・チルト発生判断閾値Ｔｈ／撮像レンズ１０１の焦点距離
（条件４） ａｂｓ（ｙ）≧パン・チルト発生判断閾値Ｔｈ／撮像レンズ１０１の焦点距離
（式５）
ここで、（式５）のａｂｓ（ｘ）はジャイロセンサ２０５によって検出されたＸ軸方向の角速度の大きさ（絶対値）であり、ａｂｓ（ｙ）はジャイロセンサ２０５によって検出されたＹ軸方向の角速度の大きさである。また、（式５）の焦点距離は、撮像レンズ１０１を構成する光学系全体としての焦点距離である。

閾値Ｔｈを焦点距離で除算しているのは、焦点距離によって閾値を正規化するためである。パン・チルト発生判断閾値Ｔｈは、動画記録時のＡＦ処理中であるか、動画記録時以外（例えば静止画記録時）のＡＦ処理中であるかによって変更することが望ましい。

ここで、検出回路２０６は、例えばジャイロセンサ２０５から出力される角速度信号に対して２次の微分（例えばハイパスフィルタ（ＨＰＦ）処理）を行った後、その出力を積算し、再度のＨＰＦ処理を行う。この場合、実際の検出回路２０６の出力は、図１３に示す加速度のような波形となる。図１３に示すように、検出回路２０６（ジャイロセンサ２０５）の出力値は、パン移動又はチルト移動が終了した直後に大きく逆方向に振れる。このような抑制期間中にＳ２０１及びＳ３０１の判断がされると、誤判断の原因となる。したがって、下記の条件を満たす抑制期間中は、Ｓ２０１及びＳ３０１の判断を実行しないことが望ましい。
（条件５） パン移動及びチルト移動の終了判断がなされた後の経過時間が一定時間以下で且つａｂｓ（ＤｅｔＡｘｉｓ）の符号が開始時の符号と逆転したまま元に戻らない間
ただし、抑制期間中でも、下記の条件を満たす場合には、パン移動又はチルト移動が開始されたと判断する。
（条件６） ａｂｓ（ＤｅｔＡｘｉｓ，現在）≧ｍａｘ｛ａｂｓ（ＤｅｔＡｘｉｓ，パン移動又はチルト移動の開始後から終了までの間）｝
ここで、ａｂｓ（ＤｅｔＡｘｉｓ，現在）は、現在のジャイロセンサ出力であり、ｍａｘ｛ａｂｓ（ＤｅｔＡｘｉｓ，パン移動又はチルト移動の開始後から終了までの間）｝は、パン移動又はチルト移動の開始の判断後から終了の判断がなされるまでの間のＶＤ期間中のジャイロセンサ出力の絶対値の最大値である。また、ＶＤ期間とは図１３の横軸で示す同期信号の出力期間である。

次に、被写体ブレによる判断について説明する。本実施形態では、例えば動きベクトルを検出することによって被写体ブレを検出する。動きベクトルは、複数フレームの画像データを取得し、今回のフレームの注目画像（被写体）が、前回のフレーム内では、どの位置に存在したかをテンプレートマッチング等により求め、その注目画像の移動量と移動方向を算出することによって求まる。なお、動きベクトル検出により、前述のパン移動・チルト移動を検出することも可能である。

図１４（ａ）〜図１４（ｃ）は、テンプレートマッチングにより被写体の移動を検出して動きベクトルを求める処理を示す。動きベクトルは、例えば複数のＡＦターゲットエリア等の撮影画面内の複数の領域で並行して検出される。図１４（ａ）に示すように、例えばＡＦターゲットエリア３０１〜３１１のそれぞれが、動きベクトルを検出するためのテンプレートに設定される。例えば、（ｎ−１）フレーム内の１つのＡＦターゲットエリア３０６内の画像を注目画像とする。このとき、動きベクトルは、（ｎ−１）フレームからｎフレームの間での注目画像の移動量及び移動方向として算出される。例えば、図１４（ａ）に示す（ｎ−１）フレームにおいてＡＦターゲットエリア３０６内に存在していた被写体が、図１４（ｂ）に示すｎフレームにおいて符号４０１の位置に移動していた場合、動きベクトルは、図１４（ｂ）の矢印Ａで示されるものとなる。このような動きベクトルを、図１４（ｃ）に示すようにして、複数のＡＦターゲットエリアに対して計算する。

図１４（ｃ）のようにして算出された動きベクトルによる判断の条件を以下に示す。下記の何れかの条件を満たした場合、被写体ブレが発生しており、評価値の変化が不安定な状態であると判断する。
（条件７） ａｂｓ（動きベクトル出力［Ｘ］）≧被写体ブレ発生判断閾値Ｔｈｂ/撮像レンズ焦点距離
（条件８） ａｂｓ（動きベクトル出力［Ｙ］）≧被写体ブレ発生判断閾値Ｔｈｂ/撮像レンズ焦点距離
ここで、Ｘ、Ｙは、被写体の動きベクトルをＸ軸成分とＹ軸成分とで示したものである。また、ａｂｓ（ ）は絶対値を計算することを示す。また、両式の右辺において、被写体ブレ発生判断閾値Ｔｈｂを撮像レンズの焦点距離で除算しているので、焦点距離によって閾値が正規化される。これにより、撮像レンズの焦点距離に影響されることなく被写体ブレ検出を行うことができる。

図１５は、動きベクトル出力の時間変化の例及び閾値と被写体ブレが発生中と判断される範囲を示す。図１５の例では、破線と一点鎖線との間の部分が被写体ブレ発生中であると判断される部分である。
以上実施形態に基づいて本発明を説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。また、前述の動作の説明において、便宜上「まず」、「次に」等を用いて動作を説明しているが、この順で動作を実施することが必須であることを意味するものではない。

さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、上述したような課題を解決でき、上述したような効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。

１００…交換レンズ、１０１…撮像レンズ、１０２…モータドライバ、１０３…レンズ制御部、１０４…記憶部、２００…カメラ本体、２０１…撮像素子、２０２…表示部、２０３…本体制御部、２０４…マウント接点、２０５…ジャイロセンサ、２０６…検出回路

Claims (7)

1. 光軸方向に移動自在なフォーカスレンズを有して被写体の光学像を生成する光学系と、複数の画素部を有して前記光学像を撮像する撮像部と、を有する撮像装置のためのフォーカス制御装置であって、
   前記画素部を第１の方向に走査することによって前記画素部から出力された第１の信号に基づいて前記被写体のコントラスト状態を示す第１の評価値を得るとともに、前記画素部を前記第１の方向とは異なる第２の方向に走査することによって前記画素部から出力された第２の信号に基づいて前記被写体のコントラスト状態を示す第２の評価値を得る評価値生成部と、
   前記フォーカスレンズを移動させている状態で前記第１の評価値と前記第２の評価値とのそれぞれの変化に基づいて前記フォーカスレンズを合焦させるために必要な前記フォーカスレンズの移動方向を判断し、前記第１の評価値に基づいて判断した第１の移動方向と前記第２の評価値に基づいて判断した第２の移動方向とが同一方向の場合に、該同一方向であると判断した移動方向に前記フォーカスレンズを移動させるようにオートフォーカス動作を行う制御部と、
   を具備することを特徴とするフォーカス制御装置。
2. 前記制御部は、前記第１の評価値の変化量が第１の閾値を超えたことを判断することによって前記フォーカスレンズの移動方向が前記第１の移動方向であることを判断するとともに、前記第２の評価値の変化量が第２の閾値を超えたことを判断することによって前記フォーカスレンズの移動方向が前記第２の移動方向であることを判断し、
   前記第１の評価値と前記第２の評価値の少なくとも何れかの変化が不安定状態である場合に、前記第１の閾値と前記第２の閾値を、前記第１の評価値と前記第２の評価値の両方が不安定状態でない場合よりも大きくすることを特徴とする請求項１に記載のフォーカス制御装置。
3. 前記撮像装置の動き量を検出する動き検出部をさらに具備し、
   前記制御部は、前記動き検出部により検出された動き量が所定値よりも大きい場合に前記第１の評価値と前記第２の評価値の少なくとも何れかの変化が不安定状態であると判断することを特徴とする請求項２に記載のフォーカス制御装置。
4. 前記画素部からの出力信号に基づいて動きベクトル量を検出する動きベクトル検出部をさらに具備し、
   前記制御部は、前記動きベクトル検出部により検出された動きベクトル量が所定値よりも大きい場合に前記第１の評価値と前記第２の評価値の少なくとも何れかの変化が不安定状態であると判断することを特徴とする請求項２に記載のフォーカス制御装置。
5. 前記制御部は、前記第１の移動方向と前記第２の移動方向が同一方向でないと判断した場合に、前記第１の移動方向と前記第２の移動方向とのうちでより信頼性があるほうの移動方向に前記フォーカスレンズを移動させるようにオートフォーカス動作を行うことを特徴とする請求項２に記載のフォーカス制御装置。
6. 前記フォーカスレンズを移動させている状態は、前記評価値生成部において前記第１の評価値の極大値又は前記第２の評価値の極大値を探索するために、ウォブリング駆動によって前記フォーカスレンズを移動させている状態であることを特徴とする請求項１乃至５の何れか１項に記載のフォーカス制御装置。
7. 前記フォーカスレンズを移動させている状態は、前記評価値生成部において前記第１の評価値の極大値又は前記第２の評価値の極大値を探索するために、前記フォーカスレンズを一方向に移動させている状態であることを特徴とする請求項１乃至５の何れか１項に記載のフォーカス制御装置。

Images