JP2014060486A - 撮像装置 - Google Patents

Abstract

【課題】フィルタ回路の回路規模を低減する。
【解決手段】撮像装置は、撮像素子の出力信号に対する第１フィルタ処理の結果信号を用いて、被写体像を撮像素子に結像させるためのフォーカス処理を行うフォーカス処理部と、撮像素子の出力信号に対する第２フィルタ処理の結果信号を用いて撮影画像の動き情報を生成する動き検出処理部と、を備え、共通のフィルタ回路を時分割で用いて第１及び第２フィルタ処理を実現する。フィルタ回路を形成する選択回路付フィルタ３２０において、選択回路ブロック３２２は、フォーカス処理用のフィルタ係数又は動き検出用のフィルタ係数（動き検出を利用した電子式手振れ補正用のフィルタ係数）を選択的にデジタルフィルタ３２１に供給し、デジタルフィルタ３２１は供給フィルタ係数に応じたフィルタ特性を有するフィルタリングを実行する。
【選択図】図１１

Description

本発明は、デジタルカメラ等の撮像装置に関する。

デジタルカメラ等の撮像装置では、自動的に焦点合わせを行うフォーカス処理（オートフォーカス処理）や、画像の動き検出を行う動き検出処理が実行されることが多い。

コントラスト検出方式のフォーカス処理では、撮像素子の出力信号に対してフィルタ処理を行い、そのフィルタ処理の結果信号を用いてフィーカスレンズの位置調整を行うことにより、被写体像を撮像素子上に結像させる。フォーカス処理用のフィルタ処理は、ノイズ除去等を目的としたローパスフィルタ処理及び高域周波数成分の抽出等を目的としたハイパスフィルタ処理を含む。

動き検出処理では、撮像素子の出力信号に対してフィルタ処理を行い、そのフィルタ処理の結果信号を用いて代表点マッチング法等による動き検出を行うことで、撮影画像の動き情報（動きベクトル等）を生成する。得られた動き情報は、例えば電子式手振れ補正に利用される。動き検出処理用のフィルタ処理は、ノイズ除去等を目的としたローパスフィルタ処理及びエッジ強調等を目的としたハイパスフィルタ処理を含む。

従来の撮像装置には、フォーカス処理用のフィルタ処理を行うフィルタ回路及び動き検出処理用のフィルタ処理を行うフィルタ回路が独立した回路として別々に設けられ、それらのフィルタ回路を個別に動作させている。

尚、下記特許文献１には、輝度信号用のローパスフィルタのディレイとタップを、色信号用のローパスフィルタのディレイとタップの一部分に共通化させる方法が示されている。

特開平１−３２０８１２号公報

フォーカス処理用のフィルタ処理を行うフィルタ回路及び動き検出処理用のフィルタ処理を行うフィルタ回路を別々に設ければ、当然、２つのフィルタ回路分の回路規模が必要である。消費電力低減等の観点から、回路規模の低減が有益であることは言うまでもない。特許文献１の共通化は回路規模低減に幾分寄与するかもしれないが、特許文献１の共通化方法は、輝度信号用のフィルタ回路及び色信号用のフィルタ回路にしか適用されない。

また、フォーカス処理及び動き検出処理用のフィルタ回路に注目して従来構成を説明したが、同様の事情が他の任意の機能処理用のフィルタ回路に対しても当てはまる。第１及び第２機能処理に用いるフィルタ回路の共用（共通化）を考えた場合、フィルタ回路を時分割で用いて第１及び第２機能処理を実現することが検討される。例えば、フレーム単位でフィルタ回路を交互に第１及び第２機能処理に割り当てれば、第１及び第２機能処理が交互に実現される。この場合、各機能処理の実行頻度は２フレームに１回となる。但し、各機能処理の実行頻度を固定しておくことが最良であるとは言えない。或る状況下では第１機能処理の必要性が高かったり、他の状況下では第２機能処理の必要性が高かったりするからである。

そこで本発明は、回路規模低減に寄与する撮像装置を提供することを目的とする。また、本発明は、フィルタ回路を共用化した場合における各機能処理の実行頻度適正化に寄与する撮像装置を提供することを目的とする。

本発明に係る第１の撮像装置は、被写体の画像信号を出力する撮像素子と、前記撮像素子の出力信号に対する第１フィルタ処理の結果信号を用いて、被写体像を前記撮像素子に結像させるためのフォーカス処理を行うフォーカス処理部と、前記撮像素子の出力信号に対する第２フィルタ処理の結果信号を用いて、前記撮像素子の出力信号に基づく画像の動き情報を生成する動き検出処理部と、を備えた撮像装置において、前記第１及び第２フィルタ処理に用いるフィルタ回路を共用し、フレーム単位で前記フィルタ回路を時分割で用いて前記第１及び第２フィルタ処理を実現することを特徴とする。

フィルタ回路の共用によって、フィルタ処理に関わる回路規模を低減することが可能である。

また例えば、前記フィルタ回路を用いて前記第１フィルタ処理を実現するフレームと前記フィルタ回路を用いて前記第２フィルタ処理を実現するフレームとの枚数比を、撮影条件に応じて設定する設定部を当該第１の撮像装置に更に設けておいても良い。

フィルタ回路の共用は回路規模の低減等の効果を生むが、該共用によってフォーカス処理の実行頻度及び動き情報の生成頻度は低下する。しかしながら、撮影条件に応じて上記枚数比を動的に設定するようにすれば、撮影条件に応じた適正な頻度でフォーカス処理及び動き情報生成が行われるようになり、フォーカス処理の実行頻度及び動き情報の生成頻度の低下に伴う実質的なデメリットを軽減することができる。

具体的には例えば、前記撮影条件は、前記被写体の前後の動きを含み、前記被写体の前後の動きは、前記被写体が当該撮像装置から離れる又は当該撮像装置に近づく方向における、前記被写体の実空間上の動きであり、前記設定部は、前記被写体の前後の動きに応じて、前記枚数比を設定しても良い。

或いは具体的には例えば、前記動き情報を用いて、前記撮像素子の出力信号に基づく画像に対する電子式手振れ補正を行う手振れ補正部を当該第１の撮像装置に更に設け、前記撮像条件は、前記動き情報に基づく手振れ量を含み、前記設定部は、前記手振れ量に応じて、前記枚数比を設定しても良い。

また例えば、前記フォーカス処理部は、前記第１フィルタ処理の結果信号に対し所定の第１演算処理を行うことで得られる演算結果を用いて前記フォーカス処理を行い、前記動き検出処理部は、前記第２フィルタ処理の結果信号に対し所定の第２演算処理を行うことで前記動き情報を生成し、当該撮像装置は、前記第１及び第２演算処理に用いる演算器を共用し、前記フィルタ回路を用いて前記第１フィルタ処理を実現するフレームでは前記演算器を用いて前記第１演算処理を実現し、前記フィルタ回路を用いて前記第２フィルタ処理を実現するフレームでは前記演算器を用いて前記第２演算処理を実現すると良い。

これにより、演算器の共用に関わる分だけ更に回路規模を低減することが可能となる。

また具体的には例えば、前記第１フィルタ処理用のフィルタ係数である第１フィルタ係数又は前記第２フィルタ処理用のフィルタ係数である第２フィルタ係数を選択的に前記フィルタ回路に供給する選択回路と、前記選択回路の選択動作を制御する切り替え制御部とを当該第１の撮像装置に設けておくと良い。そして例えば、前記フィルタ回路は、前記第１フィルタ係数が供給されたときに前記第１フィルタ処理を実現する一方、前記第２フィルタ係数が供給されたときに前記第２フィルタ処理を実現すると良い。

本発明に係る第２の撮像装置は、被写体の画像信号を出力する撮像素子と、前記撮像素子の出力信号に対する第１フィルタ処理の結果信号を用いて所定の第１機能処理を行う第１機能処理部と、前記撮像素子の出力信号に対する第２フィルタ処理の結果信号を用いて所定の第２機能処理を行う第２機能処理部と、を備えた撮像装置において、前記第１及び第２フィルタ処理に用いるフィルタ回路を共用し、フレーム単位で前記フィルタ回路を時分割で用いて前記第１及び第２フィルタ処理を実現し、前記フィルタ回路を用いて前記第１フィルタ処理を実現するフレームと前記フィルタ回路を用いて前記第２フィルタ処理を実現するフレームとの枚数比を、撮影条件に応じて設定する設定部を更に備えたことを特徴とする。

フィルタ回路の共用は回路規模の低減等の効果を生むが、該共用によって各機能処理の実行頻度は低下する。しかしながら、撮影条件に応じて上記枚数比を動的に設定するようにすれば、撮影条件に応じた適正な頻度で各機能処理が行われるようになり、各機能処理の実行頻度の低下に伴う実質的なデメリットを軽減することができる。

本発明によれば、回路規模低減に寄与する撮像装置を提供することが可能である。また、本発明によれば、フィルタ回路を共用化した場合における各機能処理の実行頻度適正化に寄与する撮像装置を提供することが可能である。

本発明の実施形態に係る撮像装置の概略全体ブロック図である。 図１の撮像部の内部構成図である。 撮影によるフレームの構造を示す図である。 フォーカス処理（ＡＦ処理）及び電子式手振れ補正（ＥＩＳ処理）に関与する部位の機能ブロック図である。 フレーム内にＡＦ評価領域が設定される様子を示した図である。 フレーム内に動き検出領域が設定される様子を示した図である。 図４の第１フィルタ処理部の内部機能ブロック図である。 図４の第２フィルタ処理部の内部機能ブロック図である。 双二次フィルタとして形成されたデジタルフィルタの構成図である。 本発明の実施形態に係るフィルタ回路及び切り替え制御部のブロック図である。 本発明の実施形態に係る選択回路付フィルタの構成図である。 ４つのフィルタ部の内部構成を示す図である。 複数の機能部にフィルタ回路が共有されている様子を示す図である。 複数の機能部に演算ブロックが共有されている様子を示す図である。 切り替え制御部に設定部が内包されている様子を示す図である。 評価期間と設定対象期間の時間的関係を示す図である。

以下、本発明の実施形態の例を、図面を参照して具体的に説明する。参照される各図において、同一の部分には同一の符号を付し、同一の部分に関する重複する説明を原則として省略する。尚、本明細書では、記述の簡略化上、情報、信号、物理量、状態量又は部材等を参照する記号又は符号を記すことによって該記号又は符号に対応する情報、信号、物理量、状態量又は部材等の名称を省略又は略記することがある。

図１は、本発明の実施形態に係る撮像装置１の概略全体ブロック図である。撮像装置１は、静止画像及び動画像を撮影及び記録可能なデジタルビデオカメラ、又は、静止画像のみを撮影及び記録可能なデジタルスチルカメラである。また、撮像装置１は、携帯電話機などの携帯端末に搭載されるものであっても良い。撮像装置１は、符号１１〜１５によって参照される各部位を備える。表示部１３は、撮像装置１の外部に設けられた表示装置であっても良い。

撮像部１１は、撮像素子を用いて被写体の撮影を行う。図２は、撮像部１１の内部構成図である。撮像部１１は、光学系３５と、絞り３２と、ＣＣＤ（Charge Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサなどから成る撮像素子（固体撮像素子）３３と、光学系３５や絞り３２を駆動制御するためのドライバ３４と、を有している。光学系３５は、撮像部１１の画角を調節するためのズームレンズ３０及び焦点を合わせるためのフォーカスレンズ３１を含む複数枚のレンズから形成される。ズームレンズ３０及びフォーカスレンズ３１は撮像部１１の光軸方向に移動可能である。主制御部１２からの制御信号に基づき、ズームレンズ３０及びフォーカスレンズ３１の位置並びに絞り３２の開度（即ち絞り値）が制御される。撮像素子３３は、水平及び垂直方向に複数の受光画素が配列されることによって形成される。撮像素子３３の各受光画素は、光学系３５及び絞り３２を介して入射した被写体像（被写体の光学像）を光電変換し、該光電変換によって得られた被写体像の信号（即ち被写体の画像信号）を撮像部１１の出力信号として出力する。

主制御部１２は、信号処理回路、ＣＰＵ（Central Processing Unit）、ＲＯＭ(Read Only Memory)及びＲＡＭ（Random Access Memory）等にて形成され、撮像部１１の出力信号に対して様々な信号処理を施す。表示部１３は、液晶ディスプレイパネル等の表示画面を有する表示装置であり、主制御部１２の制御の下、任意の映像を表示する。記録媒体１４は、カード状半導体メモリや磁気ディスク等の不揮発性メモリであり、主制御部１２による制御の下、撮影画像の画像信号等を記録する。操作部１５は、静止画像の撮影指示の入力を受け付けるシャッタボタン等を備え、外部からの各種操作を受け付ける。

撮像部１１は、所定のフレーム周期で、順次、被写体の撮影を行うことができ、撮像素子３３の１フレーム周期分の出力信号にて形成される１枚の撮影画像（静止画像）をフレームとも呼ぶ。本実施形態において、撮影画像とは、撮像部１１の撮影によって得られた画像（即ち、撮像素子３３の出力信号に基づく画像）を指す。

図３に、任意のフレームである１枚のフレームＦＩの構造を示す。フレームＦＩにおける水平方向の画素数はＭであり、垂直方向の画素数はＮである（Ｍ及びＮは２以上の整数であり、例えば、Ｍ＝１９２０、Ｎ＝１０８０）。フレームＦＩに関し、水平方向は左右方向に対応し、垂直方向は上下方向に対応する。フレームＦＩを形成する任意の画素の位置を（ｉ，ｊ）と表記する（ｉ及びｊは整数）。画素位置（０，０）は、フレームＦＩの左上隅に位置する画素位置であり、画素位置（Ｍ−１，Ｎ−１）は、フレームＦＩの右下隅に位置する画素位置である。画素位置（ｉ，ｊ）の右側、左側、上側、下側に隣接する画素位置は、夫々、画素位置（ｉ＋１，ｊ）、（ｉ−１，ｊ）、（ｉ，ｊ−１）、（ｉ，ｊ＋１）である。

撮像装置１は、被写体像を撮像素子３３上に結像させるためのフォーカス処理、及び、撮像素子３３の出力信号に基づく画像に対する電子式手振れ補正を実行可能に形成されている。

フォーカス処理は、コントラスト検出方式のオートフォーカスを実現する処理であり、以下、フォーカス処理をＡＦ処理という。ＡＦ処理では、撮像素子３３の出力信号に基づき、撮像素子３３上に被写体像が結像するように撮像素子３３及びフォーカスレンズ３１間の位置関係を調整する。この位置関係の調整は、被写体と撮像素子３３との間に配置されるフォーカスレンズ３１の位置調整によって実現される。但し、撮像部１１の光軸方向に撮像素子３３が移動できるように撮像部１１を形成しておき、上記位置関係の調整を、撮像素子３３の位置調整、或いは、フォーカスレンズ３１及び撮像素子３３の位置調整によって実現しても良い。以下では、特に記述無き限り、フォーカスレンズ３１のみが位置調整されることを想定する。

電子式手振れ補正（Electronic Image Stabilization）も撮像素子３３の出力信号に基づいて実行される。電子式手振れ補正（以下、ＥＩＳ処理ともいう）では、撮像素子３３の出力信号に基づいて撮像装置１の動きに相当する手振れの大きさ及び向きを検出し、その検出結果に基づいて手振れに由来する撮影画像のぶれが低減されるようにフレーム間の位置合わせを行う。フレーム間の位置合わせは、例えば、各フレーム内に設定された切り出し領域の位置を、検出された手振れの大きさ及び向きに基づいて調整することで実現される。表示部１３に表示される又は記録媒体１４に記録される撮影画像は、切り出し領域内の画像信号にて形成される。

図４に、ＡＦ処理及びＥＩＳ処理に関与する部位の機能ブロック図を示す。符号５０〜５３及び６１〜６３によって参照される部位が主制御部１２に搭載されていると考えることができる。輝度信号抽出部５０は、撮像素子３３の出力信号から輝度信号を抽出する。抽出された輝度信号１００は、第１フィルタ処理部５１及び第２フィルタ処理部６１に入力される。尚、撮像素子３３の出力信号から輝度信号を抽出する前段階において、撮像素子３３の出力信号に対して信号の増幅やデジタル化が施されている。

フレームＦＩにおける輝度信号１００がラスタスキャン順にフィルタ処理部５１及び６１に入力される。ラスタスキャン順での輝度信号入力では、周知の如く（図３も参照）、画素位置（０，０）の輝度信号から画素位置（Ｍ−１，０）の輝度信号までの計Ｍ個の輝度信号を１クロックごとに１つずつ順次入力し、画素位置（Ｍ−１，０）の輝度信号の入力の次には、画素位置（０，１）の輝度信号から画素位置（Ｍ−１，１）の輝度信号までの計Ｍ個の輝度信号を１クロックごとに１つずつ順次入力する。このような入力処理を、画素位置（Ｍ−１，Ｎ−１）の輝度信号が入力されるまで繰り返す。

但し、フィルタ処理部５１に入力される輝度信号１００は、フレームＦＩに設定された所定のＡＦ評価領域内の輝度信号に限定されても良い。図５の破線四角枠ＡＦ_ER内の領域は、ＡＦ評価領域の一例である。ＡＦ評価領域は、フレームＦＩの一部の画像領域であっても良いし、フレームＦＩの全画像領域であっても良い。ＡＦ評価領域は、互いに分離した複数の画像領域から形成されていても良い。また、フィルタ処理部６１に入力される輝度信号１００は、フレームＦＩに設定された所定の動き検出領域内の輝度信号に限定されても良い。動き検出領域は、フレームＦＩの一部の画像領域であっても良いし、フレームＦＩの全画像領域であっても良い。動き検出領域は、互いに分離した複数の画像領域から形成されていても良い。以下では、図６に示す如く、フレームＦＩにおける互いに異なる９つの画像領域を動き評価ブロックＥＲ［１］〜ＥＲ［９］として設定し、動き評価ブロックＥＲ［１］〜ＥＲ［９］にて動き検出領域が形成されているものとする。

図４の第１フィルタ処理部５１は、自身に入力された輝度信号１００に対して所定の第１フィルタ処理を行い、第１フィルタ処理の結果信号１１０を出力する。第１フィルタ処理は、ＡＦ処理に適したフィルタ処理である。

図７に、フィルタ処理部５１の内部機能ブロック図を示す。フィルタ処理部５１は、水平ＬＰＦ（ローパスフィルタ）５１ａ、水平ＨＰＦ（ハイパスフィルタ）５１ｂ、垂直ＬＰＦ５１ｃ及び垂直ＨＰＦ５１ｄから成る。
水平ＬＰＦ５１ａは、輝度信号１００に含まれる水平方向の空間周波数成分の内、比較的低い空間周波数成分を通過させ、比較的高い空間周波数成分を持つ不要な空間周波数成分を低減させる。水平ＨＰＦ５１ｂは、水平ＬＰＦ５１ａを通過した輝度信号１１１に含まれる水平方向の空間周波数成分の中から、比較的高い空間周波数成分である所定の高域周波数成分を抽出して、抽出成分を示す信号１１２を出力する。
垂直ＬＰＦ５１ｃは、輝度信号１００に含まれる垂直方向の空間周波数成分の内、比較的低い空間周波数成分を通過させ、比較的高い空間周波数成分を持つ不要な空間周波数成分を低減させる。垂直ＨＰＦ５１ｄは、垂直ＬＰＦ５１ｃを通過した輝度信号１１３に含まれる垂直方向の空間周波数成分の中から、比較的高い空間周波数成分である所定の高域周波数成分を抽出して、抽出成分を示す信号１１４を出力する。

ＬＰＦ５１ａ及び５１ｃは、輝度信号１００中のノイズ（折り返し歪みを含みうる）を低減する機能を有する。ＨＰＦ５１ｂ及び５１ｄは、輝度信号１００中のエッジを抽出（換言すれば強調）する機能を有する。画素位置ごとに信号１１２及び１１４の値を得ることができる。或る画素位置（ｉ，ｊ）における信号１１２及び１１４は、その画素位置（ｉ，ｊ）における、ノイズの低減及びエッジの強調が成された輝度信号を形成し、その信号１１２及び１１４の値は画素位置（ｉ，ｊ）におけるエッジの強度を示す。但し、信号１１２に関するエッジは、水平方向に沿って輝度信号を走査したときの輝度信号の急激な勾配を指し、信号１１４に関するエッジは、垂直方向に沿って輝度信号を走査したときの輝度信号の急激な勾配を指す。第１フィルタ処理の結果信号であるフィルタ処理部５１の出力信号１１０は、信号１１２及び１１４から成る。

図４のＡＦ用演算部５２は、フィルタ処理部５１の出力信号（第１フィルタ処理の結果信号）１１０に対してＡＦ処理に必要な所定のＡＦ用演算処理（第１演算処理）を実行し、ＡＦ用演算処理の結果を示す信号１２０を出力する。ＡＦ用演算処理は、ＡＦ評価領域に属する信号１１２及び１１４の絶対値を積算する積算処理を含み、この積算による積算値がＡＦ評価値として得られる。ＡＦ用演算部５２の出力信号１２０は当該ＡＦ評価値を含む。ＡＦ評価値を、フレームごとに、又は、複数のフレームごとに、得ることができる。ＡＦ処理部５３は、ＡＦ用演算部５２の出力信号１２０に基づき（即ちＡＦ用演算処理の演算結果に基づき）上記ＡＦ処理を行う。具体的には、ＡＦ処理において、ＡＦ処理部５３は、順次得られるＡＦ評価値が、ＡＦ評価値のとりうる最大値又は最大値付近に維持されるように、所謂山登り制御を用いてフォーカスレンズ３１の位置を制御する。ＡＦ評価値は、ＡＦ評価領域内の画像のコントラストに応じた値を持つため、このＡＦ処理によって、ＡＦ評価領域内の被写体に対してピントが合っている状態が実現又は維持される。

図４の第２フィルタ処理部６１は、自身に入力された輝度信号１００に対して所定の第２フィルタ処理を行い、第２フィルタ処理の結果信号１３０を出力する。第２フィルタ処理は、画像の動き検出に適したフィルタ処理である。

図８に、フィルタ処理部６１の内部機能ブロック図を示す。フィルタ処理部６１は、水平ＬＰＦ６１ａ、水平ＨＰＦ６１ｂ、垂直ＬＰＦ６１ｃ及び垂直ＨＰＦ６１ｄから成る。
水平ＬＰＦ６１ａは、輝度信号１００に含まれる水平方向の空間周波数成分の内、比較的低い空間周波数成分を通過させ、比較的高い空間周波数成分を持つ不要な空間周波数成分を低減させる。水平ＨＰＦ６１ｂは、水平ＬＰＦ６１ａを通過した輝度信号１３１に含まれる水平方向の空間周波数成分の中から、比較的高い空間周波数成分である所定の高域周波数成分を抽出して、抽出成分を示す信号１３２を出力する。
垂直ＬＰＦ６１ｃは、輝度信号１００に含まれる垂直方向の空間周波数成分の内、比較的低い空間周波数成分を通過させ、比較的高い空間周波数成分を持つ不要な空間周波数成分を低減させる。垂直ＨＰＦ６１ｄは、垂直ＬＰＦ６１ｃを通過した輝度信号１３３に含まれる垂直方向の空間周波数成分の中から、比較的高い空間周波数成分である所定の高域周波数成分を抽出して、抽出成分を示す信号１３４を出力する。

ＬＰＦ６１ａ及び６１ｃは、輝度信号１００中のノイズ（折り返し歪みを含みうる）を低減する機能を有する。ＨＰＦ６１ｂ及び６１ｄは、輝度信号１００中のエッジを抽出（換言すれば強調）する機能を有する。画素位置ごとに信号１３２及び１３４の値を得ることができる。第２フィルタ処理の結果信号であるフィルタ処理部６１の出力信号１３０は、信号１３２及び１３４によって形成される。或る画素位置（ｉ，ｊ）における信号１３２及び１３４は、その画素位置（ｉ，ｊ）における、ノイズの低減及びエッジの強調が成された輝度信号を形成するため、フィルタ処理部６１の出力信号１３０を輝度信号１３０とも呼ぶ（信号１３２及び１３４は輝度信号１３０の水平及び垂直エッジ成分を示していると言える）。尚、信号１３２に関するエッジは、水平方向に沿って輝度信号を走査したときの輝度信号の急激な勾配を指し、信号１３４に関するエッジは、垂直方向に沿って輝度信号を走査したときの輝度信号の急激な勾配を指す。ＨＰＦ６１ｂ及び６１ｄにおけるフィルタ処理は、エッジを強調して後段の動き検出の感度向上に寄与する。

図４の動き検出処理部６２は、フィルタ処理部６１の出力信号（第２フィルタ処理の結果信号）１３０に対して動き検出に必要な所定の動き検出用演算処理（第２演算処理）を実行し、動き検出用演算処理の結果を示す信号１４０を出力する。

動き検出用演算処理は、撮影画像上の物体又は特徴点のフレーム間の動きを輝度信号１３０に基づいて検出する任意の演算処理であって良い。例えば、当該演算処理に代表点マッチング法を適用することができる。

つまり例えば、動き検出処理部６２は、動き評価ブロックＥＲ［１］〜ＥＲ［９］の夫々に複数の小ブロックを設定して第１フレームにおける各小ブロックに代表点を設定し、動き評価ブロックごとに且つ小ブロックごとに、第１フレームにおける輝度信号１３０及び第２フレームにおける輝度信号１３０に基づき、第１フレーム内の代表点の対応点を第２フレーム内から探索する。ここで、第２フレームは第１フレームよりも時間的に後のフレームである（また、ここにおける第１及び第２フレームは後述のＥＩＳ用フレームであるとする）。動き検出処理部６２は、動き評価ブロックごとに且つ小ブロックごとに、第１フレーム内の代表点の位置から第２フレーム内の対応点の位置に向かう変位ベクトルを求め、動き評価ブロックごとに、当該動き評価ブロックに属する各小ブロックについての変位ベクトルの平均ベクトルをブロック動きベクトルとして求める。このブロック動きベクトルを求めるとき、変位ベクトルを示す差分値（第１フレーム内の代表点の位置と第２フレーム内の対応点の位置との差を示す値）を複数個足し合わせる積算処理が実行される（従って、動き検出用演算処理は当該積算処理を含む）。動き検出処理部６２は、動き評価ブロックＥＲ［１］〜ＥＲ［９］ごとに求められた計９つのブロック動きベクトルに基づき、第１及び第２フレーム間の全体動きベクトルＶＥＣを求める。例えば、全体動きベクトルＶＥＣは、９つのブロック動きベクトルの平均ベクトルであって良い。全体動きベクトルＶＥＣを求める際にも、複数のブロック動きベクトルの値を足し合わせる積算処理が実行されうる（従って、この積算処理も動き検出用演算処理に含まれる）。上記の変位ベクトル、ブロック動きベクトル及び全体動きベクトルＶＥＣの夫々は、撮影画像の動き情報の一種である。

動き検出処理部６２の出力信号１４０は全体動きベクトルＶＥＣを含む。手振れ補正部６３は、動き検出処理部６２の出力信号１４０に基づき上記ＥＩＳ処理を行う。全体動きベクトルＶＥＣは、第１及び第２フレーム間に撮像装置１に作用した手振れの向き及び大きさの検出結果を表す。従って、ＥＩＳ処理において、手振れ補正部６３は、全体動きベクトルＶＥＣに基づき、第１及び第２フレーム間の手振れに由来する撮影画像のぶれが低減されるように第１及び第２フレーム間の位置合わせを行う。

以下では、ＬＰＦ５１ａ、５１ｃ、６１ａ、６１ｃ、ＨＰＦ５１ｂ、５１ｄ、６１ｂ、６１ｄを、夫々、フィルタ５１ａ、５１ｃ、６１ａ、６１ｃ、５１ｂ、５１ｄ、６１ｂ、６１ｄとも呼ぶ。

図９は、双二次フィルタとして形成されたデジタルフィルタ２００の内部構成図である。図７及び図８のフィルタ５１ａ〜５１ｄ及び６１ａ〜６１ｄの夫々を、デジタルフィルタ２００を用いて形成することができる。デジタルフィルタ２００は、入力信号Ｘ_INから中間信号Ｘ_MIDを生成する前段ブロック２１０と、中間信号Ｘ_MIDから出力信号Ｘ_OUTを生成する後段ブロック２２０とから成る。ＬＰＦ５１ａ、５１ｃ、６１ａ及び６１ｃにとっての入力信号Ｘ_INは信号１００であり、ＬＰＦ５１ａ、５１ｃ、６１ａ及び６１ｃにとっての出力信号Ｘ_OUTは、夫々、信号１１１、１１３、１３１、１３３である。ＨＰＦ５１ｂ、５１ｄ、６１ｂ、６１ｄにとっての入力信号Ｘ_INは、夫々、信号１１１、１１３、１３１、１３３である。ＨＰＦ５１ｂ、５１ｄ、６１ｂ、６１ｄにとっての出力信号Ｘ_OUTは、夫々、信号１１２、１１４、１３２、１３４である。

ブロック２１０及び２２０の夫々は、４つの遅延器と５つの乗算器と１つの加算器から成り、下記式（１）及び（２）に従って中間信号Ｘ_MID及び出力信号Ｘ_OUTを生成する。
Ｘ_MID［０］＝
ａ００・Ｘ_IN［０］＋ａ０１・Ｘ_IN［−１］＋ａ０２・Ｘ_IN［−２］
−ｂ０１・Ｘ_MID［−１］−ｂ０２・Ｘ_MID［−２］ …（１）
Ｘ_OUT［０］＝
ａ１０・Ｘ_MID［０］＋ａ１１・Ｘ_MID［−１］＋ａ１２・Ｘ_MID［−２］
−ｂ１１・Ｘ_OUT［−１］−ｂ１２・Ｘ_OUT［−２］ …（２）

ここで、Ｘ_IN［０］、Ｘ_MID［０］及びＸ_OUT［０］は、夫々、注目タイミングにおける入力信号Ｘ_IN、中間信号Ｘ_MID及び出力信号Ｘ_OUTを表し、Ｘ_IN［−１］、Ｘ_MID［−１］及びＸ_OUT［−１］は、夫々、注目タイミングより１単位時間前の入力信号Ｘ_IN、中間信号Ｘ_MID及び出力信号Ｘ_OUTを表し、Ｘ_IN［−２］、Ｘ_MID［−２］及びＸ_OUT［−２］は、夫々、注目タイミングより２単位時間前の入力信号Ｘ_IN、中間信号Ｘ_MID及び出力信号Ｘ_OUTを表す。

上述したように、フィルタ処理部５１及び６１に対して輝度信号がラスタスキャン順に入力されるため、デジタルフィルタ２００が水平ＬＰＦ（５１ａ、６１ａ）又は水平ＨＰＦ（５１ｂ、６１ｂ）である場合、１単位時間はラスタスキャンの１クロック分の時間に相当し、デジタルフィルタ２００が垂直ＬＰＦ（５１ｃ、６１ｃ）又は垂直ＨＰＦ（５１ｄ、６１ｄ）である場合、１単位時間はラスタスキャンの１水平ライン分の時間（即ちＭクロック分の時間）に相当する。従って、デジタルフィルタ２００が水平ＬＰＦ（５１ａ、６１ａ）又は水平ＨＰＦ（５１ｂ、６１ｂ）である場合、デジタルフィルタ２００の各遅延器は、入力輝度信号を１クロックだけ遅延させて出力するＤ型フリップフロップにて形成され、注目画素位置（ｉ，ｊ）を含む水平方向に並ぶ複数の画素位置の輝度信号（入力信号Ｘ_IN）に基づき注目画素位置（ｉ，ｊ）における出力信号Ｘ_OUTが得られる。デジタルフィルタ２００が垂直ＬＰＦ（５１ｃ、６１ｃ）又は垂直ＨＰＦ（５１ｄ、６１ｄ）である場合、デジタルフィルタ２００の各遅延器は、１水平ライン分の輝度信号を保持するラインメモリにて形成され、注目画素位置（ｉ，ｊ）を含む垂直方向に並ぶ複数の画素位置の輝度信号（入力信号Ｘ_IN）に基づき注目画素位置（ｉ，ｊ）における出力信号Ｘ_OUTが得られる。

フィルタ係数ａ００、ａ０１、ａ０２、ｂ０１、ｂ０２、ａ１０、ａ１１、ａ１２、ｂ１１及びｂ１２を総称して実使用フィルタ係数群と呼ぶ。各フィルタ係数の値を適切な値に設定又は変更することで、デジタルフィルタ２００のフィルタ特性を所望のものにすることができる。

ここまでは、各機能の内容を個別に説明するべく、フィルタ処理部５１及び６１を別個の部位として示して各処理内容を説明したが、フィルタ処理部５１及び６１を形成するフィルタ回路はフィルタ処理部５１及び６１間で共用されている。即ち、フィルタ処理部５１及び６１は共通のフィルタ回路を用いて形成されている。

図１０に、実際に撮像装置１に設けられているフィルタ回路３００及びそれに関与する部位のブロック図を示す。フィルタ回路３００はフィルタ部３０１〜３０４から成る。即ち、図７及び図８に示す計８つのフィルタではなく、実際には、その８つのフィルタを実現する４つのフィルタ部３０１〜３０４が撮像装置１に設けられている。フィルタ部３０１〜３０４は、夫々、水平ＬＰＦ５１ａ及び６１ａにおけるフィルタ処理を時分割で実現する選択回路付水平ＬＰＦ、水平ＨＰＦ５１ｂ及び６１ｂにおけるフィルタ処理を時分割で実現する選択回路付水平ＨＰＦ、垂直ＬＰＦ５１ｃ及び６１ｃにおけるフィルタ処理を時分割で実現する選択回路付垂直ＬＰＦ、垂直ＨＰＦ５１ｄ及び６１ｄにおけるフィルタ処理を時分割で実現する選択回路付垂直ＨＰＦである。

図１１に、フィルタ部３０１〜３０４の何れか１つである、選択回路付フィルタ３２０の構成図を示す。選択回路付フィルタ３２０は、図９に示すデジタルフィルタ２００と同じ構成を有するデジタルフィルタ（双二次フィルタ）３２１と、フィルタ係数ＡＦ＿ａ００、ＡＦ＿ａ０１、ＡＦ＿ａ０２、ＡＦ＿ｂ０１、ＡＦ＿ｂ０２、ＡＦ＿ａ１０、ＡＦ＿ａ１１、ＡＦ＿ａ１２、ＡＦ＿ｂ１１及びＡＦ＿ｂ１２から成る第１フィルタ係数群、又は、フィルタ係数ＥＩＳ＿ａ００、ＥＩＳ＿ａ０１、ＥＩＳ＿ａ０２、ＥＩＳ＿ｂ０１、ＥＩＳ＿ｂ０２、ＥＩＳ＿ａ１０、ＥＩＳ＿ａ１１、ＥＩＳ＿ａ１２、ＥＩＳ＿ｂ１１及びＥＩＳ＿ｂ１２から成る第２フィルタ係数群を、実使用フィルタ係数群として選択的にデジタルフィルタ３２１に供給する選択回路ブロック３２２と、を備える。フィルタ部３０１〜３０４は互いに同じ回路構成を有しており、図１２に示す如く、フィルタ部３０１〜３０４の夫々にデジタルフィルタ３２１及び選択回路ブロック３２２が設けられる。

図１０の切り替え制御部３３０は、選択回路ブロック３２０における選択動作を制御するための信号として、選択信号ＳＥＬ＿ＡＦ又はＳＥＬ＿ＥＩＳを出力する。切り替え制御部３３０は、時系列に並ぶ複数のフレームをＡＦ用フレームとＥＩＳ用フレームに分類し、ＡＦ用フレームの輝度信号が輝度信号１００としてフィルタ部３０１及び３０３に入力される期間（以下、ＡＦ用フレーム期間という）においては選択信号ＳＥＬ＿ＡＦを出力する一方、ＥＩＳ用フレームの輝度信号が輝度信号１００としてフィルタ部３０１及び３０３に入力される期間（以下、ＥＩＳ用フレーム期間という）においては選択信号ＳＥＬ＿ＥＩＳを出力する。選択信号ＳＥＬ＿ＡＦの出力時には第１フィルタ係数群が実使用フィルタ係数群としてデジタルフィルタ３２１に供給され、選択信号ＳＥＬ＿ＥＩＳの出力時には第２フィルタ係数群が実使用フィルタ係数群としてデジタルフィルタ３２１に供給される。デジタルフィルタ３２１は、供給された実使用フィルタ係数群に応じたフィルタ特性を有するフィルタ処理を入力信号Ｘ_INに実行することで出力信号Ｘ_OUTを生成する。

フィルタ部３０１、３０２、３０３、３０４の入力信号は、夫々、信号１００、３１１、１００、３１３であり、フィルタ部３０１、３０２、３０３、３０４の出力信号は、夫々、信号３１１、３１２、３１３、３１４である。フィルタ部３０１、３０２、３０３、３０４の入力信号及び出力信号は、夫々、フィルタ部３０１、３０２、３０３、３０４内のデジタルフィルタ３２１の入力信号Ｘ_IN及び出力信号Ｘ_OUTを指す。

フィルタ部３０１用の第１及び第２フィルタ係数群は互いに異なり、フィルタ部３０２用の第１及び第２フィルタ係数群は互いに異なり、フィルタ部３０３用の第１及び第２フィルタ係数群は互いに異なり、フィルタ部３０４用の第１及び第２フィルタ係数群は互いに異なる。フィルタ部３０１〜３０４用の第１及び第２フィルタ係数群を保持するメモリ（不図示）が撮像装置１に設けられている。フィルタ部３０１用の第１、第２フィルタ係数群は、夫々、フィルタ５１ａ、６１ａのフィルタ処理を実現するためのフィルタ係数群である（図１０、図７、図８参照）。フィルタ部３０２〜３０４についても同様である。

従って、ＡＦ用フレーム期間においては、フィルタ部３０１〜３０４内のデジタルフィルタ３２１に夫々フィルタ部３０１〜３０４用の第１フィルタ係数群が供給されてフィルタ部３０１〜３０４にて夫々フィルタ５１ａ〜５１ｄのフィルタ処理が実現され、フィルタ部３０１〜３０４の出力信号は夫々フィルタ５１ａ〜５１ｄの出力信号として機能する。故に、ＡＦ用フレーム期間においては、フィルタ部３０１〜３０４から成るフィルタ回路３００が、図４の第１フィルタ処理部５１として機能して上記第１フィルタ処理を実現し、第１フィルタ処理の結果信号１１０（図４参照）がフィルタ回路３００から得られる。ＡＦ用フレーム期間では、フィルタ回路３００からの結果信号１１０に基づき上述のＡＦ用演算処理が実行され、ＡＦ用演算処理の結果を示す信号１２０に基づき上述のＡＦ処理が実行される。

同様に、ＥＩＳ用フレーム期間においては、フィルタ部３０１〜３０４内のデジタルフィルタ３２１に夫々フィルタ部３０１〜３０４用の第２フィルタ係数群が供給されてフィルタ部３０１〜３０４にて夫々フィルタ６１ａ〜６１ｄのフィルタ処理が実現され、フィルタ部３０１〜３０４の出力信号は夫々フィルタ６１ａ〜６１ｄの出力信号として機能する。故に、ＥＩＳ用フレーム期間においては、フィルタ部３０１〜３０４から成るフィルタ回路３００が、図４の第２フィルタ処理部６１として機能して上記第２フィルタ処理を実現し、第２フィルタ処理の結果信号１３０（図４参照）がフィルタ回路３００から得られる。ＥＩＳ用フレーム期間では、フィルタ回路３００からの結果信号１３０に基づき上述の動き検出用演算処理が実行され、動き検出用演算処理の結果を示す信号１４０に基づき上述のＥＩＳ処理が実行される。

上述の如く、撮像装置１では、第１及び第２フィルタ処理に用いるフィルタ回路を共用する。換言すれば、図１３に示す如く、フィルタ処理部５１及び６１がフィルタ回路３００を共有する。そして、撮像装置１は、フレーム単位でフィルタ回路３００を時分割で用いて第１及び第２フィルタ処理を実現する。これにより、このような共用を行わない方式と比べて、フィルタ回路の回路規模を略半減することができる。回路規模の低減が、実装必要面積、消費電力、コスト及び開発工数の低減に寄与することは言うまでもない。

［フィルタ回路の後段における演算器の共用］
また、上述したように、ＡＦ用演算部５２におけるＡＦ用演算処理は積算処理を含み、動き検出処理部６２における動き検出用演算処理も積算処理を含む（図４参照）。これらの積算処理は、複数の加算演算を行う複数の加算器を必要とする。そこで、図１４に示す如く、複数の加算器から成る演算ブロック３５０を撮像装置１に設け、演算ブロック３５０をＡＦ用演算部５２及び動き検出処理部６２で共有するようにも良い。

ＡＦ用演算処理の積算処理において必要な加算器の個数と、動き検出用演算処理の積算処理において必要な加算器の個数の内、多い方の個数分の加算器を演算ブロック３５０に設けておく。そして、演算ブロック３５０の前段に選択回路（不図示）を設けておいて、演算ブロック３５０に対する入力信号を切り替えれば良い。つまり、切り替え制御部３３０は、ＡＦ用フレーム期間においては、フィルタ回路３００から出力される第１フィルタ処理の結果信号１１０に基づく信号が演算ブロック３５０に供給されて演算ブロック３５０にてＡＦ用演算処理（第１演算処理）の積算処理が実行されるように、且つ、ＥＩＳ用フレーム期間においては、フィルタ回路３００から出力される第２フィルタ処理の結果信号１３０に基づく信号が演算ブロック３５０に供給されて演算ブロック３５０にて動き検出用演算処理（第２演算処理）の積算処理が実行されるように、上記選択回路の動作を制御すれば良い。

このように、撮像装置１において、ＡＦ用演算処理（第１演算処理）及び動き検出用演算処理（第２演算処理）に用いる演算ブロック（演算器）３５０を共用し、フィルタ回路３００を用いて第１フィルタ処理を実現するフレームでは（即ちＡＦ用フレーム期間では）演算ブロック３５０を用いてＡＦ用演算処理を実現し、フィルタ回路３００を用いて第２フィルタ処理を実現するフレームでは（即ちＥＩＳ用フレーム期間では）演算ブロック３５０を用いて動き検出用演算処理を実現すると良い。これにより、このような共用を行わない方式と比べて、演算器の回路規模を低減できる。尚、ＡＦ用演算処理及び動き検出用演算処理間で共用される演算器は、加算器以外の演算器を含んでいても良い。

［撮影条件に応じたＡＦ用フレーム及びＥＩＳ用フレームの割り当て］
切り替え制御部３３０は、ＡＦ用フレームとＥＩＳ用フレームが交互に現れるように、時系列に並ぶ複数のフレームをＡＦ用フレームとＥＩＳ用フレームに分類しても良い。この場合、２フレームに１回ＡＦ評価値が得られ、２フレームに１回全体動きベクトルＶＥＣが得られる。また、この場合、時系列に並ぶ複数のフレームにおけるＡＦ用フレームとＥＩＳ用フレームの枚数の比ｋ_AF：ｋ_EISは１：１である。ｋ_AF／（ｋ_AF＋ｋ_EIS）は、複数のフレーム中に占めるＡＦ用フレームの割合（フィルタ回路３００が第１フィルタ処理及びＡＦ処理に割り当てられる割合）を示し、ｋ_EIS／（ｋ_AF＋ｋ_EIS）は、複数のフレーム中に占めるＥＩＳ用フレームの割合（フィルタ回路３００が第２フィルタ処理、動き検出処理及びＥＩＳ処理に割り当てられる割合）を示す。前者の割合が増えるほど、ＡＦ精度（焦点合わせの精度）が向上し、後者の割合が増えるほど、電子式手振れ補正における補正効果が向上する。ＡＦ用フレーム期間においてＡＦ処理用の第１フィルタ処理が実行され、ＥＩＳ用フレーム期間においてＥＩＳ処理用の第２フィルタ処理が実行されるのであるから、比ｋ_AF：ｋ_EISは、フィルタ回路３００を用いて第１フィルタ処理を実現するフレームとフィルタ回路３００を用いて第２フィルタ処理を実現するフレームとの枚数比を表している。

切り替え制御部３３０は、比ｋ_AF：ｋ_EISを、１：１など、予め定めた比に固定しておくことができるが、撮影条件（換言すれば撮影環境）に応じて動的に比ｋ_AF：ｋ_EISを設定又は変更するようにしても良い。撮影条件に応じて動的に比ｋ_AF：ｋ_EISを設定又は変更する設定部（又は変更部）３３５が切り替え制御部３３０に内在していると考えることができる（図１５参照）。今、図１６に示す如く、評価期間Ｐ１と評価期間Ｐ１よりも後の設定対象期間Ｐ２を想定する。そうすると、設定部３３５は、評価期間Ｐ１中の撮影条件に基づき設定対象期間Ｐ２中の比ｋ_AF：ｋ_EISを設定することができる。期間Ｐ１及びＰ２の夫々は所定の時間長さを有していて良い。

例えば、被写体の前後の動きが少ない場合には、フォーカスレンズ３１の位置を固定していても被写体に合焦又は略合焦している状態が維持されるため、ＡＦ処理の実行頻度が低くても問題は少ない。逆に、被写体の前後の動きが多い場合には、ＡＦ処理の実行頻度を高め、被写体の動きに追従してフォーカスレンズ３１の位置を頻繁に調整すべきである。従って、比ｋ_AF：ｋ_EISの動的設定に用いる撮影条件は、被写体ＳＵＢの前後の動きを含んでいると良い（換言すれば、被写体ＳＵＢの前後の動きに依存していると良い）。被写体ＳＵＢは、ＡＦ評価領域内に現れる被写体であるとする。

被写体ＳＵＢの前後の動きは、被写体ＳＵＢが撮像装置１から離れる又は撮像装置に近づく方向における、被写体ＳＵＢの実空間上の動きであり、設定部３３５は、被写体ＳＵＢの前後の動きに応じて、比ｋ_AF：ｋ_EISを設定又は変更すると良い。

具体的には、設定部３３５は、評価期間Ｐ１中における被写体ＳＵＢの前後の動きに応じた前後動き評価値を求め、前後動き評価値が大きいほど設定対象期間Ｐ２における“ｋ_AF／（ｋ_AF＋ｋ_EIS）”を大きくし、前後動き評価値が小さいほど設定対象期間Ｐ２における“ｋ_AF／（ｋ_AF＋ｋ_EIS）”を小さくすると良い。

この際例えば、設定部３３５は、評価期間Ｐ１中における被写体距離を逐次検出し、評価期間Ｐ１中における被写体距離の変化の振幅が大きいほど前後動き評価値を大きくすることができる。ここで、被写体距離とは、実空間上における被写体ＳＵＢ及び撮像装置１間の距離を指す。被写体距離の検出方法として、公知の方法を含む任意の方法を利用可能である。例えば、ステレオカメラ又は測距センサを用いて被写体距離を検出しても良いし、撮影画像のエッジ情報を利用した推定処理によって被写体距離を求めてもよい。

或いは例えば、設定部３３５は、フォーカスレンズ３１の位置検出を介して評価期間Ｐ１中におけるフォーカスレンズ３１及び撮像素子３３間の距離ｄ_Lを監視し、評価期間Ｐ１中における該距離ｄ_Lの変化の振幅が大きいほど、評価期間Ｐ１中における被写体ＳＵＢの前後の動きが大きいと推定して、前後動き評価値を大きくすることができる。評価期間Ｐ１中における被写体ＳＵＢの前後の動きが大きいと、評価期間Ｐ１中のＡＦ処理によって上記距離ｄ_Lの変化が大きくなるからである。ＡＦ処理にてフォーカスレンズ３１の位置が調整される場合、フォーカスレンズ３１の位置変化によって距離ｄ_Lの変化がもたらされる。

他方、手振れが少ない場合には、ＥＩＳ処理の実行頻度が少なくても問題は少なく、逆に、手振れが多い場合には、ＥＩＳ処理を高頻度で行った方が望ましい。従って、比ｋ_AF：ｋ_EISの動的設定に用いる撮影条件は、撮像装置１に作用する手振れの大きさに応じた量である手振れ量を含んでいると良い（換言すれば、撮影条件は手振れ量に依存していると良い）。設定部３３５は、手振れ量に応じて、比ｋ_AF：ｋ_EISを設定又は変更することができる。

具体的には、設定部３３５は、評価期間Ｐ１中に求められた全体動きベクトルＶＥＣの大きさの統計値（例えば、平均値、最頻値又は最大値）を評価期間Ｐ１中の手ぶれ量として求め、評価期間Ｐ１中の手ぶれ量が大きいほど設定対象期間Ｐ２における“ｋ_EIS／（ｋ_AF＋ｋ_EIS）”を大きくし、評価期間Ｐ１中の手ぶれ量が小さいほど設定対象期間Ｐ２における“ｋ_EIS／（ｋ_AF＋ｋ_EIS）”を小さくすると良い。

フィルタ回路等の共用は回路規模の低減等の効果を生むが、該共用によってＡＦ処理及びＥＩＳ処理の実行頻度は低下する。しかしながら、撮影条件に応じて比ｋ_AF：ｋ_EISを動的に設定又は変更することにより、撮影条件に適した頻度でＡＦ処理及びＥＩＳ処理が実行されるようになり、ＡＦ処理及びＥＩＳ処理の実行頻度低下に伴う実質的なデメリットを軽減することが可能である。

＜＜変形等＞＞
本発明の実施形態は、特許請求の範囲に示された技術的思想の範囲内において、適宜、種々の変更が可能である。以上の実施形態は、あくまでも、本発明の実施形態の例であって、本発明ないし各構成要件の用語の意義は、以上の実施形態に記載されたものに制限されるものではない。上述の説明文中に示した具体的な数値は、単なる例示であって、当然の如く、それらを様々な数値に変更することができる。上述の実施形態に適用可能な注釈事項として、以下に、注釈１及び注釈２を記す。各注釈に記載した内容は、矛盾なき限り、任意に組み合わせることが可能である。

［注釈１］
撮像装置１では、第１フィルタ処理の結果信号を用いて所定の第１機能処理が行われ、第２フィルタ処理の結果信号を用いて所定の第２機能処理が行われる。上述の実施形態では、第１機能処理としてＡＦ処理を例示し、第２機能処理として動き検出処理又はＥＩＳ処理を例示したが、フィルタ回路３００を共用する第１及び第２機能処理は、それら以外の処理であっても良い。フィルタ回路３００を共用する機能処理は３つ以上あっても良い。また、上述の実施形態では、動き検出処理部２による動き検出の結果をＥＩＳ処理に用いているが、動き検出の結果を様々な他の処理（例えば、パン／チルト判定処理、被写体の追尾処理、三脚有無検出）に用いても良い。

［注釈２］
撮像装置１を、ハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって構成することができる。撮像装置１にて実現される機能の全部又は一部である任意の特定の機能をプログラムとして記述して、該プログラムを撮像装置１に搭載可能なフラッシュメモリに保存しておき、該プログラムをプログラム実行装置（例えば、撮像装置１に搭載可能なマイクロコンピュータ）上で実行することによって、その特定の機能を実現するようにしてもよい。上記プログラムは任意の記録媒体（不図示）に記憶及び固定されうる。上記プログラムを記憶及び固定する記録媒体（不図示）は撮像装置１と異なる機器（サーバ機器等）に搭載又は接続されても良い。

１ 撮像装置
１１ 撮像部
３１ フォーカスレンズ
３３ 撮像素子
５１ 第１フィルタ処理部
５２ ＡＦ用演算部
５３ ＡＦ処理部
６１ 第２フィルタ処理部
６２ 動き検出処理部
６３ 手振れ補正部
３００ フィルタ回路
３０１〜３０４ フィルタ部（選択回路付水平ＬＰＦ、水平ＨＰＦ、垂直ＬＰＦ、垂直ＨＰＦ）
３３０ 切り替え制御部
３３５ 設定部
３５０ 演算ブロック

Claims (7)

1. 被写体の画像信号を出力する撮像素子と、
   前記撮像素子の出力信号に対する第１フィルタ処理の結果信号を用いて、被写体像を前記撮像素子に結像させるためのフォーカス処理を行うフォーカス処理部と、
   前記撮像素子の出力信号に対する第２フィルタ処理の結果信号を用いて、前記撮像素子の出力信号に基づく画像の動き情報を生成する動き検出処理部と、を備えた撮像装置において、
   前記第１及び第２フィルタ処理に用いるフィルタ回路を共用し、フレーム単位で前記フィルタ回路を時分割で用いて前記第１及び第２フィルタ処理を実現する
   ことを特徴とする撮像装置。
2. 前記フィルタ回路を用いて前記第１フィルタ処理を実現するフレームと前記フィルタ回路を用いて前記第２フィルタ処理を実現するフレームとの枚数比を、撮影条件に応じて設定する設定部を更に備えた
   ことを特徴とする請求項１に記載の撮像装置。
3. 前記撮影条件は、前記被写体の前後の動きを含み、
   前記被写体の前後の動きは、前記被写体が当該撮像装置から離れる又は当該撮像装置に近づく方向における、前記被写体の実空間上の動きであり、
   前記設定部は、前記被写体の前後の動きに応じて、前記枚数比を設定する
   ことを特徴とする請求項２に記載の撮像装置。
4. 前記動き情報を用いて、前記撮像素子の出力信号に基づく画像に対する電子式手振れ補正を行う手振れ補正部を更に備え、
   前記撮像条件は、前記動き情報に基づく手振れ量を含み、
   前記設定部は、前記手振れ量に応じて、前記枚数比を設定する
   ことを特徴とする請求項２に記載の撮像装置。
5. 前記フォーカス処理部は、前記第１フィルタ処理の結果信号に対し所定の第１演算処理を行うことで得られる演算結果を用いて前記フォーカス処理を行い、
   前記動き検出処理部は、前記第２フィルタ処理の結果信号に対し所定の第２演算処理を行うことで前記動き情報を生成し、
   当該撮像装置は、前記第１及び第２演算処理に用いる演算器を共用し、前記フィルタ回路を用いて前記第１フィルタ処理を実現するフレームでは前記演算器を用いて前記第１演算処理を実現し、前記フィルタ回路を用いて前記第２フィルタ処理を実現するフレームでは前記演算器を用いて前記第２演算処理を実現する
   ことを特徴とする請求項１〜請求項４の何れかに記載の撮像装置。
6. 前記第１フィルタ処理用のフィルタ係数である第１フィルタ係数又は前記第２フィルタ処理用のフィルタ係数である第２フィルタ係数を選択的に前記フィルタ回路に供給する選択回路と、
   前記選択回路の選択動作を制御する切り替え制御部と、を更に備え、
   前記フィルタ回路は、前記第１フィルタ係数が供給されたときに前記第１フィルタ処理を実現する一方、前記第２フィルタ係数が供給されたときに前記第２フィルタ処理を実現する
   ことを特徴とする請求項１〜請求項５の何れかに記載の撮像装置。
7. 被写体の画像信号を出力する撮像素子と、
   前記撮像素子の出力信号に対する第１フィルタ処理の結果信号を用いて所定の第１機能処理を行う第１機能処理部と、
   前記撮像素子の出力信号に対する第２フィルタ処理の結果信号を用いて所定の第２機能処理を行う第２機能処理部と、を備えた撮像装置において、
   前記第１及び第２フィルタ処理に用いるフィルタ回路を共用し、フレーム単位で前記フィルタ回路を時分割で用いて前記第１及び第２フィルタ処理を実現し、
   前記フィルタ回路を用いて前記第１フィルタ処理を実現するフレームと前記フィルタ回路を用いて前記第２フィルタ処理を実現するフレームとの枚数比を、撮影条件に応じて設定する設定部を更に備えた
   ことを特徴とする撮像装置。

Images