JP3852743B2

JP3852743B2 - 適応型物体移動方向検出装置および方法

Info

Publication number: JP3852743B2
Application number: JP2000396550A
Authority: JP
Inventors: 真信宮下
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2000-12-27
Filing date: 2000-12-27
Publication date: 2006-12-06
Anticipated expiration: 2020-12-27
Also published as: US20020118863A1; US20060078166A1; JP2002197464A; US7039217B2

Description

【０００１】
【発明の属する技術分野】
この発明は、物体の移動方向を検出する適応型物体移動方向検出装置および方法に関するものである。
【０００２】
【従来の技術】
従来の物体の移動方向を検出する方法は、４つのプロセスに分解して移動方向を判定する。以下に、（１）〜（４）の項目に分けて移動方向の判定を順次経時的に行う場合について説明する。
（１）．撮像カメラなどから、時刻tに入力された画像を、小区画に細分し、フレームメモリなどに記憶する。
（２）．時刻t+Δtに入力された画像を同様に、フレームメモリに記憶する。
（３）．時刻tと時刻t+Δtにおける画像を、対応する小区画領域ごとに差分をとる。
（４）．得られた画像の差分データから、異なる時刻における画像の対応を推測し、物体の運動方向を判定する。
【０００３】
このような対象物体運動方向を検出することを目的とした方法は、たとえば、（１）．特開平０６−９６２１０号公報、（２）．特開平０８−４４８５２号公報などがある。
このような画像の差分によって移動方向を求める方法において、移動方向を検出する対象の物体は一般に、平均的明るさよりも明るい部分と暗い部分が混在するため、各小領域ごとにおける、時刻tとt+Δtにおける対象画像の対応をとることが問題となる。
【０００４】
このため、従来の方法では、画像の明暗によらず正確に対応点を求めるために、各領域における画像の最大明度で規格化した画像と、最小明度で規格化した画像を計算し、時刻tにおける画像内の明度を最大または最小とする点を中心とした座標系に変換し、それぞれ独立に移動方向を検出することによって、画像の明暗によらない対象物体の運動方向を検出している。
また、局所空間ごとの画像を、ある大きさの明度以上を「１」とし、それ以下を「０」とした、明暗のバイナリをとることによって、対応点を正確にとる方法が開示されている。
【０００５】
物体の移動方向を直接求めるための方法あるいは装置ではないが、画像の局所部分ごとにおいて、時刻tからt+(Δt)xNまでの連続したＮ個の画像について、時空間的な畳み込み積分を行うことによって、オプティカル・フローを求め、対象物体の速度を検出する方法が提案されている（特開平０５−３３１４７７号公報）。
【０００６】
【発明が解決しようとする課題】
しかし、従来の画像の差分をとることによって対象物体の移動方向を求める装置では、画像の明暗パタンについて独立に移動方向を判定し、両者の結果を比較することによって、移動方向を求める必要があるため、効率が悪いという課題がある。
また、従来の物体のオプティカル・フローを求めることによって、対象物体の移動方向の判定を行う方法は、時間的および空間的な畳み込み積分を求めることから、実現する場合はあらゆる方向の判別手段を有する必要があり、判別するための資源に限りがある場合は、その実現が困難であるという課題がある。
このことは、画像の統計的性質として、たとえば、水平方向の移動を多く含む場合であっても、すべての方向を含む時間的および空間的畳み込み積分を行う必要があることを意味し、移動方向を検出するための手段の資源効率を低下させることとなる。
【０００７】
この発明は、上記従来の課題を解決するためになされたもので、移動方向を判別すべき物体の画像が、画像の平均明度よりも明るい部分と、暗い部分が混在している場合であっても、明るい部分と暗い部分とに分割して判定する必要を無くして、効率良く移動方向を判定することができる適応型物体移動方向検出方法を提供することを目的とする。
【０００８】
また、この発明は、移動方向を判別すべき物体の画像が平均明度よりも明るい場合、暗い場合のどちらであっても正しく移動方向を検出する物体の方向を検出することができ、稼動方向を検出するための手段の資源を節約することができる適応型物体移動方向検出装置を提供することを目的とする。
【０００９】
【課題を解決するための手段】
上記目的を達成するために、この発明の適応型物体移動方向検出装置は、物体の画像を撮像することで生成される前記画像の明暗に対応する複数の画素データの集合から構成される画素情報によって形成される２次元の画素空間を、互いの一部が重畳するように設定された複数の小区画からなる局所領域に分割し、前記各局所領域のそれぞれに含まれる前記各画素データを入力して該画素データに応じた応答を前記各局所領域のそれぞれに対応して出力し、前記画素データの入力から前記応答の出力までに要する時間である応答時間が異なるよう設けられた複数種類の応答素子の集合で構成される応答出力手段と、前記各応答素子から応答が出力される毎、前記出力された応答に基づいて前記各応答間における時間的空間的相関の度合いを示す相関関数の値を求める相関関数手段と、前記相関関数手段で求められた前記時間的空間的相関の度合いが高い前記応答を前記応答出力手段から選択する応答選択手段と、前記応答選択手段で選択された前記応答に基づいて前記物体の前記画素空間における移動方向を検出する複数個の検出素子の集合で構成される移動方向検出手段とを備えることを特徴とする適応型物体移動検出装置において、前記応答出力手段における前記応答時間が異なる複数種類の応答素子は応答時間の位相が９０度ずつ異なる第１乃至第４応答素子から構成され、前記相関関数手段による前記時間的空間的相関の度合いを示す相関関数の値を求める動作は前記第１乃至第４応答素子から出力される応答に基づいて行なわれることを特徴とする。
そのため、前記応答出力手段の前記各応答素子から応答が出力される毎、前記相関関数手段によって前記出力された応答に基づいて前記各応答間における時間的空間的相関の度合いを示す相関関数の値が求められる。前記応答選択手段によって、前記相関関数手段で求められた前記時間的空間的相関の度合いが高い前記応答が前記応答出力手段から選択される。前記移動方向検出手段によって、前記応答選択手段で選択された応答に基づいた移動方向の検出が行なわれる。このため、前記画像入力手段で撮像された前記物体の移動方向が同じ方向に移動する傾向が高ければ、前記応答選択手段が前記応答出力手段から選択する応答は、前記移動方向に対応するものが多くなるとともに、前記移動方向に対応しない方向に対応するものは少なくなることになる。すなわち、前記物体の移動方向が学習されることになるため、前記物体が移動する方向については確実に検知することができるとともに、前記物体が移動しない方向については無駄な資源が使用されない。
【００１０】
また、本発明の適応型物体移動検出方法は、物体の画像を撮像することで生成される前記画像の明暗に対応する複数の画素データの集合から構成される画素情報によって形成される２次元の画素空間を、互いの一部が重畳するように設定された複数の小区画からなる局所領域に分割し、前記各局所領域のそれぞれに含まれる前記各画素データを入力して該画素データに応じた応答を異なる応答時間で複数種類の応答素子から前記各局所領域のそれぞれに対応して出力する応答出力ステップと、前記応答が出力される毎、前記出力された応答に基づいて前記各応答間における時間的空間的相関の度合いを示す相関関数の値を求める相関関数ステップと、前記相関関数ステップで求められた前記時間的空間的相関の度合いが高い前記応答を前記応答出力手段から選択する応答選択ステップと、前記応答選択ステップで選択された前記応答に基づいて前記物体の前記画素空間における移動方向を検出する複数個の検出素子の集合で構成される移動方向検出ステップとを備えることを特徴とする適応型物体移動検出方法において、前記応答出力ステップにおける前記応答時間が異なる複数種類の応答素子は応答時間の位相が９０度ずつ異なる第１乃至第４応答素子から構成され、前記相関関数ステップによる前記時間的空間的相関の度合いを示す相関関数の値を求める動作は前記第１乃至第４応答素子から出力される応答に基づいて行なわれることを特徴とする。
そのため、前記応答出力ステップの前記各応答素子から応答が出力される毎、前記相関関数ステップによって前記出力された応答に基づいて前記各応答間における時間的空間的相関の度合いを示す相関関数の値が求められる。前記応答選択ステップによって、前記相関関数ステップで求められた前記時間的空間的相関の度合いが高い前記応答が前記応答出力ステップから選択される。前記移動方向検出ステップによって、前記応答選択ステップで選択された応答に基づいた移動方向の検出が行なわれる。このため、前記画像入力ステップで撮像された前記物体の移動方向が同じ方向に移動する傾向が高ければ、前記応答選択ステップが前記応答出力ステップから選択する応答は、前記移動方向に対応するものが多くなるとともに、前記移動方向に対応しない方向に対応するものは少なくなることになる。すなわち、前記物体の移動方向が学習されることになるため、前記物体が移動する方向については確実に検知することができるとともに、前記物体が移動しない方向については無駄な資源が使用されない。
【００１１】
【発明の実施の形態】
次に、この発明による適応型物体移動方向検出装置および方法の実施の形態について図面に基づき説明する。
図１は、本発明の実施の形態における適応型物体移動方向検出装置の機能ブロック図である。
前記適応型物体移動方向検出装置１０は、画像入力手段１、応答出力手段２、応答選択手段３、応答結合手段４、移動方向検出手段５などを備えて構成される。
前記画像入力手段１は、例えばＣＣＤカメラなどから構成され、前記応答出力手段２、応答選択手段３、応答結合手段４、移動方向検出手段５は例えばコンピュータのＣＰＵおよびメモリなどによって構成される。これらＣＰＵおよびメモリは「資源」に相当する。
【００１２】
図２に示されているように、前記画像入力手段（図２には図示せず）は、物体の画像を撮像することで生成される画像の明暗に対応する複数の画素データ１０２の集合から構成される画素情報１０４を生成して前記応答出力手段２に入力するものである。
本例では、前記画素データが縦横１０００ピクセルずつ配列されて１枚の画素情報１０４が構成されている。
前記各画素データ１０２の座標をｌ（英字の小文字のエル）とし、時間をｔとしたときに、前記各座標ｌ毎の出力をｆ_l（ｔ）と表す。また、以下に示され得ている各式において、添え字として前記「ｌ（英字の小文字のエル）」を使用している。
【００１３】
前記応答出力手段２は、前記画像入力手段１から入力された前記画像情報１０４によって形成される２次元の画素空間を、互いの一部が重畳するように設定された複数の小区画からなる局所領域Ａ（Ａ１、Ａ２、Ａ３、Ａ４……）に分割し、前記各局所領域Ａのそれぞれに含まれる前記各画素データ１０２を入力して該画素データ１０２に応じた応答を前記各局所領域Ａのそれぞれに対応して出力し、前記画素データ１０２の入力から前記応答の出力までに要する時間である応答時間が異なるよう設けられた複数種類の応答素子２０２の集合で構成されている。
前記各局所領域Ａを互いに一部が重畳するような設定は、例えば前記局所領域Ａ内に存在する各画素データ１０２に対してガウス関数に基づく重み付けを行なう（窓をかける）ことで実現することができる。
図２において、各応答素子２０２の中心座標をｋで示す。本例では前記応答素子２０２が縦横１００個ずつ配列されて１枚の２次元空間を構成するものとする。また、前記応答出力手段２における前記応答時間が異なる複数種類の応答素子は応答時間の位相が９０度ずつ異なる（時間遅れを有する）第１乃至第４応答素子から構成されており、前記第１乃至第４応答素子を識別する添え字としてｍ＝１乃至４を用いる。すなわち、本例では前記第１乃至第４応答素子が配列されることで４枚の２次元空間が構成されている。
【００１４】
前記応答出力手段２の各応答素子２０２の応答関数Ｒ_k,m（ｔ）は次の式（１）乃至式（７）によって示される。この場合画像データの入力はｓｉｎ波であるとする。
【数１】

【数２】

Ｓ_k,l：空間的応答を示す関数
Ｔ_m（ｔ）：時間的応答を示す関数
ｋ：各応答素子２０２の中心座標
λ_ex，λ_inh：各応答素子２０２の画素情報１０４（画素空間）における広がりを示す係数であり、λ_ex＜λ_inh、例えばλ_ex：λ_inh＝０．２５：１
κ：０より大きく１より小さい定数
ｘ_l，ｙ_l：座標ｌにおけるＸ軸、Ｙ軸の座標値
ｘ_k，ｙ_k：座標ｋにおけるＸ軸、Ｙ軸の座標値
【数３】

【数４】

【数５】

【数６】

【数７】

λ_t：時間応答の広がり
Ｔ₀：時間応答の周期
τ₀：時間遅れ
ω：時間応答の周波数（ωＴ₀＝２π）
Θ：ステップ関数
そして、前記応答出力手段２の各応答素子２０２の応答出力η_km（ｔ）は次の式（８）によって示される。
【数８】

【００１５】
前記相関関数手段３は、前記各応答素子２０２から応答が出力される毎、前記出力された応答に基づいて前記各応答間における時間的空間的相関の度合いを示す相関関数の値を求める機能を有している。
前記相関関数手段３は前記各応答素子２０２の応答出力の相関関数Γ_k,m:k',m'を次の式（９）によって求めることで前記機能を実現している。
【数９】

（なお、＜＞_tは時間平均をとることを示す）
すなわち、前記相関関数Γ_km:k'm'は応答素子２０２のうちｋとｍで示される応答素子２０２の応答出力と、ｋ'とｍ'で示される応答素子２０２の応答出力との相関を示す。
【００１６】
前記応答選択手段４は、前記相関関数手段３で求められた前記時間的空間的相関の度合いが高い前記応答を前記応答出力手段２から選択する結合する機能を有している。すなわち、前記応答選択手段４は、前記相関関数手段３で得られた前記相関に基づいて、前記相関の高い応答のみを前記応答出力手段２から選択する手段である。
図３において、符号６は前記応答出力手段２の各応答素子２０２のうち、前記応答選択手段４によって選択された応答素子２０２の応答を識別する情報（記号ｊ（ｊ＝１、２、３……）で示す）を格納するテーブルを示している。
前記移動方向検出手段５は、前記応答選択手段４で選択された前記応答に基づいて前記物体の前記画素空間における移動方向を検出する複数個の検出素子５０２の集合で構成されている。前記各検出素子５０２の座標をｉで示す。本例では前記検出素子５０２が縦横１００個ずつ配列されて１枚の２次元空間を構成するものとする。
【００１７】
前記各テーブル６は、前記各検出素子５０２毎に設けられている。
前記応答選択手段４は、式（１０）乃至式（１４）で定義されるコスト関数Ｅを最小化することによって実現される。
【数１０】

【数１１】

【数１２】

【数１３】

【数１４】

なお、λ₁，λ₂は、何れも正の定数であり、λ₁＜λ₂の関係となり、λ₁，λ₂の比は例えばλ₁：λ₂＝０．２５：１となるように設定される。
また、σ_i,j,k,mは、前記応答出力手段２の応答素子２０２からの応答出力を受けるときに値１、受け取らない時に値０をとる。
【００１８】
前記移動方向検出手段５における前記各検出素子５０２は、前記応答選択手段４によって選択された応答に基づいて移動方向の検出を行なうものである。
前記応答出力手段２にｆ_l（ｔ）の入力が与えられたとき、前記検出素子５０２の出力η_i（ｔ）は次に示す式（１５）、式（１６）で与えられる。
【数１５】

【数１６】

ここで、前記移動方向検出手段５に与える入力ｆ_l（ｔ）として、次の式（１７）で示すグレーティングパターン（ｓｉｎ波状の明暗）を与えた場合について考える。
【数１７】

θ：グレーティングパターンの傾き（前記物体の移動方向の角度に相当）
ｆ_s：グレーティングパターンの空間周波数
ｆ_t：グレーティングパターンの時間周波数
【００１９】
このとき、前記検出素子５０２の出力η_iは次に示す式（１８）で表される。
【数１８】

この式（１８）の出力η_i（ｔ｜θ，ｆ_s，ｆ_t）を最大とするような傾きθ、すなわち方向が当該検出素子５０２の持つ方向選択性となる。一方、当該検出素子５０２が有する方向選択性と異なる傾きθの入力があっても前記出力η_i（ｔ｜θ，ｆ_s，ｆ_t）は無視できる程度に小さいものとなる。
したがって、前記移動方向検出手段５においては、入力ｆ_l（ｔ）が与えられたとき、どの方向の方向選択性を有する前記検出素子５０２からの出力があるかを調べることで前記入力ｆ_l（ｔ）に含まれる前記物体の画像の移動方向を検出することができる。
【００２０】
前記適応型移動方向検出装置１０の動作を説明する。
前記画像入力手段１によって物体が撮像されることにより前記物体の画像の明暗に対応する複数の画素データ１０２の集合から構成される画素情報１０４が生成される。
前記応答出力手段２は、前記画素情報１０４を入力した前記画像情報１０４によって形成される２次元の画素空間を前記局所領域Ａに分割し、前記各局所領域Ａのそれぞれに含まれる前記各画素データ１０２を入力して該画素データ１０２に応じた応答を前記各局所領域Ａのそれぞれに対応して出力する。
前記相関関数手段３は、前記各応答素子２０２から応答が出力される毎、前記出力された応答に基づいて前記各応答間における時間的空間的相関の度合いを示す相関関数の値を求める。
前記応答選択手段４は、前記相関関数手段３で求められた前記時間的空間的相関の度合いが高い前記応答を前記応答出力手段２から選択する。
前記移動方向検出手段５は、前記応答選択手段４によって選択された応答に基づいて移動方向の検出を行なう。
【００２１】
図４は、この発明による適応型移動方向検出装置の実施の形態に基づいて行った移動方向検出手段５のあるjに関する出力をポーラプロット表示した結果であり、実線は平均よりも明るい物体が動いたとき、また破線は平均よりも暗い物体が動いたときの結果で、両者共に同一の方向へ動いたことを識別している。
【００２２】
また、図５は、画像内にあらゆる方向へ移動する物体が存在する場合における、前記移動方向検出手段５のすべての出力の最大方向を記述した結果であり、画像の局所部分ごとにおけるすべての方向を網羅している。
この図５における矢印は最大応答を示す運動方向を示す。
また、図６は、対象物体が図５における０度方向と１８０度方向のみに移動する場合の結果であり、画像入力の統計的性質を反映して、前記移動方向検出手段５のほとんどは、０度方向と１８０度方向を検出している状態を示している。
【００２３】
以上詳述したように、本実施の形態の適応型物体移動検出装置および方法によれば、前記応答出力手段２の前記各応答素子２０２から応答が出力される毎、前記相関関数手段３によって、前記出力された応答に基づいて前記各応答間における時間的空間的相関の度合いを示す相関関数の値が求められる。前記応答選択手段４によって、前記相関関数手段３で求められた前記時間的空間的相関の度合いが高い前記応答が前記応答出力手段２から選択される。前記移動方向検出手段５によって、前記応答選択手段４で選択された応答に基づいて移動方向の検出が行なわれる。
そのため、前記画像入力手段１で撮像された前記物体の移動方向が同じ方向に移動する傾向が高ければ、前記応答選択手段４が前記応答出力手段２から選択する応答は、前記移動方向に対応するものが多くなるとともに、前記移動方向に対応しない方向に対応するものは少なくなる。すなわち、前記物体の移動方向が学習されることになるため、前記物体が移動する方向については確実に検知することができるとともに、前記物体が移動しない方向については資源を使う必要が無い。このため、従来と違って、移動方向の検出を行なう判別手段をあらゆる方向について設ける必要がないので、資源を節約することができる。
従来技術と本発明とにおいて使用する資源であるメモリーの比較例を示すと以下のようになる。
例えば前記画像入力手段１によって入力される前記画像情報が縦横１０００ピクセルで２ビットずつのデータが必要だったとすると、従来はそのまま１０００＊１０００＊２＝２００万ビットのメモリが必要となる（ただし＊は乗算を示す演算記号）。
これに対して、本発明で試算すると、例えば前記第１乃至第４応答素子２０２が縦横５０個で４組設けられ、前記各検出素子５０２が縦横５０個で、前記テーブル６が２０ビットのデータを２０個ずつ有するとすれば、５０＊５０＊４＋５０＊５０＊２０＊２０＝１０１万ビットとなり、メモリという資源を半減することが可能である。
また、従来と違って、画像の明暗パタンについて独立に移動方向を判定し、両者の結果を比較しないので、対象画像の明暗に依存しない移動方向の検出が可能となり、移動方向の検出の効率を高めることができる。
【００２４】
なお、本実施の形態では、前記応答出力手段２を応答時間の位相が９０度ずつ異なる前記第１乃至第４応答素子から構成した。このように９０度ずつ異なる４つの検出出力に基づいて移動方向を検出する場合、検出可能な移動方向は２次元空間において０度から３６０度の全ての方向となる。このことは前記した式（１）乃至式（７）によって数学的に証明されている。
また、本実施の形態では、前記応答出力手段２が前記画素情報１０４によって形成される２次元の画素空間を、互いの一部が重畳するように設定された複数の小区画からなる局所領域Ａに分割するように構成した。そのため、前記各局所領域Ａは、隣り合う局所領域Ａにおける前記物体の移動方向についての応答も出力することになるため、移動方向の検出の精度を上げることができる利点がある。
【００２５】
なお、この発明は前記実施の形態に限定されるものではなく、たとえば、図１に示した適応型物体移動方向検出装置の構成に付加して、前記の相関の高い素子からの入力を強く受けとるように変化可能な手段から得られる時間および空間出力から、時間および空間的なパワースペクトルをとる手段を設け、そのパワースペクトルの時間変化から移動方向を検出することもできる。
【００２６】
【発明の効果】
以上のように、この発明の適応型物体移動方向検出装置および方法によれば、対象画像の明暗に依存しない移動方向の検出が可能となり、効率の良い移動方向の検出が可能となるとともに、得られた物体の画像の検出は，入力画像の動きの統計的性質を反映しており、移動方向を検出するため資源を節約することができる。
【図面の簡単な説明】
【図１】この発明による適応型物体移動方向検出装置の第１実施の形態の構成を説明するための機能ブロック図である。
【図２】応答出力手段および相関関数手段の原理を説明する説明図である。
【図３】応答選択手段および移動方向検出手段の原理を説明する説明図である。
【図４】この発明による適応型物体移動方向検出装置の第１実施の形態における対象画像移動方向検出手段のあるｊに関する出力をポーラプロット表示した検出結果を示す説明図である。
【図５】この発明による適応型物体移動方向検出装置の実施の形態において、画像内にあらゆる方向へ移動する物体が存在する場合における対象画像移動方向検出手段すべての出力の最大方向を記述して示す説明図である。
【図６】この発明による適応型物体移動方向検出装置の第１実施の形態における対象画像移動方向検出手段のほとんどが対象物体を０度方向と１８０度方向を検出している状態を示す説明図である。
【符号の説明】
１……画像入力手段、２……応答出力手段、３……相関関数手段、４……応答選択手段、５……移動方向検出手段。

Claims

物体の画像を撮像することで生成される前記画像の明暗に対応する複数の画素データの集合から構成される画素情報によって形成される２次元の画素空間を、互いの一部が重畳するように設定された複数の小区画からなる局所領域に分割し、前記各局所領域のそれぞれに含まれる前記各画素データを入力して該画素データに応じた応答を前記各局所領域のそれぞれに対応して出力し、前記画素データの入力から前記応答の出力までに要する時間である応答時間が異なるよう設けられた複数種類の応答素子の集合で構成される応答出力手段と、
前記各応答素子から応答が出力される毎、前記出力された応答に基づいて前記各応答間における時間的空間的相関の度合いを示す相関関数の値を求める相関関数手段と、
前記相関関数手段で求められた前記時間的空間的相関の度合いが高い前記応答を前記応答出力手段から選択する応答選択手段と、
前記応答選択手段で選択された前記応答に基づいて前記物体の前記画素空間における移動方向を検出する複数個の検出素子の集合で構成される移動方向検出手段と、
を備えることを特徴とする適応型物体移動検出装置において、
前記応答出力手段における前記応答時間が異なる複数種類の応答素子は応答時間の位相が９０度ずつ異なる第１乃至第４応答素子から構成され、前記相関関数手段による前記時間的空間的相関の度合いを示す相関関数の値を求める動作は前記第１乃至第４応答素子から出力される応答に基づいて行なわれることを特徴とする適応型物体移動検出装置。
前記応答出力手段による前記画素空間の前記局所領域への分割は、ガウス関数に基づく前記各局所領域内に存在する前記各画素データに対してガウス関数に基づく重み付けを行なう、すなわち窓をかけることによって行なわれることを特徴とする請求項１記載の適応型物体移動検出装置。
物体の画像を撮像することで生成される前記画像の明暗に対応する複数の画素データの集合から構成される画素情報によって形成される２次元の画素空間を、互いの一部が重畳するように設定された複数の小区画からなる局所領域に分割し、前記各局所領域のそれぞれに含まれる前記各画素データを入力して該画素データに応じた応答を異なる応答時間で
複数種類の応答素子から前記各局所領域のそれぞれに対応して出力する応答出力ステップと、
前記応答が出力される毎、前記出力された応答に基づいて前記各応答間における時間的空間的相関の度合いを示す相関関数の値を求める相関関数ステップと、
前記相関関数ステップで求められた前記時間的空間的相関の度合いが高い前記応答を前記応答出力手段から選択する応答選択ステップと、
前記応答選択ステップで選択された前記応答に基づいて前記物体の前記画素空間における移動方向を検出する複数個の検出素子の集合で構成される移動方向検出ステップと、
を備えることを特徴とする適応型物体移動検出方法において、
前記応答出力ステップにおける前記応答時間が異なる複数種類の応答素子は応答時間の位相が９０度ずつ異なる第１乃至第４応答素子から構成され、前記相関関数ステップによる前記時間的空間的相関の度合いを示す相関関数の値を求める動作は前記第１乃至第４応答素子から出力される応答に基づいて行なわれることを特徴とする適応型物体移動検出方法。
前記応答出力ステップによる前記画素空間の前記局所領域への分割は、ガウス関数に基づく前記各局所領域内に存在する前記各画素データに対してガウス関数に基づく重み付けを行なう、すなわち窓をかけることによって行なわれることを特徴とする請求項３記載の適応型物体移動検出方法。