JP4734568B2 - 画像上移動物体計測点決定方法及び装置 - Google Patents

画像上移動物体計測点決定方法及び装置 Download PDF

Info

Publication number
JP4734568B2
JP4734568B2 JP2006005448A JP2006005448A JP4734568B2 JP 4734568 B2 JP4734568 B2 JP 4734568B2 JP 2006005448 A JP2006005448 A JP 2006005448A JP 2006005448 A JP2006005448 A JP 2006005448A JP 4734568 B2 JP4734568 B2 JP 4734568B2
Authority
JP
Japan
Prior art keywords
image
moving object
time
point
representative
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2006005448A
Other languages
English (en)
Other versions
JP2007188269A (ja
Inventor
俊介 上條
健二 藤平
明哲 劉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Tokyo NUC
Original Assignee
University of Tokyo NUC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Tokyo NUC filed Critical University of Tokyo NUC
Priority to JP2006005448A priority Critical patent/JP4734568B2/ja
Publication of JP2007188269A publication Critical patent/JP2007188269A/ja
Application granted granted Critical
Publication of JP4734568B2 publication Critical patent/JP4734568B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

本発明は、時系列画像を処理して画像中の移動物体の計測点を決定する画像上移動物体計測点決定方法及び装置に関する。
ビデオカメラで移動物体を撮像し、画像処理して画像上の移動物体を追跡することにより、交通状態や交通事故の検出等を自動的に行うことができる。
画像上の移動物体を追跡する方法として、例えば480×640画素のフレーム画像を8×8画素のブロックに分割して60×80ブロックの画像とし、各ブロックの画像を背景画像の対応するブロックの画像と比較して、ブロック単位で移動物体を検出し、時刻t−1とtのフレーム画像の時空相関に基づいてブロック単位で移動物体の識別符号(ID)及び動きベクトル(MV)を求める方法がある(下記特許文献1)。これにより、同一移動物体と認められるブロックには同一IDが付与される。
しかしながら、ブロック単位で移動物体を検出するので、ブロックの集合としての移動物体領域(クラスタ)の周部ブロックについては、1ブロック幅の量子化誤差がある。このため、クラスタの幾何学的重心をクラスタの代表点とすると、代表点の軌跡が変動し、ジグザグになる。また、画像上で移動物体の一部が他の移動物体に隠蔽されると、代表点が、隠蔽前の位置からずれる。さらに、リアルタイム処理を高速に行うためにモノクロ濃淡画像を使うと、移動物体とその影を含んだものが移動物体と認識されて、代表点が影側にずれる。この影の影響は、天候や時間帯に依存する。
したがって、代表点の軌跡が安定しないとともに、その誤差が比較的大きくなる。
また、移動物体の速度、2点間通過の平均速度、加速度又は特定点通過時点等を画像処理で計測する場合、図5に示すように路面上の移動物体の位置によりビデオカメラとの距離及びカメラの視線方向と路面とのなす角度が異なるので、実長さと画像上の長さとの比を考慮する必要があるが、画像上の同じ位置のブロックでも、移動物体の高さによりビデオカメラとの距離が異なるので、計測誤差が生ずる。これを小さくするため、移動物体の路面側のエッジを計測点とすると、該計測点が画像上で他の移動物体に隠蔽されると、計測できない。この場合、計測点を移動させれば、その時点で計測誤差が大きくなる。
特開2004−207786号公報
本発明の目的は、上記問題点に鑑み、移動物体の速度、2点間通過の平均速度、加速度又は特定点通過時点等の計測誤差を低減できる計測点を求めることが可能な画像上移動物体計測点決定方法及び装置を提供することにある。
本発明の第1態様では、記憶手段に格納された時系列画像の各々を複数ブロックに分割し、時刻t1のフレーム画像と時刻t2のフレーム画像との相関関係と、該時刻t1のフレーム画像に含まれる移動物体の識別結果とに基づいて、該時刻t2のフレーム画像に含まれる移動物体をブロック単位で識別するとともにブロック単位で移動物体の動きベクトルを求める画像上移動物体追跡方法において、
(b)移動物体の領域の幾何学的重心を初期代表点として求め、
(c)該初期代表点に、その後のフレーム画像毎に求めた移動物体の領域の代表動きベクトルを順次累積加算することにより該移動物体の領域の代表点の軌跡を求めるステップを有する。
本発明による画像上移動物体追跡方法の第2態様では、第1態様において、
該ステップ(b)の前にさらに、(a)フレーム画像に対応した領域上に予め設定された入口領域の後端を該移動物体の領域の後端が通過したか否かを判定するステップを有し、
肯定判定した場合に該ステップ(b)の処理を行い、
該ステップ(c)での代表動きベクトルは、該移動物体の領域に含まれる複数ブロックの動きベクトルの平均値である。
本発明による画像上移動物体追跡方法の第3態様では、第1又は2態様において、(d)該ステップ(c)で求めた代表点の軌跡における各代表動きベクトルの始点に、該移動物体の領域のサイズに依存したオフセットベクトルを加算することにより、該移動物体の計測点を求めるステップをさらに有する。
本発明による画像上移動物体追跡方法の第4態様では、第3態様において、該記憶手段にはさらに、フレーム画像上の位置と該位置での実空間に対する縮小率に比例した値との関係を示す情報が予め格納されており、
該ステップ(d)は、
(d1)該初期代表点を始点とするオフセットベクトルを初期オフセットベクトルとして求め、
(d2)該情報を参照して各代表動きベクトル始点での係数を求め、該係数を該初期オフセットベクトルの絶対値に乗じて、該代表動きベクトル始点に加算するオフセットベクトルの絶対値を求めるステップを有する。
本発明による画像上移動物体追跡方法の第5態様では、第4態様において、該ステップ(d2)において、該代表動きベクトル始点に加算するオフセットベクトルの方向を、該代表動きベクトルの向き且つ該移動物体の領域の時系列画像撮影カメラ側とする。
上記第1態様の構成によれば、移動物体の領域の幾何学的重心を初期代表点として求め、該初期代表点に、その後のフレーム画像毎に求めた移動物体の領域の代表動きベクトルを順次累積加算することにより該移動物体の領域の代表点の軌跡を求めるので、代表点の軌跡はブロック量子化誤差の影響を受けず、安定したものとなり、また、画像上で移動物体の一部が他の移動物体に隠蔽されても、これにより代表点が殆どずれないので、代表点の軌跡をより正確に求めることが可能となる。
上記第2態様の構成によれば、フレーム画像に対応した領域上に予め設定された入口領域の後端を該移動物体の領域の後端が通過した場合に該ステップ(b)の処理を開始するので、この通過後に代表点の軌跡を求めることができる。また、代表動きベクトルが、該移動物体の領域に含まれる複数ブロックの動きベクトルの平均値であるので、該代表動きベクトルを容易に求めることができる。
上記第3態様の構成によれば、該ステップ(c)で求めた代表点の軌跡における各代表動きベクトルの始点に、該移動物体の領域のサイズに依存(例えば比例)したオフセットベクトルを加算することにより、該移動物体の計測点を求めるので、計測点が画像上で他の移動物体により隠蔽されても、計測点を正確に求めることが可能となる。
上記第4態様の構成によれば、フレーム画像上の位置と該位置での実空間に対する縮小率に比例した値との関係を示す情報を参照して各代表動きベクトル始点での係数を求め、該係数を該初期オフセットベクトルの絶対値に乗じて、該代表動きベクトル始点に加算するオフセットベクトルの絶対値を求めるので、オフセットベクトルの大きさを正確に求めることができ、計測精度向上に寄与する。
上記第5態様の構成によれば、該代表動きベクトル始点に加算するオフセットベクトルの方向を、該代表動きベクトルの向き且つ該移動物体の領域の時系列画像撮影カメラ側とするので、該移動物体が旋回してもオフセットベクトルの終点を該移動物体上の端部かつ略所定点にすることができ、計測精度向上に寄与する。
本発明の他の目的、構成及び効果は以下の説明から明らかになる。
以下、図面を参照して本発明の実施例1を説明する。図面において、同一又は類似の要素には、同一又は類似の符号を付している。
図1は、ビデオカメラ(例えばITVカメラ)10で撮像された画像を処理して移動物体を追跡する、本発明の実施例1の画像上移動物体追跡装置20の概略機能ブロック図である。
この装置20のうち記憶部以外は、コンピュータソフトウェア、専用のハードウェア又はコンピュータソフトウェアと専用のハードウェアの組み合わせで構成することができる。
ビデオカメラ10で撮影された時系列画像は、例えば30フレーム/秒のレートでサンプリングされて、画像メモリ21に格納され、最も古いフレーム画像が新しいフレーム画像で書き換えられる。
本発明は、画像メモリ21に格納された画像データをブロック23〜28によりリアルタイムで処理する場合のみならず、不図示の外部記憶装置に格納しておき、必要な部分のみ後で処理する場合にも適用できる。
また、画像メモリ21に格納された画像(原画像)を直接、ブロック23〜28で処理しても、ラプラシアンフィルタ等のフィルタをかけて空間的差分フレーム画像に変換したもの又は2次元フーリエ変換し所定周波数以上の成分を強調した後に逆フーリエ変換したもの(変換画像)を、ブロック23〜28で処理する構成であってもよい。以下、「画像」とは原画像又は変換画像を意味する。
背景画像生成部22は、記憶部と処理部とを備え、処理部は、画像メモリ21をアクセスし、例えば過去1分間の全ての又は間引かれたもののフレーム画像の対応する画素について画素値のヒストグラムを作成し、その最頻値(モード)をその画素の画素値とする画像を、移動物体が存在しない背景画像として生成し、これを該記憶部に格納する。背景画像は、この処理が定期的に行われて更新される。
ID生成/消滅部23には、図2に示す如くフレーム画像30内に配置される入口スリット31A、31B及び出口スリット32A、32Bの領域データが、予め設定されている。図2は、フレーム画像30に、これらスリットと、点線で示すブロックの境界線とが重ね合わされている。1ブロックは例えば8×8画素である。
前記スリットの設定は、マウス等のポインティングデバイス又はキーボード等の入力装置INと、設定を確認する表示装置OUTと、ID生成/消滅部23に含まれる入力処理プログラムとを含む設定手段により、人の操作に基づいて行われる。図2ではスリットの奥行が2ブロック幅であるが、1ブロック幅の整数倍であればよい。
ID生成/消滅部23は、画像メモリ21から入口スリット31A及び31B内の画像データを読み込み、これらの内側に移動物体が存在するかどうかをブロック単位で判定する。あるブロックに移動物体が存在するかどうかは、このブロック内の各画素と背景画像の対応する画素との差の絶対値の総和が閾値以上であるかどうかにより判定する。
ID生成/消滅部23は、ブロック内に移動物体が存在すると判定すると、このブロックに新たな移動物体識別符号(ID)を付与する。ID生成/消滅部23は、ID付与済ブロックと隣接しているブロックに移動物体が存在すると判定すると、この隣接ブロックに付与済ブロックと同一のIDを付与する。このID付与済ブロックは、スリットに隣接しているブロックも含まれる。以下、IDが付与されたブロックの塊をクラスタと称する。
IDの付与は、記憶部24内のオブジェクトマップの対応するブロックに対して行われる。オブジェクトマップは、上述の場合60×80ブロックの各ブロックの移動物体情報を記憶するためのものであり、移動物体情報は、IDが付与されているかどうかを示すフラグを含み、IDが付与されていることを示している場合にはさらにID及びブロックの動きベクトル(MV)を含む。この情報は配列M(i,j,n)で表すことができる。ここに(i,j)は第i行第j列のブロックを示し、n=0、n=1及びn=2はそれぞれMがフラグ、ID及びMVであることを示す。なお、該フラグを用いずに、ID=0のときIDが付与されていないと判定してもよい。また、IDの最上位ビットをフラグとしてもよい。ブロックマッチングでMVが求まらないブロックのMVは例えば、その回りの同一IDのブロックのMVの平均値に等しくする。
入口スリット31A又は31Bを通過したクラスタに対しては、移動物体追跡部25により、例えば上記特許文献1に記載の方法で追跡処理が行われる。例えば、高速処理のため、時刻t−1(フレーム番号)でのMVに基づいて時刻tでのクラスタの概略移動範囲が推定され、この範囲内で上述の移動物体存否判定がブロック毎に行われ、移動方向側のブロックに対するIDの付与及び移動と反対方向側のブロックに対するIDの消滅が行われて、時刻tでのクラスタが決定される。また、時刻t−1とtのフレーム画像間のブロックマッチングにより、時刻tでIDが付与されているブロックのMVが求められる。高速処理のため、ブロックマッチングを行う範囲は、時刻t−1でのMVに基づいて定められる。各ブロックのIDとMVは、上記特許文献1に記載のように、評価関数を用いて同時に決定することもできる。ID及びMVの更新は、記憶部24内のオブジェクトマップに対して行われる。
移動物体追跡部25による追跡処理は、各クラスタについて出口スリット32A又は32B内まで行われる。
ID生成/消滅部23はさらに、記憶部24内のオブジェクトマップに基づき出口スリット32A及び32B内のブロックにIDが付与されているかどうかを調べ、付与されていれば、クラスタが出口スリットを通過したときにそのIDを消滅させる。
図4は、時刻t0でのIDのオブジェクトマップに、理解を容易にするため図2中の画像上移動物体33及び34を重ね合わせ、さらにこれらのクラスタ33C及び34Cの境界を太線で示したものである。
本実施例1の特徴は、図1中のブロック26〜29及び2Aと、これらとブロック23及び24との関係にあり、以下これを詳述する。
フレーム画像30上において、時刻t0で図2に示す位置にいた移動物体33及び34がそれぞれ、図4に示す位置に移動したとする。図5に示すように、移動物体33とビデオカメラ10との間の距離が異なることと、ビデオカメラ10から路面への直線と路面とのなす角度が移動物体33の位置により異なることから、実物の長さに対する画像上の長さ(縮小率)が画像上の位置により異なる。ビデオカメラ10の撮像面の画像は、ビデオカメラ10の光軸に垂直な面SC上への実物の投影像に比例しているので、この縮小率は、投影面SC上のδSとこれに対応した路面上のδRとの比μ=δS/δRに比例している。この比例定数を1、すなわち縮小率をμとする。画像上の軌跡の各微小線分に、その位置のμを乗じたものが、実軌跡の線分に対応する。
フレーム画像30上において、時刻t0で図2に示す位置にいた移動物体33及び34がそれぞれ、図に示す位置に移動したとする。図5に示すように、移動物体33とビデオカメラ10との間の距離が異なることと、ビデオカメラ10から路面への直線と路面とのなす角度が移動物体33の位置により異なることから、実物の長さに対する画像上の長さ(縮小率)が画像上の位置により異なる。ビデオカメラ10の撮像面の画像は、ビデオカメラ10の光軸に垂直な面SC上への実物の投影像に比例しているので、この縮小率は、投影面SC上のδSとこれに対応した路面上のδRとの比μ=δS/δRに比例している。この比例定数を1、すなわち縮小率をμとする。画像上の軌跡の各微小線分に、その位置のμを乗じたものが、実軌跡の線分に対応する。
しかしながら、カメラアングルを低くして移動物体に対する視野を広くしたり、車輌が渋滞したりした場合には、画像上で複数の移動物体がその進行方向に重なって、この計測点が隠蔽されるという問題が生ずる。また、リアルタイム処理を高速に行うためにモノクロ濃淡画像を使うと、移動物体とその影を含んだものが移動物体と認識されて、計測点が安定せず、その誤差が比較的大きくなる。
そこで、本実施例1では、以下のようにしてこの問題を解決している。
ID生成/消滅部23は、図2及び図4において、クラスタ33Cの後端33C1が入口スリット31Aの後端31A1を完全に通過したと判定すると、これを初期値決定部26に通知する。この時点をt0とする。
初期値決定部26は、これに応答して、時刻t0でのオブジェクトマップ35に基づいて、移動物体領域の代表点を求める。例えば図4に示すオブジェクトマップ35において、クラスタ33Cの幾何学的重心位置を、移動物体33の代表点として求める。
ここで、時刻tにおける移動物体33の代表点をRP(t)、代表点から計測点までのオフセットベクトルをOFV(t)、代表点の動きベクトル(代表動きベクトル)をRMV(t)と表記する。図6(A)及び(B)はそれぞれ、時刻t0及びtkでのこれらを示す。また、第i行第j列のブロックの縮小率をμ(i,j)と表記する。
一方、図1の動きベクトル平均値算出部27は、動きベクトルMVのオブジェクトマップにおいて、各移動物体領域に含まれるすべてのブロックの動きベクトルMVの平均値を、代表動きベクトルRMV(t)として求める。
初期値決定部26はさらに、動きベクトル平均値算出部27から代表動きベクトルRMV(t0)を取得し、図6(A)において、代表点RP(t0)を始点とする代表動きベクトルRMV(t0)が通る直線上を、ビデオカメラ10に接近する方向へフレーム画像30上で走査し、クラスタ33C内の最も外側のエッジ位置を、初期計測点MP(t0)として求める。
図1の代表点追跡部28は、初期値決定部26で求められた代表点RP(t0)に、動きベクトル平均値算出部27で順次求められる代表動きベクトルRMV(t)を累積加算することにより、代表点の軌跡RP(t)を求める。図7は、移動物体33が直線移動する場合の時間(フレーム番号)t0〜t5における代表点の位置を示す。
このようにして求めた代表点の軌跡は、ブロック量子化誤差の影響を受けないので、安定したものとなる。また、画像上で移動物体の一部が他の移動物体に隠蔽されても、これにより、代表点が殆どずれない(平均化対象の動きベクトルが少なくなることにより少しずれる)ので、代表点の軌跡をより正確に求めることが可能となる。さらに、例えば時刻t0でのみクラスタ33C内についてカラー画像を処理することにより、影が移動物体と判定されている場合にこれをクラスタ33Cから除去して、代表点RP(t0)及び代表動きベクトルRMV(t0)を求めるようにすれば、その後はモノクロ画像のみを処理することにより、影の影響を受けずに代表点RP(t)を正確かつ高速に求めることが可能となる。
図1に戻って、縮小率マップ29は、記憶部と処理部とを備え、記憶部には上述の縮小率のマップ(配列)μが格納されており、処理部は初期代表点RP(t0)及び代表点追跡部28で求められた代表点RP(t)に応答して、代表点が属するブロックの座標(i,j)を求め、その縮小率μ(i,j)を計測点追跡部2Aに供給する。
計測点追跡部2Aは、代表点追跡部28で求められた代表点RP(t)を始点とするオフセットベクトル
OFV(t)=OFV(t)=−|OFV(t0)|・μ(i,j)/μ(i0,j0)・RMV(t)/|RMV(t)|を求める。但し、ビデオカメラ10側へ接近する移動物体については、この符号が逆になる。
計測点追跡部2Aは、代表点追跡部28で求められた代表点RP(t)を始点とするオフセットベクトル
OFV(t)=−|OFV(t0)|・μ(i,j)/μ(i0,j0)・RMV(t)/|RMV(t)|を求める。但し、ビデオカメラ10側へ接近する移動物体については、この符号が逆になる。
すなわち、初期値決定部26で求められたオフセットベクトルOFV(t0)の絶対値をμ(i,j)/μ(i0,j0)倍にしたものをオフセットベクトルOFV(t)の長さとする。ここに、(i,j)及び(i0,j0)はそれぞれ、時刻t及びt0での代表点が属するブロック座標である。また、動きベクトル平均値算出部27で求められた代表動きベクトルRMV(t)が通る直線のカメラ側、図5の場合は移動物体後端側を、オフセットベクトルOFV(t)の向きとして求める。
図8は、移動物体33が右折する場合に、上述のようにして求められる代表点と計測点の軌跡を示す。
このようにして計測点を求めることにより、計測点が画像上で他の移動物体により隠蔽されても、正確に求めることが可能となる。
なお、本発明には外にも種々の変形例が含まれる。
例えば、上記実施例では、クラスタ内の全ての動きベクトルの平均値を初期代表動きベクトルとして求めたが、移動物体の領域に含まれる複数ブロックの動きベクトルの平均値であればよく、代表点付近のブロック、例えば代表点が属するブロックとその周囲の8個のブロックの動きベクトルの平均値であってもよい。
また、上記実施例では、初期代表点として求める移動物体の領域の幾何学的重心として、クラスタの幾何学的重心を求めたが、該クラスタに対応するフレーム画像上の移動物体の領域の幾何学的重心を求めてもよい。
さらに、上記実施例では、初期代表点を始点とする初期オフセットベクトルの終点をフレーム画像上で求めたが、ブロックサイズは比較的小さいので、オブジェクトマップ上の端部ブロック内の点又はその近傍の点を初期オフセットベクトルの終点として求めてもよい。
さらに、例えば図3において、ビデオカメラから遠方の入口スリット31B側で初期代表点及び計測点を求めるよりも近くの出口スリット32B側でこれらを求めた方が精度が高くなるので、出口スリット32B側でこれらを求め、上記特許文献1に記載のように時間を遡って移動物体を追跡する構成であってもよく、これは、過去のビデオの解析のようにリアルタイム処理が要求されない場合に有効である。また、入口スリットや出口スリットの替わりにラインを用い、ライン通過等のラインとの関係でIDの付与/消滅を行ってもよい。
また、初期値決定部26での処理開始時点は、設定したラインが移動物体(クラスタ)と所定の関係になった時点、例えば、移動物体の先端部、後端部又は代表点が該ラインと一致し又は該ラインを通過した時点であってもよい。なぜならば、ラインをどの位置に設定するかで該所定の関係を変えることができ、また、時間を遡って入口スリットに入る前の移動物体軌跡を求めることができるからである。このラインは領域の辺であってもよい。
さらに、上記実施例では代表点での縮小率を求める場合を説明したが、これは近似的なものであり、例えば、上記実施例のようにして計測点を求めた後に、計測点と代表点との間、例えば中央点が属するブロックの縮小率を求め、これを初期オフセット長さに乗じてオフセットベクトルの絶対値を決定することで、計測点の精度を向上させてもよい。このような処理を複数回又は該絶対値が収束するまで繰り返してもよい。
本発明の実施例1の画像上移動物体追跡装置の概略機能ブロック図である。 入口及び出口のスリットとブロック境界線とを時刻t0のフレーム画像に重ね合わせた説明図である。 入口及び出口のスリットとブロック境界線とを他の時刻でのフレーム画像に重ね合わせた説明図である。 時刻t0での移動物体IDのオブジェクトマップに、理解を容易にするため図2中の移動物体を重ね合わせ、さらにこれらのクラスタの境界を太線で示したIDオブジェクトマップ説明図である。 実長さに対する画像上の長さの比である縮小率と、計測誤差が生ずる原因とを説明する図である。 (A)及び(B)はそれぞれ時刻t0及びtkでの代表点RP、代表動きベクトルRMV及びオフセットベクトルOFVを示す図である。 移動物体が直線移動する場合の、時刻tをパラメータとする代表点の軌跡RP(t)及び計測点の軌跡MP(t)の説明図である。 移動物体が右折する場合の代表点及び計測点の軌跡説明図である。
符号の説明
10 ビデオカメラ
20 画像上移動物体追跡装置
21 画像メモリ
22 背景画像生成部
23 ID生成/消滅部
24 オブジェクトマップ記憶部
25 移動物体追跡部
26 初期値決定部
27 動きベクトル平均値算出部
28 代表点追跡部
29 縮小率マップ
2A 計測点追跡部
30 フレーム画像
31A、31B 入口スリット
32B、32A 出口スリット
33、34 移動物体
33C、34C クラスタ
IN 入力装置
OUT 表示装置
RP、RP(t) 代表点
RMV、RMV(t) 代表動きベクトル
OFV、OFV(t) オフセットベクトル
MP 計測点
SC 投影面

Claims (2)

  1. プロセッサに対し、撮影カメラで撮像され記憶手段に格納された時系列フレーム画像の各々を複数ブロックに分割させ、ある時点t0での画像上移動物体の幾何学的重心位置に、画像上移動物体に含まれる全ブロックの動きベクトルの代表動きベクトルを時点tまで累積加算したものを該時点tでのフレーム画像上移動物体の代表位置ベクトルとして求めさせるとともに、始点を各フレーム画像上の該代表位置ベクトルの始点とし終点を計測点とするオフセットベクトルを求めさせる画像上移動物体計測点決定方法であって、該計測点は、移動物体の速度、2点間通過の平均速度、加速度又は特定点通過時点を計測する点であり、該記憶手段にはさらに、実空間での長さに対する画像上の長さの縮小率をフレーム画像上の位置と対応させた情報が予め格納されており、
    該プロセッサに対しさらに、該記憶手段の該情報を参照させて、該時刻t0及びtでの該代表位置ベクトルの始点における画像縮小率を求めさせ、該オフセットベクトルの長さを該時点t0でのオフセットベクトルの絶対値に該時刻tでの画像縮小率と該時刻t0での画像縮小率との比の値を乗じた値として求めさせ、該オフセットベクトルの向きを該代表位置ベクトルの直線方向且つ該撮影カメラ側として求めさせる、
    ことを特徴とする画像上移動物体計測点決定方法。
  2. 撮影カメラで撮像された時系列フレーム画像とプログラムとが格納される記憶手段と、該記憶手段に結合されたプロセッサとを備え、該プログラムが該プロセッサに対し、該時系列フレーム画像の各々を複数ブロックに分割させ、ある時点t0での該画像上移動物体の幾何学的重心位置に、画像上移動物体に含まれる全ブロックの動きベクトルの代表動きベクトルを時点tまで累積加算したものを該時点tでのフレーム画像上移動物体の代表位置ベクトルとして求めさせるとともに、始点を各フレーム画像上の該代表位置ベクトルの始点とし終点を計測点とするオフセットベクトルを求めさせる画像上移動物体計測点決定装置であって、該計測点は、移動物体の速度、2点間通過の平均速度、加速度又は特定点通過時点を計測する点であり、該記憶手段にはさらに、実空間での長さに対する画像上の長さの縮小率をフレーム画像上の位置と対応させた情報が予め格納されており、
    該プログラムは該プロセッサに対しさらに、該記憶手段の該情報を参照させて、該時刻t0及びtでの該代表位置ベクトルの始点における画像縮小率を求めさせ、該オフセットベクトルの長さを該時点t0でのオフセットベクトルの絶対値に該時刻tでの画像縮小率と該時刻t0での画像縮小率との比の値を乗じた値として求めさせ、該オフセットベクトルの向きを該代表位置ベクトルの直線方向且つ該撮影カメラ側として求めさせる、
    ことを特徴とする画像上移動物体計測点決定装置。
JP2006005448A 2006-01-12 2006-01-12 画像上移動物体計測点決定方法及び装置 Active JP4734568B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006005448A JP4734568B2 (ja) 2006-01-12 2006-01-12 画像上移動物体計測点決定方法及び装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006005448A JP4734568B2 (ja) 2006-01-12 2006-01-12 画像上移動物体計測点決定方法及び装置

Publications (2)

Publication Number Publication Date
JP2007188269A JP2007188269A (ja) 2007-07-26
JP4734568B2 true JP4734568B2 (ja) 2011-07-27

Family

ID=38343402

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006005448A Active JP4734568B2 (ja) 2006-01-12 2006-01-12 画像上移動物体計測点決定方法及び装置

Country Status (1)

Country Link
JP (1) JP4734568B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9400929B2 (en) 2012-03-05 2016-07-26 Panasonic Intellectual Property Management Co., Ltd. Object detection device and method for detecting an object by performing a raster scan on a scan window
WO2016067529A1 (ja) * 2014-10-30 2016-05-06 パナソニックIpマネジメント株式会社 画像処理装置、画像表示システム及びそれを備える車両並びに画像処理方法及びそれを実行させるプログラム
RU2597280C1 (ru) * 2015-06-08 2016-09-10 Открытое акционерное общество "ЛИТ-ФОНОН" Способ измерения вибраций
US20220319019A1 (en) * 2021-03-31 2022-10-06 Nvidia Corporation Techniques to determine optical flow
CN116030059B (zh) * 2023-03-29 2023-06-16 南京邮电大学 基于轨迹的目标id重认证匹配方法及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06265330A (ja) * 1993-03-11 1994-09-20 N T T Data Tsushin Kk 画像計測装置
JPH07288802A (ja) * 1994-04-18 1995-10-31 Nippon Telegr & Teleph Corp <Ntt> 侵入物体監視装置
JPH11185194A (ja) * 1997-12-22 1999-07-09 Mitsubishi Heavy Ind Ltd 車両検知装置
JP2000322582A (ja) * 1999-05-14 2000-11-24 Fujitsu Ltd 移動物体追跡方法
JP2001148019A (ja) * 1999-06-01 2001-05-29 Fujitsu Ltd 移動物体間動作分類方法及び装置、画像認識装置並びに移動物体認識方法及び装置
JP2002150295A (ja) * 2000-11-09 2002-05-24 Oki Electric Ind Co Ltd 物体検出方法及び物体検出装置
JP2003346159A (ja) * 2002-05-28 2003-12-05 Oki Electric Ind Co Ltd 人物追跡方法及び人物追跡装置
JP2004207786A (ja) * 2002-12-20 2004-07-22 Foundation For The Promotion Of Industrial Science 画像における移動物体の追跡方法及び装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06265330A (ja) * 1993-03-11 1994-09-20 N T T Data Tsushin Kk 画像計測装置
JPH07288802A (ja) * 1994-04-18 1995-10-31 Nippon Telegr & Teleph Corp <Ntt> 侵入物体監視装置
JPH11185194A (ja) * 1997-12-22 1999-07-09 Mitsubishi Heavy Ind Ltd 車両検知装置
JP2000322582A (ja) * 1999-05-14 2000-11-24 Fujitsu Ltd 移動物体追跡方法
JP2001148019A (ja) * 1999-06-01 2001-05-29 Fujitsu Ltd 移動物体間動作分類方法及び装置、画像認識装置並びに移動物体認識方法及び装置
JP2002150295A (ja) * 2000-11-09 2002-05-24 Oki Electric Ind Co Ltd 物体検出方法及び物体検出装置
JP2003346159A (ja) * 2002-05-28 2003-12-05 Oki Electric Ind Co Ltd 人物追跡方法及び人物追跡装置
JP2004207786A (ja) * 2002-12-20 2004-07-22 Foundation For The Promotion Of Industrial Science 画像における移動物体の追跡方法及び装置

Also Published As

Publication number Publication date
JP2007188269A (ja) 2007-07-26

Similar Documents

Publication Publication Date Title
US8406474B2 (en) Method and apparatus for identifying obstacle in image
EP3159125A1 (en) Device for recognizing position of mobile robot by using direct tracking, and method therefor
EP3159126A1 (en) Device and method for recognizing location of mobile robot by means of edge-based readjustment
US9953225B2 (en) Image processing apparatus and image processing method
EP3159122A1 (en) Device and method for recognizing location of mobile robot by means of search-based correlation matching
EP3159121A1 (en) Device for updating map of mobile robot and method therefor
US8150104B2 (en) Moving object detection apparatus and computer readable storage medium storing moving object detection program
US20140313347A1 (en) Traffic camera calibration update utilizing scene analysis
JP4793324B2 (ja) 車両監視装置および車両監視方法
US10740908B2 (en) Moving object
JP2008046903A (ja) 対象個数検出装置および対象個数検出方法
US9098750B2 (en) Gradient estimation apparatus, gradient estimation method, and gradient estimation program
US10984263B2 (en) Detection and validation of objects from sequential images of a camera by using homographies
JP4734568B2 (ja) 画像上移動物体計測点決定方法及び装置
KR102082254B1 (ko) 차량 인식 시스템
Meshram et al. Traffic surveillance by counting and classification of vehicles from video using image processing
KR102295183B1 (ko) Cctv 프로젝션 모델을 이용한 cctv 영상의 객체 추적 방법
KR101549165B1 (ko) 차량 자세 추정 장치 및 차량 자세 추정 방법
Wang et al. Preliminary research on vehicle speed detection using traffic cameras
KR101723536B1 (ko) 도로에서의 차선 검출 방법 및 장치
CN112967316B (zh) 一种面向3d多目标追踪的运动补偿优化方法及系统
JP2011064639A (ja) 距離計測装置及び距離計測方法
JP4783898B2 (ja) 画像処理による交差点での異常事象検出方法
JP4714872B2 (ja) 画像上重畳移動物体分割方法及び装置
KR101555876B1 (ko) 영상 합성을 위한 객체 추적 방법 및 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080909

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110104

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110111

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110307

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110329

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110331

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150