JP5841390B2 - 移動物体追跡装置 - Google Patents

移動物体追跡装置 Download PDF

Info

Publication number
JP5841390B2
JP5841390B2 JP2011217283A JP2011217283A JP5841390B2 JP 5841390 B2 JP5841390 B2 JP 5841390B2 JP 2011217283 A JP2011217283 A JP 2011217283A JP 2011217283 A JP2011217283 A JP 2011217283A JP 5841390 B2 JP5841390 B2 JP 5841390B2
Authority
JP
Japan
Prior art keywords
moving
moving object
value
hypothesis
tracking device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011217283A
Other languages
English (en)
Other versions
JP2013077202A (ja
Inventor
昌宏 前田
昌宏 前田
裕二 中沢
裕二 中沢
黒川 高晴
高晴 黒川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Secom Co Ltd
Original Assignee
Secom Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Secom Co Ltd filed Critical Secom Co Ltd
Priority to JP2011217283A priority Critical patent/JP5841390B2/ja
Publication of JP2013077202A publication Critical patent/JP2013077202A/ja
Application granted granted Critical
Publication of JP5841390B2 publication Critical patent/JP5841390B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Description

本発明は、画像処理により複数の移動物体を追跡する移動物体追跡装置に関する。
画像処理により移動物体を追跡する従来技術として、テンプレートマッチング処理を用い、画像特徴が類似する個所を探索、追跡するものが知られている。テンプレートマッチング処理では、画像全体を探索範囲とすると処理負荷が大きくなるため、注目する移動物体の前時刻での位置の周辺、或いは過去の運動等に基づく現時刻での予測位置の周辺に探索範囲を設定する。そして、この限定された探索範囲にて入力画像とテンプレートの一致の度合いを調べ、最も一致している位置に注目する移動物体が存在すると判断する。
ここで、追跡領域内に追跡対象の移動物体が複数存在する場合、画像特徴の似た移動物体同士が接近するとそれらのテンプレートの探索範囲が重なることがあり、注目する移動物体以外の移動物体の位置にて最もテンプレートと一致することがある。この場合、これらを取り違えて追跡し始めたり、複数の移動物体が同じ位置に存在すると判断したりする誤追跡が起こり得る。
この対策として、複数の移動物体のテンプレートそれぞれが最も一致した位置に各物体の位置候補を決定した後、位置候補間の距離が近すぎたならば離す修正を行ってテンプレートとの一致度に基づく再評価を行なう従来技術がある(特許文献1)。
特開2009−48428号公報
しかしながら従来技術では、例えば、注目物体がその進行方向に密集している複数の他物体とすれ違う場合にて、注目物体と他物体とを離す修正処理は物体の実際の動きと合致しない結果を生じ、追跡物体を取り違える可能性があるという問題があった。
より具体的には例えば、狭い通路で注目人物がその前方に横に並んで立っている複数人に接近した場合や、人が集まっている場所に注目人物が接近した場合には、実際には進行方向に居る人物が道を譲るなどして状況が変化し、注目人物はこれらの人物の間を通り抜けることがある。この場合に、接近した各物体を離す修正を行うと、注目人物の位置は進行方向と逆方向に修正され、一方、注目人物以外は注目人物の進行方向に修正されるため、注目人物と他の人物とを取り違え易くなる。つまり、従来技術では密集した複数の人物に近接した人物の探索範囲は押し戻された位置に制限されてしまうため通り抜けを入れ替わりとして誤追跡してしまう問題があった。
他方、注目人物がそれまでの動きを維持して密集した複数の人物の間を通り抜けるのではなく、接近した後それら人の輪に加わり立ち止まったり、注目人物の方が複数人物群を避けて通ったりするなど、注目人物の運動が変化することもある。このような場合には取り違えを回避するために探索位置を離す制御が有効である。
本発明は上記問題を鑑みてなされたものであり、複数の移動物体が密集しているときでもこれらを取り違えることなく高精度に追跡可能な移動物体追跡装置を提供することを目的とする。
本発明に係る移動物体追跡装置は、所定の空間を撮影した時系列の画像を用いて、前記空間内を移動する複数の物体を追跡するものであって、注目時刻より過去における前記各物体の位置情報を記憶する記憶部と、前記位置情報から前記注目時刻における前記各物体の移動先候補を予測して分布させる位置予測部と、前記注目時刻の前記画像において前記移動先候補それぞれと対応する位置の画像特徴から当該移動先候補についての移動先らしさの評価値を求める評価値算出部と、前記評価値の高さに基づいて前記各物体の移動先位置を判定する物体位置判定部と、を備え、前記評価値算出部は、前記物体の1つを注目物体とし、その他の物体の前記移動先候補の分布範囲内に予測された当該注目物体の前記移動先候補についての前記評価値を所定値分低める補正を行い、その際に前記分布範囲内の前記移動先候補のうちの一部候補については当該所定値を小さくして前記その他の物体の譲歩を前記評価値に反映させる。
上記本発明に係る移動物体追跡装置において、前記評価値算出部は、前記位置情報から前記注目物体が移動中と判定される場合に、当該注目物体の前方に予測された前記移動先候補を前記一部候補とする構成とすることができる。
上記本発明に係る移動物体追跡装置において、前記評価値算出部は、前記位置情報から前記注目物体が移動中と判定される場合に、当該注目物体の進行方向に近い前記移動先候補ほど前記所定値を小さくする構成とすることができる。
上記本発明に係る移動物体追跡装置において、前記評価値算出部は、前記位置情報から前記注目物体が移動中と判定される場合に、当該注目物体の直近位置に近い前記移動先候補ほど前記所定値を小さくする構成とすることができる。
上記本発明に係る移動物体追跡装置において、前記評価値算出部は、前記位置情報から前記注目物体が停止中と判定される場合に、前記分布範囲内の前記移動先候補から前記一部候補をランダムに選択する構成とすることができる。
本発明によれば、注目物体の移動先の候補位置に対する移動先位置としての評価値を他物体の存在蓋然性に応じて低める補正を行うことで、接近する複数の物体の移動先位置を離間させる。その際、当該評価値を低める補正を部分的に弱めて評価値を補償することにより、密集を通り抜ける移動物体を追跡することが可能となる。補正に対する評価値の補償を限定的にすることで補正の効果も確保し、通り抜け以外の動きがあっても取り違えを防止することができる。すなわち、複数の移動物体が密集しているときでもこれらを取り違えることなく高精度に追跡することができる。
本発明の実施形態に係る移動物体追跡装置のブロック構成図である。 三次元モデルの一例を模式的に示す斜視図である。 監視空間に複数の移動物体が存在する一例として4人の人物が接近して存在する様子及び当該移動物体のうち注目移動物体以外の3つに対して設定された存在度マップを示す模式図である。 個別存在度マップを作成する方法を説明する模式図である。 移動状態の注目物体の進行方向に密集する他物体が存在する場合の緩和値Eの設定を説明する模式図である。 移動状態の注目物体の進行方向に他物体が存在しない場合の緩和値Eの設定を説明する模式図である。 注目物体が停止状態である場合の緩和値Eの設定を説明する模式図である。 本発明の実施形態に係る移動物体追跡装置の追跡処理の概略のフロー図である。 図8の追跡処理における尤度補正処理の概略のフロー図である。
以下、本発明の実施の形態(以下実施形態という)である移動物体追跡装置1について、図面に基づいて説明する。移動物体追跡装置1は、監視空間内を移動する人物を追跡対象物(以下、移動物体と称する)とし、監視空間を撮像した監視画像を処理して移動物体の追跡を行う。移動物体追跡装置1は監視空間に存在する複数の移動物体を追跡可能に構成されている。なお、監視空間は屋内に限定されず屋外であってもよく、移動物体は車両など人物以外であってもよい。
[移動物体追跡装置の構成]
図1は、実施形態に係る移動物体追跡装置1のブロック構成図である。移動物体追跡装置1は、撮像部2、設定入力部3、記憶部4、制御部5及び出力部6を含んで構成される。撮像部2、設定入力部3、記憶部4及び出力部6は制御部5に接続される。
撮像部2は監視カメラであり、監視空間を臨むように設置され、監視空間を所定の時間間隔で撮影する。撮影された監視空間の監視画像は順次、制御部5へ出力される。専ら床面又は地表面等の基準面に沿って移動する人の位置、移動を把握するため、撮像部2は基本的に人を俯瞰撮影可能な高さに設置され、例えば、本実施形態では移動物体追跡装置1は屋内監視に用いられ、撮像部2は天井に設置される。監視画像が撮像される時間間隔は例えば1/5秒である。以下、この撮像の時間間隔で刻まれる時間の単位を時刻と称する。
設定入力部3は、管理者が制御部5に対して各種設定を行うための入力手段であり、例えば、タッチパネルディスプレイ等のユーザインターフェース装置である。
記憶部4は、ROM(Read Only Memory)、RAM(Random Access Memory)等の記憶装置である。記憶部4は、各種プログラムや各種データを記憶し、制御部5との間でこれらの情報を入出力する。各種データには、三次元モデル40、カメラパラメータ41、仮説42、物体位置43、存在度マップ44及び物体特徴45が含まれる。
三次元モデル40は、監視空間(実空間)を模した仮想空間に移動物体の立体形状を近似した移動物体モデルを配置した状態を記述したデータである。本実施形態では、監視空間及び仮想空間をX,Y,Z軸からなる右手直交座標系で表し、鉛直上方をZ軸の正方向に設定する。また、床面等の基準面は水平であり、Z=0で表されるXY平面で定義する。仮想空間内での移動物体モデルの配置は任意位置に設定することができる。
図2は、三次元モデル40の一例を模式的に示す斜視図であり、監視空間をN×M×Kの位置座標に離散化した仮想空間の基準面100、カメラ位置101及び移動物体モデル103の配置例を示している。
移動物体モデルは、例えば、人の頭部胴部、脚部の3部分の立体形状を近似する回転楕円体をZ軸方向に積み重ねた高さH、胴部の最大幅Wの立体形状データである。本実施形態では説明を簡単にするため、高さH、幅Wは標準的な人物サイズとし任意の移動物体に共通とする。また、頭部中心を移動物体の代表位置とする。なお、移動物体モデルはより単純化して1つの回転楕円体で近似してもよい。移動物体モデルの立体形状に関するデータは、追跡処理に先立って記憶部4に格納される。
カメラパラメータ41は、撮像部2の外部パラメータ、内部パラメータを含む。実際に計測するなどして得られたこれらのパラメータが予め設定入力部3から入力され、記憶部4に格納される。公知のピンホールカメラモデル等のカメラモデルにカメラパラメータ41を適用した座標変換式により、三次元モデル40を監視画像の座標系(撮像部2の撮像面;xy座標系)に投影できる。
仮説42(移動先候補)は、各時刻における移動物体の移動先の位置の予測値に関する情報である。確率的に移動物体の位置(物体位置)を判定するために仮説は移動物体ごとに多数(その個数をαで表す。例えば1移動物体あたり200個)設定される。具体的には、仮説42は、移動物体の識別子と、各時刻における予測値のインデックス(0〜α−1)及びその位置座標(XYZ座標系)とを対応付けた時系列データである。
物体位置43は各時刻における移動物体の位置に関する情報であり、具体的には、移動物体の識別子と位置座標(XYZ座標系)とを対応付けた時系列データである。すなわち、物体位置43には、時刻ごとに判定される各移動物体の位置が順次、追記され、各移動物体の過去位置の情報が保持される。
なお、仮説42、物体位置43を監視空間の水平面座標(XY座標系)で特定する構成として処理を高速化することができる。本実施形態では、理解を容易にするために当該構成を例に説明する。
存在度マップ44は、監視空間の各位置において各移動物体が存在し得る度合い(蓋然性)を表す存在度を当該位置及び当該移動物体の識別符号と対応付けたデータである。存在度は仮説42又は物体位置43を中心位置にして設定される。移動物体は監視空間の一部を占有し、複数の移動物体の占有空間は排他的に存在することに対応させて、任意の移動物体の物体位置を判定する際にその他の移動物体の存在度をペナルティ値として用いることで物体間に排他作用を奏させる。
物体特徴45は、追跡対象の移動物体を個々に特徴付ける情報であり、監視画像から抽出された各移動物体の特徴量(例えば色ヒストグラムなど)を含む。当該移動物体の特徴量は、入力画像にて追跡対象となる移動物体が新規に検出されると、当該検出位置に対応した画像領域から抽出され、記憶部4に格納される。なお、移動物体の特徴量を抽出する際に、移動物体モデルの形状に関するデータを参照情報として用いることができる。
また、物体特徴45は移動物体の非隠蔽領域を表す情報も含む。ここで、非隠蔽領域は移動物体が他の移動物体により隠蔽されずに監視画像上に像として現れる領域である。非隠蔽領域は、移動物体モデルを仮想的に配置した三次元モデル40を、カメラパラメータ41を用いて撮像部2の撮像面に投影して求めることができる。各移動物体について、移動物体モデルを当該移動物体の位置に配置したときの非隠蔽領域が物体特徴45として記憶部4に格納される。
制御部5は、CPU(Central Processing Unit)、DSP(Digital Signal Processor)、MCU(Micro Control Unit)等の演算装置を用いて構成され、記憶部4からプログラムを読み出して実行し、変化画素抽出部50、仮説設定部(位置予測部)51、尤度算出部(評価値算出部)52、物体位置判定部53及び異常判定部54として機能する。また尤度算出部52はペナルティ設定部520と緩和値設定部521とを含んでなる。
変化画素抽出部50は、撮像部2から新たに入力された監視画像から変化画素を抽出し、抽出された変化画素の情報を尤度算出部52及び物体位置判定部53へ出力する。そのために変化画素抽出部50は、新たに入力された監視画像と背景画像との差分処理を行って差が予め設定された差分閾値以上である画素を変化画素として抽出する。変化画素は背景画像を参照情報として監視画像との対比により抽出される移動物体の画像特徴である。なお、差分処理に代えて新たに入力された監視画像と背景画像との相関処理によって変化画素を抽出してもよいし、背景画像に代えて背景モデルを学習して当該背景モデルとの差分処理によって変化画素を抽出してもよい。
仮説設定部51は、移動物体の過去の位置情報(物体位置又は仮説)を用いて当該移動物体の動き予測を行い、移動物体の現時刻における移動先候補位置である複数の仮説を求めて分布させる。
まず、仮説設定部51は、過去に判定された各移動物体の物体位置又は過去に設定された各移動物体の仮説から動き予測を行なって、新たに監視画像が入力された時刻(注目時刻)における移動物体の移動先候補を複数通り予測して各移動先候補と移動物体の識別子とを含んだ仮説を設定し、設定した仮説を尤度算出部52へ出力する。上述したように仮説は各移動物体に対してα個設定される。このように多数の仮説を順次設定して確率的に移動物体の位置(物体位置)を判定する方法はパーティクルフィルタなどと呼ばれる。仮説は監視画像のxy座標系で設定することもできるが、本実施形態では監視空間のXYZ座標系で設定する。動き予測は過去の位置データに所定の運動モデルを適用するか、又は所定の予測フィルタを適用することで行なわれる。
尤度算出部52は、監視画像において各移動物体の仮説それぞれに対応する部分(非隠蔽領域)から当該移動物体の画像特徴を抽出し、画像特徴の抽出度合いに応じた、当該仮説の物体位置としての尤度(評価値)を算出して物体位置判定部53へ出力する。このとき尤度算出部52は、注目物体の仮説をペナルティ設定部520に入力して、当該仮説が示す移動先候補での注目物体以外の他物体の存在度を算出させ、当該存在度により当該仮説の尤度を低める補正を行なうと共に、その際に注目物体の仮説を緩和値設定部521に入力して一部の仮説に対する補正を小さくする調整(評価値補償)を行なう。
仮説のXY座標を(X,Y)、当該仮説に対する補正前の尤度をL0(X,Y)、当該仮説での他物体の存在度をP(X,Y)、当該仮説に対する緩和値をEとすると、当該仮説に対する補正後の尤度L(X,Y)は下記(1)式のように補正前の尤度から緩和値により調整された存在度を減算することによって算出される。ただしEは0以上1以下の値である。
L(X,Y)=L0(X,Y)−P(X,Y)×(1−E) (1)
すなわち、他物体の存在度は尤度を低めるペナルティ値として作用し、緩和値はペナルティ値を弱める作用を有する。
以下、補正前の尤度L0、存在度P、緩和値Eの算出について説明する。
補正前の尤度L0は次のように算出される。尤度算出部52は、仮説が示す移動先候補に移動物体モデルを仮想的に配置した三次元モデル40を生成する。そして、カメラパラメータ41を用いて三次元モデル40を撮像部2の撮像面に投影して移動物体モデルの非隠蔽領域を求め、下記(1)〜(3)の方法で類似度、包含度及びエッジの抽出度を算出してこれらの重み付け加算値に応じた尤度を算出する。なお、仮想空間に什器等の設置物のモデルを含ませておくことで、設定物による隠蔽をさらに考慮した非隠蔽領域を求めることができる。
(1)各移動物体の過去の物体位置における非隠蔽領域から抽出された特徴量を当該移動物体の物体特徴45として記憶部4に記憶する。仮説が現に注目物体が存在する位置に近いほど背景や他物体の特徴量が混入しなくなるため、非隠蔽領域から抽出された特徴量と物体特徴45との類似度は高くなり、一方、遠ざかるほど類似度は低くなりやすい。そこで、監視画像から非隠蔽領域内の特徴量を抽出し、抽出された特徴量と物体特徴45との類似度を算出する。ここでの特徴量として例えば、エッジ分布、色ヒストグラム又はこれらの両方など、種々の画像特徴量を利用することができる。
(2)変化画素抽出部50により抽出された変化画素に非隠蔽領域を重ね合わせ、変化画素が非隠蔽領域に含まれる割合(包含度)を求める。包含度は動きの特徴量であり、仮説が現に移動物体が存在する位置に近いほど高くなり、遠ざかるほど低くなりやすい。
(3)監視画像における非隠蔽領域の輪郭に対応する部分からエッジを抽出する。抽出されたエッジは形状の特徴量である。仮説が現に移動物体が存在する位置に近いほど、非隠蔽領域の輪郭がエッジ位置と一致するため、エッジの抽出度(例えば抽出されたエッジ強度の和)は高くなり、一方、遠ざかるほど抽出度は低くなりやすい。
なお、上述した類似度、包含度、エッジの抽出度のうちいずれか1つに応じた尤度を算出してもよいし、これらのうちの2つの度合いの重み付け加算値に応じて尤度を算出してもよい。
また、尤度を評価値にする代わりに上述した類似度、包含度、エッジの抽出度又はこれらの2以上を組み合わせた値を評価値とすることもできる。
次に存在度Pの算出について説明する。図3は複数の移動物体として4人の人物(移動物体#1〜#4)が接近して存在する監視空間の模式的な斜視図200及び、斜視図200の移動物体#2〜#4に対して設定された存在度マップ44の例を説明する模式図210である。存在度マップ44は、基準面に対応して位置を表すX軸及びY軸と、X軸及びY軸と直交して存在度を表すP軸とを有する。存在度マップ44は移動物体ごとの個別存在度マップを適宜合成することで生成される。模式図210には、移動物体#2の個別存在度マップ212、移動物体#3の個別存在度マップ213及び移動物体#4の個別存在度マップ214がそれぞれプロットされている。これらを対応する位置ごとに加算して正規化することで存在度マップが合成される。移動物体#2,#3,#4の個別存在度マップ212,213,214を合成した存在度マップは、監視空間内の各位置における、移動物体#1からみた他物体の存在度、すなわち当該位置に移動物体#1が存在し得ない度合いを表し、この存在度マップは移動物体#1の物体位置を判定する際のペナルティ値として利用される。
個別存在度マップのそれぞれはXY座標を変数とする1つの二次元正規分布の確率密度関数の出力値、又はXY座標を変数とする複数の二次元正規分布の確率密度関数を加算合成した関数の出力値で表される。本実施形態では基準面をN×Mに離散化しているので、個別存在度マップは実態的にはX=[0,N−1]、Y=[0,M−1]の範囲で各XY座標における上記関数の出力値が個別存在度として並び、これら個別存在度の集まりに移動物体の識別符号が対応付けられたデータである。個別存在度マップは、1つの二次元正規分布で表される場合には、当該正規分布の平均値μ及び分散値σが移動物体の識別符号と対応付けられたデータとすることもでき、また複数の二次元正規分布の加算合成で表される場合は、当該各正規分布の平均値μ及び分散値σと当該各分布の重みωとの組が移動物体の識別符号と対応付けられたデータとすることもできる。
合成存在度マップは複数の個別存在度マップを重ね合わせたものであり、個別存在度マップと同じXY座標範囲に合成存在度が並んだデータである。合成存在度マップは、加算された各二次元正規分布の平均値μ及び分散値σと当該分布の重みωとの組からなるデータとすることもできる。
ペナルティ設定部520は、仮説設定部51により設定された仮説42又は/及び物体位置判定部53により判定された物体位置43を参照して存在度マップ44を作成し、作成された存在度マップ44を記憶部4に記憶させる。また、ペナルティ設定部520は注目物体の仮説42を入力されると存在度マップ44から当該注目物体に対する当該仮説42の位置での他物体の存在度を出力する。
図4は個別存在度マップを作成する方法を説明する模式図である。図4(a)は、個別存在度マップの作成対象とする移動物体についての基準面上での仮説42及び物体位置43の配置の一例を示す模式図であり、白抜きの複数の小円(○)がそれぞれ仮説の位置を表し、三角形(△)が現在の物体位置を表す。また図4(b)〜(d)は図4(a)に仮説等を例示した移動物体について個別存在度マップを作成する3種類の方法(A1)〜(A3)を表している。
(A1)本方法は物体位置43から個別存在度マップを作成する方法である。この方法では、作成対象の移動物体の物体位置43を平均値μとした二次元正規分布の確率密度関数を作成する。図4(b)は、本方法で設定された個別存在度マップの二次元正規分布(平均値μ,分散値σ)を表しており、物体位置にてP軸方向のピークを有する山型の形状と、3σの範囲を示すXY面上の円とを示している。分散値σは仮説の分布幅から定められる。
(A2)本方法は仮説42から個別存在度マップを作成する方法である。この方法では、作成対象の移動物体のα個の仮説を記憶部4から読み出して当該移動物体の個別存在度を算出する。当該移動物体の仮説42の平均値と分散を算出し、算出された平均値及び分散を設定した二次元正規分布の確率密度関数で仮説の分布を近似する。そして、監視空間の各位値での当該関数の値を各位置における当該物体の個別存在度として設定する。図4(c)は仮説の分布を二次元正規分布で近似した様子を示す模式図であり、複数の仮説(○)の平均位置μを黒の小円(●)で示し、二次元正規分布(平均値μ,分散値σ)を平均位置μにてP軸方向のピークを有する山型の形状と、3σの範囲を示すXY面上の円とで表している。この方法は(A3)と比べると、必要とする計算量、メモリ量の少なさで優れている。
(A3)本方法は仮説42から個別存在度マップを作成する別の方法である。本方法は各仮説に対して未だ尤度が算出されていない状態で用いることができる。図4(d)は本方法による個別存在度マップの作成例を説明する模式図である。仮説(○)それぞれについて山型の関数で図示する二次元正規分布(平均値μ,分散値σ)が設定される。当該仮説の位置を当該正規分布の平均値μとし、かつ分散値σは3σが移動物体の幅の2分の1(W/2)に合致するように設定される。そして、仮説ごとの二次元正規分布をそれぞれ重み1.0で加算合成して得られる関数の各XY座標における出力値をそれらの最大値で除する正規化を行い、その正規化後の各XY座標における値を作成対象の移動物体の個別存在度マップと定義する。この方法は(A2)と比べると複雑な形状を表現でき、高い精度が得られる。
図3に示す移動物体#2〜#4の個別存在度マップ212〜214は(A2)の方法で作成されている。注目物体#1に対する他物体の合成存在度マップは、既に述べたように個別存在度マップ212〜214を適宜加算合成して算出される。その一つの方法は、全物体#1〜#4の個別存在度マップにおいて互いに対応する位置同士で値を加算し、加算結果のXY座標内での最大値で各位置の加算値を除して正規化することで全物体の合成存在度マップを作成する。次に、全物体の合成存在度マップにおける各位置の合成存在度から、注目物体#1の個別存在度マップにおける当該位置の個別存在度を減算して他物体#2〜#4についての合成存在度マップを作成する。なお、合成存在度マップから注目物体の個別存在度マップを減算する際に、当該個別存在度マップには合成存在度マップの作成時と同じ正規化を行う。
なお、上述した正規化により存在度の値域は[0,1]に設定され、尤度の値域[0,1]と一致している。存在度の値域を[0,1]に正規化していない場合には、(1)式の右辺の減算結果が0未満となり得るが、その場合のL(X,Y)は0と定義する。
上述の注目物体の物体位置判定用の合成存在度マップは、複数の移動物体のうち当該注目物体だけを除いた他物体の仮説に基づいて作成された、他物体の存在度を注目時刻の監視空間の各位置にて与える存在度関数に当たる。ペナルティ設定部520は、注目物体の識別符号とその仮説を入力されると、当該注目物体に対応した物体位置判定用の合成存在度マップに基づいて、当該仮説の位置での他物体の存在度を出力する。
なお、什器等が設置されて移動物体が存在し得ないことが予め分かっている位置に合成存在度1.0を上書き設定することもできる。
次に緩和値Eについて説明する。上述した存在度Pによるペナルティ値は、注目人物以外の移動先候補において注目人物が追跡されにくくする作用を奏する。画像特徴が類似する他人同士が接近して当該他人間で高い尤度が算出される機会が増えるとき、これらの人物が実際にはすれ違っていないにもかかわらず、あたかもすれ違ったかのように取り違えて追跡されてしまったり、接近した2人が混同され一方の人物の存在位置に2人が存在するかのように追跡される一方、他方の人物が実在する位置に第三の人物が新規出現したと判断されたりするなどの追跡エラーが起こりやすくなる。存在度をペナルティとして用いて尤度を低める修正はこのような場合に接近した人物同士を離すように作用して追跡エラーを防ぐことを可能とする。
しかし、この接近した人物同士を離す修正処理は、従来技術の課題として述べたように、場合によっては実際の人物の動きと合致しなくなって追跡物体を取り違えるおそれがある。この問題は図3のような、注目人物がその前方に人が集まっている場所に接近した場合について既に説明した。すなわち、この場合には進行方向に居る人物が譲歩し道を空けてくれ、注目人物はこれらの人物の間を通り抜ける場合があるが、この場合にペナルティ値が作用すると、注目人物の物体位置は進行方向と逆方向側に判定されやすくなり注目人物と他の人物との取り違えが生じ易くなる。その一方で、注目人物が輪に加わり立ち止まる、注目人物がよけて通るなど、注目人物側の運動が変化する場合もあり、この場合はペナルティ値が作用しなければ取り違えが発生しやすくなる。
また例えば、停止状態で密集した人物の中に居る注目人物が動き出して密集から抜け出す場合も、ペナルティ値の作用によって取り違えが発生することもある。つまり、ペナルティ値は、密集の内側に居る人物に対しては内側に押し留めるように作用し、外側に居る人物に対しては外側に押し出すように作用する。そのため、実際に内側の人物が抜け出したとしても、当該人物は外側の人物として追跡されやすくなってしまう。その一方で、実際に外側の人物が密集から抜け出す場合はペナルティ値が作用しなければ取り違えが発生しやすくなる。
緩和値Eは、存在度をペナルティとして得られる排他作用を活かしつつ、狭い通路や密集した空間で人がすれ違う際にお互いに譲りあって道を開けるといった人間らしい動作を擬似的に再現するために設定される値である。
緩和値設定部521は、注目物体の仮説のうち他物体の存在度が設定されている位置の仮説の一部に緩和値を設定する。緩和値設定部521は、緩和値の設定対象とする仮説の選択方法は注目物体が移動状態であるか停止状態であるかによって切り替える。すなわち、移動状態であればその進行方向に偏らせて緩和値を設定し、停止状態であれば偏りなく所定数の仮説に緩和値を設定する。
なお、設置物は移動物体と異なり注目物体に対して道を空けることが無いため、設置物の存在度が設定されている位置の仮説は緩和値の設定対象外とする。
運動状態は、注目物体の過去の物体位置からその移動ベクトルを算出して、当該移動ベクトルの大きさ(移動距離)を予め設定された停止判定しきい値Tvと比較することにより判定できる。具体的には、緩和値設定部521は、注目物体の直前2時刻の物体位置間の距離を算出し、物体の微動及び検出誤差の上限に設定されたしきい値Tvより当該距離が大きければ移動状態、当該距離が停止判定しきい値Tv以下ならば停止状態と判定する。
なお、直前3時刻以上の物体位置を用いた平均速度、或いは直前3時刻以上の物体位置にカルマンフィルタ等を適用して算出した予測速度の大きさから移動距離を算出することもできる。
注目物体が移動状態である場合、緩和値設定部521は、例えば、当該注目物体の進行方向(移動ベクトルの向き)に向かって前方にある仮説だけについて緩和値を設定する。その際、例えば、注目物体の進行方向に近い仮説ほど大きな緩和値を設定し、注目物体の進行方向から遠い仮説ほど小さな緩和値を設定する。これにより、他物体が自分の方に向かってくる注目物体に対して道を空けるという状況変化に対応可能となる。
また、注目物体の1時刻前の物体位置に近い仮説ほど大きな緩和値を設定し、注目物体の1時刻前の物体位置から遠い仮説ほど小さな緩和値を設定することも好適である。他物体の間を通り抜ける際は総じて注目物体の速さは低下するため、このように移動距離が小さな仮説ほど大きな緩和値を設定し、移動距離が大きな仮説ほど小さな緩和値を設定することで、さらに実際の状況に近い緩和値の設定が可能になる。
具体的には、緩和値設定部521は、注目物体の1時刻前の物体位置から緩和値設定対象の仮説までの移動ベクトルvを算出して移動ベクトルvの大きさである移動距離d1と移動距離d1の注目物体の進行方向成分d2とを求め、仮説までの移動距離d1に対する進行方向成分d2の比の値d2/d1に比例して緩和値Eを増減させる。また、Dをd1の最大値(仮説の最大移動距離)として、当該Dに対する移動距離d1の比の値d1/Dが小さいほど緩和値Eを大きく算出する。これにより注目物体の仮説に設定される緩和値は、注目物体の直近の進行方向に対して当該仮説への移動方向がなす角θが小さいほど大きく、当該仮説への移動距離d1が小さいほど大きく設定され、逆にθやd1が大きいほど小さく設定される。このような緩和値Eは例えば、下記(2)式で定義することができる。
Figure 0005841390
なお、(2)式は、進行方向前方の仮説だけに緩和値Eを設定する構成における定義式であり、d2≦0となる場合、すなわちθが90度以上となる場合は緩和値を0にする。
図5、図6は注目物体が移動状態である場合の緩和値Eの設定を説明する模式図であり、図5は注目物体が密集する他物体に向かって移動する場合の例であり、図6は注目物体の進行方向に他物体が存在しない場合の例である。同図は物体位置、仮説の位置や緩和値の大きさをXY平面にて模式的に表しており、点線の大きな円は他物体の存在度が設定されている範囲、三角(△)は過去の物体位置、実線の円(○)は仮説を表している。また、四角(□)はその大きさで、同じ位置に示す仮説(○)に対して設定する緩和値の大きさを示す。現時刻(注目時刻)をtで表し、1時刻前の物体位置はPt−1、2時刻前の物体位置はPt−2である。注目物体の直近の進行方向をPt−1からPt−2への移動ベクトルVt−1の向きで定義し、Pt−1を始点とする現時刻の移動ベクトルVを暫定的にその進行方向に沿って図示している。Pt−1から仮説への移動ベクトルはvで表す。このベクトルvの大きさが仮説への移動距離d1に当たり、またVに射影したvの大きさがd2、vがVとなす角がθに当たる。上述したように、θが小さいほど緩和値Eが大きく設定され、またd1が小さいほど緩和値Eが大きく設定される。この結果、図5に示す場合においては、注目物体がPt−1から進む可能性が高い直近進行方向を中心にペナルティが緩和され、密集していた他物体の間を通り抜ける注目物体を追跡することが可能となる。
一方、図6に示す進行方向が密集した他物体から逸れている場合にはペナルティの緩和は殆ど起こらない。これを鑑みれば、進行方向が密集した他物体から逸れていることを明示的に判定して、逸れている注目物体の仮説全てを緩和値設定対象から除外してもよい。逸れているか否かの判定は進行方向に他物体の存在度が設定されているかに基づいて判定することができ、進行方向に存在度が設定されていない場合は逸れていると判定する。また、注目物体の仮説のうち存在度が設定されている位置に設定されたものの数が、例えば10%未満であるなど所定割合未満の場合を逸れていると判定してもよい。注目物体の進行方向が密集した他物体から逸れているのであれば、注目物体が密集を回避して移動する可能性が高く、この場合は排他制御を最大限に効かせることで取り違え防止効果を高めることができる。
以上、注目物体が移動状態である場合を説明した。次に、注目物体が停止状態である場合の緩和値の設定について説明する。注目物体が停止状態である場合、注目物体はいずれの向きにも動き出す可能性がある。よって、上述した移動状態の場合のように注目物体が進む方向を想定しそれを中心に緩和値を設定することができない。また、進行する可能性がある全周領域に緩和値を設定すると、存在度による排他作用が損なわれて取り違えの可能性が増してしまう。
このような課題に対し、緩和値設定部521は他物体の存在度が設定されている領域内に位置する注目物体の仮説から一定割合でランダムに設定対象を選択する。また、このとき緩和値設定部521は緩和値Eの大きさもランダムに設定する。
具体的には、緩和値設定部521は、他物体の存在度が設定されている位置の仮説それぞれに対して乱数生成手段により互いに相関の無い乱数r1とr2とを値域[0,1]で生成する。そして、下記(3)式で表されるように、Rth以下の乱数r1が生成された仮説に対して緩和値Eを乱数r2に設定し、一方、Rthより大きな乱数r1が生成された仮説に対して緩和値Eを0に設定する。例えばRthを0.2に設定すれば他物体の存在度が設定されている位置の仮説のうち20%が緩和値の設定対象となる。Rthにはペナルティ値による排他作用と緩和値による譲歩反映作用の効果のトレードオフを考慮した値が実験を通じて予め設定される。
Figure 0005841390
図7は注目物体が停止状態である場合の緩和値Eの設定を説明する模式図であり、図5、図6と同様の形式で表現している。ちなみに、注目物体は停止状態であるので、物体位置を表す三角(△)は一点に留まっており、また移動ベクトルは大きさが0であるので表示していない。緩和値は、存在度が設定されている領域内の仮説にランダムに設定される。つまり、緩和値は1時刻前の物体位置から見て特定の方向に集中することなく設定される点で上述した移動状態の場合と相違する。また、緩和値の大きさはランダムに設定される。つまり、その大きさは物体位置からの距離に関係なく設定される点で移動状態の場合と相違する。
停止状態についての上述の実施形態は、緩和値を設定する仮説の選択と、緩和値の大きさとの両方を乱数を用いて決定するものであるが、それらの一方だけを乱数を用いて決定してもよい。例えば、上述の緩和値Eの大きさを変動させる乱数r2を用いず、乱数r1とRthとの大小関係で緩和値Eを0にするか1にするか、つまり存在度をそのままペナルティとして使うか使わないかの二択にしてもよい。例えば、Rthを0.2に設定して仮説の20%に緩和値を設定する場合には、Rth以下の乱数r1が生成された仮説に対して緩和値を1に設定し、Rthより大きい乱数r1が生成された仮説に対して緩和値を0に設定する。
また、乱数r1と閾値Rthとを用いた仮説選択を行わずに、偏りを有する乱数を用いて緩和値Eを算出する。偏りを有する乱数に応じた緩和値Eは、例えば、一様乱数r2を生成し、出力値の期待値が0.2に調整された関数g(・)を用いE=g(r2)によって算出できる。
尤度算出部52は上述したように注目物体の各仮説について補正前の尤度L0、存在度P、緩和値Eを求め、それを用いて(1)式から補正後の尤度Lを算出する。すなわち、他物体の存在度Pに応じて尤度を低める修正、及び前記修正による尤度の低下に対し他物体が譲歩し得ることに基づく補償を行った尤度Lが算出される。
物体位置判定部53は移動物体の各仮説、及び当該仮説ごとに算出された尤度Lから当該移動物体の位置(物体位置)を判定し、判定結果を記憶部4に移動物体ごとに時系列に蓄積する。なお、全ての尤度Lが所定の下限値(尤度下限値)未満の場合は物体位置なし、つまり消失したと判定する。下記(1)〜(3)は物体位置の算出方法の例である。
(1)移動物体ごとに、尤度を重みとする仮説の重み付け平均値を算出し、これを当該移動物体の物体位置とする。
(2)移動物体ごとに、最大の尤度が算出された仮説を求め、これを物体位置とする。
(3)移動物体ごとに、予め設定された尤度閾値以上の尤度が算出された仮説の平均値を算出し、これを物体位置とする。ここで、尤度閾値>尤度下限値である。
異常判定部54は、記憶部4に蓄積された時系列の物体位置を参照し、長時間滞留する不審な動きや通常動線から逸脱した不審な動きを異常と判定し、異常が判定されると出力部6へ異常信号を出力する。
出力部6は警告音を出力する音響出力手段、異常が判定された監視画像を表示する表示手段、又は通信回線を介して警備会社のセンタ装置へ送信する通信手段などを含んでなり、異常判定部54から異常信号が入力されると異常発生の旨を外部へ出力する。
[移動物体追跡装置の動作]
次に、移動物体追跡装置1の追跡動作を説明する。図8は移動物体追跡装置1の追跡処理の概略のフロー図である。
追跡処理が開始されると、制御部5は、撮像部2が監視空間を撮像するたびに監視画像を入力される(S1)。以下、最新の監視画像が入力された時刻を現時刻、最新の監視画像を現画像と呼ぶ。
現画像は変化画素抽出部50により背景画像と比較され、変化画素抽出部50は変化画素を抽出する(S2)。ここで、孤立した変化画素はノイズによるものとして抽出結果から除外する。なお、背景画像が無い動作開始直後は、現画像を背景画像として記憶部4に記憶させ、便宜的に変化画素なしとする。
また、仮説設定部51は追跡中の各移動物体に対して動き予測に基づきα個の仮説を設定する(S3)。なお、後述するステップS16にて新規出現であると判定された移動物体の仮説は動き予測不能なため出現位置を中心とする広めの範囲にα個の仮説を設定する。また、後述するステップS16にて消失と判定された移動物体の仮説は削除する。
制御部5は、ステップS2にて変化画素が抽出されず、かつステップS3にて仮説が設定されていない(追跡中の移動物体がない)場合(S4にて「YES」の場合)はステップS1に戻り、次の監視画像の入力を待つ。
一方、ステップS4にて「NO」の場合は、ステップS5〜S16の処理を行う。ペナルティ設定部520は、各移動物体の仮説を基に上述した(A2)の方法で当該移動物体の個別存在度マップを作成し、記憶部4に上書き保存する(S5)。
制御部5は移動物体の前後関係を判定する(S6)。具体的には、移動物体ごとに仮説の重心(平均値)とカメラ位置との距離を算出し、距離の昇順に対象物の識別子を並べた前後関係リストを作成する。そして、制御部5は追跡中の各移動物体を前後関係リストに基づいて手前のものから順次、注目物体に設定し(S7)、当該注目物体の追跡処理に用いる存在度マップを、他物体についての個別存在度マップを合成して作成する(S8)。続いて、制御部5は注目物体の各仮説を順次、注目仮説に設定する(S9)。但し、監視画像の視野外である仮説は注目仮説の設定対象から除外し、当該仮説における物体領域は推定せず、尤度を0に設定する。
尤度算出部52は仮想空間にて注目仮説の位置に移動物体モデルを配置し、移動物体モデルが配置された三次元モデル40を生成する。そして、カメラパラメータ41を用いて三次元モデル40を撮像部2の撮像面に投影して移動物体モデルの非隠蔽領域を求め、これを実空間における移動物体の非隠蔽領域と推定する。そして、推定した非隠蔽領域において注目物体の特徴量を抽出し、その抽出度合いに基づいて、注目仮説に対応した補正前の尤度L0を算出する(S10)。
尤度算出部52は、尤度L0に対する補正処理を行い、補正された尤度Lを算出する(S11)。この補正処理S11については後で詳述する。
制御部5は、尤度Lが算出されていない仮説が残っている場合(S12にて「NO」の場合)、ステップS9〜S11を繰り返す。α個全ての仮説について尤度Lが算出されると(S12にて「YES」の場合)、物体位置判定部53が注目物体の各仮説の位置(X,Y)と当該仮説のそれぞれについて算出された尤度L(X,Y)とを用いて注目物体の物体位置を算出する(S13)。現時刻について算出された物体位置は1時刻前までに記憶部4に記憶させた注目物体の物体位置と対応付けて追記される。なお、新規出現した移動物体の場合は新たな識別子を付与して登録する。また、全ての仮説での尤度が尤度下限値未満の場合は物体位置なしと判定する。
ペナルティ設定部520は、ステップS13にて算出された物体位置を用いて、上記(A1)の方法で注目物体の個別存在度マップを更新する(S14)。これにより、或る注目物体の物体位置の判定処理(ステップS7〜S14)では、それより前に処理された他の移動物体の物体位置の判定結果が反映される。物体位置に基づく存在度は仮説に基づく存在度より精度が高いと期待できるので、上述の存在度マップの更新によって後続の物体位置判定の精度が向上し、ひいては、ループ処理(ステップS7〜S15)を全移動物体について一回繰り返せば移動物体相互の位置関係について好適に収束した状態が求まることが期待できる。また、手前の物体から物体位置を判定することで、手前の物体による後ろの物体の隠蔽状態が精度良く評価されステップS10にて算出される尤度L0の精度が向上する。このことも物体位置の判定精度を向上させる。
制御部5は未処理の移動物体が残っている場合(S15にて「NO」の場合)、当該移動物体について物体位置を判定する処理(ステップS7〜S14)を繰り返す。一方、全ての移動物体について物体位置の判定が完了すると(S15にて「YES」の場合)、物体の新規出現と消失を判定する(S16)。具体的には、物体位置判定部53は各物体位置に対して推定された物体領域を合成して、変化画素抽出部50により抽出された変化画素のうち合成領域外の変化画素を検出し、検出された変化画素のうち近接する変化画素同士をラベリングする。ラベルが移動物体とみなせる大きさであれば新規出現の旨をラベルの位置(出現位置)とともに記憶部4に記録する。また、物体位置なしの移動物体があれば当該移動物体が消失した旨を記憶部4に記録する。以上の処理を終えると、次時刻の監視画像に対する処理を行うためにステップS1へ戻る。
図9は尤度補正処理S11の概略の処理フロー図である。ペナルティ設定部520はステップS8で作成した存在度マップから注目仮説が表す座標での存在度Pを読み出し、当該存在度Pをペナルティ値に設定する。尤度算出部52は注目仮説及びペナルティ値Pを緩和値設定部521に入力する(S20)。
緩和値設定部521はペナルティ値Pが0ならば(S21にて「NO」)、緩和値Eを設定せず図8のステップS12へ進む。この場合、尤度LはステップS9にて算出された画像特徴の尤度L0と等しくなる。
一方、ステップS20で設定されたペナルティ値Pが0以上ならば(S21にて「YES」)、緩和値Eを設定する処理S22〜S26が行われる。当該処理にて緩和値設定部521はまず、記憶部4から過去に算出された注目物体の物体位置Pt−1,Pt−2を読み出し、これらから現時刻の移動ベクトルVを算出する(S22)。そして、その大きさである移動距離|V|を停止判定しきい値Tvと比較する(S23)。|V|>Tvであれば注目物体は移動状態であると判定し(S23にて「YES」)、|V|≦Tvであれば注目物体は停止状態であると判定する(S23にて「NO」)。
ステップS23にて移動状態と判定した場合、緩和値設定部521はステップS22で読み出した1時刻前の物体位置Pt−1から注目仮説への移動ベクトルvを求め、その大きさd1を算出し、さらに当該移動ベクトルvの移動ベクトルVt方向成分の大きさd2を算出する(S24)。そして、緩和値設定部521は(3)式に従い緩和値Eを算出する。
ステップS23にて停止状態と判定した場合、緩和値設定部521は乱数生成手段により乱数r1,r2を生成し、(4)式に従い緩和値Eを算出する(S26)。
尤度算出部52は、ステップS10にて算出された画像特徴の尤度L0と、ステップS20にて設定されたペナルティ値P及びステップS25又はS26にて設定された緩和値Eを(1)式に適用し、画像特徴の尤度L0を補正した尤度Lを求める(S27)。尤度算出部52はステップS12に戻り、上述の注目仮説に対する尤度補正処理S11を全仮説について繰り返す。
上述の実施形態では補正された尤度を(1)式で定義したが、尤度の補正式は、他物体の存在度Pに応じて低下させる一方、他物体の譲歩の効果を取り込むために当該低下を緩和・補償する他の形とすることができる。例えば、補正後の尤度L(X,Y)は下記(4)式のように、存在度の上限値Pmax(ここでは“1”に正規化されているとする。)から存在度を減算した値を、存在度に応じた排他効果を尤度に反映させる修正係数として、補正前の尤度に乗じる一方、当該修正係数を緩和値に応じた補償係数(1−E)を乗じて譲歩効果を反映させてもよい。
L(X,Y)=L0(X,Y)×{1−P(X,Y)×(1−E)} (4)
また、上述の実施形態ではPmax=1とし、存在度は[0,Pmax]なる範囲で定義している。一方、ペナルティ値自体はPmaxを越えて設定することを許容し、(1)式や(4)式で示す補正段階にて、P(X,Y)又はP(X,Y)×(1−E)がPmaxを超えるときはL(X,Y)は0と定義することにしてもよい。
1 移動物体追跡装置、2 撮像部、3 設定入力部、4 記憶部、5 制御部、6 出力部、40 三次元モデル、41 カメラパラメータ、42 仮説、43 物体位置、44 存在度マップ、45 物体特徴、50 変化画素抽出部、51 仮説設定部、52 尤度算出部、53 物体位置判定部、54 異常判定部、100 基準面、101 カメラ位置、103 移動物体モデル、520 ペナルティ設定部、521 緩和値設定部。

Claims (5)

  1. 所定の空間を撮影した時系列の画像を用いて、前記空間内を移動する複数の物体を追跡する移動物体追跡装置であって、
    注目時刻より過去における前記各物体の位置情報を記憶する記憶部と、
    前記位置情報から前記注目時刻における前記各物体の移動先候補を予測して分布させる位置予測部と、
    前記注目時刻の前記画像において前記移動先候補それぞれと対応する位置の画像特徴から当該移動先候補についての移動先らしさの評価値を求める評価値算出部と、
    前記評価値の高さに基づいて前記各物体の移動先位置を判定する物体位置判定部と、
    を備え、
    前記評価値算出部は、前記物体の1つを注目物体とし、その他の物体の前記移動先候補の分布範囲内に予測された当該注目物体の前記移動先候補についての前記評価値を所定値分低める補正を行い、その際に前記位置情報から判定される前記注目物体の運動状態に応じた所定方法で前記分布範囲内の前記移動先候補のうちの一部候補を選択し、当該一部候補については前記所定値を小さくして前記その他の物体の譲歩を前記評価値に反映させること、
    を特徴とする移動物体追跡装置。
  2. 請求項1に記載の移動物体追跡装置において、
    前記評価値算出部は、前記位置情報から前記注目物体が移動中と判定される場合に、当該注目物体の前方に予測された前記移動先候補を前記一部候補とすること、を特徴とする移動物体追跡装置。
  3. 請求項1又は請求項2に記載の移動物体追跡装置において、
    前記評価値算出部は、前記位置情報から前記注目物体が移動中と判定される場合に、当該注目物体の進行方向に近い前記移動先候補ほど前記所定値を小さくすること、を特徴とする移動物体追跡装置。
  4. 請求項1から請求項3のいずれか1つに記載の移動物体追跡装置において、
    前記評価値算出部は、前記位置情報から前記注目物体が移動中と判定される場合に、当該注目物体の直近位置に近い前記移動先候補ほど前記所定値を小さくすること、を特徴とする移動物体追跡装置。
  5. 請求項1から請求項4のいずれか1つに記載の移動物体追跡装置において、
    前記評価値算出部は、前記位置情報から前記注目物体が停止中と判定される場合に、前記分布範囲内の前記移動先候補から前記一部候補をランダムに選択すること、を特徴とする移動物体追跡装置。
JP2011217283A 2011-09-30 2011-09-30 移動物体追跡装置 Active JP5841390B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011217283A JP5841390B2 (ja) 2011-09-30 2011-09-30 移動物体追跡装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011217283A JP5841390B2 (ja) 2011-09-30 2011-09-30 移動物体追跡装置

Publications (2)

Publication Number Publication Date
JP2013077202A JP2013077202A (ja) 2013-04-25
JP5841390B2 true JP5841390B2 (ja) 2016-01-13

Family

ID=48480608

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011217283A Active JP5841390B2 (ja) 2011-09-30 2011-09-30 移動物体追跡装置

Country Status (1)

Country Link
JP (1) JP5841390B2 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015008432A1 (ja) * 2013-07-17 2015-01-22 日本電気株式会社 物体追跡装置、物体追跡方法および物体追跡プログラム
JP5613815B1 (ja) * 2013-10-29 2014-10-29 パナソニック株式会社 滞留状況分析装置、滞留状況分析システムおよび滞留状況分析方法
JP6331785B2 (ja) * 2014-07-08 2018-05-30 日本電気株式会社 物体追跡装置、物体追跡方法および物体追跡プログラム
JP6828445B2 (ja) * 2017-01-11 2021-02-10 富士通株式会社 対象物追跡プログラム、対象物追跡方法及び対象物追跡装置
JP6851241B2 (ja) * 2017-03-31 2021-03-31 セコム株式会社 画像解析装置
JP6851246B2 (ja) * 2017-04-25 2021-03-31 セコム株式会社 物体検出装置
JP6412998B1 (ja) * 2017-09-29 2018-10-24 株式会社Qoncept 動体追跡装置、動体追跡方法、動体追跡プログラム
JP7056842B2 (ja) * 2018-03-23 2022-04-19 株式会社豊田中央研究所 状態推定装置及びプログラム
US20210209396A1 (en) * 2018-06-01 2021-07-08 Nec Corporation Information processing device, control method, and program
IT201800006594A1 (it) * 2018-06-22 2019-12-22 "Procedimento per la mappatura dell’ambiente di un veicolo, corrispondenti sistema, veicolo e prodotto informatico"
CN111684457B (zh) * 2019-06-27 2024-05-03 深圳市大疆创新科技有限公司 一种状态检测方法、装置及可移动平台
CN111553237B (zh) * 2020-04-23 2023-11-07 江西理工大学 一种基于多态叠加Gamma分布的LJ1-01夜间灯光数据去噪方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4884331B2 (ja) * 2007-08-20 2012-02-29 セコム株式会社 移動物体追跡装置
JP5528151B2 (ja) * 2010-02-19 2014-06-25 パナソニック株式会社 対象物追跡装置、対象物追跡方法、および対象物追跡プログラム

Also Published As

Publication number Publication date
JP2013077202A (ja) 2013-04-25

Similar Documents

Publication Publication Date Title
JP5841390B2 (ja) 移動物体追跡装置
JP5687082B2 (ja) 移動物体追跡装置
US10234957B2 (en) Information processing device and method, program and recording medium for identifying a gesture of a person from captured image data
US10452931B2 (en) Processing method for distinguishing a three dimensional object from a two dimensional object using a vehicular system
US9213896B2 (en) Method for detecting and tracking objects in image sequences of scenes acquired by a stationary camera
JP5180733B2 (ja) 移動物体追跡装置
JP6554169B2 (ja) 物体認識装置及び物体認識システム
CN111611853B (zh) 一种传感信息融合方法、装置及存储介质
CN113196296A (zh) 使用几何上下文检测人群中的对象
JP2020126608A (ja) 生成ニューラルネットワークと、判別ニューラルネットワークとを含む敵対的生成ネットワークを利用して、合成可否判断不可の合成イメージを生成する方法、及び装置
US20130129160A1 (en) Face image registration device and method
JP2016148962A (ja) 物体検知装置
WO2015008432A1 (ja) 物体追跡装置、物体追跡方法および物体追跡プログラム
JP6779410B2 (ja) 映像解析装置、映像解析方法、及びプログラム
JP5027741B2 (ja) 画像監視装置
CN111937036A (zh) 用于处理传感器数据的方法、设备和具有指令的计算机可读存储介质
JP5027758B2 (ja) 画像監視装置
JP2019153112A (ja) 物体追跡装置、物体追跡方法、及びコンピュータプログラム
JP7488674B2 (ja) 物体認識装置、物体認識方法及び物体認識プログラム
CN116882148B (zh) 基于空间社会力图神经网络的行人轨迹预测方法及系统
EP4379321A1 (en) Method for detection of map deviations, system and vehicle
JP7488673B2 (ja) 移動物体追跡装置、移動物体追跡方法及び移動物体追跡プログラム
WO2021137349A1 (ko) 환경 기반 실-가상 정합 사물 배치를 위한 3차원 공간인식과 2차원 인지적 영역분할의 결합 방법 및 시스템
JP2022177391A (ja) 複数物体追跡装置、方法及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140707

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150306

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150414

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150615

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151104

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151113

R150 Certificate of patent or registration of utility model

Ref document number: 5841390

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250