JP2011070332A - 異常検知装置 - Google Patents
異常検知装置 Download PDFInfo
- Publication number
- JP2011070332A JP2011070332A JP2009219852A JP2009219852A JP2011070332A JP 2011070332 A JP2011070332 A JP 2011070332A JP 2009219852 A JP2009219852 A JP 2009219852A JP 2009219852 A JP2009219852 A JP 2009219852A JP 2011070332 A JP2011070332 A JP 2011070332A
- Authority
- JP
- Japan
- Prior art keywords
- region
- area
- abnormality
- derivation
- change
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000005856 abnormality Effects 0.000 title claims abstract description 127
- 230000008859 change Effects 0.000 claims abstract description 144
- 238000009795 derivation Methods 0.000 claims abstract description 87
- 230000002159 abnormal effect Effects 0.000 claims abstract description 44
- 238000001514 detection method Methods 0.000 claims abstract description 36
- 238000000926 separation method Methods 0.000 claims abstract description 26
- 238000000605 extraction Methods 0.000 claims abstract description 15
- 238000003384 imaging method Methods 0.000 claims abstract description 12
- 238000012544 monitoring process Methods 0.000 claims description 35
- 230000003068 static effect Effects 0.000 claims description 8
- 230000008034 disappearance Effects 0.000 claims description 6
- 238000000034 method Methods 0.000 description 23
- 230000008569 process Effects 0.000 description 23
- 238000012545 processing Methods 0.000 description 10
- 238000009826 distribution Methods 0.000 description 8
- 230000005484 gravity Effects 0.000 description 6
- 239000000284 extract Substances 0.000 description 3
- 230000002194 synthesizing effect Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Landscapes
- Closed-Circuit Television Systems (AREA)
- Burglar Alarm Systems (AREA)
- Alarm Systems (AREA)
Abstract
【解決手段】変化領域抽出手段41は撮像部2から入力される入力画像を背景画像30と比較して変化領域を抽出し、追跡手段42は変化領域の追跡を行って変化領域ごとの軌跡31を検出し、領域分類手段43は軌跡31を分析して変化領域を移動領域と静止領域に分類し、派生判定手段44は移動領域と静止領域の間の離間度を算出して派生判定値未満の前記離間度が算出された移動領域と静止領域の間に派生関係を設定し、異常判定手段45は同一の移動領域に対して派生関係が設定された静止領域のペアを検出し、ペアを除いて異常候補領域を設定し、異常候補領域の軌跡31が所定時点を超えて検出されている場合に異常信号を出力する。
【選択図】 図1
Description
よって上記構成によれば、監視空間内の人物が背景物を移動させても当該背景物の移動元と移動先にて抽出される変化領域を不審物の持ち込み等による異常として誤検知しないので、高精度に異常を検知することが可能となる。
一方、一人の不審者が複数の不審物を放置したことでペアが検出された場合、複数の不審物が類似していなければ上記照合で一致は得られないし、複数の不審物が類似していたとしてもこれらの不審物の像はどちらもペアの静止領域における入力画像に撮像されているため上記照合で一致は得られない。そのため不審物によるペアは異常の判定対象から除外されない。
よって上記構成によれば、不審物によるペアを異常の判定対象から除外することなく、背景物によるペアを異常の判定対象から除外できるので、高精度に異常を検知することが可能となる。
かかる構成によれば、動かされた背景物により抽出されていた変化領域が更新以降は抽出されなくなるので、当該領域において生じる新たな異常を検知できる。
かかる構成によれば、窓から差し込んだ光等、不審者と関係なく生じた静止領域が異常の判定対象から除外されるので、高精度に異常を検知することが可能となる。
かかる構成によれば、不審者が視野外に消えた時点で異常を検知できるので、迅速に異常を検知できる。
かかる構成によれば、不審者が視野内に長時間滞留していても視野外に消えるのを待たずに異常を検知できるので、迅速に異常を検知できる。
静止領域は新規に抽出される直前時刻において派生元の移動領域の一部として抽出されるため、かかる構成によれば、複数の人物が静止領域の周辺を通過しても正しい派生関係が設定され、正しいペアが検出される。よって、高精度に異常を検知することが可能となる。
異常検知装置1の機能ブロック図を図1に示す。異常検知装置1は、撮像部2、記憶部3、表示部5及び記録装置6が制御部4に接続されて構成される。
画像特徴量としては、色ヒストグラム以外にもエッジ点数、代表色又はこれらのうち2以上の組み合わせなど種々の特徴量を採用することができる。
領域種別には、動きのある移動領域、動きのない静止領域、他の変化領域から派生した派生領域、異常の可能性がある異常候補領域、異常が判定された異常領域(不審物によるものと判定された不審物領域)、背景物によるものと判定された背景物領域、ノイズによるものと判定されたノイズ領域がある。派生関係の情報は、具体的には派生元の変化領域の領域IDであり、領域種別が派生領域である変化領域について記憶される。本例では派生先の変化領域に派生元欄を設けているが、派生元の変化領域に派生先欄を設けてもよい。
別の実施形態において変化領域抽出手段41は背景相関処理を行って変化領域を抽出する。この場合、変化領域抽出手段41は、入力画像の各画素と当該画素に対応する背景画像30の画素との相関値を求め、相関値が予め設定された相関閾値未満の画素のうち互いに近接する画素を変化領域としてまとめる。
上記時間的制約は、静止領域と当該静止領域を生じさせた移動領域の間に正しく派生関係を判定するための制約である。監視空間には複数の施設利用者が往来しているため、静止領域を不審物や背景物とは無関係の施設利用者が通過することもしばしば起こるが、移動領域から派生した静止領域であれば新規に検出される直前には派生元の移動領域の一部として検出されていたはずである。そのため上記時間的制約により静止領域を通過しただけの移動領域に誤った派生関係を判定せず、真の派生関係を判定することができる。
軌跡間の距離を離間度として算出する場合、派生判定値には人間の平均身長の2分の1程度の値が設定される。このとき、派生判定値を画像内の位置の関数として記憶しておき、派生判定手段44は移動領域の位置に応じた派生判定値を読み出すことで画像内の位置による見かけ大きさの変化に適応した正確な派生判定を行なうことができる。また派生判定手段44は移動領域の長軸長を計測して、長軸長の2分の1の長さを当該移動領域についての派生判定値に設定してもよい。こうすることで、画像内の位置による見かけの大きさの変化や個人差に適応した正確な派生判定を行なうことができる。
尚、同一の移動物体との派生関係を条件としていることから、不審者による不審物の放置と不審者とは異なる人物による背景物の移動開始が同時に発生しても、或いは異なる人物による複数の背景物の移動が同時に発生しても、これらを混同してペアを検出することはない。
よって、一人の不審者が複数の不審物を放置したことで生じるペアを除外せずに異常候補領域を設定するので、不審物の検知精度を高く維持できる。
そこで異常判定手段45は、派生関係が設定されている静止領域において背景画像30の輝度分布と入力画像の輝度分布を比較し、2つの輝度分布が予め設定された分布類似基準を超えて類似している場合に当該静止領域をさらに除いて異常候補領域を設定する。
輝度分布の特徴量としては色ヒストグラムを採用することができる。別の実施形態においては輝度平均値及び輝度分散値を輝度分布の特徴量とすることもできる。変位判定閾値Taには判定対象の変化領域の面積(画素数)の50%程度に相当する値が設定される。
背景物がずらされて生じた変化領域においては入力画像側に移動後の背景物が含まれ背景画像側に移動前の背景物が含まれているため2つの輝度分布は類似する。一方、元々監視空間内に存在しない不審物により生じた変化領域においては背景画像30に不審物の像が存在していないため2つの輝度分布は相違する。
よって、背景物が小さく動かされたことで生じる変化領域に対して異常を判定することがなくなるので確度の高い異常検知が可能となる。これにより監視員の監視効率を高めることができる。
以下、図5〜図7を参照して、異常検知装置1の動作を説明する。
現時刻の変化領域と同定されなかった過去の変化領域は消失したと認識される。また、過去の変化領域と同定されなかった現時刻の変化領域は新たに視野内に出現した新規領域と認識される。
また追跡手段42は、後述するステップS61にて離間度を算出するために各変化領域の座標情報と領域IDとを対応付けて記憶部3に記憶させておく。記憶部3は少なくとも1時刻前の座標情報まで遡れるよう現時刻を含む2時刻分の座標情報を保持する。
図6を参照して、領域判別処理の詳細を説明する。
異常信号が入力された記録装置6は当該信号に含まれる情報を長期記録する。記録された情報は証拠として後日利用される。
尚、ステップS10〜S12の処理はまとめて行ってもよい。この場合、背景画像生成手段40は、背景物領域とノイズ領域と変化領域が検出されなかった部分の和領域を算出し、算出した和領域の入力画像を背景画像30に合成することで背景画像30を更新する
2・・・撮像部
3・・・記憶部
4・・・制御部
5・・・表示部
6・・・記録装置
30・・・背景画像
31・・・軌跡
32・・・参照特徴量
33・・・領域属性情報
40・・・背景画像生成手段
41・・・変化領域抽出手段
42・・・追跡手段
43・・・領域分類手段
44・・・派生判定手段
45・・・異常判定手段
Claims (7)
- 監視空間を所定時間おきに撮像する撮像部と、
前記監視空間の背景が撮像された背景画像を記憶している記憶部と、
前記撮像部から入力される入力画像を前記背景画像と比較して変化領域を抽出する変化領域抽出手段と、
前後する時刻に抽出された前記変化領域内の前記入力画像を比較して前記変化領域の追跡を行い、追跡された変化領域ごとの軌跡を検出する追跡手段と、
前記軌跡から移動量を検出し、前記変化領域を前記移動量が検出された移動領域と前記移動量が検出されない静止領域に分類する領域分類手段と、
前記移動領域と前記静止領域との間の離間度を算出し、派生判定値未満の前記離間度が算出された前記移動領域と前記静止領域の間に派生関係を設定する派生判定手段と、
前記静止領域を異常候補領域に設定し、所定時点において前記異常候補領域がある場合に異常信号を出力する異常判定手段と、
を備え、
前記異常判定手段は、同一の前記移動領域に対して前記派生関係が設定された前記静止領域のペアを検出し、前記ペアを除いて前記異常候補領域を設定することを特徴とする異常検知装置。 - 前記異常判定手段は、前記ペアの一方における前記背景画像と当該ペアの他方における前記入力画像とを照合し、照合一致した場合に当該ペアを除いて前記異常候補領域を設定する請求項1に記載の異常検知装置。
- 前記背景画像のうち前記ペアと対応する部分を前記入力画像により更新する背景画像生成手段、をさらに備えた請求項1又は2に記載の異常検知装置。
- 前記異常判定手段は、前記派生関係が設定されていない前記静止領域をさらに除いて前記異常候補領域を設定する請求項1〜請求項3の何れか1つに記載の異常検知装置。
- 前記所定時点は、前記異常候補領域との間に前記派生関係が設定されている前記移動領域の前記軌跡が検出されなくなった消失時点である請求項4に記載の異常検知装置。
- 前記所定時点は、前記消失時点、又は前記異常候補領域の前記軌跡が検出され始めてから予め設定された放置判定時間が経過した経過時点のいずれかである請求項5に記載の異常検知装置。
- 前記派生判定手段は、前記静止領域と、当該静止領域が新規に抽出される直前時刻に抽出された前記移動領域との間で前記離間度を算出する請求項1〜請求項6の何れか1つに記載の異常検知装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009219852A JP5236607B2 (ja) | 2009-09-25 | 2009-09-25 | 異常検知装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009219852A JP5236607B2 (ja) | 2009-09-25 | 2009-09-25 | 異常検知装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011070332A true JP2011070332A (ja) | 2011-04-07 |
JP5236607B2 JP5236607B2 (ja) | 2013-07-17 |
Family
ID=44015575
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009219852A Active JP5236607B2 (ja) | 2009-09-25 | 2009-09-25 | 異常検知装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5236607B2 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014041488A (ja) * | 2012-08-22 | 2014-03-06 | Canon Inc | 物体検知装置及びその制御方法、プログラム、並びに記憶媒体 |
JP2016194779A (ja) * | 2015-03-31 | 2016-11-17 | セコム株式会社 | 物体検出装置 |
WO2018109879A1 (ja) * | 2016-12-14 | 2018-06-21 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
WO2020050002A1 (en) * | 2018-09-06 | 2020-03-12 | Nec Corporation | Duration and potential region of interest for suspicious activities |
CN112037188A (zh) * | 2020-08-25 | 2020-12-04 | 同致电子科技(厦门)有限公司 | 一种车载相机镜头污渍在线检测方法及装置 |
CN116386339A (zh) * | 2023-06-06 | 2023-07-04 | 中路高科交通科技集团有限公司 | 一种省际客运未按线路行驶违法行为智能检测方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01245395A (ja) * | 1988-03-28 | 1989-09-29 | Toshiba Corp | 画像監視システム |
JPH06133299A (ja) * | 1992-10-15 | 1994-05-13 | Ricoh Co Ltd | 動きベクトル検出方法 |
JP2003346156A (ja) * | 2002-05-23 | 2003-12-05 | Nippon Telegr & Teleph Corp <Ntt> | 物体検出装置、物体検出方法、プログラムおよび記録媒体 |
JP2004362210A (ja) * | 2003-06-04 | 2004-12-24 | Nippon Telegr & Teleph Corp <Ntt> | 物体追跡装置と方法、及びそのプログラムとそのプログラムを記録した記録媒体 |
JP2008243009A (ja) * | 2007-03-28 | 2008-10-09 | Secom Co Ltd | 不審物監視装置 |
JP2008250772A (ja) * | 2007-03-30 | 2008-10-16 | Secom Co Ltd | 移動物体追跡装置 |
-
2009
- 2009-09-25 JP JP2009219852A patent/JP5236607B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01245395A (ja) * | 1988-03-28 | 1989-09-29 | Toshiba Corp | 画像監視システム |
JPH06133299A (ja) * | 1992-10-15 | 1994-05-13 | Ricoh Co Ltd | 動きベクトル検出方法 |
JP2003346156A (ja) * | 2002-05-23 | 2003-12-05 | Nippon Telegr & Teleph Corp <Ntt> | 物体検出装置、物体検出方法、プログラムおよび記録媒体 |
JP2004362210A (ja) * | 2003-06-04 | 2004-12-24 | Nippon Telegr & Teleph Corp <Ntt> | 物体追跡装置と方法、及びそのプログラムとそのプログラムを記録した記録媒体 |
JP2008243009A (ja) * | 2007-03-28 | 2008-10-09 | Secom Co Ltd | 不審物監視装置 |
JP2008250772A (ja) * | 2007-03-30 | 2008-10-16 | Secom Co Ltd | 移動物体追跡装置 |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014041488A (ja) * | 2012-08-22 | 2014-03-06 | Canon Inc | 物体検知装置及びその制御方法、プログラム、並びに記憶媒体 |
JP2016194779A (ja) * | 2015-03-31 | 2016-11-17 | セコム株式会社 | 物体検出装置 |
US10878581B2 (en) | 2016-12-14 | 2020-12-29 | Nec Corporation | Movement detection for an image information processing apparatus, control method, and program |
JPWO2018109879A1 (ja) * | 2016-12-14 | 2019-11-14 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
WO2018109879A1 (ja) * | 2016-12-14 | 2018-06-21 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
WO2020050002A1 (en) * | 2018-09-06 | 2020-03-12 | Nec Corporation | Duration and potential region of interest for suspicious activities |
JP2021535667A (ja) * | 2018-09-06 | 2021-12-16 | 日本電気株式会社 | 事象を管理するための注目期間及び少なくとも1つの注目領域を決定する方法、装置及びプログラム |
JP7047970B2 (ja) | 2018-09-06 | 2022-04-05 | 日本電気株式会社 | 事象を管理するための注目期間及び少なくとも1つの注目領域を決定する方法、装置及びプログラム |
US11882387B2 (en) | 2018-09-06 | 2024-01-23 | Nec Corporation | Duration and potential region of interest for suspicious activities |
CN112037188A (zh) * | 2020-08-25 | 2020-12-04 | 同致电子科技(厦门)有限公司 | 一种车载相机镜头污渍在线检测方法及装置 |
CN112037188B (zh) * | 2020-08-25 | 2024-05-03 | 同致电子科技(厦门)有限公司 | 一种车载相机镜头污渍在线检测方法及装置 |
CN116386339A (zh) * | 2023-06-06 | 2023-07-04 | 中路高科交通科技集团有限公司 | 一种省际客运未按线路行驶违法行为智能检测方法 |
CN116386339B (zh) * | 2023-06-06 | 2023-08-15 | 中路高科交通科技集团有限公司 | 一种省际客运未按线路行驶违法行为智能检测方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5236607B2 (ja) | 2013-07-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5203319B2 (ja) | 置き去り監視装置 | |
JP5236607B2 (ja) | 異常検知装置 | |
AU2011352412B2 (en) | Scene activity analysis using statistical and semantic feature learnt from object trajectory data | |
US20180115749A1 (en) | Surveillance system and surveillance method | |
US7606425B2 (en) | Unsupervised learning of events in a video sequence | |
JP6362674B2 (ja) | 映像監視支援装置、映像監視支援方法、およびプログラム | |
WO2014050518A1 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
US8266174B2 (en) | Behavior history retrieval apparatus and behavior history retrieval method | |
JP5077164B2 (ja) | 追跡装置及び追跡方法 | |
JP6185517B2 (ja) | 画像監視装置 | |
JP5358851B2 (ja) | 不審行動検知方法および不審行動検知装置 | |
JP2016057908A (ja) | 万引き予防システム及びソフトウエア | |
WO2019220589A1 (ja) | 映像解析装置、映像解析方法、及びプログラム | |
US10929688B2 (en) | System and method of video content filtering | |
JP2011035571A (ja) | 不審行動検知方法および不審行動検知装置 | |
Liao et al. | Security event recognition for visual surveillance | |
US11227007B2 (en) | System, method, and computer-readable medium for managing image | |
JP5236592B2 (ja) | 不審物検知装置 | |
JP2005284652A (ja) | 動きベクトルを用いた映像監視方法及び装置 | |
CN111104845B (zh) | 检测设备,控制方法及计算机可读记录介质 | |
JP5865709B2 (ja) | 画像監視装置 | |
US11216969B2 (en) | System, method, and computer-readable medium for managing position of target | |
CN114373142A (zh) | 基于深度学习的行人跌倒检测方法 | |
CN114332737A (zh) | 游荡信息提供方法 | |
JP2005033518A (ja) | 情報収集システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120620 |
|
TRDD | Decision of grant or rejection written | ||
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130321 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130326 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130327 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5236607 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160405 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |