JP2008299516A - 移動物体検知装置 - Google Patents
移動物体検知装置 Download PDFInfo
- Publication number
- JP2008299516A JP2008299516A JP2007143727A JP2007143727A JP2008299516A JP 2008299516 A JP2008299516 A JP 2008299516A JP 2007143727 A JP2007143727 A JP 2007143727A JP 2007143727 A JP2007143727 A JP 2007143727A JP 2008299516 A JP2008299516 A JP 2008299516A
- Authority
- JP
- Japan
- Prior art keywords
- shadow
- image
- moving object
- difference
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 claims abstract description 83
- 238000000034 method Methods 0.000 claims abstract description 41
- 238000001514 detection method Methods 0.000 claims abstract description 40
- 230000008569 process Effects 0.000 claims abstract description 38
- 238000012545 processing Methods 0.000 claims description 70
- 238000000605 extraction Methods 0.000 claims description 53
- 239000000284 extract Substances 0.000 claims description 17
- 230000002093 peripheral effect Effects 0.000 claims description 2
- 238000004364 calculation method Methods 0.000 description 42
- 238000003384 imaging method Methods 0.000 description 23
- 230000008602 contraction Effects 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 230000005856 abnormality Effects 0.000 description 6
- 238000013459 approach Methods 0.000 description 6
- 239000006185 dispersion Substances 0.000 description 6
- 230000004397 blinking Effects 0.000 description 4
- 230000005484 gravity Effects 0.000 description 4
- 230000001186 cumulative effect Effects 0.000 description 3
- 238000002474 experimental method Methods 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000007429 general method Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000002372 labelling Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 230000010339 dilation Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Landscapes
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Burglar Alarm Systems (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】本発明に係る移動物体検知装置は、所定周期にて撮像した監視画像を順次画像処理して移動物体を検知する。係る移動物体検知装置は、移動物体が写っていない画像である背景画像と影の揺れが生じる可能性のある背景画像中の影境界領域を記憶する記憶部4と、監視画像と背景画像とを差分処理して差分領域を抽出する差分領域抽出手段20と、所定周期で撮影された複数の監視画像において輝度変動を繰り返し、且つ影境界領域に含まれる変動影画素を抽出する変動影画素抽出手段10と、変動影画素の全部または一部が差分領域に含まれていると当該差分領域が移動物体によるものである可能性が下がる判定値を用いて移動物体によるものか否かを判定する判定手段50とを有する。
【選択図】図1
Description
移動物体には、侵入者、車、動物など種々想定されるが、以下では単に「侵入者」として述べる。
本発明を適用した侵入者検知装置は、監視領域を撮影した監視画像と背景画像との差分領域に基づいて侵入者を検知する装置である。特に、この侵入者検知装置は、求めた差分領域について、監視画像に写りこんだ植栽などの影が、風によって植栽などの形状の変化に伴って揺れた可能性を調べることにより、その影の揺れを侵入者と誤って検知することを防止するものである。
撮像部2で取得された監視画像201は、所定の時間間隔で画像処理部5に入力される。そこで、画像処理部5は、最新の監視画像を取得する前に、1フレーム前に取得した監視画像との間でフレーム間差分演算を行って2値化したフレーム間差分2値画像202を求め、記憶部4に記憶する。そして、画像処理部5は、N枚のフレーム間差分2値画像より、過去Nフレームで輝度が所定回数変動した画素の位置を抽出して輝度変動位置画像203を記憶する。
一方、背景画像204が更新される度に、画像処理部5は、背景画像204から2値画像206を算出して、さらに2値画像206の影以外の部分(白画素)を膨張させた膨張画像から、その白画素を収縮させた収縮画像を引いたものを、影境界領域画像207として抽出し、記憶部4に記憶する。なお、本実施の形態では、影境界領域画像207を背景画像204が更新される度に記憶しているが、操作者が予め手動により領域を設定し記憶部4に記憶させるようにしてもよい。
その後、画像処理部5は、影境界領域画像207と輝度変動位置画像203の論理積を変動影画像208として算出する。この変動影画像208では、影境界領域内で、明滅を繰り返す画素が変動影画素209として抽出されている。
最後に、影境界領域抽出手段11は、膨張処理画像から収縮処理画像の同一画素同士の差分値を算出した差分2値画像を影境界領域画像P(x,y)として抽出する(ステップST44)。影境界領域画像P(x,y)では、背景画像の2値画像の白画素と黒画素の境界に相当する領域が、輝度値1を有する影境界領域として抽出される。
影境界領域抽出手段11は、影境界領域画像P(x,y)を記憶部4に一時的に保存する。また、影境界領域抽出手段11は、背景画像が更新されるごとに影境界領域画像P(x,y)を再度求める。
ラベリングされた差分2値画像B(x,y)は、人属性量及び変動影特徴量の算出に用いるため、及び、次に取得された監視画像に対するトラッキング処理の基準とするために記憶部4に記憶される。
ここで、変動影特徴量算出手段30は、「影の揺れらしさ」の度合いを表すパラメータとして、例えば、背景差分領域に占める変動影画素の割合、背景差分領域が変動影画素に重なる継続フレーム数などを算出する。以下、これらのパラメータの具体的な算出方法の例について説明する。なお、以下の例では、何れのパラメータについても、その値が大きいほど「影の揺れらしさ」の度合いも大きいことを表すものとする。
そして、変動影特徴量算出手段30は、その継続フレーム数を所定数で割った値を、継続フレーム数を表すパラメータの値とする。ただし、その継続フレーム数を所定数で割った値が1を超えた場合は、そのパラメータの値を1とする。なお、所定数は、例えば人が歩行する速度で影境界領域を横切るのに要する時間に相当するフレーム数(例えば10フレーム)とすることができる。
ここで、人属性量算出手段40は、「人らしさ」の度合いを表すパラメータとして、例えば、背景差分領域内のエッジの類似度、テクスチャの類似度などを算出する。以下、これらのパラメータの具体的な算出方法の例について説明する。なお、以下の例では、何れのパラメータについても、その値が大きいほど「人らしさ」の度合いも大きいことを表すものとする。
各パラメータ値を算出すると、人属性量算出手段40は、変動影特徴量算出手段30と同様に、各パラメータの値に対し、実験などに基づいて最適化した重み係数を用いて重み付けする。そして、人属性量算出手段40は、その重み付けを行なった各パラメータの値を、加算または積算して求めた値を0〜1の範囲で正規化する。人属性量算出手段40は、その正規化された値を人属性量とする。得られた人属性量は、1に近いほど、人である可能性が高いことを表す。また人属性量算出手段40は、各パラメータの値から、ファジー推論に基づいて人属性量を求めるようにしてもよい。
判定値=人属性量/(1+変動影特徴量)
そして侵入者判定手段50は、得られた判定値を所定の閾値と比較する。所定の閾値は、用途に応じて実験的に定めることができる。判定値が所定の閾値以上であれば、侵入者判定手段50は、その背景差分領域は侵入者によるものと判定する。そして、警報部6や、通信部3を通じて警備装置などに異常発生信号を送信する。一方、判定値が所定の閾値未満であれば、侵入者判定手段50は、その背景差分領域は侵入者によるものではないと判定する。なお、判定値の算出方法は、上記のものに限られない。例えば、(人属性量−変動影特徴量)を判定値として用いてもよい。
まず、侵入者検知装置1に電源が投入されると、撮像部2は、一定の時間間隔で監視領域を撮影し、監視画像を取得する。そして、撮像部2は、監視画像を通信部3を介して画像処理部5へ送信する(ステップST01)。そして、画像処理部5は、取得した監視画像を、その取得時刻の順番にしたがって配列するように、記憶部4に記憶する。次に、画像処理部5は、背景画像設定手段60において、背景画像が設定されているか否かを判定する(ステップST02)。侵入者検知装置1の起動直後など、背景画像が設定されていない場合、画像処理部5は取得した監視画像を背景画像として設定し、記憶部4に記憶する(ステップST03)。背景画像が設定されると、画像処理部5は、影境界領域抽出手段11において、設定された背景画像から影境界領域を抽出する(ステップST04)。そして、抽出された影境界領域とその他の領域に2値化された影境界領域画像P(x,y)を記憶部4に記憶する。
背景画像が更新されると、画像処理部5は、新たに影境界領域の抽出を行う(ステップST13)。この処理はステップST04と同じ処理であるため、説明を省略する。
また、日中の太陽光が強い場合など影とそれ以外の部分の境界が明確な場合に影境界領域が設定されるが、曇りの日や、夜間など、画像上に影がない時間帯、場所では影境界領域は設定されないので、監視画像中に影の揺れによる輝度変動が生じない場合にまで影の揺れと誤って侵入者の検知に失敗することを防止できる。
さらに、影境界領域は背景画像の更新とともに再抽出されるので、太陽の移動、雲の移動等により影の位置が時々刻々変動しても、画像の状況に応じて影の揺れに相当する変動影画素を正確に抽出することができる。
2 撮像部
3 通信部
4 記憶部
5 画像処理部
6 警報部
10 変動影画素抽出手段
11 影境界領域抽出手段
12 輝度変動位置抽出手段
13 変動影画素特定手段
20 背景差分領域抽出手段
30 変動影特徴量算出手段
40 人属性量算出手段
50 侵入者判定手段
60 背景画像設定手段
Claims (4)
- 所定周期にて撮像した監視画像を順次画像処理して移動物体を検知する移動物体検知装置であって、
前記移動物体が写っていない画像である背景画像と影の揺れが生じる可能性のある前記背景画像中の影境界領域を記憶する記憶部と、
前記監視画像と前記背景画像とを差分処理して差分領域を抽出する差分領域抽出手段と、
前記所定周期で撮影された複数の監視画像において輝度変動を繰り返し、且つ前記影境界領域に含まれる変動影画素を抽出する変動影画素抽出手段と、
前記変動影画素の全部または一部が前記差分領域に含まれていると当該差分領域が前記移動物体によるものである可能性が下がる判定値を用いて移動物体によるものか否かを判定する判定手段と、
を有することを特徴とした移動物体検知装置。 - 前記変動影画素抽出手段は、前記背景画像における影と影以外の領域の境界を抽出し、該境界及びその周辺領域を前記記憶部に影境界領域として記憶させる影境界領域抽出手段をさらに有する請求項1に記載の移動物体検知装置。
- さらに、前記監視画像における前記差分領域の画像が移動物体の示す画像上の特徴を有している度合が高くなるほど移動物体特徴量を高く算出する移動物体属性量算出手段と、
少なくとも前記差分領域に占める前記変動影画素の割合が高いほど変動影特徴量を高く算出する変動影特徴量算出手段を有し、
前記判定値は、前記移動物体特徴量を前記変動影特徴量にて反比例関係に作用させた値である請求項1または2に記載の移動物体検知装置。 - 前記変動影特徴量算出手段は、前記差分領域に前記変動影画素が含まれた状態の継続期間が長いほど高くなる変動影特徴量を算出する請求項3に記載の移動物体検知装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007143727A JP4990030B2 (ja) | 2007-05-30 | 2007-05-30 | 移動物体検知装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007143727A JP4990030B2 (ja) | 2007-05-30 | 2007-05-30 | 移動物体検知装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008299516A true JP2008299516A (ja) | 2008-12-11 |
JP4990030B2 JP4990030B2 (ja) | 2012-08-01 |
Family
ID=40173002
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007143727A Active JP4990030B2 (ja) | 2007-05-30 | 2007-05-30 | 移動物体検知装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4990030B2 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012027616A (ja) * | 2010-07-21 | 2012-02-09 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
JP2012113687A (ja) * | 2010-11-26 | 2012-06-14 | Hyundai Motor Co Ltd | 車両内運転者の顔認証方法 |
JP2014209327A (ja) * | 2013-03-27 | 2014-11-06 | パナソニック株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
US9230309B2 (en) | 2013-04-05 | 2016-01-05 | Panasonic Intellectual Property Management Co., Ltd. | Image processing apparatus and image processing method with image inpainting |
US9530216B2 (en) | 2013-03-27 | 2016-12-27 | Panasonic Intellectual Property Management Co., Ltd. | Image processing apparatus and image processing method |
WO2022176151A1 (ja) * | 2021-02-19 | 2022-08-25 | 三菱電機株式会社 | 人検出装置、電気機器、人検出方法、及び人検出システム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08171689A (ja) * | 1994-12-19 | 1996-07-02 | Kansai Electric Power Co Inc:The | 変化領域検出装置 |
JP2005346339A (ja) * | 2004-06-02 | 2005-12-15 | Mitsubishi Electric Corp | 画像処理装置、画像処理方法及びプログラム |
JP2006099544A (ja) * | 2004-09-30 | 2006-04-13 | Secom Co Ltd | 画像判定装置 |
-
2007
- 2007-05-30 JP JP2007143727A patent/JP4990030B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08171689A (ja) * | 1994-12-19 | 1996-07-02 | Kansai Electric Power Co Inc:The | 変化領域検出装置 |
JP2005346339A (ja) * | 2004-06-02 | 2005-12-15 | Mitsubishi Electric Corp | 画像処理装置、画像処理方法及びプログラム |
JP2006099544A (ja) * | 2004-09-30 | 2006-04-13 | Secom Co Ltd | 画像判定装置 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012027616A (ja) * | 2010-07-21 | 2012-02-09 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
US8923553B2 (en) | 2010-07-21 | 2014-12-30 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium |
JP2012113687A (ja) * | 2010-11-26 | 2012-06-14 | Hyundai Motor Co Ltd | 車両内運転者の顔認証方法 |
JP2014209327A (ja) * | 2013-03-27 | 2014-11-06 | パナソニック株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
US9495757B2 (en) | 2013-03-27 | 2016-11-15 | Panasonic Intellectual Property Management Co., Ltd. | Image processing apparatus and image processing method |
US9530216B2 (en) | 2013-03-27 | 2016-12-27 | Panasonic Intellectual Property Management Co., Ltd. | Image processing apparatus and image processing method |
US9230309B2 (en) | 2013-04-05 | 2016-01-05 | Panasonic Intellectual Property Management Co., Ltd. | Image processing apparatus and image processing method with image inpainting |
WO2022176151A1 (ja) * | 2021-02-19 | 2022-08-25 | 三菱電機株式会社 | 人検出装置、電気機器、人検出方法、及び人検出システム |
JP7418652B2 (ja) | 2021-02-19 | 2024-01-19 | 三菱電機株式会社 | 人検出装置、電気機器、人検出方法、及び人検出システム |
Also Published As
Publication number | Publication date |
---|---|
JP4990030B2 (ja) | 2012-08-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4832894B2 (ja) | 画像センサ | |
JP4990030B2 (ja) | 移動物体検知装置 | |
JP5948983B2 (ja) | 画像処理装置、画像処理方法、および画像処理プログラム | |
US10032283B2 (en) | Modification of at least one parameter used by a video processing algorithm for monitoring of a scene | |
JP4569190B2 (ja) | 不審者対策システム及び不審者検出装置 | |
JP4611776B2 (ja) | 画像信号処理装置 | |
CN1523533A (zh) | 人的检测方法和设备 | |
KR101339026B1 (ko) | 열화상 카메라 가시성 개선 방법 및 장치 | |
JP4259720B2 (ja) | 画像センサ | |
US20130235195A1 (en) | Image processing device, image processing method, and image processing program | |
JP4491360B2 (ja) | 画像信号処理装置 | |
JP4740755B2 (ja) | 画像を用いた監視装置 | |
WO2013132711A1 (ja) | 物体検知装置、物体検知方法及びプログラム | |
JP2008299591A (ja) | 画像処理装置 | |
WO2012081969A1 (en) | A system and method to detect intrusion event | |
JPH05205175A (ja) | 物体検出装置 | |
JP5897950B2 (ja) | 画像監視装置 | |
JP2612662B2 (ja) | 侵入者識別システム | |
JP2012084009A (ja) | 画像センサ | |
JP4925942B2 (ja) | 画像センサ | |
JP4641902B2 (ja) | 画像センサ | |
JP6124739B2 (ja) | 画像センサ | |
Anderson et al. | Anomaly detection ensemble fusion for buried explosive material detection in forward looking infrared imaging for addressing diurnal temperature variation | |
Li et al. | Autonomous flame detection in video based on saliency analysis and optical flow | |
Albawendi et al. | Overview of behavioural understanding system with filtered vision sensor |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100422 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111024 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111101 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111228 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120403 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120501 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4990030 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150511 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |