JP2001169270A - Image supervisory device and image supervisory method - Google Patents

Image supervisory device and image supervisory method

Info

Publication number
JP2001169270A
JP2001169270A JP34934599A JP34934599A JP2001169270A JP 2001169270 A JP2001169270 A JP 2001169270A JP 34934599 A JP34934599 A JP 34934599A JP 34934599 A JP34934599 A JP 34934599A JP 2001169270 A JP2001169270 A JP 2001169270A
Authority
JP
Japan
Prior art keywords
image
change
distribution
calculating
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP34934599A
Other languages
Japanese (ja)
Other versions
JP3567114B2 (en
Inventor
Hiroaki Nakai
宏章 中井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP34934599A priority Critical patent/JP3567114B2/en
Publication of JP2001169270A publication Critical patent/JP2001169270A/en
Application granted granted Critical
Publication of JP3567114B2 publication Critical patent/JP3567114B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Burglar Alarm Systems (AREA)
  • Alarm Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an image supervisory device and an image supervisory method that can automatically decide an image change due to intrusion of a person or a thing being a substantial detection object from an image change due to fluctuation in an environmental condition, a camera-shake and an automatic adjustment function on the basis of a statistic distribution of a feature quantity obtained from the image and automatically estimate a weather and a shining status so as to reduce the opportunities of misdetection due to other conditions than the intrusion of a person or a thing thereby considerably enhancing the detection performance. SOLUTION: The image supervisory device comprises an image entry section 11 that enters an image obtained from an optional image pickup unit 101, a characteristic distribution calculation section 12 that obtains a statistic distribution of an optional feature quantity of the image entered by the image entry section 11, an image change tracing section 13 that traces a changing state of the image from the characteristic distribution obtained by the characteristic distribution calculation section 12, and a result decision section 14 that decide the intrusion of a person or a thing being a detection object from the tracing result of the changing state obtained by the image change tracing section 13.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、ITV(Inte
lligent Television)カメラ等の撮
像手段を用いて、所望の対象物(領域)の自動監視を行
う画像監視装置および画像監視方法に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention
The present invention relates to an image monitoring apparatus and an image monitoring method for automatically monitoring a desired target (area) by using an imaging unit such as an LTE (Television) camera.

【0002】[0002]

【従来の技術】ITVカメラ等の撮像手段により得られ
る監視領域内の映像から、不審人物や車両等の侵入を自
動的に検知する画像処理技術は、これまでも主にセキュ
リティ分野において用いられており、監視員の長時間に
及ぶ監視業務の軽減や、監視に必要な人員数を減らすと
いった費用削減効果があった。
2. Description of the Related Art Image processing technology for automatically detecting intrusion of a suspicious person or a vehicle from an image in a monitoring area obtained by an imaging means such as an ITV camera has been used mainly in the security field. Therefore, there was an effect of cost reduction, such as a reduction in the length of monitoring work performed by the monitoring personnel and a reduction in the number of personnel required for monitoring.

【0003】このような自動監視装置において映像中の
変化を検知する画像処理手法としては、時系列的に連続
して撮影された複数の画像(フレーム)間や、予め作成
した背景画像と現時点の画像との間で差分を求める方法
がある。
[0003] As an image processing method for detecting a change in an image in such an automatic monitoring apparatus, a method of detecting a change between a plurality of images (frames) continuously photographed in time series or a background image created in advance and a current image is used. There is a method of obtaining a difference between the image and the image.

【0004】このように複数の画面の差分を求めて画像
の変化を検出した結果、監視領域内において任意の変化
が見られた場合(多く場合には大きな変化があったと
き)には、監視領域内に何らかの侵入あるいは異常が起
こったものとして警告信号を出す、というのが従来の画
像監視装置であった。
As a result of detecting a change in an image by calculating a difference between a plurality of screens as described above, if an arbitrary change is found in the monitoring area (in many cases, a large change is made), monitoring is performed. It is a conventional image monitoring device to issue a warning signal on the assumption that some kind of intrusion or abnormality has occurred in the area.

【0005】ところが、監視領域内で大きな画像変化が
発生したときに警告を出すといった単純な判定基準を用
いた場合には、天候や日照などの時刻変動等による画像
変化を「侵入有り、警告発」と誤って検知する場合があ
った。
However, when a simple criterion such as issuing a warning when a large image change occurs in the monitoring area is used, an image change due to time fluctuations such as weather and sunshine is determined to be “intrusion detected, warning issued. Was detected incorrectly.

【0006】また、撮像装置であるカメラ自体が持つAGC
(Auto Gain Control)等の自動調整機能の影響によ
って侵入物の位置を正しく検出することができなかっ
た。
[0006] Also, the AGC of the camera itself, which is an imaging device,
(Auto Gain Control) and other automatic adjustment functions could not correctly detect the position of an intruder.

【0007】また、カメラの設置条件によっては、自動車
や電車等の車両がカメラの設置場所近くを通過した場合
や、強い風の影響等によりカメラ自体が振動することに
より画像が変化し、これを「侵入」と誤って検知する場
合もあった。
Further, depending on the installation conditions of the camera, the image changes when a vehicle such as an automobile or a train passes near the installation site of the camera, or when the camera itself vibrates due to strong wind or the like. In some cases, it was incorrectly detected as "intrusion."

【0008】このような誤検知により本来の検知目的で
ある人物や物体の侵入による画像変化だけを正しく検知
できていなかった。
[0008] Due to such erroneous detection, only the image change due to the intrusion of a person or an object, which is the original detection purpose, cannot be correctly detected.

【0009】さらに、撮影の環境条件として、晴れか曇り
か雨か霧かといった天候や、昼か夜かといった日照状態
があるが、これらの環境条件は自動監視装置の検知性能
を大きく左右する要因である。これら要因が存在するに
もかかわらず、カメラで撮影しているだけでは各種条件
を判断することができなかった。
Further, as environmental conditions for photographing, there are weather, such as sunny, cloudy, rain, or fog, and sunshine, such as day or night. These environmental conditions are factors that greatly affect the detection performance of the automatic monitoring device. It is. Despite these factors, various conditions could not be determined just by photographing with a camera.

【0010】したがって、自動監視装置の誤動作を減ら
して性能を高めるためには、他のセンサや人手による入
力作業なる他の手段に頼って天候や日照条件に関する情
報を獲得して自動監視装置の検知条件をその時間におけ
る最適様式に設定するしかなく、手間や設置等の費用が
高くなるという問題点があった。
Therefore, in order to reduce the malfunction of the automatic monitoring device and improve the performance, the information on the weather and the sunshine condition is obtained by relying on other sensors or other means such as manual input operation to detect the automatic monitoring device. There is no other choice but to set the conditions to the optimal style at that time, and there is a problem that labor and installation costs are high.

【0011】[0011]

【発明が解決しようとする課題】以上述べたような従来
の画像監視装置では、画像変化の検出方式や判定基準が
単純であるため、天候や日照条件等の環境条件の変動や
カメラ自体の振動や自動調整機能のために侵入物だけを
正しく検知できないという問題点があった。また、検知
性能を大きく左右する環境条件を他の手段に頼ってしか
獲得することができないという問題点があった。
In the conventional image monitoring apparatus described above, since the detection method and the judgment standard of the image change are simple, fluctuations in environmental conditions such as weather and sunshine conditions and vibrations of the camera itself are performed. And the automatic adjustment function cannot correctly detect only intruders. In addition, there is a problem that environmental conditions that greatly affect the detection performance can be obtained only by relying on other means.

【0012】そこで、本発明は上記従来の問題点に鑑み
てなされたもので、画像から求められる特徴量の統計的
分布から、本来の検知目的である人物や物体の侵入によ
る画像変化と、環境条件の変動やカメラの振動や自動調
整機能による画像変化とを自動的に判定し、また天候や
日照状態を自動的に推定することにより、人物や物体の
侵入以外による誤検知を減少させ、検知性能を大幅に向
上させる画像監視装置および画像監視方法の提供を目的
とする。
In view of the foregoing, the present invention has been made in view of the above-mentioned conventional problems. Based on the statistical distribution of feature amounts obtained from an image, it is possible to reduce the image change caused by the intrusion of a person or an object, which is the original detection object, and the By automatically judging changes in conditions, image changes due to camera vibration and automatic adjustment functions, and automatically estimating the weather and sunshine conditions, it reduces false detections other than intrusion of people or objects, and detects It is an object of the present invention to provide an image monitoring device and an image monitoring method that significantly improve performance.

【0013】[0013]

【課題を解決するための手段】上記の目的を達成するた
めに、本発明の画像監視装置は、任意の撮像装置から得ら
れる画像が入力される画像入力部と、前記画像入力部に
より入力された画像の任意の特徴量の統計的分布を求め
る特徴分布算出部と、前記特徴分布算出部にて求められ
た特徴分布の変化から画像の変化状態を算出する画像変
化算出部と、前記画像変化算出部により求められた変化
状態の算出結果から、環境条件や撮影条件の変動による
画像変化と、環境条件や撮影条件の変動による画像変化
以外による画像変化とを、区別する結果判定部とから構
成される。
In order to achieve the above object, an image monitoring apparatus according to the present invention comprises: an image input unit to which an image obtained from an arbitrary image pickup device is input; A feature distribution calculation unit for calculating a statistical distribution of an arbitrary feature amount of the image, an image change calculation unit for calculating a change state of an image from a change in the feature distribution obtained by the feature distribution calculation unit, Consisting of a result determination unit that distinguishes between an image change caused by a change in environmental conditions or shooting conditions and an image change caused by a change in the environmental conditions or shooting conditions other than an image change based on the calculation result of the change state obtained by the calculation unit Is done.

【0014】また、本発明の画像監視方法は、任意の撮像
装置から得られる画像が入力される画像入力ステップ
と、前記入力された画像の任意の特徴量の統計的分布を
求める特徴分布算出ステップと、前記特徴分布算出ステ
ップにて求められた特徴分布から画像の変化状態を算出
する画像変化算出ステップと、前記画像変化算出ステッ
プにて求められた変化状態の算出結果から、環境条件や
撮影条件の変動による画像変化と、環境条件や撮影条件
の変動に起因しない画像変化とを区別する判定ステップ
とを有する。
In the image monitoring method according to the present invention, there is provided an image inputting step of inputting an image obtained from an arbitrary image pickup device, and a feature distribution calculating step of obtaining a statistical distribution of an arbitrary characteristic amount of the input image. And an image change calculation step of calculating a change state of an image from the feature distribution obtained in the feature distribution calculation step; and an environmental condition or a shooting condition from the calculation result of the change state obtained in the image change calculation step. And a determination step of distinguishing between an image change caused by a change in the image condition and an image change not caused by a change in the environmental condition or the photographing condition.

【0015】また、本発明のコンピュータを動作させる
ためのプログラムを記録したコンピュータ読み取り可能
な記録媒体において、任意の撮像手段から得られる画像
を入力する画像入力機能と、前記画像入力手段に入力さ
れた画像の任意の特徴量の統計的分布を求める特徴分布
算出機能と、前記特徴分布算出手段にて求められた特徴
分布から画像の変化状態を算出する画像変化算出機能
と、前記画像変化算出手段にて求められた変化状態の算
出結果から検知目的の人物や物体の侵入を判定する結果
判定機能とからなるプログラムを記憶し、画像から求め
られる特徴量の統計的分布から、環境条件や撮影条件の
変動による画像変化と、検知目的の人物や物体の侵入に
よる画像変化と区別して検出することを特徴とする。
Also, in a computer-readable recording medium on which a program for operating a computer according to the present invention is recorded, an image input function for inputting an image obtained from an arbitrary image pickup means is provided. A feature distribution calculation function for calculating a statistical distribution of an arbitrary feature amount of an image; an image change calculation function for calculating a change state of an image from the feature distribution obtained by the feature distribution calculation means; From the calculation result of the change state obtained by the above, and a result determination function of determining the intrusion of a detection target person or object. It is characterized in that an image change due to a change and an image change due to the intrusion of a detection target person or object are distinguished and detected.

【0016】また、各機能において得られた種々の情報
は、光ディスクや磁気記録媒体などの記録媒体に記録す
ることができ、また適宜ディスプレイなどの表示手段に
表示することもできる。
Further, various information obtained by each function can be recorded on a recording medium such as an optical disk or a magnetic recording medium, and can be appropriately displayed on a display means such as a display.

【0017】[0017]

【発明の実施の形態】以下、本発明の実施形態の構成に
ついて図面を参照して説明する。
Embodiments of the present invention will be described below with reference to the drawings.

【0018】図1は本発明の第1実施形態の画像監視装
置の実施形態のブロック図であり、図2は本発明の画像
監視方法の第1実施形態のフローチャートであり、図3
は画像内での検知領域の設定例を示す図であり、図4は
特徴分布の算出方法の説明図であり、図5は条件の異な
る2つの時刻において算出された特徴分布の説明図であ
り、図6は撮像装置の自動調整機能が働いた場合の特徴
分布算出の説明図であり、図7は画像変化算出手段から
の結果を用いて画像を補正する方法の説明図であり、図
8は補正後の画像において背景差分処理を行った場合の
説明図である。
FIG. 1 is a block diagram of an image monitoring apparatus according to a first embodiment of the present invention. FIG. 2 is a flowchart of the image monitoring method according to the first embodiment of the present invention.
FIG. 4 is a diagram illustrating a setting example of a detection area in an image, FIG. 4 is an explanatory diagram of a feature distribution calculating method, and FIG. 5 is an explanatory diagram of a feature distribution calculated at two times under different conditions. FIG. 6 is an explanatory diagram of the feature distribution calculation when the automatic adjustment function of the imaging apparatus is activated, and FIG. 7 is an explanatory diagram of a method of correcting an image using the result from the image change calculating unit. FIG. 4 is an explanatory diagram when a background difference process is performed on an image after correction.

【0019】画像監視装置は、画像入力部11と、特徴分
布算出部12と、画像変化追跡部13(画像変化算出
部)と、結果判定部14とが縦続接続されている。
In the image monitoring apparatus, an image input unit 11, a feature distribution calculation unit 12, an image change tracking unit 13 (image change calculation unit), and a result determination unit 14 are cascaded.

【0020】画像入力部11には、ITVカメラなどの任
意の撮像装置101が接続されている。また、結果判定
部14には、判定結果を表示するディスプレイなどの表
示装置102と、判定結果を画像監視装置外部に出力
(送信)する通信装置103とが設けられている。尚、
通信装置103は、無線で情報を所定地まで送信するこ
ともオンラインで送信することもできる。
An arbitrary image pickup device 101 such as an ITV camera is connected to the image input unit 11. In addition, the result determination unit 14 includes a display device 102 such as a display that displays the determination result, and a communication device 103 that outputs (transmits) the determination result to the outside of the image monitoring device. still,
The communication device 103 can transmit information to a predetermined place wirelessly or online.

【0021】このような構成からなる実施形態の動作に
ついて説明する。
The operation of the embodiment having such a configuration will be described.

【0022】(1)撮像装置101によって所定の監視
領域が撮像される。撮像された画像は画像入力部11に
送られる(画像入力ステップ)。
(1) A predetermined monitoring area is imaged by the imaging device 101. The captured image is sent to the image input unit 11 (image input step).

【0023】(2)撮像装置101から連続して出力さ
れる映像信号は、画像入力部11において、逐次A/D変
換される。変換後の映像信号は、画像入力部11内に設
けられる記憶部にディジタル画像あるいは画像列として
蓄積される。また、任意時刻の画像全体の画素、あるいは
任意時刻の任意領域の画素を、後段の特徴分布算出手段
2に出力する(画像入力ステップ)。
(2) The video signal continuously output from the imaging device 101 is sequentially A / D-converted in the image input unit 11. The converted video signal is stored as a digital image or an image sequence in a storage unit provided in the image input unit 11. Further, it outputs the pixels of the entire image at an arbitrary time or the pixels of an arbitrary area at an arbitrary time to the feature distribution calculating means 2 at the subsequent stage (image input step).

【0024】(3)画像入力部11から出力される情報
から、画像入力部11に蓄積される画像あるいは画像列
の任意時刻あるいは任意領域について予め設定されてい
る特徴量を算出し、その統計的な分布を求める(特徴分
布算出ステップ)。
(3) Based on information output from the image input unit 11, a feature amount preset for an arbitrary time or an arbitrary region of an image or an image sequence stored in the image input unit 11 is calculated, and its statistical value is calculated. (A feature distribution calculation step).

【0025】ここで、特徴量とは、各画素あるいは任意領
域において求めることが可能な任意の情報を示す。例え
ば、各画素における明度や色情報といった単純なものか
ら、空間あるいは時間による微分あるいは積分結果、任意
の画像フィルタの重畳結果、平均や分散といった統計量
等、さらには予め作成した背景画像との差分処理等、任意
の物体検出あるいは領域分割処理を行った結果、および
結果から選られる領域のフィレ径や面積、動き量等、画像
から算出可能な任意のスカラー量あるいはベクトル量、
さらには任意の特徴量の組み合わせを用いることが可能
である。
Here, the characteristic amount indicates arbitrary information that can be obtained in each pixel or an arbitrary region. For example, from simple values such as lightness and color information at each pixel, the result of differentiation or integration by space or time, the result of superposition of an arbitrary image filter, statistics such as average or variance, etc., and the difference from the background image created in advance Processing, such as the result of performing any object detection or region division processing, and the fillet diameter and area of the region selected from the result, the amount of motion, etc., any scalar amount or vector amount that can be calculated from the image,
Furthermore, it is possible to use an arbitrary combination of feature values.

【0026】本実施形態では、上述した特徴量のうち、画
像の各時刻・各画素での明度値と、予め作成されている
背景画像での各画素での明度値との差を、特徴量として
用いる。
In the present embodiment, the difference between the brightness value at each time and each pixel of the image and the brightness value at each pixel in the background image created beforehand is determined by the feature amount. Used as

【0027】つまり、撮像された画像と背景画像との差
分処理により、画像変化を検出する方式が基礎となって
おり、かつ画像は各画素での明度情報からなり(濃淡画
像)、また何らかの手段により背景画像が作成されてい
るものとする。
That is, based on a method of detecting an image change by a difference process between a captured image and a background image, the image is composed of lightness information of each pixel (shade image), It is assumed that the background image is created by the following.

【0028】背景画像の作成方式としては任意の方法が
可能である。例えば、(ア)1時刻(フレーム)、あるい
は特定の時刻だけ前の画像をそのまま背景画像として用
いる(この場合、連続差分方式となる)、(イ)人物や物
体の侵入がないと分かっている画像列から1つの画像を
抜き出して用いる、(ウ)その画像列の各画素で明度、あ
るいは任意の特徴量の平均や重み付き和を求める等任意
の演算を行って作成する、(エ)撮影した画像列(侵入
があるかどうか不明な場合でも構わない)において各画
素の明度、あるいは任意の特徴量の時系列に対してメデ
ィアンフィルタやカルマンフィルタを適用するといった
任意の演算を行うことにより作成すること、があげられ
る。
Any method can be used as a method of creating the background image. For example, (a) one time (frame) or an image preceding by a specific time is used as a background image as it is (in this case, a continuous difference method). (A) It is known that there is no intrusion of a person or an object. One image is extracted from the image sequence and used. (C) The image is created by performing any operation such as calculating the brightness or the average or a weighted sum of any feature amount at each pixel of the image sequence. By performing an arbitrary operation such as applying a median filter or a Kalman filter to the brightness of each pixel or a time series of an arbitrary feature amount in an image sequence (it may be unknown whether there is an intrusion or not). That is.

【0029】また、このようにして作成された背景画像
は、時刻によって更新されても良いし、一度作られた背景
画像を使用し続けて更新しなくとも良い。
The background image created in this manner may be updated according to the time, or the background image created once may not be used and updated.

【0030】今、時刻tに撮影された画像の画素(x,
y)での明度値をI(x,y,t)、その時刻における背
景画像の同じ位置の画素の明度値をB(x,y,t)と
する(背景画像は時間的に更新される場合、tが変化す
れば背景画像Bも変化する)。
Now, the pixel (x,
The brightness value at y) is I (x, y, t), and the brightness value of the pixel at the same position in the background image at that time is B (x, y, t) (the background image is updated temporally). In this case, if t changes, the background image B also changes).

【0031】特徴量である背景画像との差分値D(x,
y,t)は、以下の式(1)にて求められる。
A difference value D (x,
y, t) is obtained by the following equation (1).

【0032】[0032]

【数1】 …(1) ここで、背景との差を表す値Dは、上記のような減算によ
って求めても良いし、背景画素の明度値Bで除算して背景
との変化比として求めても良い等、任意の演算によって
求めることができる。
(Equation 1) (1) Here, the value D representing the difference from the background may be obtained by the above-described subtraction, or may be obtained by dividing by the brightness value B of the background pixel to obtain the change ratio with respect to the background. , By any operation.

【0033】時刻tでの特徴分布F(t)は、画像中に設
定されている検知領域Rに属する各画素(x,y)につい
て特徴量を求め、この統計的な分布を求めることにより
算出される。検知領域Rは、画像全体でも良いし、図3に
示すように任意の形状に設定することができる。
The feature distribution F (t) at time t is calculated by obtaining a feature amount for each pixel (x, y) belonging to the detection area R set in the image, and obtaining this statistical distribution. Is done. The detection region R may be the entire image or may be set to any shape as shown in FIG.

【0034】ここでは、特徴分布Fを単純に特徴量Dのヒ
ストグラムとして求めると、図4のグラフが得られる。
ヒストグラムとして特徴分布を求める場合を記述すれば
以下の通りである。
Here, if the feature distribution F is simply obtained as a histogram of the feature amount D, the graph of FIG. 4 is obtained.
The case where a feature distribution is obtained as a histogram is described as follows.

【0035】[0035]

【数2】 である。(Equation 2) It is.

【0036】このようにして、任意の時刻tでの特徴分
布F(t)が得られることになる。
In this way, a feature distribution F (t) at an arbitrary time t is obtained.

【0037】図4では、検知領域が矩形に設定されてい
て、その検知領域内に画像が図示されている。また、撮影
した画像が背景画像に比べて変化がない場合であるた
め、特徴分布Fは単峰で平均0の正規分布に近い形となっ
ている。
In FIG. 4, the detection area is set to be rectangular, and an image is shown in the detection area. In addition, since the captured image has no change compared to the background image, the feature distribution F has a shape that is close to a normal distribution with a single peak and an average of 0.

【0038】(4)画像変化追跡部13では、特徴分布
算出部12において上記のように算出された任意時刻t
での特徴分布の時間的な変化を解析し、その結果を次の
結果結果判定部14に伝える(画像変化算出ステッ
プ)。
(4) In the image change tracking unit 13, the arbitrary time t calculated by the feature distribution calculation unit 12 as described above
Is analyzed, and the result is transmitted to the next result result determination unit 14 (image change calculation step).

【0039】今、図5に示すように、2つの時刻t1、t2
で特徴分布F(t1)、F(t2)が得られている場合を
例にして、画像変化算出部13での処理について説明す
る。
Now, as shown in FIG. 5, two times t1, t2
The process in the image change calculation unit 13 will be described by taking as an example the case where the characteristic distributions F (t1) and F (t2) are obtained.

【0040】図5では、時刻t1では人物や車両等の侵
入物はなく、背景との変化はほとんどない。これに対し
て時刻t2においては、雲が晴れる等の日照強度の変動
があって画面全体で明るくなるという環境変動があると
ともに、人物(背景より明度が暗い)の侵入がある場合
を示している。
In FIG. 5, at time t1, there are no intruders such as persons and vehicles, and there is almost no change from the background. On the other hand, at time t2, there is a change in the sunshine intensity such as clearing of the clouds and the like, and there is an environmental change such that the entire screen becomes brighter, and a person (brighter than the background) enters. .

【0041】時刻t1では、時刻t1における撮像画像
と、背景画像との差(明度差)がほとんどないため、前述
した図4と同様に特徴分布F(t1)は平均0の単峰の
分布となる。
At time t1, since there is almost no difference (brightness difference) between the captured image at time t1 and the background image, the characteristic distribution F (t1) has a single-peak distribution having an average of 0 as in FIG. Become.

【0042】これに対して時刻t2で得られる特徴分布
F(t2)は、人物以外の背景領域の各画素の明度値が一
律に大きくなる(明るくなる)ため、背景部分からくる
分布の平均値は0よりも大きくなり(p22)、人物領
域による分布は背景よりも暗い部分に小さくできること
になり(p21)、特徴分布F(t2)はこれら2つの分
布を合わせた二峰性のものとして得られる。
On the other hand, the feature distribution obtained at time t2
In F (t2), since the brightness value of each pixel in the background region other than the person becomes uniformly large (brighter), the average value of the distribution coming from the background portion becomes larger than 0 (p22), and the distribution by the person region Can be reduced to a portion darker than the background (p21), and the feature distribution F (t2) is obtained as a bimodal combination of these two distributions.

【0043】ここで、従来の単純な撮像画像と背景画像
との差分処理によって画像変化を検出する。
Here, an image change is detected by a conventional simple difference processing between a captured image and a background image.

【0044】つまり各画素でのDの値の大小で変化を検
出する場合では、時刻t2では背景そのものの明度変化
が侵入人物による明度変化よりも大きいため、単に変化
量の大きさだけで判定した場合には、侵入人物だけでな
く背景全体を画像変化として誤って検出してしまう等、
侵入人物だけを正しく検出できない。
That is, when the change is detected based on the magnitude of the value D at each pixel, the change in the brightness of the background itself is larger than the change in the brightness by the intruding person at the time t2, and thus the determination is made based only on the magnitude of the change. In such a case, not only the intruder but also the entire background is erroneously detected as an image change.
Only intruders cannot be detected correctly.

【0045】このような背景差分における弊害を避ける
ため、画像変化算出部13では、背景領域による特徴分布
のピーク(峰)を各時刻で算出することにより、背景変
動による画像変化と物体の侵入による画像変化とを区別
している。
In order to avoid such an adverse effect on the background difference, the image change calculation unit 13 calculates the peak (peak) of the characteristic distribution due to the background region at each time, thereby obtaining the image change due to the background change and the intrusion of the object. It is distinguished from image change.

【0046】まず、各時刻での特徴分布のピークを求め
る。時刻t1では1つしかないため簡単にピークが得ら
れるが、時刻t2ではピークが2つ(複数)あるため、各
々のピークを区別する必要がある。
First, the peak of the characteristic distribution at each time is obtained. Since there is only one peak at time t1, a peak can be easily obtained. However, at time t2, since there are two (plural) peaks, it is necessary to distinguish each peak.

【0047】ピークを区別して求める方法としては、最
も単純には特徴分布での極大値となるところをピークと
見做す方法がある。また、複雑な分布を複数の正規分布
等の和で近似するEMアルゴリズムといった方法がある
(参考文献1、2参照方)。
As a method of obtaining peaks by distinction, there is a method in which the maximum value in the feature distribution is most simply regarded as a peak. In addition, there is a method such as an EM algorithm that approximates a complex distribution by a sum of a plurality of normal distributions (see References 1 and 2).

【0048】[参考文献1]…A. Dempster, N. Laird, an
d D. Rubin, Maximum likelihood from incomplete dat
a via the EM algorithm, Journal of the Royal Stati
sticalSociety, 39 (Series B): 1-38, 1977. [参考文献2]…N. Friedman, S. Russell, Image Segmen
tation in video sequences: A probabilistic approac
h, Proc. Thirteenth Conf. on Uncertainty inArtific
ial Intelligence (UAI), 1997 この方法を用いると、平均μ、標準偏差σの正規分布p
(x)を以下のように表し、
[Reference 1] A. Dempster, N. Laird, an
d D. Rubin, Maximum likelihood from incomplete dat
a via the EM algorithm, Journal of the Royal Stati
sticalSociety, 39 (Series B): 1-38, 1977. [Ref. 2]… N. Friedman, S. Russell, Image Segmen
tation in video sequences: A probabilistic approac
h, Proc.Thirteenth Conf.on Uncertainty in Artific
ial Intelligence (UAI), 1997 Using this method, a normal distribution p with mean μ and standard deviation σ
(X) is represented as follows,

【数3】 …(3) p21、p22に相当する正規分布の平均、標準偏差、重
みといったパラメータをμ21、σ21、w21と、μ2
2、σ22、w22とで表せば、特徴分布F(t2)は、以
下のように2つの正規分布の重み付き和で近似でき、p2
1とp22とを区別することができる。
(Equation 3) (3) Parameters such as the mean, standard deviation, and weight of the normal distribution corresponding to p21 and p22 are represented by μ21, σ21, w21, and μ2.
2, σ22, w22, the feature distribution F (t2) can be approximated by a weighted sum of two normal distributions as follows:
1 and p22 can be distinguished.

【0049】[0049]

【数4】 …(4) ここで、時刻t2において人物侵入領域だけを正しく検
知できるようにするには、複数(この例では2つ)の分布
のうちのどちらが背景領域によるものかを判定する必要
がある。
(Equation 4) (4) Here, in order to correctly detect only the human intrusion area at the time t2, it is necessary to determine which of the plural (two in this example) distributions is caused by the background area.

【0050】このために、以前の時刻t1での背景領域
による分布(この例の場合p1しかない)との分布の近
さを求め、近いもの同士が背景領域のよる分布であると
認定して、各時刻での背景領域の分布を算出する。分布
の近さSとしては、例えば各分布でのパラメータ同士のユ
ークリッド距離を以下のように算出することができる。
For this purpose, the distribution close to the distribution by the background region at the previous time t1 (in this example, there is only p1) is determined, and it is determined that the close distributions are distributions by the background region. , The distribution of the background area at each time is calculated. As the distribution closeness S, for example, the Euclidean distance between parameters in each distribution can be calculated as follows.

【0051】[0051]

【数5】 …(5) 分布の近さSとしては、パラメータ間の距離だけでなく、
各分布を用いての任意の演算によって算出することが可
能である。
(Equation 5) ... (5) As the proximity S of the distribution, not only the distance between parameters but also
It is possible to calculate by any calculation using each distribution.

【0052】このようにして近さSをp21、p22で求
め、p1と近い方が背景領域による分布であることがわ
かる(この例ではp22となる。図5右側の下向の矢
印)。
In this way, the closeness S is obtained by p21 and p22, and it can be seen that the distribution closer to p1 is the distribution due to the background area (p22 in this example; the downward arrow on the right side in FIG. 5).

【0053】以上のようにして、画像変化追跡部13で
は、各時刻での背景領域の分布を追跡し、その結果を次の
結果判定部14に送る。
As described above, the image change tracking section 13 tracks the distribution of the background area at each time, and sends the result to the next result determination section 14.

【0054】以上述べた実施形態では、背景での環境変
動がある場合について説明したが、他にもカメラ等の撮
像手段が持つAGC等の自動調整機能により画像が変化
を起こす場合がある。
In the embodiment described above, the case where there is an environmental change in the background has been described. However, an image may be changed by an automatic adjustment function such as AGC of an image pickup means such as a camera.

【0055】図6では、各時刻t1〜t4での特徴分布
列F(t1)〜F(t4)がそれぞれ撮像された画像の右
側(図中)に求められ記載されているが、この例では環
境変動(撮像領域の変更)がないにもかかわらず、検知
領域内に白色の車両が侵入することにより、画像全体に
明度変化が発生する場合を示している。
In FIG. 6, the characteristic distribution sequences F (t1) to F (t4) at the respective times t1 to t4 are obtained and described on the right side (in the figure) of the captured image. This shows a case in which the brightness of the entire image changes due to the intrusion of a white vehicle into the detection area despite the environmental change (change of the imaging area).

【0056】侵入前の時刻t1では、撮影した画像と背
景画像との間に大きな変化がないため、特徴分布F(t
1)は、図4と同様に単峰の分布として得られている。
At time t1 before intrusion, there is no significant change between the photographed image and the background image, so that the feature distribution F (t
1) is obtained as a single-peak distribution similarly to FIG.

【0057】続いて、時刻t2、t3、t4と経過するに
つれて車両が進入してくると、車両が白色であって、その
撮像される領域(車両の部分の画素)が背景に比べて明
るく、かつ大きな領域として捉えられているため、特徴分
布のプラスの部分にもうひとつのピーク(峰)ができ始
めて徐々に大きくなり、双峰性の特徴分布が得られる。
Subsequently, when the vehicle enters as time t2, t3, and t4 elapse, the vehicle is white, and the imaged area (pixels of the vehicle) is brighter than the background. Further, since it is regarded as a large area, another peak (peak) starts to be formed in a plus portion of the feature distribution and gradually increases, so that a bimodal feature distribution is obtained.

【0058】このとき、明るい(白色)車両領域の侵入
により、カメラのAGC機能が働いて画像全体を暗くする方
向に明度を補正してしまうため、本来環境変化のない背
景領域においても、明度が暗くなってしまう。このよう
にカメラの自動調整機能が働く場合においては従来の監
視装置では、画像変化から侵入する物体だけを正しく検
知することができなかったが、本発明の画像変化追跡部
13を用いることによって、背景が変動している場合で
も特徴分布を時間的に追跡した上で(図6グラフの下向
の矢印)、次の工程で詳細を説明する結果判定を行うこ
とにより、侵入物の領域か背景領域かを区別して検出す
ることができる。
At this time, the invasion of a bright (white) vehicle area causes the AGC function of the camera to work, thereby correcting the brightness in a direction to darken the entire image. It will be dark. In the case where the automatic adjustment function of the camera works as described above, the conventional monitoring device cannot correctly detect only the intruding object from the image change, but by using the image change tracking unit 13 of the present invention, Even if the background fluctuates, the feature distribution is tracked over time (downward arrow in the graph of FIG. 6), and a result determination is performed to explain the details in the next step. An area can be detected separately.

【0059】(5)最後に、結果判定部14では、時系列
的に前の画像変化追跡部13にて求められた画像変化の
追跡情報を用いて画像処理を行った後に、撮影された画
像中に人物や物体等の侵入があるかどうかを判定する
(判定ステップ)。
(5) Finally, the result determination unit 14 performs image processing using the image change tracking information obtained by the previous image change tracking unit 13 in chronological order, and then performs image processing. It is determined whether a person, an object, or the like is invading inside (determination step).

【0060】図5(時刻t2において背景変動と人物侵
入がある場合)における結果判定を説明する。
The result determination in FIG. 5 (when there is a background change and a person invasion at time t2) will be described.

【0061】画像変化算出手段3では、背景領域の特徴
分布が追跡されているため(図5中p1→p22)、こ
の情報を用いて時刻t2での画像を補正することによ
り、背景変動による明度(特徴量)変化の影響を取り除
く。
Since the image distribution calculation means 3 tracks the feature distribution of the background area (p1 → p22 in FIG. 5), by using this information to correct the image at time t2, the brightness due to the background fluctuation is obtained. (Feature) Removes the effect of the change.

【0062】つまり、時刻t2での背景領域の分布p2
2の平均値μ22を用いて、この値だけ画像の各画素の
明度値を減算して背景変動分を補正すると、図7下段に
示すように背景部分の明度は予め作成されている背景画
像と同じにすることができる。このとき背景領域の分布
はp22´となり、平均値もμ22´となる。なお、補正
前の時刻t2における画像は図7中段の通りである。
That is, the distribution p2 of the background area at time t2
When the background variation is corrected by subtracting the brightness value of each pixel of the image by this value using the average value μ22 of 2, the brightness of the background portion becomes the same as the background image created in advance as shown in the lower part of FIG. Can be the same. At this time, the distribution of the background region is p22 ', and the average value is also μ22'. The image at the time t2 before the correction is as shown in the middle part of FIG.

【0063】ここで、画像を補正する方法としては、本実
施形態に示す通り、特徴量として撮像された画像と背景
画像との差Dを用いる場合には、背景分布の平均値だけ各
画素の明度値から減算することもでき、また撮像された
画素の明度値と背景画素の明度値との変化比など他の特
徴量を用いる場合には、その特徴算出方法に応じた任意
の方式により画像を補正することができる。
Here, as a method of correcting an image, as shown in the present embodiment, when the difference D between the captured image and the background image is used as the feature amount, the average value of each pixel is equal to the average value of the background distribution. It can also be subtracted from the brightness value, and when using other feature amounts such as the change ratio between the brightness value of the imaged pixel and the brightness value of the background pixel, the image is obtained by an arbitrary method according to the feature calculation method. Can be corrected.

【0064】画像を補正することなく背景画像との差分
処理を行えば、前述したとおり、背景全体が画像変化とし
て検出される恐れがある。しかしながら、本実施形態の
ように、補正した後の画像を用いて背景画像との差分処
理を行えば、図8に示すように背景変動は検出されず、侵
入した物体の領域のみが検出されることになる。
If the difference processing with the background image is performed without correcting the image, the entire background may be detected as an image change as described above. However, if the difference processing with the background image is performed using the corrected image as in the present embodiment, the background change is not detected as shown in FIG. 8, and only the area of the intruding object is detected. Will be.

【0065】このようにして、日照変化といった環境変
動やカメラの自動調整機能により背景部分の画像が変化
してしまった場合でも、監視装置本来の検知目的である
人物や物体の侵入だけを正しく検知することができ、使
用者に対して誤って警告を発する等の誤動作を大幅に減
少させることができる。
In this way, even if the background image changes due to environmental changes such as changes in sunlight or the automatic adjustment function of the camera, only the intrusion of a person or object, which is the original detection purpose of the monitoring device, is correctly detected. Erroneous operation such as erroneously issuing a warning to the user can be greatly reduced.

【0066】次に、本発明の画像監視方法の第2実施形
態の構成、動作について図9を参照して説明する。
Next, the configuration and operation of an image monitoring method according to a second embodiment of the present invention will be described with reference to FIG.

【0067】第2実施形態の特徴は、差分処理の結果か
ら環境条件や撮像条件の変化を推定することにより、検
出された画像変化が検知目的であるか否かの判定を行い
信頼性を向上させることである。
The feature of the second embodiment is that, by estimating changes in environmental conditions and imaging conditions from the result of the difference processing, it is determined whether or not the detected image change is a detection purpose, thereby improving reliability. It is to make it.

【0068】図9は、種々の条件において撮像された画
像から算出される特徴分布図である。
FIG. 9 is a characteristic distribution diagram calculated from images captured under various conditions.

【0069】撮像された画像と背景画像との差分処理に
よって画像中の変化を検出し、人物や物体の侵入を検知
しようとする場合、撮影した画像が背景画像に対してほ
とんど変化していない時には、特徴分布(ここでは、これ
までの例と同様に、背景画像との明度差を特徴量として
用いる場合について説明を行う)は、平均値0の単峰の
正規分布状になり(図9上段)、日照変動等の環境変動
だけの影響により撮影した画像全体の明度が変わる(例
えば暗くなる)場合には、特徴分布の形は保ったままで
平均値が0から例えば右側にずれる(図9中段)。
When a change in an image is detected by a difference process between a captured image and a background image to detect the intrusion of a person or an object, if the captured image has hardly changed from the background image, The characteristic distribution (here, as in the previous examples, the case where the brightness difference from the background image is used as the characteristic amount will be described) is a single-peak normal distribution having an average value of 0 (the upper part of FIG. 9). 9), when the brightness of the entire captured image changes (for example, becomes darker) due to only environmental fluctuations such as sunlight fluctuations, the average value shifts from 0 to, for example, the right side while maintaining the shape of the characteristic distribution (the middle part of FIG. 9). ).

【0070】ただし、図9上段、中段の図では、侵入物は
ないものと考え、特徴分布は背景領域の特徴分布と等し
いものとする。
However, in the upper and middle diagrams of FIG. 9, it is assumed that there is no intruder, and the feature distribution is equal to the feature distribution of the background region.

【0071】また、カメラ等の撮像手段の設置条件が悪
く、自動車や電車等の車両が近くを通過した場合や、強い
風の影響等によりカメラ自体が振動する場合には、画像
中に撮影されている背景物体の位置がずれることによ
り、特徴分布の平均値は同じままで分散が大きくなる。
Further, when the installation conditions of the imaging means such as a camera are poor and a vehicle such as an automobile or a train passes nearby, or when the camera itself vibrates due to the influence of a strong wind or the like, the image is taken in the image. When the position of the background object shifts, the variance increases while the average value of the feature distribution remains the same.

【0072】これらのことから、撮影した画像において
求めた特徴分布の変化から逆に、その時刻での環境条件
や撮影条件の変化を特徴分布の変化から推定することが
できる。
From these facts, conversely, from the change in the characteristic distribution obtained in the photographed image, the change in the environmental condition or the photographing condition at that time can be estimated from the change in the characteristic distribution.

【0073】例えば、背景領域の特徴分布の平均値だけ
が変化した場合には日照強度の変動など環境条件が変化
しており、また平均値はそのままで分散だけが変化した
場合にはカメラが振動するなど撮影条件が変化している
と判定することができる。
For example, when only the average value of the feature distribution in the background area changes, environmental conditions such as fluctuations in sunlight intensity change. When only the variance changes while the average value remains unchanged, the camera shakes. For example, it can be determined that the shooting condition has changed.

【0074】このようにして、背景差分等の画像処理に
よって画像変化を検出する場合、特徴分布からその時刻
での環境条件や撮影条件の変化を推定することにより、
検出された画像変化が真に人物や物体の侵入によるもの
なのか否か、環境条件や撮影条件の変化によるものなの
か否かを判断するための指標として用いることができ
る。
As described above, when an image change is detected by image processing such as background subtraction, a change in environmental conditions and photographing conditions at that time is estimated from the characteristic distribution.
This can be used as an index for determining whether or not the detected image change is truly due to the intrusion of a person or an object, or whether it is due to a change in environmental conditions or imaging conditions.

【0075】また、環境条件や撮影条件の変化が起こっ
ていると判定される場合には、使用者に対して警告を発
しないようにするなど、画像監視装置の誤動作を大幅に
減少させることができる。
Further, when it is determined that a change in environmental conditions or photographing conditions has occurred, it is possible to greatly reduce malfunctions of the image monitoring apparatus, for example, by not giving a warning to the user. it can.

【0076】次に、本発明の画像監視方法の構成、動作に
ついて図10を参照して説明する。
Next, the configuration and operation of the image monitoring method of the present invention will be described with reference to FIG.

【0077】第3実施形態の特徴は、差分処理の結果か
ら画像を撮影している時刻における天候や日照状態を推
定し、真の検知目的である対象物の抽出の信頼性を向上
させたことである。
The feature of the third embodiment is that the weather and the sunshine state at the time when the image is photographed are estimated from the result of the difference processing, and the reliability of the extraction of the object as a true detection purpose is improved. It is.

【0078】図10は、様々な天候や日照状態(時刻)
において算出された特徴分布図である。
FIG. 10 shows various weather and sunshine conditions (time).
FIG. 6 is a feature distribution diagram calculated in FIG.

【0079】画像変化算出手段3において、複雑な形状
の特徴分布であっても複数の正規分布の和で近似できる
方法があることは第1実施形態でも述べたが、このよう
にして特徴分布の各ピークを区別することにより、画像
を撮影している時刻での天候や日照状態を推定すること
ができる。
As described in the first embodiment, there is a method in which the image change calculating means 3 can approximate a feature distribution having a complicated shape by a sum of a plurality of normal distributions. By distinguishing each peak, the weather and the sunshine state at the time of capturing the image can be estimated.

【0080】図10上段図は、画像中に車両の侵入があ
る場合の特徴分布の例を示しているが(背景変動はない
ものとする)、第1実施形態でも述べたように、物体の侵
入がある場合には背景領域によるピークと侵入物領域に
よるピークとの2つ(複数)の分布が足し合わされたよ
うな多峰性の特徴分布になる。
The upper diagram in FIG. 10 shows an example of the characteristic distribution when the vehicle is invading in the image (it is assumed that there is no background fluctuation), but as described in the first embodiment, When there is an intrusion, a multimodal feature distribution is obtained in which two (plural) distributions of a peak due to the background region and a peak due to the intruding object region are added.

【0081】この上段図では、天候が曇りである場合を
想定しているが、図10中段図のように、天候が晴れであ
る場合には、侵入物体の「影」が画像中に映り、この影の
領域による分布が特徴分布内の背景による分布よりも暗
いところに現れる。
In the upper diagram, it is assumed that the weather is cloudy. However, as shown in the middle diagram of FIG. 10, when the weather is fine, the “shadow” of the intruding object is reflected in the image. The distribution due to the shadow region appears at a place darker than the distribution due to the background in the feature distribution.

【0082】また、時刻が変わって夜間になった場合、車
両がヘッドライトを点灯するため、このヘッドライトの
映り込み領域の分布が他の分布よりも明るいところに現
れる。
When the time changes and it becomes nighttime, the vehicle turns on the headlights, so that the distribution of the reflection area of the headlights appears brighter than other distributions.

【0083】さらに、図示しないが、雨や雪が降っている
ような天候であれば、雨滴等による小さな画像変化が多
数現れることにより、観測される背景領域による特徴分
布が晴れや曇りのときに比べて、その分散が大きく観測
される等、特徴分布の性質が変化する可能性がある。
Further, although not shown, if the weather is rainy or snowy, many small image changes due to raindrops or the like appear, so that the characteristic distribution of the observed background region can be compared with when the feature distribution is fine or cloudy. Therefore, the nature of the feature distribution may change, for example, the variance is greatly observed.

【0084】このようにして、特定の特徴分布のピーク
や性質を計測することにより、画像を撮影した時刻が昼
間であるか夜間であるかといった時間帯(日照条件)に
関する情報や、その時刻において撮像領域が晴れている
か曇っているか雨や雪が降っているか霧が出ているかと
いった天候状態を推定することができる。
By measuring the peaks and properties of a specific feature distribution in this manner, information on the time zone (sunshine condition) such as whether the time when the image was taken is daytime or nighttime, It is possible to estimate weather conditions such as whether the imaging area is sunny, cloudy, rainy, snowy, or fogy.

【0085】また、他の各種センサや人手による撮像環
境などの入力作業といった手段に頼らずとも、撮影した
画像から天候や日照状態を推定でき、推定結果に基づい
て画像監視装置の条件を最適に設定することにより(カ
メラの感度の上げ下げや、検知領域の再設定等)、誤動作
を大幅に減少させ検知目的対象物の検知の信頼性を向上
させることができる。
Further, the weather and the sunshine state can be estimated from the photographed image without depending on other various sensors or means such as manual input operation of the imaging environment, and the conditions of the image monitoring apparatus can be optimized based on the estimation result. By setting (such as raising or lowering the sensitivity of the camera or resetting the detection area), malfunctions can be greatly reduced and the reliability of detection of the detection target object can be improved.

【0086】尚、本発明は上記実施形態には限定されず、
その主旨を逸脱しない範囲で種々変形して実施できるこ
とは言うまでもない。例えば、撮像装置を複数設けるこ
とにより、検知対象物を特定する信頼性を向上させるこ
とができる。
The present invention is not limited to the above embodiment,
It goes without saying that various modifications can be made without departing from the spirit of the invention. For example, by providing a plurality of imaging devices, the reliability of specifying a detection target can be improved.

【0087】[0087]

【発明の効果】以上説明したように本発明によれば、画
像監視装置の検知性能を向上させることができる。
As described above, according to the present invention, the detection performance of the image monitoring device can be improved.

【図面の簡単な説明】[Brief description of the drawings]

【図1】 本発明の画像監視装置の第1実施形態のブロ
ック図。
FIG. 1 is a block diagram of a first embodiment of an image monitoring apparatus according to the present invention.

【図2】 本発明の画像監視方法の第1実施形態のフロ
ーチャート。
FIG. 2 is a flowchart of a first embodiment of the image monitoring method of the present invention.

【図3】 画像内での検知領域の設定例を示す図。FIG. 3 is a diagram showing an example of setting a detection area in an image.

【図4】 特徴分布の算出方法の説明図。FIG. 4 is an explanatory diagram of a feature distribution calculation method.

【図5】 条件の異なる2つの時刻において算出された
特徴分布の説明図。
FIG. 5 is an explanatory diagram of a characteristic distribution calculated at two times under different conditions.

【図6】 撮像装置の自動調整機能が働いた場合の特徴
分布の算出の説明図。
FIG. 6 is an explanatory diagram of calculation of a feature distribution when an automatic adjustment function of an imaging device is activated.

【図7】 画像変化算出手段からの結果を用いて画像を
補正する方法の説明図。
FIG. 7 is an explanatory diagram of a method of correcting an image using a result from an image change calculation unit.

【図8】 補正後の画像において背景差分処理を行った
場合の説明図。
FIG. 8 is an explanatory diagram in the case where background subtraction processing is performed on a corrected image.

【図9】 本発明の画像監視方法の第2実施形態を説明
する種々の条件において撮像された画像から算出される
特徴分布図。
FIG. 9 is a feature distribution diagram calculated from images taken under various conditions for explaining a second embodiment of the image monitoring method of the present invention.

【図10】 本発明の画像監視方法の第3実施形態を説
明する様々な天候や日照状態において算出された特徴分
布図。
FIG. 10 is a feature distribution diagram calculated in various weather and sunshine states for explaining a third embodiment of the image monitoring method of the present invention.

【符号の説明】[Explanation of symbols]

11 画像入力部 12 特徴分布算出部 13 画像変化追跡部(画像変化算出部) 14 結果判定部 101 撮像装置 102 表示装置 103 通信装置 DESCRIPTION OF SYMBOLS 11 Image input part 12 Feature distribution calculation part 13 Image change tracking part (image change calculation part) 14 Result determination part 101 Imaging device 102 Display device 103 Communication device

───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C054 FC01 FC13 FC16 GB01 HA18 5C084 AA02 AA07 AA08 BB06 CC16 CC19 DD11 EE02 FF02 FF03 GG07 GG12 GG20 GG42 GG52 GG56 GG57 GG68 GG78 HH10 5C087 AA19 BB03 BB18 DD05 EE07 FF01 FF02 FF16 GG02 GG03 GG22 GG23 GG30  ──────────────────────────────────────────────────続 き Continued on the front page F-term (reference) GG22 GG23 GG30

Claims (8)

【特許請求の範囲】[Claims] 【請求項1】任意の撮像装置から得られる画像が入力さ
れる画像入力部と、前記画像入力部により入力された画
像の任意の特徴量の統計的分布を求める特徴分布算出部
と、前記特徴分布算出部にて求められた特徴分布の変化
から画像の変化状態を算出する画像変化算出部と、前記
画像変化算出部により求められた変化状態の算出結果か
ら、環境条件や撮影条件の変動による画像変化と、環境条
件や撮影条件の変動による画像変化以外による画像変化
とを、区別する結果判定部とが設けられることを特徴と
する画像監視装置。
An image input unit to which an image obtained from an arbitrary image pickup device is input; a feature distribution calculating unit for obtaining a statistical distribution of an arbitrary feature amount of the image input by the image input unit; An image change calculation unit that calculates a change state of an image from a change in the feature distribution obtained by the distribution calculation unit; and a calculation result of the change state obtained by the image change calculation unit. An image monitoring device, comprising: a result determination unit that distinguishes between an image change and an image change other than an image change due to a change in environmental conditions or imaging conditions.
【請求項2】前記画像変化算出部において、前記特徴分
布算出部にて求められた特徴分布の性質の変化を算出す
ることにより環境条件や撮影条件の変化を推定すること
を特徴とする請求項1に記載の画像監視装置。
2. The method according to claim 1, wherein said image change calculating section estimates changes in environmental conditions and photographing conditions by calculating changes in properties of the characteristic distribution obtained by said characteristic distribution calculating section. 2. The image monitoring device according to 1.
【請求項3】前記画像変化算出部において、前記特徴分
布算出部にて求められた特徴分布の特定の性質から天候
や日照状態を推定することを特徴とする請求項1に記載
の画像監視装置。
3. The image monitoring apparatus according to claim 1, wherein the image change calculating unit estimates weather and sunshine state from a specific property of the feature distribution obtained by the feature distribution calculating unit. .
【請求項4】前記環境条件や撮影条件の変動に起因しな
い画像変化とは、検知目的となる人物や物体の画像内へ
の侵入であることを特徴とする請求項1に記載の画像監
視方法。
4. The image monitoring method according to claim 1, wherein the image change not caused by the change in the environmental condition or the photographing condition is an intrusion of a detection target person or object into the image. .
【請求項5】任意の撮像手段から得られる画像が入力さ
れる画像入力ステップと、前記入力された画像の任意の
特徴量の統計的分布を求める特徴分布算出ステップと、
前記特徴分布算出ステップにて求められた特徴分布から
画像の変化状態を算出する画像変化算出ステップと、前
記画像変化算出ステップにて求められた変化状態の算出
結果から、環境条件や撮影条件の変動による画像変化と、
環境条件や撮影条件の変動に起因しない画像変化とを区
別する判定ステップとを有することを特徴とする画像監
視方法。
5. An image inputting step of inputting an image obtained from an arbitrary image pickup means; a feature distribution calculating step of obtaining a statistical distribution of an arbitrary feature amount of the input image;
An image change calculation step of calculating a change state of an image from the feature distribution calculated in the feature distribution calculation step; and a change in environmental conditions and photographing conditions based on the calculation result of the change state calculated in the image change calculation step. Image change due to
A determining step of distinguishing between an image change not caused by a change in an environmental condition or a photographing condition.
【請求項6】前記環境条件や撮影条件の変動に起因しな
い画像変化とは、検知目的となる人物や物体の画像内へ
の侵入であることを特徴とする請求項5に記載の画像監
視方法。
6. The image monitoring method according to claim 5, wherein the image change not caused by a change in the environmental condition or the photographing condition is an intrusion of a detection target person or object into the image. .
【請求項7】前記画像変化算出ステップにて求められた
特徴分布の性質の変化を算出することにより環境条件や
撮影条件の変化を推定することを特徴とする請求項5に
記載の画像監視方法。
7. The image monitoring method according to claim 5, wherein a change in an environmental condition or a photographing condition is estimated by calculating a change in a property of the characteristic distribution obtained in the image change calculating step. .
【請求項8】前記特徴分布算出ステップにて求められた
特徴分布の特定の性質から天候や日照状態を推定するこ
とを特徴とする請求項5に記載の画像監視方法。
8. The image monitoring method according to claim 5, wherein the weather and sunshine state are estimated from specific characteristics of the characteristic distribution obtained in the characteristic distribution calculating step.
JP34934599A 1999-12-08 1999-12-08 Image monitoring apparatus and image monitoring method Expired - Fee Related JP3567114B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP34934599A JP3567114B2 (en) 1999-12-08 1999-12-08 Image monitoring apparatus and image monitoring method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP34934599A JP3567114B2 (en) 1999-12-08 1999-12-08 Image monitoring apparatus and image monitoring method

Publications (2)

Publication Number Publication Date
JP2001169270A true JP2001169270A (en) 2001-06-22
JP3567114B2 JP3567114B2 (en) 2004-09-22

Family

ID=18403155

Family Applications (1)

Application Number Title Priority Date Filing Date
JP34934599A Expired - Fee Related JP3567114B2 (en) 1999-12-08 1999-12-08 Image monitoring apparatus and image monitoring method

Country Status (1)

Country Link
JP (1) JP3567114B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7081814B2 (en) 2003-06-09 2006-07-25 Hitachi Kokusai Electric Inc. Change detecting method and apparatus and monitoring system using the method or apparatus
KR100623835B1 (en) 2003-10-28 2006-09-19 가부시키가이샤 히다치 고쿠사이 덴키 Object detecting method and apparatus
JP2009225010A (en) * 2008-03-14 2009-10-01 Toyota Motor Corp Image processing unit
JP2009246681A (en) * 2008-03-31 2009-10-22 Saxa Inc Image processing method and image processing device
JP2009539182A (en) * 2006-06-02 2009-11-12 インテリヴィド コーポレイション System and method for distributed monitoring of remote sites
US10909385B2 (en) 2017-03-30 2021-02-02 Nec Corporation Image monitoring system, image monitoring method, and image monitoring program

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7081814B2 (en) 2003-06-09 2006-07-25 Hitachi Kokusai Electric Inc. Change detecting method and apparatus and monitoring system using the method or apparatus
KR100623835B1 (en) 2003-10-28 2006-09-19 가부시키가이샤 히다치 고쿠사이 덴키 Object detecting method and apparatus
JP2009539182A (en) * 2006-06-02 2009-11-12 インテリヴィド コーポレイション System and method for distributed monitoring of remote sites
JP2009225010A (en) * 2008-03-14 2009-10-01 Toyota Motor Corp Image processing unit
JP2009246681A (en) * 2008-03-31 2009-10-22 Saxa Inc Image processing method and image processing device
US10909385B2 (en) 2017-03-30 2021-02-02 Nec Corporation Image monitoring system, image monitoring method, and image monitoring program

Also Published As

Publication number Publication date
JP3567114B2 (en) 2004-09-22

Similar Documents

Publication Publication Date Title
CA2680646C (en) Moving object noise elimination processing device and moving object noise elimination processing program
JP3123587B2 (en) Moving object region extraction method using background subtraction
US9224278B2 (en) Automated method and system for detecting the presence of a lit cigarette
US7359552B2 (en) Foreground detection using intrinsic images
JP5948983B2 (en) Image processing apparatus, image processing method, and image processing program
US9313415B2 (en) Method and system for adjusting exposure settings of video cameras
US20160117837A1 (en) Modification of at least one parameter used by a video processing algorithm for monitoring of a scene
KR101625538B1 (en) Car Number Recognition system
JP5544223B2 (en) Imaging device
US20200219234A1 (en) Collating system, collating method, and camera device
JP5747105B2 (en) Image processing device
JP4491360B2 (en) Image signal processing device
US9443150B2 (en) Device and method for detecting objects from a video signal
KR101823655B1 (en) System and method for detecting vehicle invasion using image
JP3567114B2 (en) Image monitoring apparatus and image monitoring method
JP4025007B2 (en) Railroad crossing obstacle detection device
US20240048672A1 (en) Adjustment of shutter value of surveillance camera via ai-based object recognition
Yuwono et al. Design and implementation of human detection feature on surveillance embedded IP camera
JP4740755B2 (en) Monitoring device using images
KR101826715B1 (en) System and method for detecting vehicle invasion using room camera
TWI476735B (en) Abnormal classification detection method for a video camera and a monitering host with video image abnormal detection
JPH0337356B2 (en)
JP3736836B2 (en) Object detection method, object detection apparatus, and program
JP4925942B2 (en) Image sensor
JP2000023141A (en) Moving object monitoring device

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040608

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040614

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080618

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090618

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090618

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100618

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100618

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110618

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees