JPH0429472A - Picture motion detector - Google Patents

Picture motion detector

Info

Publication number
JPH0429472A
JPH0429472A JP2133361A JP13336190A JPH0429472A JP H0429472 A JPH0429472 A JP H0429472A JP 2133361 A JP2133361 A JP 2133361A JP 13336190 A JP13336190 A JP 13336190A JP H0429472 A JPH0429472 A JP H0429472A
Authority
JP
Japan
Prior art keywords
frame
image
area
output
moving object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2133361A
Other languages
Japanese (ja)
Other versions
JP2754867B2 (en
Inventor
Hirofumi Ishii
浩文 石井
Toshiyuki Kawahara
俊之 河原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP13336190A priority Critical patent/JP2754867B2/en
Publication of JPH0429472A publication Critical patent/JPH0429472A/en
Application granted granted Critical
Publication of JP2754867B2 publication Critical patent/JP2754867B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Picture Signal Circuits (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

PURPOSE:To accurately detect only the frame where a moving object exists in a prescribed frame by synthesizing areas where the moving object exists in the prescribed frame and the preceding frame and areas where the moving object exists in the prescribed frame and the following frame. CONSTITUTION:A difference and threshold processing means 1 takes the difference between the signal of a picture of the n-th frame and that of a picture 10 of the (n-1)th frame and outputs the area, where the difference exceeds a threshold, as a motion area. This output is stored in a frame memory 2a for one frame period. Next, the processing means 1 takes the difference between the signal of a picture of the (n+1)th frame and that of the picture 11 of the n-th frame and outputs the area, where the difference exceeds the threshold, as a motion. An AND operating means 3 operates AND between a motion area 16 obtained by comparison between pictures of the (n-1)th frame and the n-th frame and a motion area 17 obtained by comparison between pictures of the n-th frame and the (n+1)th frame and outputs the result as an area 14 of the moving object of the n-th frame.

Description

【発明の詳細な説明】 産業上の利用分野 本発明は画像処理装置に関L 特ζミ 背景から動きを
もつ物体だけを検出することが可能なように構成された
画像の動き検出装置に関する。
DETAILED DESCRIPTION OF THE INVENTION Field of the Invention The present invention relates to an image processing device.The present invention relates to an image motion detection device configured to be able to detect only moving objects from a background.

従来の技術 画像内で動きを持つ物体を検出する装置として、従来 
第11図に示すような装置があム これはフレームメモ
リ100に前フレームの画像信号を記憶しておき、現フ
レームの画像信号が入力されるとき、差分・しきい値手
段101 i!  前フレームと現フレームの各画素の
信号の差分をとり、この差分値が所定の値を超える画素
を動き領域として出力するものであも たとえば第12図(a)に示すようK 前フレーム画像
(破線)に対し 現フレーム画像(実線)において物が
動くような場合、この装置は2フレーム間差分を取るこ
とにより第12図(b)に斜線で示すように 画像内で
動きを持つ領域102を検出することができも 発明が解決しようとする課題 しかしなから、 従来の画像の動き検出装置では第12
図(b)102を見てもあきらかなよう砥削フレームに
おいて移動物が存在する領域103と、現フレームにお
いて移動物が存在する領域104とが同時にけんしゅつ
され 現フレームにおいて移動物が存在する領域104
だけを正確に検出できなIl〜 本発明は上記従来の課題を解決するものて 所定のフレ
ームにおいて移動物が存在する領域だけを正確に検出す
ることができる画像の動き検出装置を提供することを目
的とすも また本発明ζよ 入力画像から移動物を取り除いた背景
画像を抽出する背景抽出装置を提供することを目的とす
も さらにまた本発明は、 遺留物と移動物を含む入力画像
から遺留物だけを検出できる優れた遺留物検出装置を提
供することを目的とすも 課題を解決するための手段 本発明の画像の動き検出装置は、 所定のフレームにお
いて移動物が存在する領域だけを正確に検出することを
可能とするたム 少なくとも2フレーム以上の画像を比
較し 信号の値の異なる領域を検出する手段と、前記検
出出力を少なくとも1フレーム以上記憶するメモリと、
前記検出出力と前記メモリより読みだされる出力を合成
し動き領域として出力する手段を有していも または 少なくとも2フレーム以上の画像を比較し 信
号の値の異なる領域を検出する複数の手段と、前記複数
の手段の検出出力を合成し動き領域として出力する手段
と、前記動き領域の出力を制御信号とし 少なくとも2
つのフレームの画像から、1フレームの画像を合成し背
景画像として出力する手段を有し かつ前記合成された
1フレームの画像を、前記少なくとも2フレーム以上の
画像を比較し信号の異なる領域を検出する複数の手段の
少なくとも1つの手段へ 比較に用いる1フレームの画
像とする特徴を有していも作用 画像の動き検出装置において、検出出力を少なくともl
フレーム以上記憶するメモリと、前記検出出力と前記メ
モリより読みだされる出力を合成し動き領域として出力
する手段により、所定のフレームとその前フレームにお
いて移動物が存在する領域と、所定のフレームとその次
フレームにおいて移動物が存在する領域を合成すること
により、所定外のフレームにおいてのみ移動物が存在す
る領域を除去することができ、所定のフレームにおいて
移動物が存在する領域だけを正確に検出することが可能
とな4 また 動き領域に信号にしたがって2つの画像を合成す
る手段によって、移動物の存在しない場合の背景画像が
合成されも この出力と所定フレームの画像を比較する
手段によって、所定のフレームにおいて移動物が存在す
る領域だけを正確に検出できも 他の画像を比較する手
段においては所定フレームおよび所定外のフレームで移
動物の存在する領域が検出される方丈 複数の手段の検
出出力を合成し動き領域として出力する手段によって、
所定のフレームにおいて移動物が存在する領域だけを正
確に検出できも 所定フレームおよび所定外のフレームで移動物の存在す
る領域を検出するところの画像を比較する手段は 初期
状態において、動き領域に信号にしたがって2つの画像
を合成する手段によって移動物の存在しない場合の背景
画像が合成されるまで、動き領域を検出するために動作
すムまた同様の手段と構成により、動画像から、 移動
物を取り除いた背景画像を抽出する背景抽出装置を実現
できも また前記背景抽出装置を応用することにより、入力画像
から移動物を取り除いた背景画像を抽出する背景画像抽
出手段と、遺留物の存在しない正常画像を記憶するフレ
ームメモリと、前記背景画像抽出手段の出力と前記フレ
ームメモリを比較し信号の値の異なる領域を検出する手
段により、入力画像から遺留物を検出する遺留物検出装
置が実現できる。
Conventional technologyAs a device for detecting moving objects in images,
The apparatus shown in FIG. 11 stores the image signal of the previous frame in the frame memory 100, and when the image signal of the current frame is input, the difference/threshold means 101 i! The difference between the signals of each pixel in the previous frame and the current frame is calculated, and the pixels for which this difference value exceeds a predetermined value are output as motion areas. When an object moves in the current frame image (solid line), this device calculates the difference between the two frames to identify the area 102 that has movement in the image, as shown by diagonal lines in FIG. 12(b). However, the problem that the invention attempts to solve is that the conventional image motion detection device
As is clear from Figure (b) 102, an area 103 where a moving object exists in the grinding frame and an area 104 where a moving object exists in the current frame are simultaneously determined, and an area where a moving object exists in the current frame. 104
The present invention solves the above-mentioned conventional problems.It is an object of the present invention to provide an image motion detection device that can accurately detect only the area where a moving object exists in a predetermined frame. Another object of the present invention is to provide a background extraction device for extracting a background image from which moving objects have been removed from an input image. An object of the present invention is to provide an excellent residual object detection device capable of detecting only residual objects.The image motion detection device of the present invention detects only areas where moving objects exist in a predetermined frame. a means for comparing at least two or more frames of images and detecting an area where the signal values differ; a memory for storing the detection output for at least one frame;
the detection output and the output read from the memory may be combined and output as a motion area; or a plurality of means for comparing at least two or more frames of images and detecting areas with different signal values; means for synthesizing the detection outputs of the plurality of means and outputting it as a motion region, and using the output of the motion region as a control signal;
It has means for synthesizing one frame image from two frame images and outputting it as a background image, and comparing the synthesized one frame image with the at least two or more frame images to detect areas where signals differ. To at least one of the plurality of means In a motion detection device for an active image, even if the motion image has the characteristic of being a one-frame image used for comparison, the detection output is at least l
A memory for storing more than one frame, and a means for synthesizing the detection output and the output read from the memory and outputting it as a motion area, are used to determine the area where a moving object exists in a predetermined frame and the previous frame, and the area where a moving object exists in a predetermined frame and the previous frame. By compositing the areas where moving objects exist in the next frame, it is possible to remove areas where moving objects exist only in frames other than the predetermined frame, and accurately detect only the areas where moving objects exist in the predetermined frame. 4 Also, by means of combining two images in a moving area according to a signal, a background image when there is no moving object can be combined. By means of comparing this output with an image of a predetermined frame, a predetermined image can be synthesized. Although it is possible to accurately detect only the area where a moving object exists in a frame, the area where a moving object exists is detected in a predetermined frame and a frame other than the predetermined frame when using other means for comparing images.Detection outputs of multiple methods By combining the images and outputting them as a motion area,
Although it is possible to accurately detect only the area where a moving object exists in a predetermined frame, the means for comparing images for detecting the area where a moving object exists in a predetermined frame and a frame other than the predetermined frame is a method that detects a signal in a moving area in an initial state. The system operates to detect a moving area until a background image in the absence of a moving object is synthesized by a means for synthesizing two images according to the same method. It is possible to realize a background extraction device that extracts a removed background image, and by applying the background extraction device, a background image extraction means that extracts a background image with moving objects removed from an input image, and a background image extraction device that extracts a background image with moving objects removed from an input image, and a background image extraction device that extracts a background image without moving objects from an input image. A residual object detection device that detects a residual object from an input image can be realized by a frame memory that stores an image and a means that compares the output of the background image extracting means with the frame memory and detects an area where the signal value differs.

実施例 以下本発明の第1の実施例について、図面を参照しなが
ら説明する。第1図は本発明の第1の実施例における画
像の動き検出装置のブロック図を示すものである。第1
図において、 1は差分・しきい値処理手段、 2、2
aはフレームメモリ、3は論理積演算手段であ45は入
力端子、 6は出力端子であ4 この画像の動き検出装置の動作を第2図を用いながら説
明すも まず、第2図において、 1oはn−17L/
−ムの画像 11はnフレームの画像12はn+1フレ
ームの画像 13はn−1フレームの移動物の領域 1
4はnフレームの移動物の領域 15はn+1フレーム
の移動物の領域16はn−1フレームとnフレームの画
像を比較したときの動き領域 17はnフレームとn+
1フレームの画像を比較したときの動き領[18はn−
1フレームの移動物の領域13とn+、1フレームの移
動物の領域15の論理積である。
EXAMPLE A first example of the present invention will be described below with reference to the drawings. FIG. 1 shows a block diagram of an image motion detection device according to a first embodiment of the present invention. 1st
In the figure, 1 is a difference/threshold processing means, 2, 2
a is a frame memory, 3 is an AND operation means, 45 is an input terminal, and 6 is an output terminal.4 The operation of this image motion detection device will be explained using FIG. 2. First, in FIG. 1o is n-17L/
11 is an n-frame image 12 is an n+1 frame image 13 is an n-1 frame moving object area 1
4 is the area of the moving object in the n frame. 15 is the area of the moving object in the n+1 frame. 16 is the movement area when comparing the images of the n-1 frame and the n frame. 17 is the area of the moving object in the n frame and the n+ frame.
The motion area when comparing images of one frame [18 is n-
This is the AND of the moving object area 13 of one frame and n+, the moving object area 15 of one frame.

まず本装置の入力端子&二 時間的に連続した画像が入
力されも フレームメモリ2i;Llフレーム間画像信
号を記憶する。入力端子から直接、差分・しきい値処理
手段1にnフレームの画像11が入力されるとき、フレ
ームメモリ2からn−1フレーム画像10が入力される
。差分・しきい値処理手段1i;knフレームの画像1
1とn−1フレーム画像10の信号の差分をとり、それ
がしきい値をこえる領域を、動き領域として出力する。
First, the input terminal &2 of this device stores inter-frame image signals even if temporally continuous images are inputted to the frame memory 2i; When n frames of images 11 are directly input to the difference/threshold processing means 1 from the input terminal, n-1 frame images 10 are input from the frame memory 2. Difference/threshold processing means 1i; kn frame image 1
The difference between the signals of 1 and n-1 frame images 10 is taken, and the area where the difference exceeds the threshold value is output as a motion area.

これは第2図(a)16に示すように n−1フレーム
の移動物の領域13とnフレームの移動物の領域14の
論理和となム フレームメモリ2al&1フレーム間この出力を記憶す
ム つぎに入力端子から直撓 差分・しきい値処理手段1に
n+1フレームの画像12が入力されるとき、フレーム
メモリ2からnフレーム画像11が入力される。差分・
しきい値処理手段1ハn十1フレームの画像12とnフ
レーム画像11の信号の差分をとり、それがしきい値を
こえる領域を、動き領域として出力すム これは第2図
(b)17に示すよう番ζ nフレームの移動物の領域
14とnフレームの移動物の領域15の論理和となる。
As shown in FIG. 2(a) 16, this is the logical sum of the moving object area 13 of frame n-1 and the moving object area 14 of frame n. When an n+1 frame image 12 is input to the direct deflection difference/threshold processing means 1 from an input terminal, an n frame image 11 is input from the frame memory 2. Difference/
Threshold processing means 1 takes the difference between the signals of the n11 frame image 12 and the n frame image 11, and outputs the area where the difference exceeds the threshold as a motion area. This is shown in FIG. 2(b). As shown in 17, the number ζ is the logical sum of the moving object area 14 of n frames and the moving object area 15 of n frames.

この出力が直痰 論理積演算手段3に入力されるとき、
フレームメモリ2aから1フレーム前の出力が入力され
も 論理積演算手段3!;t、、n−1フレームとnフレー
ムの画像を比較したときの動き領域16と、nフレーム
とn+1フレームの画像を比較したときの動き領域17
の論理積をとり、nフレームの移動物の領域14として
出力すも これは第2図(b)17に示すよう凶 論理的変換によ
り、n−1フレームの移動物の領域13とn+1フレー
ムの移動物の領域15の論理積18と、nフレームの移
動物の領域14との論理和になも 移動物の領域の形状が凸型であり、かつn−1フレーム
からnフレーAnフレームからn+1フレームの移動物
の移動方向が変化しないと仮定すると、n−1フレーム
の移動物の領域13とn+1フレームの移動物の領域1
5の論理積18は必ずnフレームの移動物の領域14に
ふくまれもしたがって、論理積演算手段3からは正確に
nフレームの移動物の領域14だけが出力されも論理式
を用いて簡単に説明の補足を行う。論理積演算手段3の
出力を領域14aとすも条件1 領域1 条件2 領域1 条件3 領域1 条件4 領域1 4a=領域160領域1 6 =領域13U領域1 7 =領域14U領域1 4 つ領域13n領域l 証明 条件1.2.3より、 領域14a=(領域13U領域1 領域15) ;領域14日(領域1 条件4より、 4)n(領域1 30領域1 領域14a=領域14 以上により本実施例によれば 正確にnフレームの移動
物の領域14だけを検出することができも 以下本発明の第2の実施例について、図面を参照しなが
ら説明すも 第3図は本発明の第2の実施例における画
像の動き検出装置のブロック図を示すものであム 第3図において、第1図と、同じ要素に(ム 同じ番号
をつけてい&  2bはフレームメモリ、 7はスイッ
チ、 8、8aはメモリ、 9はリセット信号入力端子
であム まず第3図に示す入力端子5に時間的に連続した画像信
号が入力されも フレームメモリ2ば1フレーム間画像
信号を記憶すも 差分・しきい値処理手段1は現フレームの画像と、フレ
ームメモリ2からの前フレーム画像の信号の差分をとり
、それがしきい値をこえる領域を、動き領域として出力
すム 差分・しきい値処理手段1aは現フレームの画像と、フ
レームメモリ2bからの画像の信号の差分をとり、それ
がしきい値をこえる領域を、動き領域として出力端子6
に出力する。
When this output is input to the direct sputum logical product calculation means 3,
Even if the output of one frame before is inputted from the frame memory 2a, the AND calculation means 3! ;t,, a motion region 16 when comparing images of n-1 frame and n frame, and a motion region 17 when comparing images of n frame and n+1 frame.
The logical product of the moving object area 14 of the n-frame and the area 14 of the moving object of the n+1 frame is obtained by logical conversion. The logical sum of the moving object area 15 of the moving object area 15 and the moving object area 14 of n frames shows that the shape of the moving object area is convex, and the shape of the moving object area is convex, and the shape of the moving object area is convex, and the shape of the moving object area is convex, and the shape of the moving object area is convex, and the shape of the moving object area is convex, and the shape of the moving object area is convex, and the shape of the moving object area is convex, and the shape of the moving object area is convex, and the shape of the moving object area is convex, and the shape of the moving object area is a convex shape, and Assuming that the moving direction of the moving object in the frame does not change, the moving object region 13 of the n-1 frame and the moving object region 1 of the n+1 frame
The logical product 18 of 5 is always included in the moving object area 14 of n frames. Therefore, even if the logical product calculation means 3 outputs exactly only the moving object area 14 of n frames, it can be easily calculated using a logical formula. Supplement the explanation. Assuming the output of the AND operation means 3 as the area 14a, Condition 1 Area 1 Condition 2 Area 1 Condition 3 Area 1 Condition 4 Area 1 4a = area 160 area 1 6 = area 13U area 1 7 = area 14U area 1 4 areas 13n area l From proof condition 1.2.3, area 14a = (area 13U area 1 area 15); area 14 days (area 1 From condition 4, 4) n (area 1 30 area 1 area 14a = area 14 From the above According to this embodiment, it is possible to accurately detect only the moving object region 14 of n frames.A second embodiment of the present invention will be described below with reference to the drawings, but FIG. This is a block diagram of the image motion detection device in the second embodiment. In FIG. 3, the same elements as in FIG. 1 are given the same numbers (2b is a frame memory, 7 is a switch, 8 and 8a are memories, and 9 is a reset signal input terminal. First, when temporally continuous image signals are input to the input terminal 5 shown in FIG. 3, the frame memory 2 stores the image signals between one frame and the difference. - Threshold processing means 1 takes the difference between the current frame image and the signal of the previous frame image from frame memory 2, and outputs the area where the difference exceeds the threshold value as a motion area. The processing means 1a calculates the difference between the current frame image and the signal of the image from the frame memory 2b, and outputs the area where the difference exceeds the threshold as a motion area to an output terminal 6.
Output to.

論理積演算手段3ζよ 差分・しきい値処理手段1、差
分・しきい値処理手段1aからそれぞれ出力される動き
領域の論理積をとり、移動物の領域として出力すも またスイッチ7は、 論理積演算手段3の出力にしたが
って、移動物の領域でない領域では メモリ8からの入
力画像を出力し 移動物の領域でζ友メモリ8aからの
画像をフレームメモリ2bに出力すa メモリ8は入力
端子5からの入力画像信号を記憶す4 メモリ8aはフ
レームメモリ2bの出力画像信号を記憶する。
The logical product operation means 3ζ calculates the logical product of the motion regions output from the difference/threshold processing means 1 and the difference/threshold processing means 1a, and outputs it as the region of the moving object. According to the output of the product calculation means 3, the input image from the memory 8 is output in the area other than the area of the moving object, and the image from the ζ friend memory 8a is output to the frame memory 2b in the area of the moving object.A The memory 8 is an input terminal. The memory 8a stores the input image signal from the frame memory 2b.

またスイッチ7 CL  リセット信号入力端子9より
、リセット信号が入力されるとき、論理積演算手段3の
出力にかかわらず、メモリ8からの入力画像を出力すム スイッチ7、フレームメモリ2 b、  メモリ8、8
aの動作について、さらに説明すも 移動物の領域では スイッチ7により、メモリ8aから
の画像信号がフレームメモリ2bに出力される方丈 こ
れは、 フレームメモリ2bに記憶されていた信号であ
ム つまり結果的く 移動物の領域ではない領域では入力端
子5からの入力画像信号がフレームメモリ2bに記憶さ
れ 移動物の領域では以前フレームメモリ2bに記憶さ
れていた信号が保持されもメモリ8.8aζよ 画像中
のある画素の信号力を差分・しきい値処理手段l、 1
a、論理積演算手段3により処理され 移動物の領域で
あるかどう力\ スイッチ7に結果が入力される皿 そ
れぞれ入力信号とフレームメモリ2bの出力信号を記憶
すも この画像の動き検出装置の動作を第4皿 第5図を用い
ながら説明すも 第4図は 本動き検出装置に入力される画像であム 初
期状態で最初に入力される画像を、 0フレームとり、
、5フレームまで示しである。画像内において、移動物
19力丈 矢印20の方向に一定速度で移動している。
In addition, when a reset signal is input from the switch 7 CL reset signal input terminal 9, the input image from the memory 8 is output regardless of the output of the AND calculation means 3.The frame memory 2b, the memory 8, 8
To further explain the operation of a, in the moving object area, the switch 7 outputs the image signal from the memory 8a to the frame memory 2b.This is the signal stored in the frame memory 2b. In an area other than the moving object area, the input image signal from the input terminal 5 is stored in the frame memory 2b, and in the moving object area, the signal previously stored in the frame memory 2b is retained, but the image is stored in the memory 8.8aζ. Difference/threshold processing means l, 1 for signal strength of a certain pixel
a. The area of the moving object is processed by the AND operation means 3, and the result is input to the switch 7. The input signal and the output signal of the frame memory 2b are stored in this image motion detection device. The operation will be explained using Fig. 5 of the fourth plate. Fig. 4 is the image input to this motion detection device. The first image input in the initial state is taken as frame 0.
, up to 5 frames are shown. In the image, a moving object 19 is moving at a constant speed in the direction of an arrow 20.

第5図1よ 第4図の入力画像に対する処理過程を示す
ものであも 第5図(a)i;t、、  差分・しきい
値処理手段1の出方 (b)は差分・しきい値処理手段
1aの出力 (c)は論理積演算手段3の出fi  (
d)はフレームメモリ2bに記憶される画像であ4 まずOフレームが入力されるとき、 差分・しきい値処理手段1,1a、 (a)、 (b)
ではなにも出力されな(−シたがって論理積演算手段3
 (C)でもなにも出力されなL%  したがってフレ
ームメモリ2b(d)には0フレームの画像がそのまま
記憶されも つぎに1フレームが入力されるとき、 差分・しきい値処理手段1.Ia、 (a)、 (b)
ではともく 0フレームと1フレームの移動物の領域の
論理和が出力される。したがって論理積演算手段3 (
c)でも0フレームと1フレームの移動物の領域の論理
和が出力されも フレームメモリ2b(d)では 0フ
レームと1フレームの移動物の領域の論理和の領域ζよ
 前の信号が保持されるので、フレームメモリ2bには
Oフレームの移動物の画像がそのまま記憶されていもつ
ぎに2フレームが入力されるとき、 差分・しきい値処理手段1 (a)では1フレームと2
フレームの移動物の領域の論理和が出力されも 差分・
しきい値処理手段1a(b)では 0フレームと2フレ
ームの移動物の領域の論理和か出力されも したがって
論理積演算手段3の出力(C)では 2フレームの移動
物の領域と、 0フレームと1フレームの移動物の領域
の論理積との論理和が出力されa フレームメモリ2b
(d)でζよ 論理積演算手段3で出力される領域以外
は2フレームの画像が入力されるので、 θフレームと
1フレームの移動物の領域の論理積の領域だ仇0フレー
ムの移動物の画像が記憶されていもつぎに3フレームが
入力されるとき、 差分・しきい値処理手段1 (a)では2フレームと3
フレームの移動物の領域の論理和が出力されも 差分・
しきい値処理手段1a(b)でI−!、  0フレーム
と1フレームの移動物の領域の論理積と、3フレームの
移動物の領域との論理和が出力される。したがって論理
積演算手段3の出力(c)で1ヨ3フレームの移動物の
領域と、 Oフレームと1フレームと2フレームの移動
物の領域の論理積との論理和が出力される。フレームメ
モリ2b(d)では、 論理積演算手段3で出力される
領域以外は3フレームの画像が人力されるので、 0フ
レームと1フレームと2フレームの移動物の領域の論理
積の領域だけ、0フレームの移動物の画像が記憶されて
いる。
Figure 5 (1) shows the processing process for the input image in Figure 4. The output (c) of the value processing means 1a is the output fi (
d) is an image stored in the frame memory 2b.4 First, when the O frame is input, the difference/threshold processing means 1, 1a, (a), (b)
Then, nothing is output (- Therefore, the AND operation means 3
(C) But nothing is output L% Therefore, when the 0 frame image is stored as it is in the frame memory 2b (d) and 1 frame is input next, the difference/threshold processing means 1. Ia, (a), (b)
At any rate, the logical sum of the moving object areas of frame 0 and frame 1 is output. Therefore, the logical product calculation means 3 (
Even if the logical sum of the moving object areas of frame 0 and frame 1 is output in c), the previous signal is retained in the area ζ of the logical sum of the moving object areas of frame 0 and frame 1 in frame memory 2b(d). Therefore, even though the moving object image of O frames is stored as is in the frame memory 2b, when two frames are inputted next, the difference/threshold processing means 1 (a) uses frames 1 and 2.
Even if the logical sum of the moving object area of the frame is output, the difference/
The threshold processing means 1a (b) outputs the logical OR of the moving object area of frame 0 and frame 2. Therefore, the output (C) of the logical product calculation means 3 outputs the moving object area of frame 2 and the area of moving object of frame 0. The logical sum of and the logical product of the moving object area of one frame is output a frame memory 2b
In (d), ζ Since 2 frames of images are input except for the area output by the logical product operation means 3, the area is the logical product of the θ frame and the area of the moving object in 1 frame. When 3 frames are input next even though the image of
Even if the logical sum of the moving object area of the frame is output, the difference/
The threshold processing means 1a(b) calculates I-! , The logical product of the moving object area of frame 0 and frame 1, and the logical sum of the moving object area of frame 3 are output. Therefore, the output (c) of the AND calculation means 3 is the logical sum of the moving object area of 1st and 3rd frames and the logical product of the moving object areas of O frame, 1st frame, and 2nd frame. In the frame memory 2b (d), images of 3 frames are input manually except for the area output by the logical product calculation means 3, so only the area of the logical product of the moving object areas of frame 0, frame 1, and frame 2, A 0-frame moving object image is stored.

つぎに4フレームが入力されるとき、 差分・しきい値処理手段1 (a)では3フレームと4
フレームの移動物の領域の論理和が出力される。差分・
しきい値処理手段1a(b)では、Oフレームと1フレ
ームの2フレームの移動物の領域の論理積と、4フレー
ムの移動物の領域との論理和が出力される。したがって
論理積演算手段3の出力(C)でCL  4フレームの
移動物の領域と、0フレームと1フレームと2フレーム
と3フレームの移動物の領域の論理積との論理和が出力
されも ただし第5図のように Oフレームと3フレー
ムの移動物の領域の論理積が空集合となると、4フレー
ムの移動物の領域だけが正確に検出されも フレームメモリ2b(d)では 論理積演算手段3で出
力される領域以外は4フレームの画像が入力されるので
、 0フレームと1フレームと2フレームと3フレーム
の移動物の領域の論理積の領域だ(す、 0フレームの
移動物の画像が記憶されことになる力<、 0フレーム
と3フレームの移動物の領域の論理積が空集合となると
、移動物を取り除いた背景画像が記憶される。
Next, when 4 frames are input, difference/threshold processing means 1 (a) has 3 frames and 4 frames.
The logical OR of the moving object area of the frame is output. Difference/
The threshold processing means 1a(b) outputs the logical product of the moving object area of two frames, O frame and 1 frame, and the logical sum of the moving object area of 4 frames. Therefore, the output (C) of the AND calculation means 3 is the logical sum of the moving object area of CL4 frame and the logical product of the moving object area of 0 frame, 1 frame, 2 frame, and 3 frame. As shown in Fig. 5, when the logical product of the moving object area of the O frame and the 3rd frame becomes an empty set, even if only the moving object area of the 4th frame is detected accurately, the logical product calculation means in the frame memory 2b (d) Since the image of 4 frames is input except for the area output in step 3, it is the area of the logical product of the moving object area of frame 0, frame 1, frame 2, and frame 3 (the image of the moving object of frame 0) If the logical product of the moving object regions of frame 0 and frame 3 becomes an empty set, the background image from which the moving object has been removed is stored.

つぎに5フレームが入力されるとき、 差分・しきい値処理手段1 (a)では4フレームと5
フレームの移動物の領域の論理和が出力されも フレー
ムメモリ2bから、 移動物を取り除いた背景画像が出
力されるので、差分・しきい値処理手段1a(b)では
、 5フレームの移動物の領域が正確に出力される。
Next, when 5 frames are input, difference/threshold processing means 1 (a) has 4 frames and 5 frames.
Even if the logical sum of the moving object area of the frame is output, the frame memory 2b outputs the background image from which the moving object has been removed. The area is output accurately.

したがって論理積演算手段3の出力(c)では5フレー
ムの移動物の領域だけが正確に検出される。
Therefore, in the output (c) of the AND calculation means 3, only the area of the moving object in 5 frames is accurately detected.

フレームメモリ2b(d)では、 論理積演算手段3で
移動物の領域として出力される領域は以前の信号が保持
されるので、4フレームが入力されたときと同様1’=
  移動物を取り除いた背景画像だけが記憶され 保持
される。
In the frame memory 2b(d), since the previous signal is retained in the area output as the moving object area by the AND operation means 3, 1'=
Only the background image with moving objects removed is stored and retained.

以後のフレームでL フレームメモリ2b(d)で移動
物を取り除いた背景画像だけが記憶されていれば 次の
フレームで差分・しきい値処理手段1a(b)で、その
フレームでの移動物の領域が正確に出力されも したが
って、差分・しきい値処理手段1 (a)でそのフレー
ムとその前フレームの移動物の領域の論理和が出力され
てL 論理積演算手段3の出力(C)では そのフレー
ムの移動物の領域だけが正確に検出されも またフレー
ムメモリ2b(d)では、 論理積演算手段3で移動物
の領域として出力される領域は以前の信号が保持される
ので、移動物を取り除いた背景画像だけが記憶され 保
持される。
If only the background image from which moving objects have been removed is stored in the L frame memory 2b (d) in the subsequent frames, then in the next frame, the difference/threshold processing means 1a (b) will calculate the moving objects in that frame. Even if the area is output accurately, the difference/threshold processing means 1 (a) outputs the logical sum of the area of the moving object in that frame and the previous frame. Even if only the area of the moving object in that frame is detected accurately, in the frame memory 2b(d), the area outputted as the area of the moving object by the AND calculation means 3 retains the previous signal, so Only the background image with objects removed is stored and retained.

したがって、この動作が繰りかえされることにより、フ
レームメモリ2b(d)では 移動物を取り除いた背景
画像が保持され また論理積演算手段3の出力(C)か
べ そのフレームの移動物の領域だけが正確に検出され
る。
Therefore, by repeating this operation, the frame memory 2b (d) retains the background image from which the moving object has been removed, and the output (C) of the logical product calculation means 3 retains only the area of the moving object in that frame. Accurately detected.

な耘 本発明第2の実施例フレームメモリ2b力丈 1
画素単位でデータの書き込みを制御でき、書き込みを中
止した場合以前のデータが残る構成とすると、スイッチ
7は 動き領域の出力があるとき、書き込みを中止し 
動き領域の出力がないとき、メモリ8からのデータだけ
を書き込めばよt〜 したがって、この場合メモリ8a
はなくてもよI、%また 第2の実施例の説明でも明ら
かなよう&ミ第2の実施例の第3図フレームメモリ2b
の出力を取り出すことにより、本発明は動画像において
、移動物を取り除いた背景画像を抽出する背景抽出装置
として構成することができも これを本発明第3の実施例の背景抽出装置とす本発明第
3の実施例の背景抽出装置のブロック図を第6図に示す
Second embodiment of the present invention Frame memory 2b Strength 1
If the configuration is such that data writing can be controlled on a pixel-by-pixel basis and the previous data remains when writing is stopped, switch 7 will stop writing when there is an output from the motion area.
When there is no output of the motion area, only the data from memory 8 needs to be written. Therefore, in this case, memory 8a
Also, as is clear from the explanation of the second embodiment, there is no need for frame memory 2b in FIG. 3 of the second embodiment.
By extracting the output of A block diagram of a background extraction device according to a third embodiment of the invention is shown in FIG.

この本発明第3の実施例の内部の各要素の動作は、 本
発明第2の実施例と全く同様である。ただし 出力端子
6より、第6図フレームメモリ2bの出力を、背景画像
として出力する。
The operation of each element inside this third embodiment of the present invention is completely the same as that of the second embodiment of the present invention. However, from the output terminal 6, the output of the frame memory 2b in FIG. 6 is output as a background image.

つぎに本発明第4の実施例の背景抽出装置の説明を行う
。第7図は本発明第4の実施例の背景抽出装置のブロッ
ク図である。第7図において、 200は第1背景抽出
手段、 201は第2背景抽出手比 202はスイッチ
である。203は入力端子、 204は出力端子である
。回虫 第1背景抽出手段200と第2背景抽出手段2
02、はそれぞれ 本発明第3の実施例の背景抽出装置
と同じ構成とな4 まず、入力端子203から第1背景抽出手段200に 
30フレーム/秒の速度で、動画像信号が入力されも 
第1背景抽出手段200は 本発明第3の実施例の背景
抽出装置と同じ動作を行(\入力画像信号かぺ 移動物
を取り除いた背景画像をスイッチ202に出力する。ス
イッチ202 g友人力される30フレーム/秒の画像
信号から、 10秒間隔で1フレームの画像だけを第2
背景抽出手段201に出力する。第2背景抽出手段20
1ζよ 本発明第3の実施例の背景抽出装置と同じ動作
を行(\ 10秒間隔で入力される画像信号から、さら
に移動物を取り除いた背景画像を出力端子204に出力
す4 本装置番ヨ  例えば 移動物が一時的に背景に対し静
止した場合でk 少なくとも10秒以上静止しなければ
 この移動物を取り除いた背景画像を出力することを可
能とするものであム な耘 本装置は、 少なくとも10秒以上静止しなけれ
ば この移動物を取り除いた背景画像を出力することを
可能とするものとした方丈 この時間を自由に設定でき
ることは明らかであもな耘 本装置ζよ 背景抽出手段
を2段に構成している方丈 同様に3段以上に構成する
ことも容易に考えられも つぎに本発明第5の実施例の背景抽出装置の説明を行う
。第8図は本発明第5の実施例の背景抽出装置のブロッ
ク図であも 第8図において、第6図と同じ要素には、
 同じ番号を付けも また第8図において、 210は
スイッチ制御手段、 211.212.213.214
.215.216はスイッチ、 203は入力端子、 
204は出力端子、2c、  2d、  2e、  2
fはフレームメモリである。
Next, a background extraction device according to a fourth embodiment of the present invention will be explained. FIG. 7 is a block diagram of a background extraction device according to a fourth embodiment of the present invention. In FIG. 7, 200 is a first background extraction means, 201 is a second background extraction ratio, and 202 is a switch. 203 is an input terminal, and 204 is an output terminal. Ascaris First background extraction means 200 and second background extraction means 2
02 and 4 respectively have the same configuration as the background extraction device of the third embodiment of the present invention.
Even if a video signal is input at a speed of 30 frames/sec.
The first background extraction means 200 performs the same operation as the background extraction device of the third embodiment of the present invention (\ input image signal outputs the background image from which moving objects have been removed to the switch 202. From the 30 frames/second image signal, only one frame image is transferred to the second image at 10 second intervals.
It is output to the background extraction means 201. Second background extraction means 20
1ζ Performs the same operation as the background extraction device according to the third embodiment of the present invention (\Outputs a background image obtained by removing moving objects from the image signal input at 10 second intervals to the output terminal 204)4 This device number For example, if a moving object temporarily stands still relative to the background and does not stand still for at least 10 seconds, it is possible to output a background image with the moving object removed. If you do not stand still for at least 10 seconds, a background image with moving objects removed will be output.It is obvious that you can freely set this time. Although it is easily possible to construct the hojo in three or more stages, the background extracting device according to the fifth embodiment of the present invention will be explained below. In FIG. 8, which is a block diagram of the background extraction device of the embodiment, the same elements as in FIG. 6 include:
Also, in Figure 8, 210 is the switch control means, 211.212.213.214.
.. 215 and 216 are switches, 203 is an input terminal,
204 is an output terminal, 2c, 2d, 2e, 2
f is a frame memory.

本装置ζよ 本発明第4の実施例の背景抽出装置の2つ
の背景抽出手段200、201ヘ フレームメモリ2.
2bを除く部分を、 1つに共有させるものであも 共
有化にあたり、スイッチ制御手段210と、スイッチ2
11、212、213、2工4、215、216を設け
も まず、入力端子203から、 30フレーム/秒の速度
で、動画像信号が入力される。このときスイッチ制御手
段は、 スイッチ211を制御し 203からの入力信
号を出力させる。またスイッチ212、213、214
、215、を制御し フレームメモリ2c、2dをとお
る信号経路を、通じさせも またスイッチ216を制御
し 出力を止めておく。このとき本装置は 本発明第4
の実施例の背景抽出装置の第1背景抽出手段200と同
じ動作を行t、X、入力画像信号から、 移動物を取り
除いた背景画像をスイッチ216、211に出力すム スイッチ制御手段4110秒に1フレームだけ、スイッ
チ211を制御り、  215からの信号を出力させも
 この信号番ヨ  入力画像信号から、 移動物を取り
除いた背景画像であも またスイッチ212、213.
214.215、を制′aL、、フレームメモリ2e、
2fをとおる信号経路を、通じさせも またスイッチ2
16を制御し スイッチ215からの信号を出力端子2
04に出力させもこのとき本装置は 本発明第4の実施
例の背景抽出装置の第2背景抽出手段201と同じ動作
を行1、%  スイッチ211から10秒間隔で入力さ
れる画像信号か仮 さらに移動物を取り除いた背景画像
を出力端子204に出力すも この本装置力(本発明第4の実施例の背景抽出装置の第
2背景抽出手段201と同じ動作を行う1フレームの肌
 本発明第4の実施例の背景抽出装置の第1背景抽出手
段200と同じ動作を休止することになる方丈 実用上
の問題はない。
From this device ζ To the two background extraction means 200 and 201 of the background extraction device according to the fourth embodiment of the present invention Frame memory 2.
Even if the parts except 2b are shared, the switch control means 210 and the switch 2
11, 212, 213, 2, 4, 215, and 216 are provided. First, a moving image signal is input from the input terminal 203 at a rate of 30 frames/second. At this time, the switch control means controls the switch 211 to output the input signal from the switch 203. Also switches 212, 213, 214
, 215, to allow the signal path passing through the frame memories 2c and 2d to pass, and also controls the switch 216 to stop the output. At this time, this device is the fourth embodiment of the present invention.
The switch control means 41 performs the same operation as the first background extraction means 200 of the background extraction apparatus of the embodiment and outputs a background image from which moving objects are removed from the input image signals t, X, to the switches 216 and 211 every 10 seconds. You can control the switch 211 and output the signal from 215 only for the frame, or switch 212, 213.
214.215, control 'aL,, frame memory 2e,
The signal path passing through 2f can also be passed through switch 2.
16 and outputs the signal from switch 215 to terminal 2.
At this time, this device performs the same operation as the second background extracting means 201 of the background extracting device according to the fourth embodiment of the present invention. Furthermore, the background image from which moving objects have been removed is output to the output terminal 204.The power of this device is the skin of one frame that performs the same operation as the second background extraction means 201 of the background extraction device of the fourth embodiment of the present invention. The same operation as the first background extraction means 200 of the background extraction device of the fourth embodiment is suspended. There is no practical problem.

な耘 本装置は 背景抽出手段を2段に構成している方
丈 同様に3段以上に構成することも容易に考えられも な抵 本装置は 2段の背景抽出手段により構成された
本発明第4の実施例東 2つの背景抽出手段のフレーム
メモリを除く部分を共有させたものである力(同様に3
段以上の背景抽出手段によりに構成された装置について
L 背景抽出手段のフレームメモリを除く部分を共有さ
せることも容易であも この場合フレームメモリを増設
するだけで対応できも 以下本発明の第6の実施例について、図面を参照しなが
ら説明する。第9図は本発明の第6の実施例における画
像の遺留物検出装置のブロック図であム  第9図にお
いて、 30はフレームメモリ、 31は差分・しきい
値処理手比 32はスイッチ、 33は静止背景抽出手
段である。
Although the present device has a two-stage background extraction means, it is also easy to imagine that it could be constructed with three or more stages. Embodiment 4 East A force that shares the parts of two background extraction means except for the frame memory (similarly, 3
Regarding a device configured with background extracting means of more than one stage, it is easy to share the parts of the background extracting means except for the frame memory. Examples will be described with reference to the drawings. FIG. 9 is a block diagram of an image residual object detection device according to a sixth embodiment of the present invention. In FIG. 9, 30 is a frame memory, 31 is a difference/threshold processing ratio, 32 is a switch, 33 is a stationary background extraction means.

第10図は 第6の実施例における画像の遺留物検出装
置の動作を説明するための路線図であ4まずフレームメ
モリ30に+;!、Jio図(a)に示す正常状態の背
景画像が記憶されている。静止背景抽出手段33にζよ
 第10図(b)(c)に示すようへ 移動物34、3
4、遺留物35を含む動画像が入力される。静止背景抽
出手段33は、本発明第5の実施例の背景抽出装置と同
様の動作を行し\ 入力動画像より、第10図(d)に
示すように移動物を取り除いた静止した背景画像だけを
抽出すも 差分・しきい値処理手段31は、 第10図(e)に示
すよう番ミ  フレームメモリ30から読みだされる正
常状態の背景画像第10図(a)と、静止背景抽出手段
33から出力されべ 静止背景画像第10図(d)との
差分をとり、信号の差の大きさ力t しきい値を超える
画素の領域36を、出力すム スイッチ32は第10図
(f)に示す静止背景抽出手段33から出力されゑ 静
止背景画像第1O図(d)より、差分・しきい値処理手
段31の出力(第10図(e)領域36)の部分の画像
だけ抽出し 出力する。以上の動作により、入力される
移動物34.34、遺留物35を含む動画像から、 遺
留物35だけを検出できる。
FIG. 10 is a route diagram for explaining the operation of the image residual object detection device in the sixth embodiment.4First, +;! is stored in the frame memory 30. , Jio A background image in a normal state shown in Figure (a) is stored. ζ to the static background extraction means 33 as shown in FIGS. 10(b) and 10(c) Moving objects 34, 3
4. A moving image including the artifact 35 is input. The still background extraction means 33 performs the same operation as the background extraction device of the fifth embodiment of the present invention, and extracts a still background image from which moving objects are removed from the input moving image, as shown in FIG. 10(d). The difference/threshold processing means 31 extracts only the normal background image (FIG. 10(a)) read out from the frame memory 30, as shown in FIG. The switch 32 calculates the difference from the still background image shown in FIG. From the still background image outputted from the still background extracting means 33 shown in f) in FIG. and output. By the above-described operation, only the leftover object 35 can be detected from the input moving image including the moving object 34, 34 and the leftover object 35.

これは例えば 公共の場所に遺留物として設置された危
険物の検出など、セキュリティシステムへの応用も考え
られる。
This could also be applied to security systems, such as detecting dangerous objects left behind in public places.

なお第1、第2、第3、第4、第5、第6の実施例にお
いて、入力される画像3表 動画像として時間的に連続
したフレームによって構成されるものであったカミ こ
れは必ずしもテレビジョン信号のように視覚的に動画像
として認知されるものである必要はな(t たとえば 
撮像装置から30フレーム/秒で動画像が出力されろう
板 1秒あたり1フレームだけをサンプルし 各フレー
ム間1秒の間隔をあげた画像をもちいて、各実施例を動
作させることも十分可能である。またこうすることで、
各実施例の装置の単位時間当りの必要な演算処理量を少
なくすることができも なお第1、第2、第3、第4、第5の実施例において、
差分・しきい値処理手段1、1 a U  入力される
2フレームの画像の信号の差分をとり、それがしきい値
をこえる領域を、動き領域として出力するもので、出力
は2値であった力交 これは必ずしも2値とする必要は
なしX、、例え(i 2フレームの画像の信号の差分を
、 しきい値処理する代わりに 差分の大きさより、動
き領域である可能性を示す評価関数を求め、 これを出
力するものでL 本発明の目的を達成するには問題な(
t  また第1、第2、第3、第4、第5の実施例にお
いて、論理積演算手段3ば 入力される2つの動き領域
の論理積を出力するものとした力交 たとえば前述のよ
うに 差分・しきい値処理手段1、1a、が2フレーム
の画像の信号の差分を、 しきい値処理する代わりに 
差分の大きさより、動き領域である可能性を示す評価関
数を求め、 これを出力するものとし 論理積演算手段
3が2つの動き領域の論理積を求める代わりに 2つの
動き領域である可能性を示す評価関数の積を求めるもの
とじてL 本発明の目的を達成するには問題なt、Xo
  またこのような類似した処理方法のバリエーション
は容易に考えられられ 各処理方法により性能に若干の
違いはある爪 本発明の目的を達成するには問題なしも 発明の効果 本発明は、 入力画像から移動物の領域を正確に検出で
きる優れた画像の動き検出装置を実現できるものである
。また同様に入力画像から移動物を取り除いた背景画像
を抽出する背景抽出装置を実現できるものである。また
遺留物だけでなく移動物を含む入力画像から遺留物だけ
を検出できる優れた遺留物検出装置を実現できるもので
ある。
Note that in the first, second, third, fourth, fifth, and sixth embodiments, the three input images are composed of temporally consecutive frames as moving images. There is no need for it to be visually recognized as a moving image like a television signal (for example,
It is also possible to operate each of the embodiments using images that are outputted from an imaging device at a rate of 30 frames/second, sample only one frame per second, and increase the interval of 1 second between each frame. be. Also, by doing this,
In the first, second, third, fourth, and fifth embodiments, the amount of calculation processing required per unit time of the apparatus of each embodiment can be reduced.
Difference/Threshold Processing Means 1, 1 a U This takes the difference between the signals of two input frames of images, and outputs the area where the difference exceeds the threshold as a motion area, and the output is binary. This does not necessarily have to be a binary value. It calculates and outputs L, which is a problem to achieve the purpose of the present invention (
In addition, in the first, second, third, fourth, and fifth embodiments, the logical product calculation means 3 outputs the logical product of the two input motion areas.For example, as described above, The difference/threshold processing means 1, 1a, instead of thresholding the difference between the signals of two frames of images.
Based on the magnitude of the difference, an evaluation function indicating the possibility of a motion region is calculated and outputted.Instead of the logical product calculation means 3 calculating the logical product of two motion regions, it calculates the possibility of two motion regions. Assuming that the product of the evaluation functions shown is L, t,
In addition, it is easy to imagine variations of such similar processing methods, and there are slight differences in performance depending on the processing method. This makes it possible to realize an excellent image motion detection device that can accurately detect the area of a moving object. Similarly, it is possible to realize a background extraction device that extracts a background image from which moving objects are removed from an input image. Furthermore, it is possible to realize an excellent leftover object detection device that can detect only leftover objects from an input image that includes not only leftover objects but also moving objects.

【図面の簡単な説明】[Brief explanation of drawings]

第1図は本発明の第1の実施例の画像の動き検出装置の
ブロック医 第2図は本発明の第1の実施例における画
像の動き検出装置の動作を説明するための路線図 第3
図は本発明の第2の実施例の画像の動き検出装置のブロ
ック医 第4皿 第5図は本発明の第2の実施例におけ
る画像の動き検出装置の動作を説明するための路線図 
第6図は本発明の第3の実施例の画像の背景抽出装置の
ブロック医 第7図は本発明の第4の実施例の画像の背
景抽出装置のブロック医 第8図は本発明の第5の実施
例の画像の背景抽出装置のブロック医 第9図は本発明
の第6の実施例の遺留物検出装置のブロック医 第10
図は本発明の第6の実施例の遺留物検出装置の動作を説
明するための路線は 第11図は従来例の画像の動き検
出装置のブロック医 第12図は従来例の画像の動き検
出装置の動作を説明するための路線図であ41、1a・
・・差分・しきい値処理手比2、2a、  2b、  
2c、  2d、  2a、  2f−フレームメモリ
、 3・・・論理積演算手段、 5・・・入力端子、6
・・・出力端子、 7・・・スイッチ、 8、8a・・
・メモリ、10・・・n−1フレーム画像 11−nフ
レーム画像 12・・・n+1フレーム画像 13・・
・n−1フレームの移動物の領域 14・・・nフレー
ムの移動物の領[15・・・n+1フレームの移動物の
領域16・・・n−1フレーム画像とnフレーム画像を
比較するときの動き領域 17・・・nフレーム画像と
n+1フレーム画像を比較するときの動き領域18・・
・n−1フレームの移動物の領域と、n+1フレームの
移動物の領域との論理積 3o・・・フレームメモリ、
 31・・・差分・しきい値処理半没32・・・スイッ
チ、 33・・・静止背景抽出手段、34a、 34b
・・・移動惧 35・・・遺留轍 36・・・差分・し
きい値処理手段31の出力の領域100・・・フレーム
メモリ、 101・・・差分・しきい値処理手段、 1
02・・・前フレーム画像と現フレーム画像を比較する
ときの動き領@  103・・・前フレームの移動物の
領*  104・・・現フレームの移動物の領域 20
0・・・第1背景画像抽出手段、201・・・第2背景
画像抽出手段、202・・・スイッチ、 203・・・
入力端子、 204・・・出力端子、210・・・スイ
ッチ制御半没 211、212、213、214、21
5、216・・・スイッチ、代理人の氏名 弁理士 粟
野重孝 ほか1名城 鍼 第 図 第 図 第 図 第 図 第 図 第totg (eL) CC) (tt) 憾 111図 第12図
FIG. 1 is a block diagram of the image motion detection device according to the first embodiment of the present invention. FIG. 2 is a route diagram for explaining the operation of the image motion detection device according to the first embodiment of the present invention.
FIG. 5 is a route diagram for explaining the operation of the image motion detection device in the second embodiment of the present invention.
FIG. 6 is a block diagram of an image background extraction device according to a third embodiment of the present invention. FIG. 7 is a block diagram of an image background extraction device according to a fourth embodiment of the present invention. FIG. 9 is a block diagram of the image background extraction device according to the fifth embodiment of the present invention; FIG.
The diagram is a diagram for explaining the operation of the residual object detection device according to the sixth embodiment of the present invention. FIG. 11 is a block diagram of a conventional image motion detection device. FIG. 12 is a conventional image motion detection device. This is a route map for explaining the operation of the device.
...Difference/threshold processing ratio 2, 2a, 2b,
2c, 2d, 2a, 2f-frame memory, 3... logical product calculation means, 5... input terminal, 6
...Output terminal, 7...Switch, 8, 8a...
・Memory, 10...n-1 frame image 11-n frame image 12...n+1 frame image 13...
- Moving object area of n-1 frame 14... Moving object area of n frame [15... Moving object area of n+1 frame 16... When comparing n-1 frame image and n frame image Motion area 17...Motion area 18 when comparing n frame image and n+1 frame image...
- Logical product of the area of the moving object in the n-1 frame and the area of the moving object in the n+1 frame 3o...Frame memory,
31... Difference/threshold processing half-recessed 32... Switch, 33... Still background extraction means, 34a, 34b
... Movement risk 35... Remaining track 36... Output area of difference/threshold processing means 31 100... Frame memory, 101... Difference/threshold processing means, 1
02... Motion area when comparing the previous frame image and current frame image @ 103... Area of moving object in previous frame* 104... Area of moving object in current frame 20
0...First background image extraction means, 201...Second background image extraction means, 202...Switch, 203...
Input terminal, 204... Output terminal, 210... Switch control half-recessed 211, 212, 213, 214, 21
5, 216...Switch, name of agent Patent attorney Shigetaka Awano and 1 other person

Claims (8)

【特許請求の範囲】[Claims] (1)少なくとも2フレーム以上の画像を比較し、信号
の値の異なる領域を検出する手段と、前記検出出力を少
なくとも1フレーム以上記憶するメモリと、前記検出出
力と前記メモリより読みだされる出力により、動き領域
を決定し、出力する手段を有することを特徴とする画像
の動き検出装置。
(1) Means for comparing at least two or more frames of images and detecting areas with different signal values, a memory for storing the detection output for at least one frame or more, and an output read from the detection output and the memory. An image motion detection device characterized by comprising means for determining and outputting a motion area.
(2)検出出力とメモリより読みだされる出力により、
動き領域を決定し、出力する手段は、2つの出力の論理
積を求め、これを動き領域として決定し、出力すること
を特徴とする請求項1に記載の画像の動き検出装置。
(2) Based on the detection output and the output read from the memory,
2. The image motion detection apparatus according to claim 1, wherein the means for determining and outputting a motion region calculates a logical product of two outputs, determines this as a motion region, and outputs the result.
(3)少なくとも2フレーム以上の画像を比較し、信号
の値の異なる領域を検出する複数の手段と、前記複数の
手段の検出出力により、動き領域を決定し、出力する手
段と、前記動き領域の出力を制御信号とし、少なくとも
2つのフレームの画像から、1フレームの画像を合成す
る手段を有し、かつ前記合成された1フレームの画像を
、前記少なくとも2フレーム以上の画像を比較し信号の
異なる領域を検出する複数の手段の、少なくとも1つの
手段の、比較に用いる1フレームの画像とすることを特
徴とする画像の動き検出装置。
(3) a plurality of means for comparing at least two or more frames of images and detecting regions with different signal values; a means for determining and outputting a motion region based on detection outputs of the plurality of means; and a means for determining and outputting a motion region; has a means for synthesizing one frame image from at least two frame images, using the output of the at least two frames as a control signal, and comparing the synthesized one frame image with the at least two or more frames of the signal. An image motion detection device characterized in that one frame image is used for comparison of at least one of a plurality of means for detecting different regions.
(4)複数の手段の検出出力により、動き領域を決定し
、出力する手段は、複数の出力の論理積を求め、これを
動き領域として決定し、出力することを特徴とする請求
項3に記載の画像の動き検出装置。
(4) The means for determining and outputting a motion region based on the detection outputs of the plurality of means calculates a logical product of the plurality of outputs, determines this as a motion region, and outputs it. The described image motion detection device.
(5)動き領域の出力を制御信号とし、少なくとも2つ
のフレームの画像から、1フレームの画像を合成する手
段は、前記動き領域の出力を2値の制御信号とし、この
制御信号の値のよって、2つのフレームの画像を切換え
、1フレームの画像に合成することを特徴とする請求項
3に記載の画像の動き検出装置。
(5) The means for synthesizing one frame image from at least two frame images by using the output of the motion area as a control signal, uses the output of the movement area as a binary control signal, and according to the value of the control signal. 4. The image motion detection apparatus according to claim 3, wherein the image of two frames are switched and combined into one frame of image.
(6)少なくとも2フレーム以上の画像を比較し、信号
の値の異なる領域を検出する複数の手段と、前記複数の
手段の検出出力により、動き領域を決定し、出力する手
段と、前記動き領域の出力を制御信号とし、少なくとも
2つのフレームの画像から、1フレームの画像を合成し
背景画像として出力する手段を有し、かつ前記合成され
た1フレームの画像を、前記少なくとも2フレーム以上
の画像を比較し信号の異なる領域を検出する複数の手段
の少なくとも1つの手段の、比較に用いる1フレームの
画像とすることを特徴とする画像の背景画像抽出装置。
(6) a plurality of means for comparing at least two or more frames of images and detecting regions with different signal values; a means for determining and outputting a motion region based on detection outputs of the plurality of means; and a means for determining and outputting a motion region; has means for synthesizing one frame image from at least two frame images and outputting the synthesized one frame image as a background image, using the output of the at least two frames as a control signal, and converting the synthesized one frame image into the at least two or more frames. 1. A background image extraction device for an image, characterized in that one frame image is used for comparison of at least one of a plurality of means for comparing and detecting different areas of signals.
(7)動き領域の出力を制御信号とし、少なくとも2つ
のフレームの画像から、1フレームの画像を合成する手
段は、前記動き領域の出力を2値の制御信号とし、この
制御信号の値のよって、2つのフレームの画像を切換え
、1フレームの画像に合成することを特徴とする請求項
6に記載の画像の背景画像抽出装置。
(7) The means for synthesizing one frame image from at least two frame images by using the output of the motion area as a control signal, uses the output of the movement area as a binary control signal, and according to the value of the control signal. 7. The background image extracting apparatus for images according to claim 6, wherein the images of two frames are switched and combined into one frame image.
(8)入力画像より、移動物を取り除いた背景画像を抽
出する背景画像抽出手段と、少なくとも1フレーム以上
の画像を記憶するフレームメモリと、前記背景画像抽出
手段の出力と前記フレームメモリを比較し、信号の値の
異なる領域を検出する手段を有することを特徴とする遺
留物検出装置。
(8) Background image extraction means for extracting a background image from which moving objects have been removed from an input image; a frame memory for storing at least one frame image; and a comparison between the output of the background image extraction means and the frame memory. , a residual object detection device characterized by having means for detecting areas where signal values differ.
JP13336190A 1990-05-23 1990-05-23 Image motion detection device Expired - Fee Related JP2754867B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP13336190A JP2754867B2 (en) 1990-05-23 1990-05-23 Image motion detection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP13336190A JP2754867B2 (en) 1990-05-23 1990-05-23 Image motion detection device

Publications (2)

Publication Number Publication Date
JPH0429472A true JPH0429472A (en) 1992-01-31
JP2754867B2 JP2754867B2 (en) 1998-05-20

Family

ID=15102929

Family Applications (1)

Application Number Title Priority Date Filing Date
JP13336190A Expired - Fee Related JP2754867B2 (en) 1990-05-23 1990-05-23 Image motion detection device

Country Status (1)

Country Link
JP (1) JP2754867B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08221577A (en) * 1995-02-17 1996-08-30 Hitachi Ltd Device and method for detecting/extracting moving object
JP2008104130A (en) * 2006-10-23 2008-05-01 Hitachi Ltd Apparatus and system for monitoring video

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08221577A (en) * 1995-02-17 1996-08-30 Hitachi Ltd Device and method for detecting/extracting moving object
JP2008104130A (en) * 2006-10-23 2008-05-01 Hitachi Ltd Apparatus and system for monitoring video

Also Published As

Publication number Publication date
JP2754867B2 (en) 1998-05-20

Similar Documents

Publication Publication Date Title
KR0151410B1 (en) Motion vector detecting method of image signal
KR940011880B1 (en) Interfield image motion detector for video signals
JPH0225179A (en) Method and apparatus for detecting movement
KR960028480A (en) Foreground / background image selection device with region division coding
AU5087299A (en) Method and apparatus for the detection of motion in video
GB2153625A (en) Movement estimation system for video signals
JPH1188893A (en) Image signal processor
JPS6370689A (en) Motion detecting circuit
US20140253528A1 (en) Method of driving display apparatus and driving circuit for display apparatus using the same
JPH0226484A (en) Detector of movement of television picture
EP3503021B1 (en) Image information processing device and system, image information processing method and storage medium
JP3067275B2 (en) Scene change detection device
JPH0429472A (en) Picture motion detector
JPH05143737A (en) Method and device for identification with motion vector
JP2001043383A (en) Image monitoring system
US8803996B2 (en) Image pickup apparatus for preventing unnatural motion of a motion image
JP2000175081A (en) Noise reduction circuit
JP2839536B2 (en) Motion detection method and motion detector
JPH0331037B2 (en)
US20030063223A1 (en) Detecting static areas
JPH02118884A (en) Separating and partitioning device for moving area
US7327398B2 (en) 3D vector method of inter-field motion detection
WO2000021292A1 (en) Movement deciding device and method
JPH03102978A (en) Moving picture/still picture converter
JP3214953B2 (en) Motion area detection device

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees