JPH056494A - Moving object measuring instrument and measured traffic flow picture processing device - Google Patents

Moving object measuring instrument and measured traffic flow picture processing device

Info

Publication number
JPH056494A
JPH056494A JP30629591A JP30629591A JPH056494A JP H056494 A JPH056494 A JP H056494A JP 30629591 A JP30629591 A JP 30629591A JP 30629591 A JP30629591 A JP 30629591A JP H056494 A JPH056494 A JP H056494A
Authority
JP
Japan
Prior art keywords
data
vehicle
image
extracting
time series
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP30629591A
Other languages
Japanese (ja)
Other versions
JP2757629B2 (en
Inventor
Hiroyasu Taniguchi
博康 谷口
Haruki Furusawa
春樹 古澤
Atsushi Hatanaka
淳 畠中
Akinobu Seki
明伸 関
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP3306295A priority Critical patent/JP2757629B2/en
Priority to EP92104401A priority patent/EP0505858B1/en
Priority to DE69232732T priority patent/DE69232732T2/en
Priority to US07/852,652 priority patent/US5313295A/en
Publication of JPH056494A publication Critical patent/JPH056494A/en
Priority to US08/201,267 priority patent/US5396283A/en
Priority to US08/375,552 priority patent/US5598338A/en
Priority to US08/726,945 priority patent/US5691902A/en
Application granted granted Critical
Publication of JP2757629B2 publication Critical patent/JP2757629B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

PURPOSE:To present a measured traffic flow picture processing device which has a simple constitution and a high measurement precision and can detect plural vehicles simultaneously existing on a picture. CONSTITUTION:The image of a vehicle is picked up by a TV camera 1 controlled by a TV camera control circuit 2, and this picture data is stored in a frame memory 3. The existence area of the vehicle along the vehicle movement route is preliminarily set in accordance with this picture data by an existence area setting circuit 9. Data indicating the vehicle is extracted from picture data in the existence area by a vertical line detecting circuit 10 and is continuously and periodically stored in a data time series storage circuit 12 in time series. The existence of the vehicle moving in the preliminarily set existence area is discriminated in a vehicle discriminating circuit 17 based on the data time series picture obtained by the data time series storage circuit 12, and the state variable of the discriminated vehicle is measured by a vehicle information measuring circuit.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は、移動物体の状態諸量を
検出する移動物体計測装置、及び特に自動車交通流にお
ける交通量、速度、車間距離、密度、占有率、渋滞長、
区間通過所要時間等の状態量を検出する交通流計測画像
処理装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a moving object measuring device for detecting various quantities of states of a moving object, and more particularly to a traffic volume, a speed, an inter-vehicle distance, a density, an occupancy rate, a congestion length in a car traffic flow.
The present invention relates to a traffic flow measurement image processing device that detects a state quantity such as a time required for passing a section.

【0002】[0002]

【従来の技術】移動物体計測装置の1つとして、TVカ
メラを用い、車両交通情報を計測する交通流計測画像処
理装置の開発が行われている。図9は、井上他:「車両
動態計測の試み」、第17回画像工学コンファレンス
(1986年)、16ー13、P295〜298に記載
された従来の交通流計測画像処理装置の構成を示すブロ
ック図である。図において、1は撮像器で例えばTVカ
メラ、2はTVカメラ1を制御するTVカメラ制御回
路、3はデジタル化された撮像信号を取り込むフレーム
メモリ、4は車両の抽出領域を設定するウィンドウ設定
回路、5は車両検出回路、6は車両走行位置検出回路、
7は車両移動量検出回路、8は車両情報計測回路であ
る。
2. Description of the Related Art As one of moving object measuring devices, a traffic flow measuring image processing device for measuring vehicle traffic information using a TV camera has been developed. FIG. 9 is a block diagram showing the configuration of a conventional traffic flow measurement image processing apparatus described in Inoue et al .: “Vehicle dynamics measurement trial”, 17th Image Engineering Conference (1986), 16-13, P295-298. It is a figure. In the figure, 1 is an image pickup device, for example, a TV camera, 2 is a TV camera control circuit for controlling the TV camera 1, 3 is a frame memory for capturing a digitized image pickup signal, and 4 is a window setting circuit for setting a vehicle extraction region. 5, a vehicle detection circuit, 6 a vehicle traveling position detection circuit,
Reference numeral 7 is a vehicle movement amount detection circuit, and 8 is a vehicle information measurement circuit.

【0003】次に動作について説明する。TVカメラ1
はTVカメラ制御回路2に従って任意のフレーム間隔で
走行車両を撮像する。フレームメモリ3は、TVカメラ
1の撮像信号をデジタルに変換したデータを取り込む。
ウィンドウ設定回路4は、道路上で車両の大きさとなる
ウィンドウを画面上で設定する。車両検出回路5は、ウ
ィンドウ設定回路4で設定された領域から、水平線や垂
直線等の車両の特徴を抽出することによって、車両を検
出する。車両走行位置検出回路6は、車両検出回路5で
検出された車両の画面上での走行位置を検出し、車両移
動量検出回路7は、この走行位置と上記車両の前フレー
ムの走行位置とを比較し、車両の画面上での移動量を検
出し、ウィンドウ設定回路4に送信する。ウィンドウ設
定回路4は、移動量に応じてウィンドウを移動させる。
上記動作を繰り返し行い車両を追跡する。車両が画面か
ら消えた時点で追跡を終了し、車両情報計測回路8は、
車両の速度や前車との車間距離などを計測する。
Next, the operation will be described. TV camera 1
Captures images of the traveling vehicle at arbitrary frame intervals according to the TV camera control circuit 2. The frame memory 3 takes in data obtained by converting the image pickup signal of the TV camera 1 into digital data.
The window setting circuit 4 sets a window on the screen, which is the size of the vehicle on the road. The vehicle detection circuit 5 detects the vehicle by extracting the characteristics of the vehicle such as horizontal lines and vertical lines from the area set by the window setting circuit 4. The vehicle traveling position detection circuit 6 detects the traveling position on the screen of the vehicle detected by the vehicle detection circuit 5, and the vehicle movement amount detection circuit 7 detects the traveling position and the traveling position of the front frame of the vehicle. By comparison, the amount of movement of the vehicle on the screen is detected and transmitted to the window setting circuit 4. The window setting circuit 4 moves the window according to the moving amount.
The above operation is repeated to track the vehicle. Tracking ends when the vehicle disappears from the screen, and the vehicle information measurement circuit 8
It measures the speed of the vehicle and the distance to the vehicle in front.

【0004】[0004]

【発明が解決しようとする課題】従来の移動物体計測装
置又は、交通流計測画像処理装置は、以上のように構成
されているので、フレーム間の追跡処理が必要で構成が
複雑になるという問題点がある。またノイズや他車両の
影響により、車両検出ができなくなった場合、車両を追
跡することができず、計測精度が下がるという問題があ
った。さらに画面上に複数の車両が存在した場合でも1
台の車両しか追跡することができないという問題点があ
った。
Since the conventional moving object measuring device or traffic flow measuring image processing device is configured as described above, there is a problem that a tracking process between frames is required and the configuration becomes complicated. There is a point. Further, when the vehicle cannot be detected due to the influence of noise or other vehicles, there is a problem that the vehicle cannot be tracked and the measurement accuracy decreases. Furthermore, even if there are multiple vehicles on the screen, 1
There was a problem that only one vehicle could be tracked.

【0005】本発明は、上記のような問題点を解決する
ためになされたもので、追跡のためのフレーム間の移動
物体の対応づけがいらず、構成が簡単で、一部のフレー
ムで車両情報が欠落しても車両が抽出でき、計測精度が
高く、また画面上で同時に存在する複数の移動物体を検
出することができる移動物体計測装置、又は交通流計測
画像処理装置を提供することを目的とする。
The present invention has been made in order to solve the above-mentioned problems, and does not require the correspondence of moving objects between frames for tracking, has a simple structure, and has a part of the frames. It is possible to provide a moving object measurement device or a traffic flow measurement image processing device that can extract a vehicle even if information is lost, has high measurement accuracy, and can detect a plurality of moving objects that are present on the screen at the same time. To aim.

【0006】[0006]

【課題を解決するための手段】本発明の請求項1の移動
物体計測装置は、移動物体の移動中の映像を撮像する撮
像部と、この撮像部を制御する制御手段と、上記撮像部
からの画像データを記憶するフレームメモリとを備え、
上記画像データを処理して、移動物体を検出し、移動物
体の情報を求める移動物体計測装置において、上記移動
物体の移動経路に沿った移動物体の存在領域を、上記画
像データから予め設定する存在領域設定手段と、上記存
在領域内の画像データから移動物体を示すデータを抽出
する抽出手段と、この抽出手段で抽出した移動物体を示
すデータを時系列に一定周期で連続して蓄積するデータ
時系列蓄積手段とを設け、上記予め設定した存在領域中
を移動する移動物体の時間的変化を検出するようにした
ものである。
According to a first aspect of the present invention, there is provided a moving object measuring apparatus comprising: an image pickup section for picking up a moving image of a moving object; control means for controlling the image pickup section; And a frame memory for storing image data of
In the moving object measuring device that processes the image data, detects the moving object, and obtains information about the moving object, the presence area that presets the existence region of the moving object along the moving path of the moving object from the image data. Area setting means, extraction means for extracting data indicating a moving object from the image data in the existing area, and data for continuously storing the data indicating the moving object extracted by the extracting means in a time series at a constant cycle A sequence accumulating means is provided to detect a temporal change of a moving object moving in the preset existing area.

【0007】本発明の請求項2の移動物体計測装置は、
上記データ時系列蓄積手段によって得られたデータ時系
列蓄積画像を2値化し、2次元2値データを作成する2
値化手段と、この2値化手段によって2値化された画像
データのうち、基準とする2値データの所定の方向にの
びる両隣のデータが、上記基準データと同じ2値データ
であるとき、上記基準データの上記所定の方向と垂直方
向にある2値データを上記基準データと同じデータに変
化させる穴埋め手段を設けたものである。
The moving object measuring device according to claim 2 of the present invention is
The data time series accumulation image obtained by the data time series accumulation means is binarized to create two-dimensional binary data 2
When the binarizing means and the data on both sides of the image data binarized by the binarizing means that extend in a predetermined direction of the reference binary data are the same binary data as the reference data, There is provided a padding means for changing the binary data in the direction perpendicular to the predetermined direction of the reference data to the same data as the reference data.

【0008】本発明の請求項3の移動物体計測装置は、
上記データ時系列蓄積手段によって得られたデータ時系
列蓄積画像を2値化し、2次元2値データを作成する2
値化手段と、この2値化手段によって2値化された画像
データのうち、基準とする2値データの所定の方向で、
上記基準データの片側一方に、上記基準データと同じ値
の2値データが連続し、かつ上記基準データの上記所定
の方向と反対方向に上記基準データと違う値の2値デー
タが連続するとき、その基準データを線分の要素として
抽出する線分要素抽出手段を設けたものである。
The moving object measuring apparatus according to claim 3 of the present invention is
The data time series accumulation image obtained by the data time series accumulation means is binarized to create two-dimensional binary data 2
In the predetermined direction of the reference binary data of the binarizing means and the image data binarized by the binarizing means,
When, on one side of the reference data, binary data having the same value as the reference data continues, and binary data having a value different from the reference data continues in the opposite direction to the predetermined direction of the reference data, A line segment element extracting means for extracting the reference data as a line segment element is provided.

【0009】本発明の請求項4の交通流計測画像処理装
置は、車両を撮像するTVカメラと、このTVカメラを
制御するTVカメラ制御回路と、上記TVカメラからの
画像データを記憶するフレームメモリと、上記車両の移
動経路に沿った車両の存在領域を、上記画像データから
予め設定する存在領域設定手段と、上記存在領域内の画
像データから車両を示すデータを抽出する抽出手段と、
この抽出手段で抽出した車両を示すデータを時系列に一
定周期で連続して蓄積するデータ時系列蓄積手段と、上
記データ時系列蓄積手段によって得られたデータ時系列
画像から、上記予め設定した存在領域中を移動する車両
の存在を判定する車両判定手段と、この車両判定手段で
判定された車両の状態量を計測する状態量計測手段を備
えたものである。
According to a fourth aspect of the present invention, there is provided a traffic flow measurement image processing apparatus, which is a TV camera for imaging a vehicle, a TV camera control circuit for controlling the TV camera, and a frame memory for storing image data from the TV camera. A presence area of the vehicle along the movement route of the vehicle, an existence area setting means for presetting the existence data from the image data, and an extraction means for extracting data indicating the vehicle from the image data in the existence area;
The preset presence exists from the data time series accumulating means for accumulating the data indicating the vehicle extracted by the extracting means in a time series continuously at a constant cycle, and the data time series image obtained by the data time series accumulating means. A vehicle determination means for determining the presence of a vehicle moving in the area and a state quantity measuring means for measuring the state quantity of the vehicle determined by the vehicle determination means are provided.

【0010】本発明の請求項5の交通流計測画像処理装
置は、上記データ時系列蓄積手段によって得られたデー
タ時系列蓄積画像を2値化し、2次元2値データを作成
する2値化手段と、この2値化手段によって2値化され
た画像データのうち、基準とする2値データの所定の方
向にのびる両隣のデータが、上記基準データと同じ2値
データであるとき、上記基準データの上記所定の方向と
垂直方向にある2値データを上記基準データと同じデー
タに変化させる穴埋め手段を設けたものである。
According to a fifth aspect of the present invention, there is provided a traffic flow measurement image processing device, wherein the data time series accumulation image obtained by the data time series accumulation means is binarized and binarized means for creating two-dimensional binary data. In the image data binarized by the binarizing means, when the two adjacent data extending in a predetermined direction of the reference binary data are the same binary data as the reference data, the reference data Is provided with a filling means for changing the binary data in the direction perpendicular to the predetermined direction to the same data as the reference data.

【0011】本発明の請求項6の交通流計測画像処理装
置は、上記データ時系列蓄積手段によって得られたデー
タ時系列蓄積画像を2値化し、2次元2値データを作成
する2値化手段と、この2値化手段によって2値化され
た画像データのうち、基準とする2値データの所定の方
向で、上記基準データの片側一方に、上記基準データと
同じ値の2値データが連続し、かつ上記基準データの上
記所定の方向と反対方向に上記基準データと違う値の2
値データが連続するとき、その基準データを線分の要素
として抽出する線分要素抽出手段を設けたものである。
According to a sixth aspect of the present invention, there is provided a traffic flow measurement image processing apparatus which binarizes the data time series accumulated image obtained by the data time series accumulating means to create two-dimensional binary data. Of the image data binarized by the binarizing means, binary data having the same value as the reference data is continuously provided on one side of the reference data in a predetermined direction of the reference binary data. And a value of 2 different from the reference data in the direction opposite to the predetermined direction of the reference data.
When the value data are continuous, the line segment element extraction means is provided for extracting the reference data as a line segment element.

【0012】本発明の請求項7の交通流計測画像処理装
置は、車両を撮像するTVカメラと、このTVカメラを
制御するTVカメラ制御回路と、上記TVカメラからの
画像データを記憶するフレームメモリと、上記車両の移
動経路に沿った車両の存在領域を、上記画像データから
予め設定する存在領域設定手段と、上記存在領域内の画
像データから車両を示すデータを抽出する抽出手段と、
この抽出手段で抽出されたデータに付帯する情報を抽
出、保持する付帯情報抽出手段と、この付帯情報抽出手
段の付帯情報を参照し、上記抽出手段で抽出した車両を
示すデータを選択する車両データ選択手段と、上記車両
データ選択手段で得られるデータを時系列に一定周期で
連続して蓄積するデータ時系列蓄積手段と、このデータ
時系列蓄積手段によって得られたデータ時系列画像か
ら、上記予め設定した存在領域中を移動する車両の存在
を判定する車両判定手段と、この車両判定手段で判定さ
れた車両の状態量を計測する状態量計測手段を備えたも
のである。
According to a seventh aspect of the present invention, there is provided a traffic flow measurement image processing apparatus, a TV camera for picking up an image of a vehicle, a TV camera control circuit for controlling the TV camera, and a frame memory for storing image data from the TV camera. A presence area of the vehicle along the movement route of the vehicle, an existence area setting means for presetting the existence data from the image data, and an extraction means for extracting data indicating the vehicle from the image data in the existence area;
Vehicle data for extracting the data incidental to the data extracted by the extracting means and referring to the incidental information of the incidental information extracting means for retaining and extracting the incidental information, and selecting the data indicating the vehicle extracted by the extracting means. From the selection means, the data time series accumulation means for continuously accumulating the data obtained by the vehicle data selection means in a time series at a constant cycle, and the data time series image obtained by the data time series accumulation means, A vehicle determination means for determining the presence of a vehicle moving in the set existing area and a state quantity measuring means for measuring the state quantity of the vehicle determined by the vehicle determination means are provided.

【0013】本発明の請求項8の交通流計測画像処理装
置は、車両を撮像するTVカメラと、このTVカメラを
制御するTVカメラ制御回路と、上記TVカメラからの
画像データを記憶するフレームメモリと、上記車両の移
動経路に沿った車両の存在領域を、上記画像データから
予め設定する存在領域設定手段と、上記存在領域内の画
像データから車両を示すデータを抽出する抽出手段と、
上記抽出手段で抽出されたデータに付帯する情報を抽
出、保持する付帯情報抽出手段と、上記抽出手段で抽出
した車両を示すデータを時系列に一定周期で連続して蓄
積するデータ時系列蓄積手段と、このデータ時系列蓄積
手段によって得られたデータ時系列画像から、上記予め
設定した存在領域中を移動する車両の存在を判定する車
両判定手段と、上記付帯情報抽出手段と上記車両判定手
段で得られるデータを参照し、車両の挙動を検出する車
両動作検出手段と、上記車両判定手段で判定された車両
の状態量を計測する状態量計測手段を備えたものであ
る。
A traffic flow measurement image processing apparatus according to claim 8 of the present invention is a TV camera for picking up an image of a vehicle, a TV camera control circuit for controlling the TV camera, and a frame memory for storing image data from the TV camera. A presence area of the vehicle along the movement route of the vehicle, an existence area setting means for presetting the existence data from the image data, and an extraction means for extracting data indicating the vehicle from the image data in the existence area;
Additional information extracting means for extracting and holding information incidental to the data extracted by the extracting means, and data time series accumulating means for accumulating the data indicating the vehicle extracted by the extracting means in a time series continuously at a constant cycle. And a vehicle determination means for determining the presence of a vehicle moving in the preset presence area from the data time-series image obtained by the data time-series storage means, the additional information extraction means, and the vehicle determination means. It is provided with a vehicle motion detecting means for detecting the behavior of the vehicle by referring to the obtained data, and a state quantity measuring means for measuring the state quantity of the vehicle judged by the vehicle judging means.

【0014】[0014]

【作用】本発明の請求項1、請求項4の移動物体計測装
置及び交通流計測画像処理装置は、移動物体の移動経路
に沿った移動物体の存在領域を設定し、この存在領域内
で移動物体を示すデータを一定周期のフレーム毎に任意
のフレーム数だけ抽出し、抽出されたこれらのデータ
を、時系列に連続して蓄積して作成されるデータ時系列
蓄積画像を作成する。
The moving object measuring device and the traffic flow measuring image processing device according to claims 1 and 4 of the present invention set a region where a moving object exists along a moving path of the moving object, and move within the existing region. Data indicating an object is extracted for each arbitrary number of frames in a fixed cycle, and these extracted data are continuously accumulated in time series to create a data time series accumulated image.

【0015】本発明の請求項2、請求項5の移動物体計
測装置及び交通流計測画像処理装置は、請求項1、請求
項4のデータ時系列蓄積画像を2値化した2値化データ
に対して、基準とする2値データの所定の方向にのびる
両隣のデータが、基準データと同じ2値データであると
き、基準データの所定の方向と垂直方向にある2値デー
タを基準データと同じデータに変化させる。
The moving object measuring device and the traffic flow measuring image processing device according to claims 2 and 5 of the present invention are binarized data obtained by binarizing the data time series accumulated image according to claim 1 and claim 4. On the other hand, when the data on both sides extending in the predetermined direction of the reference binary data is the same binary data as the reference data, the binary data in the direction perpendicular to the predetermined direction of the reference data is the same as the reference data. Change into data.

【0016】本発明の請求項3、請求項6の移動物体計
測装置及び交通流計測画像処理装置は、請求項1、請求
項4のデータ時系列蓄積画像を2値化した2値化データ
に対して、基準とする2値データの所定の方向で、同じ
値の2値データが連続し、かつ基準データの所定の方向
と反対方向に基準データと違う値の2値データが連続す
るとき、その基準データを線分の要素として抽出する。
The moving object measuring device and the traffic flow measuring image processing device according to claims 3 and 6 of the present invention are binarized data obtained by binarizing the data time series accumulated image according to claim 1 and claim 4. On the other hand, when the binary data of the same value is continuous in the predetermined direction of the reference binary data, and the binary data of the value different from the reference data is continuous in the opposite direction to the predetermined direction of the reference data, The reference data is extracted as a line segment element.

【0017】本発明の請求項7の交通流計測画像処理装
置は、移動物体の移動経路に沿った移動物体の存在領域
を設定し、この存在領域内で車両を示すデータを一定周
期のフレーム毎に任意のフレーム数だけ抽出し、それと
同時に、車両を示すデータに付帯する情報を抽出、保持
し、その付帯情報をもとに、車両を示すデータの内、車
両として確からしいものだけを選択して、時系列に連続
して蓄積してデータ時系列蓄積画像を作成する。
According to a seventh aspect of the present invention, there is provided a traffic flow measurement image processing apparatus which sets a region in which a moving object exists along a moving path of the moving object, and in the present region, data indicating a vehicle is displayed for each frame of a constant cycle. , And at the same time, extracts and retains information incidental to the data indicating the vehicle, and based on the incidental information, selects only the probable vehicle among the data indicating the vehicle. Then, the data is sequentially accumulated in time series to create a data time series accumulated image.

【0018】本発明の請求項8の交通流計測画像処理装
置は、移動物体の移動経路に沿った移動物体の存在領域
を設定し、この存在領域内で車両を示すデータを一定周
期のフレーム毎に任意のフレーム数だけ抽出し、それと
同時に、車両を示すデータに付帯する情報を抽出、保持
する。車両を示すデータを時系列に連続して蓄積してデ
ータ時系列蓄積画像を作成し、このデータ時系列蓄積画
像を用いて車両を検出し、さらに、車両データに付帯す
る情報を参照し、検出された車両の挙動を検出する。
The traffic flow measurement image processing apparatus according to claim 8 of the present invention sets a region where a moving object exists along a moving path of the moving object, and in the present region, data indicating a vehicle is set for each frame of a constant cycle. At the same time, an arbitrary number of frames are extracted, and at the same time, information incidental to the data indicating the vehicle is extracted and held. Data indicating the vehicle is continuously accumulated in time series to create a data time series accumulated image, the vehicle is detected using this data time series accumulated image, and the information attached to the vehicle data is referred to for detection. The behavior of the vehicle that has been taken.

【0019】[0019]

【実施例】【Example】

実施例1.図1は本発明の実施例1に係る交通流計測画
像処理装置の構成を示すブロック図である。図におい
て、9は存在領域設定回路、10は垂直線検出回路、1
1はプロジェクションデータ作成回路、12はデータ時
系列蓄積回路、13は2値化回路、14は穴埋め回路、
15は線分要素抽出回路、16は線分抽出回路、17は
車両判定回路、18は車両情報計測回路である。
Example 1. 1 is a block diagram showing the configuration of a traffic flow measurement image processing apparatus according to a first embodiment of the present invention. In the figure, 9 is a presence area setting circuit, 10 is a vertical line detection circuit, and 1 is a vertical line detection circuit.
1 is a projection data creation circuit, 12 is a data time series storage circuit, 13 is a binarization circuit, 14 is a fill-in circuit,
Reference numeral 15 is a line segment element extraction circuit, 16 is a line segment extraction circuit, 17 is a vehicle determination circuit, and 18 is a vehicle information measurement circuit.

【0020】次に動作について説明する。TVカメラ1
はTVカメラ制御回路2に従って任意のフレーム間隔で
走行車両を撮像する。フレームメモリ3は、TVカメラ
1の撮像信号をデジタルに変換したデータを取り込む。
このデータは2次元画像データであり、以後、水平方向
をx方向、垂直方向をy方向とする。存在領域設定回路
9は、予め設定された車両の移動経路に沿った車両の存
在領域のデータをフレームメモリ3から取り出す。図2
は、TVカメラで道路を撮像した画面上に存在領域設定
回路9を用いて設定された存在領域の一例を示した説明
図で、20は存在領域である。垂直線検出回路10は、
存在領域のデータから、例えば垂直線検出フィルタ等を
用いて、垂直線エッジを取り出す。このとき、垂直線エ
ッジの存在するところを1、それ以外のところを0とす
る垂直線エッジデータが作成される。プロジェクション
データ作成回路11は、垂直線エッジデータをx方向に
投影し、x方向サイズは1、y方向サイズは画面サイズ
の1次元プロジェクションデータを作成する。図3は垂
直線エッジデータ及びプロジェクションデータを示した
説明図で、30は垂直線エッジデータ、31はプロジェ
クションデータを示す。プロジェクションデータ31
は、1フレームで1つ作成される。上記までの処理を一
定周期で繰り返す。データ時系列蓄積回路12は、プロ
ジェクションデータ31を予め決められた個数だけ、時
系列で蓄積していき、2次元データを作成する。2値化
回路13は、この2次元データを適当なしきい値Th0
で2値化する。図4は、2値データを示した説明図で、
水平方向は時刻(以後t方向)を、垂直方向は、y方向
を示し、40a,40bは車両の軌跡を示す。図4で、
時刻は、左から右へいくにつれて、遅くなっている。
Next, the operation will be described. TV camera 1
Captures images of the traveling vehicle at arbitrary frame intervals according to the TV camera control circuit 2. The frame memory 3 takes in data obtained by converting the image pickup signal of the TV camera 1 into digital data.
This data is two-dimensional image data, and hereinafter, the horizontal direction is the x direction and the vertical direction is the y direction. The existence area setting circuit 9 retrieves from the frame memory 3 the data of the existence area of the vehicle along the preset movement route of the vehicle. Figure 2
Is an explanatory diagram showing an example of an existing area set by using the existing area setting circuit 9 on a screen of a road imaged by a TV camera, and 20 is an existing area. The vertical line detection circuit 10
A vertical line edge is extracted from the data in the existing area by using, for example, a vertical line detection filter. At this time, vertical line edge data in which the position where the vertical line edge exists is 1 and the other position is 0 is created. The projection data creation circuit 11 projects vertical line edge data in the x direction, and creates one-dimensional projection data in which the size in the x direction is 1 and the size in the y direction is the screen size. FIG. 3 is an explanatory diagram showing vertical line edge data and projection data. Reference numeral 30 shows vertical line edge data and 31 shows projection data. Projection data 31
Is created in one frame. The above process is repeated in a fixed cycle. The data time series accumulation circuit 12 accumulates the projection data 31 in time series by a predetermined number and creates two-dimensional data. The binarization circuit 13 converts this two-dimensional data into an appropriate threshold value Th0.
Binarize with. FIG. 4 is an explanatory diagram showing binary data,
The horizontal direction indicates the time (hereinafter, t direction), the vertical direction indicates the y direction, and 40a and 40b indicate the locus of the vehicle. In Figure 4,
The time is getting slower from left to right.

【0021】2値データは、他車両の隠蔽等により、垂
直エッジが抽出できなかった場合には、41に示す穴が
生じる。穴埋め回路14は、2値データの穴埋めを以下
の処理により行う。2値データをy方向を下から上に、
またt方向を左或は右から順にアクセスし、基準データ
を選ぶ。基準データが1で、かつt方向において、基準
データと隣合う2つのデータが、共に1であるという条
件が成り立つとき、y方向において基準データの上にあ
るデータを1にする。上記以外の条件の場合には、何も
行わない。この操作をすべてのデータに対して行う。図
5は、穴埋め法の説明図で、50は、穴埋めをする前の
2値データの一部を示し、51は、上記の穴埋めを行っ
た結果の2値データを示す。図中、斜線部は、2値デー
タで1の値のデータを示し、それ以外は、0の値のデー
タを示す。
In the binary data, when a vertical edge cannot be extracted due to concealment of another vehicle, a hole 41 is formed. The fill-in circuit 14 fills in the binary data by the following processing. Binary data in the y direction from bottom to top,
Further, the t direction is sequentially accessed from the left or the right to select the reference data. When the condition that the reference data is 1 and two data adjacent to the reference data in the t direction are both 1 is satisfied, the data above the reference data in the y direction is set to 1. If the condition is other than the above, nothing is done. Do this for all data. FIG. 5 is an explanatory diagram of the hole filling method, in which 50 indicates a part of the binary data before the hole filling, and 51 indicates the binary data obtained as a result of the above hole filling. In the figure, the shaded area indicates binary data having a value of 1, and the other portions represent data having a value of 0.

【0022】線分要素抽出回路15は、車両の一部の軌
跡を示す線分の要素となるデータを以下に示す処理で行
う。穴埋めされた2値データをy方向を上或は下から順
に、またt方向を左或は右から順にアクセスし、基準デ
ータを選ぶ。基準データが1で、t方向において、基準
データの左側に予め設定された個数だけ1の値を持つデ
ータが連続し、かつ基準データの右側に予め設定された
個数だけ0の値を持つデータが連続するという条件が成
立するとき、又は基準データが1で、y方向において、
基準データの上側に予め設定された個数だけ1の値を持
つデータが連続し、かつ基準データの下側に予め設定さ
れた個数だけ0の値を持つデータが連続するという条件
が成立するとき、基準データを線分の要素として抽出す
る。この操作をすべてのデータに対して行う。この処理
により、2値データで1の領域の右側の輪郭線が線分の
要素として抽出される。図6は、線分要素抽出法の説明
図で、60は、2値データの一部を示し、61は、上記
の線分要素抽出を基準データの左側に1の値を持つデー
タが1個、かつ基準データの右側に0の値を持つデータ
が1個存在するという条件のもとで処理した結果を示
す。図中、斜線部60は2値データで1の値のデータを
示し、斜線部61は線分として抽出されたデータを示
す。
The line segment element extraction circuit 15 performs the following process on the data which is the element of the line segment showing the trajectory of a part of the vehicle. The padded binary data is accessed in order from the top or bottom in the y direction and from the left or right in the t direction to select the reference data. In the t direction, the data having the value of 1 is continuously set to the left side of the reference data in the t direction, and the data having the value of 0 is set to the right side of the reference data. When the condition of being continuous is satisfied, or when the reference data is 1 and in the y direction,
When the condition that data having a preset value of 1 is continuous above the reference data and data having a preset value of 0 is continuous below the reference data is satisfied, The reference data is extracted as an element of the line segment. Do this for all data. By this processing, the contour line on the right side of the area 1 in binary data is extracted as an element of a line segment. FIG. 6 is an explanatory view of the line segment element extraction method, in which 60 indicates a part of the binary data, and 61 indicates one piece of data having a value of 1 on the left side of the reference data for the above line segment element extraction. , And the result of processing under the condition that one data having a value of 0 exists on the right side of the reference data. In the figure, a shaded area 60 indicates binary data having a value of 1, and a shaded area 61 indicates data extracted as a line segment.

【0023】線分抽出回路16は線分の要素を連結し
て、線分を抽出する。車両判定回路17は線分の長さや
画面上の位置により判定を行い、車両となる線分を抽出
する。車両情報計測回路18は、車両として抽出された
線分の始点及び終点の3次元位置情報を用いて、車両の
速度や前車との車間距離などを計測する。
The line segment extraction circuit 16 connects the elements of the line segment to extract the line segment. The vehicle determination circuit 17 makes a determination based on the length of the line segment and the position on the screen, and extracts the line segment that becomes the vehicle. The vehicle information measuring circuit 18 measures the speed of the vehicle, the distance between the vehicle and the preceding vehicle, using the three-dimensional position information of the start point and the end point of the line segment extracted as the vehicle.

【0024】なお、上記実施例では、存在領域内のデー
タの処理として、垂直線検出回路を設けたが、車両の特
徴を抽出する処理ならなんでもよい。
In the above embodiment, the vertical line detection circuit is provided for processing the data in the existing area, but any processing for extracting the characteristics of the vehicle may be used.

【0025】また、2値化回路をデータ時系列蓄積回路
の後に設けたが、プロジェクション作成回路とデータ時
系列蓄積回路の間に設けてもよい。穴埋め回路を設けた
が、車両情報の欠落のない場合には、省略してもよい。
また、穴埋め回路では、2値データをy方向を下から上
にアクセスしたが、上から下にアクセスしてもよく、そ
の場合には、基準データが1で、かつt方向において、
基準データと隣合う2つのデータが、共に1であるとい
う条件が成り立つとき、y方向において基準データの下
にあるデータを1にする処理を行う。
Although the binarization circuit is provided after the data time series storage circuit, it may be provided between the projection creation circuit and the data time series storage circuit. Although the hole filling circuit is provided, it may be omitted if the vehicle information is not missing.
Further, in the padding circuit, although the binary data is accessed from the bottom in the y direction to the top, the binary data may be accessed from the top to the bottom. In that case, the reference data is 1 and in the t direction,
When the condition that the two data adjacent to the reference data are both 1 is satisfied, the data below the reference data in the y direction is set to 1.

【0026】線分要素抽出回路では、基準データが1
で、t方向において、基準データの左側に予め設定され
た個数だけ1の値を持つデータが連続し、かつ基準デー
タの右側に予め設定された個数だけ0の値を持つデータ
が連続するか、又は基準データが1で、y方向におい
て、基準データの上側に予め設定された個数だけ1の値
を持つデータが連続し、かつ基準データの下側に予め設
定された個数だけ0の値を持つデータが連続するという
条件を用いたが、基準データが1で、t方向において、
基準データの左側に予め設定された個数だけ0の値を持
つデータが連続し、かつ基準データの右側に予め設定さ
れた個数だけ1の値を持つデータが連続するか、又は基
準データが1で、y方向において、基準データの上側に
予め設定された個数だけ0の値を持つデータが連続し、
かつ基準データの下側に予め設定された個数だけ1の値
を持つデータが連続するという条件を用いてもよく、こ
の場合には、2値データで1の領域の左側の輪郭線が線
分の要素として抽出される。
In the line segment element extraction circuit, the reference data is 1
In the t direction, data having a value of 1 is continuously set to the left side of the reference data, and data having a value of 0 is set to the right side of the reference data. Alternatively, the reference data is 1, and in the y-direction, data having a value of 1 which is a preset number above the reference data is continuous and has a value of 0 which is a preset number below the reference data. We used the condition that the data are continuous, but the reference data is 1, and in the t direction,
The preset number of data with a value of 0 is continuous on the left side of the reference data, and the preset number of data with a value of 1 is continuous on the right side of the reference data, or the reference data is 1 , In the y-direction, a predetermined number of data having a value of 0 continues above the reference data,
In addition, a condition that a preset number of data having a value of 1 continues below the reference data may be used. In this case, in the binary data, the contour line on the left side of the region of 1 is a line segment. Is extracted as an element of.

【0027】2値データの値は、1の値を0に、0の値
を1に置き換えてもよく、上記実施例と同様の効果を奏
する。
Regarding the value of the binary data, the value of 1 may be replaced with 0 and the value of 0 may be replaced with 1, and the same effect as that of the above embodiment is obtained.

【0028】実施例2.図7は本発明の実施例2に係る
交通流計測画像処理装置の構成を示すブロック図であ
る。図において、70は水平位置抽出回路、71は選択
プロジェクションデータ作成回路である。
Example 2. FIG. 7 is a block diagram showing the configuration of the traffic flow measurement image processing apparatus according to the second embodiment of the present invention. In the figure, 70 is a horizontal position extraction circuit, and 71 is a selection projection data creation circuit.

【0029】次に動作について説明する。TVカメラ1
はTVカメラ制御回路2に従って任意のフレーム間隔で
走行車両を撮像する。フレームメモリ3は、TVカメラ
1の撮像信号をデジタルに変換したデータを取り込む。
このデータは2次元画像データであり、以後、水平方向
をx方向、垂直方向をy方向とする。存在領域設定回路
9は、予め設定された車両の移動経路に沿った車両の存
在領域のデータをフレームメモリ3から取り出す。垂直
線検出回路10は、存在領域のデータから、例えば垂直
線検出フィルタ等を用いて、垂直線エッジを取り出す。
このとき、垂直線エッジの存在するところを1、それ以
外のところを0とする垂直線エッジデータが作成され
る。水平位置抽出回路70は、各水平ラインごとに、水
平ラインに存在するすべての垂直線エッジの水平位置
(x座標)の平均値(x重心)及び水平ライン上で最も
左にある垂直線エッジの水平位置(最左点)と最も右に
ある垂直線エッジの水平位置(最右点)を抽出し、この
データを保持する。選択プロジェクションデータ作成回
路71は、水平位置抽出回路70のデータを参照し、水
平位置のx重心がある指定範囲内にある、または最左点
と最右点との距離があるしきい値Th1以上であるとい
う条件を満たす水平ラインを選択し、選択された水平ラ
インのすべての垂直線エッジデータをx方向に投影し、
選択されなかった水平ラインの投影値を0にして、x方
向サイズは1、y方向サイズは画面サイズの1次元プロ
ジェクションデータを作成する。水平ラインの選択は、
抽出対象となる車両の垂直線エッジデータである可能性
の高いデータのみを抽出するために行なう。プロジェク
ションデータ31は、1フレームで1つ作成される。上
記までの処理を一定周期で繰り返す。データ時系列蓄積
回路12は、プロジェクションデータ31を予め決めら
れた個数だけ、時系列で蓄積していき、2次元データを
作成する。2値化回路13は、この2次元データをしき
い値Th0で2値化する。穴埋め回路14は、実施例1
に示した方法で、2値化された2次元データの穴埋を行
う。線分要素抽出回路15は、実施例1で示した方法
で、穴埋めされた2次元データから車両の一部の軌跡を
示す線分の要素となるデータを抽出する。線分抽出回路
16は線分の要素を連結して、線分を抽出する。車両判
定回路17は線分の長さや画面上の位置により判定を行
い、車両となる線分を抽出する。車両情報計測回路18
は、車両として抽出された線分の始点及び終点の3次元
位置情報を用いて、車両の速度や前車との車間距離など
を計測する。
Next, the operation will be described. TV camera 1
Captures images of the traveling vehicle at arbitrary frame intervals according to the TV camera control circuit 2. The frame memory 3 takes in data obtained by converting the image pickup signal of the TV camera 1 into digital data.
This data is two-dimensional image data, and hereinafter, the horizontal direction is the x direction and the vertical direction is the y direction. The existence area setting circuit 9 retrieves from the frame memory 3 the data of the existence area of the vehicle along the preset movement route of the vehicle. The vertical line detection circuit 10 extracts a vertical line edge from the data in the existing area using, for example, a vertical line detection filter.
At this time, vertical line edge data in which the position where the vertical line edge exists is 1 and the other position is 0 is created. For each horizontal line, the horizontal position extraction circuit 70 determines the average value (x centroid) of horizontal positions (x coordinates) of all vertical line edges existing in the horizontal line and the leftmost vertical line edge on the horizontal line. The horizontal position (leftmost point) and the horizontal position of the rightmost vertical line edge (rightmost point) are extracted, and this data is held. The selected projection data creation circuit 71 refers to the data of the horizontal position extraction circuit 70, and is within the specified range of the x-centroid of the horizontal position, or the distance between the leftmost point and the rightmost point has a threshold value Th1 or more. Select a horizontal line that satisfies the condition that, and project all vertical line edge data of the selected horizontal line in the x direction,
One-dimensional projection data in which the x-direction size is 1 and the y-direction size is the screen size is created by setting the projection value of the unselected horizontal line to 0. Horizontal line selection is
This is performed to extract only the data that is likely to be the vertical line edge data of the vehicle to be extracted. One projection data 31 is created in one frame. The above process is repeated in a fixed cycle. The data time series accumulation circuit 12 accumulates the projection data 31 in time series by a predetermined number and creates two-dimensional data. The binarization circuit 13 binarizes this two-dimensional data with a threshold value Th0. The hole filling circuit 14 is the first embodiment.
The binarized two-dimensional data is filled by the method shown in FIG. The line segment element extraction circuit 15 extracts data, which is an element of a line segment indicating a part of the locus of the vehicle, from the filled two-dimensional data by the method described in the first embodiment. The line segment extraction circuit 16 connects the elements of the line segment to extract the line segment. The vehicle determination circuit 17 makes a determination based on the length of the line segment and the position on the screen, and extracts the line segment that becomes the vehicle. Vehicle information measuring circuit 18
Uses the three-dimensional position information of the start point and the end point of the line segment extracted as the vehicle to measure the speed of the vehicle, the distance between the vehicle and the preceding vehicle, and the like.

【0030】実施例3.図8は本発明の実施例3に係る
交通流計測画像処理装置の構成を示すブロック図であ
る。図において、80は車両動作検出回路である。
Example 3. FIG. 8 is a block diagram showing the configuration of the traffic flow measurement image processing apparatus according to the third embodiment of the present invention. In the figure, 80 is a vehicle motion detection circuit.

【0031】次に動作について説明する。TVカメラ1
はTVカメラ制御回路2に従って任意のフレーム間隔で
走行車両を撮像する。フレームメモリ3は、TVカメラ
1の撮像信号をデジタルに変換したデータを取り込む。
このデータは2次元画像データであり、以後、水平方向
をx方向、垂直方向をy方向とする。存在領域設定回路
9は、予め設定された車両の移動経路に沿った車両の存
在領域のデータをフレームメモリ3から取り出す。垂直
線検出回路10は、存在領域のデータから例えば垂直線
検出フィルタ等を用いて、垂直線エッジを取り出す。こ
のとき、垂直線エッジの存在するところを1、それ以外
のところを0とする垂直線エッジデータが作成される。
水平位置抽出回路70は、各水平ラインごとに、水平ラ
インに存在するすべての垂直線エッジの水平位置(x座
標)の平均値(x重心)及び水平ライン上で最も左にあ
る垂直線エッジの水平位置(最左点)と最も右にある垂
直線エッジの水平位置(最右点)を抽出し、このデータ
を保持する。プロジェクションデータ作成回路11は、
垂直線エッジデータをx方向に投影し、x方向サイズは
1、y方向サイズは画面サイズの1次元プロジェクショ
ンデータを作成する。プロジェクションデータ31は、
1フレームで1つ作成される。上記までの処理を一定周
期で繰り返す。データ時系列蓄積回路12は、プロジェ
クションデータ31を予め決められた個数だけ、時系列
で蓄積していき、2次元データを作成する。2値化回路
13は、この2次元データをしきい値Th0で2値化す
る。穴埋め回路14は、実施例1に示した方法で、2値
化された2次元データの穴埋を行う。線分要素抽出回路
15は、実施例1で示した方法で、穴埋めされた2次元
データから車両の一部の軌跡を示す線分の要素となるデ
ータを抽出する。線分抽出回路16は線分の要素を連結
して、線分を抽出する。車両判定回路17は線分の長さ
や画面上の位置により判定を行い、車両となる線分を抽
出する。車両動作検出回路80は、車両と判定された線
分に対して、水平位置抽出回路70の情報を用いて、車
両の挙動を検出する。以下に、車両の挙動の検出方法を
示す。車両動作検出回路80は、車両と判定された線分
の各要素のx重心を水平位置抽出回路70から取得し、
線分に対する、x重心とx重心が存在する水平ラインの
存在領域の水平方向の中央値との距離差の平均値がしき
い値Th2以下のときには、この車両を中央付近を走行
している車両と判定する。逆に、線分に対する、x重心
とx重心が存在する水平ラインの存在領域の水平方向の
中央値との距離差の平均値がしきい値Th3以上で、か
つ、要素の最左点と最右点間の距離差の平均値がしきい
値Th4以下の場合には、この車両は、存在領域外を走
行している車両と判定し、除外する。また、線分の始点
に対するx重心と始点の存在する水平ラインの存在領域
の水平方向の中央値との距離差がしきい値Th5以下
で、かつ、線分の終点に対するx重心と存在領域の終点
の存在する水平ラインの存在領域の水平方向の中央値と
の距離差がしきい値Th6以上の場合には、その車両が
存在領域からはずれる傾向にある(車線変更あるいは障
害物回避などの異常走行)と判定する。車両情報計測回
路18は、車両として抽出された線分の始点及び終点の
3次元位置情報を用いて、車両の速度や前車との車間距
離などを計測する。
Next, the operation will be described. TV camera 1
Captures images of the traveling vehicle at arbitrary frame intervals according to the TV camera control circuit 2. The frame memory 3 takes in data obtained by converting the image pickup signal of the TV camera 1 into digital data.
This data is two-dimensional image data, and hereinafter, the horizontal direction is the x direction and the vertical direction is the y direction. The existence area setting circuit 9 retrieves from the frame memory 3 the data of the existence area of the vehicle along the preset movement route of the vehicle. The vertical line detection circuit 10 extracts a vertical line edge from the data in the existing area by using, for example, a vertical line detection filter. At this time, vertical line edge data in which the position where the vertical line edge exists is 1 and the other position is 0 is created.
For each horizontal line, the horizontal position extraction circuit 70 determines the average value (x centroid) of horizontal positions (x coordinates) of all vertical line edges existing in the horizontal line and the leftmost vertical line edge on the horizontal line. The horizontal position (leftmost point) and the horizontal position of the rightmost vertical line edge (rightmost point) are extracted, and this data is held. The projection data creation circuit 11
Vertical line edge data is projected in the x direction, and one-dimensional projection data in which the size in the x direction is 1 and the size in the y direction is the screen size is created. The projection data 31 is
One is created for each frame. The above process is repeated in a fixed cycle. The data time series accumulation circuit 12 accumulates the projection data 31 in time series by a predetermined number and creates two-dimensional data. The binarization circuit 13 binarizes this two-dimensional data with a threshold value Th0. The padding circuit 14 fills the binarized two-dimensional data with the method described in the first embodiment. The line segment element extraction circuit 15 extracts data, which is an element of a line segment indicating a part of the locus of the vehicle, from the filled two-dimensional data by the method described in the first embodiment. The line segment extraction circuit 16 connects the elements of the line segment to extract the line segment. The vehicle determination circuit 17 makes a determination based on the length of the line segment and the position on the screen, and extracts the line segment that becomes the vehicle. The vehicle operation detection circuit 80 detects the behavior of the vehicle for the line segment determined to be the vehicle, using the information of the horizontal position extraction circuit 70. The method of detecting the behavior of the vehicle will be described below. The vehicle motion detection circuit 80 acquires the x centroid of each element of the line segment determined to be the vehicle from the horizontal position extraction circuit 70,
When the average value of the distance difference between the line segment and the median in the horizontal direction of the existence region of the horizontal line where the x center of gravity exists is less than or equal to the threshold value Th2, this vehicle is running near the center. To determine. On the contrary, the average value of the distance difference between the line segment and the median in the horizontal direction of the existence region of the horizontal line where the x center of gravity exists is equal to or larger than the threshold Th3, and the leftmost point and the leftmost point of the element. If the average value of the distance differences between the right points is less than or equal to the threshold value Th4, this vehicle is determined to be a vehicle traveling outside the existing area and is excluded. Further, the distance difference between the x centroid with respect to the start point of the line segment and the horizontal center value of the existing region of the horizontal line where the start point exists is a threshold Th5 or less, and the x centroid with respect to the end point of the line segment and the presence region If the difference in distance between the horizontal center value of the horizontal line where the end point exists and the horizontal center value is greater than or equal to the threshold value Th6, the vehicle tends to deviate from the existing region (such as lane change or obstacle avoidance). Traveling). The vehicle information measuring circuit 18 measures the speed of the vehicle, the distance between the vehicle and the preceding vehicle, using the three-dimensional position information of the start point and the end point of the line segment extracted as the vehicle.

【0032】なお、上記実施例では、線分の始点及び終
点に対するx重心の位置関係により、車両が存在領域か
らはずれる傾向にある(車線変更あるいは障害物回避な
どの異常走行)ことを判定したが、線分の各要素に対す
るx重心を取得し、それらを直線近似して得られる直線
と存在領域の位置関係を用いて、判定してもよい。
In the above-described embodiment, it is determined that the vehicle tends to deviate from the existing area (abnormal running such as lane change or obstacle avoidance) due to the positional relationship of the x center of gravity with respect to the start point and the end point of the line segment. , The x center of gravity of each element of the line segment may be acquired, and the positional relationship between the straight line obtained by linearly approximating them and the existing region may be used for the determination.

【0033】[0033]

【発明の効果】以上のように、本発明の請求項1、請求
項4の発明によれば、追跡のためのフレーム間の移動物
体の対応づけがいらず構成が簡単で、一部のフレームで
車両情報が欠落しても車両が抽出できるため、計測精度
が高く、また画面上で同時に存在する複数の移動物体を
検出することができる移動物体計測装置又は、交通流計
測画像処理装置を提供することができる。
As described above, according to the first and fourth aspects of the present invention, there is no need for associating a moving object between frames for tracking, the structure is simple, and a part of the frames is used. Provide a moving object measuring device or a traffic flow measuring image processing device that has high measurement accuracy and can detect a plurality of moving objects that are present on the screen at the same time because the vehicle can be extracted even if the vehicle information is missing. can do.

【0034】また、本発明の請求項2、請求項5の発明
では、請求項1、請求項4記載のデータ時系列蓄積手段
によって作成されたデータに対して、穴埋めを効率よく
行い、移動物体の検出精度を上げる効果がある。
Further, according to the second and fifth aspects of the present invention, the data created by the data time series accumulating means according to the first and fourth aspects are efficiently filled in, and the moving object is moved. Has the effect of increasing the detection accuracy of.

【0035】また、本発明の請求項3、請求項6の発明
では、請求項1、請求項4記載のデータ時系列蓄積手段
によって作成されたデータに対して、或は請求項2、請
求項5の穴埋め手段によって穴埋めされたデータに対し
て、線分要素の抽出を効率よく行い、処理の高速化を実
現できる。
Further, in the inventions of claim 3 and claim 6 of the present invention, the data created by the data time series accumulating means of claim 1 or claim 4 or claim 2 or claim 5 is claimed. It is possible to efficiently extract line segment elements from the data filled in by the filling means 5 and speed up the processing.

【0036】そして本発明の請求項7の発明では、車両
の抽出精度を上げる効果がある。
The invention of claim 7 of the present invention has the effect of increasing the extraction accuracy of the vehicle.

【0037】さらに本発明の請求項8の発明では、車両
の挙動を検出する事が可能となるため、交通流計測画像
処理装置の適用範囲を広げる効果がある。
Further, in the invention of claim 8 of the present invention, the behavior of the vehicle can be detected, so that there is an effect that the range of application of the traffic flow measurement image processing apparatus is expanded.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の実施例1に係る交通流計測画像処理装
置の構成を示すブロック図である。
FIG. 1 is a block diagram showing a configuration of a traffic flow measurement image processing apparatus according to a first embodiment of the present invention.

【図2】本発明の実施例1における、存在領域の一例を
示す説明図である。
FIG. 2 is an explanatory diagram showing an example of an existing area according to the first embodiment of the present invention.

【図3】本発明の実施例1における、垂直線エッジデー
タ及びプロジェクションデータを示す説明図である。
FIG. 3 is an explanatory diagram showing vertical line edge data and projection data according to the first embodiment of the present invention.

【図4】本発明の実施例1における、データ時系列蓄積
画像を2値化したデータを示す説明図である。
FIG. 4 is an explanatory diagram showing binarized data of a data time series accumulated image according to the first embodiment of the present invention.

【図5】本発明の実施例1における、穴埋め法の説明図
である。
FIG. 5 is an explanatory diagram of a hole filling method according to the first embodiment of the present invention.

【図6】本発明の実施例1における、線分要素抽出法の
説明図である。
FIG. 6 is an explanatory diagram of a line segment element extraction method according to the first embodiment of the present invention.

【図7】本発明の実施例2に係る交通流計測画像処理装
置の構成を示すブロック図である。
FIG. 7 is a block diagram showing a configuration of a traffic flow measurement image processing apparatus according to a second embodiment of the present invention.

【図8】本発明の実施例3に係る交通流計測画像処理装
置の構成を示すブロック図である。
FIG. 8 is a block diagram showing a configuration of a traffic flow measurement image processing apparatus according to a third embodiment of the present invention.

【図9】従来の交通流計測画像処理装置の構成を示すブ
ロック図である。
FIG. 9 is a block diagram showing a configuration of a conventional traffic flow measurement image processing device.

【符号の説明】[Explanation of symbols]

1 TVカメラ 2 TVカメラ制御回路 3 フレームメモリ 8 車両情報計測回路 9 存在領域設定回路 10 垂直線検出回路 11 プロジェクション作成回路 12 データ時系列蓄積回路 13 2値化回路 14 穴埋め回路 15 線分要素抽出回路 16 線分抽出回路 17 車両判定回路 18 車両情報計測回路 70 水平位置抽出回路 71 選択プロジェクションデータ作成回路 80 車両動作検出回路 1 TV camera 2 TV camera control circuit 3 frame memory 8 Vehicle information measurement circuit 9 Existence area setting circuit 10 Vertical line detection circuit 11 Projection creation circuit 12 data time series storage circuit 13 Binarization circuit 14 hole filling circuit 15 Line segment element extraction circuit 16 line segment extraction circuit 17 Vehicle determination circuit 18 Vehicle information measurement circuit 70 Horizontal position extraction circuit 71 Selection projection data creation circuit 80 Vehicle motion detection circuit

───────────────────────────────────────────────────── フロントページの続き (72)発明者 関 明伸 尼崎市塚口本町8丁目1番1号 三菱電機 株式会社産業システム研究所内   ─────────────────────────────────────────────────── ─── Continued front page    (72) Inventor Akinori Seki             8-1-1 Tsukaguchihonmachi, Amagasaki-shi Mitsubishi Electric             Industrial Systems Research Institute Co., Ltd.

Claims (8)

【特許請求の範囲】[Claims] 【請求項1】 移動物体の移動中の映像を撮像する撮像
部と、この撮像部を制御する制御手段と、上記撮像部か
らの画像データを記憶するフレームメモリとを備え、上
記画像データを処理して、移動物体を検出し、移動物体
の情報を求める移動物体計測装置において、上記移動物
体の移動経路に沿った移動物体の存在領域を、上記画像
データから予め設定する存在領域設定手段と、上記存在
領域内の画像データから移動物体を示すデータを抽出す
る抽出手段と、この抽出手段で抽出した移動物体を示す
データを時系列に一定周期で連続して蓄積するデータ時
系列蓄積手段とを設け、上記予め設定した存在領域中を
移動する移動物体の時間的変化を検出するようにしたこ
とを特徴とする移動物体計測装置。
1. An image processing unit for processing the image data, comprising: an image capturing unit for capturing a moving image of a moving object; a control unit for controlling the image capturing unit; and a frame memory for storing image data from the image capturing unit. Then, in the moving object measuring device that detects the moving object and obtains the information of the moving object, the existing area of the moving object along the moving path of the moving object, the existing area setting unit that presets from the image data, Extraction means for extracting data representing a moving object from the image data in the existing area, and data time series accumulating means for accumulating data representing the moving object extracted by the extracting means in a time series continuously at a constant cycle. A moving object measuring device, wherein the moving object measuring device is provided so as to detect a temporal change of a moving object moving in the preset existing area.
【請求項2】 データ時系列蓄積手段によって得られた
データ時系列蓄積画像を2値化し、2次元2値データを
作成する2値化手段と、この2値化手段によって2値化
された画像データのうち、基準とする2値データの所定
の方向にのびる両隣のデータが、上記基準データと同じ
2値データであるとき、上記基準データの上記所定の方
向と垂直方向にある2値データを上記基準データと同じ
データに変化させる穴埋め手段を設けたことを特徴とす
る請求項第1項記載の移動物体計測装置。
2. A binarizing unit for binarizing the data time-series accumulated image obtained by the data time-series accumulating unit and creating two-dimensional binary data, and an image binarized by the binarizing unit. Of the data, when the two adjacent data extending in a predetermined direction of the reference binary data are the same binary data as the reference data, the binary data in the direction perpendicular to the predetermined direction of the reference data The moving object measuring device according to claim 1, further comprising a filling unit that changes the same data as the reference data.
【請求項3】 データ時系列蓄積手段によって得られた
データ時系列蓄積画像を2値化し、2次元2値データを
作成する2値化手段と、この2値化手段によって2値化
された画像データのうち、基準とする2値データの所定
の方向で、上記基準データの片側一方に、上記基準デー
タと同じ値の2値データが連続し、かつ上記基準データ
の上記所定の方向と反対方向に上記基準データと違う値
の2値データが連続するとき、その基準データを線分の
要素として抽出する線分要素抽出手段を設けたことを特
徴とする請求項第1項記載の移動物体計測装置。
3. A binarizing unit for binarizing the data time-series accumulated image obtained by the data time-series accumulating unit and creating two-dimensional binary data, and an image binarized by the binarizing unit. Of the data, in the predetermined direction of the reference binary data, one side of the reference data is continuous with the binary data having the same value as the reference data, and the direction opposite to the predetermined direction of the reference data. 2. The moving object measurement according to claim 1, further comprising line segment element extracting means for extracting the reference data as an element of the line segment when binary data having a different value from the reference data continues. apparatus.
【請求項4】 車両を撮像するTVカメラと、このTV
カメラを制御するTVカメラ制御回路と、上記TVカメ
ラからの画像データを記憶するフレームメモリと、上記
車両の移動経路に沿った車両の存在領域を、上記画像デ
ータから予め設定する存在領域設定手段と、上記存在領
域内の画像データから車両を示すデータを抽出する抽出
手段と、この抽出手段で抽出した車両を示すデータを時
系列に一定周期で連続して蓄積するデータ時系列蓄積手
段と、このデータ時系列蓄積手段によって得られたデー
タ時系列画像から、上記予め設定した存在領域中を移動
する車両の存在を判定する車両判定手段と、この車両判
定手段で判定された車両の状態量を計測する状態量計測
手段を備えたことを特徴とする交通流計測画像処理装
置。
4. A TV camera for imaging a vehicle and the TV
A TV camera control circuit for controlling the camera, a frame memory for storing the image data from the TV camera, and a presence area setting means for presetting the presence area of the vehicle along the moving route of the vehicle from the image data. An extracting means for extracting data indicating a vehicle from the image data in the existing area; a data time series accumulating means for continuously accumulating the data indicating the vehicle extracted by the extracting means in a time series at a constant cycle; From the data time series image obtained by the data time series accumulation means, the vehicle determination means for determining the presence of the vehicle moving in the preset existence area, and the state quantity of the vehicle determined by the vehicle determination means are measured. An image processing apparatus for traffic flow measurement, which is provided with a state quantity measuring means for performing the above.
【請求項5】 データ時系列蓄積手段によって得られた
データ時系列蓄積画像を2値化し、2次元2値データを
作成する2値化手段と、この2値化手段によって2値化
された画像データのうち、基準とする2値データの所定
の方向にのびる両隣のデータが、上記基準データと同じ
2値データであるとき、上記基準データの上記所定の方
向と垂直方向にある2値データを上記基準データと同じ
データに変化させる穴埋め手段を設けたことを特徴とす
る請求項第4項記載の交通流計測画像処理装置。
5. A binarizing unit for binarizing the data time-series accumulated image obtained by the data time-series accumulating unit and creating two-dimensional binary data, and an image binarized by the binarizing unit. Of the data, when the two adjacent data extending in a predetermined direction of the reference binary data are the same binary data as the reference data, the binary data in the direction perpendicular to the predetermined direction of the reference data 5. The traffic flow measurement image processing apparatus according to claim 4, further comprising filling means for changing the same data as the reference data.
【請求項6】 データ時系列蓄積手段によって得られた
データ時系列蓄積画像を2値化し、2次元2値データを
作成する2値化手段と、この2値化手段によって2値化
された画像データのうち、基準とする2値データの所定
の方向で、上記基準データの片側一方に、上記基準デー
タと同じ値の2値データが連続し、かつ上記基準データ
の上記所定の方向と反対方向に上記基準データと違う値
の2値データが連続するとき、その基準データを線分の
要素として抽出する線分要素抽出手段を設けたことを特
徴とする請求項第4項記載の交通流計測画像処理装置。
6. A binarizing unit for binarizing the data time-series accumulated image obtained by the data time-series accumulating unit and creating two-dimensional binary data, and an image binarized by the binarizing unit. Of the data, in the predetermined direction of the reference binary data, one side of the reference data is continuous with the binary data having the same value as the reference data, and the direction opposite to the predetermined direction of the reference data. 5. A traffic flow measurement device according to claim 4, further comprising line segment element extraction means for extracting the reference data as an element of a line segment when binary data having a different value from the reference data continues. Image processing device.
【請求項7】 車両を撮像するTVカメラと、このTV
カメラを制御するTVカメラ制御回路と、上記TVカメ
ラからの画像データを記憶するフレームメモリと、上記
車両の移動経路に沿った車両の存在領域を、上記画像デ
ータから予め設定する存在領域設定手段と、上記存在領
域内の画像データから車両を示すデータを抽出する抽出
手段と、この抽出手段で抽出されたデータに付帯する情
報を抽出、保持する付帯情報抽出手段と、この付帯情報
抽出手段の付帯情報を参照し、上記抽出手段で抽出した
車両を示すデータを選択する車両データ選択手段と、上
記車両データ選択手段で得られるデータを時系列に一定
周期で連続して蓄積するデータ時系列蓄積手段と、この
データ時系列蓄積手段によって得られたデータ時系列画
像から、上記予め設定した存在領域中を移動する車両の
存在を判定する車両判定手段と、この車両判定手段で判
定された車両の状態量を計測する状態量計測手段を備え
たことを特徴とする交通流計測画像処理装置。
7. A TV camera for imaging a vehicle and the TV
A TV camera control circuit for controlling the camera, a frame memory for storing the image data from the TV camera, and a presence area setting means for presetting the presence area of the vehicle along the moving route of the vehicle from the image data. An extracting means for extracting data indicating a vehicle from the image data in the existing area, an auxiliary information extracting means for extracting and holding information incidental to the data extracted by the extracting means, and an incidental information of the incidental information extracting means. Vehicle data selecting means for selecting data indicating the vehicle extracted by the extracting means with reference to information, and data time series accumulating means for accumulating data obtained by the vehicle data selecting means in a time series continuously at a constant cycle. And a vehicle for determining the presence of a vehicle moving in the preset presence area from the data time-series image obtained by the data time-series storage means. And judging means, the vehicle determining means comprising the state quantity measuring means for measuring the state quantity of the determined vehicle traffic flow measurement image processing apparatus.
【請求項8】 車両を撮像するTVカメラと、このTV
カメラを制御するTVカメラ制御回路と、上記TVカメ
ラからの画像データを記憶するフレームメモリと、上記
車両の移動経路に沿った車両の存在領域を、上記画像デ
ータから予め設定する存在領域設定手段と、上記存在領
域内の画像データから車両を示すデータを抽出する抽出
手段と、この抽出手段で抽出されたデータに付帯する情
報を抽出、保持する付帯情報抽出手段と、上記抽出手段
で抽出した車両を示すデータを時系列に一定周期で連続
して蓄積するデータ時系列蓄積手段と、このデータ時系
列蓄積手段によって得られたデータ時系列画像から、上
記予め設定した存在領域中を移動する車両の存在を判定
する車両判定手段と、上記付帯情報抽出手段と上記車両
判定手段で得られるデータを参照し、車両の挙動を検出
する車両動作検出手段と、上記車両判定手段で判定され
た車両の状態量を計測する状態量計測手段を備えたこと
を特徴とする交通流計測画像処理装置。
8. A TV camera for imaging a vehicle and the TV
A TV camera control circuit for controlling the camera, a frame memory for storing the image data from the TV camera, and a presence area setting means for presetting the presence area of the vehicle along the moving route of the vehicle from the image data. An extracting means for extracting data indicating a vehicle from the image data in the existing area, an auxiliary information extracting means for extracting and holding information incidental to the data extracted by the extracting means, and a vehicle extracted by the extracting means. Data time series accumulation means for continuously accumulating data indicating the time series in a constant cycle, and a data time series image obtained by the data time series accumulation means of a vehicle moving in the preset existence area. Vehicle motion detection for detecting the behavior of the vehicle by referring to the vehicle determination means for determining the existence, the additional information extraction means, and the data obtained by the vehicle determination means Stage and said vehicle judgment means comprising the state quantity measuring means for measuring the state quantity of the determined vehicle traffic flow measurement image processing apparatus.
JP3306295A 1990-11-22 1991-11-21 Moving object measurement device and traffic flow measurement image processing device Expired - Fee Related JP2757629B2 (en)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP3306295A JP2757629B2 (en) 1990-11-22 1991-11-21 Moving object measurement device and traffic flow measurement image processing device
EP92104401A EP0505858B1 (en) 1991-03-19 1992-03-13 A moving body measuring device and an image processing device for measuring traffic flows
DE69232732T DE69232732T2 (en) 1991-03-19 1992-03-13 Measuring device for moving bodies and image processing device for measuring traffic flow
US07/852,652 US5313295A (en) 1991-03-19 1992-03-17 Moving body measuring device and an image processing device for measuring traffic flows
US08/201,267 US5396283A (en) 1991-03-19 1994-02-24 Moving body measuring device and an image processing device for measuring traffic flows
US08/375,552 US5598338A (en) 1991-03-19 1995-01-19 Device for detecting the existence of moving bodies in an image
US08/726,945 US5691902A (en) 1991-03-09 1996-10-07 Moving body measuring device and an image processing device for measuring traffic flows

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP31893690 1990-11-22
JP2-318936 1990-11-22
JP3306295A JP2757629B2 (en) 1990-11-22 1991-11-21 Moving object measurement device and traffic flow measurement image processing device

Publications (2)

Publication Number Publication Date
JPH056494A true JPH056494A (en) 1993-01-14
JP2757629B2 JP2757629B2 (en) 1998-05-25

Family

ID=26564653

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3306295A Expired - Fee Related JP2757629B2 (en) 1990-11-22 1991-11-21 Moving object measurement device and traffic flow measurement image processing device

Country Status (1)

Country Link
JP (1) JP2757629B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0778258A (en) * 1993-09-08 1995-03-20 Sumitomo Electric Ind Ltd Object recognition device
US6339375B1 (en) 1999-08-20 2002-01-15 Mitsubishi Denki Kabushiki Kaisha Image monitoring apparatus and image monitoring method

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS503597A (en) * 1973-05-14 1975-01-14

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS503597A (en) * 1973-05-14 1975-01-14

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0778258A (en) * 1993-09-08 1995-03-20 Sumitomo Electric Ind Ltd Object recognition device
US6339375B1 (en) 1999-08-20 2002-01-15 Mitsubishi Denki Kabushiki Kaisha Image monitoring apparatus and image monitoring method

Also Published As

Publication number Publication date
JP2757629B2 (en) 1998-05-25

Similar Documents

Publication Publication Date Title
US5598338A (en) Device for detecting the existence of moving bodies in an image
EP1817761B1 (en) Apparatus and method for automatically detecting objects
US10081308B2 (en) Image-based vehicle detection and distance measuring method and apparatus
JP4811201B2 (en) Runway boundary line detection apparatus and runway boundary line detection method
US7437243B2 (en) Detecting device and method to detect an object based on a road boundary
US7512494B2 (en) Vehicle mounted image processor and method of use
JP4032727B2 (en) Lane boundary detection device
JP6226368B2 (en) Vehicle monitoring apparatus and vehicle monitoring method
JPH11282999A (en) Instrument for measuring mobile object
CN108256510B (en) Road edge line detection method and device and terminal
JP2757629B2 (en) Moving object measurement device and traffic flow measurement image processing device
JP2002042140A (en) Moving object measuring device and traffic flow measured image processing device
JP4697761B2 (en) Queue detection method and queue detection apparatus
JP2924063B2 (en) Image processing type traffic flow measurement device
JP2001126192A (en) Method for judging parked or vacancy state in parking space of parking lot
JPH0636014A (en) Moving body measuring instrument
JP2010015235A (en) Pedestrian detector and program
CN112200027B (en) Self-moving state identification method based on machine vision
KR100261065B1 (en) Vehicle classification method and apparatus using image analysis
JP2006107314A (en) Image processor and image processing method
KR100250886B1 (en) Method and apparatus of forwardness / backwardness detecting and counting for moving object
JP3473296B2 (en) In-vehicle driving environment recognition device
KR101761604B1 (en) Multiple pedestrians detecting, tracking system and control method thereof
JP2000099876A (en) Device for measuring mobile object
JPH08171693A (en) Vehicle detector

Legal Events

Date Code Title Description
FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080313

Year of fee payment: 10

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090313

Year of fee payment: 11

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 12

Free format text: PAYMENT UNTIL: 20100313

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100313

Year of fee payment: 12

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110313

Year of fee payment: 13

LAPS Cancellation because of no payment of annual fees