JPH08297728A - Vehicle front monitoring device and method - Google Patents

Vehicle front monitoring device and method

Info

Publication number
JPH08297728A
JPH08297728A JP7101056A JP10105695A JPH08297728A JP H08297728 A JPH08297728 A JP H08297728A JP 7101056 A JP7101056 A JP 7101056A JP 10105695 A JP10105695 A JP 10105695A JP H08297728 A JPH08297728 A JP H08297728A
Authority
JP
Japan
Prior art keywords
window
screen
white line
image pickup
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP7101056A
Other languages
Japanese (ja)
Inventor
Koichi Sato
公一 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP7101056A priority Critical patent/JPH08297728A/en
Publication of JPH08297728A publication Critical patent/JPH08297728A/en
Pending legal-status Critical Current

Links

Landscapes

  • Traffic Control Systems (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

PURPOSE: To provide a vehicle front monitoring device which can correctly recognize a white line without being effected by any influence of noises. CONSTITUTION: A vehicle front monitoring device is provided with a window means 20 which sets a prescribed range of a screen as a window to successively move this window on the screen and also to successively reads the binary signals corresponding to the image pickup elements included in the window, plural reference windows 30 which have the ranges equal to the window of the means 20 and also have the binary signals in continuous patterns previously decided in the window means 20, a decision means 31 which performs comparison to decide the coincidence between the window 20 and the windows 30, and a white line recognition means which recognizes the white line that is drawn on a road and can be viewed in front of a vehicle based on the output of the means 31.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】この発明は、車両の前方に向けて
取り付けられたカメラによる車両用前方監視装置及び方
法に関するものであって、特に、車両前方の道路上に描
かれた白線を認識する白線認識に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a vehicle front monitoring apparatus and method using a camera mounted toward the front of a vehicle, and more particularly to recognizing a white line drawn on a road in front of the vehicle. It is related to white line recognition.

【0002】[0002]

【従来の技術】図10に従来の車両用前方監視装置の構
成をブロック図で示す。図において1は車両の前方に向
けて取り付けられ前方の様子を撮影するカメラ、2はカ
メラの画面に設けられた複数個の撮像素子から出力され
るアナログの映像信号を受けこの信号をデジタル信号に
変換するA/Dコンバータ、3はA/Dコンバータの出
力信号を受け、この信号を2種類の値に分類して画面に
撮影された画像の輪郭線を検出する2値化手段、4は2
値化手段の出力に基づき前方の道路上に描かれた白線を
認識する白線認識手段である。
2. Description of the Related Art FIG. 10 is a block diagram showing the configuration of a conventional vehicle front monitoring system. In the figure, 1 is a camera that is mounted toward the front of the vehicle to take a picture of the front, and 2 is an analog video signal output from a plurality of image pickup devices provided on the screen of the camera, and this signal is converted into a digital signal. An A / D converter 3 for conversion receives the output signal of the A / D converter, classifies this signal into two types of values, and detects the contour line of the image photographed on the screen.
It is white line recognition means for recognizing a white line drawn on the road ahead based on the output of the value conversion means.

【0003】このように構成された従来装置の動作を図
11を用いて説明する。図11は、カメラ1で撮影され
た画像を示している。図において5は複数個の撮像素子
6を配列した画面、7は道路上に描かれた白線である。
カメラ1で撮影された画像は撮像素子6にて受光されア
ナログ信号として出力される。この信号はA/Dコンバ
ータ2でデジタル信号に変換され2値化手段3に与えら
れる。2値化手段3は、例えば予め定められた基準輝度
差を有しており、各々の撮像素子とそれに隣接する撮像
素子との輝度差が該基準輝度差よりも大きいか否かによ
りそれぞれの撮像素子6に対応した映像信号を2種類の
値に分類するもので、隣接する撮像素子6の輝度差が基
準輝度差以上であれば1を出力すると共に、隣接する撮
像素子6の輝度差が基準輝度差よりも小さければ0を出
力する。この処理の様子を図12を用いて説明する。図
において(a)は各々の撮像素子6の輝度情報を数値で
表したものである。(b)は(a)における横隣の撮像
素子6の輝度差を演算したものである。同様に(c)は
(a)における縦隣の撮像素子6の輝度差を演算したも
のである。これらの(b)、(c)の情報は予め定めら
れた基準輝度差10と比較され、輝度差が10以上のも
のには1(図示斜線部分)が与えられ、輝度差が10未
満のものには0(図示白部分)が与えられ、それぞれ
(d)、(e)を得る。これら(d)、(e)の情報は
論理和(OR)により合成され、(f)に示す2値で表
された(斜線部分:1、白部分:0)輪郭線の情報を得
る。即ち、2値化手段3の処理が行われた後は、撮像素
子6毎に対応して1あるいは0の信号が付与されてお
り、画面5は1と0の2値信号により表されている。
The operation of the conventional device thus configured will be described with reference to FIG. FIG. 11 shows an image taken by the camera 1. In the figure, 5 is a screen on which a plurality of image pickup devices 6 are arranged, and 7 is a white line drawn on the road.
The image captured by the camera 1 is received by the image sensor 6 and output as an analog signal. This signal is converted into a digital signal by the A / D converter 2 and given to the binarizing means 3. The binarization unit 3 has, for example, a predetermined reference luminance difference, and each image pickup is performed depending on whether or not the luminance difference between each image pickup element and the image pickup element adjacent thereto is larger than the reference luminance difference. The video signal corresponding to the element 6 is classified into two types of values. If the luminance difference between the adjacent image pickup elements 6 is equal to or larger than the reference luminance difference, 1 is output and the luminance difference between the adjacent image pickup elements 6 is set as the reference. If it is smaller than the brightness difference, 0 is output. The state of this processing will be described with reference to FIG. In the figure, (a) shows the brightness information of each image sensor 6 by numerical values. (B) is a calculation of the brightness difference between the adjacent image pickup devices 6 in (a). Similarly, (c) is a calculation of the brightness difference between the vertically adjacent image pickup devices 6 in (a). The information of (b) and (c) is compared with a predetermined reference luminance difference of 10. If the luminance difference is 10 or more, 1 (hatched portion in the drawing) is given, and the luminance difference is less than 10. Is given 0 (white part in the figure) to obtain (d) and (e), respectively. These pieces of information (d) and (e) are combined by logical sum (OR) to obtain the information of the contour line (hatched portion: 1, white portion: 0) represented by the binary value shown in (f). That is, after the process of the binarizing means 3, a signal of 1 or 0 is given corresponding to each image pickup element 6, and the screen 5 is represented by a binary signal of 1 and 0. .

【0004】白線認識手段4は、上述のようにして得ら
れた画面5の情報に基づいて画面に撮影された白線を認
識する。白線認識の基本的な考え方は、白線は黒っぽい
道路に白色の塗料で描かれたものであるからその境界部
分では通常よりも大きな輝度の差が生じており、その通
常よりも大きな輝度の差がある点を白線と認識してやれ
ばよいというものである。この白線認識の条件の例とし
ては、次の通りである。 (1)画面に対し水平方向に隣接する撮像素子の輝度の
差が所定以上あること、 (2)画面中央から画面縁部に向かって水平方向に2値
信号を検出し、最初に2値信号が0から1、あるいは1
から0に変化した点であること (3)上記(1)、(2)を満足する点を画面の右半分
と左半分とでそれぞれ検出し、両者の間隔が略4mであ
ること このようにして得られた白線の情報は白線認識手段4か
ら出力され後段に接続される監視制御に利用される。
The white line recognition means 4 recognizes the white line photographed on the screen based on the information of the screen 5 obtained as described above. The basic idea of white line recognition is that the white line is drawn on a dark road with white paint, so there is a larger difference in brightness than normal at the boundary, and the difference in brightness larger than normal is It is only necessary to recognize a certain point as a white line. An example of the condition for recognizing the white line is as follows. (1) There is a predetermined difference in brightness between image pickup devices that are horizontally adjacent to the screen, (2) A binary signal is detected in the horizontal direction from the center of the screen toward the edge of the screen, and the binary signal is first detected. Is 0 to 1, or 1
(3) The points satisfying the above (1) and (2) are detected in the right half and the left half of the screen, respectively, and the distance between them is approximately 4 m. The white line information thus obtained is output from the white line recognizing means 4 and used for monitoring control connected to the subsequent stage.

【0005】[0005]

【発明が解決しようとする課題】ところで従来装置にお
いては、撮像素子の2値信号を検出するに際し画面中央
から画面縁部までの全域を水平方向に順次検出するとい
う手法を採らず、前回の白線の検出点の近傍に所定の検
出範囲を設定しその検出範囲内の撮像素子の2値信号の
みを検出するようにしている。これは、検出範囲を余り
広くすると白線とは何の関係もないものを白線であると
誤認することの防止である。なお、白線は連続性を有し
ているので前回の白線の検出点とかけ離れたところにあ
ることは考え難く、上述の如く検出範囲を所定の範囲に
設定することで、白線を確実に検出することが可能とな
る。図11において81は所定の範囲を有する検出範囲
である。82は検出範囲81において検出された白線の
位置に基づき新たに設定された検出範囲で、以後、検出
範囲は前回の白線の検出位置に基づいて順次設定され
る。しかしながら、このように構成された従来装置であ
っても、ノイズに弱く、白線を検出することができなく
なるという場合があった。図11において9はノイズで
あって、例えば道路上に写された影、道路のへこみ、道
路の補修痕、雨天時にフロントガラスに付いた雨滴など
によるものである。
By the way, in the conventional apparatus, when the binary signal of the image pickup device is detected, the method of sequentially detecting the entire area from the center of the screen to the edge of the screen in the horizontal direction is not adopted. A predetermined detection range is set in the vicinity of the detection point, and only the binary signal of the image sensor within the detection range is detected. This is to prevent erroneous recognition of a white line as a line that has nothing to do with the white line if the detection range is too wide. Since the white line has continuity, it is unlikely that the white line is far from the detection point of the previous white line, and the white line is surely detected by setting the detection range to the predetermined range as described above. It becomes possible. In FIG. 11, 81 is a detection range having a predetermined range. Reference numeral 82 denotes a detection range newly set based on the position of the white line detected in the detection range 81, and thereafter, the detection range is sequentially set based on the previous detection position of the white line. However, even the conventional apparatus configured as described above is vulnerable to noise and cannot detect the white line in some cases. In FIG. 11, reference numeral 9 denotes noise, which is caused by, for example, a shadow cast on the road, a dent on the road, a repair mark on the road, or raindrops on the windshield during rainy weather.

【0006】検出範囲84は前回の検出範囲83に基づ
いて設定されたもので、検出範囲84内にはノイズ9と
白線7とが存在している。ところで白線の認識は画面中
央に最も近いものを白線と認識するため、この場合、白
線認識手段4はノイズ9が白線であると認識してしま
う。また、白線認識手段4は、次回の検出範囲として検
出範囲85を設定し、検出範囲85においてもノイズ9
を白線として認識すると共に新たな検出範囲として検出
範囲86を設定する。検出範囲86においては図示した
ように白線7がその検出範囲外にあり、もはや白線を検
出できない。
The detection range 84 is set based on the previous detection range 83, and the noise 9 and the white line 7 exist in the detection range 84. By the way, since the white line which is closest to the center of the screen is recognized as a white line, in this case, the white line recognition means 4 recognizes that the noise 9 is a white line. Further, the white line recognition means 4 sets the detection range 85 as the next detection range, and the noise 9 is also detected in the detection range 85.
Is recognized as a white line, and the detection range 86 is set as a new detection range. In the detection range 86, the white line 7 is outside the detection range as shown, and the white line can no longer be detected.

【0007】この発明はこのような問題点を解決すべく
為されたものであって、ノイズに影響されることなく正
しく白線認識することができる車両用前方監視装置を得
ることを目的としている。
The present invention has been made to solve such a problem, and an object thereof is to obtain a vehicle front monitoring device capable of correctly recognizing a white line without being affected by noise.

【0008】また、この発明は、ノイズに影響されるこ
となく正しく白線認識することができる車両用前方監視
方法を得ることを目的としている。
Another object of the present invention is to provide a vehicle front monitoring method capable of correctly recognizing a white line without being affected by noise.

【0009】[0009]

【課題を解決するための手段】この発明に係る車両用前
方監視装置は、画面の所定範囲をウィンドウとして設定
してこのウィンドウを画面上で順次移動させると共に、
このウィンドウ内に存在する撮像素子に対応する2値信
号を順次読み取るウィンドウ手段と、該ウィンドウと等
しい範囲を有し、このウィンドウ内に予め定められた連
続性を有するパターンで2値信号が設定されている複数
個の基準ウィンドウと、ウィンドウと基準ウィンドウと
を比較して両者が一致しているか否かを判定する判定手
段と、この判定手段の出力に基づき車両前方の路上に描
かれた白線を認識する白線認識手段とを備えたものであ
る。
A vehicle front monitoring device according to the present invention sets a predetermined range of a screen as a window and sequentially moves the window on the screen.
Window means for sequentially reading binary signals corresponding to the image sensor existing in this window, and a range equal to the window means, and the binary signal is set in this window in a pattern having a predetermined continuity. A plurality of reference windows, a determination means for comparing the windows and the reference window to determine whether or not they match each other, and a white line drawn on the road in front of the vehicle based on the output of the determination means. And a white line recognition means for recognizing.

【0010】また、この発明に係る車両用前方監視装置
は、ウィンドウ手段は、ウィンドウ内に存在する撮像素
子に対応する記憶素子を各々配列し、この記憶素子によ
り2値化手段からの信号を順次記憶更新するものであっ
て、画面の水平方向に隣接する撮像素子に対応する記憶
素子はそれぞれ直列に接続されて複数本の記憶素子列を
構成すると共に、画面の垂直方向に隣接する記憶素子列
は遅延手段を介してそれぞれ並列に接続されているよう
に構成したものである。
Further, in the vehicle front monitoring apparatus according to the present invention, the window means arranges storage elements corresponding to the image pickup elements existing in the window, and the storage elements sequentially output signals from the binarization means. The memory elements corresponding to the image sensors that are adjacent to each other in the horizontal direction of the screen are connected in series to form a plurality of memory element arrays, and the memory element arrays that are adjacent to each other in the vertical direction of the screen. Are configured to be connected in parallel via the delay means.

【0011】また、この発明に係る車両用前方監視装置
は、ウィンドウ手段と判定手段とを複数組有するもので
ある。
The vehicle front monitoring apparatus according to the present invention has a plurality of sets of window means and determination means.

【0012】また、この発明に係る車両用前方監視方法
は、画面の所定範囲をウィンドウとして設定してこのウ
ィンドウを画面上で順次移動させると共に、このウィン
ドウ内に存在する撮像素子に対応する2値信号を順次読
み取るステップと、ウィンドウと等しい範囲を有し、こ
のウィンドウ内に予め定められた連続性を有するパター
ンで2値信号が設定されている複数個の基準ウィンドウ
とウィンドウとを比較して両者が一致しているか否かを
判定するステップと、両者が一致しているか否かを判定
するステップによって得られた結果に基づき車両前方の
路上に描かれた白線を認識するステップとを有するもの
である。
Further, in the vehicle front monitoring method according to the present invention, a predetermined range of the screen is set as a window and the window is sequentially moved on the screen, and at the same time, a binary value corresponding to an image pickup device existing in the window is set. Sequential reading of the signal and comparing the window with a plurality of reference windows having a range equal to the window and having binary signals set in a pattern having a predetermined continuity within the window. And a step of recognizing a white line drawn on the road in front of the vehicle based on the result obtained by the step of determining whether the two match. is there.

【0013】また、この発明に係る車両用前方監視方法
は、画面の所定範囲をウィンドウとして設定してこのウ
ィンドウを画面上で順次移動させると共に、このウィン
ドウ内に存在する撮像素子に対応する2値信号を順次読
み取るステップと、ウィンドウと等しい範囲を有し、こ
のウィンドウ内に予め定められた連続性を有するパター
ンで2値信号が設定されている複数個の基準ウィンドウ
とウィンドウとを比較して両者が一致しているか否かを
判定するステップとを複数回数繰り返すようにしたもの
である。
Further, in the vehicle front monitoring method according to the present invention, a predetermined range of the screen is set as a window, the window is sequentially moved on the screen, and a binary value corresponding to the image pickup device existing in the window is set. Sequential reading of the signal and comparing the window with a plurality of reference windows having a range equal to the window and having binary signals set in a pattern having a predetermined continuity within the window. And a step of determining whether or not they match each other are repeated a plurality of times.

【0014】[0014]

【作用】この発明に係る車両用前方監視装置は、画面の
所定範囲をウィンドウとして設定し、このウィンドウの
2値信号と基準ウィンドウの2値信号とを比較し該ウィ
ンドウの2値信号が基準ウィンドウのパターンと一致し
ているか否かを判定し、両者が一致していないと判定さ
れた場合には該ウィンドウの2値信号は基準ウィンドウ
のパターンを有していないと判定してこれを無視するよ
うに動作する。
The vehicle front monitoring device according to the present invention sets a predetermined range on the screen as a window, compares the binary signal of this window with the binary signal of the reference window, and compares the binary signal of the window with the reference window. It is determined whether or not they match the pattern of No. 2, and if it is determined that they do not match, it is determined that the binary signal of the window does not have the pattern of the reference window, and this is ignored. Works like.

【0015】また、この発明に係る車両用前方監視装置
は、ウィンドウ内に存在する撮像素子に対応する記憶素
子を各々配列し、画面の水平方向に隣接する撮像素子に
対応する記憶素子をそれぞれ直列に接続して複数本の記
憶素子列を構成すると共に、画面の垂直方向に隣接する
記憶素子列を遅延手段を介してそれぞれ並列に接続する
ことによりウィンドウ手段を構成する。
In the vehicle front monitoring device according to the present invention, the storage elements corresponding to the image pickup elements existing in the window are arranged, and the storage elements corresponding to the image pickup elements adjacent in the horizontal direction of the screen are respectively connected in series. To form a plurality of storage element arrays, and connect the storage element arrays adjacent in the vertical direction of the screen in parallel via the delay means to form the window means.

【0016】また、この発明に係る車両用前方監視装置
は、ウィンドウ内の2値信号と基準ウィンドウの2値信
号とを比較し両者が一致しているか否かの判定を複数回
数行う。
Further, the vehicle front monitoring device according to the present invention compares the binary signal in the window with the binary signal in the reference window and determines whether or not they match each other a plurality of times.

【0017】また、この発明に係る車両用前方監視方法
は、画面の所定範囲をウィンドウとして設定し、このウ
ィンドウの2値信号と基準ウィンドウの2値信号とを比
較し該ウィンドウの2値信号が基準ウィンドウのパター
ンと一致しているか否かを判定し、両者が一致していな
いと判定された場合には該ウィンドウの2値信号は基準
ウィンドウのパターンを有していないと判定してこれを
無視するという手順を踏む。
Further, in the vehicle front monitoring method according to the present invention, a predetermined range of the screen is set as a window, the binary signal of this window is compared with the binary signal of the reference window, and the binary signal of the window is detected. It is determined whether or not they match the pattern of the reference window, and if it is determined that they do not match, it is determined that the binary signal of the window does not have the pattern of the reference window. Take the step of ignoring.

【0018】また、この発明に係る車両用前方監視方法
は、ウィンドウ内の2値信号と基準ウィンドウの2値信
号とを比較し両者が一致しているか否かを判定するステ
ップを複数回数行う。
Further, in the vehicle front monitoring method according to the present invention, the step of comparing the binary signal in the window and the binary signal in the reference window and determining whether or not they match each other is performed a plurality of times.

【0019】[0019]

【実施例】【Example】

実施例1.実施例1は、白線には連続性があることに着
目し、白線認識の前にパターンマッチングを行って画面
5から白線検出に関係のないノイズ9を除去し、このノ
イズ9が除去された画面に基づいて白線検出を行うもの
である。図1は実施例1の構成を示すブロック図であ
る。図において前出と同一あるいは相当部分には同一符
号を付している。図において、1は車両の前方に向けて
取り付けられ前方を撮影するカメラ、2はカメラ1の画
面5に配設された複数個の撮像素子6からのアナログの
映像信号をデジタル信号に変換するA/Dコンバータ、
3はA/Dコンバータ2からの出力信号を所定の基準輝
度と比較して1あるいは0の2種類の値に分類し2値信
号を出力する2値化手段、10は2値化手段3の出力に
基づき画面5の所定範囲に設定されたウィンドウと基準
ウィンドウとを比較してその2値信号のパターンが一致
するか否かを判断するパターンマッチング手段、11は
パターンマッチング手段10により画像処理された画像
に基づき白線認識を行う白線認識手段で、白線認識手段
11の出力は後段に接続される監視処理に用いられる。
Example 1. In Example 1, paying attention to the fact that white lines have continuity, pattern matching is performed before white line recognition to remove noise 9 unrelated to white line detection from the screen 5, and the screen from which this noise 9 has been removed The white line is detected based on FIG. 1 is a block diagram showing the configuration of the first embodiment. In the figure, the same or corresponding parts as those described above are designated by the same reference numerals. In the figure, 1 is a camera which is mounted toward the front of the vehicle to take a picture of the front, and 2 is an A which converts an analog video signal from a plurality of image pickup devices 6 arranged on a screen 5 of the camera 1 into a digital signal. / D converter,
Reference numeral 3 is a binarizing means for comparing the output signal from the A / D converter 2 with a predetermined reference luminance into two kinds of values of 1 or 0 and outputting a binary signal. 10 is a binarizing means 3. The pattern matching means 11 compares the window set in the predetermined range of the screen 5 with the reference window on the basis of the output to determine whether the patterns of the binary signals match or not. The white line recognition means performs white line recognition on the basis of the image, and the output of the white line recognition means 11 is used for the monitoring process connected to the subsequent stage.

【0020】次に図を用いてパターンマッチングについ
て説明する。図2はパターンマッチングの様子を説明す
る説明図である。図において、斜線を有する撮像素子6
は基準輝度以上の輝度を有するものであって、2値信号
のうち1が付与されている。7は白線であってここでは
撮像素子6の大きさに対応して表現されている。12は
画面5の所定範囲、即ち、4行4列の撮像素子6のブロ
ックで構成されたウィンドウである。このウィンドウ1
2は、撮像素子の走査に同期して画面左上から画面右下
へ順次移動する。図においてウィンドウ12の下方に記
されたもう一つのウィンドウはウィンドウ12が撮像素
子の走査順序に従って順次移動しノイズ9を含む位置に
移動した場合である。図3は基準ウィンドウの例を示す
ものであって、連続性を有するパターンで2値信号が予
め設定されている4行4列の基準ウィンドウを示してい
る。
Next, pattern matching will be described with reference to the drawings. FIG. 2 is an explanatory diagram for explaining the state of pattern matching. In the figure, the image sensor 6 having diagonal lines
Has a luminance equal to or higher than the reference luminance, and one of the binary signals is given. Reference numeral 7 denotes a white line, which is represented here in correspondence with the size of the image sensor 6. Reference numeral 12 is a window formed of a predetermined range of the screen 5, that is, a block of the image sensor 6 in 4 rows and 4 columns. This window 1
2 moves sequentially from the upper left of the screen to the lower right of the screen in synchronization with the scanning of the image sensor. Another window shown below the window 12 in the figure is a case where the window 12 is sequentially moved according to the scanning order of the image sensor and moved to a position including the noise 9. FIG. 3 shows an example of a reference window, and shows a reference window of 4 rows and 4 columns in which a binary signal is preset in a pattern having continuity.

【0021】では、動作について説明する。撮像素子6
の走査は、1行1列、1行2列、・・・・1行n列、2行1
列、2行2列、・・・・m行n列のように画面左上から画面
右下に向かって順次行われる。まず、4行4列の撮像素
子6が走査されているときは、この4行4列の撮像素子
6を起点として1行1列までの4行4列のウィンドウ1
2が設定される。ウィンドウ12が設定されると、次は
設定されたウィンドウ12内の2値信号のパターンと図
3に示した基準ウィンドウの2値信号のパターンとが一
致するかどうかを判定する。なお、ウィンドウの設定の
仕方、及びウィンドウの比較判定の仕方については後に
詳細に説明する。
The operation will be described below. Image sensor 6
Scan 1 row 1 column, 1 row 2 column, ... 1 row n column, 2 row 1
Columns, 2 rows, 2 columns, ... M rows and n columns are sequentially performed from the upper left of the screen toward the lower right of the screen. First, when the image sensor 6 of 4 rows and 4 columns is being scanned, the window 1 of 4 rows and 4 columns up to 1 row and 1 column is started from the image sensor 6 of 4 rows and 4 columns.
2 is set. When the window 12 is set, next, it is determined whether or not the binary signal pattern in the set window 12 and the binary signal pattern of the reference window shown in FIG. 3 match. The window setting method and the window comparison / determination method will be described in detail later.

【0022】図2において、4行4列から1行1列に設
定されたウィンドウ内の2値信号は全て0(斜線部がな
い状態)である。これに対し、図3に用意された基準ウ
ィンドウにはこのようなパターンに一致するものはな
い。よって、このときパターンマッチング手段10は不
一致であると判定して0を出力する。次に撮像素子6の
走査が4行4列から4行5列に移動したとする。このと
きウィンドウ12は4行5列を起点として1行2列まで
の4×4の範囲が設定される。ここでも同様にウィンド
ウ12と基準ウィンドウ1乃至8の比較が行われ、両者
が一致していると判定された場合はパターンマッチング
手段10が1を出力すると共に、一致していないと判定
された場合は0を出力する。ウィンドウ12は、上述の
ように撮像素子の走査毎に順次移動してその都度新しい
範囲を設定し基準ウィンドウと比較され判定される。従
って、6行8列の撮像素子6が走査されている場合は、
ウィンドウ12内の2値信号のパターンと基準ウィンド
ウ3の2値信号とが一致しているため、このときパター
ンマッチング手段10は1を出力する。これに対し、1
1行9列の撮像素子6が走査されている場合は、ウィン
ドウ12の2値信号のパターンと一致する基準ウィンド
ウが存在しない。よって、このときパターンマッチング
手段10は0を出力する。即ち、基準ウィンドウ1乃至
8のパターンは連続性を有するパターンに設定されてい
るのに対し、一般的にノイズ9には連続性がない。従っ
て、図3に示されたいずれの基準ウィンドウのパターン
とも一致せず、この場合、ノイズ9は無視される。
In FIG. 2, all the binary signals in the windows set from the 4th row and the 4th column to the 1st row and the 1st column are 0 (the state where there is no hatched portion). In contrast, none of the reference windows prepared in FIG. 3 match such a pattern. Therefore, at this time, the pattern matching means 10 determines that they do not match and outputs 0. Next, it is assumed that the scanning of the image sensor 6 is moved from 4th row and 4th column to 4th row and 5th column. At this time, the window 12 is set to have a range of 4 × 4 from the 4th row and the 5th column to the 1st row and the 2nd column. In this case as well, the window 12 is compared with the reference windows 1 to 8 in the same manner, and when it is determined that they match each other, the pattern matching means 10 outputs 1 and when it is determined that they do not match. Outputs 0. The window 12 is sequentially moved for each scanning of the image sensor as described above, a new range is set each time, and the window 12 is compared with the reference window to be judged. Therefore, when the image sensor 6 of 6 rows and 8 columns is being scanned,
Since the pattern of the binary signal in the window 12 and the binary signal in the reference window 3 match, the pattern matching means 10 outputs 1 at this time. On the other hand, 1
When the image sensor 6 of row 1 and column 9 is being scanned, there is no reference window that matches the binary signal pattern of the window 12. Therefore, at this time, the pattern matching means 10 outputs 0. That is, the patterns of the reference windows 1 to 8 are set to have continuity, whereas the noise 9 generally does not have continuity. Therefore, it does not match the pattern of any of the reference windows shown in FIG. 3, in which case the noise 9 is ignored.

【0023】以上のように、パターンマッチング手段1
0によれば、画面5に得られた画像のうち連続性を有す
る画像のみが選択され、連続性を有しない画像は無視さ
れる。従って、連続性を有する白線7の場合は画像信号
が保持されるが、連続性を有しないノイズ9などの場合
にはその画像信号が無視される。よって、白線認識手段
11に供給される画像信号にはノイズ9の画像信号が除
去されており、白線認識手段11はこのノイズ9が除去
された画像信号に基づき上述の如き白線認識処理を行う
ので、上述の如くノイズ9の影響により白線認識するこ
とができなくなるという不都合が生じない。
As described above, the pattern matching means 1
According to 0, among the images obtained on the screen 5, only images having continuity are selected, and images having no continuity are ignored. Therefore, the image signal is held in the case of the white line 7 having continuity, but the image signal is ignored in the case of the noise 9 having no continuity. Therefore, the image signal of the noise 9 is removed from the image signal supplied to the white line recognition means 11, and the white line recognition means 11 performs the above-described white line recognition processing based on the image signal from which the noise 9 is removed. As described above, the inconvenience that the white line cannot be recognized due to the influence of the noise 9 does not occur.

【0024】次にウィンドウ12の設定の仕方について
説明する。図4はウィンドウ手段を示すブロック図で、
このウィンドウ手段はパターンマッチング手段10に含
まれている。図5はウィンドウ手段と撮像素子との対応
を説明する説明図である。図4において20はウィンド
ウ手段、21はD型フリップフロップからなる記憶素
子、22は2値化手段3の出力信号を所定期間遅延する
遅延手段である。記憶素子21は設定するウィンドウの
範囲に合わせており、この場合はウィンドウ12の4行
4列に合わせている。また、記憶素子21は、撮像素子
6の走査方向(この場合は画面水平方向)に隣接するも
のは直列に接続されており、図示の記憶素子a〜d、e
〜h、i〜l、m〜pの4本の記憶素子列を構成してい
る。これらの記憶素子列は各々並列に接続されており、
記憶素子列と記憶素子列との間には遅延手段22が介在
している。この遅延手段22による遅延期間は、撮像素
子6を画面左端から画面右端まで走査し再度画面左端ま
で戻ってくるまでの時間、即ち、1水平走査期間に相当
する期間に設定されている。
Next, how to set the window 12 will be described. FIG. 4 is a block diagram showing the window means,
This window means is included in the pattern matching means 10. FIG. 5 is an explanatory diagram for explaining the correspondence between the window means and the image sensor. In FIG. 4, 20 is a window means, 21 is a storage element composed of a D-type flip-flop, and 22 is a delay means for delaying the output signal of the binarizing means 3 for a predetermined period. The storage element 21 is adjusted to the range of the window to be set, and in this case, it is adjusted to the 4th row and 4th column of the window 12. The storage elements 21 adjacent to each other in the scanning direction of the image pickup element 6 (in this case, the horizontal direction of the screen) are connected in series, and the storage elements a to d, e shown in the figure.
.About.h, i to 1, m to p constitute four memory element arrays. These storage element arrays are connected in parallel,
The delay means 22 is interposed between the storage element arrays. The delay period by the delay unit 22 is set to a time period from scanning the image sensor 6 from the left end of the screen to the right end of the screen and returning to the left end of the screen again, that is, a period corresponding to one horizontal scanning period.

【0025】このように構成されたウィンドウ手段20
における動作を説明する。図5に示すように撮像素子6
の走査は画面左上から画面右下に向かって順次1つずつ
行われ、走査により得られた映像信号は上述の2値化手
段3により1あるいは0のどちらかの2値信号に変換さ
れ出力される。この2値化手段3の出力は撮像素子6の
走査毎に出力されウィンドウ手段20に与えられる。ウ
ィンドウ手段20はこの2値化手段3の出力を順次記憶
素子21に伝達し記憶素子21に記憶された2値信号を
記憶更新する。即ち、4本の記憶素子列にはそれぞれ、
連続した4つの撮像素子の2値信号が記憶されることに
なる。また、記憶素子列の間には1水平走査期間だけ信
号を送らせる遅延手段22が介在している。従って、4
つの記憶素子列はそれぞれ1水平走査期間ずつ遅れてお
り、これは画面上で見ると画面の垂直方向に連続したも
のとなる。よって、ウィンドウ手段20のa乃至pの記
憶素子21には、図5に示すa乃至pの撮像素子6の2
値信号がそれぞれ対応して記憶更新されることになる。
Window means 20 constructed in this way
The operation will be described. As shown in FIG.
Are sequentially scanned one by one from the upper left of the screen to the lower right of the screen, and the video signal obtained by the scanning is converted into a binary signal of 1 or 0 by the binarizing unit 3 and output. It The output of the binarizing means 3 is output every time the image pickup device 6 scans and is given to the window means 20. The window means 20 sequentially transmits the output of the binarizing means 3 to the storage element 21 and stores and updates the binary signal stored in the storage element 21. That is, each of the four storage element arrays has
Binary signals of four continuous image pickup devices are stored. Further, a delay means 22 for transmitting a signal for only one horizontal scanning period is interposed between the storage element columns. Therefore, 4
Each of the two storage element arrays is delayed by one horizontal scanning period, which is continuous in the vertical direction of the screen when viewed on the screen. Accordingly, the a to p storage elements 21 of the window means 20 are stored in the a to p imaging elements 6 shown in FIG.
The value signals are correspondingly stored and updated.

【0026】次に、設定したウィンドウと基準ウィンド
ウとの比較判定の仕方について説明する。図6はパター
ンマッチング手段10の詳細なブロック図である。図に
おいて、30は所定のパターンの2値信号が記憶されて
いる基準ウィンドウで、基準ウィンドウ1乃至基準ウィ
ンドウN(Nは自然数)を有しており、ここでは基準ウ
ィンドウは1乃至8となっておりそれぞれには図3に示
した基準ウィンドウ1乃至8が与えられている。31は
ウィンドウ手段20の2値信号と基準ウィンドウ30の
2値信号とを比較して、両者が一致しているか否かを判
定する判定手段、32はN本の入力端子と1本の出力端
子を有する論理和回路である。
Next, a method of comparing and determining the set window and the reference window will be described. FIG. 6 is a detailed block diagram of the pattern matching means 10. In the figure, reference numeral 30 is a reference window in which a binary signal of a predetermined pattern is stored, and has reference windows 1 to N (N is a natural number), where the reference windows are 1 to 8. Each of them is given the reference windows 1 to 8 shown in FIG. Reference numeral 31 is a judging means for comparing the binary signal of the window means 20 and the binary signal of the reference window 30 to judge whether or not they match each other, and 32 is an N input terminal and an output terminal. Is an OR circuit having

【0027】上述したように、ウィンドウ手段20では
撮像素子6の走査毎に2値信号が記憶更新されている。
判定手段31は、撮像素子6の走査毎に順次変化するウ
ィンドウ手段20の出力と基準ウィンドウ30とを比較
する。この比較動作は、例えば図7のようにして行われ
る。図7は判定手段31の動作を示す説明図である。ウ
ィンドウ手段20の出力は、各判定手段31により基準
ウィンドウ1乃至8とそれぞれ比較される。判定手段3
1は、基準ウィンドウにおいて2値信号が1となってい
る部分(図示斜線部)が、ウィンドウ手段20の出力に
おいても1となっているか否かを判定する。即ち、換言
すると、判定手段31は、基準ウィンドウ30に設定さ
れた2値信号のパターンが今回設定したウィンドウ12
内にあるかどうかを判定している。従って、図7の場合
では、ウィンドウ手段20の出力には基準ウィンドウ5
のパターンが存在しているため、両者が一致していると
判定して判定手段31から1が出力される。なお、図7
のウィンドウ手段20の出力には右下に2値信号が1と
なっている部分があるが、この部分は判定対象外である
ため無視される。よって、この判定手段31において
も、小さなノイズの除去が為されている。
As described above, in the window means 20, the binary signal is stored and updated every time the image pickup device 6 is scanned.
The determination unit 31 compares the output of the window unit 20 that sequentially changes for each scan of the image sensor 6 with the reference window 30. This comparison operation is performed as shown in FIG. 7, for example. FIG. 7 is an explanatory diagram showing the operation of the determination means 31. The output of the window means 20 is compared with the reference windows 1 to 8 by each judging means 31, respectively. Judgment means 3
1 determines whether or not the portion where the binary signal is 1 in the reference window (hatched portion in the drawing) is also 1 in the output of the window means 20. That is, in other words, the determination unit 31 determines that the binary signal pattern set in the reference window 30 is the window 12 set this time.
It is determined whether it is inside. Therefore, in the case of FIG. 7, the reference window 5 is output to the window means 20.
Pattern exists, it is determined that the two match, and the determination unit 31 outputs 1. Note that FIG.
The output of the window means 20 has a part in which the binary signal is 1 at the lower right, but this part is ignored because it is out of the determination target. Therefore, also in this judging means 31, small noises are removed.

【0028】論理和回路32は、判定手段31の出力を
受け、複数個の判定手段31の内いずれか1つでも1を
出力していれば1を出力すると共に、ウィンドウ手段2
0の出力がいずれの基準ウィンドウとも一致せず全ての
判定手段31が0を出力している場合には0を出力す
る。
The logical sum circuit 32 receives the output of the judging means 31, outputs 1 if any one of the plurality of judging means 31 outputs 1, and also outputs the window means 2
When the output of 0 does not match any of the reference windows and all the determination means 31 output 0, 0 is output.

【0029】以上のようにして得られたノイズを含まな
い2値信号は、白線認識手段11に与えられ、白線認識
手段11はノイズを含まない2値信号に基づき白線を正
確に検出する。
The binary signal containing no noise obtained as described above is given to the white line recognizing means 11, and the white line recognizing means 11 accurately detects the white line based on the binary signal containing no noise.

【0030】従って、実施例1によれば、ノイズを除去
して正確な白線認識を行うことができる。
Therefore, according to the first embodiment, noise can be removed and accurate white line recognition can be performed.

【0031】また、簡単な構成で画面上にウィンドウを
設定することができる。
Further, a window can be set on the screen with a simple structure.

【0032】なお、上記実施例ではウィンドウ12の大
きさを4行4列としたが、例えば3行3列、5行5列、
4行5列、3行5列等いずれの範囲を有するようにして
も良い。この場合、連続性を有する基準ウィンドウのパ
ターンは、図3に示した例に倣って上記各範囲に応じた
パターンを作成する。
Although the size of the window 12 is 4 rows and 4 columns in the above embodiment, for example, 3 rows and 3 columns, 5 rows and 5 columns,
It may have any range of 4 rows by 5 columns, 3 rows by 5 columns, and the like. In this case, as the pattern of the reference window having continuity, a pattern corresponding to each of the above ranges is created according to the example shown in FIG.

【0033】また、図6において基準ウィンドウ30と
して基準ウィンドウ1乃至8を用意したが、図3の基準
ウィンドウ1乃至8を右方向に90°回転させたもの、
180°回転させたもの、270°回転させたものをそ
れぞれ用意して、基準ウィンドウ30を32通り用意し
ても良い。このとき判定手段31も32個用意すると共
に、論理和回路32の入力端子も32本用意する。この
ようにすれば、上述で説明した道路左側の白線だけでな
く道路右側の白線も認識できる。また、道路がカーブし
ていて白線が曲線となっていても問題なく認識すること
ができる。
Although the reference windows 1 to 8 are prepared as the reference window 30 in FIG. 6, the reference windows 1 to 8 in FIG. 3 are rotated rightward by 90 °.
The reference window 30 may be prepared in 32 ways by preparing the one rotated by 180 ° and the one rotated by 270 °. At this time, 32 determination means 31 are also prepared, and 32 input terminals of the OR circuit 32 are also prepared. By doing so, not only the white line on the left side of the road described above but also the white line on the right side of the road can be recognized. Further, even if the road is curved and the white line is curved, it can be recognized without any problem.

【0034】また、上述では装置の構成とその動作につ
いて説明したが、上記装置の動作順序に従って行うよう
にして車両用前方監視方法を得ることもできる。
Although the configuration of the device and its operation have been described above, a vehicle forward monitoring method can be obtained by performing the operation in the order of operation of the device.

【0035】実施例2.実施例1ではパターンマッチン
グを行うことにより映像信号からノイズを取り除くよう
にしたが、ノイズが大きなものであってある程度の連続
性を有しているものである場合は実施例1によりノイズ
を完全に除去できない場合がある。実施例2は、これを
解決するものであって、具体的にはパターンマッチング
を複数回数行うようにしたものである。
Example 2. In the first embodiment, the pattern matching is performed to remove the noise from the video signal. However, when the noise is large and has a certain degree of continuity, the noise is completely removed by the first embodiment. Sometimes it cannot be removed. The second embodiment solves this problem, and specifically, the pattern matching is performed a plurality of times.

【0036】図8は実施例2の構成を示すブロック図で
ある。図1に比しパターンマッチング手段10が1段追
加されている。即ち、図8のものでは前段のパターンマ
ッチング手段10の論理和回路32の出力が後段のパタ
ーンマッチング手段10のウィンドウ手段20に入力さ
れ、パターンマッチングがもう1度行われる。
FIG. 8 is a block diagram showing the configuration of the second embodiment. Compared with FIG. 1, one stage of pattern matching means 10 is added. That is, in the case of FIG. 8, the output of the OR circuit 32 of the pattern matching means 10 in the previous stage is input to the window means 20 of the pattern matching means 10 in the subsequent stage, and the pattern matching is performed again.

【0037】図9に実施例2の処理の様子を示す。図に
おいて(a)は2値化手段3の出力から得られる画像、
(b)は前段のパターンマッチング手段10の出力から
得られる画像、(c)は後段のパターンマッチング手段
10の出力から得られる画像である。この図から、比較
的大きなノイズであってもパターンマッチングを複数回
数行えば除去できることが解る。
FIG. 9 shows the processing state of the second embodiment. In the figure, (a) is an image obtained from the output of the binarizing means 3,
(B) is an image obtained from the output of the pattern matching means 10 in the former stage, and (c) is an image obtained from the output of the pattern matching means 10 in the latter stage. From this figure, it can be seen that even relatively large noise can be removed by performing pattern matching a plurality of times.

【0038】また、上述では装置の構成とその動作につ
いて説明したが、上記装置の動作順序に従って行うよう
にして車両用前方監視方法を得ることもできる。
Although the configuration of the device and the operation thereof have been described above, it is also possible to obtain the vehicle front monitoring method by performing the operation in the order of operation of the device.

【0039】[0039]

【発明の効果】以上のように、この発明の車両用前方監
視装置によれば、画面の所定範囲をウィンドウとして設
定してこのウィンドウを画面上で順次移動させると共
に、このウィンドウ内に存在する撮像素子に対応する2
値信号を順次読み取るウィンドウ手段と、該ウィンドウ
と等しい範囲を有し、このウィンドウ内に予め定められ
た連続性を有するパターンで2値信号が設定されている
複数個の基準ウィンドウと、ウィンドウと基準ウィンド
ウとを比較して両者が一致しているか否かを判定する判
定手段と、この判定手段の出力に基づき車両前方の路上
に描かれた白線を認識する白線認識手段とを備えたの
で、連続性を有しないノイズを除去して正確な白線認識
を行うことができる。
As described above, according to the vehicular front monitoring apparatus of the present invention, a predetermined range of the screen is set as a window, the window is sequentially moved on the screen, and an image existing in the window is picked up. 2 corresponding to the element
Window means for sequentially reading the value signal, a plurality of reference windows having a range equal to the window, and the binary signal being set in the window in a pattern having a predetermined continuity, the window and the reference Since the determination means for comparing the windows with each other to determine whether the two coincide with each other and the white line recognition means for recognizing the white line drawn on the road ahead of the vehicle based on the output of the determination means are provided, continuous Accurate white line recognition can be performed by removing noise having no property.

【0040】また、この発明に係る車両用前方監視装置
によれば、ウィンドウ手段は、ウィンドウ内に存在する
撮像素子に対応する記憶素子を各々配列し、この記憶素
子により2値化手段からの信号を順次記憶更新するもの
であって、画面の水平方向に隣接する撮像素子に対応す
る記憶素子はそれぞれ直列に接続されて複数本の記憶素
子列を構成すると共に、画面の垂直方向に隣接する記憶
素子列は遅延手段を介してそれぞれ並列に接続されてい
るように構成されているので、簡単な構成でウィンドウ
手段を構成することができる。
Further, according to the vehicle front monitoring device of the present invention, the window means arranges the memory elements corresponding to the image pickup elements existing in the window, and the memory elements cause the signal from the binarization means to be arranged. The storage elements corresponding to the image pickup elements that are adjacent in the horizontal direction of the screen are connected in series to form a plurality of storage element rows, and the storage elements that are adjacent in the vertical direction of the screen are stored. Since the element arrays are configured to be connected in parallel via the delay means, the window means can be configured with a simple configuration.

【0041】また、この発明に係る車両用前方監視装置
によれば、ウィンドウ手段と判定手段とを複数組有する
ので、パターンマッチングを複数回行って比較的大きな
ノイズであっても除去することができる。
Further, according to the vehicle front monitoring device of the present invention, since the plurality of sets of window means and determination means are provided, it is possible to perform pattern matching a plurality of times to remove even a relatively large noise. .

【0042】また、この発明に係る車両用前方監視方法
によれば、画面の所定範囲をウィンドウとして設定して
このウィンドウを画面上で順次移動させると共に、この
ウィンドウ内に存在する撮像素子に対応する2値信号を
順次読み取るステップと、ウィンドウと等しい範囲を有
し、このウィンドウ内に予め定められた連続性を有する
パターンで2値信号が設定されている複数個の基準ウィ
ンドウとウィンドウとを比較して両者が一致しているか
否かを判定するステップと、両者が一致しているか否か
を判定するステップによって得られた結果に基づき車両
前方の路上に描かれた白線を認識するステップとを有す
るので、連続性を有しないノイズを除去して正確な白線
認識を行うことができる。
Further, according to the vehicle front monitoring method according to the present invention, a predetermined range of the screen is set as a window, the window is sequentially moved on the screen, and at the same time, it corresponds to the image pickup device existing in the window. Sequentially reading the binary signal and comparing the window with a plurality of reference windows having a range equal to the window and in which the binary signal is set in a pattern having a predetermined continuity. And a step of deciding whether or not they match each other, and a step of recognizing a white line drawn on the road in front of the vehicle based on the result obtained by the step of determining whether or not both match. Therefore, noise having discontinuity can be removed and accurate white line recognition can be performed.

【0043】また、この発明に係る車両用前方監視方法
によれば、画面の所定範囲をウィンドウとして設定して
このウィンドウを画面上で順次移動させると共に、この
ウィンドウ内に存在する撮像素子に対応する2値信号を
順次読み取るステップと、ウィンドウと等しい範囲を有
し、このウィンドウ内に予め定められた連続性を有する
パターンで2値信号が設定されている複数個の基準ウィ
ンドウとウィンドウとを比較して両者が一致しているか
否かを判定するステップとを複数回数繰り返すようにし
たので、比較的大きなノイズであっても除去することが
できる。
Further, according to the vehicle front monitoring method according to the present invention, a predetermined range of the screen is set as a window, the window is sequentially moved on the screen, and the image pickup device existing in the window is dealt with. Sequentially reading the binary signal and comparing the window with a plurality of reference windows having a range equal to the window and in which the binary signal is set in a pattern having a predetermined continuity. Since the step of determining whether or not they match each other is repeated a plurality of times, even a relatively large noise can be removed.

【図面の簡単な説明】[Brief description of drawings]

【図1】 実施例1の構成を示すブロック図である。FIG. 1 is a block diagram showing a configuration of a first embodiment.

【図2】 パターンマッチングの様子を示す説明図であ
る。
FIG. 2 is an explanatory diagram showing a state of pattern matching.

【図3】 基準ウィンドウの例を示す図である。FIG. 3 is a diagram showing an example of a reference window.

【図4】 ウィンドウ手段の構成を示すブロック図であ
る。
FIG. 4 is a block diagram showing a configuration of window means.

【図5】 ウィンドウ手段と撮像素子との対応を説明す
る説明図である。
FIG. 5 is an explanatory diagram illustrating a correspondence between window means and an image sensor.

【図6】 パターンマッチング手段の構成を示すブロッ
ク図である。
FIG. 6 is a block diagram showing a configuration of a pattern matching unit.

【図7】 判定手段の動作を示す説明図である。FIG. 7 is an explanatory diagram showing the operation of the determination means.

【図8】 実施例2の構成を示すブロック図である。FIG. 8 is a block diagram showing a configuration of a second embodiment.

【図9】 実施例2の動作を示す説明図である。FIG. 9 is an explanatory diagram showing the operation of the second embodiment.

【図10】 従来装置の構成を示すブロック図である。FIG. 10 is a block diagram showing a configuration of a conventional device.

【図11】 従来装置のカメラで撮影された画像を示す
図である。
FIG. 11 is a diagram showing an image taken by a camera of a conventional device.

【図12】 2値化手段の処理を示す説明図である。FIG. 12 is an explanatory diagram showing a process of a binarizing unit.

【符号の説明】[Explanation of symbols]

1:カメラ、2:A/Dコンバータ、3:2値化手段、
4:白線認識手段、5:画面、6:撮像素子、7:白
線、9:ノイズ、10:パターンマッチング手段、1
1:白線認識手段、12:ウィンドウ、20:ウィンド
ウ手段、21:記憶素子、22:遅延手段、30:基準
ウィンドウ、31:判定手段、32:論理和回路、81
〜86:検出範囲
1: camera, 2: A / D converter, 3: binarization means,
4: White line recognition means, 5: Screen, 6: Image sensor, 7: White line, 9: Noise, 10: Pattern matching means, 1
1: white line recognition means, 12: window, 20: window means, 21: storage element, 22: delay means, 30: reference window, 31: determination means, 32: logical sum circuit, 81
~ 86: Detection range

Claims (5)

【特許請求の範囲】[Claims] 【請求項1】 車両の前方を撮影するカメラと、 このカメラの画面に配設された複数個の撮像素子からの
映像信号を2種類の値に分類し2値信号を出力する2値
化手段と、 前記画面の所定範囲をウィンドウとして設定してこのウ
ィンドウを前記画面上で順次移動させると共に、このウ
ィンドウ内に存在する前記撮像素子に対応する前記2値
信号を順次読み取るウィンドウ手段と、 前記ウィンドウと等しい範囲を有し、このウィンドウ内
に予め定められた連続性を有するパターンで2値信号が
設定されている複数個の基準ウィンドウと、 前記ウィンドウと前記基準ウィンドウとを比較して両者
が一致しているか否かを判定する判定手段と、 この判定手段の出力に基づき前記車両前方の路上に描か
れた白線を認識する白線認識手段とを備えたことを特徴
とする車両用前方監視装置。
1. A camera for photographing the front of a vehicle, and a binarizing means for classifying video signals from a plurality of image pickup devices arranged on the screen of the camera into two kinds of values and outputting a binary signal. A window means for setting a predetermined range of the screen as a window, sequentially moving the window on the screen, and sequentially reading the binary signal corresponding to the image pickup device existing in the window; And a plurality of reference windows in which binary signals are set in a pattern having a predetermined continuity in the window, and the windows are compared with each other by comparing the reference windows with each other. And a white line recognition means for recognizing the white line drawn on the road in front of the vehicle based on the output of the determination means. Front monitoring apparatus for a vehicle according to claim.
【請求項2】 ウィンドウ手段は、ウィンドウ内に存在
する撮像素子に対応する記憶素子を各々配列し、この記
憶素子により2値化手段からの信号を順次記憶更新する
ものであって、画面の水平方向に隣接する前記撮像素子
に対応する前記記憶素子はそれぞれ直列に接続されて複
数本の記憶素子列を構成すると共に、前記画面の垂直方
向に隣接する前記記憶素子列は遅延手段を介してそれぞ
れ並列に接続されていることを特徴とする請求項1記載
の車両用前方監視装置。
2. The window means is a means for arranging storage elements corresponding to the image pickup elements existing in the window, and sequentially storing and updating the signal from the binarizing means by the storage elements. The storage elements corresponding to the image pickup elements that are adjacent in the direction are connected in series to form a plurality of storage element rows, and the storage element rows that are adjacent in the vertical direction of the screen are respectively delayed by delay means. The vehicle front monitoring device according to claim 1, wherein the front monitoring devices are connected in parallel.
【請求項3】 ウィンドウ手段と判定手段とを複数組有
することを特徴とする請求項1記載の車両用前方監視装
置。
3. The vehicle front monitoring device according to claim 1, further comprising a plurality of sets of window means and determination means.
【請求項4】 車両の前方を撮影するカメラの画面に配
設された複数個の撮像素子からの映像信号を2種類の値
に分類し2値信号を出力するステップと、 前記画面の所定範囲をウィンドウとして設定してこのウ
ィンドウを前記画面上で順次移動させると共に、このウ
ィンドウ内に存在する前記撮像素子に対応する前記2値
信号を順次読み取るステップと、 前記ウィンドウと等しい範囲を有し、このウィンドウ内
に予め定められた連続性を有するパターンで2値信号が
設定されている複数個の基準ウィンドウと前記ウィンド
ウとを比較して両者が一致しているか否かを判定するス
テップと、 前記両者が一致しているか否かのステップによって得ら
れた結果に基づき前記車両前方の路上に描かれた白線を
認識するステップとからなることを特徴とする車両用前
方監視方法。
4. A step of classifying video signals from a plurality of image pickup devices arranged on a screen of a camera for photographing the front of a vehicle into two kinds of values and outputting a binary signal, and a predetermined range of the screen. Is set as a window and the window is sequentially moved on the screen, and the binary signals corresponding to the image pickup devices existing in the window are sequentially read, and a range equal to the window is provided. Comparing a plurality of reference windows in which binary signals are set with a pattern having a predetermined continuity in the window with the window to determine whether the two coincide with each other; Recognizing the white line drawn on the road in front of the vehicle based on the result obtained by the step of whether or not Forward monitoring method for vehicles.
【請求項5】 画面の所定範囲をウィンドウとして設定
してこのウィンドウを前記画面上で順次移動させると共
に、このウィンドウ内に存在する撮像素子に対応する2
値信号を順次読み取るステップと、 前記ウィンドウと等しい範囲を有し、このウィンドウ内
に予め定められた連続性を有するパターンで2値信号が
設定されている複数個の基準ウィンドウと前記ウィンド
ウとを比較して両者が一致しているか否かを判定するス
テップとを複数回数繰り返すことを特徴とする請求項4
記載の車両用前方監視方法。
5. A predetermined range of the screen is set as a window, the window is sequentially moved on the screen, and 2 corresponding to the image pickup device existing in the window is set.
Sequential reading of the value signal, and comparing the window with a plurality of reference windows having a range equal to the window and having binary signals set in a pattern having a predetermined continuity within the window. 5. The step of determining whether or not the two match with each other is repeated a plurality of times.
The vehicle front monitoring method described.
JP7101056A 1995-04-25 1995-04-25 Vehicle front monitoring device and method Pending JPH08297728A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP7101056A JPH08297728A (en) 1995-04-25 1995-04-25 Vehicle front monitoring device and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP7101056A JPH08297728A (en) 1995-04-25 1995-04-25 Vehicle front monitoring device and method

Publications (1)

Publication Number Publication Date
JPH08297728A true JPH08297728A (en) 1996-11-12

Family

ID=14290466

Family Applications (1)

Application Number Title Priority Date Filing Date
JP7101056A Pending JPH08297728A (en) 1995-04-25 1995-04-25 Vehicle front monitoring device and method

Country Status (1)

Country Link
JP (1) JPH08297728A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016165088A (en) * 2015-03-06 2016-09-08 富士通株式会社 Image processor, image processing method and image processing program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016165088A (en) * 2015-03-06 2016-09-08 富士通株式会社 Image processor, image processing method and image processing program

Similar Documents

Publication Publication Date Title
JPH0546242A (en) White line detecting device
US5930406A (en) Position detection apparatus
JPH1166226A (en) License plate recognizing device for vehicle
JPH08297728A (en) Vehicle front monitoring device and method
JPH10105873A (en) Device for recognizing number plate of vehicle
JP3986363B2 (en) Lane boundary detection device
JPS6290800A (en) Automatic vehicle number reading system
JPH1083452A (en) Pattern defect detecting device
JP2001307017A (en) Character plate recognizing device
JP2000322686A (en) Number plate recognizing device for vehicle
JP2000101924A (en) Defect detection correction device in image input device
US5691543A (en) Inspecting device and method for detecting minute contour defects
JP3400643B2 (en) In-vehicle image processing device
JPH0863549A (en) Vehicle number recognition device, binarization device and picture processor
JP4995555B2 (en) Image processing device
JP3053723B2 (en) License plate character recognition method and device
JPH0935065A (en) On-vehicle image processor
JPH11259642A (en) Recognition processing method, recognition processor using the same, and license number plate reader
JPH09288737A (en) Onboard picture processor
JPH09190537A (en) White line detecting device
JPH1097625A (en) Parking vehicle detecting system
JPH0589244A (en) Method and device for pattern matching
JPH0477951B2 (en)
JPH1074261A (en) Pattern defect detecting device
JPH06266825A (en) Image tracking device