JP2003306102A - Passing vehicle detection device, and rear side alarm device for drive supporting system - Google Patents

Passing vehicle detection device, and rear side alarm device for drive supporting system

Info

Publication number
JP2003306102A
JP2003306102A JP2002109312A JP2002109312A JP2003306102A JP 2003306102 A JP2003306102 A JP 2003306102A JP 2002109312 A JP2002109312 A JP 2002109312A JP 2002109312 A JP2002109312 A JP 2002109312A JP 2003306102 A JP2003306102 A JP 2003306102A
Authority
JP
Japan
Prior art keywords
overtaking vehicle
vehicle
overtaking
white line
judging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002109312A
Other languages
Japanese (ja)
Inventor
Kei Takizawa
圭 滝沢
Takahiro Taniguchi
恭弘 谷口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2002109312A priority Critical patent/JP2003306102A/en
Publication of JP2003306102A publication Critical patent/JP2003306102A/en
Pending legal-status Critical Current

Links

Abstract

<P>PROBLEM TO BE SOLVED: To prevent mistakes when detecting a passing vehicle. <P>SOLUTION: This invention is for eliminating detection of repeated patterns on a road within a passing vehicle detection area as a candidate for a passing vehicle. <P>COPYRIGHT: (C)2004,JPO

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】この発明は、追越し車両を検
出する追越車両検出装置と運転支援システムの後側方警
報装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an overtaking vehicle detection device for detecting an overtaking vehicle and a rear side warning device for a driving assistance system.

【0002】[0002]

【従来の技術】自動車運転時の安全性を向上させる目的
で、運転時に計測可能な画像入力センサの計測結果を評
価して、警告を発したり運転制御を行って事故を回避す
るための装置が数多く提案されている。たとえば、自車
後方に設置されたカメラ(車載カメラ)を用いるものと
して、自車の後方から接近して自車を追い越す動きのあ
る他車を検知し、接触事故予防のための警報を発する装
置などがある。
2. Description of the Related Art For the purpose of improving safety while driving a vehicle, there is provided a device for avoiding an accident by evaluating the measurement result of an image input sensor that can be measured during driving and issuing a warning or driving control. Many have been proposed. For example, using a camera (vehicle-mounted camera) installed at the rear of the vehicle, a device that detects another vehicle that is approaching from the rear of the vehicle and overtaking the vehicle and issues a warning to prevent a contact accident. and so on.

【0003】このような従来の技術として、オプティカ
ルフローによる追越車両検出技術が挙げられる。例えば
参考文献(特開2000−11133号公報、移動物体
検出装置及びその方法)に示す。このような従来の方法
には、入力画像中にFOEから外に向かう直線上に並ぶ
繰返しパターンを誤って追越車両として検出するという
問題がある。繰返しパターンは、自車の走行速度、画像
入力の時間間隔、繰返しパターンの配置の間隔等によっ
ては、入力画像系列中で見かけ上自車に接近しているよ
うに見える場合があり、このような場合に、追越車両が
誤検出される。図1のパターンは、路面上に描かれた繰
返しパターンである。このような繰返しパターンは、自
車が前方に移動する状態で撮影された場合に、実際には
自車から遠ざかる動きをしているにもかかわらず、入力
画像系列中では、自車に近付く動きをするように見える
場合がある。例えば、時刻1と2においてそれぞれ、図
1、2のような画像が得られたとする。実際は、図1の
直線A、B、C、Dは、それぞれ、図2のC’、D’、
E’、F’に対応するにもかかわらず、見かけ上は、
A、B、C、Dは、それぞれ、A’、B’、C’、D’
に対応するように見える。このような場合、オプティカ
ルフロー検出部では、繰返しパターンから自車に接近す
るオプティカルフローが検出される。その結果、追越車
両が誤って検出される。同様に図3のようなフェンスの
ポールからも自車に接近するオプティカルフローが検出
され、追越車両が誤検出される場合がある。
An example of such a conventional technique is an overtaking vehicle detection technique using an optical flow. For example, it is shown in a reference document (Japanese Unexamined Patent Publication No. 2000-11133, moving object detection apparatus and method thereof). Such a conventional method has a problem that a repetitive pattern lined up on a straight line from the FOE to the outside in the input image is erroneously detected as an overtaking vehicle. Depending on the running speed of the host vehicle, the time interval for image input, the interval for placement of the repeat pattern, etc., the repeating pattern may appear to be approaching the own vehicle in the input image sequence. In this case, the overtaking vehicle is erroneously detected. The pattern of FIG. 1 is a repeating pattern drawn on the road surface. When such a repeating pattern is taken while the vehicle is moving forward, even though the vehicle is actually moving away from the vehicle, in the input image sequence, the movement toward the vehicle is approached. May appear to do. For example, it is assumed that the images shown in FIGS. 1 and 2 are obtained at times 1 and 2, respectively. In fact, the straight lines A, B, C and D in FIG. 1 are respectively C ′, D ′ and C ′ in FIG.
Although it corresponds to E'and F ', in appearance,
A, B, C and D are A ′, B ′, C ′ and D ′, respectively.
Seems to correspond to. In such a case, the optical flow detection unit detects an optical flow approaching the host vehicle from the repeating pattern. As a result, the overtaking vehicle is erroneously detected. Similarly, an optical flow approaching the host vehicle may be detected from the pole of the fence as shown in FIG. 3, and an overtaking vehicle may be erroneously detected.

【0004】[0004]

【発明が解決しようとする課題】この発明は、追越車両
の誤検出を防止できる追越車両検出装置と追越車両の誤
検出による誤報を防止できる運転支援システムの後側方
警報装置を提供することを目的としている。
DISCLOSURE OF THE INVENTION The present invention provides an overtaking vehicle detection device capable of preventing an erroneous detection of an overtaking vehicle and a rear side warning device for a driving support system capable of preventing an erroneous alarm due to an erroneous detection of an overtaking vehicle. The purpose is to do.

【0005】[0005]

【課題を解決するための手段】この発明の追越車両検出
装置は、車両の後方の映像を撮影する撮影手段と、この
撮影手段により撮影された映像から白線を検出する白線
検出手段と、この白線検出手段により検出された白線に
基づいて、追越車両の検出領域を判断する第1の判断手
段と、この第1の判断手段により判断した追越車両の検
出領域におけるフレーム間での移動ベクトルに基づい
て、追越車両候補を判断する第2の判断手段と、この第
2の判断手段により判断された追越車両候補の中で、上
記第1の判断手段により判断した追越車両の検出領域に
おける繰返しパターンによる追越車両候補を除去する除
去手段とを有する。
An overtaking vehicle detection device according to the present invention includes a photographing means for photographing an image behind a vehicle, a white line detecting means for detecting a white line from an image photographed by the photographing means, and First judging means for judging the detection area of the overtaking vehicle based on the white line detected by the white line detecting means, and a movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. Second judging means for judging an overtaking vehicle candidate based on the above, and detection of an overtaking vehicle judged by the first judging means among the overtaking vehicle candidates judged by the second judging means. And a removing means for removing an overtaking vehicle candidate by a repeated pattern in the area.

【0006】この発明の運転支援システムの後側方警報
装置は、車両の後方の映像を撮影する撮影手段と、この
撮影手段により撮影された映像から白線を検出する白線
検出手段と、この白線検出手段により検出された白線に
基づいて、追越車両の検出領域を判断する第1の判断手
段と、この第1の判断手段により判断した追越車両の検
出領域におけるフレーム間での移動ベクトルに基づい
て、追越車両候補を判断する第2の判断手段と、この第
2の判断手段により判断された追越車両候補の中で、上
記第1の判断手段により判断した追越車両の検出領域に
おける繰返しパターンによる追越車両候補を除去する除
去手段と、上記車両の操舵角の変化あるいはウインカー
スイッチにより車線変更を判断する第3の判断手段と、
この第3の判断手段により車線変更が判断された際に、
第2の判断手段により判断された追越車両候補の中で、
上記除去手段により除去されなかった追越車両候補の位
置により警報を発生する警報発生手段とを有する。
The rear side warning device of the driving support system according to the present invention includes a photographing means for photographing the image behind the vehicle, a white line detecting means for detecting a white line from the image photographed by the photographing means, and a white line detecting means. Based on the white line detected by the means, based on the first judging means for judging the detection area of the overtaking vehicle, and the movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. A second judging means for judging an overtaking vehicle candidate and an overtaking vehicle detection area judged by the first judging means among the overtaking vehicle candidates judged by the second judging means. Removing means for removing an overtaking vehicle candidate based on a repetitive pattern, and third determining means for determining a change in the steering angle of the vehicle or a lane change by a turn signal switch,
When the lane change is judged by the third judging means,
Among the overtaking vehicle candidates judged by the second judging means,
And an alarm generating unit that generates an alarm according to the position of the overtaking vehicle candidate that has not been removed by the removing unit.

【0007】この発明の追越車両検出装置は、車両の後
方の映像を撮影する撮影手段と、この撮影手段により撮
影された映像から白線を検出する白線検出手段と、この
白線検出手段により検出された白線に基づいて、追越車
両の検出領域を判断する第1の判断手段と、この第1の
判断手段により判断した追越車両の検出領域におけるフ
レーム間での移動ベクトルに基づいて、追越車両候補を
判断する第2の判断手段と、この第2の判断手段により
判断された追越車両候補ごとに、追越車両候補に含まれ
る各移動ベクトルの検出位置周囲の小領域におけるエッ
ジの角度のヒストグラムを求め、各追越車両候補のエッ
ジ角度ヒストグラムの分散量が所定値よりも少ない追越
車両候補を、上記第2の判断手段により判断した追越車
両候補から除去する第1の除去手段と、上記第2の判断
手段により判断された追越車両候補ごとに、上記白線検
出手段により検出された白線の延出方向と同一方向の移
動ベクトル量を算出し、この移動ベクトル量が所定値よ
りも少ない追越車両候補を、上記第2の判断手段により
判断した追越車両候補から除去する第2の除去手段と、
上記第2の判断手段により判断された追越車両候補ごと
に、追越車両候補に含まれる各移動ベクトルの検出位置
周囲の小領域におけるエッジ強度の総和を求め、エッジ
強度の総和が所定値よりも小さい追越車両候補を、上記
第2の判断手段により判断した追越車両候補から除去す
る第3の除去手段とを有する。
The overtaking vehicle detecting device of the present invention detects the image of the rear of the vehicle by the photographing means, the white line detecting means for detecting the white line from the image photographed by the photographing means, and the white line detecting means. The first judging means for judging the detection area of the overtaking vehicle based on the white line and the movement vector between the frames in the detection area of the overtaking vehicle judged by the first judging means. Second judging means for judging a vehicle candidate, and, for each overtaking vehicle candidate judged by the second judging means, an angle of an edge in a small area around the detection position of each movement vector included in the overtaking vehicle candidate. Of the overtaking vehicle candidates are removed from the overtaking vehicle candidates determined by the second determining means, the overtaking vehicle candidates for which the amount of variance of the edge angle histogram of each overtaking vehicle candidate is smaller than a predetermined value. A movement vector amount in the same direction as the extending direction of the white line detected by the white line detecting means is calculated for each overtaking vehicle candidate determined by the first removing means and the second determining means, and this movement is performed. Second removing means for removing an overtaking vehicle candidate having a vector amount smaller than a predetermined value from the overtaking vehicle candidates determined by the second determining means;
For each of the overtaking vehicle candidates determined by the second determining means, the sum of the edge strengths in a small area around the detection position of each movement vector included in the overtaking vehicle candidates is calculated, and the sum of the edge strengths is greater than a predetermined value. And a third removing unit that removes a small overtaking vehicle candidate from the overtaking vehicle candidate determined by the second determining unit.

【0008】[0008]

【発明の実施の形態】以下、図面を参照してこの発明の
実施形態の運転支援システムの追越車両検出装置(後側
方警報装置)を説明する。この追越車両検出装置は、図
4に示すように、自車1の後方を所定の視野を持って撮
影する後方カメラ2からの入力画像から追越車両3を検
出するものであり、図5に示すように、画像入力部1
1、白線検出部12、オプティカルフロー検出部13、
追越車両検出部14、非車両削除部15、警報生成部1
6により構成されている。この追越車両検出装置は、入
力画像中での追越車両3がFOEと呼ばれる一点から画
像の外に向かう動きを持つことに基づいて、追越車両3
の検出を行うものである。また、自車1が走行する道路
上に,かつ自車1の走行方向と同一方向の直線上に,車
両の通行区分を区切る白線4が引かれている。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS An overtaking vehicle detection device (rear side warning device) of a driving support system according to an embodiment of the present invention will be described below with reference to the drawings. As shown in FIG. 4, this overtaking vehicle detection device detects the overtaking vehicle 3 from the input image from the rear camera 2 that captures the rear of the vehicle 1 with a predetermined field of view. As shown in FIG.
1, white line detection unit 12, optical flow detection unit 13,
Overtaking vehicle detection unit 14, non-vehicle deletion unit 15, alarm generation unit 1
It is composed of six. This overtaking vehicle detection device is based on the fact that the overtaking vehicle 3 in the input image has a movement called FOE from the point toward the outside of the image.
Is to be detected. Further, a white line 4 is drawn on the road on which the vehicle 1 is traveling and on a straight line in the same direction as the traveling direction of the vehicle 1 to delimit the traffic section of the vehicle.

【0009】画像入力部11は、図6に示すように、自
車1の後方を撮影する後方カメラ2からの画像を一定時
間間隔で取込むものであり、この入力画像を白線検出部
12に出力する。白線検出部12は、図6に示すよう
に、画像入力部11から供給される入力画像から自車レ
ーンの左右の白線4、4を検出し、その交点をFOEと
して求め、オプティカルフロー検出部13と追越車両検
出部14に出力する。この際、白線4の端部の白と黒の
境界線をエッジとしている(輝度変化のある部分をエッ
ジとしている)。
As shown in FIG. 6, the image input unit 11 captures images from the rear camera 2 for photographing the rear of the vehicle 1 at regular time intervals, and the input image is input to the white line detection unit 12. Output. As shown in FIG. 6, the white line detection unit 12 detects the white lines 4 and 4 on the left and right of the vehicle lane from the input image supplied from the image input unit 11, obtains the intersections thereof as FOE, and the optical flow detection unit 13 Is output to the overtaking vehicle detection unit 14. At this time, the boundary line between white and black at the end of the white line 4 is used as an edge (the part where the luminance change is made is an edge).

【0010】オプティカルフロー検出部13は、図7に
示すように、画像入力部11から供給される入力画像に
おける白線4よりも上の隣接レーンに対応する領域での
オプティカルフロー(移動ベクトル)を求める。オプテ
ィカルフロー検出部13では、連続して取り込まれた二
つの画像間での、画像中の動きをオプティカルフローと
して検出するものである。
As shown in FIG. 7, the optical flow detection unit 13 obtains an optical flow (movement vector) in an area corresponding to an adjacent lane above the white line 4 in the input image supplied from the image input unit 11. . The optical flow detection unit 13 detects a motion in an image between two continuously captured images as an optical flow.

【0011】追越車両検出部14は、白線検出部12に
より得られたFOEとオプティカルフロー検出部13か
らのオプティカルフローとに基づいて、FOEから画像
の外に向かうオプティカルフローについて、近接するも
の同士をまとめ、図8に示すように、追越車両候補とし
て検出するものである。この追越車両候補の検出結果は
非車両削除部15に出力される。
On the basis of the FOE obtained by the white line detection unit 12 and the optical flow from the optical flow detection unit 13, the overtaking vehicle detection unit 14 makes the optical flows going out of the image from the FOE close to each other. Are combined and detected as an overtaking vehicle candidate as shown in FIG. The detection result of the overtaking vehicle candidate is output to the non-vehicle deleting unit 15.

【0012】上記追越車両検出部14は、例えば参考文
献(特開2000−11133号公報、移動物体検出装
置及びその方法)に示すように、後側方からの追い越し
車両の存在についての警告信号を発することができるも
のとする。そのために画像入力部11から入力され、デ
ィジタル化された映像のうちある1フレームの中の指定
領域についてある一定強度以上のテクスチャが存在する
画素について、別時点のフレームにおいて対応付けをと
り、それら同一と考えられる点のそれぞれのフレーム間
での移動ベクトル(Optical flow)を評価
する手法を用いているものと仮定する。
The overtaking vehicle detection unit 14, as shown in, for example, the reference (Japanese Unexamined Patent Application Publication No. 2000-11133, moving object detection apparatus and method), outputs a warning signal from the rear side of the presence of an overtaking vehicle. Can be issued. Therefore, pixels having a texture having a certain intensity or more in a designated area in one frame input from the image input unit 11 in a digitized image are associated with each other in a frame at another time point, and they are the same. It is assumed that a method of evaluating a movement vector (optical flow) between each of the points considered to be the above is used.

【0013】非車両削除部15は、追越車両検出部14
による各追越車両候補について、エッジ角度分散、FO
Eからの射影長、最大エッジ強度の三つの特徴量を計算
し、これらの特徴量により車両か否かを判定し、車両で
ないと判定された際に追越車両検出部14による追越車
両候補から削除するものである。警報生成部16は、ド
ライバ(運転手)がウインカスイッチを入れた時(ある
いはハンドルが所定角度以上回転した際)に、ウインカ
(ハンドルの回転)の方向に追越車両候補が検出されて
いれば、ドライバに対して、ブザーや音声、LED等で
追越車両の存在を知らせる。
The non-vehicle deleting unit 15 is an overtaking vehicle detecting unit 14.
Edge angle dispersion, FO for each overtaking vehicle candidate
Three feature amounts of the projection length from E and the maximum edge strength are calculated, it is determined whether or not the vehicle is a vehicle based on these feature amounts, and when it is determined that the vehicle is not the vehicle, the overtaking vehicle detection unit 14 determines the overtaking vehicle. Is to be deleted from. When the driver (driver) turns on the blinker switch (or when the steering wheel rotates by a predetermined angle or more), the alarm generation unit 16 detects an overtaking vehicle candidate in the direction of the blinker (rotation of the steering wheel). , The driver is notified of the presence of an overtaking vehicle by a buzzer, voice, LED, or the like.

【0014】上記非車両削除部15による追越車両候補
の削除処理について、図9に示すフローチャートを参照
しつつ説明する。すなわち、上記非車両削除部15は、
追越車両検出部14による各追越車両候補について、エ
ッジ角度分散Fvar、FOEからの射影長Fprjl
en、最大エッジ強度Femaxの三つの特徴量を計算
する(ST1)。この結果、上記非車両削除部15は、
特徴量Fvar、Fprjlen、Femaxと閾値T
var、Tprjlen、Temaxとをそれぞれ比較
し(ST2)、「Fvar<Tvar、Fprjlen
<Tprjlen、Femax<Temax」のいずれ
かが成立した場合、車両ではないと判定し、追越車両候
補を削除する(ST3)。上記閾値は、統計的に算出さ
れるものである。
The process of deleting an overtaking vehicle candidate by the non-vehicle deleting unit 15 will be described with reference to the flowchart shown in FIG. That is, the non-vehicle deleting unit 15 is
For each overtaking vehicle candidate by the overtaking vehicle detection unit 14, the projection length Fprjl from the edge angle variances Fvar, FOE
Three feature amounts of en and maximum edge strength Femax are calculated (ST1). As a result, the non-vehicle deleting unit 15 is
Feature quantities Fvar, Fprjlen, Femax and threshold value T
var, Tprjlen, and Temax are compared with each other (ST2), and “Fvar <Tvar, Fprjlen
If any of <Tprjlen, Femax <Temax ”is satisfied, it is determined that the vehicle is not a vehicle and the overtaking vehicle candidate is deleted (ST3). The threshold value is statistically calculated.

【0015】ただし、誤って車両である追越車両候補を
削除する可能性を減らすため、自車速度が閾値よりも小
さい場合、追越車両候補がFOEの近くから時間的に連
続して検出されている場合の2つの場合には、上記ステ
ップ2の条件が成立した場合でも追越車両候補から削除
しないものとする。上記自車速度が閾値よりも小さい場
合、つまり自車の速度が十分小さければ、入力画像系列
中での繰返しパターンの移動量も十分小さくなり、オプ
ティカルフロー検出の精度が上ることによる。この場合
には、誤って繰返しパターンから自車に接近するオプテ
ィカルフロー検出がされなくなり、追越車両の誤検出も
発生しなくなる。これにより、追越車両候補から削除さ
れないようになっている。
However, in order to reduce the possibility of erroneously deleting an overtaking vehicle candidate, when the own vehicle speed is smaller than the threshold value, the overtaking vehicle candidate is continuously detected in the vicinity of the FOE. In the two cases described above, it is not deleted from the overtaking vehicle candidates even when the condition of step 2 is satisfied. This is because if the speed of the vehicle is smaller than the threshold value, that is, if the speed of the vehicle is sufficiently small, the amount of movement of the repetitive pattern in the input image series is also sufficiently small and the accuracy of optical flow detection is improved. In this case, the optical flow for approaching the host vehicle from the repeated pattern is not detected by mistake, and the false detection of the overtaking vehicle does not occur. This prevents it from being deleted from the overtaking vehicle candidates.

【0016】また、繰返しパターンは、自車が前方に走
行中に、入力画像の端から、つまり、自車に近い位置か
ら現れるものである。これにより、繰返しパターンから
検出される追越車両候補は、自車近くに突然現れる傾向
がある。これに対して、追越車両は、FOEの近くつま
り、遠方から出現するという傾向がある。したがって、
追越車両候補がFOEの近くから時間的に連続して検出
されている場合には、追越車両候補から削除されないよ
うになっている。
The repeating pattern appears from the edge of the input image, that is, from a position close to the own vehicle while the own vehicle is traveling forward. As a result, the overtaking vehicle candidate detected from the repeated pattern tends to suddenly appear near the own vehicle. On the other hand, the overtaking vehicle tends to appear near the FOE, that is, from a distance. Therefore,
When the overtaking vehicle candidates are continuously detected from the vicinity of the FOE, they are not deleted from the overtaking vehicle candidates.

【0017】上記エッジ角度分散の特徴量Fvar、最
大エッジ強度の閾値Temaxは、それぞれ、入力画像
G(x,y)から得られるエッジ角度画像θ(x,y)
および、エッジ強度画像E(x,y)から計算する。エ
ッジ角度画像θ(x,y)およびエッジ強度画像E
(x,y)は、水平エッジ画像Eh(x,y)と垂直エ
ッジ画像Ev(x,y)から次のように計算される。
The feature amount Fvar of the edge angle variance and the threshold Temax of the maximum edge strength are respectively the edge angle image θ (x, y) obtained from the input image G (x, y).
Also, it is calculated from the edge strength image E (x, y). Edge angle image θ (x, y) and edge intensity image E
(X, y) is calculated from the horizontal edge image Eh (x, y) and the vertical edge image Ev (x, y) as follows.

【0018】θ(x,y)=arctan(Eh(x,
y)/Ev(x,y)) E(x,y)=|Eh(x,y)|+|Ev(x,y)| ここで、Eh(x,y)、Ev(x,y)は、次のよう
に計算される。 Eh(x,y)=−G(x−1,y−1)−2*G
(x,y−1)−G(x+1.y−1)+G(x−1,
y+1)+2*G(x,y+1)+G(x+1,y+
1) Ev(x,y)=−G(x−1,y−1)+G(x+
1,y−1)−2*G(x−1,y)+2*G(x+
1,y)−G(x−1,y+1)+G(x+1,y+
1) 以下、特徴量Fvar、Fprjlen、Femaxに
ついて説明する。 [エッジ角度分散の特徴量Fvar]追越車両候補に含
まれる各オプティカルフローの検出位置周囲の小領域に
ついて、エッジの角度θ(x,y)のヒストグラムを求
める。横軸がエッジの角度、縦軸がオプティカルフロー
の個数となるエッジ角度ヒストグラムを生成する。ここ
で、オプティカルフローの検出位置とは、図10のよう
なオプティカルフローの終点の位置とする。また、オプ
ティカルフローの検出位置周囲の小領域とは、図10の
ようなオプティカルフローの終点周辺の小矩形領域とす
る。
Θ (x, y) = arctan (Eh (x,
y) / Ev (x, y)) E (x, y) = | Eh (x, y) | + | Ev (x, y) | where Eh (x, y) and Ev (x, y) Is calculated as follows. Eh (x, y) =-G (x-1, y-1) -2 * G
(X, y-1) -G (x + 1.y-1) + G (x-1,
y + 1) + 2 * G (x, y + 1) + G (x + 1, y +
1) Ev (x, y) =-G (x-1, y-1) + G (x +
1, y-1) -2 * G (x-1, y) + 2 * G (x +
1, y) -G (x-1, y + 1) + G (x + 1, y +
1) The feature values Fvar, Fprjlen, and Femax will be described below. [Feature Fvar of Edge Angle Variance] A histogram of the edge angle θ (x, y) is obtained for a small area around the detection position of each optical flow included in the overtaking vehicle candidate. An edge angle histogram in which the horizontal axis represents the edge angle and the vertical axis represents the number of optical flows is generated. Here, the detection position of the optical flow is the position of the end point of the optical flow as shown in FIG. The small area around the detection position of the optical flow is a small rectangular area around the end point of the optical flow as shown in FIG.

【0019】図11にエッジ角度ヒストグラムの例を示
す。エッジ角度ヒストグラムは、図1から図3のような
繰返しパターンから計算された場合には、図11のよう
に、一つの角度に集中し、分散は小さくなる。しかし、
車両はさまざまな方向を持つエッジから構成されるた
め、車両の場合は、図12のようなエッジ角度ヒストグ
ラムが得られ、ヒストグラムの分散が大きくなる傾向が
ある。よって、各追越車両候補についてエッジ角度ヒス
トグラムの分散Fvarを計算し、閾値Tvarよりも
小さい場合に車両でないとして削除する。エッジ角度ヒ
ストグラムの分散をエッジ角度分散と呼ぶ。
FIG. 11 shows an example of the edge angle histogram. When the edge angle histogram is calculated from the repetitive patterns shown in FIGS. 1 to 3, the edge angle histogram is concentrated on one angle as shown in FIG. 11, and the variance is small. But,
Since the vehicle is composed of edges having various directions, in the case of the vehicle, the edge angle histogram as shown in FIG. 12 is obtained, and the distribution of the histogram tends to be large. Therefore, the variance Fvar of the edge angle histogram is calculated for each overtaking vehicle candidate, and when it is smaller than the threshold value Tvar, it is deleted as not a vehicle. The variance of the edge angle histogram is called the edge angle variance.

【0020】[FOEからの射影長の特徴量Fprjl
en]図13のガードレールのポールのように、繰返し
パターンが直線として短く、ノイズ等の影響によりエッ
ジ角度分散が小さくならない場合がある。このような場
合に対処するため、次のようにして得られるFOEから
の射影長Fprjlenを計算する。追越車両候補に含
まれる各オプティカルフローの検出位置を、図14のよ
うにFOEからy軸に平行な直線Lleftに射影し、
得られた射影のゼロでない値を含む最小の範囲を求め、
その範囲の長さLEN−AをFprjlenとする。な
お、追越車両候補が入力画像中で右側にある場合には、
Lrightに射影する。直線LleftとLrigh
tは、FOEから同じ距離離れているものとする。車両
は、路面からの高さがあるため、車両について計算され
たFprjlenは、大きな値を持つ傾向がある。よっ
て、追越車両候補について計算されたFprjlen
が、閾値Tprjlenより小さい場合に車両でないと
して削除する。
[Feature amount Fprjl of projection length from FOE
[en] Like the guardrail pole in FIG. 13, the repeating pattern is short as a straight line, and the edge angle dispersion may not be reduced due to the influence of noise or the like. In order to deal with such a case, the projection length Fprjlen from FOE obtained as follows is calculated. The detection position of each optical flow included in the overtaking vehicle candidate is projected from the FOE to a straight line Lleft parallel to the y axis as shown in FIG.
Find the minimum range of the obtained projections that includes non-zero values,
Let the length LEN-A of the range be Fprjlen. If the overtaking vehicle candidate is on the right side of the input image,
Project to Lright. Straight lines Lleft and Lright
Let t be the same distance from the FOE. Since the vehicle is high from the road surface, Fprjlen calculated for the vehicle tends to have a large value. Therefore, Fprjlen calculated for the overtaking vehicle candidate
Is smaller than the threshold value Tprjlen, the vehicle is deleted because it is not a vehicle.

【0021】[最大エッジ強度Femax]図15のよ
うに、影によりノイズの影響を受け、繰返しパターンの
エッジ角度分散が小さくならない場合がある。そこで、
追越車両候補に含まれる各オプティカルフローの検出位
置の周辺の小領域ei(i=1,2,…,n)につい
て、エッジ強度E(x,y)の総和を求めESUM(e
i)(i=1,2,…,n)とする。ここで、nは、追
越車両候補に含まれるオプティカルフローの数とする。
ESUM(ei)の最大値を最大エッジ強度Femax
とする。車両は、エッジ強度が大きいという傾向があ
り、車両から得られるFemaxは、大きくなる傾向が
ある。そこで、追越車両候補について計算されたFem
axを閾値Temaxと比較し、小さい場合に車両でな
いとして、対応する追越車両候補について削除する。
[Maximum Edge Strength Femax] As shown in FIG. 15, there are cases where shadows are affected by noise and the edge angle dispersion of the repeated pattern does not become small. Therefore,
For a small area ei (i = 1, 2, ..., N) around the detection position of each optical flow included in the overtaking vehicle candidate, the sum of the edge strengths E (x, y) is calculated and ESUM (e
i) (i = 1, 2, ..., N). Here, n is the number of optical flows included in the overtaking vehicle candidate.
The maximum value of ESUM (ei) is the maximum edge strength Femax
And Vehicles tend to have high edge strength, and Femax obtained from vehicles tends to be high. So Fem calculated for the overtaking vehicle candidate
ax is compared with the threshold value Temax, and if it is smaller, it is determined that the vehicle is not a vehicle, and the corresponding overtaking vehicle candidate is deleted.

【0022】上記したように、追越車両の誤検出を削減
することができ、警報生成部16での誤報を減らすこと
ができる。・エッジ角度分散特徴量を用いることによ
り、直線から構成される繰返しパターンから誤って検出
された追越車両候補を削除することが可能となる。・F
OEからの射影長特徴量を用いることにより、短い直線
から構成される繰返しパターンから誤って検出された追
越車両候補を削除することが可能となる。・最大エッジ
強度特徴量を用いることにより、照明によりエッジ強度
が低い繰返しパターンでから誤って検出された追越車両
候補を削除することが可能となる。
As described above, the false detection of the overtaking vehicle can be reduced, and the false alarm in the alarm generation unit 16 can be reduced. -By using the edge angle dispersion feature amount, it is possible to delete an overtaking vehicle candidate that is erroneously detected from a repetitive pattern composed of straight lines.・ F
By using the projection length feature amount from the OE, it is possible to delete the overtaking vehicle candidate that is erroneously detected from the repetitive pattern composed of short straight lines. -By using the maximum edge strength feature amount, it becomes possible to delete an overtaking vehicle candidate that has been erroneously detected from a repeating pattern with low edge strength due to illumination.

【0023】また、自車速度が閾値(統計により求めら
れる速度)よりも小さい場合と、追越車両候補がFOE
の近くから時間的に連続して検出されている場合に、追
越車両候補を削除しないようにすることにより、誤って
車両である追越車両候補を削除する可能性を減らすこと
ができる。
In addition, when the own vehicle speed is smaller than a threshold value (speed obtained by statistics), the overtaking vehicle candidate is FOE.
If the overtaking vehicle candidates are not deleted when they are continuously detected in the vicinity of, it is possible to reduce the possibility of accidentally deleting the overtaking vehicle candidate that is the vehicle.

【0024】[0024]

【発明の効果】以上詳述したように、この発明によれ
ば、追越車両の誤検出を防止できる追越車両検出装置と
追越車両の誤検出による誤報を防止できる運転支援シス
テムの後側方警報装置を提供できる。
As described in detail above, according to the present invention, an overtaking vehicle detection device capable of preventing an erroneous detection of an overtaking vehicle and a rear side of a driving support system capable of preventing an erroneous alarm due to an erroneous detection of an overtaking vehicle. It is possible to provide an alarm device.

【図面の簡単な説明】[Brief description of drawings]

【図1】繰返しパターンを有する入力画像を示す図。FIG. 1 is a diagram showing an input image having a repeating pattern.

【図2】繰返しパターンを有する入力画像を示す図。FIG. 2 is a diagram showing an input image having a repeating pattern.

【図3】繰返しパターンを有する入力画像を示す図。FIG. 3 is a diagram showing an input image having a repeating pattern.

【図4】この発明の実施形態を説明するための車両の走
行状態を示す図。
FIG. 4 is a diagram showing a traveling state of the vehicle for explaining the embodiment of the invention.

【図5】この発明の実施形態を説明するための追越車両
検出装置の概略構成を示す図。
FIG. 5 is a diagram showing a schematic configuration of an overtaking vehicle detection device for explaining an embodiment of the invention.

【図6】入力画像を示す図。FIG. 6 is a diagram showing an input image.

【図7】オプティカルフローの検出例を示す図。FIG. 7 is a diagram showing an example of optical flow detection.

【図8】追越車両候補の検出例を示す図。FIG. 8 is a diagram showing an example of detecting an overtaking vehicle candidate.

【図9】追越車両候補の削除処理を説明するためのフロ
ーチャート。
FIG. 9 is a flowchart illustrating a process of deleting an overtaking vehicle candidate.

【図10】オプティカルフローの終点周辺の小矩形領域
を示す図。
FIG. 10 is a diagram showing a small rectangular area around the end point of the optical flow.

【図11】エッジ角度ヒストグラムの例を示す図。FIG. 11 is a diagram showing an example of an edge angle histogram.

【図12】エッジ角度ヒストグラムの例を示す図。FIG. 12 is a diagram showing an example of an edge angle histogram.

【図13】繰返しパターンを有する入力画像を示す図。FIG. 13 is a diagram showing an input image having a repeating pattern.

【図14】オプティカルフローの検出位置と射影を説明
するための図。
FIG. 14 is a diagram for explaining detection positions and projections of optical flows.

【図15】繰返しパターンを有する入力画像を示す図。FIG. 15 is a diagram showing an input image having a repeating pattern.

【符号の説明】 1…自車、2…後方カメラ、3…追越車両、4…白線、
11…画像入力部、12…白線検出部、13…オプティ
カルフロー検出部、14…追越車両検出部、15…非車
両削除部、16…警報生成部。
[Explanation of Codes] 1 ... Own vehicle, 2 ... Rear camera, 3 ... Overtaking vehicle, 4 ... White line,
11 ... Image input unit, 12 ... White line detection unit, 13 ... Optical flow detection unit, 14 ... Overtaking vehicle detection unit, 15 ... Non-vehicle deletion unit, 16 ... Warning generation unit.

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) G06T 1/00 G06T 1/00 330B 7/20 7/20 B 7/60 200 7/60 200J H04N 7/18 H04N 7/18 J // G08G 1/16 G08G 1/16 C Fターム(参考) 5B057 AA16 BA02 CA08 CA12 CA17 CB08 CB12 CB16 CC01 CE11 DA02 DA07 DA12 DA15 DA16 DB02 DB09 DC02 DC08 DC09 DC23 DC32 5C054 AA01 FC12 FE19 FE21 HA30 5H180 AA01 CC04 LL04 LL06 5L096 BA04 CA02 FA03 FA06 FA35 HA04 JA11 ─────────────────────────────────────────────────── ─── Continuation of front page (51) Int.Cl. 7 Identification code FI theme code (reference) G06T 1/00 G06T 1/00 330B 7/20 7/20 B 7/60 200 7/60 200J H04N 7 / 18 H04N 7/18 J // G08G 1/16 G08G 1/16 CF Term (reference) 5B057 AA16 BA02 CA08 CA12 CA17 CB08 CB12 CB16 CC01 CE11 DA02 DA07 DA12 DA15 DA16 DB02 DB09 DC02 DC08 DC09 DC23 DC32 5C054 AAFE FC12 FE19 HA30 5H180 AA01 CC04 LL04 LL06 5L096 BA04 CA02 FA03 FA06 FA35 HA04 JA11

Claims (11)

【特許請求の範囲】[Claims] 【請求項1】 車両の後方の映像を撮影する撮影手段
と、 この撮影手段により撮影された映像から白線を検出する
白線検出手段と、 この白線検出手段により検出された白線に基づいて、追
越車両の検出領域を判断する第1の判断手段と、 この第1の判断手段により判断した追越車両の検出領域
におけるフレーム間での移動ベクトルに基づいて、追越
車両候補を判断する第2の判断手段と、 この第2の判断手段により判断された追越車両候補の中
で、上記第1の判断手段により判断した追越車両の検出
領域における繰返しパターンによる追越車両候補を除去
する除去手段と、 を具備したことを特徴とする追越車両検出装置。
1. A passing means based on a white line detected by a white line detecting means for detecting a white line from a video image taken by the image taking means, and a white line detected by the white line detecting means. A first judging means for judging the detection area of the vehicle, and a second judging means for judging an overtaking vehicle candidate based on a movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. Determining means, and removing means for removing overtaking vehicle candidates by a repeating pattern in the overtaking vehicle detection area determined by the first determining means from among the overtaking vehicle candidates determined by the second determining means. An overtaking vehicle detection device comprising:
【請求項2】 繰返しパターンが、道路上のゼブラ模
様、ガードレールのポールにより生成されるものである
ことを特徴とする請求項1に記載の追越車両検出装置。
2. The overtaking vehicle detection device according to claim 1, wherein the repetitive pattern is generated by a zebra pattern on a road or a pole of a guardrail.
【請求項3】 車両の後方の映像を撮影する撮影手段
と、 この撮影手段により撮影された映像から白線を検出する
白線検出手段と、 この白線検出手段により検出された白線に基づいて、追
越車両の検出領域を判断する第1の判断手段と、 この第1の判断手段により判断した追越車両の検出領域
におけるフレーム間での移動ベクトルに基づいて、追越
車両候補を判断する第2の判断手段と、 この第2の判断手段により判断された追越車両候補の中
で、上記第1の判断手段により判断した追越車両の検出
領域における繰返しパターンによる追越車両候補を除去
する除去手段と、 上記車両の操舵角の変化あるいはウインカースイッチに
より車線変更を判断する第3の判断手段と、 この第3の判断手段により車線変更が判断された際に、
第2の判断手段により判断された追越車両候補の中で、
上記除去手段により除去されなかった追越車両候補の位
置により警報を発生する警報発生手段と、 を具備したことを特徴とする運転支援システムの後側方
警報装置。
3. A photographing means for photographing an image behind the vehicle, a white line detecting means for detecting a white line from the image photographed by the photographing means, and an overtaking on the basis of the white line detected by the white line detecting means. A first judging means for judging the detection area of the vehicle, and a second judging means for judging an overtaking vehicle candidate based on a movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. Determining means, and removing means for removing overtaking vehicle candidates by a repeating pattern in the overtaking vehicle detection area determined by the first determining means from among the overtaking vehicle candidates determined by the second determining means. And a third judging means for judging the lane change by the change of the steering angle of the vehicle or the turn signal switch, and when the lane change is judged by the third judging means,
Among the overtaking vehicle candidates judged by the second judging means,
A rear side alarm device for a driving support system, comprising: an alarm generating unit for generating an alarm according to the position of an overtaking vehicle candidate that has not been removed by the removing unit.
【請求項4】 車両の後方の映像を撮影する撮影手段
と、 この撮影手段により撮影された映像から白線を検出する
白線検出手段と、 この白線検出手段により検出された白線に基づいて、追
越車両の検出領域を判断する第1の判断手段と、 この第1の判断手段により判断した追越車両の検出領域
におけるフレーム間での移動ベクトルに基づいて、追越
車両候補を判断する第2の判断手段と、 この第2の判断手段により判断された追越車両候補ごと
に、追越車両候補に含まれる各移動ベクトルの検出位置
周囲の小領域におけるエッジの角度のヒストグラムを求
め、各追越車両候補のエッジ角度ヒストグラムの分散量
が所定値よりも少ない追越車両候補を、上記第2の判断
手段により判断した追越車両候補から除去する除去手段
と、 を具備したことを特徴とする追越車両検出装置。
4. A photographing means for photographing an image behind the vehicle, a white line detecting means for detecting a white line from the image photographed by the photographing means, and an overtaking on the basis of the white line detected by the white line detecting means. A first judging means for judging the detection area of the vehicle, and a second judging means for judging an overtaking vehicle candidate based on a movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. For each of the overtaking vehicle candidates determined by the determining means and the second determining means, a histogram of edge angles in a small area around the detection position of each movement vector included in the overtaking vehicle candidates is obtained to obtain each overtaking vehicle. A removal means for removing an overtaking vehicle candidate having a variance amount of the edge angle histogram of the vehicle candidate smaller than a predetermined value from the overtaking vehicle candidate determined by the second determining means. Overtaking vehicle detection apparatus according to claim.
【請求項5】 上記エッジが、輝度変化であることを特
徴とする請求項4に記載の追越車両検出装置。
5. The overtaking vehicle detection device according to claim 4, wherein the edge is a change in brightness.
【請求項6】 車両の後方の映像を撮影する撮影手段
と、 この撮影手段により撮影された映像から白線を検出する
白線検出手段と、 この白線検出手段により検出された白線に基づいて、追
越車両の検出領域を判断する第1の判断手段と、 この第1の判断手段により判断した追越車両の検出領域
におけるフレーム間での移動ベクトルに基づいて、追越
車両候補を判断する第2の判断手段と、 この第2の判断手段により判断された追越車両候補ごと
に、上記白線検出手段により検出された白線の延出方向
と同一方向の移動ベクトル量を算出し、この移動ベクト
ル量が所定値よりも少ない追越車両候補を、上記第2の
判断手段により判断した追越車両候補から除去する除去
手段と、 を具備したことを特徴とする追越車両検出装置。
6. An overtaking device for taking an image of an image behind a vehicle, a white line detecting device for detecting a white line from an image taken by the image taking device, and an overtaking on the basis of the white line detected by the white line detecting device. A first judging means for judging the detection area of the vehicle, and a second judging means for judging an overtaking vehicle candidate based on a movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. The moving vector amount in the same direction as the extending direction of the white line detected by the white line detecting unit is calculated for each of the overtaking vehicle candidates judged by the judging unit and the second judging unit. An overtaking vehicle detection device comprising: a removing unit that removes an overtaking vehicle candidate having a number smaller than a predetermined value from the overtaking vehicle candidates determined by the second determining unit.
【請求項7】 車両の後方の映像を撮影する撮影手段
と、 この撮影手段により撮影された映像から白線を検出する
白線検出手段と、 この白線検出手段により検出された白線に基づいて、追
越車両の検出領域を判断する第1の判断手段と、 この第1の判断手段により判断した追越車両の検出領域
におけるフレーム間での移動ベクトルに基づいて、追越
車両候補を判断する第2の判断手段と、 この第2の判断手段により判断された追越車両候補ごと
に、追越車両候補に含まれる各移動ベクトルの検出位置
周囲の小領域におけるエッジ強度の総和を求め、エッジ
強度の総和が所定値よりも小さい追越車両候補を、上記
第2の判断手段により判断した追越車両候補から除去す
る除去手段と、 を具備したことを特徴とする追越車両検出装置。
7. An image pickup means for picking up an image behind a vehicle, a white line detection means for detecting a white line from an image picked up by the image pickup means, and an overtaking based on the white line detected by the white line detection means. A first judging means for judging the detection area of the vehicle, and a second judging means for judging an overtaking vehicle candidate based on a movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. For each of the overtaking vehicle candidates determined by the determining means and the second determining means, the sum of the edge strengths in a small region around the detection position of each movement vector included in the overtaking vehicle candidates is calculated, and the sum of the edge strengths is calculated. An overtaking vehicle detection device comprising: a removing unit that removes an overtaking vehicle candidate having a smaller than a predetermined value from the overtaking vehicle candidates determined by the second determining unit.
【請求項8】 上記エッジ強度が、輝度変化の大きさで
あることを特徴とする請求項7に記載の追越車両検出装
置。
8. The overtaking vehicle detection device according to claim 7, wherein the edge strength is a magnitude of a luminance change.
【請求項9】 車両の後方の映像を撮影する撮影手段
と、 この撮影手段により撮影された映像から白線を検出する
白線検出手段と、 この白線検出手段により検出された白線に基づいて、追
越車両の検出領域を判断する第1の判断手段と、 この第1の判断手段により判断した追越車両の検出領域
におけるフレーム間での移動ベクトルに基づいて、追越
車両候補を判断する第2の判断手段と、 この第2の判断手段により判断された追越車両候補ごと
に、追越車両候補に含まれる各移動ベクトルの検出位置
周囲の小領域におけるエッジの角度のヒストグラムを求
め、各追越車両候補のエッジ角度ヒストグラムの分散量
が所定値よりも少ない追越車両候補を、上記第2の判断
手段により判断した追越車両候補から除去する第1の除
去手段と、 上記第2の判断手段により判断された追越車両候補ごと
に、上記白線検出手段により検出された白線の延出方向
と同一方向の移動ベクトル量を算出し、この移動ベクト
ル量が所定値よりも少ない追越車両候補を、上記第2の
判断手段により判断した追越車両候補から除去する第2
の除去手段と、 上記第2の判断手段により判断された追越車両候補ごと
に、追越車両候補に含まれる各移動ベクトルの検出位置
周囲の小領域におけるエッジ強度の総和を求め、エッジ
強度の総和が所定値よりも小さい追越車両候補を、上記
第2の判断手段により判断した追越車両候補から除去す
る第3の除去手段と、 を具備したことを特徴とする追越車両検出装置。
9. An overtaking device for taking an image of a rear part of a vehicle, a white line detecting device for detecting a white line from an image taken by the imaging device, and an overtaking on the basis of the white line detected by the white line detecting device. A first judging means for judging the detection area of the vehicle, and a second judging means for judging an overtaking vehicle candidate based on a movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. For each of the overtaking vehicle candidates determined by the determining means and the second determining means, a histogram of edge angles in a small area around the detection position of each movement vector included in the overtaking vehicle candidates is obtained to obtain each overtaking vehicle. First removing means for removing an overtaking vehicle candidate having a variance amount of an edge angle histogram of vehicle candidates smaller than a predetermined value from the overtaking vehicle candidate determined by the second determining means; The moving vector amount in the same direction as the extending direction of the white line detected by the white line detecting means is calculated for each overtaking vehicle candidate determined by the determining means of the overtaking vehicle, and the moving vector amount is less than the predetermined value. Second removal of vehicle candidates from overtaking vehicle candidates determined by the second determination means
For each of the overtaking vehicle candidates determined by the removing means and the second determining means, the sum of the edge intensities in the small area around the detection position of each movement vector included in the overtaking vehicle candidates is calculated to obtain the edge intensities. An overtaking vehicle detection device comprising: a third removing unit that removes an overtaking vehicle candidate having a total sum smaller than a predetermined value from the overtaking vehicle candidates determined by the second determining unit.
【請求項10】 車両の後方の映像を撮影する撮影手段
と、 この撮影手段により撮影された映像から白線を検出する
白線検出手段と、 この白線検出手段により検出された白線に基づいて、追
越車両の検出領域を判断する第1の判断手段と、 この第1の判断手段により判断した追越車両の検出領域
におけるフレーム間での移動ベクトルに基づいて、追越
車両候補を判断する第2の判断手段と、 この第2の判断手段により判断された追越車両候補ごと
に、追越車両候補に含まれる各移動ベクトルの検出位置
周囲の小領域におけるエッジの角度のヒストグラムを求
め、各追越車両候補のエッジ角度ヒストグラムの分散量
が所定値よりも少ない追越車両候補を、上記第2の判断
手段により判断した追越車両候補から除去する第1の除
去手段と、 上記第2の判断手段により判断された追越車両候補ごと
に、上記白線検出手段により検出された白線の延出方向
と同一方向の移動ベクトル量を算出し、この移動ベクト
ル量が所定値よりも少ない追越車両候補を、上記第2の
判断手段により判断した追越車両候補から除去する第2
の除去手段と、 上記第2の判断手段により判断された追越車両候補ごと
に、追越車両候補に含まれる各移動ベクトルの検出位置
周囲の小領域におけるエッジ強度の総和を求め、エッジ
強度の総和が所定値よりも小さい追越車両候補を、上記
第2の判断手段により判断した追越車両候補から除去す
る第3の除去手段と、 上記車両の速度が所定速度以下の際に、上記第1から第
3の除去手段による追越車両候補の削除を禁止する禁止
手段と、 を具備したことを特徴とする追越車両検出装置。
10. An overtaking device for taking an image of an image behind a vehicle, a white line detecting device for detecting a white line from an image taken by the image taking device, and an overtaking on the basis of the white line detected by the white line detecting device. A first judging means for judging the detection area of the vehicle, and a second judging means for judging an overtaking vehicle candidate based on a movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. For each of the overtaking vehicle candidates determined by the determining means and the second determining means, a histogram of edge angles in a small area around the detection position of each movement vector included in the overtaking vehicle candidates is obtained to obtain each overtaking vehicle. First removing means for removing an overtaking vehicle candidate having a variance amount of an edge angle histogram of the vehicle candidate smaller than a predetermined value from the overtaking vehicle candidate determined by the second determining means; The moving vector amount in the same direction as the extending direction of the white line detected by the white line detecting means is calculated for each overtaking vehicle candidate determined by the second determining means, and the moving vector amount is smaller than a predetermined value. Second removal of overtaking vehicle candidates from overtaking vehicle candidates determined by the second determination means
For each of the overtaking vehicle candidates determined by the removing means and the second determining means, the sum of the edge intensities in the small area around the detection position of each movement vector included in the overtaking vehicle candidates is calculated to obtain the edge intensities. Third removing means for removing an overtaking vehicle candidate whose total sum is smaller than a predetermined value from the overtaking vehicle candidates judged by the second judging means; and when the speed of the vehicle is equal to or lower than a predetermined speed, An overtaking vehicle detection device comprising: a prohibiting unit that prohibits deletion of an overtaking vehicle candidate by the first to third removing units.
【請求項11】 車両の後方の映像を撮影する撮影手段
と、 この撮影手段により撮影された映像から白線を検出する
白線検出手段と、 この白線検出手段により検出された白線に基づいて、追
越車両の検出領域を判断する第1の判断手段と、 この第1の判断手段により判断した追越車両の検出領域
におけるフレーム間での移動ベクトルに基づいて、追越
車両候補を判断する第2の判断手段と、 この第2の判断手段により判断された追越車両候補ごと
に、追越車両候補に含まれる各移動ベクトルの検出位置
周囲の小領域におけるエッジの角度のヒストグラムを求
め、各追越車両候補のエッジ角度ヒストグラムの分散量
が所定値よりも少ない追越車両候補を、上記第2の判断
手段により判断した追越車両候補から除去する第1の除
去手段と、 上記第2の判断手段により判断された追越車両候補ごと
に、上記白線検出手段により検出された白線の延出方向
と同一方向の移動ベクトル量を算出し、この移動ベクト
ル量が所定値よりも少ない追越車両候補を、上記第2の
判断手段により判断した追越車両候補から除去する第2
の除去手段と、 上記第2の判断手段により判断された追越車両候補ごと
に、追越車両候補に含まれる各移動ベクトルの検出位置
周囲の小領域におけるエッジ強度の総和を求め、エッジ
強度の総和が所定値よりも小さい追越車両候補を、上記
第2の判断手段により判断した追越車両候補から除去す
る第3の除去手段と、 上記車両が通過中のレーンを構成する上記白線検出手段
により検出された2本の白線の交点の近くから連続して
上記第2の判断手段により追越車両候補と判断されてい
る際、上記第1から第3の除去手段による追越車両候補
の削除を禁止する禁止手段と、 を具備したことを特徴とする追越車両検出装置。
11. An overtaking device based on a white line detected by the white line detecting device, and a white line detecting device for detecting a white line from an image taken by the image taking device. A first judging means for judging the detection area of the vehicle, and a second judging means for judging an overtaking vehicle candidate based on a movement vector between frames in the detection area of the overtaking vehicle judged by the first judging means. For each of the overtaking vehicle candidates determined by the determining means and the second determining means, a histogram of edge angles in a small area around the detection position of each movement vector included in the overtaking vehicle candidates is obtained to obtain each overtaking vehicle. First removing means for removing an overtaking vehicle candidate having a variance amount of an edge angle histogram of the vehicle candidate smaller than a predetermined value from the overtaking vehicle candidate determined by the second determining means; The moving vector amount in the same direction as the extending direction of the white line detected by the white line detecting means is calculated for each overtaking vehicle candidate determined by the second determining means, and the moving vector amount is smaller than a predetermined value. Second removal of overtaking vehicle candidates from overtaking vehicle candidates determined by the second determination means
For each of the overtaking vehicle candidates determined by the removing means and the second determining means, the sum of the edge intensities in the small area around the detection position of each movement vector included in the overtaking vehicle candidates is calculated to obtain the edge intensities. Third removing means for removing an overtaking vehicle candidate having a total sum smaller than a predetermined value from the overtaking vehicle candidates determined by the second determining means, and the white line detecting means for forming a lane in which the vehicle is passing. When the second determining means determines that the vehicle is an overtaking vehicle continuously near the intersection of the two white lines detected by the above, the first to third removing means delete the overtaking vehicle candidates. An overtaking vehicle detection device comprising: a prohibition unit that prohibits
JP2002109312A 2002-04-11 2002-04-11 Passing vehicle detection device, and rear side alarm device for drive supporting system Pending JP2003306102A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002109312A JP2003306102A (en) 2002-04-11 2002-04-11 Passing vehicle detection device, and rear side alarm device for drive supporting system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002109312A JP2003306102A (en) 2002-04-11 2002-04-11 Passing vehicle detection device, and rear side alarm device for drive supporting system

Publications (1)

Publication Number Publication Date
JP2003306102A true JP2003306102A (en) 2003-10-28

Family

ID=29392812

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002109312A Pending JP2003306102A (en) 2002-04-11 2002-04-11 Passing vehicle detection device, and rear side alarm device for drive supporting system

Country Status (1)

Country Link
JP (1) JP2003306102A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007140763A (en) * 2005-11-16 2007-06-07 Nissan Motor Co Ltd Image processor and image processing method
WO2008044592A1 (en) * 2006-10-06 2008-04-17 Aisin Seiki Kabushiki Kaisha Mobile object recognizing device, mobile object recognizing method, and computer program
WO2012034637A1 (en) * 2010-09-15 2012-03-22 Daimler Ag Method and device for detecting roadway markings in an image
KR101262555B1 (en) * 2011-07-05 2013-05-08 현대자동차주식회사 Rear collision warning apparatus for preventing wrong warning and method thereof
WO2013125404A1 (en) * 2012-02-23 2013-08-29 日産自動車株式会社 Three-dimensional object detection device
WO2013125403A1 (en) * 2012-02-23 2013-08-29 日産自動車株式会社 Three-dimensional object detection device
KR20190102785A (en) * 2018-02-27 2019-09-04 현대자동차주식회사 Apparatus and method for deciding driver's driving tendency
JP2023517105A (en) * 2020-03-26 2023-04-21 バイドゥドットコム タイムズ テクノロジー (ベイジン) カンパニー リミテッド Obstacle filtering system based on point cloud features

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007140763A (en) * 2005-11-16 2007-06-07 Nissan Motor Co Ltd Image processor and image processing method
JP4710562B2 (en) * 2005-11-16 2011-06-29 日産自動車株式会社 Image processing apparatus and image processing method
WO2008044592A1 (en) * 2006-10-06 2008-04-17 Aisin Seiki Kabushiki Kaisha Mobile object recognizing device, mobile object recognizing method, and computer program
US8290209B2 (en) 2006-10-06 2012-10-16 Aisin Seiki Kabushiki Kaisha Mobile object recognizing device, mobile object recognizing method, and computer program thereof
WO2012034637A1 (en) * 2010-09-15 2012-03-22 Daimler Ag Method and device for detecting roadway markings in an image
KR101262555B1 (en) * 2011-07-05 2013-05-08 현대자동차주식회사 Rear collision warning apparatus for preventing wrong warning and method thereof
CN104115201A (en) * 2012-02-23 2014-10-22 日产自动车株式会社 Three-dimensional object detection device
WO2013125403A1 (en) * 2012-02-23 2013-08-29 日産自動車株式会社 Three-dimensional object detection device
WO2013125404A1 (en) * 2012-02-23 2013-08-29 日産自動車株式会社 Three-dimensional object detection device
JPWO2013125404A1 (en) * 2012-02-23 2015-07-30 日産自動車株式会社 Three-dimensional object detection device
US9558556B2 (en) 2012-02-23 2017-01-31 Nissan Motor Co., Ltd. Three-dimensional object detection device
US9783127B2 (en) 2012-02-23 2017-10-10 Nissan Motor Co., Ltd. Three-dimensional object detection device
KR20190102785A (en) * 2018-02-27 2019-09-04 현대자동차주식회사 Apparatus and method for deciding driver's driving tendency
KR102452702B1 (en) * 2018-02-27 2022-10-11 현대자동차주식회사 Apparatus and method for deciding driver's driving tendency
JP2023517105A (en) * 2020-03-26 2023-04-21 バイドゥドットコム タイムズ テクノロジー (ベイジン) カンパニー リミテッド Obstacle filtering system based on point cloud features
JP7389267B2 (en) 2020-03-26 2023-11-29 バイドゥドットコム タイムズ テクノロジー (ベイジン) カンパニー リミテッド Obstacle filtration system based on point cloud features

Similar Documents

Publication Publication Date Title
JP3503230B2 (en) Nighttime vehicle recognition device
JP3452268B2 (en) Rear side monitoring method for vehicles
JPH06107096A (en) Forward monitoring method for vehicle
JP2005173882A (en) Rear side image control device and method
JP2006301722A (en) Image processor
JP2005301603A (en) Traveling lane detection device
US20180114078A1 (en) Vehicle detection device, vehicle detection system, and vehicle detection method
JP2005309797A (en) Warning device for pedestrian
JP2009033743A (en) Method for recognition of object
JP3656056B2 (en) Interrupting vehicle detection device and method
JP2994170B2 (en) Vehicle periphery monitoring device
JP2003306102A (en) Passing vehicle detection device, and rear side alarm device for drive supporting system
JP2010262437A (en) Navigation device, and method and program for deciding own vehicle travelling lane
JP6500734B2 (en) Driving support device
JP3868915B2 (en) Forward monitoring apparatus and method
JP3464368B2 (en) Rear side monitoring device for vehicles
JP2007172504A (en) Adhering matter detection device and adhering matter detection method
JP2002298299A (en) Driving support device for vehicle
JPH0973529A (en) Two-wheeled vehicle monitor device
JP2004252550A (en) Driving support device
JP3729005B2 (en) Vehicle rear monitoring device
JP2000011298A (en) Read and side monitoring device for vehicle
JP2003044863A (en) Device for recognizing partition line
JP3398934B2 (en) Vehicle monitoring method
JP2005309660A (en) Device supporting vehicle in turning right or left