JP2008040819A - Obstacle recognition device - Google Patents

Obstacle recognition device Download PDF

Info

Publication number
JP2008040819A
JP2008040819A JP2006214747A JP2006214747A JP2008040819A JP 2008040819 A JP2008040819 A JP 2008040819A JP 2006214747 A JP2006214747 A JP 2006214747A JP 2006214747 A JP2006214747 A JP 2006214747A JP 2008040819 A JP2008040819 A JP 2008040819A
Authority
JP
Japan
Prior art keywords
obstacle
vehicle
possibility
host vehicle
threshold value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006214747A
Other languages
Japanese (ja)
Other versions
JP4872517B2 (en
Inventor
Setsuo Tokoro
節夫 所
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2006214747A priority Critical patent/JP4872517B2/en
Publication of JP2008040819A publication Critical patent/JP2008040819A/en
Application granted granted Critical
Publication of JP4872517B2 publication Critical patent/JP4872517B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an obstacle recognition device capable of reducing false detection further and recognizing the obstacle. <P>SOLUTION: A drive assist system 1 consists of an ECU10, and the ECU10 is equipped with a navigation system 12 and an object detection part 100 to which a forward millimeter-wave radar 30, and the like, is connected. A travelling lane recognition part 110 recognizes the travelling lane where its own vehicle is traveling from a measurement result of the navigation system 12 and decides a possibility in which other vehicles exist in either side of the own vehicle, when the traveling lane recognition part 110 decides that there are no possibilities in which other vehicles exist at the either side of the own vehicle, a radar wave detection part 102 extracts the object as the obstacle when reflectance of the forward millimeter-wave radar 30 and a short range millimeter-wave radar 32 are not less than a second threshold value which is higher than a usual first threshold value with respect to the side concerned. Consequently, the possibility of the falsely detecting the roadside objects, such as a guardrail and a side wall as the vehicles, is reduced, the false detection is further lessened and the obstacle can be recognized. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は物体検出装置に関し、特に、道路上における追越し車両や割込み車両などの障害物の検出を行う障害物認識装置に関するものである。   The present invention relates to an object detection device, and more particularly to an obstacle recognition device that detects an obstacle such as an overtaking vehicle or an interrupting vehicle on a road.

車両の走行支援装置の1つとして、車両側方に存在する追越し車両や割込み車両を検出し、ドライバーに警報を与える走行支援装置が実用化されている。特許文献1には、車両側方に物体との距離を検出する測距センサを配置し、検出された物体との距離が所定値よりも小さい場合に警報を発する装置が記載されている。この特許文献1に記載の装置では、測距センサによる検出結果に基づき、自車の車線変更に支障のない物体の存在に対しては警報の発生を抑えることにより、車線変更に関係のないガードレールや側壁等の路側物を誤検出しないようにしている。
特開2005−145196号公報
As one of the vehicle driving support devices, a driving support device that detects an overtaking vehicle or an interrupting vehicle existing on the side of the vehicle and gives a warning to the driver has been put into practical use. Japanese Patent Application Laid-Open No. 2004-133867 describes a device that arranges a distance measuring sensor that detects a distance to an object on the side of the vehicle and issues an alarm when the distance to the detected object is smaller than a predetermined value. In the device described in Patent Document 1, a guardrail that is not related to lane change is suppressed by suppressing the occurrence of an alarm for the presence of an object that does not interfere with the lane change of the host vehicle based on the detection result by the distance measuring sensor. And roadside objects such as side walls are not erroneously detected.
JP 2005-145196 A

しかしながら、上記の技術では、測距センサよる検出結果のみに基づいて障害物を検出しているため、検出した物体が車両であるか路側物であるかの判断が不十分な場合があり、車両ではないガードレールや側壁等の路側物を車両として誤検出する場合がある。   However, in the above technique, since the obstacle is detected based only on the detection result by the distance measuring sensor, it may be insufficient to determine whether the detected object is a vehicle or a roadside object. There are cases where roadside objects such as guardrails and side walls are not erroneously detected as vehicles.

本発明は、かかる事情に鑑みてなされたものであり、その目的は、より誤検出を少なくして障害物を認識できる障害物認識装置を提供することにある。   The present invention has been made in view of such circumstances, and an object of the present invention is to provide an obstacle recognition apparatus that can recognize an obstacle with fewer erroneous detections.

本発明は、自車の位置を測定可能なナビゲーション装置と、ナビゲーション装置の測定結果から自車が走行している走行レーンを認識して、自車の左側及び右側のいずれかの側に他車が存在する可能性を判断する走行レーン認識手段と、自車の外部に存在する物体を検出可能な検出手段と、検出手段によって検出された物体が障害となり得る度合に応じて、物体を障害物として抽出する障害物抽出手段と、を備え、障害物抽出手段は、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、検出手段によって検出された物体が障害となり得る度合が第1の度合以上のときに、物体を障害物として抽出し、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、検出手段によって検出された物体が障害となり得る度合が第1の度合より高い第2の度合以上のときに、物体を障害物として抽出する障害物認識装置である。   The present invention relates to a navigation device capable of measuring the position of the host vehicle, a travel lane in which the host vehicle is traveling from the measurement result of the navigation device, and another vehicle on either the left side or the right side of the host vehicle. A vehicle lane recognizing means for judging the possibility of existence of an object, a detecting means capable of detecting an object existing outside the host vehicle, and an object detected by the detecting means according to the degree to which the object can become an obstacle. The obstacle extraction means, and the obstacle extraction means, when the traveling lane recognition means determines that there is a possibility that another vehicle exists on either the left side or the right side of the own vehicle, When the object detected by the detection means has a degree of obstacle that is greater than or equal to the first degree, the object is extracted as an obstacle, and the travel lane recognition means is on either the left or right side of the vehicle Other cars If it is determined that there is no possibility that the object is present, the object is extracted as an obstacle when the degree of the object detected by the detection means is higher than the first degree and higher than the first degree. It is an obstacle recognition device.

この構成によれば、走行レーン認識手段が、ナビゲーション装置の測定結果から自車が走行している走行レーンを認識して、自車の左側及び右側のいずれかの側に他車が存在する可能性を判断するため、例えば一番右側の車線を自車が走行している場合、自車の右側に他車が存在する可能性は無いと判断することができる。   According to this configuration, the travel lane recognition means recognizes the travel lane in which the host vehicle is traveling from the measurement result of the navigation device, and there may be another vehicle on either the left side or the right side of the host vehicle. For example, when the host vehicle is traveling in the rightmost lane, it can be determined that there is no possibility that another vehicle exists on the right side of the host vehicle.

また、障害物抽出手段は、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、検出手段によって検出された物体が障害となり得る度合が第1の度合以上のときに、物体を障害物として抽出し、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、検出手段によって検出された物体が障害となり得る度合が第1の度合より高い第2の度合以上のときに、物体を障害物として抽出する。そのため、例えば一番右側の車線を自車が走行している場合、右側については物体を障害物として抽出する閾値を高くして、ガードレールや側壁等の路側物を車両として誤検出する可能性を低減し、より誤検出を少なくして障害物を認識することができる。   In addition, when the obstacle lane recognition unit determines that there is a possibility that another vehicle exists on either the left side or the right side of the own vehicle, the obstacle extraction unit is detected by the detection unit. When the degree that an object can become an obstacle is greater than or equal to the first degree, the object is extracted as an obstacle, and there is no possibility that the traveling lane recognition means has another vehicle on either the left side or the right side of the own vehicle. When the determination is made, the object is extracted as an obstacle when the degree to which the object detected by the detection means can be an obstacle is equal to or higher than the second degree higher than the first degree. For this reason, for example, when the vehicle is traveling in the rightmost lane, the threshold for extracting an object as an obstacle is increased on the right side, and there is a possibility that roadside objects such as guardrails and side walls are erroneously detected as vehicles. It is possible to reduce the number of false detections and recognize obstacles.

この場合、検出手段は、自車の外部に存在する物体に電磁波を放射し、電磁波の反射波を測定することにより物体を検出可能なレーダであり、障害物抽出手段は、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、レーダが測定した反射波の反射率が第1閾値以上のときに、物体を障害物として抽出し、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、レーダが測定した反射波の反射率が第1閾値より高い第2閾値以上のときに、物体を障害物として抽出するものとできる。   In this case, the detection means is a radar that can detect an object by radiating an electromagnetic wave to an object existing outside the host vehicle and measuring the reflected wave of the electromagnetic wave, and the obstacle extraction means is a lane recognition means. When it is determined that there is a possibility that another vehicle exists on either the left side or the right side of the own vehicle, the object is reflected when the reflectance of the reflected wave measured by the radar is equal to or higher than the first threshold value on the side. Is detected as an obstacle, and the lane recognition means determines that there is no possibility of another vehicle on either the left or right side of the host vehicle. When the reflectance is equal to or higher than the second threshold value higher than the first threshold value, the object can be extracted as an obstacle.

この構成によれば、検出手段はレーダであるため天候等の影響を受けにくく、障害物抽出手段はレーダが測定した反射波の閾値に基づいて障害物を抽出するため、比較的に簡易な装置構成とすることができる。   According to this configuration, since the detection means is a radar, the detection means is not easily affected by the weather, and the obstacle extraction means extracts the obstacle based on the threshold value of the reflected wave measured by the radar. It can be configured.

また、検出手段は、自車の外部に存在する物体を撮像することにより物体を検出可能な単眼画像センサであり、障害物抽出手段は、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、単眼画像センサの撮像画像をエッジ処理して得られたエッジ点数が第1閾値以上のときに、物体を障害物として抽出し、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、単眼画像センサの撮像画像をエッジ処理して得られたエッジ点数が第1閾値より高い第2閾値以上のときに、物体を障害物として抽出するものとできる。   The detecting means is a monocular image sensor capable of detecting an object by imaging an object existing outside the own vehicle, and the obstacle extracting means is configured such that the travel lane recognizing means is either the left side or the right side of the own vehicle. If it is determined that there is a possibility that another vehicle exists on the side of the object, the object is obstructed when the number of edge points obtained by performing edge processing on the image picked up by the monocular image sensor is equal to or more than the first threshold. When it is determined that there is no possibility that another vehicle exists on either the left side or the right side of the host vehicle, the captured image of the monocular image sensor is edge-processed for that side. When the number of edge points obtained in this way is equal to or higher than the second threshold value higher than the first threshold value, the object can be extracted as an obstacle.

この構成によれば、検出手段は単眼画像センサであり、障害物抽出手段は単眼画像センサの撮像画像をエッジ処理して得られたエッジ点数の閾値に基づいて障害物を抽出するため、画像を基準にして障害物を検出でき、比較的に簡易な装置構成とすることができる。   According to this configuration, the detection unit is a monocular image sensor, and the obstacle extraction unit extracts the obstacle based on the threshold of the number of edge points obtained by performing edge processing on the captured image of the monocular image sensor. Obstacles can be detected based on the reference, and a relatively simple device configuration can be obtained.

また、検出手段は、自車の外部に存在する物体を撮像することにより物体を検出可能なステレオ画像センサであり、障害物抽出手段は、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、ステレオ画像センサの撮像画像をエッジ処理して得られたエッジ点数が第1閾値以上のときに、物体を障害物として抽出し、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、ステレオ画像センサの撮像画像をエッジ処理して得られたエッジ点数が第1閾値より高い第2閾値以上のときに、物体を障害物として抽出するものとできる。   The detecting means is a stereo image sensor capable of detecting an object by imaging an object existing outside the host vehicle, and the obstacle extracting means is configured such that the traveling lane recognition means is either the left side or the right side of the host vehicle. If it is determined that there is a possibility that another vehicle exists on the side of the object, the object is obstructed when the number of edge points obtained by performing edge processing on the image captured by the stereo image sensor is equal to or greater than the first threshold value. When it is determined that there is no possibility that another vehicle exists on either the left side or the right side of the host vehicle, the captured image of the stereo image sensor is edge-processed for that side. When the number of edge points obtained in this way is equal to or higher than the second threshold value higher than the first threshold value, the object can be extracted as an obstacle.

この構成によれば、検出手段はステレオ画像センサであり、障害物抽出手段はステレオ画像センサの撮像画像をエッジ処理して得られたエッジ点数の閾値に基づいて障害物を抽出するため、物体の距離や速度を検出しやすく、検出精度を向上させることができる。   According to this configuration, the detection means is a stereo image sensor, and the obstacle extraction means extracts the obstacle based on the threshold of the number of edge points obtained by performing edge processing on the captured image of the stereo image sensor. It is easy to detect the distance and speed, and the detection accuracy can be improved.

あるいは、検出手段は、自車の外部に存在する物体に電磁波を放射して電磁波の反射波を測定することにより物体を検出可能なレーダと、自車の外部に存在する物体を撮像することにより物体を検出可能な画像センサとを含み、障害物抽出手段は、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、レーダと画像センサとの検出結果の一致度が第1閾値以上のときに、物体を障害物として抽出し、走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、レーダと画像センサとの検出結果の一致度が第1閾値より高い第2閾値以上のときに、物体を障害物として抽出するものとできる。   Alternatively, the detecting means radiates an electromagnetic wave to an object existing outside the host vehicle and measures the reflected wave of the electromagnetic wave, and images the object existing outside the host vehicle by imaging the radar. The obstacle extraction means, when the lane recognition means determines that there is a possibility that another vehicle exists on either the left side or the right side of the own vehicle, When the coincidence between the detection results of the radar and the image sensor is greater than or equal to the first threshold, the object is extracted as an obstacle, and the traveling lane recognition means is on the left side or the right side of the own vehicle. When it is determined that there is no possibility that the object exists, the object is extracted as an obstacle when the degree of coincidence between the detection results of the radar and the image sensor is equal to or higher than the second threshold higher than the first threshold. And can.

この構成によれば、検出原理を異にするレーダと画像センサとの両方によって障害物を抽出するため、障害物の検出精度が一層向上する。   According to this configuration, since the obstacle is extracted by both the radar and the image sensor having different detection principles, the obstacle detection accuracy is further improved.

本発明の障害物認識装置によれば、より誤検出を少なくして障害物を認識できる。   According to the obstacle recognition apparatus of the present invention, it is possible to recognize an obstacle with fewer erroneous detections.

以下、本発明の実施の形態に係る障害物認識装置について添付図面を参照して説明する。   Hereinafter, an obstacle recognition apparatus according to an embodiment of the present invention will be described with reference to the accompanying drawings.

図1は、第1実施形態に係る走行支援システムを示すブロック図であり、本発明の障害物認識装置を走行支援システムに適用した場合における構成例を示す。   FIG. 1 is a block diagram showing the driving support system according to the first embodiment, and shows a configuration example when the obstacle recognition device of the present invention is applied to the driving support system.

走行支援システム1は、主としてECU10からなる。ECU10は、ナビゲーションシステム(ナビゲーション装置)12、前方ミリ波レーダ(検出手段)30及び近距離ミリ波レーダ(検出手段)32が接続された物体検出部100と、車載システム14が接続されたシステム制御部20とを備える。   The driving support system 1 mainly includes an ECU 10. The ECU 10 is a system control in which an in-vehicle system 14 is connected to an object detection unit 100 to which a navigation system (navigation device) 12, a forward millimeter wave radar (detection means) 30, and a short-range millimeter wave radar (detection means) 32 are connected. Part 20.

ナビゲーションシステム12は、GPS(Global Positioning System)等によって、自車の位置を測定するためのものであり、少なくとも現在における自車の走行する走行レーン(車線)を認識することが可能な精度で自車の位置を測定することができる。ナビゲーションシステム12の測定結果はECU10の物体検出部100に出力される。   The navigation system 12 is for measuring the position of the host vehicle by GPS (Global Positioning System) or the like, and at least with an accuracy capable of recognizing at least the current travel lane (lane) on which the host vehicle is traveling. The position of the car can be measured. The measurement result of the navigation system 12 is output to the object detection unit 100 of the ECU 10.

前方ミリ波レーダ30は、ミリ波帯の電波を水平方向にスキャンしながら車両の前方へ照射し、車両などの物体表面で反射された電波を受信し、反射率(受信波の電波強度と照射波の電波強度との比率)、受信信号の周波数変化から先行車両の有無、先行車と自車両との距離、相対速度、自車両からの横変位(横位置)などのパラメータを求め、検出結果としてECU10に出力する。   The forward millimeter wave radar 30 irradiates the front of the vehicle while scanning the millimeter wave band radio wave in the horizontal direction, receives the radio wave reflected on the object surface such as the vehicle, and reflects the reflectance (the radio wave intensity and the irradiation of the received wave). The ratio of the signal strength to the wave intensity), the presence / absence of the preceding vehicle, the distance between the preceding vehicle and the host vehicle, the relative speed, the lateral displacement (lateral position) from the host vehicle, etc. To the ECU 10.

近距離ミリ波レーダ32は、ミリ波帯の電波を水平方向にスキャンしながら車両の前方、側方及び後方に照射し、車両などの物体表面で反射された電波を受信し、反射率、受信信号の周波数変化から、並走車両、追越し車両及び割込み車両の有無、当該車両と自車両との距離、相対速度、自車両からの横変位(横位置)などのパラメータを求め、検出結果としてECU10に出力する。   The short-range millimeter-wave radar 32 irradiates the front, side, and rear of the vehicle while scanning the millimeter-wave radio waves in the horizontal direction, receives the radio waves reflected by the object surface such as the vehicle, and reflects and receives the reflectance. Parameters such as the presence / absence of a parallel running vehicle, an overtaking vehicle and an interrupting vehicle, the distance between the vehicle and the own vehicle, the relative speed, the lateral displacement (lateral position) from the own vehicle are obtained from the change in the frequency of the signal, and the ECU 10 is used as the detection result. Output to.

物体検出部100は、走行レーン認識部(走行レーン認識手段)110とレーダ波検出部(障害物抽出手段)102とを含む。   The object detection unit 100 includes a travel lane recognition unit (travel lane recognition unit) 110 and a radar wave detection unit (obstacle extraction unit) 102.

走行レーン認識部110は、ナビゲーションシステム12からの測定結果に基づき、自車が現在走行している走行レーンが、左車線であるか、右車線であるか等を認識する。また、走行レーン認識部110は、自車の左側及び右側のいずれかの側に他車が存在する可能性の有無を判断する。当該判断結果は、レーダ波検出部102に出力される。   Based on the measurement result from the navigation system 12, the travel lane recognition unit 110 recognizes whether the travel lane in which the vehicle is currently traveling is the left lane or the right lane. In addition, the travel lane recognition unit 110 determines whether there is a possibility that another vehicle exists on either the left side or the right side of the host vehicle. The determination result is output to the radar wave detection unit 102.

レーダ波検出部102は、前方ミリ波レーダ30及び近距離ミリ波レーダ32の検出結果から障害物を抽出する。レーダ波検出部102は、走行レーン認識部110が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断した場合は、当該側については、前方ミリ波レーダ30及び近距離ミリ波レーダ32の反射波の反射率が第1閾値以上である場合に、当該反射波に係る物体を障害物であるとして抽出する。一方、レーダ波検出部102は、走行レーン認識部110が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断した場合は、当該側については、前方ミリ波レーダ30及び近距離ミリ波レーダ32の反射波の反射率が第1閾値より高い第2閾値以上である場合に、当該反射波に係る物体を障害物であるとして抽出する。抽出した障害物に関する情報は、システム制御部30に出力される。   The radar wave detection unit 102 extracts an obstacle from the detection results of the front millimeter wave radar 30 and the short-range millimeter wave radar 32. When the traveling wave recognition unit 110 determines that there is a possibility that another vehicle exists on either the left side or the right side of the own vehicle, the radar wave detection unit 102 determines that the front millimeter wave radar 30 When the reflectance of the reflected wave of the short-range millimeter wave radar 32 is equal to or higher than the first threshold, the object related to the reflected wave is extracted as an obstacle. On the other hand, when the traveling lane recognition unit 110 determines that there is no possibility that another vehicle exists on either the left side or the right side of the host vehicle, the radar wave detection unit 102 When the reflectance of the reflected wave of the radar 30 and the short-range millimeter wave radar 32 is equal to or higher than the second threshold value that is higher than the first threshold value, the object related to the reflected wave is extracted as an obstacle. Information regarding the extracted obstacle is output to the system control unit 30.

システム制御部30は、物体検出部100からの障害物に関する情報に応じて車載システム14に制御量やフラグを出力するためのものである。システム制御部30は、運転負荷軽減システム部22と安全システム部24とを含む。運転負荷軽減システム部22は、ACC、LKA、IPA等のドライバーの運転負荷を軽減するためのシステムを制御する。安全システム部24は、PCS/FCAAS、PB、PSB、PBA、サスペンション制御、警報、操舵回避支援、ヘッドレスト制御、シート制御、アクティブフード、アクティブバンパー等の他、ナビゲーションシステム用の強調画像等、ドライバーの安全を確保するためのシステムを制御する。   The system control unit 30 is for outputting a control amount and a flag to the in-vehicle system 14 in accordance with the information regarding the obstacle from the object detection unit 100. The system control unit 30 includes a driving load reduction system unit 22 and a safety system unit 24. The driving load reduction system unit 22 controls a system for reducing the driving load of a driver such as ACC, LKA, and IPA. The safety system 24 includes PCS / FCAAS, PB, PSB, PBA, suspension control, warning, steering avoidance support, headrest control, seat control, active hood, active bumper, etc. Control the system to ensure safety.

車載システム14は、システム制御部30からの制御量やフラグに基づいて、所定の操舵、加減速、警報の報知等の動作を行う。   The in-vehicle system 14 performs operations such as predetermined steering, acceleration / deceleration, alarm notification, and the like based on the control amount and flag from the system control unit 30.

その他、ECU10の物体検出部100には、ソナー50、車両運動状態センサ60、顔向きセンサ70が接続されており、これらからの情報は障害物の認識に利用される。車両運動状態センサ60の出力情報は自車運動状態推定部62で処理された後に物体検出部100に送られ、顔向きセンサ70の出力情報はドライバー状態推定部72で処理された後に物体検出部100に送られる。自車運動状態推定部62及びドライバー状態推定部72による処理情報は、直接にシステム制御部20に出力され、システムの制御に利用される。また、物体検出部100に接続された前方ミリ波レーダ30、近距離ミリ波レーダ32等のセンサ類は相互に接続されており、各々のセンサの動作を制御する。   In addition, a sonar 50, a vehicle motion state sensor 60, and a face direction sensor 70 are connected to the object detection unit 100 of the ECU 10, and information from these is used for recognition of an obstacle. The output information of the vehicle motion state sensor 60 is processed by the own vehicle motion state estimation unit 62 and then sent to the object detection unit 100. The output information of the face direction sensor 70 is processed by the driver state estimation unit 72 and then the object detection unit. 100. The processing information from the vehicle motion state estimation unit 62 and the driver state estimation unit 72 is directly output to the system control unit 20 and used for system control. Sensors such as the forward millimeter wave radar 30 and the short-range millimeter wave radar 32 connected to the object detection unit 100 are connected to each other, and control the operation of each sensor.

次に、図2を参照して走行支援システム1の動作について説明する。図2は、第1実施形態に係る走行支援システムにおける処理手順を示すフローチャートである。以下の説明では自車の右側に存在する障害物を検出する場合を例にとり説明する。   Next, the operation of the driving support system 1 will be described with reference to FIG. FIG. 2 is a flowchart showing a processing procedure in the driving support system according to the first embodiment. In the following description, a case where an obstacle present on the right side of the own vehicle is detected will be described as an example.

まず、前方ミリ波レーダ30及び近距離ミリ波レーダ32によって、自車の右側方における物体の反射波を検出する(S101)。次に、走行レーン認識部110は、ナビゲーションシステム12からの測定結果に基づき、現在の自車の走行レーンの位置に関する情報を取得し、自車の右側に追越し車両及び割込み車両が存在する可能性の有無を判断する(S102)。   First, the reflected wave of the object in the right side of the own vehicle is detected by the front millimeter wave radar 30 and the short-range millimeter wave radar 32 (S101). Next, the traveling lane recognition unit 110 acquires information on the current traveling lane position of the host vehicle based on the measurement result from the navigation system 12, and there is a possibility that an overtaking vehicle and an interrupting vehicle exist on the right side of the own vehicle. Whether or not there is is determined (S102).

図3(a)に示すように、例えば2車線ある道路の左車線Lを自車200が現在走行中であるときは、右車線Rを他車300が走行する可能性が有るため、当該右側には他車300が存在する可能性が有ると判断する。一方、図3(b)に示すように、2車線ある道路の右車線Rを自車200が現在走行中であるときは、自車200の右側には車線はないため、当該右側には他車が存在する可能性は無いと判断する。   As shown in FIG. 3A, for example, when the host vehicle 200 is currently traveling in the left lane L of a road with two lanes, the other vehicle 300 may travel in the right lane R. It is determined that there is a possibility that another vehicle 300 exists. On the other hand, as shown in FIG. 3B, when the host vehicle 200 is currently traveling on the right lane R of a road with two lanes, there is no lane on the right side of the host vehicle 200. Judge that there is no possibility of a car.

図2に戻り、走行レーン認識部110が自車右側には追越し車両及び割込み車両が存在する可能性が無いと判断した場合は、レーダ波検出部102は、反射波の反射率の閾値を第1閾値より大きい第2閾値に設定する(S103,S104)。一方、走行レーン認識部110が自車右側には追越し車両及び割込み車両が存在する可能性が有ると判断した場合は、レーダ波検出部102は、反射波の反射率の閾値を低い方の第1閾値のままに設定する(S103)。   Returning to FIG. 2, when the traveling lane recognition unit 110 determines that there is no possibility that an overtaking vehicle and an interruption vehicle exist on the right side of the own vehicle, the radar wave detection unit 102 sets the reflectance threshold of the reflected wave to the first value. A second threshold value greater than one threshold value is set (S103, S104). On the other hand, when the traveling lane recognition unit 110 determines that there is a possibility that an overtaking vehicle and an interruption vehicle exist on the right side of the host vehicle, the radar wave detection unit 102 sets the lower threshold value of the reflectance of the reflected wave. One threshold value is set (S103).

最後に、レーダ波検出部102は、反射波の反射率が設定した閾値以上の場合に、当該反射波に係る物体を障害物として抽出する(S104)   Finally, when the reflectance of the reflected wave is equal to or greater than the set threshold, the radar wave detection unit 102 extracts an object related to the reflected wave as an obstacle (S104).

本実施形態によれば、走行レーン認識部110が、ナビゲーションシステム12の測定結果から自車200が走行している走行レーンを認識して、自車の左側及び右側のいずれかの側に他車が存在する可能性を判断するため、例えば図3(b)に示すように2車線道路の右車線Rを自車が走行している場合、自車200の右側に他車300が存在する可能性は無いと判断することができる。   According to the present embodiment, the travel lane recognition unit 110 recognizes the travel lane in which the host vehicle 200 is traveling from the measurement result of the navigation system 12, and the other vehicle is placed on either the left side or the right side of the host vehicle. For example, when the host vehicle is traveling on the right lane R of a two-lane road as shown in FIG. 3B, the other vehicle 300 may be present on the right side of the host vehicle 200. It can be determined that there is no sex.

また、本実施形態によれば、レーダ波検出部102は、走行レーン認識部110が自車200の左側及び右側のいずれかの側に他車200が存在する可能性が有ると判断したときは、当該側について、前方ミリ波レーダ30及び近距離ミリ波レーダ32の反射波の反射率が第1閾値以上のときに物体を障害物として抽出し、走行レーン認識部110が自車200の左側及び右側のいずれかの側に他車300が存在する可能性が無いと判断したときは、当該側について、前方ミリ波レーダ30及び近距離ミリ波レーダ32の反射波の反射率が第1閾値より高い第2閾値以上のときに物体を障害物として抽出する。そのため、図3(b)に示すように2車線道路の右車線Rを自車200が走行している場合、右側については物体を障害物として抽出する閾値を高くして、ガードレールや側壁等の路側物を車両として誤検出する可能性を低減し、より誤検出を少なくして障害物を認識することができる。   Further, according to the present embodiment, when the radar wave detection unit 102 determines that the other vehicle 200 may exist on either the left side or the right side of the own vehicle 200 when the traveling lane recognition unit 110 determines that the other vehicle 200 exists. The object is extracted as an obstacle when the reflectance of the reflected waves of the front millimeter wave radar 30 and the short-range millimeter wave radar 32 is equal to or higher than the first threshold, and the traveling lane recognition unit 110 is on the left side of the own vehicle 200. When it is determined that there is no possibility that the other vehicle 300 exists on either side of the right side, the reflectance of the reflected wave of the front millimeter wave radar 30 and the short-range millimeter wave radar 32 is the first threshold value on the side. An object is extracted as an obstacle when it is equal to or higher than a higher second threshold. Therefore, as shown in FIG. 3B, when the host vehicle 200 is traveling on the right lane R of a two-lane road, the threshold value for extracting an object as an obstacle is increased on the right side, such as a guardrail or a side wall. The possibility of erroneously detecting a roadside object as a vehicle can be reduced, and an obstacle can be recognized with fewer erroneous detections.

さらに、本実施形態によれば、検出手段は前方ミリ波レーダ30及び近距離ミリ波レーダ32であり、レーダ波検出部102は前方ミリ波レーダ30及び近距離ミリ波レーダ32が測定した反射波の閾値を変更するため、天候等の影響を受けにくく、比較的に簡易な装置構成とすることができる。   Furthermore, according to the present embodiment, the detection means are the front millimeter wave radar 30 and the short-range millimeter wave radar 32, and the radar wave detection unit 102 is the reflected wave measured by the front millimeter wave radar 30 and the short-range millimeter wave radar 32. Since the threshold value is changed, it is difficult to be affected by the weather and the like, and a relatively simple device configuration can be obtained.

以下、本発明の第2実施形態について説明する。図4は、第2実施形態に係る走行支援システムを示すブロック図である。図4に示すように、本実施形態においては、検出手段として、前方ミリ波レーダ30及び近距離ミリ波レーダ32の替わりに、単眼画像センサである前方画像単眼カメラ40及び後方/側方/周辺画像単眼カメラ42を備える。また、本実施形態においては、障害物抽出手段として、レーダ波検出部102の替わりにエッジ処理部104を備える。   Hereinafter, a second embodiment of the present invention will be described. FIG. 4 is a block diagram showing a driving support system according to the second embodiment. As shown in FIG. 4, in this embodiment, instead of the front millimeter wave radar 30 and the short-range millimeter wave radar 32, the front image monocular camera 40 that is a monocular image sensor and the rear / side / periphery are used as detection means. An image monocular camera 42 is provided. In this embodiment, an edge processing unit 104 is provided instead of the radar wave detection unit 102 as an obstacle extraction unit.

前方画像単眼カメラ40は、車両前方の画像を取得するCCDカメラである。また、後方/側方/周辺画像単眼カメラ42は車両の後方、側方及び周辺の画像を取得するCCDカメラであり、状況に応じて適宜魚眼レンズ等の広角レンズが装着される。   The front image monocular camera 40 is a CCD camera that acquires an image in front of the vehicle. The rear / side / peripheral image monocular camera 42 is a CCD camera that acquires images of the rear, side, and periphery of the vehicle, and a wide-angle lens such as a fish-eye lens is appropriately mounted according to the situation.

エッジ処理部104は、前方画像単眼カメラ40及び後方/側方/周辺画像単眼カメラ42から取得した画像をエッジ処理し、エッジ点の形状や、エッジ点の速度ベクトル、オプティカルフロー等から物体を認識する。また、エッジ処理部104は、走行レーン認識部110が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断した場合は、当該側については、前方画像単眼カメラ40及び後方/側方/周辺画像単眼カメラ42の画像中における物体のエッジ点数が第1閾値以上である場合に、当該物体を障害物であるとして抽出する。一方、エッジ処理部104は、走行レーン認識部110が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断した場合は、当該側については、前方画像単眼カメラ40及び後方/側方/周辺画像単眼カメラ42の画像中における物体のエッジ点数が第1閾値より高い第2閾値以上である場合に、当該物体を障害物であるとして抽出する。   The edge processing unit 104 performs edge processing on the images acquired from the front image monocular camera 40 and the rear / side / peripheral image monocular camera 42 and recognizes an object from the shape of the edge point, the velocity vector of the edge point, the optical flow, and the like. To do. In addition, when the traveling lane recognition unit 110 determines that there is a possibility that another vehicle exists on either the left side or the right side of the own vehicle, the edge processing unit 104 determines that the front image monocular camera for the side. 40 and the rear / side / peripheral image When the number of edge points of an object in the image of the monocular camera 42 is equal to or greater than the first threshold, the object is extracted as an obstacle. On the other hand, when the driving lane recognition unit 110 determines that there is no possibility that another vehicle exists on either the left side or the right side of the own vehicle, the edge processing unit 104 uses the front image monocular camera for that side. 40 and the rear / side / peripheral image When the number of edge points of an object in the image of the monocular camera 42 is equal to or greater than a second threshold value that is higher than the first threshold value, the object is extracted as an obstacle.

図5は、第2実施形態に係る走行支援システムにおける処理手順を示すフローチャートである。以下の説明では、上記第1実施形態と同様に、自車の右側に存在する障害物を検出する場合を例にとり説明する。   FIG. 5 is a flowchart showing a processing procedure in the driving support system according to the second embodiment. In the following description, as in the first embodiment, a case where an obstacle present on the right side of the own vehicle is detected will be described as an example.

まず、前方画像単眼カメラ40及び後方/側方/周辺画像単眼カメラ42によって、自車の右側方に置ける物体の画像を取得し、エッジ処理部104は当該画像をエッジ処理しエッジ画とする(S201)。次に、上記第1実施形態と同様に、走行レーン認識部110は、ナビゲーションシステム12からの測定結果に基づき、現在の自車の走行レーンの位置に関する情報を取得し、自車の右側に追越し車両及び割込み車両が存在する可能性の有無を判断する(S202)。   First, the front image monocular camera 40 and the rear / side / peripheral image monocular camera 42 acquire an image of an object that can be placed on the right side of the vehicle, and the edge processing unit 104 performs edge processing on the image to obtain an edge image ( S201). Next, as in the first embodiment, the traveling lane recognition unit 110 acquires information on the current traveling lane position of the own vehicle based on the measurement result from the navigation system 12 and passes the vehicle to the right side of the own vehicle. It is determined whether or not there is a possibility that a vehicle and an interrupted vehicle exist (S202).

走行レーン認識部110が自車右側には追越し車両及び割込み車両が存在する可能性が無いと判断した場合は、エッジ処理部104は、エッジ点数の閾値を第1閾値より大きい第2閾値に設定する(S203,S204)。一方、走行レーン認識部110が自車右側には追越し車両及び割込み車両が存在する可能性が有ると判断した場合は、エッジ処理部104は、エッジ点数の閾値を低い方の第1閾値のままに設定する(S203)。   If the traveling lane recognition unit 110 determines that there is no possibility that an overtaking vehicle or an interrupting vehicle exists on the right side of the host vehicle, the edge processing unit 104 sets the threshold value for the number of edge points to a second threshold value greater than the first threshold value. (S203, S204). On the other hand, when the travel lane recognition unit 110 determines that there is a possibility that an overtaking vehicle and an interruption vehicle exist on the right side of the host vehicle, the edge processing unit 104 keeps the threshold value of the number of edge points as the lower first threshold value. (S203).

最後に、エッジ処理部104は、エッジ点数が設定した閾値以上の場合に、当該画像に係る物体を障害物として抽出する(S204)   Finally, the edge processing unit 104 extracts an object related to the image as an obstacle when the number of edge points is equal to or greater than a set threshold (S204).

本実施形態においては、検出手段として単眼画像センサを用いるため、画像を基準にして障害物を検出でき、装置の構造を比較的に簡便にすることができるという利点がある。   In this embodiment, since a monocular image sensor is used as the detection means, there is an advantage that an obstacle can be detected based on an image and the structure of the apparatus can be made relatively simple.

以下、本発明の第3実施形態について説明する。図6は、第2実施形態に係る走行支援システムを示すブロック図である。図6に示すように、本実施形態においては、検出手段として、単眼画像センサである前方画像単眼カメラ40及び後方/側方/周辺画像単眼カメラ42の替わりに、ステレオ画像センサである前方画像ステレオカメラ44及び後方/側方/周辺画像ステレオカメラ46を備える。   Hereinafter, a third embodiment of the present invention will be described. FIG. 6 is a block diagram showing a driving support system according to the second embodiment. As shown in FIG. 6, in this embodiment, instead of the front image monocular camera 40 and the rear / side / peripheral image monocular camera 42 that are monocular image sensors, the front image stereo that is a stereo image sensor is used as detection means. A camera 44 and a rear / side / peripheral image stereo camera 46 are provided.

前方画像ステレオカメラ44は、車両前方の画像を取得する一対のCCDカメラである。また、後方/側方/周辺画像ステレオカメラ46は車両の後方、側方及び周辺の画像を取得する一対のCCDカメラであり、状況に応じて適宜魚眼レンズ等の広角レンズが装着される。   The front image stereo camera 44 is a pair of CCD cameras that acquire an image ahead of the vehicle. The rear / side / peripheral image stereo camera 46 is a pair of CCD cameras that acquire images of the rear, side, and periphery of the vehicle, and a wide-angle lens such as a fish-eye lens is appropriately mounted according to the situation.

本実施形態におけるエッジ処理部104は、上記第2実施形態と同様に、前方画像ステレオカメラ44及び後方/側方/周辺画像ステレオカメラ46の画像をエッジ処理し、走行レーン認識部110の判断に基づいて設定されたエッジ点数の閾値により、障害物を抽出する。また、本実施形態におけるエッジ処理部104は、前方画像ステレオカメラ44及び後方/側方/周辺画像ステレオカメラ46の一対をなすCCDカメラの取得画像中における物体の位置の違いを基にした三角測量方式によって、物体との距離及び自車からの横変位を求め、前のフレーム時に求めた距離に対する変化量から相対速度を求める。   In the present embodiment, the edge processing unit 104 performs edge processing on the images of the front image stereo camera 44 and the rear / side / peripheral image stereo camera 46 in the same manner as in the second embodiment, and the determination is made by the traveling lane recognition unit 110. Obstacles are extracted based on the threshold of the number of edge points set based on the above. In addition, the edge processing unit 104 according to the present embodiment performs triangulation based on the difference in the position of the object in the acquired image of the CCD camera that forms a pair of the front image stereo camera 44 and the rear / side / peripheral image stereo camera 46. According to the method, the distance to the object and the lateral displacement from the own vehicle are obtained, and the relative speed is obtained from the amount of change with respect to the distance obtained at the previous frame.

図7は、第3実施形態に係る走行支援システムにおける処理手順を示すフローチャートである。図7では、上記第1実施形態と同様に、自車の右側に存在する障害物を検出する場合を例にとっており、ステップS301において、前方画像ステレオカメラ44及び後方/側方/周辺画像ステレオカメラ46によって自車の右側方に置ける物体の画像を取得すること以外は、以下のステップS302〜S305は、上記第2実施形態におけるステップS202〜S205と同様に行われる。   FIG. 7 is a flowchart showing a processing procedure in the driving support system according to the third embodiment. FIG. 7 shows an example in which an obstacle present on the right side of the host vehicle is detected as in the first embodiment. In step S301, the front image stereo camera 44 and the rear / side / peripheral image stereo camera are detected. The following steps S302 to S305 are performed in the same manner as steps S202 to S205 in the second embodiment, except that an image of an object that can be placed on the right side of the vehicle is acquired by 46.

本実施形態においては、検出手段としてステレオ画像センサを用いるため、物体の距離や速度をより正確に検出しやすく、障害物の検出精度をより向上させることができるという利点がある。   In the present embodiment, since a stereo image sensor is used as the detection means, there are advantages in that it is easy to detect the distance and speed of the object more accurately, and the detection accuracy of the obstacle can be further improved.

以下、本発明の第4実施形態について説明する。図8は、第4実施形態に係る走行支援システムを示すブロック図である。図8に示すように、本実施形態においては、検出手段として、前方ミリ波レーダ30及び近距離ミリ波レーダ32、並びに画像センサである前方画像カメラ48及び後方/側方/周辺画像カメラ49を備えている。前方ミリ波レーダ30及び近距離ミリ波レーダ32からの情報は、上記第1実施形態と同様にレーダ波検出部102によって処理され、前方画像カメラ48及び後方/側方/周辺画像カメラ49とからの情報は上記第2実施形態と同様にエッジ処理部104によって処理される。なお、前方画像カメラ48及び後方/側方/周辺画像カメラ49は、単眼カメラ及びステレオカメラのいずれであっても適用することができる。   The fourth embodiment of the present invention will be described below. FIG. 8 is a block diagram showing a driving support system according to the fourth embodiment. As shown in FIG. 8, in this embodiment, the front millimeter wave radar 30 and the short-range millimeter wave radar 32, and the front image camera 48 and the rear / side / peripheral image camera 49, which are image sensors, are used as detection means. I have. The information from the front millimeter wave radar 30 and the short-range millimeter wave radar 32 is processed by the radar wave detection unit 102 as in the first embodiment, and from the front image camera 48 and the rear / side / peripheral image camera 49. This information is processed by the edge processing unit 104 as in the second embodiment. The front image camera 48 and the rear / side / peripheral image camera 49 can be applied to either a monocular camera or a stereo camera.

本実施形態においては、物体検出部100は、障害物抽出手段として一致度検出部106をさらに備える。一致度検出部106は、レーダ波検出部102とエッジ処理部104とからの検出結果の一致度を、例えば、当該物体の距離や位置の差の一致度により判定する。この場合、一致度検出部106は、物体の距離又は位置の差の逆数について閾値を設定しておき、検出結果における距離又は位置の差の逆数が設定した閾値以上であるか否かによって、一致度を判定する。一致度検出部106は、走行レーン認識部110が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断した場合は、当該側については、上記検出結果の一致度が第1閾値以上である場合に、当該物体を障害物であるとして抽出する。一方、一致度検出部106は、走行レーン認識部110が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断した場合は、当該側については、上記検出結果の一致度が第1閾値より高い第2閾値以上である場合に、当該物体を障害物であるとして抽出する。   In the present embodiment, the object detection unit 100 further includes a coincidence degree detection unit 106 as an obstacle extraction unit. The degree of coincidence detection unit 106 determines the degree of coincidence of detection results from the radar wave detection unit 102 and the edge processing unit 104 based on, for example, the degree of coincidence between the distance and position of the object. In this case, the degree-of-match detection unit 106 sets a threshold for the reciprocal of the object distance or position difference, and matches according to whether the reciprocal of the distance or position difference in the detection result is equal to or greater than the set threshold. Determine the degree. When the coincidence detection unit 106 determines that there is a possibility that another vehicle may exist on either the left side or the right side of the own vehicle, the coincidence degree detection unit 106 matches the above detection results for that side. If the degree is equal to or greater than the first threshold, the object is extracted as an obstacle. On the other hand, when the coincidence detection unit 106 determines that there is no possibility that another vehicle is present on either the left side or the right side of the own vehicle, the coincidence degree detection unit 106 performs the detection result on the side. Is equal to or higher than a second threshold value higher than the first threshold value, the object is extracted as an obstacle.

図9は、第4実施形態に係る走行支援システムにおける処理手順を示すフローチャートである。以下の説明では、上記第1実施形態と同様に、自車の右側に存在する障害物を検出する場合を例にとり説明する。   FIG. 9 is a flowchart showing a processing procedure in the driving support system according to the fourth embodiment. In the following description, as in the first embodiment, a case where an obstacle present on the right side of the own vehicle is detected will be described as an example.

まず、前方ミリ波レーダ30及び近距離ミリ波レーダ32、並びに前方画像カメラ48及び後方/側方/周辺画像カメラ49によって、自車側方の物体を検出する(S401)。次に、上記第1実施形態と同様に、走行レーン認識部110は、ナビゲーションシステム12からの測定結果に基づき、現在の自車の走行レーンの位置に関する情報を取得し、自車の右側に追越し車両及び割込み車両が存在する可能性の有無を判断する(S402)。   First, an object on the side of the vehicle is detected by the front millimeter wave radar 30 and the short-range millimeter wave radar 32, the front image camera 48, and the rear / side / peripheral image camera 49 (S401). Next, as in the first embodiment, the traveling lane recognition unit 110 acquires information on the current traveling lane position of the own vehicle based on the measurement result from the navigation system 12 and passes the vehicle to the right side of the own vehicle. It is determined whether or not there is a possibility that a vehicle and an interrupted vehicle exist (S402).

走行レーン認識部110が自車右側には追越し車両及び割込み車両が存在する可能性が無いと判断した場合は、一致度検出部106は、一致度の閾値を第1閾値より大きい第2閾値に設定する(S403,S404)。一方、走行レーン認識部110が自車右側には追越し車両及び割込み車両が存在する可能性が有ると判断した場合は、一致度検出部106は、一致度の閾値を低い方の第1閾値のままに設定する(S403)。   When the traveling lane recognition unit 110 determines that there is no possibility that an overtaking vehicle and an interrupting vehicle are present on the right side of the host vehicle, the coincidence degree detection unit 106 sets the coincidence degree threshold to a second threshold greater than the first threshold. Set (S403, S404). On the other hand, when the traveling lane recognition unit 110 determines that there is a possibility that an overtaking vehicle and an interruption vehicle exist on the right side of the host vehicle, the coincidence degree detection unit 106 sets the coincidence degree threshold value to the lower first threshold value. The setting is made as it is (S403).

最後に、一致度検出部106は、一致度が設定した閾値以上の場合に、当該物体を障害物として抽出する(S404)。すなわち、一致度検出部106は、例えば、検出結果における物体の距離又は位置の差の逆数が設定した閾値以上である場合に、当該物体を障害物として抽出する。   Finally, the coincidence degree detection unit 106 extracts the object as an obstacle when the coincidence degree is equal to or greater than the set threshold (S404). That is, the coincidence degree detection unit 106 extracts an object as an obstacle when, for example, the reciprocal of the difference in the distance or position of the object in the detection result is equal to or greater than a set threshold value.

ここで、ミリ波レーダは、物体までの距離や物体との相対速度の検出精度が高いものの、横変位や物体幅の検出精度はステレオカメラ等のカメラより劣る。一方、ステレオカメラ等のカメラは、横変位や物体幅の検出精度が高いものの、物体までの距離や物体との相対速度の検出精度はミリ波レーダ10より劣る。そのため本実施形態によれば、検出原理を異にする前方ミリ波レーダ30及び近距離ミリ波レーダ32、並びに前方画像カメラ48及び後方/側方/周辺画像カメラ49によるパラメータが融合されて障害物が抽出されるので、障害物の検出精度が一層向上する。   Here, although the millimeter wave radar has high detection accuracy of the distance to the object and the relative speed with the object, the detection accuracy of the lateral displacement and the object width is inferior to that of a camera such as a stereo camera. On the other hand, although a camera such as a stereo camera has high detection accuracy of the lateral displacement and the object width, the detection accuracy of the distance to the object and the relative speed with the object is inferior to that of the millimeter wave radar 10. Therefore, according to the present embodiment, the parameters of the front millimeter wave radar 30 and the short-range millimeter wave radar 32 having different detection principles, the front image camera 48, and the rear / side / peripheral image camera 49 are merged to obstruct the obstacle. Therefore, the obstacle detection accuracy is further improved.

以上、本発明の実施の形態について説明したが、本発明は、上記実施形態に限定されるものではなく種々の変形が可能である。本実施形態では障害物認識装置の一例として走行支援システムに適用する場合を中心に説明したが、本発明の障害物認識装置の適用分野としてはこれに限定されない。   Although the embodiment of the present invention has been described above, the present invention is not limited to the above embodiment, and various modifications can be made. In the present embodiment, the case where the obstacle recognition apparatus is applied to the driving support system has been mainly described, but the application field of the obstacle recognition apparatus of the present invention is not limited to this.

第1実施形態に係る走行支援システムを示すブロック図である。It is a block diagram which shows the driving assistance system which concerns on 1st Embodiment. 第1実施形態に係る走行支援システムにおける処理手順を示すフローチャートである。It is a flowchart which shows the process sequence in the driving assistance system which concerns on 1st Embodiment. (a)(b)は左右それぞれの走行レーンにおける右側方の障害物の認識を示す図である。(A) (b) is a figure which shows recognition of the obstruction on the right side in each right and left driving lane. 第2実施形態に係る走行支援システムを示すブロック図である。It is a block diagram which shows the driving assistance system which concerns on 2nd Embodiment. 第2実施形態に係る走行支援システムにおける処理手順を示すフローチャートである。It is a flowchart which shows the process sequence in the driving assistance system which concerns on 2nd Embodiment. 第3実施形態に係る走行支援システムを示すブロック図である。It is a block diagram which shows the driving assistance system which concerns on 3rd Embodiment. 第3実施形態に係る走行支援システムにおける処理手順を示すフローチャートである。It is a flowchart which shows the process sequence in the driving assistance system which concerns on 3rd Embodiment. 第4実施形態に係る走行支援システムを示すブロック図である。It is a block diagram which shows the driving assistance system which concerns on 4th Embodiment. 第4実施形態に係る走行支援システムにおける処理手順を示すフローチャートである。It is a flowchart which shows the process sequence in the driving assistance system which concerns on 4th Embodiment.

符号の説明Explanation of symbols

1…走行支援システム、10…ECU、12…ナビゲーションシステム、14…車載システム、20…システム制御部、22…運転負荷軽減システム部、24…安全システム部、30…前方ミリ波レーダ、32…近距離ミリ波レーダ、40…前方画像単眼カメラ、42…後方/側方/周辺画像単眼カメラ、44…前方画像ステレオカメラ、46…後方/側方/周辺画像ステレオカメラ、48…前方画像カメラ、49…後方/側方/周辺画像カメラ、50…ソナー、60…車両運動状態センサ、62…自車運動状態推定部、70…顔向き検出センサ、72…ドライバー状態推定部、100…物体検出部、102…レーダ波検出部、104…エッジ処理部、106…一致度検出部、110…走行レーン認識部、200…自車、300…他車。 DESCRIPTION OF SYMBOLS 1 ... Driving assistance system, 10 ... ECU, 12 ... Navigation system, 14 ... In-vehicle system, 20 ... System control part, 22 ... Driving load reduction system part, 24 ... Safety system part, 30 ... Forward millimeter wave radar, 32 ... Near Distance millimeter-wave radar, 40 ... front image monocular camera, 42 ... rear / side / peripheral image monocular camera, 44 ... front image stereo camera, 46 ... rear / side / peripheral image stereo camera, 48 ... front image camera, 49 ... rear / side / peripheral image camera, 50 ... sonar, 60 ... vehicle motion state sensor, 62 ... own vehicle motion state estimation unit, 70 ... face orientation detection sensor, 72 ... driver state estimation unit, 100 ... object detection unit, DESCRIPTION OF SYMBOLS 102 ... Radar wave detection part, 104 ... Edge processing part, 106 ... Matching degree detection part, 110 ... Travel lane recognition part, 200 ... Own vehicle, 300 ... Other vehicle.

Claims (5)

自車の位置を測定可能なナビゲーション装置と、
前記ナビゲーション装置の測定結果から自車が走行している走行レーンを認識して、自車の左側及び右側のいずれかの側に他車が存在する可能性を判断する走行レーン認識手段と、
自車の外部に存在する物体を検出可能な検出手段と、
前記検出手段によって検出された物体が障害となり得る度合に応じて、前記物体を障害物として抽出する障害物抽出手段と、
を備え、
前記障害物抽出手段は、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、前記検出手段によって検出された物体が障害となり得る度合が第1の度合以上のときに、前記物体を障害物として抽出し、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、前記検出手段によって検出された物体が障害となり得る度合が前記第1の度合より高い第2の度合以上のときに、前記物体を障害物として抽出する、
障害物認識装置。
A navigation device capable of measuring the position of the vehicle,
A traveling lane recognition means for recognizing a traveling lane in which the host vehicle is traveling from the measurement result of the navigation device and determining the possibility that another vehicle exists on either the left side or the right side of the host vehicle;
Detection means capable of detecting an object existing outside the vehicle;
Obstacle extraction means for extracting the object as an obstacle according to the degree to which the object detected by the detection means can become an obstacle,
With
The obstacle extracting means includes
When the travel lane recognition unit determines that there is a possibility that another vehicle exists on either the left side or the right side of the host vehicle, the degree to which the object detected by the detection unit may become an obstacle for the side. Is extracted as an obstacle when is greater than or equal to the first degree,
When the travel lane recognition unit determines that there is no possibility that another vehicle exists on either the left side or the right side of the host vehicle, the degree to which the object detected by the detection unit may become an obstacle for the side. The object is extracted as an obstacle when is equal to or higher than a second degree higher than the first degree;
Obstacle recognition device.
前記検出手段は、自車の外部に存在する物体に電磁波を放射し、前記電磁波の反射波を測定することにより前記物体を検出可能なレーダであり、
前記障害物抽出手段は、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、前記レーダが測定した反射波の反射率が第1閾値以上のときに、前記物体を障害物として抽出し、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、前記レーダが測定した反射波の反射率が前記第1閾値より高い第2閾値以上のときに、前記物体を障害物として抽出する、
請求項1に記載の障害物認識装置。
The detection means is a radar capable of detecting the object by radiating an electromagnetic wave to an object existing outside the vehicle and measuring a reflected wave of the electromagnetic wave,
The obstacle extracting means includes
When the traveling lane recognition means determines that there is a possibility that another vehicle exists on either the left side or the right side of the own vehicle, the reflectance of the reflected wave measured by the radar is the first for the side. When the threshold is exceeded, the object is extracted as an obstacle,
When the travel lane recognition means determines that there is no possibility of another vehicle on either the left or right side of the host vehicle, the reflectance of the reflected wave measured by the radar is the first The object is extracted as an obstacle when the threshold value is equal to or higher than a second threshold value higher than one threshold value;
The obstacle recognition apparatus according to claim 1.
前記検出手段は、自車の外部に存在する物体を撮像することにより前記物体を検出可能な単眼画像センサであり、
前記障害物抽出手段は、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、前記単眼画像センサの撮像画像をエッジ処理して得られたエッジ点数が第1閾値以上のときに、前記物体を障害物として抽出し、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、前記単眼画像センサの撮像画像をエッジ処理して得られたエッジ点数が前記第1閾値より高い第2閾値以上のときに、前記物体を障害物として抽出する、
請求項1に記載の障害物認識装置。
The detection means is a monocular image sensor capable of detecting the object by imaging an object existing outside the host vehicle,
The obstacle extracting means includes
When the travel lane recognition unit determines that there is a possibility that another vehicle exists on either the left side or the right side of the host vehicle, the captured image of the monocular image sensor is obtained by performing edge processing on the side. When the obtained edge score is equal to or greater than the first threshold, the object is extracted as an obstacle,
When the travel lane recognition means determines that there is no possibility that another vehicle exists on either the left side or the right side of the host vehicle, the captured image of the monocular image sensor is obtained by performing edge processing on the side. Extracting the object as an obstacle when the obtained edge score is equal to or higher than a second threshold value higher than the first threshold value;
The obstacle recognition apparatus according to claim 1.
前記検出手段は、自車の外部に存在する物体を撮像することにより前記物体を検出可能なステレオ画像センサであり、
前記障害物抽出手段は、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、前記ステレオ画像センサの撮像画像をエッジ処理して得られたエッジ点数が第1閾値以上のときに、前記物体を障害物として抽出し、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、前記ステレオ画像センサの撮像画像をエッジ処理して得られたエッジ点数が前記第1閾値より高い第2閾値以上のときに、前記物体を障害物として抽出する、
請求項1に記載の障害物認識装置。
The detection means is a stereo image sensor capable of detecting the object by imaging an object existing outside the host vehicle,
The obstacle extracting means includes
When the travel lane recognition unit determines that there is a possibility that another vehicle exists on either the left side or the right side of the host vehicle, the captured image of the stereo image sensor is obtained by performing edge processing on the side. When the obtained edge score is equal to or greater than the first threshold, the object is extracted as an obstacle,
When the travel lane recognition means determines that there is no possibility that another vehicle exists on either the left side or the right side of the host vehicle, the captured image of the stereo image sensor is obtained by performing edge processing on that side. Extracting the object as an obstacle when the obtained edge score is equal to or higher than a second threshold value higher than the first threshold value;
The obstacle recognition apparatus according to claim 1.
前記検出手段は、自車の外部に存在する物体に電磁波を放射して前記電磁波の反射波を測定することにより前記物体を検出可能なレーダと、自車の外部に存在する物体を撮像することにより前記物体を検出可能な画像センサとを含み、
前記障害物抽出手段は、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が有ると判断したときは、当該側について、前記レーダと前記画像センサとの検出結果の一致度が第1閾値以上のときに、前記物体を障害物として抽出し、
前記走行レーン認識手段が自車の左側及び右側のいずれかの側に他車が存在する可能性が無いと判断したときは、当該側について、前記レーダと前記画像センサとの検出結果の一致度が前記第1閾値より高い第2閾値以上のときに、前記物体を障害物として抽出する、
請求項1に記載の障害物認識装置。
The detection means captures a radar capable of detecting the object by radiating an electromagnetic wave to an object existing outside the host vehicle and measuring the reflected wave of the electromagnetic wave, and an object existing outside the host vehicle. An image sensor capable of detecting the object by
The obstacle extracting means includes
When the travel lane recognition means determines that there is a possibility that another vehicle exists on either the left side or the right side of the host vehicle, the degree of coincidence of detection results between the radar and the image sensor for that side When the value is equal to or greater than the first threshold, the object is extracted as an obstacle,
When the travel lane recognition means determines that there is no possibility that another vehicle exists on either the left side or the right side of the host vehicle, the degree of coincidence of detection results between the radar and the image sensor for that side The object is extracted as an obstacle when is equal to or higher than a second threshold value higher than the first threshold value,
The obstacle recognition apparatus according to claim 1.
JP2006214747A 2006-08-07 2006-08-07 Obstacle recognition device Expired - Fee Related JP4872517B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006214747A JP4872517B2 (en) 2006-08-07 2006-08-07 Obstacle recognition device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006214747A JP4872517B2 (en) 2006-08-07 2006-08-07 Obstacle recognition device

Publications (2)

Publication Number Publication Date
JP2008040819A true JP2008040819A (en) 2008-02-21
JP4872517B2 JP4872517B2 (en) 2012-02-08

Family

ID=39175741

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006214747A Expired - Fee Related JP4872517B2 (en) 2006-08-07 2006-08-07 Obstacle recognition device

Country Status (1)

Country Link
JP (1) JP4872517B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011048641A (en) * 2009-08-27 2011-03-10 Toyota Motor Corp Object detection device and driving support device
WO2012169052A1 (en) * 2011-06-09 2012-12-13 トヨタ自動車株式会社 Other-vehicle detection device and other-vehicle detection method
US9002630B2 (en) 2010-11-04 2015-04-07 Toyota Jidosha Kabushiki Kaisha Road shape estimation apparatus
US9626868B2 (en) 2009-07-10 2017-04-18 Toyota Jidosha Kabushiki Kaisha Object detection device
KR20200102131A (en) * 2019-02-21 2020-08-31 주식회사 와이즈오토모티브 Apparatus and method for detecting blind spot

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08156723A (en) * 1994-12-06 1996-06-18 Nissan Motor Co Ltd Vehicle obstruction detecting device
JP2000172994A (en) * 1998-12-03 2000-06-23 Mazda Motor Corp Obstacle alarming device for vehicle
JP2000180537A (en) * 1998-12-15 2000-06-30 Fujitsu Ten Ltd Method for identifying target to be controlled of scan- type radar
JP2002040139A (en) * 2000-07-28 2002-02-06 Denso Corp Method and device for body recognition, and recording medium
JP2002334330A (en) * 2001-05-10 2002-11-22 Nissan Motor Co Ltd Vehicle recognition device
JP2005009913A (en) * 2003-06-17 2005-01-13 Alpine Electronics Inc Radar control device
JP2005132185A (en) * 2003-10-29 2005-05-26 Nissan Motor Co Ltd Lane departure prevention apparatus
JP2005145196A (en) * 2003-11-13 2005-06-09 Mitsubishi Electric Corp Vehicle surrounding monitoring device

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08156723A (en) * 1994-12-06 1996-06-18 Nissan Motor Co Ltd Vehicle obstruction detecting device
JP2000172994A (en) * 1998-12-03 2000-06-23 Mazda Motor Corp Obstacle alarming device for vehicle
JP2000180537A (en) * 1998-12-15 2000-06-30 Fujitsu Ten Ltd Method for identifying target to be controlled of scan- type radar
JP2002040139A (en) * 2000-07-28 2002-02-06 Denso Corp Method and device for body recognition, and recording medium
JP2002334330A (en) * 2001-05-10 2002-11-22 Nissan Motor Co Ltd Vehicle recognition device
JP2005009913A (en) * 2003-06-17 2005-01-13 Alpine Electronics Inc Radar control device
JP2005132185A (en) * 2003-10-29 2005-05-26 Nissan Motor Co Ltd Lane departure prevention apparatus
JP2005145196A (en) * 2003-11-13 2005-06-09 Mitsubishi Electric Corp Vehicle surrounding monitoring device

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9626868B2 (en) 2009-07-10 2017-04-18 Toyota Jidosha Kabushiki Kaisha Object detection device
JP2011048641A (en) * 2009-08-27 2011-03-10 Toyota Motor Corp Object detection device and driving support device
US9002630B2 (en) 2010-11-04 2015-04-07 Toyota Jidosha Kabushiki Kaisha Road shape estimation apparatus
WO2012169052A1 (en) * 2011-06-09 2012-12-13 トヨタ自動車株式会社 Other-vehicle detection device and other-vehicle detection method
JPWO2012169052A1 (en) * 2011-06-09 2015-02-23 トヨタ自動車株式会社 Other vehicle detection device and other vehicle detection method
US9495873B2 (en) 2011-06-09 2016-11-15 Toyota Jidosha Kabushiki Kaisha Other-vehicle detection device and other-vehicle detection method
KR20200102131A (en) * 2019-02-21 2020-08-31 주식회사 와이즈오토모티브 Apparatus and method for detecting blind spot
KR102184431B1 (en) * 2019-02-21 2020-11-30 주식회사 와이즈오토모티브 Apparatus and method for detecting blind spot

Also Published As

Publication number Publication date
JP4872517B2 (en) 2012-02-08

Similar Documents

Publication Publication Date Title
US9896129B2 (en) Driving assistant system of vehicle and method for controlling the same
JP5345350B2 (en) Vehicle driving support device
US10688997B2 (en) Lane merging determination apparatus
CN107408345B (en) Method and device for determining presence of target object
US9223311B2 (en) Vehicle driving support control apparatus
CN107251127B (en) Vehicle travel control device and travel control method
CN109204311B (en) Automobile speed control method and device
US10037700B2 (en) Driving support apparatus for a vehicle
JP4558758B2 (en) Obstacle recognition device for vehicles
JP4788778B2 (en) Deviation warning device and deviation warning program
JP2008037361A (en) Obstacle recognition device
WO2018079252A1 (en) Object detecting device
US20190071071A1 (en) Vehicle control device, vehicle control method, and storage medium
JP2012089114A (en) Obstacle recognition device
JP2006318093A (en) Vehicular moving object detection device
WO2017138329A1 (en) Collision prediction device
JP2008149860A (en) Travel control device
JP2004314843A (en) Operation assisting device for vehicles
JP2020134981A (en) Driving assistance device
JP4872517B2 (en) Obstacle recognition device
JP2010108168A (en) Collision prediction device
JP5316392B2 (en) Driving assistance device
JP2004280453A (en) Vehicular right turn safety confirming system
US20230415734A1 (en) Vehicular driving assist system using radar sensors and cameras
JP5606468B2 (en) Vehicle periphery monitoring device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090513

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110301

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110303

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111025

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111107

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141202

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4872517

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141202

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees