JP2010225075A - Driving support device - Google Patents

Driving support device Download PDF

Info

Publication number
JP2010225075A
JP2010225075A JP2009074145A JP2009074145A JP2010225075A JP 2010225075 A JP2010225075 A JP 2010225075A JP 2009074145 A JP2009074145 A JP 2009074145A JP 2009074145 A JP2009074145 A JP 2009074145A JP 2010225075 A JP2010225075 A JP 2010225075A
Authority
JP
Japan
Prior art keywords
vehicle
intersection
image
driving support
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009074145A
Other languages
Japanese (ja)
Inventor
Koji Iwata
鋼司 岩田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2009074145A priority Critical patent/JP2010225075A/en
Publication of JP2010225075A publication Critical patent/JP2010225075A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a driving support device acquiring time when a traffic signal becomes yellow display by a device loaded in a vehicle, and allowing coping with a dilemma zone problem by using information thereof. <P>SOLUTION: This driving support device photographs an image in front of the vehicle by a camera equipped in the vehicle (S30), executes image recognition processing (S40), calculates expected time when a traffic light for the vehicle changes to a yellow light (S80) when it is detected that a traffic signal for a pedestrian inside the image has changed to a red light (S70: YES), calculates expected time when the vehicle arrives at a stop line of an intersection (S100), and decides whether or not the vehicle can arrive at the stop line while the traffic signal for the vehicle is a blue light from comparison between the expected time of the traffic light for the vehicle and the expected time of the vehicle arrival (S110). When the vehicle cannot arrive at the stop line while the traffic signal for the vehicle is the blue light, the driving support device notifies a driver about information thereof (S120). <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、運転支援装置に関する。   The present invention relates to a driving support device.

自動車が青色表示の交差点に近づいていくときに、今信号が黄色表示に変わったら交差点手前で停止すべきか、加速して交差点を渡りきるべきか、運転者が判断に悩むジレンマゾーンがあることが知られている。運転者がジレンマゾーンにうまく対処しなければ、急停止の際に後続車両から追突を受けたり、赤色表示で交差点を渡ってしまったりする等の問題が発生する。   When a car approaches a blue intersection, there may be a dilemma zone where the driver has trouble deciding whether to stop before the intersection if the signal changes to yellow or to accelerate and cross the intersection. Are known. If the driver does not cope well with the dilemma zone, problems such as a rear-end collision from a following vehicle at a sudden stop, or crossing an intersection in red are generated.

例えば下記特許文献1では、ジレンマゾーン問題に対処するために、ジレンマゾーンに入ることを事前に予測して、信号機が黄色表示となる前に運転者にその旨を報知する装置が開示されている。   For example, in the following Patent Document 1, in order to deal with the dilemma zone problem, an apparatus that predicts entering the dilemma zone in advance and informs the driver of the fact before the traffic light is displayed in yellow is disclosed. .

特開2000−357293号公報JP 2000-357293 A

しかし上記特許文献1の技術では、信号機が黄色表示に切り替わる時刻の情報を信号機の制御装置から通信で得るとしている。しかし国内(あるいは海外も含めて)の全ての信号機がそのような設備を備える状況は現時点では存在せず、また将来そのような状況が現実化されるかどうかも不確定である。さらに仮に将来そのような状況が現実化されるとしても、その時点までの期間は、そのような装備がないとしてジレンマゾーン問題への対処を考えることが必要である。   However, in the technique of the above-mentioned Patent Document 1, information on the time when the traffic signal is switched to yellow display is obtained from the control device of the traffic signal by communication. However, there is currently no situation in which all domestic (or overseas) traffic lights are equipped with such equipment, and it is uncertain whether such a situation will be realized in the future. Furthermore, even if such a situation becomes a reality in the future, it is necessary to consider dealing with the dilemma zone problem for the period up to that point because there is no such equipment.

そこで本発明が解決しようとする課題は、上記問題点に鑑み、車両に搭載した装置によって信号機が黄色表示になる時間を取得することができ、その情報を用いることでジレンマゾーン問題に対処できる運転支援装置を提供することにある。   Therefore, in view of the above problems, the problem to be solved by the present invention is to obtain the time when the traffic light is displayed in yellow by the device mounted on the vehicle, and use that information to drive the dilemma zone problem. It is to provide a support device.

課題を解決するための手段及び発明の効果Means for Solving the Problems and Effects of the Invention

上記課題を達成するために、本発明に係る運転支援装置は、車両に装備されて車両前方の画像を撮影する撮影手段と、前記撮影手段により撮影された撮影画像から、前記車両の進行方向に存在する交差点の歩行者用信号機の信号灯の色変化を検出して、前記交差点の車両用信号機が黄色表示に変化する第1予想時間を算出する第1算出手段と、前記車両が前記交差点に到達する第2予想時間を算出する第2算出手段と、前記第1算出手段により算出された前記第1予想時間と、前記第2算出手段により算出された前記第2予想時間と、から前記交差点の車両用信号機が青色表示である間に前記車両が前記交差点に到達するか否かを判定する判定手段と、を備えたことを特徴とする。   In order to achieve the above object, a driving support apparatus according to the present invention is equipped with a photographing unit that is mounted on a vehicle and photographs a front image of the vehicle, and a captured image captured by the photographing unit in the traveling direction of the vehicle. A first calculating means for detecting a color change of a signal light of a traffic light for a pedestrian at an existing intersection and calculating a first expected time at which the traffic signal for the vehicle at the intersection changes to a yellow display; and the vehicle reaches the intersection The second predicted time for calculating the second predicted time, the first predicted time calculated by the first calculated means, and the second predicted time calculated by the second calculated means. Determination means for determining whether or not the vehicle reaches the intersection while the vehicle traffic signal is displayed in blue.

これにより本発明に係る運転支援装置では、車両前方の歩行者用信号機を撮影して、その赤色表示への変化から車両用信号機が黄色表示に変わる第1予想時間を算出し、また車両が交差点に到達する第2予想時間を算出し、両予想時間の比較から、車両用信号機が青色表示である間に交差点に到達できるかを判定する。よって車両に搭載した撮影手段による撮影画像を有効に利用して、車両用信号機が黄色表示に変化する予想時間を求めることができる。したがって信号機から情報を得ることなく、車両に搭載した装備を用いて、車両用信号機が青色表示である間に交差点に到達できるかどうかという、ジレンマゾーン問題に関係する重要な情報を取得することができ、安全運転に貢献する運転支援装置が実現できる。   As a result, in the driving support device according to the present invention, the traffic light for the pedestrian in front of the vehicle is photographed, and the first expected time when the traffic signal for the vehicle changes to yellow display from the change to the red display is calculated. The second predicted time to reach is calculated, and it is determined from the comparison between the two predicted times whether or not the intersection can be reached while the vehicle traffic signal is displayed in blue. Therefore, it is possible to obtain the expected time for the vehicle traffic signal to change to yellow display by effectively using the image taken by the imaging means mounted on the vehicle. Therefore, it is possible to obtain important information related to the dilemma zone problem, such as whether or not the traffic signal for vehicles can reach the intersection while it is displayed in blue, without obtaining information from the traffic signal. And a driving support device that contributes to safe driving can be realized.

また前記第1算出手段は、歩行者用信号機の線画像であるパターン画像を記憶する記憶部と、前記撮影画像と前記パターン画像との間でマッチング処理を実行して、前記撮影画像内に歩行者用信号機が撮影されているか否かを判定するマッチング手段と、を備えたとしてもよい。   In addition, the first calculation means executes a matching process between a storage unit that stores a pattern image that is a line image of a pedestrian traffic light and the captured image and the pattern image, and walks within the captured image. Matching means for determining whether or not the traffic light for a person is photographed may be provided.

これにより予め歩行者用信号機のパターン画像を記憶しておいて、そのパターン画像と撮影画像との間でマッチング処理を実行するので、車両前方の撮影画像から、歩行者用信号機の画像を取得して、この画像から歩行者用信号機の信号灯の色変化を高精度に検出できる。そして高精度に検出した色変化から車両用信号機が黄色表示となる予想時間を算出するので、車両用信号機が青色表示である間に交差点に到達できるかどうかという、ジレンマゾーン問題に関係する重要な情報を高精度に取得することができる。   As a result, the pattern image of the pedestrian traffic light is stored in advance, and the matching process is executed between the pattern image and the captured image. Therefore, the image of the pedestrian traffic signal is acquired from the captured image in front of the vehicle. Thus, the color change of the signal light of the pedestrian traffic light can be detected with high accuracy from this image. And since the expected time for the vehicle traffic signal to display yellow is calculated from the color change detected with high accuracy, it is important to relate to the dilemma zone problem of whether or not the intersection can be reached while the vehicle traffic signal is displayed in blue. Information can be acquired with high accuracy.

また前記第1算出手段は、前記マッチング手段によって、前記撮影手段により撮影された画像内に歩行者用信号機が撮影されていると判定された場合に、前記画像内の歩行者用信号機の画像から、その歩行者用信号機の信号灯の色情報を検出する色情報検出手段を備えたとしてもよい。   Further, the first calculating means determines from the image of the pedestrian traffic light in the image when the matching means determines that the pedestrian traffic light is photographed in the image photographed by the photographing means. The color information detecting means for detecting the color information of the signal light of the pedestrian traffic light may be provided.

これによりパターン画像と撮影画像との間でマッチング処理を実行して、歩行者用信号機が撮影されていると判定された場合に、歩行者用信号機の画像から信号灯の色情報を検出する。したがってマッチング処理を実行した上で、信号灯の色情報を検出するので、高精度に歩行者用信号機の信号灯の色情報が検出できる。したがって車両用信号機が青色表示である間に交差点に到達できるかどうかという、ジレンマゾーン問題に関係する重要な情報を高精度に取得することができる。   Thereby, matching processing is executed between the pattern image and the captured image, and when it is determined that the pedestrian traffic light is being captured, the color information of the signal lamp is detected from the image of the pedestrian traffic light. Therefore, since the color information of the signal light is detected after executing the matching process, the color information of the signal light of the pedestrian traffic light can be detected with high accuracy. Therefore, important information related to the dilemma zone problem can be obtained with high accuracy, such as whether or not the intersection can be reached while the vehicle traffic signal is displayed in blue.

また前記色情報検出手段により検出された前記色情報によって、前記歩行者信号機が赤色表示に変化した変化時間を検出する変化時間検出手段を備え、前記第1算出手段は、その変化時間検出手段により検出された前記変化時間に応じて、前記第1予想時間を算出するとしてもよい。   The color information detected by the color information detection means includes a change time detection means for detecting a change time when the pedestrian traffic light has changed to a red display, and the first calculation means includes the change time detection means. The first expected time may be calculated according to the detected change time.

これによりマッチング処理を実行した上で検出された歩行者用信号機の信号灯の色情報から、歩行者用信号機が赤色表示に変化した時間を検出し、その情報から車両用信号機が黄色表示に変化する予想時間を算出するので、高精度に取得した歩行者用信号機の変化時間から車両用信号機が黄色表示に変化する時間を予想できる。したがって車両用信号機が青色表示である間に交差点に到達できるかどうかという、ジレンマゾーン問題に関係する重要な情報を高精度に取得することができる。   As a result, the time when the pedestrian traffic light changed to red display is detected from the color information of the signal lights of the pedestrian traffic light detected after executing the matching process, and the vehicle traffic light changes to yellow display from the information. Since the expected time is calculated, it is possible to predict the time when the vehicle traffic light changes to yellow display from the change time of the pedestrian traffic light acquired with high accuracy. Therefore, important information related to the dilemma zone problem can be obtained with high accuracy, such as whether or not the intersection can be reached while the vehicle traffic signal is displayed in blue.

また前記車両の進行方向を基準とした前記交差点の方向を算出する方向算出手段を備え、前記マッチング手段は、前記方向算出手段によって算出された前記交差点の方向に応じて、前記撮影画像内において、前記交差点に前記歩行者用信号機が設置されているならば前記歩行者用信号機が存在する領域を、部分画像として抽出し、その部分画像と前記パターン画像との間でマッチング処理を実行する部分画像マッチング手段を備えたとしてもよい。   In addition, the image processing apparatus includes a direction calculation unit that calculates a direction of the intersection with respect to a traveling direction of the vehicle, and the matching unit includes the direction of the intersection calculated by the direction calculation unit in the captured image. If the pedestrian traffic light is installed at the intersection, a region where the pedestrian traffic light is present is extracted as a partial image, and a partial image is executed between the partial image and the pattern image Matching means may be provided.

これにより車両の進行方向に対する交差点の方向を算出して、この情報を基にして、撮影画像中に歩行者用信号機が存在する可能性がある領域のみにマッチング処理を実行するので、不必要な領域へのマッチング処理を省略できて、マッチング処理の効率性が向上する。よって効率的な処理によって、迅速に車両用信号機が青色表示である間に交差点に到達できるかどうかという、ジレンマゾーン問題に関係する重要な情報を取得することができる。   As a result, the direction of the intersection with respect to the traveling direction of the vehicle is calculated, and based on this information, the matching process is executed only in the area where the pedestrian traffic light may be present in the captured image. The matching process to the region can be omitted, and the efficiency of the matching process is improved. Therefore, through efficient processing, it is possible to quickly acquire important information related to the dilemma zone problem, such as whether the intersection can be reached while the vehicle traffic signal is displayed in blue.

また前記第1算出手段は、前記車両と前記交差点との間の距離を算出する距離算出手段と、前記距離算出手段によって算出された前記車両と前記交差点との間の距離に応じて、前記撮影手段により撮影された画像の相対的大きさを補正する補正手段と、を備えたとしてもよい。   In addition, the first calculation means calculates the distance according to the distance calculation means for calculating the distance between the vehicle and the intersection, and the distance between the vehicle and the intersection calculated by the distance calculation means. Correction means for correcting the relative size of the image photographed by the means may be provided.

これにより車両と交差点との距離を算出して、この情報に応じて撮影画像の相対的な大きさを補正するので、車両と交差点との距離が遠いか近いかで撮影画像が異なることで、歩行者用信号灯の色変化の検出の精度が低下することが抑制できる。したがって車両用信号が黄色表示に変わる予想時間を高精度に算出して、この情報から、車両用信号機が青色表示である間に交差点に到達できるかどうかという、ジレンマゾーン問題に関係する重要な情報を高精度に取得することができる。   This calculates the distance between the vehicle and the intersection, and corrects the relative size of the captured image according to this information, so that the captured image is different depending on whether the distance between the vehicle and the intersection is far, It can suppress that the precision of the detection of the color change of the signal light for pedestrians falls. Therefore, important information related to the dilemma zone problem of whether or not the traffic signal can be reached while the vehicle traffic signal is displayed in blue is calculated with high accuracy the expected time when the vehicle signal will change to yellow display. Can be obtained with high accuracy.

また車両の位置の情報を取得する車両位置取得手段と、交差点の位置の情報を取得する交差点位置取得手段と、車両の速度の情報を取得する速度取得手段と、を備え、前記第2算出手段は、前記車両位置取得手段により取得された車両位置と、前記信号位置取得手段により取得された信号位置と、前記速度取得手段により取得された車両速度と、から前記第2予想時間を算出するとしてもよい。   The second calculation means includes vehicle position acquisition means for acquiring vehicle position information, intersection position acquisition means for acquiring intersection position information, and speed acquisition means for acquiring vehicle speed information. Calculates the second expected time from the vehicle position acquired by the vehicle position acquisition means, the signal position acquired by the signal position acquisition means, and the vehicle speed acquired by the speed acquisition means. Also good.

これにより車両位置と、交差点位置と、車速との情報を取得して、これらの情報から車両が交差点に到達する予想時間を算出するので、高精度に交差点到達の予想時間を算出できる。よって高精度な交差点到達の予想時間を用いて、車両用信号機が青色表示である間に交差点に到達できるかどうかという、ジレンマゾーン問題に関係する重要な情報を高精度に取得することができる。   As a result, information on the vehicle position, the intersection position, and the vehicle speed is acquired, and the estimated time for the vehicle to reach the intersection is calculated from the information. Therefore, the estimated time for reaching the intersection can be calculated with high accuracy. Therefore, it is possible to acquire, with high accuracy, important information related to the dilemma zone problem, such as whether or not the traffic signal for vehicles can reach the intersection while the vehicle traffic signal is displayed in blue, using the estimated time for reaching the intersection with high accuracy.

また前記判定手段が、前記交差点の車両用信号機が青色表示である間に前記車両は前記交差点に到達しないと判定した場合に、前記交差点での停止を促す情報を運転者に報知する報知手段を備えたとしてもよい。   In addition, when the determination unit determines that the vehicle does not reach the intersection while the traffic signal for the vehicle at the intersection is displayed in blue, a notification unit that notifies the driver of information that prompts the vehicle to stop at the intersection. It may be provided.

これにより車両用信号機が青色表示である間に交差点に到達できるかどうかという情報を高精度に取得した上で、青色表示である間に交差点に到達できない場合には、その情報を運転者に報知するので、ジレンマゾーン問題に対処できるように運転者を支援する運転支援装置が実現できる。   As a result, the information on whether or not the intersection can be reached while the vehicle traffic signal is displayed in blue is obtained with high accuracy, and if the intersection cannot be reached while displayed in blue, the information is notified to the driver. Therefore, a driving support device that supports the driver so as to cope with the dilemma zone problem can be realized.

本発明における運転支援装置の実施例における構成図。The block diagram in the Example of the driving assistance device in this invention. 実施例における制御処理のフローチャート。The flowchart of the control processing in an Example. 画像認識処理のフローチャート。The flowchart of an image recognition process. 交差点へ向かう車両を示す図。The figure which shows the vehicle which heads for an intersection.

以下、本発明の実施形態を図面を参照しつつ説明する。まず図1は、本発明に係る運転支援装置1の実施例における装置構成の概略図である。運転支援装置1は自動車車両に搭載されているとし、電子制御装置10(ECU:Electronic Control Unit)と各種機器とを備える。   Embodiments of the present invention will be described below with reference to the drawings. First, FIG. 1 is a schematic diagram of an apparatus configuration in an embodiment of a driving support apparatus 1 according to the present invention. It is assumed that the driving assistance device 1 is mounted on an automobile vehicle, and includes an electronic control device 10 (ECU: Electronic Control Unit) and various devices.

ECU10は、コンピュータの構造を有するとし、各種演算など情報処理のためのCPU11、CPU11の作業領域のための一時記憶の場としてのRAM12、各種プログラムなどを記憶しておくためのROM13、書き込み可能な不揮発性の記憶部であるメモリ14、各種機器との接続のためのインターフェース部15(I/F)を備えて、これらがバスで接続されて情報の受け渡しが可能となっている。なお本実施例におけるECU10は、カーナビゲーションのためのナビECUに、本発明に関わる機器や機能を付加したものであるとすればよい。メモリ14には、後述するように歩行者用信号機の線画像であるパターン画像14aが記憶されている。   The ECU 10 has a computer structure, a CPU 11 for information processing such as various operations, a RAM 12 as a temporary storage place for the work area of the CPU 11, a ROM 13 for storing various programs, and the like, writable A memory 14 which is a non-volatile storage unit and an interface unit 15 (I / F) for connection with various devices are provided, and these are connected by a bus so that information can be exchanged. Note that the ECU 10 in this embodiment may be a navigation ECU for car navigation to which devices and functions related to the present invention are added. The memory 14 stores a pattern image 14a, which is a line image of a pedestrian traffic light, as will be described later.

I/F15に接続された各種機器としては、GPS受信部21、ジャイロセンサ22、車速センサ23、地図情報データベース24(地図情報DB、DB)、カメラ25、ディスプレイ26、スピーカ27を備える。   Various devices connected to the I / F 15 include a GPS receiver 21, a gyro sensor 22, a vehicle speed sensor 23, a map information database 24 (map information DB, DB), a camera 25, a display 26, and a speaker 27.

GPS受信部21は、GPS(Global Positioning System)衛星からのGPS信号を受信する。ジャイロセンサ22は、車両のロール、ピッチ、ヨー方向の角速度を検出する機能を有するセンサである。検出した角速度を積分することにより車両の方向変化を検出することが可能となる。   The GPS receiver 21 receives a GPS signal from a GPS (Global Positioning System) satellite. The gyro sensor 22 is a sensor having a function of detecting an angular velocity in the roll, pitch, and yaw direction of the vehicle. By integrating the detected angular velocity, it becomes possible to detect a change in the direction of the vehicle.

車速センサ23は、車両の速度を検出するセンサである。車速センサ23は、例えばロータリーエンコーダ等の周知の構成によって、車輪の所定回転角度ごとにパルス信号を発生させ、それを基にして車両の速度を算出する。そしてECU10において車速センサ23で得た車速を積算して車両の走行距離を算出することができるとする。地図情報DB24は、カーナビゲーションで利用される様々な地図情報のデータベースである。地図情報には、交差点の位置情報と、個々の交差点における信号機の有無の情報を含むとすればよい。   The vehicle speed sensor 23 is a sensor that detects the speed of the vehicle. The vehicle speed sensor 23 generates a pulse signal for each predetermined rotation angle of the wheel by a known configuration such as a rotary encoder, and calculates the vehicle speed based on the pulse signal. Assume that the vehicle travel distance of the vehicle can be calculated by integrating the vehicle speed obtained by the vehicle speed sensor 23 in the ECU 10. The map information DB 24 is a database of various map information used in car navigation. The map information may include intersection position information and information on the presence or absence of traffic lights at each intersection.

カメラ25は車両前方の画像を撮影するために装備される。カメラ25は例えばCCDカメラとし、フルカラー画像を撮影する。カメラ25の配置場所は例えば、車室内において車両前方が良好に見渡せる位置であればよい。ディスプレイ26は車両の運転者から見える位置に配置されて、各種情報を表示する。スピーカ27は運転者に各種情報を音声で報知する。   The camera 25 is equipped to take an image in front of the vehicle. The camera 25 is a CCD camera, for example, and takes a full color image. For example, the camera 25 may be disposed at a position where the front of the vehicle can be satisfactorily viewed in the passenger compartment. The display 26 is disposed at a position that is visible to the driver of the vehicle and displays various types of information. The speaker 27 notifies the driver of various information by voice.

上述のとおりECU10はナビECUの機能を有するものであり、GPS受信部21、ジャイロセンサ22、車速センサ23、地図情報DB24を用いて、以下のとおりカーナビゲーション(以下ではナビと略記)の処理を実行する。   As described above, the ECU 10 has the function of a navigation ECU, and uses the GPS receiver 21, gyro sensor 22, vehicle speed sensor 23, and map information DB 24 to process car navigation (hereinafter abbreviated as “navigation”) as follows. Execute.

ECU10によるナビにおける位置算出方法は、主にGPS航法、自律航法、マップマッチング法からなる。このうちGPS航法は、GPS受信部21によってGPS衛星からのGPS信号を受信することによって、地球上での車両の位置(緯度、経度)を算出するものである。   The position calculation method in the navigation by the ECU 10 mainly includes GPS navigation, autonomous navigation, and map matching method. Among these, the GPS navigation is to calculate the position (latitude, longitude) of the vehicle on the earth by receiving a GPS signal from a GPS satellite by the GPS receiver 21.

自律航法では、上記構成の場合、ジャイロセンサによって車両の方向を求め、車速センサで検出した車速を積分して走行距離を求めることによって車両の位置を算出する。CPU11で、上記GPS航法と自律航法とを組み合わせたハイブリッド航法によって車両位置を算出すればよい。   In the autonomous navigation, in the case of the above configuration, the vehicle position is calculated by obtaining the vehicle direction by a gyro sensor and integrating the vehicle speed detected by the vehicle speed sensor to obtain the travel distance. The CPU 11 may calculate the vehicle position by hybrid navigation combining the GPS navigation and the autonomous navigation.

ハイブリッド航法では例えば、最初の位置決定を含めた、時々の数値補正のときにGPS航法を用い、それ以外のときは自律航法によって車両の進行方向及び走行距離を時々刻々算出し、それを積算していくことにより、逐次車両位置を算出していけばよい。ハイブリッド航法を使用することによって、GPS航法ではトンネル内や建築物の陰でGPS衛星からの電波が受信しにくい状況では車両位置の算出が困難である問題点と、自律航法では走行距離を積算していくうちに誤差が累積していき車両位置の精度が低減する問題点とを互いに補うことができるので、高精度に車両位置が算出できる。   In hybrid navigation, for example, GPS navigation is used for occasional numerical corrections, including initial position determination. In other cases, the traveling direction and mileage of the vehicle are calculated momentarily by autonomous navigation, and then integrated. By doing so, the vehicle position may be calculated sequentially. By using hybrid navigation, GPS navigation is difficult to calculate the vehicle position in situations where it is difficult to receive radio waves from GPS satellites in tunnels or behind buildings, and in autonomous navigation, the distance traveled is integrated. Since errors can accumulate over time and the problem of reduced vehicle position accuracy can be compensated for each other, the vehicle position can be calculated with high accuracy.

そして、ハイブリッド航法によって得られた車両位置をマップマッチング法によって修正すればよい。マップマッチング法では、ハイブリッド航法によって得られた車両位置が地図情報DB24が有する地図と照らし合わせて不適切な位置であるとみなされる場合に、地図情報DB24が有する地図に整合させて、より適切な車両位置に修正する。   Then, the vehicle position obtained by the hybrid navigation may be corrected by the map matching method. In the map matching method, when the vehicle position obtained by the hybrid navigation is considered to be an inappropriate position in comparison with the map included in the map information DB 24, the map matching method is matched with the map included in the map information DB 24 and more appropriate. Correct the vehicle position.

本実施例において、上記構成を用いた運転支援の処理手順が図2、3に示されている。図2、3のフローチャートはプログラム化されてROM13やメモリ14に記憶しておき、CPU11がこれを実行することで自動的に順次処理されるとすればよい。図2、3の処理は、運転者が車両を運転している間、常に実行し続けるとすればよい。   In the present embodiment, driving assistance processing procedures using the above-described configuration are shown in FIGS. The flowcharts of FIGS. 2 and 3 may be programmed and stored in the ROM 13 or the memory 14, and may be automatically and sequentially processed by the CPU 11. The processing shown in FIGS. 2 and 3 may be continuously executed while the driver is driving the vehicle.

図4には交差点に向かう車両30が示されている。車両30の進行方向には交差点があり、その交差点には車両用信号機32、歩行者用信号機31、横断歩道が設置されている。横断歩道の手前には車両用信号機32が赤色表示のときに車両30が停止するべき停止線33が標示されている。歩行者用信号機31には、青色表示のための信号灯31a、赤色表示のための信号灯31bが、車両用信号機32には、青色表示のための信号灯32a、黄色表示のための信号灯32b、赤色表示のための信号灯32cが備えられている。   FIG. 4 shows a vehicle 30 heading for an intersection. There is an intersection in the traveling direction of the vehicle 30, and a traffic signal 32 for vehicles, a traffic signal 31 for pedestrians, and a pedestrian crossing are installed at the intersection. A stop line 33 on which the vehicle 30 should stop when the vehicle traffic signal 32 is displayed in red is marked in front of the pedestrian crossing. The pedestrian traffic light 31 has a signal lamp 31a for blue display and a signal light 31b for red display. The vehicle traffic light 32 has a signal light 32a for blue display, a signal light 32b for yellow display, and a red display. A signal lamp 32c is provided.

図2の処理ではまずS10で、車両30の現在位置と進行方向を算出する。上述のとおり、本発明はECU10によって時々刻々カーナビゲーションの処理を実行しつつ、それと平行して本発明に係る運転支援の処理を実行すればよい。したがってS10では、ナビの方で時々刻々行われている、GPS受信部21、ジャイロセンサ22、車速センサ23、DB24を用いて、GPS航法、自律航法、地図マッチング法を組み合わせて実行して算出した車両位置及び進行方向の情報を取得すればよい。   In the process of FIG. 2, first, in S10, the current position and the traveling direction of the vehicle 30 are calculated. As described above, the present invention may execute the driving support process according to the present invention in parallel with the car navigation process performed by the ECU 10 at the same time. Therefore, in S10, the GPS receiver 21, the gyro sensor 22, the vehicle speed sensor 23, and the DB 24, which are performed every moment in the navigation, are used to calculate by executing a combination of GPS navigation, autonomous navigation, and map matching method. What is necessary is just to acquire the information of a vehicle position and the advancing direction.

次にS20では、交差点位置の情報を取得する。ここでの交差点の位置とは、例えば交差点中心の位置とすればよい。本発明ではDB24には、交差点の位置情報、及び個々の交差点における信号機32の有無が記憶されている。S20では、DB24のこれらの情報と、S10で求めた車両30の現在位置と進行方向とから、車両30が現在接近しつつあり、かつ信号機32がある交差点(以下では次の交差点と呼称する)を算出し、その交差点の位置情報を取得する。   Next, in S20, information on the intersection position is acquired. The position of the intersection here may be the position of the center of the intersection, for example. In the present invention, the DB 24 stores the location information of intersections and the presence or absence of traffic lights 32 at each intersection. In S20, from the information in the DB 24 and the current position and traveling direction of the vehicle 30 obtained in S10, the intersection where the vehicle 30 is currently approaching and there is a traffic light 32 (hereinafter referred to as the next intersection). And the position information of the intersection is obtained.

手順S30ではカメラ25によって、車両前方の画像を撮影する。これにより次の交差点が写されたフルカラー画像が撮影される。カメラ25による撮影は、手順S30を実行するたびに画像を撮影してもよく、S30とは関係なく所定の周期で撮影していき、S30では直近の画像を取得するとしてもよい。   In step S30, the camera 25 captures an image ahead of the vehicle. As a result, a full-color image in which the next intersection is photographed is taken. The shooting by the camera 25 may be taken every time step S30 is executed, or may be taken at a predetermined cycle regardless of S30, and the latest image may be acquired in S30.

次にS40では、S30で撮影された画像に対して画像認識処理を実行する。画像認識処理を施す前のオリジナルのフルカラー画像は、例えばメモリ14に記憶しておく。   Next, in S40, an image recognition process is performed on the image photographed in S30. The original full-color image before the image recognition process is performed is stored in the memory 14, for example.

S40の画像認識処理の詳細は図3に示されている。図3の画像認識処理ではまずS200で、S10で取得された車両30の進行方向の情報から、車両30の進行方向を基準とした(あるいはカメラ25の撮影方向を基準とした)交差点の方向を算出し、交差点に歩行者用信号31が設置されているならば撮影画像内のどの領域に歩行者用信号31の画像が存在するはずであるかをCPU11で算出し、その領域を部分画像として取り出す。これにより撮影画像のうち不要な部分を解析対象から外すので、パターンマッチング処理の効率性が向上する。   Details of the image recognition processing in S40 are shown in FIG. In the image recognition processing of FIG. 3, first, in S200, from the information on the traveling direction of the vehicle 30 acquired in S10, the direction of the intersection based on the traveling direction of the vehicle 30 (or based on the shooting direction of the camera 25) is determined. If the pedestrian signal 31 is installed at the intersection, the CPU 11 calculates in which area in the photographed image the pedestrian signal 31 should exist, and uses that area as a partial image. Take out. As a result, unnecessary portions of the captured image are excluded from the analysis target, so that the efficiency of the pattern matching process is improved.

その際、図4に示したとおり、歩行者用信号機31が設置されている場合、それは車両30の前方の左右両側にあるので、画像認識処理の精度を向上させるために、左右両側における歩行者用信号機31があるはずの2つの領域をともに部分画像として抽出してもよい。   At that time, as shown in FIG. 4, when the pedestrian traffic lights 31 are installed, they are on the left and right sides in front of the vehicle 30, so that the pedestrians on the left and right sides are improved in order to improve the accuracy of the image recognition processing. The two regions that should have the traffic signal 31 may be extracted as partial images.

次にS210で、例えばフルカラー画像をグレイスケール画像(濃淡画像)へと変換したうえでエッジ強調処理を実行する。この目的のために例えば、グレイスケール画像に対してソーベルフィルタ等のエッジ強調フィルタを施せばよい。   In step S210, for example, a full color image is converted into a gray scale image (grayscale image), and then edge enhancement processing is executed. For this purpose, for example, an edge enhancement filter such as a Sobel filter may be applied to the gray scale image.

次にS220で、エッジが強調された画像の各点を所定の閾値以上と未満とで2値化して、エッジだけが抽出された線画像を取得する。S220で求めた線画像に対して、後述するS240でパターンマッチングを実行するが、その際に車両30と歩行者用信号機31との間の距離が一定ではないので、線画像とパターン画像とでサイズの不一致が問題となる可能性がある。   Next, in S220, each point of the image in which the edge is emphasized is binarized with a predetermined threshold value or more and less, and a line image from which only the edge is extracted is acquired. Pattern matching is performed on the line image obtained in S220 in S240, which will be described later. At that time, the distance between the vehicle 30 and the pedestrian traffic light 31 is not constant. Size mismatch can be a problem.

そこでS230では、S210で求めた線画像に対して相対的な画像サイズの補正を行う。具体的には、S10で求めた車両30の位置と、S20で求めた交差点の位置とから、車両30と交差点との間の距離を算出する。そして、この距離が大きい程、S220で求めた線画像の相対的なサイズを拡大する。   Accordingly, in S230, the relative image size is corrected with respect to the line image obtained in S210. Specifically, the distance between the vehicle 30 and the intersection is calculated from the position of the vehicle 30 obtained in S10 and the position of the intersection obtained in S20. Then, the larger the distance, the larger the relative size of the line image obtained in S220.

ここで相対的な画像サイズの補正とは、S220で求めた線画像と、パターン画像14とのサイズを相対的に補正するとの意味である。すなわち線画像の相対的なサイズを拡大(縮小)することは、線画像のサイズを拡大(縮小)することでもよく、パターン画像14のサイズを縮小(拡大)することでもよく、これら両操作の組合せでもよい。このように画像の相対的サイズの補正を施すことによって、両画像のサイズが揃うのでパターンマッチングの精度が向上する。   Here, relative image size correction means that the size of the line image obtained in S220 and the pattern image 14 are relatively corrected. That is, enlarging (reducing) the relative size of the line image may be enlarging (reducing) the size of the line image, or reducing (enlarging) the size of the pattern image 14. Combinations are also possible. By correcting the relative size of the images in this way, the sizes of both images are made uniform, so that the accuracy of pattern matching is improved.

次にS240では、S230でサイズ補正された線画像と、予めメモリ14(あるいはROM13)に記憶しておいた歩行者用信号機の線画像(パターン画像)14aとの間で、パターンマッチングを実行する。パターンマッチングの方法としては、正規化相関法等を用いればよい。正規化相関法を用いる場合、S220で得られた線画像とパターン画像14aとから正規化相関係数を算出して、その数値が所定の閾値よりも大きい場合には、S220で得られた線画像とパターン画像14aとは類似性が高く、S220で得られた線画像は歩行者用信号機であると判定すればよい。   Next, in S240, pattern matching is executed between the line image whose size has been corrected in S230 and the line image (pattern image) 14a of the pedestrian traffic light previously stored in the memory 14 (or ROM 13). . As a pattern matching method, a normalized correlation method or the like may be used. When the normalized correlation method is used, a normalized correlation coefficient is calculated from the line image obtained in S220 and the pattern image 14a, and when the numerical value is larger than a predetermined threshold, the line obtained in S220 is used. The image and the pattern image 14a are highly similar, and the line image obtained in S220 may be determined to be a pedestrian traffic light.

図2に戻って次にS50では、S40による画像認識の結果、進行方向に存在する次の交差点における歩行者用信号の画像が検出できたかどうかが判断される。上述のとおりS230で歩行者用信号の画像が検出できた場合(S50:YES)はS60へ進み、検出できなかった場合(S50:NO)はS10へ戻って、車両位置や交差点位置の検出や画像撮影を繰り返す。   Returning to FIG. 2, next, in S50, it is determined whether or not the image of the pedestrian signal at the next intersection existing in the traveling direction has been detected as a result of the image recognition in S40. As described above, when the image of the pedestrian signal can be detected in S230 (S50: YES), the process proceeds to S60, and when it cannot be detected (S50: NO), the process returns to S10 to detect the vehicle position or the intersection position. Repeat image capture.

S60へ進んだ場合は次の交差点における歩行者用信号の画像が検出できた場合なので、S60では、検出された歩行者用信号の画像における信号灯の色を検出する。この処理では、パターンマッチングによって歩行者用信号機31の画像だと判断された線画像のオリジナルのフルカラー画像における、赤色表示の表示灯31bがあるはずの領域、青色表示の表示灯31aがあるはずの領域内の1点、あるいは複数点の色情報を取得する。複数点の場合は、例えば多数決等の決定法で色を決定してもよい。   When the process proceeds to S60, since the image of the pedestrian signal at the next intersection can be detected, the color of the signal lamp in the detected image of the pedestrian signal is detected at S60. In this process, in the original full color image of the line image determined to be an image of the pedestrian traffic light 31 by pattern matching, there should be a red display lamp 31b and a blue display lamp 31a. The color information of one point or a plurality of points in the area is acquired. In the case of a plurality of points, the color may be determined by a determination method such as majority vote.

この色情報から歩行者用信号機31が現在、青色表示点灯中か、赤色表示点灯中か、青色表示点滅中か、を判定する。青色表示が点滅している場合、撮影の瞬間が青色表示が消灯している期間に含まれる可能性がある。したがって青色も赤色も検出されない場合には、青色表示が点滅している期間であると判定するように設定すればよい。   From this color information, it is determined whether the pedestrian traffic light 31 is currently lit in blue display, lit in red display, or flashing in blue display. When the blue display is blinking, there is a possibility that the shooting moment is included in the period during which the blue display is off. Therefore, when neither blue nor red is detected, it may be set to determine that the blue display is blinking.

また色情報の検出によって青色が検出された場合、現在青色表示が点灯中なのか、それとも点滅しているのか、の判定が現時点の画像1枚のみからは判定できない。そこでS30で撮影した画像は、現時点から所定枚数過去の画像を、例えばメモリ14に記憶しておくようにすればよい。そして過去の画像と組み合わせて、現在青色表示が点灯中なのか、点滅しているのか、の判定を実行するように設定すればよい。   If blue is detected by detecting color information, it cannot be determined from only one image at the present time whether the blue display is currently lit or blinking. Therefore, for the image taken in S30, a predetermined number of past images from the present time may be stored in the memory 14, for example. Then, in combination with the past image, it may be set to determine whether the blue display is currently lit or blinking.

S70では、S60で検出された信号灯の色が赤、つまりであるか否かを判定する。赤色表示の場合(S70:YES)はS50へ進み、赤色表示でない場合(S70:NO)は再びS10へ戻って、歩行者用信号が赤色表示になるまで上記手順を繰り返す。   In S70, it is determined whether or not the color of the signal lamp detected in S60 is red. If the display is red (S70: YES), the process proceeds to S50. If the display is not red (S70: NO), the process returns to S10 again, and the above procedure is repeated until the pedestrian signal is displayed in red.

S80では車両用信号機32が黄色表示になる予想時間を算出する。上述のとおり図2の処理では、S70で肯定判断とならない間はS10からS70の処理を繰り返すので、S80へ進んだ場合は、歩行者用信号機31が赤色表示に変化した時点であるとみなすことができる。   In S80, an expected time when the vehicle traffic signal 32 is displayed in yellow is calculated. As described above, in the process of FIG. 2, since the process from S10 to S70 is repeated unless an affirmative determination is made in S70, when the process proceeds to S80, it is considered that the pedestrian traffic light 31 has changed to a red display. Can do.

S80では、歩行者用信号機31が赤色表示に変わった時間に、歩行者用信号機31が赤色表示に変わる時間から車両用信号機32が黄色表示に変わる時間までの予想時間を加算することによって、車両用信号機32が黄色表示に変わる予想時間を算出する。ここで、歩行者用信号機31が赤色表示に変わる時間から車両用信号機32が黄色表示に変わる時間までの予想時間は、例えば、この予想時間の統計的な平均値を予め求めておいて、この数値を用いればよい。   In S80, by adding the expected time from the time when the pedestrian traffic light 31 is changed to red display to the time when the vehicle traffic light 32 is changed to yellow display at the time when the pedestrian traffic light 31 is changed to red display, The expected time when the traffic light 32 changes to yellow display is calculated. Here, the estimated time from the time when the pedestrian traffic light 31 changes to red display to the time when the vehicle traffic light 32 changes to yellow display is obtained, for example, by calculating a statistical average value of the expected time in advance. A numerical value may be used.

S90では車速を検出する。これは車速センサ23により計測すればよい。S100では車両30が停止線33に到達する予想時間を算出する。具体的には、S20で求めた交差点位置から停止線33の位置を算出し、そしてS10で求めた車両30の現在位置と、停止線33の位置とから停止線33までの距離を算出し、さらに停止線33までの距離をS90で求めた車速で除算する。   In S90, the vehicle speed is detected. This may be measured by the vehicle speed sensor 23. In S100, an expected time for the vehicle 30 to reach the stop line 33 is calculated. Specifically, the position of the stop line 33 is calculated from the intersection position obtained in S20, and the distance from the current position of the vehicle 30 obtained in S10 and the position of the stop line 33 to the stop line 33 is calculated. Further, the distance to the stop line 33 is divided by the vehicle speed obtained in S90.

これにより停止線33に到達する予想時間が算出される。なお、S20で求めた交差点位置から停止線33の位置を算出する手順においては、例えば、交差点位置(交差点中心位置)と停止線位置との間の平均的な位置関係を予め求めておいてメモリ14に記憶しておき、この情報を用いればよい。   Thereby, the expected time to reach the stop line 33 is calculated. In the procedure for calculating the position of the stop line 33 from the intersection position obtained in S20, for example, an average positional relationship between the intersection position (intersection center position) and the stop line position is obtained in advance and stored. 14 and use this information.

S110では車両用信号が青色表示である間に車両が停止線33まで到達することができるか否かを判断する。具体的には、S100で求めた停止線到達予想時間よりも、S80で求めた黄色表示開始予想時間の方が後の場合は、青色表示である間に車両が停止線33まで到達することができると判断する。   In S110, it is determined whether or not the vehicle can reach the stop line 33 while the vehicle signal is displayed in blue. Specifically, if the expected yellow display start time obtained in S80 is later than the expected stop line arrival time obtained in S100, the vehicle may reach the stop line 33 while it is displayed in blue. Judge that you can.

逆にS100で求めた停止線到達予想時間よりも、S80で求めた黄色表示開始予想時間の方が先の場合は、青色表示である間に車両が停止線33まで到達しないと判断する。青色表示である間に車両が停止線33まで到達すると判断される場合(S110:YES)は図2の処理を終了し、到達しないと判断される場合(S110:NO)はS120へ進む。   Conversely, if the expected yellow display start time determined in S80 is earlier than the expected stop line arrival time determined in S100, it is determined that the vehicle does not reach the stop line 33 while it is displayed in blue. When it is determined that the vehicle reaches the stop line 33 while it is displayed in blue (S110: YES), the process of FIG. 2 is terminated, and when it is determined that the vehicle does not reach (S110: NO), the process proceeds to S120.

S120では、次の信号での停止を促すメッセージを運転者に報知する。次の信号での停止を促すメッセージとしては、「このまま進むと次の交差点に達する前に黄色信号に変わります」といった内容や、もっと直接的に「次の信号で停止してください」と運転者に停止を要求する内容等とすればよい。報知方法は、ディスプレイ26への文字による表示や、スピーカ27からの音声による報知や、これらの組合せとすればよい。   In S120, the driver is notified of a message prompting the stop at the next signal. The message prompting you to stop at the next traffic light is, for example, “If you continue, it will turn into a yellow traffic light before you reach the next intersection.” Or more directly, “Please stop at the next traffic light.” The content may be a request for stopping. The notification method may be a display by characters on the display 26, a notification by sound from the speaker 27, or a combination thereof.

上記実施例において、S30の手順が撮影手段を構成する。S80の手順が第1算出手段を構成する。S100の手順が第2算出手段を構成する。S110の手順が判定手段を構成する。メモリ14が記憶部を構成する。S240の手順がマッチング手段を構成する。S60の手順が色情報検出手段を構成する。S70の手順が変化時間検出手段を構成する。S10の手順が方向算出手段を構成する。   In the above embodiment, the procedure of S30 constitutes the photographing means. The procedure of S80 constitutes the first calculation means. The procedure of S100 constitutes the second calculation means. The procedure of S110 constitutes a determination unit. The memory 14 constitutes a storage unit. The procedure of S240 constitutes a matching means. The procedure of S60 constitutes color information detection means. The procedure of S70 constitutes a change time detecting means. The procedure of S10 constitutes direction calculation means.

S200、S240の手順が部分画像マッチング手段を構成する。S10、S20の手順が距離算出手段を構成する。S230の手順が補正手段を構成する。S10の手順が車両位置取得手段を構成する。S20の手順が交差点位置取得手段を構成する。S40の手順が速度取得手段を構成する。S120の手順が報知手段を構成する。   The procedures of S200 and S240 constitute a partial image matching unit. The procedures of S10 and S20 constitute distance calculation means. The procedure of S230 constitutes correction means. The procedure of S10 constitutes vehicle position acquisition means. The procedure of S20 constitutes an intersection position acquisition unit. The procedure of S40 constitutes speed acquisition means. The procedure of S120 constitutes notification means.

1 運転支援装置
10 ECU
21 GPS受信部
22 ジャイロセンサ
23 車速センサ
24 地図情報データベース
25 カメラ
26 ディスプレイ
27 スピーカ
1 Driving support device 10 ECU
21 GPS receiver 22 Gyro sensor 23 Vehicle speed sensor 24 Map information database 25 Camera 26 Display 27 Speaker

Claims (8)

車両に装備されて車両前方の画像を撮影する撮影手段と、
前記撮影手段により撮影された撮影画像から、前記車両の進行方向に存在する交差点の歩行者用信号機の信号灯の色変化を検出して、前記交差点の車両用信号機が黄色表示に変化する第1予想時間を算出する第1算出手段と、
前記車両が前記交差点に到達する第2予想時間を算出する第2算出手段と、
前記第1算出手段により算出された前記第1予想時間と、前記第2算出手段により算出された前記第2予想時間と、から前記交差点の車両用信号機が青色表示である間に前記車両が前記交差点に到達するか否かを判定する判定手段と、
を備えたことを特徴とする運転支援装置。
Photographing means mounted on the vehicle for photographing an image in front of the vehicle;
A color change of a signal light of a traffic light for a pedestrian at an intersection existing in the traveling direction of the vehicle is detected from a captured image photographed by the photographing means, and a first prediction that the traffic signal for the vehicle at the intersection changes to a yellow display First calculating means for calculating time;
Second calculating means for calculating a second expected time for the vehicle to reach the intersection;
While the vehicle traffic signal at the intersection is blue, the vehicle is Determination means for determining whether or not to reach an intersection;
A driving support apparatus comprising:
前記第1算出手段は、
歩行者用信号機の線画像であるパターン画像を記憶する記憶部と、
前記撮影画像と前記パターン画像との間でマッチング処理を実行して、前記撮影画像内に歩行者用信号機が撮影されているか否かを判定するマッチング手段と、
を備えた請求項1に記載の運転支援装置。
The first calculation means includes
A storage unit for storing a pattern image that is a line image of a traffic light for a pedestrian;
A matching unit that performs a matching process between the captured image and the pattern image, and determines whether or not a pedestrian traffic light is captured in the captured image;
The driving support device according to claim 1, comprising:
前記第1算出手段は、前記マッチング手段によって、前記撮影手段により撮影された画像内に歩行者用信号機が撮影されていると判定された場合に、前記画像内の歩行者用信号機の画像から、その歩行者用信号機の信号灯の色情報を検出する色情報検出手段を備えた請求項2に記載の運転支援装置。   When it is determined by the matching unit that the pedestrian traffic signal is captured in the image captured by the capturing unit, the first calculation unit determines from the image of the pedestrian traffic signal in the image, The driving support device according to claim 2, further comprising color information detection means for detecting color information of a signal light of the pedestrian traffic light. 前記色情報検出手段により検出された前記色情報によって、前記歩行者信号機が赤色表示に変化した変化時間を検出する変化時間検出手段を備え、
前記第1算出手段は、その変化時間検出手段により検出された前記変化時間に応じて、前記第1予想時間を算出する請求項3に記載の運転支援装置。
According to the color information detected by the color information detection means, comprising a change time detection means for detecting a change time when the pedestrian traffic light has changed to a red display,
The driving support device according to claim 3, wherein the first calculation means calculates the first expected time according to the change time detected by the change time detection means.
前記車両の進行方向を基準とした前記交差点の方向を算出する方向算出手段を備え、
前記マッチング手段は、前記方向算出手段によって算出された前記交差点の方向に応じて、前記撮影画像内において、前記交差点に前記歩行者用信号機が設置されているならば前記歩行者用信号機が存在する領域を、部分画像として抽出し、その部分画像と前記パターン画像との間でマッチング処理を実行する部分画像マッチング手段を備えた請求項2乃至4のいずれか1項に記載の運転支援装置。
Direction calculating means for calculating the direction of the intersection based on the traveling direction of the vehicle;
The matching means includes the pedestrian traffic light if the pedestrian traffic light is installed at the intersection in the captured image in accordance with the direction of the intersection calculated by the direction calculation means. The driving support device according to claim 2, further comprising a partial image matching unit that extracts a region as a partial image and executes a matching process between the partial image and the pattern image.
前記第1算出手段は、
前記車両と前記交差点との間の距離を算出する距離算出手段と、
前記距離算出手段によって算出された前記車両と前記交差点との間の距離に応じて、前記撮影手段により撮影された画像の相対的大きさを補正する補正手段と、
を備えた請求項1乃至5のいずれか1項に記載の運転支援装置。
The first calculation means includes
A distance calculating means for calculating a distance between the vehicle and the intersection;
Correction means for correcting a relative size of an image photographed by the photographing means according to a distance between the vehicle and the intersection calculated by the distance calculating means;
The driving support device according to any one of claims 1 to 5, further comprising:
車両の位置の情報を取得する車両位置取得手段と、
交差点の位置の情報を取得する交差点位置取得手段と、
車両の速度の情報を取得する速度取得手段と、
を備え、
前記第2算出手段は、前記車両位置取得手段により取得された車両位置と、前記信号位置取得手段により取得された信号位置と、前記速度取得手段により取得された車両速度と、から前記第2予想時間を算出する請求項1乃至6のいずれか1項に記載の運転支援装置。
Vehicle position acquisition means for acquiring vehicle position information;
An intersection position acquisition means for acquiring information of the position of the intersection;
Speed acquisition means for acquiring vehicle speed information;
With
The second calculation means is configured to calculate the second prediction from the vehicle position acquired by the vehicle position acquisition means, the signal position acquired by the signal position acquisition means, and the vehicle speed acquired by the speed acquisition means. The driving support device according to claim 1, wherein the time is calculated.
前記判定手段が、前記交差点の車両用信号機が青色表示である間に前記車両は前記交差点に到達しないと判定した場合に、前記交差点での停止を促す情報を運転者に報知する報知手段を備えた請求項1乃至7のいずれか1項に記載の運転支援装置。   In the case where the determination means determines that the vehicle does not reach the intersection while the vehicle traffic signal at the intersection is displayed in blue, a notification means for notifying the driver of information prompting the stop at the intersection is provided. The driving support device according to any one of claims 1 to 7.
JP2009074145A 2009-03-25 2009-03-25 Driving support device Pending JP2010225075A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009074145A JP2010225075A (en) 2009-03-25 2009-03-25 Driving support device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009074145A JP2010225075A (en) 2009-03-25 2009-03-25 Driving support device

Publications (1)

Publication Number Publication Date
JP2010225075A true JP2010225075A (en) 2010-10-07

Family

ID=43042165

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009074145A Pending JP2010225075A (en) 2009-03-25 2009-03-25 Driving support device

Country Status (1)

Country Link
JP (1) JP2010225075A (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103337186A (en) * 2013-06-08 2013-10-02 华中科技大学 Road junction driving auxiliary device for motor vehicle
JP2017016279A (en) * 2015-06-30 2017-01-19 株式会社ゼンリン Drive support device, drive support system, computer program, and data structure
JP2017097539A (en) * 2015-11-20 2017-06-01 株式会社富士通ゼネラル Traveling assist device
KR20180008727A (en) * 2015-06-05 2018-01-24 닛산 지도우샤 가부시키가이샤 Signal device detection device and signal device detection method
CN108154711A (en) * 2016-12-02 2018-06-12 铃木株式会社 Drive assistance device
CN108470448A (en) * 2018-04-13 2018-08-31 西南交通大学 A kind of awkward area's methods of risk assessment of amber light
WO2018199075A1 (en) * 2017-04-28 2018-11-01 いすゞ自動車株式会社 Vehicle control device and vehicle control method
CN109035800A (en) * 2018-09-30 2018-12-18 天津天地人和企业管理咨询有限公司 A kind of method that intelligent transportation video camera automatic detecting machine motor-car does not avoid pedestrian
CN109523791A (en) * 2018-10-31 2019-03-26 武汉烽火众智数字技术有限责任公司 A kind of early warning analysis method and device for being detained vehicle
CN110136482A (en) * 2019-05-27 2019-08-16 上海海事大学 A kind of pedestrian's early warning system

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103337186A (en) * 2013-06-08 2013-10-02 华中科技大学 Road junction driving auxiliary device for motor vehicle
KR101942214B1 (en) * 2015-06-05 2019-01-24 닛산 지도우샤 가부시키가이샤 Signal device detection device and signal device detection method
KR20180008727A (en) * 2015-06-05 2018-01-24 닛산 지도우샤 가부시키가이샤 Signal device detection device and signal device detection method
US10055656B2 (en) 2015-06-05 2018-08-21 Nissan Motor Co., Ltd. Traffic signal detection device and traffic signal detection method
JP2017016279A (en) * 2015-06-30 2017-01-19 株式会社ゼンリン Drive support device, drive support system, computer program, and data structure
JP2017097539A (en) * 2015-11-20 2017-06-01 株式会社富士通ゼネラル Traveling assist device
CN108154711A (en) * 2016-12-02 2018-06-12 铃木株式会社 Drive assistance device
WO2018199075A1 (en) * 2017-04-28 2018-11-01 いすゞ自動車株式会社 Vehicle control device and vehicle control method
JP2018187966A (en) * 2017-04-28 2018-11-29 いすゞ自動車株式会社 Vehicle control apparatus
CN110536818A (en) * 2017-04-28 2019-12-03 五十铃自动车株式会社 Controller of vehicle and control method for vehicle
CN108470448A (en) * 2018-04-13 2018-08-31 西南交通大学 A kind of awkward area's methods of risk assessment of amber light
CN109035800A (en) * 2018-09-30 2018-12-18 天津天地人和企业管理咨询有限公司 A kind of method that intelligent transportation video camera automatic detecting machine motor-car does not avoid pedestrian
CN109523791A (en) * 2018-10-31 2019-03-26 武汉烽火众智数字技术有限责任公司 A kind of early warning analysis method and device for being detained vehicle
CN109523791B (en) * 2018-10-31 2021-10-26 武汉烽火众智数字技术有限责任公司 Early warning analysis method and device for retained vehicle
CN110136482A (en) * 2019-05-27 2019-08-16 上海海事大学 A kind of pedestrian's early warning system

Similar Documents

Publication Publication Date Title
JP2010225075A (en) Driving support device
JP5472163B2 (en) Speed regulation value notification device and speed regulation value notification system
US20110301844A1 (en) Vehicle-mounted information processing apparatus and information processing method
WO2015087502A1 (en) Vehicle self-location device
US9779315B2 (en) Traffic signal recognition apparatus and traffic signal recognition method
US20190073540A1 (en) Vehicle control device, vehicle control method, and storage medium
US11042759B2 (en) Roadside object recognition apparatus
JP6129268B2 (en) Vehicle driving support system and driving support method
JP2019099138A (en) Lane-keep auxiliary method and device
JP5680436B2 (en) Foreign matter adhesion determination device for in-vehicle camera lens
JP2008250503A (en) Operation support device
JP6828655B2 (en) Own vehicle position estimation device
JP2018048949A (en) Object recognition device
US11650321B2 (en) Apparatus and method for detecting tilt of LiDAR apparatus mounted to vehicle
US10970870B2 (en) Object detection apparatus
JP2018063122A (en) Route selection method and route selection device
JP6989284B2 (en) Vehicle position estimation device and program
JP2005182310A (en) Vehicle driving support device
JP2008287572A (en) Vehicle driving support system, driving support device, vehicle, and vehicle driving support method
JP2006344133A (en) Road division line detector
US9988059B2 (en) Vehicle behavior detection device
US11472401B2 (en) Parking assistance device
JP2010108344A (en) Driving support device
JP2008249634A (en) Object detector
US20200342761A1 (en) Notification apparatus and in-vehicle device