JP2008123443A - Driving support apparatus - Google Patents

Driving support apparatus Download PDF

Info

Publication number
JP2008123443A
JP2008123443A JP2006309392A JP2006309392A JP2008123443A JP 2008123443 A JP2008123443 A JP 2008123443A JP 2006309392 A JP2006309392 A JP 2006309392A JP 2006309392 A JP2006309392 A JP 2006309392A JP 2008123443 A JP2008123443 A JP 2008123443A
Authority
JP
Japan
Prior art keywords
warning
driver
vehicle
feature
flag
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006309392A
Other languages
Japanese (ja)
Other versions
JP4929997B2 (en
Inventor
Takayuki Miyajima
孝幸 宮島
Kazuji Konno
和司 紺野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Aisin Corp
Original Assignee
Aisin Seiki Co Ltd
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin Seiki Co Ltd, Aisin AW Co Ltd filed Critical Aisin Seiki Co Ltd
Priority to JP2006309392A priority Critical patent/JP4929997B2/en
Publication of JP2008123443A publication Critical patent/JP2008123443A/en
Application granted granted Critical
Publication of JP4929997B2 publication Critical patent/JP4929997B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a driving support apparatus that can support a driver's operation by issuing alarms only when a warning to urge the driver to look at pedestrians in intersections. <P>SOLUTION: If there are various features in an intersection ahead of a vehicle 2, a CPU 41 determines whether or not the driver recognizes each feature (such as a signal or a stop line) in the intersection in accordance with feature information (such as a latitude-longitude coordinate position of an installation, or a height from the ground) on each feature and detection signals of the driver's face direction and sight direction acquired by applying image processing to a vide signal from a driver camera 52 via a camera ECU 51 (S16: YES, S18, S21, S22). If determined that the driver recognizes each feature in the intersection, the CPU 41 turns on a feature recognition flag to prevent a speaker 16 from warning the driver (S22, S23: NO). <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、歩行者や自転車等の警告対象物を検出して運転者に対して警告を行う運転支援装置に関するものである。   The present invention relates to a driving support device that detects a warning object such as a pedestrian or a bicycle and warns the driver.

従来より、歩行者や自転車等の警告対象物を検出して運転者に対して警告を行う運転支援装置に関し種々提案されている。
例えば、車両周囲の画像を撮像する撮像手段と、撮像手段により撮像された画像に基づいて検出対象物体の位置を検出する物体検出手段と、車両を運転する運転者の視線方向を検出する視線検出手段と、物体検出手段により検出された検出対象物体の位置と、視線検出手段により検出された運転者の視線方向とに基づいて、運転者が検出対象物体を認識しているか否かを判断する判断手段と、判断手段により運転者が認識していないと判断された検出対象物体の位置が、所定の警告領域内にある場合に、運転者に警告を促す警告手段とから構成された運転支援装置がある(例えば、特許文献1参照。)。
特開2006−27481号公報(段落(0014)〜(0083)、図1〜図12)
Conventionally, various driving assistance apparatuses that detect warning objects such as pedestrians and bicycles and warn the driver have been proposed.
For example, an imaging unit that captures an image around the vehicle, an object detection unit that detects the position of the detection target object based on the image captured by the imaging unit, and a gaze detection that detects the gaze direction of the driver driving the vehicle Based on the means, the position of the detection target object detected by the object detection means, and the driver's gaze direction detected by the gaze detection means, it is determined whether or not the driver recognizes the detection target object. Driving support composed of determination means and warning means for urging the driver to warn when the position of the detection target object determined by the determination means to be not recognized by the driver is within a predetermined warning area There is an apparatus (for example, refer to Patent Document 1).
JP 2006-27481 A (paragraphs (0014) to (0083), FIGS. 1 to 12)

しかしながら、前記した特許文献1に記載された運転支援装置では、交差点付近において、運転者が歩行者を認識しているか否かによって、警告手段を介した警告を行うか否かを決定しているため、例えば、運転者が歩行者を認識していなくても、交差点に設置されている信号機や手前にある一時停止線を運転者が認識していても、警告手段を介した警告が行われることとなる。このため、適切なタイミングで警告を行って運転者の運転を支援することが難しいという問題がある。   However, in the driving assistance apparatus described in Patent Document 1 described above, whether or not to issue a warning via a warning unit is determined depending on whether or not the driver recognizes a pedestrian near the intersection. Therefore, for example, even if the driver does not recognize a pedestrian, even if the driver recognizes a traffic light installed at an intersection or a temporary stop line in front, a warning is issued via a warning means. It will be. For this reason, there is a problem that it is difficult to provide a warning at an appropriate timing to assist the driver in driving.

そこで、本発明は、上述した問題点を解決するためになされたものであり、歩行者等の確認の警告が必要な場合にのみ警告を行って運転者の運転を支援することが可能となる運転支援装置を提供することを目的とする。   Therefore, the present invention has been made to solve the above-described problems, and only when a warning for confirmation of a pedestrian or the like is necessary, a warning can be given to support the driving of the driver. It aims at providing a driving assistance device.

前記目的を達成するため請求項1に係る運転支援装置は、警告対象物を検出して運転者に対して警告を行う運転支援装置(1)において、地物についての地物情報を含む地図情報を記憶する地図情報記憶手段(25)と、車両の自車位置を検出する自車位置検出手段(11)と、車両を運転する運転者の視線方向を検出する視線検出手段(13、51、52)と、前記地図情報に基づいて前記自車位置の進行方向前方の地物についての地物情報を取得する地物情報取得手段(13)と、前記地物情報取得手段によって取得された地物情報と、前記視線検出手段によって検出された前記運転者の視線方向とに基づいて、該運転者が前記進行方向前方の地物を認識しているか否かを判定する地物認識判定手段(13)と、前記運転者が前記進行方向前方の地物を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御する警告制御手段(13)と、を備えたことを特徴とする。   In order to achieve the above object, the driving support device according to claim 1 is a driving support device (1) that detects a warning object and warns the driver, and includes map information including feature information about the feature. Map information storage means (25) for storing the vehicle, vehicle position detection means (11) for detecting the vehicle position of the vehicle, and line-of-sight detection means (13, 51,) for detecting the line-of-sight direction of the driver driving the vehicle. 52), feature information acquisition means (13) for acquiring feature information about a feature ahead in the traveling direction of the vehicle position based on the map information, and the ground acquired by the feature information acquisition means On the basis of the object information and the driver's line-of-sight direction detected by the line-of-sight detection unit, a feature recognition determination unit that determines whether or not the driver recognizes a feature ahead of the traveling direction ( 13) and the driver If it is determined that recognizes the front of the feature it is characterized in that it includes a warning control means for controlling to suppress the warning made to the driver (13), the.

また、請求項2に係る運転支援装置は、請求項1に記載の運転支援装置(1)において、前記車両の前方を走行する他車両の位置情報を含む他車両情報を取得する他車両情報取得手段(13、61、62)と、前記他車両情報取得手段によって取得された他車両情報と、前記視線検出手段によって検出された前記運転者の視線方向とに基づいて、該運転者が前記他車両を認識しているか否かを判定する他車両認識判定手段(13)と、を備え、前記警告制御手段(13)は、前記運転者が前記他車両を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御することを特徴とする。   Further, the driving support device according to claim 2 is the driving support device (1) according to claim 1, wherein the other vehicle information acquisition includes acquiring other vehicle information including position information of the other vehicle traveling in front of the vehicle. Based on the means (13, 61, 62), the other vehicle information acquired by the other vehicle information acquisition means, and the driver's line-of-sight direction detected by the line-of-sight detection means, the driver Another vehicle recognition determination means (13) for determining whether or not the vehicle is recognized, and the warning control means (13) determines that the driver recognizes the other vehicle Is characterized in that control is performed to suppress warnings given to the driver.

また、請求項3に係る運転支援装置は、請求項1又は請求項2に記載の運転支援装置(1)において、前記警告対象物の位置情報を含む警告対象物情報を取得する警告対象物情報取得手段(13、51、53)と、前記警告対象物情報取得手段によって取得された警告対象物情報と、前記視線検出手段によって検出された前記運転者の視線方向とに基づいて、該運転者が前記警告対象物を認識しているか否かを判定する警告対象物認識判定手段(13)と、を備え、前記警告制御手段(13)は、前記運転者が前記警告対象物を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御することを特徴とする。   Further, the driving support device according to claim 3 is the warning object information for acquiring the warning object information including the position information of the warning object in the driving support device (1) according to claim 1 or 2. Based on the acquisition means (13, 51, 53), the warning object information acquired by the warning object information acquisition means, and the driver's line-of-sight direction detected by the line-of-sight detection means, the driver Warning object recognition determination means (13) for determining whether or not the warning object is recognized, wherein the warning control means (13) recognizes the warning object by the driver. When it is determined that the vehicle is present, control is performed so as to suppress a warning given to the driver.

また、請求項4に係る運転支援装置は、請求項3に記載の運転支援装置(1)において、前記車両の車速を検出する車速検出手段(21)と、前記自車位置から前記警告対象物までの距離を算出する距離算出手段(13)と、前記車速検出手段によって検出した車速と、前記距離算出手段によって算出した距離とに基づいて該自車位置から前記警告対象物に衝突するまでの予測残余時間を算出する衝突残余時間算出手段(13)と、を備え、前記警告制御手段(13)は、前記衝突残余時間算出手段によって算出された予測残余時間が所定第1時間より長いときには、前記運転者が前記進行方向前方の地物又は前記警告対象物を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御し、前記予測残余時間が所定第1時間以下になったときには、前記運転者が前記警告対象物を認識していると判定された場合、又は、前記運転者が前記進行方向前方の地物を認識していると判定され、且つ、車速が減速した場合には、運転者に対して行う警告を抑制するように制御することを特徴とする。   According to a fourth aspect of the present invention, there is provided a driving support device according to the third aspect, wherein the vehicle speed detection means (21) for detecting the vehicle speed of the vehicle and the warning object from the own vehicle position. Distance calculation means (13) for calculating the distance to the vehicle, the vehicle speed detected by the vehicle speed detection means, and the distance calculated by the distance calculation means until the vehicle collides with the warning object from the vehicle position. Collision remaining time calculating means (13) for calculating a predicted remaining time, and the warning control means (13), when the predicted remaining time calculated by the collision remaining time calculating means is longer than a predetermined first time, When it is determined that the driver recognizes the feature ahead in the traveling direction or the warning object, control is performed so as to suppress warning given to the driver, and the predicted remaining time is predetermined. When it is less than one hour, it is determined that the driver is recognizing the warning object, or that the driver is recognizing a feature ahead of the traveling direction, and When the vehicle speed decelerates, control is performed so as to suppress warnings given to the driver.

また、請求項5に係る運転支援装置は、請求項4に記載の運転支援装置(1)において、前記警告制御手段(13)は、前記予測残余時間が前記所定第1時間よりも短い所定第2時間以下になったときには、前記運転者が前記進行方向前方の地物及び前記警告対象物を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御することを特徴とする。   According to a fifth aspect of the present invention, there is provided the driving support device according to the fourth aspect, wherein the warning control means (13) is configured to set the predetermined remaining time shorter than the predetermined first time. When it is determined that the driver recognizes the feature ahead of the traveling direction and the warning object when the time is less than two hours, control is performed so as to suppress the warning given to the driver. It is characterized by doing.

また、請求項6に係る運転支援装置は、請求項1に記載の運転支援装置(1)において、前記車両の車速を検出する車速検出手段(21)と、前記自車位置から前記警告対象物までの距離を算出する距離算出手段(13)と、前記車速検出手段によって検出した車速と、前記距離算出手段によって算出した距離とに基づいて該自車位置から前記警告対象物に衝突するまでの予測残余時間を算出する衝突残余時間算出手段(13)と、を備え、前記警告制御手段(13)は、前記衝突残余時間算出手段によって算出された予測残余時間が所定時間以下である場合には、運転者に対して行う警告の抑制を禁止するように制御することを特徴とする。   According to a sixth aspect of the present invention, there is provided a driving support device according to the first aspect, wherein the vehicle speed detecting means (21) for detecting the vehicle speed of the vehicle and the warning object from the own vehicle position. Distance calculation means (13) for calculating the distance to the vehicle, the vehicle speed detected by the vehicle speed detection means, and the distance calculated by the distance calculation means until the vehicle collides with the warning object from the vehicle position. A collision remaining time calculating means (13) for calculating a predicted remaining time, and the warning control means (13), when the predicted remaining time calculated by the collision remaining time calculating means is not more than a predetermined time. The control is performed so as to prohibit the suppression of the warning given to the driver.

また、請求項7に係る運転支援装置は、請求項4乃至請求項6のいずれかに記載の運転支援装置(1)において、前記警告制御手段(13)は、前記衝突残余時間算出手段によって算出された予測残余時間に基づいて、警告内容を選択することを特徴とする。   According to a seventh aspect of the present invention, in the driving support device (1) according to any one of the fourth to sixth aspects, the warning control means (13) is calculated by the collision remaining time calculating means. The warning content is selected based on the predicted remaining time.

更に、請求項8に係る運転支援装置は、請求項1乃至請求項7のいずれかに記載の運転支援装置(1)において、前記地物は、道路の路面に設けられたペイント表示(72、73)と、道路に沿って設けられた立体物(71)とを含むことを特徴とする。   Further, the driving support device according to claim 8 is the driving support device (1) according to any one of claims 1 to 7, wherein the feature is a paint display (72, 73) and a three-dimensional object (71) provided along the road.

前記構成を有する請求項1に係る運転支援装置では、自車位置の進行方向前方の地物(例えば、信号機、一旦停止標識、一端停止線等である。)に係る地物情報(例えば、設置されている緯度と経度の座標位置、地上からの高さ等である。)と、視線検出手段によって検出された運転者の視線方向とに基づいて、該運転者が進行方向前方の地物を認識しているか否かが判定される。そして、運転者が進行方向前方の地物を認識していると判定された場合には、歩行者や左右から接近する他車両等の警告対象物を検出したときに、運転者に対して行われる警告が抑制される。
これにより、運転者が歩行者や左右から接近する他車両等の警告対象物を認識していなくても、交差点に設置されている信号機や手前にある一時停止線等の進行方向前方の地物を運転者が認識している場合には、運転者は該交差点の手前や一時停止線の手前で一旦停止するため、運転者に対して警告を行う必要が無いことから、歩行者等の確認の警告が必要な場合にのみ警告を行って運転者の運転を支援することが可能となる。
In the driving support device according to claim 1 having the above-described configuration, the feature information (for example, installation) related to the features in front of the own vehicle position in the traveling direction (for example, a traffic light, a temporary stop sign, a one-stop line, etc.). The latitude and longitude coordinate positions, the height from the ground, etc.) and the driver's line-of-sight direction detected by the line-of-sight detection means, It is determined whether or not it is recognized. If it is determined that the driver recognizes a feature ahead in the direction of travel, when a warning object such as a pedestrian or another vehicle approaching from the left or right is detected, the driver performs the operation. Warnings are suppressed.
As a result, even if the driver is not aware of warning objects such as pedestrians and other vehicles approaching from the left and right, features ahead in the direction of travel such as traffic lights installed at intersections and stop lines in front of them If the driver is aware of this, the driver will stop before the intersection or before the temporary stop line, so there is no need to warn the driver. It is possible to assist the driver's driving by giving a warning only when the warning is required.

また、請求項2に係る運転支援装置では、車両の前方を走行する他車両の位置情報を含む他車両情報と、視線検出手段によって検出された運転者の視線方向とに基づいて、該運転者がこの交差点において前方を走行する他車両を認識しているか否かが判定される。そして、運転者がこの交差点において前方を走行する他車両を認識していると判定された場合には、歩行者や左右から接近する他車両等の警告対象物を検出したときに、運転者に対して行われる警告が抑制される。
これにより、運転者が歩行者や左右から接近する他車両等、及び信号機等の地物を認識していなくても、前方を走行する他車両を認識している場合には、この他車両が一端停止する場合には、運転者は他車両の後方で一旦停止するため、運転者に対して警告を行う必要が無いことから、歩行者等の確認の警告が必要な場合にのみ警告を行って運転者の運転を支援することが可能となる。
In the driving support device according to claim 2, the driver is based on the other vehicle information including the position information of the other vehicle traveling in front of the vehicle and the driver's line-of-sight direction detected by the line-of-sight detection means. It is determined whether or not another vehicle traveling ahead is recognized at this intersection. When it is determined that the driver recognizes another vehicle traveling ahead at this intersection, the driver is notified when a warning object such as a pedestrian or another vehicle approaching from the left or right is detected. Warnings given to the user are suppressed.
As a result, if the driver recognizes other vehicles traveling ahead even if he / she does not recognize pedestrians, other vehicles approaching from the left and right, and features such as traffic lights, the other vehicles When stopping once, the driver stops behind the other vehicle, so there is no need to warn the driver, so only a warning for confirmation of pedestrians is required. Thus, it becomes possible to support the driving of the driver.

また、請求項3に係る運転支援装置では、歩行者や左右から接近する他車両等の警告対象物の位置情報を含む警告対象物情報と、視線検出手段によって検出された運転者の視線方向とに基づいて、該運転者が警告対象物を認識しているか否かが判定される。そして、運転者が警告対象物を認識していると判定された場合には、歩行者や左右から接近する他車両等の警告対象物を検出したときに、運転者に対して行われる警告が抑制される。
これにより、運転者が進行方向前方の地物(例えば、信号機、一旦停止標識、一端停止線等である。)や前方を走行する他車両を認識していなくても、該運転手が歩行者や左右から接近する他車両等の警告対象物を認識している場合には、運転者は警告対象物の手前で一旦停止するため、運転者に対して警告を行う必要が無いことから、歩行者等の確認の警告が必要な場合にのみ警告を行って、運転者の運転を更に適切に支援することが可能となる。
In the driving support device according to claim 3, warning object information including position information of a warning object such as a pedestrian or another vehicle approaching from the left and right, and the driver's line-of-sight direction detected by the line-of-sight detection means Based on the above, it is determined whether or not the driver recognizes the warning object. When it is determined that the driver recognizes the warning object, a warning is given to the driver when a warning object such as a pedestrian or another vehicle approaching from the left or right is detected. It is suppressed.
Thus, even if the driver is not aware of features in front of the traveling direction (for example, a traffic light, a stop sign, a stop line, etc.) or other vehicles traveling in front, the driver is a pedestrian. If there is a warning object such as another vehicle approaching from the left or right, the driver will stop before the warning object, so there is no need to warn the driver. It is possible to provide a warning only when a confirmation warning of the driver or the like is necessary, and to further appropriately support the driving of the driver.

また、請求項4に係る運転支援装置では、車速検出手段によって検出した自車両の車速と、距離算出手段によって算出した警告対象物までの距離とに基づいて算出した該自車位置から警告対象物に衝突するまでの予測残余時間が、所定第1時間より長いときには、運転者が進行方向前方の地物又は歩行者や左右から接近する他車両等の警告対象物を認識していると判定された場合には、運転者に対して行われる警告が抑制される。また、この算出した予測残余時間が所定第1時間以下になったときには、運転者が警告対象物を認識していると判定された場合、又は、運転者がこ交差点における地物を認識していると判定され、且つ、車速が減速した場合には、運転者に対して行われる警告が抑制される。   In the driving support device according to claim 4, the warning object is calculated from the vehicle position calculated based on the vehicle speed detected by the vehicle speed detection means and the distance to the warning object calculated by the distance calculation means. When the estimated remaining time until the vehicle collides with the vehicle is longer than the predetermined first time, it is determined that the driver recognizes a warning object such as a feature ahead in the traveling direction or a pedestrian or another vehicle approaching from the left and right. If this happens, warnings given to the driver are suppressed. When the calculated predicted remaining time is equal to or less than the predetermined first time, when it is determined that the driver recognizes the warning object, or the driver recognizes the feature at this intersection. When it is determined that the vehicle speed is reduced and the vehicle speed is reduced, the warning given to the driver is suppressed.

これにより、歩行者や左右から接近する他車両等の警告対象物に衝突するまでの予測残余時間が、所定第1時間より長いときには、運転者が進行方向前方の地物又は警告対象物のいずれか一方を認識している場合には、運転者に対して警告を行う必要が無いため、警告は抑制されるが、予測残余時間が所定第1時間以下になったときには、運転者が警告対象物を認識していると判定した場合、又は、運転者がこの交差点における地物を認識していると判定し、且つ、車速が減速した場合にのみ警告を行わない。このため、運転者が警告対象物の手前で一旦停止するか否かをより正確に判断して警告することが可能となり、運転者がより安全な運転をするように支援することが可能となる。   As a result, when the predicted remaining time until the vehicle collides with a warning object such as a pedestrian or another vehicle approaching from the left and right is longer than the predetermined first time, either the feature ahead of the traveling direction or the warning object If either of them is recognized, it is not necessary to give a warning to the driver, so the warning is suppressed. However, when the predicted remaining time falls below the predetermined first time, the driver is warned. The warning is not issued only when it is determined that an object is recognized, or when it is determined that the driver recognizes a feature at this intersection and the vehicle speed is reduced. For this reason, it becomes possible to judge more accurately whether or not the driver temporarily stops in front of the warning object, and to give a warning so that the driver can support safer driving. .

また、請求項5に係る運転支援装置では、算出した予測残余時間が所定第1時間よりも短い所定第2時間以下になったときには、運転者が進行方向前方の地物及び歩行者や左右から接近する他車両等の警告対象物を認識していると判定された場合には、運転者に対して行われる警告が抑制される。
これにより、歩行者や左右から接近する他車両等の警告対象物に衝突するまでの予測残余時間が、所定第2時間以下のときには、運転者が進行方向前方の地物と警告対象物の両方を認識した場合にのみ警告を行わない。このため、運転者が警告対象物の手前で確実に一旦停止するか否かを正確に判断して警告することが可能となり、該運転者が更に安全な運転をするように支援することが可能となる。
Further, in the driving support device according to claim 5, when the calculated predicted remaining time is equal to or shorter than the predetermined second time shorter than the predetermined first time, the driver can detect the feature in front of the traveling direction and the pedestrian and the left and right. When it is determined that a warning object such as an approaching other vehicle is recognized, a warning given to the driver is suppressed.
As a result, when the predicted remaining time until the vehicle collides with a warning object such as a pedestrian or another vehicle approaching from the left and right is equal to or shorter than the predetermined second time, both the feature ahead of the traveling direction and the warning object Do not warn only when it is recognized. For this reason, it is possible to accurately determine whether or not the driver will surely stop once before the warning object, and to assist the driver in driving more safely. It becomes.

また、請求項6に係る運転支援装置では、車速検出手段によって検出した自車両の車速と、距離算出手段によって算出した警告対象物までの距離とに基づいて算出した該自車位置から警告対象物に衝突するまでの予測残余時間が、所定時間以下のときには、運転者が進行方向前方の地物を認識していると判定されていても、運転者に対して行う警告の抑制が禁止される。
これにより、運転者が進行方向前方の地物を認識していても、運転者が警告対象物の手前で一旦停止するように警告することが可能となり、運転者がより安全な運転をするように支援することが可能となる。
In the driving support device according to claim 6, the warning object is calculated from the vehicle position calculated based on the vehicle speed detected by the vehicle speed detection means and the distance to the warning object calculated by the distance calculation means. When the predicted remaining time until the vehicle collides with the vehicle is less than or equal to the predetermined time, even if it is determined that the driver recognizes the feature ahead in the traveling direction, suppression of warnings given to the driver is prohibited. .
As a result, even if the driver recognizes a feature ahead in the direction of travel, the driver can be warned to stop before the warning object, so that the driver can drive more safely. It becomes possible to support.

また、請求項7に係る運転支援装置では、車速検出手段によって検出した自車両の車速と、距離算出手段によって算出した警告対象物までの距離とに基づいて算出した該自車位置から警告対象物に衝突するまでの予測残余時間に基づいて、警告内容が選択されて運転者に警告が行われる。
これにより、運転者は、警告内容に基づいて警告対象物の手前で一旦停止する緊急度を容易に認識することが可能となり、運転者がより安全な運転をするように支援することが可能となる。
Further, in the driving support device according to claim 7, the warning object is calculated from the vehicle position calculated based on the vehicle speed detected by the vehicle speed detection means and the distance to the warning object calculated by the distance calculation means. The warning content is selected based on the estimated remaining time until the vehicle collides with the vehicle, and the driver is warned.
This makes it possible for the driver to easily recognize the degree of urgency to stop before the warning object based on the warning content, and to assist the driver in driving more safely. Become.

更に、請求項8に係る運転支援装置では、道路の路面に設けられた一端停止線等の平面的なペイント表示と、道路に沿って設けられた道路標識や信号機等の立体物との両方を地物として認識しているか否かを判定することが可能となり、運転者が地物を認識しているか否かの判定の信頼度をより高めることが可能となる。   Furthermore, in the driving support device according to claim 8, both a planar paint display such as a one-stop line provided on the road surface and a three-dimensional object such as a road sign and a traffic light provided along the road are provided. It is possible to determine whether or not the object is recognized as a feature, and it is possible to further increase the reliability of the determination as to whether or not the driver recognizes the feature.

以下、本発明に係る運転支援装置をナビゲーション装置について具体化した実施例1及び実施例2に基づき図面を参照しつつ詳細に説明する。   Hereinafter, a driving support device according to the present invention will be described in detail with reference to the drawings based on a first embodiment and a second embodiment in which the navigation device is embodied.

先ず、実施例1に係るナビゲーション装置が搭載される車両の概略構成について図1に基づいて説明する。図1は実施例1に係るナビゲーション装置1が搭載される車両2の概略構成図である。   First, a schematic configuration of a vehicle on which the navigation device according to the first embodiment is mounted will be described with reference to FIG. FIG. 1 is a schematic configuration diagram of a vehicle 2 on which a navigation device 1 according to the first embodiment is mounted.

図1に示すように、車両2に対して設置されたナビゲーション装置1のナビゲーション制御部13には、CCDカメラ等を駆動制御するカメラECU(Electronic Control Unit)51が電気的に接続されている。また、車両2の先端上端部左側と先端上端部右側、及び後端部左側と後端端部右側には、CCDカメラ等により構成される各車外カメラ53が設置されている。また、スピードメータ付近には、CCDカメラ等により構成されるドライバカメラ52が設置されている。
また、ナビゲーション制御部13には、ミリ波レーダ等を駆動制御するレーダECU(Electronic Control Unit)61が電気的に接続されている。また、車両2の先端部中央位置と後端部中央位置には、各ミリ波レーダ62が設置されている。
As shown in FIG. 1, a camera ECU (Electronic Control Unit) 51 that drives and controls a CCD camera or the like is electrically connected to the navigation control unit 13 of the navigation device 1 installed on the vehicle 2. In addition, on the left end of the top end of the vehicle 2 and on the right side of the top end of the front end, and on the left side of the rear end and on the right side of the end of the rear end, each outside camera 53 constituted by a CCD camera or the like is installed. A driver camera 52 composed of a CCD camera or the like is installed near the speedometer.
The navigation control unit 13 is electrically connected to a radar ECU (Electronic Control Unit) 61 that drives and controls a millimeter wave radar or the like. Further, millimeter wave radars 62 are installed at the front end center position and the rear end center position of the vehicle 2.

また、ナビゲーション装置1は、車両2の室内のセンターコンソール又はパネル面に備え付けられ、液晶ディスプレイ(LCD)15に地図や目的地までの探索経路を表示すると共に、スピーカ16によって経路案内に関する音声ガイダンスを出力する。また、ナビゲーション装置1は、所定の条件を満たした場合には、カメラECU51に制御信号を送信し、車両2の前方の歩行者等を検出することができる。また、ナビゲーション装置1は、所定の条件を満たした場合には、レーダECU61に制御信号を送信し、車両2の前後に接近する他車両までの距離や他車両の相対速度を検出することができる。   The navigation device 1 is provided on the center console or the panel surface of the vehicle 2, displays a search route to a map or destination on a liquid crystal display (LCD) 15, and provides voice guidance regarding route guidance by a speaker 16. Output. Further, the navigation device 1 can detect a pedestrian or the like ahead of the vehicle 2 by transmitting a control signal to the camera ECU 51 when a predetermined condition is satisfied. In addition, when the predetermined condition is satisfied, the navigation device 1 can transmit a control signal to the radar ECU 61 to detect the distance to the other vehicle approaching the front and rear of the vehicle 2 and the relative speed of the other vehicle. .

また、カメラECU51は、ナビゲーション装置1から受信した制御信号に基づいて、各車外カメラ53の映像信号を画像処理して、車両2の前方の歩行者や自転車等を検出する。また、カメラECU51は、ナビゲーション装置1から受信した制御信号に基づいて、ドライバカメラ52の映像信号を画像処理して運転者が左右確認を行う際の顔の動きや、目の動きを検出して、顔向き及び視線方向の検出信号を出力する電子制御ユニットで、ドライバカメラ52及び各車外カメラ53が接続されている。
また、レーダECU61は、ナビゲーション装置1から受信した制御信号に基づいて、ミリ波レーダ62の検出信号に基づいて前後の車両との距離や相対速度を計測する電子制御ユニットで、ミリ波レーダ62が接続されている。
Further, the camera ECU 51 detects the pedestrians, bicycles, and the like ahead of the vehicle 2 by performing image processing on the video signals of the respective outside cameras 53 based on the control signal received from the navigation device 1. The camera ECU 51 detects the movement of the face and the movement of the eyes when the driver performs left-right confirmation by performing image processing on the video signal of the driver camera 52 based on the control signal received from the navigation device 1. An electronic control unit that outputs detection signals for the face direction and the line-of-sight direction, to which a driver camera 52 and each vehicle camera 53 are connected.
The radar ECU 61 is an electronic control unit that measures the distance and relative speed between the front and rear vehicles based on the detection signal of the millimeter wave radar 62 based on the control signal received from the navigation device 1. It is connected.

次に、実施例1に係る車両2の制御系に係る構成について特にナビゲーション装置1を中心にして図2に基づき説明する。図2は車両2に搭載されるナビゲーション装置1を中心とした制御系を模式的に示すブロック図である。   Next, the configuration related to the control system of the vehicle 2 according to the first embodiment will be described with reference to FIG. FIG. 2 is a block diagram schematically showing a control system centered on the navigation device 1 mounted on the vehicle 2.

図2に示すように、車両2の制御系は、ナビゲーション装置1と、このナビゲーション装置1に対して電気的に接続されたカメラECU51、レーダECU61を基本にして構成され、各制御装置に対して所定の周辺機器が接続されている。   As shown in FIG. 2, the control system of the vehicle 2 is configured based on a navigation device 1 and a camera ECU 51 and a radar ECU 61 that are electrically connected to the navigation device 1. A predetermined peripheral device is connected.

このナビゲーション装置1は、自車の現在位置(以下、「自車位置」という。)を検出する現在地検出処理部11と、各種のデータが記録されたデータ記録部12と、入力された情報に基づいて、各種の演算処理を行うナビゲーション制御部13と、操作者からの操作を受け付ける操作部14と、操作者に対して地図等の情報を表示する液晶ディスプレイ(LCD)15と、経路案内に関する音声ガイダンスを出力するスピーカ16と、道路交通情報センタ(VICS:登録商標)等の情報センタとの間で相互に通信を行う通信装置17等から構成されている。また、ナビゲーション制御部13には、自車の走行速度を検出する車速センサ21が接続されている。
また、通信装置17は、例えばLAN(Local Area Network)、WAN(Wide Area Network)、イントラネット、携帯電話回線網、電話回線網、公衆通信回線網、専用通信回線網、インターネット等の通信回線網等の通信系に接続して使用することができる。
The navigation device 1 includes a current position detection processing unit 11 that detects a current position of the own vehicle (hereinafter referred to as “own vehicle position”), a data recording unit 12 that records various data, and input information. Based on the navigation control unit 13 that performs various arithmetic processing, the operation unit 14 that receives operations from the operator, a liquid crystal display (LCD) 15 that displays information such as a map to the operator, and route guidance The communication device 17 is configured to communicate with each other between a speaker 16 that outputs voice guidance and an information center such as a road traffic information center (VICS: registered trademark). The navigation control unit 13 is connected to a vehicle speed sensor 21 that detects the traveling speed of the vehicle.
The communication device 17 is, for example, a LAN (Local Area Network), a WAN (Wide Area Network), an intranet, a mobile phone network, a telephone network, a public communication network, a dedicated communication network, a communication network such as the Internet, etc. It can be used by connecting to other communication systems.

以下に、ナビゲーション装置1を構成する各構成要素について説明する。
図2に示すように、現在地検出処理部21は、GPS31、方位センサ32、距離センサ33、高度計(図示せず)等からなり、現在の自車の位置、方位、目標物(例えば、交差点)までの距離等を検出することが可能となっている。
Below, each component which comprises the navigation apparatus 1 is demonstrated.
As shown in FIG. 2, the current position detection processing unit 21 includes a GPS 31, a direction sensor 32, a distance sensor 33, an altimeter (not shown), and the like, and the current position, direction, and target (for example, an intersection) of the own vehicle. Can be detected.

具体的には、GPS31は、人工衛星によって発生させられた電波を受信することにより、地球上における自車の現在地及び現在時刻を検出する。また、方位センサ32は、地磁気センサやジャイロセンサ、或いは、ステアリングホイール(図示せず)の回転部に取り付けられた光学的な回転センサ、回転抵抗センサ、車輪に取り付けられた角度センサ等により構成され、自車方位を検出する。また、距離センサ33は、例えば、自車の車輪(図示せず)の回転速度を測定し、測定した回転速度に基づいて距離を検出するセンサ、加速度を測定し、測定した加速度を2回積分して距離を検出するセンサ等から構成され、自車の移動距離を検出する。   Specifically, the GPS 31 detects the current location and current time of the vehicle on the earth by receiving radio waves generated by artificial satellites. The azimuth sensor 32 includes a geomagnetic sensor, a gyro sensor, an optical rotation sensor attached to a rotating portion of a steering wheel (not shown), a rotation resistance sensor, an angle sensor attached to a wheel, or the like. Detect the direction of the vehicle. The distance sensor 33 measures, for example, the rotational speed of a wheel (not shown) of the host vehicle, detects the distance based on the measured rotational speed, measures the acceleration, and integrates the measured acceleration twice. Thus, it is composed of a sensor or the like for detecting the distance, and detects the moving distance of the own vehicle.

また、データ記録部12は、外部記憶装置及び記録媒体としてのハードディスク(図示せず)と、ハードディスクに記憶された地図情報データベース(地図情報DB)25、後述の警告判定テーブル65(図3参照)等が格納される警告判定データベース(警告判定DB)26及び所定のプログラム等を読み出すとともにハードディスクに所定のデータを書き込む為のドライバである記録ヘッド(図示せず)とを備えている。尚、実施例1においては、データ記録部12の外部記憶装置及び記憶媒体としてハードディスクが使用されるが、ハードディスクのほかに、フレキシブルディスク等の磁気ディスクや、メモリーカード、CD、DVD、光ディスク、ICカード等を外部記憶装置として使用することもできる。   The data recording unit 12 includes an external storage device and a hard disk (not shown) as a recording medium, a map information database (map information DB) 25 stored in the hard disk, and a warning determination table 65 described later (see FIG. 3). And a recording head (not shown) which is a driver for reading predetermined programs and the like and writing predetermined data to the hard disk. In the first embodiment, a hard disk is used as the external storage device and storage medium of the data recording unit 12, but in addition to the hard disk, a magnetic disk such as a flexible disk, memory card, CD, DVD, optical disk, IC A card or the like can also be used as an external storage device.

また、地図情報DB25には、経路案内及び地図表示に必要な各種情報から構成されており、例えば、各新設道路を特定するための新設道路情報、地図を表示するための地図表示データ、各交差点に関する交差点データ、ノード点に関するノードデータ、施設の一種である道路(リンク)に関するリンクデータ、経路を探索するための探索データ、施設の一種である店舗等のPOI(Point of Interest)に関する店舗データ、地点を検索するための検索データ、交差点における信号機等の各種地物に関する地物情報等から構成されている。また、地図情報DB25の内容は、不図示の情報配信センタから通信装置17を介して配信された更新情報をダウンロードすることによって更新される。   The map information DB 25 is composed of various information necessary for route guidance and map display. For example, new road information for specifying each new road, map display data for displaying a map, each intersection Intersection data on nodes, node data on node points, link data on roads (links) as a kind of facility, search data for searching for routes, store data on POI (Point of Interest) such as shops as a kind of facility, It consists of search data for searching for points, feature information on various features such as traffic lights at intersections, and the like. Further, the contents of the map information DB 25 are updated by downloading update information distributed from an information distribution center (not shown) via the communication device 17.

また、地物情報としては、各道路の路面に設けられたペイント表示の地物情報や、各道路に沿って設けられた立体物の地物情報がある。このペイント表示には、例えば、車線を分ける区画線(実線、破線、二重線等の区画線の種類の情報も含む。)、ゼブラゾーン、停止線、横断歩道、各レーンの進行方向を指定する進行方向別通行区分表示、速度表示等が含まれる。また、立体物としては、各種の道路標識や信号機のほか、ガードレール、建物、電柱、看板等の道路上又は道路の周辺に設けられる様々な立体物が含まれる。   Further, as the feature information, there are feature information of a paint display provided on the road surface of each road and feature information of a three-dimensional object provided along each road. This paint display, for example, specifies the lane markings that divide the lane (including information on the types of lane markings such as solid lines, broken lines, and double lines), zebra zones, stop lines, pedestrian crossings, and the traveling direction of each lane The display includes a direction-by-direction traffic classification display, a speed display, and the like. In addition to various road signs and traffic lights, the three-dimensional objects include various three-dimensional objects provided on or around the road, such as guardrails, buildings, utility poles, and signboards.

また、地物情報は、その具体的な情報の内容として、位置情報、形状情報、色彩情報、及び関連情報を有している。また、各地物情報は、それぞれの地物情報に固有の地物情報識別IDを有している。位置情報は、緯度及び経度により表される地図上の位置情報である。また、位置情報には、平面的な位置を表す情報に加えて、道路の路面からの高さを表す高さ情報も含まれる。立体物の地物情報の位置情報については、特に高さ情報も重要になる。形状情報及び色彩情報は、上記のような各種地物の具体的な形状や色彩をモデル化して表した情報である。   The feature information includes position information, shape information, color information, and related information as specific information contents. Each feature information has a feature information identification ID unique to each feature information. The position information is position information on a map represented by latitude and longitude. Further, the position information includes height information indicating the height from the road surface in addition to the information indicating the planar position. Regarding the position information of the feature information of the three-dimensional object, height information is particularly important. The shape information and the color information are information expressed by modeling the specific shapes and colors of the various features as described above.

また、関連情報は、近接する位置に存在する地物同士を関連付ける情報である。具体的には、各地物情報の関連情報には、近接する位置に存在する他の地物についての地物情報を表す地物情報識別ID等の情報が格納される。この関連情報により関連付けられる地物の組み合わせの具体例としては、例えば、横断歩道と一時停止線、一時停止線と一時停止標識、信号機と横断歩道及び一時停止線やペア信号機の場合は対になる信号機、ゼブラゾーンと道路分岐を表す信号機、進行方向別通行区分表示とそれに隣接する車線の進行方向別通行区分表示等がある。従って、交差点における信号機と横断歩道及び一時停止線がそれぞれ地物情報識別IDによって関連づけられているため、自車位置の進行方向前方の交差点を地図情報DB25に格納される地図上から特定して、この交差点における信号機を特定することによって、この信号機に関する関連情報に基づいて、この交差点における横断歩道及び一時停止線等の地物情報を特定することができる。   The related information is information for associating features existing at close positions. Specifically, the related information of each feature information stores information such as a feature information identification ID that represents feature information about other features present at close positions. Specific examples of combinations of features related by this related information include, for example, a crosswalk and a stop line, a stop line and a stop sign, a traffic light and a crosswalk, a stop line, and a pair of traffic lights. There are traffic lights, traffic lights indicating zebra zones and road branches, traffic division display according to the traveling direction, and traffic division display according to the traveling direction of the adjacent lane. Therefore, since the traffic light at the intersection, the pedestrian crossing, and the temporary stop line are associated with each other by the feature information identification ID, the intersection ahead of the traveling direction of the vehicle position is specified from the map stored in the map information DB 25, By identifying the traffic light at this intersection, it is possible to identify feature information such as a pedestrian crossing and a temporary stop line at this intersection based on the relevant information regarding this traffic light.

また、図2に示すように、ナビゲーション装置1を構成するナビゲーション制御部13は、ナビゲーション装置1の全体の制御を行う演算装置及び制御装置としてのCPU41、並びにCPU41が各種の演算処理を行うに当たってワーキングメモリとして使用されるとともに、経路が探索されたときの経路データ等が記憶されるRAM42、制御用のプログラムのほか、後述の交差点での歩行者等の確認の警告を行う警告処理プログラム(図4参照)が記憶されたROM43、ROM43から読み出したプログラムを記憶するフラッシュメモリ44等の内部記憶装置や、時間を計測するタイマ45等を備えている。
ここで、前記RAM42、ROM43、フラッシュメモリ44等としては半導体メモリ、磁気コア等が使用される。そして、演算装置及び制御装置としては、CPU41に代えてMPU等を使用することも可能である。
As shown in FIG. 2, the navigation control unit 13 constituting the navigation device 1 is an arithmetic device that performs overall control of the navigation device 1, a CPU 41 as a control device, and working when the CPU 41 performs various arithmetic processes. In addition to the RAM 42 for storing route data when a route is searched, a control program, and a warning processing program for warning of confirmation of pedestrians and the like at an intersection described later (FIG. 4). ROM 43 storing a reference), an internal storage device such as a flash memory 44 for storing a program read from the ROM 43, a timer 45 for measuring time, and the like.
Here, a semiconductor memory, a magnetic core, or the like is used as the RAM 42, the ROM 43, the flash memory 44, or the like. As the arithmetic device and the control device, an MPU or the like can be used instead of the CPU 41.

また、実施例1においては、前記ROM43に各種のプログラムが記憶され、前記データ記録部12に各種のデータが記憶されるようになっているが、プログラム、データ等を同じ外部記憶装置、メモリーカード等からプログラム、データ等を読み出して前記フラッシュメモリ44に書き込むこともできる。更に、メモリーカード等を交換することによって前記プログラム、データ等を更新することができる。   In the first embodiment, various programs are stored in the ROM 43 and various data are stored in the data recording unit 12. However, the programs, data, and the like are stored in the same external storage device, memory card, and the like. It is also possible to read out a program, data, etc. from the flash memory 44 and so on. Further, the program, data, etc. can be updated by exchanging a memory card or the like.

更に、前記ナビゲーション制御部13には、操作部14、液晶ディスプレイ15、スピーカ16、通信装置17の各周辺装置(アクチュエータ)が電気的に接続されている。   Furthermore, the navigation control unit 13 is electrically connected to peripheral devices (actuators) of the operation unit 14, the liquid crystal display 15, the speaker 16, and the communication device 17.

操作部14は、走行開始時の現在地を修正し、案内開始地点としての出発地及び案内終了地点としての目的地を入力する際や施設に関する情報の検索を行う際等に操作され、各種のキー等の複数の操作スイッチから構成される。そして、ナビゲーション制御部13は、各スイッチの押下等により出力されるスイッチ信号に基づき、対応する各種の動作を実行すべく制御を行う。尚、操作部14としては、キーボード、マウス等や、液晶ディスプレイ15の前面に設けたタッチパネルによって構成することもできる。
また、液晶ディスプレイ15には、操作案内、操作メニュー、キーの案内、現在地から目的地までの誘導経路、誘導経路に沿った案内情報、交通情報、ニュース、天気予報、時刻、メール、テレビ番組等が表示される。
The operation unit 14 is operated when correcting the current location at the start of travel, inputting a departure point as a guidance start point and a destination as a guidance end point, or searching for information about facilities, and the like. And a plurality of operation switches. The navigation control unit 13 performs control to execute various corresponding operations based on switch signals output by pressing the switches. Note that the operation unit 14 may be configured by a keyboard, a mouse, or the like, or a touch panel provided on the front surface of the liquid crystal display 15.
The liquid crystal display 15 also has operation guidance, operation menus, key guidance, guidance route from the current location to the destination, guidance information along the guidance route, traffic information, news, weather forecast, time, mail, TV program, etc. Is displayed.

また、スピーカ16は、ナビゲーション制御部13からの指示に基づいて、誘導経路に沿った走行案内や、交差点や横断歩道での停止又は安全確認を警告する音声案内等を出力する。ここで、案内される音声ガイダンスとしては、例えば、「200m先、○○交差点を右方向です。」や、交差点での歩行者等の確認を警告する「ピッ、ピッ、・・・(間欠音)」等の警告音がある。   In addition, the speaker 16 outputs travel guidance along the guidance route, voice guidance for warning of stoppage or safety confirmation at an intersection or pedestrian crossing, and the like based on an instruction from the navigation control unit 13. Here, as the voice guidance to be guided, for example, “200m ahead, right at the XX intersection”, or “Pip, beep, ... (intermittent sound) warning the confirmation of pedestrians at the intersection, etc. ) "Etc.

そして、通信装置17は、情報配信センタと通信を行う携帯電話網等による通信手段であり、情報配信センタとの間で最もバージョンの新しい更新地図情報等の送受信を行う。また、通信装置17は情報配信センタに加えて、道路交通情報センタ(VICS(登録商標))等から送信された渋滞情報やサービスエリアの混雑状況等の各情報から成る交通情報を受信する。   The communication device 17 is a communication means such as a mobile phone network that communicates with the information distribution center, and transmits / receives the latest version of updated map information and the like to / from the information distribution center. Further, in addition to the information distribution center, the communication device 17 receives traffic information including information such as traffic jam information transmitted from a road traffic information center (VICS (registered trademark)) and the congestion status of a service area.

また、カメラECU51は、ナビゲーション制御部13から送信された制御情報を受信するデータ受信部51Aを備えると共に、この受信した制御情報に基づきドライバカメラ52、各車外カメラ53を制御すると共に画像認識を行う画像認識部51Bを備えている。
また、レーダECU61は、ナビゲーション制御部13から送信された制御情報を受信するデータ受信部61Aを備えると共に、この受信した制御情報に基づきミリ波レーダ62を制御すると共に、前後の他車両との距離と相対速度の検出を行う制御部61Bを備えている。
In addition, the camera ECU 51 includes a data receiving unit 51A that receives control information transmitted from the navigation control unit 13, and controls the driver camera 52 and each vehicle-mounted camera 53 based on the received control information and performs image recognition. An image recognition unit 51B is provided.
The radar ECU 61 includes a data receiving unit 61A that receives the control information transmitted from the navigation control unit 13, and controls the millimeter wave radar 62 based on the received control information, and the distance from other vehicles in front and rear. And a control unit 61B for detecting the relative speed.

ここで、警告判定DB26に格納される警告判定テーブル65について図3に基づいて説明する。図3は警告判定DB26に格納される警告判定テーブル65の一例を示す図である。
図3に示すように、警告判定テーブル65は、交差点を横断する歩行者等(警告対象物)に衝突するまでの予測残余時間を表す衝突残余時間65Aと、運転者の歩行者等(警告対象物)の認識の有・無を表す(○印は、認識していることを表す。また、×印は未認識を表す。)認識65Bと、スピーカ16等を介した警告の内容を表す警告内容65Cとから構成されている。
Here, the warning determination table 65 stored in the warning determination DB 26 will be described with reference to FIG. FIG. 3 is a diagram illustrating an example of the warning determination table 65 stored in the warning determination DB 26.
As shown in FIG. 3, the warning determination table 65 includes a collision remaining time 65 </ b> A representing a predicted remaining time until a collision with a pedestrian or the like (warning object) crossing an intersection, a driver's pedestrian or the like (warning target) (○ mark indicates recognition. ○ mark indicates unrecognition.) Recognizing 65B, warning indicating the content of warning via speaker 16 or the like Contents 65C.

次に、上記のように構成されたナビゲーション装置1のCPU41が実行する交差点での歩行者等の確認の警告を行う警告処理について図4及び図5に基づいて説明する。
図4は実施例1に係るナビゲーション装置1のCPU41が実行する交差点での歩行者等の確認の警告を行う警告処理を示すフローチャートである。図5は運転者が交差点における信号機等の地物を認識する状態の一例を説明する図である。
尚、図4にフローチャートで示されるプログラムはナビゲーション装置1のナビゲーション制御部13が備えているROM43に記憶されており、CPU41により一定時間毎(例えば、10msec〜100msec毎)に実行される。
Next, warning processing for warning of confirmation of a pedestrian or the like at an intersection executed by the CPU 41 of the navigation device 1 configured as described above will be described with reference to FIGS. 4 and 5.
FIG. 4 is a flowchart illustrating a warning process for performing a warning of confirmation of a pedestrian or the like at an intersection executed by the CPU 41 of the navigation device 1 according to the first embodiment. FIG. 5 is a diagram illustrating an example of a state in which the driver recognizes a feature such as a traffic light at an intersection.
Note that the program shown in the flowchart of FIG. 4 is stored in the ROM 43 provided in the navigation control unit 13 of the navigation device 1 and is executed by the CPU 41 at regular intervals (for example, every 10 msec to 100 msec).

図4に示すように、先ず、ステップ(以下、Sと略記する)11において、CPU41は、現在地検出処理部11により自車位置及び自車の向きを表す自車方位を検出して、自車位置を表す座標データ(例えば、緯度と経度のデータである。)と自車方位をRAM42に記憶する。
続いて、S12において、CPU41は、地図情報DB25に格納される地図情報と自車位置データとから、自車両2が走行している道路の進行方向前方に、該自車両2から所定距離以内(例えば、約200m〜300m以内である。)の位置に交差点が存在するか否かを判定する判定処理を実行する。
As shown in FIG. 4, first, in step (hereinafter abbreviated as “S”) 11, the CPU 41 detects the own vehicle position and the direction of the own vehicle by the current position detection processing unit 11, and the own vehicle Coordinate data representing the position (for example, latitude and longitude data) and the vehicle direction are stored in the RAM 42.
Subsequently, in S12, the CPU 41, based on the map information stored in the map information DB 25 and the own vehicle position data, within a predetermined distance from the own vehicle 2 ahead of the traveling direction of the road on which the own vehicle 2 is traveling ( For example, a determination process is performed to determine whether or not an intersection exists at a position of about 200 m to 300 m.

そして、自車両2が走行している道路の進行方向前方に、該自車両2から所定距離以内(例えば、約200m〜300m以内である。)の位置に交差点が存在しない場合には(S12:NO)、CPU41は、当該処理を終了する。
一方、自車両2が走行している道路の進行方向前方に、該自車両2から所定距離以内(例えば、約200m〜300m以内である。)の位置に交差点が存在する場合には(S12:YES)、CPU41は、当該交差点の座標データ(例えば、緯度と経度のデータである。)を取得して、RAM42に記憶後、S13の処理に移行する。
If no intersection exists at a position within a predetermined distance from the host vehicle 2 (for example, within about 200 m to 300 m) ahead of the traveling direction of the road on which the host vehicle 2 is traveling (S12: NO), the CPU 41 ends the process.
On the other hand, when an intersection exists at a position within a predetermined distance from the own vehicle 2 (for example, within about 200 m to 300 m) ahead of the traveling direction of the road on which the own vehicle 2 is traveling (S12: YES), the CPU 41 obtains the coordinate data of the intersection (for example, latitude and longitude data), stores it in the RAM 42, and proceeds to the processing of S13.

S13において、CPU41は、地図情報DB25から当該交差点における信号機等の各種地物に関する地物情報を取得してRAM42に記憶する。例えば、CPU41は、地図情報DB25に格納される地図上から交差点における信号機や一時停止標識を特定し、この信号機や一時停止標識の高さ情報を含む位置情報及び関連情報を地図情報DB25から取得してRAM42に記憶する。また、CPU41は、この信号機や一時停止標識に関する関連情報に基づいて、この交差点における横断歩道や一時停止線等の地物情報を特定して、この横断歩道や一時停止線等の位置情報を地図情報DB25から取得してRAM42に記憶する。   In S <b> 13, the CPU 41 acquires feature information regarding various features such as traffic lights at the intersection from the map information DB 25 and stores them in the RAM 42. For example, the CPU 41 identifies traffic lights and stop signs at intersections from the map stored in the map information DB 25, and acquires position information and related information including height information of the traffic lights and stop signs from the map information DB 25. And stored in the RAM 42. Further, the CPU 41 specifies feature information such as a pedestrian crossing and a temporary stop line at the intersection based on the relevant information regarding the traffic signal and the stop sign, and maps the position information such as the pedestrian crossing and the temporary stop line to the map. Obtained from the information DB 25 and stored in the RAM 42.

続いて、S14において、CPU41は、自車両2の先端上端部左側と先端上端部右側に設けられた各車外カメラ53を介して進行方向前方の交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)が存在するか否かを判定する判定処理を実行する。
そして、交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)が存在しない場合には(S14:NO)、CPU41は、当該処理を終了する。
Subsequently, in S14, the CPU 41 causes a pedestrian (warning object) or bicycle crossing the intersection in front of the traveling direction via each of the outside cameras 53 provided on the left end of the top end and the right end of the top end of the host vehicle 2. (Warning object) Further, a determination process for determining whether or not there is another vehicle (warning object) traveling from the left and right of this intersection is executed.
If there are no pedestrians (warning objects) or bicycles (warning objects) crossing the intersection, or other vehicles (warning objects) traveling from the left and right of this intersection (S14: NO) ), The CPU 41 ends the process.

一方、交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)が存在する場合には(S14:YES)、CPU41は、カメラECU51を介して各車外カメラ53の映像信号を画像処理して歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)の位置情報等を取得してRAM42に記憶後、S15の処理に移行する。
S15において、CPU41は、自車両2の先端部中央位置に取り付けられたミリ波レーダ62によって、自車両2の前方に他車両が存在するか否かを判定する判定処理を実行する。
そして、自車両2の前方に他車両が存在しない場合には(S15:NO)、CPU41は、S16の処理に移行する。
On the other hand, if there are pedestrians (warning objects) or bicycles (warning objects) crossing the intersection, and other vehicles (warning objects) traveling from the left and right of this intersection (S14: YES) ) The CPU 41 performs image processing on the video signal of each vehicle exterior camera 53 via the camera ECU 51, and a pedestrian (warning object), bicycle (warning object), and other vehicles traveling from the left and right of this intersection. Etc. (warning object) and the like are acquired and stored in the RAM 42, and then the process proceeds to S15.
In S <b> 15, the CPU 41 executes a determination process for determining whether or not there is another vehicle ahead of the host vehicle 2 by the millimeter wave radar 62 attached to the center position of the front end of the host vehicle 2.
When no other vehicle exists in front of the host vehicle 2 (S15: NO), the CPU 41 proceeds to the process of S16.

S16において、CPU41は、上記S13で当該交差点における信号機等の各種地物に関する地物情報を記憶しているか否かを判定する判定処理を実行する。
そして、上記S13で当該交差点における信号機等の各種地物に関する地物情報を記憶していない場合には(S16:NO)、CPU41は、当該交差点には、信号機や一時停止線等の各種地物が無いと判定して、S17の処理に移行する。
S17において、CPU41は、自車両2の先端上端部左側と先端上端部右側に設けられた各車外カメラ53を介して検出した交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)を、運転者が認識しているか否かを判定する認識対象物として設定して、それぞれをRAM42に記憶する。また、CPU41は、RAM42から歩行者フラグを読み出し、該歩行者フラグを「ON」に設定した後、再度RAM42に記憶後、S21の処理に移行する。
尚、ナビゲーション装置1の起動時には、歩行者フラグはOFFに設定されてRAM42に記憶されている。
In S16, CPU41 performs the determination process which determines whether the feature information regarding various features, such as a traffic signal in the said intersection, is memorize | stored in said S13.
And when the feature information regarding various features such as traffic lights at the intersection is not stored in S13 (S16: NO), the CPU 41 has various features such as traffic lights and stop lines at the intersection. It is determined that there is not, and the process proceeds to S17.
In S17, the CPU 41 determines a pedestrian (warning object) or a bicycle (warning object) that crosses the intersection detected through each of the outside cameras 53 provided on the left end and upper right end of the host vehicle 2. In addition, other vehicles or the like (warning object) traveling from the left and right of this intersection are set as recognition objects for determining whether or not the driver recognizes them, and each is stored in the RAM 42. Further, the CPU 41 reads the pedestrian flag from the RAM 42, sets the pedestrian flag to “ON”, stores the pedestrian flag in the RAM 42 again, and then proceeds to the processing of S21.
When the navigation apparatus 1 is activated, the pedestrian flag is set to OFF and stored in the RAM 42.

一方、上記S13で当該交差点における信号機等の各種地物に関する地物情報を記憶している場合には(S16:YES)、CPU41は、当該交差点には、信号機や一時停止線等の各種地物が有ると判定して、S18の処理に移行する。
S18において、CPU41は、自車両2の先端上端部左側と先端上端部右側に設けられた各車外カメラ53を介して検出した交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)を、運転者が認識しているか否かを判定する認識対象物として設定すると共に、当該交差点における進行方向前方の信号機等の各種地物を運転者が認識しているか否かを判定する認識対象物として設定して、それぞれをRAM42に記憶する。また、CPU41は、RAM42から地物フラグを読み出し、該地物フラグを「ON」に設定した後、再度RAM42に記憶後、S21の処理に移行する。
尚、ナビゲーション装置1の起動時には、地物フラグはOFFに設定されてRAM42に記憶されている。
On the other hand, when the feature information related to various features such as traffic lights at the intersection is stored in S13 (S16: YES), the CPU 41 has various features such as traffic lights and temporary stop lines at the intersection. Is determined, and the process proceeds to S18.
In S18, the CPU 41 determines whether the pedestrian (warning object) or the bicycle (warning object) crossing the intersection detected via the on-vehicle cameras 53 provided on the left end and the upper right end of the host vehicle 2. In addition, other vehicles or the like (warning object) traveling from the left and right of this intersection are set as recognition objects for determining whether or not the driver recognizes, and traffic lights ahead in the traveling direction at the intersection Are set as recognition objects for determining whether or not the driver recognizes the various features, and each is stored in the RAM 42. Further, the CPU 41 reads the feature flag from the RAM 42, sets the feature flag to “ON”, stores the feature flag in the RAM 42 again, and then proceeds to the processing of S21.
Note that the feature flag is set to OFF and stored in the RAM 42 when the navigation device 1 is activated.

また、上記S15で自車両2の前方に他車両が存在する場合には(S15:YES)、CPU41は、S19の処理に移行する。
S19において、CPU41は、前方を走行する他車両との距離及び相対走行速度を自車両2の先端部中央位置に取り付けられたミリ波レーダ62によって計測する。また同時に、CPU41は、カメラECU51を介して各車外カメラ53の映像信号を画像処理して前方を走行する他車両の位置情報や進行方向を取得する。そして、CPU41は、上記S14でRAM42に記憶した歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)の位置情報等を読み出し、前方を走行する当該他車両が交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)と接触する可能性があるか否かを判定する判定処理を実行する。
If there is another vehicle in front of the host vehicle 2 in S15 (S15: YES), the CPU 41 proceeds to the process of S19.
In S <b> 19, the CPU 41 measures the distance from the other vehicle traveling in front and the relative traveling speed by the millimeter wave radar 62 attached to the center position of the front end of the host vehicle 2. At the same time, the CPU 41 performs image processing on the video signals of the respective outside cameras 53 via the camera ECU 51 to acquire position information and traveling directions of other vehicles traveling ahead. Then, the CPU 41 stores the pedestrian (warning object) and the bicycle (warning object) stored in the RAM 42 in S14, positional information of other vehicles (warning object) traveling from the left and right of this intersection, and the like. Pedestrians (warning objects) and bicycles (warning objects) where the other vehicles traveling ahead cross the intersection, and other vehicles (warning objects) traveling from the left and right of this intersection A determination process for determining whether or not there is a possibility of contact is performed.

そして、前方を走行する当該他車両が交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)と接触する可能性が無い場合、例えば、歩行者等と接触することなく交差点を通過する場合には(S19:NO)、CPU41は、S17の処理に移行する。
一方、前方を走行する当該他車両が交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)と接触する可能性が有る場合には(S19:YES)、CPU41は、S20の処理に移行する。
S20において、CPU41は、自車両2の前方を走行する他車両を運転者が認識しているか否かを判定する認識対象物として設定して、RAM42に記憶する。また、CPU41は、RAM42から前方車両フラグを読み出し、該前方車両フラグを「ON」に設定した後、再度RAM42に記憶後、S21の処理に移行する。
尚、ナビゲーション装置1の起動時には、前方車両フラグはOFFに設定されてRAM42に記憶されている。
Then, the other vehicle traveling ahead contacts the pedestrian (warning object) or bicycle (warning object) crossing the intersection, and other vehicles (warning object) traveling from the left and right of the intersection. When there is no possibility of doing, for example, when passing an intersection, without contacting a pedestrian etc. (S19: NO), CPU41 transfers to the process of S17.
On the other hand, the other vehicle traveling ahead contacts a pedestrian (warning object) or bicycle (warning object) crossing the intersection, or another vehicle (warning object) traveling from the left or right of this intersection. If there is a possibility of doing so (S19: YES), the CPU 41 proceeds to the process of S20.
In S <b> 20, the CPU 41 is set as a recognition object for determining whether or not the driver recognizes another vehicle traveling in front of the host vehicle 2, and stores it in the RAM 42. Further, the CPU 41 reads the forward vehicle flag from the RAM 42, sets the forward vehicle flag to “ON”, stores it in the RAM 42 again, and then proceeds to the processing of S21.
When the navigation device 1 is activated, the front vehicle flag is set to OFF and stored in the RAM 42.

続いて、S21において、CPU41は、現在地検出処理部11により自車位置及び自車の向きを表す自車方位を再度検出して、自車位置を表す座標データと自車方位をRAM42に記憶する。また、CPU41は、車速センサ21を介して車速を検出してRAM42に記憶する。また、CPU41は、自車両2の先端部中央位置に取り付けられたミリ波レーダ62によって前方を走行する他車両との距離及び相対走行速度を再度測定してRAM42に記憶する。   Subsequently, in S <b> 21, the CPU 41 detects again the vehicle position indicating the vehicle position and the direction of the vehicle by the current position detection processing unit 11, and stores the coordinate data indicating the vehicle position and the vehicle direction in the RAM 42. . Further, the CPU 41 detects the vehicle speed via the vehicle speed sensor 21 and stores it in the RAM 42. Further, the CPU 41 measures again the distance and the relative traveling speed with the other vehicle traveling ahead by the millimeter wave radar 62 attached to the center position of the front end of the host vehicle 2 and stores it in the RAM 42.

そして、S22において、CPU41は、RAM42から歩行者フラグを読み出し、該歩行者フラグがONの場合には、上記S17で認識対象物として設定された歩行者等(警告対象物)の認識対象物を読み出し、この認識対象物を運転者が認識しているか否かを判定する判定処理を実行する。
また、この歩行者フラグがOFFの場合には、CPU41は、RAM42から地物フラグを読み出し、該地物フラグがONの場合には、上記S18で認識対象物として設定された歩行者等(警告対象物)や信号機等の各種地物の認識対象物を読み出し、この認識対象物を運転者が認識しているか否かを判定する判定処理を実行する。
更に、この地物フラグがOFFの場合には、CPU41は、上記S19で認識対象物として設定された自車両2の前方を走行する他車両を読み出し、この認識対象物を運転者が認識しているか否かを判定する判定処理を実行する。
In S22, the CPU 41 reads the pedestrian flag from the RAM 42. If the pedestrian flag is ON, the CPU 41 detects the recognition target object such as a pedestrian (warning target object) set as the recognition target object in S17. The determination process which reads and determines whether the driver recognizes this recognition target object is performed.
When the pedestrian flag is OFF, the CPU 41 reads the feature flag from the RAM 42, and when the pedestrian flag is ON, the pedestrian or the like set as the recognition target in S18 (warning) The recognition object of various features, such as (object) and a traffic light, is read, and the determination process which determines whether the driver has recognized this recognition object is performed.
Further, when the feature flag is OFF, the CPU 41 reads out another vehicle traveling in front of the host vehicle 2 set as the recognition target in S19, and the driver recognizes the recognition target. A determination process for determining whether or not there is is executed.

具体的には、上記S17で歩行者フラグがONに設定され、交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)が認識対象物として設定されている場合には、CPU41は、カメラECU51を介してドライバカメラ52の映像信号を画像処理して取得した運転者の顔向き及び視線方向の検出信号に基づいて、これら歩行者等(警告対象物)を運転者が見ているか否かを判定する。そして、運転者がこれら歩行者等(警告対象物)を見ている場合には、CPU41は、運転者が当該交差点における歩行者等(警告対象物)を認識していると判定し、RAM42から歩行者認識フラグを読み出し、該歩行者認識フラグをONに設定して再度、RAM42に記憶する。   Specifically, the pedestrian flag is set to ON in S17, a pedestrian (warning object) or a bicycle (warning object) crossing the intersection, and other vehicles traveling from the left and right of this intersection, etc. When (warning object) is set as the recognition object, the CPU 41 detects the driver's face direction and line-of-sight direction detection signal obtained by performing image processing on the video signal of the driver camera 52 via the camera ECU 51. Based on the above, it is determined whether or not the driver is looking at these pedestrians (warning objects). When the driver is looking at these pedestrians or the like (warning object), the CPU 41 determines that the driver recognizes the pedestrian or the like (warning object) at the intersection. The pedestrian recognition flag is read out, the pedestrian recognition flag is set to ON, and stored in the RAM 42 again.

尚、ナビゲーション装置の起動時には、歩行者認識フラグはOFFに設定されてRAM42に記憶されている。
一方、運転者がこれら歩行者等(警告対象物)を見ていない場合には、CPU41は、運転者が当該交差点における歩行者等(警告対象物)を認識していないと判定し、RAM42から歩行者認識フラグを読み出し、該歩行者認識フラグをOFFに設定して再度、RAM42に記憶する。
When the navigation device is activated, the pedestrian recognition flag is set to OFF and stored in the RAM 42.
On the other hand, when the driver does not see these pedestrians (warning objects), the CPU 41 determines that the driver does not recognize the pedestrians (warning objects) at the intersection, and from the RAM 42. The pedestrian recognition flag is read out, and the pedestrian recognition flag is set to OFF and stored in the RAM 42 again.

また、上記S18で地物フラグがONに設定され、交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)と共に、当該交差点における進行方向前方の信号機等の各種地物が認識対象物として設定されている場合には、CPU41は、カメラECU51を介してドライバカメラ52の映像信号を画像処理して取得した運転者の顔向き及び視線方向の検出信号に基づいて、これら歩行者等(警告対象物)と当該交差点における進行方向前方の各種地物とのいずれかを運転者が見ているか否かを判定する。そして、運転者がこれら歩行者等(警告対象物)を見ている場合には、CPU41は、運転者が当該交差点における歩行者等(警告対象物)を認識していると判定し、RAM42から歩行者認識フラグを読み出し、該歩行者認識フラグをONに設定して再度、RAM42に記憶する。また、運転者が当該交差点における進行方向前方の各種地物を見ている場合には、CPU41は、運転者が当該交差点における進行方向前方の各種地物を認識していると判定し、RAM42から地物認識フラグを読み出し、該地物認識フラグをONに設定して再度、RAM42に記憶する。   In S18, the feature flag is set to ON, and a pedestrian (warning object) or a bicycle (warning object) crossing the intersection, another vehicle traveling from the left or right of this intersection, etc. (warning object) When various features such as traffic lights ahead in the traveling direction at the intersection are set as recognition objects, the CPU 41 obtains the video signal of the driver camera 52 through the camera ECU 51 by performing image processing. Whether or not the driver is looking at any of these pedestrians (warning objects) and various features ahead in the direction of travel at the intersection based on the detection signals of the driver's face direction and line-of-sight direction judge. When the driver is looking at these pedestrians or the like (warning object), the CPU 41 determines that the driver recognizes the pedestrian or the like (warning object) at the intersection. The pedestrian recognition flag is read out, the pedestrian recognition flag is set to ON, and stored in the RAM 42 again. When the driver is viewing various features ahead in the traveling direction at the intersection, the CPU 41 determines that the driver recognizes various features ahead in the traveling direction at the intersection, and from the RAM 42. The feature recognition flag is read out, the feature recognition flag is set to ON, and stored in the RAM 42 again.

尚、ナビゲーション装置の起動時には、地物認識フラグはOFFに設定されてRAM42に記憶されている。
一方、運転者がこれら歩行者等(警告対象物)を見ていない場合には、CPU41は、運転者が当該交差点における歩行者等(警告対象物)を認識していないと判定し、RAM42から歩行者認識フラグを読み出し、該歩行者認識フラグをOFFに設定して再度、RAM42に記憶する。また、運転者が当該交差点における進行方向前方の各種地物を見ていない場合には、CPU41は、運転者が当該交差点における進行方向前方の各種地物を認識していないと判定し、RAM42から地物認識フラグを読み出し、該地物認識フラグをOFFに設定して再度、RAM42に記憶する。
Note that the feature recognition flag is set to OFF and stored in the RAM 42 when the navigation device is activated.
On the other hand, when the driver does not see these pedestrians (warning objects), the CPU 41 determines that the driver does not recognize the pedestrians (warning objects) at the intersection, and from the RAM 42. The pedestrian recognition flag is read out, and the pedestrian recognition flag is set to OFF and stored in the RAM 42 again. When the driver does not see the various features ahead in the traveling direction at the intersection, the CPU 41 determines that the driver does not recognize the various features ahead in the traveling direction at the intersection. The feature recognition flag is read out, and the feature recognition flag is set to OFF and stored in the RAM 42 again.

例えば、図5に示すように、交差点70において、自車両2が道路68上を図5中、右側から当該交差点70に進入する場合には、CPU41は、自車両2の先端上端部左側と先端上端部右側に設けられた各車外カメラ53を介して、この道路68に直交する道路69上を走行して交差点70に進入する他車両75(警告対象物)と、この交差点70を横断する各歩行者81、82(警告対象物)とを検出して認識対象物として設定する。また、CPU41は、この交差点70に設けられた信号機71A、横断歩道73C、一時停止線72C等の各地物を認識対象物として設定する。また、CPU41は、地物フラグをRAM42から読み出し、該地物フラグをONに設定してRAM42に記憶する。   For example, as shown in FIG. 5, when the own vehicle 2 enters the intersection 70 on the road 68 from the right side in FIG. The other vehicle 75 (warning object) that travels on the road 69 orthogonal to the road 68 and enters the intersection 70 via each vehicle exterior camera 53 provided on the right side of the upper end, and each of the vehicles crossing the intersection 70 Pedestrians 81 and 82 (warning objects) are detected and set as recognition objects. Further, the CPU 41 sets various features such as a traffic light 71A, a pedestrian crossing 73C, and a temporary stop line 72C provided at the intersection 70 as recognition objects. Further, the CPU 41 reads the feature flag from the RAM 42, sets the feature flag to ON, and stores it in the RAM 42.

そして、CPU41は、カメラECU51を介してドライバカメラ52の映像信号を画像処理して取得した運転者の顔向き及び視線方向の検出信号と、信号機71A、横断歩道73C、一時停止線72C等の各地物の地物情報(例えば、設置されている緯度と経度の座標位置、地上からの高さ等である。)とに基づいて、運転手が正面の信号機71Aを見る視線方向91や、正面の一時停止線72C及び横断歩道73Cを見る視線方向92を検出する。また同時に、CPU41は、カメラECU51を介してドライバカメラ52の映像信号を画像処理して取得した運転者の顔向き及び視線方向の検出信号と、記憶した各歩行者81、82(警告対象物)、他車両75(警告対象物)の位置情報と自車位置等とに基づいて、運転手が他車両75を見る視線方向101や、各歩行者81、82を見る視線方向102、103を検出する。   Then, the CPU 41 detects the driver's face direction and line-of-sight direction detection signals obtained by performing image processing on the video signal of the driver camera 52 via the camera ECU 51, and various points such as a traffic light 71A, a pedestrian crossing 73C, and a temporary stop line 72C. Based on the feature information of the object (for example, the coordinate position of the installed latitude and longitude, the height from the ground, etc.), the line-of-sight direction 91 where the driver looks at the front traffic light 71A, A line-of-sight direction 92 for detecting the temporary stop line 72C and the pedestrian crossing 73C is detected. At the same time, the CPU 41 performs image processing on the video signal of the driver camera 52 via the camera ECU 51 and detects the driver's face direction and line-of-sight detection signals, and the stored pedestrians 81 and 82 (warning objects). Based on the position information of the other vehicle 75 (warning object) and the own vehicle position, the line-of-sight direction 101 in which the driver looks at the other vehicle 75 and the line-of-sight directions 102 and 103 in which the pedestrians 81 and 82 are seen are detected. To do.

そして、CPU41は、運転者の顔向き及び視線方向の検出信号と、信号機71A、横断歩道73C、一時停止線72C等の各地物の地物情報(例えば、設置されている緯度と経度の座標位置、地上からの高さ等である。)とに基づいて、各視線方向91、92を検出した場合には、運転者が信号機71A、一時停止線72C及び横断歩道73Cを認識したと判定し、RAM42から地物認識フラグを読み出し、該地物認識フラグをONに設定して再度、RAM42に記憶する。また、CPU41は、運転者の顔向き及び視線方向の検出信号と、各歩行者81、82(警告対象物)、他車両75(警告対象物)の位置情報等とに基づいて、各視線方向101〜103を検出した場合には、運転者が他車両75、各歩行者81、82を認識したと判定し、RAM42から歩行者認識フラグを読み出し、該歩行者認識フラグをONに設定して再度、RAM42に記憶する。   Then, the CPU 41 detects the driver's face direction and line-of-sight direction, and information on features such as traffic lights 71A, a pedestrian crossing 73C, and a temporary stop line 72C (for example, coordinate positions of installed latitude and longitude). , The height from the ground, etc.) is detected, it is determined that the driver has recognized the traffic light 71A, the temporary stop line 72C, and the pedestrian crossing 73C, The feature recognition flag is read from the RAM 42, the feature recognition flag is set to ON, and stored in the RAM 42 again. In addition, the CPU 41 detects each gaze direction based on the detection signal of the driver's face direction and the gaze direction, the position information of each pedestrian 81, 82 (warning object), the other vehicle 75 (warning object), and the like. If 101 to 103 are detected, it is determined that the driver has recognized the other vehicle 75 and the pedestrians 81 and 82, the pedestrian recognition flag is read from the RAM 42, and the pedestrian recognition flag is set to ON. The data is stored in the RAM 42 again.

一方、CPU41は、運転者の顔向き及び視線方向の検出信号と、信号機71A、横断歩道73C、一時停止線72C等の各地物の地物情報(例えば、設置されている緯度と経度の座標位置、地上からの高さ等である。)とに基づいて、各視線方向91、92を検出しない場合には、運転者が信号機71A、一時停止線72C及び横断歩道73Cを認識していないと判定し、RAM42から地物認識フラグを読み出し、該地物認識フラグをOFFに設定して再度、RAM42に記憶する。また、CPU41は、運転者の顔向き及び視線方向の検出信号と、各歩行者81、82(警告対象物)、他車両75(警告対象物)の位置情報等とに基づいて、各視線方向101〜103を検出していない場合には、運転者が他車両75、各歩行者81、82を認識していないと判定し、RAM42から歩行者認識フラグを読み出し、該歩行者認識フラグをOFFに設定して再度、RAM42に記憶する。   On the other hand, the CPU 41 detects the driver's face direction and line-of-sight direction, and information on features such as traffic lights 71A, a pedestrian crossing 73C, and a temporary stop line 72C (for example, coordinate positions of installed latitude and longitude). If the respective gaze directions 91 and 92 are not detected, it is determined that the driver does not recognize the traffic light 71A, the temporary stop line 72C, and the pedestrian crossing 73C. Then, the feature recognition flag is read from the RAM 42, the feature recognition flag is set to OFF, and stored again in the RAM 42. In addition, the CPU 41 detects each gaze direction based on the detection signal of the driver's face direction and the gaze direction, the position information of each pedestrian 81, 82 (warning object), the other vehicle 75 (warning object), and the like. If 101 to 103 are not detected, it is determined that the driver does not recognize the other vehicle 75 and the pedestrians 81 and 82, the pedestrian recognition flag is read from the RAM 42, and the pedestrian recognition flag is turned off. And stored in the RAM 42 again.

また、S22において、上記S20で自車両2の前方を走行する他車両が認識対象物として設定されている場合には、CPU41は、カメラECU51を介してドライバカメラ52の映像信号を画像処理して取得した運転者の顔向き及び視線方向の検出信号と、車外カメラ53の映像信号を画像処理して取得した前方を走行する他車両の位置情報等とに基づいて、自車両2の前方を走行する他車両を運転者が見ているか否かを判定する。そして、運転者が自車両2の前方を走行する他車両を見ている場合には、CPU41は、運転者が当該他車両を認識していると判定し、RAM42から前方車両認識フラグを読み出し、該前方車両認識フラグをONに設定して再度、RAM42に記憶する。   In S22, when another vehicle traveling in front of the host vehicle 2 is set as the recognition target in S20, the CPU 41 performs image processing on the video signal of the driver camera 52 via the camera ECU 51. Based on the acquired detection signal of the driver's face direction and line-of-sight direction and the positional information of the other vehicle traveling in front obtained by image processing of the video signal of the outside camera 53, the vehicle travels in front of the host vehicle 2. It is determined whether or not the driver is looking at the other vehicle. When the driver is looking at another vehicle traveling in front of the host vehicle 2, the CPU 41 determines that the driver recognizes the other vehicle, reads the front vehicle recognition flag from the RAM 42, and The forward vehicle recognition flag is set to ON and stored in the RAM 42 again.

尚、ナビゲーション装置1の起動時には、前方車両認識フラグはOFFに設定されてRAM42に記憶されている。
一方、運転者が自車両2の前方を走行する他車両を見ていない場合には、CPU41は、運転者が当該他車両を認識していないと判定し、RAM42から前方車両認識フラグを読み出し、該前方車両認識フラグをOFFに設定して再度、RAM42に記憶する。
When the navigation device 1 is activated, the forward vehicle recognition flag is set to OFF and stored in the RAM 42.
On the other hand, when the driver does not see the other vehicle traveling in front of the host vehicle 2, the CPU 41 determines that the driver does not recognize the other vehicle, reads the front vehicle recognition flag from the RAM 42, The forward vehicle recognition flag is set to OFF and stored in the RAM 42 again.

例えば、図5に示すように、交差点70において、自車両2が道路69上を図5中、下側から当該交差点70に進入する際には、CPU41は、自車両2の先端部中央位置に取り付けられたミリ波レーダ62によって前方を走行する他車両76を検出し、当該他車両76との距離及び相対走行速度を計測して、RAM42に記憶する。また、CPU41は、カメラECU51を介して各車外カメラ53の映像信号を画像処理して前方を走行する他車両76の位置情報や進行方向を取得して、RAM42に記憶する。また同時に、CPU41は、カメラECU51を介して各車外カメラ53の映像信号を画像処理して歩行者83(警告対象物)の位置情報や進行方向等を取得してRAM42に記憶する。そして、CPU41は、前方を走行する他車両76の位置情報等と、歩行者83の位置情報等とに基づいて、当該他車両76が歩行者83と接触する可能性が有ると判定した場合には、当該他車両76を認識対象物として設定する。また、CPU41は、前方車両フラグをRAM42から読み出し、該前方車両フラグをONに設定してRAM42に記憶する。
そして、CPU41は、カメラECU51を介してドライバカメラ52の映像信号を画像処理して取得した運転者の顔向き及び視線方向の検出信号と、前方を走行する他車両76の位置情報等とに基づいて、運転手が正面の当該他車両76を見る視線方向93を検出する。そして、CPU41は、視線方向93を検出した場合には、この視線方向93に対応する他車両76を運転者が認識したと判定し、RAM42から前方車両認識フラグを読み出し、該前方車両認識フラグをONに設定して再度、RAM42に記憶する。
一方、CPU41は、この視線方向93を検出しない場合には、この視線方向93に対応する他車両76を、運転者が認識していないと判定し、RAM42から前方車両認識フラグを読み出し、該前方車両認識フラグをOFFに設定して再度、RAM42に記憶する。
For example, as shown in FIG. 5, at the intersection 70, when the host vehicle 2 enters the intersection 70 from the lower side in FIG. 5 on the road 69, the CPU 41 is located at the center position of the tip of the host vehicle 2. The other vehicle 76 traveling ahead is detected by the attached millimeter wave radar 62, and the distance and relative traveling speed with respect to the other vehicle 76 are measured and stored in the RAM 42. Further, the CPU 41 acquires the position information and the traveling direction of the other vehicle 76 that travels ahead by performing image processing on the video signals of the respective outside cameras 53 via the camera ECU 51, and stores them in the RAM 42. At the same time, the CPU 41 performs image processing on the video signal of each vehicle-side camera 53 via the camera ECU 51 to acquire position information, a traveling direction, and the like of the pedestrian 83 (warning object), and stores them in the RAM 42. And when CPU41 determines with the possibility that the said other vehicle 76 may contact the pedestrian 83 based on the positional information etc. of the other vehicle 76 which drive | works ahead, and the positional information of the pedestrian 83, etc. Sets the other vehicle 76 as a recognition object. Further, the CPU 41 reads the forward vehicle flag from the RAM 42, sets the forward vehicle flag to ON, and stores it in the RAM 42.
Then, the CPU 41 is based on the detection signal of the driver's face direction and line-of-sight direction obtained by performing image processing on the video signal of the driver camera 52 via the camera ECU 51, the position information of the other vehicle 76 traveling ahead, and the like. Thus, the line-of-sight direction 93 in which the driver looks at the other vehicle 76 in front is detected. When the CPU 41 detects the line-of-sight direction 93, the CPU 41 determines that the driver has recognized the other vehicle 76 corresponding to the line-of-sight direction 93, reads the forward vehicle recognition flag from the RAM 42, and sets the forward vehicle recognition flag. It is set to ON and stored in the RAM 42 again.
On the other hand, when the CPU 41 does not detect the line-of-sight direction 93, the CPU 41 determines that the other vehicle 76 corresponding to the line-of-sight direction 93 is not recognized by the driver, reads the forward vehicle recognition flag from the RAM 42, and The vehicle recognition flag is set to OFF and stored in the RAM 42 again.

続いて、S23において、CPU41は、警告判定DB26に格納される警告判定テーブル65に基づいて、運転者に対して交差点での歩行者等の確認の警告を行うか否かを判定する判定処理を実行する。   Subsequently, in S23, the CPU 41 performs a determination process for determining whether or not to warn the driver of confirmation of a pedestrian or the like at the intersection based on the warning determination table 65 stored in the warning determination DB 26. Execute.

具体的には、S23において、CPU41は、上記S21で取得した自車位置から進行方向前方の交差点までの距離、即ち、衝突予測残距離を算出する。そして、CPU41は、この衝突予測残距離を上記S21で取得した車速で除算して、前方の交差点に達するまでの時間、即ち、衝突残余時間を算出して、RAM42に記憶する。
続いて、CPU41は、警告判定DB26から警告判定テーブル65を読み出す。
そして、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が警告判定テーブル65の衝突残余時間65Aの「7秒」より長い場合には、運転者に対して交差点での歩行者等の確認の警告を行う必要がないと判定して(S23:NO)、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。
Specifically, in S23, the CPU 41 calculates the distance from the vehicle position acquired in S21 to the intersection ahead in the traveling direction, that is, the collision prediction remaining distance. Then, the CPU 41 divides this predicted collision remaining distance by the vehicle speed acquired in S21, calculates the time to reach the front intersection, that is, the remaining collision time, and stores it in the RAM 42.
Subsequently, the CPU 41 reads the warning determination table 65 from the warning determination DB 26.
Then, the CPU 41 reads out the remaining collision time from the RAM 42, and when the remaining collision time is longer than “7 seconds” of the remaining collision time 65A of the warning determination table 65, the CPU 41 asks the driver of a pedestrian or the like at the intersection. It is determined that there is no need to issue a confirmation warning (S23: NO), and the forward vehicle flag, pedestrian flag, feature flag, pedestrian recognition flag, feature recognition flag, and forward vehicle recognition flag are read from the RAM 42, Each flag is set to OFF and stored again in the RAM 42, and then the process ends.

また、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が7秒以下の場合には、RAM42から歩行者認識フラグ、地物認識フラグ及び前方車両認識フラグを読み出し、いずれかのフラグがONか否かを判定する。
そして、いずれかのフラグがONの場合には、CPU41は、警告判定テーブル65から衝突残余時間が5秒より長く、且つ7秒以下の場合には、衝突残余時間65Aの「7秒」に対応する認識65Bが「○」の警告内容65C「無し」を読み出し、また、衝突残余時間が2秒より長く、且つ5秒以下の場合には、衝突残余時間65Aの「5秒」に対応する認識65Bが「○」の警告内容65C「無し」を読み出し、また、衝突残余時間が2秒以下の場合には、衝突残余時間65Aの「2秒」に対応する認識65Bが「○」の警告内容65C「無し」を読み出して、運転者に対して交差点での歩行者等の確認の警告を行わないと判定し(S23:NO)、スピーカ16の出力をOFFに設定する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。従って、スピーカ16を介して警告音を出力報知していた場合には、CPU41は、当該警告音を停止して、当該処理を終了する。
Further, the CPU 41 reads the remaining collision time from the RAM 42, and when the remaining collision time is 7 seconds or less, the CPU 41 reads the pedestrian recognition flag, the feature recognition flag, and the forward vehicle recognition flag from the RAM 42, and any of the flags is It is determined whether or not it is ON.
If any flag is ON, the CPU 41 corresponds to “7 seconds” of the remaining collision time 65A from the warning determination table 65 when the remaining collision time is longer than 5 seconds and 7 seconds or less. If the recognition content 65B is “○”, the warning content 65C “None” is read, and if the remaining collision time is longer than 2 seconds and less than 5 seconds, the recognition corresponding to “5 seconds” of the remaining collision time 65A When the warning content 65C “N” is read out by 65B and the remaining collision time is 2 seconds or less, the warning content 65B corresponding to “2 seconds” of the remaining collision time 65A is “○”. 65C “None” is read out, it is determined that the driver is not warned of confirmation of a pedestrian or the like at the intersection (S23: NO), and the output of the speaker 16 is set to OFF. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends. Therefore, when the warning sound is output and notified through the speaker 16, the CPU 41 stops the warning sound and ends the process.

一方、いずれのフラグもOFFの場合には、CPU41は、運転者に対して交差点での歩行者等の確認の警告を行う必要があると判定して(S23:YES)、S24の処理に移行する。
S24において、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が5秒より長く、且つ7秒以下の場合には、警告判定テーブル65から衝突残余時間65Aの「7秒」に対応する認識65Bが「×」の警告内容65C「ポン」を読み出し、スピーカ16を介して、警告音「ポン」を出力報知する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。
On the other hand, if any flag is OFF, the CPU 41 determines that it is necessary to warn the driver of confirmation of a pedestrian or the like at the intersection (S23: YES), and proceeds to the process of S24. To do.
In S24, the CPU 41 reads the remaining collision time from the RAM 42, and when the remaining collision time is longer than 5 seconds and shorter than 7 seconds, the warning determination table 65 corresponds to “7 seconds” of the remaining collision time 65A. The warning 65B “Pong” with the recognition 65B of “×” is read out, and the warning sound “Pong” is output and notified through the speaker 16. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.

また、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が2秒より長く、且つ5秒以下の場合には、警告判定テーブル65から衝突残余時間65Aの「5秒」に対応する認識65Bが「×」の警告内容65C「ピッ、ピッ、・・・(間欠音)」を読み出し、スピーカ16を介して、警告音として間欠音「ピッ、ピッ、・・・」を出力報知する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。
また、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が2秒以下の場合には、警告判定テーブル65から衝突残余時間65Aの「2秒」に対応する認識65Bが「×」の警告内容65C「ピー(連続音)」を読み出し、スピーカ16を介して、警告音として連続音「ピー」を出力報知する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。
Further, the CPU 41 reads out the remaining collision time from the RAM 42, and when the remaining collision time is longer than 2 seconds and shorter than 5 seconds, the CPU 41 recognizes from the warning determination table 65 corresponding to “5 seconds” of the remaining collision time 65A. The warning content 65C “beep, beep,... (Intermittent sound)” with 65B being “x” is read out, and the intermittent sound “beep, beep,... Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.
Further, the CPU 41 reads the remaining collision time from the RAM 42, and when the remaining collision time is 2 seconds or less, the recognition 65B corresponding to “2 seconds” of the remaining collision time 65A is “x” from the warning determination table 65. The warning content 65 </ b> C “P (continuous sound)” is read, and the continuous sound “P” is output and notified as a warning sound through the speaker 16. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.

以上詳細に説明した通り、実施例1に係るナビゲーション装置1では、CPU41は、自車両2の進行方向前方の交差点に各種地物がある場合には、この各地物(例えば、信号機、一旦停止標識、一端停止線等である。)に係る地物情報(例えば、設置されている緯度と経度の座標位置、地上からの高さ等である。)と、カメラECU51を介してドライバカメラ52の映像信号を画像処理して取得した運転者の顔向き及び視線方向の検出信号とに基づいて、該運転者がこの交差点における各地物を認識しているか否かを判定する(S16:YES〜S18〜S21〜S22)。そして、運転者がこの交差点における各地物を認識していると判定した場合には、CPU41は、地物認識フラグをONし、スピーカ16を介した警告を運転者に対して行わない(S22〜S23:NO)。   As described in detail above, in the navigation device 1 according to the first embodiment, when there are various features at the intersection in front of the traveling direction of the host vehicle 2, the CPU 41 detects these features (for example, traffic lights, stop signs) , Feature information (for example, installed coordinate positions of latitude and longitude, height from the ground, etc.) and video of the driver camera 52 via the camera ECU 51. Based on the detection signal of the driver's face direction and line-of-sight direction obtained by image processing the signal, it is determined whether or not the driver recognizes each feature at this intersection (S16: YES to S18). S21 to S22). And when it determines with the driver | operator recognizing each feature in this intersection, CPU41 turns ON a feature recognition flag and does not perform a warning via the speaker 16 with respect to a driver | operator (S22-). S23: NO).

これにより、交差点付近において、運転者が歩行者や左右から接近する他車両等を認識していなくても、交差点に設置されている信号機や手前にある一時停止線等の地物を運転者が認識している場合には、運転者は該交差点の手前で一旦停止するため、スピーカ16を介した警告を運転者に対して行う必要が無いことから、交差点での歩行者等の確認の警告が必要な場合にのみ警告を行って運転者の運転を支援することが可能となる。   As a result, even if the driver does not recognize pedestrians or other vehicles approaching from the left and right near the intersection, the driver can view features such as traffic lights installed at the intersection and a stop line in front. If it is recognized, the driver temporarily stops in front of the intersection, so there is no need to give a warning to the driver via the speaker 16, so that a warning of confirmation of a pedestrian or the like at the intersection It is possible to assist the driver's driving by giving a warning only when necessary.

また、自車両2の前方を走行する他車両が認識対象物として設定されている場合には、CPU41は、カメラECU51を介してドライバカメラ52の映像信号を画像処理して取得した運転者の顔向き及び視線方向の検出信号に基づいて、自車両2の前方を走行する他車両を運転者が見ているか否かを判定する(S15:YES〜S19:YES〜S20〜S22)。そして、運転者がこの交差点において前方を走行する他車両を認識していると判定した場合には、CPU41は、前方車両認識フラグをONし、スピーカ16を介した警告を運転者に対して行わない(S22〜S23:NO)。   When another vehicle traveling in front of the host vehicle 2 is set as an object to be recognized, the CPU 41 captures the driver's face obtained by performing image processing on the video signal of the driver camera 52 via the camera ECU 51. Based on the detection signal of the direction and the line-of-sight direction, it is determined whether or not the driver is looking at another vehicle traveling in front of the host vehicle 2 (S15: YES to S19: YES to S20 to S22). When it is determined that the driver recognizes another vehicle traveling ahead at this intersection, the CPU 41 turns on the front vehicle recognition flag and issues a warning to the driver via the speaker 16. No (S22 to S23: NO).

これにより、交差点付近において、運転者が歩行者や左右から接近する他車両等、及び信号機等の地物を認識していなくても、前方を走行する他車両を認識している場合には、この他車両が一端停止する場合には、運転者は他車両の後方で一旦停止するため、スピーカ16を介した警告を運転者に対して行う必要が無いことから、交差点での歩行者等の確認の警告が必要な場合にのみ警告を行って運転者の運転をより適切に支援することが可能となる。   Thereby, in the vicinity of the intersection, when the driver recognizes other vehicles traveling ahead, even if the driver does not recognize pedestrians, other vehicles approaching from the left and right, and features such as traffic lights, When the other vehicle stops at one end, the driver temporarily stops behind the other vehicle, so there is no need to give a warning to the driver via the speaker 16, so a pedestrian or the like at the intersection It becomes possible to provide a warning only when a confirmation warning is necessary and to support the driver more appropriately.

また、自車両2の進行方向前方の交差点に各種地物(例えば、信号機、一旦停止標識、一端停止線等である。)が無く、且つ、自車両2の前方を走行する他車両がいない場合には、CPU41は、カメラECU51を介してドライバカメラ52の映像信号を画像処理して取得した運転者の顔向き及び視線方向の検出信号に基づいて、交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)を運転者が見ているか否かを判定する(S15:NO〜S16:NO〜S17〜S21〜S22)。そして、運転者がこの交差点における歩行者等(警告対象物)を認識していると判定した場合には、CPU41は、歩行者認識フラグをONし、スピーカ16を介した警告を運転者に対して行わない(S22〜S23:NO)。   In addition, there are no various features (for example, traffic lights, temporary stop signs, one-stop lines, etc.) at intersections ahead of the traveling direction of the host vehicle 2, and there are no other vehicles traveling in front of the host vehicle 2. In other words, the CPU 41 pedestrian crossing the intersection (warning object) based on the detection signal of the driver's face direction and line-of-sight direction obtained by performing image processing on the video signal of the driver camera 52 via the camera ECU 51. It is determined whether or not the driver is looking at the vehicle or the bicycle (warning object) or other vehicles (warning object) traveling from the left and right of this intersection (S15: NO to S16: NO to S17). S21 to S22). And when it determines with the driver | operator recognizing the pedestrian etc. (warning object) in this intersection, CPU41 turns ON a pedestrian recognition flag and warns the driver | operator via the speaker 16 with respect to a driver | operator. (S22 to S23: NO).

これにより、交差点付近において、運転者が地物(例えば、信号機、一旦停止標識、一端停止線等である。)や前方を走行する他車両を認識していなくても、該運転手が歩行者等(警告対象物)を認識している場合には、運転者は歩行者等(警告対象物)の手前で一旦停止するため、スピーカ16を介した警告を運転者に対して行う必要が無いことから、交差点での歩行者等の確認の警告が必要な場合にのみ警告を行って運転者の運転を更に適切に支援することが可能となる。   Accordingly, even if the driver does not recognize a feature (eg, a traffic light, a stop sign, a stop line, etc.) or another vehicle traveling in front of the pedestrian near the intersection. Etc. (warning object), the driver temporarily stops before the pedestrian or the like (warning object), so there is no need to give a warning to the driver via the speaker 16. For this reason, it is possible to provide a warning only when a warning for confirmation of a pedestrian or the like at an intersection is necessary, and to further appropriately support the driving of the driver.

また、S24において、CPU41は、衝突残余時間が5秒以下の場合には、警告内容65C「ピッ、ピッ、・・・(間欠音)」を読み出し、スピーカ16を介して、警告音として間欠音「ピッ、ピッ、・・・」を出力報知する。また、S24において、CPU41は、衝突残余時間が2秒以下の場合には、警告内容65C「ピー(連続音)」を読み出し、スピーカ16を介して、警告音として連続音「ピー」を出力報知する。
これにより、衝突残余時間が5秒以下と2秒以下とでは、警告音が異なるため、運転者は、警告内容に基づいて警告対象物の手前で一旦停止する緊急度を容易に認識することが可能となり、運転者がより安全な運転をするように支援することが可能となる。
In S24, when the remaining collision time is 5 seconds or less, the CPU 41 reads the warning content 65C “pip, beep,... (Intermittent sound)”, and intermittent sound is generated as a warning sound through the speaker 16. “Pip, beep,...” Is output and notified. In S24, if the remaining collision time is 2 seconds or less, the CPU 41 reads the warning content 65C “Pe (continuous sound)” and outputs a continuous sound “Pie” as a warning sound via the speaker 16 To do.
Thus, since the warning sound is different between the remaining collision time of 5 seconds or less and 2 seconds or less, the driver can easily recognize the degree of urgency that stops temporarily before the warning object based on the warning content. It becomes possible, and it becomes possible to assist the driver to drive more safely.

また、地物情報としては、各道路の路面に設けられた一時停止線や横断歩道等のペイント表示の地物情報や、各道路に沿って設けられた信号機や一時停止標識等の立体物の地物情報がある。これにより、CPU41は、ドライバカメラ52を介して道路の路面に設けられた一端停止線等の平面的なペイント表示と、道路に沿って設けられた一時停止標識や信号機等の立体物とに対する各視線方向を検出することによって、それぞれを地物として認識しているか否かを判定することが可能となり、運転者が地物を認識しているか否かの判定の信頼度をより高めることが可能となる。   In addition, as feature information, feature information of paint display such as temporary stop lines and pedestrian crossings provided on the road surface of each road, and three-dimensional objects such as traffic lights and stop signs provided along each road There is feature information. As a result, the CPU 41 displays a planar paint display such as a one-stop line provided on the road surface via the driver camera 52 and a solid object such as a stop sign or a traffic light provided along the road. By detecting the line-of-sight direction, it is possible to determine whether each is recognized as a feature, and it is possible to further increase the reliability of the determination whether the driver recognizes the feature. It becomes.

次に、実施例2に係るナビゲーション装置111について図6及び図7に基づいて説明する。
尚、以下の説明において上記図1乃至図5の実施例1に係るナビゲーション装置1の構成等と同一符号は、該実施例1にナビゲーション装置1の構成等と同一あるいは相当部分を示すものである。
図6は実施例2に係るナビゲーション装置111のCPU41が実行する交差点での歩行者等の確認の警告を行う警告処理を示すフローチャートである。図7は実施例2に係るナビゲーション装置111の警告判定DB26に格納される地物警告判定テーブル121の一例を示す図である。
Next, a navigation device 111 according to the second embodiment will be described with reference to FIGS.
In the following description, the same reference numerals as in the configuration of the navigation apparatus 1 according to the first embodiment in FIGS. 1 to 5 indicate the same or corresponding parts in the first embodiment as the configuration of the navigation apparatus 1. .
FIG. 6 is a flowchart illustrating a warning process for performing a warning of confirmation of a pedestrian or the like at an intersection performed by the CPU 41 of the navigation device 111 according to the second embodiment. FIG. 7 is a diagram illustrating an example of the feature warning determination table 121 stored in the warning determination DB 26 of the navigation device 111 according to the second embodiment.

この実施例2に係るナビゲーション装置111の概略構成及び制御構成は、実施例1に係るナビゲーション装置1とほぼ同じ構成である。
但し、実施例2に係るナビゲーション装置111は、図7に示す地物警告判定テーブル121と上記警告判定テーブル65とが警告判定DB26に格納され、図6に示すように、CPU41は、上記S23及びS24の処理に替えて、S123及びS124の処理を実行する点で、実施例1に係るナビゲーション装置1と異なっている。
The schematic configuration and control configuration of the navigation device 111 according to the second embodiment are substantially the same as those of the navigation device 1 according to the first embodiment.
However, in the navigation device 111 according to the second embodiment, the feature warning determination table 121 and the warning determination table 65 shown in FIG. 7 are stored in the warning determination DB 26, and as shown in FIG. It is different from the navigation apparatus 1 according to the first embodiment in that the processes of S123 and S124 are executed instead of the process of S24.

以下、実施例2に係るナビゲーション装置111のCPU41が、S123及びS124で実行する処理について具体的に説明する。
S123において、CPU41は、警告判定DB26に格納される警告判定テーブル65と警告判定テーブル121とに基づいて、運転者に対して交差点での歩行者等の確認の警告を行うか否かを判定する判定処理を実行する。
Hereinafter, the processing executed by the CPU 41 of the navigation device 111 according to the second embodiment in S123 and S124 will be specifically described.
In S <b> 123, the CPU 41 determines whether or not to warn the driver of confirmation of a pedestrian or the like at the intersection based on the warning determination table 65 and the warning determination table 121 stored in the warning determination DB 26. Execute the judgment process.

具体的には、S123において、CPU41は、上記S21で取得した自車位置から進行方向前方の交差点までの距離、即ち、衝突予測残距離を算出する。そして、CPU41は、この衝突予測残距離を上記S21で取得した車速で除算して、前方の交差点に達するまでの時間、即ち、衝突残余時間を算出して、RAM42に記憶する。   Specifically, in S123, the CPU 41 calculates the distance from the vehicle position acquired in S21 to the intersection ahead of the traveling direction, that is, the remaining collision prediction distance. Then, the CPU 41 divides this predicted collision remaining distance by the vehicle speed acquired in S21, calculates the time to reach the front intersection, that is, the remaining collision time, and stores it in the RAM 42.

続いて、CPU41は、地物フラグをRAM42から読み出し、該地物フラグがOFFの場合には、警告判定DB26から警告判定テーブル65を読み出す。即ち、CPU41は、自車両2の前方を走行する他車両が認識対象物として設定されている場合、または、当該交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)だけが認識対象物として設定されている場合には、警告判定DB26から警告判定テーブル65を読み出す。
そして、地物フラグがOFFの場合には、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が警告判定テーブル65の衝突残余時間65Aの「7秒」より長い場合には、運転者に対して交差点での歩行者等の確認の警告を行う必要がないと判定して(S123:NO)、当該処理を終了する。
Subsequently, the CPU 41 reads the feature flag from the RAM 42, and when the feature flag is OFF, reads the warning determination table 65 from the warning determination DB 26. That is, the CPU 41 is configured such that when another vehicle traveling in front of the host vehicle 2 is set as a recognition target, or a pedestrian (warning target) or bicycle (warning target) crossing the intersection, When only other vehicles (warning objects) traveling from the left and right of this intersection are set as recognition objects, the warning determination table 65 is read from the warning determination DB 26.
When the feature flag is OFF, the CPU 41 reads the remaining collision time from the RAM 42, and when the remaining collision time is longer than “7 seconds” of the remaining collision time 65A of the warning determination table 65, the driver It is determined that there is no need to issue a warning for confirmation of a pedestrian or the like at the intersection (S123: NO), and the process ends.

また、地物フラグがOFFの場合には、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が7秒以下の場合には、RAM42から歩行者認識フラグ及び前方車両認識フラグを読み出し、いずれかのフラグがONか否かを判定する。
そして、いずれかのフラグがONのときには、CPU41は、衝突残余時間が5秒より長く、且つ7秒以下の場合には、警告判定テーブル65から衝突残余時間65Aの「7秒」に対応する認識65Bが「○」の警告内容65C「無し」を読み出し、また、衝突残余時間が2秒より長く、且つ5秒以下の場合には、衝突残余時間65Aの「5秒」に対応する認識65Bが「○」の警告内容65C「無し」を読み出し、また、衝突残余時間が2秒以下の場合には、衝突残余時間65Aの「2秒」に対応する認識65Bが「○」の警告内容65C「無し」を読み出して、運転者に対して交差点での歩行者等の確認の警告を行わないと判定し(S123:NO)、スピーカ16の出力をOFFに設定する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。従って、スピーカ16を介して警告音を出力報知していた場合には、CPU41は、当該警告音を停止して、当該処理を終了する。
When the feature flag is OFF, the CPU 41 reads the remaining collision time from the RAM 42, and when the remaining collision time is 7 seconds or less, the CPU 41 reads the pedestrian recognition flag and the forward vehicle recognition flag from the RAM 42, It is determined whether any of the flags is ON.
When any of the flags is ON, the CPU 41 recognizes corresponding to “7 seconds” of the remaining collision time 65A from the warning determination table 65 when the remaining collision time is longer than 5 seconds and shorter than 7 seconds. When the warning content 65C “none” of 65B is read and the remaining collision time is longer than 2 seconds and shorter than 5 seconds, the recognition 65B corresponding to “5 seconds” of the remaining collision time 65A is displayed. The warning content 65C “none” of “◯” is read, and when the remaining collision time is 2 seconds or less, the recognition content 65B corresponding to “2 seconds” of the remaining collision time 65A is “○”. “None” is read out, it is determined that the driver is not warned of confirmation of a pedestrian or the like at the intersection (S123: NO), and the output of the speaker 16 is set to OFF. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends. Therefore, when the warning sound is output and notified through the speaker 16, the CPU 41 stops the warning sound and ends the process.

一方、歩行者認識フラグと前方車両認識フラグのいずれのフラグもOFFの場合には、CPU41は、運転者に対して交差点での歩行者等の確認の警告を行う必要があると判定して(S123:YES)、S124の処理に移行する。
S124において、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が5秒より長く、且つ7秒以下の場合には、警告判定テーブル65から衝突残余時間65Aの「7秒」に対応する認識65Bが「×」の警告内容65C「ポン」を読み出し、スピーカ16を介して、警告音「ポン」を出力報知する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。
On the other hand, when both the pedestrian recognition flag and the forward vehicle recognition flag are OFF, the CPU 41 determines that it is necessary to warn the driver of confirmation of a pedestrian or the like at the intersection ( (S123: YES), the process proceeds to S124.
In S124, the CPU 41 reads the remaining collision time from the RAM 42, and when the remaining collision time is longer than 5 seconds and shorter than 7 seconds, it corresponds to “7 seconds” of the remaining collision time 65A from the warning determination table 65. The warning 65B “Pong” with the recognition 65B of “×” is read out, and the warning sound “Pong” is output and notified through the speaker 16. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.

また、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が2秒より長く、且つ5秒以下の場合には、警告判定テーブル65から衝突残余時間65Aの「5秒」に対応する認識65Bが「×」の警告内容65C「ピッ、ピッ、・・・(間欠音)」を読み出し、スピーカ16を介して、警告音として間欠音「ピッ、ピッ、・・・」を出力報知する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。
また、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が2秒以下の場合には、警告判定テーブル65から衝突残余時間65Aの「2秒」に対応する認識65Bが「×」の警告内容65C「ピー(連続音)」を読み出し、スピーカ16を介して、警告音として連続音「ピー」を出力報知する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。
Further, the CPU 41 reads out the remaining collision time from the RAM 42, and when the remaining collision time is longer than 2 seconds and shorter than 5 seconds, the CPU 41 recognizes from the warning determination table 65 corresponding to “5 seconds” of the remaining collision time 65A. The warning content 65C “beep, beep,... (Intermittent sound)” with 65B being “x” is read out, and the intermittent sound “beep, beep,... Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.
Further, the CPU 41 reads the remaining collision time from the RAM 42, and when the remaining collision time is 2 seconds or less, the recognition 65B corresponding to “2 seconds” of the remaining collision time 65A is “x” from the warning determination table 65. The warning content 65 </ b> C “P (continuous sound)” is read, and the continuous sound “P” is output and notified as a warning sound through the speaker 16. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.

他方、S123でRAM42から読み出した地物フラグがONの場合には、CPU41は、警告判定DB26から地物警告判定テーブル121を読み出す。即ち、CPU41は、交差点を横断する歩行者(警告対象物)や自転車(警告対象物)、また、この交差点の左右から進行してくる他車両等(警告対象物)と共に、当該交差点における進行方向前方の信号機等の各種地物が認識対象物として設定されている場合には、警告判定DB26から地物警告判定テーブル121を読み出す。
そして、地物フラグがONの場合には、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が地物警告判定テーブル121の衝突残余時間121Aの「7秒」より長い場合には、運転者に対して交差点での歩行者等の確認の警告を行う必要がないと判定して(S123:NO)、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。
On the other hand, when the feature flag read from the RAM 42 in S123 is ON, the CPU 41 reads the feature warning determination table 121 from the warning determination DB 26. That is, the CPU 41 travels along the intersection along with a pedestrian (warning object) and a bicycle (warning object) crossing the intersection, and other vehicles (warning object) traveling from the left and right of the intersection. When various features such as a traffic signal ahead are set as recognition objects, the feature warning determination table 121 is read from the warning determination DB 26.
When the feature flag is ON, the CPU 41 reads the remaining collision time from the RAM 42, and when the remaining collision time is longer than “7 seconds” of the remaining collision time 121A of the feature warning determination table 121, It is determined that there is no need to warn the driver of confirmation of a pedestrian or the like at an intersection (S123: NO), and a forward vehicle flag, pedestrian flag, feature flag, pedestrian recognition flag, ground The object recognition flag and the forward vehicle recognition flag are read out, each flag is set to OFF, and stored again in the RAM 42, and then the process ends.

また、地物フラグがONの場合には、CPU41は、衝突残余時間をRAM42から読み出し、該衝突残余時間が7秒以下の場合には、RAM42から歩行者認識フラグ及び地物認識フラグを読み出し、いずれかのフラグ又は両方のフラグがONか否かを判定し、警告判定テーブル121から該当する警告内容121Cを読み出し、運転者に対して交差点での歩行者等の確認の警告を行うか否かを判断する。   When the feature flag is ON, the CPU 41 reads the remaining collision time from the RAM 42. When the remaining collision time is 7 seconds or less, the CPU 41 reads the pedestrian recognition flag and the feature recognition flag from the RAM 42, Whether or not one or both of the flags is ON is determined, the corresponding warning content 121C is read from the warning determination table 121, and whether or not the driver is warned of confirmation of a pedestrian or the like at the intersection Judging.

例えば、歩行者認識フラグと地物認識フラグのいずれかのフラグ又は両方のフラグがONで、衝突残余時間が5秒(所定第1時間)より長く、且つ7秒以下の場合には、CPU41は、警告判定テーブル121から衝突残余時間121Aの「7秒」に対応する認識121Bの「警告対象物」が「○」又は「地物」が「○」の警告内容121C「無し」を読み出し、運転者に対して交差点での歩行者等の確認の警告を行わないと判定し(S123:NO)、スピーカ16の出力をOFFに設定する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。   For example, when one or both of the pedestrian recognition flag and the feature recognition flag are ON, and the remaining collision time is longer than 5 seconds (predetermined first time) and not longer than 7 seconds, the CPU 41 From the warning determination table 121, the warning content 121C “No” or “O” in the recognition 121B corresponding to “7 seconds” of the remaining collision time 121A is read out, and the operation is performed. It is determined that a warning for confirmation of a pedestrian or the like at an intersection is not given to the person (S123: NO), and the output of the speaker 16 is set to OFF. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.

一方、歩行者認識フラグと地物認識フラグの両方のフラグがOFFで、衝突残余時間が5秒(所定第1時間)より長く、且つ7秒以下の場合には、CPU41は、警告判定テーブル121から衝突残余時間121Aの「7秒」に対応する認識121Bの「警告対象物」が「×」及び「地物」が「×」の警告内容121C「ポン」を読み出し、運転者に対して交差点での歩行者等の確認の警告を行う必要があると判定して(S123:YES)、S124の処理に移行する。   On the other hand, when both the pedestrian recognition flag and the feature recognition flag are OFF, and the remaining collision time is longer than 5 seconds (predetermined first time) and shorter than 7 seconds, the CPU 41 determines the warning determination table 121. The warning content 121C “Pong” of “X” and “Feature” “X” of the recognition 121B corresponding to “7 seconds” of the remaining collision time 121A is read out from It is determined that it is necessary to issue a warning for confirmation of a pedestrian or the like in (S123: YES), and the process proceeds to S124.

そして、S124において、CPU41は、警告判定テーブル121から衝突残余時間121Aの「7秒」に対応する認識121Bの「警告対象物」が「×」及び「地物」が「×」の警告内容121C「ポン」を再度読み出し、スピーカ16を介して、警告音「ポン」を出力報知する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。   In S124, the CPU 41 determines from the warning determination table 121 that the warning object 121B of the recognition 121B corresponding to “7 seconds” of the remaining collision time 121A is “x” and “feature” is “x”. “Pong” is read again, and a warning sound “Pong” is output and notified through the speaker 16. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.

また、歩行者認識フラグと地物認識フラグのうちの歩行者認識フラグがONで、衝突残余時間が2秒(所定第2時間)より長く、且つ5秒(所定第1時間)以下の場合には、CPU41は、警告判定テーブル121から衝突残余時間121Aの「5秒」に対応する認識121Bの「警告対象物」が「○」で「地物」が「○」、又は「警告対象物」が「○」で「地物」が「×」の警告内容121C「無し」を読み出し、運転者に対して交差点での歩行者等の確認の警告を行わないと判定し(S123:NO)、スピーカ16の出力をOFFに設定する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。従って、スピーカ16を介して警告音を出力報知していた場合には、CPU41は、当該警告音を停止して、当該処理を終了する。   Further, when the pedestrian recognition flag of the pedestrian recognition flag and the feature recognition flag is ON, and the remaining collision time is longer than 2 seconds (predetermined second time) and not longer than 5 seconds (predetermined first time). The CPU 41 determines from the warning determination table 121 that “warning object” of the recognition 121B corresponding to “5 seconds” of the remaining collision time 121A is “◯” and “feature” is “◯”, or “warning object”. Is “○” and “feature” is “×”, and the warning content 121C “none” is read out, and it is determined that the driver is not warned of confirmation of a pedestrian or the like at the intersection (S123: NO). The output of the speaker 16 is set to OFF. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends. Therefore, when the warning sound is output and notified through the speaker 16, the CPU 41 stops the warning sound and ends the process.

一方、歩行者認識フラグと地物認識フラグのうちの歩行者認識フラグがOFFで、衝突残余時間が2秒(所定第2時間)より長く、且つ5秒(所定第1時間)以下の場合には、CPU41は、警告判定テーブル121から衝突残余時間121Aの「5秒」に対応する認識121Bの「警告対象物」が「×」で「地物」が「×」、又は「警告対象物」が「×」で「地物」が「○」の警告内容121C「ピッ、ピッ、・・・(間欠音)」を読み出し、運転者に対して交差点での歩行者等の確認の警告を行う必要があると判定して(S123:YES)、S124の処理に移行する。   On the other hand, when the pedestrian recognition flag of the pedestrian recognition flag and the feature recognition flag is OFF, and the remaining collision time is longer than 2 seconds (predetermined second time) and not longer than 5 seconds (predetermined first time). The CPU 41 determines from the warning determination table 121 that the “warning object” of the recognition 121B corresponding to “5 seconds” of the remaining collision time 121A is “x” and “feature” is “x”, or “warning object”. Is “×” and “feature” is “◯”, and the warning content 121C “pip, beep,... (Intermittent sound)” is read, and the driver is warned of confirmation of a pedestrian or the like at the intersection It is determined that it is necessary (S123: YES), and the process proceeds to S124.

そして、S124において、CPU41は、警告判定テーブル121から衝突残余時間121Aの「5秒」に対応する認識121Bの「警告対象物」が「×」及び「地物」が「×」、又は「警告対象物」が「×」及び「地物」が「○」の警告内容121C「ピッ、ピッ、・・・(間欠音)」を読み出し、スピーカ16を介して、警告音として間欠音「ピッ、ピッ、・・・」を出力報知する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。   In S124, the CPU 41 determines that the “warning object” of the recognition 121B corresponding to “5 seconds” of the remaining collision time 121A is “x” and “feature” is “x” or “warning” from the warning determination table 121. The warning content 121C “pip, beep,... (Intermittent sound)” with “target” as “×” and “feature” as “o” is read out, and the intermittent sound “pip, "Pip, ..." is output and notified. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.

但し、歩行者認識フラグがOFFで、地物認識フラグがONで、更に、車速センサ21を介して減速したことを検出した場合には、CPU41は、運転者に対して交差点での歩行者等の確認の警告を行わないと判定し(S123:NO)、スピーカ16の出力をOFFに設定する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。   However, when the pedestrian recognition flag is OFF, the feature recognition flag is ON, and when it is further detected that the vehicle has decelerated via the vehicle speed sensor 21, the CPU 41 detects the pedestrian at the intersection, etc. It is determined that the confirmation warning is not performed (S123: NO), and the output of the speaker 16 is set to OFF. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.

また、歩行者認識フラグと地物認識フラグの両方がONで、衝突残余時間が2秒(所定第2時間)以下の場合には、CPU41は、警告判定テーブル121から衝突残余時間121Aの「2秒」に対応する認識121Bの「警告対象物」が「○」で「地物」が「○」の警告内容121C「無し」を読み出し、運転者に対して交差点での歩行者等の確認の警告を行わないと判定し(S123:NO)、スピーカ16の出力をOFFに設定する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。従って、スピーカ16を介して警告音を出力報知していた場合には、CPU41は、当該警告音を停止して、当該処理を終了する。   When both the pedestrian recognition flag and the feature recognition flag are ON and the remaining collision time is 2 seconds (predetermined second time) or less, the CPU 41 determines from the warning determination table 121 that the remaining collision time 121A is “2”. Read the warning content 121C “None” in the “Warning object” of the recognition 121B corresponding to “second” and “O” and “Fine” is “O”, and confirm the pedestrian etc. at the intersection. It determines with not giving a warning (S123: NO), and sets the output of the speaker 16 to OFF. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends. Therefore, when the warning sound is output and notified through the speaker 16, the CPU 41 stops the warning sound and ends the process.

一方、歩行者認識フラグと地物認識フラグのうちの一方又は両方のフラグがOFFで、衝突残余時間が2秒(所定第2時間)以下の場合には、CPU41は、CPU41は、警告判定テーブル121から衝突残余時間121Aの「2秒」に対応する認識121Bの「警告対象物」が「×」で「地物」が「×」、又は「警告対象物」が「×」で「地物」が「○」、又は「警告対象物」が「○」で「地物」が「×」の警告内容121C「ピー(連続音)」を読み出し、運転者に対して交差点での歩行者等の確認の警告を行う必要があると判定して(S123:YES)、S124の処理に移行する。   On the other hand, when one or both of the pedestrian recognition flag and the feature recognition flag are OFF and the remaining collision time is 2 seconds (predetermined second time) or less, the CPU 41 determines whether the CPU 41 has a warning determination table. From 121, the "warning object" of the recognition 121B corresponding to "2 seconds" of the remaining collision time 121A is "x" and "feature" is "x", or "warning object" is "x" and "feature" ”Is“ O ”, or“ Warning object ”is“ O ”and“ Feature ”is“ X ”, the warning content 121C“ Pe (continuous sound) ”is read out, and the pedestrian at the intersection, etc. It is determined that it is necessary to issue a confirmation warning (S123: YES), and the process proceeds to S124.

そして、S124において、CPU41は、警告判定テーブル121から衝突残余時間121Aの「2秒」に対応する認識121Bの「警告対象物」が「×」及び「地物」が「×」、「警告対象物」が「○」及び「地物」が「×」、又は「警告対象物」が「×」及び「地物」が「○」の警告内容121C「ピー(連続音)」を再度読み出し、スピーカ16を介して、警告音として連続音「ピー」を出力報知する。そして、CPU41は、RAM42から前方車両フラグ、歩行者フラグ、地物フラグ、歩行者認識フラグ、地物認識フラグ、及び前方車両認識フラグを読み出し、各フラグをOFFに設定してRAM42に再度記憶後、当該処理を終了する。   In S124, the CPU 41 determines that the “warning object” of the recognition 121B corresponding to “2 seconds” of the remaining collision time 121A is “x”, “feature” is “x”, and “warning target” from the warning determination table 121. Read again the warning content 121C “Pe (continuous sound)” in which “object” is “O” and “feature” is “x”, or “warning object” is “x” and “feature” is “o”, The continuous sound “pea” is output and notified as a warning sound through the speaker 16. Then, the CPU 41 reads the front vehicle flag, the pedestrian flag, the feature flag, the pedestrian recognition flag, the feature recognition flag, and the front vehicle recognition flag from the RAM 42, sets each flag to OFF, and stores it again in the RAM 42. Then, the process ends.

以上詳細に説明した通り、実施例2に係るナビゲーション装置111では、S123でRAM42から読み出した地物フラグがONのときには、歩行者認識フラグと地物認識フラグのいずれかのフラグ又は両方のフラグがONで、衝突残余時間が5秒より長く、且つ7秒以下の場合には、CPU41は、警告判定テーブル121から衝突残余時間121Aの「7秒」に対応する認識121Bの「警告対象物」が「○」又は「地物」が「○」の警告内容121C「無し」を読み出し、運転者に対して交差点での歩行者等の確認の警告を行わないと判定し(S123:NO)、スピーカ16の出力をOFFにした後、当該処理を終了する。また、S123でRAM42から読み出した地物フラグがONのときには、歩行者認識フラグと地物認識フラグのうちの歩行者認識フラグがONで、衝突残余時間が2秒より長く、且つ5秒以下の場合には、CPU41は、警告判定テーブル121から衝突残余時間121Aの「5秒」に対応する認識121Bの「警告対象物」が「○」で「地物」が「○」、又は「警告対象物」が「○」で「地物」が「×」の警告内容121C「無し」を読み出し、運転者に対して交差点での歩行者等の確認の警告を行わないと判定し(S123:NO)、スピーカ16の出力をOFFにした後、当該処理を終了する。   As described above in detail, in the navigation device 111 according to the second embodiment, when the feature flag read from the RAM 42 in S123 is ON, either the pedestrian recognition flag or the feature recognition flag or both flags are set. If the collision remaining time is longer than 5 seconds and not longer than 7 seconds, the CPU 41 determines that the “warning object” of the recognition 121B corresponding to “7 seconds” of the remaining collision time 121A from the warning determination table 121. The warning content 121C “None” with “O” or “Feature” being “O” is read out, and it is determined that the driver is not warned of confirmation of a pedestrian or the like at the intersection (S123: NO). After the output of 16 is turned off, the processing is terminated. When the feature flag read from the RAM 42 in S123 is ON, the pedestrian recognition flag of the pedestrian recognition flag and the feature recognition flag is ON, and the remaining collision time is longer than 2 seconds and shorter than 5 seconds. In this case, the CPU 41 determines from the warning determination table 121 that the “warning target” of the recognition 121B corresponding to “5 seconds” of the remaining collision time 121A is “◯” and “feature” is “◯”, or “warning target”. The warning content 121C “None” of “object” is “○” and “feature” is “x” is read, and it is determined that the driver is not warned of confirmation of a pedestrian or the like at the intersection (S123: NO) ) After the output of the speaker 16 is turned off, the process is terminated.

これにより、交差点付近において、歩行者等(警告対象物)に衝突するまでの衝突残余時間が、5秒より長く、且つ7秒以下のときには、運転者がこの交差点における地物(例えば、信号機、一旦停止標識、一端停止線等である。)又は歩行者等(警告対象物)のいずれか一方を認識している場合には、スピーカ16を介した警告を運転者に対して行う必要が無いため、スピーカ16を介した警告は行われない。また、衝突残余時間が2秒より長く、且つ5秒以下の場合には、運転者が歩行者等(警告対象物)を認識していると判定した場合、又は、運転者がこの交差点における地物(例えば、信号機、一旦停止標識、一端停止線等である。)を認識していると判定し、且つ、車速が減速した場合にのみ警告を行わない。このため、運転者が歩行者等(警告対象物)の手前で一旦停止するか否かをより正確に判断してスピーカ16を介して警告することが可能となり、運転者がより安全な運転をするように支援することが可能となる。   As a result, when the remaining collision time until collision with a pedestrian or the like (warning object) is longer than 5 seconds and shorter than 7 seconds in the vicinity of the intersection, the driver can detect the feature (for example, traffic light, It is not necessary to give a warning to the driver via the speaker 16 when one of stop signs, one-end stop lines, etc.) or a pedestrian or the like (warning object) is recognized. Thus, no warning is given via the speaker 16. Further, when the remaining collision time is longer than 2 seconds and less than 5 seconds, it is determined that the driver recognizes a pedestrian or the like (warning object), or the driver It is determined that an object (for example, a traffic light, a stop sign, a stop line, etc.) is recognized, and a warning is not issued only when the vehicle speed is decelerated. For this reason, it becomes possible to judge more accurately whether or not the driver temporarily stops in front of a pedestrian or the like (warning object) and to give a warning through the speaker 16, so that the driver can drive more safely. Can be supported.

また、S123でRAM42から読み出した地物フラグがONのときには、歩行者認識フラグと地物認識フラグの両方がONで、衝突残余時間が2秒以下の場合には、CPU41は、警告判定テーブル121から衝突残余時間121Aの「2秒」に対応する認識121Bの「警告対象物」が「○」で「地物」が「○」の警告内容121C「無し」を読み出し、運転者に対して交差点での歩行者等の確認の警告を行わないと判定し(S123:NO)、スピーカ16の出力をOFFにした後、当該処理を終了する。
これにより、交差点付近において、歩行者等(警告対象物)に衝突するまでの衝突残余時間が、2秒以下のときには、運転者がこの交差点における地物(例えば、信号機、一旦停止標識、一端停止線等である。)と歩行者等(警告対象物)の両方を認識した場合にのみ警告を行わない。このため、運転者が歩行者等(警告対象物)の手前で確実に一旦停止するか否かを正確に判断して警告することが可能となり、該運転者が更に安全な運転をするように支援することが可能となる。
When the feature flag read from the RAM 42 in S123 is ON, when both the pedestrian recognition flag and the feature recognition flag are ON and the remaining collision time is 2 seconds or less, the CPU 41 determines whether the warning determination table 121 is ON. Read out the warning content 121C “None” in the “Warning object” of the recognition 121B corresponding to “2 seconds” of the remaining collision time 121A and “Fine” from the recognition 121B. It is determined that a warning for confirmation of a pedestrian or the like is not to be performed (S123: NO), the output of the speaker 16 is turned off, and the process is terminated.
As a result, when the remaining collision time until collision with a pedestrian or the like (warning object) is 2 seconds or less in the vicinity of the intersection, the driver can detect the feature at the intersection (for example, a traffic light, a temporary stop sign, one stop) The warning is not given only when both the pedestrian and the like (warning object) are recognized. For this reason, it becomes possible to accurately determine whether or not the driver is surely stopped once before a pedestrian or the like (warning object) so that the driver can drive more safely. It becomes possible to support.

また、S123でRAM42から読み出した地物フラグがONのときには、衝突残余時間が5秒以下の場合には、地物認識フラグだけがON、即ち、認識121Bの「地物」が「○」だけでは、S124において、CPU41は、警告内容121C「ピッ、ピッ、・・・(間欠音)」を読み出し、スピーカ16を介して、警告音として間欠音「ピッ、ピッ、・・・」を出力報知する。また、衝突残余時間が2秒以下の場合には、地物認識フラグだけがON、即ち、認識121Bの「地物」が「○」だけでは、S124において、CPU41は、警告内容121C「ピー(連続音)」を読み出し、スピーカ16を介して、警告音として連続音「ピー」を出力報知する。
これにより、衝突残余時間が5秒以下の場合には、運転者が進行方向前方の地物を認識していても、運転者が歩行者等の警告対象物の手前で一旦停止するように警告することが可能となり、運転者がより安全な運転をするように支援することが可能となる。また、衝突残余時間が5秒以下と2秒以下とでは、警告音が異なるため、運転者は、警告内容に基づいて警告対象物の手前で一旦停止する緊急度を容易に認識することが可能となり、運転者がより安全な運転をするように支援することが可能となる。
When the feature flag read from the RAM 42 in S123 is ON, if the remaining collision time is 5 seconds or less, only the feature recognition flag is ON, that is, the “feature” of the recognition 121B is only “◯”. Then, in S124, the CPU 41 reads the warning content 121C “beep, beep,... (Intermittent sound)”, and outputs an intermittent sound “beep, beep,... To do. If the remaining collision time is 2 seconds or less, only the feature recognition flag is ON, that is, if the “feature” of the recognition 121B is only “O”, the CPU 41 causes the warning content 121C “P ( Continuous sound) ”is read out, and the continuous sound“ pea ”is output and notified through the speaker 16 as a warning sound.
As a result, when the remaining collision time is 5 seconds or less, even if the driver recognizes the feature ahead in the traveling direction, the driver is warned to stop once before the warning object such as a pedestrian. This makes it possible to assist the driver in driving more safely. Also, since the warning sound is different between the remaining collision time of 5 seconds or less and 2 seconds or less, the driver can easily recognize the degree of urgency to temporarily stop before the warning object based on the warning content. Thus, it is possible to support the driver to drive more safely.

尚、本発明は上記実施例1及び実施例2に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることは勿論である。例えば、以下のようにしてもよい。   In addition, this invention is not limited to the said Example 1 and Example 2, Of course, various improvement and deformation | transformation are possible within the range which does not deviate from the summary of this invention. For example, the following may be used.

(A)上記ステップ12において、CPU41は、自車両2が走行している直線道路の進行方向前方に、該自車両2から所定距離以内(例えば、約200m〜300m以内である。)の位置に信号機、一時停止標識、一時停止線や横断歩道があるか否かを判定するようにしてもよい。そして、車両2が走行している直線道路の進行方向前方に、該自車両2から所定距離以内(例えば、約200m〜300m以内である。)の位置に信号機、一時停止標識、一時停止線や横断歩道が存在する場合には(S12:YES)、CPU41は、S13以降の処理を実行するようにしてもよい。これにより、直線道路上に横断歩道等が設けられている場合にも、運転者に対して、この横断歩道において、適切なタイミングで歩行者等の確認の警告を行うことが可能となる。   (A) In step 12, the CPU 41 is located within a predetermined distance (for example, within about 200 m to 300 m) from the host vehicle 2 in front of the traveling direction of the straight road on which the host vehicle 2 is traveling. It may be determined whether there is a traffic light, a stop sign, a stop line, or a pedestrian crossing. Then, in front of the traveling direction of the straight road on which the vehicle 2 is traveling, a traffic light, a stop sign, a stop line, or the like at a position within a predetermined distance from the host vehicle 2 (for example, within about 200 m to 300 m). When there is a pedestrian crossing (S12: YES), the CPU 41 may execute the processes after S13. Thereby, even when a pedestrian crossing or the like is provided on the straight road, it is possible to warn the driver of confirmation of a pedestrian or the like at an appropriate timing on the pedestrian crossing.

(B)上記ステップ24及びステップ124において、スピーカ16を介した「ピッ、ピッ、・・・(間欠音)」の警告音と共に、運転席のシートを少し振動させたり、液晶ディスプレイ15に歩行者警告マークを表示したり、また、警告灯を点灯してもよい。更に、スピーカ16を介した「ピー(連続音)」の警告音と共に、運転席のシートを大きく振動させたり、液晶ディスプレイ15に歩行者警告マークを点滅表示したり、また、警告灯を点滅点灯するようにしてもよい。これにより、運転者に対して歩行者等の確認の警告をより確実に認識させることが可能となる。   (B) In step 24 and step 124 described above, the driver's seat is vibrated slightly together with a warning sound “pip, beep,... A warning mark may be displayed or a warning light may be turned on. In addition, the driver's seat is greatly vibrated, the pedestrian warning mark blinks on the liquid crystal display 15, and the warning light blinks. You may make it do. Thereby, it becomes possible to make a driver | operator recognize the warning of confirmation of a pedestrian etc. more reliably.

実施例1に係るナビゲーション装置が搭載される車両の概略構成図である。BRIEF DESCRIPTION OF THE DRAWINGS It is a schematic block diagram of the vehicle by which the navigation apparatus concerning Example 1 is mounted. 車両に搭載されるナビゲーション装置を中心とした制御系を模式的に示すブロック図である。It is a block diagram which shows typically the control system centering on the navigation apparatus mounted in a vehicle. 警告判定DBに格納される警告判定テーブルの一例を示す図である。It is a figure which shows an example of the warning determination table stored in warning determination DB. ナビゲーション装置のCPUが実行する交差点での歩行者等の確認の警告を行う警告処理を示すフローチャートである。It is a flowchart which shows the warning process which performs the warning of confirmation of the pedestrian etc. in the intersection which CPU of a navigation apparatus performs. 運転者が交差点における信号機等の地物を認識する状態の一例を説明する図である。It is a figure explaining an example of the state in which a driver recognizes features, such as a traffic signal in an intersection. 実施例2に係るナビゲーション装置のCPUが実行する交差点での歩行者等の確認の警告を行う警告処理を示すフローチャートである。It is a flowchart which shows the warning process which performs the warning of confirmation of the pedestrian etc. in the intersection which CPU of the navigation apparatus which concerns on Example 2 performs. 実施例2に係るナビゲーション装置の警告判定DBに格納される地物警告判定テーブルの一例を示す図である。It is a figure which shows an example of the feature warning determination table stored in warning determination DB of the navigation apparatus which concerns on Example 2. FIG.

符号の説明Explanation of symbols

1 ナビゲーション装置
2 車両(自車両)
11 現在地検出処理部
13 ナビゲーション制御部
16 スピーカ
21 車速センサ
25 地図情報DB
26 警告判定DB
41 CPU
42 RAM
43 ROM
51 カメラECU
52 ドライバカメラ
53 車外カメラ
61 レーダECU
62 ミリ波レーダ
65 警告判定テーブル
68、69 道路
70 交差点
71A〜71D 信号機
72A〜72D 一時停止線
73A〜73D 横断歩道
75、76 他車両
81〜83 歩行者
91〜93、101〜103 視線方向
121 地物警告判定テーブル
1 Navigation device 2 Vehicle (own vehicle)
DESCRIPTION OF SYMBOLS 11 Present location detection process part 13 Navigation control part 16 Speaker 21 Vehicle speed sensor 25 Map information DB
26 Warning judgment DB
41 CPU
42 RAM
43 ROM
51 Camera ECU
52 Driver camera 53 Outside camera 61 Radar ECU
62 millimeter wave radar 65 warning judgment table 68, 69 road 70 intersection 71A-71D traffic lights 72A-72D temporary stop line 73A-73D pedestrian crossing 75, 76 other vehicles 81-83 pedestrians 91-93, 101-103 gaze direction 121 ground Object warning judgment table

Claims (8)

警告対象物を検出して運転者に対して警告を行う運転支援装置において、
地物についての地物情報を含む地図情報を記憶する地図情報記憶手段と、
車両の自車位置を検出する自車位置検出手段と、
車両を運転する運転者の視線方向を検出する視線検出手段と、
前記地図情報に基づいて前記自車位置の進行方向前方の地物についての地物情報を取得する地物情報取得手段と、
前記地物情報取得手段によって取得された地物情報と、前記視線検出手段によって検出された前記運転者の視線方向とに基づいて、該運転者が前記進行方向前方の地物を認識しているか否かを判定する地物認識判定手段と、
前記運転者が前記進行方向前方の地物を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御する警告制御手段と、
を備えたことを特徴とする運転支援装置。
In a driving support device that detects a warning object and warns the driver,
Map information storage means for storing map information including feature information about the feature;
Vehicle position detection means for detecting the vehicle position of the vehicle;
Gaze detection means for detecting the gaze direction of the driver driving the vehicle;
Feature information acquisition means for acquiring feature information about a feature ahead in the traveling direction of the vehicle position based on the map information;
Whether the driver recognizes the feature ahead in the traveling direction based on the feature information acquired by the feature information acquisition means and the driver's line-of-sight direction detected by the line-of-sight detection means Feature recognition determination means for determining whether or not,
When it is determined that the driver recognizes the feature ahead in the traveling direction, warning control means for controlling so as to suppress warning given to the driver;
A driving support apparatus comprising:
前記車両の前方を走行する他車両の位置情報を含む他車両情報を取得する他車両情報取得手段と、
前記他車両情報取得手段によって取得された他車両情報と、前記視線検出手段によって検出された前記運転者の視線方向とに基づいて、該運転者が前記他車両を認識しているか否かを判定する他車両認識判定手段と、
を備え、
前記警告制御手段は、前記運転者が前記他車両を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御することを特徴とする請求項1に記載の運転支援装置。
Other vehicle information acquisition means for acquiring other vehicle information including position information of another vehicle traveling in front of the vehicle;
Based on the other vehicle information acquired by the other vehicle information acquisition unit and the driver's line-of-sight direction detected by the line-of-sight detection unit, it is determined whether or not the driver recognizes the other vehicle. Other vehicle recognition determination means,
With
The said warning control means is controlled so that the warning given with respect to a driver | operator is suppressed, when it determines with the said driver | operator recognizing the said other vehicle. Driving assistance device.
前記警告対象物の位置情報を含む警告対象物情報を取得する警告対象物情報取得手段と、
前記警告対象物情報取得手段によって取得された警告対象物情報と、前記視線検出手段によって検出された前記運転者の視線方向とに基づいて、該運転者が前記警告対象物を認識しているか否かを判定する警告対象物認識判定手段と、
を備え、
前記警告制御手段は、前記運転者が前記警告対象物を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御することを特徴とする請求項1又は請求項2に記載の運転支援装置。
Warning object information acquisition means for acquiring warning object information including position information of the warning object;
Whether the driver recognizes the warning object based on the warning object information acquired by the warning object information acquisition means and the driver's line-of-sight direction detected by the line-of-sight detection means Warning object recognition determination means for determining whether or not
With
The said warning control means is controlled so that the warning given with respect to a driver | operator is suppressed, when it determines with the said driver | operator recognizing the said warning target object. The driving support device according to claim 2.
前記車両の車速を検出する車速検出手段と、
前記自車位置から前記警告対象物までの距離を算出する距離算出手段と、
前記車速検出手段によって検出した車速と、前記距離算出手段によって算出した距離とに基づいて該自車位置から前記警告対象物に衝突するまでの予測残余時間を算出する衝突残余時間算出手段と、
を備え、
前記警告制御手段は、前記衝突残余時間算出手段によって算出された予測残余時間が所定第1時間より長いときには、前記運転者が前記進行方向前方の地物又は前記警告対象物を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御し、
前記予測残余時間が所定第1時間以下になったときには、前記運転者が前記警告対象物を認識していると判定された場合、又は、前記運転者が前記進行方向前方の地物を認識していると判定され、且つ、車速が減速した場合には、運転者に対して行う警告を抑制するように制御することを特徴とする請求項3に記載の運転支援装置。
Vehicle speed detecting means for detecting the vehicle speed of the vehicle;
Distance calculating means for calculating a distance from the vehicle position to the warning object;
A collision remaining time calculating unit that calculates a predicted remaining time until the vehicle collides with the warning object from the vehicle position based on the vehicle speed detected by the vehicle speed detecting unit and the distance calculated by the distance calculating unit;
With
When the predicted remaining time calculated by the collision remaining time calculating means is longer than a predetermined first time, the warning control means recognizes the feature ahead in the traveling direction or the warning object. If determined, control to suppress warnings to the driver,
When the predicted remaining time is equal to or shorter than the predetermined first time, it is determined that the driver recognizes the warning object, or the driver recognizes a feature ahead in the traveling direction. The driving support device according to claim 3, wherein when the vehicle speed is determined to be reduced and the vehicle speed is reduced, control is performed so as to suppress a warning given to the driver.
前記警告制御手段は、前記予測残余時間が前記所定第1時間よりも短い所定第2時間以下になったときには、前記運転者が前記進行方向前方の地物及び前記警告対象物を認識していると判定された場合には、運転者に対して行う警告を抑制するように制御することを特徴とする請求項4に記載の運転支援装置。   The warning control means recognizes the feature ahead in the traveling direction and the warning object when the predicted remaining time is equal to or shorter than a predetermined second time shorter than the predetermined first time. The driving support apparatus according to claim 4, wherein the control is performed so as to suppress a warning given to the driver. 前記車両の車速を検出する車速検出手段と、
前記自車位置から前記警告対象物までの距離を算出する距離算出手段と、
前記車速検出手段によって検出した車速と、前記距離算出手段によって算出した距離とに基づいて該自車位置から前記警告対象物に衝突するまでの予測残余時間を算出する衝突残余時間算出手段と、
を備え、
前記警告制御手段は、前記衝突残余時間算出手段によって算出された予測残余時間が所定時間以下である場合には、運転者に対して行う警告の抑制を禁止するように制御することを特徴とする請求項1に記載の運転支援装置。
Vehicle speed detecting means for detecting the vehicle speed of the vehicle;
Distance calculating means for calculating a distance from the vehicle position to the warning object;
A collision remaining time calculating unit that calculates a predicted remaining time until the vehicle collides with the warning object from the vehicle position based on the vehicle speed detected by the vehicle speed detecting unit and the distance calculated by the distance calculating unit;
With
The warning control unit performs control so as to prohibit suppression of warning given to a driver when the predicted remaining time calculated by the collision remaining time calculating unit is a predetermined time or less. The driving support device according to claim 1.
前記警告制御手段は、前記衝突残余時間算出手段によって算出された予測残余時間に基づいて、警告内容を選択することを特徴とする請求項4乃至請求項6のいずれかに記載の運転支援装置。   The driving support device according to any one of claims 4 to 6, wherein the warning control unit selects a warning content based on the predicted remaining time calculated by the collision remaining time calculating unit. 前記地物は、道路の路面に設けられたペイント表示と、道路に沿って設けられた立体物とを含むことを特徴とする請求項1乃至請求項7のいずれかに記載の運転支援装置。   The driving support device according to any one of claims 1 to 7, wherein the feature includes a paint display provided on a road surface of a road and a three-dimensional object provided along the road.
JP2006309392A 2006-11-15 2006-11-15 Driving assistance device Expired - Fee Related JP4929997B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006309392A JP4929997B2 (en) 2006-11-15 2006-11-15 Driving assistance device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006309392A JP4929997B2 (en) 2006-11-15 2006-11-15 Driving assistance device

Publications (2)

Publication Number Publication Date
JP2008123443A true JP2008123443A (en) 2008-05-29
JP4929997B2 JP4929997B2 (en) 2012-05-09

Family

ID=39508103

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006309392A Expired - Fee Related JP4929997B2 (en) 2006-11-15 2006-11-15 Driving assistance device

Country Status (1)

Country Link
JP (1) JP4929997B2 (en)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010049478A (en) * 2008-08-21 2010-03-04 Denso Corp Driving action estimation device
JP2010191517A (en) * 2009-02-16 2010-09-02 Toyota Motor Corp Driving support device
JP2010198198A (en) * 2009-02-24 2010-09-09 Toyota Motor Corp Alarm device for vehicle
WO2011132388A1 (en) * 2010-04-19 2011-10-27 本田技研工業株式会社 Device for monitoring vicinity of vehicle
JP2012155376A (en) * 2011-01-24 2012-08-16 Sanyo Electric Co Ltd Mobile communication device and control determination method
JP2014098966A (en) * 2012-11-13 2014-05-29 Toyota Motor Corp Drive support apparatus and drive support method
JP5657809B2 (en) * 2011-10-06 2015-01-21 本田技研工業株式会社 Armpit detector
WO2016009600A1 (en) * 2014-07-14 2016-01-21 株式会社デンソー Drive assist device
JP2016052134A (en) * 2015-09-18 2016-04-11 株式会社ニコン Imaging apparatus
JP2018188057A (en) * 2017-05-10 2018-11-29 株式会社Soken Driving support device
JP2019008348A (en) * 2017-06-20 2019-01-17 パイオニア株式会社 Map data structure, transmitter, and driving support device
US10279742B2 (en) 2014-05-29 2019-05-07 Nikon Corporation Image capture device and vehicle
JP2019194900A (en) * 2012-09-05 2019-11-07 ウェイモ エルエルシー Construction zone detection using plural information sources
CN110549938A (en) * 2018-06-01 2019-12-10 马自达汽车株式会社 Vehicle alarm system
JP2021157427A (en) * 2020-03-26 2021-10-07 日産自動車株式会社 Driving assistance method and driving assistance device
JPWO2022153809A1 (en) * 2021-01-12 2022-07-21
WO2024028985A1 (en) * 2022-08-02 2024-02-08 三菱電機株式会社 Driving assistance device and driving assistance method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000046574A (en) * 1998-07-24 2000-02-18 Honda Motor Co Ltd Navigation device for vehicle
JP2005010893A (en) * 2003-06-17 2005-01-13 Nissan Motor Co Ltd Vehicular contact avoidance control system
JP2006146429A (en) * 2004-11-17 2006-06-08 Mitsubishi Electric Corp Automatic tracking device
JP2006224754A (en) * 2005-02-16 2006-08-31 Denso Corp Driving assistance system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000046574A (en) * 1998-07-24 2000-02-18 Honda Motor Co Ltd Navigation device for vehicle
JP2005010893A (en) * 2003-06-17 2005-01-13 Nissan Motor Co Ltd Vehicular contact avoidance control system
JP2006146429A (en) * 2004-11-17 2006-06-08 Mitsubishi Electric Corp Automatic tracking device
JP2006224754A (en) * 2005-02-16 2006-08-31 Denso Corp Driving assistance system

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010049478A (en) * 2008-08-21 2010-03-04 Denso Corp Driving action estimation device
JP2010191517A (en) * 2009-02-16 2010-09-02 Toyota Motor Corp Driving support device
JP2010198198A (en) * 2009-02-24 2010-09-09 Toyota Motor Corp Alarm device for vehicle
WO2011132388A1 (en) * 2010-04-19 2011-10-27 本田技研工業株式会社 Device for monitoring vicinity of vehicle
CN102859567A (en) * 2010-04-19 2013-01-02 本田技研工业株式会社 Device for monitoring vicinity of vehicle
JP2012155376A (en) * 2011-01-24 2012-08-16 Sanyo Electric Co Ltd Mobile communication device and control determination method
US9248796B2 (en) 2011-10-06 2016-02-02 Honda Motor Co., Ltd. Visually-distracted-driving detection device
JP5657809B2 (en) * 2011-10-06 2015-01-21 本田技研工業株式会社 Armpit detector
JPWO2013051306A1 (en) * 2011-10-06 2015-03-30 本田技研工業株式会社 Armpit detector
JP2019194900A (en) * 2012-09-05 2019-11-07 ウェイモ エルエルシー Construction zone detection using plural information sources
JP2014098966A (en) * 2012-11-13 2014-05-29 Toyota Motor Corp Drive support apparatus and drive support method
US11220215B2 (en) 2014-05-29 2022-01-11 Nikon Corporation Image capture device and vehicle
US10807532B2 (en) 2014-05-29 2020-10-20 Nikon Corporation Image capture device and vehicle
US11572016B2 (en) 2014-05-29 2023-02-07 Nikon Corporation Image capture device and vehicle
US10279742B2 (en) 2014-05-29 2019-05-07 Nikon Corporation Image capture device and vehicle
US10421451B2 (en) 2014-07-14 2019-09-24 Denso Corporation Driving assistance apparatus
WO2016009600A1 (en) * 2014-07-14 2016-01-21 株式会社デンソー Drive assist device
JP2016021125A (en) * 2014-07-14 2016-02-04 株式会社デンソー Drive assist device
JP2016052134A (en) * 2015-09-18 2016-04-11 株式会社ニコン Imaging apparatus
JP2018188057A (en) * 2017-05-10 2018-11-29 株式会社Soken Driving support device
JP7120742B2 (en) 2017-05-10 2022-08-17 株式会社Soken Driving support device
JP7036358B2 (en) 2017-06-20 2022-03-15 ジオテクノロジーズ株式会社 Map data structure, transmitter, and driving support device
JP2019008348A (en) * 2017-06-20 2019-01-17 パイオニア株式会社 Map data structure, transmitter, and driving support device
CN110549938B (en) * 2018-06-01 2022-12-30 马自达汽车株式会社 Vehicle alarm system
JP7150246B2 (en) 2018-06-01 2022-10-11 マツダ株式会社 vehicle alarm system
JP2019211927A (en) * 2018-06-01 2019-12-12 マツダ株式会社 Alarm system for vehicle
CN110549938A (en) * 2018-06-01 2019-12-10 马自达汽车株式会社 Vehicle alarm system
JP2021157427A (en) * 2020-03-26 2021-10-07 日産自動車株式会社 Driving assistance method and driving assistance device
JP7386746B2 (en) 2020-03-26 2023-11-27 日産自動車株式会社 Driving support method and driving support device
JPWO2022153809A1 (en) * 2021-01-12 2022-07-21
WO2022153809A1 (en) * 2021-01-12 2022-07-21 株式会社デンソー Map generation device, map generation program, and vehicle-mounted machine
JP7405283B2 (en) 2021-01-12 2023-12-26 株式会社デンソー Map generation device and map generation program
WO2024028985A1 (en) * 2022-08-02 2024-02-08 三菱電機株式会社 Driving assistance device and driving assistance method
JP7546820B2 (en) 2022-08-02 2024-09-06 三菱電機株式会社 Driving assistance device and driving assistance method

Also Published As

Publication number Publication date
JP4929997B2 (en) 2012-05-09

Similar Documents

Publication Publication Date Title
JP4929997B2 (en) Driving assistance device
JP4985095B2 (en) Safe driving support device, safe driving support method and program
US9898006B2 (en) Drive assist device
JP4207060B2 (en) Drawing system
JP2008037218A (en) Vehicle control device
EP2269883A1 (en) Lane judgement equipment and navigation system
US20120109521A1 (en) System and method of integrating lane position monitoring with locational information systems
JP4561722B2 (en) Driving assistance device
JP2009031968A (en) Device for supporting safe driving at intersection
JP7476568B2 (en) Superimposed image display device, superimposed image drawing method, and computer program
JP4797849B2 (en) Driving support image display system and in-vehicle device
JP2019027996A (en) Display method for vehicle and display device for vehicle
EP2088571A2 (en) Driving support device, driving support method and program
JP2011221573A (en) Driving support device and driving support system
JP2023012793A (en) Superimposed image display device
JP4692898B2 (en) Vehicle guidance device
JP2007034646A (en) Safe traveling supporting system
JP2002157684A (en) On-vehicle display device
JP2007127450A (en) Route guidance system for vehicle, on-vehicle equipment, and control center
JP2008090654A (en) Driving operation support device
JP4626379B2 (en) Vehicle support method and vehicle support device
KR100534689B1 (en) Method for guide of complexity road of a navigation system on vehicle
JP2019053394A (en) Automatic driving support device and computer program
JP2008014760A (en) Navigation device
JP2008262481A (en) Vehicle control device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090717

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20100317

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20100317

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110411

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110419

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110617

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120117

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120130

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150224

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees