JP2006231962A - Driving supporting device for vehicle - Google Patents

Driving supporting device for vehicle Download PDF

Info

Publication number
JP2006231962A
JP2006231962A JP2005045856A JP2005045856A JP2006231962A JP 2006231962 A JP2006231962 A JP 2006231962A JP 2005045856 A JP2005045856 A JP 2005045856A JP 2005045856 A JP2005045856 A JP 2005045856A JP 2006231962 A JP2006231962 A JP 2006231962A
Authority
JP
Japan
Prior art keywords
driver
vehicle
attention
area
alarm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005045856A
Other languages
Japanese (ja)
Other versions
JP4534788B2 (en
JP2006231962A5 (en
Inventor
Akira Hattori
彰 服部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2005045856A priority Critical patent/JP4534788B2/en
Publication of JP2006231962A publication Critical patent/JP2006231962A/en
Publication of JP2006231962A5 publication Critical patent/JP2006231962A5/ja
Application granted granted Critical
Publication of JP4534788B2 publication Critical patent/JP4534788B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a driving supporting device for a vehicle to call an attention emphasizing an object or a region to which a driver does not pay sufficient attention out of the objects or the regions to which the driver should pay his attention. <P>SOLUTION: This driving supporting device for the vehicle to call the attention of the driver in accordance with possibility of collision of the self vehicle is furnished with a sight-line direction detection means to detect a sight-line direction of the driver, a judgement means to judge whether the driver pays attention to the object or the region to which the driver should pay attention or not in accordance with the sight-line direction of the driver detected by the sight-line direction detection means and a setting means to raise a degree of attention-calling to the driver concerning the object or the region judged by the judgement means as the driver does not pay attention to it out of the objects and the regions to which the driver should pay attention. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、概して、自車両の衝突可能性に基づいて運転者に注意喚起を与える車両用運転支援装置に係り、特に、運転者が注意を払うべき物体又は領域のうち運転者が注意を払っていない物体又は領域についてのみ注意喚起を与える車両用運転支援装置に関する。   The present invention generally relates to a vehicle driving support device that alerts a driver based on the possibility of collision of the host vehicle, and in particular, the driver pays attention to an object or region that the driver should pay attention to. The present invention relates to a vehicle driving support device that gives attention only to an object or region that is not.

従来、自車両の(例えば先行車両などとの)衝突可能性に基づいて運転者に(例えば、警報音やディスプレイ表示などを利用して)注意喚起を与える車両用運転支援装置が知られている。   2. Description of the Related Art Conventionally, a vehicle driving support device that alerts a driver (for example, using an alarm sound or a display) based on the possibility of collision of the own vehicle (for example, with a preceding vehicle) is known. .

また、このような注意喚起について、運転者の視線方向を検出し、運転者の注視している点又は注視していない点に基づいて注意喚起のやり方を変える車両用運転支援装置も知られている(例えば、特許文献1及び2参照)。   In addition, a vehicle driving support device that detects the driver's line-of-sight direction and changes the manner of alerting based on whether the driver is watching or not is known. (For example, see Patent Documents 1 and 2).

特許文献1に開示された装置は、運転者の脇見運転及び居眠り運転を監視し、いずれかが検出されたときには警報音を出力するタイミングを通常時より早めるものである。   The device disclosed in Patent Document 1 monitors the driver's side-by-side driving and dozing operation, and when any of them is detected, the timing for outputting an alarm sound is made earlier than usual.

特許文献2に開示された装置は、運転者の視線が特定の一点に固定しているとき、たとえ運転者の顔が前方を向いていたとしても脇見運転や居眠り運転と同等の注意力散漫な漫然運転であると判定するものである。
特開平3−260900号公報 特開平8−17812号公報
In the device disclosed in Patent Document 2, when the driver's line of sight is fixed at a specific point, even if the driver's face is facing forward, the driver's attention is equivalent to that of a side-view driving or a nap driving. It is determined that the driving is random.
JP-A-3-260900 JP-A-8-17812

しかしながら、上記特許文献1に開示された従来装置では、例えばサイドミラーを見るなどの「必要な脇見」とそれ以外の「望ましくない脇見」との区別がされていない。   However, in the conventional apparatus disclosed in Patent Document 1, there is no distinction between “necessary looking aside” such as looking at a side mirror and other “unwanted looking aside”.

また、上記特許文献2に開示された従来装置では、例えば先行車両や歩行者などに注意を払っているがゆえの「必要な注視」とそれ以外の「注意力散漫による注視」とが十分に区別されない場合も生じ得る。   Further, in the conventional device disclosed in Patent Document 2, for example, “necessary gaze” because attention is paid to a preceding vehicle or a pedestrian and other “gaze due to distraction” are sufficient. There may be cases where they are not distinguished.

このように、上記特許文献1及び2に開示された従来装置によれば、衝突可能性を有する物体又はそのような物体と交錯する可能性のある領域に対して運転者が十分に注意を払っているか否かが適切に判別されない。   As described above, according to the conventional devices disclosed in Patent Documents 1 and 2, the driver pays sufficient attention to an object having a collision possibility or an area where the object may intersect with such an object. Is not properly determined.

注意喚起の本来的意味からすれば、運転者が十分な注意を払っていない物体又は領域についてこそより重点的に/より強調して注意喚起が行われるべきである。   In the original sense of alerting, alerting should be done with more emphasis / higher emphasis on objects or areas where the driver is not paying sufficient attention.

また、運転者が十分な注意を払っている物体又は領域について注意喚起が行われることは、時として非効率的であり、また運転者に煩わしい(又はお節介)との印象を与える可能性がある。   Also, alerting an object or area that the driver is paying sufficient attention to is sometimes inefficient and may give the driver an annoyance (or annoyance). .

本発明はこのような課題を解決するためのものであり、運転者が注意を払うべき物体又は領域のうち運転者が十分な注意を払っていない物体又は領域について強調した注意喚起を運転者に与える車両用運転支援装置を提供することを主たる目的とする。   The present invention is intended to solve such a problem. The driver emphasizes a warning that emphasizes an object or area that the driver should pay attention to, or an object or area that the driver does not pay sufficient attention to. The main object is to provide a vehicle driving support device.

上記目的を達成するための本発明の一態様は、自車両の衝突可能性に基づいて運転者に注意喚起を与える車両用運転支援装置であって、運転者の視線方向を検出する視線方向検出手段と、該視線方向検出手段により検出された運転者の視線方向に基づいて運転者が注意を払うべき物体又は領域に注意を払っているか否かを判定する判定手段と、運転者が注意を払うべき物体又は領域のうち上記判定手段により運転者が注意を払っていないと判定された物体又は領域について運転者に対する注意喚起の程度を上げる設定手段とを有する車両用運転支援装置である。   One aspect of the present invention for achieving the above object is a vehicle driving support device that alerts a driver based on the possibility of collision of the host vehicle, and detects a gaze direction of the driver. Means for determining whether or not the driver is paying attention to an object or area to which attention should be paid based on the driver's line-of-sight direction detected by the line-of-sight direction detection means, and A driving support apparatus for a vehicle having setting means for raising the degree of alerting the driver for an object or area that is determined not to be paid attention by the determination means among objects or areas to be paid.

この一態様によれば、運転者の視線方向の例えば移動履歴などに基づいて、運転者が注意を払うべき物体又は領域のうち運転者が注意を払っていないと判定された物体又は領域についての注意喚起の程度を運転者が注意を払っている物体又は領域に比して高めることができるため、運転者にとって十分な注意が払われていない物体又は領域が強調された効果的な注意喚起となり、注意喚起が煩わしい又はお節介であるといった印象を運転者に与える可能性が大幅に低減される。   According to this aspect, the object or region that the driver is determined not to pay attention out of the object or region that the driver should pay attention based on, for example, the movement history of the driver's line-of-sight direction, etc. Since the degree of alerting can be increased compared to the object or area that the driver is paying attention to, it is an effective alert that emphasizes the object or area where the driver is not paying enough attention. The possibility of giving the driver the impression that alerting is bothersome or troublesome is greatly reduced.

なお、上記一態様において、運転者に対する注意喚起を必要最小限とする観点からは、上記設定手段が、運転者が注意を払うべき物体又は領域のうち上記判定手段により運転者が注意を払っていないと判定された物体又は領域についてのみ運転者に(例えば、それら物体又は領域の方向へ視線を向けるように運転者を誘導する音響的又は視覚的な)注意喚起が与えられるように設定する、ことが好ましい。   In the above aspect, from the viewpoint of minimizing alerting to the driver, the setting unit is paying attention to the driver by the determination unit among objects or areas to which the driver should pay attention. Set only to alert the driver (e.g., acoustic or visual to guide the driver to direct his gaze in the direction of the object or region) determined to be not It is preferable.

また、上記一態様において、警報対象物が存在する場合に、その警報対象物に対して運転者が注意を払っているか否かを判定するために、上記判定手段が、例えば、自車両と衝突可能性を有する物体を検出する物体検出手段と、上記視線検出手段により検出された運転者の視線方向と上記物体検出手段により検出された自車両と衝突可能性を有する物体の存在方向とを照合する物体照合手段とを有し、該物体照合手段による照合の結果に基づいて、運転者が注意を払うべき物体に注意を払っているか否かを判定する、ことが好ましい。   Further, in the above aspect, when there is an alarm object, the determination means may, for example, collide with the host vehicle in order to determine whether the driver is paying attention to the alarm object. The object detection means for detecting an object having a possibility, the driver's line-of-sight direction detected by the line-of-sight detection means and the presence direction of an object having a possibility of collision with the own vehicle detected by the object detection means are collated. It is preferable to determine whether or not the driver is paying attention to an object to which attention should be paid based on the result of the collation by the object collating means.

また、上記一態様において、警報対象物が存在しない場合に、警報対象物が現れる可能性がある領域に対して運転者が注意を払っているか否かを判定するために、上記判定手段が、例えば、自車両前方を撮像する撮像手段と、上記視線検出手段により検出された運転者の視線方向と上記撮像手段により撮像された自車両前方画像とを照合する領域照合手段とを有し、該領域照合手段による照合の結果に基づいて、運転者が注意を払うべき領域に注意を払っているか否かを判定する、ことが好ましい。   Further, in the above aspect, in order to determine whether or not the driver is paying attention to an area where the alarm object may appear when the alarm object does not exist, the determination unit includes: For example, it has an image pickup means for picking up the front of the host vehicle, and an area check means for checking the driver's line-of-sight direction detected by the line-of-sight detection means and the vehicle front image picked up by the image pickup means, It is preferable to determine whether or not the driver is paying attention to an area to which attention should be paid based on the result of matching by the area matching means.

後者の場合、警報対象物が現れる可能性がある領域は、自車両の停止可能線よりも遠方の自車両走行車線上(先行車両の減速などによる)、及び、自車両の停止可能線よりも手前の自車両走行車線沿い(割り込み車両の減速などによる)であるとの洞察に基づき、上記判定手段は、自車両の停止可能距離を算出する算出手段を更に有し、上記視線検出手段により検出された運転者の視線方向が上記算出手段により算出された停止可能距離より手前の自車両走行車線内領域に向いている頻度が他の領域に比して高いとき、運転者が注意を払うべき領域に注意を払っていないと判定する、ことが好ましい。   In the latter case, the area where the alarm object may appear is on the own vehicle traveling lane farther than the stoppage line of the own vehicle (due to deceleration of the preceding vehicle) and than the stoppage line of the own vehicle Based on the insight that the vehicle is in front of the own vehicle lane (due to deceleration of the interrupted vehicle, etc.), the determination means further includes a calculation means for calculating a stoppable distance of the own vehicle, and is detected by the line-of-sight detection means The driver should pay attention when the frequency of the driver's line-of-sight direction is higher in the area within the vehicle lane before the stoppable distance calculated by the calculation means than in other areas. It is preferable to determine that attention is not paid to the area.

本発明によれば、運転者が注意を払うべき物体又は領域のうち運転者が十分な注意を払っていない物体又は領域について強調した注意喚起を運転者に与える車両用運転支援装置を提供することができる。   According to the present invention, it is possible to provide a vehicle driving support device that gives a driver an alert that emphasizes an object or region that the driver should pay attention to, or an object or region that the driver does not pay sufficient attention to. Can do.

以下、本発明を実施するための最良の形態について、添付図面を参照しながら実施例を挙げて説明する。   Hereinafter, the best mode for carrying out the present invention will be described with reference to the accompanying drawings.

以下、図1〜20を用いて、本発明に係る車両用運転支援装置の一実施例について説明する。   Hereinafter, an embodiment of a vehicle driving support apparatus according to the present invention will be described with reference to FIGS.

本実施例に係る車両用運転支援装置は、自車両との衝突可能性が所定レベル以上に達した運転者が注意を払うべき物体又はそのような物体が現れて自車両とが交錯する可能性がある領域のうち、運転者が実際に視線を向けて十分な注意を払っていない物体又は領域について、運転者が注意を払っている警報対象物体又は領域よりも警報レベルを上げて注意喚起を行うものである。   The driving support device for a vehicle according to the present embodiment has a possibility that an object that should be paid attention by a driver whose possibility of collision with the own vehicle has reached a predetermined level or more or such an object appears and crosses with the own vehicle. In an area, a warning is raised by raising the alarm level for an object or area in which the driver is not paying sufficient attention to the line of sight and higher than the alarm target object or area in which the driver is paying attention. Is what you do.

以下、このような処理を実現する構成及び具体的動作について説明する。   Hereinafter, a configuration and a specific operation for realizing such processing will be described.

図1は、本実施例に係る車両用運転支援装置100の概略構成図である。車両用運転支援装置100は、自車両と衝突可能性のある先行車両などの警報対象物を検出し、検出された警報対象物と自車両との間の距離や相対速度などを算出するために、レーダセンサ101、画像センサ102、車速センサ103などの種々のセンサを有する。さらに、舵角センサやヨーレートセンサなど自車両状態を検出するセンサ類(図示せず)を有してもよい。また、これらセンサ類は、他の車載システムと共用であってもよい。   FIG. 1 is a schematic configuration diagram of a vehicle driving support apparatus 100 according to the present embodiment. The vehicle driving support apparatus 100 detects an alarm object such as a preceding vehicle that may collide with the host vehicle, and calculates a distance, a relative speed, and the like between the detected alarm object and the host vehicle. And various sensors such as a radar sensor 101, an image sensor 102, and a vehicle speed sensor 103. Furthermore, you may have sensors (not shown) which detect the own vehicle state, such as a steering angle sensor and a yaw rate sensor. These sensors may be shared with other in-vehicle systems.

車両用運転支援装置100は、更に、例えば運転者の顔(例えば、特に目の虹彩)を画像カメラで撮像し、撮像された画像を解析処理するなどの手法で、運転者の視線方向を検出する視線方向検出部104を有する。このような視線方向を検出する構成・手法については、種々のものが提案されており、当業者には既知であるため、詳しい説明を省略する。本実施例では任意の手法を採用することができる。   The vehicle driving support apparatus 100 further detects the driver's line-of-sight direction, for example, by capturing the driver's face (for example, the iris of the eyes in particular) with an image camera and analyzing the captured image. A line-of-sight direction detection unit 104 is provided. Various configurations and methods for detecting the line-of-sight direction have been proposed and are known to those skilled in the art, and thus detailed description thereof is omitted. In this embodiment, any method can be adopted.

車両用運転支援装置100は、更に、上記センサ類の出力信号を分析して、警報対象物を検出し、検出された警報対象物と自車両との衝突可能性を判断する衝突判定部105を有する。本実施例において、衝突判定部105は、例えば、ECU(Electronic Control Unit;電子制御装置)である。   The vehicle driving support apparatus 100 further includes a collision determination unit 105 that analyzes the output signals of the sensors to detect a warning object and determines the possibility of a collision between the detected warning object and the host vehicle. Have. In the present embodiment, the collision determination unit 105 is, for example, an ECU (Electronic Control Unit).

車両用運転支援装置100は、更に、警報対象物の警報レベルに応じて運転者への警報を生成する警報処理部106を有する。本実施例において、警報処理部106は、例えば、ECUである。   The vehicle driving support apparatus 100 further includes an alarm processing unit 106 that generates an alarm to the driver in accordance with the alarm level of the alarm object. In the present embodiment, the alarm processing unit 106 is, for example, an ECU.

車両用運転支援装置100は、更に、予め設定された警報対象物の警報レベルを記憶する記憶部107を有する。本実施例において、記憶部107は、例えば、車両イグニッションOFFでもデータが消えない不揮発性の記憶媒体である。   The vehicle driving support device 100 further includes a storage unit 107 that stores a preset alarm level of an alarm target. In the present embodiment, the storage unit 107 is a non-volatile storage medium in which data is not lost even when the vehicle ignition is OFF, for example.

車両用運転支援装置100は、更に、警報処理部106により生成された警報を運転者に提示する出力部108を有する。本実施例において、出力部108は、少なくとも、ヘッドアップ・ディスプレイ(HUD)を有するものとする。加えて、1つ以上のスピーカを有してもよい。   The vehicle driving support apparatus 100 further includes an output unit 108 that presents an alarm generated by the alarm processing unit 106 to the driver. In this embodiment, the output unit 108 has at least a head-up display (HUD). In addition, you may have one or more speakers.

このような概略構成を有する車両用警報装置100において、警報処理部106は、上述のように、運転者が十分な注意を払っていない物体又は領域について特に注意喚起が行われるように、そのような物体又は領域について運転者が注意を払っている物体又は領域よりも高い警報レベルで警報を発する。   In the vehicular alarm device 100 having such a schematic configuration, the alarm processing unit 106, as described above, does so so that the driver is particularly alerted about an object or region that is not paying sufficient attention. The alarm is issued at a higher alarm level than the object or area where the driver is paying attention to the object or area.

このような警報の生成方法について、図2を用いて詳述する。図2は、本実施例に係る車両用運転支援装置100の警報処理部106による警報処理の流れを示すフローチャートである。   A method for generating such an alarm will be described in detail with reference to FIG. FIG. 2 is a flowchart showing a flow of alarm processing by the alarm processing unit 106 of the vehicle driving support apparatus 100 according to the present embodiment.

まず、警報処理部106は、衝突判定部105の出力から、警報対象物が検出されたか否かを判定する(S201)。ここで、警報対象物には、他車両や歩行者などの移動体の他に、静止物も含まれる。   First, the alarm processing unit 106 determines whether an alarm object is detected from the output of the collision determination unit 105 (S201). Here, the alarm object includes a stationary object in addition to a moving body such as another vehicle or a pedestrian.

警報対象物が検出されなかった場合(S201の「NO」)、S202〜S205において警報対象物が登場し得る領域について警報処理が行われる。   When an alarm target object is not detected (“NO” in S201), an alarm process is performed for an area where the alarm target object may appear in S202 to S205.

まず、自車両の停止可能距離Lが演算される(S202)。図3に示すように、停止可能距離Lは、車速Vの関数であって、制動距離sと空走距離sとの和:
=s+s
である。
First, the stoppable distance L s of the host vehicle is calculated (S202). As shown in FIG. 3, the stoppable distance L s is a function of the vehicle speed V n and is the sum of the braking distance s 1 and the idle running distance s 2 :
L s = s 1 + s 2
It is.

制動距離sは、そのときの自車両の車速Vと、路面摩擦係数μとから、
=1/2・(V・μ・g
として求められる。ここで、車速Vは、車速センサ103から取得される。路面摩擦係数μは、実測値でもよく、或いは、画像センサ102等によって取得した天候や路面状況などからの推定値であってもよい。
The braking distance s 1 is calculated from the vehicle speed V n of the host vehicle at that time and the road surface friction coefficient μ.
s 1 = 1/2 · (V n ) 2 · μ · g
As required. Here, the vehicle speed V n is acquired from the vehicle speed sensor 103. The road surface friction coefficient μ may be an actual measurement value, or may be an estimated value obtained from the weather or road surface condition acquired by the image sensor 102 or the like.

空走距離sは、運転者個人ごとに異なる空走時間Stimeと車速Vの積であり、
=V×Stime
として求められる。空走時間Stimeは、予め記憶部107に記憶保持されているものとする。
The free running distance s 2 is the product of the free running time S time and the vehicle speed V n that are different for each individual driver.
s 2 = V n × S time
As required. It is assumed that the idle time S time is stored in the storage unit 107 in advance.

このようにして停止距離Lが演算されると、次いで、警報処理部106は、視線方向検出部104により検出された運転者の視線方向を画像センサ102により撮像された自車両前方画像に照らして、運転者が自車両前方のどこを注視しているのかという単位時間内移動視点の分布(クラスタリング)を求める(S203)。 When the stop distance L s is thus calculated, the warning processing unit 106 then illuminates the driver's line-of-sight direction detected by the line-of-sight direction detection unit 104 with the front image of the host vehicle captured by the image sensor 102. Then, a distribution (clustering) of moving viewpoints within a unit time as to where the driver is looking ahead is determined (S203).

次いで、このクラスタリングから、運転者が注意を払うべき領域全般にまんべんなく適切に視線を移動させているか否かが判定される(S204)。以下、本実施例でいうところの「注意を払うべき領域」について説明する。   Next, it is determined from this clustering whether or not the driver has properly moved the line of sight throughout the entire area to which attention should be paid (S204). In the following, the “area to be paid attention” in the present embodiment will be described.

警報処理部106は、図4に示すように、画像センサ102により撮像された自車両前方画像401をS202で求めた停止可能距離Lを境として二分し、停止可能距離Lより遠方のエリアAと手前のエリアBとを設定する。 Alarm processing unit 106, as shown in FIG. 4, bisects stop distance L s found ahead of the vehicle image 401 captured by the image sensor 102 in step S202 as a boundary, distant from stop distance L s area A and front area B are set.

図5は、これを側面から表したものであり、運転者501からの距離LがL=Lとなるところを境として、遠方側がエリアA、手前側がエリアBとなる。視線502の場合、運転者はエリアAを注視していることになり、視線503の場合、運転者はエリアBを注視していることになる。 5, which is a representation from the side, as a boundary where the distance L from the driver 501 becomes L = L s, the far side area A, the front side becomes the area B. In the case of the line of sight 502, the driver is gazing at the area A, and in the case of the line of sight 503, the driver is gazing at the area B.

S203で求めた単位時間移動視点がエリアB内に集中していた場合を図6及び7に示す。図6は自車両前方画像601上に単位時間移動視線を重ねたものであり、図7は横軸を自車両進行方向に沿った運転者からの距離L、縦軸を発生頻度として、視点の距離分布701を示している。   A case where the unit time moving viewpoint obtained in S203 is concentrated in the area B is shown in FIGS. FIG. 6 is a view in which a moving line of sight of unit time is superimposed on the front image 601 of the own vehicle. FIG. 7 shows the viewpoint L with the horizontal axis as the distance L from the driver along the own vehicle traveling direction and the vertical axis as the occurrence frequency. A distance distribution 701 is shown.

このような停止可能距離Lより手前に偏った視点分布の場合、例えば車両602のように停止可能距離Lより遠方に位置する先行車両に注意を払っていないことになる。例えば車両602が急減速した場合などに、車両602が停止可能距離Lより手前に来てから運転者が車両602に気が付いても制動により衝突が回避できないため、運転者は、自車両走行車線については、車両602などの先行車両が停止可能距離Lより手前にこないように、停止可能距離Lより遠方に視線を向けるべきである。 For viewpoint distribution biased in front of such a stop distance L s, would not pay attention to the preceding vehicle located far from the stop distance L s, for example, as the vehicle 602. For example, when the vehicle 602 suddenly decelerates, even if the driver notices the vehicle 602 after the vehicle 602 comes before the stoppable distance L s, the collision cannot be avoided by braking. for, as the preceding vehicle such as the vehicle 602 does not come in front of the stop distance L s, it should direct the line of sight in the distance from the stop distance L s.

他方、S203で求めた単位時間移動視点がエリアA内に集中していた場合を図8及び9に示す。図8は自車両前方画像801上に単位時間移動視線を重ねたものであり、図9は横軸を自車両進行方向に沿った運転者からの距離L、縦軸を発生頻度として、視点の距離分布901を示している。   On the other hand, FIGS. 8 and 9 show a case where the unit time moving viewpoint obtained in S203 is concentrated in the area A. FIG. FIG. 8 is a view in which a unit-time movement line of sight is superimposed on the front image 801 of the host vehicle. FIG. 9 shows the viewpoint L with the horizontal axis as the distance L from the driver along the host vehicle traveling direction and the vertical axis as the frequency of occurrence. A distance distribution 901 is shown.

このような停止可能距離Lより遠方に偏った視点分布の場合、例えば車両802のように停止可能距離Lより手前に割り込んでくる車両に注意を払っていないことになる。例えば車両802が急減速した場合などには制動により衝突が回避できないため、運転者は、左右方向の自車両走行車線ライン際については、車両802などの割り込み車両の存在を監視するために、停止可能距離Lより手前に視線を向けるべきである。 For such stop distance L s viewpoint distribution biased far from, would not pay attention to vehicles coming interrupts in front of the stop distance L s, for example, as the vehicle 802. For example, when the vehicle 802 decelerates suddenly, the collision cannot be avoided by braking. Therefore, the driver stops in order to monitor the presence of an interrupting vehicle such as the vehicle 802 when the vehicle lane line in the left-right direction is exceeded. distance should be directing the line of sight to the front of the L s.

以上のような考察に基づき、本願発明者の考える望ましい視点分布を図10〜12に示す。図10は自車両前方画像1001上に単位時間移動視線を重ねたものであり、図11は横軸を自車両進行方向に沿った運転者からの距離L、縦軸を発生頻度として、視点の距離分布1101を示すものであり、図12は横軸を自車両進行方向に水平面において直交する左右方向距離S、縦軸を発生頻度として、エリアB内での視点の分布1201を示すものである。   Based on the above consideration, desirable viewpoint distribution considered by the present inventor is shown in FIGS. FIG. 10 is a view in which a line of sight moving for a unit time is superimposed on the front image 1001 of the host vehicle. FIG. 11 shows the viewpoint L with the horizontal axis as the distance L from the driver along the host vehicle traveling direction and the vertical axis as the occurrence frequency. The distance distribution 1101 is shown. FIG. 12 shows the distribution 1201 of viewpoints in the area B with the horizontal axis as the horizontal direction distance S perpendicular to the traveling direction of the host vehicle in the horizontal plane and the vertical axis as the frequency of occurrence. .

図示するように、この望ましい視点分布においては、自車両走行車線上については主として停止可能距離Lより遠方に注意が払われており、左右方向については主として停止可能距離Lより手前に注意が払われている。図12において、右側で最も視線が集中している(すなわち分布重心の)距離Sは自車両走行車線の右側ラインと略一致し、左側で最も視線が集中している(すなわち分布重心の)距離Sは自車両走行車線の左側ラインと略一致する。 As illustrated, in this preferred viewpoints distribution, the host vehicle travel lane on is mainly attention farther than stopping distance L s is paid, attention in front of the primarily stopping distance L s for the left and right directions Have been paid. 12, most sight are concentrated (i.e. distribution of gravity) at the right distance S r is substantially coincident with the right line of the host vehicle travel lane, most sight on the left are concentrated (i.e. distribution centroid) the distance S l is substantially the same as the left line of the host vehicle travel lane.

このように、この望ましい視点分布では、停止可能距離Lを基準として、先行車両を監視するために距離Lより前方の自車両車線上と、割り込み車両を監視するために距離Lより手前の自車両車線ライン上とに視線が集中している。換言すれば、停止可能距離Lより手前の自車両車線内に視線を集中させていることは望ましくない。この領域を図10にエリアXとして示す。 Thus, in this preferred viewpoint distribution, based on the stopping distance L s, and the front of the own vehicle lane than the distance L s to monitor the preceding vehicle, closer than the distance L s to monitor the interrupt vehicle The line of sight is concentrated on the own vehicle lane line. In other words, it is not desirable to have to concentrate the line of sight to the vehicle within the lane in front than the stop distance L s. This area is shown as area X in FIG.

このような考察に基づき、本実施例のS204では、運転者の単位時間移動視線の分布がエリアXに偏っているか否かに応じて、運転者が注意を払うべき領域に適切に視線を移動させているか否かが判定される(S204)。   Based on such consideration, in S204 of the present embodiment, the line of sight is appropriately moved to an area where the driver should pay attention depending on whether or not the distribution of the unit time movement line of sight of the driver is biased to the area X. It is determined whether or not it is set (S204).

運転者の視線移動がエリアXに偏っていると判定された場合(S204の「NO」)、次いで、警報処理部106は、警報レベルを判定する(S205)。警報レベルは、出力される警報の注意喚起の程度を表し、警報レベルが高いほど重大性・緊急性が高く、運転者がすぐに認識するように強調された注意喚起が行われる。   When it is determined that the driver's line-of-sight movement is biased to the area X (“NO” in S204), the alarm processing unit 106 then determines the alarm level (S205). The alarm level represents the degree of alerting of the output alarm, and the higher the alarm level, the higher the severity and urgency. The alert is emphasized so that the driver can recognize it immediately.

本実施例では、一例として、警報レベルは2段階設定されるものとする。そして、運転者がもっぱらエリアXのみを注視していると判定された場合、警報レベル=1とし、運転者がエリアXもライン上も含むエリアB全体を注視していると判定された場合、警報レベル=2とする。当然、この場合、警報レベル1は、警報レベル2より警報レベルが高く、より強調された注意喚起が行われる。   In this embodiment, as an example, the alarm level is set in two stages. And when it is determined that the driver is exclusively gazing only at the area X, the alarm level is 1, and when it is determined that the driver is gazing at the entire area B including both the area X and the line, Alarm level = 2. Of course, in this case, the alarm level 1 is higher than the alarm level 2, and a more emphasized alert is performed.

このようにして警報処理部106により警報レベルが判定されると、その警報レベルに応じた警報が生成され、出力部108より出力される(S210)。なお、ここでの警報は、あくまで運転者に必要な領域に視線を向けさせて、注意を払うように誘導するためのものであって、直ちに急ブレーキを踏まなければならないほど緊急性はいまだ存在しない状況での警報であるため、警報ではなく情報提供と言い換えてもよい。   When the alarm level is determined by the alarm processing unit 106 in this way, an alarm corresponding to the alarm level is generated and output from the output unit 108 (S210). The warning here is only to guide the driver to pay attention to the necessary area, and there is still urgency so that the driver must step on the brakes immediately. Since it is an alarm in a situation where it does not, it may be paraphrased as providing information instead of an alarm.

本実施例で出力される警報は、運転者が注意を払うべき領域であって運転者がいまだ注意を十分に払っていないと判定された領域について、HUD上に視覚的に提示して視線を誘導するものである。   The alarm output in the present embodiment is a region where the driver should pay attention and a region where the driver has not yet paid sufficient attention is visually presented on the HUD and the line of sight is displayed. It is something to guide.

このような視覚的警報の一例を図13及び図14に示す。図13は、警報レベル=1の場合、図14は警報レベル=2の場合をそれぞれ示している。警報レベル=1の場合、運転者の視線を停止可能距離Lより前方の自車両走行車線及び停止可能距離Lより手前の左右ライン上とに誘導することが必要であり、図13に示すようにHUD上のこれら領域を赤や黄色といった目立つ色で覆い、点滅させるなどして、運転者がそれら領域に注意が引かれるようにする。 An example of such a visual alarm is shown in FIGS. FIG. 13 shows the case where the alarm level = 1, and FIG. 14 shows the case where the alarm level = 2. If alarm level = 1, it is necessary to induce on the front of the left and right lines on than the driver stop distance line of sight L s from the front of the host vehicle travel lane and the possible stopping distance L s, 13 Thus, these areas on the HUD are covered with conspicuous colors such as red and yellow and blinked so that the driver is drawn to these areas.

警報レベル=2の場合、停止可能距離Lより手前の左右ライン上には既に運転者が注意を払っているため、運転者の視線を停止可能距離Lより前方の自車両走行車線へ誘導させることが必要である。そこで、図14に示すようにHUD上のこの領域を赤や黄色といった目立つ色で覆い、点滅させるなどして、運転者がその領域に注意が引かれるようにする。 When the warning level = 2, the driver has already paid attention to the left and right lines before the stop possible distance L s, so the driver's line of sight is guided to the vehicle lane ahead of the stop distance L s It is necessary to make it. Therefore, as shown in FIG. 14, this area on the HUD is covered with a conspicuous color such as red or yellow and blinked, so that the driver is drawn to the area.

なお、警報レベル=2の場合、警報レベル=1の場合に比して、注意を引かせたい領域を覆う色の濃度や明るさや点滅の周期などを変えたりしてもよい。また、いずれの警報レベルの場合にも、HUD上での視覚的注意喚起に加えて、音声等による音響的注意喚起が行われてもよい。   Note that when the alarm level = 2, compared to the case where the alarm level = 1, the density, brightness, blinking cycle, and the like of the color covering the area to which attention is to be drawn may be changed. Moreover, in any alarm level, in addition to visual alerting on the HUD, acoustic alerting by voice or the like may be performed.

このような警報(情報提供)により、運転者は、注意を払うべき領域のうち自身が視線を向けていない領域について注意喚起され、それらの領域へ視線を向け、注意を払うようになる。   By such an alarm (information provision), the driver is alerted to areas where attention should not be paid to the areas where attention should be paid, and attention is directed to those areas so as to pay attention.

他方、1以上の警報対象物が検出された場合(S201の「YES」)、S206〜S209において検出された1以上の警報対象物について警報処理が行われる。   On the other hand, when one or more alarm objects are detected (“YES” in S201), alarm processing is performed for the one or more alarm objects detected in S206 to S209.

まず、警報処理部106は、視線方向検出部104により検出された運転者の視線方向を画像センサ102により撮像された自車両前方画像に照らして、運転者が自車両前方のどこを注視しているのかという単位時間内移動視点の分布(クラスタリング)を求める(S206)。   First, the alarm processing unit 106 looks at the driver's line-of-sight direction detected by the line-of-sight direction detection unit 104 against the front image of the host vehicle captured by the image sensor 102, and the driver is gazing where the driver is ahead. The distribution (clustering) of moving viewpoints within a unit time as to whether they are present is obtained (S206).

次いで、警報処理部106は、S206で求められた単位時間内移動視点の分布とS201で検出された警報対象物とを画像センサ102によって撮像された自車両前方画面上で照合し、どの警報対象物に運転者は視点を合わせているか、逆にどの警報対象物に視線を向けていないか、を確認して、運転者が見落としている警報対象物が存在するか否かを判断する(S207)。   Next, the alarm processing unit 106 collates the distribution of the moving viewpoint within the unit time obtained in S206 with the alarm object detected in S201 on the front screen of the host vehicle captured by the image sensor 102, and determines which alarm object It is determined whether or not there is an alarm object that the driver has overlooked by confirming whether the driver is looking at the object, or conversely, which alarm object is not looking at the object (S207). ).

視点のクラスタリング及び警報対象物との照合の一例を図17及び18を用いて説明する。図17に示すような自車両前方画像1701において、警報対象物として先行車両1702、歩行者1703、左交差点1704、1705が存在するものとする。   An example of viewpoint clustering and collation with an alarm object will be described with reference to FIGS. In the host vehicle forward image 1701 as shown in FIG. 17, it is assumed that a preceding vehicle 1702, a pedestrian 1703, and left intersections 1704 and 1705 exist as alarm objects.

図17には、更に、単位時間移動視点も重ねられている。これら視点を同じ対象物を見ていると推定されるものごとにグループ化(クラスタリング)した様子を示すのが図18である。このクラスタリングから、図17及び18に挙げた一例では、運転者が、歩行者1703を見落としていると判断される。   In FIG. 17, the unit time movement viewpoint is also superimposed. FIG. 18 shows a state in which these viewpoints are grouped (clustered) for each of those estimated to be viewing the same object. From this clustering, in the example shown in FIGS. 17 and 18, it is determined that the driver has overlooked the pedestrian 1703.

このような判断により運転者が見落としている、すなわち視線を向けていない警報対象物が存在しないと判断された場合(S207の「NO」)、特段の警報は行われずに本フローの1ルーチンを終了する。   If it is determined by such a determination that the driver has overlooked, that is, there is no alarm target that is not directed at the line of sight (“NO” in S207), one routine of this flow is not performed without performing a special alarm. finish.

他方、見落としている1以上の警報対象物が存在すると判断された場合(S207の「YES」)、次いで、警報処理部106は、その見落とされている警報対象物についての警報レベルを判定する(S208)。   On the other hand, if it is determined that there is one or more alarm objects that have been overlooked (“YES” in S207), then the alarm processing unit 106 determines the alarm level for the alarm object that has been overlooked ( S208).

警報対象物の警報レベルは、予め記憶部107に記憶保持された注視期待レベルに応じて算出される。ここで、注視期待レベルとは、対象物又はその属性ごとに設定された運転者が注視すべき度合を表すレベルである。一例を図19に示す。警報対象物は、通常、2項目以上に該当し、その警報対象物の警報レベルは該当するすべての注視期待レベル値を乗算して算出される。例えば、遠く(3)の車両(10)は警報レベル=3×10=30となる。また、図17及び18に挙げた一例の場合には、近く(8)の歩行者(10)が見落とされているため、その歩行者についての警報レベルは、8×10=80となる。   The alarm level of the alarm object is calculated according to the gaze expectation level stored and held in advance in the storage unit 107. Here, the gaze expectation level is a level representing the degree to which the driver set for each object or its attribute should gaze. An example is shown in FIG. The alarm object usually corresponds to two or more items, and the alarm level of the alarm object is calculated by multiplying all corresponding gaze expectation level values. For example, a vehicle (10) far away (3) has an alarm level = 3 × 10 = 30. In the case of the example shown in FIGS. 17 and 18, since the nearby (8) pedestrian (10) is overlooked, the alarm level for the pedestrian is 8 × 10 = 80.

このように見落とされていると判断された警報対象物の各々について警報レベルが判定されると(S208)、次いで、算出された警報レベルの値が最も大きい警報対象物が抽出される(S209)。   When the alarm level is determined for each of the alarm objects determined to be overlooked in this way (S208), the alarm object having the largest calculated alarm level value is then extracted (S209). .

このようにして警報処理部106により最大の警報レベルを有する警報対象物が抽出されると、その警報対象物について警報が生成され、出力部108から出力される(S210)。ここでも、出力される警報は、あくまで運転者に見落としている警報対象物に視線を向けさせて、注意を払うように誘導するためのものであって、直ちに急ブレーキを踏まなければならないほど緊急性はいまだ存在しない状況での警報であるため、警報ではなく情報提供と言い換えてもよい。   In this way, when the alarm object having the maximum alarm level is extracted by the alarm processing unit 106, an alarm is generated for the alarm object and output from the output unit 108 (S210). Again, the warning that is output is intended to guide the driver to pay attention to the warning object that is overlooked by the driver. Since this is an alarm in a situation where there is still no sex, it may be paraphrased as providing information instead of an alarm.

本実施例で出力される警報は、運転者が注意を払うべき対象物であって運転者がいまだ注意を十分に払っていないと判定された対象物について、HUD上に視覚的に提示して視線を誘導するものである。   The alarm output in the present embodiment is a visual indication on the HUD of an object that the driver should pay attention to and the object that has been determined that the driver has not yet paid sufficient attention. It induces the line of sight.

このような視覚的警報の一例を図20に示す。図20は、図17及び18に示した一例の続きで、見落とされた右手からの歩行者1703が最大警報レベルを有する場合である。この場合、図20に示すようにHUD上の歩行者1703を赤や黄色といった目立つ色で覆い、点滅させるなどして、運転者が歩行者1703に注意が引かれるようにする。   An example of such a visual alarm is shown in FIG. FIG. 20 is a continuation of the example shown in FIGS. 17 and 18, where the pedestrian 1703 from the overlooked right hand has the maximum alarm level. In this case, as shown in FIG. 20, the driver is drawn to the pedestrian 1703 by covering the pedestrian 1703 on the HUD with a conspicuous color such as red or yellow and blinking.

このような警報(情報提供)により、運転者は、注意を払うべき警報対象物のうち自身が視線を向けていない対象物について注意喚起され、注意を払うようになる。   By such warning (information provision), the driver is alerted and pays attention to an object that he / she is not paying attention to among alarm objects to which attention should be paid.

このように、本実施例によれば、運転者が注意を払うべき物体又は領域のうち運転者が十分な注意を払っていない物体又は領域について運転者に注意喚起する警報を生成・出力することができるため、運転者が注意すべき物体又は領域を過不足なく全般的に見るようになる。   As described above, according to the present embodiment, an alarm for alerting the driver to an object or a region that the driver should pay attention to among objects or regions that the driver should pay attention to is generated and output. Therefore, the driver can generally see the object or area to which the driver should pay attention without any excess or deficiency.

なお、上記一実施例においては、運転者が見落としている警報対象物が存在する場合、最も警報レベルが高い警報対象物についてのみ視覚的に注意喚起するものとしたが、本発明はこれに限られず、見落としていると判断された全ての警報対象物について注意喚起するようにしてもよい。   In the above embodiment, when there is an alarm object that the driver has overlooked, only the alarm object with the highest alarm level is visually alerted, but the present invention is not limited to this. It is also possible to alert all alarm objects that are determined to have been overlooked.

また、上記一実施例は、運転者が注意を払っていない物体又は領域について注意喚起を行うものであるが、これは従来通りの運転者の視線に依らない衝突可能性に関する警報の生成・出力を何ら妨げるものではなく、両者は併存させてもよい。すなわち、運転者が注意を払っている物体又は領域と注意を払っていない物体又は領域とが並立的に注意喚起されてもよい。ただし、その場合、運転者が注意を払っていない物体又は領域の方がより強調されて注意喚起されるように(すなわち、より強い注意喚起を運転者に与えるように)注意喚起の程度(すなわち、警報レベル)に差をつけて実施されるべきである。   In the above-described embodiment, attention is given to an object or area where the driver is not paying attention. This is the conventional generation and output of an alarm regarding the possibility of collision that does not depend on the driver's line of sight. However, both may coexist. That is, the object or area where the driver is paying attention and the object or area where the driver is not paying attention may be alerted side by side. However, in that case, the degree of alerting (i.e., giving the driver a stronger alert) so that objects or areas that the driver is not paying attention to are emphasized and alerted more (i.e. , Alarm level) should be implemented with a difference.

さらに、上記一実施例においては、画像センサによって交差点の存在を認識するものとしたが、本発明はこれに限られず、例えばナビゲーション・システムが検出した自車両位置を地図データベースに照らして取得した情報を利用してもよく、或いは、車車間通信や路車間通信により取得した情報を利用してもよい。   Further, in the above embodiment, the presence of the intersection is recognized by the image sensor. However, the present invention is not limited to this. For example, the information acquired by checking the position of the vehicle detected by the navigation system in the map database. Or information acquired by vehicle-to-vehicle communication or road-to-vehicle communication may be used.

本発明は、自車両の衝突可能性に基づいて運転者に注意喚起を与える車両用運転支援装置に利用できる。搭載される車両の外観、重量、サイズ、走行性能等は問わない。   INDUSTRIAL APPLICABILITY The present invention can be used for a vehicle driving support device that alerts a driver based on the possibility of collision of the host vehicle. The appearance, weight, size, running performance, etc. of the vehicle to be mounted are not limited.

本発明の一実施例に係る車両用運転支援装置の概略構成図である。1 is a schematic configuration diagram of a vehicle driving support apparatus according to an embodiment of the present invention. 本発明の一実施例に係る車両用運転支援装置の警報処理部による警報処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the alarm process by the alarm process part of the driving assistance device for vehicles which concerns on one Example of this invention. 停止可能距離と車速との関係を示すグラフである。It is a graph which shows the relationship between a stop possible distance and a vehicle speed. 自車両前方画像上でのエリアA、Bを示す図である。It is a figure which shows areas A and B on the own vehicle front image. 運転者からの距離によってエリアA、Bを示す図である。It is a figure which shows area A and B by the distance from a driver | operator. 運転者がエリアBのみを注視している場合の単位時間移動視点を自車両前方画像に重ねたときの様子を示す図である。It is a figure which shows a mode when a driver | operator is supervising only the area B when the unit time movement viewpoint is superimposed on the front image of the own vehicle. 運転者がエリアBのみを注視している場合の運転者からの距離に応じた視点の分布を示す図である。It is a figure which shows distribution of the viewpoint according to the distance from a driver | operator when a driver | operator is gazing only at the area B. FIG. 運転者がエリアAのみを注視している場合の単位時間移動視点を自車両前方画像に重ねたときの様子を示す図である。It is a figure which shows a mode when a driver | operator is supervising only the area A when the unit time movement viewpoint is superimposed on the front image of the own vehicle. 運転者がエリアAのみを注視している場合の運転者からの距離に応じた視点の分布を示す図である。It is a figure which shows distribution of the viewpoint according to the distance from a driver | operator when a driver | operator is gazing only at the area A. FIG. 運転者が理想的に注意を払っている場合の単位時間移動視点を自車両前方画像に重ねたときの様子を示す図である。It is a figure which shows a mode when a driver | operator is paying attention ideally when the unit time movement viewpoint is superimposed on the own vehicle front image. 運転者が理想的に注意を払っている場合の運転者からの距離に応じた視点の分布を示す図である。It is a figure which shows distribution of the viewpoint according to the distance from a driver | operator when a driver | operator is paying attention ideally. 運転者が理想的に注意を払っている場合の左右方向の距離に応じた視点の分布を示す図である。It is a figure which shows distribution of the viewpoint according to the distance of the left-right direction in case the driver | operator is paying attention ideally. 本発明の一実施例に係るHUD上での視覚的警報出力の一例を示す図である。It is a figure which shows an example of the visual warning output on HUD which concerns on one Example of this invention. 本発明の一実施例に係るHUD上での視覚的警報出力の別の一例を示す図である。It is a figure which shows another example of the visual warning output on HUD which concerns on one Example of this invention. 運転者の垂直方向の視線方向角度を示す図である。It is a figure which shows a driver | operator's perpendicular | vertical gaze direction angle. 運転者の水平方向の視線方向角度を示す図である。It is a figure which shows a driver | operator's horizontal gaze direction angle. 警報対象物が存在する場合の自車両前方画像の一例を示す図である。It is a figure which shows an example of the own vehicle front image in case an alarm target object exists. 図17について視点クラスタリングを行った様子を示す図である。It is a figure which shows a mode that viewpoint clustering was performed about FIG. 本発明の一実施例において各種警報対象物に予め設定された注視期待レベルの一例を示す表である。It is a table | surface which shows an example of the gaze expectation level preset to various alarm target objects in one Example of this invention. 本発明の一実施例に係るHUD上での視覚的警報出力の一例を示す図である。It is a figure which shows an example of the visual warning output on HUD which concerns on one Example of this invention.

符号の説明Explanation of symbols

100 車両用警報装置
101 レーダセンサ
102 画像センサ
103 車速センサ
104 視線方向検出部
105 衝突判定部
106 警報処理部
107 記憶部
108 出力部
DESCRIPTION OF SYMBOLS 100 Vehicle warning device 101 Radar sensor 102 Image sensor 103 Vehicle speed sensor 104 Eye-gaze direction detection part 105 Collision determination part 106 Alarm processing part 107 Storage part 108 Output part

Claims (6)

自車両の衝突可能性に基づいて運転者に注意喚起を与える車両用運転支援装置であって、
運転者の視線方向を検出する視線方向検出手段と、
前記視線方向検出手段により検出された運転者の視線方向に基づいて運転者が注意を払うべき物体又は領域に注意を払っているか否かを判定する判定手段と、
運転者が注意を払うべき物体又は領域のうち前記判定手段により運転者が注意を払っていないと判定された物体又は領域について運転者に対する注意喚起の程度を上げる設定手段と、を有することを特徴とする車両用運転支援装置。
A vehicle driving support device that alerts the driver based on the possibility of collision of the host vehicle,
Gaze direction detecting means for detecting the gaze direction of the driver;
Determining means for determining whether or not the driver is paying attention to an object or region to which attention should be paid based on the driver's line-of-sight direction detected by the line-of-sight direction detecting means;
Setting means for increasing the degree of alerting the driver for an object or area that is determined not to be paid attention by the determination means among objects or areas that the driver should pay attention to. A vehicle driving support device.
請求項1記載の車両用運転支援装置であって、
前記設定手段は、運転者が注意を払うべき物体又は領域のうち前記判定手段により運転者が注意を払っていないと判定された物体又は領域についてのみ運転者に注意喚起が与えられるように設定する、ことを特徴とする車両用運転支援装置。
The vehicle driving support device according to claim 1,
The setting means sets the alert to be given to the driver only for the object or area that the driver should pay attention to, the object or area that is determined not to pay attention by the determination means. A vehicle driving support apparatus characterized by that.
請求項2記載の車両用運転支援装置であって、
前記判定手段により運転者が注意を払っていないと判定された物体又は領域についての注意喚起は、それら物体又は領域の方向へ視線を向けるように運転者を誘導する音響的又は視覚的な注意喚起である、ことを特徴とする車両用運転支援装置。
The vehicle driving support device according to claim 2,
An alert for an object or area determined by the determination means that the driver is not paying attention is an acoustic or visual alert that guides the driver to look toward the object or area. A vehicle driving support apparatus characterized by the above.
請求項1乃至3のいずれか一項記載の車両用運転支援装置であって、
前記判定手段は、
自車両と衝突可能性を有する物体を検出する物体検出手段と、
前記視線検出手段により検出された運転者の視線方向と前記物体検出手段により検出された自車両と衝突可能性を有する物体の存在方向とを照合する物体照合手段とを有し、
前記物体照合手段による照合の結果に基づいて、運転者が注意を払うべき物体に注意を払っているか否かを判定する、ことを特徴とする車両用警報装置。
A driving support device for a vehicle according to any one of claims 1 to 3,
The determination means includes
Object detection means for detecting an object having a possibility of collision with the own vehicle;
An object collation unit that collates a driver's line-of-sight direction detected by the line-of-sight detection unit and an existence direction of an object having a collision possibility with the host vehicle detected by the object detection unit;
A vehicular alarm device that determines whether or not a driver pays attention to an object to which attention should be paid based on a result of collation by the object collating means.
請求項1乃至3のいずれか一項記載の車両用警報装置であって、
前記判定手段は、
自車両前方を撮像する撮像手段と、
前記視線検出手段により検出された運転者の視線方向と前記撮像手段により撮像された自車両前方画像とを照合する領域照合手段とを有し、
前記領域照合手段による照合の結果に基づいて、運転者が注意を払うべき領域に注意を払っているか否かを判定する、ことを特徴とする車両用警報装置。
The vehicle alarm device according to any one of claims 1 to 3,
The determination means includes
Imaging means for imaging the front of the host vehicle;
An area collating unit that collates the driver's line-of-sight direction detected by the line-of-sight detecting unit with the vehicle front image captured by the image capturing unit;
An alarm device for a vehicle, wherein it is determined whether or not a driver is paying attention to an area to which attention should be paid based on a result of collation by the area collating means.
請求項5記載の車両用警報装置であって、
前記判定手段は、
自車両の停止可能距離を算出する算出手段を更に有し、
前記視線検出手段により検出された運転者の視線方向が前記算出手段により算出された停止可能距離より手前の自車両走行車線内領域に向いている頻度が他の領域に比して高いとき、運転者が注意を払うべき領域に注意を払っていないと判定する、ことを特徴とする車両用警報装置。
The vehicle alarm device according to claim 5,
The determination means includes
A calculation means for calculating a stoppable distance of the host vehicle;
Driving when the driver's line-of-sight direction detected by the line-of-sight detection means is more frequent than the other areas in the area within the vehicle lane ahead of the stoppable distance calculated by the calculation means. It is determined that the person is not paying attention to the area to which attention should be paid.
JP2005045856A 2005-02-22 2005-02-22 Vehicle driving support device Expired - Fee Related JP4534788B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005045856A JP4534788B2 (en) 2005-02-22 2005-02-22 Vehicle driving support device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005045856A JP4534788B2 (en) 2005-02-22 2005-02-22 Vehicle driving support device

Publications (3)

Publication Number Publication Date
JP2006231962A true JP2006231962A (en) 2006-09-07
JP2006231962A5 JP2006231962A5 (en) 2008-03-06
JP4534788B2 JP4534788B2 (en) 2010-09-01

Family

ID=37040103

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005045856A Expired - Fee Related JP4534788B2 (en) 2005-02-22 2005-02-22 Vehicle driving support device

Country Status (1)

Country Link
JP (1) JP4534788B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009163286A (en) * 2007-12-28 2009-07-23 Toyota Central R&D Labs Inc Driver support device
JP2017045351A (en) * 2015-08-28 2017-03-02 トヨタ自動車株式会社 Vehicle driving support device, vehicle driving support method and program
JP2020119317A (en) * 2019-01-24 2020-08-06 株式会社Jvcケンウッド Driving assist controller, driving assist control method, and program
JP2021518010A (en) * 2019-03-18 2021-07-29 ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド Driver attention monitoring methods and equipment, as well as electronic devices
WO2023100450A1 (en) * 2021-11-30 2023-06-08 パナソニックIpマネジメント株式会社 Driving assistance device, driving assistance method, and driving assistance program

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0552608A (en) * 1991-08-29 1993-03-02 Mazda Motor Corp Travel condition judgment device for moving vehicle
JPH06230132A (en) * 1993-02-03 1994-08-19 Nissan Motor Co Ltd Obstacle detector for vehicle
JPH0761257A (en) * 1993-08-26 1995-03-07 Nissan Motor Co Ltd Display device for vehicle
JPH0765294A (en) * 1993-08-23 1995-03-10 Mitsubishi Electric Corp Preventive safety device for vehicle
JPH10287192A (en) * 1997-04-18 1998-10-27 Nissan Motor Co Ltd Inter-vehicle distance warning device
JP2004259069A (en) * 2003-02-26 2004-09-16 Aisin Seiki Co Ltd Alarm system for outputting alarm signal depending on vehicle hazard level
JP2004295472A (en) * 2003-03-27 2004-10-21 Aisin Seiki Co Ltd Warning device for vehicle

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0552608A (en) * 1991-08-29 1993-03-02 Mazda Motor Corp Travel condition judgment device for moving vehicle
JPH06230132A (en) * 1993-02-03 1994-08-19 Nissan Motor Co Ltd Obstacle detector for vehicle
JPH0765294A (en) * 1993-08-23 1995-03-10 Mitsubishi Electric Corp Preventive safety device for vehicle
JPH0761257A (en) * 1993-08-26 1995-03-07 Nissan Motor Co Ltd Display device for vehicle
JPH10287192A (en) * 1997-04-18 1998-10-27 Nissan Motor Co Ltd Inter-vehicle distance warning device
JP2004259069A (en) * 2003-02-26 2004-09-16 Aisin Seiki Co Ltd Alarm system for outputting alarm signal depending on vehicle hazard level
JP2004295472A (en) * 2003-03-27 2004-10-21 Aisin Seiki Co Ltd Warning device for vehicle

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009163286A (en) * 2007-12-28 2009-07-23 Toyota Central R&D Labs Inc Driver support device
JP2017045351A (en) * 2015-08-28 2017-03-02 トヨタ自動車株式会社 Vehicle driving support device, vehicle driving support method and program
JP2020119317A (en) * 2019-01-24 2020-08-06 株式会社Jvcケンウッド Driving assist controller, driving assist control method, and program
JP7215191B2 (en) 2019-01-24 2023-01-31 株式会社Jvcケンウッド Driving support control device, driving support control method, and program
JP2021518010A (en) * 2019-03-18 2021-07-29 ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド Driver attention monitoring methods and equipment, as well as electronic devices
JP7105316B2 (en) 2019-03-18 2022-07-22 ベイジン・センスタイム・テクノロジー・デベロップメント・カンパニー・リミテッド Driver attention monitoring method and device, and electronic device
WO2023100450A1 (en) * 2021-11-30 2023-06-08 パナソニックIpマネジメント株式会社 Driving assistance device, driving assistance method, and driving assistance program

Also Published As

Publication number Publication date
JP4534788B2 (en) 2010-09-01

Similar Documents

Publication Publication Date Title
US10009580B2 (en) Method for supplementing a piece of object information assigned to an object and method for selecting objects in surroundings of a vehicle
JP5718942B2 (en) Apparatus and method for assisting safe operation of transportation means
JP5966640B2 (en) Abnormal driving detection device and program
JP6241235B2 (en) Vehicle driving support device
US10919449B2 (en) Driving support device and storage medium
US10102438B2 (en) Information display device
JP2003327009A (en) Attention attracting device
JP2008003762A (en) Obstacle recognition determining device
US10866416B2 (en) Display control device and display control method
JP2006338594A (en) Pedestrian recognition system
KR20180065527A (en) Vehicle side-rear warning device and method using the same
KR20130021990A (en) Pedestrian collision warning system and method of vehicle
JP4534788B2 (en) Vehicle driving support device
JP5003473B2 (en) Warning device
JP5192007B2 (en) Vehicle periphery monitoring device
JP3984863B2 (en) Start notification device
JP2008162550A (en) External environment display device
JP5109851B2 (en) Alarm display control device for vehicles
JP2002049998A (en) Drive support device
JP4884806B2 (en) Vehicle perimeter monitoring system
JP2019012454A (en) Driver monitoring support device, driver monitoring support control device, driver monitoring support method, and driver monitoring support device control method
KR101543119B1 (en) Method for providing drive composite image
JP6992493B2 (en) Operating condition determination device and operating condition determination method
JP2022090218A (en) Vehicle notification device
JP7043795B2 (en) Driving support device, driving status information acquisition system, driving support method and program

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080123

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080123

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091110

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100309

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100407

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100525

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100607

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130625

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees