JP2007249757A - Warning device - Google Patents

Warning device Download PDF

Info

Publication number
JP2007249757A
JP2007249757A JP2006074268A JP2006074268A JP2007249757A JP 2007249757 A JP2007249757 A JP 2007249757A JP 2006074268 A JP2006074268 A JP 2006074268A JP 2006074268 A JP2006074268 A JP 2006074268A JP 2007249757 A JP2007249757 A JP 2007249757A
Authority
JP
Japan
Prior art keywords
vehicle
driver
line
range
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2006074268A
Other languages
Japanese (ja)
Inventor
Akira Yoshizawa
顕 吉澤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso IT Laboratory Inc
Original Assignee
Denso IT Laboratory Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso IT Laboratory Inc filed Critical Denso IT Laboratory Inc
Priority to JP2006074268A priority Critical patent/JP2007249757A/en
Publication of JP2007249757A publication Critical patent/JP2007249757A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a warning device which achieves safe travel by determining whether or not a driver of the other vehicle has noticed a driver. <P>SOLUTION: The warning device comprises: an imaging means 101 for imaging the driver; a line-of-sight detection means 102 for detecting the line-of-sight direction of the driver; a line-of-sight range determining means 103 for determining one of a plurality of divided ranges to which the line-of-sight direction belongs; a vehicle information acquisition means 104 for acquiring the vehicle information of a vehicle; a transmission means 105 for transmitting the information of the determined divided range and the vehicle information of the vehicle; a reception means 106 for receiving the information of the divided range of the line-of-sight direction in the driver of the other vehicle and the vehicle information of the other vehicle; a direction calculation means 107 for calculating the direction of the other vehicle relative to the vehicle on the basis of the vehicle information of the vehicle and the vehicle information of the other vehicle; a determination means 108 for determining whether or not the direction is within the divided range of the line-of-sight direction in the driver of the other vehicle; and a warning means 109 for warning the driver of the vehicle on the basis of the determination result. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、車両を運転する運転者が安全に運転することができるよう情報を提供する警報装置に関する。   The present invention relates to an alarm device that provides information so that a driver who drives a vehicle can drive safely.

車両を運転する運転者は他の車両や歩行者などと衝突しないよう周囲に注意を払って車両を運転する。しかし、運転者自身では十分注意を払って運転しているつもりであっても、人間の視野(視界)はある程度限られているため、他の車両や歩行者などが運転者の視野に入らないことがある。これにより衝突事故を起こしてしまうことがある。このような衝突事故などを起こさないようにする技術が下記の特許文献1に記載されている。この技術は運転者の向いている視線方向に基づいて、視野に入っていない他の車両や歩行者などがあった場合に警報を行うものである。
特開2005−284473号公報(段落0006、要約)
The driver who drives the vehicle drives the vehicle paying attention to the surroundings so as not to collide with other vehicles or pedestrians. However, even if the driver intends to drive with sufficient caution, the human field of view (view) is limited to some extent, so other vehicles and pedestrians do not enter the driver's field of view. Sometimes. This may cause a collision accident. A technique for preventing such a collision accident is described in Patent Document 1 below. This technology issues a warning when there is another vehicle or pedestrian that is not in the field of view, based on the line of sight that the driver is facing.
JP 2005-284473 A (paragraph 0006, abstract)

しかしながら、特許文献1に記載された技術を使用したとしても、他の車両や歩行者にとっては本当に相手車両の運転者が自身に気付いてくれているか否か不安である。仮に、相手車両の運転者が自身に気付いてくれていない場合には、相手車両は予想外の動きをする可能性があり、相手車両との衝突を回避することができないこともある。   However, even if the technique described in Patent Document 1 is used, other vehicles and pedestrians are uneasy about whether the driver of the other vehicle is really aware of himself / herself. If the driver of the partner vehicle is not aware of himself / herself, the partner vehicle may move unexpectedly, and a collision with the partner vehicle may not be avoided.

本発明は、上記問題を解決するためのものであり、相手車両の運転者が自身に気付いているか否かを判断することによって安全に走行することができる警報装置を提供することを目的とする。   The present invention is intended to solve the above problem, and an object of the present invention is to provide an alarm device that can travel safely by determining whether or not the driver of the other vehicle is aware of itself. .

上記目的を達成するために、本発明によれば、車両を運転する運転者を撮像する撮像手段と、前記撮像手段によって撮像された前記運転者の画像情報を用いて前記運転者の視線方向を検出する視線検出手段と、検出された前記視線方向が、あらかじめ設定された複数に区分けされた範囲のいずれの区分け範囲に属するかを決定する視線範囲決定手段と、前記車両の位置情報及び方位情報を含む車両情報を取得する車両情報取得手段と、決定された前記区分け範囲の情報及び取得された前記車両の前記車両情報を周囲の車両に発信する発信手段と、前記車両の前記撮像手段、前記視線検出手段、前記視線範囲取得手段、前記車両情報取得手段、前記発信手段と同様の各手段を装備した他の車両から発信された、前記他の車両の運転者における視線方向の前記区分け範囲の情報及び前記他の車両の前記車両情報を受信する受信手段と、前記車両情報取得手段によって取得された前記車両の車両情報と、前記受信手段によって受信された前記他の車両の車両情報とに基づいて、前記車両の所定の方向に対する前記他の車両が位置する方向を算出する方向算出手段と、算出された前記車両の所定の方向に対する前記他の車両が位置する方向が、前記車両及び前記他の車両の前記方位情報に基づいて、受信された前記他の車両の運転者における視線方向の前記区分け範囲内にあるか否かを判断する判断手段と、前記判断手段による判断結果に基づいて前記車両の運転者に警報を行う警報手段とを備える警報装置が提供される。この構成により、相手車両の運転者が自身に気付いているか否かを判断することによって安全に走行することができる。なお、運転者における視線方向の区分け範囲は後述する注視範囲に相当する。また、前記車両の所定の方向に対する前記他の車両が位置する方向を以下、相対方向とも言う。また、方位情報とは、例えば該当する車両の長手方向が示す方位の情報を言う。   In order to achieve the above object, according to the present invention, an imaging means for imaging a driver driving a vehicle, and the driver's line-of-sight direction using the image information of the driver imaged by the imaging means. Eye-gaze detecting means for detecting, eye-gaze range determining means for deciding to which one of a plurality of preset ranges the detected eye-gaze direction belongs, position information and direction information of the vehicle Vehicle information acquisition means for acquiring vehicle information including: transmission information for transmitting the determined information of the classification range and the acquired vehicle information of the vehicle to surrounding vehicles; the imaging means of the vehicle; A view of a driver of the other vehicle transmitted from another vehicle equipped with the same means as the line-of-sight detection means, the line-of-sight range acquisition means, the vehicle information acquisition means, and the transmission means. Receiving means for receiving the information of the division range of the direction and the vehicle information of the other vehicle, vehicle information of the vehicle acquired by the vehicle information acquiring means, and the other vehicle received by the receiving means Direction calculation means for calculating a direction in which the other vehicle is positioned with respect to a predetermined direction of the vehicle based on the vehicle information of the vehicle, and a direction in which the other vehicle is positioned with respect to the calculated predetermined direction of the vehicle. Determining means for determining whether or not the driver of the other vehicle is within the division range of the line-of-sight direction based on the direction information of the vehicle and the other vehicle; and There is provided an alarm device comprising alarm means for alarming a driver of the vehicle based on a determination result. With this configuration, it is possible to travel safely by determining whether or not the driver of the opponent vehicle is aware of itself. Note that the gaze direction segmentation range for the driver corresponds to a gaze range described later. The direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is also referred to as a relative direction hereinafter. The direction information refers to information on the direction indicated by the longitudinal direction of the corresponding vehicle, for example.

また、本発明の警報装置において、前記警報手段が、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にあると判断された場合に警報を行うことは、本発明の好ましい態様である。この構成により、他の車両の運転者が自身の車両に気付いていることを把握できる。   In the alarm device of the present invention, the alarm means may determine that the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means. It is a preferred aspect of the present invention to issue an alarm when it is determined that there is. By this structure, it can grasp | ascertain that the driver | operator of another vehicle has noticed his own vehicle.

また、本発明の警報装置において、前記警報手段が、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にないと判断された場合に警報を行うことは、本発明の好ましい態様である。この構成により、他の車両の運転者が自身の車両に気付いていないことを把握できる。   In the alarm device of the present invention, the alarm means may determine that the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means. It is a preferable aspect of the present invention to issue an alarm when it is determined that there is no. With this configuration, it is possible to grasp that the driver of another vehicle is not aware of his / her own vehicle.

また、本発明の警報装置において、前記発信手段が、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にないと判断された場合に、前記他の車両の運転者に前記車両の存在を知らせるための存在情報を前記他の車両に送信することは、本発明の好ましい態様である。この構成により、他の車両の運転者に自身の車両の存在を知らせることができる。   Further, in the alarm device according to the present invention, the transmission means may determine that the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means. When it is determined that the vehicle is not present, it is a preferable aspect of the present invention that the presence information for notifying the driver of the other vehicle of the presence of the vehicle is transmitted to the other vehicle. With this configuration, the driver of another vehicle can be notified of the presence of the own vehicle.

また、本発明の警報装置において、前記警報手段が、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にないと判断され、かつ前記車両の所定の方向に対する前記他の車両が位置する方向が前記車両の運転者の視線方向に基づいて前記視線範囲決定手段によって決定された区分け範囲内にないと前記判断手段によって判断された場合に警報を行うことは、本発明の好ましい態様である。この構成により、お互いに気付いていない場合にのみ警報がされるため、警報の発しすぎを抑えることができる。   In the alarm device of the present invention, the alarm means may determine that the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means. The determination is that the direction in which the other vehicle is positioned with respect to a predetermined direction of the vehicle is not within the segmentation range determined by the line-of-sight range determination unit based on the line-of-sight direction of the driver of the vehicle. It is a preferred aspect of the present invention to issue an alarm when judged by means. With this configuration, since an alarm is issued only when the two are not aware of each other, it is possible to suppress an excessive alarm.

また、本発明の警報装置において、前記警報手段が、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にあると判断され、かつ前記車両の所定の方向に対する前記他の車両が位置する方向が前記車両の運転者の視線方向に基づいて前記視線範囲決定手段によって決定された区分け範囲内にあると前記判断手段によって判断された場合に警報を行うことは、本発明の好ましい態様である。この構成により、お互いに気付いていることが確認でき、安心して運転をすることができる。   In the alarm device of the present invention, the alarm means may determine that the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means. The determination is that the direction in which the other vehicle is positioned with respect to a predetermined direction of the vehicle is within the segmented range determined by the line-of-sight range determination means based on the line-of-sight direction of the driver of the vehicle It is a preferred aspect of the present invention to issue an alarm when judged by means. With this configuration, it is possible to confirm that they are aware of each other and to drive with confidence.

また、本発明の警報装置において、前記他の車両の運転者が前記車両に気付いているか否かを確認するための確認要求指示を受け付ける受付手段を備え、前記判断手段が、前記受付手段を介して受け付けた前記確認要求指示に基づいて、前記車両の運転者における視線方向の前記区分け範囲内に存在する前記他の車両の運転者における視線方向の前記区分け範囲内に、前記車両が存在するか否かを判断することは、本発明の好ましい態様である。この構成により、運転者が必要なときにのみ周囲の車両が自身の車両に気付いているか否かを確認することができる。   The alarm device according to the present invention further includes a receiving unit that receives a confirmation request instruction for checking whether or not a driver of the other vehicle is aware of the vehicle, wherein the determining unit is configured via the receiving unit. Whether the vehicle exists within the classification range of the line-of-sight direction of the driver of the other vehicle existing within the classification range of the line-of-sight direction of the driver of the vehicle based on the confirmation request instruction received Determining whether or not is a preferred embodiment of the present invention. With this configuration, it is possible to check whether or not the surrounding vehicle is aware of its own vehicle only when the driver needs it.

また、本発明の警報装置において、前記警報手段が、前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内に前記車両が存在すると判断された場合に警報を行うことは、本発明の好ましい態様である。この構成により、他の車両の運転者が自身の車両に気付いているか否かを確認できる。   Further, in the alarm device of the present invention, the alarm means issues an alarm when the determination means determines that the vehicle exists within the classification range in the line-of-sight direction for the driver of the other vehicle. This is a preferred embodiment of the present invention. With this configuration, it is possible to confirm whether or not the driver of another vehicle is aware of his / her own vehicle.

また、本発明の警報装置において、前記警報手段が、前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内に前記車両が存在しないと判断された場合に警報を行うことは、本発明の好ましい態様である。この構成により、他の車両の運転が者自身の車両に気付いているか否かを確認できる。   Further, in the alarm device of the present invention, the alarm means issues an alarm when the determination means determines that the vehicle does not exist within the classification range in the line-of-sight direction for the driver of the other vehicle. This is a preferred embodiment of the present invention. With this configuration, it is possible to confirm whether or not the driver of another vehicle is aware of his / her own vehicle.

本発明の警報装置は、上記構成を有し、相手車両の運転者が自身に気付いているか否かを判断することによって安全に走行することができる。   The alarm device of the present invention has the above-described configuration, and can travel safely by determining whether or not the driver of the partner vehicle is aware of itself.

<第1の実施の形態>
以下、本発明の第1の実施の形態に係る警報装置及び情報提供方法について図1から図5を用いて説明する。図1は本発明の第1の実施の形態に係る警報装置の構成の一例を示す構成図である。図2は本発明の第1の実施の形態に係る警報装置における運転者が注視している範囲を決定するフローの一例について説明するためのフローチャートである。図3は本発明の第1の実施の形態に係る警報装置におけるあらかじめ設定された複数に区分けされた視線範囲を説明するための図である。図4は本発明の第1の実施の形態に係る警報装置における視線方向蓄積テーブルの一例について説明するための図である。図5は本発明の第1の実施の形態に係る警報装置における処理フローの一例について説明するためのフローチャートである。
<First Embodiment>
Hereinafter, an alarm device and an information providing method according to a first embodiment of the present invention will be described with reference to FIGS. FIG. 1 is a block diagram showing an example of the configuration of an alarm device according to the first embodiment of the present invention. FIG. 2 is a flowchart for explaining an example of a flow for determining a range in which the driver is gazing in the alarm device according to the first embodiment of the present invention. FIG. 3 is a diagram for explaining a plurality of preset line-of-sight ranges in the alarm device according to the first embodiment of the present invention. FIG. 4 is a diagram for explaining an example of a gaze direction accumulation table in the alarm device according to the first embodiment of the present invention. FIG. 5 is a flowchart for explaining an example of a processing flow in the alarm device according to the first embodiment of the present invention.

まず、本発明の第1の実施の形態に係る警報装置の構成の一例について図1を用いて説明する。図1に示すように、警報装置は、ドライバ撮像手段101、視線検出手段102、注視範囲決定手段103、車両情報取得手段104、発信手段105、受信手段106、相対方向算出手段107、判断手段108、警報手段109、記憶手段110から構成されている。ドライバ撮像手段101は、車両を運転する運転者、特に運転者の顔を撮像するものであり、例えばCCD(Charge Coupled Device)カメラなどである。ドライバ撮像手段101は、運転者を適当に撮像できるような位置、例えばバックミラーに配置される。   First, an example of the configuration of the alarm device according to the first embodiment of the present invention will be described with reference to FIG. As shown in FIG. 1, the alarm device includes a driver imaging unit 101, a line-of-sight detection unit 102, a gaze range determination unit 103, a vehicle information acquisition unit 104, a transmission unit 105, a reception unit 106, a relative direction calculation unit 107, and a determination unit 108. , Alarm means 109 and storage means 110. The driver imaging means 101 images a driver driving a vehicle, particularly the driver's face, and is, for example, a CCD (Charge Coupled Device) camera. The driver imaging means 101 is disposed at a position where the driver can be properly imaged, for example, on the rearview mirror.

視線検出手段102は、ドライバ撮像手段101によって撮像された運転者の画像データを用いて視線方向を検出するものである。具体的な検出方法としては、例えば撮像された運転者の顔の画像から目の部分や鼻の部分などを抽出し、抽出された目(瞳)や鼻の位置関係に基づいて視線方向を推定する方法が考えられる。しかし、視線方向を検出する方法はこれに限られるものではない(特開2004−255074号公報、特開2005−278898号公報、特開2005−81101号公報などを参照)。なお、運転者が斜め後方や後方を確認する場合には、いわゆるドアミラー、フェンダーミラー、バックミラーなどを介して確認するが、視線検出手段102はこれらのミラーに視線が向けられていることも検出し、この検出結果により、例えば斜め左後方に運転者の視線方向があると判断することができる。また、自車両に対する斜め後方や後方の運転者の視線方向を検出する方法として、上述した各ミラーへの視線方向の検出以外に、顔の回転方向を検出し、その検出された顔の回転方向に基づいて視線方向を検出するようにしてもよい。例えば、顔が右方向に120度回転した場合、ドライバ撮像手段101を設置する位置によってはドライバ撮像手段101によって運転者の正面の顔が撮像できず視線方向を検出できないため、顔の回転角度を算出し、算出された顔の回転角度から視線方向を推定するようにすることも可能である。   The line-of-sight detection unit 102 detects the line-of-sight direction using the image data of the driver imaged by the driver imaging unit 101. As a specific detection method, for example, an eye part or a nose part is extracted from a captured driver's face image, and a gaze direction is estimated based on the extracted eye (pupil) or nose positional relationship. A way to do this is conceivable. However, the method of detecting the line-of-sight direction is not limited to this (see Japanese Patent Application Laid-Open Nos. 2004-255074, 2005-278898, and 2005-81101). In addition, when the driver confirms obliquely rearward or backward, confirmation is performed through a so-called door mirror, fender mirror, rearview mirror, etc., but the line-of-sight detection means 102 also detects that the line of sight is directed to these mirrors. From this detection result, it can be determined that the driver's line-of-sight direction is, for example, diagonally left rear. Further, as a method for detecting the line-of-sight direction of the driver behind the vehicle, the face rotation direction is detected in addition to the above-described detection of the line-of-sight direction to each mirror, and the detected face rotation direction is detected. The line-of-sight direction may be detected based on the above. For example, when the face is rotated 120 degrees in the right direction, depending on the position where the driver imaging unit 101 is installed, the driver imaging unit 101 cannot capture the face in front of the driver and the gaze direction cannot be detected. It is also possible to calculate and estimate the gaze direction from the calculated rotation angle of the face.

注視範囲決定手段103は、視線検出手段102によって検出された運転者の視線方向に基づいて、運転者が注視している範囲を決定するものである。運転者が注視している範囲を決定するフローの一例について図2を用いて説明する。図2に示すように、まず視線検出手段102によって視線方向を検出する(ステップS201)。検出された視線方向があらかじめ設定された複数に区分けされた視線範囲(図3のg1〜g8)のいずれの視線範囲に属するかを決定(分類)する(ステップS202)。そして、図4に示すような視線方向蓄積テーブルに対して、決定された視線範囲に該当する領域に1を格納し、その他の視線範囲の領域には0を格納する(ステップS203)。視線方向蓄積テーブルについては後述する。   The gaze range determination unit 103 determines a range in which the driver is gazing based on the driver's gaze direction detected by the gaze detection unit 102. An example of a flow for determining the range in which the driver is gazing will be described with reference to FIG. As shown in FIG. 2, the line-of-sight direction is first detected by the line-of-sight detection means 102 (step S201). It is determined (classified) which of the line-of-sight ranges (g1 to g8 in FIG. 3) the detected line-of-sight directions belong to is set in advance (step S202). Then, in the line-of-sight direction accumulation table as shown in FIG. 4, 1 is stored in the area corresponding to the determined line-of-sight range, and 0 is stored in the other line-of-sight range areas (step S203). The line-of-sight direction accumulation table will be described later.

ステップS201からステップS203までの処理を所定の時間、例えばt秒間行う。そして、所定の時間が経過したか否かを判断する(ステップS204)。所定の時間が経過したと判断された場合、視線範囲別に格納された数値の合計を求める(ステップS205)。数値の合計が所定の閾値以上か否かを判断する(ステップS206)。所定の閾値以上であると判断された場合、該当する視線範囲を注視範囲と決定する(ステップS207)。ステップS204において所定の時間が経過していないと判断された場合及びステップS207において所定の閾値情報の視線範囲がない場合にはステップS201に戻る。   The processing from step S201 to step S203 is performed for a predetermined time, for example, t seconds. Then, it is determined whether or not a predetermined time has elapsed (step S204). If it is determined that the predetermined time has elapsed, the sum of the numerical values stored for each line-of-sight range is obtained (step S205). It is determined whether the sum of the numerical values is equal to or greater than a predetermined threshold (step S206). If it is determined that the value is equal to or greater than the predetermined threshold, the corresponding line-of-sight range is determined as the gaze range (step S207). If it is determined in step S204 that the predetermined time has not elapsed, or if there is no line-of-sight range of the predetermined threshold information in step S207, the process returns to step S201.

ここで、視線方向蓄積テーブルの一例について図4を用いて説明する。図4に示すように、視線方向蓄積テーブルは、例えば8つに区分けされた視線範囲と時間とから構成されている。例えば、上述した所定の時間がt秒間である場合、この時間tを100分割したt/100ごとにステップS201の視線方向を検出すると仮定する。時刻t/100において視線方向がg1と検出されると、t/100における該当するg1の領域に1が格納され、その他の視線範囲の領域には0が格納される。次に、時刻2×(t/100)(図4中では2t/100と記す)において視線方向がg2と検出されると、2×(t/100)における該当するg2の領域に1が格納され、その他の視線範囲の領域には0が格納される。以下、同様の処理が時刻tまで行われる。そして、時刻tまで処理がなされると視線範囲ごとに格納された数値の合計が計算され、その合計が所定の閾値、例えば30以上である場合に、その視線範囲が運転者の注視範囲であると判断される。図4の例では視線範囲g1とg2が注視範囲と決定される。   Here, an example of the line-of-sight direction accumulation table will be described with reference to FIG. As shown in FIG. 4, the line-of-sight direction accumulation table includes, for example, a line-of-sight range divided into eight and time. For example, when the predetermined time is t seconds, it is assumed that the line-of-sight direction in step S201 is detected every t / 100 obtained by dividing the time t by 100. When the gaze direction is detected as g1 at time t / 100, 1 is stored in the corresponding g1 area at t / 100, and 0 is stored in the other gaze range areas. Next, when the line-of-sight direction is detected as g2 at time 2 × (t / 100) (denoted as 2t / 100 in FIG. 4), 1 is stored in the corresponding g2 region at 2 × (t / 100). 0 is stored in the other line-of-sight range areas. Thereafter, the same processing is performed until time t. When processing is performed until time t, the sum of the numerical values stored for each line-of-sight range is calculated, and when the total is a predetermined threshold, for example, 30 or more, the line-of-sight range is the driver's gaze range. It is judged. In the example of FIG. 4, the line-of-sight ranges g1 and g2 are determined as the gaze range.

車両情報取得手段104は、車両自身の位置情報及びその車両がどの方位を向いているかを示す方位情報を取得するものであり、例えばGPS(Global Positioning System)機能を用いて現在の車両の位置情報を取得する。また、例えば位置情報の履歴より車両の方位情報を取得する。発信手段105は、注視範囲決定手段103によって決定された注視範囲の情報と、車両情報取得手段104によって取得された車両の車両情報とを周囲の車両に対して発信(通信)するものであり、例えば車車間通信である。このときの発信のタイミングは、定期的であってもよく、あるいは不定期的であってもよい。   The vehicle information acquisition means 104 acquires the position information of the vehicle itself and the direction information indicating which direction the vehicle is facing, for example, the current vehicle position information using a GPS (Global Positioning System) function. To get. Further, for example, vehicle orientation information is acquired from a history of position information. The transmission unit 105 transmits (communications) information on the gaze range determined by the gaze range determination unit 103 and vehicle information of the vehicle acquired by the vehicle information acquisition unit 104 to surrounding vehicles. For example, inter-vehicle communication. The transmission timing at this time may be regular or irregular.

なお、周囲の車両に情報を通信する際に車車間で行うのではなく、路車間通信であってもよい。路車間通信とは、車両と道路間の通信であって車両と道路間で情報を交換することを言う。この場合、車両から発信される情報は道路上に設置されたサーバなどを経由して他の車両へ情報が送信される。また、発信手段105は現在の車両の位置情報を発信しているが、現在の車両の位置情報ではなく予測位置の情報を発信するようにしてもよい。この場合、予測位置の情報は、車両の現在の位置情報、車両の速度、ハンドルの操舵角などに基づいて算出される。この算出には別途算出手段を設けてもよい。   In addition, when communicating information with the surrounding vehicle, it is not performed between vehicles but road-to-vehicle communication may be sufficient. Road-to-vehicle communication refers to communication between a vehicle and a road, in which information is exchanged between the vehicle and the road. In this case, information transmitted from the vehicle is transmitted to other vehicles via a server installed on the road. In addition, the transmitting unit 105 transmits the current vehicle position information, but may transmit the predicted position information instead of the current vehicle position information. In this case, the predicted position information is calculated based on the current position information of the vehicle, the speed of the vehicle, the steering angle of the steering wheel, and the like. A separate calculation means may be provided for this calculation.

受信手段106は、上述したドライバ撮像手段101、視線検出手段102、注視範囲決定手段103、車両情報取得手段104、発信手段105と同様の各手段を装備した他の車両から発信された、他の車両の運転者の注視範囲の情報及び他の車両の車両情報を受信するものである。相対方向算出手段107は、自車両の位置情報と他の車両の位置情報から相対距離を算出し、所定の閾値以内であるか否かを判断する。なお、比較の対象となる車両は、例えば自車に最も近い車両であるが、これに限られるものではなく所定の数の車両を比較の対象としてもよい。また、車線情報をもとに比較の対象となる車両を選んでもよい。さらに、各車両の方位の関係より比較の対象となる車を選んでもよい。算出された相対距離が所定の閾値以内である場合、相対方向算出手段107は、車両情報取得手段104によって取得された自車両の車両情報と、受信手段106によって受信された他の車両の車両情報とに基づいて、自車両の所定の方向に対する他の車両が位置する方向(相対方向とも言う)を算出する。ここで、自車両の所定の方向とは、例えば自車両の長手方向を言うがこれに限られるものではなく、短手方向やこれら以外の方向であってもよい。   The receiving means 106 is transmitted from other vehicles equipped with the same means as the driver imaging means 101, the line-of-sight detection means 102, the gaze range determination means 103, the vehicle information acquisition means 104, and the transmission means 105 described above. Information on the gaze range of the driver of the vehicle and vehicle information of other vehicles are received. The relative direction calculation means 107 calculates a relative distance from the position information of the host vehicle and the position information of another vehicle, and determines whether it is within a predetermined threshold. The vehicle to be compared is, for example, the vehicle closest to the own vehicle, but is not limited to this, and a predetermined number of vehicles may be compared. A vehicle to be compared may be selected based on the lane information. Further, a vehicle to be compared may be selected from the relationship of the direction of each vehicle. When the calculated relative distance is within a predetermined threshold, the relative direction calculation unit 107 includes the vehicle information of the own vehicle acquired by the vehicle information acquisition unit 104 and the vehicle information of other vehicles received by the reception unit 106. Based on the above, a direction (also referred to as a relative direction) in which another vehicle is located with respect to a predetermined direction of the host vehicle is calculated. Here, the predetermined direction of the host vehicle refers to, for example, the longitudinal direction of the host vehicle, but is not limited thereto, and may be a short direction or other directions.

判断手段108は、相対方向算出手段107によって算出された相対方向が、車両及び他の車両の方位情報に基づいて、受信手段106によって受信された他の車両の運転者の注視範囲内にあるか否かを判断するものである。警報手段109は、判断手段108によって相対方向が他の車両の運転者の注視範囲内にあると判断された場合、自車両の運転者に他の車両の運転者が自車両に気付いていることを知らせるために警報を行う。この警報は、例えばスピーカを通して気付いている旨を知らせたり、ハンドルや座席を振動させて知らせたりするものである。なお、警報手段109は、判断手段108によって相対方向が他の車両の運転者の注視範囲内にないと判断された場合、自車両の運転者に他の車両の運転者が自車両に気付いていないことを知らせるために警報を行うようにしてもよい。   The determination unit 108 determines whether the relative direction calculated by the relative direction calculation unit 107 is within the gaze range of the driver of the other vehicle received by the reception unit 106 based on the azimuth information of the vehicle and the other vehicle. It is to judge whether or not. When the determination unit 108 determines that the relative direction is within the gaze range of the driver of the other vehicle, the alarm unit 109 recognizes that the driver of the other vehicle is aware of the host vehicle. An alarm is given to inform you. This alarm is, for example, informing that the user has noticed through a speaker or by vibrating a handle or a seat. Note that when the determination unit 108 determines that the relative direction is not within the gaze range of the driver of another vehicle, the alarm unit 109 is aware of the driver of the other vehicle by the driver of the own vehicle. An alarm may be given to notify the absence.

また、警報手段109は、判断手段108によって相対方向が他の車両の運転者の注視範囲内にないと判断された場合、他の車両の運転者に自車両の存在を知らせるためにクラクションを鳴らしたり、ライトを点滅させたりしてもよい。またそのとき、警報手段109は自車両の存在を知らせるための信号を他の車両に対して発信手段105を介して送信するようにしてもよい。これにより、他の車両の運転者に自車両の存在を気付かせることができる。また、記憶手段110は、警報装置による処理に必要な情報、例えば動作を制御するための制御プログラムや、処理の際に生じた情報を格納するものである。   Further, when the determination unit 108 determines that the relative direction is not within the gaze range of the driver of another vehicle, the alarm unit 109 sounds a horn to notify the driver of the other vehicle that the vehicle is present. Or flashing lights. At that time, the alarm unit 109 may transmit a signal for informing the existence of the own vehicle to the other vehicle via the transmission unit 105. Thereby, the driver of another vehicle can be made aware of the existence of the own vehicle. The storage means 110 stores information necessary for processing by the alarm device, for example, a control program for controlling the operation and information generated during the processing.

次に、本発明の第1の実施の形態に係る警報装置における処理フローの一例について図5を用いて説明する。図5に示すように、まず、受信手段106によって周辺の車両の車両情報及びその車両の運転者の注視範囲情報を受信する(ステップS501)。車両情報取得手段104は自車両の位置情報及び方位情報を含む車両情報を取得する(ステップS502)。相対方向算出手段107は、自車両の位置情報と受信された周辺の車両の位置情報に基づいて、自車両の位置情報と他の車両の位置情報から相対距離を算出し、自車両に最も近い車両(以下、他の車両とする)を選択し(ステップS503)、その他の車両と自車両との相対距離が所定の閾値以内であるか否かを判断する(ステップS504)。算出された相対距離が所定の閾値以内である場合、相対方向算出手段107は自車両に対する他の車両の相対方向を算出する(ステップS505)。   Next, an example of a processing flow in the alarm device according to the first embodiment of the present invention will be described with reference to FIG. As shown in FIG. 5, first, vehicle information of surrounding vehicles and gaze range information of the driver of the vehicles are received by the receiving means 106 (step S501). The vehicle information acquisition unit 104 acquires vehicle information including position information and direction information of the host vehicle (step S502). The relative direction calculation means 107 calculates the relative distance from the position information of the own vehicle and the position information of other vehicles based on the position information of the own vehicle and the received position information of the surrounding vehicles, and is closest to the own vehicle. A vehicle (hereinafter referred to as another vehicle) is selected (step S503), and it is determined whether or not the relative distance between the other vehicle and the host vehicle is within a predetermined threshold (step S504). If the calculated relative distance is within a predetermined threshold, the relative direction calculation means 107 calculates the relative direction of the other vehicle with respect to the own vehicle (step S505).

判断手段108は、相対方向算出手段107によって算出された相対方向が、車両及び他の車両の方位情報に基づいて、受信手段106によって受信された他の車両の運転者の注視範囲内にあるか否かを判断する(ステップS506)。警報手段109は、判断手段108によって相対方向が他の車両の運転者の注視範囲内にあると判断された場合、自車両の運転者に他の車両の運転者が自車両に気付いていることを知らせるために警報を行う(ステップS507)。なお、警報の仕方は上述したようにいろいろと選択可能である。また、ステップS504において算出された相対距離が所定の閾値以内にないと判断された場合、及びステップS506において相対方向が他の運転者の注視範囲内にないと判断された場合にはステップS501に戻る。   The determination unit 108 determines whether the relative direction calculated by the relative direction calculation unit 107 is within the gaze range of the driver of the other vehicle received by the reception unit 106 based on the azimuth information of the vehicle and the other vehicle. It is determined whether or not (step S506). When the determination unit 108 determines that the relative direction is within the gaze range of the driver of the other vehicle, the alarm unit 109 recognizes that the driver of the other vehicle is aware of the host vehicle. An alarm is issued to notify (step S507). Note that various warning methods can be selected as described above. If it is determined that the relative distance calculated in step S504 is not within the predetermined threshold, or if it is determined in step S506 that the relative direction is not within the gaze range of another driver, the process proceeds to step S501. Return.

<第2の実施の形態>
次に、本発明の第2の実施の形態について説明する。なお、第2の実施の形態に係る警報装置の構成は、第1の実施の形態に係る警報装置の構成要素と基本的に同一であるため説明は省略し、第2の実施の形態に係る警報装置の構成要素に用いる符号は第1の実施の形態に係る警報装置の構成要素と同一の符号を用いて説明する。第2の実施の形態では、図6に示すような状況での車両Aにおける情報提供(警報)について考える。車両Aにとって車両Bは車両Aの運転者の注視範囲内に存在しているため、車両Aの運転者は車両Bに気付いている。一方、車両Aにとって車両Cは車両Aの運転者の注視範囲内に存在していない。また、車両Cにとって車両Aは車両Cの運転者の注視範囲内に存在していない。このように、両車両(車両A及び車両C)の運転者の注視範囲内にそれぞれの車両が存在していない場合に警報を行うようにしたものが第2の実施の形態である。
<Second Embodiment>
Next, a second embodiment of the present invention will be described. The configuration of the alarm device according to the second embodiment is basically the same as the components of the alarm device according to the first embodiment, so that the description thereof will be omitted, and the alarm device according to the second embodiment will be omitted. The reference numerals used for the components of the alarm device will be described using the same reference numerals as the components of the alarm device according to the first embodiment. In the second embodiment, information provision (alarm) in the vehicle A in the situation shown in FIG. 6 will be considered. For the vehicle A, the vehicle B is present in the gaze range of the driver of the vehicle A, so the driver of the vehicle A is aware of the vehicle B. On the other hand, for the vehicle A, the vehicle C does not exist within the gaze range of the driver of the vehicle A. Further, for the vehicle C, the vehicle A does not exist within the gaze range of the driver of the vehicle C. In this way, the second embodiment is such that an alarm is issued when each vehicle does not exist within the gaze range of the driver of both vehicles (vehicle A and vehicle C).

ここで、本発明の第2の実施の形態に係る警報装置における処理フローの一例について図7を用いて説明する。図7に示すように、まず、受信手段106によって周辺の車両の車両情報及びその車両の運転者の注視範囲情報を受信する(ステップS701)。車両情報取得手段104は自車両の位置情報及び方位情報を含む車両情報を取得する(ステップS702)。視線検出手段102はドライバ撮像手段101によって撮像された運転者の視線方向を検出する(ステップS703)。注視範囲決定手段103は、検出された運転者の視線方向に基づいて、例えば上述した方法で運転者の注視範囲を決定する(ステップS704)。相対方向算出手段107は、自車両の車両情報と周辺の車両の車両情報から、車両間の相対方向を算出する(ステップS705)。判断手段108は、決定された運転者の注視範囲外にあり、かつ自車両も周辺の車両の運転者の注視範囲外にある他の車両が存在するか否かを判断する(ステップS706)。   Here, an example of a processing flow in the alarm device according to the second embodiment of the present invention will be described with reference to FIG. As shown in FIG. 7, first, the receiving means 106 receives the vehicle information of the surrounding vehicles and the gaze range information of the driver of the vehicles (step S701). The vehicle information acquisition unit 104 acquires vehicle information including position information and direction information of the host vehicle (step S702). The line-of-sight detection unit 102 detects the driver's line-of-sight direction imaged by the driver imaging unit 101 (step S703). The gaze range determining unit 103 determines the gaze range of the driver based on the detected driver's gaze direction, for example, by the method described above (step S704). The relative direction calculation means 107 calculates the relative direction between the vehicles from the vehicle information of the host vehicle and the vehicle information of the surrounding vehicles (step S705). The judging means 108 judges whether or not there is another vehicle that is outside the determined driver's gaze range and that the own vehicle is outside the gaze range of the driver of the surrounding vehicle (step S706).

決定された運転者の注視範囲外にあり、かつ自車両も周辺の車両の運転者の注視範囲外にある他の車両が存在すると判断された場合、判断手段108は自車両の位置情報と他の車両の位置情報から相対距離を算出し、該当する他の車両の中で自車両に最も近い車両を選択し(ステップS707)、相対距離が所定の閾値以内であるか否かを判断する(ステップS708)。算出された相対距離が所定の閾値以内である場合、警報手段109は、自車両の運転者に他の車両が存在することを知らせるために警報を行う(ステップS709)。   If it is determined that there is another vehicle that is outside the determined range of the driver's gaze and the vehicle is not within the gaze range of the driver of the surrounding vehicle, the determination means 108 determines the position information of the own vehicle and other information. The relative distance is calculated from the position information of the vehicle, the vehicle closest to the host vehicle is selected from the other corresponding vehicles (step S707), and it is determined whether the relative distance is within a predetermined threshold (step S707). Step S708). When the calculated relative distance is within a predetermined threshold, the warning means 109 issues a warning to inform the driver of the own vehicle that another vehicle is present (step S709).

なお、警報の仕方は第1の実施の形態で説明したようにいろいろと選択可能である。また、ステップS706において決定された運転者の注視範囲外にあり、かつ自車両も周辺の車両の運転者の注視範囲外にある他の車両が存在しないと判断された場合、及びステップS708において算出された相対距離が所定の閾値以内でないと判断された場合にはステップS701に戻る。以上の処理により、お互いに気付いていない場合のみ警報を行うため多くの警報を発する必要がなくなる。   Note that various warning methods can be selected as described in the first embodiment. In addition, when it is determined that there is no other vehicle outside the driver's gaze range determined in step S706 and the vehicle is outside the gaze range of the driver of the surrounding vehicle, and calculation is performed in step S708. If it is determined that the relative distance is not within the predetermined threshold, the process returns to step S701. With the above processing, it is not necessary to issue many alarms because the alarm is performed only when the two are not aware of each other.

また、ステップS706において、判断手段108は、決定された運転者の注視範囲内にあり、かつ自車両も周辺の車両の運転者の注視範囲内にある他の車両が存在するか否かを判断し、そのような車両が存在すると判断された場合、すなわち、お互いの運転者がお互いの存在に気付いている場合に、ステップS707及びS708の処理を行い、ステップS709において自車両の運転者に他の車両が存在することを知らせるための警報を行ってもよい。   In step S706, the determination unit 108 determines whether there is another vehicle that is within the determined driver's gaze range and that the own vehicle is within the gaze range of the driver of the surrounding vehicle. If it is determined that such a vehicle exists, that is, if both drivers are aware of each other's presence, the processing of steps S707 and S708 is performed, and in step S709, the driver of the host vehicle An alarm may be issued to notify that there is a vehicle.

<第3の実施の形態>
次に、本発明の第3の実施の形態について説明する。第3の実施の形態は、自車両の運転者が見ている他の車両の運転者が自車両に気付いているか否かを確認できるよう構成したものである。本発明の第3の実施の形態に係る警報装置の構成の一例について図8を用いて説明する。図8に示すように、警報装置は、ドライバ撮像手段801、視線検出手段802、注視範囲決定手段803、車両情報取得手段804、発信手段805、受信手段806、入力手段807、判断手段808、警報手段809、記憶手段810から構成されている。なお、入力手段807以外の構成要素は、第1の実施の形態に係る警報装置の構成要素と基本的には同一であるため説明を省略する。
<Third Embodiment>
Next, a third embodiment of the present invention will be described. The third embodiment is configured so that it can be confirmed whether or not the driver of another vehicle that the driver of the host vehicle is aware of is own vehicle. An example of the configuration of an alarm device according to the third embodiment of the present invention will be described with reference to FIG. As shown in FIG. 8, the alarm device includes a driver imaging unit 801, a gaze detection unit 802, a gaze range determination unit 803, a vehicle information acquisition unit 804, a transmission unit 805, a reception unit 806, an input unit 807, a determination unit 808, an alarm. It comprises means 809 and storage means 810. The constituent elements other than the input unit 807 are basically the same as the constituent elements of the alarm device according to the first embodiment, and thus the description thereof is omitted.

入力手段807は、運転者が見ている他の車両の運転者が自車両に気付いているか否かの確認をするための指示を入力するものである。例えば、自車両の前方を走行する車両がある場合、前方を走行する車両の運転者は自車両の存在に気付いているのか否かを確認するために、運転者は前方を走行する車両を特定する情報、例えば走行中、周囲を走行する車両に動的に付された番号を入力手段807を介して入力する。なお、特に車両を特定せずに周辺を走行する車両すべてを確認の対象とすることも可能である。この場合、入力手段807は確認を実行するための単なるボタンなどであってもよい。   The input means 807 inputs an instruction for confirming whether or not a driver of another vehicle that the driver is watching is aware of the own vehicle. For example, when there is a vehicle traveling in front of the host vehicle, the driver identifies the vehicle traveling ahead in order to check whether the driver of the vehicle traveling in front is aware of the presence of the host vehicle. For example, a number dynamically assigned to a vehicle traveling around is input via the input means 807 during traveling. In addition, it is also possible to make all the vehicles which drive | work the periphery without specifying a vehicle especially be object of confirmation. In this case, the input unit 807 may be a simple button or the like for executing confirmation.

次に、本発明の第3の実施の形態に係る警報装置における処理フローの一例について図9を用いて説明する。図9に示すように、まず、入力手段807を介してユーザから確認の実行指示が出されたか否かを判断する(ステップS901)。ここでは、周辺を走行する車両すべてを対象とした場合を考える。実行指示が出されたと判断した場合、最新の自車両の車両情報及び注視範囲情報と、周辺の車両の車両情報及びその周辺の車両の運転者の注視範囲情報とを取得する(ステップS902)。周辺の車両の位置情報及びその運転者の注視範囲情報は、走行中にあらかじめそれらの情報を周辺の車両から受信しておき、受信したそれらの情報を記憶手段810に格納している。なお、あらかじめ格納しておかずにその都度受信するようにしてもよい。   Next, an example of a processing flow in the alarm device according to the third embodiment of the present invention will be described with reference to FIG. As shown in FIG. 9, first, it is determined whether or not a confirmation execution instruction has been issued from the user via the input means 807 (step S901). Here, the case where all the vehicles which drive | work around are considered. If it is determined that an execution instruction has been issued, the latest vehicle information and gaze range information of the host vehicle, vehicle information of surrounding vehicles, and gaze range information of drivers of the surrounding vehicles are acquired (step S902). The position information of the surrounding vehicles and the driver's gaze range information are received in advance from the surrounding vehicles during traveling, and the received information is stored in the storage unit 810. In addition, you may make it receive each time, without storing beforehand.

判断手段808は、周辺の車両のうち、取得された自車両の運転者の注視範囲内にある車両(以下、他の車両とする)を選択し、選択された他の車両のうち自車両に最も近い車両を選択する(ステップS903)。なお、上述したように、あらかじめ確認の対象となる車両を特定した場合にはステップS903の処理は行わなくてもよい。そして、判断手段808は、選択された車両の運転者の注視範囲内に自車両が存在しているか否かを判断する(ステップS904)。存在していると判断された場合、警報手段809は、例えば不図示のスピーカを介して「その車両はこちらを見ています」などと自車両の運転者に警報を行う(ステップS905)。一方、存在していないと判断された場合、警報手段809は、例えば不図示のスピーカを介して「その車両はこちらを見ていません」などと自車両の運転者に警報を行う(ステップS906)。このようにすることにより、自車両の運転者は注意して運転をすることができる。   The determination unit 808 selects a vehicle (hereinafter referred to as another vehicle) that is within the gaze range of the acquired driver of the own vehicle from the surrounding vehicles, and sets the own vehicle among the selected other vehicles. The nearest vehicle is selected (step S903). As described above, when a vehicle to be confirmed is specified in advance, the process in step S903 may not be performed. Then, the determination unit 808 determines whether or not the own vehicle exists within the gaze range of the driver of the selected vehicle (step S904). If it is determined that the vehicle exists, the warning unit 809 issues a warning to the driver of the host vehicle, for example, via a speaker (not shown), such as “The vehicle is looking at you” (step S905). On the other hand, if it is determined that the vehicle does not exist, the warning means 809 issues a warning to the driver of the host vehicle, for example, via a speaker (not shown) that “the vehicle is not looking at you” (step S906). ). By doing so, the driver of the own vehicle can drive with care.

本発明に係る警報装置は、相手車両の運転者が自身に気付いているか否かを判断することによって安全に走行することができるため、車両を運転する運転者が安全に運転することができるよう情報を提供する警報装置などに有用である。   The alarm device according to the present invention can travel safely by determining whether or not the driver of the other vehicle is aware of itself, so that the driver who drives the vehicle can drive safely. This is useful for alarm devices that provide information.

本発明の第1の実施の形態に係る警報装置の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the alarm device which concerns on the 1st Embodiment of this invention. 本発明の第1の実施の形態に係る警報装置における運転者が注視している範囲を決定するフローの一例について説明するためのフローチャートである。It is a flowchart for demonstrating an example of the flow which determines the range which the driver | operator has watched in the alarm device which concerns on the 1st Embodiment of this invention. 本発明の第1の実施の形態に係る警報装置におけるあらかじめ設定された複数に区分けされた視線範囲を説明するための図である。It is a figure for demonstrating the line-of-sight range divided into plurality preset in the alarm device which concerns on the 1st Embodiment of this invention. 本発明の第1の実施の形態に係る警報装置における視線方向蓄積テーブルの一例について説明するための図である。It is a figure for demonstrating an example of the gaze direction accumulation | storage table in the alarm device which concerns on the 1st Embodiment of this invention. 本発明の第1の実施の形態に係る警報装置における処理フローの一例について説明するためのフローチャートである。It is a flowchart for demonstrating an example of the processing flow in the alarm device which concerns on the 1st Embodiment of this invention. 本発明の第2の実施の形態に係る警報装置が利用される状況を説明するための図である。It is a figure for demonstrating the condition where the alarm device based on the 2nd Embodiment of this invention is utilized. 本発明の第2の実施の形態に係る警報装置における処理フローの一例について説明するためのフローチャートである。It is a flowchart for demonstrating an example of the processing flow in the alarm device which concerns on the 2nd Embodiment of this invention. 本発明の第3の実施の形態に係る警報装置の構成の一例を示す構成図である。It is a block diagram which shows an example of a structure of the alarm device which concerns on the 3rd Embodiment of this invention. 本発明の第3の実施の形態に係る警報装置における処理フローの一例について説明するためのフローチャートである。It is a flowchart for demonstrating an example of the processing flow in the alarm device which concerns on the 3rd Embodiment of this invention.

符号の説明Explanation of symbols

101、801 ドライバ撮像手段(撮像手段)
102、802 視線検出手段
103、803 注視範囲決定手段(視線範囲決定手段)
104、804 車両情報取得手段
105、805 発信手段
106、806 受信手段
107 相対方向算出手段(方向算出手段)
108、808 判断手段
109、809 警報手段
110、810 記憶手段
807 入力手段(受付手段)
101, 801 Driver imaging means (imaging means)
102, 802 Gaze detection means 103, 803 Gaze range determination means (line of sight range determination means)
104, 804 Vehicle information acquisition means 105, 805 Transmission means 106, 806 Reception means 107 Relative direction calculation means (direction calculation means)
108, 808 Judgment means 109, 809 Alarm means 110, 810 Storage means 807 Input means (reception means)

Claims (9)

車両を運転する運転者を撮像する撮像手段と、
前記撮像手段によって撮像された前記運転者の画像情報を用いて前記運転者の視線方向を検出する視線検出手段と、
検出された前記視線方向が、あらかじめ設定された複数に区分けされた範囲のいずれの区分け範囲に属するかを決定する視線範囲決定手段と、
前記車両の位置情報及び方位情報を含む車両情報を取得する車両情報取得手段と、
決定された前記区分け範囲の情報及び取得された前記車両の前記車両情報を周囲の車両に発信する発信手段と、
前記車両の前記撮像手段、前記視線検出手段、前記視線範囲取得手段、前記車両情報取得手段、前記発信手段と同様の各手段を装備した他の車両から発信された、前記他の車両の運転者における視線方向の前記区分け範囲の情報及び前記他の車両の前記車両情報を受信する受信手段と、
前記車両情報取得手段によって取得された前記車両の車両情報と、前記受信手段によって受信された前記他の車両の車両情報とに基づいて、前記車両の所定の方向に対する前記他の車両が位置する方向を算出する方向算出手段と、
算出された前記車両の所定の方向に対する前記他の車両が位置する方向が、前記車両及び前記他の車両の前記方位情報に基づいて、受信された前記他の車両の運転者における視線方向の前記区分け範囲内にあるか否かを判断する判断手段と、
前記判断手段による判断結果に基づいて前記車両の運転者に警報を行う警報手段とを、
備える警報装置。
Imaging means for imaging a driver driving the vehicle;
Gaze detection means for detecting the driver's gaze direction using the image information of the driver imaged by the imaging means;
A line-of-sight range determining means for determining which of the plurality of predetermined divided ranges the detected line-of-sight direction belongs to;
Vehicle information acquisition means for acquiring vehicle information including position information and direction information of the vehicle;
Transmitting means for transmitting the determined range information and the acquired vehicle information of the vehicle to surrounding vehicles;
The driver of the other vehicle transmitted from another vehicle equipped with the same means as the imaging means, the line-of-sight detection means, the line-of-sight range acquisition means, the vehicle information acquisition means, and the transmission means of the vehicle Receiving means for receiving the information of the classification range of the line-of-sight direction and the vehicle information of the other vehicle;
Based on the vehicle information of the vehicle acquired by the vehicle information acquisition means and the vehicle information of the other vehicle received by the receiving means, the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle Direction calculating means for calculating
The calculated direction of the other vehicle relative to the predetermined direction of the vehicle is based on the azimuth information of the vehicle and the other vehicle, and the received line-of-sight direction of the driver of the other vehicle is received. A judging means for judging whether or not it is within the classification range;
Warning means for warning the driver of the vehicle based on a determination result by the determination means;
Alarm device with.
前記警報手段は、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にあると判断された場合に警報を行う請求項1に記載の警報装置。   The warning means issues an alarm when the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means. The alarm device according to claim 1 to be performed. 前記警報手段は、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にないと判断された場合に警報を行う請求項1に記載の警報装置。   The warning means issues an alarm when the direction in which the other vehicle is positioned with respect to a predetermined direction of the vehicle is not within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means. The alarm device according to claim 1 to be performed. 前記発信手段は、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にないと判断された場合に、前記他の車両の運転者に前記車両の存在を知らせるための存在情報を前記他の車両に送信する請求項1又は3に記載の警報装置。   The transmission means is configured to determine that the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is not within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means. The alarm device according to claim 1 or 3, wherein presence information for notifying a driver of another vehicle of presence of the vehicle is transmitted to the other vehicle. 前記警報手段は、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にないと判断され、かつ前記車両の所定の方向に対する前記他の車両が位置する方向が前記車両の運転者の視線方向に基づいて前記視線範囲決定手段によって決定された区分け範囲内にないと前記判断手段によって判断された場合に警報を行う請求項1に記載の警報装置。   The warning means determines that the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is not within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means, and An alarm is issued when it is determined by the determination means that the direction in which the other vehicle is positioned with respect to a predetermined direction is not within the segmentation range determined by the line-of-sight range determination means based on the line-of-sight direction of the driver of the vehicle. The alarm device according to claim 1 to be performed. 前記警報手段は、前記車両の所定の方向に対する前記他の車両が位置する方向が前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内にあると判断され、かつ前記車両の所定の方向に対する前記他の車両が位置する方向が前記車両の運転者の視線方向に基づいて前記視線範囲決定手段によって決定された区分け範囲内にあると前記判断手段によって判断された場合に警報を行う請求項1に記載の警報装置。   The warning means determines that the direction in which the other vehicle is located with respect to a predetermined direction of the vehicle is within the division range of the line-of-sight direction of the driver of the other vehicle by the determination means, and the vehicle An alarm is issued when the determination means determines that the direction in which the other vehicle is located with respect to a predetermined direction is within the segmentation range determined by the line-of-sight range determination means based on the line-of-sight direction of the driver of the vehicle. The alarm device according to claim 1 to be performed. 前記他の車両の運転者が前記車両に気付いているか否かを確認するための確認要求指示を受け付ける受付手段を備え、
前記判断手段は、前記受付手段を介して受け付けた前記確認要求指示に基づいて、前記車両の運転者における視線方向の前記区分け範囲内に存在する前記他の車両の運転者における視線方向の前記区分け範囲内に、前記車両が存在するか否かを判断する請求項1に記載の警報装置。
Receiving means for receiving a confirmation request instruction for confirming whether the driver of the other vehicle is aware of the vehicle;
The determination unit is configured to determine the classification of the line-of-sight direction of the driver of the other vehicle existing in the classification range of the line-of-sight direction of the driver of the vehicle based on the confirmation request instruction received via the reception unit. The alarm device according to claim 1, wherein it is determined whether or not the vehicle exists within a range.
前記警報手段は、前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内に前記車両が存在すると判断された場合に警報を行う請求項7に記載の警報装置。   The alarm device according to claim 7, wherein the warning unit issues a warning when it is determined by the determination unit that the vehicle exists within the classification range in the line-of-sight direction of a driver of the other vehicle. 前記警報手段は、前記判断手段によって前記他の車両の運転者における視線方向の前記区分け範囲内に前記車両が存在しないと判断された場合に警報を行う請求項7に記載の警報装置。
The alarm device according to claim 7, wherein the alarm unit issues an alarm when the determination unit determines that the vehicle does not exist within the division range in the line-of-sight direction of a driver of the other vehicle.
JP2006074268A 2006-03-17 2006-03-17 Warning device Pending JP2007249757A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006074268A JP2007249757A (en) 2006-03-17 2006-03-17 Warning device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006074268A JP2007249757A (en) 2006-03-17 2006-03-17 Warning device

Publications (1)

Publication Number Publication Date
JP2007249757A true JP2007249757A (en) 2007-09-27

Family

ID=38593958

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006074268A Pending JP2007249757A (en) 2006-03-17 2006-03-17 Warning device

Country Status (1)

Country Link
JP (1) JP2007249757A (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100941236B1 (en) 2008-03-31 2010-02-10 현대자동차주식회사 Driver distration warning system
JP2012212357A (en) * 2011-03-31 2012-11-01 Panasonic Corp On-vehicle display device
US8862380B2 (en) 2010-10-11 2014-10-14 Hyundai Motor Company System and method for alarming front impact danger coupled with driver viewing direction and vehicle using the same
KR101527220B1 (en) * 2008-12-23 2015-06-08 두산인프라코어 주식회사 Apparatus for Enhancing Operative Safety of Construction Equipment
WO2015146061A1 (en) * 2014-03-28 2015-10-01 株式会社デンソー Vehicular recognition notification device and vehicular recognition notification system
WO2016072053A1 (en) * 2014-11-05 2016-05-12 株式会社デンソー Vehicle-mounted peripheral object notification system, object notification system, and notification control device
DE102015209090A1 (en) * 2015-05-19 2016-11-24 Bayerische Motoren Werke Aktiengesellschaft Output of a warning to road users on a head-mounted display
JP2017037465A (en) * 2015-08-10 2017-02-16 株式会社デンソー Information transmission device
JP2019117668A (en) * 2019-05-07 2019-07-18 株式会社デンソー Onboard peripheral entity notification system, entity notification system, and notification control unit
WO2023090618A1 (en) * 2021-11-16 2023-05-25 전남대학교 산학협력단 Vehicular device for determining gaze state of driver by using artificial intelligence and control method therefor

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0374231A (en) * 1989-08-14 1991-03-28 Nissan Motor Co Ltd Lighting device for vehicle
JP2002083400A (en) * 2000-09-06 2002-03-22 Honda Motor Co Ltd On-vehicle information processor for judging compatibility of view area of driver
JP2002340605A (en) * 2001-05-15 2002-11-27 Yamaha Corp Portable communication device, navigation server and navigation system
JP2003327009A (en) * 2002-05-14 2003-11-19 Toyota Central Res & Dev Lab Inc Attention attracting device
JP2004259069A (en) * 2003-02-26 2004-09-16 Aisin Seiki Co Ltd Alarm system for outputting alarm signal depending on vehicle hazard level
JP2004348394A (en) * 2003-05-21 2004-12-09 Toyota Central Res & Dev Lab Inc Environment change device, and behavioral guideline information generation and presentation device
JP2005165422A (en) * 2003-11-28 2005-06-23 Denso Corp Collision probability determination device
JP2005196651A (en) * 2004-01-09 2005-07-21 Nissan Motor Co Ltd Communication device for vehicle

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0374231A (en) * 1989-08-14 1991-03-28 Nissan Motor Co Ltd Lighting device for vehicle
JP2002083400A (en) * 2000-09-06 2002-03-22 Honda Motor Co Ltd On-vehicle information processor for judging compatibility of view area of driver
JP2002340605A (en) * 2001-05-15 2002-11-27 Yamaha Corp Portable communication device, navigation server and navigation system
JP2003327009A (en) * 2002-05-14 2003-11-19 Toyota Central Res & Dev Lab Inc Attention attracting device
JP2004259069A (en) * 2003-02-26 2004-09-16 Aisin Seiki Co Ltd Alarm system for outputting alarm signal depending on vehicle hazard level
JP2004348394A (en) * 2003-05-21 2004-12-09 Toyota Central Res & Dev Lab Inc Environment change device, and behavioral guideline information generation and presentation device
JP2005165422A (en) * 2003-11-28 2005-06-23 Denso Corp Collision probability determination device
JP2005196651A (en) * 2004-01-09 2005-07-21 Nissan Motor Co Ltd Communication device for vehicle

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100941236B1 (en) 2008-03-31 2010-02-10 현대자동차주식회사 Driver distration warning system
KR101527220B1 (en) * 2008-12-23 2015-06-08 두산인프라코어 주식회사 Apparatus for Enhancing Operative Safety of Construction Equipment
US8862380B2 (en) 2010-10-11 2014-10-14 Hyundai Motor Company System and method for alarming front impact danger coupled with driver viewing direction and vehicle using the same
JP2012212357A (en) * 2011-03-31 2012-11-01 Panasonic Corp On-vehicle display device
CN106415693A (en) * 2014-03-28 2017-02-15 株式会社电装 Vehicular recognition notification device and vehicular recognition notification system
WO2015146061A1 (en) * 2014-03-28 2015-10-01 株式会社デンソー Vehicular recognition notification device and vehicular recognition notification system
JP2015191583A (en) * 2014-03-28 2015-11-02 株式会社デンソー Recognition/notification device for vehicle and recognition/notification system for vehicle
CN106415693B (en) * 2014-03-28 2019-01-11 株式会社电装 Vehicle cognition notice device, vehicle cognition notice system
US9747800B2 (en) 2014-03-28 2017-08-29 Denso Corporation Vehicle recognition notification apparatus and vehicle recognition notification system
US10068481B2 (en) * 2014-11-05 2018-09-04 Denso Corporation Vehicle-mounted peripheral object notification system, object notification system, and notification control apparatus
JP2016091329A (en) * 2014-11-05 2016-05-23 株式会社デンソー Onboard peripheral entity notification system, entity notification system, and notification control unit
WO2016072053A1 (en) * 2014-11-05 2016-05-12 株式会社デンソー Vehicle-mounted peripheral object notification system, object notification system, and notification control device
DE102015209090A1 (en) * 2015-05-19 2016-11-24 Bayerische Motoren Werke Aktiengesellschaft Output of a warning to road users on a head-mounted display
JP2017037465A (en) * 2015-08-10 2017-02-16 株式会社デンソー Information transmission device
JP2019117668A (en) * 2019-05-07 2019-07-18 株式会社デンソー Onboard peripheral entity notification system, entity notification system, and notification control unit
WO2023090618A1 (en) * 2021-11-16 2023-05-25 전남대학교 산학협력단 Vehicular device for determining gaze state of driver by using artificial intelligence and control method therefor

Similar Documents

Publication Publication Date Title
JP2007249757A (en) Warning device
CN108447302B (en) Information processing apparatus and recording medium
JP5345350B2 (en) Vehicle driving support device
CN111361552B (en) Automatic driving system
US8666599B2 (en) Driving support system
JP4517393B2 (en) Driving assistance device
JP4134891B2 (en) Collision possibility judgment device
JP4885793B2 (en) Obstacle monitoring device
JP2019087015A (en) Remote monitoring system, autonomous travel vehicle and remote monitoring method
WO2017199529A1 (en) Driving assistance device and driving assistance program
JP2005328181A (en) Periphery confirming apparatus
KR101938314B1 (en) Apparatus and Method for Warning Rear Side of Vehicle with Learning of Driving Pattern
JP2016181032A (en) Automatic travel control device and automatic travel control system
CN112542052A (en) Method for warning unprotected traffic participants
CN111443708A (en) Automatic driving system
JPWO2019220582A1 (en) Rear side warning device for vehicles and rear side warning method for vehicles
JP2010097335A (en) Driving intention estimating device
JP4655730B2 (en) Vehicle driving support device
JP7180421B2 (en) vehicle controller
JP6344105B2 (en) Vehicle warning system
JP5416193B2 (en) Obstacle monitoring device
JP4265992B2 (en) Driving assistance device
KR101995054B1 (en) Device and method of camera video output and storage system using V2V communication
JP2010039933A (en) Inattentive driving determination device
JP2008129871A (en) Travelling environment estimating device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080311

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100105

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100302

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100511

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100625

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20101015