JP5581754B2 - Driving assistance device - Google Patents

Driving assistance device Download PDF

Info

Publication number
JP5581754B2
JP5581754B2 JP2010061147A JP2010061147A JP5581754B2 JP 5581754 B2 JP5581754 B2 JP 5581754B2 JP 2010061147 A JP2010061147 A JP 2010061147A JP 2010061147 A JP2010061147 A JP 2010061147A JP 5581754 B2 JP5581754 B2 JP 5581754B2
Authority
JP
Japan
Prior art keywords
driver
recognition type
vehicle
type
driving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010061147A
Other languages
Japanese (ja)
Other versions
JP2011194931A (en
Inventor
和則 香川
有華 祖父江
悟 丹羽
信 田中
明久 横山
一広 森本
淳一 脇田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2010061147A priority Critical patent/JP5581754B2/en
Publication of JP2011194931A publication Critical patent/JP2011194931A/en
Application granted granted Critical
Publication of JP5581754B2 publication Critical patent/JP5581754B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、運転者による自車両の運転を支援する運転支援装置に関する。   The present invention relates to a driving support device that supports driving of a host vehicle by a driver.

従来、運転者に対して自車両周辺の画像を表示する装置が提案されている。例えば、下記の特許文献1には、運転者の注視する方向に基づいて、運転者の死角となる自車両周辺を異なった位置から撮像する複数のCCDカメラのいずれかを選択し、選択したCCDカメラの撮像した画像をモニタに表示させる車両周辺表示装置が開示されている。なお、モニタは、運転者の前方に設置されている。   2. Description of the Related Art Conventionally, an apparatus that displays an image around a host vehicle to a driver has been proposed. For example, in Patent Document 1 below, any one of a plurality of CCD cameras that pick up images of the periphery of the host vehicle, which is a blind spot of the driver, from different positions is selected based on the direction in which the driver is gazing. A vehicle periphery display device that displays an image captured by a camera on a monitor is disclosed. The monitor is installed in front of the driver.

特開2007−142724号公報JP 2007-142724 A

特許文献1に記載の車両周辺表示装置は、運転者の注視する方向に基づいて、複数のCCDカメラのいずれかを選択し、選択したCCDカメラの撮像した画像を表示させる。自車両を後退させて駐車する際に自車両後方周辺を確認しようとする傾向がある運転者は、自車両後方周辺を撮像した画像をモニタに表示させるために、自車両後方を注視する必要がある。   The vehicle periphery display device described in Patent Literature 1 selects one of a plurality of CCD cameras based on the direction in which the driver gazes, and displays an image captured by the selected CCD camera. A driver who tends to check the surroundings of the back of the vehicle when the vehicle is parked backwards needs to watch the back of the vehicle in order to display an image of the surroundings of the back of the vehicle on the monitor. is there.

しかしながら、この運転者が自車両後方を注視しようとすると、運転者の前方に設置されたモニタを確認することが困難になる。即ち、特許文献1に記載の車両周辺表示装置では、自車両を駐車させる際の運転者の視線による確認傾向の特性に合った画像切り換えを適切に行うことが困難なことから、より一層安全な運転のための運転支援を可能にする余地がある。   However, when this driver tries to watch the back of the host vehicle, it is difficult to check a monitor installed in front of the driver. In other words, in the vehicle periphery display device described in Patent Document 1, it is difficult to appropriately perform image switching that matches the characteristics of the confirmation tendency by the driver's line of sight when parking the host vehicle. There is room for driving assistance for driving.

そこで、本発明は、より一層安全な運転のための運転支援を行うことができる運転支援装置を提供することを目的とする。   Then, an object of this invention is to provide the driving assistance device which can perform the driving assistance for a safer driving | operation.

上記目的を達成するために、本発明に係る運転支援装置は、運転者による自車両の運転を支援する運転支援装置において、運転者が注視する注視点の変化度合いを検出する検出手段と、検出手段により検出された変化度合いに基づいて、運転者の自車両周辺に対する視覚認識タイプは自車両周辺を直視して見回す空間認識タイプであるか否かを判断する判断手段と、判断手段により判断された視覚認識タイプが空間認識タイプである場合に、当該空間認識タイプに応じた運転支援を行なう支援手段と、を備えることを特徴とする。 In order to achieve the above object, a driving support apparatus according to the present invention includes a detection unit that detects a degree of change of a gazing point that a driver watches in a driving support apparatus that supports driving of the host vehicle by the driver, Based on the degree of change detected by the means, the visual recognition type for the driver's surroundings of the vehicle is determined by the determining means and the determining means for determining whether or not the driver's visual recognition type is a space recognition type for looking directly around the own vehicle. When the visual recognition type is a space recognition type, a support means for performing driving support according to the space recognition type is provided.

この運転支援装置は、運転者が注視する注視点の変化度合いを検出し、検出された変化度合いに基づいて、運転者の自車両周辺に対する視覚認識タイプを判断して、判断された視覚認識タイプに応じた運転支援を行なう。これにより、自車両を後退させて駐車する際に自車両後方周辺を確認しようとする運転者であっても、まず、この運転者が注視する注視点の変化度合いとして注視点が自車両後方周辺にほぼ定まることを検出し、検出された変化度合いに基づいて、運転者の自車両周辺に対する視覚認識タイプとして自車両後方周辺を確認するタイプであると判断して、判断された視覚認識タイプに応じた情報提供といった運転支援を行なうことが可能になる。この結果、自車両を駐車させる際の運転者の視線による確認傾向の特性に合った運転支援を行なうことが可能になり、より一層安全な運転のための運転支援を行うことができるようになる。   The driving support device detects the degree of change of the gazing point that the driver is gazing at, determines the visual recognition type for the driver's surroundings based on the detected degree of change, and determines the determined visual recognition type. Driving assistance according to the situation. As a result, even if the driver tries to check the vicinity of the rear of the host vehicle when the host vehicle is retracted and parked, first, the gazing point is set as the degree of change of the gazing point observed by the driver. Based on the detected degree of change, it is determined that the driver recognizes the rear periphery of the vehicle as the visual recognition type for the vehicle periphery, and the determined visual recognition type is determined. It is possible to perform driving support such as providing information in response. As a result, it becomes possible to perform driving support that matches the characteristics of the confirmation tendency by the driver's line of sight when parking the host vehicle, and it is possible to perform driving support for safer driving. .

また、判断手段は、注視点の変化回数が閾値を超えた回数が規定回数を超えている場合に、視覚認識タイプは空間認識タイプであると判断し、支援手段は、判断手段により判断された視覚認識タイプが空間認識タイプである場合に、自車両周辺が運転者の目線のカメラを用いて撮像された複数の画像を切り替えながら表示するのも好ましい。 In addition, the determination means determines that the visual recognition type is a spatial recognition type when the number of times that the number of changes in the gazing point exceeds the threshold exceeds the specified number of times, and the support means is determined by the determination means. When the visual recognition type is a space recognition type, it is also preferable to display a plurality of images obtained by switching the surroundings of the host vehicle using a camera with a driver's eyes .

これにより、判断された視覚認識タイプに応じて、自車両周辺の画像が表示される。この結果、自車両を駐車させる際の運転者の視線の特性に合わせて自車両周辺の画像を表示させることによる運転支援を行なうことが可能になり、より一層安全な運転のための運転支援を行うことができるようになる。   Thus, an image around the host vehicle is displayed according to the determined visual recognition type. As a result, it becomes possible to perform driving support by displaying an image around the host vehicle in accordance with the characteristics of the driver's line of sight when the host vehicle is parked, and driving support for safer driving. Will be able to do.

本発明によれば、より一層安全な運転のための運転支援を行うことができる運転支援装置を提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the driving assistance apparatus which can perform the driving assistance for a safer driving | operation can be provided.

運転支援装置の構成概略を説明するための構成概略図である。It is a block diagram for demonstrating the schematic structure of a driving assistance device. 駐車運転の開始から完了までの間の注視点の変化度合いの一例を示す説明図である。It is explanatory drawing which shows an example of the change degree of the gazing point from the start to completion of parking driving. 駐車運転の開始から完了までの間の注視点の変化度合いの一例を示す説明図である。It is explanatory drawing which shows an example of the change degree of the gazing point from the start to completion of parking driving. 運転支援装置で実行される視覚認識タイプの判断処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the judgment process of the visual recognition type performed with a driving assistance device.

以下、添付図面を参照しながら本発明の好適な実施形態を説明する。なお、図面の説明において同一要素には同一符号を付し、重複する説明を省略する。   Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings. In the description of the drawings, the same elements are denoted by the same reference numerals, and redundant description is omitted.

(1)運転支援装置の構成
まず、本実施形態である運転支援装置の構成について、図1を用いて説明する。図1は、運転支援装置10の構成概略を説明するための構成概略図である。運転支援装置10は、例えば自動車等の移動体車両(以下、自車両)に搭載され、ドライバ(運転者)による自車両の運転を支援するための視覚情報をシーンに適応して提供するシーン適応型視覚支援システム装置である。
(1) Configuration of Driving Support Device First, the configuration of the driving support device according to the present embodiment will be described with reference to FIG. FIG. 1 is a schematic configuration diagram for explaining a schematic configuration of the driving support device 10. The driving support device 10 is mounted on a mobile vehicle such as an automobile (hereinafter referred to as the own vehicle), for example, and scene adaptation that provides visual information for supporting the driving of the own vehicle by a driver (driver) according to the scene. Type visual support system device.

運転支援装置10による機能は、例えば、自車両の内部に搭載された電子制御装置であるECUにより実現される。ECUは、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random AccessMemory)などからなるマイクロコンピュータを主要構成部品とするユニットである。   The function by the driving assistance apparatus 10 is implement | achieved by ECU which is an electronic control apparatus mounted in the inside of the own vehicle, for example. The ECU is a unit whose main component is a microcomputer including a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like.

図1に示されるように、運転支援装置10は、注視点検出部1(検出手段)、タイプ判断部2(判断手段)、及び運転支援部3(支援手段)を備えている。   As shown in FIG. 1, the driving support apparatus 10 includes a gazing point detection unit 1 (detection unit), a type determination unit 2 (determination unit), and a driving support unit 3 (support unit).

注視点検出部1は、ドライバの顔をカメラ等により撮像することによって顔向き及び視線方向を検知する視線検出器と、検知された視線方向に基づいてドライバがどの注視対象エリア(例えば、ルームミラーのエリアなのか前方直視により注視されるエリアなのか)をどの程度の頻度で見ているかを判定する計算機とを有して構成されている。注視点検出部1は、この計算機による判定結果に基づいて、ドライバが注視する対象である注視点としての注視対象エリアの変化度合いを検出する。   The gaze point detection unit 1 detects a face direction and a line-of-sight direction by capturing the driver's face with a camera or the like, and a gaze target area (for example, a room mirror) by the driver based on the detected line-of-sight direction. Or an area to be watched by direct front view) and a computer for determining how often the area is viewed. The gaze point detection unit 1 detects the degree of change of the gaze target area as a gaze point that is a target to be watched by the driver based on the determination result by the computer.

タイプ判断部2は、注視点検出部1により検出された変化度合いに基づいて、ドライバの自車両周辺に対する視覚認識タイプを分類して判断する判定演算部分である。視覚認識タイプは、例えば、後述する空間認識タイプと目印注視タイプの二種類に大別することができる。   The type determination unit 2 is a determination calculation part that classifies and determines the visual recognition type of the driver's surroundings of the vehicle based on the degree of change detected by the gazing point detection unit 1. The visual recognition type can be broadly classified into two types, for example, a space recognition type and a landmark gaze type described later.

ここで、空間認識タイプとは、例えば自車両の駐車時に、ルームミラーやサイドミラーを用いるよりも、左右及び後方といった自車両周辺を高頻度で直視して見回すことによって、自車両周辺の駐車エリアと自車両との地理的な関係を空間的に把握して認識することが多いドライバタイプのことである。男性ドライバの多くは、空間を認識する能力が比較的高く、このタイプに分類される。   Here, the space recognition type is a parking area around the host vehicle by, for example, looking directly around the host vehicle such as right and left and rear rather than using a room mirror or a side mirror when parking the host vehicle. It is a driver type that often recognizes and recognizes the geographical relationship between the vehicle and the vehicle. Many male drivers have a relatively high ability to recognize space and fall into this type.

また、目印注視タイプとは、例えば自車両の駐車時に、自車両周辺を見回すよりも、ルームミラーやサイドミラー等の目印としてのミラーに写った目標対象オブジェクトを注視しつつこの目印を切り替えて注視することによって、自車両周辺の駐車エリアと自車両との位置関係のズレを認識することが多いドライバタイプのことである。女性ドライバの多くは、特徴点を検出する能力と過去の経験を記憶する能力とが比較的高く、このタイプに分類される。過去の経験を記憶する能力には、過去の駐車経験に基づいて見出されたドライバ独自の注視対象と自車両との差分を運転の際の判断基準とする能力も含まれる。これら視覚認識タイプの違いの詳細については、後述する。   Also, with the landmark gaze type, for example, when the host vehicle is parked, rather than looking around the host vehicle, the target target object reflected on the mirror as a landmark such as a rearview mirror or a side mirror is watched and switched. By doing this, it is a driver type that often recognizes a deviation in the positional relationship between the parking area around the host vehicle and the host vehicle. Many female drivers have a relatively high ability to detect feature points and memorize past experiences and fall into this type. The ability to memorize past experiences also includes the ability to use the difference between the driver's own gaze target found based on past parking experiences and the host vehicle as a criterion for driving. Details of the difference between these visual recognition types will be described later.

運転支援部3は、タイプ判断部2により判断された視覚認識タイプに応じて、ドライバに適した映像形式に選択的に自動的に切り替えるスイッチ部分と、切り替えられた映像形式で自車両周辺(例えば、一般的に注意が足りなくなることが多い場所が強調表示されたアラウンドビューやサイドビュー)の画像を自車両内に表示するとともにBGMを再生することによって、ドライバによる運転を支援するナビゲーション用ディスプレイ部分とを有して構成されている。   The driving support unit 3 selectively switches automatically to a video format suitable for the driver according to the visual recognition type determined by the type determination unit 2, and the periphery of the vehicle (for example, in the switched video format (for example, A display part for navigation that supports driving by a driver by displaying an image of an around view or a side view in which a place where attention is often lacking in general is highlighted in the own vehicle and playing a BGM. And is configured.

例えば、ドライバは空間認識タイプであると判断された場合、運転支援部3は、左右及び後方といった自車両周辺(例えば、一般的に注意が足りなくなることが多い場所が強調表示されたアラウンドビュー)をドライバ目線と略同じカメラを用いて撮像された画像を、左サイド画像を数秒表示し、右サイド画像を数秒表示し、後方画像を数秒表示するといったように比較的短時間で切り替えながらディスプレイ表示する。   For example, when it is determined that the driver is a space recognition type, the driving support unit 3 determines the surroundings of the host vehicle such as the left and right and the rear (for example, an around view in which places where attention is generally insufficient) are highlighted. Images displayed using the same camera as the driver's eyes are displayed on the display while switching in a relatively short time, such as displaying the left side image for a few seconds, the right side image for a few seconds, and the back image for a few seconds. To do.

また、ドライバは目印注視タイプであると判断された場合、運転支援部3は、ドライバ目線によるルームミラーやサイドミラー等のミラーに写る対象(例えば、一般的に注意が足りなくなることが多い場所が強調表示されたサイドビューやバックビュー)を示す画像を、左サイド画像を数十秒表示し、右サイド画像を数十秒表示し、後方画像を数十秒表示するといったように比較的長時間で切り替えながらディスプレイ表示する。   In addition, when it is determined that the driver is a landmark gazing type, the driving support unit 3 causes the driver's eye to be reflected on a mirror such as a room mirror or a side mirror (for example, a place where attention is generally insufficient). The image showing the highlighted side view or back view) is displayed for a relatively long time, such as the left side image is displayed for several tens of seconds, the right side image is displayed for several tens of seconds, and the rear image is displayed for several tens of seconds. Display on the screen while switching with.

(2)空間認識タイプと目印注視タイプの違いの詳細
続いて、空間認識タイプと目印注視タイプの違いの詳細について、図2及び図3を用いて説明する。図2は、自車両の駐車のための運転をドライバが開始してから完了するまでの間に、ドライバが、どの注視対象エリアを、いつ、どのくらいの長さの時間だけ見たかといった注視点の変化度合いの一例を示す説明図である。図2(a)は、空間認識タイプの場合を示し、図2(b)は、目印注視タイプの場合を示す。
(2) Details of Difference between Space Recognition Type and Mark Gaze Type Next, details of the difference between the space recognition type and the mark gaze type will be described with reference to FIGS. 2 and 3. Fig. 2 shows a gaze point that indicates when and how long the driver has viewed the gaze target area between the start and completion of driving for parking the host vehicle. It is explanatory drawing which shows an example of a change degree. FIG. 2A shows the case of the space recognition type, and FIG. 2B shows the case of the landmark gaze type.

また、図3は、自車両の駐車のための運転をドライバが開始してから完了するまでの間に、注視対象エリアを変化させた頻度としての注視点の変化度合いの一例を示す説明図である。図3(a)は、空間認識タイプの場合を示し、図2(a)に基づいており、図3(b)は、目印注視タイプの場合を示し、図2(b)に基づいている。   FIG. 3 is an explanatory diagram showing an example of the degree of change of the gazing point as the frequency of changing the gazing target area from the start of the driver's parking for the vehicle to the completion of the driving. is there. FIG. 3A shows the case of the space recognition type and is based on FIG. 2A, and FIG. 3B shows the case of the mark gaze type and is based on FIG. 2B.

空間認識タイプの場合、図2(a)に示されるように、比較的短時間で略周期的に、注視される対象となる範囲が切り替わる傾向を有するのが特徴である。一方、目印注視タイプの場合、図2(b)に示されるように、特定の範囲が比較的長時間注視され続ける傾向を有するのが特徴である。   In the case of the space recognition type, as shown in FIG. 2 (a), there is a feature that the range to be watched has a tendency to switch approximately periodically in a relatively short time. On the other hand, as shown in FIG. 2B, the mark gaze type is characterized in that a specific range has a tendency to continue to gaze for a relatively long time.

また、空間認識タイプの場合、図3(a)に示されるように、注視対象エリアが変化した回数が閾値を越えたこと(黒三角マークが付された箇所)が九回と変化頻度が比較的多く、規定回数(例えば、五回)を超えているのが特徴である。一方、目印注視タイプの場合、図3(b)に示されるように、注視対象エリアが変化した回数が閾値を越えたこと(黒三角マークが付された箇所)が二回と変化頻度が比較的少なく、この規定回数(例えば、五回)以下であるのが特徴である。   In the case of the space recognition type, as shown in FIG. 3 (a), the frequency of change of the gaze target area exceeds the threshold value (the part with the black triangle mark) is compared with the change frequency of nine times. It is characteristic that it exceeds the specified number of times (for example, five times). On the other hand, in the case of the mark gaze type, as shown in FIG. 3B, the frequency of change of the gaze target area exceeds the threshold value (the part with the black triangle mark) is compared with the change frequency twice. It is characteristic that it is less than the specified number of times (for example, five times).

(3)運転支援装置における視覚認識タイプの判断処理の流れ
次に、運転支援装置10で実行される視覚認識タイプの判断処理の流れ(運転支援方法)について、図4を用いて説明する。図4は、運転支援装置10で実行される視覚認識タイプの判断処理の流れを示すフローチャートである。図4のフローチャートに示される処理は、主として上記したECUによって行われるものであり、運転支援装置10の電源がオンされてからオフされるまでの間、所定のタイミングで繰り返し実行される。
(3) Flow of Visual Recognition Type Determination Processing in Driving Support Device Next, the flow of visual recognition type determination processing (driving support method) executed by the driving support device 10 will be described with reference to FIG. FIG. 4 is a flowchart showing the flow of the visual recognition type determination process executed by the driving support device 10. The process shown in the flowchart of FIG. 4 is mainly performed by the above-described ECU, and is repeatedly executed at a predetermined timing from when the driving support device 10 is turned on until it is turned off.

まず、注視点検出部1が、ドライバの顔をカメラ等により撮像することによって、顔向き及び視線方向を検出する(ステップS01)。次に、注視点検出部1が、検出された視線方向に基づいて、ドライバがどの注視対象エリア(例えば、ルームミラーのエリアなのか前方直視により注視されるエリアなのか)をどの程度の頻度で見ているかを判定する(ステップS02)。   First, the gazing point detection unit 1 detects the face direction and the line-of-sight direction by imaging the driver's face with a camera or the like (step S01). Next, based on the detected line-of-sight direction, the gaze point detection unit 1 determines how frequently the gaze target area (for example, the area of the room mirror or the area to be gazed by direct front view) is determined. It is determined whether the user is watching (step S02).

次に、注視点検出部1が、ドライバがどの注視対象エリアをどの程度の頻度で見たかを注視物に関する判定結果として記録する(ステップS03)。そして、注視点検出部1が、上記の判定処理の結果に基づいて、ドライバが注視する対象である注視点としての注視対象エリアの変化度合い(即ち、単位時間における注視物の変化回数)を計算して検出する(ステップS04)。   Next, the gaze point detection unit 1 records which gaze target area the driver has seen as frequently as a determination result regarding the gaze object (step S03). Then, the gaze point detection unit 1 calculates the degree of change in the gaze target area as the gaze point that is the target to be watched by the driver (that is, the number of changes in the gaze object per unit time) based on the result of the determination process. (Step S04).

次に、タイプ判断部2が、ドライバは目印注視タイプであるとして初期設定し、運転支援部3が、タイプ判断部2により判断された目印注視タイプのドライバに適した映像形式に切り替えて、切り替えられた映像形式で自車両周辺の画像を自車両内に表示する。更に、タイプ判断部2が、上記のステップS04において注視点検出部1により検出された変化度合いに基づいて、注視物としての注視対象エリアの変化回数が上記の閾値を超えたか否かを判定する(ステップS05)。注視対象エリアの変化回数が上記の閾値以下であると判定された場合は、上記のステップS01に移行する。一方、注視対象エリアの変化回数が上記の閾値を超えていると判定された場合は、後述のステップS06に移行する。   Next, the type determination unit 2 initializes the driver as a mark gazing type, and the driving support unit 3 switches to a video format suitable for the mark gazing type driver determined by the type determination unit 2. The image around the host vehicle is displayed in the host vehicle in the video format. Further, the type determination unit 2 determines whether or not the number of changes of the gaze target area as the gaze object has exceeded the above threshold based on the degree of change detected by the gaze point detection unit 1 in step S04. (Step S05). If it is determined that the number of changes in the gaze target area is equal to or less than the threshold value, the process proceeds to step S01. On the other hand, if it is determined that the number of changes in the gaze target area exceeds the threshold value, the process proceeds to step S06 described below.

ステップS06では、タイプ判断部2により、注視対象エリアの変化回数が閾値を越えた回数が、上記の規定回数を超えたか(即ち、変化頻度が比較的多いか)否かが判定される。注視対象エリアの変化回数が閾値を越えた回数が、上記の規定回数以下であると判定された場合は、上記のステップS01に移行する。一方、注視対象エリアの変化回数が閾値を越えた回数が、上記の規定回数を超えていると判定された場合は、後述のステップS07に移行する。   In step S06, the type determination unit 2 determines whether or not the number of times the number of changes in the gaze target area has exceeded the threshold exceeds the specified number of times (that is, whether the change frequency is relatively high). When it is determined that the number of times the number of changes in the gaze target area exceeds the threshold value is equal to or less than the specified number, the process proceeds to step S01. On the other hand, when it is determined that the number of times the number of changes in the gaze target area exceeds the threshold value exceeds the specified number, the process proceeds to step S07 described later.

ステップS07では、タイプ判断部2が、ドライバは空間認識タイプであるとして判断する。そして、一連の処理が終了する。なお、この後、運転支援部3が、タイプ判断部2により判断された空間認識タイプのドライバに適した映像形式に自動的に切り替えて、切り替えられた映像形式で自車両周辺の画像を自車両内に表示するとともにBGMを再生する。   In step S07, the type determination unit 2 determines that the driver is a space recognition type. Then, a series of processing ends. After this, the driving support unit 3 automatically switches to a video format suitable for the driver of the space recognition type determined by the type determination unit 2, and images around the host vehicle in the switched video format. And display the BGM.

(4)運転支援装置による作用及び効果
運転支援装置10は、ドライバが注視する注視点の変化度合いを検出し、検出された変化度合いに基づいて、ドライバの自車両周辺に対する視覚認識タイプを判断して、判断された視覚認識タイプに応じた運転支援を行なう。これにより、例えば、自車両を後退させて駐車する際に自車両後方周辺を確認しようとするドライバに関して、まず、このドライバが注視する注視点の変化度合いとしては、注視点が自車両後方周辺にほぼ定まることを検出する。
(4) Actions and effects of the driving support device The driving support device 10 detects the degree of change of the gaze point that the driver is gazing at, and determines the visual recognition type of the driver around the vehicle based on the detected degree of change. Driving assistance according to the determined visual recognition type. Thus, for example, for a driver who wants to check the vicinity of the rear of the host vehicle when the host vehicle is retracted and parked, first, as the degree of change of the gazing point that the driver watches, Detect that it is almost fixed.

そして、検出された変化度合いに基づいて、ドライバは空間認識タイプであると判断して、判断された空間認識タイプに応じた情報提供といった運転支援を行なうことが可能になる。この結果、自車両を駐車させる際のドライバの視覚認識特性に合った運転支援を選択して行なうことが可能になり、ドライバの個人特性に合ったより一層安全な運転のための運転支援を行うことができるようになる。   Based on the detected degree of change, the driver determines that the driver is a space recognition type, and can provide driving support such as providing information according to the determined space recognition type. As a result, it becomes possible to select driving assistance that matches the driver's visual recognition characteristics when parking the host vehicle, and to perform driving assistance for safer driving that matches the personal characteristics of the driver. Will be able to.

また、判断された視覚認識タイプに応じて、自車両周辺の画像がディスプレイ表示される。これにより、自車両を駐車させる際のドライバの視線による確認傾向の特性に合わせて自車両周辺の画像(即ち、ドライバが必要とする場所の画像)を的確に自動的に切り替えてディスプレイ表示させることによる運転支援を行なうことが可能になる。この結果、ディスプレイ表示の手動による切り替えの煩わしさから解放されたドライバを、上記の画像が自動的に切り替え表示されるディスプレイだけに集中させて、より一層安全で快適な運転のための運転支援を行うことができるようになる。   Further, an image around the host vehicle is displayed on the display according to the determined visual recognition type. Thereby, the image around the own vehicle (that is, the image of the place required by the driver) is automatically switched accurately and displayed in accordance with the characteristics of the confirmation tendency by the driver's line of sight when parking the own vehicle. It becomes possible to perform driving support by. As a result, the driver who has been released from the troublesome manual switching of the display display is concentrated only on the display on which the above image is automatically switched and displayed to provide driving support for safer and more comfortable driving. Will be able to do.

(5)変形例
上記の実施例では、視覚認識タイプには空間認識タイプと目印注視タイプの二種類がある構成としているが、これらを更に細分化した構成としてもよい。また、上記の実施例では、運転支援部3により画像を自動的に切り替えてディスプレイ表示させる構成としているが、この切り替え表示する構成に加えて、ソナー等のセンサ類を自動的に選択してセンサ機能やセンサ強度を強化させる構成としてもよい。
(5) Modification In the above embodiment, there are two types of visual recognition types: a space recognition type and a mark gaze type, but these may be further subdivided. In the above embodiment, the driving support unit 3 automatically switches the image to display the display. In addition to the switching display, the sensor such as sonar is automatically selected and the sensor is displayed. It is good also as a structure which strengthens a function and sensor intensity | strength.

本発明によれば、より一層安全な運転のための運転支援を行うことができる運転支援装置を提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the driving assistance apparatus which can perform the driving assistance for a safer driving | operation can be provided.

1…注視点検出部、2…タイプ判断部、3…支援部、10…運転支援装置。
DESCRIPTION OF SYMBOLS 1 ... Gaze point detection part, 2 ... Type judgment part, 3 ... Support part, 10 ... Driving assistance apparatus.

Claims (2)

運転者による自車両の運転を支援する運転支援装置において、
前記運転者が注視する注視点の変化度合いを検出する検出手段と、
前記検出手段により検出された前記変化度合いに基づいて、前記運転者の前記自車両周辺に対する視覚認識タイプは前記自車両周辺を直視して見回す空間認識タイプであるか否かを判断する判断手段と、
前記判断手段により判断された前記視覚認識タイプが前記空間認識タイプである場合に、当該空間認識タイプに応じた前記運転支援を行なう支援手段と、
を備える運転支援装置。
In the driving support device that supports the driving of the vehicle by the driver,
Detecting means for detecting a degree of change of a gazing point that the driver gazes;
Determining means for determining whether or not the driver's visual recognition type for the periphery of the own vehicle is a space recognition type for looking directly around the own vehicle based on the degree of change detected by the detecting means; ,
When the visual recognition type determined by the determination means is the space recognition type, support means for performing the driving support according to the space recognition type ;
A driving support apparatus comprising:
前記判断手段は、前記注視点の変化回数が閾値を超えた回数が規定回数を超えている場合に、前記視覚認識タイプは前記空間認識タイプであると判断し、
前記支援手段は、前記判断手段により判断された前記視覚認識タイプが前記空間認識タイプである場合に、前記自車両周辺が前記運転者の目線のカメラを用いて撮像された複数の画像を切り替えながら表示する
請求項1に記載の運転支援装置。
The determination means determines that the visual recognition type is the spatial recognition type when the number of times that the number of changes in the point of sight exceeds a threshold exceeds a specified number of times,
When the visual recognition type determined by the determination unit is the space recognition type, the support unit switches a plurality of images in which the periphery of the host vehicle is captured using the camera of the driver's eyes Display ,
The driving support device according to claim 1.
JP2010061147A 2010-03-17 2010-03-17 Driving assistance device Expired - Fee Related JP5581754B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010061147A JP5581754B2 (en) 2010-03-17 2010-03-17 Driving assistance device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010061147A JP5581754B2 (en) 2010-03-17 2010-03-17 Driving assistance device

Publications (2)

Publication Number Publication Date
JP2011194931A JP2011194931A (en) 2011-10-06
JP5581754B2 true JP5581754B2 (en) 2014-09-03

Family

ID=44873675

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010061147A Expired - Fee Related JP5581754B2 (en) 2010-03-17 2010-03-17 Driving assistance device

Country Status (1)

Country Link
JP (1) JP5581754B2 (en)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0761257A (en) * 1993-08-26 1995-03-07 Nissan Motor Co Ltd Display device for vehicle
JP3257310B2 (en) * 1994-12-22 2002-02-18 トヨタ自動車株式会社 Inattentive driving detection device
JP2001260776A (en) * 2000-03-22 2001-09-26 Mazda Motor Corp Vehicle obstacle warning device
JP2002367100A (en) * 2001-06-12 2002-12-20 Nissan Motor Co Ltd Device for detecting driver condition
JP4107006B2 (en) * 2002-08-08 2008-06-25 日産自動車株式会社 Information providing apparatus and information providing control program
WO2008029802A1 (en) * 2006-09-04 2008-03-13 Panasonic Corporation Travel information providing device

Also Published As

Publication number Publication date
JP2011194931A (en) 2011-10-06

Similar Documents

Publication Publication Date Title
JP4797588B2 (en) Vehicle periphery display device
US8854466B2 (en) Rearward view assistance apparatus displaying cropped vehicle rearward image
JP4264660B2 (en) IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND COMPUTER PROGRAM
JP5871006B2 (en) Image display device and image display method
KR101596751B1 (en) Method and apparatus for displaying blind spot customized by driver
JP5895941B2 (en) Image display device and image display method
US9131123B2 (en) Device for monitoring surroundings of vehicle and method for monitoring surroundings of vehicle
JP4222183B2 (en) Vehicle peripheral image display device
JP5421999B2 (en) Ambient monitoring device for vehicles
JP5092776B2 (en) Gaze direction detection device and gaze direction detection method
JPWO2017159510A1 (en) Parking assistance device, in-vehicle camera, vehicle, and parking assistance method
KR101400419B1 (en) The image display apparatus using room mirror of vehicle
JP2012227699A (en) Image display device and image display method
KR20140079947A (en) Video recording apparatus for a vehicle and Method of video recording for a vehicle
JP2018022958A (en) Vehicle display controller and vehicle monitor system
JP5201242B2 (en) Vehicle periphery display device
KR101585442B1 (en) Apparatus for assisting parking and method for assisting thereof
JP2010030361A (en) Driving state monitoring device
JP5581754B2 (en) Driving assistance device
JP6700502B2 (en) Vehicle display control device and display control method
JP2009190520A (en) Display device for vehicle
JP6234701B2 (en) Ambient monitoring device for vehicles
JP6908339B2 (en) Line-of-sight detection device, line-of-sight detection program and line-of-sight detection method
JP2020113066A (en) Video processing device, video processing method, and program
WO2013114871A1 (en) Driving assistance device and driving assistance method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121227

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131008

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131203

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140131

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140617

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140630

R151 Written notification of patent or utility model registration

Ref document number: 5581754

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees