JP2008062762A - Drive assist device and drive assist method - Google Patents

Drive assist device and drive assist method Download PDF

Info

Publication number
JP2008062762A
JP2008062762A JP2006241913A JP2006241913A JP2008062762A JP 2008062762 A JP2008062762 A JP 2008062762A JP 2006241913 A JP2006241913 A JP 2006241913A JP 2006241913 A JP2006241913 A JP 2006241913A JP 2008062762 A JP2008062762 A JP 2008062762A
Authority
JP
Japan
Prior art keywords
pedestrian
driver
vehicle
driving support
host vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2006241913A
Other languages
Japanese (ja)
Inventor
Hiroaki Sano
裕明 佐野
Yoshiko Okamoto
佳子 岡本
Katsumi Sakata
克己 阪田
Minoru Fujioka
稔 藤岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Ten Ltd
Original Assignee
Denso Ten Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Ten Ltd filed Critical Denso Ten Ltd
Priority to JP2006241913A priority Critical patent/JP2008062762A/en
Publication of JP2008062762A publication Critical patent/JP2008062762A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Instrument Panels (AREA)
  • Traffic Control Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To appropriately inform a driver of necessary information with a simple structure. <P>SOLUTION: An informed pedestrian selection part 40a selects only a pedestrian (a bicycle and a motorcycle can be included) out of objects around an own vehicle detected by an image recognition device 10 as an information objective to a driver. A projection control part 40c control projection by a windscreen projection mechanism 51 to display information calling driver's attention at a position of the pedestrian selected by the informed pedestrian selection part 40a. The projection position control part 40b corrects a projection position by estimating an eye point of the driver from an adjustment state of a driver's seat output by a seat adjustment mechanism 53 and identifying position of eyes of the driver by image recognition of image acquisition result of a cabin camera 52. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

この発明は、自車両の周辺に存在し、自車両の走行に影響を与える可能性のある物体、特に歩行者の存在を運転者に通知することで、運転操作を支援する運転支援装置および運転支援方法に関する。   The present invention relates to a driving support device and driving that support driving operation by notifying a driver of the presence of an object, particularly a pedestrian, that exists in the vicinity of the host vehicle and may affect the traveling of the host vehicle. It relates to support methods.

従来、走行予定経路など運転操作に必要な情報を提供することで運転操作を支援する運転支援技術が実用化されてきた。   Conventionally, driving support technology that supports driving operation by providing information necessary for driving operation such as a planned travel route has been put into practical use.

さらに近年、周辺の車両や障害物、歩行者への注意喚起を促すことで、安全な走行に寄与する運転支援技術が考案されている。   Furthermore, in recent years, driving support technologies have been devised that contribute to safe driving by prompting attention to surrounding vehicles, obstacles, and pedestrians.

このように運転支援技術が多様化することで、運転者に通知すべき情報量が増大しており、運転操作を阻害することなく必要な情報を提供するために通知方法への工夫が必要となっている。   As the driving support technology diversifies in this way, the amount of information to be notified to the driver has increased, and it is necessary to devise a notification method in order to provide necessary information without obstructing the driving operation. It has become.

そのため、例えば特許文献1は、フロントガラスの縁などに設置した注意喚起表示手段とフロントガラス全体に情報を重ね合わせて投影可能な投影表示手段とを協働させる技術を開示している。   Therefore, for example, Patent Document 1 discloses a technique in which a warning display unit installed on the edge of a windshield and a projection display unit capable of projecting information by superimposing information on the entire windshield cooperate.

また、特許文献2は、レーザ照射による走行予想軌跡の提示と危険対象物通知との組み合わせによって、運転者の視線を装置側で検知した危険対象物へと誘導する技術を開示している。   Patent Document 2 discloses a technique for guiding a driver's line of sight to a dangerous object detected on the apparatus side by a combination of presentation of a predicted traveling locus by laser irradiation and a dangerous object notification.

特開2003−291688号公報JP 2003-291688 A 特開2006−127055号公報JP 2006-127055 A

しかしながら、特許文献1の出力装置は、フロントガラス全体に情報を重ね合わせて投影可能な投影機構を有することが前提であり、装置構成が大型かつ複雑であった。さらに、運転者の視点の違いを考慮していないため、フロントガラスに投影する情報の位置は運転者ごとにずれて見える。そのため、運転者自身によって目視が必要な物体の位置に被さって表示され、運転者による視認性を低下させる可能性があった。   However, the output device of Patent Document 1 is premised on having a projection mechanism that can project information by superimposing information on the entire windshield, and the device configuration is large and complicated. Furthermore, since the difference in the viewpoint of the driver is not taken into consideration, the position of the information projected on the windshield appears to be shifted for each driver. For this reason, the driver himself / herself covers and displays the position of an object that needs to be visually observed, which may reduce the visibility of the driver.

また、特許文献2が開示する技術では、装置側が危険と判断した物体に常に視線が誘導されるので、運転者自身の視認が容易で、既に運転者がその存在を認識している物体に対しても継続的に視線誘導が行なわれる。その結果、他の危険物、真に通知が必要な、運転者による認識が困難な危険に対する認識を阻害する可能性があった。   Further, in the technology disclosed in Patent Document 2, since the line of sight is always guided to an object that the device side has determined to be dangerous, it is easy for the driver to visually recognize the object, and the driver has already recognized its presence. However, gaze guidance is continuously performed. As a result, there is a possibility of obstructing recognition of other dangerous goods, dangers that are really necessary to be notified and are difficult to recognize by the driver.

そこで、運転者にとって必要な情報を、運転者自身の視認や操作を阻害することなく適切に通知する技術の実現が重要な課題となっていた。   Therefore, it has been an important issue to realize a technique for appropriately notifying a driver of necessary information without obstructing the driver's own visual recognition and operation.

本発明は、上述した従来技術における問題点を解消し、課題を解決するためになされたものであり、簡易な構成で運転者に必要な情報を適切に通知する運転支援装置および運転支援方法を提供することを目的とする。   The present invention has been made to solve the above-described problems in the prior art and to solve the problems, and provides a driving support apparatus and a driving support method for appropriately notifying a driver of necessary information with a simple configuration. The purpose is to provide.

上述した課題を解決し、目的を達成するため、本発明に係る運転支援装置および運転支援方法は、自車両周辺に存在する、自車両の走行に影響を与える可能性のある物体を検知し、検知された物体のうち歩行者を運転者への通知対象として選択し、自車両の運転者から当該歩行者を視認した場合のフロントガラス上の位置に、運転者から視認可能に情報表示する。   In order to solve the above-described problems and achieve the object, the driving support device and the driving support method according to the present invention detect an object that exists in the vicinity of the host vehicle and may affect the traveling of the host vehicle, Among the detected objects, a pedestrian is selected as an object to be notified to the driver, and information is displayed in a position on the windshield when the pedestrian is viewed from the driver of the host vehicle so that the driver can visually recognize the information.

また、本発明に係る運転支援装置は、自車両周辺に存在する、自車両の走行に影響を与える可能性のある物体を検知し、検知された物体のうち歩行者を運転者への通知対象として選択し、自車両の上方から見た位置関係を表示手段に図形表示する。   Further, the driving support device according to the present invention detects an object that exists in the vicinity of the own vehicle and may affect the traveling of the own vehicle, and notifies the driver of the pedestrian among the detected objects. And the positional relationship viewed from above the host vehicle is graphically displayed on the display means.

また、本発明に係る運転支援装置は、光学的後方視認装置近傍に自車両の運転者に対して光信号を出力する光信号出力を設置し、自車両後方に前記自車両の走行に影響を与える物体を検知した場合に光信号の出力を実行する。   In addition, the driving support device according to the present invention has an optical signal output that outputs an optical signal to the driver of the host vehicle in the vicinity of the optical rear visual recognition device, and affects the traveling of the host vehicle behind the host vehicle. When a given object is detected, an optical signal is output.

本発明によれば運転支援装置および運転支援方法は、運転者による見落としが発生しやすく、安全走行の上で優先度の高い歩行者を選択し、運転者から見て歩行者に重なるように情報表示するので、運転者にとって必要な情報を適切に通知することができる運転支援装置および運転支援方法を得ることができるという効果を奏する。   According to the present invention, the driving assistance device and the driving assistance method are information that is likely to be overlooked by the driver, selects a pedestrian having a high priority on safe driving, and overlaps the pedestrian when viewed from the driver. Since it displays, there exists an effect that the driving assistance apparatus and the driving assistance method which can notify suitably information required for a driver | operator can be obtained.

また、本発明によれば運転支援装置は、運転者による見落としが発生しやすく、安全走行の上で優先度の高い歩行者を選択し、自車両の上方から見た位置関係を表示手段に図形表示するので、運転者にとって必要な情報を適切に通知することができる運転支援装置を得ることができるという効果を奏する。   In addition, according to the present invention, the driving support device is likely to be overlooked by the driver, selects a pedestrian having a high priority for safe driving, and displays the positional relationship viewed from above the own vehicle as a graphic. Since it displays, there exists an effect that the driving assistance apparatus which can notify appropriately the information required for a driver | operator can be obtained.

また、本発明によれば運転支援装置は、運転者に対して注意を促すべき物体が自車両後方に存在する場合に、光学的後方視認装置近傍から光信号を出力するので、運転者による後方確認を簡易かつ効果的に促すことのできる運転支援装置を得ることができるという効果を奏する。   Further, according to the present invention, the driving support device outputs an optical signal from the vicinity of the optical rear visual recognition device when an object to be alerted to the driver is present behind the host vehicle. There is an effect that it is possible to obtain a driving support device capable of prompting confirmation easily and effectively.

以下に添付図面を参照して、この発明に係る運転支援装置および運転支援方法の好適な実施例について詳細に説明する。   Exemplary embodiments of a driving support apparatus and a driving support method according to the present invention will be explained below in detail with reference to the accompanying drawings.

本実施例1にかかる構成では、画像認識装置によって自車両周辺の物体を検知し、検知した物体のうち歩行者(自転車や自動二輪を含んでもよい)のみを選択してフロントガラス上に投影する。   In the configuration according to the first embodiment, an object around the host vehicle is detected by the image recognition device, and only a pedestrian (which may include a bicycle or a motorcycle) is selected from the detected objects and projected onto the windshield. .

検知可能な物体としては歩行者の他に他車両や落下物などの障害物があるが、他車両は大きく、存在する位置もある程度限定され、自車両の運転者も他車両の動向に注意を払っているので、運転者自身での認識が比較的容易である。また、落下物などの障害物については、歩行者との衝突回避に比して安全走行上の優先度が低い。   Detectable objects include obstacles such as other vehicles and falling objects in addition to pedestrians, but other vehicles are large, their locations are limited to some extent, and the driver of the own vehicle pays attention to the trends of other vehicles. Because it pays, it is relatively easy for the driver to recognize. Also, obstacles such as falling objects have a lower priority for safe driving than avoiding collisions with pedestrians.

そこで、運転者による見落としが発生しやすく、安全走行の上で優先度の高い歩行者のみに限定して運転者の認識を促すことで、運転者にとって必要な情報を適切に通知することができる。   Therefore, oversight by the driver is likely to occur, and it is possible to appropriately notify necessary information for the driver by encouraging the driver's recognition only for pedestrians with high priority on safe driving. .

なお、衝突発生時に自車両における被害が大きくなるのは他車両との衝突であるが、衝突発生の可能性が高まったときには車両挙動への介入によって安全を確保するので、通常走行時に情報提供による運転支援を行なう際には、歩行者のみに着目することで必要十分な支援を行なうことができるのである。   In the event of a collision, the damage to the host vehicle will increase with the collision with other vehicles, but when the possibility of a collision increases, safety will be ensured by intervention in vehicle behavior. When driving assistance is performed, necessary and sufficient assistance can be provided by focusing only on pedestrians.

また、歩行者が複数存在する場合、全ての歩行者について通知を行なうと運転者自身による周辺確認の妨げとなるので、最も危険度の高い歩行者一人について、もしくは危険度の高い2〜3人程度の歩行者について通知することが好ましい。   In addition, if there are multiple pedestrians, notification of all pedestrians will prevent the driver from checking the surroundings. Therefore, one pedestrian with the highest degree of risk, or two or three people with the highest degree of risk. It is preferable to notify about the degree of pedestrians.

このように、通知すべき対象を厳選した上で、自車両の運転者からその歩行者を視認した場合のフロントガラス上の位置に合わせて運転者の注意を促す表示を投影することで、運転者に対して適切に情報提供を行なうことができる。   In this way, after carefully selecting the target to be notified, the display that prompts the driver's attention according to the position on the windshield when the pedestrian is visually recognized from the driver of the own vehicle is projected. Information can be appropriately provided to the person.

本実施例1における運転支援装置を搭載した車両の概要構成を図1に示す。同図に示すように、車両において運転支援装置40は、画像認識装置10、ブレーキ41、エンジン制御装置(EFI)42、ディスプレイ43、スピーカ44、フロントガラス投影機構51、車室カメラ52および座席調節機構53と接続している。さらに、画像認識装置10は、ナビゲーション装置30、カメラ31、レーダ33と接続している。   FIG. 1 shows a schematic configuration of a vehicle equipped with the driving support apparatus according to the first embodiment. As shown in the figure, in the vehicle, the driving support device 40 includes an image recognition device 10, a brake 41, an engine control device (EFI) 42, a display 43, a speaker 44, a windshield projection mechanism 51, a vehicle interior camera 52, and a seat adjustment. It is connected to the mechanism 53. Further, the image recognition device 10 is connected to the navigation device 30, the camera 31, and the radar 33.

ナビゲーション装置30は、GPS(Global Positioning System)人工衛星と通信して特定した自車両の位置と、予め記憶した地図データ30aとを利用して走行経路の設定および誘導を行なう車載装置である。また、ナビゲーション装置30は、画像認識装置10に対して自車両の位置情報や周辺の地図情報、走行予定経路などを提供する。   The navigation device 30 is an in-vehicle device that sets and guides a travel route using the position of the host vehicle specified by communicating with a GPS (Global Positioning System) artificial satellite and map data 30a stored in advance. In addition, the navigation device 30 provides the image recognition device 10 with location information of the host vehicle, surrounding map information, a planned travel route, and the like.

カメラ31は、自車両周辺を撮影し、撮影結果を画像認識装置10に入力する。レーダ33は、自車両の周辺の物体検知、および物体までの距離測定を行なって画像認識装置10に入力する。   The camera 31 captures the vicinity of the host vehicle and inputs the captured result to the image recognition apparatus 10. The radar 33 detects an object around the own vehicle and measures a distance to the object and inputs the detected object to the image recognition apparatus 10.

画像認識装置10は、その内部に前処理部11、車両認識部16、白線認識部17、歩行者認識部18および衝突判定部20を有する。ここで、車両認識部16、白線認識部17、歩行者認識部18および衝突判定部20は、例えば単一のマイコン10a(CPU、ROM、RAMの組み合わせからなる演算処理ユニット)などによって実現することが好適である。   The image recognition apparatus 10 includes a preprocessing unit 11, a vehicle recognition unit 16, a white line recognition unit 17, a pedestrian recognition unit 18, and a collision determination unit 20 therein. Here, the vehicle recognition unit 16, the white line recognition unit 17, the pedestrian recognition unit 18, and the collision determination unit 20 are realized by, for example, a single microcomputer 10a (an arithmetic processing unit including a combination of a CPU, a ROM, and a RAM). Is preferred.

前処理部11は、カメラ31が撮影した画像に対してフィルタリングやエッジ検出、輪郭抽出などの処理を施した後、車両認識部16、白線認識部17および歩行者認識部18に出力する。   The preprocessing unit 11 performs processing such as filtering, edge detection, and contour extraction on the image captured by the camera 31, and then outputs the image to the vehicle recognition unit 16, the white line recognition unit 17, and the pedestrian recognition unit 18.

車両認識部16は、前処理部11が出力した画像に対してパターンマッチングなどを施して車両を認識し、認識結果を衝突判定部20に出力する。同様に、白線認識部17は、前処理部11が出力した画像に対してパターンマッチングなどを施して白線を認識し、認識結果を衝突判定部20に出力する。そして歩行者認識部18は、前処理部11が出力した画像(入力画像)から歩行者像を認識し、衝突判定部20に出力する。   The vehicle recognition unit 16 performs pattern matching on the image output from the preprocessing unit 11 to recognize the vehicle, and outputs the recognition result to the collision determination unit 20. Similarly, the white line recognition unit 17 recognizes a white line by performing pattern matching or the like on the image output from the preprocessing unit 11, and outputs the recognition result to the collision determination unit 20. The pedestrian recognition unit 18 recognizes a pedestrian image from the image (input image) output by the preprocessing unit 11 and outputs the pedestrian image to the collision determination unit 20.

衝突判定部20は、車両認識部16、白線認識部17、歩行者認識部18による認識結果、レーダ33による検知結果およびナビゲーション装置30が出力する位置情報を用いて、歩行者や他車両と自車両との衝突危険度を判定し、運転支援装置40に出力する。   The collision determination unit 20 uses the recognition results obtained by the vehicle recognition unit 16, the white line recognition unit 17, the pedestrian recognition unit 18, the detection result obtained by the radar 33, and the position information output from the navigation device 30, and automatically detects the collision with the pedestrian and other vehicles. The risk of collision with the vehicle is determined and output to the driving support device 40.

車室カメラ52は、自車両の車室内、特に運転者を撮影し、撮影結果を運転支援装置40に出力する。また、座席調節機構53は、運転席の前後方向の位置や上下方向の座面の高さ、運転者の頭部を支持するヘッドレストの位置を調節する機構であり、座席の調節状態を運転支援装置40に出力する。   The vehicle interior camera 52 photographs the interior of the host vehicle, particularly the driver, and outputs the photographed result to the driving support device 40. The seat adjustment mechanism 53 is a mechanism that adjusts the position of the driver's seat in the front-rear direction, the height of the seat surface in the vertical direction, and the position of the headrest that supports the driver's head. Output to the device 40.

運転支援装置40は、画像認識装置10からの出力、車室カメラ52の撮影結果に対する画像認識、座席調節機構53が出力する座席調節状態に基づいて、運転者への情報提供や車両挙動への介入を行なう。   The driving support device 40 provides information to the driver and applies to the vehicle behavior based on the output from the image recognition device 10, the image recognition on the photographing result of the passenger compartment camera 52, and the seat adjustment state output by the seat adjustment mechanism 53. Intervene.

具体的には、衝突判定部20による判定の結果、自車両と他の物体(他車両、歩行者、障害物)との衝突が発生する可能性が高い場合には、運転支援装置40はブレーキ41やエンジン制御装置(EFI)42による車両の動作制御に介入し、衝突の回避や被害の軽減を行なう自動アシスト処理を実行する。   Specifically, as a result of the determination by the collision determination unit 20, if there is a high possibility that a collision between the host vehicle and another object (another vehicle, a pedestrian, an obstacle) will occur, the driving support device 40 performs braking. 41 and an engine control unit (EFI) 42 are used to intervene in the operation control of the vehicle, and an automatic assist process for avoiding a collision and reducing damage is executed.

運転者への情報提供については、運転支援装置40は、ディスプレイ43、スピーカ44およびフロントガラス投影機構51を使用する。ディスプレイ43はユーザ、すなわち自車両乗員に対して表示による通知を行なう出力手段であり、スピーカ44は音声による通知を行なう出力手段である。ディスプレイ43およびスピーカ44は、運転支援装置40からの制御を受けて出力を行なう他、ナビゲーション装置30や図示しない車載オーディオ装置など各種車載装置で共用することができる。   For providing information to the driver, the driving support device 40 uses the display 43, the speaker 44, and the windshield projection mechanism 51. The display 43 is an output means for notifying the user, that is, the vehicle occupant by display, and the speaker 44 is an output means for notifying by voice. The display 43 and the speaker 44 can be shared by various in-vehicle devices such as the navigation device 30 and an in-vehicle audio device (not shown) in addition to performing output under the control of the driving support device 40.

フロントガラス投影機構51は、所定形状の光線をフロントガラスに投射する投射機構であり、例えばレーザやスポット光源によって実現する。また、光線の投射方向はフロントガラスの任意の位置を照射可能とすることが好ましい。   The windshield projection mechanism 51 is a projection mechanism that projects light of a predetermined shape onto the windshield, and is realized by, for example, a laser or a spot light source. Moreover, it is preferable that the projection direction of a light beam can irradiate an arbitrary position on the windshield.

さらに、運転者に対して注意を促す歩行者の数を一人とするならば、出射機構は一つでよいが、同時に複数の歩行者について注意を促す場合には、その最大数に合わせて出射機構を設ける必要がある。   Furthermore, if the number of pedestrians who call attention to the driver is one, only one emission mechanism may be used. It is necessary to provide a mechanism.

このフロントガラス投影機構51による通知を行なうため、運転支援装置40は、その内部に通知歩行者選択部40a、投射位置補正部40bおよび投射制御部40cを有する。   In order to perform notification by the windshield projection mechanism 51, the driving support device 40 includes a notification pedestrian selection unit 40a, a projection position correction unit 40b, and a projection control unit 40c.

通知歩行者選択部40aは、画像認識装置10によって認識された物体のうち歩行者を選択し、さらに歩行者が複数認識されている場合には衝突判定部20によって判定された衝突危険度が最も高い歩行者を運転者に対して通知すべき対象として選択する。   The notification pedestrian selection unit 40a selects a pedestrian among the objects recognized by the image recognition device 10, and when a plurality of pedestrians are recognized, the collision risk determined by the collision determination unit 20 is the highest. A high pedestrian is selected as an object to be notified to the driver.

投射制御部40cは、通知歩行者選択部40aによって選択された歩行者の位置に運転者に注意を促す情報表示を行なうようフロントガラス投影機構51による投射を制御する処理部である。   The projection control unit 40c is a processing unit that controls the projection by the windshield projection mechanism 51 so as to perform information display that prompts the driver to pay attention to the position of the pedestrian selected by the notification pedestrian selection unit 40a.

ここで、フロントガラス上に投射した表示が運転者から見て歩行者の位置と重なるように制御するためには、運転者の視点の位置に合わせて投射位置を補正する必要がある。そこで投射位置補正部40bは、座席調節機構53が出力する運転席の調節状態からの運転者視点の推定や、車室カメラ52の撮影結果に対する画像認識による運転者の目の位置の特定を行なって投射位置を補正する。   Here, in order to control the display projected on the windshield so as to overlap the position of the pedestrian as viewed from the driver, it is necessary to correct the projection position according to the position of the driver's viewpoint. Therefore, the projection position correction unit 40b estimates the driver's viewpoint from the driver's seat adjustment state output by the seat adjustment mechanism 53, and specifies the position of the driver's eyes by recognizing the image captured by the passenger compartment camera 52. Correct the projection position.

つづいて、フロントガラス投影機構51の設置と動作制御について説明する。図2に示した設置例では、フロントガラス投影機構51をフロントガラスの下方に設置している。この構成では、投射方向は車体の前後方向および幅方向に制御することで、フロントガラス上の任意の位置を照射することができる。   Subsequently, installation and operation control of the windshield projection mechanism 51 will be described. In the installation example shown in FIG. 2, the windshield projection mechanism 51 is installed below the windshield. In this configuration, by controlling the projection direction in the front-rear direction and the width direction of the vehicle body, it is possible to irradiate an arbitrary position on the windshield.

そして投射した表示が運転者から見て歩行者の位置と重なるように制御するため、図3に示すように、運転者の視点位置の差D1を考慮して表示位置D2を制御する。   In order to control the projected display so that it overlaps the position of the pedestrian as viewed from the driver, the display position D2 is controlled in consideration of the difference D1 in the viewpoint position of the driver as shown in FIG.

また、図4に示すように、フロントガラス投影機構51を運転席のヘッドレストに設置してもよい。この場合、運転者の視点位置と投射の光源位置とが近くなるため、必要な補正量を小さくすることができる。   Moreover, as shown in FIG. 4, you may install the windshield projection mechanism 51 in the headrest of a driver's seat. In this case, since the viewpoint position of the driver and the light source position of the projection are close, the necessary correction amount can be reduced.

なお、ヘッドレストにフロントガラス投影機構51を設置することで運転者の視点位置と投射の光源位置とを略同一とみなし、投射位置補正部40b、および補正に使用する構成である車室カメラ52、座席調節機構53との接続を省略した簡易な構成で本発明を実施してもよい。   It should be noted that by installing the windshield projection mechanism 51 on the headrest, the viewpoint position of the driver and the light source position of the projection are regarded as substantially the same, the projection position correction unit 40b, and the vehicle interior camera 52 that is configured for correction, You may implement this invention by the simple structure which abbreviate | omitted the connection with the seat adjustment mechanism 53. FIG.

フロントガラス投影機構51から投影する光線の形状は、例えば図5に示すように丸型の投影像M1を通知対象である歩行者に重ね合わせて(もしくは囲んで)もよいし、図6に示すように横方向のライン型投影像M2と縦方向のライン型投影像M3との組み合わせによって表示してもよい。   As for the shape of the light beam projected from the windshield projection mechanism 51, for example, as shown in FIG. 5, a round projection image M1 may be superimposed (or enclosed) on a pedestrian to be notified, or as shown in FIG. As described above, the display may be performed by a combination of the horizontal line-type projection image M2 and the vertical line-type projection image M3.

さらに、図7に示すように矢印型の投影像M4で歩行者位置を指し示すように投影するなど、任意の形状を用いることが可能である。   Furthermore, as shown in FIG. 7, it is possible to use an arbitrary shape such as projecting so as to indicate the pedestrian position with the arrow-shaped projection image M4.

また、表示にあたっては、その形状や大きさ、色、濃度、点滅の有無や点滅周期などに変化を持たせ、通知する情報量を増やすこともできる。例えば、危険度が比較的高い場合は赤色、比較的低い場合は黄色、などのように色の変化で危険度を通知してもよいし、距離によって形状を変化させ、図6に示すように縦横のラインで通知する場合に自車両からの距離が近い歩行者ほど横方向のライン表示M2の幅を太くする、などとすることもできる。   In addition, the amount of information to be notified can be increased by changing the shape, size, color, density, presence / absence of blinking, blinking cycle, and the like. For example, the degree of danger may be notified by a color change such as red when the degree of danger is relatively high, yellow when the degree of danger is relatively low, or the shape is changed depending on the distance, and as shown in FIG. In the case of notification using vertical and horizontal lines, the width of the horizontal line display M2 may be increased as the pedestrian is closer to the vehicle.

つづいて、画像認識装置10および運転支援装置40の処理動について説明する。まず、画像認識装置10の処理動作を図8に示す。同図に示す処理フローは、電源スイッチ(イグニッションスイッチなどと連動していてもよい)がオンされ、カメラ31が画像を撮影した場合に開始され、画像フレームの処理ごと(例えば数msecごと)に繰り返し実行される処理である。   Next, processing operations of the image recognition device 10 and the driving support device 40 will be described. First, the processing operation of the image recognition apparatus 10 is shown in FIG. The processing flow shown in the figure is started when a power switch (which may be linked to an ignition switch or the like) is turned on and the camera 31 captures an image, and for each processing of an image frame (for example, every several msec). This process is repeatedly executed.

まず、画像認識装置10は、カメラ31が撮影した画像に対して前処理部11によるフィルタリング、エッジ検出、輪郭抽出などの処理を施す(ステップS101)。つぎに、白線認識部16による白線認識処理(ステップS102)および車両認識部16による車両認識処理(ステップS103)を実行する。   First, the image recognition apparatus 10 performs processing such as filtering, edge detection, and contour extraction by the preprocessing unit 11 on an image captured by the camera 31 (step S101). Next, the white line recognition process (step S102) by the white line recognition part 16 and the vehicle recognition process (step S103) by the vehicle recognition part 16 are performed.

その後、歩行者認識部18が歩行者認識を実行し(ステップS104)、衝突判定部20が衝突判定を行なって(ステップS105)、判定結果を運転支援装置40に出力し(ステップS106)、処理を終了する。   Thereafter, the pedestrian recognition unit 18 performs pedestrian recognition (step S104), the collision determination unit 20 performs collision determination (step S105), and outputs the determination result to the driving support device 40 (step S106). Exit.

運転支援装置40は、図9に示すように常に画像認識装置10の出力を監視している。そして、画像認識装置10によって物体が検知されたならば(ステップS201,Yes)、まず、検知された物体が車両であるか否かを判定する(ステップS202)。   The driving support device 40 always monitors the output of the image recognition device 10 as shown in FIG. If an object is detected by the image recognition device 10 (step S201, Yes), first, it is determined whether or not the detected object is a vehicle (step S202).

その結果、検知された物体が車両であれば(ステップS202,Yes)、その車両と自車両とが衝突する可能性を判定し(ステップS207)、衝突する可能性があれば(ステップS207,Yes)車両の挙動制御に介入する自動アシストを実行する(ステップS208)。   As a result, if the detected object is a vehicle (step S202, Yes), the possibility of collision between the vehicle and the host vehicle is determined (step S207), and if there is a possibility of collision (step S207, Yes). ) Automatic assist is executed to intervene in the behavior control of the vehicle (step S208).

一方、検知された物体が車両で無い場合(ステップS202,No)、つぎに運転支援装置40は、検知された物体が歩行者であるか否かを判定する(ステップS203)。その結果、歩行者が検知されていたならば(ステップS203,Yes)、検知された歩行者のうち最も危険度の高い歩行者を選択し(ステップS204)、選択した歩行者をフロントガラス上に表示する(ステップS205)。   On the other hand, when the detected object is not a vehicle (step S202, No), the driving assistance apparatus 40 determines whether the detected object is a pedestrian (step S203). As a result, if a pedestrian has been detected (step S203, Yes), the pedestrian with the highest degree of risk is selected from the detected pedestrians (step S204), and the selected pedestrian is placed on the windshield. It is displayed (step S205).

その後、危険が解消したならば(ステップS206,Yes)、そのまま処理を終了し、危険が解消しなければ(ステップS206,No)、車両の挙動制御に介入して自動アシスト処理を実行する(ステップS208)。   Thereafter, if the danger is eliminated (Yes at Step S206), the process is terminated as it is. If the danger is not eliminated (No at Step S206), the automatic assist process is executed by intervening in the behavior control of the vehicle (Step S206). S208).

また、検知された物体が車両でも歩行者でも無い場合(ステップS203,No)には、運転支援装置40はその物体との衝突の可能性を判定する(ステップS209)。そして、衝突の可能性があれば(ステップS209,Yes)、さらに衝突した場合の自車両への影響(ダメージ)を考慮し、影響が軽微であれば(ステップS210,Yes)ディスプレイ43による表示(ステップS211)を、影響が軽微でなければ(ステップS210,No)自動アシスト処理(ステップS208)を実行する。   If the detected object is neither a vehicle nor a pedestrian (No at Step S203), the driving support device 40 determines the possibility of a collision with the object (Step S209). If there is a possibility of collision (step S209, Yes), the influence (damage) on the host vehicle in the case of further collision is taken into consideration, and if the influence is slight (step S210, Yes), the display on the display 43 ( In step S211, if the influence is not slight (No in step S210), an automatic assist process (step S208) is executed.

上述してきたように、本実施例1にかかる運転支援装置では、通知歩行者選択部40aが画像認識装置10によって検知された物体のうち歩行者のみを通知対象として選択し、投射制御部40cがフロントガラス投影機構51を制御して運転者に注意を促す情報表示を行なう。   As described above, in the driving support device according to the first embodiment, the notification pedestrian selection unit 40a selects only a pedestrian among the objects detected by the image recognition device 10, and the projection control unit 40c The windshield projection mechanism 51 is controlled to display information that alerts the driver.

そのため、運転者による見落としが発生しやすく、安全走行の上で優先度の高い歩行者のみに限定して運転者の認識を促し、運転者にとって必要な情報を適切に通知することができる。   Therefore, an oversight by the driver is likely to occur, and the driver's recognition can be promoted only for pedestrians with high priority in safe driving, and information necessary for the driver can be appropriately notified.

また、投射位置補正部40bが車室カメラ52や座席調節機構53の出力を用い、運転者の視点位置に合わせてフロントガラス上の情報投影位置を補正するので、運転者から見て通知対象である歩行者に重なるように精度良く表示を行なうことが可能である。   Further, since the projection position correction unit 40b corrects the information projection position on the windshield according to the driver's viewpoint position using the output of the passenger compartment camera 52 and the seat adjustment mechanism 53, the projection position correction unit 40b can be notified from the driver. It is possible to display accurately so as to overlap a certain pedestrian.

本実施例2にかかる構成では、画像認識装置が検知した物体のうち歩行者を通知対象として選択したのち、ディスプレイ上に自車両と歩行者との位置関係を表示する。   In the configuration according to the second embodiment, the pedestrian is selected as the notification target among the objects detected by the image recognition device, and then the positional relationship between the host vehicle and the pedestrian is displayed on the display.

本実施例2における運転支援装置を搭載した車両の概要構成を図10に示す。同図に示すように、この構成では運転支援装置40は、画像認識装置10、ブレーキ41、エンジン制御装置(EFI)42、ディスプレイ43、スピーカ44、シフトレバー61およびウインカーランプ62と接続する。また、運転支援装置40はその内部に通知歩行者選択部40a、操作検知部40d、歩行者表示制御部40eを有する。   FIG. 10 shows a schematic configuration of a vehicle equipped with the driving support apparatus in the second embodiment. As shown in the figure, in this configuration, the driving support device 40 is connected to the image recognition device 10, the brake 41, the engine control device (EFI) 42, the display 43, the speaker 44, the shift lever 61, and the winker lamp 62. Moreover, the driving assistance apparatus 40 has the notification pedestrian selection part 40a, the operation detection part 40d, and the pedestrian display control part 40e in the inside.

その他の構成および動作は、実施例1に示した運転支援装置と同様であるので、同一の構成要素には同一の符号を付して説明を省略する。   Since other configurations and operations are the same as those of the driving support apparatus shown in the first embodiment, the same components are denoted by the same reference numerals, and description thereof is omitted.

シフトレバー61は、運転者が変速機構の操作に使用する操作手段であり、その操作状態を運転支援装置40に出力する。また、ウインカーランプ62は、主に自車両の針路変更を周辺車両に通知する方向指示灯であり、その動作状態を運転支援装置40に出力する。   The shift lever 61 is an operating means used by the driver for operating the speed change mechanism, and outputs the operation state to the driving support device 40. The blinker lamp 62 is a direction indicating lamp that mainly notifies the surrounding vehicle of the course change of the host vehicle, and outputs the operation state to the driving support device 40.

運転支援装置40内部の歩行者表示制御部40eは、通知歩行者選択部40aによって選択された歩行者と自車両との位置関係をディスプレイ43に表示する処理を行なう。   The pedestrian display control unit 40e inside the driving support device 40 performs a process of displaying the positional relationship between the pedestrian selected by the notification pedestrian selection unit 40a and the host vehicle on the display 43.

ここで、歩行者の通知が特に重要となるのは、自車両が進路変更(右左折,車線変更など)や後進を行なう場合である(自車両が直進時にその進路上に衝突する可能性のある歩行者が居る状況は稀であり、またかかる状況の発生時には通知よりも自動アシストの実行が好適である)。   Here, pedestrian notification is particularly important when the host vehicle changes its course (turns left or right, changes lanes, etc.) or moves backward (the host vehicle may collide with its route when traveling straight ahead). The situation where there is a pedestrian is rare, and when such a situation occurs, it is preferable to execute automatic assist rather than notification).

一方で、ディスプレイ43はナビゲーション装置30や他の車載装置と共用するので、常に自車両周辺の歩行者について表示すると他の装置による表示出力を阻害することとなる。   On the other hand, since the display 43 is shared with the navigation device 30 and other in-vehicle devices, if the pedestrians around the vehicle are always displayed, the display output by the other devices is hindered.

そこで、操作検知40dは、シフトレバー61やウインカーランプ62の状態から運転者による運転操作状態を検知し、シフトレバー61がバックに入った場合(すなわち変速機構が後進モードに操作された場合)やウインカーランプ62が点滅を開始した場合に歩行者と自車両との位置関係をディスプレイ43に表示させる。   Therefore, the operation detection 40d detects the driving operation state by the driver from the state of the shift lever 61 and the blinker lamp 62, and when the shift lever 61 enters the back (that is, when the speed change mechanism is operated in the reverse mode), When the blinker lamp 62 starts blinking, the display 43 displays the positional relationship between the pedestrian and the host vehicle.

ディスプレイ43への表示の具体例を図11および図12に示す。図11に示した例では、ディスプレイ43に画像G1を表示している。そして画像G1内では中央部に自車両を示す図形を配し、通知すべき歩行者が存在する方向に危険通知表示M11を配置することで、自車両の上方から見た位置関係を図形表示している。   Specific examples of display on the display 43 are shown in FIGS. In the example shown in FIG. 11, the image G <b> 1 is displayed on the display 43. In the image G1, a figure indicating the own vehicle is arranged in the center, and the danger notice display M11 is arranged in the direction in which the pedestrian to be notified exists, so that the positional relationship viewed from above the own vehicle is displayed in a graphic form. ing.

この画像G1内において危険通知表示M11までの距離は、自車両から歩行者までの距離に対応させてもよい。また、危険通知表示M11の大きさや形状、色、点滅の有無や点滅周期などを変化させることで危険度などを通知することもできる。   The distance to the danger notification display M11 in this image G1 may correspond to the distance from the host vehicle to the pedestrian. Further, the degree of danger can be notified by changing the size, shape, color, presence / absence of blinking, blinking cycle, etc. of the danger notice display M11.

同様に図12に示した例では、ディスプレイ43に画像G2を表示している。そして画像G2内では中央部に自車両を示す図形を配し、自車両周辺を8つの方向に分割して通知すべき歩行者が存在する方向の表示態様を変化させている。同図では、運転者から左前ピラーの死角に対応する方向M12の表示を他の方向の表示に対して異ならせることで、歩行者の存在を通知している。   Similarly, in the example illustrated in FIG. 12, the image G <b> 2 is displayed on the display 43. And in the image G2, the figure which shows the own vehicle is distribute | arranged to the center part, the display mode of the direction where the pedestrian who should be notified is divided | segmented into the eight directions is changed. In the figure, the presence of a pedestrian is notified by making the display of the direction M12 corresponding to the blind spot of the left front pillar different from the display of the other direction from the driver.

図12に示した表示形態においても表示の大きさや形状、色、点滅の有無や点滅周期などを変化させることで運転者に通知する情報量を増やすことができる。また、図11や図12に示した表示例では、単一の歩行者について運転者に通知する場合について説明したが、複数の歩行者について通知を行なう際にも同様の表示を用いることができることは言うまでもない。   Also in the display mode shown in FIG. 12, the amount of information notified to the driver can be increased by changing the display size, shape, color, presence / absence of blinking, blinking cycle, and the like. Further, in the display examples shown in FIG. 11 and FIG. 12, the case of notifying the driver about a single pedestrian has been described, but the same display can be used when notifying about a plurality of pedestrians. Needless to say.

さらに、表示出力に合わせてスピーカ44による音声出力さらに用いて運転者の注意を促してもよい。また、音声出力を行なう場合には方向感制御を行なって歩行者が存在する方向から注意を促す音声が聞こえるように感じさせることで、運転者に歩行者を認識させる効果をさらに高めることができる。   Furthermore, the driver's attention may be urged by further using a sound output from the speaker 44 in accordance with the display output. In addition, when voice output is performed, the effect of causing the driver to recognize the pedestrian can be further enhanced by performing direction sense control so that a voice prompting attention is heard from the direction in which the pedestrian is present. .

表示出力については、ディスプレイ43の他に、サブディスプレイを設置することともしてもよい。この場合、図13に示すように、運転者からの視認が容易な位置にサブディスプレイ63を設置することが望ましい。   For display output, a sub-display may be installed in addition to the display 43. In this case, as shown in FIG. 13, it is desirable to install the sub-display 63 at a position where it can be easily seen by the driver.

サブディスプレイ63を運転支援装置40専用の装置としてもよいが、他の装置と共用する場合であっても、使用可能な表示手段が増加することで他の装置との表示出力の競合を軽減する効果が得られる。   The sub display 63 may be a device dedicated to the driving support device 40, but even when the sub display 63 is shared with other devices, the number of display means that can be used is increased to reduce display output contention with other devices. An effect is obtained.

上述してきたように、本実施例2にかかる運転支援装置では、通知歩行者選択部40aが画像認識装置10によって検知された物体のうち歩行者のみを通知対象として選択し、歩行者表示制御部40eがディスプレイ43を制御して運転者に注意を促す情報表示を行なう。   As described above, in the driving support device according to the second embodiment, the notification pedestrian selection unit 40a selects only the pedestrian among the objects detected by the image recognition device 10 as the notification target, and the pedestrian display control unit 40e controls the display 43 to display information to alert the driver.

そのため、運転者による見落としが発生しやすく、安全走行の上で優先度の高い歩行者のみに限定して運転者の認識を促し、運転者にとって必要な情報を適切に通知することができる。   Therefore, an oversight by the driver is likely to occur, and the driver's recognition can be promoted only for pedestrians with high priority in safe driving, and information necessary for the driver can be appropriately notified.

また、操作検知部40dがシフトレバー61やウインカーランプ62から運転操作状態を検知し、進路変更時や後進時にディスプレイ43を用いた歩行者の通知を行なうことで、他の装置との表示出力の競合を軽減することが可能である。   In addition, the operation detection unit 40d detects the driving operation state from the shift lever 61 and the blinker lamp 62, and notifies the pedestrian using the display 43 when changing the course or when moving backward, thereby enabling display output with other devices. It is possible to reduce contention.

本実施例3にかかる構成では、光学的後方視認装置、すなわちバックミラーやサイドミラー近傍に光信号出力手段を設け、自車両の運転者に対して光信号を出力することで、運転者にバックミラーやサイドミラーを用いた後方確認を促す。   In the configuration according to the third embodiment, an optical signal output means is provided in the vicinity of the optical rear visual recognition device, that is, the rearview mirror or the side mirror, and the optical signal is output to the driver of the host vehicle, so that the driver can Encourage confirmation of back using mirrors and side mirrors.

本実施例3における運転支援装置を搭載した車両の概要構成を図14に示す。同図に示すように、この構成では運転支援装置40は、画像認識装置10、ブレーキ41、エンジン制御装置(EFI)42、ディスプレイ43、スピーカ44、バックミラーランプ71およびサイドミラーランプ72と接続する。また、運転支援装置40はその内部に通知歩行者選択部40aおよびミラー表示制御部40fを有する。   FIG. 14 shows a schematic configuration of a vehicle equipped with the driving support device in the third embodiment. As shown in the figure, in this configuration, the driving support device 40 is connected to the image recognition device 10, the brake 41, the engine control device (EFI) 42, the display 43, the speaker 44, the rearview mirror lamp 71, and the side mirror lamp 72. . Moreover, the driving assistance apparatus 40 has the notification pedestrian selection part 40a and the mirror display control part 40f in the inside.

その他の構成および動作は、実施例1に示した運転支援装置と同様であるので、同一の構成要素には同一の符号を付して説明を省略する。   Since other configurations and operations are the same as those of the driving support apparatus shown in the first embodiment, the same components are denoted by the same reference numerals, and description thereof is omitted.

バックミラーランプ71は、バックミラー近傍に設置されたインジケータであり、サイドミラーランプ72は、サイドミラー近傍に設置されたインジケータである。例えば、図15に示した設置例では、バックミラーランプ71はバックミラーの縁に、サイドミラーランプ72は左右のサイドミラーの縁にそれぞれ設置している。   The rearview mirror lamp 71 is an indicator installed near the rearview mirror, and the side mirror lamp 72 is an indicator installed near the rearview mirror. For example, in the installation example shown in FIG. 15, the rearview mirror lamp 71 is installed on the edge of the rearview mirror, and the side mirror lamp 72 is installed on the edges of the left and right sidemirrors.

これらのインジケータは、自車両の運転者に対して光信号を出力するものであるので、周辺の他車両からは点灯(点滅)状態が見えないことが好ましい。また、図15に示した設置例はあくまで一例であり、例えばサイドミラーランプ72をピラーに設置するようにしてもよい。すなわち、運転者がバックミラーランプ71、サイドミラーランプ72の方向を見た場合に、その近くにパックミラー、サイドミラーが見えればよい。   Since these indicators output optical signals to the driver of the host vehicle, it is preferable that the lighting (flashing) state is not visible from other vehicles in the vicinity. Further, the installation example shown in FIG. 15 is merely an example, and for example, the side mirror lamp 72 may be installed on the pillar. That is, when the driver looks in the direction of the rearview mirror lamp 71 and the side mirror lamp 72, the pack mirror and the side mirror need only be visible in the vicinity.

運転支援装置40内部のミラー表示制御部40fは、通知歩行者選択部40aによって歩行者が検知された場合に、その歩行者と自車両との位置関係に基づいてパックミラーランプ71やサイドミラーランプ72を点灯(もしくは点滅)することで、運転者による後方確認を促す。   When the pedestrian is detected by the notification pedestrian selection unit 40a, the mirror display control unit 40f inside the driving support device 40 is based on the positional relationship between the pedestrian and the host vehicle, and the pack mirror lamp 71 and the side mirror lamp. Illuminating (or blinking) 72 prompts the driver to check backwards.

具体的には、自車両の右後方に歩行者が存在する場合には運転者に右サイドミラーを確認させるべく右サイドミラー近傍に設けたサイドミラーランプ72を点滅させ、自車両の左後方に歩行者が存在する場合には運転者に左サイドミラーを確認させるべく左サイドミラー近傍に設けたサイドミラーランプ72を点滅さる。同様に、運転者にバックミラーを確認させる場合にはバックミラーランプ71を点滅させる。   Specifically, when there is a pedestrian on the right rear side of the host vehicle, the side mirror lamp 72 provided near the right side mirror is blinked so that the driver can check the right side mirror. When there is a pedestrian, the side mirror lamp 72 provided in the vicinity of the left side mirror is blinked so that the driver can confirm the left side mirror. Similarly, in order to make the driver check the rearview mirror, the rearview mirror lamp 71 is blinked.

上述してきたように、本実施例3にかかる運転支援装置では、光学的後方視認装置の近傍に光信号出力手段を設け、自車両後方に歩行者を検知した場合に自車両の運転者に対して光信号を出力することで、運転者にバックミラーやサイドミラーを用いた後方確認を促すことができる。   As described above, in the driving assistance device according to the third embodiment, the optical signal output means is provided in the vicinity of the optical rear visual recognition device, and when a pedestrian is detected behind the own vehicle, the driver of the own vehicle is notified. By outputting the optical signal, the driver can be urged to confirm the rear using a rearview mirror or side mirror.

なお、ここでは歩行者を例に説明を行なったが、例えば後続車両などであっても運転者に後方確認を促す場合には本構成を適用可能である。   Here, the description has been given by taking a pedestrian as an example. However, for example, this configuration can be applied to prompt the driver to confirm the back even if the vehicle is a subsequent vehicle.

以上のように、本発明にかかる運転支援装置および運転支援方法は、運転者に対する通知に有効であり、特に歩行者の存在の適切な通知に適している。   As described above, the driving support device and the driving support method according to the present invention are effective for notification to the driver, and are particularly suitable for appropriate notification of the presence of a pedestrian.

本発明の実施例1にかかる運転支援装置の概要構成を示す概要構成図である。BRIEF DESCRIPTION OF THE DRAWINGS It is a schematic block diagram which shows schematic structure of the driving assistance device concerning Example 1 of this invention. 図1に示したフロントガラス投影機構をフロントガラス下部に設置する場合について説明する説明図である。It is explanatory drawing explaining the case where the windshield projection mechanism shown in FIG. 1 is installed in a windshield lower part. 運転者の視点位置と表示位置の補正について説明する説明図である。It is explanatory drawing explaining correction | amendment of a driver | operator's viewpoint position and a display position. 図1に示したフロントガラス投影機構をヘッドレストに設置する場合について説明する説明図である。It is explanatory drawing explaining the case where the windshield projection mechanism shown in FIG. 1 is installed in a headrest. 丸型の投影像による歩行者通知について説明する説明図である。It is explanatory drawing explaining the pedestrian notification by a round projection image. 縦横のライン型投影像による歩行者通知について説明する説明図である。It is explanatory drawing explaining the pedestrian notification by the vertical and horizontal line type | mold projection image. 矢印型投影像による歩行者通知について説明する説明図である。It is explanatory drawing explaining the pedestrian notification by an arrow type projection image. 画像認識装置の処理動作について説明するフローチャートである。It is a flowchart explaining the processing operation of an image recognition apparatus. 運転支援装置の処理動作について説明するフローチャートである。It is a flowchart explaining the processing operation of a driving assistance device. 本発明の実施例2にかかる運転支援装置の概要構成を示す概要構成図である。It is a schematic block diagram which shows the schematic structure of the driving assistance device concerning Example 2 of this invention. ディスプレイ上での歩行者位置通知の具体例について説明する説明図である(その1)。It is explanatory drawing explaining the specific example of the pedestrian position notification on a display (the 1). ディスプレイ上での歩行者位置通知の具体例について説明する説明図である(その2)。It is explanatory drawing explaining the specific example of the pedestrian position notification on a display (the 2). サブディスプレイの設置例について説明する説明図である。It is explanatory drawing explaining the example of installation of a sub display. 本発明の実施例3にかかる運転支援装置の概要構成を示す概要構成図である。It is a schematic block diagram which shows schematic structure of the driving assistance device concerning Example 3 of this invention. 図14に示したバックミラーランプおよびサイドミラーランプの設置例について説明する説明図である。It is explanatory drawing explaining the example of installation of the back mirror lamp and side mirror lamp which were shown in FIG.

符号の説明Explanation of symbols

10 画像認識装置
10a マイコン
16 車両認識部
17 白線認識部
18 歩行者認識部
18a 切り出し部
18b 間隔設定部
18c 認識処理部
20 衝突判定部
30 ナビゲーション装置
30a 地図データ
31 カメラ
33 レーダ
40 運転支援装置
40a 通知歩行者選択部
40b 投射位置補正部
40c 投射制御部
40d 操作検知部
40e 歩行者表示制御部
40f ミラー表示制御部
41 ブレーキ
42 EFI
43 ディスプレイ
44 スピーカ
51 フロントガラス投影機構
52 車室カメラ
53 座席調節機構
61 シフトレバー
62 ウインカーランプ
63 サブディスプレイ
71 バックミラーランプ
72 サイドミラーランプ
DESCRIPTION OF SYMBOLS 10 Image recognition apparatus 10a Microcomputer 16 Vehicle recognition part 17 White line recognition part 18 Pedestrian recognition part 18a Cutout part 18b Space | interval setting part 18c Recognition processing part 20 Collision determination part 30 Navigation apparatus 30a Map data 31 Camera 33 Radar 40 Driving support apparatus 40a Notification Pedestrian selection unit 40b Projection position correction unit 40c Projection control unit 40d Operation detection unit 40e Pedestrian display control unit 40f Mirror display control unit 41 Brake 42 EFI
43 Display 44 Speaker 51 Windshield Projection Mechanism 52 Vehicle Camera 53 Seat Adjustment Mechanism 61 Shift Lever 62 Turn Signal Lamp 63 Sub Display 71 Rearview Mirror Lamp 72 Side Mirror Lamp

Claims (9)

自車両周辺に存在し、自車両の走行に影響を与える可能性のある物体を検知する物体検知手段が検知した物体のうち、歩行者を選択する歩行者選択手段と、
前記歩行者選択手段によって選択された歩行者について、自車両の運転者から当該歩行者を視認した場合のフロントガラス上の位置に情報表示するよう、自車両のフロントガラス上に運転者から視認可能に情報表示する情報表示手段を制御する表示制御手段と、
を備えたことを特徴とする運転支援装置。
Pedestrian selection means for selecting a pedestrian among the objects detected by the object detection means for detecting an object that exists in the vicinity of the own vehicle and may affect the traveling of the own vehicle;
The pedestrian selected by the pedestrian selection means can be visually recognized by the driver on the windshield of the host vehicle so that information is displayed at a position on the windshield when the pedestrian is viewed from the driver of the host vehicle. Display control means for controlling information display means for displaying information on
A driving support apparatus comprising:
前記歩行者選択手段は、前記物体検知手段が複数の歩行者を検知した場合に、該複数の歩行者のうち自車両の走行に影響を与える可能性が最も高い歩行者を情報表示の対象として選択することを特徴とする請求項1に記載の運転支援装置。   The pedestrian selection means, when the object detection means detects a plurality of pedestrians, of the plurality of pedestrians, the pedestrian most likely to affect the traveling of the host vehicle as information display targets The driving support device according to claim 1, wherein the driving support device is selected. 前記運転者の頭部位置に基づいて、前記フロントガラス上の情報表示位置を補正する補正手段をさらに備えたことを特徴とする請求項1または2に記載の運転支援装置。   The driving support apparatus according to claim 1, further comprising a correcting unit that corrects an information display position on the windshield based on the head position of the driver. 前記情報表示手段は、所定形状の光線を投射する投射機構であり、当該投射方向の変更制御によって前記情報表示の位置を制御することを特徴とする請求項1,2または3に記載の運転支援装置。   The driving support according to claim 1, 2 or 3, wherein the information display means is a projection mechanism that projects a light beam having a predetermined shape, and controls the position of the information display by changing the projection direction. apparatus. 自車両周辺に存在し、自車両の走行に影響を与える可能性のある物体を検知する物体検知手段が検知した物体のうち、歩行者を選択する歩行者選択手段と、
前記歩行者選択手段によって選択された歩行者について、自車両の上方から見た位置関係を表示手段に図形表示する表示制御手段と、
を備えたことを特徴とする運転支援装置。
Pedestrian selection means for selecting a pedestrian among the objects detected by the object detection means for detecting an object that exists in the vicinity of the own vehicle and may affect the traveling of the own vehicle;
About the pedestrian selected by the pedestrian selection means, a display control means for graphically displaying on the display means the positional relationship seen from above the host vehicle,
A driving support apparatus comprising:
運転者による運転操作状態を検知する操作検知手段をさらに備え、前記表示制御手段は前記操作検知手段による検知結果に基づいて表示制御を開始することを特徴とする請求項5に記載の運転支援装置。   6. The driving support device according to claim 5, further comprising operation detection means for detecting a driving operation state by a driver, wherein the display control means starts display control based on a detection result by the operation detection means. . 前記操作検知手段は、運転者による変速機構の操作および/または方向指示灯の操作を検知し、前記表示制御手段は、前記変速機構が後進モードに操作された場合および/または前記方向指示灯が点滅を開始した場合に前記歩行者と自車両との位置関係を図形表示することを特徴とする請求項6に記載の運転支援装置。   The operation detecting means detects the operation of the speed change mechanism and / or the direction indicator lamp by the driver, and the display control means is configured to detect when the speed change mechanism is operated in the reverse mode and / or when the direction indicator light is The driving support device according to claim 6, wherein when blinking is started, the positional relationship between the pedestrian and the host vehicle is graphically displayed. 光学的後方視認装置近傍に設けられ、自車両の運転者に対して光信号を出力する光信号出力手段と、
自車両周辺に存在し、自車両の走行に影響を与える可能性のある物体を検知する物体検知手段によって、自車両後方に前記自車両の走行に影響を与える物体が検知された場合に、前記光信号の出力を実行する光信号制御手段と、
を備えたことを特徴とする運転支援装置。
An optical signal output means that is provided in the vicinity of the optical rear visual recognition device and outputs an optical signal to the driver of the own vehicle;
When an object that affects the travel of the host vehicle is detected behind the host vehicle by the object detection means that detects an object that exists around the host vehicle and may affect the travel of the host vehicle, An optical signal control means for outputting an optical signal;
A driving support apparatus comprising:
自車両周辺に存在し、自車両の走行に影響を与える可能性のある物体を検知する物体検知工程と、
前記物体検知工程によって検知された物体のうち、歩行者を選択する歩行者選択工程と、
前記歩行者選択工程によって選択された歩行者について、自車両の運転者から当該歩行者を視認した場合のフロントガラス上の位置に、運転者から視認可能に情報表示する情報表示工程と、
を含んだことを特徴とする運転支援方法。
An object detection step for detecting an object that exists in the vicinity of the host vehicle and may affect the traveling of the host vehicle;
Of the objects detected by the object detection step, a pedestrian selection step of selecting a pedestrian,
About the pedestrian selected by the pedestrian selection step, an information display step for displaying information from the driver so that the pedestrian can visually recognize the pedestrian when viewing the pedestrian from the driver of the vehicle,
A driving support method characterized by comprising
JP2006241913A 2006-09-06 2006-09-06 Drive assist device and drive assist method Pending JP2008062762A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006241913A JP2008062762A (en) 2006-09-06 2006-09-06 Drive assist device and drive assist method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006241913A JP2008062762A (en) 2006-09-06 2006-09-06 Drive assist device and drive assist method

Publications (1)

Publication Number Publication Date
JP2008062762A true JP2008062762A (en) 2008-03-21

Family

ID=39285853

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006241913A Pending JP2008062762A (en) 2006-09-06 2006-09-06 Drive assist device and drive assist method

Country Status (1)

Country Link
JP (1) JP2008062762A (en)

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009196630A (en) * 2008-01-25 2009-09-03 Denso Corp Display device
JP2010039793A (en) * 2008-08-06 2010-02-18 Calsonic Kansei Corp Display device for vehicle
JP2010079805A (en) * 2008-09-29 2010-04-08 Alpine Electronics Inc Safe driving support device
WO2010029707A3 (en) * 2008-09-12 2010-05-06 株式会社 東芝 Image projection system and image projection method
JP2010132025A (en) * 2008-12-02 2010-06-17 Honda Motor Co Ltd Vehicle alarm device
JP2010143411A (en) * 2008-12-18 2010-07-01 Denso Corp Head-up display device
JP2010205117A (en) * 2009-03-05 2010-09-16 Nissan Motor Co Ltd Driving support information providing device and driving support method
WO2011117974A1 (en) * 2010-03-23 2011-09-29 パイオニア株式会社 Dangerous spot warning device and dangerous spot warning method
JP2014071024A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
JP2014071022A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
JP2014071020A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
JP2014071021A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
JP2014071023A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
JP2014071019A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
WO2015037117A1 (en) * 2013-09-13 2015-03-19 日立マクセル株式会社 Information display system, and information display device
JP2015096946A (en) * 2013-10-10 2015-05-21 パナソニックIpマネジメント株式会社 Display controller, display control program and display control method
JP2016024574A (en) * 2014-07-18 2016-02-08 日産自動車株式会社 Display device for vehicle
WO2016067545A1 (en) * 2014-10-28 2016-05-06 株式会社デンソー Gaze guidance device
WO2016103418A1 (en) * 2014-12-25 2016-06-30 日立マクセル株式会社 Information displaying apparatus for vehicle
CN106043150A (en) * 2016-08-04 2016-10-26 歌尔科技有限公司 Vehicle-mounted projection system with speech recognition function
WO2017013739A1 (en) * 2015-07-21 2017-01-26 三菱電機株式会社 Display control apparatus, display apparatus, and display control method
JP2017021546A (en) * 2015-07-10 2017-01-26 田山 修一 Image displaying system, and method, for on-vehicle use
EP3154041A1 (en) * 2015-10-07 2017-04-12 LG Electronics Inc. Vehicle surround monitoring device
JP2017186008A (en) * 2017-06-21 2017-10-12 日立マクセル株式会社 Information display system
KR101855940B1 (en) * 2015-10-27 2018-05-09 엘지전자 주식회사 Augmented reality providing apparatus for vehicle and control method for the same
WO2018168531A1 (en) * 2017-03-13 2018-09-20 マクセル株式会社 Head-up display device
JP2019159917A (en) * 2018-03-14 2019-09-19 株式会社リコー Driving support device, vehicle, system and method
JPWO2018193708A1 (en) * 2017-04-19 2019-12-19 マクセル株式会社 Head-up display device and display control method thereof

Cited By (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009196630A (en) * 2008-01-25 2009-09-03 Denso Corp Display device
JP2010039793A (en) * 2008-08-06 2010-02-18 Calsonic Kansei Corp Display device for vehicle
WO2010029707A3 (en) * 2008-09-12 2010-05-06 株式会社 東芝 Image projection system and image projection method
US20110187844A1 (en) * 2008-09-12 2011-08-04 Kabushiki Kaisha Toshiba Image irradiation system and image irradiation method
CN102149574A (en) * 2008-09-12 2011-08-10 株式会社东芝 Image projection system and image projection method
JP2010079805A (en) * 2008-09-29 2010-04-08 Alpine Electronics Inc Safe driving support device
JP2010132025A (en) * 2008-12-02 2010-06-17 Honda Motor Co Ltd Vehicle alarm device
JP2010143411A (en) * 2008-12-18 2010-07-01 Denso Corp Head-up display device
JP2010205117A (en) * 2009-03-05 2010-09-16 Nissan Motor Co Ltd Driving support information providing device and driving support method
WO2011117974A1 (en) * 2010-03-23 2011-09-29 パイオニア株式会社 Dangerous spot warning device and dangerous spot warning method
JP2014071020A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
JP2014071024A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
US9267808B2 (en) 2012-09-28 2016-02-23 Fuji Jukogyo Kabushiki Kaisha Visual guidance system
JP2014071021A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
JP2014071023A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
JP2014071019A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
JP2014071022A (en) * 2012-09-28 2014-04-21 Fuji Heavy Ind Ltd Sight line guidance system
CN105163972A (en) * 2013-09-13 2015-12-16 日立麦克赛尔株式会社 Information display system, and information display device
WO2015037117A1 (en) * 2013-09-13 2015-03-19 日立マクセル株式会社 Information display system, and information display device
JPWO2015037117A1 (en) * 2013-09-13 2017-03-02 日立マクセル株式会社 Information display system and information display device
US10272780B2 (en) 2013-09-13 2019-04-30 Maxell, Ltd. Information display system and information display device
JP2015096946A (en) * 2013-10-10 2015-05-21 パナソニックIpマネジメント株式会社 Display controller, display control program and display control method
JP2016006684A (en) * 2013-10-10 2016-01-14 パナソニックIpマネジメント株式会社 Display controller, projection device and display control program
US10279741B2 (en) 2013-10-10 2019-05-07 Panasonic Intellectual Property Management Co., Ltd. Display control apparatus, method, recording medium, and vehicle
JP2016024574A (en) * 2014-07-18 2016-02-08 日産自動車株式会社 Display device for vehicle
WO2016067545A1 (en) * 2014-10-28 2016-05-06 株式会社デンソー Gaze guidance device
WO2016103418A1 (en) * 2014-12-25 2016-06-30 日立マクセル株式会社 Information displaying apparatus for vehicle
JPWO2016103418A1 (en) * 2014-12-25 2017-07-06 日立マクセル株式会社 Vehicle information display device
JP2017021546A (en) * 2015-07-10 2017-01-26 田山 修一 Image displaying system, and method, for on-vehicle use
JPWO2017013739A1 (en) * 2015-07-21 2017-11-02 三菱電機株式会社 Display control device, display device, and display control method
CN107848415A (en) * 2015-07-21 2018-03-27 三菱电机株式会社 Display control unit, display device and display control method
WO2017013739A1 (en) * 2015-07-21 2017-01-26 三菱電機株式会社 Display control apparatus, display apparatus, and display control method
US10479274B2 (en) 2015-10-07 2019-11-19 Lg Electronics Inc. Vehicle and control method for the same
EP3154041A1 (en) * 2015-10-07 2017-04-12 LG Electronics Inc. Vehicle surround monitoring device
KR101855940B1 (en) * 2015-10-27 2018-05-09 엘지전자 주식회사 Augmented reality providing apparatus for vehicle and control method for the same
CN106043150A (en) * 2016-08-04 2016-10-26 歌尔科技有限公司 Vehicle-mounted projection system with speech recognition function
WO2018168531A1 (en) * 2017-03-13 2018-09-20 マクセル株式会社 Head-up display device
JPWO2018193708A1 (en) * 2017-04-19 2019-12-19 マクセル株式会社 Head-up display device and display control method thereof
JP2017186008A (en) * 2017-06-21 2017-10-12 日立マクセル株式会社 Information display system
JP2019159917A (en) * 2018-03-14 2019-09-19 株式会社リコー Driving support device, vehicle, system and method
JP7183549B2 (en) 2018-03-14 2022-12-06 株式会社リコー DRIVING ASSIST DEVICE, VEHICLE, SYSTEM AND METHOD

Similar Documents

Publication Publication Date Title
JP2008062762A (en) Drive assist device and drive assist method
US11492017B2 (en) Information presentation device and information presentation method
JP3390289B2 (en) Alarm device
JP4941760B2 (en) Vehicle periphery monitoring device
US20160052394A1 (en) In-vehicle device, control method of in-vehicle device, and computer- readable storage medium
JP6705437B2 (en) Inattentive judgment device, inattentive judgment method, and program for inattentive judgment
JP4825868B2 (en) Vehicle alarm device
CN109564734B (en) Driving assistance device, driving assistance method, mobile body, and program
EP2523173B1 (en) Driver assisting system and method for a motor vehicle
JP2016196285A (en) Travel controlling device and travel controlling method
JPWO2015037117A1 (en) Information display system and information display device
JP2003291688A (en) Display method, driving support device and program
JPH06227318A (en) Rearview monitoring device of vehicle and method thereof
JP2010173619A (en) Head-up display device
US20160097928A1 (en) Vehicle information presentation device
JP2009009320A (en) Alarm display device for vehicle
JP2010122997A (en) Driving support device
JP2005067514A (en) Vehicular display device
JP4337130B2 (en) Control device for driving device
JP6448714B2 (en) Information display system
JP2007188271A (en) On-vehicle camera system
JP6398182B2 (en) Signal information presentation device
JP2008282235A (en) Driving support device, automobile equipped with driving support device and driving support method
JP6428376B2 (en) Information display device
WO2013144998A1 (en) Visual recognition assistance apparatus for vehicle

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090804

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20091208