JP2011188275A - Vehicle periphery monitoring device - Google Patents

Vehicle periphery monitoring device Download PDF

Info

Publication number
JP2011188275A
JP2011188275A JP2010051847A JP2010051847A JP2011188275A JP 2011188275 A JP2011188275 A JP 2011188275A JP 2010051847 A JP2010051847 A JP 2010051847A JP 2010051847 A JP2010051847 A JP 2010051847A JP 2011188275 A JP2011188275 A JP 2011188275A
Authority
JP
Japan
Prior art keywords
vehicle
image
parking
display
attention object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010051847A
Other languages
Japanese (ja)
Other versions
JP5605605B2 (en
Inventor
Noboru Nagamine
昇 長嶺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin Corp
Original Assignee
Aisin Seiki Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin Seiki Co Ltd filed Critical Aisin Seiki Co Ltd
Priority to JP2010051847A priority Critical patent/JP5605605B2/en
Publication of JP2011188275A publication Critical patent/JP2011188275A/en
Application granted granted Critical
Publication of JP5605605B2 publication Critical patent/JP5605605B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a vehicle periphery monitoring device in which a driver can perform drive operation proactively without gazing at a screen, being able to check caution objects of vehicle periphery instantaneously. <P>SOLUTION: The vehicle periphery monitoring device which monitors the vehicle periphery when parking a vehicle includes an image acquisition portion 2 which acquires the image of vehicle periphery imaged by an imaging device 12 installed in the vehicle, a caution object setting portion 5 which sets a plurality of caution objects in the periphery image in the process of parking, a display image generation portion 6 which sequentially changes the caution object according to the parking process from the plurality of caution objects, making it as a gazing point, and generates a display image in which the gazing point is positioned in the center, a translucent image generating portion 7 which generates at least the contour of the vehicle existing between the gazing point and the driver as a translucent image, and a display control portion 3 which makes the translucent image overlap on the display image and display it in the display device 20 in the vehicle. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、高い利便性を有して駐車支援を受けることができる車両周辺監視装置に関する。   The present invention relates to a vehicle periphery monitoring apparatus that can receive parking assistance with high convenience.

車両の駐車時に車両周囲の安全確認を容易に行うことができる車両周辺画像表示装置が知られている。例えば、特許文献1には、車両周辺表示装置において車載カメラにより撮像された画像に車体の輪郭線を重畳表示する表示制御装置を備えた構成が記載されている。車両周辺表示装置において、周辺画像に車体の輪郭線が重ねて表示されると、車両の周囲を視認する際に車体と障害物との位置関係が容易に把握でき、車両駐車時における安全確認が容易になる。   2. Description of the Related Art A vehicle periphery image display device that can easily check safety around a vehicle when the vehicle is parked is known. For example, Patent Literature 1 describes a configuration including a display control device that superimposes and displays a contour line of a vehicle body on an image captured by a vehicle-mounted camera in a vehicle periphery display device. In the vehicle periphery display device, when the outline of the vehicle body is superimposed on the surrounding image, the positional relationship between the vehicle body and the obstacle can be easily grasped when visually checking the periphery of the vehicle, and safety confirmation when parking the vehicle is possible. It becomes easy.

特開2006−74105号公報JP 2006-74105 A

特許文献1の車両周辺表示装置では、運転席から視認される画像は基本的に運転者が指定して表示する。車両を駐車する際には、通常車両後方の周辺画像が表示されることとなるが、例えば車両左後方の安全確認を丁寧に行いたい場合には、運転者がカメラ方向等を切換えて所望の画像を表示させる必要がある。また、注意すべき障害物が表示画像の隅に位置していると、当該障害物をすぐに認知できず、結果的にわき見(運転者による表示画像の注視)をしてしまうことも想定され、その場合には駐車操作がスムーズに行えない。   In the vehicle periphery display device of Patent Document 1, an image visually recognized from the driver's seat is basically designated and displayed by the driver. When a vehicle is parked, a surrounding image of the rear of the vehicle is usually displayed. For example, when the driver wants to carefully check the safety of the rear left of the vehicle, the driver switches the camera direction and the like to change the desired direction. It is necessary to display an image. In addition, if an obstacle to be noted is located in the corner of the display image, it is not possible to recognize the obstacle immediately, and as a result, it is assumed that the driver will look aside (gazing at the display image by the driver). In that case, the parking operation cannot be performed smoothly.

本発明は、画面を注視せずに、瞬時に車両周辺の注意対象の確認ができ、運転者が主体的に運転操作を行うことが可能な車両周辺監視装置を提供することを目的とする。   SUMMARY OF THE INVENTION An object of the present invention is to provide a vehicle periphery monitoring device that can instantly confirm a caution target around a vehicle without gazing at a screen and that allows a driver to perform a driving operation independently.

本発明に係る車両周辺監視装置の第1特徴構成は、車両を駐車する際に車両周辺を監視する車両周辺監視装置であって、車両に搭載された撮影装置により撮影された前記車両の周辺画像を取得する画像取得部と、駐車過程において複数の注意対象を前記周辺画像に設定する注意対象設定部と、前記複数の注意対象から駐車過程に応じた注意対象を逐次切換えて注視点とし、当該注視点を中央に位置させる表示画像を生成する表示画像生成部と、前記注視点と運転者との間に存在する前記車両の少なくとも輪郭線を半透明画像として生成する半透明画像生成部と、前記表示画像に前記半透明画像を重畳させて車室内の表示装置に表示させる表示制御部と、を備える点にある。   1st characteristic structure of the vehicle periphery monitoring apparatus which concerns on this invention is a vehicle periphery monitoring apparatus which monitors a vehicle periphery when parking a vehicle, Comprising: The surrounding image of the said vehicle image | photographed with the imaging device mounted in the vehicle An image acquisition unit for acquiring a caution object in a parking process, a caution object setting unit for setting a plurality of caution objects in the peripheral image, and sequentially switching a caution object according to the parking process from the plurality of caution objects, A display image generating unit that generates a display image that positions a gazing point in the center, a translucent image generating unit that generates at least an outline of the vehicle existing between the gazing point and the driver as a translucent image, A display control unit that superimposes the translucent image on the display image and displays the image on a display device in a vehicle interior.

この構成により、駐車過程において、設定された複数の注意対象から駐車過程に応じた注意対象が注視点として逐次切換えられ、当該注視点が中央に位置する表示画像が車室内の表示装置に表示される。こうして、運転者は、わき見(画面の注視)をせずに車室内の表示装置を見るだけで効率的に駐車過程に応じた注意対象を確認して、駐車を行うことができる。表示画面の中央に注意対象が表示されると、画面内で注意対象を直視するための時間が短くなり、運転者自身が主体的に運転を行い、目視をベースとする安全な運転行動に誘導することができる。注意対象が自動的に変化したことを認識することで、駐車過程が順調に進んでいることが確認でき、運転者への運転行動のフィードバックとして活用することもできる。   With this configuration, in the parking process, the attention object corresponding to the parking process is sequentially switched from a plurality of set attention objects as a gazing point, and a display image in which the gazing point is located in the center is displayed on the display device in the vehicle interior. The In this way, the driver can efficiently check the attention object according to the parking process and perform the parking simply by looking at the display device in the passenger compartment without looking at the side (looking at the screen). When the attention object is displayed in the center of the display screen, the time required to directly view the attention object in the screen is shortened, and the driver himself / herself drives to guide to safe driving behavior based on visual observation. can do. By recognizing that the subject of attention has automatically changed, it can be confirmed that the parking process is proceeding smoothly, and can be used as feedback of driving behavior to the driver.

また、半透明画像生成部及び表示制御部により、表示画像に車両の輪郭線の半透明画像が重畳されて表示されるので、画像の中央に位置する注意対象と自車両との相対的な位置関係が容易に把握でき、駐車過程における運転動作がさらに支援される。   In addition, since the semi-transparent image generation unit and the display control unit display the display image with the semi-transparent image of the outline of the vehicle superimposed on the display image, the relative position between the target object at the center of the image and the host vehicle is displayed. The relationship can be easily grasped and the driving operation in the parking process is further supported.

本発明に係る車両周辺監視装置の第2特徴構成は、前記表示画像生成部が、前記周辺画像を運転席から見た画像に視点変換して表示画像を生成する点にある。   A second characteristic configuration of the vehicle periphery monitoring device according to the present invention is that the display image generation unit generates a display image by converting the viewpoint of the periphery image into an image viewed from the driver's seat.

車両に搭載された撮影装置により撮影された車両の周辺画像は、撮影装置の位置から対象物を写したアングルであるため、運転者が運転席の位置から視認した場合のアングルとは異なり、運転者にとって違和感がある。本構成のように、表示画像生成部が周辺画像を運転席から見た画像に視点変換して表示画像を生成すると、車室内の表示装置に表示される画像が、運転席から周囲を見た画像に近づけられる。その結果、運転者が違和感なく周辺画像を視認でき、駐車のための運転動作をよりスムーズに行うことができる。   Since the surrounding image of the vehicle photographed by the photographing device mounted on the vehicle is an angle obtained by capturing the object from the position of the photographing device, driving is different from the angle when the driver visually recognizes from the position of the driver's seat. Have a sense of incongruity. As in this configuration, when the display image generation unit converts the viewpoint image into an image viewed from the driver's seat and generates a display image, the image displayed on the display device in the passenger compartment looks around the driver seat. Close to the image. As a result, the driver can visually recognize the surrounding image without feeling uncomfortable, and the driving operation for parking can be performed more smoothly.

本発明に係る車両周辺監視装置の第3特徴構成は、前記注意対象設定部において、前記注意対象を、車両が駐車される領域を示す駐車目標領域の中で駐車完了時に前記車両が到達する位置である駐車目標位置と、前記駐車目標領域の境界で、前記駐車目標領域へ前記車両が進入する側の外側近傍位置に設定する点にある。   A third characteristic configuration of the vehicle periphery monitoring device according to the present invention is the position where the vehicle reaches the attention object in the parking target area indicating the area where the vehicle is parked in the attention object setting unit. It is in the point set to the near outside position on the side where the vehicle enters the parking target area at the boundary between the parking target position and the parking target area.

このように、注意対象を駐車目標位置に設定することで、車両の停止位置や、車両の傾き(駐車枠とのずれ、斜め駐車等)を確認することができる。車両の停止位置を確認することで、輪止めでの強い衝撃が緩和でき、後部バンパーが駐車場等の壁や杭等に接触する不具合が抑制される。   Thus, by setting the attention object as the parking target position, it is possible to confirm the stop position of the vehicle and the inclination of the vehicle (deviation from the parking frame, oblique parking, etc.). By confirming the stop position of the vehicle, a strong impact at the wheel stopper can be mitigated, and a problem that the rear bumper comes into contact with a wall or a pile of a parking lot or the like is suppressed.

車両の運転席前方の説明図Illustration of the front of the driver's seat of the vehicle 車両の基本構成を示すブロック図Block diagram showing the basic configuration of the vehicle 車庫入れ駐車の際の移動軌跡及び、設定される注意対象の位置を示す図The figure which shows the movement locus at the time of garage parking and the position of the attention object to be set 車両のシステム構成の一例を模式的に示すブロック図Block diagram schematically showing an example of a system configuration of a vehicle 駐車過程と表示画像との関係を示す図であって、(a)は駐車過程を示す平面図、(b)は駐車過程を示す平面拡大図、(c),(d)は注意対象Aを中央に位置させた表示画像[(c)は車両が実画像、(d)は車両が半透明画像]、(e),(f)は注意対象Bを中央に位置させた表示画像[(e)は車両が実画像、(f)は車両が半透明画像]、(g),(h)は注意対象Cを中央に位置させた表示画像[(g)は車両が実画像、(h)は車両が半透明画像]をそれぞれ示す。It is a figure which shows the relationship between a parking process and a display image, (a) is a top view which shows a parking process, (b) is a plane enlarged view which shows a parking process, (c), (d) shows attention object A. Display image positioned in the center [(c) is the actual image of the vehicle, (d) is the translucent image of the vehicle], (e) and (f) are the display images [(e ) Is an actual image of the vehicle, (f) is a translucent image of the vehicle], (g) and (h) are display images in which the attention object C is located at the center [(g) is an actual image of the vehicle, (h) Indicates a translucent image of the vehicle. 駐車過程と表示画像との関係を示す図であって、(a)は駐車過程を示す平面図、(b)は表示部の表示例(注意対象Cが中央に位置)をそれぞれ示す。It is a figure which shows the relationship between a parking process and a display image, Comprising: (a) is a top view which shows a parking process, (b) shows the example of a display of a display part (attention object C is located in the center), respectively. 駐車過程と表示画像との関係を示す図であって、(a)は駐車過程を示す平面図、(b)は表示部の表示例(注意対象Bが中央に位置)をそれぞれ示す。It is a figure which shows the relationship between a parking process and a display image, Comprising: (a) is a top view which shows a parking process, (b) shows the example of a display of a display part (attention object B is located in the center), respectively. 駐車過程と表示画像との関係を示す図であって、(a)は駐車過程を示す平面図、(b)は表示部の表示例(注意対象Bが中央に位置)をそれぞれ示す。It is a figure which shows the relationship between a parking process and a display image, Comprising: (a) is a top view which shows a parking process, (b) shows the example of a display of a display part (attention object B is located in the center), respectively. 駐車過程と表示画像との関係を示す図であって、(a)は駐車過程を示す平面図、(b)は表示部の表示例(注意対象Cが中央に位置)をそれぞれ示す。It is a figure which shows the relationship between a parking process and a display image, Comprising: (a) is a top view which shows a parking process, (b) shows the example of a display of a display part (attention object C is located in the center), respectively. 駐車過程と表示画像との関係を示す図であって、(a)は駐車過程を示す平面図、(b)は表示部の表示例(注意対象Cが中央に位置)をそれぞれ示す。It is a figure which shows the relationship between a parking process and a display image, Comprising: (a) is a top view which shows a parking process, (b) shows the example of a display of a display part (attention object C is located in the center), respectively.

以下、本発明の実施形態を図面に基づいて説明する。図1及び図2は車両30の基本構成を示したものである。運転席に備えられたステアリング24は、パワーステアリングユニット33と連動し、回転操作力を前輪28fに伝えて車両30の操舵を行う。前輪28fは本発明の操舵輪に相当する。車体前部にはエンジン32と、このエンジン32からの動力を変速して前輪28fや後輪28rに伝えるトルクコンバータやCVT等を有する変速機構34とが配置されている。車両30の駆動方式(前輪駆動、後輪駆動、四輪駆動)に応じて、前輪28f及び後輪28rの双方もしくは何れかに動力が伝達される。運転席の近傍には走行速度を制御するアクセル操作手段としてのアクセルペダル26と、前輪28f及び後輪28rのブレーキ装置31を介して前輪28f及び後輪28rに制動力を作用させるブレーキペダル27とが並列配置されている。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. 1 and 2 show the basic configuration of the vehicle 30. FIG. The steering 24 provided in the driver's seat is interlocked with the power steering unit 33 and transmits the rotational operation force to the front wheels 28f to steer the vehicle 30. The front wheel 28f corresponds to the steering wheel of the present invention. An engine 32 and a speed change mechanism 34 having a torque converter, CVT, and the like that shift the power from the engine 32 and transmit the power to the front wheels 28f and the rear wheels 28r are arranged at the front of the vehicle body. Power is transmitted to the front wheel 28f and / or the rear wheel 28r according to the driving method of the vehicle 30 (front wheel drive, rear wheel drive, four wheel drive). In the vicinity of the driver's seat, an accelerator pedal 26 as an accelerator operating means for controlling the traveling speed, and a brake pedal 27 for applying a braking force to the front wheels 28f and the rear wheels 28r via the brake devices 31 for the front wheels 28f and the rear wheels 28r, Are arranged in parallel.

運転席の近傍のコンソールの上部位置には表示部21にタッチパネル23が形成されたモニタ20(表示装置)が備えられている。本実施形態において、モニタ20は、バックライトを備えた液晶式のものである。モニタ20には、スピーカ22も備えられている。タッチパネル23は、感圧式のものや静電式のものが使用され、指などの接触位置をロケーションデータとして出力する。後述するように、本実施形態においては、モニタ20のタッチパネル23は車両周辺監視装置への指示入力手段として用いられる。車両30にナビゲーションシステムが搭載される場合、モニタ20はナビゲーションシステムの表示装置として用いるものを兼用すると好適である。   A monitor 20 (display device) in which a touch panel 23 is formed on the display unit 21 is provided at an upper position of the console near the driver's seat. In the present embodiment, the monitor 20 is of a liquid crystal type provided with a backlight. The monitor 20 is also provided with a speaker 22. The touch panel 23 is a pressure-sensitive type or an electrostatic type, and outputs a contact position of a finger or the like as location data. As will be described later, in the present embodiment, the touch panel 23 of the monitor 20 is used as an instruction input unit to the vehicle periphery monitoring device. When the navigation system is mounted on the vehicle 30, it is preferable that the monitor 20 is also used as a display device for the navigation system.

尚、モニタ20は、プラズマ表示型のものやCRT型のものであっても良く、スピーカ22は、ドアの内側など他の場所に備えられても良い。また、車両周辺監視装置への指示入力手段として他のスイッチなどを有している場合には、必ずしもモニタ20のタッチパネル23を車両周辺監視装置への指示入力手段として用いなくてもよい。   The monitor 20 may be of a plasma display type or a CRT type, and the speaker 22 may be provided at another place such as the inside of a door. Further, in the case where another switch or the like is provided as an instruction input unit for the vehicle periphery monitoring device, the touch panel 23 of the monitor 20 is not necessarily used as an instruction input unit for the vehicle periphery monitoring device.

ステアリング24の操作系にはステアリングセンサ14が備えられ、ステアリング操作方向と操作量とが計測される。シフトレバー25の操作系にはシフト位置センサ15が備えられ、シフト位置が判別される。アクセルペダル26の操作系にはアクセルセンサ16が備えられ、操作量が計測される。ブレーキペダル27の操作系にはブレーキセンサ17が備えられ、操作の有無などを検出する。   A steering sensor 14 is provided in the operation system of the steering 24, and the steering operation direction and the operation amount are measured. The operation system of the shift lever 25 is provided with a shift position sensor 15 to determine the shift position. The operation system of the accelerator pedal 26 is provided with an accelerator sensor 16 to measure an operation amount. The operating system of the brake pedal 27 is provided with a brake sensor 17, which detects the presence or absence of the operation.

また、移動距離センサとして、前輪28f及び後輪28rの少なくとも一方の回転量を計測する回転センサ18が備えられる。本実施形態では、後輪28rに回転センサ18が備えられた場合を例示している。尚、移動距離については、変速機構34において、駆動系の回転量から車両30の移動量を計測するようにしてもよい。また、車両30には本発明の車両周辺監視装置の中核であり、駐車支援を含む走行制御を行うECU(electronic control unit)10が配置されている。   In addition, a rotation sensor 18 that measures the amount of rotation of at least one of the front wheel 28f and the rear wheel 28r is provided as a movement distance sensor. In this embodiment, the case where the rotation sensor 18 is provided in the rear wheel 28r is illustrated. As for the movement distance, the transmission mechanism 34 may measure the movement amount of the vehicle 30 from the rotation amount of the drive system. Further, the vehicle 30 is provided with an electronic control unit (ECU) 10 that is the core of the vehicle periphery monitoring device of the present invention and that performs traveling control including parking assistance.

車両30の周辺の情景を撮影する撮像手段として複数のカメラ12を備えており、例えば、図2に示すように、車両30の前部にカメラ12F、後部にカメラ12B、左側部にカメラ12L、右側部にカメラ12Rがそれぞれ備えられている。カメラ12は、CCD(charge coupled device)やCIS(CMOS image sensor)などの撮像素子を内蔵し、当該撮像素子に撮像された情報を動画情報としてリアルタイムに出力するデジタルカメラである。カメラ12は、広角レンズを備えており、例えば左右約140度程度の画角を有している。カメラ12は、車両30の後方に向けて例えば30度程度の俯角を有して設置され、概ね後方8m程度までの領域を撮影する。撮影された画像は、ECU10に入力され、駐車支援などに利用される。   As shown in FIG. 2, for example, a camera 12F is provided at the front of the vehicle 30, a camera 12B at the rear, a camera 12L at the left, Cameras 12R are respectively provided on the right side. The camera 12 is a digital camera that incorporates an image sensor such as a charge coupled device (CCD) or a CMOS image sensor (CIS) and outputs information captured by the image sensor in real time as moving image information. The camera 12 includes a wide-angle lens and has a field angle of about 140 degrees on the left and right, for example. The camera 12 is installed with a depression angle of, for example, about 30 degrees toward the rear of the vehicle 30 and photographs a region up to about 8 m behind. The captured image is input to the ECU 10 and used for parking assistance or the like.

ECU10を中核として構成される本実施形態の車両周辺監視装置は、図3に示すように、例えば、2台の駐車車両40(41及び42)の間の駐車スペースEに車庫入れ駐車を行う場合に用いられる。車両30は、駐車スペースEの横を通過して前進し、切り返しを伴って後退して、駐車スペースEに駐車される。基準点Qは車両30の後輪28rの車軸の略中央部であり、ポイントP1〜ポイントP3は当該基準点Qの水平面上(路面上)の位置(座標点)を示している。本例の車庫入れ駐車では、車両30は、ポイントP1から右方向への操舵による円弧状の移動軌跡を伴って後退開始位置であるポイントP2まで駐車経路KFを前進する。そして、ポイントP2から左方向への操舵による円弧状の移動軌跡を伴ってポイントP3まで駐車経路KBを後進し、所定の駐車スペースEに駐車される。なお、図3に示される8A,8B,8C,8Dは、後述する注意対象設定部5により設定される仮想の注意対象である。   As shown in FIG. 3, the vehicle periphery monitoring device of the present embodiment configured with the ECU 10 as the core performs, for example, parking in a parking space E between two parked vehicles 40 (41 and 42). Used for. The vehicle 30 passes by the side of the parking space E, moves forward, turns back with turning back, and is parked in the parking space E. The reference point Q is a substantially central portion of the axle of the rear wheel 28r of the vehicle 30, and the points P1 to P3 indicate positions (coordinate points) on the horizontal plane (on the road surface) of the reference point Q. In the garage parking in this example, the vehicle 30 moves forward on the parking route KF to the point P2 which is the reverse start position along with the arc-shaped movement locus by steering in the right direction from the point P1. Then, the vehicle travels backward on the parking route KB to the point P3 with an arcuate movement locus by steering leftward from the point P2 and is parked in a predetermined parking space E. Note that 8A, 8B, 8C, and 8D shown in FIG. 3 are virtual attention objects set by the attention object setting unit 5 described later.

図4は、ECU10を中核とする本発明に係る車両周辺監視装置の構成例を模式的に示すブロック図である。図4に示すように、ECU10は、演算部1、画像取得部2、表示制御部3などの機能部を有して構成されている。演算部1は、駐車目標設定部4、注意対象設定部5、表示画像生成部6、半透明画像生成部7などの機能部を有している。ECU10が有する上記各機能部は、マイクロコンピュータやDSP(digital signal processor)などの論理演算ハードウェアを中核とし、当該ハードウェア上で実行されるプログラムなどのソフトウェアとの協働により実現される。従って、各機能部は、機能としての分担を示すものであり、必ずしも物理的に独立して構成される必要はない。また、ECU10には、画像格納用のフレームメモリなどの各種メモリ、画像処理回路などの各種電子回路も含まれる。これらの各種メモリや各種電子回路の構成や機能については公知であるので、図示並びに詳細な説明は省略する。   FIG. 4 is a block diagram schematically showing a configuration example of the vehicle periphery monitoring apparatus according to the present invention having the ECU 10 as a core. As shown in FIG. 4, the ECU 10 includes functional units such as a calculation unit 1, an image acquisition unit 2, and a display control unit 3. The calculation unit 1 includes functional units such as a parking target setting unit 4, an attention target setting unit 5, a display image generation unit 6, and a translucent image generation unit 7. Each functional unit of the ECU 10 is realized by cooperation with software such as a program executed on the hardware, with logical operation hardware such as a microcomputer and a DSP (digital signal processor) as a core. Therefore, each functional unit shows a sharing as a function and does not necessarily need to be physically configured independently. The ECU 10 also includes various memories such as a frame memory for storing images and various electronic circuits such as an image processing circuit. Since the configurations and functions of these various memories and various electronic circuits are known, illustration and detailed description thereof are omitted.

画像取得部2は、カメラ12(車載の撮影装置)により撮影された車両30の周辺画像を取得する機能部である。画像取得部2は、画像格納用のフレームメモリや同期分離回路などを有して構成される。表示制御部3は、カメラ12により撮影された車両30の周辺画像を車室内のモニタ20(表示装置)に表示させる機能部である。また、表示制御部3は、後述するように車両の半透明重畳画像を表示画像に重畳してモニタ20に表示する。   The image acquisition unit 2 is a functional unit that acquires a peripheral image of the vehicle 30 captured by the camera 12 (on-vehicle imaging device). The image acquisition unit 2 includes a frame memory for storing images, a synchronization separation circuit, and the like. The display control unit 3 is a functional unit that displays a peripheral image of the vehicle 30 captured by the camera 12 on a monitor 20 (display device) in the vehicle interior. Moreover, the display control part 3 superimposes the semi-transparent superimposed image of a vehicle on a display image, and displays it on the monitor 20 so that it may mention later.

演算部1が有する駐車目標設定部4は、車両30の駐車スペースEを設定する機能部である。注意対象設定部5は、駐車過程において複数の注意対象8を周辺画像に設定する機能部である。表示画像生成部6は、注意対象設定部5で設定された複数の注意対象8から駐車過程に応じた注意対象8に切換えて注視点とし、当該注視点を中央に位置させる表示画像を生成する機能部である。なお、ここでは、表示画像生成部6は、周辺画像を運転席から見た画像に逐次視点変換して表示画像を生成する機能も有している。半透明画像生成部7は、注視点(注意対象)と運転席との間に存在する車両の輪郭線を半透明画像として生成する機能部である。また、演算部1には、ステアリングセンサ14、シフト位置センサ15、アクセルセンサ16、ブレーキセンサ17、回転センサ18などから検出結果が入力され、これらセンサの検出結果に基づいて、車両30の誘導経路を演算することもできる。   The parking target setting unit 4 included in the calculation unit 1 is a functional unit that sets the parking space E of the vehicle 30. The attention object setting unit 5 is a functional unit that sets a plurality of attention objects 8 in the surrounding image in the parking process. The display image generation unit 6 switches from the plurality of attention objects 8 set by the attention object setting unit 5 to the attention object 8 according to the parking process, and generates a display image that positions the attention point in the center. It is a functional part. Here, the display image generation unit 6 also has a function of generating a display image by sequentially converting the viewpoint of the peripheral image into an image viewed from the driver's seat. The semi-transparent image generation unit 7 is a functional unit that generates the outline of the vehicle existing between the point of sight (attention target) and the driver's seat as a semi-transparent image. In addition, detection results are input to the calculation unit 1 from the steering sensor 14, the shift position sensor 15, the accelerator sensor 16, the brake sensor 17, the rotation sensor 18, and the like, and the guidance route of the vehicle 30 is determined based on the detection results of these sensors. Can also be calculated.

以下、図5〜図10を参照して、本実施形態に係る車両周辺監視装置により支援される車庫入れ駐車の手順について説明する。   Hereinafter, with reference to FIGS. 5 to 10, a garage parking procedure supported by the vehicle periphery monitoring device according to the present embodiment will be described.

図5(a)は、運転者が駐車目標Eを車両30の左側方に確認する車両30の位置を示す。駐車のための車両の運転操作に先立ち、まず駐車目標設定部4によって駐車目標Eが設定される。駐車目標Eの設定については、様々な手法がある。例えば、
(a)駐車支援開始時の車両の停止位置に基づいて車両からの所定位置を駐車目標Eの初期位置として設定するもの、
(b)駐車目標Eの位置を通過した際に、ソナーなどで空き領域を検出して自動認識し、駐車目標Eを設定するもの、
(c)例えば駐車枠線を画像認識して駐車目標Eを設定するもの、
等である。本実施形態においても、これら(a)〜(c)の手法を適宜用いて、駐車目標Eが設定される。
FIG. 5A shows the position of the vehicle 30 where the driver confirms the parking target E on the left side of the vehicle 30. Prior to the driving operation of the vehicle for parking, the parking target E is first set by the parking target setting unit 4. There are various methods for setting the parking target E. For example,
(A) setting a predetermined position from the vehicle as an initial position of the parking target E based on the stop position of the vehicle at the start of parking support;
(B) When passing through the position of the parking target E, an empty area is detected and detected automatically with a sonar or the like, and the parking target E is set.
(C) For example, image recognition of a parking frame line to set a parking target E,
Etc. Also in the present embodiment, the parking target E is set by appropriately using the methods (a) to (c).

こうして駐車目標設定部4において駐車目標Eが設定されると、次に、注意対象設定部5において駐車過程において複数の注意対象8が設定される。本実施形態では、車庫入れ駐車の過程における注意対象8として、4つの注意対象8A,8B,8C,8Dが設定されている。図5〜図10に示す注意対象8の形状は、パイロン状(円錐状)の形状である。なお、注意対象8の形状は特に限定されるものでなく、円柱状、角錐状、角柱状等の形状であってもよい。注意対象8A,8B,8C,8Dの位置は、モニタ20に例えば図5(a)に示す画像等を表示し、適宜微調整するようにしてもよい。   When the parking target E is set in the parking target setting unit 4 in this way, next, the attention target setting unit 5 sets a plurality of attention objects 8 in the parking process. In the present embodiment, four attention objects 8A, 8B, 8C, and 8D are set as the attention objects 8 in the garage parking process. The shape of the attention object 8 shown in FIGS. 5 to 10 is a pylon shape (conical shape). The shape of the attention object 8 is not particularly limited, and may be a columnar shape, a pyramid shape, a prismatic shape, or the like. The positions of the attention objects 8A, 8B, 8C, and 8D may be finely adjusted as appropriate by displaying, for example, the image shown in FIG.

注意対象8Aは、駐車目標Eの側方を前進する際の車両30の前方所定位置である。注意対象8Bは、車両30が駐車される領域を示す駐車目標Eの領域の境界で、駐車目標Eの領域へ車両30が進入する側の外側近傍位置である。注意対象8Cは、車両30が駐車目標Eの領域の中で駐車完了時に車両が到達する位置である駐車目標位置である。注意対象8Dは、駐車目標Eの領域に進入した車両30の傾きを補正するために再度前進する際の車両30の前方所定位置である。   The attention object 8A is a predetermined position in front of the vehicle 30 when moving forward of the parking target E. The attention object 8B is a boundary of the area of the parking target E indicating the area where the vehicle 30 is parked, and is a position near the outside on the side where the vehicle 30 enters the area of the parking target E. The attention object 8C is a parking target position that is a position where the vehicle 30 reaches when the parking of the vehicle 30 is completed in the parking target E area. The attention object 8D is a predetermined position in front of the vehicle 30 when moving forward again to correct the inclination of the vehicle 30 that has entered the area of the parking target E.

駐車目標E及び注意対象8が設定されると、次に、表示画像生成部6において、複数の注意対象8A〜8Dから駐車過程に応じた注意対象が逐次切換えられ、切換えられた注意対象を注視点として中央に位置する表示画像が生成される。図5(c)は、注意対象8Aを注視点として中央に位置させた表示画像であり、図5(e)は、注意対象8Bを注視点として中央に位置させた表示画像であり、図5(g)は、注意対象8Cを注視点として中央に位置させた表示画像である。   When the parking target E and the attention object 8 are set, next, the display image generation unit 6 sequentially switches the attention object according to the parking process from the plurality of attention objects 8A to 8D, and the switched attention object A display image located in the center as a viewpoint is generated. FIG. 5C is a display image in which the attention object 8A is positioned at the center with the gazing point, and FIG. 5E is a display image in which the attention object 8B is positioned in the center with the gazing point. (G) is a display image that is positioned in the center with the attention object 8C as the point of sight.

なお、ここでは、表示画像生成部6により、周辺画像を運転席から見た画像に逐次視点変換して表示画像を生成している。このようにすると、車室内のモニタ20に表示される画像が、運転席から周囲を見た画像に近づけられる。その結果、運転者が違和感なく周辺画像を視認でき、駐車のための運転動作をよりスムーズに行うことができる。   Here, the display image is generated by the display image generation unit 6 by successively converting the viewpoint of the peripheral image into an image viewed from the driver's seat. If it does in this way, the image displayed on the monitor 20 in a vehicle interior will be brought close to the image which looked around from the driver's seat. As a result, the driver can visually recognize the surrounding image without feeling uncomfortable, and the driving operation for parking can be performed more smoothly.

また、半透明画像生成部7において、注視点(注意対象8)と運転席との間に存在する車両30の輪郭線を半透明にした半透明画像35が生成される。半透明画像35においては、車両30の車輪部分はそのまま表示される。表示制御部3は、表示画像生成部6において生成された表示画像に半透明画像35を重畳して、車室内のモニタ20に表示する。図5(d),図5(f),図5(h)は、注意対象8A,8B,8Cをそれぞれ中央に位置させた表示画像に半透明画像35を重畳した画像であり、図5(f)に示すように、車両30の車輪部分は画像に表示される。ここでは、図5(d),図5(f),図5(h)のうち、図5(h)の画像を車室内のモニタ20に表示させる。つまり、表示画像生成部6が、注意対象8A,8B,8C、8Dから図5(a)に示す駐車過程に応じた注意対象として注意対象8Cに切換えて、注意対象8Cを注視点として中央に位置する表示画像を生成し、図5(h)の画像を車室内のモニタ20に表示している。   Further, the translucent image generation unit 7 generates a translucent image 35 in which the outline of the vehicle 30 existing between the gazing point (attention object 8) and the driver's seat is translucent. In the translucent image 35, the wheel portion of the vehicle 30 is displayed as it is. The display control unit 3 superimposes the translucent image 35 on the display image generated by the display image generation unit 6 and displays it on the monitor 20 in the vehicle interior. 5D, FIG. 5F, and FIG. 5H are images in which the translucent image 35 is superimposed on the display image in which the attention objects 8A, 8B, and 8C are respectively positioned in the center. As shown in f), the wheel portion of the vehicle 30 is displayed in the image. Here, among FIG. 5D, FIG. 5F, and FIG. 5H, the image of FIG. 5H is displayed on the monitor 20 in the passenger compartment. That is, the display image generation unit 6 switches from the attention objects 8A, 8B, 8C, and 8D to the attention object 8C as the attention object according to the parking process shown in FIG. A displayed display image is generated, and the image of FIG. 5H is displayed on the monitor 20 in the passenger compartment.

半透明画像生成部7及び表示制御部2により、図5(d),図5(f),図5(h)のように表示画像に半透明画像35が重畳されて表示されると、画像の中央に位置する注意対象8と自車両との相対的な位置関係が容易に把握できる。   When the translucent image 35 is superimposed on the display image and displayed by the translucent image generation unit 7 and the display control unit 2 as shown in FIG. 5D, FIG. 5F, and FIG. The relative positional relationship between the attention object 8 located at the center of the vehicle and the host vehicle can be easily grasped.

図6(a)は、運転者が図5(a)の位置の車両30を斜め前方へ前進させる過程を示す。ここでは、表示画像生成部6は、注意対象を切換えずに注意対象8Cを注視点として中央に位置する表示画像を生成し、図6(b)の画像を車室内のモニタ20に表示する。   FIG. 6A shows a process in which the driver advances the vehicle 30 at the position shown in FIG. Here, the display image generation unit 6 generates a display image positioned in the center with the attention object 8C as the gazing point without switching the attention object, and displays the image of FIG. 6B on the monitor 20 in the vehicle interior.

図7(a)は、後退させて車庫入れ駐車を行うために適した位置に車両30を停止させる過程を示す。この際、好適には車両30の操舵角が中立位置に戻されているとよい。ここでは、表示画像生成部6が、図7(a)に示す駐車過程に応じた注意対象として注意対象8Bに切換えて、注意対象8Bを注視点として中央に位置する表示画像を生成し、図7(b)の画像を車室内のモニタ20に表示する。   FIG. 7A shows a process in which the vehicle 30 is stopped at a position suitable for retreating and parking in the garage. At this time, the steering angle of the vehicle 30 is preferably returned to the neutral position. Here, the display image generation unit 6 switches to the attention object 8B as the attention object according to the parking process shown in FIG. 7A, generates a display image located in the center with the attention object 8B as the gazing point, The image 7 (b) is displayed on the monitor 20 in the passenger compartment.

図8(a)は、運転者がシフトレバー25をリバースに変更し、ブレーキペダル27を緩めて、車両30を操舵に伴って後退させる過程を示す。ここでは、表示画像生成部6が、引き続き注意対象8Bを注視点として中央に位置する表示画像を生成して、図8(b)の画像を車室内のモニタ20に表示する。   FIG. 8A shows a process in which the driver changes the shift lever 25 to reverse, loosens the brake pedal 27, and causes the vehicle 30 to move backward with steering. Here, the display image generation unit 6 continues to generate a display image located in the center with the attention object 8B as the gazing point, and displays the image of FIG. 8B on the monitor 20 in the vehicle interior.

図9(a)は、車両30の旋回が完了し、それ以降は直進により後退する位置に達して操舵角が再び中立位置へと戻される過程を示す。ここでは、表示画像生成部6が、図9(a)に示す駐車過程に応じた注意対象として再び注意対象8Cに切換えて、注意対象8Cを注視点として中央に位置する表示画像を生成し、図9(b)の画像を車室内のモニタ20に表示する。   FIG. 9A shows a process in which the turning of the vehicle 30 is completed, and after that, the vehicle 30 reaches a position where the vehicle 30 moves backward by going straight and the steering angle is returned to the neutral position again. Here, the display image generation unit 6 switches again to the attention object 8C as the attention object according to the parking process shown in FIG. 9A, and generates a display image located in the center with the attention object 8C as the gazing point. The image shown in FIG. 9B is displayed on the monitor 20 in the passenger compartment.

図10(a)は、車両30を駐車目標位置まで直進後退させる過程を示す。運転者はブレーキペダル27を操作して車両30を駐車目標位置に停止させる。ここでは、表示画像生成部6が、引き続き注意対象8Cを注視点として中央に位置する表示画像を生成して、図10(b)の画像を車室内のモニタ20に表示する。以上により、車庫入れ駐車が完了する。   FIG. 10A shows a process in which the vehicle 30 is moved straight back to the parking target position. The driver operates the brake pedal 27 to stop the vehicle 30 at the parking target position. Here, the display image generation unit 6 continues to generate a display image located in the center with the attention object 8C as the gazing point, and displays the image of FIG. 10B on the monitor 20 in the vehicle interior. Thus, garage parking is completed.

要するに、車庫入れ駐車の過程において、図5(a)、図6(a)は、「駐車目標位置を確認しつつ運転する過程」であり、図7(a)、図8(a)は、「自車両と障害物(駐車車両の前側部)との距離を確認しつつ運転する過程」であり、図9(a)、図10(a)は、「車両の傾きと停止位置を確認しつつ運転する過程」である。そこで、車両30のモニタ20には、「駐車目標位置を確認しつつ運転する過程」では注意対象8Cを中央に位置させた画像を表示し、「自車両と障害物との距離を確認しつつ運転する過程」では注意対象8Bを中央に位置させた画像を表示し、「車両の傾きと停止位置を確認しつつ運転する過程」では注意対象8Cを中央に位置させた画像を表示している。   In short, in the process of parking in the garage, FIGS. 5 (a) and 6 (a) are “a process of driving while confirming the parking target position”, and FIGS. 7 (a) and 8 (a) are “The process of driving while checking the distance between the host vehicle and the obstacle (the front side of the parked vehicle)”. FIGS. 9 (a) and 10 (a) show “Checking the vehicle tilt and stop position. While driving. " Therefore, the monitor 20 of the vehicle 30 displays an image in which the attention object 8C is positioned at the center in the “process of driving while checking the parking target position”, and “checking the distance between the host vehicle and the obstacle” In the “driving process”, an image with the attention object 8B positioned at the center is displayed, and in the “process for driving while confirming the tilt and stop position of the vehicle”, an image with the attention object 8C positioned in the center is displayed. .

このように、車庫入れ駐車の過程において、設定された複数の注意対象から駐車過程に応じた注意対象が注視点として逐次切換えられ、当該注視点が中央に位置する表示画像が車室内の表示装置に表示されると、運転者は、わき見をせずに車室内の表示装置を見るだけで効率的に駐車過程に応じた注意対象を確認して、駐車を行うことができる。また、表示画面の中央に注意対象が表示されると、画面内で注意対象を直視するための時間が短くなり、運転者自身が主体的に運転を行い、目視をベースとする安全な運転行動に誘導することができる。また、注意対象が自動的に変化したことを認識することで、駐車過程が順調に進んでいることが確認でき、運転者への運転行動のフィードバックとして活用することもできる。   Thus, in the process of parking in the garage, the attention object corresponding to the parking process is sequentially switched as a gazing point from the set caution objects, and the display image in which the gazing point is located in the center is displayed in the vehicle interior. When displayed, the driver can efficiently check the attention object according to the parking process and perform the parking simply by looking at the display device in the passenger compartment without looking aside. In addition, when the attention object is displayed in the center of the display screen, the time for directly looking at the attention object in the screen is shortened, and the driver himself / herself drives independently, and safe driving behavior based on visual observation. Can be guided to. Further, by recognizing that the attention object has automatically changed, it can be confirmed that the parking process is proceeding smoothly, and can be used as feedback of driving behavior to the driver.

なお、上記の車庫入れ駐車においては、駐車過程に応じて注意対象8B及び8Cのみを注視点として中央に位置させた画像を表示する構成を示したが、駐車過程に応じて注意対象8A,8Dを注視点として中央に位置させた画像を表示させる構成にしてもよい。   In the garage parking described above, the configuration in which only the attention objects 8B and 8C are displayed at the center with the attention points 8B and 8C being displayed according to the parking process is shown. However, the attention objects 8A and 8D are displayed according to the parking process. A configuration may be adopted in which an image positioned in the center is displayed with the point of interest as a gazing point.

〔他の実施形態〕
〔1〕
上記の実施形態では、表示画像生成部6が、駐車過程に応じて注意対象8を切換える場合に、当該注意対象8を注視点として中央に位置させた表示画像をその都度作成する構成を示したが、これに代えて、表示画像生成部6において、設定された複数の注意対象毎に当該注意対象8を中央に位置させる画像を継続して作成するよう構成してもよい。こうすると、駐車過程に応じて現在の注意対象8を別の注意対象8に切換える場合には、モニタ20の表示画像を切換えるだけで別の注意対象8が中央に位置する画像が表示される。つまり、注意対象8が切換わる度に別の注意対象8を注視点とした表示画像を作成する処理が不要となるので、モニタ20に表示される表示画像の切換えがスムーズとなる。
[Other Embodiments]
[1]
In the above embodiment, when the display image generation unit 6 switches the attention object 8 according to the parking process, a configuration is shown in which a display image is created each time the attention object 8 is positioned at the center with the attention object 8 as the point of sight. However, instead of this, the display image generation unit 6 may be configured to continuously create an image in which the attention object 8 is positioned at the center for each of the set plurality of attention objects. In this way, when the current attention object 8 is switched to another attention object 8 according to the parking process, an image in which the other attention object 8 is located at the center is displayed only by switching the display image of the monitor 20. That is, every time the attention object 8 is switched, it is not necessary to create a display image with another attention object 8 as the gazing point, so that the display image displayed on the monitor 20 can be switched smoothly.

〔2〕
上記の実施形態では、表示される周辺画像はカメラ12F,12R,12L,12Rの位置から対象物を写したアングルであり、運転手が後方を振り向く等して直接見た画像とほぼ等価である。したがって、運転者が運転席の位置からルームミラー等で該当部分を視認した場合のアングルとは異なっている。そこで、上記の実施形態の周辺画像に代えて、表示画像について視点変換処理を行い、周辺画像を鏡像化して表示するようにしてもよい。
[2]
In the above embodiment, the displayed peripheral image is an angle obtained by capturing an object from the positions of the cameras 12F, 12R, 12L, and 12R, and is substantially equivalent to an image directly viewed by the driver turning around. . Therefore, the angle is different from the angle when the driver visually recognizes the corresponding part with the rearview mirror from the position of the driver's seat. Therefore, instead of the peripheral image of the above-described embodiment, a viewpoint conversion process may be performed on the display image to display the peripheral image as a mirror image.

〔3〕
上記の実施形態を参照すれば、自動運転操作を伴う車庫入れ駐車の場合や、縦列駐車の場合にも、本発明が適用可能であることが容易に理解できる。縦列駐車の場合の注意対象についても車庫入れ駐車の場合と同様に、駐車目標Eの側方を前進する際の車両30の前方所定位置、駐車目標Eの領域の境界で、駐車目標Eの領域へ車両30が進入する側の外側近傍位置、車両30が駐車目標Eの領域の中で駐車完了時に車両が到達する位置である駐車目標位置等を設定すればよい。従って、車両の運転操作を実施する主体(運転者又は駐車支援装置)や、駐車形態(車庫入れ駐車又は縦列駐車)の組み合わせは、上記の実施形態に限定されるものではない。
[3]
Referring to the above embodiment, it can be easily understood that the present invention can be applied to garage parking with automatic driving operation and parallel parking. As with the case of parking in the garage, the target area for the parking target E at the boundary between the predetermined position in front of the vehicle 30 and the area for the parking target E when moving forward of the side of the parking target E is the same as in the case of garage parking. A position near the outside on the side where the vehicle 30 enters, a parking target position that is a position where the vehicle reaches when the vehicle 30 is parked within the area of the parking target E, and the like may be set. Therefore, the combination of the subject (driver or parking support device) that performs the driving operation of the vehicle and the parking mode (garage parking or parallel parking) is not limited to the above embodiment.

〔4〕
上記の実施形態においては、駐車過程に応じて切換わる注意対象8が予め設定された構成を例示したが、注意対象8を切換えるタイミングや注意対象8を切換える順序等を設定変更できるよう構成してもよい。また、駐車過程において手動で注視点とする注意対象8を切換えて表示させるよう構成してもよい。また、予め設定される注意対象8を追加したり削除したりできるよう構成してもよい。
[4]
In the above embodiment, the configuration in which the attention object 8 to be switched according to the parking process is set in advance is exemplified. However, the timing for switching the attention object 8 and the order of switching the attention object 8 can be configured to be changed. Also good. Moreover, you may comprise so that the attention object 8 made into a gaze point manually may be switched and displayed in a parking process. Moreover, you may comprise so that the attention object 8 set beforehand can be added or deleted.

〔5〕
上記の実施形態においては、車両周辺を撮影する撮影装置12として、車両30の前後左右にカメラ12F,12B,12L,12Rを配置したが、車両30の前方位置に注意対象を設定しない場合には車両前部にカメラ12Fを配置しなくてもよい。
[5]
In the above embodiment, the cameras 12F, 12B, 12L, and 12R are arranged on the front, rear, left, and right sides of the vehicle 30 as the imaging device 12 that captures the surroundings of the vehicle. The camera 12F need not be arranged in the front part of the vehicle.

〔6〕
上記の実施形態においては、車両30の輪郭線を半透明にしたが、透明でない線で記載することも可能である。
[6]
In the above embodiment, the outline of the vehicle 30 is made translucent, but it can also be described by a non-transparent line.

以上、説明したように、本発明によって、高い利便性を有して駐車支援を受けることができる車両周辺監視装置を提供することができる。   As described above, according to the present invention, a vehicle periphery monitoring device that can receive parking assistance with high convenience can be provided.

2 画像取得部
3 表示制御部
4 駐車目標設定部
5 注意対象設定部
6 表示画像生成部
7 半透明画像生成部
8A,8B,8C,8D 注意対象
12F,12B,12L,12R カメラ(撮影装置)
20 モニタ(表示装置)
30 車両
35 半透明画像
2 Image acquisition unit 3 Display control unit 4 Parking target setting unit 5 Attention target setting unit 6 Display image generation unit 7 Translucent image generation units 8A, 8B, 8C, 8D Attention target 12F, 12B, 12L, 12R Camera (photographing device)
20 Monitor (display device)
30 Vehicle 35 Translucent image

Claims (3)

車両を駐車する際に車両周辺を監視する車両周辺監視装置であって、
車両に搭載された撮影装置により撮影された前記車両の周辺画像を取得する画像取得部と、
駐車過程において複数の注意対象を前記周辺画像に設定する注意対象設定部と、
前記複数の注意対象から駐車過程に応じた注意対象を逐次切換えて注視点とし、当該注視点を中央に位置させる表示画像を生成する表示画像生成部と、
前記注視点と運転者との間に存在する前記車両の少なくとも輪郭線を半透明画像として生成する半透明画像生成部と、
前記表示画像に前記半透明画像を重畳させて車室内の表示装置に表示させる表示制御部と、を備える車両周辺監視装置。
A vehicle periphery monitoring device that monitors the periphery of a vehicle when parking the vehicle,
An image acquisition unit for acquiring a peripheral image of the vehicle imaged by an imaging device mounted on the vehicle;
An attention object setting unit for setting a plurality of attention objects in the peripheral image in the parking process;
A display image generating unit that generates a display image that sequentially switches the attention object according to the parking process from the plurality of attention objects to be a gazing point, and positions the gazing point in the center;
A translucent image generating unit that generates at least an outline of the vehicle existing between the gaze point and the driver as a translucent image;
A vehicle periphery monitoring device comprising: a display control unit that superimposes the translucent image on the display image and displays the superimposed image on a display device in a vehicle interior.
前記表示画像生成部が、前記周辺画像を運転席から見た画像に視点変換して表示画像を生成する請求項1記載の車両周辺監視装置。   The vehicle periphery monitoring device according to claim 1, wherein the display image generation unit generates a display image by converting the viewpoint of the periphery image into an image viewed from a driver's seat. 前記注意対象設定部において、前記注意対象を、
車両が駐車される領域を示す駐車目標領域の中で駐車完了時に前記車両が到達する位置である駐車目標位置と、
前記駐車目標領域の境界で、前記駐車目標領域へ前記車両が進入する側の外側近傍位置に設定する請求項1又は2記載の車両周辺監視装置。
In the attention object setting unit, the attention object is
A parking target position which is a position where the vehicle reaches when parking is completed in a parking target area indicating an area where the vehicle is parked;
The vehicle periphery monitoring device according to claim 1, wherein the vehicle periphery monitoring device is set at a position near the outside on the side where the vehicle enters the parking target area at a boundary of the parking target area.
JP2010051847A 2010-03-09 2010-03-09 Vehicle periphery monitoring device Expired - Fee Related JP5605605B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010051847A JP5605605B2 (en) 2010-03-09 2010-03-09 Vehicle periphery monitoring device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010051847A JP5605605B2 (en) 2010-03-09 2010-03-09 Vehicle periphery monitoring device

Publications (2)

Publication Number Publication Date
JP2011188275A true JP2011188275A (en) 2011-09-22
JP5605605B2 JP5605605B2 (en) 2014-10-15

Family

ID=44794015

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010051847A Expired - Fee Related JP5605605B2 (en) 2010-03-09 2010-03-09 Vehicle periphery monitoring device

Country Status (1)

Country Link
JP (1) JP5605605B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017076275A (en) * 2015-10-15 2017-04-20 株式会社日本自動車部品総合研究所 Parking section recognition device and parking section recognition method
US10166922B2 (en) 2014-04-14 2019-01-01 Toyota Jidosha Kabushiki Kaisha On-vehicle image display device, on-vehicle image display method for vehicle, and on-vehicle image setting device
JP2022009331A (en) * 2017-05-11 2022-01-14 株式会社アイシン Periphery monitoring device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002109697A (en) * 2000-10-02 2002-04-12 Matsushita Electric Ind Co Ltd Drive support device
JP2006074105A (en) * 2004-08-31 2006-03-16 Equos Research Co Ltd Image display apparatus for vehicle periphery
JP2007269262A (en) * 2006-03-31 2007-10-18 Toyota Motor Corp Parking support device
JP2009126353A (en) * 2007-11-22 2009-06-11 Aisin Seiki Co Ltd Parking support device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002109697A (en) * 2000-10-02 2002-04-12 Matsushita Electric Ind Co Ltd Drive support device
JP2006074105A (en) * 2004-08-31 2006-03-16 Equos Research Co Ltd Image display apparatus for vehicle periphery
JP2007269262A (en) * 2006-03-31 2007-10-18 Toyota Motor Corp Parking support device
JP2009126353A (en) * 2007-11-22 2009-06-11 Aisin Seiki Co Ltd Parking support device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10166922B2 (en) 2014-04-14 2019-01-01 Toyota Jidosha Kabushiki Kaisha On-vehicle image display device, on-vehicle image display method for vehicle, and on-vehicle image setting device
DE112015001804B4 (en) * 2014-04-14 2021-05-20 Toyota Jidosha Kabushiki Kaisha On-board image display device, on-board image display method for vehicle, and on-board image setting device
JP2017076275A (en) * 2015-10-15 2017-04-20 株式会社日本自動車部品総合研究所 Parking section recognition device and parking section recognition method
JP2022009331A (en) * 2017-05-11 2022-01-14 株式会社アイシン Periphery monitoring device
JP7259914B2 (en) 2017-05-11 2023-04-18 株式会社アイシン Perimeter monitoring device

Also Published As

Publication number Publication date
JP5605605B2 (en) 2014-10-15

Similar Documents

Publication Publication Date Title
JP5003946B2 (en) Parking assistance device
US10131277B2 (en) Surroundings monitoring apparatus
US8599043B2 (en) Parking assist apparatus
JP5429514B2 (en) Parking assistance device
US20160075377A1 (en) Parking assist system, parking assist method and parking assist control program
WO2009136559A1 (en) Vehicle peripheral display device
EP2990265A1 (en) Vehicle control apparatus
JP4946631B2 (en) Start support device, display device
JP2010202010A (en) Parking support device
JP2008162426A (en) Parking assist device
JP4623396B2 (en) Vehicle periphery display device
JP5966394B2 (en) Parking assistance device
JP5182137B2 (en) Vehicle periphery display device
US20190244324A1 (en) Display control apparatus
US20200346690A1 (en) Parking assistance device
WO2018159017A1 (en) Vehicle display control device, vehicle display system, vehicle display control method and program
US11477373B2 (en) Periphery monitoring device
CN114179725B (en) Display device for vehicle
CN107925746A (en) Periphery monitoring apparatus
JP2011065520A (en) Driving support device
JP2017208690A (en) Image creation device, image display system, and image display method
JP2009171129A (en) Parking support device for vehicle and image display method
JP5445852B2 (en) Parking assistance device
JP5605605B2 (en) Vehicle periphery monitoring device
JP2014004931A (en) Parking support device, parking support method, and parking support program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130212

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131108

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131128

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140731

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140813

R151 Written notification of patent or utility model registration

Ref document number: 5605605

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees