JP2012010002A - Driving support apparatus - Google Patents

Driving support apparatus Download PDF

Info

Publication number
JP2012010002A
JP2012010002A JP2010142554A JP2010142554A JP2012010002A JP 2012010002 A JP2012010002 A JP 2012010002A JP 2010142554 A JP2010142554 A JP 2010142554A JP 2010142554 A JP2010142554 A JP 2010142554A JP 2012010002 A JP2012010002 A JP 2012010002A
Authority
JP
Japan
Prior art keywords
image
rear side
vehicle
displayed
driving support
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010142554A
Other languages
Japanese (ja)
Inventor
Kyosuke Kono
恭佑 河野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu General Ltd
Original Assignee
Fujitsu General Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu General Ltd filed Critical Fujitsu General Ltd
Priority to JP2010142554A priority Critical patent/JP2012010002A/en
Publication of JP2012010002A publication Critical patent/JP2012010002A/en
Pending legal-status Critical Current

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a driving support apparatus which displays driving support images which make a driver to feel good to use, by using an image of the surrounding of a vehicle captured by imaging means fixed to a predetermined position of the vehicle.SOLUTION: A rear image, a right/rear side image, and a left/rear side image are created by cutting off portions corresponding to the rear, right/rear side, and left/rear side portions of the vehicle from the rear surrounding image of the vehicle captured by imaging means 1. On the display screen of display means 3, the right/rear side image and the left/rear side image are displayed from side to side and both the right/rear side image and the left/rear side image and the rear image are displayed above and below. Consequently, the surrounding of the rear of the vehicle can be displayed wide and the right/rear side image and the left/rear side image are displayed without being compressed unnecessarily, thereby providing a driving support image which makes the driver to feel good to use.

Description

本発明は、車両の運転を支援する運転支援装置に係わり、特に、車両に固定された撮像手段により車両周囲を撮像した画像を使用して、運転支援画像を車内の表示手段に表示する運転支援装置に関する。   The present invention relates to a driving support device that supports driving of a vehicle, and in particular, driving support that displays a driving support image on a display unit in a vehicle using an image obtained by imaging the periphery of the vehicle by an imaging unit fixed to the vehicle. Relates to the device.

従来、運転者が車両を運転する際に行う車両周囲の確認を支援する装置として、車両の後部等、所定の位置に設置された撮像手段で車両周囲を撮像し、撮像した画像を車内に設置された表示手段に表示する運転支援装置がある。この運転支援装置を使用すれば、例えば、運転者が駐車場等で車両をバックさせて駐車を行なう際に、車両後方に障害物や人が存在するか否かを確認しやすくなる。   Conventionally, as a device for assisting a driver to check the surroundings of a vehicle when driving the vehicle, the surroundings of the vehicle are imaged by an imaging means installed at a predetermined position such as a rear portion of the vehicle, and the captured image is installed in the vehicle. There is a driving support device for displaying on the displayed display means. If this driving support device is used, for example, when the driver parks the vehicle back in a parking lot or the like, it is easy to check whether there are obstacles or people behind the vehicle.

このような運転支援装置では、車内に設置された表示手段に表示する画像によって、運転者による車両周囲の確認のしやすさが左右されるため、撮像手段で撮像した画像を使用して、視点変換や画像処理を行い、より運転者にとって確認のしやすい画像を表示手段に表示する様々な運転支援装置が提案されている。   In such a driving support apparatus, since the ease of confirming the surroundings of the vehicle by the driver is affected by the image displayed on the display unit installed in the vehicle, the viewpoint captured using the image captured by the imaging unit is used. Various driving support devices that perform conversion and image processing and display on the display means an image that is easier for the driver to confirm are proposed.

例えば、特許文献1では、車両後部の所定位置に設置された撮像手段である広角リアカメラと、車内に設置され広角リアカメラで撮像した画像を表示するための表示手段とを有する運転支援装置であって、車両後方および車両後側方を広角リアカメラで撮像した広角画像の一部を切り出して、車両の後方画像と、右後側方画像と、左後側方画像とを得ている。そして、後方画像を表示手段の表示領域の中央部に表示すると共に、右後側方画像を後方画像の右側に、左後側方画像を後方画像の左側に、それぞれ並べて表示領域に表示することによって、運転支援画像を運転者に提供する運転支援装置が提案されている。   For example, in Patent Document 1, a driving support apparatus having a wide-angle rear camera that is an imaging unit installed at a predetermined position in the rear part of a vehicle and a display unit that displays an image captured by the wide-angle rear camera installed in a vehicle. Therefore, a part of the wide-angle image obtained by capturing the rear side of the vehicle and the rear side of the vehicle with the wide-angle rear camera is cut out to obtain the rear image of the vehicle, the right rear side image, and the left rear side image. The rear image is displayed in the center of the display area of the display means, and the right rear side image is displayed on the right side of the rear image, and the left rear side image is displayed side by side on the left side of the rear image. Has proposed a driving support device that provides a driver with a driving support image.

この運転支援装置が提供する運転支援画像において、後方画像は、撮像した広角画像の一部を切り出した画像データに対し、車両の運転者がルームミラーで視認する車両後方のミラー反射像に対応するサイズとなるよう、座標変換等の画像処理を行うことにより生成している。また、車両の右後側方画像および左後側方画像については、撮像した広角画像の一部を切り出した画像データに対し、表示領域での表示スペース(中央部に表示されている後方画像の左右のスペース)に収まるよう、画像圧縮等の画像処理を行うことにより生成している。   In the driving support image provided by the driving support device, the rear image corresponds to a mirror reflection image of the rear of the vehicle that the driver of the vehicle visually recognizes with the room mirror with respect to image data obtained by cutting out a part of the captured wide-angle image. It is generated by performing image processing such as coordinate transformation so as to be the size. In addition, for the right rear side image and the left rear side image of the vehicle, the display space in the display area (the rear image displayed in the central portion is compared with the image data obtained by cutting out a part of the captured wide-angle image. It is generated by performing image processing such as image compression so as to fit in the left and right spaces.

以上のように生成した運転支援画像は、限られた表示手段の表示領域の中で、車両の後方および後側方の広い範囲の画像を効率よく表示することができ、後方画像に関しては、運転者がルームミラーで視認する車両後方のミラー反射像に対応するサイズとすることにより、運転者が正しい距離感で画像を把握できるように表示することができる。   The driving support image generated as described above can efficiently display a wide range of images in the rear and rear sides of the vehicle within the limited display area of the display means. By making the size corresponding to the mirror reflection image behind the vehicle that the driver visually recognizes with the room mirror, the image can be displayed so that the driver can grasp the image with a correct sense of distance.

しかし、特許文献1に記載された方法では、以下のような問題があった。運転者が、特許文献1に記載された運転支援装置を使用する場合として、車両をバックで駐車スペースに駐車する場合が考えられる。運転者は、車両を駐車スペースに導入したり、車両を駐車スペースに収める(車両を駐車スペースに位置決めする)際は、主に表示手段の表示領域の中央部に表示されている後方画像を見て、これらの運転動作を行う。また、運転者は、駐車運転中に車両の左右方向から歩行者や他の車両等が接近してきたか否かを確認する必要があり、その際運転者は、運転支援画像の右後側方画像および左後側方画像で歩行者や他の車両等の接近の確認を行う。   However, the method described in Patent Document 1 has the following problems. As a case where the driver uses the driving support device described in Patent Document 1, a case where the vehicle is parked in the parking space in the back can be considered. When the driver introduces the vehicle into the parking space or places the vehicle in the parking space (positions the vehicle in the parking space), the driver mainly looks at the rear image displayed at the center of the display area of the display means. These operations are performed. In addition, the driver needs to confirm whether or not a pedestrian or another vehicle is approaching from the left-right direction of the vehicle during parking driving, and the driver is required to check the right rear side image of the driving support image. And the approach of a pedestrian or another vehicle etc. is confirmed in the left rear side image.

しかし、後方画像の左右に表示されている右後側方画像および左後側方画像については、表示領域に収まるよう画像圧縮を行っているため、運転者が肉眼で車両の右後側方および左後側方を見た場合に比べて画像が歪んで表示されることとなる。従って、運転者が右後側方画像および左後側方画像を見て、駐車スペースの左右方向から歩行者や他の車両の接近を確認しようとしても、右後側方画像および左後側方画像に表示される歩行者や他の車両等との距離感や、駐車スペースへ接近する速度が把握しづらく、運転者にとって使用感の悪いものとなっていた。   However, the right rear side image and the left rear side image displayed on the left and right of the rear image are compressed so that they fit within the display area. As compared with the case where the left rear side is viewed, the image is displayed with distortion. Therefore, even if the driver looks at the right rear side image and the left rear side image and confirms the approach of a pedestrian or another vehicle from the left and right direction of the parking space, the right rear side image and the left rear side image It has been difficult for the driver to feel the sense of distance from the pedestrians and other vehicles displayed in the image and the speed of approaching the parking space, and the driver feels uncomfortable.

特開2009−81664号公報(第10〜11頁、第5図)JP 2009-81664 A (pages 10 to 11, FIG. 5)

本発明は以上述べた問題点を解決し、車両の所定位置に固定された撮像手段により車両周囲を撮像した画像を使用して、運転者にとってより使用感の良い運転支援画像を表示する運転支援装置を提供することを目的とする。   The present invention solves the above-described problems, and uses the image obtained by imaging the periphery of the vehicle by the imaging means fixed at a predetermined position of the vehicle to display a driving assistance image that is more user-friendly for the driver. An object is to provide an apparatus.

本発明は上述の課題を解決するものであって、本発明の運転支援装置は、車両後部(または前部、以下「または」は省略)の所定位置に設置された少なくとも1台の撮像手段と、撮像手段で撮像した車両の後方周囲(前方周囲)の画像に対し画像処理を行なって運転支援画像を生成する画像処理手段と、画像処理手段から出力された運転支援画像を表示する表示手段とを有するものであり、画像処理手段は、撮像手段で車両の後方周囲(前方周囲)を撮像した後方周囲画像(前方周囲画像)を取り込んで、後方周囲画像(前方周囲画像)の車両の後方(前方)に対応する領域を後方切出領域(前方切出領域)と設定すると共に、後方周囲画像(前方周囲画像)の車両の右後側方(右前側方)に対応する領域を右後側方切出領域(右前側方切出領域)と、後方周囲画像(前方周囲画像)の車両の左後側方(左前側方)に対応する領域を左後側方切出領域(左前側方切出領域)とそれぞれ設定する。   The present invention solves the above-mentioned problem, and the driving support device of the present invention includes at least one imaging unit installed at a predetermined position in the rear part of the vehicle (or the front part, hereinafter “or” is omitted). Image processing means for generating a driving support image by performing image processing on an image of the rear periphery (front periphery) of the vehicle imaged by the imaging means, and display means for displaying the driving support image output from the image processing means The image processing means captures the rear surrounding image (front surrounding image) obtained by imaging the rear periphery (front surrounding) of the vehicle with the imaging means, and the rear surrounding image (front surrounding image) behind the vehicle (front surrounding image) The area corresponding to the front) is set as the rear cutout area (front cutout area), and the area corresponding to the right rear side (right front side) of the vehicle in the rear surrounding image (front surrounding image) is set to the right rear side. Side cut out area (Right front side cut out And frequency), it sets the left rear side of the vehicle rear surrounding image (front periphery image) (left rear side of the region corresponding to the left side) cut region (left side segment region), respectively.

そして、画像処理手段は、後方切出領域(前方切出領域)で後方周囲画像(前方周囲画像)から切り出した画像から後方画像(前方画像)を生成すると共に、右後側方切出領域(右前側方切出領域)で後方周囲画像(前方周囲画像)から切り出した画像から右後側方画像(右前側方画像)と、左後側方切出領域(左前側方切出領域)で後方周囲画像(前方周囲画像)から切り出した画像から左後側方画像(左前側方画像)とをそれぞれ生成し、運転支援画像を表示手段に表示する際に、後方画像(前方画像)は、後方画像の中心を軸として左右を反転させる(前方画像はそのままとする)とともに、右後側方画像(右前側方画像)は、右後側方画像の中心を軸として左右を反転させて(右前側方画像はそのままとする)表示手段の右側に、左後側方画像(左前側方画像)は、左後側方画像の中心を軸として左右を反転させて(左前側方画像はそのままとする)表示手段の左側に、並べて表示されるように画面合成し、後方画像(前方画像)と右後側方画像(右前側方画像)および左後側方画像(左前側方画像)とを上下に表示するものである。   Then, the image processing means generates a rear image (front image) from an image cut out from the rear surrounding image (front surrounding image) in the rear cutting region (front cutting region), and also outputs a right rear side cutting region ( Right rear side image (right front side image) and right rear side image (right front side image) and left rear side region (left front side cutout region) When the left rear side image (left front side image) is generated from the image cut out from the rear surrounding image (front surrounding image) and the driving support image is displayed on the display means, the rear image (front image) is The right and left side images (right front and side images) are reversed left and right around the center of the right rear side image (the left image is left as it is) with the center of the rear image as the axis (the front image remains unchanged) ( (Leave the right front side image as it is) The side image (left front side image) is displayed on the left side of the display means with the left and right sides reversed (with the left front side image intact) with the center of the left rear side image as the axis. The rear image (front image), the right rear side image (right front side image), and the left rear side image (left front side image) are displayed vertically.

また、本発明の運転支援装置においては、後方切出領域(前方切出領域)は拡大もしくは縮小することができ、拡大もしくは縮小した後方切出領域(前方切出領域)で後方周囲画像(前方周囲画像)から切り出した画像から生成した後方画像(前方画像)を表示手段に表示する際に、拡大もしくは縮小した後方切出領域(前方切出領域)に含まれる画像が過不足なく表示されるよう画像処理を行うものである。さらには、後方切出領域(前方切出領域)を拡大した際に、右後側方切出領域(右前側方切出領域)および左後側方切出領域(左前側方切出領域)と重複する画像については、後方画像(前方画像)と右後側方画像(右前側方画像)もしくは左後側方画像(左前側方画像)の両方に表示されるものである。   In the driving support device of the present invention, the rear cut-out area (front cut-out area) can be enlarged or reduced, and the rear surrounding image (the front cut-out area) is enlarged or reduced in the rear cut-out area (front cut-out area). When the rear image (front image) generated from the image cut out from the surrounding image) is displayed on the display means, the image included in the rear cut area (front cut area) enlarged or reduced is displayed without excess or deficiency. Image processing is performed. Furthermore, when the rear cutout area (front cutout area) is enlarged, the right rear side cutout area (right front side cutout area) and the left rear side cutout area (left front side cutout area) The images that overlap with are displayed in both the rear image (front image) and the right rear side image (right front side image) or the left rear side image (left front side image).

本発明の運転支援装置は、撮像手段で撮像した車両の後方周囲画像(前方周囲画像)から、車両の後方(前方)と右後側方(右前側方)および左後側方(左前側方)に対応する部分を切り取って、後方画像(前方画像)と右後側方画像(右前側方画像)と左後側方画像(左前側方画像)とを作成し、表示手段の表示画面に、右後側方画像(右前側方画像)は表示手段の右側に、左後側方画像(左前側方画像)は表示手段の左側になるように並べて表示し、かつ、これらと後方画像(前方画像)とを上下に並べて表示している。従って、車両後方周囲(車両前方周囲)を広く表示できるため、運転者にとって使用感の良い運転支援画像を提供できる。   The driving support device according to the present invention is based on the rear surrounding image (front surrounding image) of the vehicle imaged by the imaging means, the rear (front) of the vehicle, the right rear side (right front side), and the left rear side (left front side). ) To create a rear image (front image), a right rear side image (right front side image), and a left rear side image (left front side image) on the display screen of the display means. The right rear side image (right front side image) is displayed on the right side of the display means, and the left rear side image (left front side image) is displayed side by side so as to be on the left side of the display means. Front image) are displayed side by side. Accordingly, since the vehicle rear periphery (vehicle front periphery) can be displayed widely, a driving support image that is easy to use for the driver can be provided.

また、後方切出領域(前方切出領域)の大きさを変更した際に、後方切出領域(前方切出領域)に含まれる表示内容が過不足なく表示されるよう画像処理を行って後方画像(前方画像)を生成しているので、表示手段の限られた表示領域の中でも、運転者が確認したいと考えている表示内容を漏れなく表示することができる。さらには、後方切出領域(前方切出領域)を拡大した際に、右後側方切出領域(右前側方切出領域)および左後側方切出領域(左前側方切出領域)と重複する表示内容については、後方画像(前方画像)と右後側方画像(右前側方画像)もしくは左後側方画像(左前側方画像)の両方に表示するので、車両後方の左右方向から接近してくる歩行者や車両等との距離感や、歩行者や車両等の接近速度をより正確に把握することができる。   Also, when the size of the rear cutout area (front cutout area) is changed, image processing is performed so that the display content included in the rear cutout area (front cutout area) is displayed without excess or deficiency. Since the image (front image) is generated, the display contents that the driver wants to confirm can be displayed without omission within the limited display area of the display means. Furthermore, when the rear cutout area (front cutout area) is enlarged, the right rear side cutout area (right front side cutout area) and the left rear side cutout area (left front side cutout area) The display content that overlaps is displayed in both the rear image (front image) and the right rear side image (right front side image) or the left rear side image (left front side image). It is possible to more accurately grasp the sense of distance from pedestrians and vehicles approaching from the vehicle and the approach speed of pedestrians and vehicles.

本発明の実施例である運転支援装置の構成ブロック図である。1 is a block diagram illustrating a configuration of a driving support apparatus according to an embodiment of the present invention. 本発明の実施例における、後方周囲画像の撮像を説明する図であり、(A)は車両を側方から見た場合を、(B)は車両を上方から見た場合を示している。It is a figure explaining the imaging of a back circumference image in the example of the present invention, (A) shows the case where a vehicle is seen from the side, and (B) shows the case where the vehicle is seen from the upper part. 本発明の実施例における、後方周囲画像を説明する図である。It is a figure explaining the back periphery image in the Example of this invention. 本発明の実施例における、運転支援画面を説明する図であり、(A)はある切出角度での後方周囲画像を、(B)は(A)から得られる表示画像を示している。It is a figure explaining the driving assistance screen in the Example of this invention, (A) shows the back periphery image in a certain cutting angle, (B) has shown the display image obtained from (A).

以下、本発明の実施の形態を、添付図面に基づいて詳細に説明する。実施例としては、車両後部に撮像手段を1台設置する運転支援装置を例に挙げて説明する。尚、本発明は以下の実施形態に限定されることはなく、本発明の主旨を逸脱しない範囲で種々変形することができる。   Embodiments of the present invention will be described below in detail with reference to the accompanying drawings. As an example, a driving support device in which one imaging unit is installed at the rear of the vehicle will be described as an example. The present invention is not limited to the following embodiments, and various modifications can be made without departing from the spirit of the present invention.

図1の構成ブロック図に示すように、本発明による運転支援装置10は、撮像手段1と、表示手段3と、画像処理手段20とを備えている。更には、画像処理手段20は、ROM4と、RAM5と、撮像手段I/F部6と、表示手段I/F部7と、これらを制御する制御部2とを備えている。   As shown in the configuration block diagram of FIG. 1, the driving support apparatus 10 according to the present invention includes an imaging unit 1, a display unit 3, and an image processing unit 20. Furthermore, the image processing means 20 includes a ROM 4, a RAM 5, an imaging means I / F unit 6, a display means I / F unit 7, and a control unit 2 that controls these.

撮像手段1は、図示は省略するが、魚眼レンズ等の広角レンズや、広角レンズを保持するレンズホルダ、絞りやフィルタ、及び広角レンズを透過した光束が結像されるCCD等の撮像素子で構成されている。この撮像手段1は、図2(A)および(B)に示すように、車両40後部のバンパー40a上方でかつ幅方向は略中央部(例えば、車両40後部に設置されたナンバープレート上部)に1台設置されており、車両40の後方周囲について、撮像手段1で撮像できる範囲全てを撮像する。尚、本実施例では、撮像手段1が1台設置されている場合について説明するが、撮像手段を複数台設置し、車両40の後方周囲を各撮像手段で分担して撮像するようにしてもよい。   Although not shown, the imaging means 1 is composed of a wide-angle lens such as a fish-eye lens, a lens holder that holds the wide-angle lens, an aperture or a filter, and an imaging element such as a CCD on which a light beam that has passed through the wide-angle lens is imaged. ing. As shown in FIGS. 2 (A) and 2 (B), the imaging means 1 is above the bumper 40a at the rear of the vehicle 40 and in the width direction at a substantially central portion (for example, at the top of the license plate installed at the rear of the vehicle 40). One is installed, and the entire range that can be imaged by the imaging means 1 is imaged about the rear periphery of the vehicle 40. In the present embodiment, a case where one image pickup means 1 is installed will be described. However, a plurality of image pickup means may be installed, and the rear periphery of the vehicle 40 may be shared by each image pickup means for imaging. Good.

表示手段3は、タッチパネル機能を有する液晶パネルを備え、画像処理手段20から送信されるデータに基づいた画像を表示する。尚、詳細な説明は省略するが、表示手段3は、車両40に設置されている図示しないカーナビゲーションシステムから送信される地図画像や、DVDプレーヤ等の画像再生機器から送信される画像を表示させてもよい。   The display unit 3 includes a liquid crystal panel having a touch panel function, and displays an image based on data transmitted from the image processing unit 20. Although detailed description is omitted, the display means 3 displays a map image transmitted from a car navigation system (not shown) installed in the vehicle 40 and an image transmitted from an image reproducing device such as a DVD player. May be.

次に、画像処理手段20について説明する。撮像手段I/F部6は、撮像手段1と制御部2との間に介在し、撮像手段1で撮像された画像を取り込んで制御部2に画像データとして出力するインターフェイスである。制御部2は、内部に図示しない画像ASICを備えており、撮像手段1で撮像され撮像手段I/F部6を介して入力された画像データに対し、座標変換や歪補正等の画像処理を行なう。表示手段I/F部7は、制御部2と表示手段3との間に介在し、制御部2で画像処理された画像データを取り込んで表示手段3に出力するインターフェイスである。   Next, the image processing means 20 will be described. The imaging unit I / F unit 6 is an interface that is interposed between the imaging unit 1 and the control unit 2, captures an image captured by the imaging unit 1, and outputs the captured image to the control unit 2 as image data. The control unit 2 includes an image ASIC (not shown) inside, and performs image processing such as coordinate conversion and distortion correction on image data captured by the imaging unit 1 and input via the imaging unit I / F unit 6. Do. The display unit I / F unit 7 is an interface that is interposed between the control unit 2 and the display unit 3 and takes in the image data processed by the control unit 2 and outputs the image data to the display unit 3.

ROM4には、制御部2での画像処理を実行するプログラムや、制御部2が取り込んだ画像の座標変換を行なう際に参照する座標変換テーブル等が格納されており、制御部2は、このプログラムや座標変換テーブルに従って上述した画像処理を行なう。また、RAM5は、撮像手段1で常時撮像されている車両40の後方周囲画像を一時的に記憶すると共に、制御部2が画像処理を行なう際に、一時的に画像処理された画像を保存する等、制御部2の作業領域として使用される。   The ROM 4 stores a program that executes image processing in the control unit 2, a coordinate conversion table that is referred to when performing coordinate conversion of an image captured by the control unit 2, and the control unit 2 stores the program. The image processing described above is performed according to the coordinate conversion table. In addition, the RAM 5 temporarily stores a rear surrounding image of the vehicle 40 that is always imaged by the imaging unit 1 and also temporarily stores the image processed image when the control unit 2 performs image processing. Etc., and used as a work area of the control unit 2.

次に、図1乃至図3を使用して、本実施例による運転支援装置10の動作原理について説明する。尚、以下の説明では、図2(B)に示す車両40の右側ドアミラー40bが備えられた車両側方を右側、左側ドアミラー40cが備えられた車両側方を左側、として説明する。運転者が車両40をバックで運転して駐車を行う動作を開始すると(例えば、AT車であればシフトレバーを「R(リバース)」とすると)、運転支援装置10が作動を開始し、画像処理手段20の制御部2は、図3に示す後方周囲画像60をRAM5から読み出し、この後方周囲画像60に対し画像処理を開始する。   Next, the operation principle of the driving support device 10 according to the present embodiment will be described with reference to FIGS. 1 to 3. In the following description, the vehicle side provided with the right door mirror 40b of the vehicle 40 shown in FIG. 2B is described as the right side, and the vehicle side provided with the left door mirror 40c is described as the left side. When the driver starts driving the vehicle 40 in the back and parks it (for example, if the vehicle is an AT car, the shift lever is set to “R (reverse)”), the driving support device 10 starts to operate, and the image The control unit 2 of the processing unit 20 reads the rear surrounding image 60 shown in FIG. 3 from the RAM 5 and starts image processing on the rear surrounding image 60.

後方周囲画像60は、撮像手段1で撮像できる車両40の後方範囲全てを撮像してRAM5に記憶したものである。ここで、撮像手段1で撮像できる車両40の後方範囲全てとは、図2(A)に示す垂直方向撮像境界51(撮像手段1の中心を通り地面に垂直な線)より後方の範囲全て、かつ、図2(B)に示す水平方向撮像境界55(撮像手段1の中心を通り車両40後部に平行な線)より後方の範囲全てである撮像範囲50である。   The rear surrounding image 60 is an image of the entire rear range of the vehicle 40 that can be imaged by the imaging means 1 and stored in the RAM 5. Here, the entire rear range of the vehicle 40 that can be imaged by the imaging unit 1 is the entire range behind the vertical imaging boundary 51 (a line that passes through the center of the imaging unit 1 and is perpendicular to the ground) shown in FIG. In addition, the imaging range 50 is the entire range behind the horizontal imaging boundary 55 (a line passing through the center of the imaging means 1 and parallel to the rear portion of the vehicle 40) shown in FIG.

制御部2は、図2(B)に示すように、後方周囲画像60から、車両40の後方切出領域50a(車両40の後端であるバンパー40aより後方周辺)、車両40の右後側方切出領域50b(車両40の右側後方であり、後方切出領域50aの右側周辺)、および、車両40の左後側方切出領域50c(車両40の左側後方であり、後方切出領域50aの左側周辺)に、それぞれ対応する画像領域を切り出す。以下にその方法を説明する。   As shown in FIG. 2 (B), the control unit 2 detects the rear cut-out area 50a of the vehicle 40 (the rear periphery of the bumper 40a that is the rear end of the vehicle 40), the right rear side of the vehicle 40, as shown in FIG. A side cut-out area 50b (on the right rear of the vehicle 40 and around the right side of the rear cut-out area 50a) and a left rear side cut-out area 50c of the vehicle 40 (on the left side rear of the vehicle 40, the rear cut-out area) A corresponding image area is cut out around the left side of 50a. The method will be described below.

後方切出領域50aの上下範囲は、図2(A)に示すように、車両40のバンパー40aの後端から所定の距離(運転者が、車両40後方の地面に存在する縁石等の障害物を認識してからブレーキを踏んでも、障害物に衝突せずに車両40を停車できる距離。例えば1メートル)だけ離れた地点と撮像手段1とを結んだ境界線52と、この境界線52と所定の角度d1で撮像手段1から延伸される境界線53とで規定される。また、後方切出領域50aの左右範囲は、図2(B)に示すように、水平方向撮像境界55と所定の角度r2で撮像手段1から左右方向へそれぞれ延伸される境界線56および境界線57とで囲まれる範囲、すなわち、所定の角度r1で規定される。   As shown in FIG. 2A, the upper and lower range of the rear cutout area 50a is a predetermined distance from the rear end of the bumper 40a of the vehicle 40 (an obstacle such as a curb that exists on the ground behind the vehicle 40 by the driver). The boundary line 52 connecting the imaging means 1 with a point separated by a distance (for example, 1 meter) that can stop the vehicle 40 without colliding with an obstacle even if the brake is depressed after recognizing the It is defined by a boundary line 53 extending from the imaging means 1 at a predetermined angle d1. Further, as shown in FIG. 2 (B), the left and right range of the rear cutout area 50a includes a boundary line 56 and a boundary line respectively extending in the left and right direction from the imaging means 1 at a predetermined angle r2 with the horizontal direction imaging boundary 55. 57, that is, a predetermined angle r1.

制御部2は、この後方切出領域50aに対応する領域を後方周囲画像60に設定する。具体的には、図3に示すように、後方周囲画像60の略中央部の破線で示す扇形状で囲まれた領域が後方切出領域50aとなり、上下方向の破線が境界線52および境界線53に、左右方向の破線が境界線56および境界線57に、それぞれ対応している。   The control unit 2 sets an area corresponding to the rear cutout area 50 a in the rear surrounding image 60. Specifically, as shown in FIG. 3, a region surrounded by a fan shape indicated by a broken line at a substantially central portion of the rear surrounding image 60 is a rear cutout region 50 a, and a vertical broken line is a boundary line 52 and a boundary line 53, the left and right broken lines correspond to the boundary line 56 and the boundary line 57, respectively.

一方、右後側方切出領域50bおよび左後側方切出領域50cの上下範囲は、図2(A)に示すように、境界線53と、この境界線53と所定の角度d2で撮像手段1から延伸される境界線54とで規定される。また、右後側方切出領域50bおよび左後側方切出領域50cの左右範囲は、図2(B)に示すように、水平方向撮像境界55と境界線56とで規定される範囲が右後側方切出領域50b、水平方向撮像境界55と境界線57とで規定される範囲が左後側方切出領域50cとされている。   On the other hand, the upper and lower ranges of the right rear side cutout region 50b and the left rear side cutout region 50c are imaged at a boundary line 53 and a predetermined angle d2 with the boundary line 53 as shown in FIG. It is defined by the boundary line 54 extending from the means 1. Further, the left and right ranges of the right rear side cutout region 50b and the left rear side cutout region 50c are defined by a horizontal imaging boundary 55 and a boundary line 56, as shown in FIG. A range defined by the right rear side cutout region 50b and the horizontal imaging boundary 55 and the boundary line 57 is defined as a left rear side cutout region 50c.

制御部2は、これら右後側方切出領域50bや左後側方切出領域50cに対応する領域を後方周囲画像60に設定する。具体的には、図3に示すように、後方周囲画像60における後方切出領域50aの両脇に配置された、破線で示す四方形で囲まれた領域が右後側方切出領域50bおよび左後側方切出領域50cとなり、右後側方切出領域50bを示す上下方向の破線が境界線53および境界線54に、左右方向の破線が水平方向撮像境界55および境界線56に、それぞれ対応している。また、左後側方切出領域50cを示す上下方向の破線が境界線53および境界線54に、左右方向の破線が水平方向撮像境界55および境界線57に、それぞれ対応している。   The control unit 2 sets regions corresponding to the right rear side cutout region 50b and the left rear side cutout region 50c in the rear surrounding image 60. Specifically, as shown in FIG. 3, areas surrounded by a quadrilateral indicated by a broken line, which are arranged on both sides of the rear cutout area 50 a in the rear surrounding image 60, are the right rear side cutout area 50 b and The left rear side cut-out area 50c is formed. The vertical broken lines indicating the right rear side cut-out area 50b are the boundary line 53 and the boundary line 54, and the horizontal broken lines are the horizontal imaging boundary 55 and the boundary line 56. Each corresponds. In addition, a vertical broken line indicating the left rear side cutout region 50c corresponds to the boundary line 53 and the boundary line 54, and a horizontal broken line corresponds to the horizontal imaging boundary 55 and the boundary line 57, respectively.

制御部2は、以上説明したように後方切出領域50a、右後側方切出領域50b、および左後側方切出領域50cを、後方周囲画像60に設定し、各切出領域に対応する画像を切り出して画像データとしてRAM5に記憶する。具体的には、後方切出領域50aで切り出した画像データは後方画像データとして、右後側方切出領域50bで切り出した画像データは右後側方画像データとして、左後側方切出領域50cで切り出した画像データは左後側方画像データとして、それぞれRAM5に記憶する。   As described above, the control unit 2 sets the rear cutout area 50a, the right rear side cutout area 50b, and the left rear side cutout area 50c in the rear surrounding image 60, and corresponds to each cutout area. The image to be cut out is cut out and stored in the RAM 5 as image data. Specifically, the image data cut out in the rear cutout area 50a is the rear image data, the image data cut out in the right rear cutout area 50b is the right rear side image data, and the left rear side cutout area The image data cut out at 50c is stored in the RAM 5 as left rear side image data.

次に、制御部2は、RAM5に記憶した後方画像データ、右後側方画像データ、および左後側方画像データを組み合わせ、表示手段3の表示画面上部に後方画像データに対応する画面を、表示画面下部に右後側方画像データおよび左後側方画像データに対応する画面を並べて、それぞれ表示されるよう画像合成を行い、これを運転支援画像データとして表示手段I/F部7を介して表示手段3に出力する。そして、表示手段3の表示画面には、運転支援画像データに対応する画像が、運転支援画像として表示される。   Next, the control unit 2 combines the rear image data, the right rear side image data, and the left rear side image data stored in the RAM 5, and displays a screen corresponding to the rear image data at the upper part of the display screen of the display unit 3. The screens corresponding to the right rear side image data and the left rear side image data are arranged at the bottom of the display screen, and the images are combined so as to be displayed respectively, and this is displayed as driving support image data via the display means I / F unit 7. To display means 3. Then, an image corresponding to the driving support image data is displayed on the display screen of the display unit 3 as a driving support image.

次に、図1乃至図4を用いて、本実施例による運転支援装置10の具体的な動作及び効果について説明する。尚、以下の説明では、運転者が車両40を、商業施設等の人や他車両の往来が多いと考えられる駐車スペースにバックで駐車する場合を例に挙げて説明する。   Next, specific operations and effects of the driving support apparatus 10 according to the present embodiment will be described with reference to FIGS. 1 to 4. In the following description, an example will be described in which the driver parks the vehicle 40 back in a parking space where a person such as a commercial facility or another vehicle is considered to have many traffic.

図4(A)の後方周囲画像60に表示されるような白線で区画された駐車スペースに、運転者が車両40をバックで駐車する運転を開始する。運転者が駐車を開始すると、上述したように、制御部2は、後方周囲画像60に、後方切出領域50a、右後側方切出領域50b、および左後側方切出領域50cをそれぞれ設定し、各切出領域に対応する画像データを切り出してRAM5に記憶する。尚、以下の説明では、図4(A)に示すように、各切出領域の大きさを規定する上下方向の境界線角度を、d1=105°、d2=50.0°、左右方向の境界線角度を、r1=135°、r2=22.5°、としている。   The driver starts driving the vehicle 40 in the back in a parking space partitioned by a white line as displayed in the rear surrounding image 60 of FIG. When the driver starts parking, as described above, the control unit 2 sets the rear cutout area 50a, the right rear side cutout area 50b, and the left rear side cutout area 50c in the rear surrounding image 60, respectively. The image data corresponding to each cutout area is cut out and stored in the RAM 5. In the following description, as shown in FIG. 4 (A), the vertical boundary line angles defining the size of each cut-out area are d1 = 105 °, d2 = 50.0 °, The boundary line angles are r1 = 135 ° and r2 = 22.5 °.

制御部2は、後方切出領域50aで切り出した後方画像データに対応する後方画像70aが、表示手段3の表示画面上部に、後方画像70aの中心を軸にして左右を反転させて表示されるよう、また、右後側方切出領域50bで切り出した右後側方画像データに対応する右後側方画像70bが表示手段3の表示画面右下に、左後側方切出領域50cで切り出した左後側方画像データに対応する左後側方画像70cが表示手段3の表示画面左下に、それぞれ表示されるよう画面合成を行って運転支援画像データを作成し、これを表示手段3に出力して、図4(B)に示すような運転支援画像70を表示手段3の表示画面に表示する。   The control unit 2 displays the rear image 70a corresponding to the rear image data cut out in the rear cutout area 50a on the display screen of the display means 3 with the left and right sides reversed with respect to the center of the rear image 70a. In addition, the right rear side image 70b corresponding to the right rear side image data cut out in the right rear side cutout region 50b is displayed at the lower right side of the display screen of the display means 3 in the left rear side cutout region 50c. Screen synthesis is performed so that the left rear side image 70c corresponding to the cut out left rear side image data is displayed at the lower left of the display screen of the display unit 3 to generate driving support image data. And a driving support image 70 as shown in FIG. 4B is displayed on the display screen of the display means 3.

尚、制御部2は、運転支援画像データを作成する際に、各切出領域で切り出した画像データに画像処理を行って、元の画像に含まれる歪みの補正等を行うとともに、表示手段3の表示画面に各画像データに対応する画像を表示する際に、各画像データに含まれる表示内容が過不足なく表示されるように、画像の拡張もしくは圧縮を行う。尚、歪の補正については、公知技術(例えば、特開2008−311890号)であり、本発明に直接関係がないため、詳細な説明は省略する。   The control unit 2 performs image processing on the image data cut out in each cut-out area when creating the driving support image data, corrects distortion included in the original image, and displays the display means 3. When an image corresponding to each image data is displayed on the display screen, the image is expanded or compressed so that the display content included in each image data is displayed without excess or deficiency. Note that the distortion correction is a known technique (for example, Japanese Patent Application Laid-Open No. 2008-31890) and is not directly related to the present invention, and thus detailed description thereof is omitted.

図4(A)の後方周囲画像60に表示されているような駐車スペースに車両40を駐車する際、運転者は、駐車スペース手前の道路を他の車両が横切らないか、駐車スペースに車両40の横方向から近づいてくる歩行者がいないか、等の安全確認を行いつつ駐車運転を行う必要がある。   When the vehicle 40 is parked in the parking space as displayed in the rear surrounding image 60 of FIG. 4A, the driver does not cross the road in front of the parking space, or the vehicle 40 enters the parking space. It is necessary to perform parking driving while confirming safety such as whether there are any pedestrians approaching from the lateral direction.

特許文献1に記載の運転支援装置では、後方画像を、運転者がルームミラーで視認する車両後方のミラー反射像に対応するサイズとして、正しい距離感で後方画像を把握できるようにしているが、後方画像の左右に表示されている右後側方画像および左後側方画像は、表示領域に収まるよう画像圧縮を行っているために画像が歪んでいる。このため、運転者が車両40の左右方向からの歩行者や他の車両の接近を確認する際に、右後側方画像および左後側方画像に表示される歩行者や他の車両等と自身が運転する車両との距離感や、歩行者や他の車両等が接近する速度を把握しづらいという問題があった。   In the driving support apparatus described in Patent Document 1, the rear image is set to a size corresponding to the mirror reflection image of the vehicle rear that the driver visually recognizes with the room mirror, but the rear image can be grasped with a correct sense of distance. The right rear side image and the left rear side image displayed on the left and right of the rear image are distorted because image compression is performed so as to be within the display area. Therefore, when the driver confirms the approach of a pedestrian or another vehicle from the left-right direction of the vehicle 40, the pedestrian or other vehicle displayed on the right rear side image and the left rear side image There is a problem that it is difficult to grasp the sense of distance from the vehicle that the driver drives and the speed at which pedestrians and other vehicles approach.

これに対し、本実施例の運転支援画像70は、後方画像70aを表示画面上部に、表示画面の表示領域の横幅を全て使用して表示するとともに、後方画像70aの下方に右後側方画像70bと左後側方画像70cとを並べて表示しているので、特許文献1の表示形態である右後側方画像70bおよび左後側方画像70cを後方画像70aの左右に並べて表示手段3に表示する場合に比べて、右後側方画像70bおよび左後側方画像70cの表示領域を大きくすることができ、後方画像70aの縮尺に近くかつ歪も抑えられた右後側方画像70bおよび左後側方画像70cとすることができる。   On the other hand, the driving support image 70 of the present embodiment displays the rear image 70a on the upper part of the display screen using the entire width of the display area of the display screen, and the right rear side image below the rear image 70a. 70b and the left rear side image 70c are displayed side by side. Therefore, the right rear side image 70b and the left rear side image 70c, which are the display form of Patent Document 1, are displayed side by side on the left and right of the rear image 70a. Compared with the display, the display area of the right rear side image 70b and the left rear side image 70c can be enlarged, and the right rear side image 70b and the distortion of the rear image 70a which are close to the scale of the rear image 70a are suppressed. The left rear side image 70c can be obtained.

従って、運転者が車両40の左右方向から歩行者や他の車両等の接近を確認する際に、右後側方画像70bおよび左後側方画像70cに表示される歩行者や他の車両等と自身が運転する車両40との距離感や、歩行者や他の車両等が接近する速度が把握しやすい。また、後方画像70aも表示画面の横幅を全て使用して表示しているので、駐車スペース周辺の他の駐車車両等が大きく表示されることで、駐車スペース周辺状況が把握しやすくなる。   Accordingly, when the driver confirms the approach of a pedestrian or another vehicle from the left-right direction of the vehicle 40, the pedestrian or other vehicle displayed on the right rear side image 70b and the left rear side image 70c, etc. It is easy to grasp the sense of distance from the vehicle 40 that it drives and the speed at which pedestrians and other vehicles approach. In addition, since the rear image 70a is also displayed using the entire width of the display screen, other parked vehicles and the like around the parking space are displayed in a larger size, so that it is easier to grasp the surrounding situation of the parking space.

尚、以上説明した実施例では、後方切出領域50aの大きさを規定する上下方向の境界線角度d1や左右方向の境界線角度r1が一定である場合について説明したが、これら境界線角度d1やr1を変更し、後方切出領域に含まれる表示内容が過不足なく表示されるよう画像処理を行って表示手段3に表示するようにしてもよく、例えば、駐車運転の初期段階に比べて駐車運転の最終段階では、境界線56と境界線57との角度r1を大きくして、後方画像70aに、車両40の後方周辺がより広い範囲にわたって表示されるようにしてもよい。   In the above-described embodiment, the case where the vertical boundary line angle d1 and the horizontal boundary angle r1 defining the size of the rear cutout region 50a are constant has been described. However, these boundary line angles d1 Or r1 may be changed and image processing may be performed so that the display contents included in the rear cut-out area are displayed without excess or deficiency, and displayed on the display means 3. For example, compared to the initial stage of parking operation In the final stage of the parking operation, the angle r1 between the boundary line 56 and the boundary line 57 may be increased so that the rear periphery of the vehicle 40 is displayed over a wider range in the rear image 70a.

駐車運転の初期段階では、車両40を駐車スペースに導入する必要があるため、図4(A)に示すように境界線56と境界線57との角度r1を135°として、右後側方画像70bや左後側方画像70cに、車両40の右後側方周辺や左後側方周辺がより広い範囲にわたって表示されるようにし、運転者が車両40に接近する歩行者や他の車両等を把握しやすくする。そして、駐車運転の最終段階(車両40を駐車スペースに位置決めする段階)では、角度r1を駐車運転の初期段階の時より大きく(例えば150°)して、後方画像70aに、車両40の後方周辺がより広い範囲にわたって表示されるようにして、隣に駐車している車両がより大きく表示されるようにしたり、駐車スペースの横に歩行者通路がある場合等は、歩行者通路を歩く歩行者との位置関係を把握しやすくすることにより、運転者が確実に安全確認を行えるようになる。   Since it is necessary to introduce the vehicle 40 into the parking space at the initial stage of parking operation, the right rear side image is set with the angle r1 between the boundary line 56 and the boundary line 57 set to 135 ° as shown in FIG. The right rear side periphery and left rear side periphery of the vehicle 40 are displayed over a wider range in the 70b and the left rear side image 70c so that the driver approaches the vehicle 40, such as a pedestrian or another vehicle Make it easier to grasp. In the final stage of the parking operation (the stage where the vehicle 40 is positioned in the parking space), the angle r1 is set larger (for example, 150 °) than in the initial stage of the parking operation, and the rear image 70a Is displayed over a wider range so that the vehicle parked next to it is displayed larger, or there is a pedestrian walkway next to the parking space, etc. Makes it easier for the driver to confirm the safety.

境界線56と境界線57との角度r1が大きくなる(水平方向撮像境界55と境界線56もしくは境界線57との角度r2が小さくなる)と、後方切出領域50aが広くなって後方画像70aの表示内容が増加するとともに、右後側方切出領域50bや左後側方切出領域50cが狭くなって右後側方画像70bや左後側方画像70cの表示内容が減少する。また、角度r1が小さくなる(角度r2が大きくなる)と、後方切出領域50aが狭くなって後方画像70aの表示内容が減少するとともに、右後側方切出領域50bや左後側方切出領域50cが広くなって右後側方画像70bや左後側方画像70cの表示内容が増加する。   When the angle r1 between the boundary line 56 and the boundary line 57 increases (the angle r2 between the horizontal imaging boundary 55 and the boundary line 56 or the boundary line 57 decreases), the rear cutout area 50a becomes wider and the rear image 70a. And the right rear side cut-out area 50b and the left rear side cut-out area 50c are narrowed, and the display contents of the right rear side image 70b and the left rear side image 70c are reduced. Further, when the angle r1 is decreased (the angle r2 is increased), the rear cut-out area 50a is narrowed and the display content of the rear image 70a is reduced, and the right rear side cut-out area 50b and the left rear side cut-out are reduced. The outgoing area 50c becomes wider, and the display content of the right rear side image 70b and the left rear side image 70c increases.

角度r1が大きすぎる(角度r2が小さすぎる)場合、右後側方画像70bや左後側方画像70cは後方周囲画像60の狭い領域を大きく拡張した画像となり、後方画像70aは後方周囲画像60の広い領域を大きく圧縮した画像となるため、車両40の左右方向から接近する歩行者や他の車両等は、右後側方画像70bや左後側方画像70cに表示される時間が短くなって、後方画像70aに表示される時間が長くなる。   When the angle r1 is too large (the angle r2 is too small), the right rear side image 70b and the left rear side image 70c are images obtained by greatly expanding a narrow region of the rear surrounding image 60, and the rear image 70a is the rear surrounding image 60. Therefore, the time displayed in the right rear side image 70b and the left rear side image 70c is shortened for pedestrians and other vehicles approaching from the left-right direction of the vehicle 40. Thus, the time displayed on the rear image 70a becomes longer.

また、角度r1が小さすぎる(角度r2が大きすぎる)場合、右後側方画像70bや左後側方画像70cは後方周囲画像60の広い領域を大きく圧縮した画像となり、後方画像70aは後方周囲画像60の狭い領域を大きく拡張した画像となるため、車両40の左右方向から接近する歩行者や他の車両等は、右後側方画像70bや左後側方画像70cに表示される時間が長くなって、後方画像70aに表示される時間が短くなる。   When the angle r1 is too small (the angle r2 is too large), the right rear side image 70b and the left rear side image 70c are images obtained by greatly compressing a wide area of the rear surrounding image 60, and the rear image 70a is the rear surrounding. Since the narrow area of the image 60 is greatly expanded, a pedestrian approaching from the left-right direction of the vehicle 40, another vehicle, or the like is displayed on the right rear side image 70b or the left rear side image 70c. It becomes longer and the time displayed on the rear image 70a becomes shorter.

角度r1が大きすぎても小さすぎても、車両40の左右方向から接近する歩行者や他の車両等が、後方画像70aと右後側方画像70bまたは左後側方画像70cに表示される時間の長さがアンバランスとなってしまい、運転者にとって歩行者や他の車両等と車両40との距離感や接近スピードが把握しづらいものとなる。従って、本実施例で設定した角度r1=135°(角度r2=22.5°)付近を中心として、あまり大きく、あるいは小さく角度r1を変化させないことが望ましい。   Whether the angle r1 is too large or too small, pedestrians and other vehicles approaching from the left-right direction of the vehicle 40 are displayed in the rear image 70a and the right rear side image 70b or the left rear side image 70c. The length of time becomes unbalanced, making it difficult for the driver to grasp the distance and approach speed between the pedestrian and other vehicles and the vehicle 40. Therefore, it is desirable not to change the angle r1 too large or small around the angle r1 = 135 ° (angle r2 = 22.5 °) set in this embodiment.

また、角度r2は変化させずに角度r1を大きくすることによって後方画像70aを大きく表示するようにした場合は、右後側方画像70bや左後側方画像70cと重複する部分が発生するが、重複する画像については、後方画像70aと右後側方画像70bあるいは左後側方画像70cの両方に表示してもよい。   Further, when the rear image 70a is displayed in a large size by increasing the angle r1 without changing the angle r2, a portion overlapping the right rear side image 70b and the left rear side image 70c occurs. The overlapping images may be displayed on both the rear image 70a and the right rear side image 70b or the left rear side image 70c.

重複する画像を後方画像70aと右後側方画像70bあるいは左後側方画像70cの両方に表示するようにすれば、運転者が右後側方画像70bや左後側方画像70cを見て歩行者や他の車両等の接近を確認する場合に、接近を確認する際に目安となる表示内容(例えば、右後側方画像70bや左後側方画像70cに表示される、隣の駐車スペースに駐車されている車両等)が後方画像70aにも表示されるので、車両40と歩行者や他の車両等との距離感やこれらの接近スピードがより把握しやすくなり、運転者にとってより使用感の良い運転支援画像とすることができる。   If overlapping images are displayed on both the rear image 70a and the right rear side image 70b or the left rear side image 70c, the driver sees the right rear side image 70b and the left rear side image 70c. When confirming the approach of a pedestrian or another vehicle, the display contents that serve as a guide when confirming the approach (for example, the next parking displayed in the right rear side image 70b and the left rear side image 70c) Vehicle etc. parked in the space) is also displayed in the rear image 70a, so that the distance between the vehicle 40 and pedestrians and other vehicles and the approaching speed thereof can be more easily grasped. It can be set as a driving assistance image with good usability.

以上説明した通り、本発明の運転支援装置によれば、撮像手段で撮像した車両の後方周囲画像から、車両の後方と右後側方および左後側方に対応する部分を切り取って、後方画像と右後側方画像と左後側方画像とを作成し、表示手段の表示画面に、右後側方画像と左後側方画像は左右に並べて表示し、かつ、これら右後側方画像および左後側方画像と後方画像とを上下に並べて表示している。従って、車両後方周囲を広く表示できると共に、右後側方画像および左後側方画像を必要以上に圧縮して表示しないため、運転者にとって使用感の良い運転支援画像を提供できる   As described above, according to the driving support device of the present invention, the rear image is cut out from the rear surrounding image of the vehicle imaged by the imaging means, corresponding to the rear side, the right rear side, and the left rear side of the vehicle. And the right rear side image and the left rear side image are created, and the right rear side image and the left rear side image are displayed side by side on the display screen of the display means, and these right rear side images are displayed. In addition, the left rear side image and the rear image are displayed side by side. Accordingly, the vehicle rear periphery can be displayed widely, and the right rear side image and the left rear side image are not compressed and displayed more than necessary, so that it is possible to provide a driving assistance image that is easy to use for the driver.

また、後方切出領域の大きさを変更した際に、後方切出領域に含まれる表示内容が過不足なく表示されるよう画像処理を行って後方画像を生成しているので、表示手段の限られた表示領域の中でも、運転者が確認したいと考えている表示内容を漏れなく表示することができる。さらには、後方切出領域を拡大した際に、右後側方切出領域および左後側方切出領域と重複する表示内容については、後方画像と右後側方画像もしくは左後側方画像の両方に表示するので、車両後方の左右方向から接近してくる歩行者や車両等との距離感や、歩行者や車両等の接近速度をより正確に把握することができる。   In addition, when the size of the rear cut-out area is changed, the rear image is generated by performing image processing so that the display content included in the rear cut-out area is displayed without excess or deficiency. In the displayed area, the display contents that the driver wants to confirm can be displayed without omission. Furthermore, when the rear cut-out area is enlarged, for the display contents overlapping with the right rear side cut-out area and the left rear side cut-out area, the rear image and the right rear side image or the left rear side image are displayed. Therefore, it is possible to more accurately grasp the sense of distance from pedestrians and vehicles approaching from the left and right directions behind the vehicle and the approach speed of pedestrians and vehicles.

以上説明した実施例では、撮像手段1を車両40後部に設けて車両40の後方周辺を撮像し、これに画像処理を行って運転支援画像70を作成して運転者に提供する場合について説明したが、撮像手段1を車両40の前部に設けて車両40の前方周辺を撮像し、これに画像処理を行って運転支援画像70を作成してもよい。尚、撮像手段1を車両40の前部に設けて車両40の前方周辺を撮像する場合は、運転者の視線方向と撮像手段1の撮像方向とが同じであるため、撮像した画像から運転支援画像を作成する際には、左右を反転させる必要はない。   In the embodiment described above, the case where the imaging means 1 is provided in the rear part of the vehicle 40, the rear periphery of the vehicle 40 is imaged, image processing is performed on this, and the driving support image 70 is created and provided to the driver has been described. However, the imaging means 1 may be provided in the front part of the vehicle 40 to image the front periphery of the vehicle 40, and image processing may be performed on this to generate the driving assistance image 70. Note that when the imaging unit 1 is provided in the front part of the vehicle 40 and the front periphery of the vehicle 40 is imaged, the driver's line-of-sight direction and the imaging direction of the imaging unit 1 are the same. When creating an image, it is not necessary to reverse the left and right.

運転者が車両40を運転して道路を走行している時には、脇道から歩行者や他の車両等が道路に進入してくる場合があり、特に車両40前部から運転席までが長い場合は、運転者の目視だけではこれら歩行者や他の車両等の察知が遅れる虞がある。このような場合に本発明による車両40前方周囲を表示する運転支援画像が表示手段3に表示されれば、運転者は右前側方画像や左前側方画像を見ることにより、道路に進入してくる歩行者や他の車両等をいち早く察知することができるので、運転者にとって使用感の良い運転支援画像を提供することができる。   When the driver is driving the vehicle 40 and traveling on the road, a pedestrian or another vehicle may enter the road from a side road, particularly when the front of the vehicle 40 is long from the driver's seat. The detection of these pedestrians and other vehicles may be delayed only by the visual observation of the driver. In such a case, if a driving support image for displaying the front periphery of the vehicle 40 according to the present invention is displayed on the display means 3, the driver enters the road by looking at the right front side image and the left front side image. Since coming pedestrians, other vehicles, and the like can be detected quickly, it is possible to provide a driving support image that is easy to use for the driver.

1 撮像手段
2 制御部
3 表示手段
4 ROM
5 RAM
10 運転支援装置
20 画像処理手段
40 車両
40a バンパー
40b 右側ドアミラー
40c 左側ドアミラー
50 撮像範囲
50a 後方切出領域
50b 右後側方切出領域
50c 左後側方切出領域
51 垂直方向撮像境界
52,53,54 境界線
55 水平方向撮像境界
56,57 境界線
60 後方周囲画像
70 運転支援画像
70a 後方画像
70b 右後側方画像
70c 左後側方画像
d1、d2 角度
r1、r2 角度
DESCRIPTION OF SYMBOLS 1 Imaging means 2 Control part 3 Display means 4 ROM
5 RAM
DESCRIPTION OF SYMBOLS 10 Driving assistance apparatus 20 Image processing means 40 Vehicle 40a Bumper 40b Right side door mirror 40c Left side door mirror 50 Imaging range 50a Rear extraction area 50b Right rear side extraction area 50c Left rear side extraction area 51 Vertical imaging boundary 52,53 , 54 Boundary line 55 Horizontal imaging boundary 56, 57 Boundary line 60 Rear surrounding image 70 Driving support image 70a Rear image 70b Right rear side image 70c Left rear side image d1, d2 angle r1, r2 angle

Claims (6)

車両後部の所定位置に設置された少なくとも1台の撮像手段と、同撮像手段で撮像した前記車両の後方周囲の画像に対し画像処理を行なって運転支援画像を生成する画像処理手段と、同画像処理手段から出力された前記運転支援画像を表示する表示手段とを有する運転支援装置であって、
前記画像処理手段は、前記撮像手段で前記車両の後方周囲を撮像した後方周囲画像を取り込んで、同後方周囲画像の前記車両の後方に対応する領域を後方切出領域と設定すると共に、前記後方周囲画像の前記車両の右後側方に対応する領域を右後側方切出領域と、前記後方周囲画像の前記車両の左後側方に対応する領域を左後側方切出領域と、それぞれ設定し、
前記画像処理手段は、前記後方切出領域で前記後方周囲画像から切り出した画像から後方画像を生成すると共に、前記右後側方切出領域で前記後方周囲画像から切り出した画像から右後側方画像と、前記左後側方切出領域で前記後方周囲画像から切り出した画像から左後側方画像と、をそれぞれ生成し、
前記運転支援画像を前記表示手段に表示する際に、前記後方画像は、同後方画像の中心を軸として左右を反転させるとともに、前記右後側方画像は、同右後側方画像の中心を軸として左右を反転させて前記表示手段の右側に、前記左後側方画像は同左後側方画像の中心を軸として左右を反転させて前記表示手段の左側に、並べて表示されるように画面合成し、前記後方画像と前記右後側方画像および前記左後側方画像とを上下に表示することを特徴とする運転支援装置。
At least one imaging unit installed at a predetermined position on the rear of the vehicle, an image processing unit that performs image processing on an image around the rear of the vehicle imaged by the imaging unit, and generates a driving assistance image; A driving support device having display means for displaying the driving support image output from the processing means,
The image processing means captures a rear surrounding image obtained by imaging the rear periphery of the vehicle by the imaging means, sets an area corresponding to the rear of the vehicle in the rear surrounding image as a rear cutout area, and A region corresponding to the right rear side of the vehicle in the surrounding image is a right rear side cutout region, and a region corresponding to the left rear side of the vehicle in the rear surrounding image is a left rear side cutout region, Set each one
The image processing means generates a rear image from an image cut out from the rear surrounding image in the rear cut-out area, and right rear side from an image cut out from the rear surrounding image in the right rear side cut-out area. An image and a left rear side image from an image cut out from the rear surrounding image in the left rear side cutout region,
When the driving support image is displayed on the display means, the rear image is reversed left and right around the center of the rear image, and the right rear side image is centered on the center of the right rear side image. And the left rear side image is displayed side by side on the left side of the display means with the left and right sides reversed with the center of the left rear side image as the axis. The driving support device is characterized in that the rear image, the right rear side image, and the left rear side image are displayed vertically.
請求項1に記載の運転支援装置において、
前記後方切出領域は拡大もしくは縮小することができ、拡大もしくは縮小した同後方切出領域で前記後方周囲画像から切り出した画像から生成した前記後方画像を前記表示手段に表示する際に、拡大もしくは縮小した前記後方切出領域に含まれる画像が過不足なく表示されるよう画像処理を行うことを特徴とする運転支援装置。
The driving support device according to claim 1,
The rear cut-out area can be enlarged or reduced. When the rear image generated from the image cut out from the rear surrounding image in the enlarged or reduced rear cut-out area is displayed on the display means, A driving support apparatus that performs image processing so that images included in the reduced rear cutout area are displayed without excess or deficiency.
請求項2に記載の運転支援装置において、
前記後方切出領域を拡大した際に、前記右後側方切出領域および前記左後側方切出領域と重複する画像については、前記後方画像と前記右後側方画像もしくは前記左後側方画像の両方に表示されることを特徴とする運転支援装置。
In the driving assistance device according to claim 2,
For an image that overlaps the right rear side cutout region and the left rear side cutout region when the rear cutout region is enlarged, the rear image and the right rear side image or the left rear side A driving support apparatus characterized by being displayed on both side images.
車両前部の所定位置に設置された少なくとも1台の撮像手段と、同撮像手段で撮像した前記車両の前方周囲の画像に対し画像処理を行なって運転支援画像を生成する画像処理手段と、同画像処理手段から出力された前記運転支援画像を表示する表示手段とを有する運転支援装置であって、
前記画像処理手段は、前記撮像手段で前記車両の前方周囲を撮像した前方周囲画像を取り込んで、同前方周囲画像の前記車両の前方に対応する領域を前方切出領域と設定すると共に、前記前方周囲画像の前記車両の右前側方に対応する領域を右前側方切出領域と、前記前方周囲画像の前記車両の左前側方に対応する領域を左前側方切出領域と、それぞれ設定し、
前記画像処理手段は、前記前方切出領域で前記前方周囲画像から切り出した画像から前方画像を生成すると共に、前記右前側方切出領域で前記前方周囲画像から切り出した画像から右前側方画像と、前記左前側方切出領域で前記前方周囲画像から切り出した画像から左前側方画像と、をそれぞれ生成し、
前記運転支援画像を前記表示手段に表示する際に、前記右前側方画像は前記表示手段の右側、前記左前側方画像は前記表示手段の左側、となるように並べて表示されるように画面合成し、前記前方画像と前記右前側方画像および前記左前側方画像とを上下に表示することを特徴とする運転支援装置。
At least one imaging unit installed at a predetermined position in the front of the vehicle, and an image processing unit that performs image processing on an image around the front of the vehicle imaged by the imaging unit to generate a driving assistance image; A driving support device having display means for displaying the driving support image output from the image processing means,
The image processing means captures a front surrounding image obtained by imaging the front periphery of the vehicle by the imaging means, sets an area corresponding to the front of the vehicle in the front surrounding image as a front cutout area, and A region corresponding to the right front side of the vehicle in the surrounding image is set as a right front side cut out region, and a region corresponding to the left front side of the vehicle in the front surrounding image is set as a left front side cut out region.
The image processing means generates a front image from an image cut out from the front surrounding image in the front cut-out area, and a right front side image from an image cut out from the front surrounding image in the right front side cut-out area. Each of the left front side image from the image cut out from the front surrounding image in the left front side cutout region,
When displaying the driving support image on the display means, the right front side image is displayed on the right side of the display means, and the left front side image is displayed side by side so as to be on the left side of the display means. Then, the front image, the right front side image, and the left front side image are displayed vertically.
請求項4に記載の運転支援装置において、
前記前方切出領域は拡大もしくは縮小することができ、拡大もしくは縮小した同前方切出領域で前記前方周囲画像から切り出した画像から生成した前記前方画像を前記表示手段に表示する際に、拡大もしくは縮小した前記前方切出領域に含まれる画像が過不足なく表示されるよう画像処理を行うことを特徴とする運転支援装置。
The driving support device according to claim 4,
The front cutout area can be enlarged or reduced, and when the front image generated from the image cut out from the front surrounding image in the enlarged or reduced front cutout area is displayed on the display means, A driving support device that performs image processing so that images included in the reduced front cutout area are displayed without excess or deficiency.
請求項5に記載の運転支援装置において、
前記前方切出領域を拡大した際に、前記右前側方切出領域および前記左前側方切出領域と重複する画像については、前記前方画像と前記右前側方画像もしくは前記左前側方画像の両方に表示されることを特徴とする運転支援装置。
The driving support device according to claim 5,
For an image that overlaps the right front side cut region and the left front side cut region when the front cut region is enlarged, both the front image and the right front side image or the left front side image are included. It is displayed on the driving assistance apparatus characterized by the above-mentioned.
JP2010142554A 2010-06-23 2010-06-23 Driving support apparatus Pending JP2012010002A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010142554A JP2012010002A (en) 2010-06-23 2010-06-23 Driving support apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010142554A JP2012010002A (en) 2010-06-23 2010-06-23 Driving support apparatus

Publications (1)

Publication Number Publication Date
JP2012010002A true JP2012010002A (en) 2012-01-12

Family

ID=45540076

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010142554A Pending JP2012010002A (en) 2010-06-23 2010-06-23 Driving support apparatus

Country Status (1)

Country Link
JP (1) JP2012010002A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013205924A (en) * 2012-03-27 2013-10-07 Fuji Heavy Ind Ltd Vehicle exterior environment recognition device, and vehicle exterior environment recognition method
JP2013205925A (en) * 2012-03-27 2013-10-07 Fuji Heavy Ind Ltd Vehicle exterior environment recognition device, and vehicle exterior environment recognition method
JP2014044521A (en) * 2012-08-24 2014-03-13 Fuji Heavy Ind Ltd Device and method for recognizing vehicle exterior environment

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001006097A (en) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd Device for supporting driving for vehicle
JP2009149249A (en) * 2007-12-21 2009-07-09 Aisin Aw Co Ltd Image display device and image display program, and driving assist system using image display device
JP2010095086A (en) * 2008-10-15 2010-04-30 Nissan Motor Co Ltd Vehicular display device and display method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001006097A (en) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd Device for supporting driving for vehicle
JP2009149249A (en) * 2007-12-21 2009-07-09 Aisin Aw Co Ltd Image display device and image display program, and driving assist system using image display device
JP2010095086A (en) * 2008-10-15 2010-04-30 Nissan Motor Co Ltd Vehicular display device and display method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013205924A (en) * 2012-03-27 2013-10-07 Fuji Heavy Ind Ltd Vehicle exterior environment recognition device, and vehicle exterior environment recognition method
JP2013205925A (en) * 2012-03-27 2013-10-07 Fuji Heavy Ind Ltd Vehicle exterior environment recognition device, and vehicle exterior environment recognition method
JP2014044521A (en) * 2012-08-24 2014-03-13 Fuji Heavy Ind Ltd Device and method for recognizing vehicle exterior environment

Similar Documents

Publication Publication Date Title
JP5741321B2 (en) Driving assistance device
JP4687160B2 (en) Perimeter monitoring device
EP2763407B1 (en) Vehicle surroundings monitoring device
EP1916846B1 (en) Device and method for monitoring vehicle surroundings
JP6379779B2 (en) Vehicle display device
US20110228980A1 (en) Control apparatus and vehicle surrounding monitoring apparatus
JP2005311868A (en) Vehicle periphery visually recognizing apparatus
JP2012071635A (en) Parking assistance device
JP2010200240A (en) Device and method for displaying bird's eye view image of around vehicle
JP6196444B2 (en) Peripheral vehicle position tracking apparatus and method
JP2012066616A (en) Driving assistance device
JP2009118416A (en) Vehicle-periphery image generating apparatus and method of correcting distortion of vehicle-periphery image
WO2018016119A1 (en) Display control device, method, program and system
JP2014036268A (en) Mobile object peripheral image display device
JP6167824B2 (en) Parking assistance device
US20220086400A1 (en) Vehicular display system
JP2013207746A (en) Device for photographing rear lateral side of vehicle
JP6991794B2 (en) Vehicle display device and display control method
JP2012010002A (en) Driving support apparatus
JP2014235640A (en) Vehicle display device
JP2008213647A (en) Parking assist method and parking assist system
JP2016213708A (en) Vehicle display device
JP2011243010A (en) Driving assist device
JP2012166689A (en) Driving assistance apparatus
JP5212422B2 (en) Driving assistance device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120427

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130129

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130528