JP2012169883A - Driving support device and vehicle - Google Patents

Driving support device and vehicle Download PDF

Info

Publication number
JP2012169883A
JP2012169883A JP2011029367A JP2011029367A JP2012169883A JP 2012169883 A JP2012169883 A JP 2012169883A JP 2011029367 A JP2011029367 A JP 2011029367A JP 2011029367 A JP2011029367 A JP 2011029367A JP 2012169883 A JP2012169883 A JP 2012169883A
Authority
JP
Japan
Prior art keywords
image
turn
host vehicle
vehicle
guide
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011029367A
Other languages
Japanese (ja)
Inventor
Masayoshi Michiguchi
将由 道口
Yukiko Kanno
由希子 菅野
Kenji Okano
謙二 岡野
Tatsuto Nagarego
達人 流郷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Priority to JP2011029367A priority Critical patent/JP2012169883A/en
Publication of JP2012169883A publication Critical patent/JP2012169883A/en
Pending legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To provide a driving support device and a vehicle which suppress increase of a psychological burden on a driver even after starting a U-turn.SOLUTION: A driving support device 1 comprises: first storage means 9 which stores an inputted taken image of the periphery of an own vehicle; and image processing means 11 which outputs to display means 8 a guide image indicating whether the vehicle can make a U-turn without turning a steering wheel from the current direction to the other, on the basis of the taken image stored in the first storage means 9. The image processing means 11 outputs, before the vehicle starts a U-turn operation, a first guide image containing an image of the front and an image of the lateral side in the U-turn direction, to the display means 8; and outputs, after the vehicle starts the U-turn operation, a second guide image containing the image of the front and an image of the lateral side in the opposite direction of the U-turn direction, to the display means 8.

Description

本発明は自車両のUターン動作を支援する運転支援装置および車両に関する。   The present invention relates to a driving support device and a vehicle that support a U-turn operation of a host vehicle.

従来、自車両が対向車線にUターンを行う場合、運転者の運転負担を軽減するために、カメラ画像にUターン時の走行予定軌跡を重畳する運転支援装置が知られている(例えば特許文献1を参照)。この走行予定軌跡と対向車線側の道路端部との位置関係に基づいて、Uターン開始前に切返しせずにUターン可能か否かが判定される。   Conventionally, when the host vehicle makes a U-turn in the opposite lane, a driving assistance device is known that superimposes a travel schedule trajectory during a U-turn on a camera image in order to reduce the driving burden on the driver (for example, Patent Documents). 1). Based on the positional relationship between this planned travel path and the road edge on the opposite lane, it is determined whether or not a U-turn is possible without turning back before the start of the U-turn.

特開2005−027331号公報JP 2005-027331 A

しかし、Uターン開始前には切返しせずにUターン可能と判定されても、Uターン開始後に切返しが必要になる場合がある。これは、対向車線側の道路端部周辺が自車両から離れており、カメラ画像と実世界との縮尺誤差が大きくなってUターン可否の判定の信頼度が低下するためである。このため、自車両が対向車線側の道路端部に接近してきたとき、運転者は衝突の危険性を意識しながらUターンを行わなければならず、運転者の心理負担が増大する。   However, even if it is determined that the U-turn is possible without turning before the U-turn starts, the turn-back may be necessary after the U-turn starts. This is because the area around the road edge on the opposite lane side is away from the host vehicle, and the scale error between the camera image and the real world increases and the reliability of the determination of whether or not the U-turn is possible decreases. For this reason, when the host vehicle approaches the road edge on the opposite lane side, the driver must make a U-turn while being aware of the danger of collision, increasing the driver's psychological burden.

本発明は、従来の問題を解決するためになされたもので、Uターン開始後にも運転者の心理負担の増大を抑制する運転支援装置および車両を提供することを目的とする。   The present invention has been made to solve the conventional problems, and an object thereof is to provide a driving support device and a vehicle that suppress an increase in the driver's psychological burden even after the start of a U-turn.

上記目的を達成するために本発明の運転支援装置および車両の画像処理手段は、自車両がUターン動作開始前に、前方とUターン方向の側方を含む第1のガイド画像を表示手段に出力し、自車両がUターン動作開始後に、前方とUターン方向と逆の側方を含む第2のガイド画像を表示手段に出力することを特徴とする。   In order to achieve the above object, the driving support apparatus and the vehicle image processing means of the present invention use the first guide image including the front and the side in the U-turn direction as the display means before the host vehicle starts the U-turn operation. And the second guide image including the front and the side opposite to the U-turn direction is output to the display means after the host vehicle starts the U-turn operation.

本発明の運転支援装置および車両によれば、Uターン開始後にも運転者の心理負担の増大を抑制することができるという効果を奏する。   According to the driving support device and the vehicle of the present invention, an effect that an increase in the driver's psychological burden can be suppressed even after the start of the U-turn is achieved.

本発明の実施形態における運転支援装置の構成を示すブロック図The block diagram which shows the structure of the driving assistance apparatus in embodiment of this invention. 同図1の要部である撮像手段の自車両における設置位置と撮像範囲をイメージで説明する図The figure explaining the installation position and imaging range in the own vehicle of the imaging means which is the principal part of FIG. 同図1の要部である画像処理手段が重畳するUターンガイドをイメージで説明する図The figure explaining the U-turn guide which the image processing means which is the principal part of FIG. 同図1の要部である画像処理手段によって重畳された第1の重畳画像をイメージで説明する図The figure explaining the 1st superimposed image superimposed by the image processing means which is the principal part of the same FIG. 1 with an image 同図4の第1の重畳画像の別の例をイメージで説明する図The figure explaining the other example of the 1st superimposed image of the same FIG. 4 with an image 同図1の要部である画像処理手段によって重畳された第2の重畳画像をイメージで説明する図The figure explaining the 2nd superimposed image superimposed by the image processing means which is the principal part of FIG. 1 with an image 同図1の運転支援装置によるUターン時の運転支援処理を説明するフローチャート図The flowchart figure explaining the driving assistance process at the time of the U turn by the driving assistance apparatus of FIG.

以下、本発明の実施形態の運転支援装置および車両について図面を参照しながら説明する。   Hereinafter, a driving support device and a vehicle according to an embodiment of the present invention will be described with reference to the drawings.

図1は本発明の実施形態の運転支援装置の構成を示すブロック図である。   FIG. 1 is a block diagram showing a configuration of a driving support apparatus according to an embodiment of the present invention.

図1に示すように、運転支援装置1は、撮像手段2、入力装置3、車速センサ4、舵角センサ5、ソナーセンサ6、ブレーキセンサ7と、表示手段8とそれぞれ接続する。撮像手段2、入力装置3、車速センサ4、舵角センサ5、ソナーセンサ6、ブレーキセンサ7、表示手段8は、運転支援装置1に含まれてもよい。車速センサ4、舵角センサ5、ソナーセンサ6、ブレーキセンサ7は、自車両の運転情報を検出する運転情報検出手段の一例を示す。   As shown in FIG. 1, the driving support device 1 is connected to an imaging unit 2, an input device 3, a vehicle speed sensor 4, a rudder angle sensor 5, a sonar sensor 6, a brake sensor 7, and a display unit 8. The imaging means 2, the input device 3, the vehicle speed sensor 4, the rudder angle sensor 5, the sonar sensor 6, the brake sensor 7, and the display means 8 may be included in the driving support device 1. The vehicle speed sensor 4, the steering angle sensor 5, the sonar sensor 6, and the brake sensor 7 show an example of driving information detection means that detects driving information of the host vehicle.

運転支援装置1は、第1記憶手段9と、第2記憶手段10と、画像処理手段11と、制御手段12と、これらを互いに接続するバス13とを有する。運転支援装置1は、入力装置3、車速センサ4、舵角センサ5、ソナーセンサ6、ブレーキセンサ7からの入力信号の少なくとも1つに基づいて撮像手段2から入力された自車両周囲の撮像画像を用いて、自車両が切り返しをせずにUターン可能であるか否かを示すガイド画像を所定時間毎に合成し、この合成画像を表示手段8に出力する。   The driving support apparatus 1 includes a first storage unit 9, a second storage unit 10, an image processing unit 11, a control unit 12, and a bus 13 that connects them to each other. The driving assistance device 1 receives a captured image around the host vehicle input from the imaging unit 2 based on at least one of input signals from the input device 3, the vehicle speed sensor 4, the rudder angle sensor 5, the sonar sensor 6, and the brake sensor 7. Using this, a guide image indicating whether or not the vehicle can make a U-turn without being turned over is synthesized every predetermined time, and this synthesized image is output to the display means 8.

撮像手段2は左サイドカメラ2a、フロントカメラ2b、右サイドカメラ2c、リアカメラ2dを有する。これらのカメラ2a〜2dの自車両への取り付け位置について説明する。図2は、撮像手段2の自車両への実装状態を説明する図である。図2に示すように、カメラ2a〜2dは、それぞれ自車両の左サイドミラー、車体前端のバンパー、右サイドミラー、車体後端のリアバンパーに取り付けられる。カメラ2a〜2dは、それぞれ斜め下方を向いた状態で自車両に取り付けられる。カメラ2a〜2dの水平方向の撮像範囲角は、略180度である。図2に示すように、カメラ2a〜2dの撮像範囲はそれぞれ撮像領域50a〜50dで示される。したがって、撮像手段2は、自車両の全周囲を撮像することができる。なお、本実施形態では撮像手段2が4つのカメラを有して自車両の全周囲を撮像するが、少なくとも左右側方の撮像領域50a、50cが撮像されればよい。例えば、撮像手段2は、左右のサイドカメラ2a、2cで構成されてもよい。また、撮像手段2の取付位置は、自車両の外部を撮像できるのであればいずれの箇所であってもよい。撮像手段2は、所定時間毎に撮像した撮像画像を映像として運転支援装置1に入力する。   The imaging means 2 includes a left side camera 2a, a front camera 2b, a right side camera 2c, and a rear camera 2d. The mounting positions of these cameras 2a to 2d on the own vehicle will be described. FIG. 2 is a diagram for explaining the mounting state of the imaging means 2 on the host vehicle. As shown in FIG. 2, the cameras 2 a to 2 d are attached to the left side mirror of the host vehicle, the bumper at the front end of the vehicle body, the right side mirror, and the rear bumper at the rear end of the vehicle body, respectively. The cameras 2a to 2d are each attached to the host vehicle in a state of facing obliquely downward. The horizontal imaging range angles of the cameras 2a to 2d are approximately 180 degrees. As shown in FIG. 2, the imaging ranges of the cameras 2a to 2d are indicated by imaging areas 50a to 50d, respectively. Therefore, the imaging means 2 can image the entire periphery of the host vehicle. In the present embodiment, the imaging means 2 has four cameras and images the entire periphery of the host vehicle, but it is sufficient that at least the left and right imaging regions 50a and 50c are imaged. For example, the imaging means 2 may be composed of left and right side cameras 2a and 2c. Moreover, the attachment position of the imaging means 2 may be any location as long as the outside of the host vehicle can be imaged. The imaging unit 2 inputs a captured image captured every predetermined time as a video to the driving support device 1.

入力装置3は、例えばタッチパネルやリモコン、スイッチで構成される。入力装置3は、タッチパネルで構成される場合、表示手段8に設けてもよい。入力装置3は、ユーザによって操作され、ユーザの指示命令を示す入力信号を運転支援装置1に出力する。例えば、入力装置3は、Uターンの運転支援開始の信号を運転支援装置1に出力する。   The input device 3 includes, for example, a touch panel, a remote controller, and a switch. When the input device 3 is configured by a touch panel, the input device 3 may be provided in the display unit 8. The input device 3 is operated by a user and outputs an input signal indicating a user instruction command to the driving support device 1. For example, the input device 3 outputs a U-turn driving support start signal to the driving support device 1.

車速センサ4、舵角センサ5、ソナーセンサ6、ブレーキセンサ7は、それぞれ自車両の車速を示す車速度信号、ハンドルの切れ角を示す舵角信号、障害物の存在を示すソナー信号、ブレーキの状態を示すブレーキ信号を運転支援装置1に出力する。   The vehicle speed sensor 4, the steering angle sensor 5, the sonar sensor 6, and the brake sensor 7 are respectively a vehicle speed signal indicating the vehicle speed of the host vehicle, a steering angle signal indicating the turning angle of the steering wheel, a sonar signal indicating the presence of an obstacle, and a brake state. Is output to the driving support device 1.

表示手段8は、例えばナビゲーション装置やリアシートのディスプレイで構成される。表示手段8は、運転支援装置1から自車両周囲の撮像画像とUターンガイドの合成画像を入力されて、この合成画像を映像として表示する。なお、運転支援装置1と表示手段8とは、単一の筐体に格納して一体化した表示ユニットとして構成されても良い。この場合、表示ユニットは車内のセンターコンソール内に格納される。そして、表示ユニットの画面
がセンターコンソールから露出している。
The display means 8 is composed of, for example, a navigation device or a rear seat display. The display unit 8 receives a captured image around the host vehicle and a composite image of the U-turn guide from the driving support device 1 and displays the composite image as a video. Note that the driving support device 1 and the display unit 8 may be configured as a display unit integrated in a single housing. In this case, the display unit is stored in the center console in the vehicle. The screen of the display unit is exposed from the center console.

第1記憶手段9は、揮発性メモリで構成される。例えばビデオメモリやRAM(Random Access Memory)で構成される。第1記憶手段9は画像メモリ9a〜9dを有する。画像メモリ9a〜9dは、それぞれカメラ2a〜2dと接続する。第1記憶手段9は、撮像手段2から所定時間毎に入力された撮像画像によって得られる映像データを一時記憶する。第1記憶手段9に記憶された映像データは、バス13を介して画像処理手段11に出力される。   The first storage means 9 is composed of a volatile memory. For example, it is composed of a video memory or RAM (Random Access Memory). The first storage means 9 has image memories 9a to 9d. The image memories 9a to 9d are connected to the cameras 2a to 2d, respectively. The first storage unit 9 temporarily stores video data obtained from captured images input from the imaging unit 2 every predetermined time. The video data stored in the first storage unit 9 is output to the image processing unit 11 via the bus 13.

第2記憶手段10は、不揮発性メモリで構成される。例えばフラッシュメモリやROM(Read Only Memory)で構成される。第2記憶手段10は、自車両の画像データ、Uターンガイドに用いる画像データ等の各種画像データや、カメラ2a〜2dの撮像画像から視点変換した画像を作成するためのマッピングテーブルを記憶する。第2記憶手段10に記憶されるUターンガイドの画像は、自車両の最外周の予想軌跡を示す。第2記憶手段には、左車線の国の場合、右折用のUターンガイドの画像、右車線の国の場合、左折用のUターンガイドが少なくとも記憶されていればよいが両方の画像も格納されていることが望ましい。これにより、運転支援装置1の世界共用化を図ることができる。例えば、陸続きで車線が異なる国の双方でUターンの運転支援を行うことができる。第2記憶手段10に記憶された各種画像データは、画像処理手段11に出力される。   The second storage means 10 is composed of a nonvolatile memory. For example, it is composed of a flash memory or a ROM (Read Only Memory). The second storage means 10 stores various image data such as image data of the host vehicle, image data used for the U-turn guide, and a mapping table for creating an image whose viewpoint is converted from the captured images of the cameras 2a to 2d. The image of the U-turn guide stored in the second storage means 10 shows an expected locus on the outermost periphery of the host vehicle. The second storage means may store at least the U-turn guide image for the right turn in the case of the left lane country and the left turn U-turn guide in the case of the country of the right lane. It is desirable that Thereby, worldwide sharing of the driving assistance device 1 can be achieved. For example, U-turn driving assistance can be performed in both countries on land and in different lanes. Various image data stored in the second storage unit 10 is output to the image processing unit 11.

画像処理手段11は、例えばASIC(Application Specific Integrated Circuit)やVLSI(Very Large Scale Integration)で構成される。画像処理手段11は、視点変換画像生成手段11aと重畳手段11bとを有する。画像処理手段11は、表示手段8と接続する。視点変換画像生成手段11aは、運転状態に応じて、画像メモリ9a〜9dから入力されたカメラ2a〜2dの撮像画像の映像データの少なくとも一つに基づいて俯瞰画像等の視点変換画像を生成する。重畳手段11bは、第2記憶手段10から入力されたUターンガイドに用いられる画像データと自車両の画像データとをこの視点変換画像に重畳した重畳画像を所定時間毎に作成する。画像処理手段11は、この所定時間毎に作成された重畳画像を映像として表示手段8に出力する。   The image processing means 11 is composed of, for example, ASIC (Application Specific Integrated Circuit) or VLSI (Very Large Scale Integration). The image processing unit 11 includes a viewpoint conversion image generation unit 11a and a superimposition unit 11b. The image processing unit 11 is connected to the display unit 8. The viewpoint-converted image generating unit 11a generates a viewpoint-converted image such as an overhead image based on at least one of the video data of the captured images of the cameras 2a to 2d input from the image memories 9a to 9d according to the driving state. . The superimposing unit 11b creates a superimposed image by superimposing the image data used for the U-turn guide input from the second storage unit 10 and the image data of the host vehicle on the viewpoint conversion image at every predetermined time. The image processing unit 11 outputs the superimposed image created every predetermined time to the display unit 8 as a video.

制御手段12は、例えばCPU(Central Processing Unit)やLSI(Large Scale Integration)で構成される。制御手段12は、入力装置3と、車速センサ4と、舵角センサ5と、ソナーセンサ6と、ブレーキセンサ7と接続する。制御手段12は、入力装置3、車速センサ4、舵角センサ5、ソナーセンサ6、ブレーキセンサ7から入力される信号に基づいて、画像処理手段11の画像処理、第1記憶手段9や第2記憶手段10から読み出すデータ、撮像手段2からの入力や表示手段8への出力等を制御する。例えば、制御手段12は、入力装置3、車速センサ4、舵角センサ5、ソナーセンサ6、ブレーキセンサ7から入力される各種信号に基づいて、視点変換画像生成手段11aが生成する視点変換画像を俯瞰画像や他の視点の視点変換画像に切替えたり、重畳手段11bが視点変換画像に重畳するUターンガイドを切替えたりする。   The control means 12 is comprised by CPU (Central Processing Unit) and LSI (Large Scale Integration), for example. The control means 12 is connected to the input device 3, the vehicle speed sensor 4, the rudder angle sensor 5, the sonar sensor 6, and the brake sensor 7. Based on signals input from the input device 3, the vehicle speed sensor 4, the rudder angle sensor 5, the sonar sensor 6, and the brake sensor 7, the control means 12 performs image processing of the image processing means 11, first storage means 9 and second storage. Data read from the means 10, input from the imaging means 2, output to the display means 8, and the like are controlled. For example, the control unit 12 overlooks the viewpoint conversion image generated by the viewpoint conversion image generation unit 11a based on various signals input from the input device 3, the vehicle speed sensor 4, the steering angle sensor 5, the sonar sensor 6, and the brake sensor 7. Switching to an image or a viewpoint converted image of another viewpoint, or the superimposing unit 11b switches the U-turn guide superimposed on the viewpoint converted image.

次に、第2記憶手段10に記憶されるUターンガイドの画像について説明する。以下で説明するUターンガイドの画像は、左車線の国用である。右車線の国用のUターンガイドの画像は自車両の進行方向の軸に対して、左車線の国用のUターンガイドと線対称の関係なので詳細な説明を省略する。   Next, the U-turn guide image stored in the second storage means 10 will be described. The U-turn guide image described below is for the left lane country. Since the image of the U-turn guide for the right lane country is symmetrical with the U-turn guide for the left lane country with respect to the axis in the traveling direction of the host vehicle, a detailed description is omitted.

図3は、画像処理手段11が重畳するUターンガイドをイメージで説明する図である。図3では、右方向にUターンする場合のUターンガイドの画像が示されている。このUタ
ーンガイドの画像は、紙面表から裏に向かった俯瞰視点で見たときにおける画像である。
FIG. 3 is a diagram for explaining the U-turn guide superimposed by the image processing means 11 as an image. FIG. 3 shows an image of the U-turn guide when making a U-turn in the right direction. This U-turn guide image is an image when viewed from a bird's-eye view from the front to the back of the page.

図3では、Uターン開始前の自車両31a、Uターン終了時の自車両31bの位置が仮想的に示されている。Uターンガイド32は、円弧ガイド部32aと直線ガイド部32bとから構成される。   In FIG. 3, the positions of the host vehicle 31a before the U-turn start and the host vehicle 31b at the end of the U-turn are virtually shown. The U-turn guide 32 includes an arc guide portion 32a and a linear guide portion 32b.

円弧ガイド部32は、自車両31aの左前端から所定のマージンを採った円弧開始位置33aから、自車両31aのハンドルが最大舵角となるときの回転半径で、円弧終了位置33bまでの180度回転した円弧で示される。このとき、円弧ガイド部32の回転中心34は、円弧開始位置33aと円弧終了位置33bとを結んだ線35と、自車両31aの後輪軸の延長線36との交点で示される。円弧ガイド部32aによって、自車両31aの最外部の予想軌跡を示すことができる。特に、運転者は、自車両31aが180度の角度Uターンする前における自車両31aの前端部が最も対向車線側に位置する地点37を視認することができる。このため、円弧ガイド部32の内側(回転中心34側)に障害物や車線端部が含まれた場合にUターンに切返しが必要、含まれない場合にUターンに切返えしがと不要と判断することができる。なお、この地点37よりも所定距離前の地点37で運転者に注意喚起されるのが好ましい。   The arc guide portion 32 has a rotation radius when the handle of the host vehicle 31a reaches the maximum steering angle from the arc start position 33a with a predetermined margin from the left front end of the host vehicle 31a, and 180 degrees from the arc end position 33b. Indicated by a rotated arc. At this time, the rotation center 34 of the arc guide portion 32 is indicated by an intersection of a line 35 connecting the arc start position 33a and the arc end position 33b and an extension line 36 of the rear wheel shaft of the host vehicle 31a. The arc guide portion 32a can indicate the outermost expected trajectory of the host vehicle 31a. In particular, the driver can visually recognize the point 37 where the front end of the host vehicle 31a is located closest to the opposite lane before the host vehicle 31a makes an U-turn of 180 degrees. For this reason, when an obstacle or lane edge is included inside the arc guide portion 32 (on the rotation center 34 side), it is necessary to turn over the U-turn, and when it is not included, it is not necessary to switch back to the U-turn. It can be judged. The driver is preferably alerted at a point 37 that is a predetermined distance before the point 37.

直線ガイド部32bは、円弧終了位置33bから、Uターン終了後の車線と平行に伸びた直線で示される。この直線ガイド部32bによってUターン終了後の進行方向を判断することができる。ここで、円弧ガイド部32aと直線ガイド部32bとは、色分けや線の形態を異ならせておくことが望ましい。これによって、図3では視点変換画像の視点に応じて円弧ガイド部32aと直線ガイド部32bとが変形されて重畳された際でも、互いの区別を確実に確保することができる。以下の説明においても「円弧ガイド部」と「直線ガイド部」の意味は同様なので詳細な説明を省略する。   The straight guide portion 32b is indicated by a straight line extending in parallel with the lane after the end of the U-turn from the arc end position 33b. The direction of travel after the end of the U-turn can be determined by the straight guide portion 32b. Here, it is desirable that the arc guide portion 32a and the linear guide portion 32b have different color coding and line shapes. Accordingly, in FIG. 3, even when the arc guide portion 32a and the linear guide portion 32b are deformed and superimposed according to the viewpoint of the viewpoint conversion image, it is possible to ensure the distinction between each other. In the following description, the meanings of “arc guide part” and “straight line guide part” are the same, and detailed description thereof is omitted.

次に、Uターン開始前のUターンの運転支援について説明する。   Next, U-turn driving assistance before the start of the U-turn will be described.

図4は、画像処理手段11によって重畳された第1の重畳画像をイメージで説明する図である。図4に示されるイメージは、画像処理手段11によって作成された画像を示すとともに、表示手段8に表示される画像を示す。以下の図面においても同様である。図4に示すように、画像処理手段11の視点変換画像生成手段11aによって、交差点の俯瞰画像43が作成されている。この俯瞰画像43の作成には、カメラ2a〜2dの4つのカメラの撮像画像が用いられている。この俯瞰画像43は、図3で示された回転中心34の上空から真下に見下ろしたときの全周囲画像を示している。なお、俯瞰画像43は、図3では回転中心34の上空から真下に見下ろした視点変換画像として示されているが、回転中心34から自車両41の進行方向側にずらした位置の上空から真下に見下ろした視点変換画像に変換されてもよい。これによって、自車両41の前方をより見やすくすることができる。この俯瞰画像43により、運転者は自車両41のUターン方向である自車両右側方と前方を主として確認することができる。そして、Uターン開始前の第1のUターンガイド42が重畳手段11bによって重畳されるため、運転者は、俯瞰画像43中の路肩線44や段差45が第1のUターンガイド42の内側(自車両側)に存在するか否かについて、運転者がUターンの動作を開始する前に目視によって判断することができる。運転者は、路肩線44や段差45が第1のUターンガイド42の内側に存在するとき、Uターンに切返しが必要であると判断することができる。   FIG. 4 is a diagram for explaining the first superimposed image superimposed by the image processing means 11 as an image. The image shown in FIG. 4 shows an image created by the image processing means 11 and an image displayed on the display means 8. The same applies to the following drawings. As shown in FIG. 4, an overhead image 43 at the intersection is created by the viewpoint conversion image generation unit 11 a of the image processing unit 11. In creating the bird's-eye view image 43, captured images of four cameras 2a to 2d are used. This bird's-eye view image 43 shows an all-around image when looking down from above the rotation center 34 shown in FIG. In addition, although the bird's-eye view image 43 is shown as a viewpoint conversion image looking down from directly above the rotation center 34 in FIG. 3, it is directly below from above the position shifted from the rotation center 34 to the traveling direction side of the host vehicle 41. You may convert into the viewpoint conversion image which looked down. As a result, the front of the host vehicle 41 can be more easily seen. From this bird's-eye view image 43, the driver can mainly check the right side and the front side of the host vehicle 41 in the U-turn direction. Then, since the first U-turn guide 42 before the start of the U-turn is superimposed by the superimposing means 11b, the driver can confirm that the road shoulder 44 and the step 45 in the overhead view image 43 are inside the first U-turn guide 42 ( Whether or not the vehicle exists on the own vehicle side can be visually determined before the driver starts the U-turn operation. The driver can determine that the U-turn needs to be turned back when the road shoulder 44 and the step 45 are present inside the first U-turn guide 42.

なお、第1のUターンガイド42は円弧ガイド部42aと直線ガイド部42bから構成されるが、切返しの有無の判定には、直線ガイド部42bよりも円弧ガイド部42aの方が重要度が高い。円弧ガイド部42aの方が直線ガイド部42bよりも自車両41と離れる方向に膨らんでいるためである。このため、円弧ガイド部42aを直線ガイド部42b
よりも強調表示することが望ましい。
The first U-turn guide 42 includes an arc guide portion 42a and a straight guide portion 42b. However, the arc guide portion 42a is more important than the straight guide portion 42b for determining whether or not there is a turnback. . This is because the arc guide portion 42a swells in a direction away from the host vehicle 41 rather than the linear guide portion 42b. For this reason, the arc guide portion 42a is replaced by the straight guide portion 42b.
Rather than highlighting.

次に、図4の別の例について説明する。   Next, another example of FIG. 4 will be described.

図5は、図4の第1の重畳画像の別の例をイメージで説明する図である。図5に示すように、画像処理手段11の視点変換画像生成手段11aによって、自車両上方から右斜め前方に見下ろした視点で俯瞰画像53が作成されている。この俯瞰画像53の作成には、右サイドカメラ2cの撮像画像が用いられている。この俯瞰画像53には、自車両51が映っている。なお、この自車両51は、右サイドカメラ2cによって撮像された実画像でもよいし、第2記憶手段10から読み出されたモデル画像であってもよい。重畳手段11bは、俯瞰画像53に第1のUターンガイド52を重畳する。このとき、第1のUターンガイド52のうち円弧ガイド部52aは、一部が自車両51に重畳される位置に存在する。これに対応して、重畳手段11bは、俯瞰画像53のうち自車両51を除いた背景画像部分にのみ重畳する。この処理によって、運転者に視認のしやすさを維持したままUターンガイドを行うことができる。図5の俯瞰画像53では、サイドカメラ2cの1カメラの撮像画像のみが用いられているため、図4のような複数カメラによる俯瞰画像43に比べて、さらに、つなぎ目がなく画像の縮尺の正確性を維持したUターンガイドを行うことができる。運転者は、円弧ガイド部52a、直線ガイド部52bよりも外側に路肩線54や段差部55が存在することを判断し、切返しせずにUターンすることができると判断することができる。なお、自車両51上部の黒色領域56は、右サイドカメラ2cの画角外の領域に相当するため、自車両51周囲の画像を表示できない領域を示す。   FIG. 5 is a diagram illustrating another example of the first superimposed image in FIG. 4 as an image. As shown in FIG. 5, an overhead image 53 is created from a viewpoint looking down obliquely forward from the upper side of the host vehicle by the viewpoint conversion image generation unit 11 a of the image processing unit 11. In creating the bird's-eye view image 53, a captured image of the right side camera 2c is used. The own vehicle 51 is reflected in this overhead view image 53. The host vehicle 51 may be a real image captured by the right side camera 2 c or a model image read from the second storage unit 10. The superimposing unit 11 b superimposes the first U-turn guide 52 on the overhead image 53. At this time, the arc guide portion 52 a of the first U-turn guide 52 exists at a position where a part thereof is superimposed on the host vehicle 51. Correspondingly, the superimposing means 11b superimposes only on the background image portion of the overhead image 53 excluding the host vehicle 51. By this process, the U-turn guide can be performed while maintaining ease of visual recognition for the driver. In the bird's-eye view image 53 of FIG. 5, only the captured image of one camera of the side camera 2c is used. Therefore, compared to the bird's-eye view image 43 by a plurality of cameras as shown in FIG. U-turn guide can be performed while maintaining the characteristics. The driver can determine that the road shoulder line 54 and the stepped portion 55 exist outside the arc guide portion 52a and the straight guide portion 52b, and can determine that the U-turn can be performed without turning back. In addition, since the black area | region 56 of the own vehicle 51 is corresponded to the area | region outside the angle of view of the right side camera 2c, it shows the area | region where the image around the own vehicle 51 cannot be displayed.

次に、Uターン開始後のUターンの運転支援について説明する。   Next, U-turn driving support after the start of the U-turn will be described.

図6は、画像処理手段11によって重畳された第2の重畳画像をイメージで説明する図である。図6に示すように、画像処理手段11の視点変換画像生成手段11aによって、自車両上方から左斜め前方に見下ろした視点で俯瞰画像63が作成されている。この俯瞰画像63の作成には、左サイドカメラ2aの撮像画像が用いられている。自車両61の上部・右部の黒色領域66は、左サイドカメラ2aの画角外の領域に相当するため、自車両61周囲の画像を表示できない領域を示す。重畳手段11bは、俯瞰画像63に第2のUターンガイド62を重畳する。この第2のUターンガイド62は、円弧ガイド部に相当する。この第2のUターンガイド62における円弧の長さは、図4や図5で示されている円弧ガイド部42a、52aの長さよりも短く設定されている。図6に示されるように、第2のUターンガイド62より上方に段差部65があるため、運転者は、自車両61が切返し無しにUターンを完了可能と判断することができる。   FIG. 6 is a diagram illustrating the second superimposed image superimposed by the image processing unit 11 as an image. As shown in FIG. 6, an overhead image 63 is created from a viewpoint looking down diagonally forward from the top of the host vehicle by the viewpoint conversion image generation unit 11 a of the image processing unit 11. In creating the overhead view image 63, a captured image of the left side camera 2a is used. The black areas 66 on the upper and right sides of the host vehicle 61 correspond to areas outside the angle of view of the left side camera 2a, and thus indicate areas in which an image around the host vehicle 61 cannot be displayed. The superimposing unit 11 b superimposes the second U-turn guide 62 on the overhead image 63. The second U-turn guide 62 corresponds to an arc guide portion. The arc length of the second U-turn guide 62 is set to be shorter than the arc guide portions 42a and 52a shown in FIGS. As shown in FIG. 6, since the step portion 65 is above the second U-turn guide 62, the driver can determine that the host vehicle 61 can complete the U-turn without turning over.

Uターンが開始され、自車両61に交差点の路肩線64や段差部65が接近していると想定される段階で図6で示される表示に切替えられる。例えば車速センサ4の車速によって制御手段12が走行距離を算出し、この走行距離が所定の閾値を超えたときに制御手段12が画像処理手段11に切替えの命令を行う。   The U-turn is started, and the display shown in FIG. 6 is switched at a stage where it is assumed that the shoulder line 64 and the stepped portion 65 of the intersection are approaching the host vehicle 61. For example, the control means 12 calculates the travel distance based on the vehicle speed of the vehicle speed sensor 4, and the control means 12 instructs the image processing means 11 to switch when the travel distance exceeds a predetermined threshold.

また、俯瞰画像63と第2のUターンガイド62とは同時に切替られなくてもよい。例えば制御手段12が、車速センサ4の車速によって走行距離を算出し、この走行距離が所定の第1の閾値以上になったと判定したとき、制御手段12が画像処理手段11に対して俯瞰画像63への切替え命令を行う。そして、制御手段12が、走行距離が第1の閾値より大きい第2の閾値以上になったと判定したとき、制御手段12が、画像処理手段11に対してさらに第2のUターンガイド62を俯瞰画像63に重畳する追加の切替え命令を行う。また車速センサ4に替えて、自車両61前端に設けられたソナーセンサ6等の距離検出手段が物体との接近を検知した場合に制御手段12が画像処理手段11に追加の切替え命令を行っても良い。   Further, the overhead image 63 and the second U-turn guide 62 do not have to be switched simultaneously. For example, when the control unit 12 calculates a travel distance based on the vehicle speed of the vehicle speed sensor 4 and determines that the travel distance is equal to or greater than a predetermined first threshold value, the control unit 12 provides an overhead image 63 to the image processing unit 11. A switch command is issued. Then, when the control unit 12 determines that the travel distance is equal to or greater than the second threshold value that is greater than the first threshold value, the control unit 12 looks down on the second U-turn guide 62 with respect to the image processing unit 11. An additional switching command to be superimposed on the image 63 is performed. Further, in place of the vehicle speed sensor 4, even when the distance detecting means such as the sonar sensor 6 provided at the front end of the own vehicle 61 detects the approach to the object, the control means 12 issues an additional switching command to the image processing means 11. good.

このように、画像処理手段11が、左サイドカメラ2aの撮像画像を用いた俯瞰画像63に第2のUターンガイド62を重畳させたことによって、Uターン開始前には遠方であった対向車線の路肩線44、54や段差部45、55の周辺について、Uターン開始前よりも、切返し無しにUターンができるか否かを精度良く運転者に判断させることができる。   As described above, the image processing unit 11 superimposes the second U-turn guide 62 on the overhead image 63 using the image captured by the left side camera 2a, so that the opposite lane that was far before the start of the U-turn. For the road shoulder lines 44, 54 and the steps 45, 55, it is possible to make the driver accurately determine whether or not a U-turn can be made without turning over before the start of the U-turn.

次に、運転支援装置によるUターンの開始前から終了までの運転支援処理について説明する。図7は、運転支援装置によるUターン時の運転支援処理を説明するフローチャート図である。   Next, driving support processing from the start to the end of the U-turn by the driving support device will be described. FIG. 7 is a flowchart for explaining driving support processing during a U-turn by the driving support device.

ます、運転者が入力装置3を介してUターン運転支援の開始を入力した場合、ステップS71に示すように、画像処理手段11は、制御手段12からの命令によって、事前確認画面(例えば図4や図5に示された第1の重畳画像)を作成し、表示手段8に出力する。表示手段8はこの第1の重畳画像を表示する。運転者は、表示手段8を視認して、切返し無しにUターンできるか否かをUターン動作開始前に判断することができる。   First, when the driver inputs the start of U-turn driving support via the input device 3, as shown in step S71, the image processing means 11 receives a prior confirmation screen (for example, FIG. 4) according to a command from the control means 12. Or the first superimposed image shown in FIG. 5 is generated and output to the display means 8. The display means 8 displays this first superimposed image. The driver can visually recognize the display means 8 and determine whether or not the U-turn can be performed without turning back before starting the U-turn operation.

次に、ステップS72に示すように、制御手段12は、入力装置3を介してUターン運転支援以外の他の種類の画面表示の要求があったか否か判定する。他の種類の画面表示の要求は、例えば、ナビゲーションの画面表示や、CD、DVDやラジオの画面表示の要求である。   Next, as shown in step S <b> 72, the control unit 12 determines whether there is a request for other types of screen display than the U-turn driving support via the input device 3. Other types of screen display requests include, for example, navigation screen display and CD, DVD, and radio screen display requests.

ステップS72でNOの場合、画像処理手段11は、制御手段12からの命令によって、事前確認画面の表示手段8への出力を継続する。そして、ステップS73に示すように、制御手段12は、入力された運転情報に基づいて、Uターンの終了動作が行われたか否かを判定する。例えば、制御手段12は、入力装置3からUターン運転支援の終了が入力された場合や、舵角センサ5の舵角と車速センサ4の車速の情報から自車両が一定距離直進したと判定した場合にUターンの終了動作が行われたと判定する。   In the case of NO at step S72, the image processing means 11 continues to output the prior confirmation screen to the display means 8 in accordance with a command from the control means 12. And as shown to step S73, the control means 12 determines whether the completion | finish operation | movement of the U-turn was performed based on the input driving | operation information. For example, the control means 12 determines that the host vehicle has traveled a certain distance straight from the input device 3 when the end of the U-turn driving support is input, or from information on the rudder angle of the rudder angle sensor 5 and the vehicle speed of the vehicle speed sensor 4. In this case, it is determined that the U-turn end operation has been performed.

ステップS73でNOの場合、ステップS74に示すように、制御手段12は、ソナーセンサ6の信号から障害物が接近しているか判定する。   In the case of NO in step S73, as shown in step S74, the control means 12 determines whether an obstacle is approaching from the signal of the sonar sensor 6.

ステップS74でNOの場合、ステップS75に示すように、制御手段12は、車速センサ4の車速信号と舵角センサ5の舵角信号とから一定距離を走行したか判定する。例えば、制御手段12は、車速センサ4の車速信号と舵角センサ5の舵角信号とから、自車両が180度の角度Uターンする前における自車両前端部が最も対向車線側に位置する地点(図3における地点37)より所定距離前の地点(図3における地点38)まで走行したか判定する。   In the case of NO in step S74, as shown in step S75, the control means 12 determines whether a certain distance has been traveled from the vehicle speed signal of the vehicle speed sensor 4 and the steering angle signal of the steering angle sensor 5. For example, the control means 12 determines that the front end of the host vehicle is located closest to the opposite lane before the host vehicle makes an U-turn of 180 degrees from the vehicle speed signal of the vehicle speed sensor 4 and the steering angle signal of the steering angle sensor 5. It is determined whether the vehicle has traveled to a point (a point 38 in FIG. 3) a predetermined distance before (a point 37 in FIG. 3).

ステップS75でNOの場合、制御手段12はUターン動作継続中で終了に近い段階ではないと判定する。そして、制御手段12は、車速センサ4の車速信号によって走行距離を算出し、この距離に応じて、第1のUターンガイドのうち円弧ガイド部の長さを短くする旨を画像処理手段11に命令する。画像処理手段11は、この制御手段12からの命令に基づいて、ステップS71の事前確認画面を再度作成し、表示手段8に出力する。そして制御手段12は、所定時間経過後に再度ステップS73の処理を繰り返す。   In the case of NO at step S75, the control means 12 determines that the U-turn operation is continuing and that it is not near the end. Then, the control means 12 calculates the travel distance based on the vehicle speed signal from the vehicle speed sensor 4, and informs the image processing means 11 that the arc guide portion of the first U-turn guide is shortened according to this distance. Command. Based on the command from the control means 12, the image processing means 11 again creates a prior confirmation screen in step S 71 and outputs it to the display means 8. And the control means 12 repeats the process of step S73 again after progress for a predetermined time.

一方、ステップS74でYES、ステップS75でYESの場合、ステップS76に示すように、画像処理手段11は、制御手段12からの命令によって、見切り確認画面(例えば図6に示された第2の重畳画像)を作成し、表示手段8に出力する。表示手段8はこの第2の重畳画像を表示する。運転者は、表示手段8を視認して、切返し無しにUターン
できるか否かをUターン動作開始前よりも正確に判断することができる。
On the other hand, if YES in step S74 and YES in step S75, as shown in step S76, the image processing means 11 receives the parting confirmation screen (for example, the second superimposition shown in FIG. 6) according to the command from the control means 12. Image) is generated and output to the display means 8. The display means 8 displays this second superimposed image. The driver can visually determine the display means 8 and more accurately determine whether or not the U-turn can be performed without turning back than before the start of the U-turn operation.

そしてステップS77に示すように、制御手段12は、ステップS73と同様に、入力された運転情報に基づいて、Uターンの終了動作が行われたか否かを判定する。ステップS77でNOの場合、画像処理手段11は、制御手段12からの命令によって、見切り確認画面の表示手段8への出力を継続する。   And as shown to step S77, the control means 12 determines whether the end operation | movement of the U-turn was performed based on the input driving | operation information similarly to step S73. In the case of NO in step S77, the image processing means 11 continues to output the parting confirmation screen to the display means 8 according to the command from the control means 12.

一方、ステップS77でYESの場合、画像処理手段11は、制御手段12からの命令によって、見切り確認画面の表示手段8への出力を停止する。そしてステップS78に示すように、制御手段12は、図示しないナビゲーション装置等の機器に、Uターン運転支援以外の他の種類の画面表示信号を表示手段8に出力することを許可する。これによって、表示手段8には、図示しないナビゲーション装置等の機器から入力されたUターン運転支援以外の他の種類の画面が表示される。以上によってUターンの運転支援が終了する。   On the other hand, if YES in step S77, the image processing unit 11 stops outputting the parting confirmation screen to the display unit 8 according to a command from the control unit 12. And as shown to step S78, the control means 12 permits devices, such as a navigation apparatus which is not shown in figure, to output other types of screen display signals to the display means 8 other than U-turn driving assistance. As a result, a screen other than the U-turn driving assistance input from a device such as a navigation device (not shown) is displayed on the display means 8. This completes the U-turn driving support.

一方、ステップS72でYESの場合、画像処理手段11は、制御手段12からの命令によって、事前確認画面の表示手段8への出力を停止する。そしてステップS79に示すように、制御手段12は、図示しないナビゲーション装置等の機器に、Uターン運転支援以外の他の種類の画面表示を許可する。これによって、表示手段8には、図示しないナビゲーション装置等の機器から入力されたUターン運転支援以外の他の種類の画面が表示される。   On the other hand, in the case of YES in step S72, the image processing unit 11 stops the output of the prior confirmation screen to the display unit 8 according to the command from the control unit 12. And as shown to step S79, the control means 12 permits apparatuses, such as a navigation apparatus which is not shown in figure, other types of screen displays other than U-turn driving assistance. As a result, a screen other than the U-turn driving assistance input from a device such as a navigation device (not shown) is displayed on the display means 8.

次に、ステップS80に示すように、制御手段12は、ステップS73と同様に、入力された運転情報に基づいて、Uターンの終了動作が行われたか否かを判定する。ステップS80でYESの場合、制御手段12は、ステップS78の処理を行う。一方、ステップS80でNOの場合、ステップS81に示すように、制御手段12は、車速センサ4からの車速信号と、舵角センサ5からの舵角信号とによって、自車両がUターン動作を開始したか判定する。例えば、制御手段12は、舵角が所定角度以上を保って、所定距離走行したと判定すると、自車両がUターン動作を開始したと判定する。   Next, as shown in step S80, the control means 12 determines whether or not the U-turn end operation has been performed based on the inputted driving information, as in step S73. In the case of YES at step S80, the control means 12 performs the process at step S78. On the other hand, in the case of NO in step S80, as shown in step S81, the control means 12 starts the U-turn operation of the host vehicle by the vehicle speed signal from the vehicle speed sensor 4 and the steering angle signal from the steering angle sensor 5. Determine if you did. For example, if the control means 12 determines that the steering angle has traveled a predetermined distance while maintaining a predetermined angle or more, it determines that the host vehicle has started a U-turn operation.

ステップS81でNOの場合、制御手段12は、再度ステップS80の処理を行う。一方、ステップS81でYESの場合、Uターンを運転支援するために、制御手段12は、図示しないナビゲーション装置等の機器に、Uターン運転支援以外の他の種類の画面表示信号を表示手段8に出力することを禁止する。そして、ステップS71に示すように、画像処理手段11は、制御手段12からの命令によって、事前確認画面(例えば図4や図5に示された第1の重畳画像)を作成し、表示手段8に出力する。これによって、運転者が能動的にUターンの運転支援の復帰入力を行わなくても、表示手段8が再度事前確認画面を復帰表示することができるので、運転者は自車両をUターンする際に、運転者の心理負担の増大を抑制することができる。   In the case of NO at step S81, the control means 12 performs the process at step S80 again. On the other hand, in the case of YES in step S81, the control means 12 gives other types of screen display signals other than the U-turn driving assistance to the display means 8 to a device such as a navigation device (not shown) in order to assist the driving of the U-turn. Prohibit output. Then, as shown in step S71, the image processing means 11 creates a prior confirmation screen (for example, the first superimposed image shown in FIGS. 4 and 5) in accordance with an instruction from the control means 12, and the display means 8 Output to. Accordingly, even if the driver does not actively input the return for driving support for the U-turn, the display means 8 can display the advance confirmation screen again so that the driver can make a U-turn on the vehicle. In addition, an increase in the driver's psychological burden can be suppressed.

以上のように、本発明の実施形態によれば、画像処理手段11が、自車両がUターン動作開始前には、前方とUターン方向の側方を含む第1のガイド画像(例えば図4や図5の画面)を表示手段8に出力し、自車両がUターン動作開始後には、前方とUターン方向と逆の側方を含む第2のガイド画像(例えば図6の画面)を表示手段8に出力する。したがって、自車両が対向車線側の道路端部に接近してきたときに、運転者は衝突の危険性をUターン開始前よりも精度良く確認することができるため、Uターン開始後にも運転者の心理負担の増大を抑制することができる。   As described above, according to the embodiment of the present invention, the image processing unit 11 has the first guide image including the front and the sides in the U-turn direction before the host vehicle starts the U-turn operation (for example, FIG. 4). And the second guide image including the side opposite to the front and the U-turn direction (for example, the screen shown in FIG. 6). Output to means 8. Accordingly, when the host vehicle approaches the road edge on the opposite lane side, the driver can check the danger of collision more accurately than before the U-turn starts. Increase in psychological burden can be suppressed.

本発明の運転支援装置および車両は、Uターン開始後に自車両が切返しせずにUターン可能か否かを運転者に案内できる点で有用である。   The driving support device and the vehicle of the present invention are useful in that the driver can guide the driver whether the U-turn is possible without turning over after the start of the U-turn.

1 運転支援装置
2 撮像手段
8 表示手段
9 第1記憶手段
11 画像処理手段
11a 視点変換画像生成手段
11b 重畳手段
12 制御手段
DESCRIPTION OF SYMBOLS 1 Driving assistance apparatus 2 Imaging means 8 Display means 9 1st memory | storage means 11 Image processing means 11a Viewpoint conversion image generation means 11b Superimposition means 12 Control means

Claims (13)

入力された自車両周辺の撮像画像を記憶する記憶手段と、
この記憶手段に記憶した撮像画像に基づいて自車両が切り返しをせずにUターン可能であるか否かを示すガイド画像を表示手段に出力する画像処理手段とを備え、
前記画像処理手段は、
自車両がUターン動作開始前に、前方とUターン方向の側方を含む第1のガイド画像を前記表示手段に出力し、
自車両がUターン動作開始後に、前方とUターン方向と逆の側方を含む第2のガイド画像を前記表示手段に出力することを特徴とする運転支援装置。
Storage means for storing the inputted captured image around the own vehicle;
Image processing means for outputting to the display means a guide image indicating whether or not the host vehicle can make a U-turn without turning back based on the captured image stored in the storage means,
The image processing means includes
Before the host vehicle starts the U-turn operation, the first guide image including the front and the side in the U-turn direction is output to the display means,
A driving assistance apparatus, wherein after the host vehicle starts a U-turn operation, a second guide image including a front side and a side opposite to the U-turn direction is output to the display unit.
前記ガイド画像は、前記記憶手段に記憶した撮像画像に基づいて視点変換された視点変換画像に、自車両が切り返しをせずにUターン可能であるか否かを示すUターンガイドを重畳した重畳画像で構成され、
前記画像処理手段は、
自車両がUターン動作開始前に、前方とUターン方向の側方を含む第1の視点変換画像を生成するとともに、この第1の視点変換画像に対応する第1のUターンガイドを重畳した第1の重畳画像を前記表示手段に出力し、
自車両がUターン動作開始後に、前方とUターン方向と逆の側方を含む第2の視点変換画像を生成するとともに、この第2の視点変換画像に対応した第2のUターンガイドを重畳した第2の重畳画像を前記表示手段に出力することを特徴とする請求項1に記載の運転支援装置。
The guide image is a superimposition obtained by superimposing a U-turn guide indicating whether or not the host vehicle can make a U-turn on the viewpoint-converted image converted from the viewpoint based on the captured image stored in the storage unit. Composed of images,
The image processing means includes
Before the host vehicle starts the U-turn operation, the first viewpoint conversion image including the front and the side in the U-turn direction is generated, and the first U-turn guide corresponding to the first viewpoint conversion image is superimposed. Outputting a first superimposed image to the display means;
After the host vehicle starts the U-turn operation, it generates a second viewpoint conversion image including the front and the side opposite to the U-turn direction, and superimposes a second U-turn guide corresponding to the second viewpoint conversion image. The driving assistance apparatus according to claim 1, wherein the second superimposed image is output to the display unit.
前記画像処理手段は、前記第1・第2の視点変換画像にそれぞれ自車両のUターン状況に応じた自車両画像を重畳することを特徴とする請求項2に記載の運転支援装置。   The driving support device according to claim 2, wherein the image processing unit superimposes a host vehicle image corresponding to a U-turn situation of the host vehicle on the first and second viewpoint conversion images. 前記画像処理手段は、自車両がUターン動作開始後、所定の運転状況下に至るまでは前記第1の重畳画像を前記表示手段に出力し、所定の運転状況下に至った後に前記第2の重畳画像を前記表示手段に出力することを特徴とする請求項2または3に記載の運転支援装置。   The image processing means outputs the first superimposed image to the display means until the vehicle reaches a predetermined driving situation after the host vehicle starts a U-turn operation, and after the vehicle has reached a predetermined driving situation, the second The driving support apparatus according to claim 2, wherein the superimposed image is output to the display unit. 前記所定の運転状況は、自車両が所定の距離を走行すること、または、自車両前方に障害物が検知されることであることを特徴とする請求項4に記載の運転支援装置。   The driving support device according to claim 4, wherein the predetermined driving situation is that the host vehicle travels a predetermined distance or an obstacle is detected in front of the host vehicle. 前記画像処理手段は、前方とUターン方向と逆の側方を含む一の撮像画像に基づいて前記第2の視点変換画像を生成することを特徴とする請求項2から5のいずれかに記載の運転支援装置。   The said image processing means produces | generates a said 2nd viewpoint conversion image based on the one captured image containing the front and the side opposite to the U-turn direction, The said 2nd viewpoint conversion image is characterized by the above-mentioned. Driving assistance device. 前記画像処理手段は、自車両のUターンが終了した場合に前記表示手段への第2の重畳画像の出力を停止することを特徴とする請求項2から6のいずれかに記載の運転支援装置。   The driving support device according to any one of claims 2 to 6, wherein the image processing unit stops outputting the second superimposed image to the display unit when the U-turn of the host vehicle is completed. . 入力された自車両の運転情報に応じて自車両がUターン動作を開始したか否かを判定し、この判定結果に応じて前記画像処理手段を制御する制御手段をさらに備えたことを特徴とする請求項2から7のいずれかに記載の運転支援装置。   It further comprises control means for determining whether or not the own vehicle has started a U-turn operation according to the input driving information of the own vehicle and controlling the image processing means according to the determination result. The driving support device according to any one of claims 2 to 7. 前記制御手段は、自車両がUターン動作を終了したと判定した場合に、前記画像処理手段から前記表示手段への第2の重畳画像の出力を停止し、前記第1の重畳画像が表示されていたときよりも前に表示されていた画像と同じ種類の同種画像を前記表示手段に出力させることを特徴とする請求項8に記載の運転支援装置。   When it is determined that the host vehicle has finished the U-turn operation, the control unit stops the output of the second superimposed image from the image processing unit to the display unit, and the first superimposed image is displayed. 9. The driving support apparatus according to claim 8, wherein the display unit outputs the same kind of image as the image that was displayed before the time when the image was displayed. 自車両の運転情報を検出する運転情報検出手段をさらに備え、
前記制御手段は、前記運転情報検出手段の検出結果に基づいて前記画像処理手段を制御することを特徴とする請求項8または9に記載の運転支援装置。
It further comprises driving information detecting means for detecting driving information of the own vehicle,
The driving support apparatus according to claim 8 or 9, wherein the control unit controls the image processing unit based on a detection result of the driving information detection unit.
前記運転情報検出手段は、自車両の舵角を検出する舵角検出手段、自車両の車速を検出する車速検出手段、自車両のブレーキ状態を検出するブレーキ状態検出手段、の少なくとも一つであることを特徴とする請求項10に記載の運転支援装置。   The driving information detection means is at least one of steering angle detection means for detecting the steering angle of the host vehicle, vehicle speed detection means for detecting the vehicle speed of the host vehicle, and brake state detection means for detecting the brake state of the host vehicle. The driving support apparatus according to claim 10. 自車両周囲を撮像し、撮像画像を前記記憶手段に出力する撮像手段と、前記画像処理手段から出力されたガイド画像を表示する表示手段をさらに備えたことを特徴とする請求項1から11のいずれかに記載の運転支援装置。   12. The apparatus according to claim 1, further comprising: an imaging unit that captures an image of the periphery of the host vehicle and outputs the captured image to the storage unit; and a display unit that displays the guide image output from the image processing unit. The driving support device according to any one of the above. 車体前端に設置されて前方を撮影するフロントカメラと、
左右のドアミラーにそれぞれ設置されてそれぞれ左右側方を撮影する左右サイドカメラと、
車体後端に設置されて後方を撮影するリアカメラと、
車体に設置されて運転情報を検出する運転情報検出手段と、
車内に設置されて、表示画面がセンタコンソールから露出し、前記フロントカメラ、左右サイドカメラ、リアカメラの撮影映像に基づいて、自車両が切り返しをせずにUターン可能であるか否かを示すガイド画像を表示する表示ユニットとを備え、
前記表示ユニットは、前記運転情報検出手段の検出結果から自車両がUターン動作開始前に、前方とUターン方向の側方を含む第1のガイド画像を表示し、
前記表示ユニットは、前記運転情報検出手段の検出結果から自車両がUターン動作開始後に、前方とUターン方向と逆の側方を含む第2のガイド画像を表示することを特徴とする車両。
A front camera that is installed at the front end of the vehicle body and photographs the front,
Left and right side cameras that are installed on the left and right door mirrors, respectively,
A rear camera installed at the rear end of the car body to shoot the rear,
Driving information detecting means installed on the vehicle body for detecting driving information;
It is installed in the vehicle, the display screen is exposed from the center console, and based on the captured images of the front camera, the left and right side cameras, and the rear camera, it indicates whether the vehicle can make a U-turn without turning over. A display unit for displaying a guide image,
The display unit displays a first guide image including the front side and the side in the U-turn direction before the host vehicle starts the U-turn operation from the detection result of the driving information detection unit,
The display unit displays a second guide image including a front side and a side opposite to the U-turn direction after the host vehicle starts a U-turn operation based on a detection result of the driving information detection unit.
JP2011029367A 2011-02-15 2011-02-15 Driving support device and vehicle Pending JP2012169883A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011029367A JP2012169883A (en) 2011-02-15 2011-02-15 Driving support device and vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011029367A JP2012169883A (en) 2011-02-15 2011-02-15 Driving support device and vehicle

Publications (1)

Publication Number Publication Date
JP2012169883A true JP2012169883A (en) 2012-09-06

Family

ID=46973571

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011029367A Pending JP2012169883A (en) 2011-02-15 2011-02-15 Driving support device and vehicle

Country Status (1)

Country Link
JP (1) JP2012169883A (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000064175A1 (en) * 1999-04-16 2000-10-26 Matsushita Electric Industrial Co., Ltd. Image processing device and monitoring system
JP2003146133A (en) * 2001-11-12 2003-05-21 Toyota Motor Corp Vehicular surrounding monitoring device
JP2004252837A (en) * 2003-02-21 2004-09-09 Denso Corp Vehicle periphery display device and vehicle periphery display program
JP2006268224A (en) * 2005-03-23 2006-10-05 Nissan Motor Co Ltd Vehicular driving assistance system
JP2007156808A (en) * 2005-12-05 2007-06-21 Nissan Motor Co Ltd Driving support system and driving support method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000064175A1 (en) * 1999-04-16 2000-10-26 Matsushita Electric Industrial Co., Ltd. Image processing device and monitoring system
JP2003146133A (en) * 2001-11-12 2003-05-21 Toyota Motor Corp Vehicular surrounding monitoring device
JP2004252837A (en) * 2003-02-21 2004-09-09 Denso Corp Vehicle periphery display device and vehicle periphery display program
JP2006268224A (en) * 2005-03-23 2006-10-05 Nissan Motor Co Ltd Vehicular driving assistance system
JP2007156808A (en) * 2005-12-05 2007-06-21 Nissan Motor Co Ltd Driving support system and driving support method

Similar Documents

Publication Publication Date Title
JP6388267B2 (en) Driving assistance device
CA3069114C (en) Parking assistance method and parking assistance device
US7363130B2 (en) Parking assist systems, methods, and programs
JP5747181B2 (en) Parking assistance device
KR102205144B1 (en) Parking assistance method and parking assistance device
JP5549235B2 (en) Driving assistance device
JP2014189097A (en) Parking support device
JP6917330B2 (en) Parking support device
JP5400316B2 (en) Parking assistance device
JP7059528B2 (en) Parking support method and parking control device
JPH10230862A (en) Vehicular parking auxiliary device
JP2008213647A (en) Parking assist method and parking assist system
JP4957589B2 (en) Obstacle warning device, obstacle warning method, and computer program
JP7059525B2 (en) Parking support method and parking support device
JP2009220592A (en) On-vehicle parallel parking assistant device and program for on-vehicle parallel parking assistant device
JP2012169883A (en) Driving support device and vehicle
JP6511729B2 (en) Parking support device and parking support method
JP2018097535A (en) Driving support device and driving support method
US20230158956A1 (en) Control device, control method, and storage medium
JP7398492B2 (en) Control device, control method, and control program
US20220086368A1 (en) Vehicular display system
JP2009208596A (en) Obstacle warning device, obstacle warning method, and computer program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131017

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20131113

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20140108

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20140418

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140826

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140902

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20141007

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150106