JP2018194638A - Parking support device - Google Patents

Parking support device Download PDF

Info

Publication number
JP2018194638A
JP2018194638A JP2017097131A JP2017097131A JP2018194638A JP 2018194638 A JP2018194638 A JP 2018194638A JP 2017097131 A JP2017097131 A JP 2017097131A JP 2017097131 A JP2017097131 A JP 2017097131A JP 2018194638 A JP2018194638 A JP 2018194638A
Authority
JP
Japan
Prior art keywords
parking
trajectory
image
ideal
actual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017097131A
Other languages
Japanese (ja)
Inventor
聡 齋藤
Satoshi Saito
聡 齋藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daihatsu Motor Co Ltd
Original Assignee
Daihatsu Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daihatsu Motor Co Ltd filed Critical Daihatsu Motor Co Ltd
Priority to JP2017097131A priority Critical patent/JP2018194638A/en
Publication of JP2018194638A publication Critical patent/JP2018194638A/en
Pending legal-status Critical Current

Links

Images

Abstract

To provide a parking support device that can support improvement of the parking skills of a driver.SOLUTION: The present invention includes: target parking position setting means for setting the target parking position for parking a vehicle 1; track creation means for creating ideal parking tracks L11 and L12 from the position of the vehicle 1 to the target parking position; detection means for detecting the actual parking tracks L21 to L24 of the vehicle 1; and notification means for issuing a notification based on the actual parking tracks 21 to L24 and the ideal parking tracks L11 and L12.SELECTED DRAWING: Figure 6

Description

本発明は、運転者の駐車操作を支援する駐車支援装置に関する。   The present invention relates to a parking support device that supports a driver's parking operation.

従来、運転者の駐車操作を支援する駐車支援装置が開発されている。駐車支援装置は、車の現在位置から、駐車するための目標駐車位置までの理想的な軌道を作成する。そして、車が当該軌道を進行するように、運転者の駐車操作の支援を行う。特許文献1には、車両の操舵制御を行い、目標駐車位置に車両を誘導する自動駐車装置が開示されている。これにより、運転者は、車のハンドル操作をすることなく、駐車することができる。   2. Description of the Related Art Conventionally, parking assistance devices that support a driver's parking operation have been developed. The parking assist device creates an ideal trajectory from the current position of the vehicle to the target parking position for parking. And a driver | operator's parking operation is supported so that a vehicle may advance the said track | orbit. Patent Document 1 discloses an automatic parking device that performs steering control of a vehicle and guides the vehicle to a target parking position. As a result, the driver can park without operating the steering wheel of the car.

特開平5−143895号公報JP-A-5-143895

しかしながら、上記自動駐車装置を使い慣れている場合、運転者の駐車技量の低下が懸念される。その結果、当該運転者が上記自動駐車装置を備えていない車を駐車する場合に、すなわち、上記自動駐車装置を使えない場合に、うまく駐車ができない可能性がある。   However, when the user is used to the automatic parking apparatus, there is a concern that the driver's parking skill may be reduced. As a result, when the driver parks a vehicle that does not include the automatic parking device, that is, when the automatic parking device cannot be used, there is a possibility that parking cannot be performed well.

本発明は、上記した事情のもとで考え出されたものであって、運転者の駐車技量の向上を支援することができる駐車支援装置を提供することを目的としている。   The present invention has been conceived under the above-described circumstances, and an object thereof is to provide a parking assistance device capable of assisting a driver in improving his / her parking skill.

上記課題を解決するため、本発明では、次の技術的手段を講じている。   In order to solve the above problems, the present invention takes the following technical means.

本発明によって提供される駐車支援装置は、車を駐車するための目標駐車位置を設定する目標駐車位置設定手段と、前記車の位置から前記目標駐車位置までの理想的な駐車軌道を作成する軌道作成手段と、前記車の実際の駐車軌道を検出する検出手段と、前記実際の駐車軌道と前記理想的な駐車軌道とに基づく報知を行う報知手段と、を備えていることを特徴とする。   A parking assist device provided by the present invention includes a target parking position setting unit that sets a target parking position for parking a car, and a track that creates an ideal parking path from the position of the vehicle to the target parking position. It is characterized by comprising: creating means; detecting means for detecting an actual parking trajectory of the vehicle; and notifying means for performing notification based on the actual parking trajectory and the ideal parking trajectory.

本発明によると、実際の駐車軌道と理想的な駐車軌道とに基づく報知を行う。運転者は、報知された情報に基づいて、自身の駐車技量を認識することができる。したがって、運転者は、次回の駐車時に、理想的な駐車軌道に沿って駐車するために、どのように運転すればよいかを理解することができる。これにより、運転者の駐車技量の向上を支援することができる。   According to the present invention, notification based on an actual parking track and an ideal parking track is performed. The driver can recognize his / her parking skill based on the notified information. Therefore, the driver can understand how to drive in order to park along the ideal parking path at the next parking. Thereby, improvement of a driver's parking skill can be supported.

本発明のその他の特徴および利点は、添付図面を参照して以下に行う詳細な説明によって、より明らかとなろう。   Other features and advantages of the present invention will become more apparent from the detailed description given below with reference to the accompanying drawings.

第1実施形態に係る駐車支援装置が適用された車の構成を示すブロック図である。It is a block diagram which shows the structure of the vehicle to which the parking assistance apparatus which concerns on 1st Embodiment was applied. 第1実施形態に係る駐車支援処理を説明するためのフローチャートの一例を示す図である。It is a figure which shows an example of the flowchart for demonstrating the parking assistance process which concerns on 1st Embodiment. 第1実施形態に係る駐車支援処理における理想軌道記憶処理のサブルーチンを説明するためのフローチャートである。It is a flowchart for demonstrating the subroutine of the ideal track | orbit memory | storage process in the parking assistance process which concerns on 1st Embodiment. 第1実施形態に係る駐車支援処理における実軌道記憶処理のサブルーチンを説明するためのフローチャートである。It is a flowchart for demonstrating the subroutine of the real track memory process in the parking assistance process which concerns on 1st Embodiment. (a)は理想軌道の一例を説明するための図であり、(b)は実軌道の一例を説明するための図である。(A) is a figure for demonstrating an example of an ideal track | orbit, (b) is a figure for demonstrating an example of an actual track | orbit. ディスプレイの表示画面に表示される支援画像の一例を示す図である。It is a figure which shows an example of the assistance image displayed on the display screen of a display. ディスプレイの表示画面に表示される支援画像の変形例を示す図である。It is a figure which shows the modification of the assistance image displayed on the display screen of a display. ディスプレイの表示画面に表示される動画映像の一例を示す図である。It is a figure which shows an example of the moving image image | video displayed on the display screen of a display. ディスプレイの表示画面に表示される動画映像の変形例を示す図である。It is a figure which shows the modification of the moving image image | video displayed on the display screen of a display.

以下、本発明の実施の形態を、図面を参照して具体的に説明する。   Embodiments of the present invention will be specifically described below with reference to the drawings.

図1は、第1実施形態に係る駐車支援装置が適用された車1の構成を示すブロック図である。図1に示すように、車1は、駐車支援ECU(Electronic Control Unit)2、右サイドカメラ31、左サイドカメラ32、フロントカメラ33、リアカメラ34、各種センサ4、操作装置5、スピーカ6、ディスプレイ7、および、記憶装置8を備えている。なお、車1はその他の構成も備えているが、図1においては記載を省略している。   FIG. 1 is a block diagram illustrating a configuration of a vehicle 1 to which a parking assistance device according to the first embodiment is applied. As shown in FIG. 1, the car 1 includes a parking assistance ECU (Electronic Control Unit) 2, a right side camera 31, a left side camera 32, a front camera 33, a rear camera 34, various sensors 4, an operation device 5, a speaker 6, A display 7 and a storage device 8 are provided. Although the car 1 has other configurations, the description is omitted in FIG.

右サイドカメラ31、左サイドカメラ32、フロントカメラ33、およびリアカメラ34は、それぞれ、車1周辺の画像を撮影する撮影装置であり、例えば、CCDやCMOSなどの撮像素子を備え、所定の撮影領域を所定のフレームレートで撮影する。右サイドカメラ31は、右ドアミラー(例えばその底面)に取り付けられており、車1の右側面および路面を含めて、車1の右側の画像を撮影する。左サイドカメラ32は、左ドアミラー(例えばその底面)に取り付けられており、車1の左側面および路面を含めて、車1の左側の画像を撮影する。フロントカメラ33は、車1の前部の車幅方向中央付近に取り付けられており、車1の前面および路面を含めて、車1の前方の画像を撮影する。リアカメラ34は、例えばバックドアの車幅方向中央付近に取り付けられており、車1の後面および路面を含めて、車1の後方の画像を撮影する。なお、これらのカメラ31〜34の取り付け位置は限定されない。各カメラ31〜34が撮影した画像データは、駐車支援ECU2に出力される。   Each of the right side camera 31, the left side camera 32, the front camera 33, and the rear camera 34 is a photographing device that photographs an image around the car 1, and includes an image sensor such as a CCD or a CMOS, for example, and performs predetermined photographing. The area is photographed at a predetermined frame rate. The right side camera 31 is attached to a right door mirror (for example, the bottom surface thereof), and takes an image of the right side of the vehicle 1 including the right side surface and the road surface of the vehicle 1. The left side camera 32 is attached to a left door mirror (for example, the bottom surface thereof), and takes an image of the left side of the car 1 including the left side and the road surface of the car 1. The front camera 33 is attached near the center of the front portion of the vehicle 1 in the vehicle width direction and captures an image of the front of the vehicle 1 including the front surface of the vehicle 1 and the road surface. The rear camera 34 is attached, for example, near the center of the back door in the vehicle width direction, and captures an image of the rear of the vehicle 1 including the rear surface and the road surface of the vehicle 1. In addition, the attachment position of these cameras 31-34 is not limited. Image data captured by each of the cameras 31 to 34 is output to the parking assist ECU 2.

各種センサ4は、各種検出値を検出して、駐車支援ECU2に出力する。各種センサ4には、ステアリングの操舵角を検出する舵角センサ、車1の各車輪の車輪速を検出する車速センサ、ブレーキペダルの操作量を検出するブレーキセンサ、アクセルペダルの操作量を検出するアクセルセンサ、シフトレバーの操作に連動して変化するシフトポジションを検知するシフトポジションセンサなどが含まれる。なお、上記したものは、一例であり、これらに限定されない。   Various sensors 4 detect various detection values and output them to the parking assist ECU 2. The various sensors 4 include a steering angle sensor that detects the steering angle of the steering, a vehicle speed sensor that detects the wheel speed of each wheel of the vehicle 1, a brake sensor that detects the operation amount of the brake pedal, and an operation amount of the accelerator pedal. An accelerator sensor, a shift position sensor that detects a shift position that changes in conjunction with the operation of the shift lever, and the like are included. In addition, what was mentioned above is an example and is not limited to these.

スピーカ6は、音声を出力するものであり、駐車支援ECU2より入力される音声信号に基づいて、音声を出力する。   The speaker 6 outputs sound and outputs sound based on the sound signal input from the parking assist ECU 2.

ディスプレイ7は、例えばLCD(液晶表示装置)によって構成されており、車1のセンターコンソール部分に設置される。なお、ディスプレイ7は、LCDに限定されず、有機ELディスプレイやプラズマディスプレイなどであってもよい。また、設置位置もセンターコンソール部分に限定されず、運転者から見ることができる範囲にあればよい。ディスプレイ7は、駐車支援時に、駐車支援ECU2より入力される画像信号に基づいて、俯瞰画像を表示する。なお、ディスプレイ7は、ナビゲーションシステムなどのディスプレイと兼用してもよい。この場合、操作装置5より駐車支援の開始を指示する操作信号が入力された場合に、ナビゲーション画面から駐車支援画面(俯瞰画像)に切り替えるようにすればよい。   The display 7 is constituted by an LCD (Liquid Crystal Display), for example, and is installed in the center console portion of the car 1. The display 7 is not limited to the LCD, but may be an organic EL display or a plasma display. Further, the installation position is not limited to the center console portion, and may be in a range that can be seen from the driver. The display 7 displays a bird's-eye view image based on an image signal input from the parking assistance ECU 2 during parking assistance. The display 7 may also be used as a display such as a navigation system. In this case, when an operation signal instructing the start of parking assistance is input from the operation device 5, the navigation screen may be switched to the parking assistance screen (overhead image).

操作装置5は、運転者(または同乗者)によって操作されて、操作に応じた操作信号を駐車支援ECU2に出力するものである。本実施形態では、操作装置5は、ディスプレイ7の画面上に配置されたタッチパネルである。ディスプレイ7の画面上に表示されたボタンなどが指先で操作されると、タッチパネルがタッチ位置を読み取って、対応した操作信号を出力する。なお、操作装置5はこれに限定されず、操作ボタンやジョイスティックなどの入力デバイスであってもよい。運転者(または同乗者)は、操作装置5の操作によって、駐車支援ECU2に、駐車支援の開始を指示したり、目的駐車位置を指定したりすることができる。   The operation device 5 is operated by a driver (or a passenger) and outputs an operation signal corresponding to the operation to the parking assist ECU 2. In the present embodiment, the controller device 5 is a touch panel arranged on the screen of the display 7. When a button or the like displayed on the screen of the display 7 is operated with a fingertip, the touch panel reads the touch position and outputs a corresponding operation signal. The operation device 5 is not limited to this, and may be an input device such as an operation button or a joystick. A driver (or a passenger) can instruct the parking assistance ECU 2 to start parking assistance or designate a target parking position by operating the operation device 5.

記憶装置8は、駐車支援を行うための各種情報を記憶する。記憶装置8は、HDD(Hard Disk Drive)、フラッシュメモリ等の二次記憶装置である。なお、記憶装置8は、RAM(Random Access Memory)等の主記憶装置であってもよい。   The storage device 8 stores various information for performing parking assistance. The storage device 8 is a secondary storage device such as a hard disk drive (HDD) or a flash memory. The storage device 8 may be a main storage device such as a RAM (Random Access Memory).

駐車支援ECU2は、駐車支援を行うための電子制御ユニットであり、CPUおよびメモリを備えたマイクロコンピュータによって実現されている。駐車支援ECU2は、各カメラ31〜34から入力される画像データ、各種センサ4より入力される各信号、および、操作装置5より入力される操作信号に基づいて、駐車支援のための制御を行う。本実施形態においては、駐車支援ECU2は、駐車支援として、理想的な駐車軌道と実際の駐車軌道とに基づく報知を行う。理想的な駐車軌道は、駐車支援が開始された時点から目標駐車位置までの車1の軌道である。以下では、理想的な駐車軌道を「理想軌道」と記載する。実際の駐車軌道は、駐車が開始された時点から駐車が終了した時点までの車1の軌道である。以下では、実際の駐車軌道を「実軌道」と記載する。駐車支援ECU2が、本発明の「駐車支援装置」に相当する。   The parking assistance ECU 2 is an electronic control unit for performing parking assistance, and is realized by a microcomputer including a CPU and a memory. The parking assistance ECU 2 performs control for parking assistance based on the image data input from the cameras 31 to 34, the signals input from the various sensors 4, and the operation signals input from the operation device 5. . In this embodiment, parking assistance ECU2 performs notification based on an ideal parking track and an actual parking track as parking assistance. The ideal parking trajectory is the trajectory of the vehicle 1 from the time when parking assistance is started to the target parking position. Hereinafter, an ideal parking track is referred to as an “ideal track”. The actual parking trajectory is the trajectory of the car 1 from the time when parking is started to the time when parking is completed. Hereinafter, the actual parking trajectory is referred to as an “real trajectory”. The parking assistance ECU 2 corresponds to the “parking assistance device” of the present invention.

駐車支援ECU2は、機能ブロックとして、俯瞰画像作成部21、駐車枠検出部22、目標駐車位置設定部23、軌道作成部24、自車位置推定部25、実軌道記憶部26、比較部27、および、画像音声制御部28を備えている。   The parking assist ECU 2 includes, as functional blocks, an overhead image creation unit 21, a parking frame detection unit 22, a target parking position setting unit 23, a track creation unit 24, a host vehicle position estimation unit 25, an actual track storage unit 26, a comparison unit 27, Also, an image / audio control unit 28 is provided.

俯瞰画像作成部21は、俯瞰画像を作成する。俯瞰画像作成部21は、各カメラ31〜34より入力される画像データから、所定の画像処理により、車1の上方の仮想視点から見下ろしたように表示される俯瞰画像を作成する。   The overhead image creation unit 21 creates an overhead image. The bird's-eye view image creation unit 21 creates a bird's-eye view image displayed as if looked down from a virtual viewpoint above the car 1 by predetermined image processing from image data input from the cameras 31 to 34.

駐車枠検出部22は、俯瞰画像作成部21が作成した俯瞰画像から、駐車枠を検出する。駐車枠検出部22は、例えば白線を検出し、白線によって形成された矩形状の領域を駐車枠として検出する。なお、駐車枠を検出する方法は限定されない。パターンマッチングなどの画像認識処理によって、駐車枠を検出するようにしてもよい。駐車枠を形成する線は、白線に限られず、黄線やその他の色の線の場合があるし、また、破線の場合もある。また、駐車枠は、矩形状に形成されている場合に限られず、平行四辺形の形状に形成されている場合や、2本の平行線のみで形成されている場合などもある。これらの場合にも、駐車枠として検出できるのが望ましい。   The parking frame detection unit 22 detects a parking frame from the overhead image created by the overhead image creation unit 21. The parking frame detection unit 22 detects, for example, a white line, and detects a rectangular area formed by the white line as a parking frame. The method for detecting the parking frame is not limited. The parking frame may be detected by image recognition processing such as pattern matching. The line forming the parking frame is not limited to the white line, and may be a yellow line or another color line, or may be a broken line. Further, the parking frame is not limited to being formed in a rectangular shape, but may be formed in a parallelogram shape, or may be formed of only two parallel lines. In these cases, it is desirable that the parking frame can be detected.

目標駐車位置設定部23は、目標駐車位置を設定する。目標駐車位置設定部23は、駐車枠検出部22が検出した駐車枠の中から、車1を駐車するための駐車枠を選択し、選択された駐車枠の位置を目標駐車位置として設定する。車1を駐車するための駐車枠は、駐車枠検出部22が検出した駐車枠の中から、所定のアルゴリズムにしたがって自動的に選択される。なお、駐車枠検出部22が検出した駐車枠をすべて(またはある程度選択して)ディスプレイ7に表示し、操作装置5の操作によって、運転者に選択させるようにしてもよい。また、駐車枠検出部22による駐車枠の検出および表示を行わず、運転者が操作装置5の操作によって、俯瞰画像上に駐車枠を設定するようにしてもよい。   The target parking position setting unit 23 sets a target parking position. The target parking position setting unit 23 selects a parking frame for parking the vehicle 1 from the parking frames detected by the parking frame detection unit 22, and sets the position of the selected parking frame as the target parking position. A parking frame for parking the car 1 is automatically selected according to a predetermined algorithm from the parking frames detected by the parking frame detection unit 22. In addition, all the parking frames detected by the parking frame detection unit 22 may be displayed on the display 7 (or selected to some extent), and the driver may select them by operating the operation device 5. Further, the parking frame may be set on the overhead image by the driver operating the operation device 5 without performing the detection and display of the parking frame by the parking frame detection unit 22.

軌道作成部24は、車1の現在位置から、目標駐車位置設定部23によって設定された目標駐車位置に駐車するための理想軌道を作成する。理想軌道の作成方法は、限定されない。軌道作成部24は、作成した理想軌道を記憶装置8に記憶する。   The track creation unit 24 creates an ideal track for parking at the target parking position set by the target parking position setting unit 23 from the current position of the car 1. The method for creating the ideal trajectory is not limited. The trajectory creation unit 24 stores the created ideal trajectory in the storage device 8.

自車位置推定部25は、車1の現在の位置を推定する。自車位置推定部25は、駐車支援を開始したときの車1の位置を基準として、各種センサ4より逐次入力される検出信号から、車1の現在の位置を推定する。以下では、推定された車1の現在の位置を、「推定位置」と記載する。   The own vehicle position estimation unit 25 estimates the current position of the vehicle 1. The own vehicle position estimation unit 25 estimates the current position of the vehicle 1 from detection signals sequentially input from the various sensors 4 with reference to the position of the vehicle 1 when parking assistance is started. Hereinafter, the estimated current position of the vehicle 1 is described as “estimated position”.

実軌道記憶部26は、駐車が開始された時点から駐車が終了するまでの実軌道を記憶する。具体的には、実軌道記憶部26は、駐車が開始された時点から駐車が終了した時点まで、自車位置推定部25が推定位置を推定するたびに、当該推定位置を記憶装置8に記憶する。これにより、記憶装置8には、複数の推定位置が時系列順に記憶される。当該複数の推定位置によって表される軌道が実軌道である。したがって、実軌道が記憶装置8に記憶される。本実施形態では、自車位置推定部25と実軌道記憶部26とが、本発明の「検出手段」に相当する。   The actual trajectory storage unit 26 stores an actual trajectory from when parking is started until parking is completed. Specifically, the actual track storage unit 26 stores the estimated position in the storage device 8 every time the own vehicle position estimation unit 25 estimates the estimated position from the time when parking is started to the time when parking is completed. To do. As a result, the storage device 8 stores a plurality of estimated positions in chronological order. The trajectory represented by the plurality of estimated positions is an actual trajectory. Accordingly, the actual trajectory is stored in the storage device 8. In the present embodiment, the vehicle position estimation unit 25 and the actual track storage unit 26 correspond to the “detection means” of the present invention.

比較部27は、記憶装置8に記憶された理想軌道と実軌道とを比較する。そして、比較結果として、理想軌道と実軌道との差異を画像音声制御部28に出力する。   The comparison unit 27 compares the ideal trajectory stored in the storage device 8 with the actual trajectory. Then, as a comparison result, the difference between the ideal trajectory and the actual trajectory is output to the image / sound controller 28.

画像音声制御部28は、駐車支援のための報知を行う。具体的には、画像音声制御部28は、駐車支援のための画像を作成してディスプレイ7に表示させ、駐車支援のための音声をスピーカ6に出力させる。本実施形態においては、画像音声制御部28は、駐車支援の開始時における俯瞰画像に理想軌道および実軌道を重畳させた画像(以下では、「支援画像」と記載する)を作成し、ディスプレイ7に表示させる。本実施形態においては、支援画像は、静止画であるものとする。また、画像音声制御部28は、比較部27の比較結果(差異の情報)に基づいて、理想軌道と実軌道との差異およびその差異を解消するためのアドバイスなどをディスプレイ7に表示させるとともにスピーカ6に音声案内させる。なお、画像音声制御部28がディスプレイ7に表示させる画像や、スピーカ6に出力させる音声は限定されない。画像音声制御部28が、本発明の「報知手段」に相当する。   The image / sound control unit 28 performs notification for parking assistance. Specifically, the audio / video control unit 28 creates an image for parking assistance, displays the image on the display 7, and causes the speaker 6 to output an audio for parking assistance. In the present embodiment, the audio / video control unit 28 creates an image (hereinafter referred to as “support image”) in which the ideal trajectory and the actual trajectory are superimposed on the overhead view image at the start of parking support, and the display 7 To display. In the present embodiment, it is assumed that the support image is a still image. Further, the audio / video control unit 28 displays the difference between the ideal trajectory and the actual trajectory and advice for eliminating the difference on the display 7 based on the comparison result (difference information) of the comparison unit 27 and the speaker. 6 is voice-guided. Note that the image displayed by the image / audio control unit 28 on the display 7 and the sound output by the speaker 6 are not limited. The image / audio control unit 28 corresponds to the “notification unit” of the present invention.

次に、駐車支援ECU2が行う駐車支援処理を、図2ないし図4に示すフローチャートを参照して、以下に説明する。   Next, parking support processing performed by the parking support ECU 2 will be described below with reference to the flowcharts shown in FIGS.

図2は、駐車支援処理の一例を示すフローチャートである。当該駐車支援処理は、例えば、操作装置5より駐車支援の開始を指示する操作信号が入力された場合に実行される。なお、シフト操作によりRレンジ(後進レンジ)が選択された場合など、駐車を行う意思を示す動作があった場合に実行されるようにしてもよい。   FIG. 2 is a flowchart illustrating an example of the parking support process. The parking support process is executed, for example, when an operation signal instructing the start of parking support is input from the operation device 5. In addition, you may make it perform, when there exists operation | movement which shows the intention to park, such as when the R range (backward range) is selected by shift operation.

まず、駐車支援の開始時の車1の位置(以下では、「開始位置」と記載する)が設定される(S1)。以下の処理では、当該開始位置を基準(原点)として、各位置が座標により表される。   First, the position of the car 1 at the start of parking assistance (hereinafter referred to as “start position”) is set (S1). In the following processing, each position is represented by coordinates with the start position as a reference (origin).

次に、開始位置から目標駐車位置までの理想軌道を作成し記憶する理想軌道記憶処理が行われる(S2)。図3は、当該理想軌道記憶処理のサブルーチンの一例を示すフローチャートである。理想軌道記憶処理においては、まず、各カメラ31〜34から画像データが入力され(S21)、俯瞰画像作成部21によって、開始位置における俯瞰画像が作成される(S22)。作成された、開始位置における俯瞰画像は、俯瞰画像作成部21によって、記憶装置8に記憶される。次に、目標駐車位置が設定される(S23)。具体的には、駐車枠検出部22が俯瞰画像から駐車枠を検出し、目標駐車位置設定部23が検出された駐車枠の中から選択した駐車枠の位置を目標駐車位置として設定する。目標駐車位置および方向の情報(開始位置を基準とした位置および方向)は記憶される。そして、軌道作成部24によって理想軌道が作成される(S24)。作成された理想軌道は、軌道作成部24によって記憶装置8に記憶される(S25)。以上により、理想軌道記憶処理が終了される。   Next, ideal trajectory storage processing for creating and storing an ideal trajectory from the start position to the target parking position is performed (S2). FIG. 3 is a flowchart showing an example of the ideal orbit storage process subroutine. In the ideal trajectory storage processing, first, image data is input from each of the cameras 31 to 34 (S21), and the overhead image creation unit 21 creates an overhead image at the start position (S22). The overhead image created at the start position is stored in the storage device 8 by the overhead image creation unit 21. Next, a target parking position is set (S23). Specifically, the parking frame detection unit 22 detects a parking frame from the overhead image, and the target parking position setting unit 23 sets the position of the parking frame selected from the detected parking frames as the target parking position. Information on the target parking position and direction (position and direction based on the start position) is stored. Then, an ideal trajectory is created by the trajectory creation unit 24 (S24). The created ideal trajectory is stored in the storage device 8 by the trajectory creation unit 24 (S25). Thus, the ideal trajectory storage process is completed.

図5(a)は、軌道作成部24によって作成された理想軌道を説明するための図である。すなわち、図5(a)は、理想軌道記憶処理によって記憶装置8に記憶された理想軌道を説明するための図である。図5(a)では、車1が点Psに位置するときに、駐車支援処理が開始されたとして説明する。点Psは、例えば車1の中心位置としている(点P11,Pg1も同様)。点Psにおいて駐車支援処理の開始処理が実行され、点Psが開始位置として設定される。そして、検出された駐車枠から点Pg1に示される位置が目標駐車位置として設定されたとする。開始位置Psから目標駐車位置Pg1に駐車する場合、切り返しが必要となるので、理想軌道として軌道L11および軌道L12が作成される。軌道L11は開始位置Psから切り返し位置P11までの理想軌道であり、軌道L12は切り返し位置P11から目標駐車位置Pg1までの理想軌道である。なお、理想軌道は、開始位置を基準とした位置情報の集合として記憶される。   FIG. 5A is a diagram for explaining an ideal trajectory created by the trajectory creation unit 24. That is, FIG. 5A is a diagram for explaining the ideal trajectory stored in the storage device 8 by the ideal trajectory storage process. In FIG. 5A, the description will be made assuming that the parking assist process is started when the vehicle 1 is located at the point Ps. The point Ps is, for example, the center position of the car 1 (the same applies to the points P11 and Pg1). The start process of the parking assistance process is executed at the point Ps, and the point Ps is set as the start position. Then, it is assumed that the position indicated by the point Pg1 from the detected parking frame is set as the target parking position. When parking from the start position Ps to the target parking position Pg1, since turning is necessary, the trajectory L11 and the trajectory L12 are created as ideal trajectories. The trajectory L11 is an ideal trajectory from the start position Ps to the return position P11, and the trajectory L12 is an ideal trajectory from the return position P11 to the target parking position Pg1. The ideal trajectory is stored as a set of position information based on the start position.

次に、運転者による駐車が開始された時点から駐車が終了した時点までの実際の駐車軌道(実軌道)を記憶する実軌道記憶処理が行われる(S3)。図4は、当該実軌道記憶処理のサブルーチンの一例を示すフローチャートである。なお、駐車支援処理が開始された時を、運転者による駐車が開始された時点とする。実軌道記憶処理においては、まず、各種センサ4から検出信号が入力され(S31)、自車位置推定部25によって、車1の現在の位置(推定位置)が推定される(S32)。推定位置は開始位置Psを基準とした位置として算出される。また、推定位置には開始位置を基準とした方向も含まれる。そして、実軌道記憶部26によって、推定位置が記憶装置8に記憶される(S33)。続いて、車1の駐車が終了したか否かの判断が行われる(S34)。当該駐車が終了したか否かは、例えば、シフト操作によりPレンジ(パーキングレンジ)が選択されたか否か、俯瞰画像作成部21によって作成された俯瞰画像に基づき車1が駐車枠内に位置することを認識したか否か、あるいは、運転者による操作装置5の操作により、理想軌道と実軌道とに基づく報知を指示されたか否かにより判断すればよい。ステップS34で、まだ駐車が終了していないと判断されると(S34:NO)、ステップS31からステップS34の処理を繰り返し行う。そして、ステップS34で駐車が終了したと判断されると(S34:YES)、実軌道記憶処理が終了される。上記実軌道記憶処理により、開始位置から車1の駐車が終了するまでの複数の推定位置が記憶装置8に時系列順に記憶される。すなわち、実軌道記憶処理により、実軌道が記憶される。   Next, an actual trajectory storage process for storing an actual parking trajectory (actual trajectory) from the time when parking by the driver is started to the time when parking is completed is performed (S3). FIG. 4 is a flowchart illustrating an example of a subroutine for the actual trajectory storage process. The time when the parking support process is started is the time when parking by the driver is started. In the actual track storage process, first, detection signals are input from the various sensors 4 (S31), and the current position (estimated position) of the vehicle 1 is estimated by the own vehicle position estimating unit 25 (S32). The estimated position is calculated as a position based on the start position Ps. Further, the estimated position includes a direction based on the start position. Then, the estimated position is stored in the storage device 8 by the actual trajectory storage unit 26 (S33). Subsequently, it is determined whether or not the parking of the car 1 has been completed (S34). Whether or not the parking has ended is determined based on, for example, whether or not the P range (parking range) has been selected by the shift operation, and the vehicle 1 is positioned within the parking frame based on the overhead image created by the overhead image creation unit 21. This may be determined based on whether or not this is recognized, or whether or not notification based on the ideal trajectory and the actual trajectory is instructed by the operation of the operating device 5 by the driver. If it is determined in step S34 that parking has not ended yet (S34: NO), the processing from step S31 to step S34 is repeated. If it is determined in step S34 that parking has ended (S34: YES), the actual trajectory storage process is ended. By the actual track storage process, a plurality of estimated positions from the start position until the parking of the vehicle 1 is completed are stored in the storage device 8 in time series order. That is, the actual trajectory is stored by the actual trajectory storage process.

図5(b)は、駐車の開始から終了までの実軌道を説明するための図である。すなわち、図5(b)は、実軌道記憶処理によって記憶装置8に記憶された実軌道を説明するための図である。図5(b)では、上記図5(a)と同様に、車1が開始位置Psに位置するときに、駐車が開始されている。また、図5(b)では、点Pg2に示す位置で、車1の駐車が終了したものとしている。以下では、当該点Pg2を「終了位置Pg2」と記載する。終了位置Pg2は、例えば車1の中心位置としている(後述する複数の切り返し位置P21〜P23も同様)。本実施形態では、運転者は、図5(b)に示すように、開始位置Psから終了位置Pg2までに、複数回(3回)の切り返しを行ったものとしている。この場合、実軌道として軌道L21〜L24が記憶される。軌道L21は、開始位置Psから一回目の切り返し位置P21までの実軌道である。軌道L22は、一回目の切り返し位置P21から二回目の切り返し位置P22までの実軌道である。軌道L23は、二回目の切り返し位置P22から三回目の切り返し位置P23までの実軌道である。軌道L24は、三回目の切り返し位置P23から終了位置Pg2までの実軌道である。すなわち、車1の切り返しごとの実軌道が記憶される。本実施形態においては、車1の前進と後進とが切り替わることを「切り返し」としている。なお、実軌道は、理想軌道と同様に、開始位置を基準とした位置情報の集合として記憶される。   FIG. 5B is a diagram for explaining an actual trajectory from the start to the end of parking. That is, FIG. 5B is a diagram for explaining the actual trajectory stored in the storage device 8 by the actual trajectory storage process. In FIG. 5 (b), parking is started when the vehicle 1 is located at the start position Ps, as in FIG. 5 (a). In FIG. 5B, it is assumed that the parking of the car 1 is completed at the position indicated by the point Pg2. Hereinafter, the point Pg2 is referred to as “end position Pg2”. The end position Pg2 is, for example, the center position of the car 1 (the same applies to a plurality of turn-back positions P21 to P23 described later). In the present embodiment, as shown in FIG. 5 (b), the driver performs a plurality of times (three times) of turn-over from the start position Ps to the end position Pg2. In this case, the tracks L21 to L24 are stored as actual tracks. The trajectory L21 is an actual trajectory from the start position Ps to the first turn-back position P21. The trajectory L22 is an actual trajectory from the first turning position P21 to the second turning position P22. The trajectory L23 is an actual trajectory from the second turning position P22 to the third turning position P23. The trajectory L24 is an actual trajectory from the third turn-back position P23 to the end position Pg2. That is, the actual track for each turn of the vehicle 1 is stored. In the present embodiment, switching between forward and reverse movement of the vehicle 1 is referred to as “turnback”. The actual trajectory is stored as a set of position information based on the start position, like the ideal trajectory.

次に、比較部27によって、記憶装置8から理想軌道と実軌道とが読み出され、これらの比較が行われる(S4)。具体的には、理想軌道における複数の位置情報と実軌道における複数の位置情報とに基づいて比較が行われ、これらの差異が比較結果として、画像音声制御部28に出力される。   Next, the comparison unit 27 reads the ideal trajectory and the actual trajectory from the storage device 8 and compares them (S4). Specifically, a comparison is performed based on a plurality of position information in the ideal trajectory and a plurality of position information in the actual trajectory, and these differences are output as comparison results to the image and sound control unit 28.

次に、理想軌道と実軌道とに基づく報知処理が行われる(S5)。具体的には、報知処理では、画像音声制御部28によって、記憶装置8に記憶された開始位置Psにおける俯瞰画像に、理想軌道(軌道L11,L12)および実軌道(軌道L21〜L24)を重畳させた支援画像が作成され、これがディスプレイ7に表示される。理想軌道は、複数の軌道L11,L12毎に、記憶装置8に記憶された複数の位置情報を順に線で結ぶことで描くことができる。同様に、実軌道は、複数の軌道L21〜L24毎に、記憶装置8に記憶された複数の位置情報を順に線で繋ぐことで描くことができる。なお、理想軌道および実軌道は、単純に線で結ぶのではなく、複数の軌道(軌道L11,L12、軌道L21〜L24)毎に、所定のフィッティング手法(例えば最小二乗法)により算出される曲線で描くようにしてもよい。また、ステップS4による比較結果に基づいて、画像音声制御部28によって、理想軌道と実軌道との差異およびその差異に基づく運転アドバイスが支援画像に重畳されてディスプレイ7に表示されるとともにスピーカ6から音声案内される。当該運転アドバイスは、例えば、理想軌道と実軌道との差異を解消するための情報である。仮に、理想軌道と実軌道との差異が極めて少ない場合は、「理想の駐車軌道に沿って駐車できています」などの実際の駐車を称賛するコメントを表示したり音声案内したりするようにしてもよい。   Next, a notification process based on the ideal trajectory and the actual trajectory is performed (S5). Specifically, in the notification process, the image and sound control unit 28 superimposes the ideal trajectory (trajectory L11, L12) and the actual trajectory (trajectory L21 to L24) on the overhead view image at the start position Ps stored in the storage device 8. The supported support image is created and displayed on the display 7. The ideal trajectory can be drawn by connecting a plurality of position information stored in the storage device 8 with a line in order for each of the plurality of trajectories L11 and L12. Similarly, the actual trajectory can be drawn by sequentially connecting a plurality of pieces of position information stored in the storage device 8 for each of the plurality of trajectories L21 to L24. The ideal trajectory and the actual trajectory are not simply connected by a line, but are curves calculated by a predetermined fitting method (for example, the least square method) for each of a plurality of trajectories (trajectories L11, L12, trajectories L21 to L24). You may make it draw with. Further, based on the comparison result in step S4, the audio / video control unit 28 displays the difference between the ideal trajectory and the actual trajectory and the driving advice based on the difference on the support image and is displayed on the display 7 and from the speaker 6. Voice guidance is provided. The driving advice is information for eliminating a difference between an ideal trajectory and an actual trajectory, for example. If the difference between the ideal trajectory and the actual trajectory is extremely small, display a comment that praises the actual parking, such as `` Parking along the ideal parking trajectory '' or voice guidance. Also good.

図6は、ディスプレイ7の表示画面に表示される支援画像の一例を示している。図6に示す支援画像は、車1が表示画面の略中心に、画面上方を向いて表示された俯瞰画像になっており、理想軌道(軌道L11,L12)を点線、実軌道(軌道L21〜L24)を実線で示している。また、図6においては、開始位置Ps、理想軌道および実軌道における各切り返し位置、目標駐車位置Pg1、および、終了位置Pg2に車1のアイコンも俯瞰画像に重畳表示している。図6においては、実軌道上の車1のアイコンは実線で、理想軌道上の車1のアイコンは点線で示している。なお、実軌道上の車1のアイコンと理想軌道上の車1のアイコンとの区別がつけば、これに限定されない。例えば、色を変えたり、透過度を変えたりして、これらの区別するようにしてもよい。また、実軌道上あるいは理想軌道上の一方にのみ、車1のアイコンを表示してもよいし、車1のアイコンを表示しなくてもよい。支援画像には、図6に示すように、さらに理想軌道と実軌道との差異を示すコメントC1、理想軌道と実軌道との差異に基づく運転アドバイスを示すコメントC2が表示されている。これらのコメントC1,C2は、支援画像に重畳されてディスプレイ7に表示されるとともに、スピーカ6から音声案内される。なお、図6に示すコメントC1,C2は一例であり、これに限定されるものではない。運転者は、図6に示す支援画像をみることで、理想軌道と実軌道とを比較して確認することができる。   FIG. 6 shows an example of a support image displayed on the display screen of the display 7. The support image shown in FIG. 6 is a bird's-eye view image in which the car 1 is displayed at the approximate center of the display screen and facing upward. The ideal trajectory (tracks L11 and L12) is a dotted line, and the real trajectory (tracks L21 to L21). L24) is indicated by a solid line. In FIG. 6, the icon of the car 1 is also superimposed on the bird's-eye view image at the start position Ps, each turning position in the ideal track and the actual track, the target parking position Pg1, and the end position Pg2. In FIG. 6, the icon of the car 1 on the actual track is indicated by a solid line, and the icon of the car 1 on the ideal track is indicated by a dotted line. Note that the icon of the car 1 on the actual track and the icon of the car 1 on the ideal track are not limited thereto. For example, these may be distinguished by changing the color or changing the transparency. Further, the icon of the car 1 may be displayed only on one of the actual track and the ideal track, or the icon of the car 1 may not be displayed. As shown in FIG. 6, the support image further includes a comment C1 indicating a difference between the ideal trajectory and the actual trajectory, and a comment C2 indicating a driving advice based on the difference between the ideal trajectory and the actual trajectory. These comments C1 and C2 are superimposed on the support image and displayed on the display 7, and are also voice-guided from the speaker 6. Note that the comments C1 and C2 shown in FIG. 6 are examples, and the present invention is not limited to these. The driver can compare and confirm the ideal trajectory and the actual trajectory by looking at the support image shown in FIG.

図2ないし図4のフローチャートに示す各処理は一例であって、駐車支援処理は上述したものに限定されない。   Each process shown in the flowcharts of FIGS. 2 to 4 is an example, and the parking support process is not limited to the above-described process.

次に、本実施形態に係る駐車支援ECU2の作用および効果について説明する。   Next, the operation and effect of the parking assist ECU 2 according to the present embodiment will be described.

本実施形態によると、理想軌道と実軌道とを俯瞰画像に重畳表示させた画像(支援画像)がディスプレイ7に表示される。また、理想軌道と実軌道との比較結果がディスプレイ7に表示されるとともに、スピーカ6から音声案内される。これにより、運転者は、理想軌道と比べて、自身の駐車軌道(実軌道)がどの程度ずれているかを把握することができるとともに、自身の駐車がどのように不適切であったかを知ることができる。したがって、運転者は、次回の駐車時に、理想軌道に沿って駐車するために、どのように運転すればよいかを確認することができる。以上のことから、駐車支援ECU2は、運転者の駐車技量の向上を支援することができる。   According to the present embodiment, an image (support image) in which the ideal trajectory and the actual trajectory are superimposed and displayed on the overhead image is displayed on the display 7. Further, the comparison result between the ideal trajectory and the actual trajectory is displayed on the display 7 and voice guidance is given from the speaker 6. As a result, the driver can grasp how much his / her parking trajectory (actual trajectory) is deviated from the ideal trajectory and know how inappropriate his / her parking was. it can. Therefore, the driver can confirm how to drive in order to park along the ideal trajectory at the next parking. From the above, the parking assist ECU 2 can assist the improvement of the driver's parking skill.

上記実施形態では、理想軌道と実軌道との比較結果を、ディスプレイ7に表示させるとともに、スピーカ6に音声案内させたが、これらを行わなくてもよい。すなわち、上記支援画像のみをディスプレイ7に表示させてもよい。この場合、比較部27を備える必要がない。また、理想軌道と実軌道との比較結果を支援画像に重畳させてディスプレイ7に表示させるかあるいはスピーカ6に音声案内させるかのいずれか一方で報知するものであってもよい。   In the above embodiment, the comparison result between the ideal trajectory and the actual trajectory is displayed on the display 7 and the speaker 6 is voice-guided. However, these may not be performed. That is, only the support image may be displayed on the display 7. In this case, it is not necessary to provide the comparison unit 27. Further, the comparison result between the ideal trajectory and the actual trajectory may be displayed either on the support image and displayed on the display 7 or by the voice guidance of the speaker 6.

上記実施形態では、理想軌道と実軌道との比較結果として、これらの差異を示すコメントC1および運転アドバイスのコメントC2の両方を支援画像に重畳させてディスプレイ7に表示させるとともに、スピーカ6に音声案内させたが、差異を示すコメントC1あるいは運転アドバイスのコメントC2のいずれか一方のみを支援画像に重畳させて表示させるとともに、音声案内させてもよい。なお、この場合も、ディスプレイ7への表示あるいはスピーカ6からの音声案内のいずれか一方で報知してもよい。   In the above embodiment, as a comparison result between the ideal trajectory and the actual trajectory, both the comment C1 indicating the difference and the comment C2 of the driving advice are superimposed on the support image and displayed on the display 7, and the voice guidance is given to the speaker 6. However, only one of the comment C1 indicating the difference or the comment C2 of the driving advice may be superimposed and displayed on the support image, and may be voice-guided. In this case as well, notification may be given by either display on the display 7 or voice guidance from the speaker 6.

上記実施形態では、駐車が終了してから、理想軌道と実軌道とに基づく報知が行われるようにしたが、その報知が行われるタイミングはこれに限定されない。運転者が車1を駐車している途中で、一時的に駐車を中断したときに、理想軌道と実軌道とに基づく報知が行われるようにしてもよい。例えば、図5(b)に示す軌道において、車1が切り返し位置P22に位置するときに、運転者による操作装置5の操作により理想軌道と実軌道とに基づく報知を指示されると、開始位置における俯瞰画像に、理想軌道と開始位置Psから切り返し位置P22までの実軌道とが重畳された支援画像や、理想軌道と実軌道との差異および運転アドバイスが報知されるようにしてもよい。また、自車位置推定部25が推定位置を推定するたびに、理想軌道と実軌道とに基づく報知が行われるようにしてもよい。すなわち、理想軌道と実軌道とに基づく報知を、運転者が駐車している最中に随時行うようにしてもよい。この場合、比較部27は、自車位置推定部25が推定した推定位置と理想軌道とを比較し、当該比較結果を画像音声制御部28に出力する。そして、画像音声制御部28が、当該比較結果に基づくコメントC1,C2などを報知すればよい。なお、当該変形例においては、運転者は、運転中(駐車中)であるので、表示画面への注視を抑制するために、スピーカ6からの音声案内のみを行うとよい。   In the above embodiment, the notification based on the ideal trajectory and the actual trajectory is performed after the parking is completed, but the timing at which the notification is performed is not limited to this. When parking is temporarily interrupted while the driver is parking the car 1, notification based on the ideal trajectory and the actual trajectory may be performed. For example, in the track shown in FIG. 5 (b), when the vehicle 1 is positioned at the turn-back position P22, if the driver is instructed to perform notification based on the ideal track and the actual track by operating the operation device 5, the start position The support image in which the ideal trajectory and the actual trajectory from the start position Ps to the turn-back position P22 are superimposed on the overhead view image in FIG. 5, the difference between the ideal trajectory and the actual trajectory, and driving advice may be reported. In addition, every time the vehicle position estimation unit 25 estimates the estimated position, notification based on the ideal track and the actual track may be performed. That is, the notification based on the ideal trajectory and the actual trajectory may be performed at any time while the driver is parked. In this case, the comparison unit 27 compares the estimated position estimated by the host vehicle position estimation unit 25 with the ideal trajectory, and outputs the comparison result to the image / audio control unit 28. Then, the audio / video control unit 28 may notify the comments C1, C2 and the like based on the comparison result. In the modified example, since the driver is driving (parking), only voice guidance from the speaker 6 may be performed in order to suppress gaze on the display screen.

上記実施形態では、理想軌道と実軌道とを重畳させる俯瞰画像として、開始位置における俯瞰画像を用いるようにしたが、開始位置Psから終了位置Pg2までのいずれの俯瞰画像を用いてもよい。なお、重畳表示させる理想軌道および実軌道のすべてが表示される俯瞰画像であるとよい。例えば、駐車が終了した時(終了位置Pg2)における俯瞰画像を用いる場合、俯瞰画像作成部21は、開始位置における俯瞰画像の代わりに、車1が終了位置Pg2に位置するときに作成した俯瞰画像(終了位置Pg2における俯瞰画像)を記憶装置8に記憶する。当該変形例においても、運転者は、理想軌道と実軌道との差異を確認することができる。   In the above embodiment, the bird's-eye view image at the start position is used as the bird's-eye view image that superimposes the ideal trajectory and the actual trajectory, but any bird's-eye view image from the start position Ps to the end position Pg2 may be used. Note that the bird's-eye view image may display all of the ideal trajectory and the actual trajectory to be displayed in a superimposed manner. For example, when using the bird's-eye view image when parking is finished (end position Pg2), the bird's-eye view image creation unit 21 creates the bird's-eye view image when the vehicle 1 is located at the end position Pg2 instead of the bird's-eye view image at the start position. (Overhead image at the end position Pg2) is stored in the storage device 8. Also in this modification, the driver can confirm the difference between the ideal track and the actual track.

上記実施形態では、俯瞰画像に、理想軌道と実軌道との両方を重畳させた画像(支援画像)を表示させたが、これに限定されない。例えば、図7に示すように、ディスプレイ7の表示画面を二画面(例えば左右)に分割して、一方(図7においては左方)に俯瞰画像に理想軌道を重畳させた画像を表示させ、他方(図7においては右方)に実軌道を表示させるようにしてもよい。2つの画像を横に並べて表示させるため、ディスプレイ7の表示画面に表示される各画像は、左右方向に縮小して表示される。当該変形例においても、運転者は、理想軌道と実軌道との差異を確認することができる。   In the above embodiment, an image (support image) in which both the ideal trajectory and the actual trajectory are superimposed on the overhead image is displayed, but the present invention is not limited to this. For example, as shown in FIG. 7, the display screen of the display 7 is divided into two screens (for example, left and right), and an image obtained by superimposing an ideal trajectory on the overhead image is displayed on one side (left side in FIG. 7). The actual trajectory may be displayed on the other side (right side in FIG. 7). In order to display two images side by side, each image displayed on the display screen of the display 7 is reduced and displayed in the left-right direction. Also in this modification, the driver can confirm the difference between the ideal track and the actual track.

上記実施形態では、ディスプレイ7に表示させる支援画像が静止画であるものとしたが、動画であってもよい。例えば、実軌道記憶部26は、自車位置推定部25が推定した推定位置だけでなく、俯瞰画像作成部21が作成した当該推定位置における俯瞰画像を当該推定位置に対応付けて記憶装置8に記憶させる。これにより、記憶装置8には、複数の推定位置と複数の俯瞰画像とが対応付けられて、時系列順に記憶される。そして、図2に示すステップS5の報知処理において、画像音声制御部28が、記憶装置8に記憶された俯瞰画像を読み出し、当該読み出した俯瞰画像に理想軌道を重畳させた画像を作成する。その後、作成した画像をディスプレイ7に表示する。この処理を開始位置Psから終了位置Pg2まで時系列順に行う。これにより、画像が作成されるたびに、ディスプレイ7に表示される画像が書き換えられるので、ディスプレイ7には動画映像として表示される。   In the above embodiment, the support image displayed on the display 7 is a still image, but may be a moving image. For example, the actual track storage unit 26 stores not only the estimated position estimated by the host vehicle position estimation unit 25 but also the overhead image at the estimated position created by the overhead view image creation unit 21 in the storage device 8 in association with the estimated position. Remember. Thereby, in the storage device 8, a plurality of estimated positions and a plurality of overhead images are associated with each other and stored in chronological order. Then, in the notification process of step S5 shown in FIG. 2, the audio / video control unit 28 reads the bird's-eye view image stored in the storage device 8, and creates an image in which the ideal trajectory is superimposed on the read bird's-eye view image. Thereafter, the created image is displayed on the display 7. This process is performed in chronological order from the start position Ps to the end position Pg2. Thus, every time an image is created, the image displayed on the display 7 is rewritten, so that the image is displayed on the display 7 as a moving image.

図8は、動画映像として表示する場合の、ディスプレイ7の表示画面の一例を示している。図8(a)は、駐車支援処理が開始されたときの画像であり、図5(b)に示す位置Psに位置するときを示している。図8(b)は、車1が少し進んだ後の画像であり、図5(b)に示す位置Psから位置P21の移動する途中に位置するときを示している。図8(c)は、車1がさらに進んだ後の画像であり、図5(b)に示す位置P21に位置するときを示している。これらの画像は、車1が画面の中心に、画面上方を向いて表示された俯瞰画像になっている。また、これらの画像には、理想軌道(点線)、実軌道(実線)が重畳表示されている。なお、当該実軌道は、開始位置から車1の推定位置までの複数の推定位置(位置情報)を用いて、これらの位置情報を線で結ぶことで、図8(b)および図8(c)のような実軌道を描くことができる。また、図8においては、比較部27による比較結果に基づくコメントC1,C2を図6に示すような吹き出しではなく、予め設けられたコメント欄C0に表示している。   FIG. 8 shows an example of the display screen of the display 7 when displaying as a moving image. FIG. 8A is an image when the parking support process is started, and shows a position at the position Ps shown in FIG. FIG. 8B is an image after the car 1 has advanced a little, and shows a position when the vehicle 1 is moving from the position Ps shown in FIG. 5B to the position P21. FIG. 8C is an image after the vehicle 1 has further advanced, and shows a position at the position P21 shown in FIG. 5B. These images are bird's-eye images displayed with the car 1 facing the top of the screen at the center of the screen. Also, an ideal trajectory (dotted line) and an actual trajectory (solid line) are superimposed on these images. Note that the actual track uses a plurality of estimated positions (position information) from the start position to the estimated position of the car 1 and connects these position information with lines, so that FIG. 8B and FIG. ) Can be drawn. Further, in FIG. 8, the comments C1 and C2 based on the comparison result by the comparison unit 27 are displayed in a comment field C0 provided in advance, instead of a balloon as shown in FIG.

なお、上記した動画映像としての表示は一例であり、これに限定されるものではない。例えば、図9に示すように、開始位置における俯瞰画像上に、車1のアイコン、理想軌道および実軌道を重畳表示させた動画映像を表示するようにしてもよい。図9(a)は、図8(a)と同様に、駐車支援処理が開始されたときの画像であり、図5(b)に示す位置Psに位置するときを示している。図9(b)は、図8(b)と同様に、車1が少し進んだ後の画像であり、図5(b)に示す位置Psから位置P21の移動する途中に位置するときを示している。図9(c)は、図8(c)と同様に、車1がさらに進んだ後の画像であり、図5(b)に示す位置P21に位置するときを示している。例えば、開始位置における俯瞰画像に、記憶装置8に記憶される理想軌道を点線で重畳表示させる。そして、さらに、同じく記憶装置8に記憶される複数の推定位置を用いて、開始位置から各推定位置までの位置情報を結んだ実線を実軌道として重畳させ、推定位置に車1のアイコンを重畳させる。この画像を、開始位置Psから終了位置Pg2まで推定位置を更新しながら作成して順にディスプレイ7に表示させることで、図9のような動画映像を表示させることができる。なお、動画映像の作成方法は限定されない。   Note that the display as a moving image is an example, and the present invention is not limited to this. For example, as shown in FIG. 9, a moving image image in which the icon, the ideal trajectory, and the actual trajectory of the car 1 are superimposed and displayed on the overhead view image at the start position may be displayed. FIG. 9A is an image when parking support processing is started, as in FIG. 8A, and shows a position at the position Ps shown in FIG. 5B. FIG. 9B is an image after the car 1 has advanced a little like FIG. 8B, and shows the position when the position Ps shown in FIG. 5B is moving from the position P21. ing. FIG. 9C is an image after the vehicle 1 has further advanced, as in FIG. 8C, and shows a position at the position P21 shown in FIG. 5B. For example, the ideal trajectory stored in the storage device 8 is superimposed and displayed on the overhead image at the start position with a dotted line. Further, using a plurality of estimated positions similarly stored in the storage device 8, a solid line connecting position information from the start position to each estimated position is superimposed as an actual track, and the icon of the car 1 is superimposed on the estimated position. Let By creating this image while updating the estimated position from the start position Ps to the end position Pg2 and sequentially displaying it on the display 7, it is possible to display a moving image as shown in FIG. Note that the method for creating a moving image is not limited.

上記実施形態では、実軌道記憶部26によって、推定位置が記憶装置8に記憶される場合を説明したが、これに限定されない。例えば、推定位置の代わりに、各種センサ4から入力される各種検出値(車速、操舵角、シフトポジション、ブレーキペダルの操作量、アクセルペダルの操作量など)が、運転ログとして記憶されてもよい。この場合、比較部27は、当該運転ログから推定位置を推定し、当該推定位置に基づく実軌道と理想軌道とを比較すればよい。また、画像音声制御部28は、当該運転ログから推定位置を推定し、当該推定位置に基づく実軌道を作成し、報知すればよい。さらに、軌道作成部24によって、理想軌道として、開始位置を基準とした位置情報の集合の代わりに、理想的な駐車を行うための走行制御情報(例えば、車速、操舵角、ブレーキ制御量、アクセル操作量など)が作成される場合には、比較部27は、上記走行制御情報と上記運転ログとを比較することで、理想軌道と実軌道との比較を行うようにしてもよい。そして、画像音声制御部28が、比較部27による上記走行制御情報と上記運転ログとの比較結果に基づいて、切り返し位置、操舵タイミング、操舵量、車速などの差異や運転アドバイスの報知を行う。したがって、このような場合であっても、画像音声制御部28は、理想軌道と実軌道とに基づく報知を行うことができる。なお、当該変形例においては、実軌道記憶部26によって、推定位置の代わりに運転ログが記憶装置8に記憶されるようにしたが、これらの両方が記憶されてもよい。また、軌道作成部24によって、開始位置を基準とした位置情報の集合の代わりに、走行制御情報が記憶装置8に記憶されるようにしたが、これらの両方が記憶されてもよい。   In the above embodiment, the case where the estimated position is stored in the storage device 8 by the actual trajectory storage unit 26 has been described, but the present invention is not limited to this. For example, instead of the estimated position, various detection values (vehicle speed, steering angle, shift position, brake pedal operation amount, accelerator pedal operation amount, etc.) input from various sensors 4 may be stored as a driving log. . In this case, the comparison unit 27 may estimate the estimated position from the operation log and compare the actual trajectory and the ideal trajectory based on the estimated position. Further, the image / audio control unit 28 may estimate the estimated position from the operation log, create an actual trajectory based on the estimated position, and notify it. Furthermore, instead of a set of position information based on the start position as an ideal trajectory by the trajectory creation unit 24, travel control information for performing ideal parking (for example, vehicle speed, steering angle, brake control amount, accelerator) When the operation amount or the like is generated, the comparison unit 27 may compare the ideal trajectory with the actual trajectory by comparing the travel control information with the operation log. Then, based on the comparison result between the traveling control information and the driving log by the comparison unit 27, the image / audio control unit 28 notifies the difference of the switching position, the steering timing, the steering amount, the vehicle speed, and the driving advice. Therefore, even in such a case, the image / audio control unit 28 can perform notification based on the ideal trajectory and the actual trajectory. In addition, in the said modification, although the driving log was memorize | stored in the memory | storage device 8 instead of the estimated position by the real track memory | storage part 26, both of these may be memorize | stored. In addition, the trajectory creation unit 24 stores the travel control information in the storage device 8 instead of the set of position information based on the start position, but both of them may be stored.

本発明に係る駐車支援装置は、上述した実施形態に限定されるものではない。本発明に係る駐車支援装置の各部の具体的な構成は、種々に設計変更自在である。   The parking assistance apparatus according to the present invention is not limited to the above-described embodiment. The specific configuration of each part of the parking assistance apparatus according to the present invention can be varied in design in various ways.

1 :車
2 :駐車支援ECU
21 :俯瞰画像作成部
22 :駐車枠検出部
23 :目標駐車位置設定部
24 :軌道作成部
25 :自車位置推定部
26 :実軌道記憶部
27 :比較部
28 :画像音声制御部
31 :右サイドカメラ
32 :左サイドカメラ
33 :フロントカメラ
34 :リアカメラ
4 :各種センサ
5 :操作装置
6 :スピーカ
7 :ディスプレイ
8 :記憶装置
1: Car 2: Parking assistance ECU
21: bird's-eye view image creation unit 22: parking frame detection unit 23: target parking position setting unit 24: track creation unit 25: own vehicle position estimation unit 26: actual track storage unit 27: comparison unit 28: image audio control unit 31: right Side camera 32: Left side camera 33: Front camera 34: Rear camera 4: Various sensors 5: Operating device 6: Speaker 7: Display 8: Storage device

Claims (1)

車を駐車するための目標駐車位置を設定する目標駐車位置設定手段と、
前記車の位置から前記目標駐車位置までの理想的な駐車軌道を作成する軌道作成手段と、
前記車の実際の駐車軌道を検出する検出手段と、
前記実際の駐車軌道と前記理想的な駐車軌道とに基づく報知を行う報知手段と、
を備えていることを特徴とする駐車支援装置。
Target parking position setting means for setting a target parking position for parking the car;
A trajectory creating means for creating an ideal parking trajectory from the position of the vehicle to the target parking position;
Detecting means for detecting an actual parking trajectory of the vehicle;
A notification means for performing notification based on the actual parking trajectory and the ideal parking trajectory;
A parking assistance device comprising:
JP2017097131A 2017-05-16 2017-05-16 Parking support device Pending JP2018194638A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017097131A JP2018194638A (en) 2017-05-16 2017-05-16 Parking support device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017097131A JP2018194638A (en) 2017-05-16 2017-05-16 Parking support device

Publications (1)

Publication Number Publication Date
JP2018194638A true JP2018194638A (en) 2018-12-06

Family

ID=64570787

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017097131A Pending JP2018194638A (en) 2017-05-16 2017-05-16 Parking support device

Country Status (1)

Country Link
JP (1) JP2018194638A (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012022041A (en) * 2010-07-12 2012-02-02 Mazda Motor Corp Vehicle driving technique training apparatus
US20130096732A1 (en) * 2010-02-26 2013-04-18 Lorenz Hagenme Method for assisting a parking maneuver
US20140057237A1 (en) * 2012-08-27 2014-02-27 Stephen Chen Method for parking a vehicle by using a parking assistant system
JP2016213551A (en) * 2015-04-30 2016-12-15 富士通テン株式会社 Drive assist system and drive assist method
JP2017065615A (en) * 2015-10-01 2017-04-06 パナソニックIpマネジメント株式会社 Parking assist apparatus and parking assist method
JP2017218043A (en) * 2016-06-08 2017-12-14 アイシン精機株式会社 Parking evaluation device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130096732A1 (en) * 2010-02-26 2013-04-18 Lorenz Hagenme Method for assisting a parking maneuver
JP2012022041A (en) * 2010-07-12 2012-02-02 Mazda Motor Corp Vehicle driving technique training apparatus
US20140057237A1 (en) * 2012-08-27 2014-02-27 Stephen Chen Method for parking a vehicle by using a parking assistant system
JP2016213551A (en) * 2015-04-30 2016-12-15 富士通テン株式会社 Drive assist system and drive assist method
JP2017065615A (en) * 2015-10-01 2017-04-06 パナソニックIpマネジメント株式会社 Parking assist apparatus and parking assist method
JP2017218043A (en) * 2016-06-08 2017-12-14 アイシン精機株式会社 Parking evaluation device

Similar Documents

Publication Publication Date Title
JP4900232B2 (en) Vehicle parking assist device and video display method
JP6094266B2 (en) Parking assistance device, parking assistance method and program
JP6380002B2 (en) Perimeter monitoring device
JP2006175918A (en) Parking auxiliary device
JP2007325166A (en) Parking support program, parking supporting apparatus, and parking supporting screen
JP2015133603A (en) Periphery monitoring device, and program
JP2009083680A (en) Parking assistance device and parking assistance method
JP2012076551A (en) Parking support device, parking support method, and parking support system
JP2019051822A (en) Parking support device
JP2018133712A (en) Periphery monitoring device
JP2009208742A (en) Parking assist device
JP6720729B2 (en) Display controller
JP2002362271A (en) Equipment, program, and recording medium for vehicle parking guide
JP6073433B2 (en) Image display system, image processing apparatus, and image display method
JP6901000B2 (en) Parking support method and parking support device
JP2008213647A (en) Parking assist method and parking assist system
JP2018184046A (en) Parking support device
JP6040766B2 (en) Parking assistance device
JP2019069717A (en) Parking support device
JP2012166689A (en) Driving assistance apparatus
JP2010208483A (en) Parking navigation system
JP2018194638A (en) Parking support device
JP2017149398A (en) Parking support device and parking support method
JP5943207B2 (en) Video display device for vehicle parking operation support
JP2012061989A (en) Device and method for image processing

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210406

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210603

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220112

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220517