JP2011016395A - Parallel parking guide device - Google Patents

Parallel parking guide device Download PDF

Info

Publication number
JP2011016395A
JP2011016395A JP2009160891A JP2009160891A JP2011016395A JP 2011016395 A JP2011016395 A JP 2011016395A JP 2009160891 A JP2009160891 A JP 2009160891A JP 2009160891 A JP2009160891 A JP 2009160891A JP 2011016395 A JP2011016395 A JP 2011016395A
Authority
JP
Japan
Prior art keywords
vehicle
parallel parking
parking
mark
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009160891A
Other languages
Japanese (ja)
Other versions
JP5464577B2 (en
Inventor
Tomoko Kanamori
朋子 金森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2009160891A priority Critical patent/JP5464577B2/en
Publication of JP2011016395A publication Critical patent/JP2011016395A/en
Application granted granted Critical
Publication of JP5464577B2 publication Critical patent/JP5464577B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a parallel parking guide device which eventually allows a rear vehicle to smoothly start regardless of the presence of the own vehicle, and appropriately and easily secures the distance with which the own vehicle can start smoothly in parallel parking.SOLUTION: When the image of a rear camera photographing a rear side in parallel parking is displayed on a monitor, a parallel parking rear guide mark showing that the distance between the own vehicle and the rear vehicle is the distance with which the rear vehicle can smoothly get away from the parking position is displayed, and a driver parks the own vehicle so that the lower end of the image of the rear vehicle approximately agrees with the mark. Thus, even when another vehicle parks ahead with little space after the own vehicle parks in parallel, smooth starting is possible if retreating by the rear distance. With respect to the distance from the rear vehicle, the vehicle kind of the rear vehicle may be recognized by the image photographed by the rear camera, the distance with which the rear vehicle can smoothly start may be obtained by the vehicle data such as the minimum turning radius and the like according to the vehicle kind, and the mark may be displayed at the position corresponding to the distance.

Description

本発明は車両が縦列駐車を行う際、車両に取り付けた車外を撮影するカメラの画像を利用して、後方の車両が自車両に影響されずに確実に発車でき、また自車両が前方の車両等の障害物に影響されずに確実に発車できるようにした縦列駐車案内装置に関する。   In the present invention, when a vehicle performs parallel parking, an image of a camera that captures the outside of the vehicle attached to the vehicle can be used to reliably start the vehicle behind the vehicle without being influenced by the vehicle, and the vehicle is a vehicle ahead. The present invention relates to a parallel parking guide device that can surely depart without being affected by obstacles such as.

車両が駐車する際、駐車する車両が互いに横に並んで駐車する方式以外に、例えば駐車が許可されている道路の路側部分に1列で駐車する等の縦列駐車も存在する。この縦列駐車に際しては、基本的に図13に示すように行う。即ち、同図(a)の自車1が前方車両2と後方車両3との間に駐車しようとする時、最初前方車両2と所定間隔でほぼ平行に停車した状態の位置Aから駐車位置に向けて後退し、位置Bを経て位置Cに至る第1後退態様をたどる。次いで同図(b)に示す前記位置Cから自車両の最小回転半径Rで点Oを中心に回転移動することにより、位置D、Eを経て位置Fにおいて縦列駐車ライン上に至る。その後同図(c)の位置Fにおいて前方車両2との間隔f、及び後方車両3との間隔bが適切になるように前後方向位置の調節を行い、一連の駐車操作を終了する。   When the vehicle is parked, in addition to the method in which the parked vehicles are parked side by side, there is also parallel parking such as parking in one row on the roadside portion of the road where parking is permitted. This parallel parking is basically performed as shown in FIG. That is, when the host vehicle 1 in FIG. 5A attempts to park between the front vehicle 2 and the rear vehicle 3, the vehicle 1 changes from the position A in the state where the vehicle 1 stops at a predetermined interval to the parking position. The first retraction mode of retreating toward the position C via the position B is followed. Next, by rotating about the point O with the minimum turning radius R of the host vehicle from the position C shown in FIG. 4B, the vehicle reaches the tandem parking line at the position F via the positions D and E. Thereafter, the position in the front-rear direction is adjusted so that the distance f from the front vehicle 2 and the distance b from the rear vehicle 3 at the position F in FIG.

上記のような縦列駐車を行う時、最終的に図13(c)における前方車両2との間隔fについては、その後この駐車中の状態から発車する時、同図の(b)から(c)の順で前記と逆の操作によって発車しようとする際、できる限り後退せずにそのまま発車できる間隔fが存在することが好ましい。特に、縦列駐車後に後方に他の車両がほとんど車間距離を取らずに駐車してしまい、後退して前方車両との間隔を充分取ってから発車しようとしてもできない状態になっても、自車両が前方車両等に接触せずに安全に発車できる間隔fが存在することが好ましい。更に、前方車両が発車しようとする時、その前方車両の更に前方の車両がほとんど間隔を取らずに駐車してしまった時に、前方車両が自車両側に後退して発車できる間隔fが存在することが好ましい。   When performing parallel parking as described above, the distance f from the forward vehicle 2 in FIG. 13C is finally determined when the vehicle is departed from this parked state, from (b) to (c) in FIG. It is preferable that there is an interval f that allows the vehicle to leave as much as possible without going backward as much as possible. In particular, even if the other vehicle parks behind the vehicle after being parked in parallel with little distance between the two cars, and the vehicle goes backward and leaves enough space with the vehicle ahead, It is preferable that there is an interval f at which the vehicle can be safely departed without contacting the vehicle ahead. Furthermore, when the vehicle ahead is about to depart, there is an interval f at which the vehicle ahead can move backward and depart from the vehicle when the vehicle ahead of the vehicle ahead is parked with little space. It is preferable.

一方、後方車両3との間隔bについては、自車両が前記のような縦列駐車中に後方車両3が発車しようとする際、できる限りその車が後退せずにそのまま発車できる間隔bが存在することが好ましく、特に後方車両の後に他の車両がほとんど間隔を取らずに駐車してしまい、後退しようとしてもできない場合でも発車できる間隔bが存在することが好ましい。更に、自車両が縦列駐車後に前方に他車がほとんど間隔を取らずに駐車してしまった場合でも、自車両がバックしてから発車できる間隔bが存在することが好ましい。   On the other hand, with respect to the distance b between the rear vehicle 3 and the rear vehicle 3 when the host vehicle is about to park in parallel as described above, there is an interval b at which the vehicle can leave without retreating as much as possible. In particular, it is preferable that there is an interval b that allows the vehicle to depart even when the other vehicle parks behind the rear vehicle with almost no space between them, and it is impossible to go backward. Furthermore, even when the host vehicle is parked in parallel with the other vehicle being parked in the front with little space, it is preferable that there is an interval b that allows the vehicle to depart after the host vehicle is backed.

前方車両2との間隔fが充分に存在せず、且つ後方車両との間隔もほとんど無い時でも、前進と後退の繰り返しによって切り返し操作を行ってこの駐車領域から脱出することは理論的には可能である。しかしながらその操作には多くの困難を伴うとがあり、前方或いは後方の車両に接触せずに発車することが極めて困難な場合がある。   Even when there is not enough space f with the vehicle 2 ahead and there is almost no space with the vehicle behind, it is theoretically possible to escape from this parking area by performing a turning operation by repeating forward and backward movements. It is. However, the operation may involve many difficulties, and it may be extremely difficult to start without touching the front or rear vehicle.

なお、縦列駐車に際して所定の位置に縦列駐車を行うことができるように、車両の後方を撮影するカメラの画像を表示するモニタに、車両が進むべき方向を示すマーカーを表示する技術は特開平2−36417号公報(特許文献1)に開示されている。   A technique for displaying a marker indicating a direction in which a vehicle should travel on a monitor that displays an image of a camera that captures the rear of the vehicle so that parallel parking can be performed at a predetermined position in parallel parking. No.-36417 (Patent Document 1).

特開平2−36417号公報JP-A-2-36417

縦列駐車は基本的には前記のように行われ、最終的に図13(c)に示すように駐車を行うこととなるが、その後自車両が円滑に発車できるために、また前方車両が後退して発車できるためにも前方車両等の障害物との間に所定の間隔fが存在することが好ましく、更に後方車両3との間には、後方車両が円滑に発車できるために、また自車両が後退して発車できるためにも所定の間隔bが存在することが好ましい。   Parallel parking is basically performed as described above, and finally parking is performed as shown in FIG. 13 (c). However, since the host vehicle can depart smoothly thereafter, the vehicle in front also moves backward. Therefore, it is preferable that a predetermined distance f is present between the vehicle and the obstacle such as the vehicle ahead, and the vehicle behind the vehicle 3 can be started smoothly. It is preferable that the predetermined interval b exists so that the vehicle can move backward.

それに対して前記特許文献に記載されている技術では、縦列駐車を行う位置に誘導することはできても、上記のような前方車両2との間隔f、及び後方車両との間隔bを適切に維持することはできない。また、例えば後方を撮影するリアカメラの撮影画像をモニタで見ても、実際の距離感をつかむことができず、一旦車両を降りて実際に見て確かめざるを得なくなる。   On the other hand, in the technique described in the patent document, although it is possible to guide to the position where parallel parking is performed, the distance f between the front vehicle 2 and the distance b with the rear vehicle are appropriately set as described above. It cannot be maintained. Further, for example, even if the rear camera that captures the rear image is viewed on the monitor, the actual sense of distance cannot be grasped, and it is necessary to get off the vehicle once and actually see it.

更に、前方車両との間隔は運転者の目でほぼ把握することはできるが、実際に縦列駐車から発車する時に必要となる間隔は、縦列駐車に慣れていない人にとっては的確に把握することができない。特に運転者が小柄な人である時には目の位置が低くなり、前方車両との間隔を的確に把握することができない傾向がある。そのため、縦列駐車中に運転者に対して前記のような間隔が適切であるか否かを確実に判断することができる案内が必要であり、それもできる限り運転者の判断に頼ることなく適切な案内を行うことができる装置の開発が望まれている。   Furthermore, the distance from the vehicle ahead can be almost grasped by the driver's eyes, but the distance required when actually departing from parallel parking can be accurately grasped for those who are not accustomed to parallel parking. Can not. In particular, when the driver is a small person, the position of the eyes is lowered, and there is a tendency that the distance from the preceding vehicle cannot be accurately grasped. Therefore, it is necessary to provide guidance that allows the driver to reliably determine whether or not the above-mentioned interval is appropriate during parallel parking, and it is also appropriate without relying on the judgment of the driver as much as possible. Development of a device capable of providing simple guidance is desired.

したがって本発明は、縦列駐車を行うに際して、最終的に後方車両が自車両の存在に関わらず円滑に発車することができ、また自車両が発車するに際して、前方車両等の障害物が存在しても円滑に発車できるように、自車両の前後の間隔を適切に且つ容易に維持することができる縦列駐車案内を行うことができる縦列駐車案内装置を提供することを主たる目的とする。   Therefore, according to the present invention, when performing parallel parking, the rear vehicle can finally start smoothly regardless of the existence of the own vehicle, and when the own vehicle departs, there are obstacles such as the front vehicle. The main purpose of the present invention is to provide a parallel parking guide apparatus capable of performing parallel parking guidance that can maintain the distance between the front and rear of the host vehicle appropriately and easily so that the vehicle can start smoothly.

本発明に係る縦列駐車案内装置は、前記課題を解決するため、車両の後方を撮影するリアカメラと、前記リアカメラの撮影画像を表示するモニタと、自車両が縦列駐車する時に後方に存在する車両が、当該車両と自車両との間隔を用いて縦列駐車位置から発車することができる間隔に対応したモニタの位置に、縦列駐車後方案内マークを表示する縦列駐車後方案内マーク表示処理部とを備えたことを特徴とする。   In order to solve the above-described problem, a parallel parking guide apparatus according to the present invention exists at the rear when a rear camera that captures the rear of the vehicle, a monitor that displays a captured image of the rear camera, and the host vehicle performs parallel parking. A parallel parking rear guidance mark display processing unit for displaying a parallel parking rear guidance mark at a monitor position corresponding to an interval at which the vehicle can depart from the parallel parking position using the distance between the vehicle and the host vehicle. It is characterized by having.

本発明に係る他の縦列駐車案内装置は、前記縦列駐車案内装置において、前記リアカメラの撮影画像により後方に存在する車両の車種を認識する後方車両車種認識部を備え、前記縦列駐車後方案内マーク表示処理部は、前記後方車両車種認識部で認識した後方車両の車種に対応して、その車種の車両データによって縦列駐車後方案内マークの表示位置を決定することを特徴とする。   Another parallel parking guide device according to the present invention is the above parallel parking guide device, further comprising a rear vehicle type recognition unit for recognizing a vehicle type of a vehicle present behind from a photographed image of the rear camera, and the parallel parking rear guide mark. The display processing unit determines the display position of the parallel parking rear guidance mark according to the vehicle data of the vehicle type corresponding to the vehicle type of the rear vehicle recognized by the rear vehicle vehicle type recognition unit.

本発明に係る他の縦列駐車案内装置は、前記縦列駐車案内装置において、前記縦列駐車後方案内マーク表示処理部は、通常の大部分の車両が、当該車両と自車両との間隔を用いて縦列駐車位置から発車することができる間隔に対応したモニタの位置に、縦列駐車後方案内マークを表示することを特徴とする。   Another parallel parking guide device according to the present invention is the parallel parking guide device, wherein the parallel parking rear guide mark display processing unit is configured so that most of ordinary vehicles are connected in parallel using a distance between the vehicle and the own vehicle. A parallel parking rear guide mark is displayed at a monitor position corresponding to an interval at which the vehicle can depart from the parking position.

本発明に係る他の縦列駐車案内装置は、前記縦列駐車案内装置において、前記リアカメラの撮影画像により後方に存在する車両のナンバーを認識する後方車両ナンバー認識部と、前記後方車両ナンバー認識部で認識した後方車両のナンバーを記憶する後方車両ナンバー記憶部と、前記後方車両ナンバー記憶部に記憶したナンバーを読み込んで出力する縦列駐車後方車両ナンバー読込出力部とを備えたことを特徴とする。   Another parallel parking guide device according to the present invention includes a rear vehicle number recognition unit that recognizes the number of a vehicle that exists behind from a photographed image of the rear camera in the parallel parking guide device, and the rear vehicle number recognition unit. A rear vehicle number storage unit that stores the number of the recognized rear vehicle and a parallel parking rear vehicle number reading output unit that reads and outputs the number stored in the rear vehicle number storage unit.

本発明に係る他の縦列駐車案内装置は、車両の前方を撮影するフロントカメラと、前記フロントカメラの撮影画像を表示するモニタと、自車両が縦列駐車する時に前方に障害物が存在する際、自車両が当該障害物と自車両との間隔を用いて縦列駐車位置から発車することができる間隔に対応したモニタの位置に、縦列駐車前方案内マークを表示する縦列駐車前方案内マーク表示処理部とを備えたことを特徴とする。   Another parallel parking guidance device according to the present invention is a front camera that captures the front of the vehicle, a monitor that displays a captured image of the front camera, and when an obstacle exists in front when the vehicle is parked in parallel, A parallel parking front guidance mark display processing unit for displaying a parallel parking front guidance mark display position at a monitor position corresponding to an interval at which the own vehicle can depart from the parallel parking position using the distance between the obstacle and the own vehicle; It is provided with.

本発明に係る他の縦列駐車案内装置は、前記縦列駐車案内装置において、前記フロントカメラの撮影画像により前方に存在する障害物としての車両のナンバーを認識する前方車両ナンバー認識部と、前記前方車両ナンバー認識部で認識した前方車両のナンバーを記憶する前方車両ナンバー記憶部と、前記前方車両ナンバー記憶部に記憶したナンバーを読み込んで出力する縦列駐車前方車両ナンバー読込出力部とを備えたことを特徴とする。   Another parallel parking guide apparatus according to the present invention includes a front vehicle number recognition unit that recognizes a vehicle number as an obstacle existing in front of a captured image of the front camera in the parallel parking guide apparatus, and the front vehicle. A forward vehicle number storage unit that stores the number of the preceding vehicle recognized by the number recognition unit, and a parallel parking forward vehicle number reading output unit that reads and outputs the number stored in the preceding vehicle number storage unit. And

本発明に係る他の縦列駐車案内装置は、前記縦列駐車案内装置において、前記後方車両ナンバー認識部または前記前方車両ナンバー認識部で縦列駐車後に認識したナンバーと、前記縦列駐車後方車両ナンバー読込出力部または前記縦列駐車前方車両ナンバー読込出力部で出力したナンバーとが互いに異なる時警告を出力する縦列駐車駐車両変更警告部とを備えたことを特徴とする。   Another parallel parking guide device according to the present invention is the parallel parking guide device, wherein the rear vehicle number recognition unit or the front vehicle number recognition unit recognizes the number recognized after the parallel parking and the parallel parking rear vehicle number reading output unit. Alternatively, a parallel parking parking both change warning unit that outputs a warning when the number output by the parallel parking forward vehicle number reading output unit is different from each other is provided.

本発明は上記のように構成したので、縦列駐車を行うに際して、最終的に後方車両が自車両の存在に関わらず円滑に発車することができ、また自車両が発車するに際して、前方車両等の障害物が存在しても円滑に発車できるように、自車両の前後の間隔を適切に且つ容易に維持することができるようになる。   Since the present invention is configured as described above, when performing parallel parking, the rear vehicle can finally start smoothly regardless of the presence of the host vehicle, and when the host vehicle departs, The front-rear distance of the host vehicle can be maintained appropriately and easily so that the vehicle can be started smoothly even if an obstacle is present.

本発明の実施例の機能ブロック図である。It is a functional block diagram of the Example of this invention. 本発明の実施例において、縦列駐車案内処理の全体の作動を示す作動フロー図である。In the Example of this invention, it is an operation | movement flowchart which shows the operation | movement of the whole parallel parking guidance process. 同実施例において、フロントカメラ撮影画像による前方障害物との間隔確保処理を行う作動フロー図である。In the same Example, it is an operation | movement flowchart which performs the space | interval ensuring process with a front obstruction by a front camera picked-up image. 同実施例において、縦列駐車駐車両の発車時確認処理を行う作動フロー図である。In the Example, it is an operation | movement flowchart which performs the confirmation process at the time of departure of both parallel parking parking. 同実施例において、縦列駐車時と現在とで前方或いは後方の車両が異なっているかの自動認識処理を行う作動フロー図である。In the same Example, it is an operation | movement flowchart which performs the automatic recognition process of whether the vehicle of the front or back differs at the time of parallel parking and the present. 同実施例において、縦列駐車中車両の発車時確認処理の他の作動を示す作動フロー図である。In the same Example, it is an operation | movement flowchart which shows the other operation | movement of the confirmation process at the time of departure of the vehicle in parallel parking. 縦列駐車からの発車態様の基本形を示す図である。It is a figure which shows the basic form of the departure mode from parallel parking. 縦列駐車からの発車態様における車両の各種データと駐車スペースからの脱出に必要な各種距離の関係を示す図である。It is a figure which shows the relationship between the various distances required for the various data of the vehicle in the departure mode from parallel parking, and escape from a parking space. モニタに表示する縦列駐車後方案内マークと、モニタに表示される後方車両の関係を示す図、及びその説明図、並びに後方車両のナンバーを認識する説明図である。It is the figure which shows the relationship between the parallel parking back guidance mark displayed on a monitor, the back vehicle displayed on a monitor, its explanatory drawing, and explanatory drawing which recognizes the number of a back vehicle. モニタに表示する縦列駐車前方案内マークと、モニタに表示される前方車両の関係を示す図、及びその説明図、並びに後方車両のナンバーを認識する説明図である。It is the figure which shows the relationship between the parallel parking front guidance mark displayed on a monitor, the front vehicle displayed on a monitor, its explanatory drawing, and explanatory drawing which recognizes the number of a back vehicle. 縦列駐車後方案内補助マーク、及び縦列駐車前方案内補助マークの表示例を示す図である。It is a figure which shows the example of a display of a parallel parking back guidance auxiliary mark and a parallel parking front guidance auxiliary mark. 車両認識処理の態様を示す図である。It is a figure which shows the aspect of a vehicle recognition process. 縦列駐車の基本形を示す図である。It is a figure which shows the basic form of parallel parking.

本発明の実施例を図面に沿って説明する。図1は本発明を各種の態様で実施することができるようにした機能ブロック図であり、図示の例では自車両1が前方車両2と後方車両3の間に縦列駐車している状態を示し、この自車両1には前方を撮影するカメラであるフロントカメラ4と、後方を撮影するカメラであるリアカメラ5とを取り付けた例を示している。このフロントカメラ4で撮影した画像は、前方障害物検出部6に入力して、自車両の前方に他の車両等の障害物が存在するとき、これを検出する。この前方障害物検出部6においては、自車両がその障害物に接触することなく縦列駐車状態から発車できる為の検出を行うものであるため、図示するような車両に限らず、縁石や塀等の障害物を検出することが主目的となる。   Embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a functional block diagram in which the present invention can be implemented in various modes. In the illustrated example, the vehicle 1 is parked in parallel between a front vehicle 2 and a rear vehicle 3. In this example, a front camera 4 that is a camera for photographing the front and a rear camera 5 that is a camera for photographing the rear are attached to the host vehicle 1. The image photographed by the front camera 4 is input to the front obstacle detection unit 6 to detect when an obstacle such as another vehicle is present in front of the host vehicle. The front obstacle detection unit 6 performs detection so that the host vehicle can depart from the parallel parking state without touching the obstacle. The main purpose is to detect obstacles.

前方酒害物検出部6には前方車両ナンバー認識部7を備え、フロントカメラ4の撮影画像で、縦列駐車を行った時に自車両の前方に他の車両である前方車両が存在することを検出した際に、例えば図10(d)に示すように、その車両のナンバープレートの文字や数字を認識することにより、前方車両のナンバーを認識する。なお、図10(d)の例においては車両のナンバーをABCとして示している。   The front alcoholic substance detecting unit 6 includes a front vehicle number recognizing unit 7 and detects from the photographed image of the front camera 4 that a front vehicle as another vehicle exists ahead of the host vehicle when parallel parking is performed. In this case, for example, as shown in FIG. 10D, the number of the vehicle ahead is recognized by recognizing the letters and numbers on the license plate of the vehicle. In the example of FIG. 10D, the vehicle number is indicated as ABC.

前方車両ナンバー認識部7による前記認識結果は前方車両ナンバー記憶部8に記憶し、その後縦列駐車駐車中の自車両が発車する時に、本発明の機能によって前方の車両と所定の間隔を維持した状態で駐車したにもかかわらず、その後前方車両2が他の車両に変わった時に前記所定の間隔より狭くなってしまい、それに気がつかずに発車して前方車両に接触する事がないようにするために、そのナンバープレートを認識し記憶したデータを利用する。   The recognition result by the forward vehicle number recognition unit 7 is stored in the forward vehicle number storage unit 8, and then the vehicle is parked in parallel and parked, and when the vehicle departs, the function of the present invention maintains a predetermined distance from the vehicle ahead. In order to prevent the vehicle 2 from becoming a predetermined distance when the front vehicle 2 is changed to another vehicle after the vehicle has been parked in the vehicle, and the vehicle is not noticed and does not come into contact with the vehicle ahead. The license plate is recognized and stored.

前方撮影画像内縦列駐車前方案内マーク表示処理部10においては、自車両1の前方を撮影するフロントカメラ4の撮影画像を表示するモニタ中に、例えば図10(a)〜(c)に示すような、前方車両等の障害物との間隔の目安となる縦列駐車前方案内マークMFを表示する処理を行う。   As shown in FIGS. 10A to 10C, for example, the front parking image front guide mark display processing unit 10 in the front captured image displays a captured image of the front camera 4 that captures the front of the host vehicle 1. In addition, a process of displaying the parallel parking front guidance mark MF that is a guide for the distance from an obstacle such as a preceding vehicle is performed.

そのため図1に示す例においては、前方撮影画像内縦列駐車前方案内マーク表示処理部10に自車両データ記憶部11を備え、本発明による縦列駐車案内装置を搭載する自車両の最小回転半径のデータ等の車両データを別途入力し、ここに記憶しておく例を示している。縦列駐車前方案内マーク表示部12においては、前記自車両データ記憶部11に記憶しているデータを用い、前記図10(a)〜(c)に示すような縦列駐車前方案内マークMFを表示する。その際には例えば図8に示すように、縦列駐車中の自車両1が最小の前進によってその駐車領域から抜け出すためには、駐車中の状態から前車輪である操舵輪を最大回転操舵した状態で前進する時、車両に予め設定してある最小回転半径Rで回転しながら前進することとなる。このことは前記図13に示す縦列駐車基本形において、同図(b)の縦列駐車最小回転半径Rによる第2後退態様として示している車両の移動態様を逆に移動させた状態となる。   Therefore, in the example shown in FIG. 1, data on the minimum turning radius of the host vehicle equipped with the host vehicle data storage unit 11 in the front parking image front column parking front guide mark display processing unit 10 and equipped with the column parking guide device according to the present invention. The example which inputs separately vehicle data, such as these, and memorize | stores here is shown. The parallel parking front guidance mark display unit 12 displays the parallel parking front guidance mark MF as shown in FIGS. 10A to 10C using the data stored in the host vehicle data storage unit 11. . In this case, for example, as shown in FIG. 8, in order for the own vehicle 1 in parallel parking to get out of the parking area with the minimum forward movement, the steering wheel which is the front wheel is steered at the maximum speed from the parked state. When moving forward, the vehicle moves forward while rotating at a minimum turning radius R preset in the vehicle. This is a state in which, in the parallel parking basic form shown in FIG. 13, the movement mode of the vehicle shown as the second reverse mode by the parallel parking minimum rotation radius R in FIG.

図8の縦列駐車中の車両がその駐車領域から抜け出す説明図に示すように、車両が最小回転半径で回転する時、その車両が前方の車両等に接触しないようにするためには、その車両の前端縁Pの軌跡内に物体が存在しないようにする必要がある。このときの前端縁Pの軌跡は前記最小回転半径Rの中心である点Oを中心とする、前端回転半径rの軌跡である最小回転前端縁円弧Kとなるため、従来から各車両について公表されている車体データが存在すると、この最小回転前端縁円弧Kを求めることができる。   As shown in the explanatory view in which the vehicle parked in parallel in FIG. 8 comes out of the parking area, when the vehicle rotates at the minimum turning radius, the vehicle is prevented from coming into contact with the vehicle in front. It is necessary to make sure that no object exists in the trajectory of the front edge P. The trajectory of the front edge P at this time is the minimum rotation front edge arc K that is the trajectory of the front end rotation radius r centered on the point O that is the center of the minimum rotation radius R. If the vehicle body data is present, the minimum rotation front edge arc K can be obtained.

その際には車体データとして存在するホイルベースL1、車体の全幅W1、前端突出長L3、最小回転半径Rのデータにより、最小回転前端縁円弧Kをほぼ正確に求めることができ、その軌跡において前方車両2で最も障害になる点である後端縁Qとの間隔である脱出安全スペースS4を、例えば30cm等の所定の安全間隔になるように、必要前方車間距離S1として設定する。なお、脱出安全スペースS4を考慮しない時には、図示するように絶対必要車間距離S2となる。また、前記脱出安全スペースS4が形成される状態の車両位置以降は、図8の二重線矢印に示すような運転操作によって容易に移動することができる。   At that time, the minimum rotation front edge arc K can be obtained almost accurately from the data of the wheel base L1, the full width W1, the front end protrusion length L3, and the minimum rotation radius R existing as the vehicle body data. The escape safety space S4, which is the distance from the rear edge Q, which is the point that becomes the most obstacle at 2, is set as the required front inter-vehicle distance S1 so as to be a predetermined safety distance such as 30 cm, for example. When the escape safety space S4 is not taken into consideration, the absolute required inter-vehicle distance S2 is obtained as illustrated. Further, after the vehicle position in the state where the escape safety space S4 is formed, the vehicle can be easily moved by a driving operation as shown by a double line arrow in FIG.

なお、図8において前端縁Pが後輪の軸線である基準線Sに対して回転初期角θ1の位置に存在する時、この縦列駐車領域を脱出するための脱出初動回転角θ2として示し、また、前記必要前方車間距離S1と絶対必要車間距離S2との差を余裕車間距離S3として示し、また、後輪と車体後端との長さを後端突出長L4として示し、また、車輪間隔であるトレッドをW2として示しており、必要に応じてこれらの車体データ及び設定データを用いることにより、必要に応じて更に種々の計算を行うことができる。   In FIG. 8, when the front edge P is located at the initial rotation angle θ1 with respect to the reference line S that is the axis of the rear wheel, it is shown as an escape initial rotation angle θ2 for escaping this parallel parking area. The difference between the necessary front inter-vehicle distance S1 and the absolute necessary inter-vehicle distance S2 is shown as a margin inter-vehicle distance S3, and the length between the rear wheel and the rear end of the vehicle body is shown as a rear end protruding length L4. A certain tread is shown as W2, and various calculations can be performed as necessary by using these vehicle body data and setting data as necessary.

図1の前方撮影画像内縦列駐車前方案内マーク表示処理部10における縦列駐車前方案内マーク表示部12においては、自車両データ記憶部11に記憶している前記各種のデータを用いることにより、縦列駐車を行った時に前方車両2等の障害物との任意の安全スペースを考慮した距離を演算し、その時の必要前方車間距離S1に相当するモニタ内の位置に、図10(a)〜(c)に示すような縦列駐車前方案内マークMFを表示することができる。   In the front parking image front guide mark display processing unit 10 in FIG. 1, the parallel parking front guide mark display unit 12 uses the various data stored in the host vehicle data storage unit 11 to perform parallel parking. 10 (a) to 10 (c) are calculated at a position in the monitor corresponding to the necessary front inter-vehicle distance S1 at that time, by calculating a distance considering an arbitrary safety space with an obstacle such as the forward vehicle 2 when A parallel parking front guide mark MF as shown in FIG.

このときの縦列駐車前方案内マークMFの表示位置は、この縦列駐車案内装置が搭載される車両に固有のものであり、したがってこの縦列駐車案内装置が車両工場で装備される時には、自車両データ記憶部11を特に必要とせず、別途演算したデータに基づいて縦列駐車前方案内マーク表示部12が常にモニタ内の所定の位置に表示するようにしても良い。   The display position of the parallel parking front guide mark MF at this time is specific to the vehicle on which the parallel parking guide device is mounted. Therefore, when this parallel parking guide device is installed in a vehicle factory, the vehicle data storage is performed. The part 11 is not particularly required, and the parallel parking front guidance mark display part 12 may always be displayed at a predetermined position in the monitor based on separately calculated data.

それに対してこの縦列駐車案内装置を別途各種の車両に取り付ける態様の製品の時には、取り付ける車両に対応したデータを自車両データ記憶部11に入力して記憶することにより、縦列駐車前方案内マーク表示部13が前記演算を行い、縦列駐車前方案内マークMFを表示し、以降はこのデータを記憶しておくことにより、この縦列駐車案内装置を取り付ける車両が変更するまで、特に表示のための演算を行うことなく、同じ位置にマークを表示することができる。 On the other hand, in the case of a product in which this parallel parking guide device is separately attached to various vehicles, data corresponding to the vehicle to be attached is input to the own vehicle data storage unit 11 and stored therein, whereby a parallel parking forward guidance mark display unit is stored. 13 performs the above calculation, displays a parallel parking front guidance mark MF, and stores this data thereafter, especially for display until the vehicle to which the parallel parking guide device is attached is changed. The mark can be displayed at the same position without any problem.

図1の例においては、前方撮影画像内縦列駐車前方案内マーク表示処理部10に縦列駐車前方案内補助マーク表示部13を備えた例を示しており、前記のような自車両の最小回転半径のデータを主として演算し得られる縦列駐車前方案内マークMF以外に、例えば図11(b)に縦列駐車前方案内補助マークMF’として示すような、更に自車両から離れた位置に対応した幾分か余裕をもった位置に、縦列駐車前方案内補助マークを表示する例を示している。   In the example of FIG. 1, an example in which a parallel parking forward guidance auxiliary mark display unit 13 is provided in the parallel parking forward guidance mark display processing unit 10 in the front captured image is shown, and the minimum turning radius of the host vehicle as described above is shown. In addition to the parallel parking front guidance mark MF that can be mainly calculated, some margin corresponding to a position further away from the host vehicle as shown in FIG. The example which displays a parallel parking front guidance assistance mark in the position with is shown.

この補助マークは縦列駐車を行う場所が比較的駐車車両が少なく、運転者が充分縦列駐車のスペースに余裕があると判断し、前記のような厳密な縦列駐車を行う事は不自然であると感じる時、この縦列駐車前方案内補助マークMF’の位置を目安として、前方車両等の障害物がこのマークの位置に存在するとき、前方障害物とはあまり離れてはおらず、ほぼ適切な駐車位置であることを容易にわかるようにしている。 This auxiliary mark is that it is unnatural to perform strict parallel parking as described above, because it is determined that there are relatively few vehicles parked in parallel parking and the driver has sufficient space for parallel parking. When you feel it, the position of this parallel parking front guidance auxiliary mark MF 'is used as a guide, and when an obstacle such as a forward vehicle exists at the position of this mark, it is not so far away from the front obstacle, and it is almost an appropriate parking position. So that it can be easily understood.

前記のように前方撮影画像内縦列駐車前方案内マーク表示処理部10における縦列駐車前方案内マーク表示部12で、例えば図10(a)〜(c)のような縦列駐車前方案内マークMFをモニタ中に表示することにより、運転者は同図(a)のように表示されている前方車両2の位置では、前方車両2との間隔が開きすぎていると判断し、自車両を前進させる。その後同図(b)のように、前方車両2の後端位置に対応する前方車両2の画像の下端部分が、縦列駐車前方案内マークMFとほぼ重なった時、適切な位置であると運転者が判断し、ここを駐車位置とする。   As described above, for example, the parallel parking front guidance mark MF as shown in FIGS. 10A to 10C is being monitored by the parallel parking front guidance mark display unit 12 in the parallel parking front guidance mark display processing unit 10 in the front photographed image. In this case, the driver determines that the distance from the front vehicle 2 is too wide at the position of the front vehicle 2 displayed as shown in FIG. Thereafter, as shown in FIG. 5B, when the lower end portion of the image of the front vehicle 2 corresponding to the rear end position of the front vehicle 2 substantially overlaps the parallel parking front guide mark MF, the driver is determined to be in an appropriate position. Is determined, and this is the parking position.

それに対して図10(c)のように、前方車両2が縦列駐車前方案内マークMFよりも手前に位置する時、即ち前方車両2の後端位置に対応する前方車両2の画像の下端部分が、縦列駐車前方案内マークMFより内側に大きく進入している時には、運転者はこれでは自車両がもしも後退できない状態の場合は駐車位置から脱出することは極めて困難であると判断し、同図(b)のように前方車両2の一部が縦列駐車前方案内マークMFに重なる迄後退する。   On the other hand, as shown in FIG. 10C, when the front vehicle 2 is positioned in front of the parallel parking front guide mark MF, that is, the lower end portion of the image of the front vehicle 2 corresponding to the rear end position of the front vehicle 2 is When the vehicle is approaching inward from the parallel parking front guide mark MF, the driver determines that it is extremely difficult to escape from the parking position if the vehicle cannot move backward. As shown in b), the vehicle moves backward until a part of the forward vehicle 2 overlaps the parallel parking forward guide mark MF.

図1の縦列駐車前方案内補助マーク表示部13で図11(b)に示すような縦列駐車前方案内補助マークMF’を表示する時には、前記図10に示す態様とほぼ同様にこの縦列駐車前方案内補助マークMF’を用い、運転者は充分余裕を持った前方車両2との間隔で、しかもあまりにも前方車両2と離れていない適切な位置に縦列駐車を行うことができる。   When displaying the parallel parking front guidance auxiliary mark MF ′ as shown in FIG. 11B on the parallel parking front guidance auxiliary mark display unit 13 of FIG. 1, this parallel parking forward guidance is substantially the same as the mode shown in FIG. Using the auxiliary mark MF ′, the driver can perform parallel parking at an appropriate position not far from the preceding vehicle 2 at an interval from the preceding vehicle 2 with a sufficient margin.

図1に示す例においては、前記のような縦列駐車前方案内マークMFの表示によって、運転者がモニタを見ながら前方車両との間隔を判断し、車両の前進或いは後退を行う以外に、自動的に前方車両との間隔が狭すぎる警告を出力することができるように、前方障害物が縦列駐車前方案内マーク内に進入することを検出するための、前方障害物縦列駐車前方案内マーク内進入検出処理部14を備えている。即ち、図1の前方障害物縦列駐車前方案内マーク内進入検出処理部14には、前方障害物縦列駐車前方案内マーク内進入量検出部15を備え、例えば図10(c)のように前方車両2の後端位置に対応する前方車両の画像の下端部分を認識し、この部分が縦列駐車前方案内マークMFより手前側に進入した量TFを測定する。   In the example shown in FIG. 1, the display of the parallel parking front guide mark MF as described above is automatically performed except that the driver determines the distance from the preceding vehicle while looking at the monitor and moves the vehicle forward or backward. In order to detect that the front obstacle enters the parallel parking front guide mark so that a warning that the distance to the preceding vehicle is too narrow can be output to the front obstacle parallel parking front guide mark intrusion detection A processing unit 14 is provided. That is, the front obstacle parallel parking forward guidance mark entry detection processing unit 14 of FIG. 1 includes a front obstacle parallel parking forward guidance mark entry amount detection unit 15, for example, as shown in FIG. The lower end portion of the image of the forward vehicle corresponding to the rear end position of 2 is recognized, and the amount TF that this portion enters closer to the front side than the parallel parking front guide mark MF is measured.

また、図1の前方障害物縦列駐車前方案内補助マーク内進入検出部16では、同様に前記図11(b)に示すような前方障害物縦列駐車前方案内補助マークMF’より手前に前方車両1が進入したとき、その進入量を測定する。これらの進入量の測定によって、所定以上進入したことを検出した時には、前方障害物近接警告部17により運転者に警告表示、警告音声或いはブザー等で警告を出力する。なお、その警告に際しては、予め運転者等により縦列駐車前方案内マークMFを用いるか、或いは縦列駐車前方案内補助マークMF’を用いるかを選択しておき、いずれかの検出によって警告出力を行うようにする。   Further, in the forward obstacle parallel parking forward guidance auxiliary mark entry detection unit 16 in FIG. 1, the vehicle 1 in front of the forward obstacle parallel parking forward guidance auxiliary mark MF ′ as shown in FIG. Measures the amount of entry when. When it is detected that the vehicle has entered more than a predetermined distance by measuring the amount of entry, the front obstacle proximity warning unit 17 outputs a warning to the driver with a warning display, a warning sound or a buzzer. In the case of the warning, a driver or the like selects in advance whether to use the parallel parking front guidance mark MF or the parallel parking front guidance auxiliary mark MF ′, and outputs a warning by detecting either of them. To.

なお、本発明は後述するようにリアカメラ5の撮影画像によって、後方車両と適切な間隔で駐車できるようにし、後方車両が容易に発車できるように、また万が一自車両の駐車後に前方に近接して他の車両が停止してしまった時でも、後方の適切な間隔を利用して、一旦後退した後縦列駐車領域を出る運転操作を行うことができるので、前記フロントカメラ4を用いた前記処理は、リアカメラ5を用いた後述する処理に対しては、従たる処理となり、コストの面等から必要とされない場合もあり得る。   As will be described later, according to the present invention, the rear camera 5 can be parked at an appropriate distance from the rear vehicle so that the rear vehicle can start easily. Even when the other vehicle stops, the operation using the front camera 4 can be performed because it is possible to perform a driving operation to exit the parallel parking area after reversing using an appropriate rear space. Is a subordinate process to the process to be described later using the rear camera 5, and may not be necessary in terms of cost.

図1のリアカメラ5による自車両の後方の撮影画像についても、前記フロントカメラ4の撮影画像を用いた各種処理と同様の処理を行うが、ここでは特に自車両の縦列駐車に際して、主目的として後方車両が無理なく縦列駐車から発車できるようにするための処理を行う点において、前記フロントカメラの撮影画像を用いた各種処理が、特に自車両が無理なく縦列駐車から発車できるようにするための処理を行うことを主目的としている点で大きく異なっている。   The rear camera 5 shown in FIG. 1 also performs a process similar to various processes using the image taken by the front camera 4 for the rear image of the host vehicle. Various processes using the images taken by the front camera are particularly useful for allowing the host vehicle to depart from the parallel parking effortlessly. The main difference is that the main purpose is processing.

即ち、リアカメラ5の撮影画像を入力する撮影画像後方障害物検出部21には後方車両車種認識部22を備え、縦列駐車の最終段階で図13(c)のように後方車両3との間隔bを調節するための移動を行う時、リアカメラの撮影画像における広角の撮影領域の画像を利用し、後方車両の全体形状、或いは黄色ナンバープレート等を認識し、例えば図12に示すように後方車両の車種を認識する。このような車種の認識により、それぞれの車種毎の平均的な最小回転半径を初めとする各種の車両データを用い、後方車両が無理なく縦列駐車から発車することができる車間距離を維持して縦列駐車を行うようにする。   That is, the captured image rear obstacle detection unit 21 for inputting the captured image of the rear camera 5 includes a rear vehicle type recognition unit 22 and is spaced from the rear vehicle 3 at the final stage of parallel parking as shown in FIG. When moving to adjust b, the image of the wide-angle shooting area in the image taken by the rear camera is used to recognize the overall shape of the rear vehicle or the yellow license plate, for example, as shown in FIG. Recognize the vehicle type. By recognizing such vehicle types, various vehicle data such as the average minimum turning radius for each vehicle type is used, and the distance between the vehicles that can be departed from the parallel parking can be maintained without difficulty. Try to park.

図12に示す車種認識態様の例においては、同図(a)では特にナンバープレートの色が黄色であるか否かを認識し、黄色である時には軽自動車であると判断する。同図(b)では車両外形が横長であることにより、この第1形状の車種はセダンであることが認識され、同図(c)では車両の外形が正方形に近いことにより、この第2形状の車種はSUV車であることが認識される。   In the example of the vehicle type recognition mode shown in FIG. 12, in FIG. 12 (a), it is recognized whether or not the color of the license plate is particularly yellow, and when it is yellow, it is determined that the vehicle is a light vehicle. In FIG. 5B, the vehicle shape of the first shape is recognized as a sedan because the vehicle outer shape is horizontally long. In FIG. 5C, the second shape is obtained because the vehicle outer shape is close to a square. It is recognized that this vehicle type is an SUV vehicle.

また同図(d)では車両の外形が縦長の矩形であることにより、この第3形状の車種はミニバン系統の車種であることが認識される。更に同図(e)では車両の外形が正方形或いは縦長の長方形であり、自車両との間隔の割に特に大きな車体であることを認識するとともに、車両上方の行き先表示部等によって、この第4形状はバスであることを認識する。同図(f)では車両の外形がほぼ正方形から縦長の長方形であり、同様に大きな車体であるものの行き先表示部が無いことと等を認識し、この第5形状はトラックであることが認識される。   Further, in the same figure (d), since the outer shape of the vehicle is a vertically long rectangle, it is recognized that this third shape vehicle type is a minivan type vehicle type. Further, in FIG. 4E, the vehicle has a square or vertically long rectangle, and recognizes that the vehicle body is particularly large with respect to the distance from the host vehicle. Recognize that the shape is a bus. In FIG. 8 (f), it is recognized that the outer shape of the vehicle is almost a square to a vertically-long rectangle, and that there is no destination display portion even though it is a large body, and this fifth shape is recognized as a truck. The

後方障害物検出部21には後方車両ナンバー認識部23を備え、前記前方車両ナンバー認識部7と同様に、後方車両3のナンバープレートの画像部分からナンバーを認識する。その認識結果は後方車両ナンバー記憶部24に記憶しておく。後方撮影画像内縦列駐車後方案内マーク表示処理部25では、車種別データ記憶部26において、前記後方車両車種認識部22で図12のようにして認識した車種に応じて、最小回転半径を含む各種の車両の長さや幅等の車両データを記憶しておく。   The rear obstacle detection unit 21 includes a rear vehicle number recognition unit 23, and recognizes the number from the image portion of the number plate of the rear vehicle 3 in the same manner as the front vehicle number recognition unit 7. The recognition result is stored in the rear vehicle number storage unit 24. In the rearward shot image parallel parking rear guide mark display processing unit 25, various types including a minimum turning radius according to the vehicle type recognized in the vehicle type data storage unit 26 as shown in FIG. Vehicle data such as the length and width of the vehicle is stored.

このとき記憶するデータは、前記自車両データ記憶部11に記憶する車両のデータとほぼ同様の各種データについて車種毎に記憶する。この車種毎のデータについて、例えば最小回転半径Rは、数年間の間に生産された各車種に含まれる車両のデータを用いて、予め平均値を得ることにより、そのデータを車種別最小回転半径データとして記憶部に入力し記憶しておく。図12の例においては、同図の(a)〜(f)の車種に応じて、例えば最小回転半径Rとして、R=a〜fのデータが存在することを示している。   The data stored at this time is stored for each vehicle type with respect to various types of data that are substantially the same as the vehicle data stored in the host vehicle data storage unit 11. Regarding the data for each vehicle type, for example, the minimum turning radius R is obtained by obtaining an average value in advance using vehicle data included in each vehicle type produced for several years, and the data is converted into the minimum turning radius for each vehicle type. The data is input and stored in the storage unit. In the example of FIG. 12, it is shown that there is data of R = a to f as the minimum turning radius R, for example, according to the vehicle types (a) to (f) in the same figure.

後方撮影画像内縦列駐車後方案内マーク表示処理部25における車種別縦列駐車後方案内マーク表示部27では、前記縦列駐車前方案内マーク表示部12と同様に、例えば図9(a)〜(c)のような縦列駐車後方案内マークMBを表示する処理を行う。その処理に際しては、前記縦列駐車前方案内マークMFの表示に際しては自車両が一旦後退することなく前進のみで容易に縦列駐車状態から容易に発車することができるようにする案内マークであるのに対して、縦列駐車後方案内マークMBについては第1に、後方車両が縦列駐車中から容易に発車することができるようにする点で異なっている。   In the rear-captured image parallel parking rear guidance mark display processing unit 25, the vehicle-specific vertical parking rear guidance mark display unit 27, for example, as shown in FIG. Processing for displaying such a parallel parking rear guidance mark MB is performed. In the process, the parallel parking front guide mark MF is a guide mark that allows the host vehicle to easily depart from the parallel parking state by simply moving forward without once moving backward. First, the parallel parking rear guidance mark MB is different in that the rear vehicle can easily depart from the parallel parking.

そのため、車種別縦列駐車後方案内マーク表示部27では、前記のような後方車両の車種を認識し、その車種に対応した最小回転半径データを含む車両の各種データを車種別データ記憶部26から読み込み、後方車両が容易に縦列駐車から発車するための距離を演算し、その距離に対応した位置に縦列駐車後方案内マークMBをモニタ内に表示する。その距離は前記縦列駐車前方案内マーク表示部12と同様の手法で、図8と同様の演算手法によって、後方車両の車種に応じた適切な位置に縦列駐車後方案内マークMBを表示することができる。   Therefore, the vehicle type parallel parking rear guidance mark display unit 27 recognizes the vehicle type of the rear vehicle as described above, and reads various vehicle data including the minimum turning radius data corresponding to the vehicle type from the vehicle type data storage unit 26. The distance for the rear vehicle to easily depart from the parallel parking is calculated, and the parallel parking rear guidance mark MB is displayed in the monitor at a position corresponding to the distance. The distance is the same as that of the parallel parking front guidance mark display unit 12, and the parallel parking rear guidance mark MB can be displayed at an appropriate position according to the vehicle type of the rear vehicle by the same calculation method as in FIG. .

図1に示す例においては、後方撮影画像内縦列駐車後方案内マーク表示処理部25に縦列駐車後方案内補助マーク表示部28を備え、前記縦列駐車前方案内補助マーク表示部13と同様に、図11(a)に示すような縦列駐車後方案内マークMBよりも自車両から所定距離遠い位置に、縦列駐車後方案内補助マークMB’を表示する。この表示は前記縦列駐車前方案内補助マーク表示部13と同様の趣旨で表示するものであり、比較的駐車領域の車両が少ない時にこれを選択して表示し、その案内表示を目安にして、後方車両との自然な車間距離が得られるように駐車する。したがってこの補助マークの表示に際しては、後方車両の車種に関わらず所定の距離に設定しても良い。   In the example shown in FIG. 1, the rearward captured image in-line parking rear guidance mark display processing unit 25 includes a parallel parking rear guidance auxiliary mark display unit 28. A parallel parking rear guidance assist mark MB ′ is displayed at a position farther from the host vehicle than the parallel parking rear guidance mark MB as shown in FIG. This display is displayed for the same purpose as that of the parallel parking front guidance assist mark display unit 13 and is selected and displayed when the number of vehicles in the parking area is relatively small. Park the vehicle so that a natural inter-vehicle distance from the vehicle is obtained. Therefore, when displaying this auxiliary mark, it may be set at a predetermined distance regardless of the vehicle type of the rear vehicle.

前記縦列駐車後方案内補助マークMF’は、上記趣旨以外に、縦列駐車後方案内マークが前記のように車種毎の最小回転半径等の車両データの平均値によって、モニタ内での表示位置を変化させるのに対して、そのような車種毎の値を用いることなく、現在生産され、通常一般的に使用されている車両、車種について、ほとんどの車両に対して適用できる値である最大値を設定し、その最大値の車両でも縦列駐車から発車できる位置に縦列駐車後方案内補助マークを表示しても良い。その際には、前記縦列駐車後方案内マークMFに替えてこの縦列駐車後方案内補助マークMF’を表示し、或いは上記最大位置に設定した縦列駐車後方案内マークMFを表示する等、種々の態様で実施することができる。   In addition to the above purpose, the parallel parking rear guidance auxiliary mark MF ′ changes the display position in the monitor according to the average value of the vehicle data such as the minimum turning radius for each vehicle type as described above. On the other hand, without using such a value for each vehicle type, the maximum value that is applicable to most vehicles is set for vehicles and vehicle types that are currently produced and generally used. A parallel parking rear guidance assist mark may be displayed at a position where the vehicle with the maximum value can depart from the parallel parking. In that case, the parallel parking rear guidance mark MF ′ is displayed instead of the parallel parking rear guidance mark MF, or the parallel parking rear guidance mark MF set at the maximum position is displayed. Can be implemented.

モニタに表示された縦列駐車後方案内マークを利用する例を図9に示しており、同図(a)では後方車両3との間が広すぎることわかり、運転者はこれを見て後退し、同図(b)のように後方車両3の画像の前端位置に対応する後方車両の画像の下端部分が、縦列駐車後方案内マークMBと一部が重なる時、後退を停止する。また、同図(c)のように後方車両3の画像の下端部分が、縦列駐車後方案内マークMBよりも下の部分に存在する時、即ち、縦列駐車後方案内マークMFの手前側に進入している時、運転者は同図(b)の画像となる位置まで車両を前進させる。   FIG. 9 shows an example of using the parallel parking rear guide mark displayed on the monitor. In FIG. 9 (a), it can be seen that the space between the rear vehicle 3 is too wide and the driver retreats by seeing this. When the lower end portion of the rear vehicle image corresponding to the front end position of the rear vehicle 3 partly overlaps the parallel parking rear guide mark MB as shown in FIG. Further, as shown in FIG. 5C, when the lower end portion of the image of the rear vehicle 3 exists in a portion below the parallel parking rear guide mark MB, that is, the vehicle enters the front side of the parallel parking rear guide mark MF. The driver advances the vehicle to a position where the image shown in FIG.

上記後方撮影画像内縦列駐車後方案内マーク表示処理部25の処理により、縦列駐車後方案内マークを表示することによって、運転者はこのマークを目安に縦列駐車の最終段階で前進及び後退を行うことによって、後方車両との適切な車間距離を維持することができるものであるが、図1に示す例においては更に、後方車両との車間距離が適切ではないことを警告することができるようにした例を示している。   By displaying the parallel parking rear guide mark display processing unit 25 in the rear shot image, the parallel parking rear guide mark is displayed, so that the driver can move forward and backward at the final stage of parallel parking using this mark as a guide. In the example shown in FIG. 1, it is possible to warn that the inter-vehicle distance from the rear vehicle is not appropriate. Is shown.

即ち、図1の例では後方の車両が縦列駐車後方案内マーク内に進入したことを検出する、後方車両縦列駐車後方案内マーク内進入検出処理部29を備え、前記前方障害物縦列駐車前方案内マーク内進入検出処理部14と同様の処理を行う。図2の後方車両縦列駐車後方案内マーク内進入検出処理部29には、後方車両縦列駐車後方案内マーク内進入量検出部30を備え、前記前方障害物縦列駐車前方案内マーク内進入量検出部15と同様の処理を行う。   That is, in the example of FIG. 1, the vehicle includes a rear vehicle parallel parking rear guide mark entry detection processing unit 29 that detects that a rear vehicle has entered the parallel parking rear guide mark, and the front obstacle vertical parking front guide mark. The same process as the ingress detection processing unit 14 is performed. The rear vehicle tandem parking rear guidance mark entry detection processing unit 29 includes a rear vehicle tandem parking rear guidance mark entry amount detection unit 30, and the front obstacle parallel parking front guidance mark entry amount detection unit 15 is provided. The same processing is performed.

また、後方車両縦列駐車後方案内補助マーク内進入検出部31では、前記前方障害物縦列駐車前方案内補助マーク内進入検出部16と同様の処理を行う。後方車両近接警告部32においては、前記前方障害物近接警告部17と同様の処理を行うものであり、例えば図9(c)のように後方車両3の画像の下端部分が、縦列駐車後方案内マークMBよりも所定量以上下方であるTBだけ下方に存在する時、これを検出して警告を発する。   The rear vehicle parallel parking rear guidance auxiliary mark entry detection unit 31 performs the same processing as the front obstacle parallel parking forward guidance auxiliary mark entry detection unit 16. The rear vehicle proximity warning unit 32 performs the same processing as that of the front obstacle proximity warning unit 17. For example, as shown in FIG. When it exists below TB by a predetermined amount or more below mark MB, this is detected and a warning is issued.

縦列駐車中車両発車時確認処理部35においては、前記のような処理によって所定の縦列駐車を行った後、この縦列駐車中の状態から車両を発車する時、実際に円滑に発車できる状態にあるか否かを確認する処理を行う。図1の縦列駐車中車両発車時確認処理部35には、縦列駐車時前後車両ナンバー読込出力部36を備え、特に前方車両ナンバー記憶部8のデータと、後方車両ナンバー記憶部24のデータとを読み込み、モニタにそのナンバーを表示する等の出力を行う。それにより運転者は縦列駐車からの発車時にフロントカメラ4の画像を取り込んでナンバーを認識し、或いは運転者が前方車両のナンバーを視認することによって、現在の前方車両と前記所定の縦列駐車を行った時の前方車両とが一致するか否かを判断する。   In the parallel parking vehicle departure confirmation processing unit 35, after performing predetermined parallel parking by the above-described processing, when the vehicle is started from this parallel parking state, the vehicle can actually start smoothly. The process which confirms whether or not is performed. The parallel parking vehicle departure time confirmation processing unit 35 of FIG. 1 includes a vehicle number reading / outputting unit 36 before and after parallel parking, in particular, the data of the front vehicle number storage unit 8 and the data of the rear vehicle number storage unit 24. Read and display the number on the monitor. As a result, the driver captures the image of the front camera 4 at the time of departure from parallel parking and recognizes the number, or the driver visually recognizes the number of the preceding vehicle, thereby performing the predetermined parallel parking with the current front vehicle. It is determined whether or not the vehicle ahead coincides with the vehicle.

ここで特に前方車両が異なっていると判断した時には、この縦列駐車案内装置によって駐車した時の機能は実質的に解除されてしまっているものとして、通常の状態と同様に十分注意しながら縦列駐車領域からの脱出のための運転操作を行うこととなる。また、車両が同じである時には、前方車両とは自車両が余裕をもって縦列駐車領域から脱出することができることがわかるので、後退することなく、または必要に応じて適宜後退し、安心して発車することができる。   Here, especially when it is judged that the vehicle ahead is different, it is assumed that the function when parked by this parallel parking guide device has been substantially cancelled, and parallel parking is performed with sufficient caution as in the normal state. Driving operation to escape from the area will be performed. In addition, when the vehicle is the same, it can be seen that the host vehicle can escape from the parallel parking area with a margin, so that the vehicle can leave the vehicle without retreating or as needed Can do.

また、前記のように前方車両が縦列駐車時と同じ時には、特に後方車両が縦列駐車時と同じであるか否かは問題とならないが、もしも異なる時には、一旦後退してから縦列駐車領域から脱出しなければならない場合が存在するので、もしも後方車両が縦列駐車時と同じ時には、後方車両との間に充分な距離が存在することがわかっているので、安心して後退し、発車操作を行うことができる。   Also, as described above, when the front vehicle is the same as when parallel parking, it does not matter whether the rear vehicle is the same as when parallel parking. If the rear vehicle is the same as in parallel parking, it is known that there is a sufficient distance from the rear vehicle, so you should go back and perform the departure operation with peace of mind. Can do.

図1に示す例においては縦列駐車中前後車両変更警告部37を備え、前記縦列駐車時前後車両ナンバー読込出力部36で読み込んだ縦列駐車時の前後車両のナンバーが、現在のフロントカメラの画像によって認識された前方車両ナンバーと一致するか否か、また、現在のリアカメラの画像によって認識された後方車両ナンバーと一致するか否かを判断し、異なっている時は前方、或いは後方、更には両方の車両が縦列駐車時と異なっている旨の警告出力を行うようにしている。   In the example shown in FIG. 1, the vehicle change warning unit 37 before and after parallel parking is provided, and the number of front and rear vehicles at the time of parallel parking read by the vehicle number reading and outputting unit 36 before and after parallel parking is determined by the image of the current front camera. It is judged whether it matches the recognized front vehicle number, and whether it matches the rear vehicle number recognized by the current rear camera image. A warning output is made to indicate that both vehicles are different from those in parallel parking.

図1に示す縦列駐車中発車時確認処理部35には、縦列駐車中発車時前方障害物間隔検出部38を備えており、縦列駐車中から発車する時、フロントカメラ4の画像によって、自車両の前方の所定距離の範囲に他の車両等の障害物が存在するか否かを判別する。このときの所定距離としては前記縦列駐車後方案内マークMFの表示位置と同じにすることができるが、安全のためにそれよりも離れた距離に設定しても良い。また、前方障害物との間隔の検出に際しては、撮影画像自体によって検出することもできるが、モニタに表示された障害物のモニタ上の位置によっても、更に縦列駐車後方案内マークMFとの位置関係によっても検出することができる。   The parallel parking departure time confirmation processing unit 35 shown in FIG. 1 includes a front obstacle distance detection unit 38 during parallel parking departure. It is determined whether or not an obstacle such as another vehicle exists within a predetermined distance range in front of the vehicle. The predetermined distance at this time may be the same as the display position of the parallel parking rear guide mark MF, but may be set to a distance away from it for safety. In addition, the distance from the front obstacle can be detected from the captured image itself. However, the positional relationship between the obstacle displayed on the monitor and the parallel parking rear guide mark MF is also determined depending on the position on the monitor. Can also be detected.

縦列駐車中発車時前方障害物近接警告部39では、前記縦列駐車中発車時前方障害物間隔検出部38で検出した前方障害物との距離が所定距離以内である時、そのまま出発すると障害物と接触する危険性があることを、モニタへの表示、音声による案内、ビープ音等で警告する出力を行う。   The front obstacle proximity warning unit 39 at the time of departure while parallel parking is within the predetermined distance when the distance from the front obstacle detected by the front obstacle interval detection unit 38 at the time of departure while parallel parking is within a predetermined distance, Outputs warning that there is a risk of contact by display on monitor, guidance by voice, beep sound, etc.

なお、縦列駐車時前後車両ナンバー読込出力部36、更には縦列駐車中前後車両変更警告部37を備える時は、縦列駐車中発車時前方障害物間隔検出部38、更には縦列駐車中発車時前方障害物近接警告部39を用いなくても良く、逆に縦列駐車中発車時前方障害物間隔検出部38、更には縦列駐車中発車時前方障害物近接警告部39を備える時には、縦列駐車時前後車両ナンバー読込出力部36、更には縦列駐車中前後車両変更警告部37を備えなくても良い。但し、これらを全て備え、必要に応じて使用を切り替え、或いは両方同時に用いるようにしても良い。   In addition, when equipped with the vehicle number reading output unit 36 before and after parallel parking, and further, the vehicle change warning unit 37 before and after parallel parking, the front obstacle interval detection unit 38 at the time of departure during parallel parking, and further at the time of departure during parallel parking The obstacle proximity warning unit 39 does not need to be used. Conversely, when the front obstacle interval detection unit 38 at the time of departure in parallel parking and the front obstacle proximity warning unit 39 at the time of departure in parallel parking are provided, before and after parallel parking The vehicle number reading / output unit 36 and the vehicle change warning unit 37 before and after parallel parking may not be provided. However, all of these may be provided, and the use may be switched as necessary, or both may be used simultaneously.

図1に示すような本発明を各種の態様で実施する縦列駐車案内装置においては、例えば図2に示す作動フローにより順に作動させることにより種々の態様で実施することができる。図2に示す縦列駐車案内処理の例においては、最初縦列駐車のために車両を後退させると(ステップS1)、リアカメラが作動し(ステップS2)、その撮影画像により車両の後方に縦列駐車中の他車が存在するか否かの判別を行う(ステップS3)。   A parallel parking guide apparatus that implements the present invention as shown in FIG. 1 in various modes can be implemented in various modes by, for example, sequentially operating according to the operation flow shown in FIG. In the example of the parallel parking guide process shown in FIG. 2, when the vehicle is moved backward for the first parallel parking (step S1), the rear camera is activated (step S2), and the parallel parking is performed behind the vehicle by the photographed image. It is determined whether or not there is another vehicle (step S3).

ここでリアカメラの撮影画像中には縦列駐車中の車両が存在しないと判断した時には、この縦列駐車において前後の車両の間隔を調整する操作段階に至ったか否かを判別する。なお、図2に示す例では車両後退時に常に以降の縦列駐車案内処理を行うようにした例を示しているが、別途運転者が縦列駐車案内指示を行うことにより、この縦列駐車案内処理を開始するように設定しても良い。   Here, when it is determined that there is no vehicle parked in parallel in the captured image of the rear camera, it is determined whether or not an operation stage for adjusting the distance between the front and rear vehicles in this parallel parking has been reached. The example shown in FIG. 2 shows an example in which the subsequent parallel parking guidance process is always performed when the vehicle moves backward, but this parallel parking guidance process is started when the driver separately issues a parallel parking guidance instruction. You may set to do.

即ち、縦列駐車は前記のように、基本的には図13(a)〜(c)のように行われ、最終的に同図(c)に示すように前後の位置調節態様の操作が行われる。したがって同図(a)及び(b)のようなハンドルを大きく回転操作した状態で車両を後退させる態様から、ハンドルをほとんど回転操作することなく車両を前後させる状態に至ったとき、縦列駐車の操作は、前後の車両間隔を調整する操作段階に至ったと判断することができる。   That is, as described above, the parallel parking is basically performed as shown in FIGS. 13A to 13C, and finally the operation of the front and rear position adjustment mode is performed as shown in FIG. Is called. Therefore, when the vehicle is moved back and forth with the handle greatly rotated as shown in FIGS. 5A and 5B, the parallel parking operation is performed when the vehicle is moved back and forth with almost no rotation of the handle. It can be determined that the operation stage for adjusting the front-rear vehicle interval has been reached.

ステップS11において未だ縦列駐車の前後車両間隔調整を行う操作段階に至っていないと判別した時、即ち図13(a),(b)のようにハンドルを大きく回転操作している状態で後退を行っている時には、ステップS1に戻ってその後退を継続し、前記作動を繰り返す。また、ステップS11で前後車両間隔を調整する段階に至ったと判別した時には、その段階でも車両の後方に縦列駐車中の他車が存在しないと判別した際は、実際に車両の後方には縦列駐車に際して車間距離を調節する車両が存在しないものとし、以降はステップS9に進んで、図3に示すようなフロントカメラ撮影画像による前方障害物との間隔確保処理を行う。   When it is determined in step S11 that the operation stage for adjusting the vehicle interval before and after parallel parking has not yet been reached, that is, as shown in FIGS. When it is, the process returns to step S1 to continue the retreat, and the above operation is repeated. In addition, when it is determined in step S11 that it has reached the stage of adjusting the front-rear vehicle interval, if it is determined that there is no other parallel parked vehicle behind the vehicle at that stage, the parallel parking is actually performed behind the vehicle. At this time, it is assumed that there is no vehicle that adjusts the inter-vehicle distance, and thereafter, the process proceeds to step S9 to perform a process for securing a distance from the front obstacle by the front camera photographed image as shown in FIG.

ステップS3で車両後方に縦列駐車中の他車が存在すると判別した時、即ちリアカメラ撮影画像中に車両が存在することを検出した時には、後方車両の車種を認識する(ステップS4)。この車種の認識に際しては、例えば前記図12に示す手法によって認識することができる。次いで、リアカメラ撮影画像中に後方車両の車種に対応した縦列駐車後方案内マークを表示する(ステップS5)。   When it is determined in step S3 that there is another vehicle parked in parallel behind the vehicle, that is, when it is detected that a vehicle is present in the rear camera image, the vehicle type of the rear vehicle is recognized (step S4). When recognizing this vehicle type, it can be recognized by the method shown in FIG. 12, for example. Next, a parallel parking rear guidance mark corresponding to the vehicle type of the rear vehicle is displayed in the rear camera photographed image (step S5).

この作動に際しては、図1の後方撮影画像内縦列駐車後方案内マーク表示処理部25における、車種別縦列駐車後方案内マーク表示部27において、後方車両車種認識部22で認識した車種に対応して、車種別データ記憶部26に記録している最小回転半径の車種別平均値等の車両データを読み込み、図8に示すような適宜の余裕車間距離S3を考慮して、縦列駐車後方案内マークを例えば図9(a)〜(c)に示すように、モニタ内に表示する事により行う。   At the time of this operation, corresponding to the vehicle type recognized by the rear vehicle type recognition unit 22 in the vehicle type vertical parking rear guidance mark display unit 27 in the vertical parking rear guide mark display processing unit 25 in the rear shot image of FIG. The vehicle data such as the vehicle type average value of the minimum turning radius recorded in the vehicle type data storage unit 26 is read, and the parallel parking rear guide mark is set, for example, in consideration of an appropriate margin distance S3 as shown in FIG. As shown in FIGS. 9 (a) to 9 (c), it is performed by displaying in the monitor.

その後、後方車両は縦列駐車後方案内マークと重なっているか否かを判別し(ステップS6)、例えば図9(a)のように未だ縦列駐車後方案内マークMBと後方車両2の画像とは重なっていない時には、更に車両を後退する(ステップS12)。この作動を繰り返すことにより、或いは最初から後方車両は縦列駐車後方案内マークと重なっていると判別した時と共にステップS7に進み、重なった量は所定以上か否かを判別する。   Thereafter, it is determined whether or not the rear vehicle overlaps with the parallel parking rear guide mark (step S6). For example, as shown in FIG. 9A, the parallel parking rear guide mark MB and the image of the rear vehicle 2 still overlap. If not, the vehicle is further moved backward (step S12). By repeating this operation, or when it is determined from the beginning that the rear vehicle overlaps the parallel parking rear guide mark, the process proceeds to step S7, and it is determined whether or not the amount of overlap is greater than or equal to a predetermined value.

ここでは例えば図9(c)に示すように、後方車両の画像における下端位置が縦列駐車後方案内マークMBと重なり、更に後方車両が自車両に接近している量、即ち後方車両が縦列駐車後方案内マークMBよりも内側に進入した進入量TBが所定量以上であると運転者が判断した時には、車両を前進させ(ステップS13)、例えば図9(b)のように、縦列駐車後方案内マークと適切に重なる位置とする。その過程でも前進し過ぎて再び同図(a)のような状態になることを考慮し、ステップS6に戻って前記作動を繰り返す。   Here, for example, as shown in FIG. 9 (c), the lower end position in the rear vehicle image overlaps with the parallel parking rear guide mark MB, and the amount of the rear vehicle approaching the host vehicle, that is, the rear vehicle is behind the parallel parking. When the driver determines that the amount of entry TB that has entered inward of the guide mark MB is greater than or equal to a predetermined amount, the vehicle is advanced (step S13). For example, as shown in FIG. And a position that overlaps appropriately. Even in this process, considering that the process proceeds too much and the state again becomes as shown in FIG. 5A, the process returns to step S6 and the above operation is repeated.

前記の例においては図9に示すように縦列駐車後方案内マークMBを表示している状態で、運転者がそのマークと後方の車両との位置関係を確認しながら車両を前後移動させる例を示したが、図1に示すような後方車両が縦列駐車後方案内マーク内に進入したことを検出する、後方車両縦列駐車後方案内マーク内進入検出処理部29を備える時には、図9(c)のような進入量TBを計測し、その量が所定以上であることを検出した時に後方車両近接警告部32からモニタへの表示或いは音声等で警告を出力するようにしても良い。   In the above example, as shown in FIG. 9, an example in which the driver moves the vehicle back and forth while checking the positional relationship between the mark and the rear vehicle while the parallel parking rear guide mark MB is displayed. However, when the rear vehicle parallel parking rear guide mark entry detection processing unit 29 for detecting that the rear vehicle has entered the parallel parking rear guide mark as shown in FIG. 1 is provided, as shown in FIG. When the amount of entry TB TB is measured and it is detected that the amount is greater than or equal to a predetermined amount, a warning may be output from the rear vehicle proximity warning unit 32 by display on the monitor or voice.

ステップS7で重なった量は所定以上ではないと判別した時には、その重なりは適切な量であると判断し、次いで後方車両のナンバーを認識して記憶する(ステップS8)。その後図2の例では、図3に示すようなフロントカメラ撮影画像による前方障害物との間隔確保処理を行い、後述する図3のステップS26で前方車両のナンバーを記憶した状態で、最終的に車両の電源をオフし(ステップS10)、前記一連の処理を終了する。   When it is determined in step S7 that the amount overlapped is not equal to or greater than the predetermined amount, it is determined that the overlap is an appropriate amount, and then the number of the rear vehicle is recognized and stored (step S8). Thereafter, in the example of FIG. 2, the distance from the front obstacle by the front camera photographed image as shown in FIG. 3 is performed, and finally the number of the preceding vehicle is stored in step S26 of FIG. The power supply of the vehicle is turned off (step S10), and the series of processing ends.

なお、図2に示す例においては最初にリアカメラの撮影画像により後方車両との適切な間隔を確保する処理を行い、その後ステップS9でフロントカメラの撮影画像により前方の障害物との間隔確保処理を行う例を示したが、先にフロントカメラの撮影画像により前方の障害物との間隔確保処理を行う態様で本発明を実施することができる。   In the example shown in FIG. 2, first, a process for ensuring an appropriate distance from the rear vehicle is performed based on the image captured by the rear camera, and then a process for ensuring an interval between the front obstacle and the image captured by the front camera in step S9. However, the present invention can be implemented in such a manner that the process of ensuring the distance from the front obstacle is first performed based on the image captured by the front camera.

図2のステップS9におけるフロントカメラ撮影画像による前方障害物との間隔確保処理は図3に示すように、最初フロントカメラを作動し(ステップS21)、次いでフロントカメラ撮影画像中に縦列駐車前方案内マークを表示する(ステップS22)。この縦列駐車前方案内マークの表示に際しては、図1の縦列駐車前方案内マーク表示部12で、自車両の最小回転半径のデータ等の車両データを用いて得られている位置に、図10(a)〜(c)のように表示する。   In step S9 in FIG. 2, the process for securing the space between the front obstacle and the front obstacle is as shown in FIG. 3. First, the front camera is actuated (step S21). Is displayed (step S22). When displaying the parallel parking forward guidance mark, the parallel parking forward guidance mark display unit 12 shown in FIG. 1 is displayed at the position obtained by using the vehicle data such as the minimum turning radius data of the host vehicle. ) To (c).

次いで前方障害物画像は縦列駐車前方案内マークと重なっているか否かを判別する(ステップS23)。ここで例えば図10(a)のように前方車両2が縦列駐車前方案内マークMFと重なっていないと判別した時に運転者は車両を前進させ(ステップS27)、再びステップS23に戻って前記作動を繰り返す。その過程で図10(b)、或いは同図(c)のように前方車両の画像、或いは各種障害物の画像が縦列駐車前方案内マークMFと重なる。   Next, it is determined whether or not the front obstacle image overlaps the parallel parking front guidance mark (step S23). Here, for example, as shown in FIG. 10A, when it is determined that the front vehicle 2 does not overlap the parallel parking front guide mark MF, the driver moves the vehicle forward (step S27), and returns to step S23 again to perform the operation. repeat. In the process, as shown in FIG. 10B or FIG. 10C, an image of the vehicle ahead or an image of various obstacles overlaps with the parallel parking front guide mark MF.

その時にはステップS23で前方障害物画像は縦列駐車前方案内マークと重なっていると判別し、次いでその重なった量は所定以上か否かを判別する(ステップS24)。この判別は、運転者が例えば図10(b)または(c)のような画面を見て、同図(c)のように重なった量TFは所定以上であると判断すると、運転者は車両を後退し(ステップS28)、その時の後退のし過ぎ考慮して再びステップS23に戻り、前記作動を繰り返す。   At that time, it is determined in step S23 that the front obstacle image overlaps the parallel parking front guide mark, and then it is determined whether or not the amount of overlap is greater than or equal to a predetermined amount (step S24). This determination is made when the driver views the screen as shown in FIG. 10B or 10C, for example, and determines that the amount TF overlapped as shown in FIG. (Step S28), considering the excessive backward movement at that time, the process returns to step S23 again, and the above operation is repeated.

その後図10(b)のように重なった量が所定以上ではなく、所定以内であると判断した時、車両前方の障害物は縦列駐車中の他車か否かを判別する(ステップS25)。即ち、フロントカメラで監視するべきものは、縦列駐車からその後出発する時、前方の障害物によってスムーズな発車を行うことができないことを防止するためであり、したがって前方障害物は車両以外の縁石や塀等の物体である場合があるので、ここでは車両前方の障害物は縦列駐車中の他車か否かを判別し、車両である時には前方車両のナンバーを認識して記憶する(ステップS26)。図10の例においては、同図(e)に示すように、ナンバーが「DEF」であると認識し、これを記憶する。   Thereafter, when it is determined that the overlapping amount is not within a predetermined value but within a predetermined value as shown in FIG. 10B, it is determined whether or not the obstacle ahead of the vehicle is another vehicle in parallel parking (step S25). In other words, what should be monitored by the front camera is to prevent the vehicle from starting smoothly due to obstacles ahead when it departs from parallel parking. Since it may be an object such as a bag, it is determined here whether the obstacle ahead of the vehicle is another vehicle parked in parallel, and if it is a vehicle, the number of the vehicle ahead is recognized and stored (step S26). . In the example of FIG. 10, as shown in FIG. 10E, the number is recognized as “DEF” and stored.

その後前記ステップS25で、車両前方の障害物は車両ではなく、例えば縁石や塀等であると判別した時と共にステップS29に進み、図2のステップS10において車両の電源をオフし、一連の縦列駐車案内処理を終了する。   Thereafter, in step S25, when it is determined that the obstacle in front of the vehicle is not a vehicle, for example, a curb or a fence, the process proceeds to step S29. In step S10 in FIG. 2, the vehicle is turned off and a series of parallel parking is performed. The guidance process ends.

上記のような一連の縦列駐車案内を行って縦列駐車を行った後において、その後この縦列駐車の状態から発車する時には、例えば図4に示す作動フローにより、前記図2及び図3の処理において記憶した後方車両及び前方車両のナンバーを記憶している時、このデータを利用して発車時の確認処理を行う。そのための処理を行う図4に示す縦列駐車中車両の発車時確認処理の第1の態様においては、最初に発車のために車両の電源をオンし(ステップS41)、次いで図示の例では縦列駐車案内確認出力要求を行っている(ステップS42)。   After performing a series of parallel parking guides as described above and performing parallel parking, the vehicle is stored in the processing of FIGS. 2 and 3 by the operation flow shown in FIG. When the numbers of the rear vehicle and the vehicle ahead are stored, this data is used to perform confirmation processing at departure. In the first aspect of the confirmation process at the time of departure of the parallel parked vehicle shown in FIG. 4 for performing the process, the vehicle is first turned on for departure (step S41), and then in the illustrated example, the parallel parking is performed. A guidance confirmation output request is made (step S42).

即ち、図示の例においてはステップS42で運転者が確認出力要求を行うことによって以降の処理を行うものとしているが、このような出力要求を運転者が行わない時でも前記一連の縦列駐車案内処理を行った時には、或いはその案内処理に際して前記のように車両のナンバーを記憶した時には、自動的に以降の確認処理を行うようにしても良い。   That is, in the illustrated example, the driver performs the subsequent processing by making a confirmation output request in step S42, but the series of parallel parking guidance processing even when the driver does not make such an output request. When the vehicle number is stored, or when the vehicle number is stored as described above during the guidance process, the subsequent confirmation process may be automatically performed.

その後縦列駐車時の前方及び後方の車両のナンバーを読み込んで出力する。図4に示す例においては、次いで縦列駐車時と現在と出前方或いは後方の車両が異なっているかの確認処理を行う。この時の確認処理は、例えば前記ステップS43において、モニタに表示された縦列駐車時の前方及び後方の車両のナンバーを運転者が見て、現在の前方及び後方の車両のナンバーとが一致するか否かを確認し、そのナンバーが異なっている時には発車時の運転に充分注意して運転することによってステップS44の処理を行うことができる。   After that, the numbers of the front and rear vehicles at the time of parallel parking are read and output. In the example shown in FIG. 4, next, a confirmation process is performed to determine whether the vehicle at the time of parallel parking is different from the current vehicle and the vehicle ahead or behind. In the confirmation process at this time, for example, in step S43, the driver sees the numbers of the front and rear vehicles at the time of parallel parking displayed on the monitor, and whether the current front and rear vehicle numbers match. If the number is different and the number is different, the process of step S44 can be performed by driving with sufficient attention to the driving at the departure.

また、そのような確認処理を運転者のみに任せるのではなく、自動的に確認を行う時には、例えば図5に示すような、縦列駐車時と現在とで前方或いは後方の車両が異なっているかの自動確認処理を行っても良い。図5に示す前記自動確認処理においては、最初リアカメラ及びフロントカメラを作動し(ステップS51)、次いで現在の後方及び前方の車両のナンバーを認識する(ステップS52)。   In addition, when such a confirmation process is not performed only by the driver but is automatically confirmed, for example, as shown in FIG. Automatic confirmation processing may be performed. In the automatic confirmation process shown in FIG. 5, first the rear camera and the front camera are activated (step S51), and then the current rear and front vehicle numbers are recognized (step S52).

その後前記図4のステップS43で読込出力した縦列駐車時の車両ナンバーと、現在の車両ナンバーとでは、そのナンバーが異なるか否かを判別する(ステップS53)。ここでいずれかの車両のナンバーが異なっていると判別した時には、縦列駐車時と現在とでは前方或いは後方の車両が異なっている旨の警告出力を行い(ステップS54)、次いで前記ステップS53で縦列駐車時と現在とでは車両のナンバーが同じであると判別した時と共にステップS55に進んで、この一連の処理を終了する。この処理によって、図2及び図3に示す一連の縦列駐車案内処理を行った後にここから発車する時には、運転者に依存することなく、自動的に確認を行うことができる。   Thereafter, it is determined whether or not the vehicle number at the time of parallel parking read and output in step S43 of FIG. 4 is different from the current vehicle number (step S53). If it is determined that the number of any vehicle is different, a warning is output indicating that the front or rear vehicle is different between the time of parallel parking and the current time (step S54). When it is determined that the number of the vehicle is the same at the time of parking and the current time, the process proceeds to step S55, and this series of processes is terminated. With this process, when the vehicle departs from the series of parallel parking guidance processes shown in FIGS. 2 and 3, the confirmation can be automatically made without depending on the driver.

縦列駐車中の車両がその場から出発しようとする時、特に前方に存在する障害物を考慮して発車する際の確認処理は、前記のようなナンバーによる確認以外に、フロントカメラの撮影画像と、図10(a)〜(c)に示すような縦列駐車前方案内マークMFの表示を利用して、例えば図6に示す確認処理を行うことによっても実施することができる。   When a parallel parked vehicle is about to depart from the spot, the confirmation process when leaving in consideration of obstacles that exist in front of the vehicle is not limited to the confirmation by the number as described above. 10 (a) to 10 (c) can be carried out by performing the confirmation processing shown in FIG. 6, for example, using the display of the parallel parking front guidance mark MF.

即ち、図6に示す縦列駐車中車両の発車時確認処理の第2の態様においては、最初車両の電源をオンした後(ステップS61)、図6に示す例においては前記図4のステップS42と同様に、運転者が縦列駐車案内確認出力要求を行ったとき(ステップS62)、フロントカメラを作動する(ステップS63)。次いでフロントカメラの撮影画像を認識処理して、前方に障害物が存在するか否かを判別する(ステップS64)。   That is, in the second mode of the departure confirmation process for the parallel parked vehicles shown in FIG. 6, after the vehicle is first turned on (step S61), in the example shown in FIG. Similarly, when the driver makes a parallel parking guidance confirmation output request (step S62), the front camera is activated (step S63). Next, the captured image of the front camera is recognized, and it is determined whether or not there is an obstacle ahead (step S64).

ステップS64において前方に障害物が存在すると判別した時には、前方の障害物は縦列駐車前方案内マークと所定以上重なっているか否かを判別する(ステップS65)。ここで、例えば図10(c)のように、前方の車両等の障害物と、自車両が安全にこの駐車領域から脱出することができる間隔を示す縦列駐車前方案内マークMFとが所定量以上重なっていることを検出したときには、このまま発車すると障害物と接触して危険である旨の警告を出力する。この警告はモニタへの表示以外に、必要に応じて音声或いはビープ音等で出力する。   When it is determined in step S64 that there is an obstacle ahead, it is determined whether or not the front obstacle overlaps with the parallel parking front guide mark by a predetermined amount or more (step S65). Here, as shown in FIG. 10C, for example, an obstacle such as a forward vehicle and a parallel parking front guide mark MF indicating an interval at which the host vehicle can safely escape from the parking area are a predetermined amount or more. When it is detected that the vehicle overlaps, if it leaves the vehicle as it is, it will contact the obstacle and output a warning that it is dangerous. This warning is output by voice or beep sound as necessary, in addition to display on the monitor.

この警告出力により運転者は前方障害物が縦列駐車前方案内マークに所定量以上重ならなくなる迄車両を後退させ(ステップS67)、その後前記ステップS65において前方に障害物が存在しないと判別した時、及びステップS65で前方の障害物は縦列駐車前方案内マークと所定以上重なっていないと判別した時と共に、ステップS68に進んでこの一連の確認処理を終了する。   With this warning output, the driver moves the vehicle backward until the front obstacle does not overlap with the parallel parking forward guidance mark by a predetermined amount or more (step S67), and then when it is determined in step S65 that there is no obstacle ahead, When it is determined in step S65 that the obstacle ahead does not overlap with the parallel parking front guide mark by a predetermined amount or more, the process proceeds to step S68, and this series of confirmation processing ends.

本発明は前記のように図2及び図3に示すような態様によって縦列駐車の案内を行い、図4〜図6に示すような態様によってその後の縦列駐車位置からの発車時の処理を行うことにより、本発明を実施することができるが、これらは本発明の一部の態様を示しているに過ぎず、更に前記と同様の趣旨によって各種の態様で実施することができることは言うまでもない。   As described above, the present invention guides parallel parking in the manner shown in FIGS. 2 and 3, and performs processing at the time of departure from the parallel parking position in the manner shown in FIGS. However, it is needless to say that the present invention can be carried out in various modes according to the same purpose as described above.

1 自車両
2 前方車両
3 後方車両
4 フロントカメラ
5 リアカメラ
6 前方障害物検出部
7 前方車両ナンバー認識部
8 前方車両ナンバー記憶部
10 前方撮影画像内縦列駐車前方案内マーク表示処理部
11 自車両データ記憶部
12 縦列駐車前方案内マーク表示部
13 縦列駐車前方案相補助マーク表示部
14 前方障害物縦列駐車前方案内マーク内進入検出処理部
15 前方障害物縦列駐車前方案内マーク内進入量検出部
16 前方障害物縦列駐車前方案内補助マーク内進入検出部
17 前方障害物近接警告部
21 後方障害物検出部
22 後方車両車種認識部
23 後方車両ナンバー認識部
24 後方車両ナンバー記憶部
25 後方撮影画像内縦列駐車案内マーク表示処理部
26 車種別データ記憶部
27 車種別縦列駐車後方案内マーク表示部
28 縦列駐車後方案内補助マーク表示部
29 後方車両縦列駐車後方案内マーク内進入検出処理部
30 後方車両縦列駐車後方案内マーク内進入量検出部
31 後方車両縦列駐車後方案内補助マーク内進入検出部
32 後方車両近接警告部
35 縦列駐車駐中車両発車時確認処理部
36 縦列駐車時前後車両ナンバー読込出力部
37 縦列駐車中前後車両変更警告部
38 縦列駐車中発車時前方障害物間隔検出部
39 縦列駐車中発車時前方障害物近接警告部
DESCRIPTION OF SYMBOLS 1 Own vehicle 2 Front vehicle 3 Rear vehicle 4 Front camera 5 Rear camera 6 Front obstacle detection part 7 Forward vehicle number recognition part 8 Forward vehicle number storage part 10 Front parking image in-line parking front guidance mark display processing part 11 Own vehicle data Storage unit 12 Parallel parking forward guidance mark display unit 13 Parallel parking forward phase assist mark display unit 14 Front obstacle parallel parking front guidance mark entry detection processing unit 15 Forward obstacle parallel parking forward guidance mark entry amount detection unit 16 Front Obstacle tandem parking front guidance auxiliary mark entry detection unit 17 Front obstacle proximity warning unit 21 Rear obstacle detection unit 22 Rear vehicle vehicle type recognition unit 23 Rear vehicle number recognition unit 24 Rear vehicle number storage unit 25 Rearward captured image tandem parking Guidance mark display processing unit 26 Vehicle type data storage unit 27 Vehicle type parallel parking rear guidance mark display unit 28 Parallel parking Rear guidance auxiliary mark display unit 29 Rear vehicle parallel parking rear guidance mark entry detection processing unit 30 Rear vehicle vertical parking rear guidance mark entry amount detection unit 31 Rear vehicle vertical parking rear guidance auxiliary mark entry detection unit 32 Rear vehicle proximity warning Section 35 Parallel parking parked vehicle departure confirmation processing section 36 Parallel parking front and rear vehicle number reading and output section 37 Parallel parking front and rear vehicle change warning section 38 Front parking obstacle departure front obstacle interval detection section 39 Parallel parking and front departure Obstacle proximity warning section

Claims (7)

車両の後方を撮影するリアカメラと、
前記リアカメラの撮影画像を表示するモニタと、
自車両が縦列駐車する時に後方に存在する車両が、当該車両と自車両との間隔を用いて縦列駐車位置から発車することができる間隔に対応したモニタの位置に、縦列駐車後方案内マークを表示する縦列駐車後方案内マーク表示処理部とを備えたことを特徴とする縦列駐車案内装置。
A rear camera that captures the back of the vehicle,
A monitor for displaying a photographed image of the rear camera;
A parallel parking rear guide mark is displayed at the monitor position corresponding to the interval at which the vehicle existing behind the host vehicle can park from the parallel parking position using the interval between the vehicle and the host vehicle. A parallel parking guide device comprising a parallel parking rear guide mark display processing unit.
前記リアカメラの撮影画像により後方に存在する車両の車種を認識する後方車両車種認識部を備え、
前記縦列駐車後方案内マーク表示処理部は、前記後方車両車種認識部で認識した後方車両の車種に対応して、その車種の車両データによって縦列駐車後方案内マークの表示位置を決定することを特徴とする請求項1記載の縦列駐車案内装置。
A rear vehicle vehicle type recognition unit for recognizing a vehicle type of a vehicle existing behind by a photographed image of the rear camera;
The parallel parking rear guidance mark display processing unit determines a display position of the parallel parking rear guidance mark according to vehicle data of the vehicle type corresponding to the vehicle type of the rear vehicle recognized by the rear vehicle vehicle type recognition unit. The parallel parking guide apparatus according to claim 1.
前記縦列駐車後方案内マーク表示処理部は、通常の大部分の車両が、当該車両と自車両との間隔を用いて縦列駐車位置から発車することができる間隔に対応したモニタの位置に、縦列駐車後方案内マークを表示することを特徴とする請求項1記載の縦列駐車案内装置。   The parallel parking rear guidance mark display processing unit is configured to perform parallel parking at a monitor position corresponding to an interval at which most ordinary vehicles can depart from the parallel parking position using the interval between the vehicle and the host vehicle. 2. The parallel parking guide device according to claim 1, wherein a rear guide mark is displayed. 前記リアカメラの撮影画像により後方に存在する車両のナンバーを認識する後方車両ナンバー認識部と、
前記後方車両ナンバー認識部で認識した後方車両のナンバーを記憶する後方車両ナンバー記憶部と、
前記後方車両ナンバー記憶部に記憶したナンバーを読み込んで出力する縦列駐車後方車両ナンバー読込出力部とを備えたことを特徴とする請求項1記載の縦列駐車案内装置。
A rear vehicle number recognizing unit for recognizing the number of a vehicle existing behind by a photographed image of the rear camera;
A rear vehicle number storage unit for storing a rear vehicle number recognized by the rear vehicle number recognition unit;
The parallel parking guide apparatus according to claim 1, further comprising a parallel parking rear vehicle number reading / outputting unit that reads and outputs a number stored in the rear vehicle number storage unit.
車両の前方を撮影するフロントカメラと、
前記フロントカメラの撮影画像を表示するモニタと、
自車両が縦列駐車する時に前方に障害物が存在する際、自車両が当該障害物と自車両との間隔を用いて縦列駐車位置から発車することができる間隔に対応したモニタの位置に、縦列駐車前方案内マークを表示する縦列駐車前方案内マーク表示処理部とを備えたことを特徴とする縦列駐車案内装置。
A front camera that captures the front of the vehicle;
A monitor for displaying a photographed image of the front camera;
When there is an obstacle ahead when the host vehicle is parked in parallel, the vehicle is positioned in the column at the monitor position corresponding to the interval at which the host vehicle can depart from the parallel parking position using the distance between the obstacle and the host vehicle. A parallel parking guidance apparatus comprising: a parallel parking forward guidance mark display processing unit for displaying a parking forward guidance mark.
前記フロントカメラの撮影画像により前方に存在する障害物としての車両のナンバーを認識する前方車両ナンバー認識部と、
前記前方車両ナンバー認識部で認識した前方車両のナンバーを記憶する前方車両ナンバー記憶部と、
前記前方車両ナンバー記憶部に記憶したナンバーを読み込んで出力する縦列駐車前方車両ナンバー読込出力部とを備えたことを特徴とする請求項5記載の縦列駐車案内装置。
A front vehicle number recognition unit for recognizing the number of the vehicle as an obstacle existing ahead by a photographed image of the front camera;
A front vehicle number storage unit for storing the number of the preceding vehicle recognized by the front vehicle number recognition unit;
6. The parallel parking guide apparatus according to claim 5, further comprising: a parallel parking front vehicle number reading / output unit that reads and outputs a number stored in the front vehicle number storage unit.
前記後方車両ナンバー認識部または前記前方車両ナンバー認識部で縦列駐車後に認識したナンバーと、前記縦列駐車後方車両ナンバー読込出力部または前記縦列駐車前方車両ナンバー読込出力部で出力したナンバーとが互いに異なる時警告を出力する縦列駐車駐車両変更警告部とを備えたことを特徴とする請求項4または6に記載の縦列駐車案内装置。   When the number recognized after parallel parking by the rear vehicle number recognition unit or the front vehicle number recognition unit and the number output by the parallel parking rear vehicle number reading output unit or the parallel parking front vehicle number reading output unit are different from each other The parallel parking guide device according to claim 4 or 6, further comprising a parallel parking parking both change warning unit for outputting a warning.
JP2009160891A 2009-07-07 2009-07-07 Parallel parking guidance device Active JP5464577B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009160891A JP5464577B2 (en) 2009-07-07 2009-07-07 Parallel parking guidance device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009160891A JP5464577B2 (en) 2009-07-07 2009-07-07 Parallel parking guidance device

Publications (2)

Publication Number Publication Date
JP2011016395A true JP2011016395A (en) 2011-01-27
JP5464577B2 JP5464577B2 (en) 2014-04-09

Family

ID=43594558

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009160891A Active JP5464577B2 (en) 2009-07-07 2009-07-07 Parallel parking guidance device

Country Status (1)

Country Link
JP (1) JP5464577B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103895643A (en) * 2012-12-27 2014-07-02 现代自动车株式会社 Parking assist system and method
JP2018036859A (en) * 2016-08-31 2018-03-08 本田技研工業株式会社 Pull-out-of-parking support device
WO2020254098A1 (en) * 2019-06-21 2020-12-24 Volkswagen Aktiengesellschaft Method and device for providing assistance to a motor vehicle during a process of exiting a lateral parking space

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001347909A (en) * 2000-04-05 2001-12-18 Matsushita Electric Ind Co Ltd Driving operation assisting method and device
JP2003306105A (en) * 2002-04-11 2003-10-28 Mitsubishi Motors Corp Start supporting device
JP2005138716A (en) * 2003-11-06 2005-06-02 Denso Corp Parking support device
JP2008132938A (en) * 2006-11-29 2008-06-12 Nippon Soken Inc Driving support device
JP2008302711A (en) * 2007-06-05 2008-12-18 Denso Corp Start support device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001347909A (en) * 2000-04-05 2001-12-18 Matsushita Electric Ind Co Ltd Driving operation assisting method and device
JP2003306105A (en) * 2002-04-11 2003-10-28 Mitsubishi Motors Corp Start supporting device
JP2005138716A (en) * 2003-11-06 2005-06-02 Denso Corp Parking support device
JP2008132938A (en) * 2006-11-29 2008-06-12 Nippon Soken Inc Driving support device
JP2008302711A (en) * 2007-06-05 2008-12-18 Denso Corp Start support device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103895643A (en) * 2012-12-27 2014-07-02 现代自动车株式会社 Parking assist system and method
CN103895643B (en) * 2012-12-27 2018-05-04 现代自动车株式会社 Parking assistance system and method
JP2018036859A (en) * 2016-08-31 2018-03-08 本田技研工業株式会社 Pull-out-of-parking support device
WO2020254098A1 (en) * 2019-06-21 2020-12-24 Volkswagen Aktiengesellschaft Method and device for providing assistance to a motor vehicle during a process of exiting a lateral parking space
US11807225B2 (en) 2019-06-21 2023-11-07 Volkswagen Aktiengesellschaft Method and device for providing assistance to a motor vehicle during a process of exiting a lateral parking space

Also Published As

Publication number Publication date
JP5464577B2 (en) 2014-04-09

Similar Documents

Publication Publication Date Title
JP4543983B2 (en) Parking assistance device
JP4466200B2 (en) Parking assistance device
US6825880B2 (en) Arrangement for guiding steering to assist parallel parking
US7257486B2 (en) Parking assisting device
JP4100026B2 (en) Start support device
JP2003291759A (en) Parking operation support system
KR100552337B1 (en) Parking support device
JPH09180100A (en) Method and device for judging parking
JP5380926B2 (en) Parking assistance device and parking assistance method
JP2006290051A (en) Parking assisting device and parking assisting method
JP2003072495A (en) Parking support device and parking support method
JP5169912B2 (en) Parking assistance device
JP4677880B2 (en) Parking assistance device and parking assistance method
KR100558120B1 (en) Parking assisting device
JP4507872B2 (en) Parking assistance device
JP5464577B2 (en) Parallel parking guidance device
JP4941383B2 (en) Parking assistance device, parking assistance method, and computer program
JP4677877B2 (en) Parking assistance device and parking assistance method
JP2004306814A (en) Parking support device
JP3436237B2 (en) Parking assistance device
JP2007091047A (en) Vehicle parking assisting device
JP4110937B2 (en) Parking assistance device
JP2004017702A (en) Parking assisting device
JP6973566B2 (en) Driving support device
JP5075674B2 (en) Parking assistance device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120321

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130510

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130816

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130902

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131029

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140115

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140115

R150 Certificate of patent or registration of utility model

Ref document number: 5464577

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150