JP5257138B2 - Parking assistance device and parking assistance method - Google Patents

Parking assistance device and parking assistance method Download PDF

Info

Publication number
JP5257138B2
JP5257138B2 JP2009043851A JP2009043851A JP5257138B2 JP 5257138 B2 JP5257138 B2 JP 5257138B2 JP 2009043851 A JP2009043851 A JP 2009043851A JP 2009043851 A JP2009043851 A JP 2009043851A JP 5257138 B2 JP5257138 B2 JP 5257138B2
Authority
JP
Japan
Prior art keywords
parking
target position
vehicle
route
parking target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009043851A
Other languages
Japanese (ja)
Other versions
JP2010195266A (en
Inventor
照久 高野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2009043851A priority Critical patent/JP5257138B2/en
Publication of JP2010195266A publication Critical patent/JP2010195266A/en
Application granted granted Critical
Publication of JP5257138B2 publication Critical patent/JP5257138B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Steering Control In Accordance With Driving Conditions (AREA)

Description

本発明は、車両を駐車目標位置へと誘導する経路を算出して当該経路に沿って車両が移動するように車両の操舵を制御する駐車支援装置及び駐車支援方法に関する。   The present invention relates to a parking assistance device and a parking assistance method for calculating a route for guiding a vehicle to a parking target position and controlling steering of the vehicle so that the vehicle moves along the route.

従来、車両の駐車を支援する駐車支援装置として、車両の現在位置と駐車目標位置との位置関係に基づいて車両を駐車目標位置へと誘導する経路を算出し、当該経路に沿って車両が移動するように車両の操舵を制御するものが知られている(例えば、特許文献1参照。)。特許文献1に記載の駐車支援装置は、車両を後退させて駐車目標位置に誘導する際の車両の操舵を自動制御するものであり、後退開始位置にて駐車目標位置を設定して当該駐車目標位置までの経路を算出する際に、駐車目標位置として設定した駐車区画の枠線と、この駐車目標位置に隣接して駐車している他の駐車車両などの障害物との位置関係に応じて、駐車目標位置までの経路を変化させるようにしている。   Conventionally, as a parking assistance device that supports parking of a vehicle, a route for guiding the vehicle to the parking target position is calculated based on the positional relationship between the current position of the vehicle and the parking target position, and the vehicle moves along the route. A device for controlling the steering of a vehicle is known (see, for example, Patent Document 1). The parking assist device described in Patent Document 1 automatically controls steering of a vehicle when the vehicle is moved backward and guided to a parking target position, and the parking target position is set at the reverse start position. When calculating the route to the position, depending on the positional relationship between the border line of the parking section set as the parking target position and obstacles such as other parked vehicles parked adjacent to the parking target position The route to the parking target position is changed.

特開2007−290557号公報JP 2007-290557 A

しかしながら、特許文献1に記載の駐車支援装置では、後退開始位置まで車両を移動させる操作はドライバに委ねているため、車両が後退開始位置に移動する過程で駐車目標位置に隣接して駐車している他の駐車車両などの障害物の位置を正確に計測できるとは限らない。このため、障害物を避けて駐車目標位置に到達する車両の経路を適切に算出できない場合があり、十分な信頼性が得られないという問題があった。   However, in the parking assistance device described in Patent Document 1, since the operation of moving the vehicle to the reverse start position is left to the driver, the vehicle is parked adjacent to the target parking position in the process of moving to the reverse start position. It is not always possible to accurately measure the position of obstacles such as other parked vehicles. For this reason, there is a case where the route of the vehicle that reaches the parking target position while avoiding the obstacle cannot be calculated appropriately, and there is a problem that sufficient reliability cannot be obtained.

本発明は、以上のような従来の課題を解決すべく創案されたものであって、駐車目標位置の近傍に存在する障害物の位置を確実に計測できるようにして、信頼性を高めた駐車支援装置及び駐車支援方法を提供することを目的としている。   The present invention was devised to solve the conventional problems as described above, and is capable of reliably measuring the position of an obstacle existing in the vicinity of the parking target position, thereby improving the reliability of the parking. An object is to provide a support device and a parking support method.

本発明は、車両の駐車目標位置を設定するまでの間に得られる情報に基づいて、駐車目標位置よりも車両進行方向の前方側に存在する障害物の位置を計測するための経路である予備経路を駐車目標位置の設定時に算出し、当該予備経路に沿って車両が移動するように車両の操舵を制御することにより、上述した課題を解決する。   The present invention relates to a spare path that measures the position of an obstacle existing ahead of the parking target position in the vehicle traveling direction based on information obtained until the target parking position of the vehicle is set. The above-described problem is solved by calculating the route when setting the parking target position and controlling the steering of the vehicle so that the vehicle moves along the preliminary route.

本発明によれば、車両が予備経路に沿って移動する過程で駐車目標位置の近傍に存在する障害物の位置を確実に計測できるので、障害物を避けて駐車目標位置に到達する適切な経路に沿って車両を駐車目標位置へと誘導することができ、信頼性の高い駐車支援を行うことができる。   According to the present invention, since the position of an obstacle existing in the vicinity of the parking target position can be reliably measured in the process of the vehicle moving along the backup route, an appropriate route for reaching the parking target position while avoiding the obstacle. It is possible to guide the vehicle to the parking target position along the road and to perform highly reliable parking assistance.

本発明を適用した駐車支援システムの構成を示す構成図である。It is a block diagram which shows the structure of the parking assistance system to which this invention is applied. 車載カメラ及び超音波ソナーの自車に対する取り付け位置を説明する図である。It is a figure explaining the attachment position with respect to the own vehicle of a vehicle-mounted camera and an ultrasonic sonar. ディスプレイに表示される俯瞰映像の映像例を示す図である。It is a figure which shows the example of a video of the bird's-eye view video displayed on a display. 駐車場で車庫入れ駐車を行う駐車シーンを示す模式図である。It is a schematic diagram which shows the parking scene which performs garage parking in a parking lot. ステアリング操作と自車の挙動との関係を説明するための座標系を示す図である。It is a figure which shows the coordinate system for demonstrating the relationship between steering operation and the behavior of the own vehicle. 自車を右旋回で移動させる場合のステアリング制御規則の一例を示す図である。It is a figure which shows an example of the steering control rule in the case of moving the own vehicle by right turn. 自車のタイヤの傾きを説明する図である。It is a figure explaining the inclination of the tire of the own vehicle. 図6に示したステアリング制御規則に従って自車を移動させた場合の自車の挙動を示す図である。It is a figure which shows the behavior of the own vehicle at the time of moving the own vehicle according to the steering control rule shown in FIG. 駐車目標位置が設定された際に駐車支援コントローラにより実行される処理の具体例を示すフローチャートである。It is a flowchart which shows the specific example of the process performed by a parking assistance controller, when a parking target position is set. 駐車目標位置設定時における自車の姿勢をパターン化して示す模式図である。It is a schematic diagram which patternizes and shows the attitude | position of the own vehicle at the time of parking target position setting. 予備経路に沿って障害物となる駐車車両の近傍を通過してから後退開始位置に到達するまでの自車の挙動を示す図である。It is a figure which shows the behavior of the own vehicle after passing the vicinity of the parked vehicle used as an obstruction along a reserve path | route, and reaching | attaining a reverse start position. 自車を図11に示す挙動で移動させる場合のステアリングの制御規則を示す図である。It is a figure which shows the control rule of steering in the case of moving the own vehicle by the behavior shown in FIG. 俯瞰映像上に予備経路の終点位置を明示する目安線を重畳した例を示す図である。It is a figure which shows the example which superimposed the reference line which specifies the end point position of a backup path | route on a bird's-eye view image | video.

以下、本発明の具体的な実施形態について、図面を参照しながら詳細に説明する。   Hereinafter, specific embodiments of the present invention will be described in detail with reference to the drawings.

図1は、本発明を適用した駐車支援システムの構成を示す構成図である。この駐車支援システムは、自車を駐車目標位置へと誘導する経路を算出して、当該経路に沿って自車が移動するように自車の操舵を自動制御するものであり、図1に示すように、本システムの中核をなす駐車支援コントローラ10に対して、自車周囲の映像を撮影する4つの車載カメラ1a〜1dと、自車の左右両側方の物体の位置を計測する左右一対の超音波ソナー2a,2bと、自車周囲の俯瞰映像を表示するディスプレイ3と、自車のステアリングを駆動するステアリングアクチュエータ4と、ドライバによる操作入力を受け付ける操作入力デバイス5と、自車の舵角を検出する舵角センサ6と、自車の車速を検出する車速センサ7とが接続されて構成される。   FIG. 1 is a configuration diagram showing a configuration of a parking assistance system to which the present invention is applied. This parking assist system calculates a route for guiding the vehicle to the parking target position, and automatically controls the steering of the vehicle so that the vehicle moves along the route, as shown in FIG. Thus, with respect to the parking support controller 10 that forms the core of the present system, four in-vehicle cameras 1a to 1d that capture images around the own vehicle and a pair of left and right that measure the positions of objects on both the left and right sides of the own vehicle. Ultrasonic sonars 2a and 2b, a display 3 for displaying a bird's-eye view around the vehicle, a steering actuator 4 for driving the steering of the vehicle, an operation input device 5 for receiving an operation input by the driver, and a steering angle of the vehicle The steering angle sensor 6 for detecting the vehicle speed and the vehicle speed sensor 7 for detecting the vehicle speed of the host vehicle are connected to each other.

車載カメラ1a〜1dは、例えば180度程度の画角を有する広角のCCDカメラ或いはCMOSカメラよりなり、これら4つの車載カメラ1a〜1dで自車周囲を囲む全ての領域の映像を撮影できるように、自車の適所に搭載されている。具体的には、例えば図2に示すように、車載カメラ1aは自車V0のフロントグリル、車載カメラ1bはリアフィニッシャ、車載カメラ1cは右ドアミラー、車載カメラ1dは左ドアミラーに各々取り付けられ、それぞれ自車周囲の所定範囲の領域の映像を路面に対して斜めに見下ろす方向で撮影する。   The in-vehicle cameras 1a to 1d are, for example, wide-angle CCD cameras or CMOS cameras having an angle of view of about 180 degrees, and these four in-vehicle cameras 1a to 1d can capture images of all areas surrounding the host vehicle. It is installed in the right place of the car. Specifically, for example, as shown in FIG. 2, the in-vehicle camera 1a is attached to the front grille of the own vehicle V0, the in-vehicle camera 1b is attached to the rear finisher, the in-vehicle camera 1c is attached to the right door mirror, and the in-vehicle camera 1d is attached to the left door mirror. An image of an area in a predetermined range around the vehicle is taken in a direction looking down obliquely with respect to the road surface.

超音波ソナー2a,2bは、超音波を発信するとともに物体にて反射して戻ってくる反射波を受信し、発信から受信までの時間を距離に換算して、物体までの距離を計測するものである。この超音波ソナー2a,2bは、図2に示すように、自車V0の進行方向に対して検出方向が略垂直となるように、自車V0の右側面部と左側面部とにそれぞれ取り付けられている。なお、この超音波ソナー2a,2bは、自車の駐車目標位置の近傍に存在する他の駐車車両などの障害物の位置を計測する障害物検出手段として用いられるが、障害物検出手段としては障害物の位置を計測可能なものであれば何れのものを採用してもよく、超音波ソナー2a,2bに代えて例えばレーザレーダやミリ波レーダなどの他の検出装置を用いるようにしてもよい。   The ultrasonic sonars 2a and 2b transmit ultrasonic waves, receive reflected waves that are reflected back from the object, convert the time from transmission to reception into a distance, and measure the distance to the object It is. As shown in FIG. 2, the ultrasonic sonars 2a and 2b are respectively attached to the right side surface portion and the left side surface portion of the own vehicle V0 so that the detection direction is substantially perpendicular to the traveling direction of the own vehicle V0. Yes. The ultrasonic sonars 2a and 2b are used as obstacle detection means for measuring the position of an obstacle such as another parked vehicle existing in the vicinity of the parking target position of the own vehicle. Any device that can measure the position of the obstacle may be used, and other detection devices such as a laser radar and a millimeter wave radar may be used instead of the ultrasonic sonars 2a and 2b. Good.

ディスプレイ3は、自車の車室内に設置された液晶表示器などの表示装置であり、駐車支援コントローラ10により生成された自車周囲の俯瞰映像や駐車支援のための各種情報を表示する。   The display 3 is a display device such as a liquid crystal display installed in the passenger compartment of the host vehicle, and displays a bird's-eye view image around the host vehicle generated by the parking support controller 10 and various information for parking support.

ステアリングアクチュエータ4は、駐車支援コントローラ10により動作制御され、自車のステアリングを駆動する。このステアリングアクチュエータ4としては、例えば、自車のドライバによるステアリング操作を電気的にアシストする電動パワーステアリングシステムのステアリング駆動用モータなどが用いられる。   The steering actuator 4 is operation-controlled by the parking assist controller 10 and drives the steering of the host vehicle. As the steering actuator 4, for example, a steering drive motor of an electric power steering system that electrically assists a steering operation by a driver of the own vehicle is used.

操作入力デバイス5は、自車のドライバによる各種操作入力を受け付けるものであり、例えば方向キーやタッチパネルなどからなる。この操作入力デバイス5は、ドライバによる操作がなされると、その操作入力に応じた操作信号を駐車支援コントローラ10に入力する。また、舵角センサ6及び車速センサ7は、自車の舵角及び車速の情報を駐車支援コントローラ10に随時入力する。   The operation input device 5 receives various operation inputs by the driver of the own vehicle, and includes, for example, direction keys and a touch panel. This operation input device 5 will input the operation signal according to the operation input into the parking assistance controller 10, if operation by a driver is made. Further, the rudder angle sensor 6 and the vehicle speed sensor 7 input information on the rudder angle and the vehicle speed of the host vehicle to the parking assist controller 10 as needed.

駐車支援コントローラ10は、例えば、所定の処理プログラムに従って動作するマイクロコンピュータを備えて構成され、マイクロコンピュータのCPUで処理プログラムが実行されることによって、駐車支援のための各種機能を実現する。   The parking assistance controller 10 includes, for example, a microcomputer that operates according to a predetermined processing program, and implements various functions for parking assistance by the processing program being executed by the CPU of the microcomputer.

具体的には、駐車支援コントローラ10は、4つの車載カメラ1a〜1dで撮影された映像を入力し、これらの映像を所定の座標変換アルゴリズムに従って自車上方の仮想視点から見た映像にそれぞれ視点変換するとともに繋ぎ合せて、自車周囲を自車上方から見下ろした俯瞰映像を生成し、生成した自車周囲の俯瞰映像をディスプレイ3に表示させる。   Specifically, the parking assist controller 10 inputs images taken by the four in-vehicle cameras 1a to 1d, and views the images as viewed from a virtual viewpoint above the own vehicle according to a predetermined coordinate conversion algorithm. By converting and connecting them, a bird's-eye view image of the surroundings of the vehicle from above is generated, and the generated bird's-eye view image of the surroundings of the vehicle is displayed on the display 3.

ディスプレイ3に表示される自車周囲の俯瞰映像の一例を図3に示す。この図3の映像例において、領域A1はフロントグリルに取り付けられた車載カメラ1aで撮影された映像を視点変換した映像であり、領域A2はリアフィニッシャに取り付けられた車載カメラ1bで撮影された映像を視点変換した映像である。また、領域A3は右サイドカメラに取り付けられた車載カメラ1cで撮影された映像を視点変換した映像であり、領域A4は左サイドカメラに取り付けられた車載カメラ1dで撮影された映像を視点変換した映像である。なお、俯瞰映像の中心は自車位置を表す自車位置マークであり、コンピュータグラフィックス画像が重畳されている。この図3の映像例のように、ディスプレイ3に表示される俯瞰映像は、自車を中心としてその周囲360度の状況を自車上方から見下ろすかたちで確認できる映像となっている。   An example of a bird's-eye view image around the vehicle displayed on the display 3 is shown in FIG. In the example of FIG. 3, the area A1 is an image obtained by changing the viewpoint of an image taken by the in-vehicle camera 1a attached to the front grille, and the area A2 is an image taken by the in-vehicle camera 1b attached to the rear finisher. It is the image which changed the viewpoint. The area A3 is a video obtained by changing the viewpoint of the video shot by the in-vehicle camera 1c attached to the right side camera, and the area A4 is a viewpoint converted from the video shot by the in-vehicle camera 1d attached to the left side camera. It is a picture. The center of the bird's-eye view image is a vehicle position mark representing the vehicle position, and a computer graphics image is superimposed on the vehicle position mark. As shown in the example of FIG. 3, the bird's-eye view image displayed on the display 3 is an image in which the situation around 360 degrees around the own vehicle can be confirmed from above the own vehicle.

また、駐車支援コントローラ10は、例えば、自車のドライバが操作入力デバイス5を用いてディスプレイ3に表示されている俯瞰映像上の任意の位置を駐車目標位置として指定する操作入力を行ったときに、その指定された位置を自車の駐車目標位置として設定する処理を行う。このとき、駐車支援コントローラ10は、ディスプレイ3に表示される俯瞰映像上に自車に対応した大きさの枠図形(駐車枠)を移動可能に描画して、自車のドライバが操作入力デバイス5を用いて俯瞰映像上の所望の位置に駐車枠を動かすことで、ドライバの意図する任意の位置に駐車目標位置を設定できるようにすることが望ましい。このような俯瞰映像上での操作により自車の駐車目標位置を設定できるようにすれば、操作性が向上する。なお、駐車目標位置の設定は、自車ドライバの操作入力によらずに、例えば、ディスプレイ3に表示する俯瞰画像に対して白線認識などの画像処理を行うことで、自車の駐車が可能な駐車可能スペースを検出して当該駐車可能スペースを駐車目標位置として自動設定するといった手法で行うようにしてもよい。   For example, when the driver of the own vehicle performs an operation input for designating an arbitrary position on the overhead view image displayed on the display 3 as the parking target position using the operation input device 5. Then, the designated position is set as the parking target position of the own vehicle. At this time, the parking support controller 10 draws a frame figure (parking frame) having a size corresponding to the own vehicle on the bird's-eye view video displayed on the display 3 so that the driver can move the operation input device 5. It is desirable that the parking target position can be set at an arbitrary position intended by the driver by moving the parking frame to a desired position on the bird's-eye view image using the. If the parking target position of the own vehicle can be set by an operation on such a bird's-eye view video, the operability is improved. The parking target position can be set by performing image processing such as white line recognition on the overhead view image displayed on the display 3 without depending on the operation input of the vehicle driver. You may make it carry out by the method of detecting a parking space and automatically setting the said parking space as a parking target position.

また、駐車支援コントローラ10は、自車を駐車目標位置へと誘導するための経路を算出する機能を有し、このような経路を算出した場合に、当該経路に沿って自車が移動するように、自車の操舵を自動制御する。具体的には、駐車支援コントローラ10は、例えば、舵角センサ6及び車速センサ7の検出値を随時モニタリングして自車の位置及び姿勢をデッドレコニングしながら、算出した経路に沿って自車を移動させるための目標舵角を随時算出する。そして、この目標舵角と舵角センサ6により検出される実舵角との偏差をゼロにするようにステアリングアクチュエータ4の動作を制御することで、自車の操舵を自動制御する。   In addition, the parking assist controller 10 has a function of calculating a route for guiding the host vehicle to the parking target position. When such a route is calculated, the host vehicle moves along the route. In addition, the steering of the own vehicle is automatically controlled. Specifically, for example, the parking support controller 10 monitors the detected values of the steering angle sensor 6 and the vehicle speed sensor 7 as needed, and dead reckons the position and posture of the own vehicle, and moves the own vehicle along the calculated route. The target rudder angle for moving is calculated at any time. Then, the steering of the host vehicle is automatically controlled by controlling the operation of the steering actuator 4 so that the deviation between the target rudder angle and the actual rudder angle detected by the rudder angle sensor 6 becomes zero.

次に、以上のように構成される本実施形態の駐車支援システムの動作について、具体的な駐車シーンを想定しながら説明する。   Next, operation | movement of the parking assistance system of this embodiment comprised as mentioned above is demonstrated, assuming a concrete parking scene.

図4は、駐車場で車庫入れ駐車を行う駐車シーンを示す模式図である。ここでは、駐車車両V1と駐車車両V2の間の空いている駐車区画に駐車目標位置P1を設定し、この駐車目標位置P1に自車V0を後退させながら駐車させる場合を考える。この場合、自車V0のドライバは、駐車目標位置P1として設定しようとする駐車区画の横で自車V0を一旦停車させ、ディスプレイ3に表示される俯瞰映像を見ながら、操作入力デバイス5を用いてこの俯瞰映像上の駐車区画に駐車枠を合わせるといった操作入力を行う。なお、図4中の領域Aがディスプレイ3に表示される俯瞰映像の表示領域である。   FIG. 4 is a schematic diagram showing a parking scene in which garage parking is performed in a parking lot. Here, a case is considered in which a parking target position P1 is set in an empty parking section between the parked vehicle V1 and the parked vehicle V2, and the vehicle V0 is parked while the host vehicle V0 is moved backward at the parking target position P1. In this case, the driver of the own vehicle V0 uses the operation input device 5 while temporarily stopping the own vehicle V0 next to the parking section to be set as the parking target position P1 and watching the overhead view image displayed on the display 3. An operation input such as aligning the parking frame with the parking area on the overhead view video is performed. An area A in FIG. 4 is a bird's-eye view display area displayed on the display 3.

ドライバ操作に応じて駐車目標位置P1が設定されると、駐車支援コントローラ10は、自車V0を駐車目標位置P1へと誘導するための経路を算出する。ここで、図4の駐車シーンのように自車V0を後退させながら車庫入れ駐車を行う場合には、自車V0は現在位置から後退開始位置P2まで一旦前進し、後退開始位置P2にてシフトギヤをリバースに切り替えた後に、後退開始位置P2から後退しながら駐車目標位置P1へと移動することになる。この場合、自車V0が後退開始位置P2から駐車目標位置P1へと移動するときの経路を、駐車目標位置P1に隣接して駐車している駐車車両V1に自車V0が干渉しない最適な経路とするためには、後退開始位置P2に移動する過程で超音波ソナー2bによって駐車車両V1の位置を計測し、駐車車両V1の位置を正確に把握しておくことが必要となる。   When the parking target position P1 is set according to the driver operation, the parking support controller 10 calculates a route for guiding the host vehicle V0 to the parking target position P1. Here, when parking in the garage while reversing the host vehicle V0 as in the parking scene of FIG. 4, the host vehicle V0 once moves forward from the current position to the reverse start position P2, and shift gear at the reverse start position P2. After switching to reverse, the vehicle moves to the parking target position P1 while retreating from the reverse start position P2. In this case, a route when the host vehicle V0 moves from the reverse start position P2 to the parking target position P1 is an optimal route in which the host vehicle V0 does not interfere with the parked vehicle V1 parked adjacent to the parking target position P1. In order to achieve this, it is necessary to accurately measure the position of the parked vehicle V1 by measuring the position of the parked vehicle V1 with the ultrasonic sonar 2b in the process of moving to the reverse start position P2.

従来の一般的な駐車支援システムでは、図4に示すような駐車シーンの場合に、後退開始位置P2までの自車の移動はドライバによる運転操作に委ねており、自車が後退開始位置P2に到達した段階で後退開始位置P2から駐車目標位置P1までの経路を算出し、その後は自動操舵制御により自車を駐車目標位置P1へと誘導するようにしていた。このため、後退開始位置P2までの経路をシステム側で制御することができず、後退開始位置P2に移動する過程で駐車車両V1の位置を正確に計測できない場合があった。   In the conventional general parking assistance system, in the case of a parking scene as shown in FIG. 4, the movement of the vehicle to the reverse start position P2 is left to the driving operation by the driver, and the own vehicle is moved to the reverse start position P2. When the vehicle arrives, a route from the reverse start position P2 to the parking target position P1 is calculated, and thereafter, the host vehicle is guided to the parking target position P1 by automatic steering control. For this reason, the path to the reverse start position P2 cannot be controlled on the system side, and the position of the parked vehicle V1 may not be accurately measured in the process of moving to the reverse start position P2.

そこで、本実施形態の駐車支援システムでは、駐車支援コントローラ10が、駐車目標位置P1の設定時までの間に得られる情報に基づいて、駐車目標位置P1よりも自車V0の前方側に存在する駐車車両V1などの障害物の位置を超音波ソナー2a,2bにより確実に計測するための経路を駐車目標位置P1の設定時に算出するようにしている。そして、その経路に沿って自車V0が移動するように、駐車目標位置P1を設定した直後から自車V0の自動操舵制御を開始するようにしている。なお、以下では、本発明の特徴事項を分かり易く説明するために、自車V0を駐車目標位置P1へと誘導する一連の経路の中で、上述した駐車車両V1などの障害物の位置を超音波ソナー2a,2bで計測するための経路を「予備経路」と呼称し、この「予備経路」を通過した後の後退開始位置P2を経由して駐車目標位置P1に至る経路を「駐車経路」と呼称して、両者を区別するものとする。ここで、予備経路を通過した後の経路である駐車経路は、自車V0が予備経路を通過した後に、超音波ソナー2a,2bによる障害物位置の計測結果を反映させて算出するようにしてもよいし、駐車目標位置P1の設定時に予備経路とともに仮の駐車経路を算出しておき、自車V0が予備経路を通過した後に、超音波ソナー2a,2bによる障害物位置の計測結果を反映させて仮の駐車経路を補正するようにしてもよい。   Therefore, in the parking assistance system of the present embodiment, the parking assistance controller 10 is present on the front side of the host vehicle V0 with respect to the parking target position P1 based on information obtained until the parking target position P1 is set. A path for reliably measuring the position of an obstacle such as the parked vehicle V1 by the ultrasonic sonars 2a and 2b is calculated when the parking target position P1 is set. Then, the automatic steering control of the host vehicle V0 is started immediately after setting the parking target position P1 so that the host vehicle V0 moves along the route. In the following, in order to explain the features of the present invention in an easy-to-understand manner, the position of an obstacle such as the parked vehicle V1 described above is exceeded in a series of routes for guiding the host vehicle V0 to the parking target position P1. A route for measuring with the sonic sonars 2a and 2b is referred to as a “preliminary route”, and a route reaching the parking target position P1 via the reverse start position P2 after passing through the “preliminary route” is referred to as a “parking route”. The two are distinguished from each other. Here, the parking route which is the route after passing through the spare route is calculated by reflecting the measurement result of the obstacle position by the ultrasonic sonars 2a and 2b after the own vehicle V0 passes through the spare route. Alternatively, a provisional parking route is calculated together with the spare route when the parking target position P1 is set, and after the own vehicle V0 passes the spare route, the measurement result of the obstacle position by the ultrasonic sonars 2a and 2b is reflected. You may make it correct | amend a temporary parking route.

以下、本実施形態の駐車支援システムにおいて特徴的な駐車支援コントローラ10による予備経路の算出及び操舵制御の具体的手法について、図4に示した車庫入れ駐車の駐車シーンを想定して、さらに詳しく説明する。   Hereinafter, the specific method of the calculation of the preliminary route and the steering control by the parking support controller 10 that is characteristic in the parking support system of the present embodiment will be described in more detail, assuming the parking scene of the garage parking shown in FIG. To do.

まず、操舵制御の基本となるステアリング操作と自車の挙動との関係について簡単に説明する。図5は、以下の説明で用いる座標系を示したものである。この座標系は、自車V0の後輪車軸中心を原点として、自車V0の右方向をX軸の正方向、自車V0の前向き方向をY軸の正方向としている。   First, the relationship between the steering operation and the behavior of the host vehicle, which are the basis of steering control, will be briefly described. FIG. 5 shows a coordinate system used in the following description. In this coordinate system, the center of the rear wheel axle of the host vehicle V0 is the origin, the right direction of the host vehicle V0 is the positive direction of the X axis, and the forward direction of the host vehicle V0 is the positive direction of the Y axis.

自車の操舵を自動制御する際の規則の一例として、図6に示すように、自車の移動距離Lに対して、自車のタイヤの傾きρを変化させるものとする。ここで、自車のタイヤの傾きρは図7に示す角度とする。つまり、ρ>0であれば自車が右方向に転回し、ρ<0であれば自車が左方向に転回するものとする。この規則に従って自車のステアリングを操作すると、自車の回転角Δθは、
Δθ=∫ρ(L)dL
で求めることができる。このとき、ステアリングの回転方向は、
dρ/dL>0 → ステアリングが右回転
dρ/dL<0 → ステアリングが左回転
dρ/dL=0 → ステアリングを一定舵角で固定
となる。
As an example of a rule for automatically controlling the steering of the host vehicle, as shown in FIG. 6, the inclination ρ of the tire of the host vehicle is changed with respect to the moving distance L of the host vehicle. Here, the inclination ρ of the tire of the own vehicle is an angle shown in FIG. That is, if ρ> 0, the vehicle turns to the right, and if ρ <0, the vehicle turns to the left. When the steering of the vehicle is operated according to this rule, the rotation angle Δθ of the vehicle is
Δθ = ∫ρ (L) dL
Can be obtained. At this time, the steering direction of rotation is
dρ / dL> 0 → Steering rotates right dρ / dL <0 → Steering rotates left dρ / dL = 0 → Steering is fixed at a fixed steering angle.

ここで、図6のグラフで示すようにステアリングを操作すると、区間Aではステアリングが右に回転し、区間Bではステアリングがある一定角度で固定され、区間Cではステアリングが右に回転することになる。このときの自車V0の挙動は図8に示すようになる。すなわち、自車V0がX軸に対してθ0の角度で停車している位置から、図6に示す規則に従ってステアリングを操作しながら自車V0を移動させると、自車V0はX軸に対して、
θ1=θ0+Δθ
で求められる角度θ1旋回した位置に移動することになる。
Here, when the steering is operated as shown in the graph of FIG. 6, the steering rotates to the right in the section A, the steering is fixed at a certain angle in the section B, and the steering rotates to the right in the section C. . The behavior of the vehicle V0 at this time is as shown in FIG. That is, if the host vehicle V0 is moved from the position where the host vehicle V0 stops at an angle θ0 with respect to the X axis while operating the steering according to the rules shown in FIG. ,
θ1 = θ0 + Δθ
It moves to the position which turned by angle (theta) 1 calculated | required by.

次に、予備経路算出及び操舵制御のロジックの具体例について、図9及び図10を参照して説明する。図9は、駐車目標位置P1が設定された際に駐車支援コントローラ10により実行される処理の具体例を示すフローチャートであり、図10は、駐車目標位置P1設定時における自車V0の姿勢をパターン化して示す模式図である。なお、駐車目標位置P1の設定は、上述したように、自車V0のドライバが駐車目標位置P1として設定しようとする駐車区画の横で自車V0を一旦停車させ(図4参照)、ディスプレイ3に表示される俯瞰映像(図4中の領域A)を見ながら、操作入力デバイス5を用いて行うものとする。   Next, specific examples of preliminary route calculation and steering control logic will be described with reference to FIGS. FIG. 9 is a flowchart showing a specific example of processing executed by the parking assist controller 10 when the parking target position P1 is set. FIG. 10 shows a pattern of the posture of the host vehicle V0 when the parking target position P1 is set. FIG. As described above, the parking target position P1 is set by temporarily stopping the vehicle V0 next to the parking section to be set as the parking target position P1 by the driver of the vehicle V0 (see FIG. 4). It is assumed that the operation input device 5 is used while viewing the bird's-eye view video (area A in FIG. 4) displayed on the screen.

図4に示す駐車シーンの場合、駐車目標位置P1の設定時に算出する予備経路は、駐車目標位置P1よりも自車V0の前方側に存在する駐車車両V1の位置を超音波ソナー2bにより確実に計測するための経路である。駐車支援コントローラ10は、このような予備経路を、駐車目標位置P1の設定時までの間に得られる情報を用いて、駐車目標位置P1の設定時に算出する。具体的には、駐車支援コントローラ10は、駐車目標位置P1よりも自車V0の手前側に存在する駐車車両V2の位置情報と、駐車目標位置P1の位置情報とに基づいて、駐車目標位置P1を設定した駐車区画とこの駐車区画に隣接する駐車区画との並び方向を推定し、この駐車区画の並び方向と略平行な向きで駐車目標位置P1の前方側(駐車車両V1の近傍)を通過する経路を予備経路として算出する。なお、駐車目標位置P1よりも自車V0の手前側に存在する駐車車両V2の位置情報は、自車V0が駐車目標位置P1設定時の位置にまで移動する過程で超音波ソナー2bの計測によって得られる情報である。また、駐車目標位置P1の位置情報は、駐車目標位置P1の設定により得られる情報である。   In the case of the parking scene shown in FIG. 4, the spare route calculated when setting the parking target position P1 ensures that the position of the parked vehicle V1 existing in front of the host vehicle V0 with respect to the parking target position P1 is determined by the ultrasonic sonar 2b. This is a route for measurement. The parking assistance controller 10 calculates such a preliminary route when setting the parking target position P1, using information obtained until the parking target position P1 is set. Specifically, the parking assist controller 10 determines the parking target position P1 based on the position information of the parked vehicle V2 that is present in front of the host vehicle V0 with respect to the parking target position P1 and the position information of the parking target position P1. The direction of alignment of the parking section set with the parking section and the parking section adjacent to this parking section is estimated, and passes through the front side of the parking target position P1 (near the parked vehicle V1) in a direction substantially parallel to the arrangement direction of the parking section. The route to be calculated is calculated as a backup route. The position information of the parked vehicle V2 existing on the near side of the host vehicle V0 with respect to the parking target position P1 is obtained by measuring the ultrasonic sonar 2b in the process of moving the host vehicle V0 to the position when the parking target position P1 is set. Information obtained. Further, the position information of the parking target position P1 is information obtained by setting the parking target position P1.

駐車区画の並び方向の推定は、例えば以下のような手法により行われる。   The estimation of the arrangement direction of the parking sections is performed by the following method, for example.

まず、駐車目標位置P1よりも自車V0の手前側に存在する駐車車両V2の位置情報と、駐車目標位置P1の位置情報とに基づいて、図10に示すように、駐車目標位置P1の前端の位置N1と駐車車両V2の前端の位置N2との間の駐車目標位置P1前後方向における距離Dを求める(図9のフローチャートにおけるステップS1)。この距離Dは、駐車目標位置P1を設定した駐車区画とこの駐車区画に隣接する駐車区画との前後方向における位置ずれ量に相当する。   First, as shown in FIG. 10, based on the position information of the parked vehicle V2 existing on the near side of the host vehicle V0 from the parking target position P1 and the position information of the parking target position P1, the front end of the parking target position P1. A distance D in the front-rear direction of the parking target position P1 between the current position N1 and the position N2 at the front end of the parked vehicle V2 is obtained (step S1 in the flowchart of FIG. 9). This distance D corresponds to the amount of positional deviation in the front-rear direction between the parking area where the parking target position P1 is set and the parking area adjacent to this parking area.

次に、以上のように求めた距離Dが予め設定された所定距離d1よりも小さいかどうかを判定する(図9のフローチャートにおけるステップS2)。ここで、所定距離d1は、距離Dがゼロに近いか否かを判断するための閾値であり、算出した距離Dと実際の駐車区画の前後方向の位置ずれ量との誤差を吸収する程度の値に設定される。したがって、距離Dが所定距離d1よりも小さければ、駐車区画は並列駐車を行うための横並び配置となっており、駐車区画の並び方向は、駐車目標位置P1の前後方向に対して略垂直な方向であると推定することができる。一方、距離Dが所定距離d1よりも大きければ、駐車区画は斜め駐車を行うための斜め配置となっており、駐車区画の並び方向は、駐車目標位置P1の前後方向に対して略垂直な方向からある角度(一般的な斜め駐車の角度)で傾いた方向であると推定することができる。   Next, it is determined whether or not the distance D obtained as described above is smaller than a predetermined distance d1 set in advance (step S2 in the flowchart of FIG. 9). Here, the predetermined distance d1 is a threshold for determining whether or not the distance D is close to zero, and absorbs an error between the calculated distance D and the amount of positional deviation in the front-rear direction of the actual parking section. Set to a value. Therefore, if the distance D is smaller than the predetermined distance d1, the parking sections are arranged side by side for parallel parking, and the arrangement direction of the parking sections is a direction substantially perpendicular to the front-rear direction of the parking target position P1. It can be estimated that. On the other hand, if the distance D is greater than the predetermined distance d1, the parking section is obliquely arranged for oblique parking, and the arrangement direction of the parking sections is a direction substantially perpendicular to the front-rear direction of the parking target position P1. Therefore, it can be estimated that the direction is inclined at a certain angle (a general oblique parking angle).

なお、本実施形態の駐車支援システムでは、駐車支援コントローラ10が車載カメラ1a〜1dにより撮影された映像を用いて自車周囲の俯瞰映像を生成するようにしているので、この自車周囲の俯瞰映像に対する画像処理により駐車区画を仕切る複数の白線を認識できる場合には、その情報を用いて駐車区画の並び方向を推定するようにしてもよい。すなわち、俯瞰映像上で駐車区画を仕切る複数の白線が認識された場合は、各白線の端点同士を結ぶ線分の方向を駐車区画の並び方向と推定すればよい。   In the parking support system according to the present embodiment, the parking support controller 10 generates an overhead view image around the own vehicle using the images taken by the in-vehicle cameras 1a to 1d. When a plurality of white lines partitioning the parking area can be recognized by image processing on the video, the arrangement direction of the parking area may be estimated using the information. That is, when a plurality of white lines partitioning the parking area are recognized on the bird's-eye view video, the direction of the line segment connecting the end points of each white line may be estimated as the arrangement direction of the parking areas.

駐車支援コントローラ10は、以上のように駐車区画の並び方向を推定した後に、駐車区画の並び方向に対する自車V0の姿勢を考慮して、自車V0が駐車区画の並び方向と略平行な向きで駐車車両V1の近傍を通過するように、予備経路を算出する。   After estimating the alignment direction of the parking areas as described above, the parking support controller 10 considers the posture of the own vehicle V0 with respect to the alignment direction of the parking areas, and the direction in which the own vehicle V0 is substantially parallel to the alignment direction of the parking areas The preliminary route is calculated so as to pass near the parked vehicle V1.

具体的には、まず、駐車目標位置P1の前端の位置N1を表す線分(或いは駐車車両V2の前端の位置N2を表す線分)に対して、駐車目標位置P1の設定時における自車V0の向きがなす角度θを求める(図9のフローチャートにおけるステップS3,S4)。そして、駐車区画が横並び配置であり、駐車区画の並び方向が駐車目標位置P1の前後方向に対して略垂直な方向であると判定している場合(ステップS2でYESの判定の場合)には、角度θが予め設定された所定角度θ1よりも小さいかどうかを判定する(図9のフローチャートにおけるステップS5)。ここで、所定角度θ1は、自車V0の向きが駐車区画の並び方向に対して略平行となっているか否かを判断するための閾値であり、角度θの算出誤差を吸収する程度の値に設定される。   Specifically, first, the host vehicle V0 at the time of setting the parking target position P1 with respect to the line segment representing the front end position N1 of the parking target position P1 (or the line segment representing the front end position N2 of the parked vehicle V2). Is determined (steps S3 and S4 in the flowchart of FIG. 9). When the parking sections are arranged side by side and the arrangement direction of the parking sections is determined to be a direction substantially perpendicular to the front-rear direction of the parking target position P1 (in the case of YES determination in step S2). Then, it is determined whether or not the angle θ is smaller than a preset predetermined angle θ1 (step S5 in the flowchart of FIG. 9). Here, the predetermined angle θ1 is a threshold value for determining whether or not the direction of the host vehicle V0 is substantially parallel to the arrangement direction of the parking sections, and is a value enough to absorb the calculation error of the angle θ. Set to

また、駐車区画が斜め配置であり、駐車区画の並び方向が駐車目標位置P1の前後方向に対して略垂直な方向からある角度(一般的な斜め駐車の角度であり、以下角度θ2という。)で傾いた方向であると判定している場合(図9のフローチャートにおけるステップS3でNOの判定の場合)には、角度θと角度θ2の差分の絶対値(|θ−θ2|)が所定角度θ1よりも小さいかどうかを判定する(図9のフローチャートにおけるステップS6)。   Further, the parking sections are diagonally arranged, and the direction in which the parking sections are arranged is an angle from a direction substantially perpendicular to the front-rear direction of the parking target position P1 (a general oblique parking angle, hereinafter referred to as an angle θ2). 9 (in the case of NO determination in step S3 in the flowchart of FIG. 9), the absolute value (| θ−θ2 |) of the difference between the angle θ and the angle θ2 is a predetermined angle. It is determined whether it is smaller than θ1 (step S6 in the flowchart of FIG. 9).

以上の判定により、駐車目標位置P1の設定時における駐車区画の並び方向に対する自車V0の姿勢は、図10(a)〜図10(d)に示す4つのパターンに分類できる。すなわち、ステップS5でYESの判定の場合には、図10(a)に示すように、横並び配置の駐車区画に駐車目標位置P1が設定されており、自車V0の向きがその駐車区画の並び方向と略一致していると推定できる。また、ステップS5でNOの判定の場合には、図10(b)に示すように、横並び配置の駐車区画に駐車目標位置P1が設定されており、自車V0の向きがその駐車区画の並び方向に一致していないと推定できる。また、ステップS6でYESの判定の場合には、図10(c)に示すように、斜め配置の駐車区画に駐車目標位置P1が設定されており、自車V0の向きがその駐車区画の並び方向と略一致していると推定できる。また、ステップS6でNOの判定の場合には、図10(d)に示すように、斜め配置の駐車区画に駐車目標位置P1が設定されており、自車V0の向きがその駐車区画の並び方向に一致していないと推定できる。   Based on the above determination, the posture of the host vehicle V0 with respect to the arrangement direction of the parking sections at the time of setting the parking target position P1 can be classified into four patterns shown in FIGS. 10 (a) to 10 (d). That is, in the case of YES determination in step S5, as shown in FIG. 10 (a), the parking target position P1 is set in the horizontally arranged parking section, and the direction of the own vehicle V0 is the arrangement of the parking section. It can be estimated that the direction substantially coincides with the direction. In the case of NO determination in step S5, as shown in FIG. 10 (b), the parking target position P1 is set in the parking area arranged side by side, and the direction of the host vehicle V0 is the alignment of the parking area. It can be estimated that the directions do not match. In the case of YES determination in step S6, as shown in FIG. 10 (c), the parking target position P1 is set in the obliquely arranged parking section, and the direction of the own vehicle V0 is the alignment of the parking section. It can be estimated that the direction substantially coincides with the direction. Further, in the case of NO determination in step S6, as shown in FIG. 10D, the parking target position P1 is set in the obliquely arranged parking section, and the direction of the own vehicle V0 is the arrangement of the parking section. It can be estimated that the directions do not match.

駐車支援コントローラ10は、以上の判定により推定した駐車区画に対する自車V0の姿勢のパターンに応じて、駐車目標位置P1よりも自車V0の前方側に存在する障害物である駐車車両V1の位置を超音波ソナー2bにより確実に計測するための予備経路として算出する。   The parking assist controller 10 determines the position of the parked vehicle V1 that is an obstacle ahead of the host vehicle V0 from the parking target position P1 according to the posture pattern of the host vehicle V0 with respect to the parking section estimated by the above determination. Is calculated as a spare path for reliably measuring by the ultrasonic sonar 2b.

すなわち、駐車支援コントローラ10は、駐車区画に対する自車V0の姿勢が図10(a)に示すパターンであると推定した場合は、現在の自車V0の向き、つまり駐車目標位置P1の設定時における自車V0の向きを維持したまま横並び配置の駐車区画の並び方向に沿って前進し、駐車車両V1の近傍を通過する経路を予備経路として算出する(図9のフローチャートにおけるステップS7)。   That is, when the parking support controller 10 estimates that the posture of the host vehicle V0 with respect to the parking section is the pattern shown in FIG. 10A, the current direction of the host vehicle V0, that is, when the parking target position P1 is set. While maintaining the direction of the host vehicle V0, the vehicle advances along the arrangement direction of the parking sections arranged side by side, and a route passing through the vicinity of the parked vehicle V1 is calculated as a backup route (step S7 in the flowchart of FIG. 9).

また、駐車支援コントローラ10は、駐車区画に対する自車V0の姿勢が図10(b)に示すパターンであると推定した場合には、現在の自車V0の向きを横並び配置の駐車区画の並び方向と一致させるように操舵制御する区間と、ステアリングを略中立状態に維持しながら横並び配置の駐車区画の並び方向に沿って前進し、駐車車両V1の近傍を通過する区間とを含む経路を予備経路として算出する(図9のフローチャートにおけるステップS8)。   In addition, when the parking support controller 10 estimates that the posture of the host vehicle V0 with respect to the parking section is the pattern shown in FIG. 10B, the current direction of the host vehicle V0 is aligned in the side-by-side arrangement direction of the parking sections. A route that includes a section that is steered so as to coincide with the vehicle and a section that moves forward in the direction of the side-by-side parking sections while maintaining the steering in a substantially neutral state and passes through the vicinity of the parked vehicle V1. (Step S8 in the flowchart of FIG. 9).

また、駐車支援コントローラ10は、駐車区画に対する自車V0の姿勢が図10(c)に示すパターンであると推定した場合には、現在の自車V0の向き、つまり駐車目標位置P1の設定時における自車V0の向きを維持したまま斜め配置の駐車区画の並び方向に沿って前進し、駐車車両V1の近傍を通過する経路を予備経路として算出する(図9のフローチャートにおけるステップS9)。   Further, when the parking support controller 10 estimates that the posture of the host vehicle V0 with respect to the parking section is the pattern shown in FIG. 10C, the current direction of the host vehicle V0, that is, when the parking target position P1 is set. While maintaining the direction of the host vehicle V0 in FIG. 9, the vehicle travels along the direction in which the obliquely arranged parking sections are arranged and passes through the vicinity of the parked vehicle V1 as a spare route (step S9 in the flowchart of FIG. 9).

また、駐車支援コントローラ10は、駐車区画に対する自車V0の姿勢が図10(d)に示すパターンであると推定した場合には、現在の自車V0の向きを斜め配置の駐車区画の並び方向と一致させるように操舵制御する区間と、ステアリングを略中立状態に維持しながら斜め配置の駐車区画の並び方向に沿って前進し、駐車車両V1の近傍を通過する区間とを含む経路を予備経路として算出する(図9のフローチャートにおけるステップS10)。なお、斜め配置の駐車区画の並び方向は、一般的な斜め駐車の角度θ2を基準に求めているため、特に図10(d)に示すパターンの場合は、実際の駐車区画の並び方向に対する自車V0の向きが推定したものとは異なっている場合も想定される。そこで、駐車区画に対する自車V0の姿勢が図10(d)に示すパターンであると推定した場合には、例えば、ディスプレイ3に表示する俯瞰映像上に自車V0の進行方向をドライバに選択させるためのアイコンを重畳するなど、何らかの手法で自車V0の進行方向をドライバが指定できるようにし、ドライバにより指定された方向で自車V0が前進して駐車車両V1の近傍を通過する経路を予備経路として算出するようにしてもよい。   In addition, when the parking support controller 10 estimates that the posture of the host vehicle V0 with respect to the parking section is the pattern shown in FIG. 10D, the current direction of the host vehicle V0 is the direction in which the parking sections are arranged obliquely. A route including a section for steering control so as to match with a section, and a section that advances in the direction in which the parking sections are arranged obliquely and passes near the parked vehicle V1 while maintaining the steering in a substantially neutral state. (Step S10 in the flowchart of FIG. 9). In addition, since the arrangement direction of the diagonally arranged parking sections is obtained with reference to a general oblique parking angle θ2, in particular, in the case of the pattern shown in FIG. A case where the direction of the vehicle V0 is different from the estimated direction is also assumed. Therefore, if it is estimated that the posture of the host vehicle V0 with respect to the parking section is the pattern shown in FIG. 10D, for example, the driver selects the traveling direction of the host vehicle V0 on the overhead view image displayed on the display 3. For example, the driver can specify the traveling direction of the vehicle V0 by some method such as superimposing an icon for the vehicle, and reserves a route through which the vehicle V0 moves forward in the direction specified by the driver and passes near the parked vehicle V1. It may be calculated as a route.

駐車支援コントローラ10は、以上のロジックに従って予備経路を算出すると、この算出した予備経路に沿って自車V0が移動するように自車V0の操舵を自動制御する(図9のフローチャートにおけるステップS11)。   When the parking assist controller 10 calculates the reserve route according to the above logic, the parking assist controller 10 automatically controls the steering of the vehicle V0 so that the vehicle V0 moves along the calculated reserve route (step S11 in the flowchart of FIG. 9). .

ここで、駐車区画に対する自車V0の姿勢が図10(b)に示すパターンであると推定して予備経路を算出した場合を例に挙げて、この予備経路に沿って自車V0を移動させるための操舵制御の具体的手法について、図11及び図12を参照して説明する。図11は、算出された予備経路に沿って駐車車両V1の近傍を通過してから後退開始位置P2に到達するまでの自車V0の挙動を示す図であり、図12は自車V0を図11に示す挙動で移動させる場合のステアリングの制御規則を示す図である。   Here, taking as an example a case where the preliminary route is calculated by assuming that the posture of the own vehicle V0 with respect to the parking section is the pattern shown in FIG. 10B, the own vehicle V0 is moved along the preliminary route. A specific method of steering control for this will be described with reference to FIGS. 11 and 12. FIG. 11 is a diagram illustrating the behavior of the host vehicle V0 from passing through the vicinity of the parked vehicle V1 along the calculated preliminary route until reaching the reverse start position P2, and FIG. 12 illustrates the host vehicle V0. FIG. 11 is a diagram illustrating a steering control rule when the vehicle is moved according to the behavior shown in FIG.

この図11及び図12に示す例では、区間Pと区間Qとが駐車車両V1の位置を計測するための予備経路に沿って自車V0が移動する区間を表しており、区間Qが駐車車両V1の位置を計測した後に後退開始位置P2まで自車V0が移動する区間を表している。すなわち、区間Pでは、自車V0の向きを横並び配置の駐車区画の並び方向と一致させるように操舵制御し、区間Qでは、自車V0のステアリングを略中立状態に維持しながら横並び配置の駐車区画の並び方向に沿って自車V0を前進させる。その後、区間Rでは、自車V0の向きを後退開始位置P2の向きに一致させるように操舵制御を行う。   In the example shown in FIG. 11 and FIG. 12, the section P and the section Q represent a section in which the host vehicle V0 moves along the backup route for measuring the position of the parked vehicle V1, and the section Q is a parked vehicle. This represents a section in which the host vehicle V0 moves to the reverse start position P2 after measuring the position of V1. That is, in the section P, steering control is performed so that the direction of the own vehicle V0 coincides with the arrangement direction of the parking sections arranged side by side, and in the section Q, the parking of the side-by-side arrangement is performed while maintaining the steering of the own vehicle V0 in a substantially neutral state. The own vehicle V0 is moved forward along the sectioning direction. Thereafter, in the section R, the steering control is performed so that the direction of the host vehicle V0 matches the direction of the reverse start position P2.

ここで、駐車目標位置P1を設定したときの駐車区画の並び方向に対する自車V0の向きをθとし、図12中の区間Pにおけるタイヤ傾きρの変化を表す三角形0−L1−L2の面積をSPとすると、区間Pにおいては、SP=θの関係が成り立つように自車V0のステアリングを制御すればよい。また、駐車区画の並び方向に対する後退開始位置P2の向きをθ2とし、図12中の区間Rにおけるタイヤ傾きρの変化を表す台形L3−L4−L5−L6の面積をSRとすると、区間Rにおいては、SR=θ2の関係が成り立つように自車V0のステアリングを制御すればよい。なお、区間Qはステアリングが略中立状態に維持される区間であるため、タイヤの傾きρはゼロのままとなる。   Here, the direction of the host vehicle V0 with respect to the arrangement direction of the parking sections when the parking target position P1 is set is θ, and the area of the triangle 0-L1-L2 representing the change in the tire inclination ρ in the section P in FIG. Assuming SP, in the section P, the steering of the host vehicle V0 may be controlled so that the relationship SP = θ is established. Further, when the direction of the reverse start position P2 with respect to the arrangement direction of the parking sections is θ2, and the area of the trapezoid L3-L4-L5-L6 representing the change in the tire inclination ρ in the section R in FIG. May control the steering of the host vehicle V0 so that the relationship SR = θ2 is established. Since the section Q is a section in which the steering is maintained in a substantially neutral state, the tire inclination ρ remains zero.

なお、以上は、駐車区画に対する自車V0の姿勢が図10(b)に示すパターンであると推定して予備経路を算出した場合の操舵制御の例であるが、その他のパターンにおいても上述した制御規則と同様の考え方に従って操舵制御を行うことで、自車V0を予備経路に沿って駐車車両V1の近傍を通過させた後に後退開始位置P2へと到達させることが可能となる。   The above is an example of the steering control in the case where the preliminary route is calculated by estimating that the posture of the host vehicle V0 with respect to the parking section is the pattern shown in FIG. 10B. By performing the steering control according to the same concept as the control rule, the host vehicle V0 can reach the reverse start position P2 after passing the vicinity of the parked vehicle V1 along the backup route.

ところで、自車V0の駐車目標位置P1を設定した時点で算出する予備経路は、上述したように、駐車目標位置P1よりも自車V0の進行方向の前方側に存在する駐車車両V1などの障害物の位置を超音波ソナー2a,2bで計測するための経路であるが、駐車目標位置P1の前方側に駐車車両V1などの障害物が存在しない場合も当然考えられる。したがって、この予備経路を駐車車両V1などの障害物が検出されるまでの経路とすると、このような障害物が存在しない場合には自車V0が駐車区画の並びに沿って前進を続けることになり、自車V0のドライバに違和感を与えるばかりか、適切な駐車支援の妨げになることも想定される。そこで、予備経路は予め距離が一定の経路として算出しておき、その終点位置までの間に駐車車両V1などの障害物が検出されなければ、その終点位置から後退開始位置P2に向けて移動する操舵制御を行うようにすることが望ましい。また、このとき、例えば図13に示すように、予備経路の終点位置を明示する目安線Mなどのマークを俯瞰映像上に重畳してディスプレイ3に表示させるようにすれば、自車V0が予備経路に沿って前進する区間をドライバに認識させることができ、利便性が増す。   By the way, as described above, the preliminary route calculated when the parking target position P1 of the host vehicle V0 is set is a fault such as the parked vehicle V1 existing ahead of the parking target position P1 in the traveling direction of the host vehicle V0. Although it is a route for measuring the position of the object with the ultrasonic sonars 2a and 2b, it is naturally conceivable that there is no obstacle such as the parked vehicle V1 in front of the parking target position P1. Therefore, if this spare route is a route until an obstacle such as the parked vehicle V1 is detected, the vehicle V0 continues to move forward along the parking area when there is no such obstacle. It is assumed that the driver of the own vehicle V0 not only feels uncomfortable but also hinders appropriate parking assistance. Therefore, the preliminary route is calculated in advance as a route having a constant distance, and if an obstacle such as the parked vehicle V1 is not detected until the end point position, the reserve route moves from the end point position toward the reverse start position P2. It is desirable to perform steering control. At this time, for example, as shown in FIG. 13, if a mark such as a reference line M clearly indicating the end point position of the backup route is superimposed on the bird's-eye view video and displayed on the display 3, The section that advances along the route can be recognized by the driver, which increases convenience.

また、自車V0が予備経路を通過した後の経路である駐車経路、つまり後退開始位置P2を経由して駐車目標位置P1に至る経路は、駐車車両V1などの障害物位置の計測結果を反映させることで最適化される。このような駐車経路を算出するタイミングとしては、上述したように、自車V0が予備経路を通過することで障害物位置の計測結果が得られた段階で算出するようにしてもよいが、予備経路から駐車経路への移行をスムーズに行うためには、駐車目標位置P1の設定時に予備経路の算出とともに仮の駐車経路を算出しておき、自車V0が予備経路を通過した後に障害物位置の計測結果を反映させて仮の駐車経路を補正することが有効である。また、このとき、ディスプレイ3に表示している俯瞰映像上で後退開始位置P2を明示するようにし、障害物位置の計測結果を反映させて駐車経路が補正された場合に、それに合わせて俯瞰映像上における後退開始位置P2の表示位置を変更するようにすれば、駐車経路に沿って移動する自車V0の挙動をドライバに認識させることができ、利便性が増す。   In addition, a parking route that is a route after the host vehicle V0 passes the spare route, that is, a route that reaches the parking target position P1 via the reverse start position P2, reflects the measurement result of the obstacle position such as the parked vehicle V1. To optimize. As described above, the timing for calculating such a parking route may be calculated when the measurement result of the obstacle position is obtained by passing the vehicle V0 through the backup route. In order to make the transition from the route to the parking route smoothly, the temporary parking route is calculated together with the calculation of the spare route when the parking target position P1 is set, and the obstacle position after the host vehicle V0 passes the spare route. It is effective to correct the temporary parking route by reflecting the measurement result. Further, at this time, when the backward start position P2 is clearly shown on the overhead view video displayed on the display 3 and the parking route is corrected by reflecting the measurement result of the obstacle position, the overhead view video is accordingly adjusted. If the display position of the reverse start position P2 is changed, the driver can recognize the behavior of the vehicle V0 moving along the parking route, and convenience is increased.

以上、具体的な例を挙げながら詳細に説明したように、本実施形態の駐車支援システムでは、駐車支援コントローラ10が、自車の駐車目標位置の設定時までの間に得られる情報に基づいて、駐車目標位置よりも自車進行方向の前方側に存在する障害物の位置を超音波ソナー2a,2bで計測するための予備経路を駐車目標位置の設定時に算出するようにしている。そして、駐車目標位置を設定した直後に自車の自動操舵制御を開始して、自車が予備経路に沿って障害物の近傍を通過するように、自車の操舵を制御している。したがって、本実施形態の駐車支援システムによれば、自車が予備経路に沿って移動する過程で障害物の位置を確実に計測し、この障害物を避けて駐車目標位置に到達するように自車を誘導することができ、信頼性の高い駐車支援を行うことができる。   As described above in detail with specific examples, in the parking support system of the present embodiment, the parking support controller 10 is based on information obtained until the parking target position of the host vehicle is set. The spare path for measuring the position of an obstacle existing ahead of the parking target position in the traveling direction of the own vehicle with the ultrasonic sonars 2a and 2b is calculated at the time of setting the parking target position. Then, immediately after the parking target position is set, the automatic steering control of the own vehicle is started, and the steering of the own vehicle is controlled so that the own vehicle passes near the obstacle along the backup route. Therefore, according to the parking assistance system of the present embodiment, the position of the obstacle is reliably measured in the process of moving along the spare route, and the vehicle is positioned so as to avoid the obstacle and reach the parking target position. The vehicle can be guided and highly reliable parking assistance can be performed.

また、駐車支援コントローラ10は、駐車目標位置を設定した駐車区画の並び方向を推定し、自車がこの駐車区画の並び方向と略平行な向きで障害物近傍を通過する経路を予備経路として算出するようにしているので、超音波ソナー2a,2bによる障害物位置の計測を確実に行わせることができる。   Further, the parking support controller 10 estimates the alignment direction of the parking areas where the parking target positions are set, and calculates a path through which the vehicle passes through the vicinity of the obstacle in a direction substantially parallel to the alignment direction of the parking areas. Therefore, the obstacle position can be reliably measured by the ultrasonic sonars 2a and 2b.

なお、以上説明した本発明の実施形態は、本発明の一適用例を例示的に示したものであり、本発明の技術的範囲が上記の実施形態として開示した内容に限定されることを意図するものではない。つまり、本発明の技術的範囲は、上記の実施形態で開示した具体的な技術事項に限らず、この開示から容易に導きうる様々な変形、変更、代替技術なども含むものである。   The embodiment of the present invention described above is merely an example of application of the present invention, and the technical scope of the present invention is intended to be limited to the contents disclosed as the above-described embodiment. Not what you want. That is, the technical scope of the present invention is not limited to the specific technical matters disclosed in the above-described embodiments, but includes various modifications, changes, alternative techniques, and the like that can be easily derived from this disclosure.

2a,2b 超音波ソナー
3 ディスプレイ
4 ステアリングアクチュエータ
10 駐車支援コントローラ
V0 自車
V1,V2 駐車車両(障害物)
P1 駐車目標位置
2a, 2b Ultrasonic sonar 3 Display 4 Steering actuator 10 Parking support controller V0 Own vehicle V1, V2 Parked vehicle (obstacle)
P1 parking target position

Claims (12)

車両の駐車目標位置を設定する駐車目標位置設定手段と、
前記駐車目標位置の近傍に存在する障害物の位置を計測する障害物検出手段と、
車両を前記駐車目標位置へと誘導する経路を算出し、当該経路に沿って車両が移動するように車両の操舵を制御する操舵制御手段と、を備え、
前記操舵制御手段は、前記駐車目標位置の設定時までの間に得られる情報に基づいて、前記駐車目標位置よりも車両進行方向の前方側に存在する障害物の位置を前記障害物検出手段により計測するための経路である予備経路を前記駐車目標位置の設定時に算出し、当該予備経路に沿って車両が移動するように車両の操舵を制御することを特徴とする駐車支援装置。
Parking target position setting means for setting the parking target position of the vehicle;
Obstacle detection means for measuring the position of an obstacle present in the vicinity of the parking target position;
Steering control means for calculating a route for guiding the vehicle to the parking target position and controlling the steering of the vehicle so that the vehicle moves along the route;
The steering control means uses the obstacle detection means to determine the position of an obstacle existing ahead of the parking target position in the vehicle traveling direction based on information obtained until the parking target position is set. A parking assistance device, characterized in that a spare route, which is a route for measurement, is calculated when the parking target position is set, and steering of the vehicle is controlled so that the vehicle moves along the spare route.
前記操舵制御手段は、前記駐車目標位置の設定時までの間に得られる情報に基づいて、前記駐車目標位置が設定された駐車区画と当該駐車区画に隣接する駐車区画との並び方向を推定し、当該駐車区画の並び方向と略平行な向きで前記駐車目標位置よりも前方側を通過する経路を前記予備経路として算出することを特徴とする請求項1に記載の駐車支援装置。   The steering control means estimates an arrangement direction of a parking section where the parking target position is set and a parking section adjacent to the parking section based on information obtained until the parking target position is set. 2. The parking assist device according to claim 1, wherein a route that passes in front of the parking target position in a direction substantially parallel to the arrangement direction of the parking sections is calculated as the backup route. 前記操舵制御手段は、前記駐車目標位置よりも車両進行方向の手前側に存在する障害物の位置情報と、前記駐車目標位置の位置情報とに基づいて、前記駐車区画の並び方向を推定することを特徴とする請求項2に記載の駐車支援装置。   The steering control means estimates the alignment direction of the parking sections based on the position information of an obstacle existing on the near side of the vehicle traveling direction from the parking target position and the position information of the parking target position. The parking assistance device according to claim 2, wherein: 前記操舵制御手段は、前記駐車目標位置の前端の位置と前記駐車目標位置よりも手前側に存在する障害物の前端の位置との間の前記駐車目標位置の前後方向における距離を算出し、当該距離が所定値未満の場合には、前記駐車目標位置の前後方向に対して略垂直な方向が前記駐車区画の並び方向であると推定し、前記駐車目標位置の前後方向に対して略垂直な方向に進行しながら前記駐車目標位置よりも前方側を通過する経路を、前記予備経路として算出することを特徴とする請求項3に記載の駐車支援装置。   The steering control means calculates a distance in the front-rear direction of the parking target position between a position of a front end of the parking target position and a position of a front end of an obstacle existing on the near side of the parking target position, When the distance is less than a predetermined value, it is estimated that the direction substantially perpendicular to the front-rear direction of the parking target position is the arrangement direction of the parking sections, and is substantially perpendicular to the front-rear direction of the parking target position. The parking assistance device according to claim 3, wherein a route that passes in front of the parking target position while traveling in a direction is calculated as the backup route. 前記操舵制御手段は、前記駐車目標位置の前端の位置と前記駐車目標位置よりも手前に存在する障害物の前端の位置との間の前記駐車目標位置の前後方向における距離を算出し、当該距離が所定値以上の場合には、前記駐車目標位置の前後方向に対して略垂直な方向から所定角度傾いた方向が前記駐車区画の並び方向であると推定し、前記駐車目標位置の前後方向に対して略垂直な方向から所定角度傾いた方向に進行しながら前記駐車目標位置よりも前方側を通過する経路を、前記予備経路として算出することを特徴とする請求項3に記載の駐車支援装置。   The steering control means calculates a distance in the front-rear direction of the parking target position between the position of the front end of the parking target position and the position of the front end of an obstacle existing in front of the parking target position. Is greater than or equal to a predetermined value, it is estimated that a direction inclined by a predetermined angle from a direction substantially perpendicular to the front-rear direction of the parking target position is the alignment direction of the parking sections, and the front-rear direction of the parking target position is The parking assist device according to claim 3, wherein a route that passes forward from the parking target position while traveling in a direction inclined by a predetermined angle from a substantially perpendicular direction is calculated as the backup route. . 前記操舵制御手段は、前記駐車目標位置の設定時における車両の向きが前記駐車区画の並び方向と略一致している場合に、前記駐車目標位置の設定時における車両の向きを維持して進行する経路を前記予備経路として算出することを特徴とする請求項2乃至5のいずれか一項に記載の駐車支援装置。   The steering control means proceeds while maintaining the direction of the vehicle at the time of setting the parking target position when the direction of the vehicle at the time of setting the parking target position substantially coincides with the arrangement direction of the parking sections. The parking assistance device according to any one of claims 2 to 5, wherein a route is calculated as the backup route. 前記操舵制御手段は、前記駐車目標位置の設定時における車両の向きが前記駐車区画の並び方向と一致していない場合に、車両の向きを前記駐車区画の並び方向と一致させるように操舵制御する区間と、ステアリングを略中立状態に維持しながら前記駐車区画の並び方向と略平行に進行する区間とを含む経路を前記予備経路として算出することを特徴とする請求項2乃至5のいずれか一項に記載の駐車支援装置。   The steering control means performs steering control so that the direction of the vehicle coincides with the arrangement direction of the parking sections when the direction of the vehicle at the time of setting the parking target position does not coincide with the arrangement direction of the parking sections. 6. The route including a section and a section that travels substantially parallel to the arrangement direction of the parking sections while maintaining steering in a substantially neutral state is calculated as the backup route. The parking assistance device according to item. 前記操舵制御手段は、前記予備経路を距離が一定の経路として算出することを特徴とする請求項1乃至7のいずれか一項に記載の駐車支援装置。   The parking assist device according to any one of claims 1 to 7, wherein the steering control unit calculates the preliminary route as a route having a constant distance. 前記予備経路の終点位置を明示する映像を表示する表示手段をさらに備えることを特徴とする請求項8に記載の駐車支援装置。   9. The parking assist apparatus according to claim 8, further comprising display means for displaying an image clearly indicating an end point position of the preliminary route. 前記操舵制御手段は、前記予備経路を通過した後の経路である駐車経路を、前記予備経路とともに前記駐車目標位置の設定時に算出し、前記予備経路に沿って前記駐車目標位置よりも前方側を車両が通過している間に前記障害物検出手段により計測された障害物の位置に応じて、前記駐車経路を補正することを特徴とする請求項1乃至9のいずれか一項に記載の駐車支援装置。   The steering control means calculates a parking route, which is a route after passing the preliminary route, together with the preliminary route when the parking target position is set, and moves the front side of the parking target position along the preliminary route. The parking according to any one of claims 1 to 9, wherein the parking path is corrected according to the position of the obstacle measured by the obstacle detection means while the vehicle is passing. Support device. 前記駐車経路は、車両を前進から後退に切り替える後退開始位置を経由して前記駐車目標位置に到達する経路であることを特徴とする請求項10に記載の駐車支援装置。   The parking assist device according to claim 10, wherein the parking route is a route that reaches the parking target position via a reverse start position where the vehicle is switched from forward to backward. 車両の駐車目標位置を設定するまでの間に得られる情報に基づいて、前記駐車目標位置よりも車両進行方向の前方側に存在する障害物の位置を計測するための経路である予備経路を前記駐車目標位置の設定時に算出し、当該予備経路に沿って車両が移動するように車両の操舵を制御することを特徴とする駐車支援方法。   Based on information obtained until the parking target position of the vehicle is set, a spare path that is a path for measuring the position of an obstacle existing ahead of the parking target position in the vehicle traveling direction is A parking support method, characterized in that the steering of the vehicle is controlled so that the vehicle moves along the preliminary route, which is calculated when the parking target position is set.
JP2009043851A 2009-02-26 2009-02-26 Parking assistance device and parking assistance method Active JP5257138B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009043851A JP5257138B2 (en) 2009-02-26 2009-02-26 Parking assistance device and parking assistance method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009043851A JP5257138B2 (en) 2009-02-26 2009-02-26 Parking assistance device and parking assistance method

Publications (2)

Publication Number Publication Date
JP2010195266A JP2010195266A (en) 2010-09-09
JP5257138B2 true JP5257138B2 (en) 2013-08-07

Family

ID=42820453

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009043851A Active JP5257138B2 (en) 2009-02-26 2009-02-26 Parking assistance device and parking assistance method

Country Status (1)

Country Link
JP (1) JP5257138B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5845131B2 (en) * 2012-04-17 2016-01-20 株式会社日本自動車部品総合研究所 Parking space detector
KR101424636B1 (en) 2013-01-30 2014-08-04 한국기술교육대학교 산학협력단 Automatic parking system for vehicle
KR101583998B1 (en) 2014-10-17 2016-01-19 현대자동차주식회사 Smart parking assist apparatus and method thereof
CN108137040B (en) * 2015-10-06 2020-12-11 三菱电机株式会社 Parking mode determination device
JP6827285B2 (en) * 2016-09-05 2021-02-10 日産自動車株式会社 Parking support method and parking support device
JP6897597B2 (en) * 2018-02-16 2021-06-30 トヨタ自動車株式会社 Parking support device
JP7154297B2 (en) * 2018-07-09 2022-10-17 三菱電機株式会社 PARKING ASSIST DEVICE AND PARKING ASSIST METHOD
CN113071480B (en) * 2021-04-30 2022-06-03 重庆长安汽车股份有限公司 Automatic parking obstacle detection method, parking method and system and vehicle

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3473378B2 (en) * 1998-03-10 2003-12-02 日産自動車株式会社 Parking space detection device
JP3991731B2 (en) * 2002-03-14 2007-10-17 日産自動車株式会社 Parking direction setting device for vehicles
JP2008201178A (en) * 2007-02-16 2008-09-04 Toyota Motor Corp Parking assist device
JP4609444B2 (en) * 2007-03-08 2011-01-12 トヨタ自動車株式会社 Parking assistance device

Also Published As

Publication number Publication date
JP2010195266A (en) 2010-09-09

Similar Documents

Publication Publication Date Title
JP5447663B2 (en) Parking support apparatus and method
JP5257138B2 (en) Parking assistance device and parking assistance method
JP4661917B2 (en) Parking assistance device and parking assistance method
EP3650285B1 (en) Parking assistance method and parking assistance device
JP5429514B2 (en) Parking assistance device
JP4769625B2 (en) Parking assistance device and parking assistance method
JP5003946B2 (en) Parking assistance device
JP6573795B2 (en) Parking assistance device, method and program
JP5321267B2 (en) Vehicular image display device and overhead image display method
JP5446500B2 (en) Parking assistance device and parking assistance method
JP5446139B2 (en) Parking assistance device and parking assistance method
JP4793171B2 (en) Parking assistance device
JP2001180405A (en) Steering support device
JP5906999B2 (en) Parking assistance device
JP5400316B2 (en) Parking assistance device
JP5380994B2 (en) Parking assistance device and parking assistance method
JP2008296639A (en) Parking support device
JP5556077B2 (en) Driving support device
CN110546048A (en) Parking assist apparatus
JP2006193011A (en) Parking supporting device
JP5971197B2 (en) Parking assistance device
JP4416000B2 (en) Parking assistance device
JP2011000899A (en) Parking support device and parking support method
CN112141085A (en) Vehicle and parking assist apparatus
JP7059525B2 (en) Parking support method and parking support device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111219

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130307

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130326

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130408

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160502

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5257138

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150