JP2019156222A - Vehicle controller, vehicle control method and program - Google Patents

Vehicle controller, vehicle control method and program Download PDF

Info

Publication number
JP2019156222A
JP2019156222A JP2018046880A JP2018046880A JP2019156222A JP 2019156222 A JP2019156222 A JP 2019156222A JP 2018046880 A JP2018046880 A JP 2018046880A JP 2018046880 A JP2018046880 A JP 2018046880A JP 2019156222 A JP2019156222 A JP 2019156222A
Authority
JP
Japan
Prior art keywords
vehicle
pedestrian
minimum interval
recognized
pedestrians
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018046880A
Other languages
Japanese (ja)
Inventor
松永 英樹
Hideki Matsunaga
英樹 松永
成光 土屋
Narimitsu Tsuchiya
成光 土屋
橋本 泰治
Taiji Hashimoto
泰治 橋本
悦生 渡部
Etsuo Watabe
悦生 渡部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2018046880A priority Critical patent/JP2019156222A/en
Priority to US16/296,337 priority patent/US20190283802A1/en
Priority to CN201910183712.4A priority patent/CN110271549A/en
Publication of JP2019156222A publication Critical patent/JP2019156222A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/025Active steering aids, e.g. helping the driver by actively influencing the steering system after environment evaluation
    • B62D15/0265Automatic obstacle avoidance by steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09Taking automatic action to avoid collision, e.g. braking and steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D6/00Arrangements for automatically controlling steering depending on driving conditions sensed and responded to, e.g. control circuits
    • B62D6/001Arrangements for automatically controlling steering depending on driving conditions sensed and responded to, e.g. control circuits the torque NOT being among the input parameters
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/53Road markings, e.g. lane marker or crosswalk
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • B60W2554/4029Pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/801Lateral distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2710/00Output or target parameters relating to a particular sub-units
    • B60W2710/20Steering systems
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0088Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours

Abstract

To provide a vehicle controller, a vehicle control method and a program capable of more preferably executing driving control for avoiding contact with a pedestrian who exists in a travel direction of an own vehicle.SOLUTION: A vehicle controller (100) comprises: a recognition part (130) for recognizing a peripheral state of a vehicle; and a driving control part (140, 160) for controlling automatically, at least steering of the vehicle based on the peripheral state recognized by the recognition part. The driving control part sets a distance between the vehicle and a pedestrian to a first minimum interval or larger interval, when a single pedestrian is recognized in the travel direction of the vehicle by the recognition part, and sets the distance between the vehicle and a pedestrian closest to the vehicle to a distance equal to or larger than a second minimum interval being larger than the first minimum interval, when a plurality of pedestrians are recognized in the travel direction of teh vehicle by the recognition part.SELECTED DRAWING: Figure 2

Description

本発明は、車両制御装置、車両制御方法、およびプログラムに関する。   The present invention relates to a vehicle control device, a vehicle control method, and a program.

従来、車両の周辺に存在する歩行者を検知し、検知した歩行者との接触を未然に防止する歩行者検知システムが知られている(例えば、特許文献1)。特許文献1では、車両に搭載されたレーザレーダによるレーザー光を照射し、各照射点のうち歩行者または歩行者群に相当すると思われる照射点をグループ化し、そのグループ化された照射点の広がり幅と中心の移動速度とに基づき、歩行者または歩行者群を検知する技術が開示されている。   2. Description of the Related Art Conventionally, a pedestrian detection system that detects a pedestrian existing around a vehicle and prevents contact with the detected pedestrian is known (for example, Patent Document 1). In Patent Document 1, a laser radar mounted on a vehicle is irradiated with laser light, and irradiation points that are considered to correspond to a pedestrian or a pedestrian group among the irradiation points are grouped, and the spread of the grouped irradiation points A technique for detecting a pedestrian or a group of pedestrians based on the width and the moving speed of the center is disclosed.

特開2000−3499号公報JP 2000-3499 A

しかしながら、従来の技術では、検知された歩行者または歩行者群に対して車両との最小間隔をどのように調整するかについては考慮されていなかった。また、仮に、車両が自動運転車両である場合には、検知された歩行者または歩行者群に対して接触を回避するための操舵制御が自動的に実行されるが、この場合の制御は、単に、車両に最も近い歩行者の動きに応じて操舵を制御するものであることが想定され、好適な運転制御が実行できない場合があった。   However, the conventional technology does not consider how to adjust the minimum distance from the vehicle with respect to the detected pedestrian or pedestrian group. Further, if the vehicle is an autonomous driving vehicle, steering control for avoiding contact with the detected pedestrian or pedestrian group is automatically executed. It is assumed that the steering is simply controlled according to the movement of the pedestrian closest to the vehicle, and suitable driving control may not be executed.

本発明は、このような事情を考慮してなされたものであり、自車両の進行方向に存在する歩行者との接触を回避する運転制御を、より好適に実行することができる車両制御装置、車両制御方法、およびプログラムを提供することを目的の一つとする。   The present invention has been made in consideration of such circumstances, and a vehicle control device capable of more suitably executing driving control to avoid contact with a pedestrian existing in the traveling direction of the host vehicle, An object is to provide a vehicle control method and a program.

(1):車両の周辺状況を認識する認識部と、前記認識部により認識された周辺状況に基づいて少なくとも前記車両の操舵を自動的に制御する運転制御部と、を備え、前記運転制御部は、前記認識部により前記車両の進行方向に単独の歩行者が認識された場合に、前記車両と歩行者との距離を第1最小間隔以上とし、前記認識部により前記車両の進行方向に複数の歩行者が認識された場合に、前記車両と前記車両に最も近い歩行者との距離を前記第1最小間隔よりも大きい第2最小間隔以上とする、車両制御装置である。   (1): a recognition unit for recognizing a surrounding situation of the vehicle, and a driving control unit for automatically controlling at least steering of the vehicle based on the surrounding situation recognized by the recognition unit, the driving control unit When a single pedestrian is recognized in the traveling direction of the vehicle by the recognition unit, a distance between the vehicle and the pedestrian is set to a first minimum interval or more, and a plurality of the pedestrians in the traveling direction of the vehicle are formed by the recognition unit. When the pedestrian is recognized, the distance between the vehicle and the pedestrian closest to the vehicle is equal to or greater than a second minimum interval greater than the first minimum interval.

(2):(1)において、前記運転制御部は、前記認識部により前記車両の進行方向に複数の歩行者が認識された場合に、認識された前記複数の歩行者のそれぞれの道路幅方向への移動量に基づいて、前記第2最小間隔を調整するものである。   (2): In (1), when the recognition unit recognizes a plurality of pedestrians in the traveling direction of the vehicle, each of the recognized widths of the plurality of pedestrians is determined by the recognition unit. The second minimum interval is adjusted based on the amount of movement.

(3):(1)または(2)において、前記運転制御部は、前記認識部により前記車両の進行方向に複数の歩行者が認識された場合であって、且つ、前記複数の歩行者のうち、道路の延在方向中央から遠い方に存在する歩行者が、前記道路の延在方向中央から近い方に存在する歩行者に接近した場合に、前記車両と前記車両に最も近い歩行者との間を前記第2最小間隔よりも大きい第3最小間隔以上とするものである。   (3): In (1) or (2), the driving control unit is a case where a plurality of pedestrians are recognized in the traveling direction of the vehicle by the recognition unit, and the plurality of pedestrians Among them, when a pedestrian existing far from the center of the road extending direction approaches a pedestrian existing closer to the center of the road extending direction, the vehicle and the pedestrian closest to the vehicle Is set to be not less than a third minimum interval larger than the second minimum interval.

(4):(1)〜(3)のうち何れか一つにおいて、前記運転制御部は、前記認識部により認識された複数の歩行者のそれぞれの属性に基づいて、前記第2最小間隔または前記第3最小間隔を調整するものである。   (4): In any one of (1) to (3), the driving control unit may determine the second minimum interval or the second minimum interval based on the attributes of the plurality of pedestrians recognized by the recognition unit. The third minimum interval is adjusted.

(5):車両制御装置が、車両の周辺状況を認識し、認識した前記周辺状況に基づいて少なくとも前記車両の操舵を自動的に制御し、前記車両の進行方向に単独の歩行者が認識された場合に、前記車両と歩行者との距離を第1最小間隔以上とし、前記車両の進行方向に複数の歩行者が認識された場合に、前記車両と前記車両に最も近い歩行者との距離を前記第1最小間隔よりも大きい第2最小間隔以上とするように、前記車両の操舵を自動的に制御する、車両制御方法である。   (5): The vehicle control device recognizes the surrounding situation of the vehicle, automatically controls at least steering of the vehicle based on the recognized surrounding situation, and a single pedestrian is recognized in the traveling direction of the vehicle. When the distance between the vehicle and the pedestrian is equal to or greater than the first minimum interval, and a plurality of pedestrians are recognized in the traveling direction of the vehicle, the distance between the vehicle and the pedestrian closest to the vehicle Is a vehicle control method for automatically controlling the steering of the vehicle so as to be equal to or greater than a second minimum interval greater than the first minimum interval.

(6):車両制御装置に、車両の周辺状況を認識させ、認識させた前記周辺状況に基づいて少なくとも前記車両の操舵を自動的に制御させ、前記車両の進行方向に単独の歩行者が認識された場合に、前記車両と歩行者との距離を第1最小間隔以上とし、前記車両の進行方向に複数の歩行者が認識された場合に、前記車両と前記車両に最も近い歩行者との距離を前記第1最小間隔よりも大きい第2最小間隔以上とするように、前記車両の操舵を自動的に制御させる、プログラムである。   (6): The vehicle control apparatus is made to recognize the surrounding situation of the vehicle, and at least the steering of the vehicle is automatically controlled based on the recognized surrounding situation, and a single pedestrian recognizes in the traveling direction of the vehicle. The distance between the vehicle and the pedestrian is not less than the first minimum interval, and when a plurality of pedestrians are recognized in the traveling direction of the vehicle, the vehicle and the pedestrian closest to the vehicle In the program, the steering of the vehicle is automatically controlled so that the distance is equal to or greater than a second minimum interval greater than the first minimum interval.

(1)〜(6)によれば、自車両の進行方向に存在する歩行者との接触を回避する運転制御を、より好適に実行することができる。   According to (1) to (6), driving control for avoiding contact with a pedestrian existing in the traveling direction of the host vehicle can be more suitably executed.

実施形態に係る車両制御装置を利用した車両システム1の構成図である。It is a lineblock diagram of vehicle system 1 using a vehicle control device concerning an embodiment. 第1制御部120および第2制御部160の機能構成図である。3 is a functional configuration diagram of a first control unit 120 and a second control unit 160. FIG. 自車両Mの進行方向に単独の歩行者が存在する場合における迂回走行制御部142の処理の一例を示す図である。It is a figure which shows an example of a process of the detour travel control part 142 in case a single pedestrian exists in the advancing direction of the own vehicle M. 自車両Mの進行方向に複数の歩行者が存在する場合における迂回走行制御部142の処理の一例を示す図である。It is a figure which shows an example of the process of the detour driving control part 142 in case a some pedestrian exists in the advancing direction of the own vehicle M. 複数の歩行者の横方向への移動量に基づく迂回走行制御部142の処理の一例を示す図である。It is a figure which shows an example of the process of the detour travel control part 142 based on the moving amount | distance to the side direction of a several pedestrian. 歩行者の属性に基づく迂回走行制御部142の処理の一例を示す図(その1)である。It is FIG. (1) which shows an example of the process of the detouring traveling control part 142 based on the attribute of a pedestrian. 歩行者の属性に基づく迂回走行制御部142の処理の一例を示す図(その2)である。It is FIG. (2) which shows an example of a process of the detour travel control part 142 based on a pedestrian's attribute. 実施形態の自動運転制御装置100により実行される処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process performed by the automatic driving | operation control apparatus 100 of embodiment. 実施形態の自動運転制御装置100のハードウェア構成の一例を示す図である。It is a figure showing an example of hardware constitutions of automatic operation control device 100 of an embodiment.

以下、図面を参照し、本発明の車両制御装置、車両制御方法、およびプログラムの実施形態について説明する。以下では、左側通行の法規が適用される場合について説明するが、右側通行の法規が適用される場合、左右を逆に読み替えればよい。   Hereinafter, embodiments of a vehicle control device, a vehicle control method, and a program according to the present invention will be described with reference to the drawings. In the following, the case where the left-hand traffic law is applied will be described. However, when the right-hand traffic law is applied, the right and left may be reversed.

[全体構成]
図1は、実施形態に係る車両制御装置を利用した車両システム1の構成図である。車両システム1が搭載される車両は、例えば、二輪や三輪、四輪等の車両であり、その駆動源は、ディーゼルエンジンやガソリンエンジン等の内燃機関、電動機、或いはこれらの組み合わせである。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。
[overall structure]
FIG. 1 is a configuration diagram of a vehicle system 1 using a vehicle control device according to an embodiment. The vehicle on which the vehicle system 1 is mounted is, for example, a vehicle such as a two-wheel, three-wheel, or four-wheel vehicle, and a drive source thereof is an internal combustion engine such as a diesel engine or a gasoline engine, an electric motor, or a combination thereof. The electric motor operates using electric power generated by a generator connected to the internal combustion engine or electric discharge power of a secondary battery or a fuel cell.

車両システム1は、例えば、カメラ10と、レーダ装置12と、ファインダ14と、物体認識装置16と、通信装置20と、HMI(Human Machine Interface)30と、車両センサ40と、ナビゲーション装置50と、MPU(Map Positioning Unit)60と、運転操作子80と、自動運転制御装置100と、走行駆動力出力装置200と、ブレーキ装置210と、ステアリング装置220とを備える。これらの装置や機器は、CAN(Controller Area Network)通信線等の多重通信線やシリアル通信線、無線通信網等によって互いに接続される。なお、図1に示す構成はあくまで一例であり、構成の一部が省略されてもよいし、更に別の構成が追加されてもよい。また、自動運転制御装置100は、「車両制御装置」の一例である。   The vehicle system 1 includes, for example, a camera 10, a radar device 12, a finder 14, an object recognition device 16, a communication device 20, an HMI (Human Machine Interface) 30, a vehicle sensor 40, a navigation device 50, An MPU (Map Positioning Unit) 60, a driving operator 80, an automatic driving control device 100, a travel driving force output device 200, a brake device 210, and a steering device 220 are provided. These devices and devices are connected to each other by a multiple communication line such as a CAN (Controller Area Network) communication line, a serial communication line, a wireless communication network, or the like. The configuration illustrated in FIG. 1 is merely an example, and a part of the configuration may be omitted, or another configuration may be added. The automatic driving control device 100 is an example of a “vehicle control device”.

カメラ10は、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の固体撮像素子を利用したデジタルカメラである。カメラ10は、車両システム1が搭載される車両(以下、自車両M)の任意の箇所に取り付けられる。前方を撮像する場合、カメラ10は、フロントウインドシールド上部やルームミラー裏面等に取り付けられる。カメラ10は、例えば、周期的に繰り返し自車両Mの周辺を撮像する。カメラ10は、ステレオカメラであってもよい。   The camera 10 is a digital camera using a solid-state image sensor such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor). The camera 10 is attached to an arbitrary location of a vehicle (hereinafter, the host vehicle M) on which the vehicle system 1 is mounted. When imaging the front, the camera 10 is attached to the upper part of the front windshield, the rear surface of the rearview mirror, or the like. For example, the camera 10 periodically and repeatedly images the periphery of the host vehicle M. The camera 10 may be a stereo camera.

レーダ装置12は、自車両Mの周辺にミリ波等の電波を放射すると共に、物体によって反射された電波(反射波)を検出して少なくとも物体の位置(距離および方位)を検出する。レーダ装置12は、自車両Mの任意の箇所に取り付けられる。レーダ装置12は、FM−CW(Frequency Modulated Continuous Wave)方式によって物体の位置および速度を検出してもよい。   The radar device 12 radiates radio waves such as millimeter waves around the host vehicle M, and detects radio waves (reflected waves) reflected by the object to detect at least the position (distance and direction) of the object. The radar device 12 is attached to an arbitrary location of the host vehicle M. The radar apparatus 12 may detect the position and speed of an object by FM-CW (Frequency Modulated Continuous Wave) method.

ファインダ14は、LIDAR(Light Detection and Ranging)である。ファインダ14は、自車両Mの周辺に光を照射し、散乱光を測定する。ファインダ14は、発光から受光までの時間に基づいて、対象までの距離を検出する。照射される光は、例えば、パルス状のレーザー光である。ファインダ14は、自車両Mの任意の箇所に取り付けられる。   The finder 14 is LIDAR (Light Detection and Ranging). The finder 14 irradiates light around the host vehicle M and measures scattered light. The finder 14 detects the distance to the object based on the time from light emission to light reception. The irradiated light is, for example, pulsed laser light. The finder 14 is attached to an arbitrary location of the host vehicle M.

物体認識装置16は、カメラ10、レーダ装置12、およびファインダ14のうち一部または全部による検出結果に対してセンサフュージョン処理を行って、物体の位置、種類、速度等を認識する。物体認識装置16は、認識結果を自動運転制御装置100に出力する。物体認識装置16は、カメラ10、レーダ装置12、およびファインダ14の検出結果をそのまま自動運転制御装置100に出力してよい。車両システム1から物体認識装置16が省略されてもよい。   The object recognition device 16 performs sensor fusion processing on detection results of some or all of the camera 10, the radar device 12, and the finder 14 to recognize the position, type, speed, and the like of the object. The object recognition device 16 outputs the recognition result to the automatic driving control device 100. The object recognition device 16 may output the detection results of the camera 10, the radar device 12, and the finder 14 to the automatic driving control device 100 as they are. The object recognition device 16 may be omitted from the vehicle system 1.

通信装置20は、例えば、セルラー網やWi−Fi網、Bluetooth(登録商標)、DSRC(Dedicated Short Range Communication)等を利用して、自車両Mの周辺に存在する他車両と通信し、或いは無線基地局を介して各種サーバ装置と通信する。   The communication device 20 communicates with other vehicles around the host vehicle M using, for example, a cellular network, a Wi-Fi network, Bluetooth (registered trademark), DSRC (Dedicated Short Range Communication), or wirelessly. It communicates with various server apparatuses via a base station.

HMI30は、自車両Mの乗員に対して各種情報を提示すると共に、乗員による入力操作を受け付ける。HMI30は、各種表示装置、スピーカ、ブザー、タッチパネル、スイッチ、キー等を含む。   The HMI 30 presents various information to the occupant of the host vehicle M and accepts an input operation by the occupant. The HMI 30 includes various display devices, speakers, buzzers, touch panels, switches, keys, and the like.

車両センサ40は、自車両Mの速度を検出する車速センサ、加速度を検出する加速度センサ、鉛直軸回りの角速度を検出するヨーレートセンサ、自車両Mの向きを検出する方位センサ等を含む。   The vehicle sensor 40 includes a vehicle speed sensor that detects the speed of the host vehicle M, an acceleration sensor that detects acceleration, a yaw rate sensor that detects an angular velocity around the vertical axis, a direction sensor that detects the direction of the host vehicle M, and the like.

ナビゲーション装置50は、例えば、GNSS(Global Navigation Satellite System)受信機51と、ナビHMI52と、経路決定部53とを備える。ナビゲーション装置50は、HDD(Hard Disk Drive)やフラッシュメモリ等の記憶装置に第1地図情報54を保持している。GNSS受信機51は、GNSS衛星から受信した信号に基づいて、自車両Mの位置を特定する。自車両Mの位置は、車両センサ40の出力を利用したINS(Inertial Navigation System)によって特定または補完されてもよい。ナビHMI52は、表示装置、スピーカ、タッチパネル、キー等を含む。ナビHMI52は、前述したHMI30と一部または全部が共通化されてもよい。経路決定部53は、例えば、GNSS受信機51により特定された自車両Mの位置(或いは入力された任意の位置)から、ナビHMI52を用いて乗員により入力された目的地までの経路(以下、地図上経路)を、第1地図情報54を参照して決定する。第1地図情報54は、例えば、道路を示すリンクと、リンクによって接続されたノードとによって道路形状が表現された情報である。第1地図情報54は、道路の曲率やPOI(Point Of Interest)情報等を含んでもよい。地図上経路は、MPU60に出力される。ナビゲーション装置50は、地図上経路に基づいて、ナビHMI52を用いた経路案内を行ってもよい。ナビゲーション装置50は、例えば、乗員の保有するスマートフォンやタブレット端末等の端末装置の機能によって実現されてもよい。ナビゲーション装置50は、通信装置20を介してナビゲーションサーバに現在位置と目的地を送信し、ナビゲーションサーバから地図上経路と同等の経路を取得してもよい。   The navigation device 50 includes, for example, a GNSS (Global Navigation Satellite System) receiver 51, a navigation HMI 52, and a route determination unit 53. The navigation device 50 holds the first map information 54 in a storage device such as an HDD (Hard Disk Drive) or a flash memory. The GNSS receiver 51 specifies the position of the host vehicle M based on the signal received from the GNSS satellite. The position of the host vehicle M may be specified or supplemented by an INS (Inertial Navigation System) using the output of the vehicle sensor 40. The navigation HMI 52 includes a display device, a speaker, a touch panel, keys, and the like. The navigation HMI 52 may be partly or wholly shared with the HMI 30 described above. The route determination unit 53 is, for example, a route from the position of the host vehicle M specified by the GNSS receiver 51 (or any input position) to the destination input by the occupant using the navigation HMI 52 (hereinafter, referred to as “route”). The route on the map is determined with reference to the first map information 54. The first map information 54 is information in which a road shape is expressed by, for example, a link indicating a road and nodes connected by the link. The first map information 54 may include road curvature and POI (Point Of Interest) information. The on-map route is output to the MPU 60. The navigation device 50 may perform route guidance using the navigation HMI 52 based on the map route. The navigation device 50 may be realized, for example, by a function of a terminal device such as a smartphone or a tablet terminal held by an occupant. The navigation device 50 may transmit the current position and the destination to the navigation server via the communication device 20 and obtain a route equivalent to the on-map route from the navigation server.

MPU60は、例えば、推奨車線決定部61を含み、HDDやフラッシュメモリ等の記憶装置に第2地図情報62を保持している。推奨車線決定部61は、ナビゲーション装置50から提供された地図上経路を複数のブロックに分割し(例えば、車両進行方向に関して100[m]毎に分割し)、第2地図情報62を参照してブロックごとに推奨車線を決定する。推奨車線決定部61は、左から何番目の車線を走行するといった決定を行う。推奨車線決定部61は、地図上経路に分岐箇所が存在する場合、自車両Mが、分岐先に進行するための合理的な経路を走行できるように、推奨車線を決定する。   The MPU 60 includes, for example, a recommended lane determining unit 61 and holds the second map information 62 in a storage device such as an HDD or a flash memory. The recommended lane determining unit 61 divides the on-map route provided from the navigation device 50 into a plurality of blocks (for example, every 100 [m] with respect to the vehicle traveling direction), and refers to the second map information 62 Determine the recommended lane for each block. The recommended lane determining unit 61 performs determination such as what number of lanes from the left to travel. The recommended lane determining unit 61 determines a recommended lane so that the host vehicle M can travel on a reasonable route for proceeding to the branch destination when a branch point exists on the map route.

第2地図情報62は、第1地図情報54よりも高精度な地図情報である。第2地図情報62は、例えば、車線の中央の情報あるいは車線の境界の情報等を含んでいる。また、第2地図情報62には、道路情報、交通規制情報、住所情報(住所・郵便番号)、施設情報、電話番号情報等が含まれてよい。第2地図情報62は、通信装置20が他装置と通信することにより、随時、アップデートされてよい。   The second map information 62 is map information with higher accuracy than the first map information 54. The second map information 62 includes, for example, information on the center of the lane or information on the boundary of the lane. The second map information 62 may include road information, traffic regulation information, address information (address / postal code), facility information, telephone number information, and the like. The second map information 62 may be updated as needed by the communication device 20 communicating with other devices.

運転操作子80は、例えば、アクセルペダル、ブレーキペダル、シフトレバー、ステアリングホイール、異形ステア、ジョイスティックその他の操作子を含む。運転操作子80には、操作量あるいは操作の有無を検出するセンサが取り付けられており、その検出結果は、自動運転制御装置100、もしくは、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220のうち一部または全部に出力される。   The driving operation element 80 includes, for example, an accelerator pedal, a brake pedal, a shift lever, a steering wheel, a deformed steer, a joystick, and other operation elements. A sensor for detecting the amount of operation or the presence or absence of an operation is attached to the driving operator 80, and the detection result is the automatic driving control device 100, or the traveling driving force output device 200, the brake device 210, and the steering device. A part or all of 220 is output.

自動運転制御装置100は、例えば、第1制御部120と、第2制御部160とを備える。これらの構成要素は、それぞれ、例えば、CPU(Central Processing Unit)等のハードウェアプロセッサがプログラム(ソフトウェア)を実行することにより実現される。また、これらの構成要素のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)等のハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予め自動運転制御装置100のHDDやフラッシュメモリ等の記憶装置に格納されていてもよいし、DVDやCD−ROM等の着脱可能な記憶媒体に格納されており、記憶媒体がドライブ装置に装着されることで自動運転制御装置100のHDDやフラッシュメモリにインストールされてもよい。また、行動計画生成部140と、第2制御部160とを合わせたものが「運転制御部」の一例である。運転制御部は、例えば、認識部130により認識された周辺状況に基づいて自車両Mの速度または操舵のうち少なくとも操舵を自動的に制御する。   The automatic operation control device 100 includes, for example, a first control unit 120 and a second control unit 160. Each of these components is realized by a hardware processor such as a CPU (Central Processing Unit) executing a program (software). Some or all of these components are hardware (circuits) such as LSI (Large Scale Integration), ASIC (Application Specific Integrated Circuit), FPGA (Field-Programmable Gate Array), and GPU (Graphics Processing Unit). Part (including circuit)), or may be realized by cooperation of software and hardware. The program may be stored in advance in a storage device such as an HDD or a flash memory of the automatic operation control device 100, or is stored in a removable storage medium such as a DVD or a CD-ROM, and the storage medium is a drive device. May be installed in the HDD or flash memory of the automatic operation control device 100. A combination of the action plan generation unit 140 and the second control unit 160 is an example of the “driving control unit”. For example, the driving control unit automatically controls at least steering among the speed or steering of the host vehicle M based on the surrounding situation recognized by the recognition unit 130.

図2は、第1制御部120および第2制御部160の機能構成図である。第1制御部120は、例えば、認識部130と、行動計画生成部140とを備える。第1制御部120は、例えば、AI(Artificial Intelligence;人工知能)による機能と、予め与えられたモデルによる機能とを並行して実現する。例えば、「交差点を認識する」機能は、ディープラーニング等による交差点の認識と、予め与えられた条件(パターンマッチング可能な信号、道路標示等がある)に基づく認識とが並行して実行され、双方に対してスコア付けして総合的に評価することで実現されてよい。これによって、自動運転の信頼性が担保される。   FIG. 2 is a functional configuration diagram of the first control unit 120 and the second control unit 160. The first control unit 120 includes, for example, a recognition unit 130 and an action plan generation unit 140. The first control unit 120 implements, for example, a function based on AI (Artificial Intelligence) and a function based on a predetermined model in parallel. For example, the “recognize intersection” function executes recognition of an intersection by deep learning or the like and recognition based on a predetermined condition (there is a signal that can be matched with a pattern, road marking, etc.) in parallel. May be realized by scoring and comprehensively evaluating. This ensures the reliability of automatic driving.

認識部130は、カメラ10、レーダ装置12、およびファインダ14から物体認識装置16を介して入力された情報に基づいて、自車両Mの周辺にある物体の位置、および速度、加速度等の状態を認識する。物体には、例えば、歩行者、他車両等の移動体や工事箇所等の障害物が含まれる。物体の位置は、例えば、自車両Mの代表点(重心や駆動軸中心等)を原点とした絶対座標上の位置として認識され、制御に使用される。物体の位置は、その物体の重心やコーナー等の代表点で表されてもよいし、表現された領域で表されてもよい。物体が他車両である場合、物体の「状態」とは、物体の加速度やジャーク、あるいは「行動状態」(例えば車線変更をしている、またはしようとしているか否か)を含んでもよい。また、物体が、歩行者である場合、物体の「状態」とは、物体が移動する方向、あるいは「行動状態」(例えば、道路を横断している、またはしようとしているか否か)を含んでもよい。また、認識部130は、サンプリング期間における物体の移動量を認識してもよい。   Based on information input from the camera 10, the radar device 12, and the finder 14 through the object recognition device 16, the recognition unit 130 determines the positions of objects around the host vehicle M, and states such as speed and acceleration. recognize. Objects include, for example, moving objects such as pedestrians and other vehicles, and obstacles such as construction sites. The position of the object is recognized, for example, as a position on absolute coordinates with the representative point (the center of gravity, the center of the drive shaft, etc.) of the host vehicle M as the origin, and is used for control. The position of the object may be represented by a representative point such as the center of gravity or corner of the object, or may be represented by a represented area. When the object is another vehicle, the “state” of the object may include acceleration or jerk of the object, or “behavioral state” (for example, whether or not the lane is changed or is about to be changed). Further, when the object is a pedestrian, the “state” of the object may include the direction in which the object moves or the “behavioral state” (for example, whether or not the vehicle is crossing or is about to cross the road). Good. Further, the recognition unit 130 may recognize the amount of movement of the object during the sampling period.

また、認識部130は、例えば、自車両Mが走行している車線(道路)を認識する。例えば、認識部130は、第2地図情報62から得られる道路区画線のパターン(例えば実線と破線の配列)と、カメラ10によって撮像された画像から認識される自車両Mの周辺の道路区画線のパターンとを比較することで、走行車線を認識する。なお、認識部130は、道路区画線に限らず、道路区画線や路肩、縁石、中央分離帯、ガードレール等を含む走路境界(道路境界)を認識することで、走行車線を認識してもよい。この認識において、ナビゲーション装置50から取得される自車両Mの位置やINSによる処理結果が加味されてもよい。また、認識部130は、自車両Mが走行する道路の幅を認識する。この場合、認識部130は、カメラ10によって撮像された画像から道路幅を認識してもよく、第2地図情報62から得られる道路区画線から道路幅を認識してもよい。また、認識部130は、カメラ10によって撮像された画像に基づいて、障害物の幅(例えば、他車両の車幅)や高さ、形状等を認識してもよい。また、認識部130は、一時停止線、赤信号、料金所、その他の道路事象を認識する。   Further, the recognition unit 130 recognizes, for example, a lane (road) on which the host vehicle M is traveling. For example, the recognizing unit 130 has a road lane marking line around the host vehicle M recognized from the road lane marking pattern (for example, an array of solid lines and broken lines) obtained from the second map information 62 and an image captured by the camera 10. The driving lane is recognized by comparing with the pattern. Note that the recognition unit 130 may recognize a travel lane by recognizing not only a road lane line but also a road lane line (road boundary) including a road lane line, a road shoulder, a curb, a median strip, a guardrail, and the like. . In this recognition, the position of the host vehicle M acquired from the navigation device 50 and the processing result by INS may be taken into account. The recognition unit 130 recognizes the width of the road on which the host vehicle M travels. In this case, the recognition unit 130 may recognize the road width from the image captured by the camera 10, or may recognize the road width from the road lane line obtained from the second map information 62. Further, the recognition unit 130 may recognize the width (for example, the vehicle width of another vehicle), the height, the shape, and the like of the obstacle based on the image captured by the camera 10. The recognizing unit 130 recognizes a stop line, a red light, a toll gate, and other road events.

認識部130は、走行車線を認識する際に、走行車線に対する自車両Mの位置や姿勢を認識する。認識部130は、例えば、自車両Mの代表点の車線中央からの乖離、および自車両Mの進行方向の車線中央を連ねた線に対してなす角度を、走行車線に対する自車両Mの相対位置および姿勢として認識してもよい。これに代えて、認識部130は、走行車線のいずれかの側端部(道路区画線または道路境界)に対する自車両Mの代表点の位置等を、走行車線に対する自車両Mの相対位置として認識してもよい。また、認識部130は、第1地図情報54または第2地図情報62に基づいて、道路上の構造物(例えば、電柱、中央分離帯等)を認識してもよい。認識部130の移動量推定部132、歩行者属性判別部134の機能については、後述する。   When recognizing the traveling lane, the recognizing unit 130 recognizes the position and posture of the host vehicle M with respect to the traveling lane. For example, the recognizing unit 130 determines the relative position of the host vehicle M with respect to the travel lane by making an angle between a deviation of the representative point of the host vehicle M from the center of the lane and a line connecting the center of the lane in the traveling direction of the host vehicle M. And may be recognized as a posture. Instead, the recognition unit 130 recognizes the position of the representative point of the host vehicle M with respect to any side edge (road lane line or road boundary) of the traveling lane as the relative position of the host vehicle M with respect to the traveling lane. May be. The recognition unit 130 may recognize a structure on the road (for example, a utility pole, a median strip, etc.) based on the first map information 54 or the second map information 62. The functions of the movement amount estimation unit 132 and the pedestrian attribute determination unit 134 of the recognition unit 130 will be described later.

行動計画生成部140は、原則的には推奨車線決定部61により決定された推奨車線を走行し、更に、自車両Mの周辺状況に対応できるように、自車両Mが自動的に(運転者の操作に依らずに)将来走行する目標軌道を生成する。目標軌道は、自車両Mの代表点が通過する目標となる軌道である。また、目標軌道は、例えば、速度要素を含んでいる。例えば、目標軌道は、自車両Mの到達すべき地点(軌道点)を順に並べたものとして表現される。軌道点は、道なり距離で所定の走行距離(例えば数[m]程度)ごとの自車両Mの到達すべき地点であり、それとは別に、所定のサンプリング時間(例えば0コンマ数[sec]程度)ごとの目標速度および目標加速度が、目標軌道の一部として生成される。また、軌道点は、所定のサンプリング時間ごとの、そのサンプリング時刻における自車両Mの到達すべき位置であってもよい。この場合、目標速度や目標加速度の情報は軌道点の間隔で表現される。   In principle, the action plan generation unit 140 travels in the recommended lane determined by the recommended lane determination unit 61, and the host vehicle M automatically (driver) A target trajectory to be run in the future is generated (independent of the operation of). The target trajectory is a target trajectory through which the representative point of the host vehicle M passes. The target trajectory includes, for example, a speed element. For example, the target track is expressed as a sequence of points (track points) that the host vehicle M should reach. The track point is a point where the host vehicle M should reach every predetermined travel distance (for example, about several [m]) as a road distance. Separately, the track point is a predetermined sampling time (for example, about 0 comma [sec]). ) Is generated as part of the target trajectory. Further, the track point may be a position to which the host vehicle M should arrive at the sampling time for each predetermined sampling time. In this case, information on the target speed and target acceleration is expressed by the interval between the trajectory points.

行動計画生成部140は、目標軌道を生成するにあたり、自動運転のイベントを設定してよい。自動運転のイベントには、定速走行イベント、低速追従走行イベント、車線変更イベント、分岐イベント、合流イベント、テイクオーバーイベント等がある。行動計画生成部140は、起動させたイベントに応じた目標軌道を生成する。行動計画生成部140の迂回走行制御部142の機能については、後述する。   The action plan generation unit 140 may set an automatic driving event when generating the target trajectory. The automatic driving event includes a constant speed driving event, a low speed following driving event, a lane change event, a branch event, a merge event, a takeover event, and the like. The action plan generation unit 140 generates a target trajectory corresponding to the activated event. The function of the detour travel control unit 142 of the action plan generation unit 140 will be described later.

第2制御部160は、行動計画生成部140によって生成された目標軌道を、予定の時刻通りに自車両Mが通過するように、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220を制御する。   The second control unit 160 controls the driving force output device 200, the brake device 210, and the steering device 220 so that the host vehicle M passes the target track generated by the action plan generation unit 140 at a scheduled time. Control.

第2制御部160は、例えば、取得部162と、速度制御部164と、操舵制御部166とを備える。取得部162は、行動計画生成部140により生成された目標軌道(軌道点)の情報を取得し、メモリ(不図示)に記憶させる。速度制御部164は、メモリに記憶された目標軌道に付随する速度要素に基づいて、走行駆動力出力装置200またはブレーキ装置210を制御する。操舵制御部166は、メモリに記憶された目標軌道の曲がり具合に応じて、ステアリング装置220を制御する。速度制御部164および操舵制御部166の処理は、例えば、フィードフォワード制御とフィードバック制御との組み合わせにより実現される。一例として、操舵制御部166は、自車両Mの前方の道路の曲率に応じたフィードフォワード制御と、目標軌道からの乖離に基づくフィードバック制御とを組み合わせて実行する。   The second control unit 160 includes, for example, an acquisition unit 162, a speed control unit 164, and a steering control unit 166. The acquisition unit 162 acquires information on the target trajectory (orbit point) generated by the action plan generation unit 140 and stores it in a memory (not shown). The speed control unit 164 controls the travel driving force output device 200 or the brake device 210 based on a speed element associated with the target track stored in the memory. The steering control unit 166 controls the steering device 220 according to the degree of bending of the target trajectory stored in the memory. The processing of the speed control unit 164 and the steering control unit 166 is realized by, for example, a combination of feedforward control and feedback control. As an example, the steering control unit 166 executes a combination of feed-forward control corresponding to the curvature of the road ahead of the host vehicle M and feedback control based on deviation from the target track.

走行駆動力出力装置200は、車両が走行するための走行駆動力(トルク)を駆動輪に出力する。走行駆動力出力装置200は、例えば、内燃機関、電動機、および変速機等の組み合わせと、これらを制御するECUとを備える。ECUは、第2制御部160から入力される情報、或いは運転操作子80から入力される情報に従って、上記の構成を制御する。   The traveling driving force output device 200 outputs a traveling driving force (torque) for traveling of the vehicle to driving wheels. The traveling driving force output device 200 includes, for example, a combination of an internal combustion engine, an electric motor, a transmission, and the like, and an ECU that controls these. The ECU controls the above-described configuration according to information input from the second control unit 160 or information input from the driving operator 80.

ブレーキ装置210は、例えば、ブレーキキャリパーと、ブレーキキャリパーに油圧を伝達するシリンダと、シリンダに油圧を発生させる電動モータと、ブレーキECUとを備える。ブレーキECUは、第2制御部160から入力される情報、或いは運転操作子80から入力される情報に従って電動モータを制御し、制動操作に応じたブレーキトルクが各車輪に出力されるようにする。ブレーキ装置210は、運転操作子80に含まれるブレーキペダルの操作によって発生させた油圧を、マスターシリンダを介してシリンダに伝達する機構をバックアップとして備えてよい。なお、ブレーキ装置210は、上記説明した構成に限らず、第2制御部160から入力される情報に従ってアクチュエータを制御して、マスターシリンダの油圧をシリンダに伝達する電子制御式油圧ブレーキ装置であってもよい。   The brake device 210 includes, for example, a brake caliper, a cylinder that transmits hydraulic pressure to the brake caliper, an electric motor that generates hydraulic pressure in the cylinder, and a brake ECU. The brake ECU controls the electric motor in accordance with the information input from the second control unit 160 or the information input from the driving operation element 80 so that the brake torque corresponding to the braking operation is output to each wheel. The brake device 210 may include, as a backup, a mechanism that transmits the hydraulic pressure generated by operating the brake pedal included in the driving operation element 80 to the cylinder via the master cylinder. The brake device 210 is not limited to the configuration described above, and is an electronically controlled hydraulic brake device that controls the actuator according to information input from the second control unit 160 and transmits the hydraulic pressure of the master cylinder to the cylinder. Also good.

ステアリング装置220は、例えば、ステアリングECUと、電動モータとを備える。電動モータは、例えば、ラックアンドピニオン機構に力を作用させて転舵輪の向きを変更する。ステアリングECUは、第2制御部160から入力される情報、或いは運転操作子80から入力される情報に従って、電動モータを駆動し、転舵輪の向きを変更させる。   The steering device 220 includes, for example, a steering ECU and an electric motor. For example, the electric motor changes the direction of the steered wheels by applying a force to a rack and pinion mechanism. The steering ECU drives the electric motor according to the information input from the second control unit 160 or the information input from the driving operator 80, and changes the direction of the steered wheels.

[迂回走行制御部の機能]
迂回走行制御部142は、認識部130により自車両Mが走行する道路の進行方向に歩行者が存在すると認識された場合に、歩行者を迂回して走行する制御を行う。以下では、専ら自車両Mの進行方向と同方向に移動する歩行者を追い越して歩行者を迂回する場合について図示および説明するが、これに限らず、自車両Mの進行方向と反対方向に移動する歩行者を回避して迂回する場合にも同様に適用可能である。
[Function of detour travel control unit]
The detour travel control unit 142 performs control to detour around the pedestrian when the recognition unit 130 recognizes that the pedestrian is present in the traveling direction of the road on which the host vehicle M travels. In the following, the case where the pedestrian moving in the same direction as the traveling direction of the own vehicle M is overtaken to bypass the pedestrian is illustrated and described, but the present invention is not limited to this, and the moving direction is opposite to the traveling direction of the own vehicle M. The present invention can be similarly applied to a case where a pedestrian is avoided to make a detour.

迂回走行制御部142は、認識部130により自車両Mが走行する道路の進行方向に歩行者が存在すると認識された場合に、存在する歩行者の数に基づいて自車両Mが歩行者を追い越すための目標軌道を生成する。図3は、自車両Mの進行方向に単独の歩行者が存在する場合における迂回走行制御部142の処理の一例を示す図である。図3の例では、左右の道路区画線LL、LRで区画された道路R1を走行する自車両Mの進行方向に、単独の歩行者P1が存在しているものとする。単独の歩行者とは、例えば、他の歩行者との距離が所定距離(例えば、数[m]程度)以上離れている歩行者である。また、図3の例において、自車両Mは、歩行者P1の右側を通過して追い越し運転を行うものとする。   When the recognizing unit 130 recognizes that a pedestrian is present in the traveling direction of the road on which the host vehicle M travels, the detour traveling control unit 142 passes the pedestrian based on the number of pedestrians present. Generate a target trajectory for. FIG. 3 is a diagram illustrating an example of processing of the detour traveling control unit 142 when a single pedestrian exists in the traveling direction of the host vehicle M. In the example of FIG. 3, it is assumed that a single pedestrian P1 exists in the traveling direction of the host vehicle M traveling on the road R1 partitioned by the left and right road lane markings LL and LR. A single pedestrian is, for example, a pedestrian whose distance from another pedestrian is a predetermined distance (for example, about several [m]) or more. Moreover, in the example of FIG. 3, the own vehicle M shall pass the right side of the pedestrian P1 and shall perform an overtaking driving | operation.

例えば、迂回走行制御部142は、認識部130により自車両Mの進行方向に存在する歩行者P1が認識された場合に、歩行者P1の輪郭情報に基づいて、歩行者P1と接触する可能性があると推定される接触推定領域Pa1を設定する。また、迂回走行制御部142は、設定された接触推定領域Pa1に接触することなく、歩行者P1を追い越すための目標軌道K1を生成する。   For example, when the recognizing unit 130 recognizes the pedestrian P1 existing in the traveling direction of the host vehicle M, the detour traveling control unit 142 may contact the pedestrian P1 based on the contour information of the pedestrian P1. A contact estimation area Pa1 that is estimated to be present is set. Further, the detour travel control unit 142 generates a target trajectory K1 for overtaking the pedestrian P1 without touching the set contact estimation area Pa1.

まず、迂回走行制御部142は、自車両Mの中心(例えば、重心G)が通過する目標軌道K1を仮に設定し、仮に設定した目標軌道K1を横方向(道路幅方向;図中Y方向)に、自車両Mの左端部までの距離D1だけオフセットした左オフセット軌道KL1を生成する。そして、迂回走行制御部142は、歩行者P1を右側から追い越す場合に、左オフセット軌道KL1と接触推定領域Pa1との距離が第1最小間隔W1以上となるように目標軌道K1を生成する。   First, the detour travel control unit 142 temporarily sets a target track K1 through which the center of the host vehicle M (for example, the center of gravity G) passes, and sets the temporarily set target track K1 in the horizontal direction (road width direction; Y direction in the figure). In addition, a left offset track KL1 that is offset by a distance D1 to the left end of the host vehicle M is generated. Then, the detour travel control unit 142 generates the target trajectory K1 such that the distance between the left offset trajectory KL1 and the estimated contact area Pa1 is equal to or greater than the first minimum interval W1 when passing the pedestrian P1 from the right side.

また、迂回走行制御部142は、左オフセット軌道KL1に加えて、仮に設定した目標軌道K1を横方向に、自車両Mの右側の車輪までの距離D2だけオフセットした右オフセット軌道KR1を生成してもよい。この場合、迂回走行制御部142は、左オフセット軌道KL1と接触推定領域Pa1との距離が第1最小間隔W1以上となり、且つ、右オフセット軌道KR1が道路区画線LRを超えないように目標軌道K1を生成する。これにより、自車両Mは、道路R1からはみ出ることなく、歩行者P1を追い越すことができる。   In addition to the left offset trajectory KL1, the detour travel control unit 142 generates a right offset trajectory KR1 obtained by offsetting the temporarily set target trajectory K1 by a distance D2 to the right wheel of the host vehicle M. Also good. In this case, the detour travel control unit 142 sets the target trajectory K1 so that the distance between the left offset trajectory KL1 and the contact estimation area Pa1 is not less than the first minimum interval W1 and the right offset trajectory KR1 does not exceed the road marking line LR. Is generated. Thereby, the own vehicle M can pass the pedestrian P1 without protruding from the road R1.

また、迂回走行制御部142は、認識部130により自車両Mの進行方向に複数の歩行者が存在すると認識され、且つ認識された複数の歩行者を追い越す場合に、自車両Mと、自車両Mに最も近い歩行者との距離を、第1最小間隔W1よりも大きい第2最小間隔以上とする。複数の歩行者とは、例えば、歩行者間の距離が所定距離(例えば、数[m]程度)未満に存在する二以上の歩行者である。また、複数の歩行者とは、歩行者間の距離が所定距離未満であることに加えて、移動方向または移動速度が所定範囲内の歩行者、或いは横方向に並んだ位置に存在する二以上の歩行者であってもよい。また、「最も近い」とは、例えば、自車両Mの外周面からの距離、自車両Mの重心からの距離、自車両Mの認知部(例えば、カメラ10やレーダ装置12、ファインダ14等)からの距離を基準にしてもよい。   Further, the detour travel control unit 142 recognizes that there are a plurality of pedestrians in the traveling direction of the host vehicle M by the recognition unit 130 and passes the recognized plurality of pedestrians. The distance from the pedestrian closest to M is equal to or greater than the second minimum interval that is greater than the first minimum interval W1. The plurality of pedestrians are, for example, two or more pedestrians whose distance between pedestrians is less than a predetermined distance (for example, about several [m]). Moreover, in addition to the distance between pedestrians being less than a predetermined distance, a plurality of pedestrians are pedestrians whose movement direction or movement speed is within a predetermined range, or two or more existing in a side-by-side position. May be a pedestrian. Further, “closest” means, for example, the distance from the outer peripheral surface of the host vehicle M, the distance from the center of gravity of the host vehicle M, and the recognition unit of the host vehicle M (for example, the camera 10, the radar device 12, the finder 14). The distance from may be used as a reference.

図4は、自車両Mの進行方向に複数の歩行者が存在する場合における迂回走行制御部142の処理の一例を示す図である。図4の例では、道路R1を走行する自車両Mの進行方向に、複数の歩行者P1およびP2が存在しているものとする。この場合、迂回走行制御部142は、自車両Mが歩行者P1およびP2を追い越す目標軌道を生成する。   FIG. 4 is a diagram illustrating an example of processing of the detour travel control unit 142 when a plurality of pedestrians exist in the traveling direction of the host vehicle M. In the example of FIG. 4, it is assumed that there are a plurality of pedestrians P1 and P2 in the traveling direction of the host vehicle M traveling on the road R1. In this case, the detour travel control unit 142 generates a target track on which the host vehicle M passes the pedestrians P1 and P2.

自車両Mが歩行者P1およびP2を追い越す目標軌道を生成する場合、迂回走行制御部142は、図4に示すように、自車両Mから見て最も近い方の歩行者P1の接触推定領域Pa1に接触することなく、歩行者P1およびP2を追い越すための目標軌道K1+を生成する。具体的には、迂回走行制御部142は、複数の歩行者P1,P2を追い越す場合に、左オフセット軌道KL1と接触推定領域Pa1との距離を第1最小間隔W1よりも大きい第2最小間隔W2以上とし、第2最小間隔W2以上となる位置を左オフセット軌道KL1が通過するように目標軌道K1+を生成する。なお、第2最小間隔W2は、第1最小間隔W1に比して、固定の間隔(例えば、0.5[m]程度)だけ大きくしてもよく、認識部130により認識された歩行者P1の歩幅に基づく間隔だけ大きくしてもよい。   When the host vehicle M generates a target track overtaking the pedestrians P1 and P2, the detour travel control unit 142, as shown in FIG. 4, the contact estimation area Pa1 of the pedestrian P1 closest to the host vehicle M The target trajectory K1 + for overtaking the pedestrians P1 and P2 is generated without touching. Specifically, the detour travel control unit 142, when overtaking a plurality of pedestrians P1 and P2, the second minimum interval W2 that is larger than the first minimum interval W1 with the distance between the left offset trajectory KL1 and the estimated contact area Pa1. As described above, the target trajectory K1 + is generated so that the left offset trajectory KL1 passes through a position that is equal to or greater than the second minimum interval W2. Note that the second minimum interval W2 may be larger than the first minimum interval W1 by a fixed interval (for example, about 0.5 [m]), and the pedestrian P1 recognized by the recognition unit 130. The interval based on the step length may be increased.

このように、複数の歩行者が複数する場合には、ある歩行者の挙動によって、他の歩行者の挙動が連鎖的に広がり、単独の場合よりも大きく移動する可能性があるため、自車両Mと最も近い歩行者との距離を単独の歩行者が存在する場合よりも大きくすることで、歩行者との接触可能性を低減させることができ、より好適な運転制御を実行することができる。   In this way, when there are a plurality of pedestrians, the behavior of one pedestrian causes the behavior of the other pedestrians to spread in a chain and move more than in the case of a single pedestrian. By making the distance between M and the nearest pedestrian larger than when there is a single pedestrian, the possibility of contact with the pedestrian can be reduced, and more suitable driving control can be executed. .

また、迂回走行制御部142は、認識部130により自車両Mの進行方向に複数の歩行者が認識された場合に、移動量推定部132により推定された複数の歩行者のそれぞれの横方向への移動量に基づいて、第2最小間隔を調整してもよい。図5は、複数の歩行者の横方向への移動量に基づく迂回走行制御部142の処理の一例を示す図である。図5の例では、歩行者P1およびP2のそれぞれが右斜め前方に向かって速度Vp1およびVp2で歩行しているものとする。歩行者P1は、道路R1の延在方向(図中X方向)中央から近い方に存在する歩行者である。歩行者P2は、道路R1の延在方向(図中X方向)中央から遠い方に存在する歩行者である。   Further, when the recognition unit 130 recognizes a plurality of pedestrians in the traveling direction of the host vehicle M, the detour travel control unit 142 moves in the lateral direction of the plurality of pedestrians estimated by the movement amount estimation unit 132. The second minimum interval may be adjusted based on the amount of movement. FIG. 5 is a diagram illustrating an example of processing of the detour travel control unit 142 based on the amount of movement of a plurality of pedestrians in the lateral direction. In the example of FIG. 5, it is assumed that each of the pedestrians P1 and P2 is walking at the speeds Vp1 and Vp2 diagonally forward to the right. The pedestrian P1 is a pedestrian that is present closer to the center in the extending direction (X direction in the figure) of the road R1. The pedestrian P2 is a pedestrian existing in a direction far from the center in the extending direction (X direction in the drawing) of the road R1.

[移動量推定部の機能]
移動量推定部132は、認識部130により自車両Mの進行方向に複数の歩行者P1およびP2の存在が認識された場合に、それぞれの移動量のうち、横方向に関する移動量xp1およびxp2を推定する。移動量xp1およびxp2は、例えば、歩行者P1およびP2が道路R1の外側(例えば、区画線LL)から内側(例えば、道路中央)に向かって横方向に移動する移動量である。また、移動量xp1およびxp2は、歩行者P1およびP2が、自車両Mに追い越される側に向かって横方向に移動する移動量であってもよい。
[Function of movement estimation unit]
When the recognition unit 130 recognizes the presence of a plurality of pedestrians P1 and P2 in the traveling direction of the host vehicle M, the movement amount estimation unit 132 calculates the movement amounts xp1 and xp2 in the lateral direction among the respective movement amounts. presume. The movement amounts xp1 and xp2 are, for example, movement amounts by which the pedestrians P1 and P2 move laterally from the outside (for example, the lane marking LL) toward the inside (for example, the center of the road) of the road R1. Further, the movement amounts xp1 and xp2 may be movement amounts in which the pedestrians P1 and P2 move laterally toward the side overtaken by the host vehicle M.

また、移動量推定部132は、それぞれの移動量xp1、xp2に基づいて、歩行者P2が歩行者P1に接近しているかを判定してもよい。この場合、移動量推定部132は、例えば、歩行者P1に対する歩行者P2の横方向に関する相対移動量xr(=xp2−xp1)を導出し、導出した相対移動量xrがゼロ(0)より大きい場合に、歩行者P2が歩行者P1に接近していると判定し、相対移動量xrがゼロ以下である場合に、歩行者P2が歩行者P1に接近していないと判定する。   Further, the movement amount estimation unit 132 may determine whether the pedestrian P2 is approaching the pedestrian P1 based on the respective movement amounts xp1 and xp2. In this case, for example, the movement amount estimation unit 132 derives a relative movement amount xr (= xp2−xp1) in the lateral direction of the pedestrian P2 with respect to the pedestrian P1, and the derived relative movement amount xr is greater than zero (0). In this case, it is determined that the pedestrian P2 is approaching the pedestrian P1, and when the relative movement amount xr is equal to or less than zero, it is determined that the pedestrian P2 is not approaching the pedestrian P1.

迂回走行制御部142は、移動量推定部132により歩行者P2が歩行者P1に接近していると判定された場合に、図5に示すように、自車両Mと歩行者P1との距離を第2最小間隔W2よりも大きい第3最小間隔W3以上とする。このように、歩行者P2が歩行者P1に接近した場合には、将来、歩行者P1が現在よりも更に横方向に移動してくることを予測して、最小間隔を大きくすることで、歩行者との将来における接触可能性も低減させることができ、より好適な運転制御を実行することができる。   When the travel estimation unit 132 determines that the pedestrian P2 is approaching the pedestrian P1, the detour travel control unit 142 determines the distance between the host vehicle M and the pedestrian P1 as shown in FIG. The third minimum interval W3 is greater than the second minimum interval W2, and is greater than or equal to the third minimum interval W3. As described above, when the pedestrian P2 approaches the pedestrian P1, the pedestrian P1 predicts that the pedestrian P1 will move further in the lateral direction in the future, and the walking is performed by increasing the minimum interval. The possibility of future contact with the person can also be reduced, and more suitable operation control can be executed.

また、迂回走行制御部142は、移動量推定部132により歩行者P2が歩行者P1に接近していないと判定された場合には、自車両Mと歩行者P1との距離を第2最小間隔W2のままにしてもよく、相対移動量xrの大きさに基づいて、第2最小間隔W2を調整してもよい。この場合、相対移動量xrが負の値である場合には、歩行者P1と歩行者P2との距離が離れるため、歩行者P1は、歩行者P2の挙動による影響を受けにくい。そのため、迂回走行制御部142は、第2最小間隔W2を、歩行者P1の移動量xp1のみに基づいて、第3最小間隔W3未満の範囲で調整する。   Further, when the movement amount estimation unit 132 determines that the pedestrian P2 is not approaching the pedestrian P1, the detour travel control unit 142 determines the distance between the host vehicle M and the pedestrian P1 as the second minimum interval. The second minimum interval W2 may be adjusted based on the magnitude of the relative movement amount xr. In this case, when the relative movement amount xr is a negative value, since the distance between the pedestrian P1 and the pedestrian P2 is increased, the pedestrian P1 is not easily affected by the behavior of the pedestrian P2. Therefore, the detour travel control unit 142 adjusts the second minimum interval W2 based on only the movement amount xp1 of the pedestrian P1 within a range less than the third minimum interval W3.

また、迂回走行制御部142は、歩行者属性判別部134により判別された歩行者の属性に基づいて、第3最小間隔W3を調整してもよい。図6は、歩行者の属性に基づく迂回走行制御部142の処理の一例を示す図(その1)である。   Further, the detour travel control unit 142 may adjust the third minimum interval W3 based on the attribute of the pedestrian determined by the pedestrian attribute determination unit 134. FIG. 6 is a diagram (part 1) illustrating an example of processing of the detour travel control unit 142 based on the attribute of the pedestrian.

[歩行者属性判別部の機能]
歩行者属性判別部134は、認識部130により自車両Mの進行方向に複数の歩行者が存在する場合に、それぞれの歩行者の属性を判別する。属性とは、例えば、大人であるか子供であるかを判別した結果である。また、属性とは、性別、年齢を判別した結果でもよい。歩行者属性判別部134は、例えば、カメラ10によって撮像された画像を解析して、画像に含まれる自車両Mの進行方向に存在する複数の歩行者のそれぞれの身長を推定し、推定された身長が、所定値以上である歩行者を大人と判別し、所定値未満の歩行者を子供と判別する。
[Function of pedestrian attribute discriminator]
When there are a plurality of pedestrians in the traveling direction of the host vehicle M by the recognition unit 130, the pedestrian attribute determination unit 134 determines the attribute of each pedestrian. The attribute is, for example, a result of determining whether an adult or a child. Further, the attribute may be a result of discrimination of gender and age. The pedestrian attribute discriminating unit 134 analyzes, for example, an image captured by the camera 10, and estimates and estimates the heights of a plurality of pedestrians existing in the traveling direction of the host vehicle M included in the image. A pedestrian whose height is equal to or greater than a predetermined value is determined as an adult, and a pedestrian whose height is less than the predetermined value is determined as a child.

また、歩行者属性判別部134は、歩行者の服装に基づいて属性を判別してもよい。この場合、歩行者属性判別部134は、カメラ10によって撮像された画像を解析し、解析結果により歩行者がランドセルを背負っていると判定される場合に、その歩行者を子供と判別する。また、歩行者属性判別部134は、複数の歩行者に対する属性比率(例えば、大人25%、子供75%)を判別してもよい。   Moreover, the pedestrian attribute discrimination | determination part 134 may discriminate | determine an attribute based on clothes of a pedestrian. In this case, the pedestrian attribute determination unit 134 analyzes the image captured by the camera 10, and determines that the pedestrian is a child when it is determined that the pedestrian carries the school bag based on the analysis result. Moreover, the pedestrian attribute discrimination | determination part 134 may discriminate | determine the attribute ratio (For example, 25% of adults, 75% of children) with respect to several pedestrians.

図6の例において、歩行者属性判別部134は、歩行者P1を大人と判別し、歩行者P2を子供と判別したものとする。また、移動量推定部132は、歩行者P2の横方向の移動量xp2を推定したものとする。この場面において、歩行者P1は大人であるため、歩行者P2の移動量xp2に起因する歩行者P1の将来の横方向の移動量xp1#は、移動量xp2よりも小さくなることが予測される。したがって、迂回走行制御部142は、歩行者P2の移動量xp2に1未満の係数を乗算して、歩行者P1の将来の横方向の移動量xp1#を導出する。そして、迂回走行制御部142は、導出した移動量xp1#の大きさに基づいて、第3最小間隔W3を調整する。   In the example of FIG. 6, the pedestrian attribute determination unit 134 determines that the pedestrian P1 is an adult and the pedestrian P2 is a child. Further, it is assumed that the movement amount estimation unit 132 estimates the movement amount xp2 in the lateral direction of the pedestrian P2. In this scene, since the pedestrian P1 is an adult, the future lateral movement amount xp1 # of the pedestrian P1 due to the movement amount xp2 of the pedestrian P2 is predicted to be smaller than the movement amount xp2. . Therefore, the detour travel control unit 142 multiplies the movement amount xp2 of the pedestrian P2 by a coefficient less than 1 to derive the future lateral movement amount xp1 # of the pedestrian P1. Then, the detour travel control unit 142 adjusts the third minimum interval W3 based on the derived amount of movement xp1 #.

図7は、歩行者の属性に基づく迂回走行制御部142の処理の一例を示す図(その2)である。図7の例において、歩行者属性判別部134は、歩行者P1およびP2を子供と判別したものとする。また、移動量推定部132は、歩行者P2の横方向の移動量xp2を推定したものとする。この場面において、歩行者P2が横方向に移動量xp2だけ移動すると、歩行者P1も子供であるため、接近する歩行者P2の移動量xp2に起因して横方向へ大きく移動することが予測される。そのため、迂回走行制御部142は、例えば、歩行者P2の移動量xp2に1より大きい値の係数を乗算して、歩行者P1の将来の横方向への移動量xp1##を導出する。そして、迂回走行制御部142は、導出した移動量xp1##の大きさに基づいて、第3最小間隔W3を調整する。具体的には、迂回走行制御部142は、移動量xp1##に基づく第3最小間隔W3の調整量を、移動量xp1#の場合に比して大きくする。   FIG. 7 is a diagram (part 2) illustrating an example of processing of the detour travel control unit 142 based on the attribute of the pedestrian. In the example of FIG. 7, it is assumed that the pedestrian attribute determination unit 134 has determined pedestrians P1 and P2 as children. Further, it is assumed that the movement amount estimation unit 132 estimates the movement amount xp2 in the lateral direction of the pedestrian P2. In this scene, when the pedestrian P2 moves in the horizontal direction by the movement amount xp2, since the pedestrian P1 is also a child, it is predicted that the pedestrian P2 moves greatly in the horizontal direction due to the movement amount xp2 of the approaching pedestrian P2. The Therefore, for example, the detour travel control unit 142 multiplies the movement amount xp2 of the pedestrian P2 by a coefficient having a value larger than 1 to derive the future lateral movement amount xp1 ## of the pedestrian P1. Then, the detour travel control unit 142 adjusts the third minimum interval W3 based on the derived amount of movement xp1 ##. Specifically, the detour travel control unit 142 increases the adjustment amount of the third minimum interval W3 based on the movement amount xp1 ## as compared with the case of the movement amount xp1 #.

また、迂回走行制御部142は、歩行者属性判別部134により歩行者P1が女性の大人と判別された場合には、男性の大人と判別された場合に比して、第3最小間隔W3を大きくしてもよい。また、迂回走行制御部142は、歩行者属性判別部134により歩行者P1が高齢者(例えば、60歳以上)と判別された場合には、30歳と判別された場合に比して、第3最小間隔W3を大きくしてもよい。また、迂回走行制御部142は、歩行者属性判別部134により判別される複数の歩行者に対する属性比率に基づいて、第3最小間隔W3を大きくしてもよい。   Further, when the pedestrian attribute determination unit 134 determines that the pedestrian P1 is a female adult, the detour travel control unit 142 sets the third minimum interval W3 as compared to the case where the pedestrian P1 is determined to be a male adult. You may enlarge it. In addition, the detour travel control unit 142 is configured such that when the pedestrian attribute determination unit 134 determines that the pedestrian P1 is an elderly person (for example, 60 years or older), the detour travel control unit 142 3 The minimum interval W3 may be increased. Further, the detour travel control unit 142 may increase the third minimum interval W3 based on the attribute ratio for a plurality of pedestrians determined by the pedestrian attribute determination unit 134.

このように、複数の歩行者のそれぞれの属性や、複数の歩行者の属性比率に基づいて第3最小間隔を調整することで、歩行者の属性に対応する連鎖的な移動量の広がりに対して、自車両Mと歩行者との距離を好適な間隔に保つことができる。 In this way, by adjusting the third minimum interval based on the attributes of each of the plurality of pedestrians and the attribute ratio of the plurality of pedestrians, the spread of chain movement corresponding to the attributes of the pedestrians can be reduced. Thus, the distance between the host vehicle M and the pedestrian can be maintained at a suitable interval.

また、迂回走行制御部142は、自車両Mの進行方向に存在する歩行者の数が多くなるほど、第3最小間隔W3を大きくしてもよい。また、迂回走行制御部142は、三以上の歩行者が存在する場合には、自車両Mに最も近い歩行者以外の歩行者のそれぞれの移動量を導出し、導出したそれぞれの移動量の平均値や最大値等に基づいて、自車両Mに最も近い歩行者の移動量を予測し、予測した移動量に基づいて、第3最小間隔W3を調整してもよい。また、迂回走行制御部142は、三以上の歩行者のうち、横方向に移動する歩行者の数や順番に基づいて第3最小間隔W3を調整してもよい。   Further, the detour travel control unit 142 may increase the third minimum interval W3 as the number of pedestrians present in the traveling direction of the host vehicle M increases. Further, when there are three or more pedestrians, the detour travel control unit 142 derives the movement amounts of pedestrians other than the pedestrian closest to the host vehicle M, and averages the derived movement amounts. The movement amount of the pedestrian closest to the host vehicle M may be predicted based on the value, the maximum value, etc., and the third minimum interval W3 may be adjusted based on the predicted movement amount. Further, the detour travel control unit 142 may adjust the third minimum interval W3 based on the number and order of pedestrians moving in the horizontal direction among the three or more pedestrians.

[処理フロー]
図8は、実施形態の自動運転制御装置100により実行される処理の流れを示すフローチャートである。本フローチャートの処理は、例えば、所定の周期或いは所定のタイミングで繰り返し実行されてよい。また、本フローチャートの開始時には、行動計画生成部140により目標軌道が生成され、生成された目標軌道に基づいて第2制御部160により自動運転が実行されているものとする。
[Processing flow]
FIG. 8 is a flowchart illustrating a flow of processing executed by the automatic operation control device 100 according to the embodiment. The process of this flowchart may be repeatedly executed at a predetermined cycle or a predetermined timing, for example. In addition, at the start of this flowchart, it is assumed that a target trajectory is generated by the action plan generation unit 140, and automatic operation is executed by the second control unit 160 based on the generated target trajectory.

図8の例において、行動計画生成部140は、認識部130により自車両Mの進行方向に存在する歩行者が認識されたか否かを判定する(ステップS100)。歩行者が認識されたと判定された場合、歩行者が単独の歩行者であるか否かを判定する(ステップS102)。歩行者が単独の歩行者である場合、迂回走行制御部142は、自車両Mと歩行者との距離が第1最小間隔以上となる目標軌道を生成する(ステップS104)。   In the example of FIG. 8, the action plan generation unit 140 determines whether or not a pedestrian existing in the traveling direction of the host vehicle M has been recognized by the recognition unit 130 (step S100). When it is determined that the pedestrian has been recognized, it is determined whether or not the pedestrian is a single pedestrian (step S102). When the pedestrian is a single pedestrian, the detour travel control unit 142 generates a target trajectory in which the distance between the host vehicle M and the pedestrian is equal to or greater than the first minimum interval (step S104).

また、歩行者が単独でない場合、複数の歩行者のうち、道路の延在方向中央から遠い方の歩行者が、近い方の歩行者に接近したか否かを判定する(ステップS106)。道路の延在方向中央から遠い方の歩行者が、近い方の歩行者に接近していないと判定された場合、迂回走行制御部142は、自車両Mと、自車両Mから最も近い歩行者との距離が、第1最小間隔よりも大きい第2最小間隔以上となる目標軌道を生成する(ステップS108)。また、道路の延在方向中央から遠い方の歩行者が、近い方の歩行者に接近したと判定された場合、迂回走行制御部142は、自車両Mと、自車両Mから最も近い歩行者との距離が、第2最小間隔よりも大きい第3最小間隔以上となる目標軌道を生成する(ステップS110)。   Moreover, when a pedestrian is not single, it is determined whether the pedestrian far from the center of the road extension direction approached the near pedestrian among several pedestrians (step S106). When it is determined that a pedestrian far from the center of the road extending direction is not approaching a pedestrian closer to the road, the detour travel control unit 142 determines that the pedestrian closest to the host vehicle M and the host vehicle M. A target trajectory is generated such that the distance to the second minimum interval is greater than the first minimum interval (step S108). Further, when it is determined that a pedestrian far from the center of the road extending direction has approached a pedestrian closer to the road, the detour travel control unit 142 determines that the pedestrian closest to the host vehicle M and the host vehicle M. A target trajectory is generated such that the distance to the second minimum interval is greater than or equal to the third minimum interval (step S110).

また、ステップS100の処理において、自車両の進行方向に存在する歩行者が認識されなかったと判定された場合、行動計画生成部140は、周辺状況に基づいて目標軌道を生成する(ステップS112)。次に、第2制御部160は、ステップS104、S108、S110、またはS112の処理により生成された目標軌道に沿って、自車両Mを走行させる(ステップS114)。これにより、本フローチャートの処理は、終了する。   Moreover, when it determines with the process of step S100 not having recognized the pedestrian who exists in the advancing direction of the own vehicle, the action plan production | generation part 140 produces | generates a target track | orbit based on a surrounding condition (step S112). Next, the second control unit 160 causes the host vehicle M to travel along the target track generated by the process of step S104, S108, S110, or S112 (step S114). Thereby, the process of this flowchart is complete | finished.

上述した実施形態によれば、車両制御装置において、車両の周辺状況を認識する認識部130と、認識部130により認識された周辺状況に基づいて少なくとも自車両Mの操舵を自動的に制御する運転制御部140,160と、を備え、運転制御部140、160は、認識部130により自車両Mの進行方向に単独の歩行者が認識された場合に、自車両Mと歩行者との距離を第1最小間隔以上とし、認識部130により自車両Mの進行方向に複数の歩行者が認識された場合に、自車両Mと自車両Mに最も近い歩行者との距離を第1最小間隔よりも大きい第2最小間隔以上とすることにより、自車両Mの進行方向に存在する歩行者との接触を回避する運転制御を、より好適に実行することができる。   According to the above-described embodiment, in the vehicle control device, the recognition unit 130 that recognizes the surrounding situation of the vehicle, and the driving that automatically controls at least the steering of the host vehicle M based on the surrounding situation recognized by the recognition unit 130. Control units 140 and 160, and when the recognition unit 130 recognizes a single pedestrian in the traveling direction of the host vehicle M, the driving control units 140 and 160 determine the distance between the host vehicle M and the pedestrian. When the recognition unit 130 recognizes a plurality of pedestrians in the traveling direction of the host vehicle M, the distance between the host vehicle M and the pedestrian closest to the host vehicle M is greater than the first minimum interval. By setting it to be larger than the second minimum minimum interval, it is possible to more suitably execute the driving control that avoids contact with a pedestrian existing in the traveling direction of the host vehicle M.

具体的には、本実施形態によれば、自車両Mの進行方向に複数の歩行者が存在する場合に、歩行者が単独の場合よりも歩行者との最小間隔が大きくなるように制御することで、複数の歩行者の移動による連鎖的な広がりを考慮して、好適な間隔を保つことができる。   Specifically, according to the present embodiment, when there are a plurality of pedestrians in the traveling direction of the host vehicle M, control is performed so that the minimum distance from the pedestrian is larger than when the pedestrian is alone. Thus, it is possible to maintain a suitable interval in consideration of a chain spread due to the movement of a plurality of pedestrians.

[ハードウェア構成]
図9は、実施形態の自動運転制御装置100のハードウェア構成の一例を示す図である。図示するように、自動運転制御装置100は、通信コントローラ100−1、CPU100−2、ワーキングメモリとして使用されるRAM100−3、ブートプログラム等を格納するROM100−4、フラッシュメモリやHDD等の記憶装置100−5、ドライブ装置100−6等が、内部バスあるいは専用通信線によって相互に接続された構成となっている。通信コントローラ100−1は、自動運転制御装置100以外の構成要素との通信を行う。記憶装置100−5には、CPU100−2が実行するプログラム100−5aが格納されている。このプログラムは、DMA(Direct Memory Access)コントローラ(不図示)等によってRAM100−3に展開されて、CPU100−2によって実行される。これによって、自動運転制御装置100の第1制御部120および第2制御部160のうち一部または全部が実現される。
[Hardware configuration]
FIG. 9 is a diagram illustrating an example of a hardware configuration of the automatic driving control apparatus 100 according to the embodiment. As shown in the figure, the automatic operation control device 100 includes a communication controller 100-1, a CPU 100-2, a RAM 100-3 used as a working memory, a ROM 100-4 for storing a boot program, a storage device such as a flash memory and an HDD. 100-5, drive device 100-6, etc. are connected to each other by an internal bus or a dedicated communication line. The communication controller 100-1 communicates with components other than the automatic operation control device 100. The storage device 100-5 stores a program 100-5a executed by the CPU 100-2. This program is expanded in the RAM 100-3 by a DMA (Direct Memory Access) controller (not shown) or the like and executed by the CPU 100-2. Thereby, a part or all of the first control unit 120 and the second control unit 160 of the automatic driving control apparatus 100 is realized.

上記説明した実施形態は、以下のように表現することができる。
プログラムを記憶した記憶装置と、
ハードウェアプロセッサと、を備え、
前記ハードウェアプロセッサは、前記記憶装置に記憶されたプログラムを実行することにより、
車両の周辺状況を認識し、
認識された前記周辺状況に基づいて少なくとも前記車両の操舵を自動的に制御し、
前記車両の進行方向に単独の歩行者が認識された場合に、前記車両と歩行者との距離を第1最小間隔以上とし、前記車両の進行方向に複数の歩行者が認識された場合に、前記車両と前記車両に最も近い歩行者との距離を前記第1最小間隔よりも大きい第2最小間隔以上とするように、前記車両の操舵を自動的に制御する、
ように構成されている、車両制御装置。
The embodiment described above can be expressed as follows.
A storage device storing the program;
A hardware processor,
The hardware processor executes a program stored in the storage device,
Recognize the situation around the vehicle,
Automatically controlling at least steering of the vehicle based on the recognized surrounding situation;
When a single pedestrian is recognized in the traveling direction of the vehicle, the distance between the vehicle and the pedestrian is set to a first minimum interval or more, and when a plurality of pedestrians are recognized in the traveling direction of the vehicle, Automatically controlling the steering of the vehicle so that the distance between the vehicle and a pedestrian closest to the vehicle is equal to or greater than a second minimum interval greater than the first minimum interval;
A vehicle control device configured as described above.

以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。   As mentioned above, although the form for implementing this invention was demonstrated using embodiment, this invention is not limited to such embodiment at all, In the range which does not deviate from the summary of this invention, various deformation | transformation and substitution Can be added.

1…車両システム、10…カメラ、12…レーダ装置、14…ファインダ、16…物体認識装置、20…通信装置、30…HMI、40…車両センサ、50…ナビゲーション装置、60…MPU、80…運転操作子、100…自動運転制御装置、120…第1制御部、130…認識部、132…移動量推定部、134…歩行者属性判別部、140…行動計画生成部、142…迂回走行制御部、160…第2制御部、200…走行駆動力出力装置、210…ブレーキ装置、220…ステアリング装置、M…自車両   DESCRIPTION OF SYMBOLS 1 ... Vehicle system, 10 ... Camera, 12 ... Radar device, 14 ... Finder, 16 ... Object recognition device, 20 ... Communication device, 30 ... HMI, 40 ... Vehicle sensor, 50 ... Navigation device, 60 ... MPU, 80 ... Driving Operation unit 100 ... Automatic driving control device 120 ... First control unit 130 ... Recognition unit 132 ... Movement amount estimation unit 134 ... Pedestrian attribute determination unit 140 ... Action plan generation unit 142 ... Bypass travel control unit , 160 ... second control unit, 200 ... driving force output device, 210 ... brake device, 220 ... steering device, M ... own vehicle

Claims (6)

車両の周辺状況を認識する認識部と、
前記認識部により認識された周辺状況に基づいて少なくとも前記車両の操舵を自動的に制御する運転制御部と、を備え、
前記運転制御部は、前記認識部により前記車両の進行方向に単独の歩行者が認識された場合に、前記車両と歩行者との距離を第1最小間隔以上とし、前記認識部により前記車両の進行方向に複数の歩行者が認識された場合に、前記車両と前記車両に最も近い歩行者との距離を前記第1最小間隔よりも大きい第2最小間隔以上とする、
車両制御装置。
A recognition unit for recognizing the surrounding situation of the vehicle;
A driving control unit that automatically controls at least steering of the vehicle based on a surrounding situation recognized by the recognition unit, and
When the recognition unit recognizes a single pedestrian in the traveling direction of the vehicle, the driving control unit sets the distance between the vehicle and the pedestrian to a first minimum interval or more, and the recognition unit When a plurality of pedestrians are recognized in the traveling direction, the distance between the vehicle and the pedestrian closest to the vehicle is set to be equal to or greater than a second minimum interval greater than the first minimum interval.
Vehicle control device.
前記運転制御部は、前記認識部により前記車両の進行方向に複数の歩行者が認識された場合に、認識された前記複数の歩行者のそれぞれの道路幅方向への移動量に基づいて、前記第2最小間隔を調整する、
請求項1に記載の車両制御装置。
The driving control unit, when a plurality of pedestrians are recognized in the traveling direction of the vehicle by the recognition unit, based on the amount of movement of each of the recognized pedestrians in the road width direction, Adjust the second minimum interval,
The vehicle control device according to claim 1.
前記運転制御部は、前記認識部により前記車両の進行方向に複数の歩行者が認識された場合であって、且つ、前記複数の歩行者のうち、道路の延在方向中央から遠い方に存在する歩行者が、前記道路の延在方向中央から近い方に存在する歩行者に接近した場合に、前記車両と前記車両に最も近い歩行者との距離を前記第2最小間隔よりも大きい第3最小間隔以上とする、
請求項1または2に記載の車両制御装置。
The driving control unit is a case where a plurality of pedestrians are recognized in the traveling direction of the vehicle by the recognition unit, and among the plurality of pedestrians, the driving control unit exists in a direction far from the center of the road extending direction. When a pedestrian that approaches the pedestrian that is present closer to the center of the road extending direction, the distance between the vehicle and the pedestrian closest to the vehicle is greater than the second minimum interval. Over the minimum interval,
The vehicle control device according to claim 1 or 2.
前記運転制御部は、前記認識部により認識された複数の歩行者のそれぞれの属性に基づいて、前記第2最小間隔または前記第3最小間隔を調整する、
請求項1から3のうち何れか1項に記載の車両制御装置。
The driving control unit adjusts the second minimum interval or the third minimum interval based on respective attributes of a plurality of pedestrians recognized by the recognition unit.
The vehicle control device according to any one of claims 1 to 3.
車両制御装置が、
車両の周辺状況を認識し、
認識した前記周辺状況に基づいて少なくとも前記車両の操舵を自動的に制御し、
前記車両の進行方向に単独の歩行者が認識された場合に、前記車両と歩行者との距離を第1最小間隔以上とし、前記車両の進行方向に複数の歩行者が認識された場合に、前記車両と前記車両に最も近い歩行者との距離を前記第1最小間隔よりも大きい第2最小間隔以上とするように、前記車両の操舵を自動的に制御する、
車両制御方法。
The vehicle control device
Recognize the situation around the vehicle,
Automatically controlling at least steering of the vehicle based on the recognized surrounding situation;
When a single pedestrian is recognized in the traveling direction of the vehicle, the distance between the vehicle and the pedestrian is set to a first minimum interval or more, and when a plurality of pedestrians are recognized in the traveling direction of the vehicle, Automatically controlling the steering of the vehicle so that the distance between the vehicle and a pedestrian closest to the vehicle is equal to or greater than a second minimum interval greater than the first minimum interval;
Vehicle control method.
車両制御装置に、
車両の周辺状況を認識させ、
認識させた前記周辺状況に基づいて少なくとも前記車両の操舵を自動的に制御させ、
前記車両の進行方向に単独の歩行者が認識された場合に、前記車両と歩行者との距離を第1最小間隔以上とし、前記車両の進行方向に複数の歩行者が認識された場合に、前記車両と前記車両に最も近い歩行者と前記車両との距離を前記第1最小間隔よりも大きい第2最小間隔以上とするように、前記車両の操舵を自動的に制御させる、
プログラム。
In the vehicle control device,
Recognize the situation around the vehicle,
Automatically controlling at least steering of the vehicle based on the recognized surrounding situation;
When a single pedestrian is recognized in the traveling direction of the vehicle, the distance between the vehicle and the pedestrian is set to a first minimum interval or more, and when a plurality of pedestrians are recognized in the traveling direction of the vehicle, Automatically controlling steering of the vehicle so that a distance between the vehicle and a pedestrian closest to the vehicle and the vehicle is equal to or greater than a second minimum interval greater than the first minimum interval;
program.
JP2018046880A 2018-03-14 2018-03-14 Vehicle controller, vehicle control method and program Pending JP2019156222A (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018046880A JP2019156222A (en) 2018-03-14 2018-03-14 Vehicle controller, vehicle control method and program
US16/296,337 US20190283802A1 (en) 2018-03-14 2019-03-08 Vehicle control device, vehicle control method, and storage medium
CN201910183712.4A CN110271549A (en) 2018-03-14 2019-03-11 Controller of vehicle, control method for vehicle and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018046880A JP2019156222A (en) 2018-03-14 2018-03-14 Vehicle controller, vehicle control method and program

Publications (1)

Publication Number Publication Date
JP2019156222A true JP2019156222A (en) 2019-09-19

Family

ID=67905013

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018046880A Pending JP2019156222A (en) 2018-03-14 2018-03-14 Vehicle controller, vehicle control method and program

Country Status (3)

Country Link
US (1) US20190283802A1 (en)
JP (1) JP2019156222A (en)
CN (1) CN110271549A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220090394A (en) * 2020-12-22 2022-06-29 도요타지도샤가부시키가이샤 Automated drive device and automated drive method
JP2023000684A (en) * 2021-06-18 2023-01-04 本田技研工業株式会社 Warning control unit, movable body, warning control method, and program
JP2023000677A (en) * 2021-06-18 2023-01-04 本田技研工業株式会社 Warning control unit, movable body, warning control method, and program

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019156180A (en) * 2018-03-13 2019-09-19 本田技研工業株式会社 Vehicle controller, vehicle control method and program
US11754408B2 (en) * 2019-10-09 2023-09-12 Argo AI, LLC Methods and systems for topological planning in autonomous driving
CN112440986B (en) * 2020-11-30 2022-08-09 重庆长安汽车股份有限公司 Driving control method, pedestrian AEB system, intelligent driving automobile, controller and computer readable storage medium
US20220348227A1 (en) * 2021-04-29 2022-11-03 Tusimple, Inc. Systems and methods for operating an autonomous vehicle

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013224094A (en) * 2012-04-23 2013-10-31 Nissan Motor Co Ltd Vehicle traveling control device
WO2015155867A1 (en) * 2014-04-10 2015-10-15 日産自動車株式会社 Movement estimation device
US20170277192A1 (en) * 2016-03-24 2017-09-28 Honda Motor Co., Ltd. System and method for trajectory planning for unexpected pedestrians

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4879674B2 (en) * 2005-08-23 2012-02-22 本田技研工業株式会社 Vehicle control device
DE102008049824B4 (en) * 2008-10-01 2014-09-04 Universität Kassel Method for collision avoidance
GB2490878B8 (en) * 2011-05-12 2014-07-23 Jaguar Cars Monitoring apparatus and method
US8195394B1 (en) * 2011-07-13 2012-06-05 Google Inc. Object detection and classification for autonomous vehicles
US8473144B1 (en) * 2012-10-30 2013-06-25 Google Inc. Controlling vehicle lateral lane positioning
JP5743286B2 (en) * 2012-12-28 2015-07-01 富士重工業株式会社 Vehicle driving support device
US9809219B2 (en) * 2014-01-29 2017-11-07 Continental Automotive Systems, Inc. System for accommodating a pedestrian during autonomous vehicle operation
JP6174516B2 (en) * 2014-04-24 2017-08-02 本田技研工業株式会社 Collision avoidance support device, collision avoidance support method, and program
WO2015174178A1 (en) * 2014-05-15 2015-11-19 本田技研工業株式会社 Movement-assisting device
JP6134687B2 (en) * 2014-05-23 2017-05-24 本田技研工業株式会社 Object recognition device
KR102178433B1 (en) * 2014-05-30 2020-11-16 주식회사 만도 Auto emergency braking system and method for recognizing pedestrian of the same
JP6393523B2 (en) * 2014-06-04 2018-09-19 北陽電機株式会社 Laser sensor and automatic transfer device
JP6184923B2 (en) * 2014-09-11 2017-08-23 日立オートモティブシステムズ株式会社 Vehicle collision avoidance device
JP6532786B2 (en) * 2015-08-07 2019-06-19 株式会社日立製作所 Vehicle travel control device and speed control method
WO2017138658A1 (en) * 2016-02-10 2017-08-17 株式会社デンソー Drive assistance device
JP6432116B2 (en) * 2016-05-23 2018-12-05 本田技研工業株式会社 Vehicle position specifying device, vehicle control system, vehicle position specifying method, and vehicle position specifying program
US9925979B2 (en) * 2016-06-06 2018-03-27 Robert Bosch Gmbh Autonomous braking failure management in pedestrian protection
US10196058B2 (en) * 2016-11-28 2019-02-05 drive.ai Inc. Method for influencing entities at a roadway intersection
US11048927B2 (en) * 2017-10-24 2021-06-29 Waymo Llc Pedestrian behavior predictions for autonomous vehicles

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013224094A (en) * 2012-04-23 2013-10-31 Nissan Motor Co Ltd Vehicle traveling control device
WO2015155867A1 (en) * 2014-04-10 2015-10-15 日産自動車株式会社 Movement estimation device
US20170277192A1 (en) * 2016-03-24 2017-09-28 Honda Motor Co., Ltd. System and method for trajectory planning for unexpected pedestrians

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220090394A (en) * 2020-12-22 2022-06-29 도요타지도샤가부시키가이샤 Automated drive device and automated drive method
KR102599448B1 (en) 2020-12-22 2023-11-08 도요타지도샤가부시키가이샤 Automated drive device and automated drive method
JP2023000684A (en) * 2021-06-18 2023-01-04 本田技研工業株式会社 Warning control unit, movable body, warning control method, and program
JP2023000677A (en) * 2021-06-18 2023-01-04 本田技研工業株式会社 Warning control unit, movable body, warning control method, and program
JP7250070B2 (en) 2021-06-18 2023-03-31 本田技研工業株式会社 WARNING CONTROL DEVICE, MOBILE, WARNING CONTROL METHOD, AND PROGRAM
JP7273896B2 (en) 2021-06-18 2023-05-15 本田技研工業株式会社 WARNING CONTROL DEVICE, MOBILE, WARNING CONTROL METHOD, AND PROGRAM

Also Published As

Publication number Publication date
CN110271549A (en) 2019-09-24
US20190283802A1 (en) 2019-09-19

Similar Documents

Publication Publication Date Title
JP6600878B2 (en) Vehicle control device, vehicle control method, and program
CN110281941B (en) Vehicle control device, vehicle control method, and storage medium
JP6559194B2 (en) Driving support device, driving support method, and program
JP6768974B2 (en) Vehicle control devices, vehicle control methods, and programs
JP6601696B2 (en) Prediction device, prediction method, and program
JP2019156222A (en) Vehicle controller, vehicle control method and program
WO2019058446A1 (en) Vehicle control device, vehicle control method, and program
JP2019089516A (en) Vehicle control device, vehicle control method, and program
CN110239549B (en) Vehicle control device, vehicle control method, and storage medium
JP2019156223A (en) Vehicle controller, vehicle control method and program
JP2019108103A (en) Vehicle control device, vehicle control method, and program
JP2019137189A (en) Vehicle control system, vehicle control method, and program
JP7112374B2 (en) VEHICLE CONTROL DEVICE, VEHICLE CONTROL METHOD, AND PROGRAM
JP2019156224A (en) Vehicle controller, vehicle control method and program
JP7199150B2 (en) VEHICLE CONTROL DEVICE, VEHICLE CONTROL METHOD, AND PROGRAM
JP6586685B2 (en) Vehicle control device, vehicle control method, and program
JP2019156075A (en) Vehicle control device, vehicle control method, and program
JPWO2019069347A1 (en) Vehicle control device, vehicle control method, and program
JP2019137185A (en) Vehicle control system, vehicle control method, and program
CN110281934B (en) Vehicle control device, vehicle control method, and storage medium
JP2019185112A (en) Vehicle control device, vehicle control method, and program
JPWO2018230530A1 (en) Vehicle control system, vehicle control method, and program
JP2019147486A (en) Vehicle control system, vehicle control method, and program
JP2020163903A (en) Vehicle control device, vehicle control method, and program
JP2019156180A (en) Vehicle controller, vehicle control method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211026

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220405

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20221004