JP2019142246A - Vehicle control device - Google Patents

Vehicle control device Download PDF

Info

Publication number
JP2019142246A
JP2019142246A JP2018025337A JP2018025337A JP2019142246A JP 2019142246 A JP2019142246 A JP 2019142246A JP 2018025337 A JP2018025337 A JP 2018025337A JP 2018025337 A JP2018025337 A JP 2018025337A JP 2019142246 A JP2019142246 A JP 2019142246A
Authority
JP
Japan
Prior art keywords
vehicle
alarm
travel control
failure
control means
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018025337A
Other languages
Japanese (ja)
Other versions
JP7018330B2 (en
Inventor
純 落田
Jun Ochita
純 落田
忠彦 加納
Tadahiko Kano
忠彦 加納
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2018025337A priority Critical patent/JP7018330B2/en
Priority to CN201811590325.4A priority patent/CN110155044B/en
Publication of JP2019142246A publication Critical patent/JP2019142246A/en
Application granted granted Critical
Publication of JP7018330B2 publication Critical patent/JP7018330B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09Taking automatic action to avoid collision, e.g. braking and steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Regulating Braking Force (AREA)
  • Valves And Accessory Devices For Braking Systems (AREA)

Abstract

To continue automatic operation and call attention of a driver who may rely on automatic operation too much so as not to perform appropriate operation even when there is a fault on a sensor or an actuator during automatic operation.SOLUTION: In an automatic operation mode, the vehicle control device presumes time (TTC) until a vehicle reaches a detected target, and automatically performs braking when the TTC is smaller than a prescribed braking threshold value. Also, the device sets the braking threshold value to be larger when there is a fault on a sensor and an actuator, and furthermore makes a change so as to quicken a timing of alarm to the driver, to increase strength and to lengthen the time, and performs control so as to quicken the timing of braking and to increase the strength.SELECTED DRAWING: Figure 5

Description

本発明は、例えば自動車の自動運転や運転支援を行うための車両制御装置に関する。   The present invention relates to a vehicle control device for performing, for example, automatic driving and driving assistance of an automobile.

車両の自動運転または運転支援では、車両の特定の方向または全方向をセンサで監視し、その監視結果に応じて適切な経路や適切な速度での車両の自動運転を制御し、また運転者による運転を支援する。この様な構成で自動運転中に、たとえばカメラ等のセンサや、制動や駆動、操舵の駆動部に失陥があると、車両やドライバーはそれに対処する必要がある。特許文献1には、2つの物体検出手段を備えた車両で、第1の物体検出手段と第2の物体検出手段の双方で物体検出を行っている場合、第1の物体検出手段のみで物体検出を行っている場合、第2の物体検出手段のみで物体検出を行っている場合の順で走行支援制御を抑制側へシフトさせる技術が開示されている。   In automatic driving or driving assistance of a vehicle, a specific direction or all directions of the vehicle are monitored by a sensor, and the automatic driving of the vehicle at an appropriate route and at an appropriate speed is controlled according to the monitoring result. Assist driving. If a sensor such as a camera or a braking / driving / steering drive unit fails during automatic driving with such a configuration, the vehicle or driver needs to deal with it. In Patent Document 1, when a vehicle is equipped with two object detection means and both the first object detection means and the second object detection means perform object detection, the object is detected only by the first object detection means. When detecting, a technique for shifting the driving support control to the suppression side in the order in which object detection is performed only by the second object detecting means is disclosed.

特許第4193765号明細書Japanese Patent No. 4193765

自動運転では、センサや駆動部の失陥により制御の遅延を生じるおそれがあり、また、ドライバーに対する注意喚起が必要となることもある。しかし自動運転中には、システムが制御を続けていると、システムの注意喚起に対してドライバーの反応が遅れる場合があり得る。   In automatic driving, there may be a delay in control due to a failure of a sensor or a driving unit, and it may be necessary to alert the driver. However, during automatic driving, if the system continues to control, the driver's response to the system alert may be delayed.

本発明は上記従来例に鑑みて成されたもので、失陥があっても自動運転を継続し、かつ、ドライバーの注意をより喚起しやすくするとともに、衝突のリスクを軽減する車両制御装置を提供することを目的とする。   The present invention has been made in view of the above-described conventional example, and provides a vehicle control device that continues automatic driving even if a failure occurs, makes it easier to alert the driver, and reduces the risk of collision. The purpose is to provide.

上記目的を達成するために本発明は以下の構成を有する。   In order to achieve the above object, the present invention has the following configuration.

すなわち、本発明の一側面によれば、本発明は、
自車両の周辺監視を可能な周辺監視手段(41,42,43)と、
前記周辺監視装置の出力から走行制御を行う走行制御手段(20−29,315,317)とを有し、
前記走行制御手段は、前記周辺監視手段により検出された物標と前記自車両との相対関係に基づく作動条件が成立した場合に、警報の出力または前記自車両の自動制動の少なくとも一方を行い、
前記走行制御手段、前記周辺監視装置、前記走行制御手段の少なくとも一部が失陥した場合に、
前記作動条件または作動の程度を変更する作動変更処理(S505)を実施することを特徴とする車両制御装置にある。
That is, according to one aspect of the present invention, the present invention provides:
Perimeter monitoring means (41, 42, 43) capable of monitoring the perimeter of the own vehicle;
Travel control means (20-29, 315, 317) for performing travel control from the output of the periphery monitoring device;
The travel control means performs at least one of output of an alarm or automatic braking of the own vehicle when an operation condition based on a relative relationship between the target detected by the surrounding monitoring means and the own vehicle is established.
When at least a part of the travel control means, the periphery monitoring device, and the travel control means has failed,
In the vehicle control apparatus, the operation change process (S505) for changing the operation condition or the degree of operation is performed.

あるいは、本発明の他の側面位よれば本発明は、
自車両の周辺監視を可能な周辺監視手段(41,42,43)と、
前記周辺監視装置の出力から走行制御を行う走行制御手段(20−29,315,317)とを有し、
前記走行制御手段は、前記周辺監視手段により検出された物標と前記自車両との相対関係に基づく作動条件が成立した場合に、警報の出力または前記自車両の自動制動の少なくとも一方を行い、
前記走行制御手段、前記周辺監視装置、前記走行制御手段の少なくとも一部が失陥した場合に、
失陥していない場合の警報とは異なる警報に変更する警報変更処理(S521)を実施することを特徴とする車両制御装置にある。
Alternatively, according to another aspect of the invention, the invention
Perimeter monitoring means (41, 42, 43) capable of monitoring the perimeter of the own vehicle;
Travel control means (20-29, 315, 317) for performing travel control from the output of the periphery monitoring device;
The travel control means performs at least one of output of an alarm or automatic braking of the own vehicle when an operation condition based on a relative relationship between the target detected by the surrounding monitoring means and the own vehicle is established.
When at least a part of the travel control means, the periphery monitoring device, and the travel control means has failed,
The vehicle control apparatus is characterized in that an alarm change process (S521) for changing to an alarm different from an alarm when no failure has occurred is performed.

本発明によれば、失陥があっても自動運転を継続し、かつ、ドライバーの注意を確実に喚起する車両制御装置を提供することができる。   According to the present invention, it is possible to provide a vehicle control device that can continue automatic driving even when a failure occurs and can reliably alert the driver.

本発明のその他の特徴及び利点は、添付図面を参照とした以下の説明により明らかになるであろう。なお、添付図面においては、同じ若しくは同様の構成には、同じ参照番号を付す。   Other features and advantages of the present invention will become apparent from the following description with reference to the accompanying drawings. In the accompanying drawings, the same or similar components are denoted by the same reference numerals.

添付図面は明細書に含まれ、その一部を構成し、本発明の実施の形態を示し、その記述と共に本発明の原理を説明するために用いられる。
図1は実施形態の自動運転車両の車両システムの構成を示した図である。 図2は実施形態に係る自動運転車両による検知範囲の一例を示す図である。 図3は自動運転制御のためのブロック図である。 図4は、運転制御部による自己診断およびローカルマップ作成処理手順の一部を示すフローチャートである。 図5は、一実施形態における運転制御部による行動候補決定処理手順の一部を示すフローチャートである。
The accompanying drawings are included in the specification, constitute a part thereof, show an embodiment of the present invention, and are used to explain the principle of the present invention together with the description.
FIG. 1 is a diagram illustrating a configuration of a vehicle system for an autonomous driving vehicle according to an embodiment. FIG. 2 is a diagram illustrating an example of a detection range by the autonomous driving vehicle according to the embodiment. FIG. 3 is a block diagram for automatic operation control. FIG. 4 is a flowchart showing a part of a self-diagnosis and local map creation processing procedure by the operation control unit. FIG. 5 is a flowchart illustrating a part of an action candidate determination processing procedure by the operation control unit in one embodiment.

<第一実施形態>
●自動運転および走行支援の概要
次に自動運転についてその一例の概略を説明する。自動運転では、ドライバーは走行前に、車両に搭載されたナビゲーションシステムから目的地を設定し、サーバやナビゲーションシステムによって目的地までの経路を決定しておく。車両が発進されると、車両の有するECUなどで構成される車両制御装置(或いは運転制御装置)は、その経路に沿って車両を目的地まで運転する。その間に、経路や道路状況などの外部環境、ドライバーの状態などに応じて適時に適切な行動を決定し、その行動のためにたとえば駆動制御、操舵制御、制動制御などを行って車両を走行させる。これらの制御をまとめて走行制御とよぶこともある。
<First embodiment>
● Outline of automatic driving and driving support Next, an outline of an example of automatic driving will be described. In automatic driving, a driver sets a destination from a navigation system mounted on a vehicle before traveling, and determines a route to the destination using a server or a navigation system. When the vehicle is started, a vehicle control device (or an operation control device) constituted by an ECU or the like of the vehicle drives the vehicle to the destination along the route. In the meantime, determine appropriate actions in a timely manner according to the external environment such as the route and road conditions, the driver's condition, etc., and drive the vehicle by performing drive control, steering control, braking control, etc. for that action, for example. . These controls may be collectively referred to as travel control.

自動運転には、自動化率(もしくはドライバーに要求するタスクの量)によっていくつかのレベル(あるいはモードとも呼ぶ)がある。たとえば最上位のレベルでは、ドライバーは運転以外のことに注意を向けていてもよい。これはたとえば高速道路上の渋滞で前走車に追従する場合など、制御が比較的容易な場合に行われる。また、その下位レベルでは、ドライバーはハンドルを持たずともよいが、周囲の状況などに注意を払う必要がある。このレベルはたとえば、高速道路上で車線を維持しつつ走行する場合などに適用してよい。このレベルを本例では第2のモードと呼ぶこともある。なお運転者が周囲に注意していることはドライバー状態検知カメラにより、ハンドルを持っていることはハンドル把持センサにより検知できる。さらにその下位レベルでは、ドライバーはハンドル操作やスロットル操作を行わなくともよいが、ドライバーへのテイクオーバに備えてハンドルを持ち、運転に注意を払う必要がある。このレベルは、たとえば高速道路上の分岐や合流に適用してよい。このレベルを本例では第1のモードと呼ぶこともある。さらにその下位レベルでは、より自動化率は低下する。最低レベルは手動運転であるが、部分的に自動化した運転支援を含むこともある。   In automatic driving, there are several levels (or modes) depending on the automation rate (or the amount of tasks required of the driver). For example, at the highest level, the driver may focus on things other than driving. This is performed when the control is relatively easy, for example, when following a preceding vehicle due to a traffic jam on a highway. At the lower level, the driver may not have a handle, but he needs to pay attention to the surroundings. This level may be applied, for example, when traveling while maintaining a lane on a highway. This level is sometimes called the second mode in this example. Note that the driver's attention to the surroundings can be detected by a driver state detection camera, and that the driver has a handle can be detected by a handle grip sensor. Furthermore, at the lower level, the driver does not have to perform the steering operation or the throttle operation, but needs to pay attention to driving by holding the steering wheel in preparation for the takeover to the driver. This level may be applied to forks and junctions on highways, for example. This level is sometimes called the first mode in this example. Furthermore, at that lower level, the automation rate is lower. The lowest level is manual driving, but may include partially automated driving assistance.

上述した運転支援とは、運転の主体となるドライバーによる運転操作を、周辺の監視や部分的な自動化により支援する機能である。たとえば前方のみを監視して障害を検知した場合に制動制御を行う自動ブレーキ機能や、斜め後方の車両を検知してドライバーに注意を促す後方監視機能、駐車スペースへの駐車機能などがある。   The above-described driving support is a function that supports driving operation by a driver who is a driving subject by monitoring the surroundings or partially automating the driving operation. For example, there are an automatic braking function that performs braking control when an obstacle is detected by monitoring only the front side, a rear monitoring function that detects a vehicle obliquely behind and alerts the driver, and a parking function in a parking space.

なお、自動運転中であってもドライバーによる介入があってもよい。たとえば、自動運転中にドライバーが操舵やブレーキ操作を行うと、自動運転レベルを運転支援のレベルまで下げ、ドライバーによる運転操作を優先させてよい。その場合には、ドライバーが操作を止めた後、自車両状態および外部環境に応じた自動運転レベルを再設定して自動運転を続行してよい。例えば本実施形態における操舵操作の例として、上述した第1のモード以上の自動化率の自動運転で高速道路を走行中におけるウインカーレバー操作がある。たとえばこのような状態でドライバーがウインカー操作をすると、車両は車線変更の指示があったとして指示された側の車線へと車線変更する。この場合、操舵や制動、駆動などの制御は、ECU等で構成する走行制御部が、車両の周囲の障害物等を監視しつつ行う。   Even during automatic driving, there may be intervention by the driver. For example, when the driver performs steering or braking operation during automatic driving, the automatic driving level may be lowered to the driving support level, and the driving operation by the driver may be prioritized. In that case, after the driver stops the operation, the automatic driving level may be reset according to the own vehicle state and the external environment to continue the automatic driving. For example, as an example of the steering operation in the present embodiment, there is a winker lever operation while traveling on a highway with automatic driving at an automation rate equal to or higher than the first mode described above. For example, when the driver performs a blinker operation in such a state, the vehicle changes the lane to the lane on the side instructed to have been instructed to change the lane. In this case, control such as steering, braking, and driving is performed by a travel control unit configured by an ECU or the like while monitoring obstacles and the like around the vehicle.

自動運転レベル(あるいはモード)が切り替えられる場合には、そのことは車両からドライバーへと音声や表示、振動などによって通知される。例えば自動運転が上述した第1のモードから第2のモードへと切り替えられる場合には、ドライバーに対してハンドルを離してもよい旨が通知される。逆の場合には、ドライバーに対してハンドルを把持するよう通知される。この通知はハンドル把持センサによりドライバーがハンドルを把持したことが検知されるまで繰り返され出される。そしてたとえば制限時間内あるいはモード切り替えの限界点までにハンドルが把持されなければ、安全な場所に停車させるなどの操作が行われてよい。自動運転は概ね上述したように行われ、そのための構成及び制御について以下で説明する。   When the automatic driving level (or mode) is switched, this is notified from the vehicle to the driver by voice, display, vibration, or the like. For example, when the automatic driving is switched from the first mode to the second mode, the driver is notified that the handle may be released. In the opposite case, the driver is notified to grip the handle. This notification is repeated until it is detected by the handle grip sensor that the driver grips the handle. For example, if the handle is not gripped within the time limit or until the mode switching limit point, an operation such as stopping at a safe place may be performed. Automatic operation is generally performed as described above, and the configuration and control for that purpose will be described below.

●車両制御装置の構成
図1は、本発明の一実施形態に係る車両用制御装置のブロック図であり、車両1を制御する。図1において、車両1はその概略が平面図と側面図とで示されている。車両1は一例としてセダンタイプの四輪の乗用車である。
FIG. 1 is a block diagram of a vehicle control device according to an embodiment of the present invention, which controls the vehicle 1. In FIG. 1, the outline of a vehicle 1 is shown in a plan view and a side view. The vehicle 1 is a sedan type four-wheeled passenger car as an example.

図1の制御装置は、制御ユニット2を含む。制御ユニット2は車内ネットワークにより通信可能に接続された複数のECU20〜29を含む。各ECUは、CPUに代表されるプロセッサ、半導体メモリ等の記憶デバイス、外部デバイスとのインタフェース等を含む。記憶デバイスにはプロセッサが実行するプログラムやプロセッサが処理に使用するデータ等が格納される。各ECUはプロセッサ、記憶デバイスおよびインタフェース等を複数備えていてもよい。   The control device of FIG. 1 includes a control unit 2. The control unit 2 includes a plurality of ECUs 20 to 29 that are communicably connected via an in-vehicle network. Each ECU includes a processor represented by a CPU, a storage device such as a semiconductor memory, an interface with an external device, and the like. The storage device stores a program executed by the processor, data used by the processor for processing, and the like. Each ECU may include a plurality of processors, storage devices, interfaces, and the like.

以下、各ECU20〜29が担当する機能等について説明する。なお、ECUの数や、担当する機能については、車両1の適宜設計可能であり、本実施形態よりも細分化したり、あるいは、統合することが可能である。   Hereinafter, functions and the like which the ECUs 20 to 29 are in charge of will be described. Note that the number of ECUs and the functions in charge can be appropriately designed for the vehicle 1, and can be further subdivided or integrated as compared with the present embodiment.

ECU20は、車両1の自動運転に関わる制御を実行する。自動運転においては、車両1の操舵と、加減速の少なくともいずれか一方を自動制御する。後述する制御例では、操舵と加減速の双方を自動制御する。   The ECU 20 executes control related to automatic driving of the vehicle 1. In automatic operation, at least one of steering and acceleration / deceleration of the vehicle 1 is automatically controlled. In a control example to be described later, both steering and acceleration / deceleration are automatically controlled.

ECU21は、電動パワーステアリング装置3を制御する。電動パワーステアリング装置3は、ステアリングホイール31に対する運転者の運転操作(操舵操作)に応じて前輪を操舵する機構を含む。また、電動パワーステアリング装置3は操舵操作をアシストしたり、あるいは、前輪を自動操舵するための駆動力を発揮するモータや、操舵角を検知するセンサ等を含む。車両1の運転状態が自動運転の場合、ECU21は、ECU20からの指示に対応して電動パワーステアリング装置3を自動制御し、車両1の進行方向を制御する。   The ECU 21 controls the electric power steering device 3. The electric power steering device 3 includes a mechanism that steers the front wheels in accordance with the driving operation (steering operation) of the driver with respect to the steering wheel 31. In addition, the electric power steering device 3 includes a motor that assists the steering operation or that exhibits a driving force for automatically steering the front wheels, a sensor that detects a steering angle, and the like. When the driving state of the vehicle 1 is automatic driving, the ECU 21 automatically controls the electric power steering device 3 in response to an instruction from the ECU 20 to control the traveling direction of the vehicle 1.

ECU22および23は、車両の周囲状況を検知する検知ユニット41〜43の制御および検知結果の情報処理を行う。検知ユニット41は、車両1の前方を撮影するカメラであり(以下、カメラ41と表記する場合がある。)、本実施形態の場合、車両1の室内に2つ設けられている。カメラ41が撮影した画像の解析により、物標の輪郭抽出や、道路上の車線の区画線(白線等)を抽出可能である。検知ユニット41aは、ドライバーの状態を検知するためのカメラであり(以下、ドライバー状態検知カメラ41aと表記する場合がある。)、ドライバーの表情をとらえられるように設置されており、不図示ではあるが、その画像データの処理を行うECUに接続されている。またドライバー状態を検知するためのセンサとして、不図示のハンドル把持センサがある。これによりドライバーがハンドルを握っているか否かを検知できる。   The ECUs 22 and 23 control the detection units 41 to 43 that detect the surrounding situation of the vehicle and perform information processing on detection results. The detection unit 41 is a camera that captures the front of the vehicle 1 (hereinafter may be referred to as the camera 41). In the present embodiment, two detection units 41 are provided in the vehicle 1 room. By analyzing the image captured by the camera 41, it is possible to extract the outline of the target and the lane markings (white lines, etc.) on the road. The detection unit 41a is a camera for detecting the state of the driver (hereinafter sometimes referred to as the driver state detection camera 41a), and is installed so as to capture the driver's facial expression. Are connected to an ECU that processes the image data. As a sensor for detecting the driver state, there is a handle grip sensor (not shown). This makes it possible to detect whether or not the driver is holding the handle.

検知ユニット42は、ライダ(Light Detection and Ranging、或いはLaser Imaging Detection and Rangingであり(以下、ライダ42と表記する場合がある)、車両1の周囲の物標を検知したり、物標との距離を測距する。本実施形態の場合、ライダ42は5つ設けられており、車両1の前部の各隅部に1つずつ、後部中央に1つ、後部各側方に1つずつ設けられている。検知ユニット43は、ミリ波レーダであり(以下、レーダ43と表記する場合がある)、車両1の周囲の物標を検知したり、物標との距離を測距する。本実施形態の場合、レーダ43は5つ設けられており、車両1の前部中央に1つ、前部各隅部に1つずつ、後部各隅部に一つずつ設けられている。   The detection unit 42 is a lidar (Light Detection and Ranging or Laser Imaging Detection and Ranging (hereinafter sometimes referred to as a lidar 42), and detects a target around the vehicle 1 or a distance from the target. In the present embodiment, five riders 42 are provided, one at each corner of the front of the vehicle 1, one at the center of the rear, and one at each side of the rear. The detection unit 43 is a millimeter wave radar (hereinafter may be referred to as a radar 43), detects a target around the vehicle 1, and measures a distance from the target. In the case of the embodiment, five radars 43 are provided, one at the front center of the vehicle 1, one at each front corner, and one at each rear corner.

ECU22は、一方のカメラ41と、各ライダ42の制御および検知結果の情報処理を行う。ECU23は、他方のカメラ41と、各レーダ43の制御および検知結果の情報処理を行う。車両の周囲状況を検知する装置を二組備えたことで、検知結果の信頼性を向上でき、また、カメラ、ライダ、レーダといった種類の異なる検知ユニットを備えたことで、車両の周辺環境の解析を多面的に行うことができる。   The ECU 22 performs control of one camera 41 and each rider 42 and information processing of detection results. The ECU 23 performs control of the other camera 41 and each radar 43 and information processing of detection results. By providing two sets of devices that detect the surroundings of the vehicle, the reliability of the detection results can be improved, and by providing different types of detection units such as cameras, lidars, and radars, analysis of the surrounding environment of the vehicle Can be performed in many ways.

ECU24は、ジャイロセンサ5、GPSセンサ24b、通信装置24cの制御および検知結果あるいは通信結果の情報処理を行う。ジャイロセンサ5は車両1の回転運動を検知する。ジャイロセンサ5の検知結果や、車輪速等により車両1の進路を判定することができる。GPSセンサ24bは、車両1の現在位置を検知する。通信装置24cは、地図情報や交通情報を提供するサーバと無線通信を行い、これらの情報を取得する。ECU24は、記憶デバイスに構築された地図情報のデータベース24aにアクセス可能であり、ECU24は現在地から目的地へのルート探索等を行う。   The ECU 24 controls the gyro sensor 5, the GPS sensor 24b, and the communication device 24c and performs information processing on detection results or communication results. The gyro sensor 5 detects the rotational movement of the vehicle 1. The course of the vehicle 1 can be determined based on the detection result of the gyro sensor 5, the wheel speed, and the like. The GPS sensor 24 b detects the current position of the vehicle 1. The communication device 24c performs wireless communication with a server that provides map information and traffic information, and acquires these information. The ECU 24 can access the map information database 24a constructed in the storage device, and the ECU 24 searches for a route from the current location to the destination.

ECU25は、車車間通信用の通信装置25aを備える。通信装置25aは、周辺の他車両と無線通信を行い、車両間での情報交換を行う。   The ECU 25 includes a communication device 25a for inter-vehicle communication. The communication device 25a performs wireless communication with other vehicles in the vicinity and exchanges information between the vehicles.

ECU26は、パワープラント6を制御する。パワープラント6は車両1の駆動輪を回転させる駆動力を出力する機構であり、例えば、エンジンと変速機とを含む。ECU26は、例えば、アクセルペダル7Aに設けた操作検知センサ7aにより検知した運転者の運転操作(アクセル操作あるいは加速操作)に対応してエンジンの出力を制御したり、車速センサ7cが検知した車速等の情報に基づいて変速機の変速段を切り替える。車両1の運転状態が自動運転の場合、ECU26は、ECU20からの指示に対応してパワープラント6を自動制御し、車両1の加減速を制御する。   The ECU 26 controls the power plant 6. The power plant 6 is a mechanism that outputs a driving force for rotating the driving wheels of the vehicle 1 and includes, for example, an engine and a transmission. For example, the ECU 26 controls the output of the engine in response to the driver's driving operation (accelerator operation or acceleration operation) detected by the operation detection sensor 7a provided on the accelerator pedal 7A, the vehicle speed detected by the vehicle speed sensor 7c, or the like. The gear position of the transmission is switched based on the information. When the driving state of the vehicle 1 is automatic driving, the ECU 26 automatically controls the power plant 6 in response to an instruction from the ECU 20 to control acceleration / deceleration of the vehicle 1.

ECU27は、方向指示器8を含む灯火器(ヘッドライト、テールライト等)を制御する。図1の例の場合、方向指示器8は車両1の前部、ドアミラーおよび後部に設けられている。   The ECU 27 controls a lighting device (headlight, taillight, etc.) including the direction indicator 8. In the case of the example in FIG. 1, the direction indicator 8 is provided at the front part, the door mirror, and the rear part of the vehicle 1.

ECU28は、入出力装置9の制御を行う。入出力装置9は運転者に対する情報の出力と、運転者からの情報の入力の受け付けを行う。音声出力装置91は運転者に対して音声により情報を報知する。表示装置92は運転者に対して画像の表示により情報を報知する。表示装置92は例えば運転席表面に配置され、インストルメントパネル等を構成する。なお、ここでは、音声と表示を例示したが振動や光により情報を報知してもよい。また、音声、表示、振動または光のうちの複数を組み合わせて情報を報知してもよい。更に、報知すべき情報のレベル(例えば緊急度)に応じて、組み合わせを異ならせたり、報知態様を異ならせてもよい。入力装置93は運転者が操作可能な位置に配置され、車両1に対する指示を行うスイッチ群であるが、音声入力装置も含まれてもよい。   The ECU 28 controls the input / output device 9. The input / output device 9 outputs information to the driver and receives input of information from the driver. The voice output device 91 notifies the driver of information by voice. The display device 92 notifies the driver of information by displaying an image. The display device 92 is disposed on the driver's seat surface, for example, and constitutes an instrument panel or the like. In addition, although an audio | voice and a display were illustrated here, you may alert | report information by a vibration or light. In addition, information may be notified by combining a plurality of voice, display, vibration, or light. Furthermore, the combination may be varied or the notification mode may be varied depending on the level of information to be notified (for example, the degree of urgency). The input device 93 is a switch group that is arranged at a position where the driver can operate and gives an instruction to the vehicle 1, but a voice input device may also be included.

ECU29は、ブレーキ装置10やパーキングブレーキ(不図示)を制御する。ブレーキ装置10は例えばディスクブレーキ装置であり、車両1の各車輪に設けられ、車輪の回転に抵抗を加えることで車両1を減速あるいは停止させる。ECU29は、例えば、ブレーキペダル7Bに設けた操作検知センサ7bにより検知した運転者の運転操作(ブレーキ操作)に対応してブレーキ装置10の作動を制御する。車両1の運転状態が自動運転の場合、ECU29は、ECU20からの指示に対応してブレーキ装置10を自動制御し、車両1の減速および停止を制御する。ブレーキ装置10やパーキングブレーキは車両1の停止状態を維持するために作動することもできる。また、パワープラント6の変速機がパーキングロック機構を備える場合、これを車両1の停止状態を維持するために作動することもできる。   The ECU 29 controls the brake device 10 and a parking brake (not shown). The brake device 10 is, for example, a disc brake device, and is provided on each wheel of the vehicle 1. The vehicle 1 is decelerated or stopped by applying resistance to the rotation of the wheel. For example, the ECU 29 controls the operation of the brake device 10 in response to a driver's driving operation (brake operation) detected by an operation detection sensor 7b provided on the brake pedal 7B. When the driving state of the vehicle 1 is automatic driving, the ECU 29 automatically controls the brake device 10 in response to an instruction from the ECU 20 to control deceleration and stop of the vehicle 1. The brake device 10 and the parking brake can be operated to maintain the vehicle 1 in a stopped state. Moreover, when the transmission of the power plant 6 includes a parking lock mechanism, this can be operated to maintain the vehicle 1 in a stopped state.

またECU20を除く各ECUは、たとえば、その制御対象であるセンサや駆動部に失陥があると、その状態を検知して例えばECU20に通知してよく、その場合ECU20は受信した状態を後述するセンサ状態や駆動部状態として保存する。動作時における失陥の状態は、たとえばモータやソレノイド等の駆動部(アクチュエータ)、あるいはセンサからの信号について、通常の信号レベルや遅延時間からの逸脱などにより判定してよい。   Further, each ECU other than the ECU 20 may detect the state and notify the ECU 20, for example, when there is a failure in a sensor or drive unit that is the control target, and in that case, the ECU 20 will describe the received state later. Save as sensor status or drive status. The state of failure during operation may be determined by, for example, a deviation from a normal signal level or delay time for a signal from a drive unit (actuator) such as a motor or a solenoid or a sensor.

●周辺監視装置
図1に示したカメラ41、ライダ42、レーダ43は、車両周囲の物標などを検知する周辺監視装置を構成している。図2はその周辺監視装置により検知される範囲の例を示す。図2において、網点で示す領域204、206,207などは、レーダ43による検知範囲を示す。特に領域204は車両1の前方、領域206、207は後方の領域である。対応するレーダ43は、それぞれの領域にある障害物や車両などの物標を検知し、その距離を測定する。そしてこのレーダ43により、たとえば前方および後方を走行する車両や障害物などを検知できる。点線で囲った領域201、202、205などは、ライダ42による検知範囲を示す。特に領域201,202は車両1の前方、領域205は車両1の後方の領域である。対応するライダ42は、それぞれの領域にある障害物や車両などの物標を検知し、その距離を測定する。そしてこのライダ42により、たとえば右後方を走行する車両や、右車線を追い抜いて行く車両などを検知できる。斜線で示す領域203はカメラ41による検知範囲を示す。本例ではカメラ41は2台備えられているが、ほぼ重複した領域を検知範囲とするため、一つのみを示した。カメラ41で撮影された画像は画像認識され、たとえば走行車線を示す白線等が画像から特定され、車線維持や車線変更のために参照される。
Perimeter Monitoring Device The camera 41, lidar 42, and radar 43 shown in FIG. 1 constitute a perimeter monitoring device that detects a target around the vehicle. FIG. 2 shows an example of a range detected by the periphery monitoring device. In FIG. 2, areas 204, 206, and 207 indicated by halftone dots indicate detection ranges by the radar 43. In particular, the region 204 is a front region of the vehicle 1 and the regions 206 and 207 are rear regions. The corresponding radar 43 detects an object such as an obstacle or a vehicle in each area and measures the distance. The radar 43 can detect, for example, a vehicle or an obstacle traveling forward and backward. Regions 201, 202, 205, etc. enclosed by dotted lines indicate detection ranges by the lidar 42. In particular, the areas 201 and 202 are the front area of the vehicle 1, and the area 205 is the area behind the vehicle 1. The corresponding lidar 42 detects a target such as an obstacle or a vehicle in each area, and measures the distance. The rider 42 can detect, for example, a vehicle traveling right rearward or a vehicle passing the right lane. A region 203 indicated by oblique lines indicates a detection range by the camera 41. In this example, two cameras 41 are provided, but only one is shown in order to set a substantially overlapping area as a detection range. The image captured by the camera 41 is recognized, and for example, a white line indicating a travel lane is identified from the image and is referred to for lane maintenance or lane change.

このように、異なるセンサによる検知範囲は重複しているため、センサの冗長化が実現されている。これによって信頼性が一層高まるとともに、同一の領域を検知範囲とする異なるセンサによる検知結果を比較することで、センサの失陥あるいは失陥の可能性を特定できる。たとえばライダ42及びレーダ43の二種類のセンサで同一の領域を検知していながら、一方のセンサでは検知され、他方のセンサでは検知されていない物標があるとする。この場合、いずれか一方が失陥したと推定できる。あるいは、不図示の自己診断回路によりセンサの出力信号などを監視し、そこからセンサ自体の失陥を知ることもできる。このようにしてセンサすなわち周辺監視装置の失陥を推定することができる。   Thus, since the detection ranges by different sensors overlap, sensor redundancy is realized. This further increases the reliability, and by comparing the detection results of different sensors with the same region as the detection range, it is possible to specify the possibility of sensor failure or failure. For example, it is assumed that there is a target that is detected by one sensor and not detected by the other sensor while the same region is detected by two types of sensors, the lidar 42 and the radar 43. In this case, it can be estimated that either one has failed. Alternatively, a sensor output signal or the like can be monitored by a self-diagnosis circuit (not shown), and the failure of the sensor itself can be known therefrom. In this way, it is possible to estimate the failure of the sensor, that is, the periphery monitoring device.

●ローカルマップ
ローカルマップとは、自車両を中心とした一定の範囲の車両や障害物などの物標や車線などを示す情報で構成した地図情報である。ローカルマップは情報処理に適した形式でよく、たとえば物標の位置や範囲、距離を示す情報、道路や車線の境界を示す情報などが含まれる。ローカルマップは、図2に示した各センサにより検知した車両周囲の物標を、車両を中心とした一定範囲内で示しており、車両の走行に応じてたとえば定期的に更新される。更新の間隔は、たとえば自車両と対向車両との相対速度などを考慮しても、安全を確保した制御が実現できる程度の期間であればよい。このローカルマップ307を更新し続けることで、自車両の周囲の障害物や道路状況等を実時間で参照することができる。また、前方または後方に進行している場合には、たとえば進路上の物標に対する自車両の相対速度に基づいて、その物標に自車両が達するのに要する時間(TTC)を算出することができる。なお複数の物標が検知されている場合には、それぞれに対するTTCのうちの最小値を選ぶ。そのTTCが所定の閾値(これをここでは制動閾値と呼ぶことにする。)を下回ると、自動走行中あるいは走行支援中であれば、運転制御装置が車両に自動制動をかけ、走行支援のない手動運転中であればドライバーに警告する。すなわち、物標と自車両との相対関係に基づいて自動制動等の作動条件の成立が判定される。なお上述した制動閾値は、例えば、物標に対する自車両の現在の相対速度から、その相対速度が0になるか或いは自車速度が0になるか、いずれか早い方まで減速するための所要時間に、車両システムの遅延とマージンとを加算した時間であってよい。もちろんこれは一例に過ぎない。これは前進であっても後退であっても同様である。なお、この物標に対する相対速度が自車速度よりも大きい場合には操舵等を伴うこともあり得るが、本実施形態ではそこまで考慮しないことにする。
● Local map A local map is map information composed of information indicating targets and lanes such as vehicles and obstacles in a certain range centered on the own vehicle. The local map may be in a format suitable for information processing, and includes, for example, information indicating the position and range of a target, distance, information indicating road and lane boundaries, and the like. The local map shows the targets around the vehicle detected by each sensor shown in FIG. 2 within a certain range centered on the vehicle, and is updated periodically, for example, according to the travel of the vehicle. The update interval may be a period that allows safe control even when the relative speed between the host vehicle and the oncoming vehicle is taken into account, for example. By continuing to update this local map 307, it is possible to refer to obstacles and road conditions around the host vehicle in real time. Further, when traveling forward or backward, the time (TTC) required for the host vehicle to reach the target can be calculated based on the relative speed of the host vehicle with respect to the target on the course, for example. it can. When a plurality of targets are detected, the minimum value of the TTC for each is selected. When the TTC falls below a predetermined threshold value (hereinafter referred to as a braking threshold value), if the vehicle is in automatic driving or driving assistance, the driving control device automatically applies braking to the vehicle and there is no driving assistance. Warn the driver during manual operation. That is, it is determined that an operation condition such as automatic braking is established based on the relative relationship between the target and the host vehicle. Note that the above-described braking threshold is, for example, the time required to decelerate from the current relative speed of the host vehicle to the target until the relative speed becomes zero or the host vehicle speed becomes zero, whichever is earlier. Further, it may be a time obtained by adding the delay of the vehicle system and the margin. Of course, this is only an example. This is the same whether forward or backward. In addition, when the relative speed with respect to this target is larger than the own vehicle speed, it may be accompanied by steering or the like, but in this embodiment, it is not considered so much.

●運転制御装置
図3に自動運転あるいは運転支援のための運転制御装置の機能的なブロック図を示す。この運転制御装置は、たとえば図1に示したECU20が、図4以下に示す手順を実行することで実現される。もちろん図4以下に示した手順は、運転制御装置が実現する自動運転や運転支援に係る機能のうち、本実施形態に係るごく一部に過ぎない。たとえばECU20は、運転者により目的地と自動運転が指示されると、ECU24により探索された案内ルートにしたがって、目的地へ向けて車両1の走行を自動制御する。自動制御の際、ECU20はECU22および23などから車両1の周囲状況に関する情報を取得し、取得した情報に基づきECU21、ECU26および29などに指示して、車両1の操舵、加減速を制御する。この手順を機能ブロックとして示したものが図3に相当する。
[Operation Control Device] FIG. 3 shows a functional block diagram of an operation control device for automatic driving or driving support. This operation control device is realized, for example, when the ECU 20 shown in FIG. 1 executes the procedure shown in FIG. Of course, the procedure shown in FIG. 4 and below is only a part of the functions related to the automatic driving and driving support realized by the driving control device according to the present embodiment. For example, when the driver instructs the destination and automatic driving, the ECU 20 automatically controls the traveling of the vehicle 1 toward the destination according to the guidance route searched by the ECU 24. During the automatic control, the ECU 20 acquires information on the surroundings of the vehicle 1 from the ECUs 22 and 23, etc., and instructs the ECU 21, ECUs 26 and 29, etc. based on the acquired information to control the steering and acceleration / deceleration of the vehicle 1. FIG. 3 shows this procedure as a functional block.

外界認識部301は、カメラ41、ライダ42、レーダ43等の周辺監視装置で取得した周辺の状況を示す外部環境情報から、たとえば周辺の物標の相対速度、位置及び形状、および画像などを示す情報303を生成する。そして情報303に基づいて、自己位置認識部305が、道路上における自車両の位置、周辺を走行する車両の形状及び自車両を中心とした配置、また周辺の構造物の形状及び配置を決定し、ローカルマップ307を生成する。なおローカルマップ307の作成のためには、情報303に加えて、地図情報など、周辺監視装置以外から取得した情報を参照してもよい。また、本例では、ローカルマップ307に加えて、センサの感度(検知距離や検知範囲)を示す情報など自車両の状態もローカルマップと併せて行動候補決定部309に渡される。   The external environment recognition unit 301 indicates, for example, relative speed, position and shape, and images of surrounding targets from the external environment information indicating the surrounding conditions acquired by the surrounding monitoring device such as the camera 41, the lidar 42, and the radar 43. Information 303 is generated. Based on the information 303, the self-position recognition unit 305 determines the position of the own vehicle on the road, the shape of the vehicle traveling around the vehicle, the arrangement around the own vehicle, and the shape and arrangement of the surrounding structures. A local map 307 is generated. In addition, in order to create the local map 307, in addition to the information 303, information acquired from other than the periphery monitoring device such as map information may be referred to. In this example, in addition to the local map 307, the state of the host vehicle such as information indicating the sensitivity (detection distance and detection range) of the sensor is also passed to the action candidate determination unit 309 along with the local map.

行動候補決定部309は、ローカルマップ307を入力として、今後の行動候補を決定する。行動候補は、自車両の行動を決定するにあたり、その候補となる行動を示す情報である。自車両の行動は、ローカルマップ307のみならず、目的地までのルート情報に加えて、自車両の状態などを参照して決定される。自車両の状態には、たとえば周辺監視装置に含まれたカメラ41、ライダ42、センサ43等のセンサや、ブレーキ装置10等のアクチュエータの失陥や失陥の可能性などがある。たとえば、進行方向(前方あるいは後方)の物標が検知されている場合には、自車両が当該物標に達するのに要する時間(TTC)を推定し、TTCが所定の閾値(前述した制動閾値)を下回っていれば、ドライバーへの警告を伴う制動を行動候補として決定する。ここで複数の物標に対してそれぞれのTTCが得られる場合には、そのうちの最小値を制動閾値と比較する。すなわち、TTCが所定の閾値を下回ることが制動を作動させる作動条件といえる。行動候補はたとえば、行動を示す情報やその行動の程度を示す情報などを含む情報であってよく、決定された行動が制動の場合には、たとえば行動が制動であることを示す情報、制動を開始するタイミング、制動の強度などを示す情報を含んでいて良い。また、決定した行動候補のひとつが制動である場合には、他の行動候補を用意してもよいし、この後の工程に要する時間を短縮するために制動のみを候補としてもよい。また、行動候補決定部309は、後述する状態情報保存部321に保存されたセンサやアクチュエータ等の状態を参照して行動候補を決定してもよい。これについては図4等を参照して後述する。もちろんこれは一例に過ぎず、操舵や駆動の制御を伴う他の行動を候補として決定することもできる。   The action candidate determination unit 309 determines a future action candidate using the local map 307 as an input. The action candidate is information indicating an action that is a candidate for determining the action of the host vehicle. The behavior of the host vehicle is determined with reference to not only the local map 307 but also the state of the host vehicle in addition to the route information to the destination. The state of the host vehicle includes, for example, the possibility that a sensor such as the camera 41, the lidar 42, and the sensor 43 included in the periphery monitoring device, and an actuator such as the brake device 10 may fail. For example, when a target in the advancing direction (front or rear) is detected, the time (TTC) required for the host vehicle to reach the target is estimated, and TTC is set to a predetermined threshold (the braking threshold described above). If it is less than), braking with a warning to the driver is determined as an action candidate. Here, when each TTC is obtained for a plurality of targets, the minimum value among them is compared with the braking threshold. That is, it can be said that the operating condition for operating braking is that TTC is below a predetermined threshold. For example, the action candidate may be information including information indicating the action and information indicating the degree of the action. When the determined action is braking, for example, information indicating that the action is braking, Information indicating a start timing, a braking intensity, and the like may be included. When one of the determined action candidates is braking, another action candidate may be prepared, or only braking may be used as a candidate in order to shorten the time required for the subsequent steps. In addition, the behavior candidate determination unit 309 may determine a behavior candidate with reference to the states of sensors, actuators, and the like stored in a state information storage unit 321 described later. This will be described later with reference to FIG. Of course, this is only an example, and other actions involving steering and drive control can be determined as candidates.

経路選択部311は、行動候補決定部309により決定された行動候補のうちから、一つの行動を選択する。それが実行される行動となり、そのために操舵、駆動、制動が、車両制御装置によって制御される。行動候補が一つの場合には選択の余地はないので、ただ一つの行動候補が選択される。複数の候補のうちからいずれの候補を選択するかは、様々な基準で決定し得る。たとえば行動候補に制動が含まれている場合には、制動を優先的に選択するようにしてもよい。また各行動候補を評価し、最も評価が高い行動候補を選択してもよい。いずれにしてもこれらは選択基準の一例であって、他の基準を適用してもよい。また経路選択部311は、選択した行動に即した経路情報および速度情報313を生成する。経路情報および速度情報313は走行制御部315に入力される。あるいは、選択した行動が制動の場合には、制動のタイミングや強度など、ブレーキの作動の程度を示す情報を生成してもよい。また、経路選択部311は、後述する状態情報保存部321に保存されたセンサやアクチュエータ等の状態を参照して行動を選択してもよい。   The route selection unit 311 selects one behavior from the behavior candidates determined by the behavior candidate determination unit 309. This is an action to be executed, and therefore steering, driving, and braking are controlled by the vehicle control device. When there is one action candidate, there is no room for selection, so only one action candidate is selected. Which candidate is selected from among a plurality of candidates can be determined based on various criteria. For example, when the action candidate includes braking, the braking may be selected with priority. Each action candidate may be evaluated and the action candidate having the highest evaluation may be selected. In any case, these are examples of selection criteria, and other criteria may be applied. Further, the route selection unit 311 generates route information and speed information 313 according to the selected action. The route information and speed information 313 are input to the travel control unit 315. Alternatively, when the selected action is braking, information indicating the degree of brake operation, such as braking timing and strength, may be generated. Further, the route selection unit 311 may select an action with reference to states of sensors, actuators, and the like stored in a state information storage unit 321 described later.

走行制御部315は、入力された経路情報および速度情報313に基づいて、操舵、駆動、制動などの作動部(アクチュエータ)を制御する。さらに、周辺監視装置により検知された自車両周囲の障害などの状況にも基づいて、即応的に操舵、駆動、制動を制御する。なお自己位置認識部305、行動候補決定部309、経路選択部311はECU20により実現できたが、走行制御部315はさらに、ECU21,26,29などにより走行制御することで実現される。もちろん必要があれば他のECUによる処理を含めてもよい。走行制御部315は、たとえば入力される経路や速度と各アクチュエータ317の制御量とを対応付けた変換マップなどを用いて、経路や速度をアクチュエータの制御量に変換してよい。そして、変換後の制御量を用いて走行制御を行う。   The travel control unit 315 controls an operation unit (actuator) such as steering, driving, and braking based on the input route information and speed information 313. Furthermore, the steering, driving, and braking are controlled promptly based on the situation such as an obstacle around the host vehicle detected by the periphery monitoring device. Although the self-position recognition unit 305, the action candidate determination unit 309, and the route selection unit 311 can be realized by the ECU 20, the travel control unit 315 is further realized by performing travel control by the ECUs 21, 26, 29, and the like. Of course, if necessary, processing by another ECU may be included. The travel control unit 315 may convert the route and speed into the control amount of the actuator using, for example, a conversion map that associates the input route and speed with the control amount of each actuator 317. Then, traveling control is performed using the converted control amount.

本実施形態ではさらに、車両制御装置は、自己診断部319と状態保存部321とを有する。状態保存部321にはセンサ状態保存部3211と作動部状態保存部3212とが含まれる。自己診断部319は、例えば車両の電源を通電状態にしたときの初期処理の一部として、あるいは自動運転の自動化レベルが低く、かつ低速走行中など処理負荷が軽い状態において実施される。そしてその対象は、たとえばカメラ41やライダ42、レーダ43をはじめとするセンサ類や、ブレーキ装置10(たとえばブレーキを動作させるモータ)などのアクチュエータ、及びその制御回路などであってよい。ブレーキ装置10であれば、アクチュエータには、駆動ポンプのモータなどの作動部を診断の対象とすることができる。もちろんここで記載した以外の部分を対象としてもよい。自己診断のための情報は、外界認識部301と走行制御部315とから取得してよい。診断はたとえば、外界認識部301や走行制御部315がセンサデバイスやアクチュエータから受信した信号に基づいて判定した状態を収集したり、或いは改めて所定のパイロット信号をセンサやアクチュエータに送信してその応答を受信し、その応答信号に基づいて状態を判定すればよい。各センサおよび駆動部(アクチュエータ)及びそれらの制御回路について状態を取得した自己診断部319は、それぞれの状態をセンサ状態保存部3211および作動部状態保存部3212に保存する。なお制御回路の状態は、その制御対象に応じた状態保存部に保存してよい。   In the present embodiment, the vehicle control device further includes a self-diagnosis unit 319 and a state storage unit 321. The state storage unit 321 includes a sensor state storage unit 3211 and an operation unit state storage unit 3212. The self-diagnosis unit 319 is performed, for example, as part of the initial processing when the vehicle power supply is turned on, or in a state where the processing load is light, such as when the automatic driving automation level is low and the vehicle is running at a low speed. The target may be, for example, sensors such as the camera 41, the rider 42, and the radar 43, an actuator such as the brake device 10 (for example, a motor that operates the brake), and a control circuit thereof. In the case of the brake device 10, the actuator can be an operation unit such as a motor of a drive pump. Of course, portions other than those described here may be targeted. Information for self-diagnosis may be acquired from the external environment recognition unit 301 and the travel control unit 315. For example, the diagnosis is performed by collecting the state determined by the external recognition unit 301 or the travel control unit 315 based on the signal received from the sensor device or the actuator, or by transmitting a predetermined pilot signal to the sensor or the actuator and returning the response. The state may be determined based on the received response signal. The self-diagnosis unit 319 that has acquired the states of the sensors and the drive units (actuators) and their control circuits stores the respective states in the sensor state storage unit 3211 and the operation unit state storage unit 3212. The state of the control circuit may be stored in a state storage unit corresponding to the control target.

さらに、自己診断中でなくとも、たとえば自己位置認識部305が複数のセンサの検知領域が重複している領域において、物標を検知できたセンサとできないセンサとがある場合には、いずれかのセンサに失陥のおそれがあるものと判断できる。その場合自己位置認識部305は、失陥のおそれがあるセンサおよびその状態を、センサ状態保存部3211に保存してよい。また走行制御部315も、アクチュエータを制御している際に検知した状態を作動部状態保存部3212に保存してよい。   Furthermore, even if the self-position recognizing unit 305 has a sensor that can detect a target and a sensor that cannot detect a target in an area where the detection areas of a plurality of sensors overlap, even if the self-diagnosis is not being performed, It can be determined that there is a risk of sensor failure. In that case, the self-position recognizing unit 305 may store the sensor that may be in failure and its state in the sensor state storage unit 3211. The traveling control unit 315 may also store the state detected when the actuator is controlled in the operating unit state storage unit 3212.

●センサおよびアクチュエータ状態の保存
図4(A)に、自己診断部319による処理手順の例を示す。この手順はハードウェア上は例えばECU20により実行される。まず外界認識部301や走行制御部315、具体的にはそれらを構成するECUから、自己診断結果を収集する(S401)。自己診断結果には、センサやアクチュエータを対象として診断用の信号を送信し、その応答に基づいて診断した結果を含む。そして収集したその診断結果を状態保存部321に保存する(S403)。センサの状態はセンサ状態保存部3211に、作動部の状態は作動部状態保存部3212に保存される。そして保存した状態即ち診断結果に、警告を出力すべきものが含まれているか判定する(S405)。含まれていれば、まずこの段階で、表示や音声、振動等によりその警告を出力する(S407)。なお、手動運転モードであれば、単に失陥の可能性があることを示す表示を行う程度にとどめてもよい。この様にして自己診断により、センサやアクチュエータ等の状態を取得し、保存する。
Saving of Sensor and Actuator State FIG. 4A shows an example of a processing procedure by the self-diagnosis unit 319. This procedure is executed by the ECU 20, for example, in hardware. First, self-diagnosis results are collected from the external environment recognition unit 301 and the travel control unit 315, specifically, from the ECUs constituting them (S401). The self-diagnosis result includes a result of diagnosing based on a response by transmitting a diagnostic signal targeting a sensor or an actuator. The collected diagnostic results are stored in the state storage unit 321 (S403). The sensor state is stored in the sensor state storage unit 3211, and the operation unit state is stored in the operation unit state storage unit 3212. Then, it is determined whether the stored state, that is, the diagnosis result includes a warning output (S405). If it is included, the warning is output at this stage by display, sound, vibration, etc. (S407). In the case of the manual operation mode, the display may simply be performed to indicate that there is a possibility of failure. In this way, the state of the sensor, actuator, etc. is acquired and stored by self-diagnosis.

図4(B)に自己位置認識部305によるローカルマップの作成処理の手順を示す。まず自己位置や周囲の車両の車両形状と配置、周囲の構造物形状と配置などに基づいて、自車両を基準にしたローカルマップを作成する(S411)。このとき、検知範囲が重複するセンサに、同一物標を検知していないものがあったか判定し(S412)、あればそれらのセンサの状態として、失陥の可能性があることをセンサ状態保存部3211に保存する(S415)。なければ、それらのセンサの状態として、失陥がない正常状態であることをセンサ状態保存部3211に保存する(S413)。なお検知範囲が重複するセンサに、同一物標を検知していないものがあった場合には、物標を検知したものとしてローカルマップを作成することが望ましい。このようにして、動作中のセンサでも、その状態を特定して保存することができる。図示していないが、これと同様に、ブレーキ装置10などのアクチュエータ(作動部)からも動作中に走行制御部315が判定した状態を作動部保存手段3212に保存することができる。   FIG. 4B shows a procedure of local map creation processing by the self-position recognition unit 305. First, a local map based on the own vehicle is created based on the self-position, the vehicle shape and arrangement of surrounding vehicles, the shape and arrangement of surrounding structures (S411). At this time, it is determined whether there are sensors that do not detect the same target in the overlapping detection ranges (S412), and if there is a sensor state storage unit, there is a possibility of failure as the state of those sensors. It is stored in 3211 (S415). If not, the sensor state storage unit 3211 stores the normal state with no failure as the state of those sensors (S413). If there are sensors that do not detect the same target among sensors with overlapping detection ranges, it is desirable to create a local map as if the target was detected. In this way, even a sensor that is operating can specify and store its state. Although not shown, similarly, the state determined by the travel control unit 315 during operation can be stored in the operation unit storage means 3212 from an actuator (operation unit) such as the brake device 10.

図5に、行動候補決定部309および経路選択部311により実行されるそれぞれの処理の一部を示す。前述したようにこれらはECU20により実現されることから、図5の手順はECU20により実行される処理でもある。行動候補決定部309は、ローカルマップ307および状態保存部321に保存した状態情報を取得する(S501)。次に取得した状態情報に基づいてセンサまたは作動部に失陥の可能性があるか判定する(S503)。参照した状態情報が、失陥または失陥の可能性を示していると判定した場合には、制動閾値を、標準の値から、それよりも大きい閾値へと変更する(S505)。標準値とは、正常な状態における閾値である。ステップS505で制動閾値を大きくする程度は、例えば予め定めた固定値としてもよいし、失陥の程度に応じて変えてもよい。失陥の程度とは、例えばセンサであれば、失陥の可能性のあるセンサの数などである。またアクチュエータであれば、応答時間の遅延などであってよい。なおステップS505をスキップした場合には、ステップS507に分岐するが、その場合には標準の閾値が設定される。   FIG. 5 shows a part of each process executed by the action candidate determination unit 309 and the route selection unit 311. As described above, since these are realized by the ECU 20, the procedure of FIG. 5 is also a process executed by the ECU 20. The action candidate determination unit 309 acquires the state information stored in the local map 307 and the state storage unit 321 (S501). Next, based on the acquired state information, it is determined whether or not there is a possibility that the sensor or the operating unit has failed (S503). If it is determined that the referenced state information indicates failure or possibility of failure, the braking threshold value is changed from the standard value to a larger threshold value (S505). The standard value is a threshold value in a normal state. The degree to which the braking threshold value is increased in step S505 may be, for example, a predetermined fixed value, or may be changed according to the degree of failure. For example, in the case of a sensor, the degree of failure is the number of sensors that may be lost. In the case of an actuator, the response time may be delayed. If step S505 is skipped, the process branches to step S507. In this case, a standard threshold is set.

次に、ローカルマップから算出した、進行方向(前方または後方)の物標のうち、そこに自車両が達するまでに要する時間(TTC)が、設定済みの制動閾値よりも小さくなるような物標があるか判定する(S507)。もしあれば、現在の運転モードが自動運転か手動運転かを判定する(S509)。手動運転と判定した場合には、さらにセンサまたは作動部に失陥の可能性があるか判定する(S511)。この判定はステップS503と同様の基準で行われる。ここで、例えば、対象となるセンサは進行方向を検知するセンサであり、対象となるアクチュエータは制動に関するもので例えばブレーキ装置10である。失陥の可能性があれば、該当するセンサや作動部について、故障表示を行う(S513)。一方失陥の可能性がなければそのまま終了する。なお、このとき、ステップS511の直前に、前述した制動閾値の時間内に到達する物標があることの警報(あるいは警告)を出力してもよい。手動運転モードの場合には、行動計画に沿った走行制御は行う必要がないので、ここで処理を終了してよい。   Next, among the targets in the advancing direction (forward or backward) calculated from the local map, the target (TTC) required for the host vehicle to reach the target is smaller than the set braking threshold. It is determined whether there is any (S507). If there is, it is determined whether the current operation mode is automatic operation or manual operation (S509). If it is determined that the operation is manual operation, it is further determined whether or not there is a possibility that the sensor or the operating unit has failed (S511). This determination is performed based on the same criteria as in step S503. Here, for example, the target sensor is a sensor that detects the traveling direction, and the target actuator is related to braking, for example, the brake device 10. If there is a possibility of failure, a failure display is performed for the corresponding sensor or operating unit (S513). On the other hand, if there is no possibility of failure, the process ends as it is. At this time, immediately before step S511, an alarm (or warning) that there is a target reaching within the time of the braking threshold described above may be output. In the case of the manual operation mode, it is not necessary to perform the travel control according to the action plan, so the process may be terminated here.

一方、ステップS509において自動運転と判定した場合には、ステップS507において有ると判定された物標について、そこに到達するまでに停止するという行動を、行動候補として決定する(S515)。ここで決定した行動には、制動をかけること(さらに制動のタイミングや強度などを含んでもよい)と、その警告(警報)の出力とを含む。この時の警告は通常のものであり、車両のセンサや作動部が正常に動作している場合の警告である。次にセンサまたは作動部に失陥の可能性があるか判定する(S519)。この判定はステップS511と同様の基準で行われる。失陥の可能性があれば、ステップS515で決定した警告の程度をさらに強いものに設定し直す(S521)。その後、経路選択のための処理へと移行する。一方ステップS507で該当する物標はないと判定された場合には、その時の状況に即した行動を行動の候補として決定する(S517)。複数の行動をとり得るのであれば、複数の行動が候補として決定される。この後ステップS519へと分岐する。   On the other hand, when it determines with automatic driving | operation in step S509, about the target determined to exist in step S507, the action of stopping before reaching there is determined as an action candidate (S515). The action determined here includes applying a brake (may further include the timing and intensity of braking) and an output of a warning (alarm). The warning at this time is a normal one, and is a warning when the vehicle sensor or the operation unit is operating normally. Next, it is determined whether or not there is a possibility that the sensor or the operating unit has failed (S519). This determination is performed based on the same criteria as in step S511. If there is a possibility of failure, the warning level determined in step S515 is reset to a stronger one (S521). Thereafter, the process proceeds to processing for route selection. On the other hand, if it is determined in step S507 that there is no corresponding target, an action corresponding to the situation at that time is determined as a candidate for action (S517). If a plurality of actions can be taken, a plurality of actions are determined as candidates. Thereafter, the process branches to step S519.

なおステップS521では、警告として出力する警報を、たとえば強くしたり、タイミングを早めたり、あるいは長くしたりすることで、程度を強化してよい。強くするとは、音声の警報ならたとえば音量を大きくしたり、音程を高くしたりすればよい。表示の警報なら、たとえば輝度を上げたり、点滅させたり、目立つ色や意匠で表示すればよい。振動の警報なら、たとえば振幅を大きくしたり、振動周期を小さくしたりすればよい。タイミングを早めるとは、文字通り警報の出力のタイミングを早めればよい。長くするとは、警報の継続期間を長くすることでよい。また、警報を強化する程度は、失陥あるいは失陥の可能性の程度に応じてであってよい。たとえば、複数のセンサが冗長化されている場合、そのうちの失陥したセンサ、あるいはその可能性のあるセンサの数に応じて警報を強化してよい。この場合失陥の可能性のあるセンサ数が多いほど、警報を強く、あるいは早く、或いは長くする。たとえば失陥したセンサの数1つにつき警報を1秒長くするなどすればよい。またそれらのいくつかを組わせてもよい。あるいは、失陥の程度あるいはその可能性の程度に応じて警報を強化してよい。たとえば、入力信号に対する遅延や、あるいはカメラ41による撮影画像の不鮮明さの程度が大きくなるほど、警報の強度を高め、タイミングを早め、継続時間を長くしてよい。またアクチュエータが失陥したのであれば、たとえばセンサが失陥した場合よりもいっそう強度の高い警報を出力してもよい。さらに。失陥したアクチュエータの種類に応じて警報強度を変えてもよい。例えばブレーキ装置10に失陥の可能性が判定されたなら、他のアクチュエータよりも強度の高い警報を出力してもよい。またアクチュエータの故障の程度を検知できる場合には、その程度に応じた強度の警報を出力するようにしてもよい。   Note that in step S521, the degree of the alarm may be strengthened by, for example, increasing the intensity of the alarm output as an alarm, increasing the timing, or increasing the timing. To increase the sound level, for example, the sound volume may be increased by increasing the volume or increasing the pitch. In the case of a display alarm, for example, the brightness may be increased, blinked, or displayed with a conspicuous color or design. For a vibration alarm, for example, the amplitude may be increased or the vibration cycle may be decreased. To advance the timing is literally to advance the timing of the alarm output. To make it longer is to increase the duration of the alarm. Also, the degree to which the alarm is strengthened may depend on the degree of failure or the possibility of failure. For example, when a plurality of sensors are made redundant, the alarm may be strengthened according to the number of sensors that are lost or possibly. In this case, the greater the number of sensors that can fail, the stronger, faster or longer the alarm. For example, the alarm may be increased by 1 second for each sensor that has failed. Some of them may be combined. Alternatively, the alarm may be strengthened according to the degree of failure or the degree of possibility. For example, as the delay with respect to the input signal or the degree of unclearness of the captured image by the camera 41 increases, the intensity of the alarm may be increased, the timing may be advanced, and the duration may be increased. Further, if the actuator has failed, for example, an alarm having a higher intensity than that when the sensor has failed may be output. further. The alarm intensity may be changed according to the type of the actuator that has failed. For example, if it is determined that there is a possibility of failure in the brake device 10, an alarm having a higher strength than that of other actuators may be output. If the degree of actuator failure can be detected, an alarm having a strength corresponding to the degree may be output.

さらにステップS521では、警報のみならず作動の内容を、失陥の程度や数などに応じて変更してもよい。たとえばブレーキ装置10が失陥した可能性があるのであれば、制動を開始するタイミングを早めたり、あるいは制動力を強めたりしてもよい。以上は、主として実行する行動が制動である場合を例にとって説明したが、行動が、旋回や車線変更、右左折などの場合にも、同様にしてよい。すなわち、実行する行動に関するセンサやアクチュエータが失陥している可能性があれば、警報を、通常の警報とは異なる警報としてよい。あるいは、当該行動を実現するアクチュエータの作動の内容についても、通常と失陥時とで異なるものとしてよい。   Further, in step S521, not only the alarm but also the contents of the operation may be changed according to the degree or number of failures. For example, if there is a possibility that the brake device 10 has failed, the braking start timing may be advanced or the braking force may be increased. Although the case where the action to be performed is mainly braking has been described above as an example, the same may be applied to the case where the action is turning, changing lanes, turning left or right, and the like. That is, if there is a possibility that a sensor or actuator related to the action to be performed has failed, the alarm may be an alarm different from the normal alarm. Alternatively, the contents of the operation of the actuator that realizes the action may be different between normal and failure times.

以上のようにして、次の行動の候補となる行動を決定することができる。この後は、候補の中から一つの行動に決定する。そのためにはまず経路選択部311が、行動候補が複数あるか判定し、一つであればその候補を次の行動として選択し、その行動の経路・速度情報を決定する。一方、複数の候補がある場合には、そのうちのひとつを選択する。そのために各行動候補の候補行動情報を評価する。そして最高評価の候補行動を次の行動として選択し、その行動の経路・速度情報を決定する。このようにして作成された経路情報および速度情報は、走行制御装置(あるいは走行制御部)に入力され、その経路と速度で各動作部が制御されて選択された行動が実現される。走行制御装置が複数のECUで構成される場合には、それぞれのECUがそれぞれの制御対象のアクチュエータを、決定された経路と速度とに従って制御する。行動が制動の場合には、設定に従ってブレーキ装置10が作動して制動制御が行われる。また選択された行動が警報の出力の場合には、音声や表示、振動などにより警報が出力される。   As described above, an action that is a candidate for the next action can be determined. After this, one action is decided from the candidates. For this purpose, the route selection unit 311 first determines whether there are a plurality of action candidates. If there is one, the candidate is selected as the next action, and the route / speed information of the action is determined. On the other hand, when there are a plurality of candidates, one of them is selected. Therefore, the candidate behavior information of each behavior candidate is evaluated. Then, the candidate action with the highest evaluation is selected as the next action, and the route / speed information of the action is determined. The route information and speed information created in this way are input to the travel control device (or travel control unit), and each action unit is controlled by the route and speed to realize the selected action. When the travel control device is composed of a plurality of ECUs, each ECU controls each actuator to be controlled according to the determined route and speed. When the action is braking, the brake device 10 is operated according to the setting to perform braking control. When the selected action is an alarm output, the alarm is output by voice, display, vibration, or the like.

このようにして、走行中の行動が決定され、実現される。そして自動運転により制動制御される場合には、センサや作動部の状態を監視し、失陥の可能性があれば、作動条件の一例である制動閾値が、より制動がかけられやすいように変更される。さらに、ドライバーに対して出力される警報は、失陥の可能性がある場合には通常とは異なる警報に設定変更される。さらに、アクチュエータの作動の内容が、失陥の可能性がある場合には通常とは異なる内容に変更される。この結果、警告や警報を失陥時と通常時とで異なるものとすることでドライバーによる警告や警報の聞き流しを防止する。さらに作動のタイミングや内容を失陥時と通常時とで異なるものとすることで、より安全な自動運転を実現できる。   In this way, the behavior during traveling is determined and realized. When braking control is performed by automatic driving, the state of the sensor and the operating unit is monitored, and if there is a possibility of failure, the braking threshold value, which is an example of the operating condition, is changed so that braking can be applied more easily. Is done. Further, the alarm output to the driver is changed to a different alarm when there is a possibility of failure. Furthermore, the content of the operation of the actuator is changed to a content different from normal when there is a possibility of failure. As a result, warnings and warnings are made different between a failure time and a normal time to prevent the driver from hearing the warnings and warnings. Furthermore, by making the operation timing and content different between the time of failure and the normal time, safer automatic operation can be realized.

なお本実施形態では、ローカルマップに基づいて制動を行うものとした。しかし、たとえば検知した物標についてのTTCをローカルマップとは別に管理し、TTCが所定の閾値より小さくなったことを作動条件として、制動をかけるシステムに対しても上述した実施形態は同様に適用できる。この様なシステムは、自動運転というよりいわゆる運転支援である。すなわち本実施形態に係る発明は、自動運転のみならず、運転支援システムについても適用可能である。   In this embodiment, braking is performed based on the local map. However, for example, the above-described embodiment is similarly applied to a system in which TTC for a detected target is managed separately from the local map and braking is performed under the condition that TTC is smaller than a predetermined threshold. it can. Such a system is what is called driving assistance rather than automatic driving. That is, the invention according to the present embodiment can be applied not only to automatic driving but also to a driving support system.

●実施形態のまとめ
以上説明した本実施形態をまとめると以下のとおりである。
(1)本実施形態の第一の態様は、自車両の周辺監視を可能な周辺監視手段(41,42,43)と、
前記周辺監視装置の出力から走行制御を行う走行制御手段(20−29,315,317)とを有し、
前記走行制御手段は、前記周辺監視手段により検出された物標と前記自車両との相対関係に基づく作動条件が成立した場合に、警報の出力または前記自車両の自動制動の少なくとも一方を行い、
前記走行制御手段、前記周辺監視装置、前記走行制御手段の少なくとも一部が失陥した場合に、
前記作動条件または作動の程度を変更する作動変更処理(S505)を実施することを特徴とする車両制御装置にある。
この構成により、失陥時には安全性を考慮して、適切に作動条件または作動所程度を変更する制御が可能となる。
● Summary of Embodiments The above-described embodiment can be summarized as follows.
(1) The first aspect of the present embodiment is a periphery monitoring means (41, 42, 43) capable of monitoring the periphery of the host vehicle;
Travel control means (20-29, 315, 317) for performing travel control from the output of the periphery monitoring device;
The travel control means performs at least one of output of an alarm or automatic braking of the own vehicle when an operation condition based on a relative relationship between the target detected by the surrounding monitoring means and the own vehicle is established.
When at least a part of the travel control means, the periphery monitoring device, and the travel control means has failed,
In the vehicle control apparatus, the operation change process (S505) for changing the operation condition or the degree of operation is performed.
With this configuration, in the event of a failure, it is possible to perform control that appropriately changes the operating condition or the operating site in consideration of safety.

(2)本実施形態の第二の態様は、自車両の周辺監視を可能な周辺監視手段(41,42,43)と、
前記周辺監視装置の出力から走行制御を行う走行制御手段(20−29,315,317)とを有し、
前記走行制御手段は、前記周辺監視手段により検出された物標と前記自車両との相対関係に基づく作動条件が成立した場合に、警報の出力または前記自車両の自動制動の少なくとも一方を行い、
前記走行制御手段、前記周辺監視装置、前記走行制御手段の少なくとも一部が失陥した場合に、
失陥していない場合の警報とは異なる警報に変更する警報変更処理(S521)を実施することを特徴とする車両制御装置にある。
この構成により、この構成により、失陥時には安全性を考慮して、適切に警報を変更する制御が可能となる。
(2) The second aspect of the present embodiment is a periphery monitoring means (41, 42, 43) capable of monitoring the periphery of the host vehicle;
Travel control means (20-29, 315, 317) for performing travel control from the output of the periphery monitoring device;
The travel control means performs at least one of output of an alarm or automatic braking of the own vehicle when an operation condition based on a relative relationship between the target detected by the surrounding monitoring means and the own vehicle is established.
When at least a part of the travel control means, the periphery monitoring device, and the travel control means has failed,
The vehicle control apparatus is characterized in that an alarm change process (S521) for changing to an alarm different from an alarm when no failure has occurred is performed.
With this configuration, with this configuration, it is possible to perform control for appropriately changing the alarm in consideration of safety in the event of a failure.

(3)本実施形態の第三の態様は、(1)または(2)に記載の車両制御装置であって、
前記周辺監視手段は複数のセンサ(41,42,43)を有しており、
前記作動変更処理、もしくは前記警報変更処理の少なくとも一方は、前記複数のセンサの失陥の程度もしくは失陥した前記複数のセンサの数に基づいて、前記作動条件もしくは前記警報の変更の内容を決定することを特徴とする車両制御装置にある。
この構成により、センサの失陥の程度などに合わせて警報を変更することが可能となる。
(3) A third aspect of the present embodiment is the vehicle control device according to (1) or (2),
The periphery monitoring means has a plurality of sensors (41, 42, 43),
At least one of the operation change process or the alarm change process determines the operation condition or the content of the alarm change based on the degree of failure of the plurality of sensors or the number of the plurality of sensors lost. The vehicle control apparatus is characterized by the above.
With this configuration, the alarm can be changed according to the degree of sensor failure or the like.

(4)本実施形態の第四の態様は、(1)または(2)に記載の車両制御装置であって、
前記走行制御手段は、判断手段(309)及び該判断手段の結果に基づく作動手段(317)とを有しており、
前記走行制御手段は、前記作動手段の失陥の程度に基いて、前記作動条件または前記作動の変更の程度を決定することを特徴とする車両制御装置にある。
この構成により、作動手段の失陥の程度に合わせて、作動条件または作動の変更の程度を変え、適切にドライバーへ状態を報知することが可能となる。
(4) A fourth aspect of the present embodiment is the vehicle control device according to (1) or (2),
The travel control unit includes a determination unit (309) and an operation unit (317) based on a result of the determination unit.
In the vehicle control device, the travel control means determines the operating condition or the degree of change in the operation based on the degree of failure of the operating means.
With this configuration, it is possible to appropriately notify the driver of the state by changing the operating condition or the degree of change of the operation in accordance with the degree of failure of the operating means.

(5)本実施形態の第五の態様は、(1)に記載の車両制御装置であって、
前記走行制御手段は、運転支援状態において前記自車両の自動制動が可能であり、
前記運転支援状態においては、前記周辺監視装置もしくは前記走行制御手段が失陥した場合に、前記作動変更処理、及び失陥がある旨の警報の出力を実施するとともに、前記運転支援状態ではない状態においては、失陥がある旨の警報を出力することを特徴とする車両制御装置にある。
この構成により、自動運転の場合のみ、失陥時にも作動させることが可能となる。
(5) A fifth aspect of the present embodiment is the vehicle control device according to (1),
The travel control means is capable of automatic braking of the host vehicle in a driving support state,
In the driving support state, when the periphery monitoring device or the travel control unit fails, the operation change process and an output of a warning that there is a failure are performed, and the driving support state is not In the vehicle control apparatus, a warning that there is a failure is output.
With this configuration, it is possible to operate even in the case of failure only in the case of automatic driving.

(6)本実施形態の第六の態様は、(2)に記載の車両制御装置であって、
前記走行制御手段は、運転支援状態において前記自車両の自動制動が可能であり、
前記運転支援状態においては、前記周辺監視装置もしくは前記走行制御手段が失陥した場合に、前記警報変更処理、及び失陥がある旨の警報の出力を実施するとともに、前記運転支援状態ではない状態においては、失陥がある旨の警報を出力することを特徴とする車両制御装置にある。
この構成により、自動運転の場合のみ、失陥時にも作動させることが可能となる。
(6) A sixth aspect of the present embodiment is the vehicle control device according to (2),
The travel control means is capable of automatic braking of the host vehicle in a driving support state,
In the driving support state, when the periphery monitoring device or the travel control unit fails, the alarm change process and the output of an alarm indicating that there is a failure are performed and the state is not the driving support state In the vehicle control apparatus, a warning that there is a failure is output.
With this configuration, it is possible to operate even in the case of failure only in the case of automatic driving.

(7)本実施形態の第七の態様は、(1)または(5)に記載の車両制御装置であって、
前記周辺監視手段は、前記自車両の少なくとも進行方向の物標を監視し、
前記走行制御手段は、所定時間内に前記物標に達する可能性があることを前記作動条件とし、
前記周辺監視装置、もしくは前記走行制御手段の一部が失陥した場合に、
前記作動変更処理により、前記所定時間をより長い時間に設定することを特徴とする車両制御装置にある。
この構成により、失陥の可能性がある場合には、物標に対する可能性を判定する閾値をより長い時間にすることで、ドライバーに対してより状況に適した警報を出すことができる。
(7) A seventh aspect of the present embodiment is the vehicle control device according to (1) or (5),
The periphery monitoring means monitors at least a target in the traveling direction of the host vehicle,
The travel control means, as the operating condition, that the target may reach the target within a predetermined time,
When a part of the periphery monitoring device or the traveling control means has failed,
In the vehicle control device, the predetermined time is set to a longer time by the operation change process.
With this configuration, when there is a possibility of a failure, a warning suitable for the situation can be issued to the driver by setting the threshold for determining the possibility of the target to be longer.

(8)本実施形態の第八の態様は、(1)または(5)に記載の車両制御装置であって、
請求項2または6に記載の車両制御装置であって、
前記周辺監視手段は、前記自車両の少なくとも進行方向の物標を監視し、
前記走行制御手段は、所定時間内に前記物標に達する可能性があることを前記作動条件とし、
前記周辺監視装置、もしくは前記走行制御手段の一部が失陥した場合に、
前記警報変更処理により、前記警報のタイミングを早め、または、警報の強度を高め、または、警報の時間を長くすることを特徴とする車両制御装置。
この構成により、失陥の可能性がある場合には、警報のタイミングを早め、また強くすることで、ドライバーに対してより状況に適した警報を出すことができる。
(8) An eighth aspect of the present embodiment is the vehicle control device according to (1) or (5),
The vehicle control device according to claim 2 or 6,
The periphery monitoring means monitors at least a target in the traveling direction of the host vehicle,
The travel control means, as the operating condition, that the target may reach the target within a predetermined time,
When a part of the periphery monitoring device or the traveling control means has failed,
The vehicle control apparatus characterized by advancing the alarm timing, increasing the intensity of the alarm, or extending the alarm time by the alarm change process.
With this configuration, when there is a possibility of failure, the warning can be given to the driver more appropriately according to the situation by making the timing of the warning earlier and stronger.

(9)本実施形態の第九の態様は、(7)の車両制御装置であって、前記作動変更処理により、さらに、前記自動制動のタイミングを早め、または前記自動制動の強度を高めることを特徴とする車両制御装置にある。
この構成により、警報のみならず自動制動のタイミングを早めて一層安全な制御を実現できる。
(9) A ninth aspect of the present embodiment is the vehicle control device according to (7), wherein the automatic change timing is further advanced or the strength of the automatic brake is increased by the operation change process. The vehicle control device is characterized.
With this configuration, it is possible to realize safer control by advancing the automatic braking timing as well as the alarm.

301 外界認識部、305 自己位置認識部、307 ローカルマップ、309 行動候補決定部、311 経路選択部、315走行制御部、317 アクチュエータ、319 自己診断部、321 状態保存部 301 external world recognition unit, 305 self-position recognition unit, 307 local map, 309 action candidate determination unit, 311 route selection unit, 315 travel control unit, 317 actuator, 319 self-diagnosis unit, 321 state storage unit

Claims (9)

自車両の周辺監視を可能な周辺監視手段(41,42,43)と、
前記周辺監視装置の出力から走行制御を行う走行制御手段(20−29,315,317)とを有し、
前記走行制御手段は、前記周辺監視手段により検出された物標と前記自車両との相対関係に基づく作動条件が成立した場合に、警報の出力または前記自車両の自動制動の少なくとも一方を行い、
前記走行制御手段、前記周辺監視装置、前記走行制御手段の少なくとも一部が失陥した場合に、
前記作動条件または作動の程度を変更する作動変更処理(S505)を実施することを特徴とする車両制御装置。
Perimeter monitoring means (41, 42, 43) capable of monitoring the perimeter of the own vehicle;
Travel control means (20-29, 315, 317) for performing travel control from the output of the periphery monitoring device;
The travel control means performs at least one of output of an alarm or automatic braking of the own vehicle when an operation condition based on a relative relationship between the target detected by the surrounding monitoring means and the own vehicle is established.
When at least a part of the travel control means, the periphery monitoring device, and the travel control means has failed,
A vehicle control device that performs an operation change process (S505) for changing the operation condition or the degree of operation.
自車両の周辺監視を可能な周辺監視手段(41,42,43)と、
前記周辺監視装置の出力から走行制御を行う走行制御手段(20−29,315,317)とを有し、
前記走行制御手段は、前記周辺監視手段により検出された物標と前記自車両との相対関係に基づく作動条件が成立した場合に、警報の出力または前記自車両の自動制動の少なくとも一方を行い、
前記走行制御手段、前記周辺監視装置、前記走行制御手段の少なくとも一部が失陥した場合に、
失陥していない場合の警報とは異なる警報に変更する警報変更処理(S521)を実施することを特徴とする車両制御装置。
Perimeter monitoring means (41, 42, 43) capable of monitoring the perimeter of the own vehicle;
Travel control means (20-29, 315, 317) for performing travel control from the output of the periphery monitoring device;
The travel control means performs at least one of output of an alarm or automatic braking of the own vehicle when an operation condition based on a relative relationship between the target detected by the surrounding monitoring means and the own vehicle is established.
When at least a part of the travel control means, the periphery monitoring device, and the travel control means has failed,
A vehicle control device that performs an alarm change process (S521) for changing to an alarm different from an alarm when there is no failure.
請求項1または2に記載の車両制御装置であって、
前記周辺監視手段は複数のセンサ(41,42,43)を有しており、
前記作動変更処理、もしくは前記警報変更処理の少なくとも一方は、前記複数のセンサの失陥の程度もしくは失陥した前記複数のセンサの数に基づいて、前記作動条件もしくは前記警報の変更の内容を決定することを特徴とする車両制御装置。
The vehicle control device according to claim 1 or 2,
The periphery monitoring means has a plurality of sensors (41, 42, 43),
At least one of the operation change process or the alarm change process determines the operation condition or the content of the alarm change based on the degree of failure of the plurality of sensors or the number of the plurality of sensors lost. A vehicle control device.
請求項1または2に記載の車両制御装置であって、
前記走行制御手段は、判断手段(309)及び該判断手段の結果に基づく作動手段(317)とを有しており、
前記走行制御手段は、前記作動手段の失陥の程度に基いて、前記作動条件または前記作動の変更の程度を決定することを特徴とする車両制御装置。
The vehicle control device according to claim 1 or 2,
The travel control unit includes a determination unit (309) and an operation unit (317) based on a result of the determination unit.
The vehicle control apparatus, wherein the travel control means determines the operating condition or the degree of change of the operation based on a degree of failure of the operating means.
請求項1記載の車両制御装置であって、
前記走行制御手段は、運転支援状態において前記自車両の自動制動が可能であり、
前記運転支援状態においては、前記周辺監視装置もしくは前記走行制御手段が失陥した場合に、前記作動変更処理、及び失陥がある旨の警報の出力を実施するとともに、前記運転支援状態ではない状態においては、失陥がある旨の警報を出力することを特徴とする車両制御装置。
The vehicle control device according to claim 1,
The travel control means is capable of automatic braking of the host vehicle in a driving support state,
In the driving support state, when the periphery monitoring device or the travel control unit fails, the operation change process and an output of a warning that there is a failure are performed, and the driving support state is not Outputs a warning that there is a failure.
請求項2記載の車両制御装置であって、
前記走行制御手段は、運転支援状態において前記自車両の自動制動が可能であり、
前記運転支援状態においては、前記周辺監視装置もしくは前記走行制御手段が失陥した場合に、前記警報変更処理、及び失陥がある旨の警報の出力を実施するとともに、前記運転支援状態ではない状態においては、失陥がある旨の警報を出力することを特徴とする車両制御装置。
The vehicle control device according to claim 2,
The travel control means is capable of automatic braking of the host vehicle in a driving support state,
In the driving support state, when the periphery monitoring device or the travel control unit fails, the alarm change process and the output of an alarm indicating that there is a failure are performed and the state is not the driving support state Outputs a warning that there is a failure.
請求項1または5に記載の車両制御装置であって、
前記周辺監視手段は、前記自車両の少なくとも進行方向の物標を監視し、
前記走行制御手段は、所定時間内に前記物標に達する可能性があることを前記作動条件とし、
前記周辺監視装置、もしくは前記走行制御手段の一部が失陥した場合に、
前記作動変更処理により、前記所定時間をより長い時間に設定することを特徴とする車両制御装置。
The vehicle control device according to claim 1 or 5,
The periphery monitoring means monitors at least a target in the traveling direction of the host vehicle,
The travel control means, as the operating condition, that the target may reach the target within a predetermined time,
When a part of the periphery monitoring device or the traveling control means has failed,
The vehicle control device characterized in that the predetermined time is set to a longer time by the operation change process.
請求項2または6に記載の車両制御装置であって、
前記周辺監視手段は、前記自車両の少なくとも進行方向の物標を監視し、
前記走行制御手段は、所定時間内に前記物標に達する可能性があることを前記作動条件とし、
前記周辺監視装置、もしくは前記走行制御手段の一部が失陥した場合に、
前記警報変更処理により、前記警報のタイミングを早め、または、警報の強度を高め、または、警報の時間を長くすることを特徴とする車両制御装置。
The vehicle control device according to claim 2 or 6,
The periphery monitoring means monitors at least a target in the traveling direction of the host vehicle,
The travel control means, as the operating condition, that the target may reach the target within a predetermined time,
When a part of the periphery monitoring device or the traveling control means has failed,
The vehicle control apparatus characterized by advancing the alarm timing, increasing the intensity of the alarm, or extending the alarm time by the alarm change process.
請求項7に記載の車両制御装置であって、
前記作動変更処理により、さらに、前記自動制動のタイミングを早め、または前記自動制動の強度を高めることを特徴とする車両制御装置。
The vehicle control device according to claim 7,
The vehicle control device characterized in that the automatic braking timing is further advanced or the strength of the automatic braking is increased by the operation changing process.
JP2018025337A 2018-02-15 2018-02-15 Vehicle control device Active JP7018330B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018025337A JP7018330B2 (en) 2018-02-15 2018-02-15 Vehicle control device
CN201811590325.4A CN110155044B (en) 2018-02-15 2018-12-25 Vehicle control device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018025337A JP7018330B2 (en) 2018-02-15 2018-02-15 Vehicle control device

Publications (2)

Publication Number Publication Date
JP2019142246A true JP2019142246A (en) 2019-08-29
JP7018330B2 JP7018330B2 (en) 2022-02-10

Family

ID=67645202

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018025337A Active JP7018330B2 (en) 2018-02-15 2018-02-15 Vehicle control device

Country Status (2)

Country Link
JP (1) JP7018330B2 (en)
CN (1) CN110155044B (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021062780A (en) * 2019-10-15 2021-04-22 トヨタ自動車株式会社 Vehicle control system
WO2021172500A1 (en) * 2020-02-28 2021-09-02 いすゞ自動車株式会社 Drive assistance device and drive assistance method
JP6942236B1 (en) * 2020-12-28 2021-09-29 本田技研工業株式会社 Vehicle control devices, vehicle control methods, and programs
WO2021240885A1 (en) * 2020-05-29 2021-12-02 日立Astemo株式会社 Electronic control device
CN114919596A (en) * 2021-02-03 2022-08-19 本田技研工业株式会社 Driving assistance device
WO2022196418A1 (en) * 2021-03-15 2022-09-22 株式会社デンソー Vehicle control device, and vehicle control method
JP7433354B2 (en) 2022-03-23 2024-02-19 本田技研工業株式会社 Control device, control method, and program

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113002554B (en) * 2019-12-20 2024-04-16 奥迪股份公司 Redundant braking system, autonomous vehicle, and corresponding methods and media
CN113619573A (en) * 2020-05-09 2021-11-09 奥迪股份公司 Assistance device, corresponding system, assistance method and medium
CN112477882A (en) * 2020-11-11 2021-03-12 北汽福田汽车股份有限公司 Vehicle fault processing method and device, vehicle and medium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06107141A (en) * 1992-09-30 1994-04-19 Mazda Motor Corp Automatic braking device for vehicle
JP2005050187A (en) * 2003-07-30 2005-02-24 Nissan Motor Co Ltd Neighboring vehicle detection device
JP2016068703A (en) * 2014-09-29 2016-05-09 富士重工業株式会社 Traveling control device of vehicle
WO2017029847A1 (en) * 2015-08-19 2017-02-23 ソニー株式会社 Information processing device, information processing method, and program

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3142635B2 (en) * 1992-06-02 2001-03-07 マツダ株式会社 Vehicle integrated control device
CN101434237B (en) * 2007-11-13 2014-04-02 比亚迪股份有限公司 Automatic parking braking device and control method
CN106164798B (en) * 2014-03-26 2019-01-25 洋马株式会社 Autonomous traveling working truck
JP6287728B2 (en) * 2014-09-25 2018-03-07 株式会社デンソー In-vehicle system, vehicle control device, and program for vehicle control device
JP6303975B2 (en) * 2014-10-22 2018-04-04 株式会社デンソー Obstacle alarm device
CN104290745B (en) * 2014-10-28 2017-02-01 奇瑞汽车股份有限公司 Driving method of semi-automatic driving system for vehicle
WO2016152834A1 (en) * 2015-03-23 2016-09-29 株式会社デンソー Automatic travel control device and automatic travel control system
JP2017165296A (en) * 2016-03-17 2017-09-21 株式会社日立製作所 Automatic operation control system
JP6964271B2 (en) * 2016-03-31 2021-11-10 パナソニックIpマネジメント株式会社 Driving support method and driving support device, automatic driving control device, vehicle, program using it
CN109074733A (en) * 2016-04-28 2018-12-21 本田技研工业株式会社 Vehicle control system, control method for vehicle and vehicle control program
CN106184202B (en) * 2016-07-26 2019-05-14 浙江吉利控股集团有限公司 A kind of control method of the automatic emergency steering system for vehicle
CN106708040B (en) * 2016-12-09 2019-10-08 重庆长安汽车股份有限公司 Sensor module, automated driving system and the method for automated driving system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06107141A (en) * 1992-09-30 1994-04-19 Mazda Motor Corp Automatic braking device for vehicle
JP2005050187A (en) * 2003-07-30 2005-02-24 Nissan Motor Co Ltd Neighboring vehicle detection device
JP2016068703A (en) * 2014-09-29 2016-05-09 富士重工業株式会社 Traveling control device of vehicle
WO2017029847A1 (en) * 2015-08-19 2017-02-23 ソニー株式会社 Information processing device, information processing method, and program

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021062780A (en) * 2019-10-15 2021-04-22 トヨタ自動車株式会社 Vehicle control system
US11628835B2 (en) 2019-10-15 2023-04-18 Toyota Jidosha Kabushiki Kaisha Vehicle control system
JP7207256B2 (en) 2019-10-15 2023-01-18 トヨタ自動車株式会社 vehicle control system
WO2021172500A1 (en) * 2020-02-28 2021-09-02 いすゞ自動車株式会社 Drive assistance device and drive assistance method
JP2021133891A (en) * 2020-02-28 2021-09-13 いすゞ自動車株式会社 Drive support device and drive support method
JP7397759B2 (en) 2020-05-29 2023-12-13 日立Astemo株式会社 electronic control unit
WO2021240885A1 (en) * 2020-05-29 2021-12-02 日立Astemo株式会社 Electronic control device
JP2021187324A (en) * 2020-05-29 2021-12-13 日立Astemo株式会社 Electronic control device
US11554784B2 (en) 2020-12-28 2023-01-17 Honda Motor Co., Ltd. Vehicle control device, vehicle control method, and storage medium
CN114684192B (en) * 2020-12-28 2022-12-30 本田技研工业株式会社 Vehicle control device, vehicle control method, and storage medium
JP2022103827A (en) * 2020-12-28 2022-07-08 本田技研工業株式会社 Vehicle control device, vehicle control method, and program
CN114684192A (en) * 2020-12-28 2022-07-01 本田技研工业株式会社 Vehicle control device, vehicle control method, and program
JP6942236B1 (en) * 2020-12-28 2021-09-29 本田技研工業株式会社 Vehicle control devices, vehicle control methods, and programs
CN114919596A (en) * 2021-02-03 2022-08-19 本田技研工业株式会社 Driving assistance device
WO2022196418A1 (en) * 2021-03-15 2022-09-22 株式会社デンソー Vehicle control device, and vehicle control method
JP2022141419A (en) * 2021-03-15 2022-09-29 株式会社デンソー Vehicle control device and vehicle control method
JP7355052B2 (en) 2021-03-15 2023-10-03 株式会社デンソー Vehicle control device
JP7433354B2 (en) 2022-03-23 2024-02-19 本田技研工業株式会社 Control device, control method, and program

Also Published As

Publication number Publication date
CN110155044B (en) 2022-03-01
JP7018330B2 (en) 2022-02-10
CN110155044A (en) 2019-08-23

Similar Documents

Publication Publication Date Title
JP7018330B2 (en) Vehicle control device
JP6947849B2 (en) Vehicle control device
US20200189618A1 (en) Vehicle and control device and control method of the vehicle
US11613263B2 (en) Electronic control device, vehicle control method, non-transitory tangible computer readable storage medium
US11472428B2 (en) Vehicle control system and control method
US20200231159A1 (en) Control system of vehicle, control method of the same, and non-transitory computer-readable storage medium
US20190359226A1 (en) Vehicle control system and control method
US11858527B2 (en) Control system for vehicle and control method for vehicle
JP7154177B2 (en) Control device, control method and program
US11449060B2 (en) Vehicle, apparatus for controlling same, and control method therefor
CN112977416B (en) Parking assist system and control method thereof
US20200223441A1 (en) Vehicle, apparatus for controlling same, and control method therefor
JP2019156356A (en) Vehicular control device and vehicle
JP2020125027A (en) Vehicle as well as control device and control method of the same
US11524700B2 (en) Vehicle control system, vehicle control method, and non-transitory computer-readable storage medium
US11299163B2 (en) Control system of vehicle, control method of the same, and non-transitory computer-readable storage medium
US11613252B2 (en) Driving assistance system and control method thereof
US20200216096A1 (en) Control system of vehicle, control method of the same, and non-transitory computer-readable storage medium
CN109416887B (en) Vehicle notification device for identifying control object
JP7138133B2 (en) VEHICLE CONTROL DEVICE, VEHICLE, OPERATING METHOD AND PROGRAM OF VEHICLE CONTROL DEVICE
CN117062740A (en) Auxiliary system operation method and auxiliary system
JP6596047B2 (en) Vehicle control device, vehicle, and method
JP2019048518A (en) Notification device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201130

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210103

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210910

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211020

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211221

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220131

R150 Certificate of patent or registration of utility model

Ref document number: 7018330

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150