JP7087623B2 - 車両の制御装置 - Google Patents

車両の制御装置 Download PDF

Info

Publication number
JP7087623B2
JP7087623B2 JP2018080613A JP2018080613A JP7087623B2 JP 7087623 B2 JP7087623 B2 JP 7087623B2 JP 2018080613 A JP2018080613 A JP 2018080613A JP 2018080613 A JP2018080613 A JP 2018080613A JP 7087623 B2 JP7087623 B2 JP 7087623B2
Authority
JP
Japan
Prior art keywords
driving
involvement
driver
degree
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018080613A
Other languages
English (en)
Other versions
JP2019188867A (ja
Inventor
潤 佐藤
恵子 戸崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2018080613A priority Critical patent/JP7087623B2/ja
Priority to US16/379,997 priority patent/US11327485B2/en
Priority to DE102019110110.7A priority patent/DE102019110110A1/de
Priority to CN201910307834.XA priority patent/CN110386141A/zh
Publication of JP2019188867A publication Critical patent/JP2019188867A/ja
Application granted granted Critical
Publication of JP7087623B2 publication Critical patent/JP7087623B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0055Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot with safety arrangements
    • G05D1/0061Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot with safety arrangements for transition from automatic pilot to manual pilot and vice versa
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0059Estimation of the risk associated with autonomous or manual driving, e.g. situation too complex, sensor failure or driver incapacity
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/18Propelling the vehicle
    • B60W30/182Selecting between different operative modes, e.g. comfort and performance modes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/10Interpretation of driver requests or demands
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0053Handover processes from vehicle to occupant
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0234Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using optical markers or beacons
    • G05D1/0236Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using optical markers or beacons in combination with a laser
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0257Control of position or course in two dimensions specially adapted to land vehicles using a radar
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • G05D1/0278Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using satellite positioning signals, e.g. GPS

Description

本発明は車両の制御装置に関する。
特許文献1には、従来の車両の制御装置として、ステアリングから少なくとも一方の手を放している状態のときに、非把持手の位置に基づいて運転に対する危険度合いを算出し、当該危険度合いに応じた警告を行うように構成されたものが開示されている。
特開2011-227663号公報
しかしながら前述した従来の車両の制御装置は、非把持手の位置といった現在のドライバ状態に基づいて警告を行うように構成されたものであり、自動運転中における将来的な手動運転への切り替えを考慮に入れた適切な警告等を含む情報提供を、ドライバに対して行うものではなかった。そのため、手動運転に対するドライバの準備が整っていないときに、ドライバに対して自動運転から手動運転への切り替えを要求してしまうおそれがあった。
本発明はこのような問題点に着目してなされたものであり、手動運転に対するドライバの準備が整っていないときに、ドライバに対して自動運転から手動運転への切り替えを要求するのを抑制することを目的とする。
上記課題を解決するために、本発明のある態様によれば、自動運転に必要な自動運転情報を取得する自動運転情報取得装置と、ドライバに情報を提供するための情報提供装置と、を備える車両を制御するための車両の制御装置が、自動運転情報に基づいて車両の運転操作を自動的に行う自動運転を実施する自動運転制御部と、自動運転中におけるドライバの運転関与度を変化させるための運転関与度制御部と、を備える。運転関与度制御部は、手動運転への切り替えが予想される切替予想地点までの距離、又は所要時間を判定する切替予想判定部と、手動運転に切り替えられたときのドライバの対応難易度を判定する対応難易度判定部と、切替予想地点までの距離、又は所要時間と、対応難易度と、に基づいて、自動運転中におけるドライバの要求運転関与度を設定する要求運転関与度設定部と、要求運転関与度に関する情報をドライバに提供する情報提供部と、を備える。
本発明のこの態様によれば、手動運転に対するドライバの準備が整っていないときに、ドライバに対して自動運転から手動運転への切り替えを要求するのを抑制することができる。
図1は、本発明の第1実施形態による車両用の自動運転システムの概略構成図である。 図2は、本発明の第1実施形態による自動運転システムを搭載した自車両の概略外観図である。 図3は、本発明の第1実施形態による自動運転システムを搭載した自車両の概略内観図である。 図4は、本発明の第1実施形態による運転関与度制御について説明するフローチャートである。 図5は、切替予想地点までの距離とドライバの対応難易度とに基づいて、要求運転関与度を設定するためのマップの一例である。 図6は、本発明の第1実施形態による運転関与度制御によって設定される要求運転関与度の一例を示す図である。 図7は、本発明の第2実施形態による車両用の自動運転システムの概略構成図である。 図8は、本発明の第2実施形態による運転関与度制御について説明するフローチャートである。
以下、図面を参照して本発明の実施形態について詳細に説明する。なお、以下の説明では、同様な構成要素には同一の参照番号を付す。
(第1実施形態)
図1は、本発明の第1実施形態による車両用の自動運転システム100の概略構成図である。図2は、本実施形態による自動運転システム100を搭載した自車両1の概略外観図である。図3は、本実施形態による自動運転システム100を搭載した自車両1の概略内観図である。
図1に示すように、本実施形態による自動運転システム100は、周辺環境情報取得装置10と、自車両情報取得装置20と、ドライバ情報取得装置30と、地図データベース40と、記憶装置50と、ヒューマン・マシン・インターフェース(Human Machine Interface;以下「HMI」という。)60と、ナビゲーション装置70と、電子制御ユニット80と、を備える。
周辺環境情報取得装置10は、自車両周辺の障害物(例えば建物、道路上の先行車や後続車、対向車といった走行車両、停止車両、縁石、落下物、及び歩行者等)や天候といった自車両1の周辺環境状態に関する情報(以下「周辺環境情報」という。)を取得するための装置である。図1から図3に示すように、本実施形態による周辺環境情報取得装置10は、ライダ(LIDAR;Laser Imaging Detection And Ranging)11と、ミリ波レーダーセンサ12と、外部カメラ13と、照度センサ14と、レインセンサ15と、外部情報受信装置16と、を備える。
ライダ11は、レーザー光を利用して自車両周辺の道路や障害物を検出する。図2に示すように、本実施形態ではライダ11は、自車両1のルーフ上に取り付けられている。ライダ11は、自車両1の全周囲に向けてレーザー光を順次照射し、その反射光から道路及び自車両周辺の障害物までの距離を計測する。そしてライダ11は、その計測結果に基づいて自車両1の全周囲における道路及び障害物の三次元画像を生成し、生成した三次元画像の情報を電子制御ユニット80に送信する。
なお、ライダ11の取り付け箇所や個数は、三次元画像を生成するために必要な情報を取得できるのであれば特に限られるものではない。例えば、自車両1のグリルや、ヘッドライトやブレーキランプといったライト類の内部に分割して取り付けても良いし、自車両1の車両本体部分(骨格)に分割して取り付けても良い。
ミリ波レーダーセンサ12は、電波を利用してライダ11よりも遠距離に亘る自車両周辺の障害物を検出する。図2に示すように、本実施形態ではミリ波レーダーセンサ12は、自車両1のフロントバンパー及びリヤバンパーにそれぞれ取り付けられている。ミリ波レーダーセンサ12は、自車両1の周囲(本実施形態では自車両1の前方、後方及び側方)に電波を発射し、その反射波から自車両周辺の障害物までの距離や当該障害物との相対速度を計測する。そしてミリ波レーダーセンサ12は、その計測結果を自車両周辺情報として電子制御ユニット80に送信する。
なお、ミリ波レーダーセンサ12の取り付け箇所や個数は、必要な自車両周辺情報を取得できるのであれば特に限られるものではない。例えば、自車両1のグリル、又はヘッドライトやブレーキランプといったライト類の内部に取り付けても良いし、自車両1の車両本体部分(骨格)に取り付けても良い。
外部カメラ13は、自車両1の前方を撮影する。図2に示すように、本実施形態では外部カメラ13は、自車両1のルーフ先端の中央部に取り付けられている。外部カメラ13は、撮影した自車両前方の映像の画像処理を行うことで、自車両前方の障害物情報や、走行レーンの車線幅や道路形状、道路標識、白線の有無、信号機の状態といった自車両前方の道路情報、ヨー角(走行レーンに対する車両の相対的な方向)や走行レーン中央からの車両オフセット位置といった自車両1の走行情報、雨や雪、霧といった自車両周辺の気象情報などを検出する。そして外部カメラ13は、検出したこれらの撮影情報を電子制御ユニット80に送信する。
なお、外部カメラ13の取り付け箇所や個数は、自車両1の前方を撮影できるのであれば特に限られるものではない。例えば、自車両内のフロントガラス裏面の中央上部に取り付けても良い。
照度センサ14は、自車両周囲の照度を検出する。図2に示すように、本実施形態では、照度センサ14は自車両内のインストルメントパネルの上面に取り付けられている。照度センサ14は、検出した自車両周囲の照度情報を電子制御ユニット80に送信する。
レインセンサ15は、降水の有無、及び降水量を検出する。図2に示すように、本実施形態では、レインセンサ15は自車両1のフロントガラス表面の中央上部に取り付けられている。レインセンサ15は、内蔵された発光素子によって生じさせた光をフロントガラス表面に向けて照射し、そのときの反射光の変化を計測することで、降水の有無や降水量といった降水情報を検出する。そしてレインセンサ15は、検出した降水情報を電子制御ユニット80に送信する。
外部情報受信装置16は、例えば道路交通情報通信システムセンタなどの外部の通信センタから送信されてくる渋滞情報や気象情報(雨や雪、霧、風速等の情報)などの外部情報を受信する。外部情報受信装置16は、受信した外部情報を電子制御ユニット80に送信する。
自車両情報取得装置20は、自車両1の速度や加速度、姿勢、現在位置といった自車両1の状態に関する情報(以下「自車両情報」という。)を取得するための装置である。図1に示すように、本実施形態による自車両情報取得装置20は、車速センサ21と、加速度センサ22と、ヨーレートセンサ23と、GPS受信機24と、を備える。
車速センサ21は、自車両1の速度を検出するためのセンサである。車速センサ21は、検出した自車両1の車速情報を電子制御ユニット80に送信する。
加速度センサ22は、加速時や制動時における自車両1の加速度を検出するためのセンサである。加速度センサ22は、検出した自車両1の加速度情報を電子制御ユニット80に送信する。
ヨーレートセンサ23は、自車両1の姿勢を検出するためのセンサであって、詳しくは自車両1の旋回時におけるヨー角の変化速度、すなわち自車両1の鉛直軸まわりの回転角速度(ヨーレート)を検出する。ヨーレートセンサ23は、検出した自車両1の姿勢情報を電子制御ユニット80に送信する。
GPS受信機24は、3個以上のGPS衛星からの信号を受信して自車両1の緯度及び経度を特定し、自車両1の現在位置を検出する。GPS受信機24は、検出した自車両1の現在位置情報を電子制御ユニット80に送信する。
ドライバ情報取得装置30は、自車両1のドライバの状態に関する情報(以下「ドライバ情報」という。)を取得するための装置である。図1及び図3に示すように、本実施形態によるドライバ情報取得装置30は、ドライバモニタカメラ31と、ステアリングタッチセンサ32と、を備える。
ドライバモニタカメラ31は、ステアリングコラムカバーの上面に取り付けられ、ドライバの外観を撮影する。ドライバモニタカメラ31は、撮影したドライバの映像を画像処理することで、ドライバの表情(ドライバの顔の向きや眼の開閉度など)や姿勢といったドライバの外観情報を検出する。そしてドライバモニタカメラ31は、検出したドライバの外観情報を電子制御ユニット80に送信する。
ステアリングタッチセンサ32は、ステアリングに取り付けられる。ステアリングタッチセンサ32は、ドライバがステアリングを把持しているか否かを検出し、検出したステアリングの把持情報を電子制御ユニット80に送信する。
地図データベース40は、地図情報に関するデータベースである。この地図データベース40は、例えば車両に搭載されたハードディスクドライブ(HDD;Hard Disk Drive)内に記憶されている。地図情報には、道路の位置情報や道路形状の情報(例えばカーブと直線部の種別、カーブの曲率など)、交差点及び分岐点の位置情報、道路種別などの情報などが含まれる。
記憶装置50は、自動運転専用の道路地図を記憶する。自動運転専用の道路地図は、ライダ11が生成した三次元画像に基づいて電子制御ユニット80が作成しており、電子制御ユニット80によって常時又は定期的に更新される。
HMI60は、ドライバ、又は車両乗員と自動運転システム100との間で情報の入出力を行うためのインターフェイスである。本実施形態によるHMI60は、ドライバに各種の情報を提供するための情報提供装置61と、ドライバの音声を認識するためのマイク62と、ドライバが入力操作を行うためのタッチパネルや操作ボタンなどの入力操作器63と、を備える。
情報提供装置61は、文字情報や画像情報を表示するためのディスプレイ611と、音を発生させるためのスピーカ612と、を備える。
ナビゲーション装置70は、HMI60を介してドライバによって設定された目的地まで自車両1を案内する装置である。ナビゲーション装置70は、GPS受信機24で検出した自車両1の現在位置情報と地図データベース40の地図情報とに基づいて、目的地までの目標ルートを演算し、演算した目標ルートに関する情報をナビゲーション情報として電子制御ユニット80に送信する。
電子制御ユニット80は、双方向性バスによって相互に接続された中央演算装置(CPU)、読み出し専用メモリ(ROM)、ランダムアクセスメモリ(RAM)、入力ポート、及び出力ポートを備えたマイクロコンピュータである。
電子制御ユニット80は、ドライバが手動運転モード(加速、操舵、及び制動に関する運転操作をドライバが行うモード)から自動運転モードに切り替えたときに、加速、操舵、及び制動に関する運転操作を自動的に行う自動運転制御部81を備える。自動運転制御部81は、電子制御ユニット80に入力された周辺環境情報や自車両情報、ドライバ情報、ナビゲーション情報などの自動運転のために必要な自動運転情報に基づいて、加速、操舵、及び制動に関する運転操作を行うために必要な各種の制御部品を制御し、車両の自動運転を実施する。
ここでドライバは、手動運転中においては自車両の周囲の交通環境を把握し、周囲の交通環境に応じた適切な運転操作を実施している。一方で自動運転中においては、ドライバが運転に関与していない場合や、運転に関与していたとしても運転関与の度合い(運転関与度)が低い場合がある。
そのため、自動運転中に手動運転への切り替えが要求されたときに、ドライバが運転に関与していなかったり、又は運転に関与していたとしても運転関与度が低かったりすると、ドライバが周囲の交通環境を即座に把握できないことがある。その結果、手動運転に切り替えられたときに適切な運転操作が実施できず、例えば車両の挙動が乱れたりするおそれがある。すなわち、自動運転中において運転関与度が低いときというのは、手動運転に対するドライバの準備が整っていないときと言うことができる。
したがって、自動運転中において、自車両1の目標ルート上に手動運転への切り替えが予想される地点(以下「切替予想地点」という。)が存在する場合には、切替予想地点までの距離や所要時間に基づいて、ドライバの運転関与度を変化させることが望ましい。具体的には、切替予想地点に近づくにつれて、ドライバの運転関与度を徐々に高めていくことが望ましい。
このようにすることで、手動運転に対するドライバの準備が整っていないときに、ドライバに対して自動運転から手動運転への切り替えを要求するのを抑制することができる。すなわち、手動運転への切り替えが要求されたときに、ドライバが、自身の状態を手動運転に対する準備が整っていない状態から手動運転を実施しなければならない状態へと急激に変化させなければならなくなるのを抑制することができる。そのため、手動運転への切り替えが要求されたときに、ドライバ状態を急激に変化させることなく、自動運転から手動運転へスムーズに移行させることができる。
なお切替予想地点としては、例えば自動運転が可能な区間(以下「自動運転区間」という。)の終了地点が挙げられる。またこれに以外にも、例えば大雨や大雪、濃霧、暴風などの気象条件やトンネルの出口などの道路環境等に起因して、周辺環境情報の検出精度が低下して自動運転の継続が困難と考えられる区間が目標ルート上に含まれている場合には、当該区間への突入地点が挙げられる。このように切替予想地点は、何らかの手段によって予想することが可能な自動運転の実施限界地点である。
また自動運転中においては、例えばライダ11や各種のセンサ類やカメラ類が故障して周辺環境情や自車両情報、ドライバ情報を正常に検出できなくなった場合など、予期せぬ何らかの要因で自動運転を継続することが適切でない状況となる場合がある。このような状況になったときには、手動運転へ切り替えることが望ましい。
そのため、切替予想地点に到達する前であっても、手動運転に切り替える必要が生じる場合がある。このような場合も、ドライバ状態を急激に変化させることなく、自動運転から手動運転へスムーズに移行させることが望ましいが、前述したような予期せぬ事態の発生を予測することは難しいため、切替予想地点に到達する前に手動運転への切り替え要求が生じるかを予測することは難しい。
ここで自車両の周囲の交通環境は時々刻々と変化し、周囲の交通環境に応じて手動運転に切り替えられたときのドライバの対応難易度は変化する。
例えば交通量が多い場合や、他車両との相対距離が近い場合や相対速度が高い場合、走行している道路の制限車速が高い場合や曲率が小さい場合、交通規制が敷かれている場合など、周囲の交通環境が複雑な場合には、周囲の交通環境の把握に時間がかかると共に、手動運転に切り替えられたときの運転操作も複雑になる傾向にある。そのため、周囲の交通環境が複雑な場合には、手動運転に切り替えられたときのドライバの負担も必然的に大きくなるので、ドライバの対応難易度は高くなる。一方で、周囲の交通環境が単純な場合には、手動運転に切り替えられたときのドライバの負担も小さくなるので、ドライバの対応難易度は低くなる。
そのため、例えばドライバ状態が或る一定のドライバ状態にある場合において、手動運転への切り替えが周囲の交通環境が複雑な状況で要求されたときは、周囲の交通環境が単純な状況で要求されたときと比較して、手動運転に切り替えられたときのドライバの負担が大きくなる分だけ、ドライバ状態の変化も大きくなると言える。
したがって、自車両の周囲の交通環境、ひいては手動運転に切り替えられたときのドライバの対応難易度に基づいて、ドライバの運転関与度を変化させることが望ましい。具体的には、手動運転に切り替えられたときのドライバの対応難易度が高いときには、低いときと比べてドライバの運転関与度を高くしておくことが望ましい。このようにすることで、仮に切替予想地点に到達する前に手動運転への切り替えが要求されたとしても、ドライバ状態の急激な変化を抑制することができる。そのため、自動運転から手動運転へスムーズに移行させることができる。
そこで本実施形態による電子制御ユニット80は、自動運転制御部81の他にも、自動運転中におけるドライバの運転関与度を変化させるための運転関与度制御部82を備えている。そして運転関与度制御部82は、切替予想判定部821と、対応難易度判定部822と、要求運転関与度設定部823と、情報提供部824と、を備えており、切替予想地点までの距離(又は所要時間)と、手動運転に切り替えられたときのドライバの対応難易度と、に基づいて、自動運転中において要求される適切ドライバの運転関与度(以下「要求運転関与度」という。)を設定することができるように構成されている。
図4は、電子制御ユニット80が実施するこの本実施形態による運転関与度制御について説明するフローチャートである。電子制御ユニット80は、自動運転モード中に本ルーチンを所定の演算周期で繰り返し実施する。
ステップS1において、電子制御ユニット80は、自車両1の目標ルート上に切替予想地点が存在するか否かを判定する。本実施形態では電子制御ユニット80は、ナビゲーション情報に基づいて、目標ルート上に自動運転区間の終了地点が存在しているかを判定し、当該終了地点が存在していれば切替予想地点が存在すると判定する。また電子制御ユニット80は、ナビゲーション情報と、必要に応じて周辺環境情報に含まれる外部情報に基づいて、例えば気象条件や道路環境等によって目標ルート上に自動運転の継続が困難な区間が存在するかを判定し、当該区間が存在していれば切替予想地点が存在すると判定する。なお、目標ルート上に切替予想地点が存在するか否かを判定するための具体的な方法は、このような方法に限られるものではない。
電子制御ユニット80は、目標ルート上に切替予想地点が存在していれば、ステップS2の処理に進む。一方で電子制御ユニット80は、目標ルート上に切替予想地点が存在していなければ、ステップS7の処理に進む。
ステップS2において、電子制御ユニット80は、切替予想地点までの距離、又は所要時間を算出する。本実施形態では電子制御ユニット80は、自車両情報に含まれる自車両の現在位置と、切替予想地点と、に基づいて、切替予想地点までの距離を算出している。
ステップS3において、電子制御ユニット80は、仮に現時点で手動運転に切り替えられた場合のドライバの対応難易度を判定する。本実施形態では電子制御ユニット80は、周辺環境情報に基づいて周囲の交通環境を認識し、ドライバの対応難易度を判定する。なお本実施形態では、周囲の交通環境の複雑さ(前述した交通量の多さや道路の曲率等)に応じて、ドライバの対応難易度を3段階(易、中、難)にレベル分けしている。
ステップS4において、電子制御ユニット80は、図5のマップを参照し、切替予想地点までの距離と、ドライバの対応難易度と、に基づいて、自動運転中におけるドライバに対する要求運転関与度を設定する。
図5に示すように、本実施形態では、要求運転関与度を、レベル1、レベル2、及びレベル3の3つに大別している。
要求運転関与度がレベル1のときは、自動運転システム100がドライバによる運転関与は不要と判断しているときであり、例えば運転操作とは関係のないサブタスク(スマートフォンの操作等)の実施を許容できるようなときである。
要求運転関与度がレベル2のときは、自動運転システム100がドライバに対して断続的な運転関与を要求しているときであり、例えば自動運転システム100からドライバに対して、各種の運転支援(車線変更や速度変更なそ)を実施するための許可を求め、ドライバが周囲の交通環境を把握してその運転支援の実施を許可した場合に限り、当該運転支援を実施するようなときである。
要求運転関与度がレベル3のときは、自動運転システム100がドライバに対して連続的な運転関与を要求しているときであり、例えばドライバが各種の運転支援を実施するように自動運転システム100に指示した場合に限り、当該運転支援を実施するようなときである。
図5に示すように、要求運転関与度は、切替予想地点までの距離(又は所要時間)が短い場合には、高い場合に比べて高くされる。また要求運転関与度は、ドライバの対応難易度が高い場合には、低い場合に比べて高くされる。
ステップS5において、電子制御ユニット80は、要求運転関与度が変更されたか否かを判定する。具体的には電子制御ユニット80は、前回の処理で設定された要求運転関与度と、今回の処理で設定された要求運転関与度と、が異なるか否かを判定し、それらが異なっていれば要求運転関与度が変更されたと判定する。電子制御ユニット80は、要求運転関与度が変更されていれば、ステップS6の処理に進む。一方で電子制御ユニット80は、要求運転関与度が変更されていなければ、今回の処理を終了する。
ステップS6において、電子制御ユニット80は、要求運転関与度に関する情報を、情報提供装置61を介してドライバに提供する。要求運転関与度に関する情報は、例えばドライバの状態を要求運転関与度に応じた状態に向けて変化させることを促すことができるような情報などであり、文字や音声によって具体的な情報を提供しても良いし、ブザー音の大きさ等を変化させることによって簡易的に情報を提供しても良い。このように要求運転関与度に関する情報をドライバに提供することで、ドライバの運転関与度が要求運転関与度となるように、ドライバに対してドライバ状態の変化を促すことができる。
ステップS7において、電子制御ユニット80は、切替予想地点までの距離を、ドライバの対応難易度を考慮に入れなければ要求運転関与度がレベル1に設定される距離、すなわち切替予想地点から十分に離れた或る一定の距離に設定する。したがって、ステップS7を経由してステップS3以降の処理に移行したときは、要求運転関与度は、ドライバの対応難易度に基づいて設定されることになる。
図6は、本実施形態による運転関与度制御によって設定される要求運転関与度の一例を示す図である。なお図6は、道路の曲率によってドライバの対応難易度を判定した例を示しており、図6において対応難易度が「易」と記載されている区間は、道路が直線、又は直線とみなせる区間である。また対応難易度が「中」と記載されている区間は、道路が緩いカーブ(曲率の大きいカーブ)となっている区間であり、「難」と記載されている区間は、道路がきついカーブ(曲率の小さいカーブ)となっている区間である。
図6に示すように、切替予想地点から一定以上離れたA地点に到達するまでは、基本的にドライバの対応難易度に応じて要求運転関与度が変化することになる。
したがって図6に示す例では、A地点に到達するまでの区間においてドライバの対応難易度が「中」となっている区間が存在するので、その区間の要求運転関与度はレベル2に設定され、その区間以外の区間の要求運転関与度はレベル1に設定されている。
また、切替予想地点に一定以上近づいたA地点からB地点までの区間においては、切替予想地点に向けてドライバの運転関与度を徐々に高めていく必要があるので、要求運転関与度は基本的にレベル2以上に設定される。そして、ドライバの対応難易度を考慮したときに要求運転関与度をレベル2よりも高くする必要がある場合には、ドライバの対応難易度に応じて要求運転関与度が高くされる。
したがって図6に示す例では、A地点からB地点までの区間において、ドライバの対応難易度が「難」となっている区間の要求運転関与度はレベル3に設定され、その区間以外の区間の要求運転関与度はレベル2に設定されている。
また、B地点まで到達した後は、一定期間内に手動運転への切り替えが予想されるので、ドライバの運転関与度をさらに高めていく必要がある。そのため、B地点まで到達した後は、要求運転関与度はレベル3に設定される。
以上説明した本実施形態によれば、自動運転に必要な例えば周辺環境情報や自車両情報、ドライバ情報、ナビゲーション情報などの自動運転情報を取得するための自動運転情報取得装置(周辺環境情報取得装置10、自車両情報取得装置20、ドライバ情報取得装置30、ナビゲーション装置70)と、ドライバに情報を提供するための情報提供装置61と、を備える車両を制御する電子制御ユニット80(制御装置)が、自動運転情報に基づいて、車両の運転操作を自動的に行う自動運転を実施する自動運転制御部81と、自動運転中におけるドライバの運転関与度を変化させるための運転関与度制御部82と、を備える。
そして運転関与度制御部82は、手動運転への切り替えが予想される切替予想地点までの距離、又は所要時間を判定する切替予想判定部821と、手動運転に切り替えられたときのドライバの対応難易度を判定する対応難易度判定部822と、切替予想地点までの距離、又は所要時間と、対応難易度と、に基づいて、自動運転中におけるドライバの要求運転関与度を設定する要求運転関与度設定部823と、要求運転関与度に関する情報をドライバに提供する情報提供部824と、を備えるように構成されている。具体的には要求運転関与度設定部823は、切替予想地点までの距離、又は所要時間が短い場合には、高い場合に比べて要求運転関与度を高くし、対応難易度が高い場合には、低い場合に比べて要求運転関与度を高くするように構成されている。
これにより、ドライバに対して自動運転中における適切な運転関与度を伝達することができるので、手動運転に対する準備が整っていない状態のときに、ドライバに対して自動運転から手動運転への切り替えを要求することを抑制できる。
また、仮に手動運転に切り替えられたときのドライバの対応難易度のみに基づいて要求運転関与度を設定していた場合には、現在地から近い位置に切替予想地点があったとしても、要求運転関与度を低下させてしまうことが想定される。そうすると、近い将来に手動運転への切り替えを行う必要があるにもかかわらず、要求運転関与度を低下させてしまうことになり、手動運転に対する準備が整っていない状態のときに、ドライバに対して自動運転から手動運転への切り替えを要求することになるおそれがある。
これに対して本実施形態のように、切替予想地点までの距離、又は所要時間も考慮に入れて要求運転関与度を設定することで、現在地から近い位置に切替予想地点があるときは、要求運転関与度を高い状態に維持することができる。そのため、近い将来に手動運転への切り替えが予想される場合に、不用意に要求運転関与度を低下させてしまうのを抑制できる。
(第2実施形態)
次に、本発明の第2実施形態について説明する。本実施形態は、ドライバの現在の運転関与度(以下「実運転関与度」という。)を判定し、実運転関与度と要求運転関与度との間に乖離がある場合には、その乖離度合いに応じた情報をドライバに提供する点で、第1実施形態と相違する。以下、その相違点を中心に説明する。
図7は、本発明の第2実施形態による車両用の自動運転システム100の概略構成図である。
図7に示すように、本実施形態による運転関与度制御部82は、切替予想判定部821、対応難易度判定部822、要求運転関与度設定部823、及び情報提供部824に加えて、実運転関与度判定部825と、乖離度合い算出部826と、を備えており、実運転関与度と要求運転関与度との間に乖離がある場合には、その乖離度合いに応じた情報をドライバに提供するように構成されている。
図8は、本実施形態による運転関与度制御について説明するフローチャートである。電子制御ユニット80は、自動運転モード中に本ルーチンを所定の演算周期で繰り返し実施する。なお図7において、ステップS1からステップS4までの処理、及びステップS7の処理は、前述した第1実施形態と同様の処理なので、ここでは説明を省略する。
ステップS21において、電子制御ユニット80は、ドライバ情報に含まれる例えばドライバの外観情報等に基づいて、ドライバの実運転関与度を判定する。
ステップS22において、電子制御ユニット80は、実運転関与度と、要求運転関与度と、に乖離があるか否かを判定する。電子制御ユニット80は、実運転関与度と、要求運転関与度と、に乖離があれば、ステップS23の処理に進む。一方で電子制御ユニット80は、実運転関与度と、要求運転関与度と、に乖離がなければ、今回の処理を終了する。
ステップS23において、電子制御ユニット80は、実運転関与度と、要求運転関与度と、の乖離度合いを算出する。
ステップS24において、電子制御ユニット80は、乖離度合いに応じた情報をドライバに提供する。例えば電子制御ユニット80は、実運転関与度よりも要求運転関与度の方が高い場合には、乖離度合いに応じて、ドライバに対して実運転関与度を要求運転関与度まで高めることを促すことができるような情報を提供する。一方で実運転関与度よりも要求運転関与度の方が低い場合には、乖離度合いに応じて、ドライバに対して運転関与度を低下させても良い旨の情報を提供する。
以上説明した本実施形態による電子制御ユニット80の運転関与度制御部82は、第1実施形態で説明した切替予想判定部821、対応難易度判定部822、要求運転関与度判定部、及び情報提供部824に加えて、ドライバの実際の運転関与度を判定する実運転関与度判定部825と、実際の運転関与度と要求運転関与度との乖離度合いを算出する乖離度合い算出部826と、を備える。
そして情報提供部824は、要求運転関与度に関する情報として、前記乖離度合いに応じた情報をドライバに提供するように構成されている。
これにより、第1実施形態と同様の効果が得られるほか、ドライバ状態を要求運転関与度に応じた状態に向けて変化させるための情報を、乖離度合いに基づいて適宜変更することが可能となる。そのため、ドライバ状態を要求運転関与度に応じた状態に向けてより確実に変化させることができる。
以上、本発明の実施形態について説明したが、上記実施形態は本発明の適用例の一部を示したに過ぎず、本発明の技術的範囲を上記実施形態の具体的構成に限定する趣旨ではない。
10 周辺環境情報取得装置(自動運転情報取得装置)
20 自車両情報取得装置(自動運転情報取得装置)
30 ドライバ情報取得装置(自動運転情報取得装置)
70 ナビゲーション装置(自動運転情報取得装置)
80 電子制御ユニット(制御装置)
81 自動運転制御部
82 運転関与度制御部
821 切替予想判定部
822 対応難易度判定部
823 要求運転関与度設定部
824 情報提供部
825 実運転関与度判定部
826 乖離度合い算出部

Claims (4)

  1. 自動運転に必要な自動運転情報を取得する自動運転情報取得装置と、
    ドライバに情報を提供するための情報提供装置と、
    を備える車両を制御するための車両の制御装置であって、
    前記自動運転情報に基づいて、車両の運転操作を自動的に行う自動運転を実施する自動運転制御部と、
    自動運転中におけるドライバの運転操作に対する関与度合いである運転関与度を変化させるための運転関与度制御部と、
    を備え、
    前記運転関与度制御部は、
    手動運転への切り替えが予想される切替予想地点までの距離、又は所要時間を判定する切替予想判定部と、
    手動運転に切り替えられたときのドライバの対応難易度を判定する対応難易度判定部と、
    前記切替予想地点までの距離、又は所要時間と、前記対応難易度と、に基づいて、自動運転中において要求されるドライバの運転操作に対する関与度合いである要求運転関与度を設定する要求運転関与度設定部と、
    前記要求運転関与度に関する情報をドライバに提供する情報提供部と、
    を備える車両の制御装置。
  2. 前記運転関与度制御部は、
    ドライバの実際の運転関与度を判定する実運転関与度判定部と、
    前記実際の運転関与度と前記要求運転関与度との乖離度合いを算出する乖離度合い算出部と、
    をさらに備え、
    前記情報提供部は、
    前記要求運転関与度に関する情報として、前記乖離度合いに応じた情報をドライバに提供する、
    を備える請求項1に記載の車両の制御装置。
  3. 前記要求運転関与度設定部は、
    前記切替予想地点までの距離、又は所要時間が短い場合には、高い場合に比べて前記要求運転関与度を高くする、
    請求項1又は請求項2に記載の車両の制御装置。
  4. 前記要求運転関与度設定部は、
    前記対応難易度が高い場合には、低い場合に比べて前記要求運転関与度を高くする、
    請求項1から請求項3までのいずれか1項に記載の車両の制御装置。
JP2018080613A 2018-04-19 2018-04-19 車両の制御装置 Active JP7087623B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2018080613A JP7087623B2 (ja) 2018-04-19 2018-04-19 車両の制御装置
US16/379,997 US11327485B2 (en) 2018-04-19 2019-04-10 Control device for vehicle, and vehicle
DE102019110110.7A DE102019110110A1 (de) 2018-04-19 2019-04-17 Steuerungseinrichtung für ein Fahrzeug
CN201910307834.XA CN110386141A (zh) 2018-04-19 2019-04-17 车辆的控制装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018080613A JP7087623B2 (ja) 2018-04-19 2018-04-19 車両の制御装置

Publications (2)

Publication Number Publication Date
JP2019188867A JP2019188867A (ja) 2019-10-31
JP7087623B2 true JP7087623B2 (ja) 2022-06-21

Family

ID=68105444

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018080613A Active JP7087623B2 (ja) 2018-04-19 2018-04-19 車両の制御装置

Country Status (4)

Country Link
US (1) US11327485B2 (ja)
JP (1) JP7087623B2 (ja)
CN (1) CN110386141A (ja)
DE (1) DE102019110110A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6642399B2 (ja) 2016-12-07 2020-02-05 トヨタ自動車株式会社 車両走行制御装置
JP6984232B2 (ja) 2017-08-25 2021-12-17 トヨタ自動車株式会社 自動運転装置
JP7172257B2 (ja) 2018-08-01 2022-11-16 トヨタ自動車株式会社 自動運転システム
KR20200069084A (ko) * 2018-12-06 2020-06-16 팅크웨어(주) 도로 제한 속도 판단 방법, 도로 제한 속도 판단 장치, 전자 기기, 컴퓨터 프로그램 및 컴퓨터 판독 가능한 기록 매체
EP3947081A4 (en) * 2019-03-29 2023-06-21 INTEL Corporation AUTONOMOUS VEHICLE SYSTEM
US11772671B2 (en) * 2019-06-03 2023-10-03 Toyota Research Institute, Inc. Systems and methods for predicting control handback
CN113479216B (zh) * 2020-03-16 2024-03-29 本田技研工业株式会社 控制装置、系统、计算机可读存储介质以及控制方法
JP7369078B2 (ja) * 2020-03-31 2023-10-25 本田技研工業株式会社 車両制御装置、車両制御方法、及びプログラム
JPWO2021229671A1 (ja) * 2020-05-12 2021-11-18
JP7375678B2 (ja) * 2020-06-02 2023-11-08 トヨタ自動車株式会社 車両制御方法、車両制御プログラム、及び車両制御システム
JP7272329B2 (ja) * 2020-07-21 2023-05-12 トヨタ自動車株式会社 車両の制御装置
CN114394114A (zh) * 2022-01-21 2022-04-26 武汉路特斯汽车有限公司 一种自动驾驶控制方法、装置及计算机存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016015137A (ja) 2014-06-30 2016-01-28 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツングRobert Bosch Gmbh 車両用自律走行システム及び該自律走行システムによる運転を実施するための方法
JP2016137819A (ja) 2015-01-28 2016-08-04 日立オートモティブシステムズ株式会社 自動運転制御装置
JP2017030555A (ja) 2015-07-31 2017-02-09 トヨタ自動車株式会社 車両制御装置
JP2017199279A (ja) 2016-04-28 2017-11-02 トヨタ自動車株式会社 運転意識推定装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10329575A (ja) * 1997-05-29 1998-12-15 Toyota Motor Corp 自動走行車両制御装置
JP5018926B2 (ja) 2010-04-19 2012-09-05 株式会社デンソー 運転補助装置、及びプログラム
JP6135618B2 (ja) * 2014-08-08 2017-05-31 トヨタ自動車株式会社 車両制御装置
JP6304086B2 (ja) * 2015-03-23 2018-04-04 トヨタ自動車株式会社 自動運転装置
JP6531983B2 (ja) * 2015-07-31 2019-06-19 パナソニックIpマネジメント株式会社 自動運転装置、自動運転支援方法及び自動運転支援プログラム
US10037031B2 (en) * 2016-02-05 2018-07-31 Ford Global Technologies, Llc Vehicle operation states
JP6652417B2 (ja) * 2016-03-16 2020-02-26 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム
US10209708B2 (en) * 2016-07-28 2019-02-19 Lytx, Inc. Determining driver engagement with autonomous vehicle
JP6469635B2 (ja) * 2016-12-16 2019-02-13 本田技研工業株式会社 車両制御装置
KR20180112949A (ko) * 2017-04-05 2018-10-15 현대자동차주식회사 차량의 자율 주행 제어 시스템 및 그를 이용한 자율 주행 제어방법
WO2019046204A1 (en) * 2017-08-28 2019-03-07 nuTonomy Inc. MIXED-MODE DRIVING OF A VEHICLE HAVING AUTONOMOUS DRIVING CAPABILITIES

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016015137A (ja) 2014-06-30 2016-01-28 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツングRobert Bosch Gmbh 車両用自律走行システム及び該自律走行システムによる運転を実施するための方法
JP2016137819A (ja) 2015-01-28 2016-08-04 日立オートモティブシステムズ株式会社 自動運転制御装置
JP2017030555A (ja) 2015-07-31 2017-02-09 トヨタ自動車株式会社 車両制御装置
JP2017199279A (ja) 2016-04-28 2017-11-02 トヨタ自動車株式会社 運転意識推定装置

Also Published As

Publication number Publication date
DE102019110110A1 (de) 2019-10-24
JP2019188867A (ja) 2019-10-31
US11327485B2 (en) 2022-05-10
US20190324452A1 (en) 2019-10-24
CN110386141A (zh) 2019-10-29

Similar Documents

Publication Publication Date Title
JP7087623B2 (ja) 車両の制御装置
JP6354776B2 (ja) 車両の制御装置
JP6690559B2 (ja) 車両の制御装置
JP6930383B2 (ja) 車両の制御装置
JP6418199B2 (ja) 車両の自動運転システム
JP6252304B2 (ja) 車両用認知通知装置、車両用認知通知システム
JP6460019B2 (ja) 車両の制御装置
JP4855158B2 (ja) 運転支援装置
JP6460058B2 (ja) 車両の制御装置
JP2018136700A (ja) 車両の制御装置
JP6996253B2 (ja) 車両の制御装置
JP6720732B2 (ja) 車両の制御装置
JP2017185946A (ja) 車両の自動運転システム
JP2018127084A (ja) 自動運転車両
JP6772527B2 (ja) 車両の制御装置
JP6790522B2 (ja) 車両の制御装置
JP6658358B2 (ja) 車両の制御装置
JP6701913B2 (ja) 車両の制御装置
JP2018185555A (ja) 車両の制御装置
JP7272329B2 (ja) 車両の制御装置
JP2019087874A (ja) 車両の制御装置
JP2021172153A (ja) 車両の制御装置
JP2022024789A (ja) 車両の制御装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200721

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210721

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210803

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211001

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211019

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220510

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220523

R151 Written notification of patent or utility model registration

Ref document number: 7087623

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151