JP7101630B2 - 車両制御装置、車両制御方法、およびプログラム - Google Patents

車両制御装置、車両制御方法、およびプログラム Download PDF

Info

Publication number
JP7101630B2
JP7101630B2 JP2019032949A JP2019032949A JP7101630B2 JP 7101630 B2 JP7101630 B2 JP 7101630B2 JP 2019032949 A JP2019032949 A JP 2019032949A JP 2019032949 A JP2019032949 A JP 2019032949A JP 7101630 B2 JP7101630 B2 JP 7101630B2
Authority
JP
Japan
Prior art keywords
vehicle
user
control unit
automatic
boarded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019032949A
Other languages
English (en)
Other versions
JP2020138552A (ja
Inventor
悠記 原
八州志 照田
順平 野口
龍馬 田口
雄太 高田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2019032949A priority Critical patent/JP7101630B2/ja
Priority to CN202010103391.5A priority patent/CN111619568B/zh
Priority to US16/794,293 priority patent/US11377098B2/en
Publication of JP2020138552A publication Critical patent/JP2020138552A/ja
Application granted granted Critical
Publication of JP7101630B2 publication Critical patent/JP7101630B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/06Automatic manoeuvring for parking
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027Parking aids, e.g. instruction means
    • B62D15/0285Parking performed automatically
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18Propelling the vehicle
    • B60W30/18009Propelling the vehicle related to particular drive situations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/04Conjoint control of vehicle sub-units of different type or different function including control of propulsion units
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/20Conjoint control of vehicle sub-units of different type or different function including control of steering systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/10Interpretation of driver requests or demands
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/10Accelerator pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/12Brake pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/18Steering angle

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Description

本発明は、車両制御装置、車両制御方法、およびプログラムに関する。
近年、車両を自動的に制御することについて研究が進められている。この技術を利用した自動バレーパーキングにおいて、駐車からの出庫を要求する出庫要求信号を受信すると、出庫が要求された車両の駐車位置から乗車エリアまでの出庫走行経路を作成し、出庫走行経路の情報を車両に送信する駐車管理装置が開示されている(例えば引用文献1参照)。
特開2018-97536号公報
しかしながら、上記の装置は、利用者が指定されたエリアの手前で車両に乗車しようとした場合については考慮されていない。
本発明は、このような事情を考慮してなされたものであり、利用者の行動に応じた車両の挙動を実現することができる車両制御装置、車両制御方法、およびプログラムを提供することを目的の一つとする。
この発明に係る車両制御装置は、以下の構成を採用した。
(1):この発明の一態様に係る車両制御装置は、車両の外部から前記車両に対して行われた特定操作を検出する検出部と、前記車両の周辺状況を認識する周辺状況認識部と、前記周辺状況認識部により認識された周辺状況に基づいて、前記車両の操舵および加減速を制御する運転制御部と、を備え、前記運転制御部は、前記車両を駐車場から出庫させて前記車両のユーザを乗車させる乗車エリアで前記ユーザを乗車させる自動出庫処理において、前記車両が前記乗車エリアに到着する前に、前記検出部により前記特定操作が検出された場合、前記車両を停止状態にする。
(2):上記(1)の態様において、前記運転制御部は、前記検出部により前記特定操作が検出された場合、前記自動出庫処理を停止状態にするものである。
(3):上記(1)または(2)の態様において、前記特定操作は、前記車両のドアを開放する操作、または前記車両のドアへの前記ユーザの接触を伴う前記ドアのドアロックをアンロックにする操作であるものである。
(4):上記(1)から(3)のいずれかの態様において、前記周辺状況認識部が、前記ユーザが前記乗車エリアに到着する前のエリアにおいて、前記車両を停止させるジェスチャを行ったことを認識した場合にも、前記車両を停止状態にするものである。
(5):上記(1)から(4)のいずれかの態様において、前記ユーザが保持する端末装置から前記車両の走行を再開させるための再開信号を取得する取得部を更に備え、前記検出部は、前記車両に前記ユーザが乗車したことを検出し、前記運転制御部は、前記車両の停止状態において、前記検出部が前記車両に前記ユーザが乗車したことを検出しなくなってから、前記取得部により前記再開信号が取得された場合、前記車両の走行を再開させるものである。
(6):上記(1)から(4)のいずれかの態様において、前記車両に運転者とは異なるユーザまたは運転者が乗車したか否かを判定する乗車判定部を更に備え、前記検出部は、前記車両のドアの開閉状態を検出し、前記運転制御部は、前記車両の停止状態において、前記乗車判定部が前記車両に運転者とは異なるユーザが乗車したと判定した場合、前記車両のドアが閉止されたことが前記検出部により検出された後も、前記車両の停止状態を維持するものである。
(7):上記(1)から(4)のいずれかの態様において、前記車両に運転者が乗車したか否かを判定する乗車判定部を更に備え、前記検出部は、前記車両のドアの開閉状態を検出し、前記運転制御部は、前記車両の停止状態において、前記乗車判定部が前記車両に運転者が乗車したと判定し、且つ前記検出部が前記車両の前記ドアが閉状態であることを検出した場合に、前記車両の走行を再開させるものである。
(8):上記(6)の態様において、アクセルペダル、ステアリングホール、またはブレーキペダルである第1操作子と、前記第1操作子に対して行われた操作に基づいて、前記車両を制御する制御部と、を更に備え、前記制御部は、前記車両の走行が再開された後、前記第1操作子に対して行われた操作を前記車両の制御に反映させないものである。
(9):上記(7)の態様において、アクセルペダルまたはステアリングホールである第1操作子と、ブレーキペダルである第2操作子と、前記第1操作子または第2操作子に対して行われた操作に基づいて、前記車両を制御する制御部と、を更に備え、前記制御部は、前記乗車エリアにおいて前記第2操作子に対して行われた操作に基づいて前記車両が停止した後、または前記乗車エリアにおいて前記車両が停止している状態で前記第2操作子に対して操作が行われた後、前記第1操作子に対して行われた操作を前記車両の制御に反映させるものである。
(10):上記(1)から(9)のいずれかの態様において、前記運転制御部は、前記車両が前記乗車エリアに進入した後に、前記検出部により前記特定操作が検出された場合、前記自動出庫処理を完了状態にするものである。
(11):上記(10)の態様において、前記運転制御部は、前記完了状態後、前記自動出庫処理の要求を取得した場合、前記自動出庫処理を再開せず、前記完了状態後、前記車両を駐車場に入庫させる自動入庫処理の要求を取得した後に前記自動出庫処理の要求を取得した場合、前記自動出庫処理を再開させるものである。
この発明に係る車両制御方法は、以下の構成を採用した。
(12):コンピュータが、車両の外部から前記車両に対して行われた特定操作を検出し、前記車両の周辺状況を認識し、前記認識された周辺状況に基づいて、前記車両の操舵および加減速を制御し、前記車両を駐車場から出庫させて前記車両のユーザを乗車させる乗車エリアで前記ユーザを乗車させる自動出庫処理において、前記車両が前記乗車エリアに到着する前に、前記特定操作が検出された場合、前記車両を停止状態にする車両制御方法である。
この発明に係るプログラムは、以下の構成を採用した。
(13):コンピュータに、車両の外部から前記車両に対して行われた特定操作を検出させ、前記車両の周辺状況を認識させ、前記認識された周辺状況に基づいて、前記車両の操舵および加減速を制御させ、前記車両を駐車場から出庫させて前記車両のユーザを乗車させる乗車エリアで前記ユーザを乗車させる自動出庫処理において、前記車両が前記乗車エリアに到着する前に、前記特定操作が検出された場合、前記車両を停止状態にさせるプログラムである。
(1)~(4)、(12)、(13)によれば、利用者の行動に応じた車両の挙動を実現することができる。
(5)によれば、更に、再開信号が取得された場合、車両の走行を再開するため、利用者にとっての利便性が向上する。
(6)によれば、更に、運転者とは異なるユーザが乗車した場合は、車両の停止状態を維持するため、車両の走行に関する安全性がより向上する。例えば、運転者とは異なるユーザが車両に乗車し、周辺状況を監視する運転者が車両に存在しない場合における走行が行われないため、車両の走行に関する安全性がより向上する。
(7)によれば、更に、運転者が乗車した場合に、車両の走行を再開させることにより、車両の走行に関する安全性を向上させつつ、利用者の利便性を向上させることができる。例えば、周辺状況を監視する運転者が車両に存在する場合、走行が開始されるため、安全性と利便性とが両立される。
(8)によれば、更に、車両の走行が再開された後、第1操作子に対して行われた操作を車両の制御に反映させないため、車両を周辺状況に応じた挙動で自動で制御することができる。例えば、自動出庫処理が終了する前に、運転者の操作によって車両が制御されることが抑制されるため、複数の車両が行っている自動出庫処理における車両同士の交通に関する秩序がより保たれる。
(9)によれば、更に、運転者が車両を制御できる状態になった場合に、運転者が、車両を制御することができるため、運転者の利便性を向上させることができる。
(10)によれば、乗降エリアがある程度の広さである場合、ユーザは容易に乗降エリアにおいて車両を自動駐車させることができる。
(11)によれば、自動入庫処理の要求を取得した後に自動出庫処理の要求がされた場合、自動出庫処理が再開されるという制御で統一されるので、車両制御装置の処理負荷が軽減される。
実施形態に係る車両制御装置を利用した車両システム1の構成図である。 第1制御部120および第2制御部160の機能構成図である。 自走駐車イベントが実行される場面を模式的に示す図である。 駐車場管理装置400の構成の一例を示す図である。 自動運転制御装置100により実行される処理の流れの一例を示すフローチャートである。 自動出庫処理が再開される場面の一例を示す図である。 自動運転制御装置100により実行される処理の流れの他の一例を示すフローチャートである。 第2実施形態の自動運転制御装置100により実行される処理の流れの一例を示すフローチャートである。 自動出庫処理が再開される場面の他の一例を示す図である。 第3実施形態の自動運転制御装置100Aを中心とした機能構成の一例を示す図である。 第4実施形態の車両システム1Bの機能構成の一部を示す図である。 第4実施形態の第1制御部120の機能構成について説明するための図である。 車両システム1Bにより実行される処理の流れの一例を示すフローチャートである。 車両システム1Bにより実行される処理の流れの他の一例を示すフローチャートである。 自動出庫処理が再開される場面の他の一例を示す図である。 実施形態の自動運転制御装置100のハードウェア構成の一例を示す図である。
以下、図面を参照し、本発明の車両制御装置、車両制御方法、およびプログラムの実施形態について説明する。
[全体構成]
図1は、実施形態に係る車両制御装置を利用した車両システム1の構成図である。車両システム1が搭載される車両は、例えば、二輪や三輪、四輪等の車両であり、その駆動源は、ディーゼルエンジンやガソリンエンジンなどの内燃機関、電動機、或いはこれらの組み合わせである。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。
車両システム1は、例えば、カメラ10と、レーダ装置12と、ファインダ14と、物体認識装置16と、通信装置20と、HMI(Human Machine Interface)30と、車両センサ40と、ドアセンサ42と、キー通信部44と、タッチセンサ46と、着座センサ48と、ナビゲーション装置50と、MPU(Map Positioning Unit)60と、運転操作子80と、自動運転制御装置100と、走行駆動力出力装置200と、ブレーキ装置210と、ステアリング装置220とを備える。これらの装置や機器は、CAN(Controller Area Network)通信線等の多重通信線やシリアル通信線、無線通信網等によって互いに接続される。なお、図1に示す構成はあくまで一例であり、構成の一部が省略されてもよいし、更に別の構成が追加されてもよい。
カメラ10は、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の固体撮像素子を利用したデジタルカメラである。カメラ10は、車両システム1が搭載される車両(以下、自車両M)の任意の箇所に取り付けられる。前方を撮像する場合、カメラ10は、フロントウインドシールド上部やルームミラー裏面等に取り付けられる。カメラ10は、例えば、周期的に繰り返し自車両Mの周辺を撮像する。カメラ10は、ステレオカメラであってもよい。
レーダ装置12は、自車両Mの周辺にミリ波などの電波を放射すると共に、物体によって反射された電波(反射波)を検出して少なくとも物体の位置(距離および方位)を検出する。レーダ装置12は、自車両Mの任意の箇所に取り付けられる。レーダ装置12は、FM-CW(Frequency Modulated Continuous Wave)方式によって物体の位置および速度を検出してもよい。
ファインダ14は、LIDAR(Light Detection and Ranging)である。ファインダ14は、自車両Mの周辺に光を照射し、散乱光を測定する。ファインダ14は、発光から受光までの時間に基づいて、対象までの距離を検出する。照射される光は、例えば、パルス状のレーザー光である。ファインダ14は、自車両Mの任意の箇所に取り付けられる。
物体認識装置16は、カメラ10、レーダ装置12、およびファインダ14のうち一部または全部による検出結果に対してセンサフュージョン処理を行って、物体の位置、種類、速度などを認識する。物体認識装置16は、認識結果を自動運転制御装置100に出力する。物体認識装置16は、カメラ10、レーダ装置12、およびファインダ14の検出結果をそのまま自動運転制御装置100に出力してよい。車両システム1から物体認識装置16が省略されてもよい。
通信装置20は、例えば、セルラー網やWi-Fi網、Bluetooth(登録商標)、DSRC(Dedicated Short Range Communication)などを利用して、自車両Mの周辺に存在する他車両または駐車場管理装置(後述)、或いは各種サーバ装置と通信する。
HMI30は、自車両Mのユーザに対して各種情報を提示すると共に、ユーザによる入力操作を受け付ける。HMI30は、各種表示装置、スピーカ、ブザー、タッチパネル、スイッチ、キーなどを含む。
車両センサ40は、自車両Mの速度を検出する車速センサ、加速度を検出する加速度センサ、鉛直軸回りの角速度を検出するヨーレートセンサ、自車両Mの向きを検出する方位センサ等を含む。
ドアセンサ42は、自車両Mのドアが開状態であるか、または閉状態であるかを検出する。ドアセンサ42は、例えば、ドアが開状態の場合、オン信号を自動運転制御装置100に出力し、ドアが閉状態の場合、オフ信号を自動運転制御装置100に出力する。また、ドアセンサ42は、自車両Mが備える複数のドアのうちどのドアが開状態であるか、閉状態であるかを検出してもよい。
キー通信部44は、ユーザが保持する端末装置(例えば、携帯機器やFOBキーなどのスマートキー)の通信部と通信する。例えば、キー通信部44は、所定間隔でリクエスト信号を送信する。端末装置が、リクエスト信号の送信範囲内に存在する場合、端末装置は、リクエスト信号を受信し、受信に応じて応答信号をキー通信部44に送信する。
タッチセンサ46は、自車両Mの車外のドアノブまたはドアノブ付近に設けられる。タッチセンサは、例えば、ユーザなどの人によりドアノブまたはドアノブ付近の所定位置がタッチされたことを検出する。例えば、人がドアノブにタッチすると、タッチセンサ46は、タッチにより生じる静電容量の変化に基づいて、ドアノブがタッチされたことを検出する。
着座センサ48は、例えば、車両の座席のうち少なくとも運転席に設けられる。着座センサ48は、一以上の圧力検出素子を備え、上記の圧力検出素子の検出結果に基づいて、ユーザが運転席に着座しているか否かを検出する。なお、本実施形態では、着座センサ48は、運転者の他に、助手席や後部座席に設けられているものとする。
ナビゲーション装置50は、例えば、GNSS(Global Navigation Satellite System)受信機51と、ナビHMI52と、経路決定部53とを備える。ナビゲーション装置50は、HDD(Hard Disk Drive)やフラッシュメモリなどの記憶装置に第1地図情報54を保持している。GNSS受信機51は、GNSS衛星から受信した信号に基づいて、自車両Mの位置を特定する。自車両Mの位置は、車両センサ40の出力を利用したINS(Inertial Navigation System)によって特定または補完されてもよい。ナビHMI52は、表示装置、スピーカ、タッチパネル、キーなどを含む。ナビHMI52は、前述したHMI30と一部または全部が共通化されてもよい。経路決定部53は、例えば、GNSS受信機51により特定された自車両Mの位置(或いは入力された任意の位置)から、ナビHMI52を用いてユーザにより入力された目的地までの経路(以下、地図上経路)を、第1地図情報54を参照して決定する。第1地図情報54は、例えば、道路を示すリンクと、リンクによって接続されたノードとによって道路形状が表現された情報である。第1地図情報54は、道路の曲率やPOI(Point Of Interest)情報などを含んでもよい。地図上経路は、MPU60に出力される。ナビゲーション装置50は、地図上経路に基づいて、ナビHMI52を用いた経路案内を行ってもよい。ナビゲーション装置50は、例えば、ユーザの保有するスマートフォンやタブレット端末等の端末装置の機能によって実現されてもよい。ナビゲーション装置50は、通信装置20を介してナビゲーションサーバに現在位置と目的地を送信し、ナビゲーションサーバから地図上経路と同等の経路を取得してもよい。
MPU60は、例えば、推奨車線決定部61を含み、HDDやフラッシュメモリなどの記憶装置に第2地図情報62を保持している。推奨車線決定部61は、ナビゲーション装置50から提供された地図上経路を複数のブロックに分割し(例えば、車両進行方向に関して100[m]毎に分割し)、第2地図情報62を参照してブロックごとに推奨車線を決定する。推奨車線決定部61は、左から何番目の車線を走行するといった決定を行う。推奨車線決定部61は、地図上経路に分岐箇所が存在する場合、自車両Mが、分岐先に進行するための合理的な経路を走行できるように、推奨車線を決定する。
第2地図情報62は、第1地図情報54よりも高精度な地図情報である。第2地図情報62は、例えば、車線の中央の情報あるいは車線の境界の情報等を含んでいる。また、第2地図情報62には、道路情報、交通規制情報、住所情報(住所・郵便番号)、施設情報、電話番号情報などが含まれてよい。第2地図情報62は、通信装置20が他装置と通信することにより、随時、アップデートされてよい。
運転操作子80は、例えば、アクセルペダル、ブレーキペダル、シフトレバー、ステアリングホイール、異形ステア、ジョイスティックその他の操作子を含む。運転操作子80には、操作量あるいは操作の有無を検出するセンサが取り付けられており、その検出結果は、自動運転制御装置100、もしくは、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220のうち一部または全部に出力される。
自動運転制御装置100は、例えば、第1制御部120と、第2制御部160と、情報処理部170とを備える。これらの機能部は、それぞれ、例えば、CPU(Central Processing Unit)などのハードウェアプロセッサがプログラム(ソフトウェア)を実行することにより実現される。また、これらの構成要素のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)などのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予め自動運転制御装置100のHDDやフラッシュメモリなどの記憶装置(非一過性の記憶媒体を備える記憶装置)に格納されていてもよいし、DVDやCD-ROMなどの着脱可能な記憶媒体に格納されており、記憶媒体(非一過性の記憶媒体)がドライブ装置に装着されることで自動運転制御装置100のHDDやフラッシュメモリにインストールされてもよい。
図2は、第1制御部120および第2制御部160の機能構成図である。第1制御部120は、例えば、認識部130と、行動計画生成部140とを備える。第1制御部120は、例えば、AI(Artificial Intelligence;人工知能)による機能と、予め与えられたモデルによる機能とを並行して実現する。例えば、「交差点を認識する」機能は、ディープラーニング等による交差点の認識と、予め与えられた条件(パターンマッチング可能な信号、道路標示などがある)に基づく認識とが並行して実行され、双方に対してスコア付けして総合的に評価することで実現されてよい。これによって、自動運転の信頼性が担保される。認識部130は、「周辺状況認識部」の一例である。
認識部130は、カメラ10、レーダ装置12、およびファインダ14から物体認識装置16を介して入力された情報に基づいて、自車両Mの周辺にある物体の位置、および速度、加速度等の状態を認識する。物体の位置は、例えば、自車両Mの代表点(重心や駆動軸中心など)を原点とした絶対座標上の位置として認識され、制御に使用される。物体の位置は、その物体の重心やコーナー等の代表点で表されてもよいし、表現された領域で表されてもよい。物体の「状態」とは、物体の加速度やジャーク、あるいは「行動状態」(例えば車線変更をしている、またはしようとしているか否か)を含んでもよい。
また、認識部130は、例えば、自車両Mが走行している車線(走行車線)を認識する。例えば、認識部130は、第2地図情報62から得られる道路区画線のパターン(例えば実線と破線の配列)と、カメラ10によって撮像された画像から認識される自車両Mの周辺の道路区画線のパターンとを比較することで、走行車線を認識する。なお、認識部130は、道路区画線に限らず、道路区画線や路肩、縁石、中央分離帯、ガードレールなどを含む走路境界(道路境界)を認識することで、走行車線を認識してもよい。この認識において、ナビゲーション装置50から取得される自車両Mの位置やINSによる処理結果が加味されてもよい。また、認識部130は、一時停止線、障害物、赤信号、料金所、その他の道路事象を認識する。
認識部130は、走行車線を認識する際に、走行車線に対する自車両Mの位置や姿勢を認識する。認識部130は、例えば、自車両Mの基準点の車線中央からの乖離、および自車両Mの進行方向の車線中央を連ねた線に対してなす角度を、走行車線に対する自車両Mの相対位置および姿勢として認識してもよい。これに代えて、認識部130は、走行車線のいずれかの側端部(道路区画線または道路境界)に対する自車両Mの基準点の位置などを、走行車線に対する自車両Mの相対位置として認識してもよい。
認識部130は、後述する、自走駐車イベントにおいて起動する駐車スペース認識部132、および乗車判定部134を備える。駐車スペース認識部132の機能の詳細については後述する。
乗車判定部134は、着座センサ48の検出結果に基づいて、運転席にユーザが着座しているか否かを判定する。また、乗車判定部134は、着座センサ48の検出結果に基づいて、運転席以外の座席にユーザが着座しているか否かを判定する。運転席またはその他の座席にユーザが着座している場合、ユーザが自車両Mに乗車していることを意味する。運転席にユーザが着座している場合、運転者が自車両Mに乗車していることを意味し、運転席にユーザが着座していない場合、運転者が自車両Mに乗車していないことを意味する。
行動計画生成部140は、原則的には推奨車線決定部61により決定された推奨車線を走行し、更に、自車両Mの周辺状況に対応できるように、自車両Mが自動的に(運転者の操作に依らずに)将来走行する目標軌道を生成する。目標軌道は、例えば、速度要素を含んでいる。例えば、目標軌道は、自車両Mの到達すべき地点(軌道点)を順に並べたものとして表現される。軌道点は、道なり距離で所定の走行距離(例えば数[m]程度)ごとの自車両Mの到達すべき地点であり、それとは別に、所定のサンプリング時間(例えば0コンマ数[sec]程度)ごとの目標速度および目標加速度が、目標軌道の一部として生成される。また、軌道点は、所定のサンプリング時間ごとの、そのサンプリング時刻における自車両Mの到達すべき位置であってもよい。この場合、目標速度や目標加速度の情報は軌道点の間隔で表現される。
行動計画生成部140は、目標軌道を生成するにあたり、自動運転のイベントを設定してよい。自動運転のイベントには、定速走行イベント、低速追従走行イベント、車線変更イベント、分岐イベント、合流イベント、テイクオーバーイベント、バレーパーキングなどにおいて無人走行して駐車する自走駐車イベントなどがある。行動計画生成部140は、起動させたイベントに応じた目標軌道を生成する。行動計画生成部140は、自走駐車イベントを実行する場合に起動する自走駐車制御部142を備える。自走駐車制御部142の機能の詳細については後述する。
第2制御部160は、行動計画生成部140によって生成された目標軌道を、予定の時刻通りに自車両Mが通過するように、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220を制御する。
図2に戻り、第2制御部160は、例えば、取得部162と、速度制御部164と、操舵制御部166とを備える。取得部162は、行動計画生成部140により生成された目標軌道(軌道点)の情報を取得し、メモリ(不図示)に記憶させる。速度制御部164は、メモリに記憶された目標軌道に付随する速度要素に基づいて、走行駆動力出力装置200またはブレーキ装置210を制御する。操舵制御部166は、メモリに記憶された目標軌道の曲がり具合に応じて、ステアリング装置220を制御する。速度制御部164および操舵制御部166の処理は、例えば、フィードフォワード制御とフィードバック制御との組み合わせにより実現される。一例として、操舵制御部166は、自車両Mの前方の道路の曲率に応じたフィードフォワード制御と、目標軌道からの乖離に基づくフィードバック制御とを組み合わせて実行する。
走行駆動力出力装置200は、車両が走行するための走行駆動力(トルク)を駆動輪に出力する。走行駆動力出力装置200は、例えば、内燃機関、電動機、および変速機などの組み合わせと、これらを制御するECU(Electronic Control Unit)とを備える。ECUは、第2制御部160から入力される情報、或いは運転操作子80から入力される情報に従って、上記の構成を制御する。
ブレーキ装置210は、例えば、ブレーキキャリパーと、ブレーキキャリパーに油圧を伝達するシリンダと、シリンダに油圧を発生させる電動モータと、ブレーキECUとを備える。ブレーキECUは、第2制御部160から入力される情報、或いは運転操作子80から入力される情報に従って電動モータを制御し、制動操作に応じたブレーキトルクが各車輪に出力されるようにする。ブレーキ装置210は、運転操作子80に含まれるブレーキペダルの操作によって発生させた油圧を、マスターシリンダを介してシリンダに伝達する機構をバックアップとして備えてよい。なお、ブレーキ装置210は、上記説明した構成に限らず、第2制御部160から入力される情報に従ってアクチュエータを制御して、マスターシリンダの油圧をシリンダに伝達する電子制御式油圧ブレーキ装置であってもよい。
ステアリング装置220は、例えば、ステアリングECUと、電動モータとを備える。電動モータは、例えば、ラックアンドピニオン機構に力を作用させて転舵輪の向きを変更する。ステアリングECUは、第2制御部160から入力される情報、或いは運転操作子80から入力される情報に従って、電動モータを駆動し、転舵輪の向きを変更させる。
[自走駐車イベント-入庫時]
自走駐車制御部142は、例えば、通信装置20によって駐車場管理装置400から取得された情報に基づいて、自車両Mを駐車スペース内に駐車させる。図3は、自走駐車イベントが実行される場面を模式的に示す図である。道路Rdから訪問先施設に至るまでの経路には、ゲート300-inおよび300-outが設けられている。自車両Mは、手動運転または自動運転によって、ゲート300-inを通過して停止エリア310まで進行する。停止エリア310は、訪問先施設に接続されている乗降エリア320に面している。乗降エリア320には、雨や雪を避けるための庇が設けられている。停止エリア310は、「乗車エリア」の一例である。
自車両Mは、停止エリア310でユーザを下した後、無人(または有人)で自動運転を行い、駐車場PA内の駐車スペースPSまで移動する自走駐車イベントを開始する。自走駐車イベントの開始トリガは、例えば、ユーザによる何らかの操作であってもよいし、駐車場管理装置400から無線により所定の信号を受信したことであってもよい。自走駐車制御部142は、自走駐車イベントを開始する場合、通信装置20を制御して駐車リクエストを駐車場管理装置400に向けて発信する。そして、自車両Mは、停止エリア310から駐車場PAまで、駐車場管理装置400の誘導に従って、或いは自力でセンシングしながら移動する。
図4は、駐車場管理装置400の構成の一例を示す図である。駐車場管理装置400は、例えば、通信部410と、制御部420と、記憶部430とを備える。記憶部430には、駐車場地図情報432、駐車スペース状態テーブル434などの情報が格納されている。
通信部410は、自車両Mその他の車両と無線により通信する。制御部420は、通信部410により取得された情報と、記憶部430に格納された情報とに基づいて、車両を駐車スペースPSに誘導する。駐車場地図情報432は、駐車場PAの構造を幾何的に表した情報である。また、駐車場地図情報432は、駐車スペースPSごとの座標を含む。駐車スペース状態テーブル434は、例えば、駐車スペースPSの識別情報である駐車スペースIDに対して、空き状態であるか、満(駐車中)状態であるかを示す状態と、満状態である場合の駐車中の車両の識別情報である車両IDとが対応付けられたものである。
制御部420は、通信部410が車両から駐車リクエストを受信すると、駐車スペース状態テーブル434を参照して状態が空き状態である駐車スペースPSを抽出し、抽出した駐車スペースPSの位置を駐車場地図情報432から取得し、取得した駐車スペースPSの位置までの好適な経路を、通信部410を用いて車両に送信する。また、制御部420は、複数の車両の位置関係に基づいて、同時に同じ位置に車両が進行しないように、必要に応じて特定の車両に停止・徐行などを指示する。
経路を受信した車両(以下、自車両Mであるものとする)では、自走駐車制御部142が、経路に基づく目標軌道を生成する。また、目標となる駐車スペースPSが近づくと、駐車スペース認識部132が、駐車スペースPSを区画する駐車枠線などを認識し、駐車スペースPSの詳細な位置を認識して自走駐車制御部142に提供する。自走駐車制御部142は、これを受けて目標軌道を補正し、自車両Mを駐車スペースPSに駐車させる。
[自走駐車イベント-出庫時]
自走駐車制御部142および通信装置20は、自車両Mが駐車中も動作状態を維持している。自走駐車制御部142は、例えば、通信装置20がユーザの端末装置から迎車リクエストを受信した場合、自車両Mのシステムを起動させ、自車両Mを停止エリア310まで移動させる。以下、この処理を「自動出庫処理」と称する場合がある。この際に、自走駐車制御部142は、通信装置20を制御して駐車場管理装置400に発進リクエストを送信する。駐車場管理装置400の制御部420は、入庫時と同様に、複数の車両の位置関係に基づいて、同時に同じ位置に車両が進行しないように、必要に応じて特定の車両に停止・徐行などを指示する。停止エリア310まで自車両Mを移動させてユーザを乗せると自走駐車制御部142は動作を停止し、以降は手動運転、或いは別の機能部による自動運転が開始される。
なお、上記の説明に限らず、自走駐車制御部142は、通信に依らず、カメラ10、レーダ装置12、ファインダ14、または物体認識装置16による検出結果に基づいて空き状態の駐車スペースを自ら発見し、発見した駐車スペース内に自車両Mを駐車させてもよい。
自走駐車制御部142は、例えば、信号取得部144を備える。信号取得部144は、例えば、出庫時の自走駐車イベントが停止状態になった後に、ユーザが保持する端末装置から、停止状態の出庫時の自走駐車イベントを再開させるための再開信号を取得する。詳細については後述する。以下、出庫時の自走駐車イベントを「自動出庫処理」と称する場合がある。
情報処理部170は、自車両Mの外部から自車両Mに対して特定操作が行われた場合、特定操作が行われたことを検出する。特定操作は、自車両Mのドアを開放する操作、または自車両Mのドアへのユーザの接触を伴うドアのドアロックをアンロックにする操作である。情報処理部170、情報処理部170とドアセンサ42とを合わせたもの、または情報処理部170とキー通信部44とタッチセンサ46とを合わせたものは、「検出部」の一例である。
情報処理部170は、ドアセンサ42の検出結果を取得し、取得した検出結果に基づいて、自車両Mのドアが開状態であるか、閉状態であるかを判定する。すなわち、情報処理部170は、自車両Mのドアが開状態であると判定した場合、特定操作が行われたと判定する。
情報処理部170は、タッチセンサ46の検出結果を取得して、取得した検出結果に基づいて、自車両Mのドアノブやドアノブ付近の所定位置に人がタッチしたか否かを判定する。情報処理部170は、着座センサ48の検出結果を取得し、検出結果に基づいて、運転席、助手席、または後部座席にユーザが着座しているか否かを判定する。
また、情報処理部170は、キー通信部44が端末装置と通信して取得した端末装置の識別情報を取得する。情報処理部170は、キー通信部44が取得した識別情報が、不図示の記憶装置に記憶された識別情報と一致するかを判定する。情報処理部170は、上記の識別情報が一致し、且つドアノブに人がタッチしていると判定した場合、ドアロックをロック状態からアンロック状態に制御する。このアンロック状態にするためのユーザによる操作は、「特定操作」の一例である。例えば、情報処理部170は、ドアロックを制御するロック制御部(不図示)に、ドアロックを開状態にするように指示信号を送信する。ロック制御部は、上記の指示信号を取得した場合、ドアロックをロック状態からアンロック状態に制御する。
[自動出庫処理を停止する処理]
図5は、自動運転制御装置100により実行される処理の流れの一例を示すフローチャートである。本処理では、自車両Mが駐車場PAに駐車している場合に実行される処理である。
まず、自走駐車制御部142が、迎車リクエストを取得したか否かを判定する(ステップS100)。迎車リクエストを取得した場合、自走駐車制御部142は、駐車場PAから乗降エリア320に向けて走行を開始する(ステップS102)。すなわち、自動出庫処理が開始される。
次に、情報処理部170が、特定操作が行われたか否かを判定する(ステップS104)。特定操作が行われていないと判定した場合、自走駐車制御部142は、自動出庫処理を継続する(ステップS106)。次に、自走駐車制御部142は、自車両Mが乗降エリア320(停止エリア310)に到達したか否かを判定する(ステップS108)。乗降エリア320に到達していない場合、ステップS102の処理に戻る。乗降エリア320に到達した場合、本フローチャートの1ルーチンの処理が終了する。
特定操作が行われたと判定した場合、自走駐車制御部142は、自動出庫処理を停止する(ステップS110)。これにより、自車両Mは、乗降エリア320に到着する前に自車両Mの走行を停止する。なお、特定操作が行われた場合、自走駐車制御部142は、自車両Mを徐行させた後、停車させてもよい。情報処理部170は、ユーザが自車両Mに乗車していない否かを判定する(ステップS112)。ユーザが自車両Mに乗車していないと判定した場合、情報処理部170は、自車両Mのドアが閉状態であるか否かを判定する(ステップS114)。
自車両Mのドアが閉状態である場合(例えば自車両Mの全てのドアが閉状態である場合)、自走駐車制御部142は、再開信号を取得したか否かを判定する(ステップS116)。再開信号を取得した場合、自走駐車制御部142は、停止させていた自動出庫処理を再開させ(ステップS118)、ステップS108の処理に進む。すなわち自動駐車制御部142は、自動出庫処理の停止状態において、自車両Mにユーザが乗車したことが検出されなくなってから、再開信号が取得された場合、自動出庫処理を再開させる。自動出庫処理を再開させるとは、例えば、自走駐車制御部142が、自車両Mの走行を再開させることである。なお、上記ステップS112、S114、またはS116の処理で否定的な判定結果が得られた場合、ステップS110の処理に戻る。これにより本フローチャートの1ルーチンの処理が終了する。
また、本フローチャートの処理の一部の処理は省略されてもよいし、各処理の順序は入れ替えられてもよい。また、認識部130は、乗降エリア320に到着する前のエリア(停止エリア310とは異なるエリア)において、ユーザが自車両Mを停止させるジェスチャを行ったことを認識した場合に、自動出庫処理(車両の走行)を停止状態にしてもよい。例えば、ステップS104の処理は、「特定操作が行われたか否かを判定する処理」に代えて、「乗降エリア320に到着する前のエリアにおいて、ユーザが自車両Mを停止させるジェスチャを行ったか否かを判定する処理」が行われてもよい。
図6は、自動出庫処理が再開される場面の一例を示す図である。例えば、時刻Tにおいて、ユーザが特定操作を行った場合、自動出庫処理は停止状態になる。時刻T+1において、ユーザが特定操作を止めて、保持する端末装置を用いて再開信号を自動運転制御装置100に送信する。時刻T+2において、自動運転制御装置100は、再開信号を取得すると、自動出庫処理を再開させて、乗降エリア320に向けて走行を開始する。これにより、乗降エリア320においてユーザは自車両Mに乗車することができる。
ここで、図6に示すように、他の車両が乗降エリア320の停止エリア310に停止していて、停止エリア310が混雑している場合、乗降エリア320で待機しているユーザが乗降エリア320に到達する前の自車両Mに近づき特定操作を行う場合がある。比較例の車両は、上記の特定操作が行われた場合の制御については考慮されていなかった。このため、比較例の車両は、利用者の行動に応じた挙動を実現することができなかった。
これに対して、本実施形態の自動運転制御装置100は、特定操作が行われた際に、ユーザが自車両Mに乗車していない状態で、再開信号を取得した場合、自動出庫処理を再開することができる。このように、自動運転制御装置100は、利用者の行動に応じた車両の挙動を実現することができる。
また、上記図5の例では、自車両Mが乗降エリア320に到達した場合、処理は終了するものとして説明したが、自車両Mが乗降エリア320に到着した場合(乗降エリア320に進入した場合)、図7に示すフローチャートの処理が行われてもよい。
図7は、自動運転制御装置100により実行される処理の流れの他の一例を示すフローチャートである。図7のステップS100からステップS118の処理は、図5の同様のステップ番号の処理と同様であるため、これらの処理は図7において記載を省略すると共に、これらの処理の説明は省略する。
図7では、自動運転制御装置100は、自車両Mが停止エリア310に進入した後に、特定操作が検出された場合、自動出庫処理を完了状態にし、完了状態後、自動出庫処理の要求を取得した場合、自動出庫処理を再開しないが、完了状態後、車両を無人で駐車場に入庫させる自動入庫処理の要求を取得した後に自動出庫処理の要求を取得した場合は、自動出庫処理を再開させる。
乗降エリア320に到達した場合、情報処理部170が、特定操作が行われたか否かを判定する(ステップS120)。特定操作が行われていない場合、情報処理部170は、自車両Mが所定位置に停車したか否かを判定する(ステップS122)。所定位置とは、停車エリア310内の所定位置であり、自動運転制御装置100が、周辺状況に基づいて決定したユーザを迎車する位置である。所定位置に自車両Mが停車した場合、本フローチャートの1ルーチンの処理は終了する。所定位置に自車両Mが停車していない場合、自動運転制御装置100が、所定位置に向かって自車両Mを前進させる制御を継続し(ステップS124)、ステップS120の処理に戻る。
ステップS120で特定操作が行われた場合(例えば所定位置で停車する前に特定操作が行われた場合)、自車両Mは停車し、更に情報処理部170は、自動出庫処理を完了状態にする(ステップS126)。情報処理部170は、例えば、特定操作が行われた場合、自動出庫処理が完了したことを示す自動出庫完了フラグを記憶装置に書き込む。これらにより、自車両Mは、迎車リクエスト(自動出庫処理の要求)を受け付けても、自動出庫処理を実行しない状態となる。
次に、情報処理部170は、駐車リクエスト(自動入庫処理の要求)を受け付けたか否かを判定する(ステップS128)。駐車リクエストを受け付けた場合、情報処理部170は、迎車リクエストを受け付け可能な状態に自車両Mを制御する(ステップS130)。例えば、情報処理部170は、書き込んだ自動出庫完了フラグを消去して、迎車リクエストを受け付け可能な状態に自車両Mを制御する。情報処理部170は、迎車リクエストを受け付け可能な状態でない場合に迎車リクエストを取得した場合、自動出庫処理を行わず、迎車リクエストを受け付け可能な状態である場合に迎車リクエストを取得した場合、自動出庫処理を行う。
例えば、特定操作によって自動出庫処理が完了して、停車エリア310において車両が駐車したものとする。この状態で、ユーザが、所要を済ませた後、駐車リクエストを自車両Mに送信した後、迎車リクエストを自車両Mに送信すると、自車両Mは、ユーザの近くに自動で移動してユーザを迎える。
上述した処理により、乗車エリア310がある程度の広さである場合、ユーザは容易に停車エリア310において自車両Mを自動駐車させることができる。また、駐車リクエストを取得した後に迎車リクエストがされた場合、自動出庫処理が再開されるという制御で統一されるので、車両システム1の処理負荷が軽減される。
以上説明した第1実施形態によれば、自動運転制御装置100は、自車両Mを無人で駐車場から出庫させて自車両Mのユーザを乗車させる乗降エリアでユーザを乗車させる自動出庫処理において、自車両Mが乗降エリアに到着する前に、情報処理部170により特定操作が検出された場合、自動出庫処理を停止状態にする。この結果、利用者の行動に応じた車両の挙動を実現することができる。
また、以上説明した第1実施形態によれば、自動運転制御装置100は、自動出庫処理の停止状態において、情報処理部170が自車両Mにユーザが乗車したことを検出していない場合において、自走駐車制御部142により再開信号が取得された場合、自動出庫処理を再開させる。これにより、車両は、乗降エリア320に向けて走行を開始し、乗降エリア320に到達する。そして、ユーザは自車両Mに乗車することができる。このように、自動運転制御装置100は、利用者の行動に応じた車両の挙動を実現することができる。
<第2実施形態>
以下、第2実施形態について説明する。第1実施形態では、自動運転制御装置100は、特定操作が行われた際に、ユーザが自車両Mに乗車していない状態で、再開信号を取得した場合、自動出庫処理を再開するものとした。第2実施形態では、自動運転制御装置100は、運転者が乗車した場合に自動出庫処理を再開する。以下、第1実施形態との相違点を中心に説明する。
[自動出庫処理を停止する処理]
図8は、第2実施形態の自動運転制御装置100により実行される処理の流れの一例を示すフローチャートである。図5のフローチャートとの相違点を中心に説明する。図7のフローチャートでは、図5のフローチャートのステップS112の処理に代えて、ステップS113の処理が行われる。また、図8のフローチャートでは、図5のフローチャートのステップS116の処理が省略される。
ステップS104で特定操作が行われたと判定した場合、自走駐車制御部142が、自動出庫処理を停止する(ステップS110)。次に、情報処理部170は、運転者が自車両Mに乗車したか否かを判定する(ステップS113)。運転者が自車両Mに乗車したと判定した場合、情報処理部170は、自車両Mのドアが閉状態であるか否かを判定する(ステップS114)。
自車両Mのドアが閉状態である場合、自走駐車制御部142は、停止させていた自動出庫処理を再開させ(ステップS118)、ステップS108の処理に進む。なお、上記ステップS113、またはS116の処理で否定的な判定結果が得られた場合、ステップS110の処理に戻る。これにより本フローチャートの1ルーチンの処理が終了する。なお、本フローチャートの処理の一部の処理は省略されてもよいし、各処理の順序は入れ替えられてもよい。
また、本フローチャートでは、ステップS114とステップS118との間で、自走駐車制御部142が、再開信号を取得したか否かを判定する処理は省略されるものとして説明したが、この処理は省略されずに実行されてもよい。また、ステップS114とステップS118との間で、自走駐車制御部142は、所定の信号が出力されたか否かを判定し、所定の信号出力された場合に、自動出庫処理を再開させてもよい。所定の信号とは、運転者が車室内のHMI30に対して行った所定の操作によって出力される信号である。また、ステップS113の処理において、運転者とは異なるユーザが乗車したか否かが判定されてもよい。
図9は、自動出庫処理が再開される場面の他の一例を示す図である。図9の説明は、図6と同様に停止エリア310が混雑している状態で行われることを前提にしているが、簡略化の乗降エリア320に停車している他の車両の図示を省略する。例えば、時刻Tにおいて、ユーザが特定操作を行った場合、自動出庫処理は停止状態になる。時刻T+1において、運転者が自車両Mに乗車すると、乗車していから所定時間後に自車両Mは自動出庫処理を再開する。すなわち、自車両Mは、乗降エリア320に向けて走行を開始する。時刻T+2において、自動運転制御装置100は、再開された自動出庫処理により、乗降エリア320の停止エリア310に停止する。これにより、乗降エリア320において運転者とは異なる他のユーザは自車両Mに乗車することができる。
以上説明した第2実施形態によれば、自動運転制御装置100は、自動出庫処理の停止状態において、運転者とは異なるユーザが乗車して、自車両Mのドアが閉止された場合であっても、自動出庫処理の停止状態を維持する。また、自動運転制御装置100は、自動出庫処理の停止状態において、自車両Mに運転者が乗車し、且つ自車両Mのドアが閉状態である場合に、自動出庫処理を再開させる。これにより、運転者またはユーザは、ユーザの種別に応じた位置で自車両Mに乗車することができる。このように、自動運転制御装置100は、利用者の行動に応じた車両の挙動を実現することができる。
<第3実施形態>
以下、第3実施形態について説明する。第2実施形態では、自動運転制御装置100が、着座センサ48の検出結果に基づいて、運転者が乗車しているか否かを判定するものとした。第3実施形態では、自動運転制御装置100は、運転席に着座しているユーザが撮像された画像に基づいて、運転者が乗車しているか否かを判定する。以下、第2実施形態との相違点を中心に説明する。
図10は、第3実施形態の自動運転制御装置100Aを中心とした機能構成の一例を示す図である。図10では、第1実施形態の図1で示した自動運転制御装置100以外の機能構成については省略する。なお、第3実施形態では、車両システム1Aは、車室内カメラ49を備える。第3実施形態では、例えば、着座センサ48は省略される。
車室内カメラ49は、例えば、CCDやCMOS等の固体撮像素子を利用したデジタルカメラである。車室内カメラ49は、運転席に着座したユーザまたは車室内のユーザを撮像するためのカメラである。車室内カメラ49は、例えば、運転席に着座したユーザまたは車室内のユーザを撮像可能な任意の箇所に取り付けられる。車室内カメラ49は、例えば、所定のタイミングまたは周期的に繰り返し自車両Mの車室内の様子を撮像する。車室内カメラ49は、ステレオカメラであってもよい。
自動運転制御装置100Aは、第1実施形態の自動運転制御装置100の機能構成に加え、更に記憶部190を備える。記憶部190には、ユーザ情報192が記憶されている。ユーザ情報192は、予め設定された運転者が撮像された画像から抽出された特徴量を含む。
乗車判定部134は、車室内カメラ49により撮像された画像(運転席に着座したユーザが撮像された画像)を取得し、取得した画像から特徴量を抽出する。乗車判定部134は、抽出した特徴量と合致する特徴量が、ユーザ情報192に含まれるか否かを判定する。抽出した特徴量と合致する特徴量が、ユーザ情報192に含まれるか否かを判定した場合、乗車判定部134は、運転者が自車両Mに乗車したと判定する。
以上説明した第3実施形態によれば、第2実施形態の効果と同様の効果を奏することができる。
<第4実施形態>
以下、第4実施形態について説明する。第4実施形態では、自動運転制御装置100が、所定の条件を満たしていない場合、運転者が運転操作子に対して行った操作に依らずに走行駆動力出力装置200またはステアリング装置220を制御し、所定の条件を満たした場合、運転者が運転操作子に対して行った操作に基づいて走行駆動力出力装置200またはステアリング装置220を制御する。
所定の条件とは、例えば、乗降エリア320の停止エリア310においてブレーキペダルが操作され自車両Mが停止したこと、または乗降エリア320の停止エリア310において自車両Mが停車している状態でブレーキペダルが操作されたことである。以下、第1実施形態との相違点を中心に説明する。また、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220を区別しない場合は、単に「対象装置」と称する場合がある。
図11は、第4実施形態の車両システム1Bの機能構成の一部を示す図である。図11の例では、自動運転制御装置100、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220以外の構成については説明を省略する。車両システム1Bは、運転操作子80に代えて運転操作子80Aを備える。
運転操作子80Aは、例えば、アクセルペダル82と、ステアリングホイール84と、ブレーキペダル86とを含む。アクセルペダル、ステアリングホール、またはブレーキペダルは、「第1操作子」の一例である。ブレーキペダル86は、「第2操作子」の一例である。
図12は、第4実施形態の第1制御部120の機能構成について説明するための図である。第1実施形態の第1制御部120との相違点について説明する。第4実施形態の第1制御部120に含まれる自走駐車制御部142は、信号取得部144に加え、更にオーバライド制御部146を備える。
オーバライド制御部146は、自動出庫処理が行われている場合において、所定の条件を満たしているか否かに関わらず、ブレーキペダル86の操作に基づいて入力された情報に従って、ブレーキ装置210を制御する。オーバライド制御部146は、自動出庫処理が行われている場合において、停止エリア310において、ブレーキペダル86の操作に基づいて入力された情報に従って、ブレーキ装置210を制御する。
オーバライド制御部146は、自動出庫処理が行われている場合において、所定の条件を満たした場合、アクセルペダル82、またはステアリングホイール84の操作に基づいて入力された情報に従って、対象装置を制御する。
オーバライド制御部146は、自動出庫処理が行われている場合において、所定の条件を満たしていない場合、第2制御部160に出力された情報に基づいて制御を実行するように走行駆動力出力装置200およびステアリング装置220に指示する。これにより、アクセルペダル82またはステアリングホイール84が受け付けた操作は、走行駆動力出力装置200およびステアリング装置220の制御に反映されない。
[フローチャート]
図13は、車両システム1Bにより実行される処理の流れの一例を示すフローチャートである。本処理は、例えば、自動出庫処理が停止された後に実行される処理である。
まず、自走駐車制御部142が、再開信号を取得したか否かを判定する(ステップS200)。再開信号を取得した場合、オーバライド制御部146は、ブレーキペダル86が操作されたか否かを判定する(ステップS202)。ブレーキペダル86が操作されていない場合、本フローチャートの1ルーチンの処理が終了する。
ブレーキペダル86が操作された場合、オーバライド制御部146は、ブレーキペダル86の操作に応じた制御をブレーキ装置210に行わせる(ステップS204)。これにより、ブレーキ装置210は、ブレーキペダル86の操作に基づいて、ブレーキ力を制御する。
次に、オーバライド制御部146は、は、ブレーキペダル86の操作に基づいて自車両Mが停止したか否かを判定する(ステップS206)。自車両Mが停止していない場合、本フローチャートの1ルーチンの処理が終了する。自車両Mが停止した場合、オーバライド制御部146は、有効フラグを設定する(ステップS208)。これにより本フローチャートの1ルーチンの処理が終了する。
図14は、車両システム1Bにより実行される処理の流れの他の一例を示すフローチャートである。本処理は、例えば、自動出庫処理が停止された後に実行される処理である。
まず、自走駐車制御部142が、再開信号を取得したか否かを判定する(ステップS300)。再開信号を取得した場合、オーバライド制御部146は、アクセルペダル82、ステアリングホイール84、またはブレーキペダルが操作されたか否かを判定する(ステップS302)。アクセルペダル82、ステアリングホイール84、またはブレーキペダルが操作された場合、オーバライド制御部146は、有効フラグが設定されているか否かを判定する(ステップS304)。有効フラグは、図13のステップS208の処理で設定される処理である。
有効フラグが設定されている場合、オーバライド制御部146は、アクセルペダル82ステアリングホイール84、またはブレーキペダルに対する操作に応じた制御を、走行駆動力出力装置200、ステアリング装置220、またはブレーキ装置210に実行させる(ステップS306)。有効フラグが設定されていない場合、オーバライド制御部146は、アクセルペダル82またはステアリングホイール84に対する操作に応じた制御を、走行駆動力出力装置200またはステアリング装置220に実行させない(ステップS308)。これにより本フローチャートの処理が終了する。
図15は、自動出庫処理が再開される場面の他の一例を示す図である。図15の説明は、図6と同様に乗降エリア320の停止エリア310が混雑している状態で行われることを前提にしているが、簡略化の停止エリア310に停車している他の車両の図示を省略する。例えば、時刻Tにおいて、ユーザが特定操作を行った場合、自動出庫処理は停止状態になる。時刻T+1において、運転者が自車両Mに乗車すると、乗車してから所定時間後に自車両Mは自動出庫処理を再開する。すなわち、自車両Mは、乗降エリア320に向けて走行を開始する。
時刻T+2において、運転者が、ブレーキペダル86を操作して、自車両Mを停止エリア310で停車させたものとする。この後、オーバライド制御部146は、運転者の操作を対象装置の制御に反映させる。これにより、時刻T+3のように、運転者は、ブレーキペダル86の操作に加え、アクセルペダル82またはステアリングホイール84を操作して、自車両Mを走行させることができる。すなわち、オーバライドが実行される。
以上説明した第4実施形態によれば、自動運転制御装置100は、自動出庫処理が再開された後、アクセルペダル82またはステアリングホイール84に対して行われた操作を自車両Mの制御に反映させない。また、自動運転制御装置100は、停止エリア310においてブレーキペダル86に対して行われた操作に基づいて自車両Mが停止した後、または停止エリア310において自車両Mが停止している状態でブレーキペダル86に対して操作が行われた後、アクセルペダル82またはステアリングホイール84に対して行われた操作を自車両Mの制御に反映させる。この結果、利用者の行動に応じた車両の挙動を実現することができる。
なお、上述した第1実施形態から第4実施形態は、任意に組み合わされて行われてもよい。
[ハードウェア構成]
図16は、実施形態の自動運転制御装置100のハードウェア構成の一例を示す図である。図示するように、自動運転制御装置100は、通信コントローラ100-1、CPU100-2、ワーキングメモリとして使用されるRAM(Random Access Memory)100-3、ブートプログラムなどを格納するROM(Read Only Memory)100-4、フラッシュメモリやHDD(Hard Disk Drive)などの記憶装置100-5、ドライブ装置100-6などが、内部バスあるいは専用通信線によって相互に接続された構成となっている。通信コントローラ100-1は、自動運転制御装置100以外の構成要素との通信を行う。記憶装置100-5には、CPU100-2が実行するプログラム100-5aが格納されている。このプログラムは、DMA(Direct Memory Access)コントローラ(不図示)などによってRAM100-3に展開されて、CPU100-2によって実行される。これによって、第1制御部120、第2制御部160、および情報処理部170のうち一部または全部が実現される。
上記説明した実施形態は、以下のように表現することができる。
プログラムを記憶した記憶装置と、
ハードウェアプロセッサと、を備え、
前記ハードウェアプロセッサが前記記憶装置に記憶されたプログラムを実行することにより、
車両の外部から前記車両に対して行われた特定操作を検出し、
前記車両の周辺状況を認識し、
前記認識された周辺状況に基づいて、前記車両の操舵および加減速を制御し、
前記車両を駐車場から出庫させて前記車両のユーザを乗車させる乗車エリアで前記ユーザを乗車させる自動出庫処理において、前記車両が前記乗車エリアに到着する前に、前記検出部により前記特定操作が検出された場合、前記車両を停止状態にする、
ように構成されている、車両制御装置。
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
1、1A、1B‥車両システム、42‥ドアセンサ、44‥キー通信部、46‥タッチセンサ、48‥着座センサ、48‥着座センサ、49‥車室内カメラ、80、80A‥運転操作子、82‥アクセルペダル、84‥ステアリングホイール、86‥ブレーキペダル、
100‥車両制御装置、120‥第1制御部、130‥認識部、132‥駐車スペース認識部、134‥乗車判定部、140‥行動計画生成部、142‥自走駐車制御部、144‥信号取得部、146‥オーバライド制御部、160‥第2制御部、170‥情報処理部、320‥乗降エリア

Claims (12)

  1. 車両の外部から前記車両に対して行われた特定操作を検出する検出部と、
    前記車両の周辺状況を認識する周辺状況認識部と、
    前記周辺状況認識部により認識された周辺状況に基づいて、前記車両の操舵および加減速を制御する運転制御部と、を備え、
    前記運転制御部は、前記車両を駐車場から出庫させて前記車両のユーザを乗車させる乗車エリアで前記ユーザを乗車させる自動出庫処理において、前記車両が前記乗車エリアに到着する前に、前記検出部により前記特定操作が検出された場合、前記車両を停止状態にする、
    車両制御装置。
  2. 前記運転制御部は、前記検出部により前記特定操作が検出された場合、前記自動出庫処理を停止状態にする、
    請求項1に記載の車両制御装置。
  3. 前記特定操作は、前記車両のドアを開放する操作、または前記車両のドアへの前記ユーザの接触を伴う前記ドアのドアロックをアンロックにする操作である、
    請求項1または2に記載の車両制御装置。
  4. 前記ユーザが保持する端末装置から前記車両の走行を再開させるための再開信号を取得する取得部を更に備え、
    前記検出部は、前記車両に前記ユーザが乗車したことを検出し、
    前記運転制御部は、前記車両の停止状態において、前記検出部が前記車両に前記ユーザが乗車したことを検出しなくなってから、前記取得部により前記再開信号が取得された場合、前記車両の走行を再開させる、
    請求項1から3のうちいずれか1項に記載に記載の車両制御装置。
  5. 前記車両に運転者とは異なるユーザまたは運転者が乗車したか否かを判定する乗車判定部を更に備え、
    前記検出部は、前記車両のドアの開閉状態を検出し、
    前記運転制御部は、前記車両の停止状態において、前記乗車判定部が前記車両に運転者とは異なるユーザが乗車したと判定した場合、前記車両のドアが閉止されたことが前記検出部により検出された後も、前記車両の停止状態を維持する、
    請求項1から3のうちいずれか1項に記載の車両制御装置。
  6. 前記車両に運転者が乗車したか否かを判定する乗車判定部を更に備え、
    前記検出部は、前記車両のドアの開閉状態を検出し、
    前記運転制御部は、前記車両の停止状態において、前記乗車判定部が前記車両に運転者が乗車したと判定し、且つ前記検出部が前記車両の前記ドアが閉状態であることを検出した場合に、前記車両の走行を再開させる、
    請求項1から3のうちいずれか1項に記載の車両制御装置。
  7. アクセルペダル、ステアリングホール、またはブレーキペダルである第1操作子と、
    前記第1操作子に対して行われた操作に基づいて、前記車両を制御する制御部と、を更に備え、
    前記制御部は、前記車両の走行が再開された後、前記第1操作子に対して行われた操作を前記車両の制御に反映させない、
    請求項に記載の車両制御装置。
  8. アクセルペダルまたはステアリングホールである第1操作子と、
    ブレーキペダルである第2操作子と、
    前記第1操作子または第2操作子に対して行われた操作に基づいて、前記車両を制御する制御部と、を更に備え、
    前記制御部は、前記乗車エリアにおいて前記第2操作子に対して行われた操作に基づいて前記車両が停止した後、または前記乗車エリアにおいて前記車両が停止している状態で前記第2操作子に対して操作が行われた後、前記第1操作子に対して行われた操作を前記車両の制御に反映させる、
    請求項に記載の車両制御装置。
  9. 前記運転制御部は、前記自動出庫処理において、前記車両が前記乗車エリアに進入した後に、前記検出部により前記特定操作が検出された場合、前記自動出庫処理を完了状態にする、
    請求項1から8のうちいずれか1項に記載の車両制御装置。
  10. 前記運転制御部は、
    前記完了状態後、前記自動出庫処理の要求を取得した場合、前記自動出庫処理を再開せず、
    前記完了状態後、前記車両を駐車場に入庫させる自動入庫処理の要求を取得した後に前記自動出庫処理の要求を取得した場合、前記自動出庫処理を再開させる、
    請求項に記載の車両制御装置。
  11. コンピュータが、
    車両の外部から前記車両に対して行われた特定操作を検出し、
    前記車両の周辺状況を認識し、
    前記認識された周辺状況に基づいて、前記車両の操舵および加減速を制御し、
    前記車両を駐車場から出庫させて前記車両のユーザを乗車させる乗車エリアで前記ユーザを乗車させる自動出庫処理において、前記車両が前記乗車エリアに到着する前に、前記特定操作が検出された場合、前記車両を停止状態にする、
    車両制御方法。
  12. コンピュータに、
    車両の外部から前記車両に対して行われた特定操作を検出させ、
    前記車両の周辺状況を認識させ、
    前記認識された周辺状況に基づいて、前記車両の操舵および加減速を制御させ、
    前記車両を駐車場から出庫させて前記車両のユーザを乗車させる乗車エリアで前記ユーザを乗車させる自動出庫処理において、前記車両が前記乗車エリアに到着する前に、前記特定操作が検出された場合、前記車両を停止状態にさせる、
    プログラム。
JP2019032949A 2019-02-26 2019-02-26 車両制御装置、車両制御方法、およびプログラム Active JP7101630B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019032949A JP7101630B2 (ja) 2019-02-26 2019-02-26 車両制御装置、車両制御方法、およびプログラム
CN202010103391.5A CN111619568B (zh) 2019-02-26 2020-02-19 车辆控制装置、车辆控制方法及存储介质
US16/794,293 US11377098B2 (en) 2019-02-26 2020-02-19 Vehicle control device, vehicle control method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019032949A JP7101630B2 (ja) 2019-02-26 2019-02-26 車両制御装置、車両制御方法、およびプログラム

Publications (2)

Publication Number Publication Date
JP2020138552A JP2020138552A (ja) 2020-09-03
JP7101630B2 true JP7101630B2 (ja) 2022-07-15

Family

ID=72141721

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019032949A Active JP7101630B2 (ja) 2019-02-26 2019-02-26 車両制御装置、車両制御方法、およびプログラム

Country Status (3)

Country Link
US (1) US11377098B2 (ja)
JP (1) JP7101630B2 (ja)
CN (1) CN111619568B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200056080A (ko) * 2018-11-14 2020-05-22 현대자동차주식회사 게이트웨이 장치, 이를 포함하는 차량 및 원격 제어 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018157360A (ja) 2017-03-17 2018-10-04 本田技研工業株式会社 車両制御システム及び車両制御方法
JP2018156641A (ja) 2017-03-17 2018-10-04 パナソニックIpマネジメント株式会社 車両運行管理システムおよび車両運行管理方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015166811A1 (ja) * 2014-04-30 2015-11-05 みこらった株式会社 自動運転車及び自動運転車用プログラム
DE102014210172B3 (de) * 2014-05-28 2015-10-22 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Übergabe eines Kraftfahrzeugs an den Fahrer bei einem automatischen Ausparkvorgang
JP6564713B2 (ja) * 2016-02-01 2019-08-21 三菱重工業株式会社 自動運転制御装置、車両及び自動運転制御方法
JP6812173B2 (ja) * 2016-08-31 2021-01-13 アイシン精機株式会社 駐車支援装置
JP2018097536A (ja) 2016-12-12 2018-06-21 株式会社デンソーテン 駐車管理装置、駐車管理システム及び駐車管理方法
JP2018162031A (ja) * 2017-03-27 2018-10-18 三菱自動車工業株式会社 自動走行システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018157360A (ja) 2017-03-17 2018-10-04 本田技研工業株式会社 車両制御システム及び車両制御方法
JP2018156641A (ja) 2017-03-17 2018-10-04 パナソニックIpマネジメント株式会社 車両運行管理システムおよび車両運行管理方法

Also Published As

Publication number Publication date
CN111619568B (zh) 2023-11-14
US11377098B2 (en) 2022-07-05
US20200269834A1 (en) 2020-08-27
CN111619568A (zh) 2020-09-04
JP2020138552A (ja) 2020-09-03

Similar Documents

Publication Publication Date Title
US11505178B2 (en) Vehicle control device, vehicle control method, and storage medium
JP7065765B2 (ja) 車両制御システム、車両制御方法、及びプログラム
JP7032295B2 (ja) 車両制御システム、車両制御方法、およびプログラム
JP7096192B2 (ja) 駐車管理装置、駐車管理装置の制御方法、およびプログラム
JP7236307B2 (ja) 車両制御装置、車両制御方法、及びプログラム
US20200298874A1 (en) Vehicle control device, vehicle control method, and storage medium
JP7240218B2 (ja) 車両制御システム、車両制御方法、及びプログラム
JP7058234B2 (ja) 車両制御装置、情報提供装置、情報提供システム、車両制御方法、情報提供方法、およびプログラム
JP2020166632A (ja) 駐車管理装置、駐車管理装置の制御方法、およびプログラム
CN111665832A (zh) 车辆控制装置、车辆控制系统、车辆控制方法及存储介质
JP2020166460A (ja) 車両制御装置、車両管理装置、車両制御方法、車両管理方法、およびプログラム
CN112037561B (zh) 信息处理装置、信息处理方法及存储介质
US20200302199A1 (en) Vehicle control device, monitoring system, vehicle control method, and storage medium
JP7101630B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7075789B2 (ja) 車両制御装置、車両制御方法、及びプログラム
JP2020149225A (ja) 車両制御システム、車両制御方法、及びプログラム
JP2020201701A (ja) 車両制御装置、車両制御方法、およびプログラム
JP7157686B2 (ja) 車両制御装置、車両制御方法、及びプログラム
JP7123836B2 (ja) 車両制御システム、車両制御方法、及びプログラム
CN111619571B (zh) 车辆控制系统、车辆控制方法及存储介质
CN112009478B (zh) 车辆控制系统、车辆控制方法及存储介质
US20200311621A1 (en) Management device, management method, and storage medium
JP2021098408A (ja) 車両制御装置、車両制御方法、およびプログラム
JP2020104756A (ja) 車両制御システム、車両制御方法、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210329

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220405

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220602

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220628

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220705

R150 Certificate of patent or registration of utility model

Ref document number: 7101630

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150