JP7470157B2 - 車両制御装置、車両制御方法、およびプログラム - Google Patents

車両制御装置、車両制御方法、およびプログラム Download PDF

Info

Publication number
JP7470157B2
JP7470157B2 JP2022133295A JP2022133295A JP7470157B2 JP 7470157 B2 JP7470157 B2 JP 7470157B2 JP 2022133295 A JP2022133295 A JP 2022133295A JP 2022133295 A JP2022133295 A JP 2022133295A JP 7470157 B2 JP7470157 B2 JP 7470157B2
Authority
JP
Japan
Prior art keywords
information
driving mode
dividing line
vehicle
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022133295A
Other languages
English (en)
Other versions
JP2024030413A (ja
Inventor
大地 井上
祥 田村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2022133295A priority Critical patent/JP7470157B2/ja
Priority to CN202311062123.3A priority patent/CN117622150A/zh
Priority to US18/236,959 priority patent/US20240067229A1/en
Publication of JP2024030413A publication Critical patent/JP2024030413A/ja
Application granted granted Critical
Publication of JP7470157B2 publication Critical patent/JP7470157B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18Propelling the vehicle
    • B60W30/182Selecting between different operative modes, e.g. comfort and performance modes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06Road conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0053Handover processes from vehicle to occupant
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/53Road markings, e.g. lane marker or crosswalk

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Description

本発明は、車両制御装置、車両制御方法、およびプログラムに関する。
従来、車両に搭載されたカメラによって撮像された画像に基づいて、当該車両の目標軌道を生成し、生成された目標軌道に沿って車両を走行させる技術が知られている。例えば、特許文献1には、フロントカメラを用いて認識された2本の車線境界線のうち、走行方向と略並行な1本の車線境界線に対して、目標走路を設定する技術が開示されている。
特開2015-223941号公報
特許文献1に記載の技術は、フロントカメラを用いて認識された情報に基づいて、車両の目標走路を設定するものである。しかしながら、例えば、カメラに加えて、地図情報を用いて車両の目標走路を設定する場合、カメラ情報と地図情報の内容が乖離することがあり、正しい走路を推定できない場合があった。
本発明は、このような事情を考慮してなされたものであり、カメラ情報と地図情報の内容が乖離する場合であっても、正しい走路を推定することができる車両制御装置、車両制御方法、およびプログラムを提供することを目的の一つとする。
この発明に係る車両制御装置、車両制御方法、およびプログラムは、以下の構成を採用した。
(1):この発明の一態様に係る車両制御装置は、少なくともカメラを用いて車両の周辺状況を認識する認識部と、前記周辺状況と地図情報に基づいて、前記車両の運転者の操作に依らずに前記車両の操舵および加減速を制御する運転制御部と、前記車両の運転モードを、第1の運転モードと、第2の運転モードとを含む複数の運転モードのいずれかに決定し、前記第2の運転モードは前記運転者に課されるタスクが前記第1の運転モードに比して軽度な運転モードであり、少なくとも前記第2の運転モードを含む前記複数の運転モードの一部は前記運転制御部により制御されるものであり、前記決定した運転モードに係るタスクが運転者により実行されない場合に、よりタスクが重度な運転モードに前記車両の運転モードを変更するモード決定部と、前記車両が前記第2の運転モードで走行中に、前記周辺状況に含まれるカメラ道路区画線と、前記地図情報に含まれる地図道路区画線とが一致しているか否かを判定し、前記カメラ道路区画線と前記地図道路区画線とが一致しないと判定された場合、前記車両に搭載される空間検知センサによって検知された静止物標群の情報と、前記カメラによって撮像された画像に基づいて検知されたフリースペースの情報とが一致するか否かを判定し、前記カメラ道路区画線と、前記フリースペースの情報とが一致するか否かを判定し、前記静止物標群の情報と、前記地図道路区画線とが干渉するか否かを判定する判定部と、を備え、前記モード決定部は、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された場合、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更するものである。
(2):上記(1)の態様において、前記静止物標群は、連続的な道路構造物であり、前記判定部は、前記道路構造物の延伸方向と、前記フリースペースの延伸方向との間の角度を算出し、前記角度が第1閾値以内であるか否かを判定することによって、前記静止物標群の情報と、前記フリースペースの情報とが一致するか否かを判定するものである。
(3):上記(1)の態様において、前記判定部は、前記カメラ道路区画線と、前記フリースペースの延伸方向との間の角度を算出し、前記角度が第2閾値以内であるか否かを判定することによって、前記カメラ道路区画線と、前記フリースペースの情報とが一致するか否かを判定するものである。
(4):上記(1)の態様において、前記空間検知センサはレーダ装置であり、前記判定部は、前記レーダ装置によって検知された前記静止物標群の情報と、前記地図道路区画線とが干渉するか否かを判定するものである。
(5):上記(1)の態様において、前記モード決定部は、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された期間が第1期間以上である場合に、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更するものである。
(6):上記(1)の態様において、前記モード決定部は、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致しないか、又は前記カメラ道路区画線と前記フリースペースの情報とが一致しないか、又は前記静止物標群の情報と前記地図道路区画線とが干渉しないと判定された場合、前記地図道路区画線に基づく前記第2の運転モードを継続するものである。
(7):上記(1)の態様において、前記モード決定部は、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更した場合、前記カメラ道路区画線に基づく前記第1の運転モードを少なくとも第2所定期間継続させるものである。
(8):上記(1)の態様において、前記モード決定部は、前記カメラ道路区画線に基づく前記第1の運転モードを第2所定期間継続させた後に、前記カメラ道路区画線に基づく前記第1の運転モードを前記第2の運転モードに復帰させるものである。
(9):上記(8)の態様において、前記モード決定部は、前記カメラ道路区画線に基づく前記第1の運転モードを第2所定期間継続させた後に、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致しないか、又は前記カメラ道路区画線と前記フリースペースの情報とが一致しないか、又は前記静止物標群の情報と前記地図道路区画線とが干渉しないと判定された場合、前記カメラ道路区画線に基づく前記第1の運転モードを前記第2の運転モードに復帰させるものである。
(10):上記(1)の態様において、前記モード決定部は、前記カメラ道路区画線に基づく前記第1の運転モードを第3所定期間継続させた後に、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と前記地図道路区画線とが干渉しないと判定された場合、前記カメラ道路区画線に基づく前記第1の運転モードを、前記車両の乗員による前記車両の手動運転に遷移させるものである。
(11):上記(1)の態様において、前記モード決定部は、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された際に、前記車両の前方に先行車両が存在すると判定された場合、前記第2の運転モードを前記カメラ道路区画線に基づく前記第1の運転モードに変更することなく、前記第2の運転モードを継続させるものである。
(12):この発明の別の態様に係る車両制御方法は、コンピュータが、少なくともカメラを用いて車両の周辺状況を認識し、前記周辺状況と地図情報に基づいて、前記車両の運転者の操作に依らずに前記車両の操舵および加減速を制御し、前記車両の運転モードを、第1の運転モードと、第2の運転モードとを含む複数の運転モードのいずれかに決定し、前記第2の運転モードは前記運転者に課されるタスクが前記第1の運転モードに比して軽度な運転モードであり、少なくとも前記第2の運転モードを含む前記複数の運転モードの一部が制御されるものであり、前記決定した運転モードに係るタスクが運転者により実行されない場合に、よりタスクが重度な運転モードに前記車両の運転モードを変更し、前記車両が前記第2の運転モードで走行中に、前記周辺状況に含まれるカメラ道路区画線と、前記地図情報に含まれる地図道路区画線とが一致しているか否かを判定し、前記カメラ道路区画線と前記地図道路区画線とが一致しないと判定された場合、前記車両に搭載される空間検知センサによって検知された静止物標群の情報と、前記カメラによって撮像された画像に基づいて検知されたフリースペースの情報とが一致するか否かを判定し、前記カメラ道路区画線と、前記フリースペースの情報とが一致するか否かを判定し、前記静止物標群の情報と、前記地図道路区画線とが干渉するか否かを判定し、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された場合、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更するものである。
(13):この発明の別の態様に係るプログラムは、コンピュータに、少なくともカメラを用いて車両の周辺状況を認識させ、前記周辺状況と地図情報に基づいて、前記車両の運転者の操作に依らずに前記車両の操舵および加減速を制御させ、前記車両の運転モードを、第1の運転モードと、第2の運転モードとを含む複数の運転モードのいずれかに決定させ、前記第2の運転モードは前記運転者に課されるタスクが前記第1の運転モードに比して軽度な運転モードであり、少なくとも前記第2の運転モードを含む前記複数の運転モードの一部が制御されるものであり、前記決定した運転モードに係るタスクが運転者により実行されない場合に、よりタスクが重度な運転モードに前記車両の運転モードを変更させ、前記車両が前記第2の運転モードで走行中に、前記周辺状況に含まれるカメラ道路区画線と、前記地図情報に含まれる地図道路区画線とが一致しているか否かを判定させ、前記カメラ道路区画線と前記地図道路区画線とが一致しないと判定された場合、前記車両に搭載される空間検知センサによって検知された静止物標群の情報と、前記カメラによって撮像された画像に基づいて検知されたフリースペースの情報とが一致するか否かを判定させ、前記カメラ道路区画線と、前記フリースペースの情報とが一致するか否かを判定させ、前記静止物標群の情報と、前記地図道路区画線とが干渉するか否かを判定させ、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された場合、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更させるものである。
(1)~(13)によれば、カメラ情報と地図情報の内容が乖離する場合であっても、正しい走路を推定することができる。
実施形態に係る車両制御装置を利用した車両システム1の構成図である。 第1制御部120および第2制御部160の機能構成図である。 運転モードと自車両Mの制御状態、およびタスクの対応関係の一例を示す図である。 実施形態に係る車両制御装置の動作が実行される場面の一例を示す図である。 実施形態に係る車両制御装置の動作が実行される場面の別の例を示す図である。 実施形態に係る車両制御装置によって実行される処理の流れの一例を示すフローチャートである。 実施形態に係る車両制御装置によって実行される処理の流れの別の例を示すフローチャートである。 実施形態に係る車両制御装置によって実行される処理の流れの別の例を示すフローチャートである。
以下、図面を参照し、本発明の車両制御装置、車両制御方法、およびプログラムの実施形態について説明する。
[全体構成]
図1は、実施形態に係る車両制御装置を利用した車両システム1の構成図である。車両システム1が搭載される車両は、例えば、二輪や三輪、四輪等の車両であり、その駆動源は、ディーゼルエンジンやガソリンエンジンなどの内燃機関、電動機、或いはこれらの組み合わせである。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。
車両システム1は、例えば、カメラ10と、レーダ装置12と、LIDAR(Light Detection and Ranging)14と、物体認識装置16と、通信装置20と、HMI(Human Machine Interface)30と、車両センサ40と、ナビゲーション装置50と、MPU(Map Positioning Unit)60と、ドライバモニタカメラ70と、運転操作子80と、自動運転制御装置100と、走行駆動力出力装置200と、ブレーキ装置210と、ステアリング装置220とを備える。これらの装置や機器は、CAN(Controller Area Network)通信線等の多重通信線やシリアル通信線、無線通信網等によって互いに接続される。なお、図1に示す構成はあくまで一例であり、構成の一部が省略されてもよいし、更に別の構成が追加されてもよい。
カメラ10は、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の固体撮像素子を利用したデジタルカメラである。カメラ10は、車両システム1が搭載される車両(以下、自車両M)の任意の箇所に取り付けられる。前方を撮像する場合、カメラ10は、フロントウインドシールド上部やルームミラー裏面等に取り付けられる。カメラ10は、例えば、周期的に繰り返し自車両Mの周辺を撮像する。カメラ10は、ステレオカメラであってもよい。
レーダ装置12は、自車両Mの周辺にミリ波などの電波を放射すると共に、物体によって反射された電波(反射波)を検出して少なくとも物体の位置(距離および方位)を検出する。レーダ装置12は、自車両Mの任意の箇所に取り付けられる。レーダ装置12は、FM-CW(Frequency Modulated Continuous Wave)方式によって物体の位置および速度を検出してもよい。
LIDAR14は、自車両Mの周辺に光(或いは光に近い波長の電磁波)を照射し、散乱光を測定する。LIDAR14は、発光から受光までの時間に基づいて、対象までの距離を検出する。照射される光は、例えば、パルス状のレーザー光である。LIDAR14は、自車両Mの任意の箇所に取り付けられる。
物体認識装置16は、カメラ10、レーダ装置12、およびLIDAR14のうち一部または全部による検出結果に対してセンサフュージョン処理を行って、物体の位置、種類、速度などを認識する。物体認識装置16は、認識結果を自動運転制御装置100に出力する。物体認識装置16は、カメラ10、レーダ装置12、およびLIDAR14の検出結果をそのまま自動運転制御装置100に出力してよい。車両システム1から物体認識装置16が省略されてもよい。
通信装置20は、例えば、セルラー網やWi-Fi網、Bluetooth(登録商標)、DSRC(Dedicated Short Range Communication)などを利用して、自車両Mの周辺に存在する他車両と通信し、或いは無線基地局を介して各種サーバ装置と通信する。
HMI30は、自車両Mの乗員に対して各種情報を提示すると共に、乗員による入力操作を受け付ける。HMI30は、各種表示装置、スピーカ、ブザー、タッチパネル、スイッチ、キーなどを含む。
車両センサ40は、自車両Mの速度を検出する車速センサ、加速度を検出する加速度センサ、鉛直軸回りの角速度を検出するヨーレートセンサ、自車両Mの向きを検出する方位センサ等を含む。
ナビゲーション装置50は、例えば、GNSS(Global Navigation Satellite System)受信機51と、ナビHMI52と、経路決定部53とを備える。ナビゲーション装置50は、HDD(Hard Disk Drive)やフラッシュメモリなどの記憶装置に第1地図情報54を保持している。GNSS受信機51は、GNSS衛星から受信した信号に基づいて、自車両Mの位置を特定する。自車両Mの位置は、車両センサ40の出力を利用したINS(Inertial Navigation System)によって特定または補完されてもよい。ナビHMI52は、表示装置、スピーカ、タッチパネル、キーなどを含む。ナビHMI52は、前述したHMI30と一部または全部が共通化されてもよい。経路決定部53は、例えば、GNSS受信機51により特定された自車両Mの位置(或いは入力された任意の位置)から、ナビHMI52を用いて乗員により入力された目的地までの経路(以下、地図上経路)を、第1地図情報54を参照して決定する。第1地図情報54は、例えば、道路を示すリンクと、リンクによって接続されたノードとによって道路形状が表現された情報である。第1地図情報54は、道路の曲率やPOI(Point Of Interest)情報などを含んでもよい。地図上経路は、MPU60に出力される。ナビゲーション装置50は、地図上経路に基づいて、ナビHMI52を用いた経路案内を行ってもよい。ナビゲーション装置50は、例えば、乗員の保有するスマートフォンやタブレット端末等の端末装置の機能によって実現されてもよい。ナビゲーション装置50は、通信装置20を介してナビゲーションサーバに現在位置と目的地を送信し、ナビゲーションサーバから地図上経路と同等の経路を取得してもよい。
MPU60は、例えば、推奨車線決定部61を含み、HDDやフラッシュメモリなどの記憶装置に第2地図情報62を保持している。推奨車線決定部61は、ナビゲーション装置50から提供された地図上経路を複数のブロックに分割し(例えば、車両進行方向に関して100[m]毎に分割し)、第2地図情報62を参照してブロックごとに推奨車線を決定する。推奨車線決定部61は、左から何番目の車線を走行するといった決定を行う。推奨車線決定部61は、地図上経路に分岐箇所が存在する場合、自車両Mが、分岐先に進行するための合理的な経路を走行できるように、推奨車線を決定する。
第2地図情報62は、第1地図情報54よりも高精度な地図情報である。第2地図情報62は、例えば、車線の中央の情報あるいは車線の境界の情報等を含んでいる。特に、本実施形態において、第2地図情報62は、車線における左右の道路区画線(以下、「地図道路区画線」と称する場合がある)および車線の中心線(以下、「地図道路中心線」と称する場合がある)に関する情報を含む。また、第2地図情報62には、道路情報、交通規制情報、住所情報(住所・郵便番号)、施設情報、電話番号情報、後述するモードAまたはモードBが禁止される禁止区間の情報などが含まれてよい。第2地図情報62は、通信装置20が他装置と通信することにより、随時、アップデートされてよい。
ドライバモニタカメラ70は、例えば、CCDやCMOS等の固体撮像素子を利用したデジタルカメラである。ドライバモニタカメラ70は、自車両Mの運転席に着座した乗員(以下、運転者)の頭部を正面から(顔面を撮像する向きで)撮像可能な位置および向きで、自車両Mにおける任意の箇所に取り付けられる。例えば、ドライバモニタカメラ70は、自車両Mのインストルメントパネルの中央部に設けられたディスプレイ装置の上部に取り付けられる。
運転操作子80は、例えば、ステアリングホイール82の他、アクセルペダル、ブレーキペダル、シフトレバー、その他の操作子を含む。運転操作子80には、操作量あるいは操作の有無を検出するセンサが取り付けられており、その検出結果は、自動運転制御装置100、もしくは、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220のうち一部または全部に出力される。ステアリングホイール82は、「運転者による操舵操作を受け付ける操作子」の一例である。操作子は、必ずしも環状である必要は無く、異形ステアやジョイスティック、ボタンなどの形態であってもよい。ステアリングホイール82には、ステアリング把持センサ84が取り付けられている。ステアリング把持センサ84は、静電容量センサなどにより実現され、運転者がステアリングホイール82を把持している(力を加えられる状態で接していることをいう)か否かを検知可能な信号を自動運転制御装置100に出力する。
自動運転制御装置100は、例えば、第1制御部120と、第2制御部160とを備える。第1制御部120と第2制御部160は、それぞれ、例えば、CPU(Central Processing Unit)などのハードウェアプロセッサがプログラム(ソフトウェア)を実行することにより実現される。また、これらの構成要素のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)などのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予め自動運転制御装置100のHDDやフラッシュメモリなどの記憶装置(非一過性の記憶媒体を備える記憶装置)に格納されていてもよいし、DVDやCD-ROMなどの着脱可能な記憶媒体に格納されており、記憶媒体(非一過性の記憶媒体)がドライブ装置に装着されることで自動運転制御装置100のHDDやフラッシュメモリにインストールされてもよい。自動運転制御装置100は「車両制御装置」の一例であり、行動計画生成部140と第2制御部160を合わせたものが「運転制御部」の一例である。
図2は、第1制御部120および第2制御部160の機能構成図である。第1制御部120は、例えば、認識部130と、行動計画生成部140と、モード決定部150とを備える。第1制御部120は、例えば、AI(Artificial Intelligence;人工知能)による機能と、予め与えられたモデルによる機能とを並行して実現する。例えば、「交差点を認識する」機能は、ディープラーニング等による交差点の認識と、予め与えられた条件(パターンマッチング可能な信号、道路標示などがある)に基づく認識とが並行して実行され、双方に対してスコア付けして総合的に評価することで実現されてよい。これによって、自動運転の信頼性が担保される。
認識部130は、カメラ10、レーダ装置12、およびLIDAR14から物体認識装置16を介して入力された情報に基づいて、自車両Mの周辺にある物体の位置、および速度、加速度等の状態を認識する。物体の位置は、例えば、自車両Mの代表点(重心や駆動軸中心など)を原点とした絶対座標上の位置として認識され、制御に使用される。物体の位置は、その物体の重心やコーナー等の代表点で表されてもよいし、領域で表されてもよい。物体の「状態」とは、物体の加速度やジャーク、あるいは「行動状態」(例えば車線変更をしている、またはしようとしているか否か)を含んでもよい。
また、認識部130は、例えば、自車両Mが走行している車線(走行車線)を認識する。例えば、認識部130は、第2地図情報62から得られる道路区画線のパターン(例えば実線と破線の配列)と、カメラ10によって撮像された画像から認識される自車両Mの周辺の道路区画線のパターンとを比較することで、走行車線を認識する。特に、本実施形態において、認識部130は、カメラ10によって撮像された画像に基づいて、車線における左右の道路区画線(以下、「カメラ道路区画線」と称する場合がある)および車線の中心線(以下、「カメラ道路中心線」と称する場合がある)を認識するものとする。カメラ道路中心線は、左右のカメラ道路区画線の中心線として認識されるものである。この認識において、ナビゲーション装置50から取得される自車両Mの位置やINSによる処理結果が加味されてもよい。さらに、本実施形態において、認識部130は、レーダ装置12及び/又はLIDAR14の出力に基づいて、道路上に存在する路肩、縁石、フェンス、中央分離帯、ガードレールなどの連続的な道路構造物を認識するものとする。また、認識部130は、一時停止線、障害物、赤信号、料金所、その他の道路事象を認識する。
認識部130は、走行車線を認識する際に、走行車線に対する自車両Mの位置や姿勢を認識する。認識部130は、例えば、自車両Mの基準点の車線中央からの乖離、および自車両Mの進行方向の車線中央を連ねた線に対してなす角度を、走行車線に対する自車両Mの相対位置および姿勢として認識してもよい。これに代えて、認識部130は、走行車線のいずれかの側端部(道路区画線または道路境界)に対する自車両Mの基準点の位置などを、走行車線に対する自車両Mの相対位置として認識してもよい。
認識部130は、さらに、カメラ10によって撮像された画像に基づいて、走行車線上で自車両Mが走行可能な領域であるフリースペースを認識する。より具体的には、例えば、認識部130は、画像を入力すると、当該画像に写されるフリースペースを出力するように学習された学習済みモデルに、カメラ10によって撮像された画像を入力することによってフリースペースを得る。フリースペースは、例えば、自車両Mの現在位置を挟む左右の走路境界線(又は、走路境界線を構成する点群)として出力されるものである。
行動計画生成部140は、原則的には推奨車線決定部61により決定された推奨車線を走行し、更に、自車両Mの周辺状況に対応できるように、自車両Mが自動的に(運転者の操作に依らずに)将来走行する目標軌道を生成する。目標軌道は、例えば、速度要素を含んでいる。例えば、目標軌道は、自車両Mの到達すべき地点(軌道点)を順に並べたものとして表現される。軌道点は、道なり距離で所定の走行距離(例えば数[m]程度)ごとの自車両Mの到達すべき地点であり、それとは別に、所定のサンプリング時間(例えば0コンマ数[sec]程度)ごとの目標速度および目標加速度が、目標軌道の一部として生成される。また、軌道点は、所定のサンプリング時間ごとの、そのサンプリング時刻における自車両Mの到達すべき位置であってもよい。この場合、目標速度や目標加速度の情報は軌道点の間隔で表現される。
行動計画生成部140は、目標軌道を生成するにあたり、自動運転のイベントを設定してよい。自動運転のイベントには、定速走行イベント、低速追従走行イベント、車線変更イベント、分岐イベント、合流イベント、テイクオーバーイベントなどがある。行動計画生成部140は、起動させたイベントに応じた目標軌道を生成する。
モード決定部150は、自車両Mの運転モードを、運転者に課されるタスクが異なる複数の運転モードのいずれかに決定する。モード決定部150は、例えば、運転者状態判定部152と、モード変更処理部154と、判定部156とを備える。これらの個別の機能については後述する。
図3は、運転モードと自車両Mの制御状態、およびタスクの対応関係の一例を示す図である。自車両Mの運転モードには、例えば、モードAからモードEの5つのモードがある。制御状態すなわち自車両Mの運転制御の自動化度合いは、モードAが最も高く、次いでモードB、モードC、モードDの順に低くなり、モードEが最も低い。この逆に、運転者に課されるタスクは、モードAが最も軽度であり、次いでモードB、モードC、モードDの順に重度となり、モードEが最も重度である。なお、モードDおよびEでは自動運転でない制御状態となるため、自動運転制御装置100としては自動運転に係る制御を終了し、運転支援または手動運転に移行させるまでが責務である。以下、それぞれの運転モードの内容について例示する。
モードAでは、自動運転の状態となり、運転者には前方監視、ステアリングホイール82の把持(図ではステアリング把持)のいずれも課されない。但し、モードAであっても運転者は、自動運転制御装置100を中心としたシステムからの要求に応じて速やかに手動運転に移行できる体勢であることが要求される。なお、ここで言う自動運転とは、操舵、加減速のいずれも運転者の操作に依らずに制御されることをいう。前方とは、フロントウインドシールドを介して視認される自車両Mの進行方向の空間を意味する。モードAは、例えば、高速道路などの自動車専用道路において、所定速度(例えば50[km/h]程度)以下で自車両Mが走行しており、追従対象の前走車両が存在するなどの条件が満たされる場合に実行可能な運転モードであり、TJP(Traffic Jam Pilot)と称される場合もある。この条件が満たされなくなった場合、モード決定部150は、モードBに自車両Mの運転モードを変更する。
モードBでは、運転支援の状態となり、運転者には自車両Mの前方を監視するタスク(以下、前方監視)が課されるが、ステアリングホイール82を把持するタスクは課されない。モードCでは、運転支援の状態となり、運転者には前方監視のタスクと、ステアリングホイール82を把持するタスクが課される。モードDは、自車両Mの操舵と加減速のうち少なくとも一方に関して、ある程度の運転者による運転操作が必要な運転モードである。例えば、モードDでは、ACC(Adaptive Cruise Control)やLKAS(Lane Keeping Assist System)といった運転支援が行われる。モードEでは、操舵、加減速ともに運転者による運転操作が必要な手動運転の状態となる。モードD、モードEともに、当然ながら運転者には自車両Mの前方を監視するタスクが課される。
自動運転制御装置100(および運転支援装置(不図示))は、運転モードに応じた自動車線変更を実行する。自動車線変更には、システム要求による自動車線変更(1)と、運転者要求による自動車線変更(2)がある。自動車線変更(1)には、前走車両の速度が自車両の速度に比して基準以上に小さい場合に行われる、追い越しのための自動車線変更と、目的地に向けて進行するための自動車線変更(推奨車線が変更されたことによる自動車線変更)とがある。自動車線変更(2)は、速度や周辺車両との位置関係等に関する条件が満たされた場合において、運転者により方向指示器が操作された場合に、操作方向に向けて自車両Mを車線変更させるものである。
自動運転制御装置100は、モードAにおいて、自動車線変更(1)および(2)のいずれも実行しない。自動運転制御装置100は、モードBおよびCにおいて、自動車線変更(1)および(2)のいずれも実行する。運転支援装置(不図示)は、モードDにおいて、自動車線変更(1)は実行せず自動車線変更(2)を実行する。モードEにおいて、自動車線変更(1)および(2)のいずれも実行されない。
モード決定部150は、決定した運転モード(以下、現運転モード)に係るタスクが運転者により実行されない場合に、よりタスクが重度な運転モードに自車両Mの運転モードを変更する。
例えば、モードAにおいて運転者が、システムからの要求に応じて手動運転に移行できない体勢である場合(例えば許容エリア外の脇見を継続している場合や、運転困難となる予兆が検出された場合)、モード決定部150は、HMI30を用いて運転者に手動運転への移行を促し、運転者が応じなければ自車両Mを路肩に寄せて徐々に停止させ、自動運転を停止する、といった制御を行う。自動運転を停止した後は、自車両はモードDまたはEの状態になり、運転者の手動操作によって自車両Mを発進させることが可能となる。以下、「自動運転を停止」に関して同様である。モードBにおいて運転者が前方を監視していない場合、モード決定部150は、HMI30を用いて運転者に前方監視を促し、運転者が応じなければ自車両Mを路肩に寄せて徐々に停止させ、自動運転を停止する、といった制御を行う。モードCにおいて運転者が前方を監視していない場合、或いはステアリングホイール82を把持していない場合、モード決定部150は、HMI30を用いて運転者に前方監視を、および/またはステアリングホイール82を把持するように促し、運転者が応じなければ自車両Mを路肩に寄せて徐々に停止させ、自動運転を停止する、といった制御を行う。
運転者状態判定部152は、上記のモード変更のために運転者の状態を監視し、運転者の状態がタスクに応じた状態であるか否かを判定する。例えば、運転者状態判定部152は、ドライバモニタカメラ70が撮像した画像を解析して姿勢推定処理を行い、運転者が、システムからの要求に応じて手動運転に移行できない体勢であるか否かを判定する。また、運転者状態判定部152は、ドライバモニタカメラ70が撮像した画像を解析して視線推定処理を行い、運転者が前方を監視しているか否かを判定する。
モード変更処理部154は、モード変更のための各種処理を行う。例えば、モード変更処理部154は、行動計画生成部140に路肩停止のための目標軌道を生成するように指示したり、運転支援装置(不図示)に作動指示をしたり、運転者に行動を促すためにHMI30の制御をしたりする。判定部156の動作は後述する。
第2制御部160は、行動計画生成部140によって生成された目標軌道を、予定の時刻通りに自車両Mが通過するように、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220を制御する。
図2に戻り、第2制御部160は、例えば、取得部162と、速度制御部164と、操舵制御部166とを備える。取得部162は、行動計画生成部140により生成された目標軌道(軌道点)の情報を取得し、メモリ(不図示)に記憶させる。速度制御部164は、メモリに記憶された目標軌道に付随する速度要素に基づいて、走行駆動力出力装置200またはブレーキ装置210を制御する。操舵制御部166は、メモリに記憶された目標軌道の曲がり具合に応じて、ステアリング装置220を制御する。速度制御部164および操舵制御部166の処理は、例えば、フィードフォワード制御とフィードバック制御との組み合わせにより実現される。一例として、操舵制御部166は、自車両Mの前方の道路の曲率に応じたフィードフォワード制御と、目標軌道からの乖離に基づくフィードバック制御とを組み合わせて実行する。
走行駆動力出力装置200は、車両が走行するための走行駆動力(トルク)を駆動輪に出力する。走行駆動力出力装置200は、例えば、内燃機関、電動機、および変速機などの組み合わせと、これらを制御するECU(Electronic Control Unit)とを備える。ECUは、第2制御部160から入力される情報、或いは運転操作子80から入力される情報に従って、上記の構成を制御する。
ブレーキ装置210は、例えば、ブレーキキャリパーと、ブレーキキャリパーに油圧を伝達するシリンダと、シリンダに油圧を発生させる電動モータと、ブレーキECUとを備える。ブレーキECUは、第2制御部160から入力される情報、或いは運転操作子80から入力される情報に従って電動モータを制御し、制動操作に応じたブレーキトルクが各車輪に出力されるようにする。ブレーキ装置210は、運転操作子80に含まれるブレーキペダルの操作によって発生させた油圧を、マスターシリンダを介してシリンダに伝達する機構をバックアップとして備えてよい。なお、ブレーキ装置210は、上記説明した構成に限らず、第2制御部160から入力される情報に従ってアクチュエータを制御して、マスターシリンダの油圧をシリンダに伝達する電子制御式油圧ブレーキ装置であってもよい。
ステアリング装置220は、例えば、ステアリングECUと、電動モータとを備える。電動モータは、例えば、ラックアンドピニオン機構に力を作用させて転舵輪の向きを変更する。ステアリングECUは、第2制御部160から入力される情報、或いは運転操作子80から入力される情報に従って、電動モータを駆動し、転舵輪の向きを変更させる。
次に、実施形態に係る車両制御装置の動作について説明する。図4は、実施形態に係る車両制御装置の動作が実行される場面の一例を示す図である。図4に示す状況において、自車両Mの運転モードはモードBであり、かつ第2地図情報62に含まれる地図道路中心線を参照線として(すなわち、地図道路中心線に沿って)自車両Mは車線L1を走行中であるものとする。図4中、符号MLは地図道路区画線を示し、符号CLはカメラ道路区画線を示し、符号FSはフリースペースを示し、符号RSは連続的な道路構造物を示す。
判定部156は、カメラ10によって撮像された画像に基づいて認識されたカメラ道路区画線CLと、第2地図情報62に含まれる地図道路区画線MLとが一致するか否かを判定する。より具体的には、例えば、判定部156は、左側のカメラ道路区画線CLおよび地図道路区画線MLと、右側のカメラ道路区画線CLおよび地図道路区画線MLのそれぞれについて、カメラ道路区画線CLと地図道路区画線MLとの間の距離が閾値以内であるか否かを判定する。判定部156は、例えば、少なくとも一方の側のカメラ道路区画線CLと地図道路区画線MLとの間の距離が閾値より大きい場合に、カメラ道路区画線CLと地図道路区画線MLとが一致していないと判定する。また、例えば、判定部156は、左側のカメラ道路区画線CLおよび地図道路区画線MLと、右側のカメラ道路区画線CLおよび地図道路区画線MLのそれぞれについて、カメラ道路区画線CLと地図道路区画線MLとがなす角度が閾値以内であるか否かを判定してもよい。判定部156は、少なくとも一方の側のカメラ道路区画線CLと地図道路区画線MLとがなす角度が閾値より大きい場合に、カメラ道路区画線CLと地図道路区画線MLとが一致していないと判定してもよい。
判定部156によって、カメラ道路区画線CLと地図道路区画線MLとが一致していないと判定された場合、判定部156は、以下の第1条件、第2条件、および第3条件の全てが成立するか否かを判定する。第1条件、第2条件、および第3条件は、カメラ道路区画線CLと地図道路区画線MLとのうちのいずれの信頼性がより高いかを判定するための条件である。第1条件、第2条件、および第3条件の全てが成立すると判定された場合、これはカメラ道路区画線CLが地図道路区画線MLよりも信頼性が高いことを意味する。
[第1条件]
判定部156は、第1条件として、レーダ装置12及び/又はLIDAR14によって検知された連続的な道路構造物RSの情報と、認識部130によって認識されたフリースペースFSの情報とが一致するか否かを判定する。より具体的には、判定部156は、連続的な道路構造物RSの延伸方向と、フリースペースFSの延伸方向との間の角度を算出し、算出した角度が第1閾値以内であるか否かを判定する。判定部156は、例えば、連続的な道路構造物RSにフィッテイングさせた直線と、フリースペースFSの延伸方向との間の角度を算出し、算出した角度が第1閾値以内であるか否かを判定する。判定部156は、算出した角度が第1閾値以内であると判定した場合、連続的な道路構造物RSの情報と、認識部130によって認識されたフリースペースFSの情報とが一致すると判定する。
[第2条件]
判定部156は、第2条件として、カメラ道路区画線CLと、フリースペースFSの情報とが一致するか否かを判定する。より具体的には、判定部156は、カメラ道路区画線CLと、フリースペースFSの延伸方向との間の角度を算出し、算出した角度が第2閾値以内であるか否かを判定する。判定部156は、算出した角度が第2閾値以内であると判定した場合、カメラ道路区画線CLと、フリースペースFSの情報とが一致すると判定する。
[第3条件]
判定部156は、第3条件として、連続的な道路構造物RSの情報と、地図道路区画線MLとが干渉するか否かを判定する。より具体的には、例えば、判定部156は、連続的な道路構造物RS(又は、連続的な道路構造物RSにフィッテイングさせた直線)と、地図道路区画線MLとが交差するか否かを判定する。判定部156は、連続的な道路構造物RSと、地図道路区画線MLとが交差すると判定された場合、連続的な道路構造物RSの情報と、地図道路区画線MLとが干渉すると判定する。
モード決定部150は、第1条件、第2条件、および第3条件の全てが成立すると判定された場合、カメラ道路区画線CLが地図道路区画線MLよりも信頼性が高いと判定し、地図道路中心線に基づくモードBの運転モードを、カメラ道路中心線に基づく(すなわち、カメラ道路中心線を参照線とする)モードCの運転モードに変更する。より具体的には、モード決定部150は、第1条件、第2条件、および第3条件の全てが成立すると判定された期間が第1期間以上、継続した場合に、地図道路中心線に基づくモードBの運転モードを、カメラ道路中心線に基づくモードCの運転モードに変更する。一方、第1条件、第2条件、および第3条件のいずれかが成立しないと判定された場合、モード決定部150は、カメラ道路区画線CLが地図道路区画線MLよりも信頼性が高いと判定することはせず、地図道路中心線に基づくモードBの運転モードを継続する。
なお、第1条件、第2条件、および第3条件の全てが成立する場合あっても、自車両Mの進行方向に関して所定距離D以内に先行車両M1が存在する場合、モードBの運転モードを継続してもよい。図5は、実施形態に係る車両制御装置の動作が実行される場面の別の例を示す図である。図5は、自車両Mが、地図道路中心線に基づくモードBの運転モードにて走行中、第1条件、第2条件、および第3条件の全てが成立した場面を表している。
図5に示す通り、モード決定部150は、第1条件、第2条件、および第3条件の全てが成立すると判定された場合、自車両Mの進行方向に関して所定距離D以内に先行車両M1が存在するか否かを判定する。モード決定部150は、所定距離D以内に先行車両M1が存在すると判定された場合、先行車両M1の走行軌跡に基づく(すなわち、先行車両M1の走行軌跡を参照線とする)モードBの運転モードを継続する。また、例えば、モード決定部150は、先行車両M1の走行軌跡と、信頼性がより高いと判定されたカメラ道路中心線との間の平均線を算出し、算出された平均線を参照線とするモードBの運転モードを継続してもよい。
モード決定部150は、地図道路中心線に基づくモードBの運転モードを、カメラ道路中心線に基づくモードCの運転モードに変更すると、当該モードCの運転モードを少なくとも第2所定期間、継続させる。これは、第1条件、第2条件、および第3条件のうちのいずれかが成立しなくなったことに応じて即時、モードBの運転モードに復帰させると、運転モードにハンチングが発生し、自車両Mの乗員に不快感を与える可能性があるからである。
そのため、判定部156は、モード決定部150がカメラ道路中心線に基づくモードCの運転モードを第2所定期間継続させた後に、再度、第1条件、第2条件、および第3条件の全てが成立するか否かを判定する。モード決定部150は、第1条件、第2条件、および第3条件のうちのいずれかが成立しなくなったと判定された場合には、カメラ道路中心線に基づくモードCの運転モードを、地図道路中心線に基づくモードBの運転モードに復帰させる。
また、モード決定部150は、地図道路中心線に基づくモードBの運転モードを、カメラ道路中心線に基づくモードCの運転モードに変更してから、第2所定期間よりも長い第3所定期間が経過した場合、再度、第1条件、第2条件、および第3条件の全てが成立するか否かを判定する。モード決定部150は、第1条件、第2条件、および第3条件の全てが成立した場合、モードCの運転モードを、モードD又はモードEの運転モードに変更する。すなわち、第2地図情報62に誤りがあると推定される期間が長く継続する場合、運転モードを、よりタスクが重度な運転モードに変更することによって、より状況に適した運転制御を実行することができる。
なお、上記の説明において、判定を行うために用いられる第1所定期間、第2所定期間、第3所定期間は、それぞれ自車両Mの継続的な走行距離であっても良い。例えば、モード決定部150は、第1条件、第2条件、および第3条件の全てが成立する間に自車両Mが継続的に第1所定距離以上、走行した場合に、カメラ道路区画線CLが地図道路区画線MLよりも信頼性が高いと判定し、地図道路中心線に基づくモードBの運転モードを、カメラ道路中心線に基づくモードCの運転モードに変更しても良い。また、例えば、モード決定部150は、地図道路中心線に基づくモードBの運転モードを、カメラ道路中心線に基づくモードCの運転モードに変更すると、当該モードCの運転モードを少なくとも自車両Mが継続的に第2所定距離、走行するまで継続させても良い。また、例えば、モード決定部150は、地図道路中心線に基づくモードBの運転モードを、カメラ道路中心線に基づくモードCの運転モードに変更してから、第2所定距離よりも長い第3所定距離、自車両Mが走行した場合に、第1条件、第2条件、および第3条件の全てが成立するか否かを判定しても良い。
次に、図6から図8を参照して、実施形態に係る車両制御装置によって実行される処理の流れについて説明する。図6は、実施形態に係る車両制御装置によって実行される処理の流れの一例を示すフローチャートである。図6に示す処理は、地図道路中心線に基づくモードBの運転モードにて自車両Mが走行中、繰り返し実行されるものである。
まず、判定部156は、カメラ道路区画線CLと地図道路区画線MLとが一致するか否かを判定する(ステップS100)。カメラ道路区画線CLと地図道路区画線MLとが一致すると判定された場合、判定部156は、本フローチャートの処理を終了する。一方、カメラ道路区画線CLと地図道路区画線MLとが一致しないと判定された場合、判定部156は、次に、上述した第1条件、第2条件、および第3条件の全てが成立するか否かを判定する(ステップS102)。第1条件、第2条件、および第3条件のうちのいずれかが成立しないと判定された場合、判定部156は、本フローチャートの処理を終了する。
一方、第1条件、第2条件、および第3条件の全てが成立すると判定された場合、判定部156は、次に、第1条件、第2条件、および第3条件の全てが成立している状態が第1所定期間、継続したか否かを判定する(ステップS104)。第1条件、第2条件、および第3条件の全てが成立している状態が第1所定期間、継続していないと判定された場合、判定部156は、本フローチャートの処理を終了する。一方、第1条件、第2条件、および第3条件の全てが成立している状態が第1所定期間、継続したと判定された場合、モード決定部150は、地図道路中心線に基づくモードBの運転モードを、カメラ道路中心線に基づくモードCの運転モードに変更する。これにより、本フローチャートの処理が終了する。
なお、図6のフローチャートのステップS100において、判定部156は、カメラ道路区画線CLと地図道路区画線MLとが一致するか否かを判定している。しかし、本発明はそのような構成に限定されず、判定部156は、カメラ道路区画線CLと地図道路区画線MLとが一致するか否かと、自車両Mの現在位置がカメラ道路区画線CLの信頼性が低いと想定される所定領域内にあるか否かを判定し、カメラ道路区画線CLと地図道路区画線MLとが一致せず、かつ自車両Mの現在位置がカメラ道路区画線CLの信頼性が低いと想定される所定領域内にある場合に、ステップS102における第1条件から第3条件に関する判定を行ってもよい。第1条件から第3条件に関する判定は、カメラ道路区画線CLの信頼性を確認するための判定であるため、自車両Mの現在位置がカメラ道路区画線CLの信頼性が低いと想定される所定領域内にある場合に当該判定を実行することは有用である。
カメラ道路区画線CLの信頼性が低いと想定される所定領域は、例えば、分岐路、交差点、合流区間(およびそれらの周辺領域)などを含み、事前に第2地図情報62に記憶される。判定部156は、カメラ道路区画線CLの信頼性が低いと想定される所定領域の位置情報を含む第2地図情報62を参照し、自車両Mの現在位置がカメラ道路区画線CLの信頼性が低いと想定される所定領域内にあるか否かを判定することができる。判定部156は、カメラ道路区画線CLと地図道路区画線MLとが一致している場合であっても、自車両Mの現在位置がカメラ道路区画線CLの信頼性が低いと想定される所定領域内にあるか否かを判定し、自車両Mの現在位置が当該所定領域内にあると判定された場合には、ステップS102からステップS106の処理を実行してもよい。
図7は、実施形態に係る車両制御装置によって実行される処理の流れの別の例を示すフローチャートである。図6と同様、図7に示す処理は、地図道路中心線に基づくモードBの運転モードにて自車両Mが走行中、繰り返し実行されるものである。図7において、ステップS200からステップS204までの処理は、図6におけるステップS100からステップS104までの処理と同様であるため、説明を省略する。
ステップS204において、第1条件、第2条件、および第3条件の全てが成立している状態が第1所定期間、継続したと判定された場合、モード決定部150は、自車両Mの進行方向に関して所定距離D以内に先行車両が存在するか否かを判定する(ステップ206)。自車両Mの進行方向に関して所定距離以内に先行車両が存在すると判定された場合、モード決定部150は、先行車両の走行軌跡に基づくモードBの運転モードを継続させる(ステップS210)。一方、自車両Mの進行方向に関して所定距離以内に先行車両が存在しないと判定された場合、モード決定部150は、地図道路中心線に基づくモードBの運転モードを、カメラ道路中心線に基づくモードCの運転モードに変更する(ステップS210)。これにより、本フローチャートの処理が終了する。
図8は、実施形態に係る車両制御装置によって実行される処理の流れの別の例を示すフローチャートである。図8に示すフローチャートの処理は、図6に示すステップS106の処理、又は図7に示すステップS208の処理が実行された後に、実行されるものである。
まず、モード決定部150は、カメラ道路中心線に基づくモードCの運転モードを第2所定期間、継続する(ステップS300)。次に、判定部156は、第1条件、第2条件、および第3条件の全てが成立しているか否かを判定する(ステップS302)。第1条件、第2条件、および第3条件のうちのいずれかが成立しないと判定された場合、モード決定部150は、カメラ道路中心線に基づくモードCの運転モードを、地図道路中心線に基づくモードBの運転モードに復帰させる(ステップS308)。
一方、第1条件、第2条件、および第3条件の全てが成立したと判定された場合、判定部156は、運転モードをモードCに変更してから第3所定期間が経過したか否かを判定する(ステップS308)。運転モードをモードCに変更してから第3所定期間が経過していないと判定された場合、本フローチャートの処理はステップS302に戻される。一方、運転モードをモードCに変更してから第3所定期間が経過したと判定された場合、モード決定部150は、運転モードをモードE、すなわち、手動運転に変更する(ステップS306)。これにより、本フローチャートの処理が終了する。
なお、図8のフローチャートのステップS302において、判定部156は、第1条件、第2条件、および第3条件の全てが成立するか否かを判定しているが、本発明はそのような構成に限定されない。例えば、判定部156は、カメラ道路区画線CLと地図道路区画線MLとが一致するか否かを再度、判定し、カメラ道路区画線CLと地図道路区画線MLとが一致すると判定された場合に、運転モードをモードBに復帰させてもよい。
さらに、図8のフローチャートのステップS300において、モードCの運転モードが第2所定期間、継続された場合、ステップS302において、判定部156は、第1条件、第2条件、および第3条件の全てが成立しているか否かを判定している。しかし、本発明はそのような構成に限定されず、図8のフローチャートのステップS300において、モードCの運転モードが第2所定期間、継続された場合、判定部156が上記の判定を行うことなく、モード決定部150は、カメラ道路中心線に基づくモードCの運転モードを、地図道路中心線に基づくモードBの運転モードに復帰させてもよい。これにより、より円滑に自車両MをモードBの運転モードに復帰させることができる。
以上の通り説明した本実施形態によれば、自車両Mが地図情報に基づくモードBの運転モードで走行中に、カメラ道路区画線と地図道路区画線とが一致しないと判定された場合、第1条件と、第2条件と、第3条件の全てが成立するか否かをさらに判定し、第1条件と、第2条件と、第3条件の全てが成立する場合に、地図情報に基づくモードBの運転モードをカメラ情報に基づくモードCの運転モードに変更する。これにより、カメラ情報と地図情報の内容が乖離する場合であっても、正しい走路を推定することができる。
上記説明した実施形態は、以下のように表現することができる。
コンピュータによって読み込み可能な命令(computer-readable instructions)を格納する記憶媒体(storage medium)と、
前記記憶媒体に接続されたプロセッサと、を備え、
前記プロセッサは、前記コンピュータによって読み込み可能な命令を実行することにより(the processor executing the computer-readable instructions to:)
少なくともカメラを用いて車両の周辺状況を認識し、
前記周辺状況と地図情報に基づいて、前記車両の運転者の操作に依らずに前記車両の操舵および加減速を制御し、
前記車両の運転モードを、第1の運転モードと、第2の運転モードとを含む複数の運転モードのいずれかに決定し、前記第2の運転モードは前記運転者に課されるタスクが前記第1の運転モードに比して軽度な運転モードであり、少なくとも前記第2の運転モードを含む前記複数の運転モードの一部が制御されるものであり、前記決定した運転モードに係るタスクが運転者により実行されない場合に、よりタスクが重度な運転モードに前記車両の運転モードを変更し、
前記車両が前記第2の運転モードで走行中に、前記周辺状況に含まれるカメラ道路区画線と、前記地図情報に含まれる地図道路区画線とが一致しているか否かを判定し、前記カメラ道路区画線と前記地図道路区画線とが一致しないと判定された場合、
前記車両に搭載される空間検知センサによって検知された静止物標群の情報と、前記カメラによって撮像された画像に基づいて検知されたフリースペースの情報とが一致するか否かを判定し、
前記カメラ道路区画線と、前記フリースペースの情報とが一致するか否かを判定し、
前記静止物標群の情報と、前記地図道路区画線とが干渉するか否かを判定し、
前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された場合、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更する、
ように構成されている、車両制御装置。
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
10 カメラ
12 レーダ装置
14 LIDAR
16 物体認識装置
70 ドライバモニタカメラ
82 ステアリングホイール
84 ステアリング把持センサ
100 自動運転制御装置
130 認識部
140 行動計画生成部
150 モード決定部
152 運転者状態判定部
154 モード変更処理部
156 判定部

Claims (13)

  1. 少なくともカメラを用いて車両の周辺状況を認識する認識部と、
    前記周辺状況と地図情報に基づいて、前記車両の運転者の操作に依らずに前記車両の操舵および加減速を制御する運転制御部と、
    前記車両の運転モードを、第1の運転モードと、第2の運転モードとを含む複数の運転モードのいずれかに決定し、前記第2の運転モードは前記運転者に課されるタスクが前記第1の運転モードに比して軽度な運転モードであり、少なくとも前記第2の運転モードを含む前記複数の運転モードの一部は前記運転制御部により制御されるものであり、前記決定した運転モードに係るタスクが運転者により実行されない場合に、よりタスクが重度な運転モードに前記車両の運転モードを変更するモード決定部と、
    前記車両が前記第2の運転モードで走行中に、前記周辺状況に含まれるカメラ道路区画線と、前記地図情報に含まれる地図道路区画線とが一致しているか否かを判定し、前記カメラ道路区画線と前記地図道路区画線とが一致しないと判定された場合、
    前記車両に搭載される空間検知センサによって検知された静止物標群の情報と、前記カメラによって撮像された画像を、画像が入力されると、前記画像に含まれ、前記車両が走行可能な領域であるフリースペースを出力するように学習された学習済みモデルに入力することによって検知されたフリースペースの情報とが一致するか否かを判定し、
    前記カメラ道路区画線と前記フリースペースの延伸方向を比較することによって、前記カメラ道路区画線と、前記フリースペースの情報とが一致するか否かを判定し、
    前記静止物標群の情報と、前記地図道路区画線とが干渉するか否かを判定する判定部と、を備え、
    前記モード決定部は、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された場合、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更する、
    車両制御装置。
  2. 前記静止物標群は、連続的な道路構造物であり、
    前記判定部は、前記道路構造物の延伸方向と、前記フリースペースの延伸方向との間の角度を算出し、前記角度が第1閾値以内であるか否かを判定することによって、前記静止物標群の情報と、前記フリースペースの情報とが一致するか否かを判定する、
    請求項1に記載の車両制御装置。
  3. 前記判定部は、前記カメラ道路区画線と、前記フリースペースの延伸方向との間の角度を算出し、前記角度が第2閾値以内であるか否かを判定することによって、前記カメラ道路区画線と、前記フリースペースの情報とが一致するか否かを判定する、
    請求項1に記載の車両制御装置。
  4. 前記空間検知センサはレーダ装置であり、
    前記判定部は、前記レーダ装置によって検知された前記静止物標群の情報と、前記地図道路区画線とが干渉するか否かを判定する、
    請求項1に記載の車両制御装置。
  5. 前記モード決定部は、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された期間が第1期間以上である場合に、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更する、
    請求項1に記載の車両制御装置。
  6. 前記モード決定部は、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致しないか、又は前記カメラ道路区画線と前記フリースペースの情報とが一致しないか、又は前記静止物標群の情報と前記地図道路区画線とが干渉しないと判定された場合、前記地図道路区画線に基づく前記第2の運転モードを継続する、
    請求項1に記載の車両制御装置。
  7. 前記モード決定部は、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更した場合、前記カメラ道路区画線に基づく前記第1の運転モードを少なくとも第2所定期間継続させる、
    請求項1に記載の車両制御装置。
  8. 前記モード決定部は、前記カメラ道路区画線に基づく前記第1の運転モードを第2所定期間継続させた後に、前記カメラ道路区画線に基づく前記第1の運転モードを前記第2の運転モードに復帰させる、
    請求項1に記載の車両制御装置。
  9. 前記モード決定部は、前記カメラ道路区画線に基づく前記第1の運転モードを第2所定期間継続させた後に、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致しないか、又は前記カメラ道路区画線と前記フリースペースの情報とが一致しないか、又は前記静止物標群の情報と前記地図道路区画線とが干渉しないと判定された場合、前記カメラ道路区画線に基づく前記第1の運転モードを前記第2の運転モードに復帰させる、
    請求項1に記載の車両制御装置。
  10. 前記モード決定部は、前記カメラ道路区画線に基づく前記第1の運転モードを第3所定期間継続させた後に、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と前記地図道路区画線とが干渉しないと判定された場合、前記カメラ道路区画線に基づく前記第1の運転モードを、前記車両の乗員による前記車両の手動運転に遷移させる、
    請求項1に記載の車両制御装置。
  11. 前記モード決定部は、前記判定部によって、前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された際に、前記車両の前方に先行車両が存在すると判定された場合、前記第2の運転モードを前記カメラ道路区画線に基づく前記第1の運転モードに変更することなく、前記第2の運転モードを継続させる、
    請求項1に記載の車両制御装置。
  12. コンピュータが、
    少なくともカメラを用いて車両の周辺状況を認識し、
    前記周辺状況と地図情報に基づいて、前記車両の運転者の操作に依らずに前記車両の操舵および加減速を制御し、
    前記車両の運転モードを、第1の運転モードと、第2の運転モードとを含む複数の運転モードのいずれかに決定し、前記第2の運転モードは前記運転者に課されるタスクが前記第1の運転モードに比して軽度な運転モードであり、少なくとも前記第2の運転モードを含む前記複数の運転モードの一部が制御されるものであり、前記決定した運転モードに係るタスクが運転者により実行されない場合に、よりタスクが重度な運転モードに前記車両の運転モードを変更し、
    前記車両が前記第2の運転モードで走行中に、前記周辺状況に含まれるカメラ道路区画線と、前記地図情報に含まれる地図道路区画線とが一致しているか否かを判定し、前記カメラ道路区画線と前記地図道路区画線とが一致しないと判定された場合、
    前記車両に搭載される空間検知センサによって検知された静止物標群の情報と、前記カメラによって撮像された画像を、画像が入力されると、前記画像に含まれ、前記車両が走行可能な領域であるフリースペースを出力するように学習された学習済みモデルに入力することによって検知されたフリースペースの情報とが一致するか否かを判定し、
    前記カメラ道路区画線と前記フリースペースの延伸方向を比較することによって、前記カメラ道路区画線と、前記フリースペースの情報とが一致するか否かを判定し、
    前記静止物標群の情報と、前記地図道路区画線とが干渉するか否かを判定し、
    前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された場合、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更する、
    車両制御方法。
  13. コンピュータに、
    少なくともカメラを用いて車両の周辺状況を認識させ、
    前記周辺状況と地図情報に基づいて、前記車両の運転者の操作に依らずに前記車両の操舵および加減速を制御させ、
    前記車両の運転モードを、第1の運転モードと、第2の運転モードとを含む複数の運転モードのいずれかに決定させ、前記第2の運転モードは前記運転者に課されるタスクが前記第1の運転モードに比して軽度な運転モードであり、少なくとも前記第2の運転モードを含む前記複数の運転モードの一部が制御されるものであり、前記決定した運転モードに係るタスクが運転者により実行されない場合に、よりタスクが重度な運転モードに前記車両の運転モードを変更させ、
    前記車両が前記第2の運転モードで走行中に、前記周辺状況に含まれるカメラ道路区画線と、前記地図情報に含まれる地図道路区画線とが一致しているか否かを判定させ、前記カメラ道路区画線と前記地図道路区画線とが一致しないと判定された場合、
    前記車両に搭載される空間検知センサによって検知された静止物標群の情報と、前記カメラによって撮像された画像を、画像が入力されると、前記画像に含まれ、前記車両が走行可能な領域であるフリースペースを出力するように学習された学習済みモデルに入力することによって検知されたフリースペースの情報とが一致するか否かを判定させ、
    前記カメラ道路区画線と前記フリースペースの延伸方向を比較することによって、前記カメラ道路区画線と、前記フリースペースの情報とが一致するか否かを判定させ、
    前記静止物標群の情報と、前記地図道路区画線とが干渉するか否かを判定させ、
    前記静止物標群の情報と前記フリースペースの情報とが一致し、かつ前記カメラ道路区画線と前記フリースペースの情報とが一致し、かつ前記静止物標群の情報と、前記地図道路区画線とが干渉すると判定された場合、前記第2の運転モードを、前記カメラ道路区画線に基づく前記第1の運転モードに変更させる、
    プログラム。
JP2022133295A 2022-08-24 2022-08-24 車両制御装置、車両制御方法、およびプログラム Active JP7470157B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022133295A JP7470157B2 (ja) 2022-08-24 2022-08-24 車両制御装置、車両制御方法、およびプログラム
CN202311062123.3A CN117622150A (zh) 2022-08-24 2023-08-22 车辆控制装置、车辆控制方法及存储介质
US18/236,959 US20240067229A1 (en) 2022-08-24 2023-08-23 Vehicle control device, vehicle control method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022133295A JP7470157B2 (ja) 2022-08-24 2022-08-24 車両制御装置、車両制御方法、およびプログラム

Publications (2)

Publication Number Publication Date
JP2024030413A JP2024030413A (ja) 2024-03-07
JP7470157B2 true JP7470157B2 (ja) 2024-04-17

Family

ID=90000451

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022133295A Active JP7470157B2 (ja) 2022-08-24 2022-08-24 車両制御装置、車両制御方法、およびプログラム

Country Status (3)

Country Link
US (1) US20240067229A1 (ja)
JP (1) JP7470157B2 (ja)
CN (1) CN117622150A (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102486114B1 (ko) * 2018-09-04 2023-01-09 현대자동차주식회사 통신 장치, 그를 가지는 차량 및 그 제어 방법

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016162299A (ja) 2015-03-03 2016-09-05 富士重工業株式会社 車両の走行制御装置
WO2017056247A1 (ja) 2015-09-30 2017-04-06 日産自動車株式会社 走行制御方法および走行制御装置
JP2017146724A (ja) 2016-02-16 2017-08-24 株式会社Subaru 地図情報出力装置
JP2018021832A (ja) 2016-08-04 2018-02-08 三菱電機株式会社 車両走行制御装置および車両走行制御方法
JP2019038289A (ja) 2017-08-22 2019-03-14 株式会社Subaru 車両の運転支援装置
JP2019168814A (ja) 2018-03-22 2019-10-03 株式会社Subaru 運転支援システム
JP2019172112A (ja) 2018-03-29 2019-10-10 株式会社Subaru 車両の運転支援システム
WO2022144957A1 (ja) 2020-12-28 2022-07-07 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
JP2022114995A (ja) 2021-01-27 2022-08-08 本田技研工業株式会社 車両制御装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016162299A (ja) 2015-03-03 2016-09-05 富士重工業株式会社 車両の走行制御装置
WO2017056247A1 (ja) 2015-09-30 2017-04-06 日産自動車株式会社 走行制御方法および走行制御装置
JP2017146724A (ja) 2016-02-16 2017-08-24 株式会社Subaru 地図情報出力装置
JP2018021832A (ja) 2016-08-04 2018-02-08 三菱電機株式会社 車両走行制御装置および車両走行制御方法
JP2019038289A (ja) 2017-08-22 2019-03-14 株式会社Subaru 車両の運転支援装置
JP2019168814A (ja) 2018-03-22 2019-10-03 株式会社Subaru 運転支援システム
JP2019172112A (ja) 2018-03-29 2019-10-10 株式会社Subaru 車両の運転支援システム
WO2022144957A1 (ja) 2020-12-28 2022-07-07 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
JP2022114995A (ja) 2021-01-27 2022-08-08 本田技研工業株式会社 車両制御装置

Also Published As

Publication number Publication date
JP2024030413A (ja) 2024-03-07
US20240067229A1 (en) 2024-02-29
CN117622150A (zh) 2024-03-01

Similar Documents

Publication Publication Date Title
JP7464688B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7194224B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7046289B1 (ja) 車両制御装置、車両システム、車両制御方法、およびプログラム
US20240067229A1 (en) Vehicle control device, vehicle control method, and storage medium
JP7444962B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP2022096236A (ja) 車両制御装置、車両制御方法、及びプログラム
US20230303099A1 (en) Vehicle control device, vehicle control method, and storage medium
JP7458459B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7425132B1 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7308880B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7561800B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7425133B1 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7449971B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7075550B1 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7186210B2 (ja) 車両制御装置、車両制御方法、およびプログラム
WO2022144974A1 (ja) 車両制御装置、車両制御方法、及びプログラム
JP7048832B1 (ja) 車両制御装置、車両制御方法、およびプログラム
WO2022144976A1 (ja) 車両制御装置、車両制御方法、およびプログラム
US20240300524A1 (en) Vehicle control device, vehicle control method, and storage medium
JP2023150513A (ja) 車両制御装置、車両制御方法、およびプログラム
JP2023150506A (ja) 車両制御装置、車両制御方法、およびプログラム
JP2023148405A (ja) 車両制御装置、車両制御方法、およびプログラム
JP2024136992A (ja) 制御装置
CN115140080A (zh) 车辆控制装置及方法、路径生成装置及方法、存储介质
CN114684189A (zh) 车辆控制装置、车辆控制方法及存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230328

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240319

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240405

R150 Certificate of patent or registration of utility model

Ref document number: 7470157

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150