JP2024046439A - 経路作成装置、経路作成方法、および経路作成用コンピュータプログラム - Google Patents

経路作成装置、経路作成方法、および経路作成用コンピュータプログラム Download PDF

Info

Publication number
JP2024046439A
JP2024046439A JP2022151836A JP2022151836A JP2024046439A JP 2024046439 A JP2024046439 A JP 2024046439A JP 2022151836 A JP2022151836 A JP 2022151836A JP 2022151836 A JP2022151836 A JP 2022151836A JP 2024046439 A JP2024046439 A JP 2024046439A
Authority
JP
Japan
Prior art keywords
pedestrian
vehicle
route
road
detected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022151836A
Other languages
English (en)
Inventor
弘 中村
克弘 坂井
泰亮 菅岩
直樹 長坂
伶 川西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2022151836A priority Critical patent/JP2024046439A/ja
Priority to US18/369,863 priority patent/US20240101155A1/en
Publication of JP2024046439A publication Critical patent/JP2024046439A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • B60W60/0017Planning or execution of driving tasks specially adapted for safety of other traffic participants
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/582Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/20Static objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • B60W2554/4029Pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2555/00Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
    • B60W2555/60Traffic rules, e.g. speed limits or right of way

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • General Health & Medical Sciences (AREA)
  • Geometry (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

【課題】歩行者の安全を確保しつつ、効率的に走行可能な走行経路を作成する。【解決手段】経路作成装置は、車両の周辺の状況を表す周辺データから歩行者を検出し、車両の周辺における、歩行者の停止を促す歩行停止物標の位置を特定し、歩行者が検出され、かつ、特定された歩行停止物標の位置が歩行者の近傍でない場合、歩行者が車両の走行する道路に進入するとして車両が走行する走行経路を作成し、歩行者が検出され、かつ、特定された歩行停止物標の位置が歩行者の近傍である場合、歩行者が道路に進入しないとして走行経路を作成する。【選択図】図6

Description

本開示は、車両の走行経路を作成する経路作成装置、経路作成方法、および経路作成用コンピュータプログラムに関する。
自動運転により車両の走行を制御する走行制御装置は、歩行者をはじめとする交通参加者に衝突することのない走行経路に従って車両の走行を制御する必要がある。経路作成装置は、車両の周辺で検出された歩行者が車両の走行する道路に進入するか否かに応じて、自動運転に用いられる走行経路を適切に作成することが求められる。
例えば、特許文献1に記載の飛出し警報装置は、自車両が走行する道路の付近に存在する歩行者について、歩行者の顔の向きに基づき、例えば横断歩道を横断している他の歩行者を向いている場合に、道路を横断する横断可能性があると判定する。
特開2012-238185号公報
道路を横切るように顔を向けている歩行者は、必ずしも道路を横断するわけではない。歩行者の顔の向きに基づいて横断可能性を判定し、横断可能性が閾値以下の場合に当該歩行者との衝突を回避するように自動運転用の走行経路を生成すると、走行経路において必要以上の回避が発生し、目的地までの所要時間が長くなる、道路を適切に走行できなくなるといった問題が生じる。
本開示は、歩行者の安全を確保しつつ、効率的に走行可能な走行経路を作成することができる経路作成装置を提供することを目的とする。
本開示の要旨は以下のとおりである。
(1)車両の周辺の状況を表す周辺データから歩行者を検出する検出部と、
前記車両の周辺における、前記歩行者の停止を促す歩行停止物標の位置を特定する特定部と、
前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍でない場合、前記歩行者が前記車両の走行する道路に進入するとして前記車両が走行する走行経路を作成し、前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍である場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成する作成部と、
を備える経路作成装置。
(2)前記検出部は、前記周辺データから前記歩行者の顔向きをさらに検出し、
前記作成部は、前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍でない場合であっても、前記歩行者の顔向きが道路向きでない場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成する上記(1)に記載の経路作成装置。
(3)前記検出部は、前記周辺データから前記歩行者の前記道路への進入を抑制する進入抑制状況をさらに検出し、
前記作成部は、前記歩行者が検出され、かつ、前記進入抑制状況が検出された場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成する上記(1)または(2)に記載の経路作成装置。
(4)車両の走行経路を作成する経路作成装置が、
前記車両の周辺の状況を表す周辺データから、歩行者を検出し、
前記車両の周辺において、前記歩行者の停止を促す歩行停止物標を特定し、
前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍でない場合、前記歩行者が前記車両の走行する道路に進入するとして前記車両が走行する走行経路を作成し、
前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍である場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成する、
ことを含む経路作成方法。
(5)車両の周辺の状況を表す周辺データから、歩行者を検出することと、
前記車両の周辺において、前記歩行者の停止を促す歩行停止物標を特定することと、
前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍でない場合、前記歩行者が前記車両の走行する道路に進入するとして前記車両が走行する走行経路を作成し、前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍である場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成することと、
を前記車両に搭載されたコンピュータに実行させる経路作成用コンピュータプログラム。
本開示にかかる経路作成装置によれば、歩行者の安全を確保しつつ、効率的に走行可能な走行経路を作成することができる。
経路作成装置が実装される車両の概略構成図である。 経路作成装置のハードウェア模式図である。 経路作成装置が有するプロセッサの機能ブロック図である。 経路作成の第1の例を説明する模式図である。 経路作成の第2の例を説明する模式図である。 経路作成処理のフローチャートである。
以下、図面を参照して、歩行者の安全を確保しつつ、効率的に走行可能な走行経路を作成することができる経路作成装置について詳細に説明する。経路作成装置は、車両の周辺の状況を表す周辺データから、歩行者を検出する。また、経路作成装置は、車両の周辺において、歩行停止物標を特定する。歩行停止物標は、歩行者の停止を促す物標であり、例えばバス停、タクシー乗り場、歩行者用信号が赤となっている横断歩道、行列のできる人気店などが含まれる。歩行者が検出され、かつ、特定された歩行停止物標の位置が歩行者の近傍でない場合、経路作成装置は、歩行者が車両の走行する道路に進入するとして車両が走行する走行経路を作成する。一方、歩行者が検出され、かつ、特定された歩行停止物標の位置が歩行者の近傍である場合、経路作成装置は、歩行者が道路に進入しないとして車両が走行する走行経路を作成する。
なお、本開示において、「歩行者」は歩行している者に限られず、立ち止まっていたり走っていたりする者も含む。また、「歩行者が道路に進入するとして」とは、歩行者が道路に進入する確率が所定の確率閾値(例えば5%)を超えると判定することを含む。また、「歩行者が道路に進入しないとして」とは、歩行者が道路に進入する確率が確率閾値を超えないと判定することを含む。
図1は、経路作成装置が実装される車両の概略構成図である。
車両1は、周辺カメラ2と、GNSS受信機3と、ストレージ装置4と、経路作成装置5とを有する。周辺カメラ2、GNSS受信機3、およびストレージ装置4と、経路作成装置5とは、コントローラエリアネットワークといった規格に準拠した車内ネットワークを介して通信可能に接続される。
周辺カメラ2は、車両1の周辺の状況が表された周辺データを生成するための周辺センサの一例である。周辺カメラ2は、CCDあるいはC-MOSなど、可視光に感度を有する光電変換素子のアレイで構成された2次元検出器と、その2次元検出器上の撮影対象となる領域に像を結像する結像光学系とを有する。周辺カメラ2は、例えば車室内の前方上部に前方を向けて取り付けられる。周辺カメラ2は、所定の撮影周期(例えば1/30秒~1/10秒)ごとにフロントガラスを介して車両1の周辺の状況を撮影し、車両1の周辺状況を表す周辺データとして周辺画像を出力する。なお、車両1は、周辺センサとして、周辺カメラ2以外のセンサ、例えば、車両1の周辺状況に基づいて、各画素が当該画素に表わされた物体までの距離に応じた値を持つ距離画像を周辺データとして生成するLiDAR(Light Detection And Ranging)センサを有していてもよい。
GNSS受信機3は、所定の周期ごとにGNSS(Global Navigation Satellite System)衛星からのGNSS信号を受信し、受信したGNSS信号に基づいて車両1の自己位置を測位する。GNSS受信機3は、所定の周期ごとに、GNSS信号に基づく車両1の自己位置の測位結果を表す測位信号を、車内ネットワークを介して経路作成装置5へ出力する。
ストレージ装置4は、記憶部の一例であり、例えば、ハードディスク装置、または不揮発性の半導体メモリを有する。ストレージ装置4は、位置に対応づけて車線区画線などの地物に関する情報を含む地図データを記憶する。地図データとして記憶される地物には、バス停、タクシー乗り場、歩行者用信号が赤となっている横断歩道、行列のできる人気店といった歩行停止物標が含まれている。
経路作成装置5は、周辺カメラ2により生成された周辺データから歩行者を検出する。また、経路作成装置5は、車両1の周辺における歩行停止物標の位置を特定する。歩行者が検出され、かつ、特定された歩行停止物標の位置が歩行者の近傍でない場合、経路作成装置5は、歩行者が車両の走行する道路に進入するとして車両が走行する走行経路を作成する。一方、歩行者が検出され、かつ、特定された歩行停止物標の位置が歩行者の近傍である場合、経路作成装置5は、歩行者が道路に進入しないとして車両が走行する走行経路を作成する。
図2は、経路作成装置5のハードウェア模式図である。経路作成装置5は、通信インタフェース51と、メモリ52と、プロセッサ53とを備える。
通信インタフェース51は、通信部の一例であり、経路作成装置5を車内ネットワークへ接続するための通信インタフェース回路を有する。通信インタフェース51は、受信したデータをプロセッサ53に供給する。また、通信インタフェース51は、プロセッサ53から供給されたデータを外部に出力する。
メモリ52は、揮発性の半導体メモリおよび不揮発性の半導体メモリを有する。メモリ52は、プロセッサ53による処理に用いられる各種データ、例えば周辺データから歩行者等を検出するための識別器のパラメータを記憶する。また、メモリ52は、各種アプリケーションプログラム、例えば経路作成処理を実行する経路作成プログラム等を保存する。
プロセッサ53は、制御部の一例であり、1以上のプロセッサおよびその周辺回路を有する。プロセッサ53は、論理演算ユニット、数値演算ユニット、またはグラフィック処理ユニットといった他の演算回路をさらに有していてもよい。
図3は、経路作成装置5が有するプロセッサ53の機能ブロック図である。
経路作成装置5のプロセッサ53は、機能ブロックとして、検出部531と、特定部532と、作成部533とを有する。プロセッサ53が有するこれらの各部は、プロセッサ53上で実行されるプログラムによって実装される機能モジュールである。プロセッサ53の各部の機能を実現するコンピュータプログラムは、半導体メモリ、磁気記録媒体または光記録媒体といった、コンピュータ読取可能な可搬性の記録媒体に記録された形で提供されてもよい。あるいは、プロセッサ53が有するこれらの各部は、独立した集積回路、マイクロプロセッサ、またはファームウェアとして経路作成装置5に実装されてもよい。
検出部531は、車両1の周辺の状況を表す周辺データを、通信インタフェース51を介して周辺カメラ2から取得する。そして、検出部531は、周辺データから歩行者を検出する。
検出部531は、歩行者を検出するように予め学習された識別器に取得した周辺データを入力することにより、周辺データから歩行者を検出する。
識別器は、例えば、YOLO(You Only Look Once)、SSD(Single Shot MultiBox Detector)といった、入力側から出力側に向けて直列に接続された複数の畳み込み層を有する畳み込みニューラルネットワーク(CNN)とすることができる。予め歩行者を含む多数のデータを教師データとして用いて、誤差逆伝搬法といった所定の学習手法にしたがってCNNを学習することにより、CNNはデータから歩行者を検出する識別器として動作する。また、識別器には、サポートベクトルマシン(SVM)、AdaBoostといった機械学習アルゴリズムが用いられてもよい。識別器をSVMとする場合、周辺データ上の様々な領域について、歩行者を含むか否かを識別するためのサポートベクトルを定めるようにSVMが学習されることにより、SVMは歩行者を検出する識別器として動作する。
検出部531は、検出された歩行者の世界座標系における位置を特定する。例えば、検出部531は、周辺カメラ2についての車両1への取り付け位置などの情報を用いて受信した周辺データの視点変換処理を実行し、鳥瞰画像を作成する。周辺カメラ2についての車両1への取り付け位置などの情報は、予めメモリ52に記憶されていればよい。また、検出部531は、GNSS受信機3から測位信号を受信し、受信した測位信号に表される自己位置の近傍における車線区画線などの地物の位置を表す情報を、通信インタフェース51を介して記憶するストレージ装置4から地図情報として取得する。検出部531は、作成された鳥瞰画像における地物の位置と取得した地図情報における地物の位置とをマッチングすることで、車両1の位置および方位を推定する。検出部531は推定された車両1の位置および方位に基づいて、作成された鳥瞰画像に表される歩行者の位置を特定する。
検出部531は、周辺データから検出された歩行者について、さらに顔向きを検出してもよい。例えば、検出部531は、歩行者の顔特徴点を検出するように予め学習された識別器に取得した周辺データを入力することにより、周辺データから歩行者の顔特徴点を検出する。識別器は、予め歩行者の顔特徴点を含む多数のデータを教師データとして用いて学習されたCNNであってよい。検出部531は、検出された歩行者の顔特徴点の位置を標準的な顔の3次元モデルと照合し、顔特徴点の位置が周辺データから検出された位置と最も適合する際の3次元モデルにおける顔向きを、周辺データから検出された歩行者の顔向きとして検出する。
特定部532は、車両1の周辺における歩行停止物標の位置を特定する。
特定部532は、GNSS受信機3から測位信号を受信し、受信した測位信号に表される自己位置の近傍における歩行停止物標の位置を表す情報を、通信インタフェース51を介してストレージ装置4から取得する。特定部532は、取得した情報に基づいて歩行停止物標の位置を特定する。
特定部532は、周辺データから歩行停止物標を検出し、検出された歩行停止物標の位置を特定してもよい。例えば、特定部532は、歩行停止物標を検出するように予め学習された識別器に取得した周辺データを入力することにより、周辺データから歩行停止物標を検出する。識別器は、予め様々な歩行停止物標を含む多数のデータを教師データとして用いて学習されたCNNであってよい。特定部532は、検出部531による歩行者の位置の特定と同様の手法により、検出された歩行停止物標の位置を特定することができる。
作成部533は、作成部533は、車両1が走行する道路RD1の前方において所定間隔に、周辺の地物および歩行者までの距離がなるべく大きくなるように走行経路を作成する。周辺データから歩行者が検出され、かつ、特定された歩行停止物標の位置が歩行者の近傍でない場合、歩行者が車両1の走行する道路に進入するとして車両1が走行する走行経路を作成する。また、作成部533は、周辺データから歩行者が検出され、かつ、特定された歩行停止物標の位置が歩行者の近傍である場合、歩行者が車両1の走行する道路に進入しないとして走行経路を作成する。
図4は、経路作成の第1の例を説明する図である。経路作成の第1の例において、車両1は一対の車線区画線LL1、LR1により区画された道路RD1を走行している。道路RD1に隣接して設けられた歩道SW1には、歩行者PD1が存在している。
車両1に搭載された経路作成装置5の検出部531は、周辺カメラ2により生成された周辺データから、歩行者PD1を検出する。また、経路作成装置5の特定部532は、車両1の周辺において、バス停BS1を特定する。バス停の周辺では、バスへの乗車を希望する歩行者が立ち止まることが想定される。したがって、バス停BS1は歩行停止物標の一つに該当する。
経路作成装置5の作成部533は、例えば特定された歩行停止物標の位置と検出された歩行者との間隔が所定の間隔閾値(例えば10m)よりも短い場合、歩行停止物標の位置が歩行者の近傍であると判定する。図4に示す経路作成の第1の例において、バス停BS1と歩行者PD1との間隔D1は、メモリ52に予め保存された間隔閾値DTHよりも短い。したがって、経路作成装置5の作成部533はバス停BS1の位置は歩行者PD1の近傍であると判定する。
作成部533は、歩行者PD1が道路RD1に進入しないとして車両1が走行する走行経路を作成する。すなわち、作成部533は、走行経路の作成にあたり、歩行者PD1が一対の車線区画線LL1、LR1のうち歩行者PD1が検出された歩道SW1側の車線区画線LL1よりも車両1に接近しないものと仮定する。
作成部533は、例えば一対の車線区画線LL1、LR1の中点に、地点P11、P12、P13を第1の優先度で設定し、一対の車線区画線LL1、LR1までのそれぞれの距離がなるべく大きくなるようにする。そして、作成部533は、地点P11、P12、P13を通るように走行経路TJ1を作成する。
図5は、経路作成の第2の例を説明する図である。経路作成の第2の例において、車両1は一対の車線区画線LL2、LR2により区画された道路RD2を走行している。道路RD2に隣接して設けられた歩道SW2には、歩行者PD2が存在している。
車両1に搭載された経路作成装置5の検出部531は、周辺カメラ2により生成された周辺データから、歩行者PD2を検出する。また、経路作成装置5の特定部532は、車両1の周辺において、歩行停止物標の一つであるバス停BS2を特定する。
図5に示す経路作成の第2の例において、バス停BS2と歩行者PD2との間隔D2は、間隔閾値DTHよりも長い。したがって、経路作成装置5の作成部533はバス停BS2の位置は歩行者PD2の近傍でないと判定する。
作成部533は、歩行者PD2が道路RD2に進入するとして車両1が走行する走行経路を作成する。すなわち、作成部533は、走行経路の作成にあたり、歩行者PD2が一対の車線区画線LL2、LR2のうち歩行者PD2が検出された歩道SW2側の車線区画線LL2を超えて車両1に接近するものと仮定する。
作成部533は、車両1の位置から歩行者PD2の位置までの間隔を車両1の速度で除することにより、車両1が歩行者PD2に最も接近するまでの所要時間を推定する。作成部533は、メモリ52に保存された歩行者の標準歩行速度に推定された所要時間を乗ずることにより、所要時間経過後の道路RD2における歩行者PD2の車線区画線LL2からの距離を求める。作成部533は、歩行者PD2の位置PD2′を推定する。位置PD2′から車線区画線LL2の反対側の車線区画線LR2までの距離が所定の道幅閾値よりも短い場合、作成部533は、位置PD2′よりも手前で停止するように走行経路を作成する。位置PD2′から車線区画線LR2までの距離が所定の道幅閾値よりも長い場合、作成部533は、位置PD2′と車線区画線LR2との中点に対応する地点P24を、第1の優先度よりも高い第2の優先度で設定する。また、作成部533は、一対の車線区画線LL2、LR2までのそれぞれの距離がなるべく大きくなるように、一対の車線区画線LL2、LR2の中点に、地点P21、P22、P23を設定する。そして、作成部533は、地点P21、P22、P23、P24を通るように走行経路TJ2を作成する。
このとき、作成部533は、各地点における曲率半径が所定の曲率閾値よりも大きくなるように、第1の優先度を有する地点P21、P22、P23の位置を変更してもよい。図5に示す経路作成の第2の例では、作成部533は地点P22の位置をP22′に変更し、地点P21、P24、P22′、P23を順に通る走行経路TJ2を作成する。
作成部533は、歩行者が検出され、かつ、特定された前記歩行停止物標の位置が歩行者の近傍でない場合であっても、歩行者の顔向きが道路向きでない場合、歩行者が道路に進入しないとして走行経路を作成してもよい。
上述のとおり、検出部531は、周辺データから検出された歩行者について、さらに顔向きを検出してもよい。例えば、図5に示す経路作成の第2の例において、検出された歩行者PD2の顔向きが道路RD2向きでない(例えば車両1向きである)ことが検出された場合、作成部533は、歩行者PD2が道路RD2に進入しないとして走行経路を作成する。このように作成部533が動作することにより、経路作成装置5は、歩行者の安全を確保しつつ、より効率的に走行可能な走行経路を作成することができる。
図6は、経路作成処理のフローチャートである。経路作成装置5のプロセッサ53は、車両1が自動運転により走行している間、以下に記載する経路作成処理を所定の周期で(例えば1/10秒ごとに)繰り返し実行する。
まず、経路作成装置5のプロセッサ53の検出部531は、周辺カメラ2により生成された周辺データから歩行者を検出する(ステップS1)。
プロセッサ53の特定部532は、周辺データから歩行者が検出されたか否かを判定する(ステップS2)。歩行者が検出されなかった場合(ステップS2:N)、プロセッサ53の処理は後述するステップS7に進む。
歩行者が検出された場合(ステップS2:Y)、特定部532は、車両1の周辺における歩行停止物標の位置を特定する(ステップS3)。
プロセッサ53の作成部533は、特定された歩行停止物標の位置が歩行者の近傍であるか否かを判定する(ステップS4)。歩行停止物標の位置が歩行者の近傍でない場合(ステップS4:N)、作成部533は、歩行者が道路に進入するものとする(ステップS5)。歩行停止物標の位置が歩行者の近傍である場合(ステップS4:Y)、作成部533は、歩行者が道路に進入しないものとする(ステップS6)。
作成部533は、検出された歩行者について想定された動作、または、歩行者が検出されない周辺状況に基づいて、車両1の走行経路を作成し(ステップS7)、経路作成処理を終了する。経路作成処理により作成された走行経路は、車両1の加減速および操舵の少なくとも一部に対する自動制御に用いられる。
このように経路作成処理を実行することにより、経路作成装置5は、歩行者の安全を確保しつつ、効率的に走行可能な走行経路を作成することができる。
変形例によれば、検出部531は、周辺データから進入抑制状況をさらに検出してもよい。進入抑制状況は、歩行者の道路への進入が抑制される状況であり、例えばガードレールがある、歩行者が手を挙げている(タクシー乗車が想定される)、複数の歩行者が静止して列をなしているといった状況が含まれる。
検出部531は、進入抑制状況に含まれるそれぞれの状況を検出するように予め学習された識別器に取得した周辺データを入力することにより、周辺データから進入抑制状況を検出する。識別器は、予め進入抑制状況に含まれるそれぞれの状況を表す多数のデータを教師データとして用いて学習されたCNNであってよい。
歩行者が検出され、かつ、進入抑制状況が検出された場合、作成部533は、歩行者が道路に進入しないとして走行経路を作成する。
本変形例にかかる経路作成装置5は、歩行者の安全を確保しつつ、より効率的に走行可能な走行経路を作成することができる。
当業者は、本開示の精神および範囲から外れることなく、種々の変更、置換および修正をこれに加えることが可能であることを理解されたい。
1 車両
5 経路作成装置
531 検出部
532 特定部
533 作成部

Claims (5)

  1. 車両の周辺の状況を表す周辺データから歩行者を検出する検出部と、
    前記車両の周辺における、前記歩行者の停止を促す歩行停止物標の位置を特定する特定部と、
    前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍でない場合、前記歩行者が前記車両の走行する道路に進入するとして前記車両が走行する走行経路を作成し、前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍である場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成する作成部と、
    を備える経路作成装置。
  2. 前記検出部は、前記周辺データから前記歩行者の顔向きをさらに検出し、
    前記作成部は、前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍でない場合であっても、前記歩行者の顔向きが道路向きでない場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成する請求項1に記載の経路作成装置。
  3. 前記検出部は、前記周辺データから前記歩行者の前記道路への進入を抑制する進入抑制状況をさらに検出し、
    前記作成部は、前記歩行者が検出され、かつ、前記進入抑制状況が検出された場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成する請求項1または2に記載の経路作成装置。
  4. 車両の走行経路を作成する経路作成装置が、
    前記車両の周辺の状況を表す周辺データから、歩行者を検出し、
    前記車両の周辺において、前記歩行者の停止を促す歩行停止物標を特定し、
    前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍でない場合、前記歩行者が前記車両の走行する道路に進入するとして前記車両が走行する走行経路を作成し、
    前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍である場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成する、
    ことを含む経路作成方法。
  5. 車両の周辺の状況を表す周辺データから、歩行者を検出することと、
    前記車両の周辺において、前記歩行者の停止を促す歩行停止物標を特定することと、
    前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍でない場合、前記歩行者が前記車両の走行する道路に進入するとして前記車両が走行する走行経路を作成し、前記歩行者が検出され、かつ、特定された前記歩行停止物標の位置が前記歩行者の近傍である場合、前記歩行者が前記道路に進入しないとして前記走行経路を作成することと、
    を前記車両に搭載されたコンピュータに実行させる経路作成用コンピュータプログラム。
JP2022151836A 2022-09-22 2022-09-22 経路作成装置、経路作成方法、および経路作成用コンピュータプログラム Pending JP2024046439A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2022151836A JP2024046439A (ja) 2022-09-22 2022-09-22 経路作成装置、経路作成方法、および経路作成用コンピュータプログラム
US18/369,863 US20240101155A1 (en) 2022-09-22 2023-09-19 Route planner and method for route planning

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022151836A JP2024046439A (ja) 2022-09-22 2022-09-22 経路作成装置、経路作成方法、および経路作成用コンピュータプログラム

Publications (1)

Publication Number Publication Date
JP2024046439A true JP2024046439A (ja) 2024-04-03

Family

ID=90360701

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022151836A Pending JP2024046439A (ja) 2022-09-22 2022-09-22 経路作成装置、経路作成方法、および経路作成用コンピュータプログラム

Country Status (2)

Country Link
US (1) US20240101155A1 (ja)
JP (1) JP2024046439A (ja)

Also Published As

Publication number Publication date
US20240101155A1 (en) 2024-03-28

Similar Documents

Publication Publication Date Title
JP7121497B2 (ja) 仮想車路生成装置及び方法
JP7147420B2 (ja) 物体検出装置、物体検出方法及び物体検出用コンピュータプログラム
CN107179767B (zh) 驾驶控制装置、驾驶控制方法以及非瞬时性记录介质
JP7135665B2 (ja) 車両制御システム、車両の制御方法及びコンピュータプログラム
JP2019099138A (ja) 車線維持補助方法及び装置
US11400923B2 (en) Information processing device, vehicle control device, and mobile object control method
US20220410931A1 (en) Situational awareness in a vehicle
CN112348845B (zh) 用于停车位检测和跟踪的系统和方法
JP7078909B2 (ja) 車両制御装置及び車両制御用コンピュータプログラム
CN113525382B (zh) 车辆控制装置及存储介质
JP7435513B2 (ja) 車両制御装置及び車両制御方法
JP2024046439A (ja) 経路作成装置、経路作成方法、および経路作成用コンピュータプログラム
CN116524454A (zh) 物体追踪装置、物体追踪方法及存储介质
JP7276112B2 (ja) 車線変更決定装置
CN116745188A (zh) 基于不确定道路使用者的行为生成自主车辆的纵向计划的方法和系统
EP4060643A1 (en) Traffic signal recognition method and traffic signal recognition device
US20240123977A1 (en) Travel controller and method for travel control
US20240092399A1 (en) Motion prediction device and motion prediction method
US20220315002A1 (en) Traveling lane planning device, medium storing computer program for traveling lane planning, and traveling lane planning method
CN113002562B (zh) 车辆控制装置以及存储介质
US20230152807A1 (en) Vehicle control system and vehicle driving method using the vehicle control system
US20240017748A1 (en) Device, method, and computer program for lane determination
US20240067222A1 (en) Vehicle controller, vehicle control method, and vehicle control computer program for vehicle control
US20240067165A1 (en) Vehicle controller, method, and computer program for vehicle control
JP2024030017A (ja) 物体検出装置、物体検出方法、および物体検出用コンピュータプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240307