JP7372365B2 - 制御装置、制御方法、およびプログラム - Google Patents

制御装置、制御方法、およびプログラム Download PDF

Info

Publication number
JP7372365B2
JP7372365B2 JP2022007776A JP2022007776A JP7372365B2 JP 7372365 B2 JP7372365 B2 JP 7372365B2 JP 2022007776 A JP2022007776 A JP 2022007776A JP 2022007776 A JP2022007776 A JP 2022007776A JP 7372365 B2 JP7372365 B2 JP 7372365B2
Authority
JP
Japan
Prior art keywords
moving
reference object
moving body
detected
surrounding situation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022007776A
Other languages
English (en)
Other versions
JP2023106818A (ja
Inventor
岳洋 藤元
裕司 安井
隆志 松本
英樹 松永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2022007776A priority Critical patent/JP7372365B2/ja
Priority to CN202310074901.4A priority patent/CN116483068A/zh
Priority to US18/098,731 priority patent/US20230234609A1/en
Publication of JP2023106818A publication Critical patent/JP2023106818A/ja
Application granted granted Critical
Publication of JP7372365B2 publication Critical patent/JP7372365B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0956Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0257Control of position or course in two dimensions specially adapted to land vehicles using a radar
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • B60W2554/4041Position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Multimedia (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Electromagnetism (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Description

本発明は、制御装置、制御方法、およびプログラムに関する。
従来、歩道を移動可能な一人乗り用の電動車両の発明が開示されている(特許文献1)。
特開2020-189536号公報
従来の技術では、移動体の周辺の物体の検出に関する処理については十分に考慮されていない場合があった。
本発明は、このような事情を考慮してなされたものであり、より精度よく物体を検出するための支援を行うことができる制御装置、制御方法、およびプログラムを提供することを目的の一つとする。
この発明に係る制御装置、制御方法、およびプログラムは、以下の構成を採用した。
(1):この発明の一態様に係る制御装置は、移動体に搭載された物体認識装置によって認識された前記移動体の周辺状況を示す周辺状況情報を取得する周辺状況取得部と、前記周辺状況情報に基づいて、前記移動体の進行方向に存在する予め規定された基準物体を検出する基準物体検出部と、前記周辺状況情報に基づいて、前記移動体の走行可能領域を識別する走行可能領域識別部と、前記走行可能領域を前記移動体が走行するように前記移動体の走行を制御する走行制御部と、を備え、前記走行制御部は、前記基準物体が検出された場合に、前記移動体を前記基準物体に近づくように移動させ、前記走行可能領域識別部は、前記移動体が前記基準物体に近づくように移動した後に前記物体認識装置によって認識された前記周辺状況情報に基づいて前記基準物体に付随する付随物体を検出し、前記基準物体および前記付随物体を除外することによって前記走行可能領域を識別する。
(2):上記(1)の態様において、前記走行制御部は、前記基準物体が検出された場合に、前記付随物体が存在する場合に、前記基準物体を基準位置として、前記物体認識装置が前記付随物体を認識可能な距離の範囲である前記基準物体の近傍に移動させる。
(3):上記(1)又は(2)の態様において、前記基準物体は、前記移動体が走行する地面に設置され、高さの差が所定値以内かつ前記高さが閾値以上である少なくとも2以上の物体である。
(4):上記(3)の態様において、前記走行制御部は、前記基準物体検出部が、高さの差が所定値以内かつ前記高さが閾値以上である少なくとも2以上の物体を前記基準物体として検出した場合、前記移動体を前記基準物体に近づくように移動させ、前記走行可能領域識別部は、前記移動体が前記基準物体に近づくように移動した位置において前記少なくとも2以上の物体の間の空間を認識した周辺認識情報に基づいて、前記走行可能領域を識別する。
(5):上記(4)の態様において、前記走行制御部は、前記基準物体検出部が、高さの差が所定値以内かつ前記高さが閾値以上である少なくとも2以上の物体を前記基準物体として検出した場合、前記2以上の物体の間に存在することが想定される前記付随物体の延在方向に関して斜め方向を向くように前記移動体を前記基準物体に近づくように移動させる。
(6):上記(1)又は(2)の態様において、前記基準物体は、前記移動体が走行する地面に設置され、前記移動体の高さ以上の高さを有する懸架物である。
(7):上記(6)の態様において、前記走行可能領域識別部は、前記基準物体検出部が、前記移動体の高さ以上の高さを有する懸架物を前記基準物体として検出した場合、前記移動体が前記基準物体に近づくように移動した位置において前記懸架物の中空空間を認識した周辺認識情報に基づいて、前記走行可能領域を識別する。
(8):上記(1)から(7)の態様において、前記走行制御部は、前記基準物体が検出され、かつ前記移動体が保持する地図情報が、前記基準物体の検出位置が前記地図情報によって示される複数の領域の境界位置と一致していることを示す場合に、前記移動体を前記基準物体に近づくように移動させる。
(9):本発明の他の態様に係る制御方法は、コンピュータが、移動体に搭載された物体認識装置によって認識された前記移動体の周辺状況を示す周辺状況情報を取得し、前記周辺状況情報に基づいて、前記移動体の進行方向に存在する予め規定された基準物体を検出し、前記周辺状況情報に基づいて、前記移動体の走行可能領域を識別し、前記走行可能領域を前記移動体が走行するように前記移動体の走行を制御し、前記基準物体が検出された場合に、前記移動体を前記基準物体に近づくように移動させ、前記移動体が前記基準物体に近づくように移動した後に前記物体認識装置によって認識された前記周辺状況情報に基づいて前記基準物体に付随する付随物体を検出し、前記基準物体および前記付随物体を除外することによって前記走行可能領域を識別する。
(10):本発明の他の態様に係るプログラムは、コンピュータに、移動体に搭載された物体認識装置によって認識された前記移動体の周辺状況を示す周辺状況情報を取得させ、前記周辺状況情報に基づいて、前記移動体の進行方向に存在する予め規定された基準物体を検出させ、前記周辺状況情報に基づいて、前記移動体の走行可能領域を識別させ、前記走行可能領域を前記移動体が走行するように前記移動体の走行を制御させ、前記基準物体が検出された場合に、前記移動体を前記基準物体に近づくように移動させ、前記移動体が前記基準物体に近づくように移動した後に前記物体認識装置によって認識された前記周辺状況情報に基づいて前記基準物体に付随する付随物体を検出し、前記基準物体および前記付随物体を除外することによって前記走行可能領域を識別させる。
(1)-(10)の態様によれば、より精度よく物体を検出するための支援を行うことができる。
実施形態に係る移動体1および制御装置200の構成の一例を示す図である。 移動体1を上方から見た透視図である。 物体認識部220による物体認識が失敗する場面の一例を示す図である。 移動体1が近傍領域NRに移動した後に物体認識部220によって認識される物体の一例を示す図である。 物体認識部220による物体認識が失敗する場面の別の例を示す図である。 移動体1が近傍領域NRに移動した後に物体認識部220によって認識される物体の別の例を示す図である。 基準物体の検出時に地図情報110を活用して移動体1を制御する方法を説明するための図である。 制御装置200が実行する処理の流れの一例を示すフローチャートである。 制御装置200が実行する処理の流れの別の例を示すフローチャートである。
以下、図面を参照し、本発明の移動体に搭載される制御装置、制御方法、およびプログラムの実施形態について説明する。移動体は、車道と、車道と異なる所定領域との双方を移動するものである。所定領域とは、例えば歩道である。また、所定領域とは、路側帯や自転車レーン、公開空地などのうち一部または全部であってもよいし、歩道、路側帯、自転車レーン、公開空地などを全て含んでもよい。以下の説明では、所定領域は歩道であるものとする。以下の説明において「歩道」と記載されている部分は、適宜、「所定領域」と読み替えることができる。
以下、移動体の前方向をプラスX方向、移動体の後方向をマイナスX方向、前後方向に直交する方向における右方向(プラスX方向を向いたときの右方向)をプラスY方向、前後方向に直交する方向における左方向(プラスX方向を向いたときの左方向)をマイナスY方向、X方向およびY方向に直交する方向であって鉛直上向き方向をプラスZ方向、X方向およびY方向に直交する方向であって鉛直下向き方向をマイナスZ方向と称する場合がある。
<実施形態>
図1は、実施形態に係る移動体1および制御装置200の構成の一例を示す図である。移動体1には、例えば、外部検知デバイス10と、移動体センサ20と、操作子30と、内部カメラ40と、測位装置50と、対話装置60と、移動機構70と、駆動装置80と、外部報知装置90と、記憶装置100と、制御装置200とが搭載される。なお、これらの構成のうち本発明の機能を実現するのに必須でない一部の構成が省略されてもよい。
外部検知デバイス10は、移動体1の進行方向を検知範囲とする各種デバイスである。外部検知デバイス10は、例えば、外部カメラ12と、レーダー装置14とを含む。外部カメラ12は、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の固体撮像素子を利用したデジタルカメラである。外部カメラ12は、少なくとも、移動体1の進行方向を撮像可能な位置に取り付けられ、例えば、周期的に繰り返し自車両Mの周辺を撮像する。外部カメラ12は、ステレオカメラであってもよい。レーダー装置14は、移動体1の周辺にミリ波などの電波を放射すると共に、物体によって反射された電波(反射波)を検出して少なくとも物体の位置(距離および方位)を検出する。
更に、外部検知デバイス10は、例えば、LIDAR(Light Detection and Ranging)などを含んでもよい。外部検知デバイス10は、外部カメラ12、レーダー装置14、およびLIDARのうち一部または全部による検出結果に対してセンサフュージョン処理を行って、移動体1の周辺に存在する物体の位置、種類、速度などを認識する。外部検知デバイス10は、認識結果を制御装置200に出力する。外部検知デバイス10は、外部カメラ12、レーダー装置14、およびLIDARの検出結果をそのまま制御装置200に出力してもよい。外部検知デバイス10は「物体認識装置」の一例であり、認識結果は、「周辺状況情報」の一例である。
移動体センサ20は、例えば、速度センサ、加速度センサ、ヨーレート(角速度)センサ、方位センサ、並びに操作子30に取り付けられた操作量検出センサなどを含む。操作子30は、例えば、加減速を指示するための操作子(例えばアクセルペダルやブレーキペダル)と、操舵を指示するための操作子(例えばステアリングホイール)とを含む。この場合、移動体センサ20は、アクセル開度センサやブレーキ踏量センサ、ステアリングトルクセンサ等を含んでよい。移動体1は、操作子30として、上記以外の態様の操作子(例えば、円環状でない回転操作子、ジョイスティック、ボタン等)を備えてもよい。
内部カメラ40は、移動体1の乗員の少なくとも頭部を正面から撮像する。内部カメラ40は、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)などの撮像素子を利用したデジタルカメラである。内部カメラ40は、撮像した画像を制御装置200に出力する。
測位装置50は、移動体1の位置を測位する装置である。測位装置50は、例えば、GNSS(Global Navigation Satellite System)受信機であり、GNSS衛星から受信した信号に基づいて、移動体1の位置を特定し、位置情報として出力する。なお、移動体1の位置情報は、後述する通信装置が接続しているWi-Fi基地局の位置から推定されてもよい。
対話装置60は、例えば、スピーカ、マイク、タッチパネル、通信装置62などを含む。対話装置60は、マイクによって収音された乗員の音声を適宜加工し、通信装置62によってネットワーク経由でサーバ装置に送信し、サーバ装置から返信された情報に基づいてスピーカから音声による情報提供を行う。対話装置60は、エージェント装置、コンシェルジュ装置、アシスタンス装置などと称される場合もある。サーバ装置は、音声認識機能、自然言語処理機能、意味解釈機能、返信内容決定機能等を有する。また、対話装置60は、位置情報をサーバ装置に送信し、サーバ装置は、位置情報と乗員により発せられた案内要求(例えば「この辺でおいしいラーメン屋は?」といったもの)に応じて該当する施設の情報を返信するものであってもよい。この場合、対話装置60によって「この先を左に曲がったところにあります」といった音声案内がなされる。これに限らず、対話装置60は、乗員による自然な 発話を受け付けて適切な返信を返す機能を有している。また、対話装置60は、装置側から問いかけを行って返信を受け付ける等、簡易な対話を、サーバ装置を介さずに行う機能を有しており、制御装置200からの要求に応じて乗員に問いかけ等を行ってもよい。
移動機構70は、道路において移動体1を移動させるための機構である。移動機構70は、例えば、操舵輪と駆動輪とを含む車輪群である。また、移動機構70は、多足歩行するための脚部であってもよい。
駆動装置80は、移動機構70に力を出力して移動体1を移動させる。例えば、駆動装置80は、駆動輪を駆動するモータ、モータに供給する電力を蓄えるバッテリ、操舵輪の操舵角を調整する操舵装置、制御装置200から入力される情報、或いは操作子30から入力される情報に従って制御されるブレーキ装置などを含む。駆動装置80は、駆動力出力手段、或いは発電手段として、内燃機関や燃料電池などを備えてもよい。
外部報知装置90は、例えば移動体1の外板部に設けられ、移動体1の外部に向けて情報を報知するためのランプ、ディスプレイ装置、スピーカなどである。外部報知装置90は、移動体1が歩道を移動している状態と、車道を移動している状態とで異なる動作を行う。例えば、外部報知装置90は、移動体1が歩道を移動している場合にランプを発光させ、移動体1が車道を移動している場合にランプを発光させないように制御される。このランプの発光色は、法規で定められた色であると好適である。外部報知装置90は、移動体1が歩道を移動している場合にランプを緑色で発光させ、移動体1が車道を移動している場合にランプを青色で発光させるというように制御されてもよい。外部報知装置90がディスプレイ装置である場合、外部報知装置90は、移動体1が歩道を走行している場合に「歩道走行中である」旨をテキストやグラフィックで表示する。
図2は、移動体1を上方から見た透視図である。図中、FWは操舵輪、RWは駆動輪、SDは操舵装置、MTはモータ、BTはバッテリである。操舵装置SD、モータMT、バッテリBTは駆動装置80に含まれる。また、APはアクセルペダル、BPはブレーキペダル、WHはステアリングホイール、SPはスピーカ、MCはマイクである。図示する移動体1は一人乗りの移動体であり、乗員Pは運転席DSに着座してシートベルトSBを装着している。矢印D1は移動体1の進行方向(速度ベクトル)である。外部検知デバイス10は移動体1の前端部付近に、内部カメラ40は乗員Pの前方から乗員Pの頭部を撮像可能な位置に設けられている。また、移動体1の前端部付近に、ディスプレイ装置としての外部報知装置90が設けられている。
図1に戻り、記憶装置100は、例えば、HDD(Hard Disk Drive)やフラッシュメモリ、RAM(Random Access Memory)などの非一過性の記憶装置である。記憶装置100には、地図情報110、制御装置200が実行するプログラム120などが格納される。図1では記憶装置100を制御装置200の枠外に記載しているが、記憶装置100は制御装置200に含まれるものであってよい。
[制御装置]
制御装置200は、例えば、道路認識部210と、物体認識部220と、基準物体検出部230と、走行可能領域識別部240と、走行制御部250とを備える。道路認識部210、物体認識部220、基準物体検出部230、走行可能領域識別部240、および走行制御部250は、例えば、CPU(Central Processing Unit)などのハードウェアプロセッサがプログラム(ソフトウェア)を実行することにより実現される。これらの構成要素のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)などのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予め記憶装置(不図示)に格納されていてもよいし、DVDやCD-ROMなどの着脱可能な記憶媒体(非一過性の記憶媒体)に格納されており、記憶媒体がドライブ装置に装着されることで記憶装置にインストールされてもよい。
道路認識部210は、移動体1が車道を移動しているか、歩道を移動しているかを認識する。道路認識部210は、例えば、外部検知デバイス10の外部カメラ12が撮像した画像を解析することで、移動体1が車道を移動しているか、歩道を移動しているかを認識する。画像解析の一例として、セマンティックセグメンテーションが挙げられる。道路認識部210は、画像のフレーム内の各ピクセルをクラス(車道、歩道、境界、物体など)に分類してラベルを付与し、移動体1の正面に相当する領域に車道のラベルが付与されたピクセルが多い場合に移動体1が車道を移動していることを認識し、画像における移動体1の正面に相当する領域に歩道のラベルが付与されたピクセルが多い場合に移動体1が歩道を移動していることを認識する。これに限らず、道路認識部210は、画像における移動体1の正面に相当する領域に車両が認識されている場合に移動体1が車道を移動していることを認識し、画像における移動体1の正面に相当する領域に歩行者が認識されている場合に移動体1が歩道を移動していることを認識してもよい。また、道路認識部210は、画像における移動体1の正面に相当する領域にある路面領域の幅が大きい場合に移動体1が車道を移動していることを認識し、画像における移動体1の正面に相当する領域にある路面領域の幅が小さい場合に移動体1が歩道を移動していることを認識してもよい。また、道路認識部210は、移動体1の位置情報と地図情報110とを照合し、移動体1が車道を移動しているか、歩道を移動しているかを認識してもよい。この場合の地図情報は、位置座標から歩道と車道が区別できる程度の精度を有している必要がある。「所定領域」が歩道だけで無い場合、道路認識部210は、路側帯や自転車レーン、公開空地などについても同様の処理を行う。
物体認識部220は、外部検知デバイス10の出力に基づいて、移動体1の周辺に存在する物体を認識する。物体とは、車両や自転車、歩行者などの移動体、道路区画線、段差、ガードレール、路肩、中央分離帯などの走路境界、道路標識や看板などの路上に設置された構造物、走路上に存在する(落ちている)落下物、移動体1の進行方向に存在する物体などの障害物のうち一部または全部を含む。物体認識部220は、例えば、外部検知デバイス10の外部カメラ12が撮像した画像が入力されると物体の存在、位置、種別などの情報を出力するように学習された学習済モデルに、外部カメラ12が撮像した画像を入力することで、他の移動体の存在、位置、種別など情報を取得してもよい。他の移動体の種別は、画像におけるサイズや外部検知デバイス10のレーダー装置が受信した反射波の強度などに基づいて推定することもできる。また、物体認識部220は、例えば、レーダー装置がドップラーシフトなどを利用して検出した他の移動体の速度を取得してもよい。また、物体認識部220は、LIDAR12により入力された情報に基づいて、障害物を認識してもよい。物体認識部220は、制御装置200に代えて、外部検検知デバイスに含まれてもよい。物体認識部220は、「周辺状況取得部」の一例である。
基準物体検出部230の詳細については後述する。
走行可能領域識別部240は、物体認識部220によって取得された周辺状況情報に基づいて、移動体1の走行可能領域を識別する。より具体的には、走行可能領域識別部240は、外部カメラ12が撮像した画像の領域から、物体認識部220によって認識された物体を除外することによって移動体1の走行可能領域を識別する。このとき除外される物体は、高さや体積に関して任意の閾値(例えば、5cm以上)が設定されてもよい。
走行制御部250は、例えば、道路認識部210の出力に基づく走路の情報と走行可能領域識別部240の出力に基づく走行可能領域の情報を参照して軌道を生成し、生成した軌道を移動体1が自動で走行するように駆動装置80を制御する。軌道は、移動体1が自動的に(運転者の操作に依らずに)将来走行する軌道である。軌道は、例えば、速度要素を含んでいる。例えば、軌道は、移動体1の到達すべき地点(軌道点)を順に並べたものとして表現される。軌道点は、道なり距離で所定の走行距離(例えば数[m]程度)ごとの移動体1の到達すべき地点であり、それとは別に、所定のサンプリング時間(例えば0コンマ数[sec]程度)ごとの目標速度および目標加速度が、目標軌道の一部として生成される。また、軌道点は、所定のサンプリング時間ごとの、そのサンプリング時刻における移動体1の到達すべき位置であってもよい。この場合、目標速度や目標加速度の情報は軌道点の間隔で表現される。
走行制御部250は、例えば、移動体1が車道を移動する場合、移動体1の周辺に存在する物体との距離を第1距離以上に維持して、移動体1が移動するように、駆動装置80のモータMTや、ブレーキ装置、操作装置を制御する。走行制御部250は、移動体1が歩道を移動する場合、移動体1の前方に存在する物体との距離を第2距離以上に維持して移動体1が移動するように、駆動装置80のモータMTや、ブレーキ装置、操作装置を制御する。第2距離は、例えば、第1距離よりも長い距離である。運転者の操作によって移動体1が移動する場合、走行制御部250は、操作子に対する利用者の操作に基づいて駆動装置80を制御して操作に応じた態様で移動体1を移動させる。
このように、物体認識部220は、外部カメラ12が撮像した画像やレーダー装置14が受信した反射波の強度などに基づいて物体を検出し、走行可能領域識別部240は、物体認識部220によって認識された物体を外部カメラ12が撮像した画像の領域から除外することによって走行可能領域を識別し、走行制御部250は、識別された走行可能領域を走行するように移動体1を制御する。しかしながら、物体の種類や形状によっては、外部カメラ12が撮像した画像に表されるピクセル数が小さいことや、反射波の強度が小さいことに起因して、物体認識部220は、当該物体を認識できない場合がある。その結果、走行可能領域識別部240は、当該物体を含めた領域を走行可能領域として識別し、移動体1は、当該物体に衝突することがあり得る。
図3は、物体認識部220による物体認識が失敗する場面の一例を示す図である。図3は、移動体1が走行する進行方向において、ロープやチェーンなどの上下方向の幅が短く(すなわち、細く)横長の物体Rが2つのポールLP及びRPに吊るされている例を表している。このとき、物体認識部220は、外部カメラ12が撮像した画像に占める物体Rのピクセル数が小さいことや、物体Rによって反射される反射波の強度が小さいことに起因して、物体Rを認識できないことがあり得る。
上記のような事情を背景にして、基準物体検出部230は、物体認識部220によって認識された周辺状況情報に基づいて、移動体1の進行方向に存在する予め規定された基準物体を検出する。より具体的には、例えば、基準物体検出部230は、高さの差が所定値内かつ当該高さが閾値以上である2以上の物体を基準物体として検出する。代替的に、基準物体検出部230は、記憶装置100に事前に記憶されたポールやパイロンなどの参照画像と、外部カメラ12が撮像した画像とを照合し、パターンマッチング処理を実行することによって、基準物体を検出してもよい。ポールやパイロンは、「基準物体」の一例であり、ロープやチェーンは、「付随物体」の一例である。
基準物体検出部230が基準物体を検出した場合、走行制御部250は、検出した基準物体の近傍に(すなわち、検出した基準物体に近づくように)移動体1を移動させる。例えば、図3の場合、走行制御部250は、まず、検出した基準物体であるポールLPとポールRPとを通過する仮想線VLを引き、地面におけるポールLP(又はポールRP)の中心CPを起点として仮想線VLに直交する線分(例えば、3m)を移動体1側に引いた地点NRCを含む近傍領域NRに移動体1を移動させる。
移動体1が近傍領域NRに移動すると、物体認識部220は、移動体1の移動後に外部カメラ12が撮像した画像やレーダー装置14が受信した反射波の強度などに基づいて、再度、物体を認識する。図3の場合、例えば、物体認識部220は、外部カメラ12を用いて、左側のポールLPと右側のポールLPの間の空間を撮像したり、レーダー装置14を用いて、左側のポールLPと右側のポールLPの間の空間に向けて電波を放射する。より正確には、走行制御部250は、左側のポールLPと右側のポールLPの間に存在することが想定される物体の延在方向に関して斜め方向を向くように移動体1を近傍領域NRに移動させた状態で、物体認識部220は、左側のポールLPと右側のポールLPの間の空間を撮像したり、当該空間に向けて電波を放射する。
図4は、移動体1が近傍領域NRに移動した後に物体認識部220によって認識される物体の一例を示す図である。図4に示す通り、移動体1が近傍領域NRに移動することによって、図3では、横方向に撮像されていた物体Rが、図4では縦方向に認識されることとなる。その結果、外部カメラ12によって撮像された画像に占める物体Rのピクセル数が増加したり、又は物体Rによって反射される反射波の強度は大きくなる。これにより、近傍領域NRへの移動前には認識できなかった物体Rを認識することができる。
走行可能領域識別部240は、近傍領域NRへの移動後に認識された物体Rを、外部カメラ12によって撮像された画像の領域から除外することによって、走行可能領域を識別し、走行制御部250は、識別された走行可能領域を移動体1が走行するような軌道を生成する。これにより、外部カメラ12やレーダー装置14によって正面からでは検知することが困難な物体を検知し、移動体1を適切に走行させることができる。
なお、上記の説明では、基準物体検出部230は、高さの差が所定値以内かつ当該高さが閾値以上である2以上の物体を基準物体として検出している。しかし、本発明はそのような構成に限定されず、例えば、基準物体検出部230は、同一間隔で配置されている2以上の物体を基準物体として検出してもよいし、所定の形状(例えば、円柱や三角形)を有する2以上の物体を基準物体として検出してもよい。基準物体を検出するための複数の条件は任意に組み合わされても良い。
図5は、物体認識部220による物体認識が失敗する場面の別の例を示す図である。図5は、移動体1が走行する進行方向において、網目状のフェンスFと、フェンスFが張られた構造物S(懸架物)が設置されている例を表している。このとき、物体認識部220は、外部カメラ12が撮像した画像に占めるフェンスFのピクセル数が小さいことや、フェンスFによって反射される反射波の強度が小さいことに起因して、フェンスFを認識できないことがあり得る。
そのため、基準物体検出部230は、例えば、移動体1が走行する地面に設置され、移動体1の高さ以上の高さを有する懸架物を基準物体として検出する。これは、懸架物の高さが移動体1の高さ未満である場合、移動体1は当該懸架物の中空空間を走行することができないことが確定しているからである。代替的に、基準物体検出部230は、記憶装置100に事前に記憶されたフェンスなどの参照画像と、外部カメラ12が撮像した画像とを照合し、パターンマッチング処理を実行することによって、基準物体を検出してもよい。
基準物体検出部230が基準物体を検出した場合、走行制御部250は、検出した基準物体の近傍に移動体1を移動させる。例えば、図5の場合、走行制御部250は、まず、検出した基準物体である懸架物Sの両方の柱を通過する仮想線VLを引き、地面における左側の柱又は右側の柱の中心CPを起点として仮想線VLに直交する線分(例えば、3m)を移動体1側に引いた地点NRCを含む近傍領域NRに移動体1を移動させる。
移動体1が近傍領域NRに移動すると、物体認識部220は、移動体1の移動後に外部カメラ12が撮像した画像やレーダー装置14が受信した反射波の強度などに基づいて、再度、物体を認識する。図5の場合、例えば、物体認識部220は、外部カメラ12を用いて、懸架物Sの中空空間を撮像したり、レーダー装置14を用いて、懸架物Sの中空空間に向けて電波を放射する。より正確には、走行制御部250は、移動体1を、懸架物Sの中空空間に存在することが想定される物体の延在方向に関して斜め方向を向くように近傍領域NRに移動させた状態で、物体認識部220は、懸架物Sの中空空間を撮像したり、当該中空空間に向けて電波を放射する。
図6は、移動体1が近傍領域NRに移動した後に物体認識部220によって認識される物体の一例を示す図である。図6に示す通り、移動体1が近傍領域NRに移動することによって、図5では、横方向に撮像されていたフェンスFが、図6では縦方向に認識されることとなる。その結果、外部カメラ12によって撮像された画像に占める物体Rのピクセル数が増加したり、又はフェンスFによって反射される反射波の強度は大きくなる。これにより、近傍領域NRへの移動前には認識できなかったフェンスFを認識することができる。
走行可能領域識別部240は、近傍領域NRへの移動後に認識されたフェンスFを、外部カメラ12によって撮像された画像の領域から除外することによって、走行可能領域を認識し、走行制御部250は、認識された走行可能領域を移動体1が走行するような軌道を生成する。これにより、外部カメラ12やレーダー装置14によって正面からでは検知することが困難な物体を検知し、移動体1を適切に走行させることができる。
なお、上記の説明では、基準物体検出部230は、移動体1が走行する地面に設置され、移動体1の高さ以上の高さを有する懸架物を基準物体として検出している。しかし、本発明はそのような構成に限定されず、例えば、基準物体検出部230は、一般的にある閾値以上の高さを有する懸架物を基準物体として検出してもよい。基準物体を検出するための複数の条件は任意に組み合わされても良い。
さらに、上記の説明では、基準物体検出部230が基準物体を検出した場合、走行制御部250は、検出した基準物体の近傍に移動体1を移動させている。しかし、本発明はそのような構成に限定されず、走行制御部250は、地図情報110を参照して、基準物体に付随する付随物体が存在する可能性が高いと想定される場面においてのみ、検出した基準物体の近傍に移動体1を移動させてもよい。
図7は、基準物体の検出時に地図情報110を活用して移動体1を制御する方法を説明するための図である。図7において、CLは移動体1の現在地点を示し、測位装置50によって特定された移動体1の位置情報に基づいて地図情報110を参照することによって特定されるものである。図7に示す地図情報110において、移動体1は、公園を表す区画と、道路を表す区画との間の境界に位置していることが分かる。一般的に、地図情報110における複数の区画の境界位置で検出された基準物体には、物体認識部220によって認識されない付随物体が存在する可能性が高い傾向がある。
そのため、走行制御部250は、基準物体が検出され、かつ地図情報110が、基準物体の検出位置が地図情報110によって示される複数の領域の境界位置と一致していることを示す場合に、移動体1を当該基準物体の近傍に移動させる。一方、基準物体が検出され、かつ地図情報110が、基準物体の検出位置が地図情報110によって示される複数の領域の境界位置と一致していることを示していない場合には、走行制御部250は、移動体1を当該基準物体の近傍に移動させない。これにより、付随物体が存在しないにも関わらず、基準物体の近傍に移動体1を移動させてしまう可能性を低減することができる。
[フローチャート]
次に、図8を参照して、制御装置200によって実行される処理の流れについて説明する。図8は、制御装置200が実行する処理の流れの一例を示すフローチャートである。まず、物体認識部220は、外部カメラ12が撮像した画像やレーダー装置14が受信した反射波の強度などに基づいて、移動体1の周辺に存在する物体を検出し、周辺状況情報として取得する(ステップS100)。次に、基準物体検出部230は、取得された周辺状況情報に基づいて、移動体1の進行方向に存在する予め規定された基準物体を検出したか否かを判定する(ステップS102)。
基準物体を検出したと判定されなかった場合、制御装置200は、処理をステップS100に戻す。一方、基準物体を検出したと判定された場合、走行制御部250は、移動体1を検出した基準物体の近傍に移動させる(ステップS104)。次に、物体認識部220は、外部カメラ12が撮像した画像やレーダー装置14が受信した反射波の強度などに基づいて、移動体1の周辺に存在する物体を検出し、周辺状況情報として再取得する(ステップS106)。
次に、走行可能領域識別部240は、物体認識部220によって再取得された周辺状況情報に基づいて、検出した基準物体に付随する付随物体を検出したか否かを判定する(ステップS108)。付随物体を検出したと判定された場合、走行可能領域識別部240は、外部カメラ12が撮像した画像の領域から、検出した基準物体および付随物体を除外することによって走行可能領域を識別する(ステップS110)。一方、付随物体を検出したと判定されなかった場合、走行可能領域識別部240は、外部カメラ12が撮像した画像の領域から、検出した基準物体を除外することによって走行可能領域を識別する(ステップS112)。
次に、走行制御部250は、移動体1が識別された走行可能領域を走行するような軌道を生成し、生成した軌道に沿って移動体1を走行させる(ステップS114)。これにより、本フローチャートの処理が終了する。
図9は、制御装置200が実行する処理の流れの別の例を示すフローチャートである。以下、図8のフローチャートと同一の処理については、説明を省略する。
ステップS102の処理において、基準物体を検出したと判定された場合、走行制御部250は、地図情報110を参照して、移動体1の現在位置が、地図情報110における複数の区画の境界位置と一致するか否かを判定する(ステップS103)。
移動体1の現在位置が、地図情報110における複数の区画の境界位置と一致しないと判定された場合、制御装置200は、処理をステップS100に戻す。一方。移動体1の現在位置が、地図情報110における複数の区画の境界位置と一致すると判定された場合、制御装置200は、処理をステップS104に進める。他の処理については、図8のフローチャートの処理と同様である。これにより、付随物体が存在しないにも関わらず、基準物体の近傍に移動体1を移動させてしまう可能性を低減することができる。
なお、上記の実施形態では、基準物体がポール又はフェンスの構造物であり、付随物体がロープ又はフェンスの網目部分である例について説明した。しかし、本発明はそのような構成に限定されず、より一般的に、比較的遠距離からでも認識可能な物体と、比較的近距離でないと認識できない物体と、の組み合わせを類型化することによって、様々な基準物体と基準物体の組み合わせに対して本発明を適用することができる。
以上説明した実施形態によれば、移動体1の周辺に基準物体を検出した場合、当該基準物体の近傍に移動体1を移動させ、移動後の位置において、基準物体の周辺状況情報を再取得し、基準物体に付随する付随物体を検出した際には、当該付随物体を移動体1の走行可能領域から除外する。これにより、より精度よく物体を検出するための支援を行うことができる。
上記説明した実施形態は、以下のように表現することができる。
コンピュータによって読み込み可能な命令を格納する記憶媒体と、
前記記憶媒体に接続されたプロセッサと、を備え、
前記プロセッサは、前記コンピュータによって読み込み可能な命令を実行することにより、
移動体に搭載された物体認識装置によって認識された前記移動体の周辺状況を示す周辺状況情報を取得し、
前記周辺状況情報に基づいて、前記移動体の進行方向に存在する予め規定された基準物体を検出し、
前記周辺状況情報に基づいて、前記移動体の走行可能領域を識別し、
前記走行可能領域を前記移動体が走行するように前記移動体の走行を制御し、
前記走行制御部は、前記基準物体が検出された場合に、前記移動体を前記基準物体に近づくように移動させ、
前記走行可能領域識別部は、前記移動体が前記基準物体に近づくように移動した後に前記物体認識装置によって認識された前記周辺状況情報に基づいて前記基準物体に付随する付随物体を検出し、前記基準物体および前記付随物体を除外することによって前記走行可能領域を識別する、
移動体に搭載される制御装置。
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
10 外部検知デバイス
20 移動体センサ
30 操作子
40 内部カメラ
50 測位装置
60 対話装置
70 移動機構
80 駆動装置
90 外部報知装置
100 記憶装置
110 地図情報
120 プログラム
200 制御装置
210 道路認識部
220 物体認識部
230 基準物体検出部
240 走行可能領域識別部
250 走行制御部

Claims (10)

  1. 移動体に搭載された物体認識装置によって認識された前記移動体の周辺状況を示す周辺状況情報を取得する周辺状況取得部と、
    前記周辺状況情報に基づいて、前記移動体の進行方向に存在する予め規定された基準物体を検出する基準物体検出部と、
    前記周辺状況情報に基づいて、前記移動体の走行可能領域を識別する走行可能領域識別部と、
    前記走行可能領域を前記移動体が走行するように前記移動体の走行を制御する走行制御部と、を備え、
    前記走行制御部は、前記基準物体が検出された場合に、前記移動体を前記基準物体の近傍領域に移動させ、
    前記走行可能領域識別部は、前記移動体が前記基準物体の近傍領域に移動した後に前記物体認識装置によって認識された前記周辺状況情報に基づいて前記基準物体として検出された物体に付随する付随物体を検出し、前記基準物体および前記付随物体を除外することによって前記走行可能領域を識別する、
    移動体に搭載される制御装置。
  2. 前記走行制御部は、前記基準物体が検出された場合に、前記付随物体が存在する場合に、前記基準物体を基準位置として前記物体認識装置が前記付随物体を認識可能な距離の範囲である前記基準物体の近傍領域に移動させる、
    請求項1に記載の移動体に搭載される制御装置。
  3. 前記基準物体は、前記移動体が走行する地面に設置され、高さの差が所定値以内かつ前記高さが閾値以上である少なくとも2以上の物体である、
    請求項1又は2に記載の移動体に搭載される制御装置。
  4. 前記走行制御部は、前記基準物体検出部が、高さの差が所定値以内かつ前記高さが閾値以上である少なくとも2以上の物体を前記基準物体として検出した場合、前記移動体を前記基準物体の近傍領域に移動させ、
    前記走行可能領域識別部は、前記移動体が前記基準物体の近傍領域に移動した位置において前記少なくとも2以上の物体の間の空間を認識した周辺認識情報に基づいて、前記走行可能領域を識別する、
    請求項3に記載の移動体に搭載される制御装置。
  5. 前記走行制御部は、前記基準物体検出部が、高さの差が所定値以内かつ前記高さが閾値以上である少なくとも2以上の物体を前記基準物体として検出した場合、前記2以上の物体の間に存在することが想定される前記付随物体の延在方向に関して斜め方向を向くように前記移動体を前記基準物体の近傍領域に移動させる、
    請求項4に記載の移動体に搭載される制御装置。
  6. 前記基準物体は、前記移動体が走行する地面に設置され、前記移動体の高さ以上の高さを有する懸架物である、
    請求項1又は2に記載の移動体に搭載される制御装置。
  7. 前記走行可能領域識別部は、前記基準物体検出部が、前記移動体の高さ以上の高さを有する懸架物を前記基準物体として検出した場合、前記移動体が前記基準物体の近傍領域に移動した位置において前記懸架物の中空空間を認識した周辺認識情報に基づいて、前記走行可能領域を識別する、
    請求項6に記載の移動体に搭載される制御装置。
  8. 前記走行制御部は、前記基準物体が検出され、かつ前記移動体が保持する地図情報が、前記基準物体の検出位置が前記地図情報によって示される複数の領域の境界位置と一致していることを示す場合に、前記移動体を前記基準物体の近傍領域に移動させる、
    請求項1から7のいずれか1項に記載の移動体に搭載される制御装置。
  9. 移動体のコンピュータが、
    移動体に搭載された物体認識装置によって認識された前記移動体の周辺状況を示す周辺状況情報を取得する処理と、
    前記周辺状況情報に基づいて、前記移動体の進行方向に存在する予め規定された基準物体を検出する処理と、
    前記周辺状況情報に基づいて、前記移動体の走行可能領域を識別する処理と、
    前記走行可能領域を前記移動体が走行するように前記移動体の走行を制御する処理と、
    前記基準物体が検出された場合に、前記移動体を前記基準物体の近傍領域に移動させる処理と、
    前記移動体が前記基準物体の近傍領域に移動した後に前記物体認識装置によって認識された前記周辺状況情報に基づいて前記基準物体として検出された物体に付随する付随物体を検出し、前記基準物体および前記付随物体を除外することによって前記走行可能領域を識別する処理と、
    を実行する制御方法。
  10. 移動体のコンピュータに、
    移動体に搭載された物体認識装置によって認識された前記移動体の周辺状況を示す周辺状況情報を取得する処理と、
    前記周辺状況情報に基づいて、前記移動体の進行方向に存在する予め規定された基準物体を検出する処理と、
    前記周辺状況情報に基づいて、前記移動体の走行可能領域を識別する処理と、
    前記走行可能領域を前記移動体が走行するように前記移動体の走行を制御する処理と、
    前記基準物体が検出された場合に、前記移動体を前記基準物体の近傍領域に移動させる処理と、
    前記移動体が前記基準物体の近傍領域に移動した後に前記物体認識装置によって認識された前記周辺状況情報に基づいて前記基準物体として検出された物体に付随する付随物体を検出し、前記基準物体および前記付随物体を除外することによって前記走行可能領域を識別する処理と、
    を実行させるプログラム。
JP2022007776A 2022-01-21 2022-01-21 制御装置、制御方法、およびプログラム Active JP7372365B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022007776A JP7372365B2 (ja) 2022-01-21 2022-01-21 制御装置、制御方法、およびプログラム
CN202310074901.4A CN116483068A (zh) 2022-01-21 2023-01-18 控制装置、控制方法及存储介质
US18/098,731 US20230234609A1 (en) 2022-01-21 2023-01-19 Control device, control method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022007776A JP7372365B2 (ja) 2022-01-21 2022-01-21 制御装置、制御方法、およびプログラム

Publications (2)

Publication Number Publication Date
JP2023106818A JP2023106818A (ja) 2023-08-02
JP7372365B2 true JP7372365B2 (ja) 2023-10-31

Family

ID=87225648

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022007776A Active JP7372365B2 (ja) 2022-01-21 2022-01-21 制御装置、制御方法、およびプログラム

Country Status (3)

Country Link
US (1) US20230234609A1 (ja)
JP (1) JP7372365B2 (ja)
CN (1) CN116483068A (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020102086A (ja) 2018-12-25 2020-07-02 Whill株式会社 電動モビリティ、表示装置、およびプログラム
JP2020197770A (ja) 2019-05-30 2020-12-10 アルパイン株式会社 路面検出システム、パーソナルモビリティ及び障害物検出方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020102086A (ja) 2018-12-25 2020-07-02 Whill株式会社 電動モビリティ、表示装置、およびプログラム
JP2020197770A (ja) 2019-05-30 2020-12-10 アルパイン株式会社 路面検出システム、パーソナルモビリティ及び障害物検出方法

Also Published As

Publication number Publication date
CN116483068A (zh) 2023-07-25
US20230234609A1 (en) 2023-07-27
JP2023106818A (ja) 2023-08-02

Similar Documents

Publication Publication Date Title
JP6676697B2 (ja) 車両制御装置、車両制御方法、及びプログラム
CN111273651B (zh) 车辆控制装置、车辆控制方法及存储介质
CN111094096A (zh) 车辆控制装置、车辆控制方法及程序
JP2020074030A (ja) 地図更新装置、地図更新システム、地図更新方法、及びプログラム
JP7372365B2 (ja) 制御装置、制御方法、およびプログラム
US20220291015A1 (en) Map generation apparatus and vehicle position recognition apparatus
US20200282978A1 (en) Vehicle control system, vehicle control method, and storage medium
JP7457737B2 (ja) 制御システム、制御方法、およびプログラム
JP7361812B2 (ja) 制御装置、制御方法、およびプログラム
EP4300460A1 (en) Device for controlling mobile body, method for controlling mobile body, and storage medium
US20240071103A1 (en) Image recognition device, image recognition method, and program
US20230305567A1 (en) Control device for mobile object, control method for mobile object, and storage medium
JP2020147241A (ja) 車両制御装置、車両制御方法、及びプログラム
WO2023187879A1 (ja) 移動体の制御装置、移動体の制御方法、および記憶媒体
WO2023188090A1 (ja) 移動体の制御装置、移動体の制御方法、および記憶媒体
WO2023028764A1 (zh) 一种自动泊车的方法、装置以及车辆
WO2023187991A1 (ja) 移動体の制御装置、および移動体の制御方法
US20230316779A1 (en) White line recognition device, mobile object control system, and white line recognition method
WO2023188251A1 (ja) 移動体の制御装置、移動体の制御方法、および記憶媒体
WO2023187969A1 (ja) 移動体の制御装置、移動体の制御方法、および記憶媒体
WO2023187893A1 (ja) 移動体の制御装置、移動体の制御方法、および記憶媒体
US20240193955A1 (en) Mobile object control device, mobile object control method, and storage medium
WO2024194985A1 (ja) 移動体の制御装置、移動体の制御方法、およびプログラム
WO2023187972A1 (ja) 移動体の制御装置、移動体の制御方法、および記憶媒体
WO2023188254A1 (ja) 移動体の制御装置、移動体の制御方法、および記憶媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220928

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230711

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230911

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231003

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231019

R150 Certificate of patent or registration of utility model

Ref document number: 7372365

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150