JP7828210B2 - 車両位置の生成装置、車両、および、サーバ装置 - Google Patents
車両位置の生成装置、車両、および、サーバ装置Info
- Publication number
- JP7828210B2 JP7828210B2 JP2022051648A JP2022051648A JP7828210B2 JP 7828210 B2 JP7828210 B2 JP 7828210B2 JP 2022051648 A JP2022051648 A JP 2022051648A JP 2022051648 A JP2022051648 A JP 2022051648A JP 7828210 B2 JP7828210 B2 JP 7828210B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- information
- automobile
- ecu
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/001—Planning or execution of driving tasks
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/28—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
- G01C21/3804—Creation or updating of map data
- G01C21/3833—Creation or updating of map data characterised by the source of data
- G01C21/3848—Data obtained from both position sensors and additional sensors
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/45—External transmission of data to or from the vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
- Navigation (AREA)
- Instructional Devices (AREA)
Description
このような車両の走行制御では、車両の現在位置を得て、その現在位置から車両が進む方向を生成する必要がある。また、車両の走行制御では、車両の現在位置を繰り返しに取得することにより、車両の走行を継続的に制御することができる。
自動車の現在位置は、たとえば自動車に設けられるGNSS受信機などにより生成することが可能である。GNSS受信機が複数のGNSS衛星から電波を受信することにより、自動車のたとえば走行制御装置は、電波に含まれる情報に基づいて自動車の現在位置を演算により取得することができる。
しかしながら、自動車といった車両では、たとえばトンネル、ビル群の谷間、森林内の道路などの走行状況においては、GNSS受信機が複数のGNSS衛星からの電波を良好に受信できないことがある。この場合、車両は、現在位置を得られなくなったり、確からしい現在位置を得られなくなったり、する可能性が生じる。
この他にもたとえば、道路の路面には、横断歩道のためのゼブラゾーン、停止線、交通マーク、などが描画されることがある。これらを撮像して、その撮像画像に基づいて車両の位置を補正することが考えられる。しかしながら、道路の路面は、雪や土などにより覆われることがある。この場合、車両は、路面を撮像しても、自車の位置を補正するための情報を得ることができない。
また、道路には、道路標識や信号機が設けられる。これらの道路標識や信号機といった構造物は、車両のドライバから視認し易いように、道路の上の中空に設けられる。この場合、太陽が低くなる朝や夕方の時間帯では、中空に設けられている道路標識や信号機は、ドライバから見えにくくなる。車両から撮像した画像においても、道路標識や信号機の表示を明瞭に識別し難い。また、道路標識や信号機の上に雪が積もると、道路標識や信号機そのものの認識が不能となる可能性がある。
そして、位置を生成するために同定する立設構造物は、たとえば車両が走行する道路に沿って並べて立設されている電柱その他のポールでよい。このような立設構造物は、看板などとは異なり、車両が走行する道路に沿って広く汎用的に用いられ、自動車が道路のいずれの場所を走行していても撮像され得る。また、立設構造物は、路面に描画されているゼブラゾーン、停止線、交通マークなどのように、雪や土などによりその全体が覆われ難い。また、立設構造物は、太陽が低くなる朝や夕方の時間帯においても、たとえば少なくとも路面の近くの一部において撮像され得る。その結果、制御部は、撮像デバイスの撮像画像に立設構造物が含まれ得る位置を車両が走行している場合には、その撮像画像から、それに含まれている立設構造物の情報を高い確実性で生成し得る。しかも、立設構造物が、車両が走行する道路に沿って並べて立設されているものであるため、制御部は、各立設構造物を撮像するたびに補正するように、車両の位置を生成することができる。
このように本発明では、生成される車両位置についての確からしさを向上することができる。
図1は、自動車3の走行環境の説明図である。
図1では、本発明が適用可能な複数の自動車3が、道路を走行している。自動車3は、車両の一例である。車両は、エンジンの駆動力で走行するものであっても、バッテリ電力を使用するモータの駆動力で走行するものであってもよい。
図2の制御系10は、図1の自動車3に設けられる、車両位置の生成装置として機能する。
操舵制御装置12は、自動車3の前側の複数の車輪の向きを変化させる操舵装置、を制御する。車輪の向きに応じて、自動車3の進行方向が変化する。
制動制御装置13は、自動車3の複数の車輪を個別に制動する制動装置、を制御する。制動装置は、自動車3の複数の車輪に作用させる制動力の大きさを個別に制御するものでよい。
GNSS受信機25は、不図示の複数のGNSS衛星から電波を受信し、GNSS受信機25を備える自動車3の現在位置および現在時刻の情報を生成する。GNSS受信機25は、地上波や天頂衛星からの電波を受信して、高精度な現在位置および現在時刻の情報を生成できるものでよい。
車外カメラ26は、道路などを走行可能な自動車3の車外を撮像する。車外カメラ26は、単眼カメラでも、ステレオカメラであってもよい。ステレオカメラは、複数の画像を撮像する。自動車3には、複数の車外カメラ26が設けられてよい。複数の車外カメラ26は、自動車3の前後左右を分けて撮像して、自動車3の周囲を撮像してよい。
Lidar27は、道路などを走行可能な自動車3の車外をレーザで走査して、レーザ反射波に基づいて車外の空間情報を生成する。車外の空間情報には、自動車3の周囲にいる他の自動車などの像が含まれる。車外カメラ26およびLidar27は、自動車3の周囲にいる他の自動車を検出するセンサである。
加速度センサ28は、たとえば自動車3の前後方向、左右方向、および上下方向の軸方向の加速度を検出するものでよい。この場合、加速度センサ28は、自動車3のヨー方向、ロール方向およびピッチ方向の加速度を検出できる。
距離センサ29は、たとえば自動車3の車輪の回転量などに基づいて、自動車3の移動量を検出するものでよい。
検出制御装置16は、これら自車に設けられる各種の検出部材の検出情報を、車ネットワークへ出力する。検出制御装置16は、検出情報に基づいて生成した情報、たとえば自車の周囲にいる他の自動車などの検出情報を生成して、車ネットワークへ出力してよい。
図1の下部に示す市街地の撮像画像70は、市街地の道路1を走行する自動車3が、自車の進行方向である前側を、図中に破線で示す画角範囲で、車外カメラ26により撮像したものである。市街地の撮像画像70には、交差点の路面の像71とともに、交差点の近くにある信号機の像73、ゼブラゾーンの像72、複数の電柱の像74が、画像において認識可能に撮像されている。
図1の上部に示す郊外の撮像画像80は、郊外の道路2を走行する自動車3が、自車の進行方向である前側を、図中に破線で示す画角範囲で、車外カメラ26により撮像したものである。郊外の撮像画像80には、直線状の長い路面の像81とともに、道路の両側に立設されている看板の像82、複数の電柱の像84、複数の境界ポールの像83が、画像において認識可能に撮像されている。
車外カメラ26は、自動車3の走行中において自動車3の周囲を繰り返しに撮像し、検出制御装置16へ出力する。検出制御装置16は、車外カメラ26の撮像画像を解析し、撮像画像に含まれている像71~74,81~84をたとえばその撮像形状に基づいて特定して、撮像画像に含まれている各種の構造物61~68を抽出してよい。この場合、検出制御装置16は、車外カメラ26の撮像画像とともに、撮像画像から抽出した構造物61~68の情報を、車ネットワークを通じてたとえば走行制御装置15へ出力してよい。
このような車外カメラ26は、自動車3の進行方向である前方を撮像する撮像デバイスとして機能する。
走行制御装置15は、自動車3の走行を制御するための制御値を生成して、駆動制御装置11、操舵制御装置12および制動制御装置13へ出力してよい。
これにより、自動車3は、走行制御装置15による走行制御にしたがって道路を走行することができる。
図3の走行制御装置15は、入出力デバイス41、タイマ42、メモリ43、ECU44、および、これらが接続される内部バス45、を有する。
なお、図2の制御系10に用いられる各種の制御装置も、図3の走行制御装置15と同様の基本構成を有してよい。
タイマ42は、時間および時刻を計測する。タイマ42の時刻は、自動車3の制御系10のGNSS受信機25による現在時刻により校正されてよい。
メモリ43は、たとえば不揮発性の半導体メモリ、HDD、RAM、などで構成されてよい。メモリ43は、たとえば、ECU44が実行するプログラムおよびデータを記録する。走行制御装置15のメモリ43には、走行制御のためのプログラムととともに、走行制御の設定値、検出制御装置16の検出情報、検出制御装置16の操作情報、高精度地図データ46などが記録されてよい。高精度地図データ46は、外通信装置17がサーバ装置31から取得して記録したものでもよい。
ECU44は、自動車3の走行を制御するために制御値を生成して、駆動制御装置11、操舵制御装置12および制動制御装置13へ出力する。
たとえば図2の走行制御装置15のECU44は、制御部として、図4の自動車3の走行制御を、繰り返し実行してよい。
これにより、自動車3の制御系10は、自動車3に設けられる車両位置の生成装置として機能する。
なお、図4の自動車3の走行制御は、自動車3の制御系10に設けられる走行制御装置15以外の他の制御装置のECU44により実行されてもよい。
また、図4の自動車3の走行制御は、自動車3の制御系10に設けられる複数の制御装置のECU44が協働して実行してもよい。
そして、自動車3は、自動運転の走行制御を実行するためには、自動車3の現在位置として精度の良いものを取得することが重要である。取得する現在位置が、自動車3の実際の位置からずれると、走行制御による自動車3の実際の進路もずれることになる。
また、自動車3は、自動運転の走行制御を継続的に実行する場合、自動車3の現在位置を、比較的短い周期で繰り返しに取得する必要がある。
このため、自動車3には、高精度な位置を生成可能なGNSS受信機25が用いられる。
しかしながら、自動車3は、必ずしもGNSS受信機25が複数のGNSS衛星からの電波を良好に受信できる道路などを走行するとは限らない。自動車3は、たとえば、トンネル、ビル69群の谷間、森林に埋まる道路などを走行することがある。これらの走行状況では、GNSS受信機25は、複数のGNSS衛星の電波を受信できるとは限らない。また、複数のGNSS衛星の電波を受信できたとしても、それに基づいて生成される位置の精度が低下する可能性がある。自動車3は、現在位置を得られなくなったり、確からしい現在位置を得られなくなったり、する可能性がある。
自動車3の走行制御では、自動車3の走行状況にかかわらず、自動運転の走行制御に使用可能な精度を確保した現在位置を取得し続けることが求められる。自動車3の位置には、自動車3の走行状況にかかわらず、その確からしさを向上することが求められる。
図2の走行制御装置15のECU44は、図4のステップST3において、図5の自動運転の走行制御を実行してよい。
図2の走行制御装置15のECU44は、図5のステップST17において、図6の現在位置の生成制御を実行してよい。
ここで、GNSS受信機25から新たな位置を取得できていない場合、ECU44は、前回以前にGNSS受信機25から取得した最新の有意な位置を用いてよい。そして、ECU44は、最新の有意な取得位置からの移動履歴に基づいて、自動車3の位置を生成する。ECU44は、最新の有意な取得位置の後における移動距離、移動方向を、検出制御装置16またはメモリ43から取得してよい。検出制御装置16は、加速度センサ28により検出される前後左右上下の加速度を時間積分して自動車3の速度を生成できる。検出制御装置16は、自動車3の速度を時間積分して、移動した距離を生成できる。メモリ43は、検出制御装置16から取得するこれらの自車センサの検出に基づく情報を、記録してよい。ECU44は、これらの移動履歴を用いて、最新の有意な取得位置からの自動車3の移動距離および移動方向を演算し、GNSSに基づく自動車3の位置を生成する。
また、GNSS受信機25から、有意ではあるが精度の高くない可能性のある位置を取得している場合、ECU44は、その取得位置を、GNSSに基づく自動車3の位置に設定する。
また、GNSS受信機25から、有意であって且つ高精度な位置を取得するようになり始めている場合にも、ECU44は、その取得位置を、GNSSに基づく自動車3の位置に設定する。
ECU44は、GNSS受信機25から今回取得した位置を、高精度地図データ46にマッピングし、そのマッピング位置からの高精度地図データ46での仮想的な画像と、車外カメラ26の撮像画像とが合致するか否かを判断してよい。ECU44は、たとえば電柱68などの立設構造物についての画像中の画角位置が、比較する画像の間で合致するか否かを判断してよい。合致と判断できる場合、ECU44は、GNSS受信機25から取得する今回の位置が現実と整合していると判断して、処理をステップST27へ進める。それ以外の場合、ECU44は、ステップST27へ処理を進めることなく、本制御を終了する。
また、ECU44は、GNSS受信機25から提供される位置情報の誤差範囲の広さが閾値以上であって信頼性が高くないと判断してから所定時間が経過した場合には、車外カメラ26の撮像画像に基づく自動車3の現在位置の生成を開始できる。
このようにECU44は、GNSS受信機25からの位置情報の質を判断し、位置情報の質が高くない状態で所定時間が経過した場合には、車外カメラ26の撮像画像に基づく自動車3の現在位置の生成を開始する。これにより、GNSS受信機25から高精度な位置情報が得られないデットレコグニングの状態が継続している場合には、ECU44は、自動車3の現在位置を、車外カメラ26の撮像画像に基づくものへ切り替えることができる。デットレコグニングの状態が長く続くと、GNSS受信機25のたとえば最後の高精度な位置からの移動量の演算により得られる位置の精度は、低下する可能性がある。
また、ECU44は、GNSS受信機25による自動車3の位置が高精度なものに復帰した後は、その高精度な位置を用いて、高精度な走行制御を実行することができる。
図2の走行制御装置15のECU44は、図6のステップST22において、図7の撮像画像に基づく現在位置生成制御を実行してよい。
ここで、メモリ43は、過去の撮像画像について抽出された立設構造物である電柱68の情報、過去の撮像画像に対応する過去の自動車3の位置、過去の自動車3の位置の後での移動量、などの図7の処理に必要な情報を記録しているものとする。また、メモリ43は、電柱68以外の構造物の情報を、記録していてもよい。移動量は、移動距離および移動方向でよい。
ECU44は、たとえば、メモリ43において過去の情報に付されている記録時刻の情報と、タイマ42の現在時刻との間の経過時間に基づいて、情報の鮮度を判定してよい。
また、ECU44は、メモリ43に記録されている過去の位置と、図5のステップST21で生成するGNSSに基づく位置との離間距離に基づいて、情報の鮮度を判定してよい。
ECU44は、たとえば情報の経過時間が所定の閾値以上であって古い場合、メモリ43の情報を現在位置の生成に使用しないように、処理をステップST33へ進める。情報の経過時間が所定の閾値より短い場合、ECU44は、メモリ43の情報を現在位置の生成に使用するように、処理をステップST34へ進める。
この他にもたとえば、ECU44は、情報の離間距離が所定の閾値以上であって古い場合、メモリ43の情報を現在位置の生成に使用しないように、処理をステップST33へ進める。情報の経過時間が所定の閾値より短い場合、ECU44は、メモリ43の情報を現在位置の生成に使用するように、処理をステップST34へ進める。
本実施形態では、GNSSに基づく位置の確からしさが低下している場合には、単一の撮像画像または複数の撮像画像に基づく位置を自動車3の現在位置とすることにより、自動車3の現在位置について一定の確からしさを確保することができる。
ここでは、高精度地図データ46には、自動車3が走行する道路またはその近くに設けられる構造物の少なくとも位置の情報を含んでいるものとする。高精度地図データ46は、少なくとも自動車3が走行する道路に沿って並べて立設されている複数の電柱68、ポール、その他の立設構造物の位置の情報を含んでいるものとする。
自動車3が走行する道路には、自動車3の車外カメラ26の撮像画像において認識可能なゼブラゾーン62、停止線63、交通マーク64、などの路面描画物が描画される。
自動車3が走行する道路の交差点などには、信号機61、道路標識65が設けられる。
自動車3が走行する道路の近くには、看板66、電柱68などが設けられる。
ECU44は、車外カメラ26の撮像画像を解析して構造物を抽出しようとしたとしても、撮像画像において本来の形状や輪郭が明瞭に撮像されていない構造物については抽出できない可能性がある。
これに対し、信号機61や道路標識65を支えるポール、電柱68などの立設構造物は、降雪や凍結があったとしても、少なくとも一部が、画像にはっきりと撮像され得る。ECU44は、車外カメラ26の撮像画像を解析することにより、電柱68などの立設構造物を抽出することができる。電柱68などの立設構造物は、その他の構造物と比べて、高い確率で抽出可能である。本実施形態では、このような構造物の種類の違いに起因した抽出のし易さの違いを考慮している。本実施形態の高精度地図データ46は、少なくとも自動車3が走行する道路に沿って並べて立設されている複数の電柱68、ポール、その他の立設構造物の位置の情報を含んでいる。
また、ECU44が、過去の撮像画像に基づいて電柱68などの立設構造物を抽出している場合、メモリ43は、その過去に抽出されている電柱68などの立設構造物の情報を記録する。
以下では、撮像画像に撮像されている電柱68を、現在位置の生成に用いる場合を例に説明する。以下の説明は、電柱68以外の立設構造物、その他の構造物であっても同様に適用可能である。
図2の走行制御装置15のECU44は、図7のステップST33において、図8の単一画像位置生成制御を実行してよい。
また、ECU44は、抽出した構造物の種類を電柱68と判定したり、電柱68そのものの特徴を抽出したりしてよい。
車外カメラ26がステレオカメラなどである場合、ECU44は、撮像画像における電柱68の撮像位置や複数の撮像画像の間での視差に基づいて、自車から立設構造物までの相対的な距離を演算する。相対的な距離についての誤差は、車外カメラ26の解像度などにより小さくできる。車外カメラ26が単眼カメラである場合と比べて、ステレオカメラである場合のほうが、誤差が小さくなる。
また、ECU44は、撮像画像における電柱68の撮像位置や複数の撮像画像の間での視差に基づいて、自車の車外カメラ26を基準とした、立設構造物の相対的な方向を演算する。電柱68についての相対的な方向は、自動車3から撮像した画角位置の情報である。
これにより、ECU44は、抽出した電柱68と自動車3との相対位置ベクトルを生成できる。
また、ECU44は、自車からの相対位置ベクトルの位置を、電柱68についてのおよその位置として仮に生成してよい。
ECU44は、車外カメラ26の撮像画像に含まれている電柱68の情報を生成できる。
なお、ECU44は、車外カメラ26の撮像画像とともに、Lidarによる車外の空間情報を用いて、車外カメラ26の撮像画像に含まれている電柱68の情報を生成してもよい。
ECU44は、高精度地図データ46に含まれる複数の電柱68の中から、たとえば、仮に推定可能な自車位置から、相対位置ベクトルの方向にあるものを、高精度地図データ46における抽出した電柱68として同定してよい。
この他にもたとえば、ECU44は、高精度地図データ46に含まれる複数の電柱68の中から、たとえば、電柱68のおおよその位置から最も近いものを、高精度地図データ46における抽出した電柱68として同定してよい。
この他にもたとえば、ECU44は、走行中に車外カメラ26が繰り返しに生成している撮像画像について、電柱68の抽出処理を繰り返し実行してよい。この場合、ECU44は、GNSSに基づく高精度な位置が得られている期間における撮像画像についてその時点で撮像可能な電柱68を正しく同定し続けることができる。このように過去の電柱68について正しく同定し続けている状態で本処理を実行することにより、ECU44は、高精度地図データ46に撮像可能な電柱68が複数で存在する場合でも、処理に係る電柱68を正しく同定することができる。ECU44は、抽出した複数の電柱68の相対的な位置関係に基づいて、高精度地図データ46における今回の電柱68を正しく同定できる。
これにより、ECU44は、高精度地図データ46において、車外カメラ26の最新の撮像画像に含まれている単一の立設構造物として電柱68の位置を同定できる。
ステップST44の第一生成処理において、ECU44は、電柱68と自動車3との相対位置関係(相対距離および相対方向)に基づいて、高精度地図データ46において自動車3を移動させて、第一の自動車94の位置および向きを生成する。
ステップST45の第二生成処理において、ECU44は、電柱68と自動車3との相対距離に基づいて、高精度地図データ46において自動車3を移動させて、第二の自動車95の位置および向きを生成する。
ステップST46の第三生成処理において、ECU44は、ステップST44の第一位置と、ステップST45の第二位置とに基づいて、第三の自動車97の位置および向きを生成する。
ECU44は、基本的に第三の自動車97の位置および向きを、自動車3の現在位置に設定するとよい。
次に、図9から図12を用いて、単一画像位置生成処理の第一生成処理から第三生成処理について、詳しく説明する。
自動車3が実際に走行する道路は三次元空間にあるが、ここでは説明の簡便化のために、X-Yの二次元空間を用いて説明する。
図9には、郊外の道路2を走行する自動車3が示されている。自動車3の左前方には、電柱68が立設している。
GNSSに基づく自動車3の位置(x0,y0)は、高精度地図データ46と対応付け可能なものであればよく、たとえば緯度経度の値でよい。
GNSSに基づく自動車3の向きθ0は、高精度地図データ46と対応付け可能なものであればよく、たとえば地磁気の北を基準とした360度方向の角度でよい。
自動車3から電柱68への相対位置ベクトル(Ld,θd)は、撮像画像やLidar27の空間情報に基づいて生成したものでよい。ここで、Ldは相対距離である。θdは、相対角度である。相対角度は、たとえば自動車3の前を基準とした角度でよい。
図10には、対比のために、郊外の道路2を走行する自動車3および電柱68が破線で示されている。
ECU44は、第一生成制御では、高精度地図データ46で同定した電柱92の位置(x1,y1)を基準として、相対位置ベクトル(Ld,θd)で離れた位置を、第一の自動車94の位置および向き(x10,y10,θ10)として生成する。
この場合、第一の自動車94は、自車センサであるGNSS受信機25により計測される破線の位置から、平行移動したものとなる。
第一生成制御による第一の自動車94の位置は、同定した電柱92から、相対確度θdの方向に、相対距離Ldで離れた位置となる。
第一生成制御による第一の自動車94の向きは、その位置の自動車3から電柱92への方向に対して相対角度θdをなす方向となる。
この場合、ECU44は、同定した立設構造物としての電柱92についての、車外カメラ26の撮像画像における画角位置での向きを保持して、かつ、撮像画像から推定される距離となる位置を、自動車3の現在位置として生成できる。自動車3の現在位置は、電柱92に対する相対位置として実際に近い確からしいものとなる。ただし、自動車3の向きについては、確からしさを高めることができない。
図11には、対比のために、郊外の道路2を走行する自動車3および電柱68が破線で示されている。
ECU44は、第二生成制御では、まず、図11の上部に示すように、自動車3の位置を移動する位置生成処理を実行する。位置生成処理において、ECU44は、高精度地図データ46で同定した電柱92の位置(x1,y1)と、自動車3のGNSSに基づく位置(x0,y0)とを基準として、それらの間の位置を、第二の自動車95の位置として生成する。第二の自動車95の位置は、同定した電柱92の位置から、相対距離Ldで離れた位置としてよい。
次に、ECU44は、自動車3の向きを回転させる向き生成処理により、図11の下部に示すように、第二の自動車95の位置から同定した電柱92へ向かう方向が、撮像画像に基づいて生成した相対角度θdとなる向きを、第二の自動車95の向きとして生成する。
これにより、ECU44は、第二の自動車95の位置および向き(x20,y20,θ20)として生成する。
この場合、ECU44は、第二生成処理として、高精度地図データ46において同定した立設構造物の位置と、補正前の誤差を持っている可能性があるGNSSに基づく仮の位置との間であって、かつ、撮像画像から推定される相対距離Ldとなる位置を、自動車3の現在位置として生成する。この場合、ECU44は、さらに、生成した現在位置において、同定した立設構造物である電柱68についての、車外カメラ26の撮像画像における画角位置θdが得られるように、自動車3の向きを生成できる。
図12には、対比のために、第一の自動車94の位置および向き(x10,y10,θ10)と、第二の自動車95の位置および向き(x20,y20,θ20)とが、破線で示されている。
また、ECU44は、第一の自動車94の向きθ10と、第二の自動車95の向きθ20との間の向きを、第三の自動車97の向きとして生成する。
ここで、第一の自動車94の値と、第二の自動車95の値との重付けの割合は、たとえば0.5:0.5としてよい。この場合、第三の自動車97の値は、第一の自動車94の値と第二の自動車95の値との中間の値となる。
これにより、ECU44は、第三の自動車97の位置および向き(x30,y30,θ30)として生成する。ECU44は、第一生成処理による位置および向きと、第二生成処理による位置および向きとの間となる位置および向きを、第三の自動車97の位置および向き(x30,y30,θ30)として生成できる。
ECU44は、単一画像位置生成処理において、高精度地図データ46において、車外カメラ26の最新の撮像画像に含まれている単一の立設構造物である電柱68の位置を同定する。
そして、ECU44は、メモリ43に記録されている過去の電柱の情報を使用することなく、車外カメラ26の撮像画像における電柱68のみに基づいて、高精度地図データ46における自動車3の現在位置および向きを生成できる。
ECU44は、車外カメラ26の撮像画像における単一の立設構造物である電柱68の相対位置に基づいて、高精度地図データ46における自動車3の現在位置および向きを生成できる。
これにより、ECU44は、メモリ43に記録されている過去の電柱の情報の影響を受けることなく、車外カメラ26の撮像画像に基づいて、確からしい自動車3の現在位置および向きを生成できる。
図2の走行制御装置15のECU44は、図7のステップST34において、図13の複数画像位置生成制御を実行してよい。
これにより、ECU44は、高精度地図データ46において、車外カメラ26の最新の撮像画像に含まれている単一の立設構造物として電柱68の位置と、過去の撮像画像に基づいた電柱68の位置とを、高精度地図データ46において同定できる。
ステップST56の位置生成処理において、ECU44は、今回の撮像画像に基づいて同定した電柱68の位置と、過去の撮像画像に基づいて同定した電柱68の位置とに基づいて、自動車3の位置を生成する。自動車3の位置は、今回の電柱68からの距離が相対距離Ldとなり、過去の電柱68からの距離がステップST54で演算した相対距離となる位置でよい。ECU44は、高精度地図データ46において2つの電柱68および自動車3を頂点とする三角形に基づいて、自動車3に対応する頂点の位置を生成してよい。
ステップST57の向き生成処理において、ECU44は、自動車3の位置から今回の電柱68へ向かう方向が、撮像画像に基づいて生成した相対角度θdとなる向きを、自動車3の向きとして生成する。
これにより、ECU44は、自動車3の位置および向きを生成できる。
次に、図14を用いて、複数画像位置生成処理での位置生成処理について、詳しく説明する。
自動車3が実際に走行する道路は三次元空間にあるが、ここでは説明の簡便化のために、X-Yの二次元空間を用いて説明する。
図14では、図の下から上へ走行する自動車3とともに、車外カメラ26の撮像画像に基づいて同定される第一電柱99と、前回の撮像画像に基づいて同定された第二電柱98と、が示されている。
第一電柱99は、車外カメラ26の最新の撮像画像に含まれている電柱68として、ECU44により今回の処理において同定された電柱である。
第二電柱98は、前回の撮像画像に含まれている電柱68として、ECU44により過去の処理において同定された電柱である。
また、図14では、走行する自動車3が、現在位置において実線で描かれ、過去位置において破線で描かれている。
この場合、ECU44は、自動車3についての、車外カメラ26が最新の画像を撮像した時点での、メモリ43に記録されている過去に同定した第二電柱98からの距離を推定できる。
また、ECU44は、第一電柱99の位置から第二電柱98の位置までの電柱間距離Lmを、高精度地図データ46に基づいて演算する。
また、ECU44は、自動車3の撮像画像に基づいて、仮の現在位置の自動車102の位置から第一電柱99までの相対距離Ldを生成している。
そして、ECU44は、これらを三辺とする三角形に対して三角関数の定理を適用して、自動車3の位置を生成する。
次に、ECU44は、図11の下部で説明したものと同様の向き生成処理処理により、特定した位置の自動車3から同定した第一電柱99へ向かう方向が、撮像画像に基づいて生成した相対角度となる向きを、自動車3の向きとして生成する。ECU44は、車外カメラ26の最新の撮像画像における第一電柱99の画角位置θdを用いて、高精度地図データ46における自動車3の向きを生成する。
これにより、ECU44は、複数の撮像画像に基づいて、自動車3の位置および向きを生成できる。
このように生成した位置は、1つの電柱やポールに基づく上述した位置よりも確からしさが向上する可能性が高い。電柱やポールが円柱形状を基本としている。このため、1つの電柱やポールを撮像しても、そこからの相対的な自車方向は高い精度となり得ない可能性がある。自車の位置は、円柱形状の電柱やポールを中心とした円周上のどの方向の位置かが明確とならない可能性がある。今回のように複数の電柱やポールに基づいて自車の位置を決めることにより、位置の確からしさが向上し得る。
また、この場合、ECU44は、さらに、車外カメラ26の最新の撮像画像における立設構造物の画角位置を用いて、高精度地図データ46における自動車3の向きについても、確からしく生成することができる。
このような複数画像位置生成処理による自動車3の位置および向きは、GNSS受信機25から高精度な位置情報が得られないデットレコグニングの状態が長くなったとしても、自動車3の走行制御に適した確からしいものになり得る。たとえば降雪または凍結している直線的な長い道路または車線をデットレコグニングの状態で走行していても、自動車3は、確からしい現在位置に更新され続けることにより、直線的な長い道路または車線の中央付近を維持して走行し続けることができる。
特に、本実施形態では位置を生成するために同定する立設構造物として、たとえば自動車3が走行する道路に沿って並べて立設されている電柱68その他のポールを少なくとも用いる。このような立設構造物は、看板66などとは異なり、自動車3が走行する道路に沿って広く汎用的に用いられている。また、立設構造物は、路面に描画されているゼブラゾーン62、停止線63、交通マーク64などのように、雪や土などによりその全体が覆われ難い。また、立設構造物は、太陽が低くなる朝や夕方の時間帯においても、少なくとも路面の近くの一部が撮像され得る。その結果、ECU44は、自動車3が走行している場合には、車外カメラ26の撮像画像により立設構造物を撮像し続けることができる。また、ECU44は、撮像画像から、それに含まれている立設構造物の情報を高い確実性で生成し得る。しかも、立設構造物が、自動車3が走行する道路に沿って並べて立設されている特性を有するものである。このため、ECU44は、各立設構造物を撮像するたびに位置を補正することで、自動車3の現在位置として確からしさが維持されているものを生成し続けることができる。
このように本実施形態では、生成される車両位置についての確からしさを向上することができる。
このような情報不足を補うために、本実施形態では、メモリ43に、過去の撮像画像に基づいて生成された電柱68の情報を記録する。ECU44は、車外カメラ26の撮像画像において1つの電柱68の情報しか生成できないとしても、それとともにメモリ43に記録されている過去の電柱68の情報を用いることにより、複数の電柱68の位置に基づく確からしい現在位置を生成することができる。ECU44は、車外カメラ26の撮像画像のみに基づく単一画像位置生成処理だけでなく、過去の電柱68の位置を用いた複数画像位置生成処理を実行することができる。
そして、ECU44は、自動車3の走行状況や、メモリ43に記録されている過去の電柱68の情報などに応じて、単一画像位置生成処理と複数画像位置生成処理の中の一方を、最終的な自動車3の現在位置として選択してよい。
たとえば、メモリ43に記録されている過去の電柱68の情報が閾値以上に古くない場合、または、メモリ43に記録されている過去の電柱68の位置が閾値以上に遠くない場合、ECU44は、複数画像位置生成処理による位置を、最終的な自動車3の現在位置として選択してよい。これに対して、メモリ43に記録されている過去の電柱68の情報が閾値以上に古い場合、または、メモリ43に記録されている過去の電柱68の位置が最新の電柱68の位置から閾値以上に離れていて遠い場合、ECU44は、単一画像位置生成処理による位置を、最終的な自動車3の現在位置として選択してよい。
次に、本発明の第二実施形態について説明する。以下、上述した実施形態との相違点について主に説明する。上述した実施形態と同様の特徴については、上述した実施形態と同一の符号を用いて説明を省略する。
本実施形態では、サーバ装置31が、自動車3の走行を制御する。
図15のサーバ装置31は、通信デバイス51、サーバタイマ52、サーバメモリ53、サーバCPU54、および、これらが接続されるサーババス55、を有する。
サーバタイマ52は、時刻または時間を計測する。サーバタイマ52の時刻は、たとえば不図示のGNSS衛星の電波に基づく時刻により校正されてよい。この場合のサーバタイマ52の時刻は、自動車3の時刻と同期する。
サーバメモリ53は、サーバCPU54が実行するプログラムおよびデータを記録する。サーバメモリ53は、たとえば不揮発性の半導体メモリ、HDD、RAM、などで構成されてよい。
サーバCPU54は、サーバメモリ53に記録されているプログラムを読み込んで実行する。これにより、サーバ制御部が実現される。サーバ制御部としてのサーバCPU54は、サーバ装置31の動作を管理する。サーバ制御部は、自動車3の走行を遠隔的に制御する、車両走行の制御装置として機能し得る。
このように、サーバCPU54は、サーバ装置31において、自動車3の走行を制御するための走行制御情報を生成する走行制御部として機能する。
また、通信デバイス51は、走行制御部により生成される走行制御情報を、自動車3へ送信する。
サーバCPU54は、サーバ装置31の走行制御部として、図16のサーバ走行制御を、繰り返しに実行してよい。
サーバCPU54は、自動車3の現在位置を取得または生成し、その現在位置からの進路を生成する。この際、サーバCPU54は、道路を走行する複数の自動車3をサーバメモリ53に記録されている高精度地図データ46にマッピングし、各自動車3の進路として他の自動車と干渉しない進路を生成するとよい。サーバCPU54は、各自動車3について、各々の進路で安全でスムースな走行を可能にするための走行制御値を生成する。
また、サーバCPU54は、自動車3の現在位置を取得または生成する際に、各自動車3から取得する位置について図5の自動運転の走行制御と同様の処理により判断し、走行制御の現在位置を取得または生成してよい。
この場合、サーバCPU54は、サーバ装置31の走行制御部として、たとえば撮像画像に基づいて生成した現在位置に自動車3が位置するものとして、自動車3の走行制御値を生成することができる。
この他にもたとえば、ECU44は、単一画像位置生成処理において、第一生成処理による自動車3の位置および向きを、自動車3走行制御に用いてもよい。また、ECU44は、単一画像位置生成処理において、第二生成処理による自動車3の位置および向きを、自動車3走行制御に用いてもよい。さらに、ECU44は、これら複数の生成処理による自動車3の位置および向きを、自動車3の走行状況などに応じて切り替えて、自動車3走行制御に用いてもよい。
この他にもたとえば、ECU44は、車外カメラ26の撮像画像のみに基づく単一画像位置生成処理のみを、自動車3走行制御に用いてもよい。または、ECU44は、複数画像位置生成処理のみを、自動車3走行制御に用いてもよい。
この他にもたとえば、ECU44は、道路に沿って立設されている電柱68以外の立設構造物、たとえば道路の近くに設置される看板66などについても、走行制御の基準とする立設構造物の情報として、撮像画像から生成してよい。
また、ECU44は、道路の上の中空に設けられる道路標識65、信号機61などの中空構造物についても、走行制御の基準とする構造物の情報として、撮像画像から生成してよい。
また、ECU44は、道路の路面に描画されているゼブラゾーン62、停止線63、交通マーク64、などの路面描画物についても、走行制御の基準とする構造物の情報として、撮像画像から生成してよい。
このようにECU44は、道路に沿って複数が並べて立設されている立設構造物以外についても、走行制御の基準とする構造物の情報として、撮像画像から生成してよい。ただし、降雪や凍結などといった各種の自動車3の走行状況に対応する場合には、少なくとも自動車3が走行する道路に沿って並べて立設されている複数の電柱68、境界ポール67、その他のポールといった立設体構造物については、走行制御の基準とする構造物の情報として、撮像画像から生成することが望ましい。
図2の走行制御装置15のECU44は、たとえば図8のステップST41や、図13のステップST51において、図17の構造物の選択制御を実行して、その結果として撮像画像から抽出されている電柱を選択してよい。
なお、サーバ装置31のサーバCPU54も、図16のステップST62において、図17の構造物の選択制御を実行して、その結果として撮像画像から抽出されている電柱を選択してよい。
Claims (10)
- 車両が走行する道路に沿って並べて立設されている複数の立設構造物の少なくとも位置の情報を含む地図データを記録するメモリと、
車両の進行方向である前方を撮像する撮像デバイスと、
前記メモリおよび前記撮像デバイスから情報を取得して処理する制御部と、
を有し、
前記メモリは、過去の撮像画像に基づいて生成された立設構造物の情報を記録可能であり、
前記制御部は、
前記撮像デバイスの撮像画像に含まれている立設構造物の情報に基づいて、前記車両の位置を生成するために、前記撮像デバイスの撮像画像に含まれている立設構造物の情報を生成し、生成した立設構造物の位置を前記地図データにおいて同定し、前記地図データにおいて同定する立設構造物の位置と前記撮像画像とに基づいて前記車両の位置を生成する、単一画像位置生成処理と、
前記撮像デバイスの撮像画像に含まれている立設構造物の情報と、前記メモリに記録されている過去の立設構造物の情報とに基づいて、前記車両の位置を生成する複数画像位置生成処理と、
の中から選択した処理により、前記車両の位置を生成する、
車両位置の生成装置。
- 前記地図データには、複数の前記立設構造物の位置の情報として、少なくとも前記車両が走行する道路に沿って並べて立設されている複数の電柱の位置の情報が含まれ、
前記制御部は、
前記撮像デバイスの撮像画像に基づいて、前記撮像画像に含まれている電柱についての、前記車両から撮像した画角位置の情報、前記車両からの相対距離の情報、および、位置の情報、を生成し、
生成されている複数の電柱の相対的な位置関係に基づいて、前記地図データにおける電柱を同定する、
請求項1記載の、車両位置の生成装置。
- 前記メモリは、過去の前記撮像画像に基づいて生成された立設構造物の情報を記録可能であり、
前記制御部は、
前記撮像デバイスの撮像画像に含まれている立設構造物の情報と、前記メモリに記録されている過去の立設構造物の情報とに基づいて、前記車両の位置を生成可能である、
請求項1または2記載の、車両位置の生成装置。
- 前記制御部は、前記単一画像位置生成処理において、
前記地図データにおいて、前記撮像デバイスの撮像画像に含まれている立設構造物の位置を同定し、
前記撮像デバイスの撮像画像における立設構造物の画角位置に基づいて、前記地図データにおける前記車両の位置を生成する、
請求項1から3のいずれか一項記載の、車両位置の生成装置。
- 前記制御部は、前記単一画像位置生成処理において、
同定した立設構造物についての、前記撮像デバイスの撮像画像における画角位置での向きを保持して、かつ、前記撮像画像から推定される距離となる位置を、前記車両の位置として生成する第一生成処理と、
前記地図データにおいて同定した立設構造物の位置と、補正前の前記車両の仮の位置との間であって、かつ、前記撮像画像から推定される距離となる位置を、前記車両の位置として生成し、さらに、生成した位置において、同定した立設構造物についての、前記撮像デバイスの撮像画像における画角位置が得られる、前記車両の向きを生成する第二生成処理と、
前記第一生成処理による位置と、前記第二生成処理による位置との間となる位置を、前記車両についての最終的な位置として生成する第三生成処理と、
の中のいずれか一つの生成処理により、前記地図データにおける前記車両の位置を生成する、
請求項1から4のいずれか一項記載の、車両位置の生成装置。
- 前記制御部は、前記複数画像位置生成処理において、
前記車両についての、前記撮像デバイスが画像を撮像した時点での、前記メモリに記録されている過去の立設構造物からの距離を推定し、
前記地図データにおいて、前記撮像デバイスの撮像画像に含まれている立設構造物の位置と、距離を推定した過去の立設構造物の位置とを同定し、
位置を同定した複数の立設構造物の各々からの距離に基づいて、前記地図データにおける前記車両の位置を生成し、
前記撮像デバイスの撮像画像における立設構造物の画角位置を用いて、前記地図データにおける前記車両の向きを生成する、
請求項1から5のいずれか一項記載の、車両位置の生成装置。
- 前記制御部へ前記車両の位置の情報を提供する位置情報生成デバイス、を有し、
前記制御部は、
前記位置情報生成デバイスから位置情報が提供されないと判断してから所定時間が経過した場合に、または、前記位置情報生成デバイスから提供される位置情報の信頼性が高くないと判断してから所定時間が経過した場合に、前記撮像デバイスの撮像画像に基づく前記車両の位置を生成する、
請求項1から6のいずれか一項記載の、車両位置の生成装置。
- 前記制御部は、
少なくとも、前記位置情報生成デバイスから提供される前記車両の位置またはそれに基づく位置についての、前記地図データにおける同定した立設構造物との相対位置関係が、前記撮像デバイスの撮像画像における、同定した立設構造物の画角位置と整合するようになるまで、
前記撮像デバイスの撮像画像に基づく前記車両の位置を生成する、
請求項7記載の、車両位置の生成装置。
- 請求項1から8のいずれか一項記載の車両位置の生成装置により生成される位置を用いて走行を制御可能な走行制御装置、を有する車両。
- 車両の走行を制御するための走行制御情報を生成する走行制御部と、
前記走行制御部により生成される走行制御情報を、前記車両へ送信する送信デバイスと、を有し、
前記走行制御部は、請求項1から8のいずれか一項記載の車両位置の生成装置により生成される位置に前記車両が位置するものとして、前記走行制御情報を生成する、
サーバ装置。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022051648A JP7828210B2 (ja) | 2022-03-28 | 2022-03-28 | 車両位置の生成装置、車両、および、サーバ装置 |
| US18/179,758 US12472977B2 (en) | 2022-03-28 | 2023-03-07 | Vehicle position generation apparatus, vehicle, and server |
| DE102023106930.6A DE102023106930A1 (de) | 2022-03-28 | 2023-03-20 | Fahrzeugposition-erzeugungsvorrichtung, fahrzeug und server |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022051648A JP7828210B2 (ja) | 2022-03-28 | 2022-03-28 | 車両位置の生成装置、車両、および、サーバ装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023144592A JP2023144592A (ja) | 2023-10-11 |
| JP7828210B2 true JP7828210B2 (ja) | 2026-03-11 |
Family
ID=87930619
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022051648A Active JP7828210B2 (ja) | 2022-03-28 | 2022-03-28 | 車両位置の生成装置、車両、および、サーバ装置 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US12472977B2 (ja) |
| JP (1) | JP7828210B2 (ja) |
| DE (1) | DE102023106930A1 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023187979A1 (ja) * | 2022-03-29 | 2023-10-05 | 日立Astemo株式会社 | 演算処理装置、演算処理方法 |
| JP2025038342A (ja) * | 2023-09-06 | 2025-03-19 | 株式会社三共 | 遊技機 |
| JP2025038344A (ja) * | 2023-09-06 | 2025-03-19 | 株式会社三共 | 遊技機 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20190316929A1 (en) | 2018-04-17 | 2019-10-17 | Faraday&Future Inc. | System and method for vehicular localization relating to autonomous navigation |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011013075A (ja) * | 2009-07-01 | 2011-01-20 | Toyota Infotechnology Center Co Ltd | 車両位置推定システム |
| JP6454726B2 (ja) | 2014-12-08 | 2019-01-16 | 日立オートモティブシステムズ株式会社 | 自車位置推定装置 |
| JP6488913B2 (ja) * | 2015-06-26 | 2019-03-27 | 日産自動車株式会社 | 車両位置判定装置及び車両位置判定方法 |
| JP2018031616A (ja) * | 2016-08-23 | 2018-03-01 | 住友電気工業株式会社 | 位置検出システム、車載装置、中央装置および位置検出プログラム |
| US11592833B2 (en) * | 2018-05-04 | 2023-02-28 | Direct Current Capital LLC | Method for updating a localization map for a fleet of autonomous vehicles |
| JP7136035B2 (ja) * | 2018-08-31 | 2022-09-13 | 株式会社デンソー | 地図生成装置及び地図生成方法 |
| JP7167876B2 (ja) | 2018-08-31 | 2022-11-09 | 株式会社デンソー | 地図生成システム、サーバ、方法 |
| US11828617B2 (en) * | 2019-07-16 | 2023-11-28 | Ulc Technologies, Llc | System and method for asset identification and mapping |
| US12007784B2 (en) * | 2020-03-26 | 2024-06-11 | Here Global B.V. | Method and apparatus for self localization |
| US11465652B2 (en) * | 2020-06-11 | 2022-10-11 | Woven Planet North America, Inc. | Systems and methods for disengagement prediction and triage assistant |
-
2022
- 2022-03-28 JP JP2022051648A patent/JP7828210B2/ja active Active
-
2023
- 2023-03-07 US US18/179,758 patent/US12472977B2/en active Active
- 2023-03-20 DE DE102023106930.6A patent/DE102023106930A1/de active Pending
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20190316929A1 (en) | 2018-04-17 | 2019-10-17 | Faraday&Future Inc. | System and method for vehicular localization relating to autonomous navigation |
Also Published As
| Publication number | Publication date |
|---|---|
| US12472977B2 (en) | 2025-11-18 |
| US20230303116A1 (en) | 2023-09-28 |
| DE102023106930A1 (de) | 2023-09-28 |
| JP2023144592A (ja) | 2023-10-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7828210B2 (ja) | 車両位置の生成装置、車両、および、サーバ装置 | |
| RU2737874C1 (ru) | Способ хранения информации транспортного средства, способ управления движением транспортного средства и устройство хранения информации транспортного средства | |
| EP3770549B1 (en) | Information processing device, movement device, method, and program | |
| KR102425735B1 (ko) | 로드뷰 또는 항공뷰 맵 정보를 이용한 자율주행 방법 및 그 시스템 | |
| KR101901024B1 (ko) | 지도 갱신 판정 시스템 | |
| RU2654502C2 (ru) | Система и способ дистанционного наблюдения за транспортными средствами | |
| US10620317B1 (en) | Lidar-based high definition map generation | |
| CN114729813A (zh) | 用于车辆导航的系统和方法 | |
| CN112400193B (zh) | 行驶环境信息的生成方法、驾驶控制方法、行驶环境信息生成装置 | |
| KR20210025523A (ko) | 정보 처리 장치 및 정보 처리 방법, 컴퓨터 프로그램, 그리고 이동체 장치 | |
| JP6558282B2 (ja) | 自動運転システム | |
| JP7316386B2 (ja) | 電子制御装置および車両制御システム | |
| CN117859041A (zh) | 用于在泊车空间中支持车辆功能的方法和辅助装置和机动车 | |
| CN114111811A (zh) | 一种自动驾驶公交客车的导航控制系统和方法 | |
| JP2022014729A (ja) | 悪環境判定装置、悪環境判定方法 | |
| JP6524956B2 (ja) | 運転支援装置及びセンタ | |
| JP7352331B2 (ja) | 情報処理装置、情報処理方法、および情報処理プログラム | |
| Mei et al. | Development of ‘Intelligent Pioneer’unmanned vehicle | |
| US12461231B2 (en) | Thermal sensor data vehicle perception | |
| JP2021113047A (ja) | 移動体制御装置、移動体制御方法、および、移動体制御装置用プログラム | |
| CN106840177A (zh) | 汽车同步建图与障碍识别方法 | |
| US12449272B2 (en) | Map generation apparatus | |
| JP2025011917A (ja) | 自動駐車制御装置 | |
| US20240418531A1 (en) | Map generation apparatus | |
| US20230182769A1 (en) | Drive assist apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20221223 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20250207 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20250207 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20251016 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20251111 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20260113 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20260203 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20260227 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7828210 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |