JP7371111B2 - 自律走行車のナビゲーション用高精度地図を生成するためのポーズグラフの分散処理 - Google Patents
自律走行車のナビゲーション用高精度地図を生成するためのポーズグラフの分散処理 Download PDFInfo
- Publication number
- JP7371111B2 JP7371111B2 JP2021552969A JP2021552969A JP7371111B2 JP 7371111 B2 JP7371111 B2 JP 7371111B2 JP 2021552969 A JP2021552969 A JP 2021552969A JP 2021552969 A JP2021552969 A JP 2021552969A JP 7371111 B2 JP7371111 B2 JP 7371111B2
- Authority
- JP
- Japan
- Prior art keywords
- pose
- boundary
- subgraph
- node
- subgraphs
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 23
- 238000000034 method Methods 0.000 claims description 153
- 238000005457 optimization Methods 0.000 claims description 142
- 101001031591 Mus musculus Heart- and neural crest derivatives-expressed protein 2 Proteins 0.000 claims 1
- 230000008569 process Effects 0.000 description 90
- 238000001514 detection method Methods 0.000 description 77
- 230000009466 transformation Effects 0.000 description 45
- 239000013598 vector Substances 0.000 description 24
- 230000033001 locomotion Effects 0.000 description 22
- 239000011159 matrix material Substances 0.000 description 20
- 238000012549 training Methods 0.000 description 18
- 238000000844 transformation Methods 0.000 description 16
- 239000010410 layer Substances 0.000 description 13
- 238000005259 measurement Methods 0.000 description 13
- 238000003860 storage Methods 0.000 description 13
- 238000010801 machine learning Methods 0.000 description 12
- 230000009471 action Effects 0.000 description 11
- 230000008859 change Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 238000009826 distribution Methods 0.000 description 8
- 230000004807 localization Effects 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 7
- 238000004590 computer program Methods 0.000 description 7
- 238000013507 mapping Methods 0.000 description 7
- 238000007781 pre-processing Methods 0.000 description 7
- 238000000638 solvent extraction Methods 0.000 description 7
- 230000008901 benefit Effects 0.000 description 6
- 238000004422 calculation algorithm Methods 0.000 description 6
- 238000005192 partition Methods 0.000 description 6
- 238000012552 review Methods 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 238000007792 addition Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 238000001914 filtration Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000000275 quality assurance Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000005070 sampling Methods 0.000 description 4
- 238000012795 verification Methods 0.000 description 4
- 238000012800 visualization Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 3
- 238000013519 translation Methods 0.000 description 3
- 230000014616 translation Effects 0.000 description 3
- 238000010200 validation analysis Methods 0.000 description 3
- 241000282412 Homo Species 0.000 description 2
- 230000003542 behavioural effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 229920001940 conductive polymer Polymers 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000008014 freezing Effects 0.000 description 2
- 238000007710 freezing Methods 0.000 description 2
- 238000009616 inductively coupled plasma Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 239000006227 byproduct Substances 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 238000009828 non-uniform distribution Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000003908 quality control method Methods 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 239000002356 single layer Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0268—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
- G05D1/0274—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means using mapping information stored in a memory device
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/28—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
- G01C21/30—Map- or contour-matching
- G01C21/32—Structuring or formatting of map data
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
- G01C21/3804—Creation or updating of map data
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
- G01C21/3804—Creation or updating of map data
- G01C21/3807—Creation or updating of map data characterised by the type of data
- G01C21/3815—Road data
- G01C21/3819—Road shape data, e.g. outline of a route
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
- G01C21/3804—Creation or updating of map data
- G01C21/3833—Creation or updating of map data characterised by the source of data
- G01C21/3841—Data obtained from two or more sources, e.g. probe vehicles
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/24—Arrangements for determining position or orientation
- G05D1/246—Arrangements for determining position or orientation using environment maps, e.g. simultaneous localisation and mapping [SLAM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/80—Arrangements for reacting to or preventing system or operator failure
- G05D1/81—Handing over between on-board automatic and on-board manual control
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Aviation & Aerospace Engineering (AREA)
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Game Theory and Decision Science (AREA)
- Medical Informatics (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
- Instructional Devices (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
本開示の実施形態は、比較的高い精密さでの最新情報を含む高精度(HD : High Definition)マップの生成および使用に関する。HDマップは、自律走行車が人の手なく、または限定的な人の手有りで、その目的地まで安全にナビゲートするために使用されうる。本開示において、「安全なナビゲーション」とは、ターゲット安全閾値内でナビゲーションを行うことといえる。例えば、ターゲット安全閾値は、無事故での一定の運転時間数としてもよい。当該閾値は自動車メーカーまたは政府機関によって設定される場合もある。さらに、「最新」情報とは、必ずしも絶対的な最新を意味するのではなく、ターゲット時間閾値量内の最新を意味する。例えば、ターゲット時間閾値量は、前週中に発生した車道の任意の潜在的な変化を反映する地図を「最新」と見なせるように、1週間以下にしてもよい。当該ターゲット閾値時間量は、1ヶ月から1分までのいずれかに、または、ことによると、さらにそれ以下に変えてもよい。
図4は、一実施形態による、HDマップシステムのシステムアーキテクチャを示す。オンラインHDマップシステム110は、地図作成モジュール410、地図更新モジュール420、地図データ符号化モジュール(map data encoding module)430、ロードバランシングモジュール(load balancing module)440、地図正確度管理モジュール、車両インターフェースモジュール、およびHDマップストア165を備える。オンラインHDマップシステム110の他の実施形態は、図4に図示するよりも多いモジュールまたは少ないモジュールを含んでもよい。特定のモジュールによって行われると示される機能は、他のモジュールによって実施されてもよい。一実施形態において、オンラインHDマップシステム110は、複数のプロセッサを備える分散型システムとしてもよい。
オンラインHDマップシステム110は、大きな物理的エリアを複数の地理的領域に分割し、各地理的領域の表現を格納する。各地理的領域は、幾何学形状、例えば、方形または正方形によって区切られた連続したエリアを表す。一実施形態において、オンラインHDマップシステム110は、物理的エリアを、各地理的領域の表現を格納するのに必要なデータ量とは関係なく、同じサイズの複数の地理的領域に分割する。別の実施形態では、オンラインHDマップシステム110は、物理的エリアを異なるサイズの複数の地理的領域に分割し、各地理的領域のサイズはその地理的領域を表すために必要な情報量に基づいて決定される。例えば、多数の通りがある人口密集地を表す地理的領域は、通りが非常に少なく人口密度の低いエリアを表す地理的領域と比べて、小さい物理的エリアを表す。したがって、この実施形態では、オンラインHDマップシステム110は、HDマップにとって適切な物理的エリアの様々な要素を格納するために必要な情報量の推定に基づいて、地理的領域のサイズを決定する。
HDマップシステム100は、HDマップ内に通りの車線情報を表す。本明細書で説明される実施形態は通りを参照するが、この手法は、車両が走行できる幹線道路、横道、大街路、大通り、または任意の他の小道に適用できる。HDマップシステム100は、経路設定のため、および車両の自己位置推定のための参照フレームとして車線を使用する。HDマップシステム100で表される車線は、明示的にマーキングされた車線、例えば、白色と黄色の縞の車線、暗示的な車線、例えば、線または縁石はないが2つの走行方向のある田舎道上の車線、車線として機能する暗示的な進路、例えば、ある車線に別の車線から進入するときに向きを変える車が進む進路を含む。HDマップシステム100は、車線に関連した情報、例えば、車線に関連した道路標識および信号灯などのランドマーク特徴、障害物検出のための車線に関連した占有グリッド、および車線に関連したナビゲート可能な空間も格納するため、車両が意図せず車線から出なければならない緊急時に、車両は効率的に計画/反応することができる。したがって、HDマップシステム100は、車線のネットワーク(a network of lanes)の表現を格納して、車両が出発地と目的地との間の合法的な進路を計画し、車両のリアルタイムの感知および制御のための参照のフレームを追加することを可能にする。HDマップシステム100は情報を格納し、車両が現在いる車線、車線形状に対する精密な車両の位置情報、ならびに車線および隣の車線および連結車線に関連した関連特徴/データを車両が判定することを可能にするAPIを提供する。
図9A~図9Bは、一実施形態による、HDマップシステムで使用するための座標系を示す。他の実施形態は他の座標系を使用することができる。
図10は、一実施形態による、HDマップシステムによるLIDAR(またはLiDAR)点群展開のプロセスを示す。LiDARは移動する車両に搭載されている。したがって、LIDARはスキャン(scan)を行いながら移動している。例えば、時速65マイルの走行速度では、10HZでサンプリングするLIDARは各スキャン中に3.5mまで走行することができる。HDマップシステムは、生のLIDARスキャンデータを現実世界と一致する点群に変換するために、LIDARの運動(motion)を補償する。
トラックの集合体(これはGNSS-IMUデータおよびLiDARデータを含む)を与えられたとすると、HDマップシステムはGNSS-IMUデータとLiDARデータとを融合させて、各LiDARフレームについて大域的に整合した車両ポーズ(位置情報および向き)を計算する大域的位置合わせを行う。大域的な車両ポーズを用いて、HDマップシステムは整合性のある、統合された点群として複数のLiDARフレームを併合し(merges)、そこから3D HDマップを構築することができる。
図12Aは、一実施形態による単一トラックペアワイズ位置合わせプロセスを示す。一実施形態において、単一ペアワイズ位置合わせプロセスはペアワイズ位置合わせモジュール1120によって実行される。HDマップシステムは各データ収集データをトラックとして編成する。トラックデータは少なくともGNSS-IMUデータおよびLiDARデータを含む。単一トラック位置合わせは、次のステップを行う事前処理ステップである:(1)単一トラックデータを受信するステップ1205、(1)車両校正変換にLiDARを行うステップ1210、(2)GNSS-IMUデータおよびLiDARデータの同期をこれらのタイムスタンプに基づいて行うステップ1215、(3)固定サンプル、例えば、車が信号灯で停止するときに取得されるサンプルを除去するステップ1220、(4)運動補償のために展開変換を計算するステップ1225、(5)同じトラック内の点群間のペアワイズレジストレーションを計算することによって、ペアワイズ位置合わせを行うステップ1230。HDマップシステムはICP結果フィルタも行う(1235)。
異なるトラックからの複数のLiDARサンプルを併合するために、HDマップシステムは、異なるトラックからの複数のLiDARサンプルについてループ閉じ込みペアワイズ変換を計算する。各非固定サンプルについて、HDマップシステムは、ある半径内で他のトラックから近くの非固定サンプルを探索する。ICP計算のために、関係するサンプルを編成してICPペアのリストにする。各ICPペアは、並列計算フレームワークを介して、独立して計算することができる。各ICPペアについて、ソース点群およびターゲット点群が、まず、それらの対応する展開変換を使用して展開され、次いで点対平面ICPに送られて、それらの相対変換を得る。
多数のトラックからN個のサンプルの集合{サンプルi}と、これらのサンプル間のそれらの相対的変換
一実施形態において、大域的最適化は、ポーズグラフの処理として行うことができる。HDマップシステムは、利用できるすべてのサンプルについて、各サンプルのポーズを表すためにノードを使用する({Vi=xi})。エッジは、ペアワイズ変換であり、ノード間のペアワイズ変換の対応する({Eij={Tij,Ωij}})情報行列である。
上記のポーズグラフ最適化は、ペアワイズ変換による拘束を追加し、そのため、すべてのノードへの任意のグローバル変換は、まだ有効な最適化の解である。一実施形態において、GNSS計測は一般に大域的に整合性があるため、HDマップシステムはポーズをGNSS計測とできるだけよく整合させておく。そのため、HDマップシステムはノードの部分集合(P)を選択し、それらの対応するGNSSポーズとの大域的ポーズ差を低減または最小化する。
HDマップシステムは、正しい収束のために、ポーズグラフの初期化を行う。ポーズグラフ最適化は、多数の局所的最小値が存在することがある非線形最適化である。HDマップシステムは、GNSSポーズを使用して、ポーズグラフ内のすべてのポーズを初期化する。各GNSSポーズはかなりずれていることがあるが、GNSS計測はポーズ誤差に対して大域的束縛(global bound)を与える。ポーズグラフを初期化した後、HDマップシステムは非線形ソルバを使用してポーズグラフ全体を最適化する。
図15は、一実施形態による、ポーズグラフ最適化を行うプロセスを例示するフローチャートを示す。プロセスの様々なステップは、ポーズグラフ最適化モジュール1150およびGNSSポーズ先行処理モジュール1170によって行うことができる。HDマップシステムは、ポーズグラフをポーズグラフストア1180に格納する(1500)。ポーズは車両の位置情報および向きを表す。HDマップシステムはトラックデータを収集し、各トラックデータは経路に沿って運転する車両が収集するセンサデータ、例えば、自律走行車に搭載されているLIDARによって収集される距離画像を表すLIDARフレームを備える。ポーズグラフ内の2つのポーズ間のエッジは、2つの関連するノード、例えば、車両が経路に沿ってセンサデータを収集した連続する位置情報を表すノードを連結する。
従来のICP手法は、大域的最適解に収束することを保証しない。実際、ICPアルゴリズムの初期推測が不良であれば、ICPは局所的最小値にとらわれて、不正確な変換を返す可能性がある。そのため、実施形態は各ICP結果を評価する品質制御方法を使用して、不良なICP結果を除去する。HDマップシステムは、ICP計算中に収集することのできる様々な統計値に基づいて、ICP結果に自動QA方法を使用する。
大域的位置合わせの分散実行
広大な地理的領域、例えば、大都市をカバーする地図を作成するためには、ポーズグラフは膨大な数のエッジを有する数十億個のサンプルを含有するかもしれない。1台のコンピューティングマシンでポーズグラフの最適化を行うことはほぼ不可能である。HDマップシステムの実施形態は、大きなポーズグラフを最適化するための分散型方法を実施する。
HDマップシステムは、構造化されて最適化されるポーズグラフにトラックのデータの増分追加を可能にする。これにより、ポーズグラフおよびそのHDマップへの組み込みの定期的な更新が可能となる。
図22は、トラック{Track1,Track2,…,TrackN}を含む既存のポーズグラフG0を示す。新たなトラックの集合は、新たなトラックが収集された後にグラフG0に追加され、HDマップシステムはこれらMnew個のトラック{TrackN+1,TrackN+2,…,TrackN+M}を既存のポーズグラフに追加して、N+M個のすべてのトラックを含む新たなポーズグラフGを得る。
ポーズグラフの品質のために、HDマップシステムによって生成された最適化ポーズは、ポーズグラフ内のすべてのノードについて正確ではない場合がある。ときどき、ループ閉じ込みエッジがないため、または誤ったICPエッジが挿入されているために、最適化の結果が小さな領域で不正確な場合がある。この場合、HDマップシステムはユーザ、例えば、人のオペレータからの入力を受信する。受信した入力は問題のある領域に緯度/経度バウンディングボックスを用いてタグ付けする。その後、緯度/経度バウンディングボックスの中のポーズグラフの部分が、例えば手動で、固定される(fixed)。
HDマップシステムは、近くにある2つのサンプル間の相対的ペアワイズ変換を計算する。2つの点群が与えられるとすると、HDマップシステムは点対平面ICP(すなわち、反復最接近点)プロセスを使用して、情報行列を使用して表される、それらの相対的変換および対応する信頼度推定を得るが、これは共分散行列の逆行列である。
HDマップシステムが大域的位置合わせを行った後、さらなる分析、例えば、人によるまたは自動化ツールを使用した品質保証が必要となりうる潜在的な位置合わせ問題が存在することがよくある。人または自動化ツールは、位置合わせデータの改善のために、入力をさらに提供することができるであろう。しかし、大きなエリアをカバーするHDマップに存在するデータ量は膨大である。その結果、例えば、人のオペレータを使用して地図全体の品質保証をすることによって、地図全体の詳細なフォローアップ分析を行うことは現実的ではない。HDマップシステムの実施形態は、位置合わせ問題のある領域を自動的に特定する自動位置ずれホットスポット検出プロセスを実施する。したがって、フォローアップ分析は、HDマップ全体ではなく、特定されたホットスポットのみに行われる。これによりHDマップを仕上げるプロセスの効率を改善するとともに、結果の品質を改善する。例えば、HDマップは、経路に沿って運転している車両に提供することができるように、閾値時間量内に仕上げる必要がある場合がある。HDマップの検証および仕上げのプロセスに非常に長い時間がかかる場合、様々な自律走行車から受信される更新によるHDマップの変更を、経路に沿って運転している他の車両に伝播することはできない。実施形態は、HDマップの検証および品質保証のプロセスをより効率的にすることができ、これにより、HDマップが様々な経路に沿って運転する後続車両に間に合うように提供されることを可能にする。
図30は、一実施形態による、位置ずれホットスポットの自動検出に基づいて、高精度地図を生成するプロセスを示す。一実施形態において、図30に図示される様々なステップは、オンラインHDマップシステム110、例えば、大域的位置合わせモジュール460によって行われる。他の実施形態では、プロセスのステップのいくつかを、車両コンピューティングシステム120によって行ってもよい。
以下は、本明細書において、ポーズグラフに関して使用される表記である。
大規模なマッピングの場合、車両ポーズの数が非常に大きくなる可能性がある。そのため、最適化するポーズグラフは極めて大きく、例えば、数十億個のエッジをもつ数千万個のノードとなる可能性がある。このように、非常に大きいポーズグラフをすべてまとめて最適化することは、非現実的であるか、または難しい場合がある。例えば、1台のプロセッサマシンを使用して大きなポーズグラフを最適化するには、処理するノード数を考えると、多量の時間がかかりうる。
分散型ポーズグラフ最適化は、分割統治法戦略(divide-and-conquer strategy)を使用することができる。オリジナルのポーズグラフ(これは比較的大きくてもよい)を与えられるとすると、HDマップシステムはオリジナルのポーズグラフをサブグラフの集合に細分し、オリジナルポーズグラフの収束に到達するまで、(例えば、上記説明したポーズグラフ最適化式を使用して)ポーズサブグラフに関する最適化動作を繰り返し行う。最適化動作の反復でノードポーズになされる変化の各々が閾値量未満になることに応答して、収束に到達したと判定することができる。本開示では、任意のタイプのポーズグラフ(例えば、フルポーズグラフまたはポーズグラフの任意のサブグラフ)「の最適化」または「を最適化する」とは、収束のターゲットレベルが満たされるまで、最適化手順を行うことといえる。そのため、「グラフの最適化」、「グラフを最適化する」、または「最適化されたグラフ」とは、グラフができる限り「最適化される」ことを意味するのではなく、最適化の閾値レベルまで「最適化される」ことを意味し、これは収束の閾値レベルに基づいていてもよい。また、「オリジナルのポーズグラフ」とは、ポーズグラフ全体とポーズグラフ全体の細分化された部分(例えば、以下に説明されるサブグラフ)とを区別することのみが意図される。そのため、「オリジナルの」という用語は単にポーズグラフ全体を示すことが意図され、ポーズグラフが細分化動作などの任意の種類の動作を受けていないことを意味するのではない。
いくつかの実施形態において、HDマップシステムは、オリジナルの大規模なポーズグラフをポーズサブグラフの集合に分割することができる。ポーズグラフをより小さなポーズサブグラフに分割する方法はたくさんあるが、全体的なプロセスは細分化方法とは独立している。例示的な細分化方法は、地理空間バウンディングボックスにより分割すること、グラフカットにより分割すること、例えば、主要幹線道路に沿ってグラフを切断すること等を含むことができる。異なるグラフ細分化方法は異なる収束率をもつかもしれないが、様々な実施形態によって使用される最適化戦略は同じ働きをする。
境界グラフ(Boundary Graph)
ポーズサブグラフに加えて、HDマップシステムは境界グラフを特定することができる。以下さらに詳細に述べるように、収束率の改善により、境界グラフの特定および使用が、オリジナルのポーズグラフの全体的な最適化を可能にする。
いくつかの実施形態において、境界グラフは多数の境界サブグラフに分割することができる。境界サブグラフはオリジナルのポーズグラフのサブグラフと考えられるので、それを「ポーズサブグラフ」と考えることができる。しかし、本開示において、説明および上記説明したサブグラフと境界サブグラフとの区別をしやすくするのを助けるために、上記「ポーズサブグラフ」のセクションで説明したオリジナルのポーズグラフの分割の結果であるサブグラフに関しては、「ポーズサブグラフ」という用語を使用し、境界グラフのサブグラフでありうるサブグラフに関しては「境界サブグラフ」という用語を使用する。また、「サブグラフ」という総称は、ポーズサブグラフおよび/または境界サブグラフを含む場合がある。
境界グラフのこのディスジョイントの性質(disjointed nature)は、HDマップシステムが、境界グラフの各連結成分を境界サブグラフにするだけで、境界グラフを複数の境界サブグラフに分割することを可能にする。いくつかの実施形態において、他のサブグラフに関して行われる最適化動作と連動して、境界サブグラフに関する最適化動作を行うことができる。
いくつかの実施形態において、ポーズグラフの最適化は、以下のような1つまたは複数の動作を含むことができる:
●ベクトルのポーズグラフのすべてのノードポーズ(all node poses of the pose graph in a vector):all_node_posesを記憶し、
●収束するまでループする
○ポーズサブグラフの内部ノードポーズを、互いに並列で、その境界ノードを固定して、最適化する
○境界サブグラフの内部ノードを、互いに並列で、その境界ノードを固定して、最適化する
○収束をチェックする
・すべてのノードポーズの変化が閾値よりも小さい場合、収束に到達する。
最適化プロセスは、分散型システム、例えば、マップリデュースフレームワーク(map-reduce framework)に上手く結びつけることができる。適切な量の計算資源および記憶資源があれば、この最適化フレームワークを使用して、任意のサイズのポーズグラフを最適化することができる。
2.すべてのノードポーズを更新し、収束を期待する
上記示したように、境界グラフおよびその対応する境界サブグラフの使用は最適化プロセスを改善しうる。例えば、境界グラフ(および対応するサブグラフ)の使用を省いた最適化プロセスは、プロセスの収束を妨げうる問題、または収束の遅れを引き起こしうる問題を有する場合がある。
図43は、1つまたは複数のマシン可読記憶媒体からの命令を読み取り、プロセッサ(またはコントローラ)でそれを実行することのできる例示的なマシンの構成要素を例示するブロック図である。具体的には、図43は、本明細書で述べた方法論の任意の1つまたは複数をマシンに行わせるための複数の命令4324(例えば、ソフトウェア)が実行されうるコンピュータシステム4300の例示的な形態で、マシンの図表示を示す。代替実施形態において、マシンはスタンドアロンデバイスとして作動し、または他のマシンに接続(例えば、ネットワーク化)することができる。ネットワーク化された配置において、マシンは、サーバ・クライアントネットワーク環境ではサーバマシンまたはクライアントマシンの能力で、またはピア・トゥ・ピア(peer-to-peer)(または分散型)ネットワーク環境ではピアマシンとして作動することができる。
以上の本開示の実施形態の説明は例示の目的で提示してきたが、網羅的なものであることも、または開示されるそのままの形態に本開示を制限することも意図していない。当業者は、上記開示を鑑みて、多くの修正または変型が可能であることを認識することができる。
Claims (27)
- 1つまたは複数の処理装置によって実施される方法であって、
複数のノードを備えるポーズグラフを取得するステップであって、前記ポーズグラフの前記複数のノードの個々のノードは、複数の車両の対応する車両のそれぞれのポーズを表し、前記それぞれのポーズは、前記対応する車両の地理的位置情報および前記対応する車両の向きを備える、ステップと、
前記ポーズグラフを複数のポーズサブグラフに分割するステップであって、前記複数のポーズサブグラフの個々のポーズサブグラフは、1つまたは複数のそれぞれのポーズサブグラフ内部ノードおよび1つまたは複数のそれぞれのポーズサブグラフ境界ノードを備える、ステップと、
前記複数のポーズサブグラフに基づいて1つまたは複数の境界サブグラフを取得するステップであって、前記1つまたは複数の境界サブグラフの個々の境界サブグラフは、1つまたは複数のそれぞれの境界サブグラフ境界ノードおよびそれぞれのポーズサブグラフ境界ノードである1つまたは複数のそれぞれの境界サブグラフ内部ノードを備える、ステップと、
前記複数のポーズサブグラフおよび前記1つまたは複数の境界サブグラフに基づいて、ポーズグラフ最適化を行うことによって更新されたポーズグラフを取得するステップと、
前記更新されたポーズグラフに基づいて、前記複数の車両によって取得されるそれぞれの地図情報を位置合わせするステップと、
前記位置合わせされた地図情報を使用して、高精度地図を生成するステップと
を含む、方法。 - 前記更新されたポーズグラフを取得するステップは、前記ポーズグラフが収束したと判定するまで、前記ポーズグラフ最適化を繰り返し行うことを含む、請求項1に記載の方法。
- 前記更新されたポーズグラフを取得するステップは、前記ポーズサブグラフの前記ポーズサブグラフ内部ノードおよび前記境界サブグラフの前記境界サブグラフ内部ノードのすべての調整が、閾値量よりも小さくなるまで、前記ポーズグラフ最適化を繰り返し行うことを含む、請求項1に記載の方法。
- 前記更新されたポーズグラフを取得するステップは、前記ポーズグラフ最適化を繰り返し行うことを含み、個々の繰り返しについて、ポーズサブグラフ最適化および境界サブグラフ最適化が逐次行われる、請求項1に記載の方法。
- 前記ポーズグラフ最適化は、前記複数のポーズサブグラフのポーズサブグラフ最適化を実施することを含み、前記ポーズサブグラフ最適化は並列で実施され、2つ以上のポーズサブグラフに関して最適化動作が同時に行われる、請求項1に記載の方法。
- 前記ポーズサブグラフ最適化の前記並列の実施は、複数のコンピュータシステムによって分散方式で行われる、請求項5に記載の方法。
- それぞれのポーズは、前記対応する車両の1つまたは複数のセンサがそれぞれの地図情報を取得する時点に対応する、請求項1に記載の方法。
- 前記ポーズグラフ最適化は、
それぞれのポーズサブグラフ境界ノードの境界ノードポーズを固定したままで、前記それぞれのポーズサブグラフ内部ノードの内部ノードポーズを調整することを含む、前記複数のポーズサブグラフのポーズサブグラフ最適化を行うこと、および
前記それぞれの境界サブグラフ境界ノードの境界ノードポーズを固定したままで、前記それぞれの境界サブグラフ内部ノードの内部ノードポーズを調整することを含む、前記1つまたは複数の境界サブグラフの境界サブグラフ最適化を行うこと
を含む、請求項1に記載の方法。 - 前記1つまたは複数の境界サブグラフのそれぞれの境界サブグラフを取得するステップは、
前記複数のポーズサブグラフの第1ポーズサブグラフの第1境界ノードを、前記それぞれの境界サブグラフの第1内部ノードとして特定すること、
前記複数のポーズサブグラフの第2ポーズサブグラフの第2境界ノードを、前記それぞれの境界サブグラフの第2内部ノードとして特定すること、
前記第1境界ノードが前記それぞれの境界サブグラフの前記第1内部ノードから離れた特定の数のエッジであることに基づいて、前記それぞれの境界サブグラフの前記第1境界ノードを特定すること、および
前記第2境界ノードが前記それぞれの境界サブグラフの前記第2内部ノードから離れた前記特定の数のエッジであることに基づいて、前記それぞれの境界サブグラフの前記第2境界ノードを特定すること
を含む、請求項1に記載の方法。 - 動作を実施するための1つまたは複数の回路を備えるプロセッサであって、前記動作は、
複数のノードを備えるポーズグラフを取得するステップであって、前記ポーズグラフの前記複数のノードの個々のノードは、複数の車両の対応する車両のそれぞれのポーズを表し、前記それぞれのポーズは、前記対応する車両の地理的位置情報および前記対応する車両の向きを備える、ステップと、
前記ポーズグラフを複数のポーズサブグラフに分割するステップであって、前記複数のポーズサブグラフの個々のポーズサブグラフは、1つまたは複数のそれぞれのポーズサブグラフ内部ノードおよび1つまたは複数のそれぞれのポーズサブグラフ境界ノードを備える、ステップと、
前記複数のポーズサブグラフに基づいて1つまたは複数の境界サブグラフを生成するステップであって、前記1つまたは複数の境界サブグラフの個々の境界サブグラフは、1つまたは複数のそれぞれの境界サブグラフ境界ノードおよび1つまたは複数のそれぞれの境界サブグラフ内部ノードを備える、ステップと、
前記複数のポーズサブグラフおよび前記1つまたは複数の境界サブグラフに基づいて、ポーズグラフ最適化を行うことによって更新されたポーズグラフを取得するステップと、
前記更新されたポーズグラフに基づいて、前記複数の車両によって取得されるそれぞれの地図情報を位置合わせするステップと、
前記位置合わせされた地図情報を使用して、高精度地図を生成するステップと
を含む、プロセッサ。 - 前記更新されたポーズグラフを取得するステップは、前記ポーズグラフが収束したと判定するまで、前記ポーズグラフ最適化を繰り返し行うことを含む、請求項10に記載のプロセッサ。
- 前記更新されたポーズグラフを取得するステップは、前記ポーズサブグラフの前記ポーズサブグラフ内部ノードおよび前記境界サブグラフの前記境界サブグラフ内部ノードのすべての調整が、閾値量よりも小さくなるまで、前記ポーズグラフ最適化を繰り返し行うことを含む、請求項10に記載のプロセッサ。
- 前記更新されたポーズグラフを取得するステップは、前記ポーズグラフ最適化を繰り返し行うことを含み、個々の繰り返しについて、ポーズサブグラフ最適化および境界サブグラフ最適化が逐次行われる、請求項10に記載のプロセッサ。
- 前記ポーズグラフ最適化は、前記複数のポーズサブグラフのポーズサブグラフ最適化を実施することを含み、前記ポーズサブグラフ最適化は並列で実施され、2つ以上のポーズサブグラフに関して最適化動作が同時に行われる、請求項10に記載のプロセッサ。
- 前記ポーズサブグラフ最適化の前記並列の実施は、複数のコンピュータシステムによって分散方式で行われる、請求項14に記載のプロセッサ。
- それぞれのポーズは、前記対応する車両の1つまたは複数のセンサがそれぞれの地図情報を取得する時点に対応する、請求項10に記載のプロセッサ。
- 前記ポーズグラフ最適化は、
それぞれのポーズサブグラフ境界ノードの境界ノードポーズを固定したままで、前記それぞれのポーズサブグラフ内部ノードの内部ノードポーズを調整することを含む、前記複数のポーズサブグラフのポーズサブグラフ最適化を行うこと、および
前記それぞれの境界サブグラフ境界ノードの境界ノードポーズを固定したままで、前記それぞれの境界サブグラフ内部ノードの内部ノードポーズを調整することを含む、前記1つまたは複数の境界サブグラフの境界サブグラフ最適化を行うこと
を含む、請求項10に記載のプロセッサ。 - 前記1つまたは複数の境界サブグラフのそれぞれの境界サブグラフを生成するステップは、
前記複数のポーズサブグラフの第1ポーズサブグラフの第1境界ノードを、前記それぞれの境界サブグラフの第1内部ノードとして特定すること、
前記複数のポーズサブグラフの第2ポーズサブグラフの第2境界ノードを、前記それぞれの境界サブグラフの第2内部ノードとして特定すること、
前記第1境界ノードが前記それぞれの境界サブグラフの前記第1内部ノードから離れた特定の数のエッジであることに基づいて、前記それぞれの境界サブグラフの前記第1境界ノードを特定すること、および
前記第2境界ノードが前記それぞれの境界サブグラフの前記第2内部ノードから離れた前記特定の数のエッジであることに基づいて、前記それぞれの境界サブグラフの前記第2境界ノードを特定すること
を含む、請求項10に記載のプロセッサ。 - 動作を実施するための1つまたは複数の処理装置を備えるシステムであって、前記動作は、
複数のノードを備えるポーズグラフを取得するステップであって、前記ポーズグラフの前記複数のノードの個々のノードは、複数の車両の対応する車両のそれぞれのポーズを表し、前記それぞれのポーズは、前記対応する車両の地理的位置情報および前記対応する車両の向きを備える、ステップと、
前記ポーズグラフを複数のポーズサブグラフに分割するステップであって、前記複数のポーズサブグラフの個々のポーズサブグラフは、1つまたは複数のそれぞれのポーズサブグラフ内部ノードおよび1つまたは複数のそれぞれのポーズサブグラフ境界ノードを備える、ステップと、
前記複数のポーズサブグラフに基づいて1つまたは複数の境界サブグラフを取得するステップであって、前記1つまたは複数の境界サブグラフの個々の境界サブグラフは、1つまたは複数のそれぞれの境界サブグラフ境界ノードおよびそれぞれのポーズサブグラフ境界ノードである1つまたは複数のそれぞれの境界サブグラフ内部ノードを備える、ステップと、
前記複数のポーズサブグラフおよび前記1つまたは複数の境界サブグラフに基づいて、
ポーズグラフ最適化を行うことによって更新されたポーズグラフを取得するステップと、
前記更新されたポーズグラフに基づいて、前記複数の車両によって取得されるそれぞれの地図情報を位置合わせするステップと、
前記位置合わせされた地図情報を使用して、高精度地図を生成するステップと
を含む、システム。 - 前記更新されたポーズグラフを取得するステップは、前記ポーズグラフが収束したと判定するまで、前記ポーズグラフ最適化を繰り返し行うことを含む、請求項19に記載のシステム。
- 前記更新されたポーズグラフを取得するステップは、前記ポーズサブグラフの前記ポーズサブグラフ内部ノードおよび前記境界サブグラフの前記境界サブグラフ内部ノードのすべての調整が、閾値量よりも小さくなるまで、前記ポーズグラフ最適化を繰り返し行うことを含む、請求項19に記載のシステム。
- 前記更新されたポーズグラフを取得するステップは、前記ポーズグラフ最適化を繰り返し行うことを含み、個々の繰り返しについて、ポーズサブグラフ最適化および境界サブグラフ最適化が逐次行われる、請求項19に記載のシステム。
- 前記ポーズグラフ最適化は、前記複数のポーズサブグラフのポーズサブグラフ最適化を実施することを含み、前記ポーズサブグラフ最適化は並列で実施され、2つ以上のポーズサブグラフに関して最適化動作が同時に行われる、請求項19に記載のシステム。
- 前記ポーズサブグラフ最適化の前記並列の実施は、複数のコンピュータシステムによって分散方式で行われる、請求項23に記載のシステム。
- それぞれのポーズは、前記対応する車両の1つまたは複数のセンサがそれぞれの地図情報を取得する時点に対応する、請求項19に記載のシステム。
- 前記ポーズグラフ最適化は、
それぞれのポーズサブグラフ境界ノードの境界ノードポーズを固定したままで、前記それぞれのポーズサブグラフ内部ノードの内部ノードポーズを調整することを含む、前記複数のポーズサブグラフのポーズサブグラフ最適化を行うこと、および
前記それぞれの境界サブグラフ境界ノードの境界ノードポーズを固定したままで、前記それぞれの境界サブグラフ内部ノードの内部ノードポーズを調整することを含む、前記1つまたは複数の境界サブグラフの境界サブグラフ最適化を行うこと
を含む、請求項19に記載のシステム。 - 前記1つまたは複数の境界サブグラフのそれぞれの境界サブグラフを取得するステップは、
前記複数のポーズサブグラフの第1ポーズサブグラフの第1境界ノードを、前記それぞれの境界サブグラフの第1内部ノードとして特定すること、
前記複数のポーズサブグラフの第2ポーズサブグラフの第2境界ノードを、前記それぞれの境界サブグラフの第2内部ノードとして特定すること、
前記第1境界ノードが前記それぞれの境界サブグラフの前記第1内部ノードから離れた特定の数のエッジであることに基づいて、前記それぞれの境界サブグラフの前記第1境界ノードを特定すること、および
前記第2境界ノードが前記それぞれの境界サブグラフの前記第2内部ノードから離れた前記特定の数のエッジであることに基づいて、前記それぞれの境界サブグラフの前記第2境界ノードを特定すること
を含む、請求項19に記載のシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201962813842P | 2019-03-05 | 2019-03-05 | |
US62/813,842 | 2019-03-05 | ||
PCT/US2020/021293 WO2020181153A1 (en) | 2019-03-05 | 2020-03-05 | Distributed processing of pose graphs for generating high definition maps for navigating autonomous vehicles |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022524069A JP2022524069A (ja) | 2022-04-27 |
JP7371111B2 true JP7371111B2 (ja) | 2023-10-30 |
Family
ID=72335135
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021552969A Active JP7371111B2 (ja) | 2019-03-05 | 2020-03-05 | 自律走行車のナビゲーション用高精度地図を生成するためのポーズグラフの分散処理 |
Country Status (5)
Country | Link |
---|---|
US (2) | US11512964B2 (ja) |
EP (1) | EP3935524A4 (ja) |
JP (1) | JP7371111B2 (ja) |
CN (1) | CN113906414A (ja) |
WO (1) | WO2020181153A1 (ja) |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11403816B2 (en) * | 2017-11-30 | 2022-08-02 | Mitsubishi Electric Corporation | Three-dimensional map generation system, three-dimensional map generation method, and computer readable medium |
KR102233260B1 (ko) * | 2018-10-02 | 2021-03-29 | 에스케이텔레콤 주식회사 | 정밀 지도 업데이트 장치 및 방법 |
US11781875B2 (en) * | 2019-08-21 | 2023-10-10 | Toyota Motor Engineering & Manufacturing North America, Inc. | Apparatus and method for forming and analyzing connected roads |
US11668798B2 (en) * | 2019-11-14 | 2023-06-06 | Nio Technology (Anhui) Co., Ltd. | Real-time ground surface segmentation algorithm for sparse point clouds |
RU2764708C1 (ru) * | 2020-01-20 | 2022-01-19 | Общество с ограниченной ответственностью "Яндекс Беспилотные Технологии" | Способы и системы для обработки данных лидарных датчиков |
US11860315B2 (en) | 2020-01-20 | 2024-01-02 | Direct Cursus Technology L.L.C | Methods and systems for processing LIDAR sensor data |
EP4118632A4 (en) * | 2020-03-13 | 2024-02-21 | Brain Corporation | SYSTEMS AND METHODS FOR ROUTE SYNCHRONIZATION FOR ROBOTIC DEVICES |
US20210373138A1 (en) * | 2020-05-29 | 2021-12-02 | GM Global Technology Operations LLC | Dynamic lidar alignment |
US20200326721A1 (en) * | 2020-06-26 | 2020-10-15 | Intel Corporation | Occupancy verification device and method |
US20210404814A1 (en) * | 2020-06-30 | 2021-12-30 | Lyft, Inc. | Map Generation Using Two Sources of Sensor Data |
CN112699700B (zh) * | 2020-12-15 | 2022-08-19 | 福建汉特云智能科技有限公司 | 一种基于射频技术的智能机器人定位系统及方法 |
CN112559664A (zh) * | 2020-12-16 | 2021-03-26 | 北京嘀嘀无限科技发展有限公司 | 更新地图数据的方法、装置、设备和存储介质 |
US11238643B1 (en) * | 2020-12-16 | 2022-02-01 | Pony Ai Inc. | High-definition city mapping |
CN112833876B (zh) * | 2020-12-30 | 2022-02-11 | 西南科技大学 | 一种融合里程计与uwb的多机器人协作定位方法 |
CN112912894B (zh) * | 2021-02-07 | 2022-08-09 | 华为技术有限公司 | 道路边界识别方法和装置 |
WO2021178980A1 (en) * | 2021-04-28 | 2021-09-10 | Innopeak Technology, Inc | Data synchronization and pose prediction in extended reality |
US20230016578A1 (en) * | 2021-07-19 | 2023-01-19 | Embark Trucks, Inc. | Dynamically modifiable map |
CN113776543B (zh) * | 2021-07-27 | 2023-11-28 | 武汉中海庭数据技术有限公司 | 一种车辆融合定位方法、系统、电子设备及存储介质 |
JP2023019326A (ja) * | 2021-07-29 | 2023-02-09 | キヤノン株式会社 | 情報処理装置、情報処理方法およびプログラム |
US12056900B2 (en) * | 2021-08-27 | 2024-08-06 | MFTB Holdco, Inc. | Automated mapping information generation from analysis of building photos |
US11915436B1 (en) * | 2021-08-30 | 2024-02-27 | Zoox, Inc. | System for aligning sensor data with maps comprising covariances |
US11993283B2 (en) * | 2021-08-31 | 2024-05-28 | Toyota Motor Engineering & Manufacturing North America, Inc. | System and method for performing graph imputation |
CN113885046B (zh) * | 2021-09-26 | 2024-06-18 | 天津大学 | 针对低纹理车库的智能网联汽车激光雷达定位系统及方法 |
CN113886605A (zh) * | 2021-10-25 | 2022-01-04 | 支付宝(杭州)信息技术有限公司 | 一种知识图谱处理方法和系统 |
CN114419187B (zh) * | 2021-12-23 | 2023-02-24 | 北京百度网讯科技有限公司 | 地图构建方法、装置、电子设备和可读存储介质 |
CN114840703B (zh) * | 2022-03-30 | 2024-10-01 | 高德软件有限公司 | 位姿信息获取方法、装置、设备、介质及产品 |
US12085407B2 (en) * | 2022-05-12 | 2024-09-10 | Microsoft Technology Licensing, Llc. | Updating a 3D map of an environment |
CN117207199B (zh) * | 2023-11-08 | 2024-03-22 | 北京星河动力装备科技有限公司 | 太空机械臂控制方法、装置、系统、电子设备和存储介质 |
CN118397449A (zh) * | 2024-04-19 | 2024-07-26 | 浙江大学 | 一种基于aigc的可控分级道路拓扑生成系统和方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005032196A (ja) | 2003-07-11 | 2005-02-03 | Japan Science & Technology Agency | 移動ロボット用経路計画システム |
US20180188040A1 (en) | 2016-12-30 | 2018-07-05 | DeepMap Inc. | Distributed processing of pose graphs for generating high definition maps for navigating autonomous vehicles |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9734608B2 (en) | 2015-07-30 | 2017-08-15 | Microsoft Technology Licensing, Llc | Incremental automatic layout of graph diagram for disjoint graphs |
DE102016211805A1 (de) | 2015-10-09 | 2017-04-13 | Volkswagen Aktiengesellschaft | Fusion von Positionsdaten mittels Posen-Graph |
US20200182623A1 (en) * | 2018-12-10 | 2020-06-11 | Zebra Technologies Corporation | Method, system and apparatus for dynamic target feature mapping |
WO2020139377A1 (en) * | 2018-12-28 | 2020-07-02 | Didi Research America, Llc | Interface for improved high definition map generation |
-
2020
- 2020-03-05 WO PCT/US2020/021293 patent/WO2020181153A1/en unknown
- 2020-03-05 EP EP20766056.4A patent/EP3935524A4/en active Pending
- 2020-03-05 US US16/810,796 patent/US11512964B2/en active Active
- 2020-03-05 JP JP2021552969A patent/JP7371111B2/ja active Active
- 2020-03-05 CN CN202080033125.8A patent/CN113906414A/zh active Pending
-
2022
- 2022-11-21 US US18/057,619 patent/US12117298B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005032196A (ja) | 2003-07-11 | 2005-02-03 | Japan Science & Technology Agency | 移動ロボット用経路計画システム |
US20180188040A1 (en) | 2016-12-30 | 2018-07-05 | DeepMap Inc. | Distributed processing of pose graphs for generating high definition maps for navigating autonomous vehicles |
Also Published As
Publication number | Publication date |
---|---|
US11512964B2 (en) | 2022-11-29 |
US12117298B2 (en) | 2024-10-15 |
CN113906414A (zh) | 2022-01-07 |
US20200284590A1 (en) | 2020-09-10 |
EP3935524A1 (en) | 2022-01-12 |
WO2020181153A1 (en) | 2020-09-10 |
US20230083343A1 (en) | 2023-03-16 |
JP2022524069A (ja) | 2022-04-27 |
EP3935524A4 (en) | 2022-12-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7371111B2 (ja) | 自律走行車のナビゲーション用高精度地図を生成するためのポーズグラフの分散処理 | |
US11162788B2 (en) | Classification of surfaces as hard/soft for combining data captured by autonomous vehicles for generating high definition maps | |
US11353589B2 (en) | Iterative closest point process based on lidar with integrated motion estimation for high definition maps | |
US20240005167A1 (en) | Annotating high definition map data with semantic labels | |
US11727272B2 (en) | LIDAR-based detection of traffic signs for navigation of autonomous vehicles | |
US11340355B2 (en) | Validation of global navigation satellite system location data with other sensor data | |
US11598876B2 (en) | Segmenting ground points from non-ground points to assist with localization of autonomous vehicles | |
US11367208B2 (en) | Image-based keypoint generation | |
WO2021007117A1 (en) | Generating training data for deep learning models for building high definition maps | |
US11927449B2 (en) | Using map-based constraints for determining vehicle state |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211028 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20221102 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20221110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20221102 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230104 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20230403 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20230605 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230704 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231017 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231018 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7371111 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |