JPWO2021127417A5 - - Google Patents
Download PDFInfo
- Publication number
- JPWO2021127417A5 JPWO2021127417A5 JP2022537828A JP2022537828A JPWO2021127417A5 JP WO2021127417 A5 JPWO2021127417 A5 JP WO2021127417A5 JP 2022537828 A JP2022537828 A JP 2022537828A JP 2022537828 A JP2022537828 A JP 2022537828A JP WO2021127417 A5 JPWO2021127417 A5 JP WO2021127417A5
- Authority
- JP
- Japan
- Prior art keywords
- model parameters
- region
- vehicle
- machine learning
- model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000010801 machine learning Methods 0.000 claims description 41
- 238000000034 method Methods 0.000 claims description 36
- 230000006870 function Effects 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims description 2
- 238000005286 illumination Methods 0.000 claims description 2
- 238000011156 evaluation Methods 0.000 claims 2
- 230000008859 change Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Description
本開示の範囲は、当業者が理解するであろう、本明細書で説明し、例示した例示的な実施形態に対するあらゆる変更、置換、変形、修正及び改良を包含する。本開示の範囲は、本明細書で説明するか例示した例示的な実施形態に限定されない。さらに、本開示は、特定の構成要素、要素、特徴、機能、操作又はステップを含むものとして本明細書のそれぞれの実施形態を説明し、例示するが、このような実施形態のいずれも、当業者が理解するであろう、本明細書のどこかに説明するか例示する構成要素、要素、特徴、機能、操作又はステップのいずれかの任意の組み合わせ又は順列を含んでもよい。さらに、特定の機能を実行するように適合されるか、配置されるか、構成されるか、有効にされるか、操作可能であるか、動作可能である装置又はシステム、あるいは装置又はシステムの構成要素についての添付の特許請求の範囲での言及には、その装置、システム、構成要素がそのように適合されるか、配置されるか、可能であるか、構成されるか、有効にされるか、操作可能であるか、動作可能である限り、装置、システム、構成要素又はその特定の機能が有効にされているか、起動されているか、ロック解除されているかどうかにかかわらず、その装置、システム、構成要素が包含される。さらに、本開示は、特定の利点を提供するものとして特定の実施形態を説明するか、例示するが、特定の実施形態は、このような利点のいずれも提供しなくても、一部を提供しても、全部を提供してもよい。
本明細書に開示される発明は以下の態様を含む。
〔態様1〕
車両に関連付けられた計算システムによって、
第1の領域での前記車両の現在の位置を判定することと、
前記第1の領域に関連付けられたモデルパラメータの1つ又は複数の第1のセットと、第2の領域に関連付けられたモデルパラメータの1つ又は複数の第2のセットと、を識別することと、
モデルパラメータの対応する第1のセットに基づく構成を有する1つ又は複数の機械学習モデルを使用して、前記車両によって取り込まれた第1のセンサデータに基づく1つ又は複数の対応する第1の推論を生成することと、
1つ又は複数のモデルの構成を、前記モデルパラメータの対応する第1のセットから、前記第2の領域に関連付けられた前記モデルパラメータの対応する第2のセットに切り替えることと、
前記モデルパラメータの対応する第2のセットに基づく構成を有する前記1つ又は複数のモデルを使用して、前記車両が前記第2の領域にあるときに前記車両のセンサによって生成される第2のセンサデータに基づく1つ又は複数の対応する第2の推論を生成することと、
少なくとも前記第2の推論に基づいて、前記車両に1つ又は複数の動作を実施させることと、
を含む、方法。
〔態様2〕
前記モデルパラメータの第1のセット及び前記モデルパラメータの第2のセットはそれぞれ、前記第1及び第2の領域で収集され、以前に取り込まれたセンサデータに基づいて、対応するモデルを訓練することによって生成される、態様1に記載の方法。
〔態様3〕
前記モデルパラメータの第1のセット及び第2のセットを識別することは、データストアから前記モデルパラメータの第1及び第2のセットを検索することを含み、前記モデルパラメータの第1及び第2のセットはそれぞれ、前記データストア内で前記第1及び第2の領域に関連付けられる、態様1に記載の方法。
〔態様4〕
前記モデルは、前記第1又は第2のセンサデータに基づいて、前記第1又は第2の領域内の前記1つ又は複数のタイプのオブジェクトをそれぞれ識別するように訓練された1つ又は複数の知覚モデルを含む、態様2に記載の方法。
〔態様5〕
前記知覚モデルは、複数の照明条件、複数の気象条件、複数の時刻、あるいはその組み合わせに基づいて訓練された複数の知覚モデルを含む、態様4に記載の方法。
〔態様6〕
前記モデルパラメータの第1のセット及び第2のセットを判定することは、データストアにて、前記車両の環境での現在の照明条件、前記車両の環境での気象条件、時刻、あるいはその組み合わせに関連付けられた前記モデルパラメータの第1及び第2のセットを識別することをさらに含む、態様5に記載の方法。
〔態様7〕
前記モデルパラメータの第1のセット及び第2のセットが、対応する前記知覚モデルを訓練することによって生成されたときに、前記モデルパラメータの第1のセット及び第2のセットに関連付けられた前記照明条件、気象条件、時刻、あるいはその組み合わせが判定される、態様6に記載の方法。
〔態様8〕
前記モデルは、前記第1又は第2のセンサデータで表される1つ又は複数のオブジェクトの1つ又は複数の軌道を予測するように訓練された1つ又は複数の予測モデルを含む、態様2に記載の方法。
〔態様9〕
前記第1の領域に関連付けられた、対応する前記モデルパラメータの第1のセットに基づく構成を有する前記予測モデルは、前記第1の領域で過去に取り込まれたオブジェクトの観測された軌道に基づいて前記軌道を予測するように訓練される、態様8に記載の方法。
〔態様10〕
前記モデルは、前記第1又は第2のセンサデータに基づいて、前記第1又は第2の領域の環境を通ってそれぞれ操縦するための1つ又は複数の車両軌道を識別するように訓練された1つ又は複数の計画モデルを含む、態様2に記載の方法。
〔態様11〕
前記1つ又は複数の車両軌道は、複数の車両軌道を含み、その結果、対応する複数の異なる操縦が実施される、態様10に記載の方法。
〔態様12〕
前記第1の領域は、領域境界によって前記第2の領域から分離され、前記1つ又は複数のモデルの構成を、対応する前記モデルパラメータの第1のセットから対応する前記モデルパラメータの第2のセットに切り替えることは、前記車両が前記領域境界を横切るか、前記領域境界から第1の閾値距離未満に位置することに応答するものであり、
前記車両の現在の位置及び現在の進行方向に基づいて、前記車両が前記領域境界から第2の閾値距離未満であると判定することであって、前記第2の閾値距離は前記第1の閾値距離よりも大きい、ことに応答して、
前記モデルパラメータの第2のセットをデータストアから前記車両のメモリ装置に読み込むことをさらに含む、態様1に記載の方法。
〔態様13〕
前記モデルパラメータの第1及び第2のセットは、第1及び第2の領域の所定のセットについて前記車両上のメモリ装置に読み込まれ、前記所定のセットは、前記車両のルート計画に基づいて判定される、態様1に記載の方法。
〔態様14〕
前記第1及び第2の領域のそれぞれが、地理的エリア、道路区分、交差点、あるいはその組み合わせとして指定される、態様1に記載の方法。
〔態様15〕
一般化機械学習モデルの性能を評価するための地図の領域を識別することと、
前記地図に関連付けられた一般化モデルパラメータのセットに従って構成された前記一般化機械学習モデルを使用して、前記地図の前記領域に対する前記一般化機械学習モデルの評価された性能を判定することと、
前記地図の前記領域に対する前記一般化機械学習モデルの前記評価された性能が最小性能閾値を下回っていると判定することと、
ローカライズされたモデルパラメータのセットを有するローカライズされた機械学習モデルを生成することと、
前記ローカライズされた機械学習モデルを前記地図の前記領域に関連付けて、前記地図の前記領域で1つ又は複数の後続の推論を生成する際に使用することと、をさらに含む、態様1に記載の方法。
〔態様16〕
第1のローカライズされた機械学習モデルの性能が評価されるための地図の領域を識別することと、
前記領域に関連付けられたローカライズされたモデルパラメータの第1のセットに従って構成された前記第1のローカライズされた機械学習モデルを使用して、前記地図の前記領域に対する前記第1のローカライズされた機械学習モデルの評価された性能を判定することと、
前記地図の前記領域に対する前記第1のローカライズされた機械学習モデルの前記評価された性能が最小性能閾値を下回っていると判定することと、
前記地図の前記領域を2つ以上のサブ領域に分割することと、
ローカライズされたモデルパラメータの第2のセットを有する第2のローカライズされた機械学習モデルを生成することと、
前記サブ領域にて1つ又は複数の後続の推論を生成する際に使用するために、前記第2のローカライズされた機械学習モデルを前記サブ領域のうちの1つに関連付けることと、をさらに含む、態様1に記載の方法。
〔態様17〕
1つ又は複数のプロセッサと、前記プロセッサのうちの1つ又は複数に結合された1つ又は複数のコンピュータ可読非一時的記憶媒体とを具備するシステムであって、前記1つ又は複数のコンピュータ可読非一時的記憶媒体は、前記プロセッサのうちの1つ又は複数によって実行されたときに動作可能な命令を含み、前記命令は、前記システムに、
第1の領域での車両の現在の位置を判定させ、
前記第1の領域に関連付けられたモデルパラメータの1つ又は複数の第1のセットと、第2の領域に関連付けられたモデルパラメータの1つ又は複数の第2のセットとを識別させ、
モデルパラメータの対応する第1のセットに基づく構成を有する1つ又は複数の機械学習モデルを使用して、前記車両によって取り込まれた第1のセンサデータに基づいて1つ又は複数の対応する第1の推論を生成させ、
1つ又は複数のモデルの構成を、対応する前記モデルパラメータの第1のセットから、前記第2の領域に関連付けられた、対応する前記モデルパラメータの第2のセットに切り替えさせ、
対応する前記モデルパラメータの第2のセットに基づく構成を有する前記1つ又は複数のモデルを使用して、前記車両が前記第2の領域にあるときに前記車両のセンサによって生成される第2のセンサデータに基づいて1つ又は複数の対応する第2の推論を生成させ、
少なくとも前記第2の推論に基づいて前記車両に1つ又は複数の操作を実行させる、システム。
〔態様18〕
前記モデルパラメータの第1のセット及び前記モデルパラメータの第2のセットはそれぞれ、前記第1及び第2の領域で収集され、以前に取り込まれたセンサデータに基づいて、対応する前記モデルを訓練することによって生成される、態様17に記載のシステム。
〔態様19〕
1つ又は複数のプロセッサに動作を実施させるために実行されるときに動作可能であるソフトウェアを具現化する1つ又は複数のコンピュータ可読非一時的記憶媒体であって、前記動作は、
第1の領域での車両の現在の位置を判定することと、
前記第1の領域に関連付けられたモデルパラメータの1つ又は複数の第1のセットと、第2の領域に関連付けられたモデルパラメータの1つ又は複数の第2のセットとを識別することと、
対応する前記モデルパラメータの第1のセットに基づく構成を有する1つ又は複数の機械学習モデルを使用して、前記車両によって取り込まれた第1のセンサデータに基づいて1つ又は複数の対応する第1の推論を生成することと、
1つ又は複数のモデルの構成を、対応する前記モデルパラメータの第1のセットから、前記第2の領域に関連付けられた、対応する前記モデルパラメータの第2のセットに切り替えることと、
対応する前記モデルパラメータの第2のセットに基づく構成を有する前記1つ又は複数のモデルを使用して、前記車両が前記第2の領域にあるときに前記車両のセンサによって生成される第2のセンサデータに基づいて1つ又は複数の対応する第2の推論を生成することと、
少なくとも前記第2の推論に基づいて前記車両に1つ又は複数の動作を実施させることと、
を含む、記憶媒体。
〔態様20〕
前記モデルパラメータの第1のセット及び前記モデルパラメータの第2のセットはそれぞれ、前記第1及び第2の領域で収集され、以前に取り込まれたセンサデータに基づいて、対応する前記モデルを訓練することによって生成される、態様19に記載の記憶媒体。
本明細書に開示される発明は以下の態様を含む。
〔態様1〕
車両に関連付けられた計算システムによって、
第1の領域での前記車両の現在の位置を判定することと、
前記第1の領域に関連付けられたモデルパラメータの1つ又は複数の第1のセットと、第2の領域に関連付けられたモデルパラメータの1つ又は複数の第2のセットと、を識別することと、
モデルパラメータの対応する第1のセットに基づく構成を有する1つ又は複数の機械学習モデルを使用して、前記車両によって取り込まれた第1のセンサデータに基づく1つ又は複数の対応する第1の推論を生成することと、
1つ又は複数のモデルの構成を、前記モデルパラメータの対応する第1のセットから、前記第2の領域に関連付けられた前記モデルパラメータの対応する第2のセットに切り替えることと、
前記モデルパラメータの対応する第2のセットに基づく構成を有する前記1つ又は複数のモデルを使用して、前記車両が前記第2の領域にあるときに前記車両のセンサによって生成される第2のセンサデータに基づく1つ又は複数の対応する第2の推論を生成することと、
少なくとも前記第2の推論に基づいて、前記車両に1つ又は複数の動作を実施させることと、
を含む、方法。
〔態様2〕
前記モデルパラメータの第1のセット及び前記モデルパラメータの第2のセットはそれぞれ、前記第1及び第2の領域で収集され、以前に取り込まれたセンサデータに基づいて、対応するモデルを訓練することによって生成される、態様1に記載の方法。
〔態様3〕
前記モデルパラメータの第1のセット及び第2のセットを識別することは、データストアから前記モデルパラメータの第1及び第2のセットを検索することを含み、前記モデルパラメータの第1及び第2のセットはそれぞれ、前記データストア内で前記第1及び第2の領域に関連付けられる、態様1に記載の方法。
〔態様4〕
前記モデルは、前記第1又は第2のセンサデータに基づいて、前記第1又は第2の領域内の前記1つ又は複数のタイプのオブジェクトをそれぞれ識別するように訓練された1つ又は複数の知覚モデルを含む、態様2に記載の方法。
〔態様5〕
前記知覚モデルは、複数の照明条件、複数の気象条件、複数の時刻、あるいはその組み合わせに基づいて訓練された複数の知覚モデルを含む、態様4に記載の方法。
〔態様6〕
前記モデルパラメータの第1のセット及び第2のセットを判定することは、データストアにて、前記車両の環境での現在の照明条件、前記車両の環境での気象条件、時刻、あるいはその組み合わせに関連付けられた前記モデルパラメータの第1及び第2のセットを識別することをさらに含む、態様5に記載の方法。
〔態様7〕
前記モデルパラメータの第1のセット及び第2のセットが、対応する前記知覚モデルを訓練することによって生成されたときに、前記モデルパラメータの第1のセット及び第2のセットに関連付けられた前記照明条件、気象条件、時刻、あるいはその組み合わせが判定される、態様6に記載の方法。
〔態様8〕
前記モデルは、前記第1又は第2のセンサデータで表される1つ又は複数のオブジェクトの1つ又は複数の軌道を予測するように訓練された1つ又は複数の予測モデルを含む、態様2に記載の方法。
〔態様9〕
前記第1の領域に関連付けられた、対応する前記モデルパラメータの第1のセットに基づく構成を有する前記予測モデルは、前記第1の領域で過去に取り込まれたオブジェクトの観測された軌道に基づいて前記軌道を予測するように訓練される、態様8に記載の方法。
〔態様10〕
前記モデルは、前記第1又は第2のセンサデータに基づいて、前記第1又は第2の領域の環境を通ってそれぞれ操縦するための1つ又は複数の車両軌道を識別するように訓練された1つ又は複数の計画モデルを含む、態様2に記載の方法。
〔態様11〕
前記1つ又は複数の車両軌道は、複数の車両軌道を含み、その結果、対応する複数の異なる操縦が実施される、態様10に記載の方法。
〔態様12〕
前記第1の領域は、領域境界によって前記第2の領域から分離され、前記1つ又は複数のモデルの構成を、対応する前記モデルパラメータの第1のセットから対応する前記モデルパラメータの第2のセットに切り替えることは、前記車両が前記領域境界を横切るか、前記領域境界から第1の閾値距離未満に位置することに応答するものであり、
前記車両の現在の位置及び現在の進行方向に基づいて、前記車両が前記領域境界から第2の閾値距離未満であると判定することであって、前記第2の閾値距離は前記第1の閾値距離よりも大きい、ことに応答して、
前記モデルパラメータの第2のセットをデータストアから前記車両のメモリ装置に読み込むことをさらに含む、態様1に記載の方法。
〔態様13〕
前記モデルパラメータの第1及び第2のセットは、第1及び第2の領域の所定のセットについて前記車両上のメモリ装置に読み込まれ、前記所定のセットは、前記車両のルート計画に基づいて判定される、態様1に記載の方法。
〔態様14〕
前記第1及び第2の領域のそれぞれが、地理的エリア、道路区分、交差点、あるいはその組み合わせとして指定される、態様1に記載の方法。
〔態様15〕
一般化機械学習モデルの性能を評価するための地図の領域を識別することと、
前記地図に関連付けられた一般化モデルパラメータのセットに従って構成された前記一般化機械学習モデルを使用して、前記地図の前記領域に対する前記一般化機械学習モデルの評価された性能を判定することと、
前記地図の前記領域に対する前記一般化機械学習モデルの前記評価された性能が最小性能閾値を下回っていると判定することと、
ローカライズされたモデルパラメータのセットを有するローカライズされた機械学習モデルを生成することと、
前記ローカライズされた機械学習モデルを前記地図の前記領域に関連付けて、前記地図の前記領域で1つ又は複数の後続の推論を生成する際に使用することと、をさらに含む、態様1に記載の方法。
〔態様16〕
第1のローカライズされた機械学習モデルの性能が評価されるための地図の領域を識別することと、
前記領域に関連付けられたローカライズされたモデルパラメータの第1のセットに従って構成された前記第1のローカライズされた機械学習モデルを使用して、前記地図の前記領域に対する前記第1のローカライズされた機械学習モデルの評価された性能を判定することと、
前記地図の前記領域に対する前記第1のローカライズされた機械学習モデルの前記評価された性能が最小性能閾値を下回っていると判定することと、
前記地図の前記領域を2つ以上のサブ領域に分割することと、
ローカライズされたモデルパラメータの第2のセットを有する第2のローカライズされた機械学習モデルを生成することと、
前記サブ領域にて1つ又は複数の後続の推論を生成する際に使用するために、前記第2のローカライズされた機械学習モデルを前記サブ領域のうちの1つに関連付けることと、をさらに含む、態様1に記載の方法。
〔態様17〕
1つ又は複数のプロセッサと、前記プロセッサのうちの1つ又は複数に結合された1つ又は複数のコンピュータ可読非一時的記憶媒体とを具備するシステムであって、前記1つ又は複数のコンピュータ可読非一時的記憶媒体は、前記プロセッサのうちの1つ又は複数によって実行されたときに動作可能な命令を含み、前記命令は、前記システムに、
第1の領域での車両の現在の位置を判定させ、
前記第1の領域に関連付けられたモデルパラメータの1つ又は複数の第1のセットと、第2の領域に関連付けられたモデルパラメータの1つ又は複数の第2のセットとを識別させ、
モデルパラメータの対応する第1のセットに基づく構成を有する1つ又は複数の機械学習モデルを使用して、前記車両によって取り込まれた第1のセンサデータに基づいて1つ又は複数の対応する第1の推論を生成させ、
1つ又は複数のモデルの構成を、対応する前記モデルパラメータの第1のセットから、前記第2の領域に関連付けられた、対応する前記モデルパラメータの第2のセットに切り替えさせ、
対応する前記モデルパラメータの第2のセットに基づく構成を有する前記1つ又は複数のモデルを使用して、前記車両が前記第2の領域にあるときに前記車両のセンサによって生成される第2のセンサデータに基づいて1つ又は複数の対応する第2の推論を生成させ、
少なくとも前記第2の推論に基づいて前記車両に1つ又は複数の操作を実行させる、システム。
〔態様18〕
前記モデルパラメータの第1のセット及び前記モデルパラメータの第2のセットはそれぞれ、前記第1及び第2の領域で収集され、以前に取り込まれたセンサデータに基づいて、対応する前記モデルを訓練することによって生成される、態様17に記載のシステム。
〔態様19〕
1つ又は複数のプロセッサに動作を実施させるために実行されるときに動作可能であるソフトウェアを具現化する1つ又は複数のコンピュータ可読非一時的記憶媒体であって、前記動作は、
第1の領域での車両の現在の位置を判定することと、
前記第1の領域に関連付けられたモデルパラメータの1つ又は複数の第1のセットと、第2の領域に関連付けられたモデルパラメータの1つ又は複数の第2のセットとを識別することと、
対応する前記モデルパラメータの第1のセットに基づく構成を有する1つ又は複数の機械学習モデルを使用して、前記車両によって取り込まれた第1のセンサデータに基づいて1つ又は複数の対応する第1の推論を生成することと、
1つ又は複数のモデルの構成を、対応する前記モデルパラメータの第1のセットから、前記第2の領域に関連付けられた、対応する前記モデルパラメータの第2のセットに切り替えることと、
対応する前記モデルパラメータの第2のセットに基づく構成を有する前記1つ又は複数のモデルを使用して、前記車両が前記第2の領域にあるときに前記車両のセンサによって生成される第2のセンサデータに基づいて1つ又は複数の対応する第2の推論を生成することと、
少なくとも前記第2の推論に基づいて前記車両に1つ又は複数の動作を実施させることと、
を含む、記憶媒体。
〔態様20〕
前記モデルパラメータの第1のセット及び前記モデルパラメータの第2のセットはそれぞれ、前記第1及び第2の領域で収集され、以前に取り込まれたセンサデータに基づいて、対応する前記モデルを訓練することによって生成される、態様19に記載の記憶媒体。
Claims (20)
- 車両に関連付けられた計算システムによって、
前記車両の現在の位置である第1の領域に関連付けられた事前の訓練から事前に定義されたモデルパラメータの1つ又は複数の第1のセットを識別し、前記モデルパラメータの1つ又は複数の第1のセットによる1つ又は複数の機械学習モデルを構成することと、
前記現在の位置が第2の領域にあると判断したときに、前記1つ又は複数の機械学習モデルを、前記モデルパラメータの第1のセットから、前記第2の領域に関連付けられた事前の訓練から事前に定義されたモデルパラメータの1つ又は複数の第2のセットに切り替えることであって、前記モデルパラメータの1つ又は複数の第1のセットとモデルパラメータの1つ又は複数の第2のセットは、前記1つ又は複数の機械学習モデルの学習された重みである、ことと、
前記車両が前記第2の領域にあるときに、前記モデルパラメータの1つ又は複数の第2のセットより構成された前記1つ又は複数の機械学習モデルを使用して、前記車両のセンサにより生成されたセンサデータに基づく推論を生成することと、
前記推論に従い前記車両に動作を実施させることと、
前記機械学習モデルによる前記モデルパラメータの第2のセットの評価性能が最低閾値を下回る性能を示す場合、前記第2の領域を新しいパラメータを有する少なくとも2つのサブ領域に分割することと、
を含む、方法。 - 前記モデルパラメータの第1のセット及び前記モデルパラメータの第2のセットはそれぞれ、前記第1及び第2の領域で収集され、以前に取り込まれたセンサデータに基づいて、前記1つ又は複数の機械学習モデルを訓練することによって、訓練中に損失関数によって生成された損失値の誤差逆伝搬技術から生成される、請求項1に記載の方法。
- 前記モデルパラメータの第1のセット及び第2のセットを識別することは、データストアから前記モデルパラメータの第1及び第2のセットを検索することを含み、前記モデルパラメータの第1及び第2のセットはそれぞれ、前記データストア内で前記第1及び第2の領域に関連付けられ、前記切り替えることは、前記機械学習モデルからモデルパラメータの第1のセットを除去し、前記1つ又は複数の第2のセットを挿入することを含む、請求項1に記載の方法。
- 前記1つ又は複数の機械学習モデルは、前記センサデータに基づいて、前記第1又は第2の領域内の1つ又は複数のタイプのオブジェクトをそれぞれ識別するように訓練された1つ又は複数の知覚モデルを含む、請求項2に記載の方法。
- 前記知覚モデルは、複数の照明条件、複数の気象条件、複数の時刻、あるいはその組み合わせに基づいて訓練された複数の知覚モデルを含む、請求項4に記載の方法。
- 前記モデルパラメータの第1のセット及び第2のセットを識別することは、データストアにて、前記車両の環境での現在の照明条件、前記環境での気象条件、時刻、あるいはその組み合わせに関連付けられた前記モデルパラメータの第1及び第2のセットを識別することをさらに含む、請求項5に記載の方法。
- 前記モデルパラメータの第1のセット及び第2のセットが、前記知覚モデルを訓練することによって生成されたときに、前記モデルパラメータの第1のセット及び第2のセットに関連付けられた前記照明条件、気象条件、時刻、あるいはその組み合わせが判定される、請求項6に記載の方法。
- 前記1つ又は複数の機械学習モデルは、前記センサデータで表される1つ又は複数のオブジェクトの1つ又は複数の軌道を予測するように訓練された1つ又は複数の予測モデルを含む、請求項2に記載の方法。
- 前記第1の領域に関連付けられた、対応する前記モデルパラメータの第1のセットに基づく構成を有する前記予測モデルは、前記第1の領域で過去に取り込まれたオブジェクトの観測された軌道に基づいて前記軌道を予測するように訓練される、請求項8に記載の方法。
- 前記1つ又は複数の機械学習モデルは、前記センサデータに基づいて、前記第1又は第2の領域の前記車両の環境を通ってそれぞれ操縦するための1つ又は複数の車両軌道を識別するように訓練された1つ又は複数の計画モデルを含む、請求項2に記載の方法。
- 前記1つ又は複数の車両軌道は、複数の車両軌道を含み、その結果、対応する複数の異なる操縦が実施される、請求項10に記載の方法。
- 前記第1の領域は、領域境界によって前記第2の領域から分離され、前記1つ又は複数のモデルを、前記モデルパラメータの第1のセットから前記モデルパラメータの第2のセットに切り替えることは、前記車両が、前記領域境界から第1の閾値距離未満に位置することに応答するものであり、
前記車両の現在の位置及び現在の進行方向に基づいて、前記車両が前記領域境界から第2の閾値距離未満であると判定することであって、前記第2の閾値距離は前記第1の閾値距離よりも大きい、ことに応答して、
前記モデルパラメータの第2のセットをデータストアから前記車両のメモリ装置に読み込むことをさらに含む、請求項1に記載の方法。 - 前記モデルパラメータの第1及び第2のセットは、第1及び第2の領域の所定のセットについて前記車両上のメモリ装置に読み込まれ、前記所定のセットは、前記車両のルート計画に基づいて判定される、請求項1に記載の方法。
- 前記第1及び第2の領域のそれぞれが、地理的エリア、道路区分、交差点、あるいはその組み合わせとして指定される、請求項1に記載の方法。
- 一般化機械学習モデルの性能を評価するための地図の領域を識別することと、
前記地図に関連付けられた一般化モデルパラメータのセットに従って構成された前記一般化機械学習モデルを使用して、前記地図の前記領域に対する前記一般化機械学習モデルの評価された性能を判定することと、
前記地図の前記領域に対する前記一般化機械学習モデルの前記評価された性能が最小性能閾値を下回っていると判定することと、
ローカライズされたモデルパラメータのセットを有するローカライズされた機械学習モデルを生成することと、
前記ローカライズされた機械学習モデルを前記地図の前記領域に関連付けて、前記地図の前記領域で1つ又は複数の後続の推論を生成する際に使用することと、をさらに含む、請求項1に記載の方法。 - 前記第2の領域内の前記車両の制御の少なくとも特性を評価する性能測定基準に従って、前記第2の領域に対する前記モデルパラメータの第2のセットの性能を評価することさらに含む、請求項1に記載の方法。
- 1つ又は複数のプロセッサと、前記プロセッサのうちの1つ又は複数に結合された1つ又は複数のコンピュータ可読非一時的記憶媒体とを具備するシステムであって、前記1つ又は複数のコンピュータ可読非一時的記憶媒体は、前記プロセッサのうちの1つ又は複数によって実行されたときに動作可能な命令を含み、前記命令は、前記システムに、
車両の現在の位置が第1の領域であるかを判定させ、
前記第1の領域に関連付けられた事前の訓練から事前に定義されたモデルパラメータの1つ又は複数の第1のセットを識別させ、前記モデルパラメータの1つ又は複数の第1のセットによる1つ又は複数の機械学習モデルを構成し、
前記現在の位置が第2の領域にあると判断したときに、前記1つ又は複数の機械学習モデルを、前記モデルパラメータの1つ又は複数の第1のセットから、前記第2の領域に関連付けられた事前の訓練から事前に定義されたモデルパラメータの1つ又は複数の第2のセットに切り替えさせ、前記モデルパラメータの1つ又は複数の第1のセットと前記モデルパラメータの1つ又は複数の第2のセットは、前記1つ又は複数の機械学習モデルの学習された重みであり、
前記車両が前記第2の領域にあるときに、前記モデルパラメータの1つ又は複数の第2のセットより構成された前記1つ又は複数の機械学習モデルを使用して、前記車両のセンサにより生成されたセンサデータに基づく1つ又は複数の対応する推論を生成させ、
少なくとも前記推論に基づき前記車両に1つ又は複数の動作を実施させ、
前記機械学習モデルによる前記モデルパラメータの第2のセットの評価性能が最低閾値を下回る性能を示す場合、前記第2の領域を新しいパラメータを有する少なくとも2つのサブ領域に分割させる、
システム。 - 前記モデルパラメータの第1のセット及び前記モデルパラメータの第2のセットはそれぞれ、前記第1及び第2の領域で収集され、以前に取り込まれたセンサデータに基づいて、前記1つ又は複数の機械学習モデルを訓練することによって生成される、請求項17に記載のシステム。
- 1つ又は複数のプロセッサに動作を実施させるために実行されるときに動作可能であるソフトウェアを具現化する1つ又は複数のコンピュータ可読非一時的記憶媒体であって、前記動作は、
車両の現在の位置が第1の領域であるかを判定することと、
前記第1の領域に関連付けられた事前の訓練から事前に定義されたモデルパラメータの1つ又は複数の第1のセットを識別し、前記モデルパラメータの1つ又は複数の第1のセットによる1つ又は複数の機械学習モデルを構成する、ことと、
前記現在の位置が第2の領域にあると判断したときに、前記1つ又は複数の機械学習モデルを、前記モデルパラメータの1つ又は複数の第1のセットから、前記第2の領域に関連付けられた事前の訓練から事前に定義されたモデルパラメータの1つ又は複数の第2のセットに切り替えることであって、前記モデルパラメータの1つ又は複数の第1のセットと前記モデルパラメータの1つ又は複数の第2のセットは、前記1つ又は複数の機械学習モデルの学習された重みである、ことと、
前記車両が前記第2の領域にあるときに、前記モデルパラメータの1つ又は複数の第2のセットより構成された前記1つ又は複数の機械学習モデルを使用して、前記車両のセンサにより生成されたセンサデータに基づく1つ又は複数の対応する推論を生成することと、
少なくとも前記推論に基づき前記車両に1つ又は複数の動作を実施させることと、
前記機械学習モデルによるパラメータの第2のセットの評価性能が最低閾値を下回る性能を示す場合、前記第2の領域を新しいパラメータを有する少なくとも2つのサブ領域に分割することと、
を含む、1つ又は複数のコンピュータ可読非一時的記憶媒体。 - 前記モデルパラメータの第1のセット及び前記モデルパラメータの第2のセットはそれぞれ、前記第1及び第2の領域で収集され、以前に取り込まれたセンサデータに基づいて、前記1つ又は複数の機械学習モデルを訓練することによって生成される、請求項19に記載の1つ又は複数のコンピュータ可読非一時的記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/721,604 | 2019-12-19 | ||
US16/721,604 US11868136B2 (en) | 2019-12-19 | 2019-12-19 | Geolocalized models for perception, prediction, or planning |
PCT/US2020/065987 WO2021127417A1 (en) | 2019-12-19 | 2020-12-18 | Geolocalized models for perception, prediction, or planning |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023510136A JP2023510136A (ja) | 2023-03-13 |
JPWO2021127417A5 true JPWO2021127417A5 (ja) | 2023-12-26 |
Family
ID=76437412
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022537828A Pending JP2023510136A (ja) | 2019-12-19 | 2020-12-18 | 知覚、予測又は計画のための地理的位置特定モデル |
Country Status (4)
Country | Link |
---|---|
US (1) | US11868136B2 (ja) |
JP (1) | JP2023510136A (ja) |
CN (1) | CN114829224A (ja) |
WO (1) | WO2021127417A1 (ja) |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10489972B2 (en) * | 2016-06-28 | 2019-11-26 | Cognata Ltd. | Realistic 3D virtual world creation and simulation for training automated driving systems |
US11403816B2 (en) * | 2017-11-30 | 2022-08-02 | Mitsubishi Electric Corporation | Three-dimensional map generation system, three-dimensional map generation method, and computer readable medium |
DE102018206743A1 (de) * | 2018-05-02 | 2019-11-07 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zum Betreiben eines Fahrerassistenzsystems eines Egofahrzeugs mit wenigstens einem Umfeldsensor zum Erfassen eines Umfelds des Egofahrzeugs, Computer-lesbares Medium, System, und Fahrzeug |
US11468591B2 (en) * | 2019-06-13 | 2022-10-11 | Nec Corporation | Scene attribute annotation of complex road typographies |
KR20210042537A (ko) * | 2019-10-10 | 2021-04-20 | 엘지전자 주식회사 | 대면적의 공간에서 로컬 영역별로 위치를 추정하는 방법 및 이를 구현하는 로봇과 클라우드 서버 |
US20220324467A1 (en) * | 2019-12-27 | 2022-10-13 | Intel Corporation | Driving safety systems |
KR20220153643A (ko) * | 2020-03-27 | 2022-11-18 | 트랜스파인더 코포레이션 | 주행 시나리오에 기초하여 주행 루트를 자동으로 용이하게 하는 것 |
US11715023B2 (en) * | 2020-07-21 | 2023-08-01 | Bayerische Motoren Werke Aktiengesellschaft | Methods and apparatuses for training one or more model parameters of a predictive parking difficulty model |
US11483046B1 (en) | 2020-08-25 | 2022-10-25 | Amazon Technologies, Inc. | Channel state information (CSI) packet transmission based on a dynamic transmission period |
US11539610B1 (en) * | 2020-08-25 | 2022-12-27 | Amazon Technologies, Inc. | Presence detection based on link parameter data and network parameter data |
JP7563316B2 (ja) * | 2021-07-07 | 2024-10-08 | トヨタ自動車株式会社 | 運行管理方法、運行管理装置および運行管理システム |
US20230048242A1 (en) * | 2021-08-12 | 2023-02-16 | Toyota Motor Engineering & Manufacturing North America, Inc. | Decentralized ridesharing systems and methods for matching vehicles with users |
JP2023048674A (ja) * | 2021-09-28 | 2023-04-07 | 株式会社J-QuAD DYNAMICS | 移動体の制御装置 |
US20230160709A1 (en) * | 2021-11-22 | 2023-05-25 | Toyota Motor Engineering & Manufacturing North America, Inc. | Providing information to navigate to a parking space preferred by an operator of a vehicle |
US12001175B2 (en) * | 2021-12-20 | 2024-06-04 | Gm Cruise Holdings Llc | Long tail lidar 3-D object detection improvement with targeted simulation data injection |
CN114860725A (zh) * | 2022-04-24 | 2022-08-05 | 京东城市(北京)数字科技有限公司 | 一种空间数据处理的方法和装置 |
US11691634B1 (en) * | 2022-06-24 | 2023-07-04 | Plus AI, Inc. | On-vehicle driving behavior modelling |
CN115146873B (zh) * | 2022-07-30 | 2024-05-10 | 重庆长安汽车股份有限公司 | 一种车辆轨迹预测方法及系统 |
CN115240429B (zh) * | 2022-08-11 | 2023-02-14 | 深圳市城市交通规划设计研究中心股份有限公司 | 一种人车流量统计方法、电子设备及存储介质 |
CN118605487A (zh) * | 2023-02-28 | 2024-09-06 | 苏州宝时得电动工具有限公司 | 边界处理方法、装置、设备及存储介质 |
CN118644512A (zh) * | 2024-08-15 | 2024-09-13 | 北京茵沃汽车科技有限公司 | 可行驶区域的边界处理方法及装置、存储介质及电子设备 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4241309B2 (ja) | 2003-10-14 | 2009-03-18 | 日産自動車株式会社 | 車両のリスク回避ガイド装置 |
JP4853525B2 (ja) | 2009-02-09 | 2012-01-11 | トヨタ自動車株式会社 | 移動領域予測装置 |
US9230442B2 (en) | 2013-07-31 | 2016-01-05 | Elwha Llc | Systems and methods for adaptive vehicle sensing systems |
TWI619036B (zh) * | 2016-02-22 | 2018-03-21 | 財團法人資訊工業策進會 | 交通時間預測系統、交通時間預測方法以及交通模型建立方法 |
JP6906175B2 (ja) | 2017-03-31 | 2021-07-21 | パナソニックIpマネジメント株式会社 | 運転支援方法およびそれを利用した運転支援装置、自動運転制御装置、車両、プログラム、運転支援システム |
WO2018218149A1 (en) * | 2017-05-26 | 2018-11-29 | Google Llc | Data fusion system |
US10386836B2 (en) * | 2017-07-07 | 2019-08-20 | Zoox, Inc. | Interactions between vehicle and teleoperations system |
US11243532B1 (en) * | 2017-09-27 | 2022-02-08 | Apple Inc. | Evaluating varying-sized action spaces using reinforcement learning |
US10733484B2 (en) * | 2018-03-22 | 2020-08-04 | Here Global B.V. | Method, apparatus, and system for dynamic adaptation of an in-vehicle feature detector |
JP6985203B2 (ja) * | 2018-04-05 | 2021-12-22 | トヨタ自動車株式会社 | 挙動予測装置 |
US11340355B2 (en) * | 2018-09-07 | 2022-05-24 | Nvidia Corporation | Validation of global navigation satellite system location data with other sensor data |
US11195418B1 (en) * | 2018-10-04 | 2021-12-07 | Zoox, Inc. | Trajectory prediction on top-down scenes and associated model |
US11126180B1 (en) * | 2019-04-30 | 2021-09-21 | Zoox, Inc. | Predicting an occupancy associated with occluded region |
US20200364508A1 (en) * | 2019-05-14 | 2020-11-19 | Nvidia Corporation | Using decay parameters for inferencing with neural networks |
JP7399891B2 (ja) * | 2019-12-17 | 2023-12-18 | グーグル エルエルシー | ナビゲーション中に難しい操縦についての追加の命令を提供すること |
-
2019
- 2019-12-19 US US16/721,604 patent/US11868136B2/en active Active
-
2020
- 2020-12-18 JP JP2022537828A patent/JP2023510136A/ja active Pending
- 2020-12-18 WO PCT/US2020/065987 patent/WO2021127417A1/en active Application Filing
- 2020-12-18 CN CN202080088151.0A patent/CN114829224A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JPWO2021127417A5 (ja) | ||
JP6832421B2 (ja) | シミュレーションに基づく自動運転車の感知要求の評価方法 | |
JP7222868B2 (ja) | オブジェクト挙動のリアルタイム予測 | |
US11745730B2 (en) | Automatic parking control method and apparatus | |
JP6913969B2 (ja) | 強化学習に基づいて協同走行で多重エージェントセンサフュージョンを遂行する方法及び装置 | |
US10642268B2 (en) | Method and apparatus for generating automatic driving strategy | |
JP2022516383A (ja) | 自律型車両の計画 | |
WO2018198823A1 (ja) | 車両電子制御装置 | |
US20190107839A1 (en) | Keyframe based autonomous vehicle operation | |
JP2020123333A (ja) | 走行途中に発生する走行シナリオを検出して、運転者の走行習慣を評価するための情報の提供する方法及び装置 | |
CN111208838B (zh) | 一种无人驾驶设备的控制方法及装置 | |
EP3709231A1 (en) | Vehicle track planning method, device, computer device and computer-readable storage medium | |
CN113844451B (zh) | 行驶设备控制方法、装置、电子设备及存储介质 | |
GB2495265A (en) | Artificial memory system for predicting behaviours in order to assist in the control of a system, e.g. stability control in a vehicle | |
EP3670109B1 (en) | Method and apparatus for controlling behavior of service robot | |
CN107745711B (zh) | 一种在自动驾驶模式下确定路线的方法和装置 | |
CN113110526B (zh) | 一种模型训练的方法、无人驾驶设备的控制方法及装置 | |
JP2019079199A (ja) | 信号機切替制御装置、信号機切替制御方法及び信号機切替制御プログラム | |
CN110942181A (zh) | 一种障碍物轨迹预测的方法及装置 | |
KR20210118995A (ko) | 딥러닝 기반 자율주행차량의 유턴 경로 생성 방법 및 장치 | |
CN111238523A (zh) | 一种运动轨迹的预测方法及装置 | |
US20220383736A1 (en) | Method for estimating coverage of the area of traffic scenarios | |
RU2019145038A (ru) | Способы и процессоры для управления рулением беспилотным автомобилем | |
CN112949756A (zh) | 一种模型训练以及轨迹规划的方法及装置 | |
CN111491854A (zh) | 用于车辆的驾驶操纵辅助的方法、装置、计算机程序和计算机程序产品 |