JP7344120B2 - 軌道生成および実行アーキテクチャ - Google Patents

軌道生成および実行アーキテクチャ Download PDF

Info

Publication number
JP7344120B2
JP7344120B2 JP2019547445A JP2019547445A JP7344120B2 JP 7344120 B2 JP7344120 B2 JP 7344120B2 JP 2019547445 A JP2019547445 A JP 2019547445A JP 2019547445 A JP2019547445 A JP 2019547445A JP 7344120 B2 JP7344120 B2 JP 7344120B2
Authority
JP
Japan
Prior art keywords
trajectory
computer system
operating frequency
fallback
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019547445A
Other languages
English (en)
Other versions
JP2020509963A (ja
Inventor
リンスコット ギャリー
エドワード サマーズ ロバート
マルクス ペッテリ キイスキー ヨーナ
コビラロフ マリン
カルドウェル ティモシー
リー アスケランド ジェイコブ
ガジャネン レーゲ アシュトシュ
フンケ ジョセフ
Original Assignee
ズークス インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ズークス インコーポレイテッド filed Critical ズークス インコーポレイテッド
Publication of JP2020509963A publication Critical patent/JP2020509963A/ja
Application granted granted Critical
Publication of JP7344120B2 publication Critical patent/JP7344120B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0011Planning or execution of driving tasks involving control alternatives for a single driving scenario, e.g. planning several paths to avoid obstacles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3407Route searching; Route guidance specially adapted for specific applications
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09Taking automatic action to avoid collision, e.g. braking and steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • B60W60/0016Planning or execution of driving tasks specially adapted for safety of the vehicle or its occupants
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0027Planning or execution of driving tasks using trajectory prediction for other traffic participants
    • B60W60/00276Planning or execution of driving tasks using trajectory prediction for other traffic participants for two or more other traffic participants
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0055Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots with safety arrangements
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/0272Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means comprising means for registering the travel distance, e.g. revolutions of wheels
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/0274Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means using mapping information stored in a memory device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/408Radar; Laser, e.g. lidar
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • B60W2554/4026Cycles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • B60W2554/4029Pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Human Computer Interaction (AREA)
  • Game Theory and Decision Science (AREA)
  • Medical Informatics (AREA)
  • Business, Economics & Management (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Description

本発明は、軌道生成および実行アーキテクチャに関する。
関連出願の相互参照
本特許出願は、その全体が参照により本明細書に組み込まれる、2017年3月1日に出願された米国仮特許出願第62/465,724号明細書の利益を主張する、2017年6月23日に出願された米国特許出願第15/632,208号明細書からの優先権出願利益を主張する。
様々な静的および/または動的オブジェクトを含む環境を通して自律車両を案内するために、そのような自律車両によって様々な方法、装置、およびシステムが利用される。たとえば、自律車両は、ルートプランニング(route planning)方法、装置、およびシステムを利用し、他の動いている車両(自律またはそれ以外)、動いている人々、固定建築物などがある密集エリアを通して自律車両を案内する。いくつかの例では、環境中の他のオブジェクトの挙動および道路コンディションは、予測不可能であることがある。
発明を実施するための形態は、添付図を参照しながら説明される。図中で、参照番号の最左桁は、参照番号が最初に現れる図を識別する。異なる図中での同じ参照番号の使用は、同様または同等の構成要素または特徴を表す。
本明細書で説明されるように、軌道を生成および実行し、自律車両を制御するための例示的なアーキテクチャを示す図である。 本明細書で説明されるように、軌道を生成および実行し、自律車両を制御するための例示的なプロセスを描く図である。 本明細書で説明されるように、フィードバックデータを生成し、フィードバックデータを使用し、アーキテクチャの態様を更新するための例示的なプロセスを描く図である。 本明細書で説明されるように、フォールバック軌道を生成するための例示的なプロセスを描く図である。 本明細書で説明されるように、フォールバック軌道を実行するための例示的なプロセスを描く図である。 本明細書で説明される技法を実装するための例示的なコンピュータシステムのブロック図を描く図である。
本開示は、軌道を生成および実行し、自律車両を制御するための方法、装置、およびシステムについて説明する。少なくとも1つの例では、本開示は、軌道を生成および実行し、自律車両を制御するためのアーキテクチャについて説明する。アーキテクチャは、異なる周波数において動作する様々なレイヤを含むことができる。加えて、アーキテクチャは、軌道を生成および改良するように構成されたコンピュータシステムと、軌道を実行するように構成された別々の別個の車両制御デバイスとを含むことができる。そのような分離は、本明細書で説明されるように、向上された安全性、冗長性、および最適化を提供することができる。加えて、そのような分離は、アーキテクチャの個々の構成要素に関連する問題をトラブルシューティングするのに有用であることができる。その上、そのような分離は、アーキテクチャの構成要素のための安全性証明(safety certification)を取得するのに有用であることができる。
本明細書で説明される方法、装置、およびシステムは、いくつかの方法で実装されることができる。例示的な実装形態が、後続の図を参照しながら以下で提供される。自律車両のコンテキストにおいて説明されるが、本明細書で説明される方法、装置、およびシステムは、産業用ロボットまたは無人航空機など、自律制御または半自律制御を要求する様々なシステムに適用されることができる。たとえば、方法、装置、およびシステムは、製造組立ラインコンテキストにおいて、航空測量コンテキストにおいてなどで利用されることができる。加えて、本明細書で説明される技法は、(たとえば、センサーを使用してキャプチャされた)実データ、(たとえば、シミュレータによって生成された)シミュレートされたデータ、またはその2つの任意の組合せとともに使用されることができる。
図1は、本明細書で説明されるように、軌道を生成および実行し、自律車両を制御するための例示的なアーキテクチャ100を示す。たとえば、アーキテクチャ100は、本明細書で説明されるシステム、方法、および装置の態様を実装するための様々なハードウェアおよび/またはソフトウェアを含むコンピュータシステム102を含むことができる。たとえば、コンピュータシステム102は、ルートプランニングモジュール104、判定モジュール106、軌道モジュール108、データ入力モジュール110、およびデータストア112を含むことができる。加えて、アーキテクチャ100は、本明細書で説明されるシステム、方法、および装置の態様を実装するための様々なハードウェアおよび/またはソフトウェアを含む車両制御デバイス114を含むことができる。いくつかの例では、車両制御デバイス114は、実行モジュール116、フォールバック決定モジュール118、およびデータ入力モジュール120を含むことができる、別々の別個のコンピュータシステムであることができる。いくつかの例では、コンピュータシステム102は、車両制御デバイス114を備えることができる。
いくつかの例では、コンピュータシステム102および車両制御デバイス114は、自律車両122または任意の他のタイプの輸送可能なコンピュータシステムにおいて実施されることができる。他の例では、コンピュータシステム102は、自律車両122から離れて置かれることができ、車両制御デバイス114は、自律車両122において実施されることができる。いくつかの事例では、本明細書で説明されるように、コンピュータシステム102は、自律車両122にプランニング機能性を提供することができ、車両制御デバイス114は、実行機能性を自律車両122に提供することができる。
上記で説明されたように、コンピュータシステム102は、ルートプランニングモジュール104、判定モジュール106、軌道モジュール108、データ入力モジュール110、およびデータストア112を含むことができる。少なくとも1つの例では、モジュールの個々のモジュール(たとえば、ルートプランニングモジュール104、判定モジュール106、および軌道モジュール108)は、異なる動作周波数を有することができる。図1に示されているように、ルートプランニングモジュール104は、第1の動作周波数(たとえば、f1)を有することができ、判定モジュール106は、第2の動作周波数(たとえば、f2)を有することができ、軌道モジュール108は、第3の動作周波数(たとえば、f3)を有することができる。少なくとも1つの例では、第1の周波数は、最低周波数(たとえば、10ヘルツ)であることができ、第3の周波数は、最高周波数(たとえば、100ヘルツ)であることができる。すなわち、少なくとも1つの例では、ルートプランニングモジュール104は、軌道モジュール108よりも低い速さでデータを処理することができる、判定モジュール106よりも低い速さでデータを処理することができる。異なる周波数は、個々のモジュールが、更新されたデータを受信する周波数、および/または個々のモジュールがデータを処理および出力する必要がある時間期間に基づいて、アーキテクチャ100が、計算リソースをモジュールに分配することを可能にすることができる。
ルートプランニングモジュール104は、第1のロケーション(たとえば、現在のロケーション)から第2のロケーション(たとえば、目的のロケーション)に移動するための最も効率的なルートを決定するように構成されることができる。この説明では、ルートは、2つのロケーションの間を移動するための一連の中間地点であることができる。非限定的な例として、中間地点は、街路、交差点、全地球測位システム(GPS)座標などを含む。少なくとも1つの例では、ルートプランニングモジュール104は、自律車両122を第1のロケーションから第2のロケーションに案内するためのルートを識別するために、マップの上で、グラフ探索など、探索を実施することができる。この説明では、マップは、限定はされないが、(交差点などの)トポロジー、街路、山脈、道路、地形、および全般的な環境など、環境についての情報を提供することが可能である、2次元または3次元でモデル化された任意の数のデータ構造であることができる。少なくとも1つの例では、ルートプランニングモジュール104は、自律車両を第1のロケーションから第2のロケーションに案内するためのルートを識別するために、グラフトラバーサルアルゴリズム(graph traversal algorithm)を利用することができる。グラフトラバーサルアルゴリズムは、重み付けされていないグラフ(たとえば、幅優先探索、深さ優先探索、グリーディ最良優先(greedy best first)、A*探索など)、および/または重み付けされたグラフ(たとえば、ダイクストラアルゴリズム、重み付けされたA*探索など)のためのアルゴリズムを含むことができる。
いくつかの例では、ルートプランニングモジュール104は、自律車両122を第1のロケーションから第2のロケーションに案内するための2つまたはそれ以上の候補ルートを識別することができる。そのような例では、ルートプランニングモジュール104は、ルートプランニング制約に基づいて、2つまたはそれ以上の候補ルートをランク付けすることができる。ルートプランニング制約は、交通規則、移動時間、移動距離などを含むことができる。少なくとも1つの例では、ルートプランニングモジュール104は、最高位の候補ルートが、自律車両122を第1のロケーションから第2のロケーションに案内するためのルートであると決定することができる。ルートプランニングモジュール104は、ルートに対応する一連の中間地点を判定モジュール106に出力することができる。
少なくとも1つの例では、判定モジュール106は、ルート(たとえば、一連の中間地点)を受信することができ、自律車両122をルートの少なくとも一部分に沿って第1のロケーションから第2のロケーションに案内するための命令を生成することができる。少なくとも1つの例では、判定モジュール106は、自律車両122を一連の中間地点中の第1の中間地点から一連の中間地点中の第2の中間地点にどのように案内すべきかを決定することができる。いくつかの例では、命令は、軌道または軌道の一部分であることができる。そのような例では、判定モジュール106は、一連のアクション(たとえば、道路に沿って運転する、加速する、車線を変更する、左に曲がるなど)を生成し、自律車両122をルートに沿って案内することができる。軌道の非限定的な例は、「自律車両を10メートル/秒で運転する」であることができる。他の例では、命令はポリシーであることができる。ポリシーは、自律車両122上のセンサーから受信されたリアルタイム処理されたセンサーデータに基づいて自律車両122の軌道を決定するために使用されることができる。ポリシーの非限定的な例は、「5メートル空けて前方の車に追従する」であることができる。
少なくとも1つの例では、判定モジュール106は、制約に鑑みて、自律車両122を第1のロケーションから第2のロケーションに案内するための命令を決定するために、1つまたは複数のモデルおよび/またはアルゴリズムを利用することができる。たとえば、少なくとも1つの例では、判定モジュール106は、どの命令を選択するべきかを決定するより前に、1つまたは複数の候補命令を決定し、潜在的命令の各々の性能を評価するために、時相論理(たとえば、線形時相論理(LTL)、信号時相論理(STL)、間隔時相論理(ITL:interval temporal logic)、計算ツリー論理(CTL)プロパティ仕様言語(PSL:property specification language)、ヘネシーミルナー論理(HML:Hennessy-Milner logic)など)と、探索アルゴリズム(たとえば、ポリシーツリー探索(policy tree search)、モンテカルロツリー探索(MCT)、全数探索など)との組合せを利用することができる。判定モジュール106に関連する追加の詳細は、その全体が参照により本明細書に組み込まれる、関連出願第15/632147号に記載されている。判定モジュール106は、命令を軌道モジュール108に出力することができる。
少なくとも1つの例では、判定モジュール106は、フォールバック命令を決定することができる。フォールバック命令は、以下で説明される、フォールバックアクションを保証するイベントが発生したとき、自律車両122が従うべきである命令であることができる。そのような例では、判定モジュール106は、フォールバック命令を軌道モジュール108および/またはフォールバック決定モジュール118に提供することができる。いくつかの例では、判定モジュール106は、判定モジュール106が、命令を軌道モジュール108に提供する(すなわち、判定モジュール106が、2つの命令を軌道モジュール108に提供することができる)ことと同時に、フォールバック命令を軌道モジュール108および/またはフォールバック決定モジュール118に提供することができる。他の例では、判定モジュール106は、判定モジュール106が、命令を軌道モジュール108に提供するときとは異なる時間に、フォールバック命令を軌道モジュール108および/またはフォールバック決定モジュール118に提供することができる。
いくつかの例では、判定モジュール106は、命令を出力するための限られた時間の量を有することができる。すなわち、少なくとも1つの例では、判定モジュール106は、命令をリクエストする割込みを受信することができ、判定モジュール106は、割込みを受信したことに応答して、命令を提供することができる。その上、ルートを処理し、命令を生成することは、計算コストが高くなることがある。したがって、少なくとも1つの例では、判定モジュール106は、上記で説明されたように、ルートプランニングモジュール104よりも高い周波数において動作することができる。少なくとも1つの例では、判定モジュール106は、軌道モジュール108によって実施されるリアルタイム判定実行のために要求される周波数よりも低い周波数において動作することができる。非限定的な例として、判定モジュール106は、10ヘルツにおいて動作することができるのに対して、ルートプランニングモジュール104は、1ヘルツにおいて動作することができ、軌道モジュール108は、30ヘルツにおいて動作することができる。
軌道モジュール108は、命令を受信することができ、環境中で識別されたオブジェクトに基づいて、命令を最適化することができる。少なくとも1つの例では、軌道モジュール108は、リアルタイム処理されたセンサーデータにアクセス、リアルタイム処理されたセンサーデータを受信、および/または決定し、自律車両122が移動している環境中のオブジェクトを決定することができる。少なくとも1つの例では、軌道モジュール108は、リアルタイム処理されたセンサーデータに鑑みて、命令を処理することができる。
命令が軌道である例では、軌道モジュール108は、軌道を最適化するために、モデルおよび/またはアルゴリズム、制約、および/またはコストを活用することができる。たとえば、軌道モジュール108は、軌道を改良するために、限定はされないが、差動動的プログラミング(differential dynamic programming)、内点最適化(interior point optimization)、順次2次プログラミング(sequential quadratic programming)などを含むモデルおよび/またはアルゴリズムを利用することができる。少なくとも1つの例では、制約は、限定はされないが、コスト、快適さ、安全性、交通規則などを含むことができる。少なくとも1つの例では、コストは、限定はされないが、性能(たとえば、速さ)、横方向加速度を最小限に抑えること、車線における位置決めなどを含むことができる。少なくとも1つの例では、モデルおよび/またはアルゴリズムは、双方向性を含むことができる。そのような例では、自律車両122の速度は、最適化され、正、負、または0値を含むことができる。少なくとも1つの例では、自律車両122の回転は、ユークリッド行列を使用して説明されることができる。その結果、異なるタイプの中間地点(たとえば、道路、交差点、ロータリーなど)を有する軌道を最適化するために、同じモデルおよび/またはアルゴリズムが使用されることができる。軌道を処理することに少なくとも部分的に基づいて、リアルタイム処理されたセンサーデータに鑑みて、軌道モジュール108は、出力軌道を生成することができる。
命令がポリシーである例では、軌道モジュール108は、ポリシーおよびリアルタイム処理されたセンサーデータに基づいて、軌道を生成するために、モデルおよび/またはアルゴリズム、制約、および/またはコストを活用することができる。たとえば、軌道モジュール108は、ポリシーに基づいて軌道を生成するために、限定はされないが、差動動的プログラミング、内点最適化、順次2次プログラミングなどを含むモデルおよび/またはアルゴリズムを利用することができる。この説明では、軌道は出力軌道と呼ばれることができる。
上記で説明されたように、軌道モジュール108は、リアルタイム処理されたセンサーデータにアクセス、リアルタイム処理されたセンサーデータを受信、および/または決定することができる。軌道モジュール108は、出力軌道を生成するために、リアルタイム処理されたセンサーデータを活用することができる。軌道モジュール108は、判定モジュール106よりも詳細な自律車両122のモデルを利用することができる。そのような詳細なモデルを利用する処理は、計算コストが高くなることがある。加えて、軌道モジュール108は、リアルタイム処理されたセンサーデータを受信した後、所定の時間の量内に出力軌道を出力することができる。たとえば、少なくとも1つの例では、軌道モジュール108は、出力軌道をリクエストする割込みを受信することができ、軌道モジュール108は、割込みを受信したことに応答して、出力軌道を提供することができる。いくつかの例では、軌道モジュール108は、障害物(たとえば、別の車両、歩行者など)またはコンディションを考慮するために、判定モジュール106が軌道を出力しなければならないよりも少ない出力軌道を出力するための時間を有することができる。したがって、軌道モジュール108は、上記で説明されたように、ルートプランニングモジュール104および/または判定モジュール106よりも高い周波数において動作することができる。
少なくとも1つの例では、軌道モジュール108は、フォールバック命令を判定モジュール106から受信することができる。そのような例では、軌道モジュール108は、上記で説明されたのと実質的に同様の様式でフォールバック命令を処理することに基づいて、出力フォールバック軌道を生成することができる。いくつかの例では、上記で説明されたように、軌道モジュール108は、同じ時間において出力軌道および出力フォールバック命令を出力することができる。
データ入力モジュール110は、入力を自律車両122上の1つまたは複数のセンサーから受信することができる。少なくとも1つの例では、自律車両122は、画像セグメンテーションおよび/または分類のための光検出および測距(LIDAR)データをキャプチャするためのLIDARセンサーと、セグメンテーションおよび/または分類のための視覚データをキャプチャするためのカメラセンサーと、環境中のオブジェクトの範囲、角度、および/または速度をキャプチャするための無線検出および測距(RADAR)センサーと、環境中のオブジェクトの音響情報をキャプチャするための音声ナビゲーションおよび測距(SONAR)センサーとなどを含むことができる1つまたは複数のセンサーを有することができる。少なくとも1つの例では、データ入力モジュール110は、上記で説明されたセンサー(たとえば、LIDARセンサー、カメラセンサー、RADARセンサー、SONARセンサーなど)の各々からデータを受信することができ、データを処理し、オブジェクトを識別し、環境中のオブジェクトについての情報を決定することができる。加えて、自律車両122は、超音波トランスデューサ、ホイールエンコーダ、マイクロフォン、慣性測定ユニット(IMU)、加速度計、ジャイロスコープ、磁力計、温度センサー、湿度センサー、光センサー、全地球測位システム(GPS)センサーなどを含むことができる。データ入力モジュール110は、1つまたは複数のセンサーから受信されたデータを処理し、特定の時間における自律車両122の状態を決定することができる。すなわち、データ入力モジュール110は、1つまたは複数のセンサーから受信されたデータを処理し、特定の時間における自律車両122の位置、特定の時間における自律車両122の向き、特定の時間における自律車両122の速度などを決定することができる。少なくとも1つの例では、1つまたは複数のセンサーおよびデータ入力モジュール110は、セグメンテーションおよび分類など、データ分析を実施するための知覚システムに関連付けられることができる。以下で説明されるように、そのようなデータ(たとえば、リアルタイム処理されたセンサーデータ)は、出力軌道を生成するために軌道モジュール108によって使用されることができる。加えて、そのようなデータ(たとえば、リアルタイム処理されたセンサーデータ)は、ルートをプランニングするためにルートプランニングモジュール104によって、および/または命令を生成するために判定モジュール106によって使用されることができる。
データストア112は、データを、それが編成、更新、およびアクセスされることができるように記憶することができる。少なくとも1つの例では、データストア112は、モデル124、制約126、ポリシー128、論理規則130、システム識別データ132、予測データ134、マップ136などを含むことができる。モデル124は、自律車両122のモデル、環境中の他のオブジェクトのモデル、判定モデルなどを含むことができる。
任意の数の車両モデルが、本明細書で説明されるシステムおよび方法とともに使用されることができる。いくつかの例では、可能なアクションおよび/または予測されたステアリング角度の粗い離散化を有する車両モデルが、使用されることができる。特定の車両モデルの選定は、自律車両によって実行されることができる可能な軌道を生成するように行われることができる。
一例では、各道路世界(road world)エンティティの状態iは、wi=[px,py,θ,v,ψ]によって定義されることができ、ここで、(px,py)は車両の慣性座標であり、θはそれのベアリング(bearing)であり、vはそれの線速度である。さらに、道路世界制御入力は、
Figure 0007344120000001
であるような、加速度aおよびステアリング角度レート
Figure 0007344120000002
のうちの1つまたは複数を備えることができるが、任意の数の他の制御入力が企図される。
続いて、そのような例では、プランニングエージェント(たとえば、自律車両)の動力学は、
Figure 0007344120000003
のようにモデル化されることができ、ここで、Lは車両ホイールベース長である。いくつかの例では、0.1秒の固定された時間ステップが、学習のためにおよびすべての実験のために使用されることができるが、任意の他の時間ステップが企図される。理解されることができるように、いくつかの例では、自律車両の動力学は、モデル124のうちの1つとして記憶されることができる。制約126は、コスト、快適さ、安全性、交通規則などを含むことができる。ポリシー128は、マニュアルポリシー、学習されたポリシー、制御ポリシー、オプションポリシーなどを含むことができる。例示的なポリシーは、限定はされないが、他の車両から維持すべき最小距離、最大加速度レート、運転規則(たとえば、車線内にとどまる、二重黄線(double yellow line)を越えないなど)および同様のものを含む。論理規則130は、道理に基づく(reasoned)交通規則などを含むことができる。システム識別データ132は、経時的な自律車両122についての情報を含むことができる。予測データ134は、将来の時間における自律車両122の1つまたは複数のスナップショットを含むことができ、および/または将来の時間における自律車両122に近接した他の動的オブジェクト(たとえば、他の車両)の挙動の予測を含むことができる。マップ136は、限定はされないが、(交差点などの)トポロジー、街路、山脈、道路、地形、および全般的な環境など、環境についての情報を提供することが可能である、2次元または3次元でモデル化されたデータ構造を含むことができる。
上記で説明されたように、車両制御デバイス114は、実行モジュール116、フォールバック決定モジュール118、およびデータ入力モジュール120を含むことができる、別々の別個のコンピュータシステムであることができる。いくつかの例では、車両制御デバイス114は、コンピュータシステム102に関連するデータ入力モジュール110および/またはデータストア112にアクセスすることができる。
実行モジュール116は、出力軌道を軌道モジュール108から受信することができ、自律車両122のステアリングおよびアクセラレーションを作動させるためのコマンドを算出し、自律車両122が出力軌道に追従することを可能にすることができる。少なくとも1つの例では、実行モジュール116は、出力軌道を受信することができ、ステアリング角度および速度を算出し、自律車両122が出力軌道に追従することを可能にすることができる。実行モジュール116が使用することができるアルゴリズムの非限定的な例が、以下に提供される。
δ=-P*ela (6)
ela=e+xla*sin(ΔΨ) (7)
上記の式(6)および式(7)において、利得(たとえば、所定の一定値)はPによって表され、横方向エラーはeによって表され、ルックアヘッドエラーはelaによって表され、ヘッディングエラーはΔΨによって表され、ルックアヘッド距離(パラメータ)はxlaによって表され、ステアリング角度はδによって表される。
フォールバック決定モジュール118は、フォールバック軌道にアクセス、フォールバック軌道を受信、および/または生成することができる。上記で説明されたように、フォールバック軌道は、自律車両122が、フォールバックアクションを保証するイベントの発生を決定したことに応答して追従すべきである軌道であることができる。少なくとも1つの例では、イベントは、コンピュータシステム102に関する問題であることができる。たとえば、コンピュータシステム102に関連するセンサーは故障することがあるか、または自律車両122の構成要素は誤動作することがある(たとえば、タイヤポップ(tire pop)、フロントガラス破損など)。または、イベントは、コンピュータシステム102からの通信の欠如、および/またはコンピュータシステム102の応答性に関連付けられることができる。いくつかの例では、イベントは、自律車両122のしきい値距離内にあるオブジェクト、自律車両122のしきい値距離内にあると予測されるオブジェクト、またはしきい値確率を超える事故(すなわち、衝突)の確率であることができる。しかも、少なくとも1つの例では、イベントは、自律車両122の占有ステータスに関連付けられることができる。自律車両122の占有ステータスは、自律車両122中の搭乗者がいつ無資格になる(incapacitate)か、搭乗者(または搭乗者に関連するオブジェクト)が自律車両122からいつ降ろされる(defenestrate)かなどを表すことができる。その上、イベントは、自律車両122に関連する運転可能な表面(drivable surface)のステータスに関連付けられることができる。運転可能な表面のステータスは、運転可能な表面がいつ無感覚(impassible)になったか(たとえば、橋がいつ崩壊したか、気象が無感覚のコンディションをいつ引き起こしたかなど)を表すことができる。さらに追加の例および/または代替の例では、イベントは、混乱しきい値を超えるコンピュータシステム102に関連する混乱のレベルに関連付けられることができる。たとえば、コンピュータシステム102は、リアルタイム処理されたセンサーデータを受信することができ、混乱のレベルを表すことができる、自律車両122を囲む環境中の1つまたは複数のオブジェクトを識別することが可能でないことがある。
少なくとも1つの例では、フォールバック軌道は、自律車両122を積極的に停車すること、路肩まで運転し停車することなど、安全操縦(safety maneuver)に対応することができる、フォールバックアクションに対応することができる。いくつかの例では、フォールバックアクションは、搭乗者にとって「スムーズ」でないことがあるが、イベントの発生に応答して、状況を安全にナビゲートすることができる。いくつかの例では、フォールバック決定モジュール118は、判定モジュール106および/または軌道モジュール108から出力フォールバック軌道を受信することができる。そのような例では、フォールバック決定モジュール118は、所定の時間期間の間、新しい出力フォールバック軌道が受信されるまでなど、出力フォールバック軌道を記憶することができる。他の例では、フォールバック決定モジュール118は、リアルタイム処理されたセンサーデータおよび/またはハードコーディングされた規則に少なくとも部分的に基づいて、フォールバック軌道を生成することができる。少なくとも1つの例では、フォールバック軌道は、イベントのタイプに基づいて決定されることができる。すなわち、異なるイベントは、異なるフォールバックアクションを保証することができる。
少なくとも1つの例では、フォールバック決定モジュール118は、自律車両122が障害物と衝突しようとしていると決定することができる。すなわち、フォールバック決定モジュール118は、オブジェクトが自律車両122のしきい値距離内にあると決定するために、リアルタイム処理されたセンサーデータを活用することができる。自律車両122が障害物と衝突しようとしていると決定したことに少なくとも部分的に基づいて、フォールバック決定モジュール118は、自律車両122がフォールバックアクションを実施することを引き起こすフォールバック軌道にアクセスおよび/または生成することができる。加えておよび/または代替として、少なくとも1つの例では、フォールバック決定モジュール118は、車両制御デバイス114が、出力軌道および/または他の通信をコンピュータシステム102から受信していないと決定することができる。すなわち、フォールバック決定モジュール118は、コンピュータシステム102が、非応答および/または非通信であると決定することができる。コンピュータシステム102が、非応答および/または非通信であると決定したことに少なくとも部分的に基づいて、フォールバック決定モジュール118は、そのような決定に応答して、フォールバック軌道にアクセスおよび/またはフォールバック軌道を生成することができる。
少なくとも1つの例では、フォールバック決定モジュール118は、フォールバック軌道を実行モジュール116に提供することができ、実行モジュール116は、自律車両122のステアリングおよびアクセラレーションを作動させるためのコマンドを算出し、自律車両122がフォールバック軌道に追従することを可能にすることができる。
データ入力モジュール120は、入力を自律車両122上の1つまたは複数のセンサーから受信することができる。少なくとも1つの例では、自律車両122は、セグメンテーションおよび/または分類のためのLIDARデータをキャプチャするためのLIDARセンサー、画像セグメンテーションおよび/または分類のための視覚データをキャプチャするためのカメラセンサー、環境中のオブジェクトの範囲、角度、および/または速度をキャプチャするためのRADARセンサー、環境中のオブジェクトの音響情報をキャプチャするためのSONARセンサーなどを含むことができる1つまたは複数のセンサーを有することができる。少なくとも1つの例では、データ入力モジュール120は、上記で説明されたセンサー(たとえば、LIDARセンサー、カメラセンサー、RADARセンサー、SONARセンサーなど)の各々からデータを受信することができ、データを処理し、オブジェクトを識別し、環境中のオブジェクトについての情報を決定することができる。加えて、自律車両122は、超音波トランスデューサ、ホイールエンコーダ、マイクロフォン、IMU、加速度計、ジャイロスコープ、磁力計、温度センサー、湿度センサー、光センサー、GPSセンサーなどを含むことができる。データ入力モジュール120は、1つまたは複数のセンサーから受信されたデータを処理し、特定の時間における自律車両122の状態を決定することができる。すなわち、データ入力モジュール120は、1つまたは複数のセンサーから受信されたデータを処理し、特定の時間における自律車両122の位置、特定の時間における自律車両122の向き、特定の時間における自律車両122の速度などを決定することができる。
そのようなデータ(たとえば、リアルタイム処理されたセンサーデータ)は、フォールバックアクションがいつ保証されるかを決定するために、および/またはフォールバック軌道を生成するためにフォールバック決定モジュール118によって使用されることができる。加えておよび/または代替として、そのようなデータ(たとえば、リアルタイム処理されたセンサーデータ)は、自律車両122が出力軌道および/またはフォールバック軌道に追従することを可能にするために、ステアリング角度および速度を算出するための実行モジュール116によって使用されることができる。
少なくとも1つの例では、実行モジュール116およびフォールバック決定モジュール118は、ルートプランニングモジュール104、判定モジュール106、および/または軌道モジュール108とは異なる第4の動作周波数(たとえば、f4)を有することができる。少なくとも1つの例では、実行モジュール116およびフォールバック決定モジュール118は、最高周波数において動作し、実行モジュール116およびフォールバック決定モジュール118がほぼリアルタイムの判定を行うことを可能にすることができる。
コンピュータシステム102および車両制御デバイス114の追加の詳細が、図6に関して以下で提供される。
上記で説明されたように、少なくとも1つの例では、モジュールの個体は、異なる動作周波数を有することができる。たとえば、ルートプランニングモジュール104は、第1の動作周波数(たとえば、f1)を有することができ、判定モジュール106は、第2の動作周波数(たとえば、f2)を有することができ、軌道モジュール108は、第3の動作周波数(たとえば、f3)を有することができ、実行モジュール116およびフォールバック決定モジュール118は、第4の動作周波数(たとえば、f4)を有することができる。少なくとも1つの例では、上記で説明されたように、第1の周波数は、最低周波数(たとえば、10ヘルツ)であることができ、第4の周波数は、最高周波数(たとえば、100ヘルツ)であることができる。この構成は、個々のモジュールが、更新されたデータを受信する周波数、および/または個々のモジュールがデータを処理および出力する必要がある時間期間に基づいて、アーキテクチャ100が、計算リソースをモジュールに分配することを可能にする。
加えて、上記で説明されたように、コンピュータシステム102は、車両制御デバイス114とは別々で別個であることができる。いくつかの例では、この構成は、安全性、冗長性、および最適化を向上させることができる。上記で説明されたように、少なくとも1つの例では、フォールバック決定モジュール118は、上記で説明されたように、フォールバックアクションを保証するイベントの発生を決定することができる。そのような例では、フォールバック決定モジュール118は、実行モジュール116によって実行されることができる、フォールバック軌道にアクセスおよび/またはフォールバック軌道を生成することができる。少なくとも1つの例では、フォールバック命令は、積極的に(しかし安全に)自律車両122を停車するための命令に対応することができる。他の例では、フォールバック命令は、何らかの他の安全操縦を実施することに対応することができる。
その上、上記で説明されたように、データ入力モジュール120は、センサーデータを1つまたは複数のセンサーから受信することができる。データ入力モジュール120は、1つまたは複数のセンサーから受信されたセンサーデータを処理し、局所的に自律車両122の状態を決定することができる。実行モジュール116は、ステアリング角度および速度を算出するために自律車両122の状態を利用し、コンピュータシステム102と通信する必要なしに、自律車両122が出力軌道に追従することを可能にすることができる。すなわち、実行モジュール116を実行している車両制御デバイス114を、1つまたは複数の他のモジュール(たとえば、ルートプランニングモジュール104、判定モジュール106、軌道モジュール108など)を実行しているコンピュータシステム102から分離することは、車両制御デバイス114がローカルに軌道を実行することを可能にすることよって、車両制御デバイス114によって消耗される計算リソースを節約することができる。
追加および/または代替の例では、コンピュータシステム102の、車両制御デバイス114からの分離は、トラブルシューティングに有用であることができる。たとえば、プログラマーは、コンピュータシステム102または車両制御デバイス114のいずれかに関連するエラー、不備、故障、欠陥などを識別することができる。したがって、プログラマーは、システム全体をトラブルシューティングする代わりに、コンピュータシステム102または車両制御デバイス114のいずれかをトラブルシューティングすることができる。
その上、コンピュータシステム102の、車両制御デバイス114からの分離は、車両制御デバイス114のより容易な安全性証明を可能にすることができる。すなわち、(コンピュータシステム102上の)プランニング機能性を(車両制御デバイス114上の)実行機能性から分離することによって、アーキテクチャ100は、車両制御デバイス114上で実行するコードの量を最小限に抑え、安全性証明をより取得しやすくすることができる。
図2~図5は、本開示の実施形態による例示的なプロセスを示す。これらのプロセスは、論理フローグラフとして示され、それらの各動作は、ハードウェア、ソフトウェア、またはそれらの組合せで実装されることができる一連の動作を表す。ソフトウェアのコンテキストでは、動作は、1つまたは複数のプロセッサによって実行されたとき、具陳される動作を実施する、1つまたは複数のコンピュータ可読記憶媒体に記憶されたコンピュータ実行可能命令を表す。概して、コンピュータ実行可能命令は、特定の機能を実施するかまたは特定の抽象データタイプを実装するルーチン、プログラム、オブジェクト、構成要素、データ構造および同様のものを含む。動作が説明される順序は、限定として解釈されることを意図されず、任意の数の説明される動作が、任意の順序でおよび/または並列に組み合わせられ、プロセスを実装することができる。
図2は、軌道を生成および実行し、自律車両を制御するための例示的なプロセス200を描く。
ブロック202は、自律車両の現在のロケーションを決定することを示す。上記で説明されたように、データ入力モジュール110は、データを1つまたは複数のセンサーから受信することができ、データ(すなわち、リアルタイム処理されたセンサーデータ)を処理し、特定の時間における自律車両122の位置、特定の時間における自律車両122の向き、特定の時間における自律車両122の速度などを決定することができる。少なくとも1つの例では、ルートプランニングモジュール104は、リアルタイム処理されたセンサーデータを分析し、自律車両の現在の位置(pose)を決定することができる。少なくとも1つの例では、現在の位置に少なくとも部分的に基づいて、ルートプランニングモジュール104は、データストア112に記憶されたマップ136上の第1のロケーションに対応することができる、自律車両の現在のロケーションを決定することができる。
ブロック204は、自律車両のための目的のロケーションを決定することを示す。少なくとも1つの例では、ルートプランニングモジュール104は、目的のロケーションの指示を受信することができる。少なくとも1つの例では、目的のロケーションは、マップ136上の第2のロケーションに対応することができる。
ブロック206は、リアルタイム処理されたセンサーデータを受信することを示す。上記で説明されたように、データ入力モジュール110は、入力を自律車両122上の1つまたは複数のセンサーから受信することができる。少なくとも1つの例では、自律車両122は、セグメンテーションおよび/または分類のためのLIDARデータをキャプチャするためのLIDARセンサー、画像セグメンテーションおよび/または分類のための視覚データをキャプチャするためのカメラセンサー、環境中のオブジェクトの範囲、角度、および/または速度をキャプチャするためのRADARセンサー、環境中のオブジェクトの音響情報をキャプチャするためのSONARセンサーなどを含むことができる1つまたは複数のセンサーを有することができる。少なくとも1つの例では、データ入力モジュール110は、上記で説明されたセンサー(たとえば、LIDARセンサー、カメラセンサー、RADARセンサー、SONARセンサーなど)の各々からデータを受信することができ、データを処理し、オブジェクトを識別し、環境中のオブジェクトについての情報を決定することができる。加えて、自律車両122は、超音波トランスデューサ、ホイールエンコーダ、マイクロフォン、IMU、加速度計、ジャイロスコープ、磁力計、温度センサー、湿度センサー、光センサー、GPSセンサーなどを含むことができる。データ入力モジュール110は、1つまたは複数のセンサーから受信されたデータを処理し、特定の時間における自律車両122の状態を決定することができる。すなわち、データ入力モジュール110は、1つまたは複数のセンサーから受信されたデータを処理し、特定の時間における自律車両122の位置、特定の時間における自律車両122の向き、特定の時間における自律車両122の速度などを決定することができる。
少なくとも1つの例では、ルートプランニングモジュール104は、リアルタイム処理されたセンサーデータをデータ入力モジュール110から受信することができる。図2は、ルートプランニングモジュール104を、リアルタイム処理されたセンサーデータを受信するものとして示しているが、他のモジュール(たとえば、判定モジュール106および/または軌道モジュール108)の各々は、リアルタイム処理されたセンサーデータをデータ入力モジュール110から受信することができ、および/またはリアルタイム処理されたセンサーデータにルートプランニングモジュール104からアクセスすることができる。
ブロック208は、第1の動作周波数において、自律車両を現在のロケーションから目的のロケーションに案内するためのルートを決定することを示す。上記で説明されたように、第1の動作周波数において動作することができるルートプランニングモジュール104は、現在のロケーションから目的のロケーションに移動するための最も効率的なルートを決定するように構成されることができる。少なくとも1つの例では、ルートプランニングモジュール104は、マップ136にアクセスすることができ、マップ136の上で、グラフ探索など、探索を実施し、自律車両122を現在のロケーションから目的のロケーションに案内するためのルートを識別することができる。上記で説明されたように、少なくとも1つの例では、ルートプランニングモジュール104は、自律車両を現在のロケーションから目的のロケーションに案内するためのルートを識別するために、グラフトラバーサルアルゴリズムを利用することができる。そのようなルートは、道路ネットワークにおいてトラバースするための特定の道路に対応することができる。
上記で説明されたように、いくつかの例では、ルートプランニングモジュール104は、自律車両122を現在のロケーションから目的のロケーションに案内するための2つまたはそれ以上の候補ルートを識別することができる。そのような例では、ルートプランニングモジュール104は、ルートプランニング制約に基づいて、2つまたはそれ以上の候補ルートをランク付けすることができる。ルートプランニング制約は、交通規則、移動時間、移動距離、気象、交通量、個人的選好などを含むことができる。少なくとも1つの例では、ルートプランニングモジュール104は、最高位の候補ルートが、自律車両122を現在のロケーションから目的のロケーションに案内するためのルートであると決定することができる。ルートプランニングモジュール104は、ルートに対応する一連の中間地点を判定モジュール106に出力することができる。
ルートプランニングモジュール104は、ブロック202~ブロック208に関連する動作を繰り返し実施し、更新されたルートに対応する新しい一連の中間地点を判定モジュール106に出力することができる。
ブロック210は、第2の動作周波数において、ルートに少なくとも部分的に基づいて、命令を決定することを示す。少なくとも1つの例では、第2の動作周波数において動作することができる判定モジュール106は、ルート(すなわち、一連の中間地点)を受信することができ、自律車両122をルートの少なくとも一部分に沿って現在のロケーションから目的のロケーションに案内するための命令を生成することができる。少なくとも1つの例では、判定モジュール106は、自律車両122を一連の中間地点中の第1の中間地点から一連の中間地点中の第2の中間地点にどのように案内すべきかを決定することができる。いくつかの例では、命令は軌道であることができる。そのような例では、判定モジュール106は、一連のアクション(たとえば、道路に沿って運転する、加速する、車線を変更する、左に曲がるなど)を生成し、自律車両122をルートに沿って案内することができる。他の例では、命令はポリシーであることができる。ポリシーは、自律車両122上のセンサーから受信されたリアルタイム処理されたセンサーデータに基づいて自律車両122の軌道を決定するために使用されることができる。
少なくとも1つの例では、判定モジュール106は、制約に鑑みて、自律車両122を第1のロケーションから第2のロケーションに案内するための命令を決定するために、1つまたは複数のモデルおよび/またはアルゴリズムを利用することができる。たとえば、少なくとも1つの例では、判定モジュール106は、上記で説明されたように、どの命令を選択するべきかを決定するより前に、1つまたは複数の候補命令を決定し、潜在的命令の各々の性能を評価するために、時相論理(たとえば、線形時相論理(LTL)、信号時相論理(STL)、間隔時相論理(ITL)、計算ツリー論理(CTL)プロパティ仕様言語(PSL)、ヘネシーミルナー論理(HML)など)と、探索アルゴリズム(たとえば、ポリシーツリー探索、モンテカルロツリー探索(MCT)、全数探索など)との組合せを利用することができる。判定モジュール106は、命令を軌道モジュール108に出力することができる。
判定モジュール106は、更新されたルートに対応する更新された一連の中間地点を受信したことに基づいて、新しい命令を出力することができる。すなわち、判定モジュール106は、ブロック210に関連する動作を繰り返し実施することができる。
ブロック212は、第3の動作周波数において、リアルタイム処理されたセンサーデータおよび命令に少なくとも部分的に基づいて、軌道を生成することを示す。少なくとも1つの例では、第3の動作周波数において動作することができる軌道モジュール108は、命令を受信することができ、リアルタイム処理されたセンサーデータに基づいて、命令を最適化することができる。少なくとも1つの例では、軌道モジュール108は、(たとえば、データ入力モジュール110からの)リアルタイム処理されたセンサーデータにアクセス、受信、および/または決定し、自律車両122が移動している環境中のオブジェクトを決定することができる。少なくとも1つの例では、軌道モジュール108は、リアルタイム処理されたセンサーデータに鑑みて、命令を処理することができる。
命令が軌道である例では、軌道モジュール108は、軌道を最適化するために、モデルおよび/またはアルゴリズム、制約、および/またはコストを活用することができる。たとえば、軌道モジュール108は、上記で説明されたように、軌道を改良するために、限定はされないが、差動動的プログラミング、内点最適化、順次2次プログラミングなどを含むモデルおよび/またはアルゴリズムを利用することができる。軌道を処理することに少なくとも部分的に基づいて、リアルタイム処理されたセンサーデータに鑑みて、軌道モジュール108は、出力軌道を生成することができる。
命令がポリシーである例では、軌道モジュール108は、ポリシーおよびリアルタイム処理されたセンサーデータに基づいて、軌道を生成するために、モデルおよび/またはアルゴリズム、制約、および/またはコストを活用することができる。たとえば、軌道モジュール108は、ポリシーに基づいて軌道を生成するために、限定はされないが、差動動的プログラミング、内点最適化、順次2次プログラミングなどを含むモデルおよび/またはアルゴリズムを利用することができる。この説明では、軌道は出力軌道と呼ばれることができる。いくつかの例では、軌道は、遠ざかる地平線(receding horizon)として計算されることができる。そのような例では、計算された軌道は、たとえば、2ms~10sなど、将来への有限時間(a finite time into the future)をスパンすることができるが、任意の地平線時間(horizon time)が企図される。いくつかの例では、多数の軌道が、実質的に同時に決定されることができる。それらの例では、出力軌道は、最低コスト、制約違反なし、または同様のものを有する軌道として選択されることができる。
軌道モジュール108は、更新された命令を判定モジュール106から受信したことに基づいて、新しい軌道を生成することができる。すなわち、軌道モジュール108は、ブロック212に関連する動作を繰り返し実施することができる。
ブロック214は、第4の動作周波数において、軌道を実行することを示す。第4の動作周波数において動作することができる実行モジュール116は、出力軌道を軌道モジュール108から受信することができ、自律車両122のステアリングおよびアクセラレーションを作動させるためのコマンドを算出し、自律車両122が出力軌道に追従することを可能にすることができる。少なくとも1つの例では、実行モジュール116は、出力軌道を受信することができ、ステアリング角度および速度を算出し、自律車両122が出力軌道に追従することを可能にすることができる。
上記で説明されたように、実行モジュール116は、コンピュータシステム102とは別々の別個のコンピュータシステムであることができる、車両制御デバイス114に記憶されることができる。すなわち、コンピュータシステム102は、ブロック202~ブロック212によって表される動作を実行することができ、車両制御デバイス114は、ブロック214によって表される動作を実行することができる。そのような分離は、上記で説明されたように、向上された安全性、冗長性、および最適化を提供することができる。加えて、そのような分離は、アーキテクチャの個々の構成要素に関連する問題をトラブルシューティングするのに有用であることができる。その上、そのような分離は、アーキテクチャの構成要素のための安全性証明を取得するのに有用であることができる。
図3は、フィードバックデータを生成し、フィードバックデータを使用し、アーキテクチャの態様を更新するための例示的なプロセス300を描く。
ブロック302は、自律車両を現在のロケーションから目的のロケーションに案内するための軌道に関連する前の軌道を取り出すことを示す。少なくとも1つの例では、モジュール(たとえば、判定モジュール106、軌道モジュール108など)は、前の軌道を取り出すことができる。そのような軌道は、実行モジュール116に送られた直近の出力軌道であることができる。
ブロック304は、現在の軌道を決定することを示す。少なくとも1つの例では、モジュール(たとえば、判定モジュール106、軌道モジュール108など)は、自律車両が軌道の少なくとも一部分に沿って現在のロケーションから目的のロケーションに移動することを可能にするための軌道を決定することができる。いくつかの例では、現在の軌道は、自律車両上のセンサーのうちの1つまたは複数に少なくとも部分的に基づいて計算されることができる。非限定的な例として、後続のGPS測定は、現在の位置および速度を提供することができる。
ブロック306は、前の軌道と現在の軌道とを比較することを示す。少なくとも1つの例では、モジュール(たとえば、判定モジュール106、軌道モジュール108など)は、前の軌道と現在の軌道とを比較することができ、モジュールは、ブロック308に示されているように、前の軌道と実行された軌道とを比較することに少なくとも部分的に基づいて、フィードバックデータを生成することができる。非限定的な例として、比較は、現在の軌道の速度または位置のうちの1つまたは複数と、(たとえば、1つまたは複数のモデル124を使用して時間的に前へ進むことによって)前の軌道の現在時間への推定された発展との間の差を備えることができる。少なくとも1つの例では、前の軌道を現在の軌道と比較することによって、モジュールは、自律車両が、それが挙動することを予想されるように挙動しているかどうかを決定することができる。
ブロック310は、フィードバックデータに少なくとも部分的に基づいて、少なくとも1つのモジュールを更新することを示す。少なくとも1つの例では、モジュールは、ルートに基づいて命令を生成するために利用されるモデルおよび/またはアルゴリズムを更新するためにフィードバックデータを活用することができる、判定モジュール106に対応することができる。追加および/または代替の例では、モジュールは、判定モジュール106から受信された命令に基づいて軌道を生成するために利用されるモデルおよび/またはアルゴリズムを更新するためにフィードバックデータを活用することができる、軌道モジュール108に対応することができる。非限定的な例として、位置または速度のうちの1つまたは複数の差は、モデルにおける無効な推定(たとえば、摩擦、車両ステアリング、ブレーキングキャパシティ、トルクなど)を示すことができる。そのような差は、制御機構にフィードバックされ、モデルにおける差を考慮することができる。
図4は、フォールバック軌道を生成するための例示的なプロセス400を描く。
ブロック402は、フォールバックアクションに関連するフォールバック命令を決定することを示す。上記で説明されたように、少なくとも1つの例では、判定モジュール106は、1つまたは複数のモデルおよび/またはアルゴリズムを利用するフォールバック命令を決定することができる。フォールバック命令は、イベントが発生したとき、自律車両122が従うべきである命令であることができる。少なくとも1つの例では、判定モジュール106は、判定モジュール106が、命令を軌道モジュール108に提供する(すなわち、判定モジュール106が、2つの命令を軌道モジュール108に提供することができる)ことと同時に、フォールバック命令を軌道モジュール108に提供することができる。
ブロック404は、リアルタイム処理されたセンサーデータを受信することを示す。上記で説明されたように、データ入力モジュール110は、自律車両122上の1つまたは複数のセンサー(たとえば、LIDARセンサー、カメラセンサー、RADARセンサー、SONARセンサーなど)から入力を受信することができ、データを処理し、オブジェクトを識別し、環境中のオブジェクトについての情報を決定することができる。加えて、自律車両122は、超音波トランスデューサ、ホイールエンコーダ、マイクロフォン、IMU、加速度計、ジャイロスコープ、磁力計、温度センサー、湿度センサー、光センサー、GPSセンサーなどを含むことができる。データ入力モジュール110は、1つまたは複数のセンサーから受信されたデータを処理し、特定の時間における自律車両122の状態を決定することができる。すなわち、データ入力モジュール110は、1つまたは複数のセンサーから受信されたデータを処理し、特定の時間における自律車両122の位置、特定の時間における自律車両122の向き、特定の時間における自律車両122の速度などを決定することができる。
ブロック406は、リアルタイム処理されたセンサーデータおよびフォールバック命令に少なくとも部分的に基づいて、フォールバック軌道を生成することを示す。少なくとも1つの例では、軌道モジュール108は、フォールバック命令を判定モジュール106から受信することができる。そのような例では、軌道モジュール108は、フォールバック命令を処理することに基づいて、出力フォールバック軌道を生成することができる。
フォールバック命令が軌道である例では、軌道モジュール108は、フォールバック軌道を最適化するために、モデルおよび/またはアルゴリズム、制約、および/またはコストを活用することができる。たとえば、軌道モジュール108は、上記で説明されたように、フォールバック軌道を改良するために、限定はされないが、差動動的プログラミング、内点最適化、順次2次プログラミングなどを含むモデルおよび/またはアルゴリズムを利用することができる。加えてまたは代替として、フォールバック軌道は、本明細書で詳細に説明されるように、出力軌道が決定される任意のやり方で決定されることができる。フォールバック軌道を処理することに少なくとも部分的に基づいて、リアルタイム処理されたセンサーデータに鑑みて、軌道モジュール108は、出力フォールバック軌道を生成することができる。
フォールバック命令がポリシーである例では、軌道モジュール108は、ポリシーおよびリアルタイム処理されたセンサーデータに基づいて、フォールバック軌道を生成するために、モデルおよび/またはアルゴリズム、制約、および/またはコストを活用することができる。たとえば、軌道モジュール108は、ポリシーに基づいてフォールバック軌道を生成するために、限定はされないが、差動動的プログラミング、内点最適化、順次2次プログラミングなどを含むモデルおよび/またはアルゴリズムを利用することができる。この説明では、フォールバック軌道は出力フォールバック軌道と呼ばれることができる。
ブロック408は、フォールバック軌道を一時的に記憶することを示す。軌道モジュール108は、出力フォールバック軌道を車両制御デバイス114に提供することができる。少なくとも1つの例では、フォールバック決定モジュール118は、出力フォールバック軌道を受信することができ、所定の時間期間の間、新しいフォールバック軌道が受信されるまでなど、出力フォールバック軌道を記憶することができる。
図5は、フォールバック軌道を実行するための例示的なプロセス500を描く。
ブロック502は、フォールバックアクションを保証するイベントの発生を決定することを示す。上記で説明されたように、フォールバック決定モジュール118は、フォールバックアクションを保証するイベントの発生を決定することができる。フォールバックアクションを保証するイベントの様々な例が、上記で説明された。
ブロック504は、フォールバック軌道が記憶されているかどうかを決定することを示す。イベントの発生を決定したことに少なくとも部分的に基づいて、フォールバック決定モジュール118は、フォールバック軌道が記憶されているかどうかを決定することができる。上記で説明されたように、いくつかの例では、フォールバック決定モジュール118は、判定モジュール106および/または軌道モジュール108から出力フォールバック軌道を受信することができる。そのような例では、フォールバック決定モジュール118は、所定の時間期間の間、新しい出力フォールバック軌道が受信されるまでなど、出力フォールバック軌道を記憶することができる。
フォールバック軌道がフォールバック決定モジュール118に記憶されていないと決定したことに少なくとも部分的に基づいて、フォールバック決定モジュール118は、ブロック506に示されているように、新しいフォールバック軌道を生成するか、またはフォールバック決定モジュール118に関連するハードコーディングされた規則にアクセスすることができる。すなわち、フォールバック決定モジュール118は、リアルタイム処理されたデータにアクセスし、自律車両122がフォールバックアクションを実施することを引き起こすためのフォールバック軌道を決定することができる。または、フォールバック決定モジュール118は、どのように応答すべきかに関する命令を提供するハードコーディングされた規則にアクセスすることができる。いくつかの例では、フォールバック決定モジュール118は、新しいフォールバック軌道を生成するためにポリシーを活用することができる。たとえば、フォールバック決定モジュール118は、自律車両112が交差点の中央、横断歩道の中央などで停車すべきでないことを表すポリシーを利用することができる。
ブロック508は、新しいフォールバック軌道を実行し、自律車両がフォールバックアクションを実施することを引き起こすことを示す。少なくとも1つの例では、フォールバック決定モジュール118は、新しいフォールバック軌道を実行モジュール116に提供することができ、実行モジュール116は、自律車両122のステアリングおよびアクセラレーションを作動させるためのコマンドを算出し、自律車両122がフォールバック軌道に追従することを可能にすることができる。
フォールバック軌道がフォールバック決定モジュール118に記憶されていると決定したことに少なくとも部分的に基づいて、フォールバック決定モジュール118は、ブロック510に示されているように、フォールバック軌道にアクセスすることができる。ブロック512は、フォールバック軌道を実行し、自律車両がフォールバックアクションを実施することを引き起こすことを示す。少なくとも1つの例では、フォールバック決定モジュール118は、フォールバック軌道を実行モジュール116に提供することができ、実行モジュール116は、自律車両122のステアリングおよびアクセラレーションを作動させるためのコマンドを算出し、自律車両122がフォールバック軌道に追従することを可能にすることができる。
図6は、図1を参照しながら上記で説明された、軌道プランニングおよび実行のためのアーキテクチャに関連する追加の詳細を示す。図6は、本開示が全体的にまたは部分的に実装されることができる環境600を示す。環境600は、ストレージ604、1つまたは複数のプロセッサ606、メモリ608、およびオペレーティングシステム610を備える1つまたは複数のコンピュータシステム602を描く。ストレージ604、プロセッサ606、メモリ608、およびオペレーティングシステム610は、通信インフラストラクチャ612上で通信可能に結合されることができる。随意に、コンピュータシステム602は、入出力(I/O)デバイス614を介してユーザまたは環境と、ならびに通信インフラストラクチャ612を介してネットワーク616上の1つまたは複数の他のコンピュータシステムと対話することができる。オペレーティングシステム610は、他の構成要素と対話し、1つまたは複数のアプリケーション618を制御することができる。
少なくとも1つの例では、図6に示されているコンピュータシステム602は、分散されることができる。いくつかの事例では、コンピュータシステム602の少なくとも一部分は、図1を参照しながら上記で説明されたコンピュータシステム102に対応することができる。さらに、コンピュータシステム602は、本明細書で説明されるように、軌道プランニングを実施するようにモジュール104、106、108、および110を実装するように、任意のハードウェアおよび/またはソフトウェアを実装することができる。加えて、コンピュータシステム602の少なくとも一部分は、図1を参照しながら上記で説明された車両制御デバイス114に対応することができる。さらに、コンピュータシステム602は、本明細書で説明されるように、軌道実行を実施するようにモジュール116、118、および120を実装するように、任意のハードウェアおよび/またはソフトウェアを実装することができる。
本明細書で説明されるシステムおよび方法は、ソフトウェアもしくはハードウェアまたはそれらの任意の組合せで実装されることができる。本明細書で説明されるシステムおよび方法は、物理的にまたは論理的に互いとは別々であることもないこともある1つまたは複数のコンピュータシステムを使用して実装されることができる。方法は、構内ハードウェア、構内仮想システム、またはホステッドプライベートインスタンス(hosted-private instance)のいずれかとして配置された構成要素によって実施されることができる。加えて、本明細書で説明される方法の様々な態様は、他の機能に組み合わせられるかまたはマージされることができる。
図6に示されているコンピュータシステムを参照すると、プロセッサまたはコンピュータシステムは、本明細書で説明される方法の一部または全部を特に実施するように構成されることができる。いくつかの実施形態では、方法は、1つまたは複数のコンピュータまたはプロセッサによって部分的にまたは完全に自動化されることができる。本明細書で説明されるシステムおよび方法は、ハードウェア、ファームウェアおよび/またはソフトウェアのいずれかの組合せを使用して実装されることができる。本明細書で説明される本システムおよび方法(またはそれらの任意の部分もしくは機能)は、ハードウェア、ソフトウェア、ファームウェア、またはそれらの組合せを使用して実装されることができ、1つまたは複数のコンピュータシステムまたは他の処理システムで実装されることができる。いくつかの実施形態では、示されているシステム要素は、単一のハードウェアデバイスに組み合わせられるか、または多数のハードウェアデバイスに分離されることができる。多数のハードウェアデバイスが使用される場合、ハードウェアデバイスは、物理的に互いに近接してまたは互いから離れて置かれることができる。説明および示される方法の実施形態は、例示的であることが意図され、限定であることは意図されない。たとえば、方法のステップの一部または全部は、異なる実施形態において組み合わせられ、並べ替えられ、および/または省略されることができる。
例示的な一実施形態では、本明細書で説明されるシステムおよび方法は、本明細書で説明される機能性を遂行することが可能な1つまたは複数のコンピュータシステムに向けられることができる。例示的なコンピュータシステムは、限定はされないが、OS X(商標)、iOS(商標)、Linux(商標)、Android(商標)、およびMicrosoft(商標)Windows(商標)など、限定はされないが、任意のオペレーティングシステムを走らせるパーソナルコンピュータ(PC)システムであることができる。しかしながら、本明細書で説明されるシステムおよび方法は、これらのプラットフォームに限定されないことがある。代わりに、本明細書で説明されるシステムおよび方法は、任意の適切なオペレーティングシステムを走らせる任意の適切なコンピュータシステム上で実装されることができる。限定はされないが、コンピュータシステム、通信デバイス、モバイルフォン、スマートフォン、テレフォニーデバイス、電話、携帯情報端末(PDA)、パーソナルコンピュータ(PC)、ハンドヘルドPC、対話型テレビジョン(iTV)、デジタルビデオレコーダ(DVD)、クライアントワークステーション、シンクライアント、シッククライアント、プロキシサーバ、ネットワーク通信サーバ、リモートアクセスデバイス、クライアントコンピュータ、サーバコンピュータ、ルータ、ウェブサーバ、データ、メディア、オーディオ、ビデオ、テレフォニーまたはストリーミング技術サーバなど、本明細書で説明されるシステムおよび方法の他の構成要素は、コンピュータシステムを使用して実装されることもできる。サービスは、たとえば、限定はされないが、対話型テレビジョン(iTV)、ビデオオンデマンドシステム(VOD)を使用して、およびデジタルビデオレコーダ(DVR)、または他のオンデマンド視聴システムを介してオンデマンドで提供されることができる。
コンピュータシステムは、1つまたは複数のプロセッサを含むことができる。プロセッサは、限定はされないが、通信バス、クロスオーバーバー、またはネットワークなど、通信インフラストラクチャに接続されることができる。プロセスおよびプロセッサは、同じ物理的ロケーションに置かれる必要はない。言い換えれば、プロセスは、たとえば、LANまたはWAN接続上の1つまたは複数の地理的に遠いプロセッサにおいて実行されることができる。コンピュータシステムは、ディスプレイユニット上での表示のために通信インフラストラクチャからグラフィックス、テキスト、および他のデータをフォワーディングすることができるディスプレイインターフェースを含むことができる。
コンピュータシステムは、限定はされないが、メインメモリ、ランダムアクセスメモリ(RAM)、および2次メモリなどを含むこともできる。2次メモリは、たとえば、ハードディスクドライブ、および/またはコンパクトディスクドライブCD-ROMなどのリムーバブルストレージドライブなどを含むことができる。リムーバブルストレージドライブは、リムーバブルストレージユニットから読み取られ、および/またはリムーバブルストレージユニットに書き込まれることができる。諒解されることができるように、リムーバブルストレージユニットは、コンピュータソフトウェアおよび/またはデータを記憶したコンピュータ使用可能記憶媒体を含むことができる。いくつかの実施形態では、機械アクセス可能媒体は、コンピュータによってアクセス可能なデータを記憶するために使用される任意のストレージデバイスを指すことができる。機械アクセス可能媒体の例は、たとえば、限定はされないが、磁気ハードディスク、フロッピーディスク、コンパクトディスク読取り専用メモリ(CD-ROM)またはデジタル多用途ディスク(DVD)のような光ディスク、磁気テープ、および/またはメモリチップなどを含むことができる。
プロセッサは、データを記憶するための1つまたは複数のデータストレージデバイスを含むか、またはそれと通信するように動作可能に結合されることもできる。そのようなデータストレージデバイスは、非限定例として、(内蔵ハードディスクおよびリムーバブルディスクを含む)磁気ディスク、光磁気ディスク、光ディスク、読取り専用メモリ、ランダムアクセスメモリ、および/またはフラッシュストレージを含むことができる。コンピュータプログラム命令およびデータを有形に実施するのに好適なストレージデバイスは、たとえば、EPROM、EEPROM、およびフラッシュメモリデバイスなどの半導体メモリデバイス、内蔵ハードディスクおよびリムーバブルディスクなどの磁気ディスク、光磁気ディスク、ならびにCD-ROMディスクおよびDVD-ROMディスクを含む、すべての形態の不揮発性メモリを含むこともできる。プロセッサおよびメモリは、ASIC(特定用途向け集積回路)によって補われるか、またはそれに組み込まれることができる。
コンピュータシステムは、コンピュータ化されたデータストレージシステムと通信していることがある。データストレージシステムは、MySQL(商標)または他のリレーショナルデータベースなど、非リレーショナルまたはリレーショナルデータストアを含むことができる。他の物理的データベースタイプおよび論理的データベースタイプが使用されることができる。データストアは、Microsoft SQL Server(商標)、Oracle(商標)、IBM DB2(商標)、SQLITE(商標)などのデータベースサーバ、またはリレーショナルもしくはそれ以外の任意の他のデータベースソフトウェアであることができる。データストアは、構文タグを識別する情報、および構文タグ上で動作するために要求される任意の情報を記憶することができる。いくつかの実施形態では、処理システムは、オブジェクト指向プログラミングを使用することができ、データをオブジェクトに記憶することができる。これらの実施形態では、処理システムは、データオブジェクトをリレーショナルデータベースに記憶するためにオブジェクトリレーショナルマッパ(ORM)を使用することができる。本明細書で説明されるシステムおよび方法は、任意の数の物理的データモデルを使用して実装されることができる。例示的な一実施形態では、リレーショナルデータベース管理システム(RDBMS)が使用されることができる。それらの実施形態では、RDBMSにおけるテーブルは、座標を表す列を含むことができる。経済システムの場合、会社、製品などを表すデータが、RDBMSにおけるテーブルに記憶されることができる。テーブルは、それらの間のあらかじめ定義された関係を有することができる。テーブルは、座標に関連するアジャンクトを有することもできる。
代替の例示的な実施形態では、2次メモリは、コンピュータプログラムまたは他の命令がコンピュータシステムにロードされることを可能にするための他の同様のデバイスを含むことができる。そのようなデバイスは、たとえば、リムーバブルストレージユニットおよびインターフェースを含むことができる。そのようなものの例は、プログラムカートリッジおよび(たとえば、限定はされないが、ビデオゲームデバイスにおいて見つけられるものなどの)カートリッジインターフェース、(たとえば、限定はされないが、消去可能プログラマブル読取り専用メモリ(EPROM)、またはプログラマブル読取り専用メモリ(PROM)および関連するソケットなどの)リムーバブルメモリチップ、ならびに他のリムーバブルストレージユニット、およびソフトウェアとデータがリムーバブルストレージユニットからコンピュータシステムに転送されることを可能にすることができるインターフェースを含むことができる。
コンピュータシステムは、限定はされないが、マイクロフォンなどのボイス入力デバイス、タッチスクリーン、カメラなどのジェスチャー認識デバイス、他のナチュラルユーザインターフェース、マウスまたはデジタイザなどの他のポインティングデバイス、およびキーボードまたは他のデータ入力デバイスなど、入力デバイスを含むこともできる。コンピュータシステムは、限定はされないが、ディスプレイ、およびディスプレイインターフェースなど、出力デバイスを含むこともできる。コンピュータシステムは、限定はされないが、通信インターフェース、ケーブルおよび通信路など、入出力(I/O)デバイスを含むことができる。これらのデバイスは、限定はされないが、ネットワークインターフェースカード、およびモデムを含むことができる。通信インターフェースは、ソフトウェアおよびデータが、コンピュータシステムと1つまたは複数の外部デバイスとの間で転送されることを可能にすることができる。
1つまたは複数の実施形態では、コンピュータシステムは、自動車システムに動作可能に結合されることができる。そのような自動車システムは、手動式、半自律的、または完全自律的のいずれかであることができる。そのような実施形態では、入出力デバイスは、限定はされないが、アクセラレーション、ブレーキング、およびステアリングなど、自動車機能を制御するための、1つまたは複数の画像キャプチャデバイス、コントローラ、マイクロコントローラ、および/または他のプロセッサを含むことができる。さらに、そのような実施形態における通信インフラストラクチャは、コントローラエリアネットワーク(CAN)バスを含むこともできる。
1つまたは複数の実施形態では、コンピュータシステムは、任意の機械視覚ベースシステムに動作可能に結合されることができる。たとえば、そのような機械ベース視覚システムは、限定はされないが、手動式、半自律的、または完全自律的工業または農業ロボット、家庭用ロボット、検査システム、セキュリティシステムなどを含む。すなわち、本明細書で説明される実施形態は、1つの特定のコンテキストに限定されず、機械視覚を利用する任意の適用例に適用可能であることができる。
1つまたは複数の実施形態では、本実施形態は、コンピュータネットワークの環境中で実践されることができる。ネットワークは、プライベートネットワーク、または公衆ネットワーク(たとえば、以下で説明されるように、インターネット)、またはその両方の組合せを含むことができる。ネットワークは、ハードウェア、ソフトウェア、またはその両方の組合せを含むことができる。
電気通信指向の視点から、ネットワークは、通信設備によって相互接続されたハードウェアノードのセットとして説明されることができ、1つまたは複数のプロセス(ハードウェア、ソフトウェア、またはそれらの組合せ)が、各そのようなノードにおいて機能する。プロセスは、相互通信し、プロセス間通信経路を使用するそれらの間の通信経路を介して互いに情報を交換することができる。これらの経路上で、適切な通信プロトコルが使用される。
本実施形態による例示的なコンピュータおよび/または電気通信ネットワーク環境は、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアの組合せを含むことができるノードを含むことができる。ノードは、通信ネットワークを介して相互接続されることができる。各ノードは、ノードに組み込まれたプロセッサによって実行可能な1つまたは複数のプロセスを含むことができる。たとえば、単一のプロセスが多数のプロセッサによって走らされることができるか、または多数のプロセスが単一のプロセッサによって走らされることができる。加えて、ノードの各々は、ネットワークと外界との間のインターフェースポイント(interface point)を提供することができ、サブネットワークの集合を組み込むことができる。
例示的な実施形態では、プロセスは、任意の通信プロトコルを通して通信をサポートするプロセス間通信経路を通して互いに通信することができる。経路は、順次または並列に、連続的にまたは間欠的に機能することができる。経路は、多くのコンピュータによって使用される標準並列命令セット(standard parallel instruction set)に加えて、通信ネットワークに関して本明細書で説明される、通信規格、プロトコルまたは技術のいずれかを使用することができる。
ノードは、処理機能を実施することが可能な任意のエンティティを含むことができる。実施形態とともに使用されることができるそのようなノードの例は、説明されたように、(パーソナルコンピュータ、ワークステーション、サーバ、またはメインフレームなどの)コンピュータ、(携帯情報端末(PDA)、処理能力をもつモデムセルフォン、Blackberry(商標)デバイスを含むワイヤレス電子メールデバイスなどの)ハンドヘルドワイヤレスデバイスおよびワイヤラインデバイス、(スキャナ、プリンタ、ファクシミリ機、または多機能ドキュメントマシンなどの)ドキュメント処理デバイス、またはプロセッサの集合がそれに接続された(ローカルエリアネットワークまたはワイドエリアネットワークなどの)複素エンティティ(complex entity)を含む。たとえば、本開示のコンテキストでは、ノード自体は、ワイドエリアネットワーク(WAN)、ローカルエリアネットワーク(LAN)、(仮想プライベートネットワーク(VPN)などの)プライベートネットワーク、またはネットワークの集合であることができる。
ノード間の通信は、通信ネットワークによって可能にされることができる。ノードは、通信ネットワークと連続的にまたは間欠的にのいずれかで接続されることができる。例として、本開示のコンテキストでは、通信ネットワークは、十分な帯域幅および情報セキュリティを提供するデジタル通信インフラストラクチャであることができる。
通信ネットワークは、任意のタイプの規格、プロトコルまたは技術を使用する、任意の周波数における、ワイヤライン通信能力、ワイヤレス通信能力、またはその両方の組合せを含むことができる。追加として、本実施形態では、通信ネットワークは、プライベートネットワーク(たとえば、VPN)または公衆ネットワーク(たとえば、インターネット)であることができる。
通信ネットワークによって使用される例示的なワイヤレスプロトコルおよび技術の非包括的リストは、Bluetooth(商標)、汎用パケット無線サービス(GPRS)、セルラーデジタルパケットデータ(CDPD)、モバイルソリューションプラットフォーム(MSP)、マルチメディアメッセージング(MMS)、ワイヤレスアプリケーションプロトコル(WAP)、符号分割多元接続(CDMA)、ショートメッセージサービス(SMS)、ワイヤレスマークアップ言語(WML)、ハンドヘルドデバイスマークアップ言語(HDML)、ワイヤレスのためのバイナリランタイム環境(BREW)、無線アクセスネットワーク(RAN)、およびパケット交換コアネットワーク(PS-CN)を含むことができる。様々な世代ワイヤレス技術も含まれる。通信ネットワークによって使用される主にワイヤラインプロトコルおよび技術の例示的な非包括的リストは、非同期転送モード(ATM)、拡張型内部ゲートウェイルーティングプロトコル(EIGRP)、フレームリレー(FR)、ハイレベルデータリンク制御(HDLC)、インターネット制御メッセージプロトコル(ICMP)、内部ゲートウェイルーティングプロトコル(IGRP)、インターネットワークパケット交換(IPX)、ISDN、ポイントツーポイントプロトコル(PPP)、伝送制御プロトコル/インターネットプロトコル(TCP/IP)、ルーティング情報プロトコル(RIP)およびユーザデータグラムプロトコル(UDP)を含む。当業者なら認識するように、任意の他の知られているまたは予期されるワイヤレスまたはワイヤラインプロトコルおよび技術が使用されることができる。
本開示の実施形態は、本明細書における動作を実施するための装置を含むことができる。装置は、所望の目的のために特別に構築されることができるか、またはそれは、コンピュータシステムに記憶されたプログラムによって選択的にアクティブにされたまたは再構成された汎用コンピュータシステムを備えることができる。
1つまたは複数の実施形態では、本実施形態は機械実行可能命令で実施される。命令は、命令を用いてプログラムされた、処理デバイス、たとえば、汎用または専用プロセッサが、本開示のステップを実施することを引き起こすために使用されることができる。代替として、本開示のステップは、ステップを実施するためのハードワイヤード論理を含んでいる特定のハードウェア構成要素によって、またはプログラムされたコンピュータ構成要素とカスタムハードウェア構成要素の任意の組合せによって実施されることができる。たとえば、本開示は、上記で略述されたように、コンピュータプログラム製品として提供されることができる。この環境では、実施形態は、それに記憶された命令を有する機械可読媒体を含むことができる。命令は、任意の1つまたは複数のプロセッサ(または他の電子デバイス)を、例示的な本実施形態によるプロセスまたは方法を実施するようにプログラムするために使用されることができる。追加として、本開示は、ダウンロードされ、コンピュータプログラム製品に記憶されることもできる。ここで、プログラムは、通信リンク(たとえば、モデムまたはネットワーク接続)を介して、搬送波または他の伝搬媒体で実施されたデータ信号として、リモートコンピュータ(たとえば、サーバ)から要求元コンピュータ(たとえば、クライアント)に転送されることができ、最終的に、そのような信号は、後続の実行のためにコンピュータシステムに記憶されることができる。
方法は、コンピュータまたは任意の命令実行システムによる使用のための、またはそれに関するプログラムコードを提供するコンピュータ使用可能記憶媒体またはコンピュータ可読記憶媒体からアクセス可能なコンピュータプログラム製品で実装されることができる。コンピュータ使用可能記憶媒体またはコンピュータ可読記憶媒体は、コンピュータもしくは命令実行システム、装置、またはデバイスによる使用のための、またはそれに関するプログラムを含んでいるまたは記憶することができる任意の装置であることができる。
対応するプログラムコードを記憶および/または実行するのに好適なデータ処理システムは、メモリ要素など、コンピュータ化されたデータストレージデバイスに直接または間接的に結合された少なくとも1つのプロセッサを含むことができる。(限定はされないが、キーボード、ディスプレイ、ポインティングデバイスなどを含む)入出力(I/O)デバイスが、システムに結合されることができる。ネットワークアダプタがシステムに結合され、データ処理システムが、介在プライベートまたは公衆ネットワークを通して、他のデータ処理システムまたはリモートプリンタまたはストレージデバイスに結合されることを可能にすることもできる。ユーザとの対話を提供するために、特徴は、LCD(液晶ディスプレイ)などのディスプレイデバイス、または情報をユーザに表示するための別のタイプのモニタと、ユーザがそれによってコンピュータに入力を与えることができるキーボードおよびマウスまたはトラックボールなどの入力デバイスとをもつコンピュータ上で実装されることができる。
コンピュータプログラムは、コンピュータにおいて直接または間接的に使用されることができる命令のセットであることができる。本明細書で説明されるシステムおよび方法は、CUDA、OpenCL、Flash(商標)、JAVA(商標)、C++、C、C#、Python、Visual Basic(商標),JavaScript(商標)、PHP、XML、HTMLなどのプログラミング言語を使用して、またはコンパイラ型言語もしくはインタープリタ型言語を含むプログラミング言語の組合せを使用して実装されることができ、スタンドアロンプログラムとして、またはモジュール、構成要素、サブルーチン、もしくはコンピューティング環境中で使用するのに好適な他のユニットとしてを含む、任意の形態で展開されることができる。ソフトウェアは、限定はされないが、ファームウェア、常駐ソフトウェア、マイクロコードなどを含むことができる。SOAP/HTTPなどのプロトコルは、プログラミングモジュール間のインターフェースを実装する際に使用されることができる。本明細書で説明される構成要素および機能性は、限定はされないが、異なるバージョンのMicrosoft Windows(商標)、Apple(商標)Mac(商標)、iOS(商標)、Unix(商標)/X-Windows(商標)、Linux(商標)などを含む、ソフトウェア開発に好適な任意のプログラミング言語を使用して、仮想化されたまたは仮想化されていない環境において実行する任意のデスクトップオペレーティングシステム上で実装されることができる。システムは、Ruby on Railsなど、ウェブアプリケーションフレームワークを使用して実装されることができる。
命令のプログラムの実行のための好適なプロセッサは、限定はされないが、汎用マイクロプロセッサおよび専用マイクロプロセッサ、ならびに任意の種類のコンピュータの唯一のプロセッサまたは多数のプロセッサもしくはコアのうちの1つを含む。プロセッサは、読取り専用メモリ、ランダムアクセスメモリ、その両方、または本明細書で説明されるデータストレージデバイスの任意の組合せなど、コンピュータ化されたデータストレージデバイスから命令およびデータを受信し、記憶することができる。プロセッサは、電子デバイスの動作および性能を制御するように動作可能な任意の処理回路または制御回路を含むことができる。
本明細書で説明されるシステム、モジュール、および方法は、ソフトウェア要素またはハードウェア要素の任意の組合せを使用して実装されることができる。本明細書で説明されるシステム、モジュール、および方法は、単独でまたは互いに組み合わせて動作する1つまたは複数の仮想マシンを使用して実装されることができる。任意の適用可能な仮想化ソリューションは、ハードウェアコンピューティングプラットフォームまたはホスト上で走る仮想化ソフトウェアの制御下で実行される仮想マシンに、物理的計算機プラットフォームをカプセル化するために使用されることができる。仮想マシンは、仮想システムハードウェアとゲストオペレーティングシステムソフトウェアの両方を有することができる。
本明細書で説明されるシステムおよび方法は、データサーバなどのバックエンド構成要素を含む、またはアプリケーションサーバもしくはインターネットサーバなどのミドルウェア構成要素を含む、またはグラフィカルユーザインターフェースもしくはインターネットブラウザを有するクライアントコンピュータなどのフロントエンド構成要素を含むコンピュータシステム、またはそれらの任意の組合せで実装されることができる。コンピュータシステムの構成要素は、通信ネットワークなど、デジタルデータ通信の任意の形態または媒体によって接続されることができる。通信ネットワークの例は、たとえば、LAN、WAN、ならびにインターネットを形成するコンピュータおよびネットワークを含む。
本開示の1つまたは複数の実施形態は、ハンドヘルドデバイス、マイクロプロセッサシステム、マイクロプロセッサベースまたはプログラマブルコンシューマーエレクトロニクス、ミニコンピュータ、メインフレームコンピュータなどを含む、他のコンピュータシステム構成を用いて実践されることができる。本明細書で説明されるシステムおよび方法は、タスクが、ネットワークを通してリンクされたリモート処理デバイスによって実施される分散コンピューティング環境中で実践されることもできる。
「コンピュータプログラム媒体」および「コンピュータ可読媒体」という用語は、概して、限定はされないが、リムーバブルストレージドライブ、ハードディスクドライブにインストールされたハードディスクなど、メディアを指すために使用されることができる。これらのコンピュータプログラム製品は、ソフトウェアをコンピュータシステムに提供することができる。本明細書で説明されるシステムおよび方法は、そのようなコンピュータプログラム製品に向けられることができる。
「一実施形態」、「実施形態」、「例示的な実施形態」、「様々な実施形態」などへの言及は、本開示の実施形態が、特定の特徴、構造、または特性を含むことができるが、あらゆる実施形態が、特定の特徴、構造、または特性を必ずしも含むとは限らないことを表すことができる。さらに、「一実施形態では」または「例示的な実施形態では」という句の繰り返される使用は、それらがそうすることはできるが、同じ実施形態を必ずしも指すとは限らない。同様に、「事例」への言及は、本開示の様々な事例が、特定の特徴、構造、または特性を含むことができるが、あらゆる事例が、特定の特徴、構造、または特性を必ずしも含むとは限らないことを表すことができる。さらに、「いくつかの事例では」という句の繰り返される使用は、それがそうすることはできるが、同じ事例を必ずしも指すとは限らない。
発明を実施するための形態および請求項において、「結合された」および「接続された」という用語は、それらの派生物とともに、使用されることができる。これらの用語は、互いに対して類義語として意図されることができないことを理解されたい。そうではなく、特定の実施形態では、「接続された」は、2つまたはそれ以上の要素が、互いに直接物理的または電気的に接触していることを表すために使用されることができる。「結合された」は、2つまたはそれ以上の要素が、直接物理的または電気的に接触していることを意味することができる。しかしながら、「結合された」は、2つまたはそれ以上の要素が、互いに直接接触していないが、それでもなお、互いに協働または対話することを意味することもできる。
アルゴリズムは、ここでおよび概して、所望の結果につながる自己矛盾のない一連のアクションまたは動作であると考えられることができる。これらは、物理量の物理的マニピュレーションを含む。通常、必ずしもそうではないが、これらの量は、記憶される、転送される、組み合わせられる、比較される、およびそれ以外にマニピュレートされることが可能な電気信号または磁気信号の形態をとる。主に一般的な用法という理由で、これらの信号を、ビット、値、要素、シンボル、文字、用語、数または同様のものと呼ぶことが時々好都合とわかっている。しかしながら、これらおよび同様の用語のすべては、適切な物理量に関連するものであり、これらの量に適用される好都合なラベルにすぎないことを理解されたい。
別段に明記されていない限り、本明細書全体にわたって、「処理すること」、「算出すること」、「計算すること」、「決定すること」または同様のものなどの用語は、コンピュータシステムのレジスタおよび/またはメモリ内の電子量などの物理量として表されるデータを、コンピュータシステムのメモリ、レジスタまたは他のそのような情報ストレージ、送信デバイスもしくはディスプレイデバイス内の物理量として同様に表される他のデータにマニピュレートおよび/または変換する、コンピュータもしくはコンピュータシステム、または同様の電子コンピュータシステムのアクションおよび/またはプロセスを指すことが諒解されることができる。
同様にして、「プロセッサ」という用語は、レジスタおよび/またはメモリからの電子データを処理し、その電子データを、レジスタおよび/またはメモリに記憶されることができる他の電子データに変換する任意のデバイスまたはデバイスの部分を指すことができる。非限定的な例として、「プロセッサ」は、中央処理ユニット(CPU)またはグラフィックス処理ユニット(GPU)であることができる。「コンピューティングプラットフォーム」は、1つまたは複数のプロセッサを備えることができる。本明細書で使用される場合、「ソフトウェア」プロセスは、たとえば、タスク、スレッド、およびインテリジェントエージェントなどの作業を経時的に実施するソフトウェアエンティティおよび/またはハードウェアエンティティを含むことができる。また、各プロセスは、順次または並列に、連続的にまたは間欠的に命令を遂行するための多数のプロセスを指すことができる。「システム」および「方法」という用語は、システムが1つまたは複数の方法を実施することができ、方法がシステムと見なされることができる限り、互換的に本明細書で使用される。
1つまたは複数の実施形態が説明されてきたが、それらの様々な改変、追加、置換および等価物が、本開示の範囲内に含まれる。
実施形態の説明では、例として、請求される主題の特定の実施形態を図示する、本出願の一部を形成する添付の図面への参照が行われる。他の実施形態が使用されることができること、および構造的変更など、変更または改変が行われることができることを理解されたい。そのような実施形態、変更または改変は、必ずしも、意図された請求される主題に関する範囲からの逸脱であるとは限らない。本明細書のステップは、ある順序で提示されることができるが、いくつかの場合には、順序付けは、いくつかの入力が、説明されるシステムおよび方法の機能を変更することなしに、異なる時間にまたは異なる順序で提供されるように変更されることができる。開示される手順は、異なる順序で実行されることもできる。加えて、本明細書における様々な算出は、開示される順序で実施される必要はなく、算出の代替順序付けを使用する他の実施形態が、容易に実装されることができる。並べ替えられることに加えて、算出は、同じ結果をもつ副算出(sub-computation)に分解されることもできる。
上記の説明は、説明される技法の例示的な実装形態を記載するが、他のアーキテクチャが、説明される機能性を実装するために使用されることができ、本開示の範囲内にあることを意図される。その上、責任の特定の分散が、説明の目的で上記で定義されているが、様々な機能および責任が、状況に応じて、異なるやり方で分散および分割されることがある。
その上、主題は、構造的特徴および/または方法論的アクションに固有の言語で説明されてきたが、添付の請求項において定義されている主題が、説明される特定の特徴またはアクションに必ずしも限定されるとは限らないことを理解されたい。そうではなく、特定の特徴およびアクションは、請求項を実装する例示的な形態として開示される
例示的な発明内容
A.自律車両に実装されるシステムであって、システムは、第1のコンピュータシステムであって、1つまたは複数の第1のプロセッサと、1つまたは複数の第1のプロセッサに通信可能に結合され、1つまたは複数の第1のプロセッサによって実行可能である第1の命令を含む1つまたは複数の第1のプログラムモジュールを記憶する1つまたは複数の第1のコンピュータ可読記憶媒体であって、1つまたは複数の第1のプログラムモジュールは、自律車両の現在のロケーションと自律車両の目的のロケーションとの間のルートを生成するように構成されたルートプランニングプログラムモジュールであって、ルートプランニングプログラムモジュールは、第1の動作周波数において、第1のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第1のプロセッサによって実行される、ルートプランニングプログラムモジュールと、ルートに基づいて、第2の命令を生成するように構成された判定プログラムモジュールであって、第2の命令は、ルートの少なくとも一部分に沿って自律車両を案内するための一連のアクションを含み、判定プログラムモジュールは、第2の動作周波数において、第2のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第1のプロセッサによって実行される、判定プログラムモジュールと、リアルタイム処理されたセンサーデータにアクセスすることと、第2の命令およびリアルタイム処理されたセンサーデータに少なくとも部分的に基づいて、出力軌道を生成することと、を行うように構成された軌道プログラムモジュールであって、第3の動作周波数において、第3のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第1のプロセッサによって実行される、軌道プログラムモジュールと、を備える1つまたは複数の第1のプログラムモジュールを記憶する1つまたは複数の第1のコンピュータ可読記憶媒体とを備える第1のコンピュータシステムと、第2のコンピュータシステムであって、1つまたは複数の第2のプロセッサと、1つまたは複数の第2のプロセッサに通信可能に結合され、1つまたは複数の第2のプロセッサによって実行可能である第3の命令を含む1つまたは複数の第2のプログラムモジュールを記憶する1つまたは複数の第2のコンピュータ可読記憶媒体であって、1つまたは複数の第2のプログラムモジュールは、自律車両出力軌道に沿って運転させるための1つまたは複数の信号を生成するように構成された実行プログラムモジュールであって、第4の動作周波数において、第4のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第2のプロセッサによって実行される、実行プログラムモジュールと、を備える1つまたは複数の第2のプログラムモジュールを記憶する1つまたは複数の第2のコンピュータ可読記憶媒体とを備える第2のコンピュータシステムとを備え、第1の動作周波数、第2の動作周波数、第3の動作周波数、および第4の動作周波数のうちの少なくとも2つが、それぞれ異なる動作周波数である、システム。
B.1つまたは複数の第2のプログラムモジュールは、フォールバック決定プログラムモジュールを含み、フォールバック決定プログラムモジュールは、第1のコンピュータシステムから、自律車両安全操縦を実施させるフォールバック軌道を受信することと、所定の時間期間の間、フォールバック軌道を記憶することとを行うように構成され、ここにおいて、フォールバック決定プログラムモジュールは、第4の動作周波数において、第4のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第2のプロセッサによって実行される、パラグラフAが具陳するシステム。
C.フォールバック決定プログラムモジュールは、フォールバックアクションを保証するイベントの発生を決定することと、フォールバック軌道にアクセスすることとを行うようにさらに構成され、イベントは、システムのしきい値距離内のオブジェクト、システムのしきい値距離内にあると予測されるオブジェクト、第1のコンピュータシステムと第2のコンピュータシステムとの間の通信の不在、混乱しきい値を上回るシステムに関連する混乱レベル、システムのセンサーに関連する故障、システムに関連する構成要素の誤動作、システムに関連する搭乗者状態の変化、出力軌道に関連する運転可能な表面のステータスの変化、またはしきい値確率を超える衝突の確率のいずれかを含む、パラグラフBが具陳するシステム。
D.1つまたは複数の第2のプログラムモジュールは、フォールバック決定プログラムモジュールを含み、フォールバック決定プログラムモジュールは、フォールバックアクションを保証するイベントの発生を決定することと、自律車両安全操縦を実施させるフォールバック軌道を生成することとを行うように構成され、ここにおいて、フォールバック決定プログラムモジュールは、第4の動作周波数において、第5のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第2のプロセッサによって実行される、第4の命令を含み、イベントは、システムのしきい値距離内のオブジェクト、システムのしきい値距離内にあると予測されるオブジェクト、第1のコンピュータシステムと第2のコンピュータシステムとの間の通信の不在、混乱しきい値を上回るシステムに関連する混乱レベル、システムのセンサーに関連する故障、システムに関連する構成要素の誤動作、システムに関連する搭乗者状態の変化、出力軌道に関連する運転可能な表面のステータスの変化、またはしきい値確率を超える衝突の確率のいずれかを含む、パラグラフA~Cのいずれかが具陳するシステム。
E.実行プログラムモジュールは、自律車両安全操縦を実施させるフォールバック軌道を受信することと、自律車両に安全操縦を実施させるフォールバック軌道を実行することとを行うようにさらに構成された、パラグラフA~Dのいずれかが具陳するシステム。
F.第4の動作周波数は、第1の動作周波数、第2の動作周波数、および第3の動作周波数よりも高いパラグラフA~Eのいずれかが具陳するシステム。
G.第1の動作周波数、第2の動作周波数、第3の動作周波数、および第4の動作周波数がそれぞれ異なる動作周波数であり、第4の動作周波数は、第1の動作周波数および第2の動作周波数よりも高い、パラグラフA~Fのいずれかが具陳するシステム。第1の動作周波数は、第2の動作周波数、第3の動作周波数、および第4の動作周波数よりも低いパラグラフA~Fのいずれかが具陳するシステム。
H.輸送可能なコンピュータシステムによって実施される方法であって、方法は、輸送可能なコンピュータシステムの現在のロケーションを決定するステップと、輸送可能なコンピュータシステムのための目的のロケーションを決定するステップと、輸送可能なコンピュータシステムに関連する1つまたは複数のセンサーから、リアルタイム処理されたセンサーデータを受信するステップと、第1の動作周波数において、第1のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第1のプロセッサによって、輸送可能なコンピュータシステムを現在のロケーションから目的のロケーションに案内するためのルートを決定するステップと、第2の動作周波数において、第2のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第1のプロセッサによって、リアルタイム処理されたセンサーデータに少なくとも部分的に基づいて、輸送可能なコンピュータシステムをルートの少なくとも一部分に沿って案内するための命令を決定するステップと、第3の動作周波数において、第3のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第1のプロセッサによって、リアルタイム処理されたセンサーデータおよび命令に少なくとも部分的に基づいて、軌道を生成するステップと、第4の動作周波数において、第4のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第2のプロセッサによって、輸送可能なコンピュータシステムルートに沿って移動させる軌道を実行るステップとを備え、第1の動作周波数、第2の動作周波数、第3の動作周波数、および第4の動作周波数のうちの少なくとも2つが、それぞれ異なる動作周波数である、方法。
I.ルートを決定するステップは、輸送可能なコンピュータシステムに関連する第1のコンピュータシステムによって実施され、輸送可能なコンピュータシステムをルートの少なくとも一部分に沿って案内するための命令を決定するステップは、第1のコンピュータシステムによって実施され、軌道を生成するステップは、第1のコンピュータシステムによって実施されるパラグラフHが具陳する方法。
J.輸送可能なコンピュータシステムルートに沿って移動させる軌道を実行するステップは、輸送可能なコンピュータシステムに関連する第2のコンピュータシステムによって実施され、第2のコンピュータシステムは、第1のコンピュータシステムとは異なるパラグラフIが具陳する方法。
K.命令は指針を備え、リアルタイム処理されたセンサーデータに少なくとも部分的に基づいて、軌道を生成するステップは、指針に基づいて、軌道を生成するステップを備えるパラグラフI~Jのいずれかが具陳する方法。
L.第2の動作周波数において、第5のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第1のプロセッサによって、輸送可能なコンピュータシステムフォールバックアクションを実施させるフォールバック命令を生成するステップと、第3の動作周波数において、第6のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第1のプロセッサによって、フォールバック命令に基づいて、フォールバック軌道を生成するステップと、実質的に同じ時間において軌道とともにフォールバック軌道を出力するステップとをさらに備えるパラグラフI~Jのいずれかが具陳する方法。
M.フォールバックアクションを保証するイベントの発生を決定するステップと、第4の動作周波数において、第5のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第2のプロセッサによって、輸送可能なコンピュータシステムフォールバックアクションを実施させるフォールバック軌道を生成するステップと、輸送可能なコンピュータシステムにフォールバックアクションを実施させるフォールバック軌道を実行するステップとをさらに備え、イベントは、輸送可能なコンピュータシステムのしきい値距離内のオブジェクト、輸送可能なコンピュータシステムのしきい値距離内にあると予測されるオブジェクト、輸送可能なコンピュータシステムに関連する第1のコンピュータシステムと輸送可能なコンピュータシステムに関連する第2のコンピュータシステムとの間の通信の不在、混乱しきい値を上回る輸送可能なコンピュータシステムに関連する混乱レベル、輸送可能なコンピュータシステムのセンサーに関連する故障、輸送可能なコンピュータシステムに関連する構成要素の誤動作、輸送可能なコンピュータシステムに関連する搭乗者状態の変化、軌道に関連する運転可能な表面のステータスの変化、またはしきい値確率を超える衝突の確率を含む、パラグラフI~Lのいずれかが具陳する方法。
N.1つまたは複数のプロセッサと、1つまたは複数のプロセッサに通信可能に結合され、1つまたは複数のプロセッサによって実行可能である命令を含む1つまたは複数のプログラムモジュールを記憶する1つまたは複数のコンピュータ可読記憶媒体であって、1つまたは複数の第1のプログラムモジュールは、システムの現在のロケーションとシステムの目的のロケーションとの間のルートを生成するように構成されたルートプランニングプログラムモジュールであって、ルートプランニングプログラムモジュールは、第1の動作周波数において動作する、ルートプランニングプログラムモジュールと、ルートに基づいて命令を生成するように構成された判定プログラムモジュールであって、命令は、ルートに沿ってシステムを案内するための一連のアクションを含み、判定プログラムモジュールは、第2の動作周波数において動作する、判定プログラムモジュールと、軌道プログラムモジュールであって、リアルタイム処理されたセンサーデータにアクセスすることと、命令およびリアルタイム処理されたセンサーデータに少なくとも部分的に基づいて、出力軌道を生成することであって、軌道プログラムモジュールは、第3の動作周波数において動作する、こととを行うように構成された軌道プログラムモジュールと、システム出力軌道に沿って移動させるための1つまたは複数の信号を生成するように構成された実行プログラムモジュールであって、実行プログラムモジュールは、第4の動作周波数において動作する、実行プログラムモジュールとを備える1つまたは複数のコンピュータ可読記憶媒体とを備えるシステム。
O.ルートプランニングプログラムモジュール、判定プログラムモジュール、および軌道プログラムモジュールは、システムの第1のコンピュータシステムに関連付けられ、実行プログラムモジュールは、第1のコンピュータシステムとは別々であるシステムの第2のコンピュータシステムに関連付けられるパラグラフNが具陳するシステム。
P.1つまたは複数のプログラムモジュールが、第2のコンピュータシステムに関連付けられたフォールバック決定プログラムモジュールであって、フォールバック決定プログラムモジュールは、フォールバックアクションを保証するイベントの発生を決定することと、システムフォールバックアクションを実施させるためのフォールバック軌道にアクセスすることと、フォールバック軌道実行させ、システムフォールバックアクションを実施させることと、を行うように構成されたフォールバック決定プログラムモジュールをさらに備えるパラグラフOが具陳するシステム。
Q.イベントは、システムのしきい値距離内のオブジェクト、システムのしきい値距離内にあると予測されるオブジェクト、第1のコンピュータシステムと第2のコンピュータシステムとの間の通信の不在、混乱しきい値を上回るシステムに関連する混乱レベル、システムのセンサーに関連する故障、システムに関連する構成要素の誤動作、システムに関連する搭乗者状態の変化、軌道に関連する運転可能な表面のステータスの変化、またはしきい値確率を超える衝突の確率を備えるパラグラフPが具陳するシステム。
R.第1の動作周波数は、第2の動作周波数未満であり、第2の動作周波数は、第3の動作周波数未満であり、第3の動作周波数は、第4の動作周波数未満であるパラグラフN~Qのいずれかが具陳するシステム。
S.判定プログラムモジュールは、実行された軌道にアクセスすることと、実行された軌道を出力軌道と比較することと、実行された軌道と出力軌道とを比較することに少なくとも部分的に基づいて、フィードバックデータを生成することと、フィードバックデータに少なくとも部分的に基づいて、モデルまたはアルゴリズムのうちの1つまたは複数を更新することとを行うようにさらに構成されたパラグラフN~Qのいずれかが具陳するシステム。
上記で説明された例示的な節は、特定の一実装形態に関して説明されたが、本明細書のコンテキストでは、例示的な節の内容は、方法、デバイス、システム、および/またはコンピュータ記憶媒体を介して実装されることもできることを理解されたい。

Claims (15)

  1. 自律車両に実装されるシステムであって、前記システムは、
    第1のコンピュータシステムであって、
    1つまたは複数の第1のプロセッサと、
    前記1つまたは複数の第1のプロセッサに通信可能に結合され、前記1つまたは複数の第1のプロセッサによって実行可能である第1の命令を含む1つまたは複数の第1のプログラムモジュールを記憶する1つまたは複数の第1のコンピュータ可読記憶媒体であって、前記1つまたは複数の第1のプログラムモジュールは、
    前記自律車両の現在のロケーションと前記自律車両の目的のロケーションとの間のルートを生成するように構成されたルートプランニングプログラムモジュールであって、前記ルートプランニングプログラムモジュールは、第1の動作周波数において、第1のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第1のプロセッサによって実行される、ルートプランニングプログラムモジュールと、
    前記ルートに基づいて、第2の命令を生成するように構成された判定プログラムモジュールであって、前記第2の命令は、前記ルートの少なくとも一部分に沿って前記自律車両を案内するための一連のアクションを含み、前記判定プログラムモジュールは、第2の動作周波数において、第2のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第1のプロセッサによって実行される、判定プログラムモジュールと、
    リアルタイム処理されたセンサーデータにアクセスすることと、
    前記第2の命令および前記リアルタイム処理されたセンサーデータに少なくとも部分的に基づいて、出力軌道を生成することと、を行うように構成された軌道プログラムモジュールであって、第3の動作周波数において、第3のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第1のプロセッサによって実行される、前記軌道プログラムモジュールと
    を備える前記1つまたは複数の第1のプログラムモジュールを記憶する1つまたは複数の第1のコンピュータ可読記憶媒体と
    を備える第1のコンピュータシステムと、
    第2のコンピュータシステムであって、
    1つまたは複数の第2のプロセッサと、
    前記1つまたは複数の第2のプロセッサに通信可能に結合され、前記1つまたは複数の第2のプロセッサによって実行可能である第3の命令を含む1つまたは複数の第2のプログラムモジュールを記憶する1つまたは複数の第2のコンピュータ可読記憶媒体であって、前記1つまたは複数の第2のプログラムモジュールは、
    前記自律車両に前記出力軌道に沿って運転させるための1つまたは複数の信号を生成するように構成された実行プログラムモジュールであって、第4の動作周波数において、第4のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第2のプロセッサによって実行される、実行プログラムモジュールと
    を備える前記1つまたは複数の第2のプログラムモジュールを記憶する1つまたは複数の第2のコンピュータ可読記憶媒体と
    を備える第2のコンピュータシステムと
    を備え、
    前記第1の動作周波数、前記第2の動作周波数、前記第3の動作周波数、および前記第4の動作周波数のうちの少なくとも2つが、それぞれ異なる動作周波数である、
    システム。
  2. 前記1つまたは複数の第2のプログラムモジュールは、フォールバック決定プログラムモジュールを含み、前記フォールバック決定プログラムモジュールは、
    前記第1のコンピュータシステムから、前記自律車両に安全操縦を実施させるフォールバック軌道を受信することと、
    所定の時間期間の間前記フォールバック軌道を記憶することと
    を行うように構成され、
    ここにおいて、前記フォールバック決定プログラムモジュールは、前記第4の動作周波数において、第4のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第2のプロセッサによって実行される
    請求項1に記載のシステム。
  3. 前記フォールバック決定プログラムモジュールは、
    フォールバックアクションを保証するイベントの発生を決定することと、
    前記フォールバック軌道にアクセスすることと
    を行うようにさらに構成され、
    前記イベントは、
    前記システムのしきい値距離内のオブジェクト、
    前記システムのしきい値距離内にあると予測されるオブジェクト、
    前記第1のコンピュータシステムと前記第2のコンピュータシステムとの間の通信の不在、
    混乱しきい値を上回る前記システムに関連する混乱レベル、
    前記システムのセンサーに関連する故障、
    前記システムに関連する構成要素の誤動作、
    前記システムに関連する搭乗者状態の変化、
    前記出力軌道に関連する運転可能な表面のステータスの変化、または
    しきい値確率を超える衝突の確率
    のいずれかを含む、
    請求項2に記載のシステム。
  4. 前記1つまたは複数の第2のプログラムモジュールは、フォールバック決定プログラムモジュールを含み、前記フォールバック決定プログラムモジュールは、
    フォールバックアクションを保証するイベントの発生を決定することと、
    前記自律車両に安全操縦を実施させるフォールバック軌道を生成することと
    を行うように構成され、
    ここにおいて、前記フォールバック決定プログラムモジュールは、前記第4の動作周波数において、第5のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第2のプロセッサによって実行される、第4の命令を含み
    前記イベントは、
    前記システムのしきい値距離内のオブジェクト、
    前記システムのしきい値距離内にあると予測されるオブジェクト、
    前記第1のコンピュータシステムと前記第2のコンピュータシステムとの間の通信の不在、
    混乱しきい値を上回る前記システムに関連する混乱レベル、
    前記システムのセンサーに関連する故障、
    前記システムに関連する構成要素の誤動作、
    前記システムに関連する搭乗者状態の変化、
    前記出力軌道に関連する運転可能な表面のステータスの変化、または
    しきい値確率を超える衝突の確率
    のいずれかを含む、
    請求項1に記載のシステム。
  5. 前記実行プログラムモジュールは、
    前記自律車両に安全操縦を実施させるフォールバック軌道を受信することと、
    前記自律車両に前記安全操縦を実施させる前記フォールバック軌道を実行することと
    を行うようにさらに構成された請求項1に記載のシステム。
  6. 前記第4の動作周波数は、前記第1の動作周波数、前記第2の動作周波数、および前記第3の動作周波数よりも高い請求項1に記載のシステム。
  7. 前記第1の動作周波数、前記第2の動作周波数、前記第3の動作周波数、および前記第4の動作周波数がそれぞれ異なる動作周波数であり、
    前記第4の動作周波数は、前記第1の動作周波数および前記第2の動作周波数よりも高い、請求項1に記載のシステム。
  8. 前記第1の動作周波数は、前記第2の動作周波数、前記第3の動作周波数、および前記第4の動作周波数よりも低い請求項1に記載のシステム。
  9. 輸送可能なコンピュータシステムによって実施される方法であって、前記方法は、
    前記輸送可能なコンピュータシステムの現在のロケーションを決定するステップと、
    前記輸送可能なコンピュータシステムのための目的のロケーションを決定するステップと、
    前記輸送可能なコンピュータシステムに関連する1つまたは複数のセンサーから、リアルタイム処理されたセンサーデータを受信するステップと、
    第1の動作周波数において、第1のデータを、受信する、処理する、または出力することの少なくとも1つを行う1つまたは複数の第1のプロセッサによって、前記輸送可能なコンピュータシステムを前記現在のロケーションから前記目的のロケーションに案内するためのルートを決定するステップと、
    第2の動作周波数において、第2のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第1のプロセッサによって、前記リアルタイム処理されたセンサーデータに少なくとも部分的に基づいて、前記輸送可能なコンピュータシステムを前記ルートの少なくとも一部分に沿って案内するための命令を決定するステップと、
    第3の動作周波数において、第3のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第1のプロセッサによって、前記リアルタイム処理されたセンサーデータおよび前記命令に少なくとも部分的に基づいて、軌道を生成するステップと、
    第4の動作周波数において、第4のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第2のプロセッサによって、前記輸送可能なコンピュータシステムを前記ルートに沿って移動させる前記軌道を実行するステップと
    を備え、
    前記第1の動作周波数、前記第2の動作周波数、前記第3の動作周波数、および前記第4の動作周波数のうちの少なくとも2つが、それぞれ異なる動作周波数である、
    方法。
  10. 前記ルートを決定する前記ステップは、前記輸送可能なコンピュータシステムに関連する第1のコンピュータシステムによって実施され、
    前記輸送可能なコンピュータシステムを前記ルートの少なくとも前記一部分に沿って案内するための前記命令を決定する前記ステップは、前記第1のコンピュータシステムによって実施され、
    前記軌道を生成する前記ステップは、前記第1のコンピュータシステムによって実施される
    請求項9に記載の方法。
  11. 前記輸送可能なコンピュータシステムを前記ルートに沿って移動させる前記軌道を実行する前記ステップは、前記輸送可能なコンピュータシステムに関連する第2のコンピュータシステムによって実施され、前記第2のコンピュータシステムは、前記第1のコンピュータシステムとは異なる請求項10に記載の方法。
  12. 前記命令は指針を備え、前記リアルタイム処理されたセンサーデータに少なくとも部分的に基づいて、前記軌道を生成するステップは、前記指針に基づいて、前記軌道を生成するステップを備える請求項9に記載の方法。
  13. 前記第2の動作周波数において、第5のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第1のプロセッサによって、前記輸送可能なコンピュータシステムにフォールバックアクションを実施させるフォールバック命令を生成するステップと、
    前記第3の動作周波数において、第6のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第1のプロセッサによって、前記フォールバック命令に基づいて、フォールバック軌道を生成するステップと、
    実質的に同じ時間において前記軌道とともに前記フォールバック軌道を出力するステップと
    をさらに備える請求項9に記載の方法。
  14. フォールバックアクションを保証するイベントの発生を決定するステップと、
    前記第4の動作周波数において、第5のデータを、受信する、処理する、または出力することの少なくとも1つを行う前記1つまたは複数の第2のプロセッサによって、前記輸送可能なコンピュータシステムに前記フォールバックアクションを実施させるフォールバック軌道を生成するステップと、
    前記輸送可能なコンピュータシステムに前記フォールバックアクションを実施させる前記フォールバック軌道を実行するステップと
    をさらに備え、
    前記イベントは、
    前記輸送可能なコンピュータシステムのしきい値距離内のオブジェクト、
    前記輸送可能なコンピュータシステムのしきい値距離内にあると予測されるオブジェクト、
    前記輸送可能なコンピュータシステムに関連する第1のコンピュータシステムと前記輸送可能なコンピュータシステムに関連する第2のコンピュータシステムとの間の通信の不在、
    混乱しきい値を上回る前記輸送可能なコンピュータシステムに関連する混乱レベル、
    前記輸送可能なコンピュータシステムのセンサーに関連する故障、
    前記輸送可能なコンピュータシステムに関連する構成要素の誤動作、
    前記輸送可能なコンピュータシステムに関連する搭乗者状態の変化、
    前記軌道に関連する運転可能な表面のステータスの変化、または
    しきい値確率を超える衝突の確率
    のいずれかを含む、
    請求項9に記載の方法。
  15. プロセッサによって実行されと、コンピュータに、請求項9乃至14のいずれか一項に記載の方法を実施させる命令が符号化されたコンピュータ可読媒体。
JP2019547445A 2017-03-01 2018-02-26 軌道生成および実行アーキテクチャ Active JP7344120B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762465724P 2017-03-01 2017-03-01
US62/465,724 2017-03-01
US15/632,208 2017-06-23
US15/632,208 US10353390B2 (en) 2017-03-01 2017-06-23 Trajectory generation and execution architecture
PCT/US2018/019685 WO2018160486A1 (en) 2017-03-01 2018-02-26 Trajectory generation and execution architecture

Publications (2)

Publication Number Publication Date
JP2020509963A JP2020509963A (ja) 2020-04-02
JP7344120B2 true JP7344120B2 (ja) 2023-09-13

Family

ID=63357180

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019547445A Active JP7344120B2 (ja) 2017-03-01 2018-02-26 軌道生成および実行アーキテクチャ

Country Status (5)

Country Link
US (5) US10353390B2 (ja)
EP (1) EP3590015B1 (ja)
JP (1) JP7344120B2 (ja)
CN (1) CN110692025A (ja)
WO (1) WO2018160486A1 (ja)

Families Citing this family (147)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10794711B2 (en) 2016-12-30 2020-10-06 DeepMap Inc. High definition map updates based on sensor data collected by autonomous vehicles
KR102535540B1 (ko) * 2017-01-12 2023-05-23 모빌아이 비젼 테크놀로지스 엘티디. 차량 움직임에 기반한 항법
US10353390B2 (en) 2017-03-01 2019-07-16 Zoox, Inc. Trajectory generation and execution architecture
US10671076B1 (en) 2017-03-01 2020-06-02 Zoox, Inc. Trajectory prediction of third-party objects using temporal logic and tree search
US10829149B1 (en) * 2017-03-01 2020-11-10 Zoox, Inc. Steering control for vehicles
EP4357869A3 (en) 2017-03-20 2024-06-12 Mobileye Vision Technologies Ltd. Trajectory selection for an autonomous vehicle
US10595455B2 (en) * 2017-06-19 2020-03-24 Cnh Industrial America Llc Planning system for an autonomous work vehicle system
US20180374341A1 (en) * 2017-06-27 2018-12-27 GM Global Technology Operations LLC Systems and methods for predicting traffic patterns in an autonomous vehicle
CN107479368B (zh) * 2017-06-30 2021-09-21 北京百度网讯科技有限公司 一种基于人工智能的训练无人机控制模型的方法及系统
US10576984B2 (en) * 2017-07-06 2020-03-03 Toyota Research Institute, Inc. Second stop position for intersection turn
US10649458B2 (en) 2017-09-07 2020-05-12 Tusimple, Inc. Data-driven prediction-based system and method for trajectory planning of autonomous vehicles
US10953881B2 (en) 2017-09-07 2021-03-23 Tusimple, Inc. System and method for automated lane change control for autonomous vehicles
US10782693B2 (en) * 2017-09-07 2020-09-22 Tusimple, Inc. Prediction-based system and method for trajectory planning of autonomous vehicles
US10953880B2 (en) 2017-09-07 2021-03-23 Tusimple, Inc. System and method for automated lane change control for autonomous vehicles
US10782694B2 (en) * 2017-09-07 2020-09-22 Tusimple, Inc. Prediction-based system and method for trajectory planning of autonomous vehicles
DE102017215844A1 (de) * 2017-09-08 2019-03-14 Robert Bosch Gmbh Verfahren zum Betreiben eines Fahrzeugs
US10754339B2 (en) * 2017-09-11 2020-08-25 Baidu Usa Llc Dynamic programming and quadratic programming based decision and planning for autonomous driving vehicles
US10515321B2 (en) * 2017-09-11 2019-12-24 Baidu Usa Llc Cost based path planning for autonomous driving vehicles
US11874126B1 (en) * 2017-09-15 2024-01-16 Apple Inc. Map with location-based observations, actions, and rules
KR102014144B1 (ko) * 2017-09-26 2019-08-26 엘지전자 주식회사 차량의 운행 시스템을 제어하는 방법
US10739155B2 (en) * 2017-09-29 2020-08-11 International Business Machines Corporation Cognitive route quality-learning service
US10802483B2 (en) * 2017-10-19 2020-10-13 International Business Machines Corporation Emergency public deactivation of autonomous vehicles
US10613548B2 (en) * 2017-10-19 2020-04-07 Zoox, Inc. Architecture for secure vehicle control
WO2019089015A1 (en) 2017-10-31 2019-05-09 Nissan North America, Inc. Autonomous vehicle operation with explicit occlusion reasoning
US10845803B2 (en) * 2017-11-29 2020-11-24 Nio Usa, Inc. Method and apparatus for simultaneous processing and logging of automotive vision system with controls and fault monitoring
US11073828B2 (en) * 2017-12-08 2021-07-27 Samsung Electronics Co., Ltd. Compression of semantic information for task and motion planning
WO2020204871A1 (en) 2017-12-22 2020-10-08 Nissan North America, Inc. Shared autonomous vehicle operational management
US10745006B2 (en) * 2018-02-01 2020-08-18 GM Global Technology Operations LLC Managing automated driving complexity of the forward path using perception system measures
US10737717B2 (en) * 2018-02-14 2020-08-11 GM Global Technology Operations LLC Trajectory tracking for vehicle lateral control using neural network
US10955851B2 (en) 2018-02-14 2021-03-23 Zoox, Inc. Detecting blocking objects
US10732639B2 (en) * 2018-03-08 2020-08-04 GM Global Technology Operations LLC Method and apparatus for automatically generated curriculum sequence based reinforcement learning for autonomous vehicles
US10414395B1 (en) 2018-04-06 2019-09-17 Zoox, Inc. Feature-based prediction
US11125574B2 (en) * 2018-04-25 2021-09-21 Here Global B.V. Navigation optimized for unexpected traffic events
US11126873B2 (en) 2018-05-17 2021-09-21 Zoox, Inc. Vehicle lighting state determination
US10424196B1 (en) 2018-06-25 2019-09-24 At&T Intellectual Property I, L.P. Dynamic edge network management of vehicular traffic
CN110889962B (zh) * 2018-09-07 2022-09-30 上海擎感智能科技有限公司 规划路线和轨迹路线比较方法及装置
DE102018215949A1 (de) * 2018-09-19 2020-03-19 Robert Bosch Gmbh Verfahren zur Trajektorienplanung eines beweglichen Objektes
US11829143B2 (en) * 2018-11-02 2023-11-28 Aurora Operations, Inc. Labeling autonomous vehicle data
US10838417B2 (en) * 2018-11-05 2020-11-17 Waymo Llc Systems for implementing fallback behaviors for autonomous vehicles
US11110922B2 (en) 2018-11-05 2021-09-07 Zoox, Inc. Vehicle trajectory modification for following
US11192545B1 (en) * 2018-12-05 2021-12-07 Waymo Llc Risk mitigation in speed planning
US11208111B2 (en) * 2018-12-11 2021-12-28 Waymo Llc Redundant hardware system for autonomous vehicles
CN111413958B (zh) * 2018-12-18 2021-09-24 北京航迹科技有限公司 用于确定自动驾驶中的驾驶路径的系统和方法
CN111338330B (zh) * 2018-12-19 2022-07-12 科沃斯机器人股份有限公司 作业位置确定方法、自移动设备及存储介质
FR3090953B1 (fr) * 2018-12-21 2020-12-04 Psa Automobiles Sa Méthode de vérification de la robustesse d’un réseau neuronal
WO2020138516A1 (ko) * 2018-12-24 2020-07-02 엘지전자 주식회사 통신 장치, 그것의 제어 방법 및 그것을 포함하는 통신 시스템
US11586914B2 (en) * 2019-01-11 2023-02-21 Arizona Board Of Regents On Behalf Of Arizona State University Systems and methods for evaluating perception systems for autonomous vehicles using quality temporal logic
US10919543B2 (en) * 2019-01-30 2021-02-16 StradVision, Inc. Learning method and learning device for determining whether to switch mode of vehicle from manual driving mode to autonomous driving mode by performing trajectory-based behavior analysis on recent driving route
US11899448B2 (en) * 2019-02-21 2024-02-13 GM Global Technology Operations LLC Autonomous vehicle that is configured to identify a travel characteristic based upon a gesture
US11635764B2 (en) * 2019-02-22 2023-04-25 Uatc, Llc. Motion prediction for autonomous devices
US11292486B2 (en) 2019-02-27 2022-04-05 Denso International America, Inc. System and apparatus for a connected vehicle
CN111661062A (zh) * 2019-03-05 2020-09-15 阿里巴巴集团控股有限公司 自动驾驶控制方法、装置及系统
US11155258B2 (en) * 2019-03-25 2021-10-26 GM Global Technology Operations LLC System and method for radar cross traffic tracking and maneuver risk estimation
GB2588983B (en) * 2019-04-25 2022-05-25 Motional Ad Llc Graphical user interface for display of autonomous vehicle behaviors
WO2020241955A1 (ko) * 2019-05-31 2020-12-03 엘지전자 주식회사 차량용 전자 장치 및 차량용 전자 장치의 동작 방법
WO2020241952A1 (ko) * 2019-05-31 2020-12-03 엘지전자 주식회사 자율 주행 차량 시스템 및 차량의 자율 주행 방법
KR102569135B1 (ko) * 2019-06-04 2023-08-22 모셔널 에이디 엘엘씨 선형 시간 논리를 사용한 자율 주행 차량 동작
US11294387B2 (en) 2019-06-17 2022-04-05 Toyota Research Institute, Inc. Systems and methods for training a vehicle to autonomously drive a route
US11163990B2 (en) 2019-06-28 2021-11-02 Zoox, Inc. Vehicle control system and method for pedestrian detection based on head detection in sensor data
US20200406928A1 (en) * 2019-06-28 2020-12-31 Robert Bosch Gmbh Method for controlling a vehicle
US11605236B2 (en) 2019-06-28 2023-03-14 Zoox, Inc. Training a machine-learned model to detect low variance regions
US11610078B2 (en) 2019-06-28 2023-03-21 Zoox, Inc. Low variance region detection for improved high variance region detection using machine learning
US20200406927A1 (en) * 2019-06-28 2020-12-31 Robert Bosch Gmbh Method for testing a vehicle system
WO2020264010A1 (en) 2019-06-28 2020-12-30 Zoox, Inc. Low variance region detection for improved detection
CN110442129B (zh) * 2019-07-26 2021-10-22 中南大学 一种多智能体编队的控制方法和系统
CN110488816B (zh) * 2019-08-06 2021-12-31 华为技术有限公司 自动驾驶纵向规划方法及相关设备
CN114269618A (zh) 2019-08-20 2022-04-01 祖克斯有限公司 转弯前用于并入的车道处理
US11353874B2 (en) 2019-08-20 2022-06-07 Zoox, Inc. Lane handling for merge prior to turn
US11468773B2 (en) 2019-08-20 2022-10-11 Zoox, Inc. Lane classification for improved vehicle handling
CN110531766B (zh) * 2019-08-27 2022-06-28 熵智科技(深圳)有限公司 基于已知占据栅格地图的持续激光slam构图定位方法
US11663514B1 (en) * 2019-08-30 2023-05-30 Apple Inc. Multimodal input processing system
CN110502033B (zh) * 2019-09-04 2022-08-09 中国人民解放军国防科技大学 一种基于强化学习的固定翼无人机群集控制方法
KR20210029586A (ko) * 2019-09-06 2021-03-16 엘지전자 주식회사 이미지 내의 특징적 객체에 기반하여 슬램을 수행하는 방법 및 이를 구현하는 로봇과 클라우드 서버
US11541843B1 (en) 2019-09-20 2023-01-03 Zoox, Inc. Nonspecific vehicle
CN110659420B (zh) * 2019-09-25 2022-05-20 广州西思数字科技有限公司 一种基于深度神经网络蒙特卡洛搜索树的个性化配餐方法
CN110632931B (zh) * 2019-10-09 2022-06-21 哈尔滨工程大学 动态环境下基于深度强化学习的移动机器人避碰规划方法
US11754408B2 (en) 2019-10-09 2023-09-12 Argo AI, LLC Methods and systems for topological planning in autonomous driving
US20210181768A1 (en) * 2019-10-29 2021-06-17 Loon Llc Controllers for Lighter-Than-Air (LTA) Vehicles Using Deep Reinforcement Learning
US11526791B2 (en) * 2019-11-11 2022-12-13 International Business Machines Corporation Methods and systems for diverse instance generation in artificial intelligence planning
CN111008360B (zh) * 2019-11-20 2023-11-03 安徽百诚慧通科技股份有限公司 一种基于深度优先搜索的车辆固定轨迹的分析方法及系统
US11480961B1 (en) 2019-11-21 2022-10-25 Zoox, Inc. Immersive sound for teleoperators
US11899454B2 (en) * 2019-11-26 2024-02-13 Nissan North America, Inc. Objective-based reasoning in autonomous vehicle decision-making
US11635758B2 (en) 2019-11-26 2023-04-25 Nissan North America, Inc. Risk aware executor with action set recommendations
US11345360B1 (en) 2019-12-12 2022-05-31 Zoox, Inc. Localization error handling
US20210188286A1 (en) * 2019-12-20 2021-06-24 Baidu Usa Llc A spline curve and spiral curve based reference line smoothing method
US11462041B2 (en) 2019-12-23 2022-10-04 Zoox, Inc. Pedestrians with objects
US11789155B2 (en) 2019-12-23 2023-10-17 Zoox, Inc. Pedestrian object detection training
US11281722B2 (en) * 2020-01-06 2022-03-22 International Business Machines Corporation Cognitively generating parameter settings for a graph database
CN113110932A (zh) * 2020-01-13 2021-07-13 北京地平线机器人技术研发有限公司 规划结果生成方法、装置和电子设备
US11851844B2 (en) * 2020-01-21 2023-12-26 Caterpillar Inc. Implement travel prediction for a work machine
US11714971B2 (en) 2020-01-31 2023-08-01 Nissan North America, Inc. Explainability of autonomous vehicle decision making
JP2023514905A (ja) 2020-02-19 2023-04-12 エヌビディア コーポレーション 自律型車両のためのビヘイビア・プランニング
US11385642B2 (en) 2020-02-27 2022-07-12 Zoox, Inc. Perpendicular cut-in training
US11782438B2 (en) 2020-03-17 2023-10-10 Nissan North America, Inc. Apparatus and method for post-processing a decision-making model of an autonomous vehicle using multivariate data
CN113495547A (zh) * 2020-03-20 2021-10-12 北京智行者科技有限公司 一种实时安全的无人驾驶故障诊断与保护方法及系统
EP3885226A1 (en) * 2020-03-25 2021-09-29 Aptiv Technologies Limited Method and system for planning the motion of a vehicle
US11650590B2 (en) * 2020-03-26 2023-05-16 Mitsubishi Electric Research Laboratories, Inc. Adaptive optimization of decision making for vehicle control
US11568249B2 (en) 2020-04-07 2023-01-31 International Business Machines Corporation Automated decision making for neural architecture search
US20210325891A1 (en) * 2020-04-16 2021-10-21 Raytheon Company Graph construction and execution ml techniques
US20210325880A1 (en) * 2020-04-17 2021-10-21 Zoox, Inc. Collaborative vehicle guidance
US11472442B2 (en) 2020-04-23 2022-10-18 Zoox, Inc. Map consistency checker
RU2764479C2 (ru) 2020-04-23 2022-01-17 Общество с ограниченной ответственностью «Яндекс Беспилотные Технологии» Способ и система для управления работой самоуправляемого автомобиля
US20210339741A1 (en) * 2020-04-30 2021-11-04 Zoox, Inc. Constraining vehicle operation based on uncertainty in perception and/or prediction
CN111505965B (zh) * 2020-06-17 2020-09-29 深圳裹动智驾科技有限公司 自动驾驶车辆仿真测试的方法、装置、计算机设备及存储介质
US11904890B2 (en) * 2020-06-17 2024-02-20 Baidu Usa Llc Lane change system for lanes with different speed limits
WO2022006418A1 (en) 2020-07-01 2022-01-06 May Mobility, Inc. Method and system for dynamically curating autonomous vehicle policies
CN111783358B (zh) * 2020-07-02 2022-10-04 哈尔滨工业大学 一种基于贝叶斯估计的高超速飞行器长期轨迹预报方法
US11628858B2 (en) * 2020-09-15 2023-04-18 Baidu Usa Llc Hybrid planning system for autonomous vehicles
CN112202848B (zh) * 2020-09-15 2021-11-30 中国科学院计算技术研究所 基于深度强化学习的无人系统网络自适应路由方法和系统
CN112216124B (zh) * 2020-09-17 2021-07-27 浙江工业大学 一种基于深度强化学习的交通信号控制方法
US11710276B1 (en) * 2020-09-21 2023-07-25 Apple Inc. Method and device for improved motion planning
US11840175B2 (en) * 2020-09-23 2023-12-12 Robert D. Fish Traffic signal alarm device having no navigational control
US11597404B2 (en) * 2020-09-23 2023-03-07 Robert D. Fish Traffic signal alarm device
CN112230971B (zh) * 2020-10-22 2022-01-14 腾讯科技(深圳)有限公司 导航方法、服务器、终端及存储介质
CN112264999B (zh) * 2020-10-28 2022-06-28 复旦大学 用于智能体连续空间行动规划的方法、装置及存储介质
USD981819S1 (en) 2020-10-30 2023-03-28 Zoox, Inc. Vehicle with a door opening lever
US11868137B2 (en) * 2020-11-12 2024-01-09 Honda Motor Co., Ltd. Systems and methods for path planning with latent state inference and graphical relationships
USD971244S1 (en) 2020-11-20 2022-11-29 Zoox, Inc. Display screen or portion thereof having an animated graphical user interface
USD971255S1 (en) 2020-11-20 2022-11-29 Zoox, Inc. Display screen or portion thereof having a graphical user interface
US11618320B1 (en) 2020-11-20 2023-04-04 Zoox, Inc. Multi-passenger interaction
CN112356830B (zh) * 2020-11-25 2021-11-09 同济大学 一种基于模型强化学习的智能泊车方法
US11669751B2 (en) * 2020-11-27 2023-06-06 At&T Intellectual Property I, L.P. Prediction of network events via rule set representations of machine learning models
US11807266B2 (en) * 2020-12-04 2023-11-07 Mitsubishi Electric Corporation Driving system for distribution of planning and control functionality between vehicle device and cloud computing device, vehicle computing device, and cloud computing device
US11958501B1 (en) 2020-12-07 2024-04-16 Zoox, Inc. Performance-based metrics for evaluating system quality
WO2022132774A1 (en) 2020-12-14 2022-06-23 May Mobility, Inc. Autonomous vehicle safety platform system and method
US11787438B2 (en) * 2020-12-17 2023-10-17 Zoox, Inc. Collaborative vehicle path generation
US11657719B2 (en) * 2020-12-18 2023-05-23 Zoox, Inc. System for sparsely representing and storing geographic and map data
US11738772B1 (en) * 2020-12-18 2023-08-29 Zoox, Inc. Object avoidance with perceived safety subgoal
DE102021101718A1 (de) 2021-01-27 2022-07-28 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Vorhersagen eines Versagens einer automatisierten Fahrzeugführung, Assistenzsystem und Kraftfahrzeug
CN113064429B (zh) * 2021-03-15 2022-04-01 江南大学 一种磁性微机器人群体独立驱动控制系统
WO2022212944A1 (en) 2021-04-02 2022-10-06 May Mobility, Inc. Method and system for operating an autonomous agent with incomplete environmental information
US11912274B2 (en) * 2021-05-04 2024-02-27 Ford Global Technologies, Llc Adaptive cruise control with non-visual confirmation of obstacles
WO2022256249A1 (en) * 2021-06-02 2022-12-08 May Mobility, Inc. Method and system for remote assistance of an autonomous agent
US20230047336A1 (en) * 2021-08-12 2023-02-16 Waymo Llc Time gaps for autonomous vehicles
CN117980212A (zh) * 2021-09-24 2024-05-03 祖克斯有限公司 基于优化的规划系统
JP2023049382A (ja) * 2021-09-29 2023-04-10 トヨタ自動車株式会社 情報処理装置、情報処理方法、及び、プログラム
CN114185334B (zh) * 2021-11-05 2024-04-16 东风汽车集团股份有限公司 一种高实时性的自动驾驶汽车行为决策系统及运行方法
CN114237303B (zh) * 2021-11-17 2022-09-06 中国人民解放军军事科学院国防科技创新研究院 一种基于蒙特卡洛树搜索的无人机路径规划方法及装置
US20230174084A1 (en) * 2021-12-06 2023-06-08 The Regents Of The University Of Michigan Monte Carlo Policy Tree Decision Making
US11814072B2 (en) 2022-02-14 2023-11-14 May Mobility, Inc. Method and system for conditional operation of an autonomous agent
US11634158B1 (en) * 2022-06-08 2023-04-25 Motional Ad Llc Control parameter based search space for vehicle motion planning
EP4332824A1 (en) 2022-09-02 2024-03-06 Continental Automotive Technologies GmbH System and method for translating natural language traffic rules into formal logic for autonomous moving vehicles
US20240124016A1 (en) * 2022-10-14 2024-04-18 Motional Ad Llc Ensemble-based vehicle motion planner
DE102022210934A1 (de) 2022-10-17 2024-04-18 Continental Autonomous Mobility Germany GmbH Planung einer Trajektorie
CN115345390B (zh) * 2022-10-19 2023-01-13 武汉大数据产业发展有限公司 一种行为轨迹预测方法、装置、电子设备及存储介质
CN115657683B (zh) * 2022-11-14 2023-05-02 中国电子科技集团公司第十研究所 一种可用于巡检作业任务的无人无缆潜水器实时避障方法
CN115827171B (zh) * 2023-01-31 2023-05-23 阿里巴巴达摩院(杭州)科技有限公司 云端调参系统、调参方法及调参系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008129804A (ja) 2006-11-20 2008-06-05 Toyota Motor Corp 走行制御計画生成システム及びコンピュータプログラム
WO2016062568A1 (de) 2014-10-24 2016-04-28 Robert Bosch Gmbh Verfahren und vorrichtung zum betreiben eines fahrzeugs
JP2016210255A (ja) 2015-05-01 2016-12-15 トヨタ自動車株式会社 車両走行制御装置

Family Cites Families (66)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5177685A (en) * 1990-08-09 1993-01-05 Massachusetts Institute Of Technology Automobile navigation system using real time spoken driving instructions
US6707421B1 (en) * 1997-08-19 2004-03-16 Siemens Vdo Automotive Corporation Driver information system
EP1332910B1 (en) 2002-02-01 2009-11-04 Nissan Motor Co., Ltd. Method and system for vehicle operator assistance improvement
CA2474443A1 (en) * 2002-02-05 2003-08-14 Handshake Interactive Technologies Inc. Method and system for thin client based intelligent transportation
US20050049785A1 (en) 2003-09-02 2005-03-03 Vergin William E. Off-board navigation system
US7248952B2 (en) * 2005-02-17 2007-07-24 Northrop Grumman Corporation Mixed integer linear programming trajectory generation for autonomous nap-of-the-earth flight in a threat environment
US20080065328A1 (en) 2006-09-08 2008-03-13 Andreas Eidehall Method and system for collision avoidance
US8121749B1 (en) 2008-09-25 2012-02-21 Honeywell International Inc. System for integrating dynamically observed and static information for route planning in a graph based planner
US9058746B2 (en) 2008-10-02 2015-06-16 Hitachi Automotive Systems, Ltd. Information processing device associated with vehicle traveling
KR101291067B1 (ko) 2009-11-26 2013-08-07 한국전자통신연구원 차량 제어 장치 및 그 자율 주행 방법, 지역 서버 장치 및 그 자율 주행 서비스 방법, 전역 서버 장치 및 그 자율 주행 서비스 방법
US8473447B2 (en) 2010-03-29 2013-06-25 Palo Alto Research Center Incorporated AI planning based quasi-montecarlo simulation method for probabilistic planning
US8509982B2 (en) 2010-10-05 2013-08-13 Google Inc. Zone driving
US8645310B2 (en) 2011-03-22 2014-02-04 GM Global Technology Operations LLC Efficient source of infeasibility identification in timed automata traces
US9381916B1 (en) 2012-02-06 2016-07-05 Google Inc. System and method for predicting behaviors of detected objects through environment representation
US8620517B2 (en) * 2012-02-21 2013-12-31 Toyota Mototr Engineering & Manufacturing North America, Inc. Vehicular platooning using distributed receding horizon control
US8880272B1 (en) 2012-03-16 2014-11-04 Google Inc. Approach for estimating the geometry of roads and lanes by using vehicle trajectories
US9495874B1 (en) 2012-04-13 2016-11-15 Google Inc. Automated system and method for modeling the behavior of vehicles and other agents
CN203032675U (zh) 2013-01-21 2013-07-03 霍州煤电集团吕梁山煤电有限公司方山木瓜煤矿 矿用猴车检测控制系统
US9305223B1 (en) 2013-06-26 2016-04-05 Google Inc. Vision-based indicator signal detection using spatiotemporal filtering
US9558659B1 (en) 2014-08-29 2017-01-31 Google Inc. Determining the stationary state of detected vehicles
US20160202670A1 (en) * 2015-01-08 2016-07-14 Northwestern University System and method for sequential action control for nonlinear systems
US9869484B2 (en) * 2015-01-14 2018-01-16 Google Inc. Predictively controlling an environmental control system
JP2018510373A (ja) 2015-02-10 2018-04-12 モービルアイ ビジョン テクノロジーズ リミテッド 自律車両ナビゲーションのための疎な地図
US9368026B1 (en) * 2015-05-26 2016-06-14 Google Inc. Fallback requests for autonomous vehicles
DE102015213078A1 (de) 2015-07-13 2017-01-19 Conti Temic Microelectronic Gmbh Bremslichterkennung bei vorausfahrenden Fahrzeugen zur Anpassung einer Auslösung aktiver Sicherheitsmechanismen
US9934688B2 (en) 2015-07-31 2018-04-03 Ford Global Technologies, Llc Vehicle trajectory determination
JP6547575B2 (ja) * 2015-10-15 2019-07-24 富士通株式会社 経路探索装置及び経路探索方法
US9630619B1 (en) 2015-11-04 2017-04-25 Zoox, Inc. Robotic vehicle active safety systems and methods
US9983591B2 (en) 2015-11-05 2018-05-29 Ford Global Technologies, Llc Autonomous driving at intersections based on perception data
CN108604292B (zh) 2015-11-26 2023-10-13 御眼视觉技术有限公司 对切入车道的车辆的自动预测和利他响应
US10800455B2 (en) 2015-12-17 2020-10-13 Ford Global Technologies, Llc Vehicle turn signal detection
US10386835B2 (en) 2016-01-04 2019-08-20 GM Global Technology Operations LLC System and method for externally interfacing with an autonomous vehicle
US10322717B2 (en) 2016-01-04 2019-06-18 GM Global Technology Operations LLC Expert mode for vehicles
EP3995782A1 (en) 2016-01-05 2022-05-11 Mobileye Vision Technologies Ltd. Systems and methods for estimating future paths
US20170213459A1 (en) 2016-01-22 2017-07-27 Flex Ltd. System and method of identifying a vehicle and determining the location and the velocity of the vehicle by sound
US9568915B1 (en) 2016-02-11 2017-02-14 Mitsubishi Electric Research Laboratories, Inc. System and method for controlling autonomous or semi-autonomous vehicle
CN107180220B (zh) 2016-03-11 2023-10-31 松下电器(美国)知识产权公司 危险预测方法
US9645577B1 (en) * 2016-03-23 2017-05-09 nuTonomy Inc. Facilitating vehicle driving and self-driving
WO2017171659A1 (en) 2016-03-31 2017-10-05 Agency For Science, Technology And Research Signal light detection
JP2018018389A (ja) 2016-07-29 2018-02-01 パナソニックIpマネジメント株式会社 自動運転車輌の制御装置、及び制御プログラム
CN106382942B (zh) * 2016-08-16 2019-10-29 曹蕊 一种车载导航系统及导航方法
US10380439B2 (en) 2016-09-06 2019-08-13 Magna Electronics Inc. Vehicle sensing system for detecting turn signal indicators
CN109791409B (zh) * 2016-09-23 2022-11-29 苹果公司 自主车辆的运动控制决策
US10699305B2 (en) * 2016-11-21 2020-06-30 Nio Usa, Inc. Smart refill assistant for electric vehicles
US10248874B2 (en) 2016-11-22 2019-04-02 Ford Global Technologies, Llc Brake light detection
JP6536554B2 (ja) 2016-12-13 2019-07-03 トヨタ自動車株式会社 ウィンカ判定装置及び自動運転システム
KR102535540B1 (ko) 2017-01-12 2023-05-23 모빌아이 비젼 테크놀로지스 엘티디. 차량 움직임에 기반한 항법
JP2018135069A (ja) 2017-02-23 2018-08-30 パナソニックIpマネジメント株式会社 情報処理システム、情報処理方法及びプログラム
US10353390B2 (en) 2017-03-01 2019-07-16 Zoox, Inc. Trajectory generation and execution architecture
US10061322B1 (en) 2017-04-06 2018-08-28 GM Global Technology Operations LLC Systems and methods for determining the lighting state of a vehicle
DE102017211331A1 (de) 2017-07-04 2019-01-10 Robert Bosch Gmbh Bildauswertung mit zielgerichteter Vorverarbeitung
US10579063B2 (en) 2017-07-21 2020-03-03 Uatc, Llc Machine learning for predicting locations of objects perceived by autonomous vehicles
US10395457B2 (en) 2017-08-10 2019-08-27 GM Global Technology Operations LLC User recognition system and methods for autonomous vehicles
US20190061765A1 (en) 2017-08-23 2019-02-28 Uber Technologies, Inc. Systems and Methods for Performing Lane Changes Around Obstacles
US10163017B2 (en) 2017-09-01 2018-12-25 GM Global Technology Operations LLC Systems and methods for vehicle signal light detection
US10387736B2 (en) 2017-09-20 2019-08-20 TuSimple System and method for detecting taillight signals of a vehicle
US10691962B2 (en) 2017-09-22 2020-06-23 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for rear signal identification using machine learning
US10331135B2 (en) 2017-11-22 2019-06-25 GM Global Technology Operations LLC Systems and methods for maneuvering around obstacles in autonomous vehicles
US10688991B2 (en) 2018-01-24 2020-06-23 GM Global Technology Operations LLC Systems and methods for unprotected maneuver mitigation in autonomous vehicles
US11494582B2 (en) 2018-02-08 2022-11-08 Western Digital Technologies, Inc. Configurable neural network engine of tensor arrays and memory cells
US10955851B2 (en) 2018-02-14 2021-03-23 Zoox, Inc. Detecting blocking objects
US20180224860A1 (en) 2018-04-02 2018-08-09 GM Global Technology Operations LLC Autonomous vehicle movement around stationary vehicles
US10414395B1 (en) 2018-04-06 2019-09-17 Zoox, Inc. Feature-based prediction
US11126873B2 (en) 2018-05-17 2021-09-21 Zoox, Inc. Vehicle lighting state determination
US11001256B2 (en) 2018-09-19 2021-05-11 Zoox, Inc. Collision prediction and avoidance for vehicles
US11169531B2 (en) 2018-10-04 2021-11-09 Zoox, Inc. Trajectory prediction on top-down scenes

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008129804A (ja) 2006-11-20 2008-06-05 Toyota Motor Corp 走行制御計画生成システム及びコンピュータプログラム
WO2016062568A1 (de) 2014-10-24 2016-04-28 Robert Bosch Gmbh Verfahren und vorrichtung zum betreiben eines fahrzeugs
JP2016210255A (ja) 2015-05-01 2016-12-15 トヨタ自動車株式会社 車両走行制御装置

Also Published As

Publication number Publication date
CN110692025A (zh) 2020-01-14
JP2020509963A (ja) 2020-04-02
EP3590015A1 (en) 2020-01-08
US10133275B1 (en) 2018-11-20
EP3590015B1 (en) 2021-11-24
US10691127B2 (en) 2020-06-23
US20180251126A1 (en) 2018-09-06
WO2018160486A1 (en) 2018-09-07
US11360477B2 (en) 2022-06-14
US20190361443A1 (en) 2019-11-28
US20190101919A1 (en) 2019-04-04
US10353390B2 (en) 2019-07-16
US20200387158A1 (en) 2020-12-10

Similar Documents

Publication Publication Date Title
JP7344120B2 (ja) 軌道生成および実行アーキテクチャ
US11740626B2 (en) Redundant pose generation system
US10671076B1 (en) Trajectory prediction of third-party objects using temporal logic and tree search
US20200174493A1 (en) Shared Vehicle Obstacle Data
US11625051B2 (en) Proactive generation of tuning data for autonomous vehicle dispatch
WO2019099465A1 (en) Dynamic vehicle routing using annotated maps and profiles
KR20190115464A (ko) 자율주행 차량 운용 관리
US11519742B2 (en) Routing autonomous vehicles using temporal data
US20230020040A1 (en) Batch control for autonomous vehicles
KR20220110069A (ko) 샘플링 기반 기동 실현기
US20220348223A1 (en) Autonomous vehicle to oversight system communications
KR102639022B1 (ko) 운전 가능 영역 검출을 사용한 운행
US11767031B2 (en) Oversight system to autonomous vehicle communications
US11767032B2 (en) Direct autonomous vehicle to autonomous vehicle communications
EP4089368A1 (en) Oversight system to autonomous vehicle communications
US20240190452A1 (en) Methods and systems for handling occlusions in operation of autonomous vehicle
US20230234617A1 (en) Determining perceptual spatial relevancy of objects and road actors for automated driving
US20240204798A1 (en) System, Method, and Computer Program Product for End-To-End CRC Overhead Hiding
JP2022541343A (ja) 自律車両に遠隔操作命令を提供するためのシステム及び方法
WO2023137357A1 (en) Method for assigning a lane relationship between an autonomous vehicle and other actors near an intersection

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220502

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220705

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221004

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230214

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230512

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230808

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230901

R150 Certificate of patent or registration of utility model

Ref document number: 7344120

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150