JP6691202B2 - 六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画 - Google Patents

六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画 Download PDF

Info

Publication number
JP6691202B2
JP6691202B2 JP2018241990A JP2018241990A JP6691202B2 JP 6691202 B2 JP6691202 B2 JP 6691202B2 JP 2018241990 A JP2018241990 A JP 2018241990A JP 2018241990 A JP2018241990 A JP 2018241990A JP 6691202 B2 JP6691202 B2 JP 6691202B2
Authority
JP
Japan
Prior art keywords
objects
hexagonal grid
contexts
identified
hexagonal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018241990A
Other languages
English (en)
Other versions
JP2019169125A (ja
Inventor
ソウナク デイ
ソウナク デイ
アリジット ムクハージー
アリジット ムクハージー
アリトラ サルカー
アリトラ サルカー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tata Consultancy Services Ltd
Original Assignee
Tata Consultancy Services Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tata Consultancy Services Ltd filed Critical Tata Consultancy Services Ltd
Publication of JP2019169125A publication Critical patent/JP2019169125A/ja
Application granted granted Critical
Publication of JP6691202B2 publication Critical patent/JP6691202B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0221Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving a learning process
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • G01C21/206Instruments for performing navigational calculations specially adapted for indoor navigation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/005Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 with correlation of navigation data from several sources, e.g. map or contour matching
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3407Route searching; Route guidance specially adapted for specific applications
    • G01C21/3415Dynamic re-routing, e.g. recalculating the route when the user deviates from calculated route or after detecting real-time traffic data or accidents
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/38Electronic maps specially adapted for navigation; Updating thereof
    • G01C21/3863Structures of map data
    • G01C21/387Organisation of map data, e.g. version management or database structures
    • G01C21/3881Tile-based structures
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Game Theory and Decision Science (AREA)
  • Business, Economics & Management (AREA)
  • Image Analysis (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Navigation (AREA)

Description

関連出願および優先権の相互参照
本出願は、2018年2月23日にインドで出願された出願番号201821007023の「六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画(CONTEXT BASED PATH PLANNING FOR VECTOR NAVIGATION IN HEXAGONAL SPATIAL MAPS)」と題するインドの完全明細書に対する優先権を主張する。
技術分野
本明細書の開示は、一般に経路計画およびナビゲーション技術に関し、特に、六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画に関する。
今日のロボット(一般的な機械における)は、機械学習、深層学習などの技術を用いることによって人工知能(AI)化されている。しかし、これらのジャンルの技術の主な欠点は、第一に、システムがデータおよびそれの特徴についてのモデルを学習するために膨大な量の訓練データがシステムに供給される必要があり、それからこの訓練されたシステムが新たに入ってくる同じカテゴリーのデータについて識別または決定を行いうることである。次に、訓練データの一部の特徴が変化した場合には、システムが新たなタイプのデータを扱うために再訓練される必要がある。必要とされる訓練データの量が膨大であり、システムが毎回新たなタイプの類似のデータで再訓練される必要があるため、この種の人工知能テクノロジーは非常に複雑で時間がかかるだけでなく、多くのエネルギーも消費する。
本開示の実施形態は、従来のシステムで本発明者らにより認識された上述の技術的問題の一つ以上に対する解決策として技術的改善を提示する。例えば、一態様では、六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画のためのプロセッサ実施方法が提供される。本方法は、二次元(2D)環境を取得し六角形格子マップ(a hexagonal grid map)に表現するステップであって、六角形格子マップは複数の六角形格子セルを含む、ステップと、複数の六角形格子セルからの複数の二つ以上の隣接するセルに関連する赤緑青(RGB)値の比較に基づいて一つ以上のオブジェクトを識別するステップであって、一つ以上のオブジェクトは、複数の六角形格子セルからの一つ以上の六角形格子セルの中心からの各六角形格子セルの中心の距離と六角形の中心の数とに基づいて識別される、ステップと、識別された一つ以上のオブジェクトについて作成されたタプルに基づいて一つ以上の候補コンテキストを識別するステップと、六角形格子マップと一つ以上の予め記憶された六角形格子マップとの比較を反復的に行うステップであって、六角形格子マップは、(例えば回転技術、アフィン変形技術(affine transformation technique)、トポロジー変形技術などを使用して)一つ以上のバリエーションに変形され(transformed)、空間的類似性指数(SSQ;Spatial Similarity Quotient)(「類似性の定量的尺度」とも呼称される)を決定するためにマップデータベースから取得される一つ以上の予め記憶された六角形格子マップと反復的に比較され、空間的類似性指数は、六角形格子マップと一つ以上の予め記憶された六角形格子マップのうちの少なくとも一つとの重なりの程度を示す、ステップと、決定された空間的類似性指数に基づいて一つ以上の候補コンテキストから一つ以上のコンテキストを識別するステップと、一つ以上のオブジェクトと識別された一つ以上のコンテキストとに基づいて六角形格子マップ内のベクトルナビゲーションのための経路を動的に計画するステップとを含む。
一実施形態では、本方法は、注釈(an annotation)、境界正方形の辺(side of bounding square)、テンプレート形状、およびRGB値の分散(variance)に基づいて、一つ以上のオブジェクトのそれぞれについてオブジェクトデータベースを生成するステップと、タプル内の識別された一つ以上のオブジェクトを有する一つ以上の推定コンテキスト(probable contexts)のそれぞれについてコンテキストデータベースを生成するステップとをさらに含む。
一実施形態では、一つ以上のオブジェクトのRGB値が予め定義された閾値に等しいときには、一つ以上のオブジェクトは一つ以上の予め定義されたオブジェクトとして識別される。別の実施形態では、一つ以上のオブジェクトのRGB値が予め定義された閾値よりも大きいかまたは小さいときには、一つ以上のオブジェクトは新たなオブジェクトとして識別される。一実施形態では、一つ以上のオブジェクトのサイズおよび形状は、距離(例えば二つの六角形の中心の間のユークリッド距離)に基づいて決定される。
一実施形態では、本方法は、二つ以上のコンテキストの交差部分(intersection)を示す一つ以上の共通オブジェクトを識別するステップと、二つ以上のコンテキストの交差部分からの一つ以上の共通オブジェクトから識別された一つ以上のナビゲーション可能オブジェクトに基づいて経路を生成するステップとをさらに含む。
一実施形態では、一つ以上のコンテキストおよび一つ以上のオブジェクトは、一つ以上のセンサから取得される情報を用いて識別されうる。
一実施形態では、本方法は、後続の経路計画およびベクトルナビゲーションのために識別された一つ以上のオブジェクト、一つ以上のコンテキスト、および動的に計画された経路を用いてロボットを訓練するステップと、後続の経路計画およびベクトルナビゲーションに関する情報を含むデータベースを生成するステップとをさらに含みうる。
一実施形態では、本方法は、最大SSQを取得するために六角形格子マップと一つ以上の候補コンテキストとの比較を行うステップと、最大SSQと予め定義された閾値との比較に基づいて環境を新たな環境または予め定義された環境として識別するステップとをさらに含みうる。
別の態様では、六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画のためのシステムが提供される。このシステムは、命令を記憶するメモリと、一つ以上の通信インタフェースと、一つ以上の通信インタフェースを介してメモリに結合された一つ以上のハードウェアプロセッサとを含み、一つ以上のハードウェアプロセッサは命令により、二次元(2D)環境を取得して六角形格子マップに表現し、六角形格子マップは複数の六角形格子セルを含み、複数の六角形格子セルからの複数の二つ以上の隣接するセルに関連する赤緑青(RGB)値の比較に基づいて一つ以上のオブジェクトを識別し、一つ以上のオブジェクトは、複数の六角形格子セルからの一つ以上の六角形格子セルの中心からの各六角形格子セルの中心の距離と六角形の中心の数とに基づいて識別され、識別された一つ以上のオブジェクトについて作成されたタプルに基づいて一つ以上の候補コンテキストを識別し、六角形格子マップと一つ以上の予め記憶された六角形格子マップとの比較を反復的に行い、六角形格子マップは、(例えば回転技術、アフィン変形技術、トポロジー変形技術などを使用して)一つ以上のバリエーションに変形され、空間的類似性指数(SSQ)(「類似性の定量的尺度」とも呼称される)を決定するためにマップデータベースから取得された一つ以上の予め記憶される六角形格子マップと反復的に比較され、空間的類似性指数は、六角形格子マップと一つ以上の予め記憶された六角形格子マップのうちの少なくとも一つとの重なりの程度を示し、決定された空間的類似性指数に基づいて一つ以上の候補コンテキストから一つ以上のコンテキストを識別し、一つ以上のオブジェクトと識別された一つ以上のコンテキストとに基づいて六角形格子マップ内のベクトルナビゲーションのための経路を動的に計画するように構成される。
一実施形態では、ハードウェアプロセッサは命令により、注釈、境界正方形の辺、テンプレート形状、およびRGB値の分散に基づいて、一つ以上のオブジェクトのそれぞれについてオブジェクトデータベースを生成し、タプル内の識別された一つ以上のオブジェクトを有する一つ以上の推定コンテキストのそれぞれについてコンテキストデータベースを生成するようにさらに構成される。
一実施形態では、一つ以上のオブジェクトのRGB値が予め定義された閾値に等しいときには、一つ以上のオブジェクトは一つ以上の予め定義されたオブジェクトとして識別される。別の実施形態では、一つ以上のオブジェクトのRGB値が予め定義された閾値よりも大きいかまたは小さいときには、一つ以上のオブジェクトは新たなオブジェクトとして識別される。一実施形態では、一つ以上のオブジェクトのサイズおよび形状は、距離(例えば二つの六角形の中心の間のユークリッド距離)に基づいて決定される。
一実施形態では、ハードウェアプロセッサは命令により、二つ以上のコンテキストの交差部分を示す一つ以上の共通オブジェクトを識別し、二つ以上のコンテキストの交差部分からの一つ以上の共通オブジェクトから識別された一つ以上のナビゲーション可能オブジェクトに基づいて経路を生成するようにさらに構成される。
一実施形態では、一つ以上のコンテキストおよび一つ以上のオブジェクトは、一つ以上のセンサから取得される情報を用いて識別されうる。
一実施形態では、ハードウェアプロセッサは命令により、後続の経路計画およびベクトルナビゲーションのために識別された一つ以上のオブジェクト、一つ以上のコンテキスト、および動的に計画された経路を用いてロボットを訓練し、後続の経路計画およびベクトルナビゲーションに関する情報を含むデータベースを生成するようにさらに構成される。
一実施形態では、本方法は、最大SSQを取得するために六角形格子マップと一つ以上の候補コンテキストとの比較を行うステップと、最大SSQと予め定義された閾値との比較に基づいて環境を新たな環境または予め定義された環境として識別するステップとをさらに含みうる。
さらに別の態様では、一つ以上の命令を含む一つ以上の非一時的機械可読情報記憶媒体が提供される。一つ以上の命令は、一つ以上のハードウェアプロセッサによって実行されると、二次元(2D)環境を取得し六角形格子マップに表現するステップであって、六角形格子マップは複数の六角形格子セルを含む、ステップと、複数の六角形格子セルからの複数の二つ以上の隣接するセルに関連する赤緑青(RGB)値の比較に基づいて一つ以上のオブジェクトを識別するステップであって、一つ以上のオブジェクトは、複数の六角形格子セルからの一つ以上の六角形格子セルの中心からの各六角形格子セルの中心の距離と六角形の中心の数とに基づいて識別される、ステップと、識別された一つ以上のオブジェクトについて作成されたタプルに基づいて一つ以上の候補コンテキストを識別するステップと、六角形格子マップと一つ以上の予め記憶された六角形格子マップとの比較を反復的に行うステップであって、六角形格子マップは、(例えば回転技術、アフィン変形技術、トポロジー変形技術などを使用して)一つ以上のバリエーションに変形され、空間的類似性指数(SSQ)(「類似性の定量的尺度」とも呼称される)を決定するためにマップデータベースから取得される一つ以上の予め記憶された六角形格子マップと反復的に比較され、空間的類似性指数は、六角形格子マップと一つ以上の予め記憶された六角形格子マップのうちの少なくとも一つとの重なりの程度を示す、ステップと、決定された空間的類似性指数に基づいて一つ以上の候補コンテキストから一つ以上のコンテキストを識別するステップと、一つ以上のオブジェクトと識別された一つ以上のコンテキストとに基づいて六角形格子マップ内のベクトルナビゲーションのための経路を動的に計画するステップとを含む方法を行わせる。
一実施形態では、命令は、注釈、境界正方形の辺、テンプレート形状、およびRGB値の分散に基づいて、一つ以上のオブジェクトのそれぞれについてオブジェクトデータベースを生成するステップと、タプル内の識別された一つ以上のオブジェクトを有する一つ以上の推定コンテキストのそれぞれについてコンテキストデータベースを生成するステップとをさらに引き起こす。
一実施形態では、一つ以上のオブジェクトのRGB値が予め定義された閾値に等しいときには、一つ以上のオブジェクトは一つ以上の予め定義されたオブジェクトとして識別される。別の実施形態では、一つ以上のオブジェクトのRGB値が予め定義された閾値よりも大きいかまたは小さいときには、一つ以上のオブジェクトは新たなオブジェクトとして識別される。一実施形態では、一つ以上のオブジェクトのサイズおよび形状は、距離(例えば二つの六角形の中心の間のユークリッド距離)に基づいて決定される。
一実施形態では、命令は、二つ以上のコンテキストの交差部分を示す一つ以上の共通オブジェクトを識別するステップと、二つ以上のコンテキストの交差部分からの一つ以上の共通オブジェクトから識別された一つ以上のナビゲーション可能オブジェクトに基づいて経路を生成するステップとをさらに引き起こす。
一実施形態では、一つ以上のコンテキストおよび一つ以上のオブジェクトは、一つ以上のセンサから取得される情報を用いて識別されうる。
一実施形態では、命令は、後続の経路計画およびベクトルナビゲーションのために識別された一つ以上のオブジェクト、一つ以上のコンテキスト、および動的に計画された経路を用いてロボットを訓練するステップと、後続の経路計画およびベクトルナビゲーションに関する情報を含むデータベースを生成するステップとをさらに引き起こす。
一実施形態では、命令は、最大SSQを取得するために六角形格子マップと一つ以上の候補コンテキストとの比較を行うステップと、最大SSQと予め定義された閾値との比較に基づいて環境を新たな環境または予め定義された環境として識別するステップとをさらに引き起こす。
前述の一般的な説明および以下の詳細な説明はいずれも例示的および説明的なものにすぎず、特許請求の範囲に記載される本発明を限定するものではないことを理解されたい。
本開示に組み込まれてその一部を構成する添付の図面は、例示的な実施形態を示し、説明とともに開示された原理を説明するのに役立つ。
本開示の一実施形態による六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画のためのシステムの例示的なブロック図である。 本発明の一実施形態による図1のシステムを用いた六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画のための例示的な方法である。 本開示の例示的実施形態による脳内のマップの六角形表現の例示的な図である。 本開示の例示的実施形態による環境の六角形のテッセレーション(tessellation)を作成するための基本ビルディングブロックとして使用される二重の隣接する六角形の中心の作成を示す図である。 本開示の一実施形態による2D環境を示す図である。 本開示の例示的実施形態による六角形格子セル間の異なる中心間距離に基づく一つ以上のズームレベルでの2D環境の六角形格子マップへの表現を示す図である。 本開示の例示的実施形態による六角形格子セル間の異なる中心間距離に基づく一つ以上のズームレベルでの2D環境の六角形格子マップへの表現を示す図である。 本開示の例示的実施形態による六角形格子セル間の異なる中心間距離に基づく一つ以上のズームレベルでの2D環境の六角形格子マップへの表現を示す図である。 本開示の例示的実施形態による空間的類似性指数(SSQ)を決定するための一つ以上の予め記憶された六角形格子マップとの比較のために一つ以上のバリエーションに変形された六角形格子マップの表現を示す図である。 本開示の例示的実施形態による、六角形格子マップの元のバージョンと回転されたバージョンとの間の比較および200度で見出された最大類似性を示すグラフ表現を示す図である。 本開示の例示的実施形態による六角形格子マップ内の転換された経路(a translated path)を示す図である。 本開示の例示的実施形態による図1のシステムの実施態様を示す例示的なブロック図である。
例示的な実施形態が、添付の図面を参照して説明される。図面において、参照番号の左端の数字は、その参照番号が最初に登場する図面を特定する。都合のよいときにはいつでも、同一または類似の部分を指すために図面全体を通して同じ参照番号が使用される。開示された原理の例および特徴が本明細書に記載されるが、開示された実施形態の本旨および範囲から逸脱することなく修正、適合、および他の実施態様が可能である。以下の詳細な説明は例示としてのみ考えられ、真の範囲および本旨は後続の特許請求の範囲によって示されることが意図される。
上述のように、ロボットは、データおよびそれの特徴を学習および採用できるようにするために膨大な量の訓練データを必要とするナビゲーションアプリケーションのために、例えば機械学習、深層学習などの技術を用いることによって人工知能化されている。しかし、これらのタイプの技術は、必要な訓練データの量、および複雑性、時間およびエネルギーの消費ならびにより多くの計算パワーにつながる任意の新たなデータタイプを扱うために再訓練を受ける必要があるシステムに関していくつかの課題を有する。
他方で、これは哺乳動物の脳には当てはまらない。哺乳動物の脳、例えばヒトの脳は、ごくわずかなデータセットで訓練されることができ、同様にごくわずかなデータセットで自らを再訓練することができる。これらにより、哺乳動物の脳は同じデータの様々なコンテキストおよびセマンティクスを識別し取り扱うことができる。そしてこれらは全て非常に迅速に、従来のAIシステムよりもはるかに少ないエネルギーを消費して行われる。
したがって、機械を訓練するためにヒトの脳が用いる技術を実装することが、現在、本開示の焦点である。脳は空間的および時間的情報を異なって記憶するが、コンテキストを迅速に切り替えることによってこれらをシームレスに取り扱う。本開示においては、それの実施形態は、脳のような空間的情報表現に焦点を合わせ、それがロボットのナビゲーションのためのインテリジェントな経路計画にいかに効率的に使用されうるかを示している。以下が主な課題領域である。
ロボットは、容易なナビゲーションのために多くのリアルタイムの経路計画を行う必要がある。これはロボットにとって非常に時間がかかり複雑な作業である。動的環境の場合には、これはさらに複雑になる。さらに、全ての経路計画アルゴリズムが、正方形格子を使用して環境を表現し、それに応じて経路を計画する。他方で、脳は複数の六角形格子のテッセレーションの重ね合わせによって環境を表現する。
同時に、ロボットの経路計画のために二つの環境の間の空間的類似性を識別することに関する努力は存在するが、これらは脳のようにはあまり効率的ではなく、六角形格子システムでは働かない。したがって、二つの環境の間の空間的類似性を識別することにより、ロボットに、第二の環境において経路計画の計算労力をいかに節約するかの情報が与えられうる。
本開示の実施形態は、様々な環境におけるロボットの経路計画のために環境の空間的コンテキストを作成および使用するためのシステムおよび方法を提供する。脳はこれを経路計画のために非常に効率的に行う。空間的情報を繰り返すことにより、または(閾値限界内の)空間的類似性を見つけることにより、空間的コンテキストを作成することができ、これが異なるコンテキストを有する空間的環境の間の容易なナビゲーションのために再び使用されうる。
本開示において、実施形態は、環境のマップを表現し、そのマップにおけるロボットのナビゲーションの経路を計画するための脳の技術の利用を実装する。これを達成するために、環境が六角形格子マップの形に変換(convert)または表現される。本開示の実施形態は、ロボットのためのオブジェクトデータベースおよびコンテキストデータベースを作成するためのシステムおよび方法を提供する。本開示の実施形態は、二つ(またはそれ以上)のそのようなマップの間の空間的類似性を識別することをさらに可能にし、その空間的類似性についての定量的尺度、すなわち空間的類似性指数(SSQ)を導入する。より多くの空間的情報を繰り返すことによって、本開示は、その情報からコンテキストを作成し、それらのコンテキストをコンテキスト的に異なる環境におけるシームレスなナビゲーションのために使用することを提案する。
さらに、マップは通常、正方形格子または占有格子(occupancy grids)に関して表現されるが、この点では脳のようではない。したがって、本開示は、脳と一致するように六角形格子構造マップに焦点を合わせる。経路計画アルゴリズムは通常、六角形格子では機能しない。本開示は、六角形格子で機能するために既存のアルゴリズムにも適応する。現在、従来の経路計画およびナビゲーションシステムは、環境の空間的類似性に焦点を合わせていない。これに対して、本開示は、二つの環境の間の空間的類似性を測定するために環境の空間的類似性を利用する経路計画およびナビゲーションシステムに焦点を合わせる。この類似性に基づいて、システムが各環境の動的オブジェクトの推定空間分布(probable spatial distribution)を計算する。さらに、本開示は、より長いコンテキスト間経路計画のためにセマンティックコンテキストステッチング(semantic context stitching)も実装した。
ここで図面、特に、類似の参照文字が図面全体を通して一貫して対応する特徴を表す図1〜9を参照すると、好ましい実施形態が示されており、これらの実施形態が以下の例示的なシステムおよび/または方法の文脈で説明される。
図1は、本開示の一実施形態による六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画のためのシステム100の例示的なブロック図を示す。一実施形態では、システム100は、一つ以上のプロセッサ104と、通信インタフェースデバイス(単数または複数)または入力/出力(I/O)インタフェース(単数または複数)106と、一つ以上のプロセッサ104に動作可能に結合された一つ以上のデータ記憶デバイスまたはメモリ102とを含む。一つ以上のプロセッサ104は、一つ以上のソフトウェア処理モジュールおよび/またはハードウェアプロセッサでありうる。
一実施形態では、ハードウェアプロセッサは、一つ以上のマイクロプロセッサ、マイクロコンピュータ、マイクロコントローラ、デジタル信号プロセッサ、中央処理ユニット、状態機械、論理回路、および/または動作命令に基づいて信号を操作する任意のデバイスとして実装されうる。数ある能力の中で、プロセッサ(単数または複数)は、メモリに記憶されたコンピュータ可読命令をフェッチおよび実行するように構成される。一実施形態では、デバイス100は、ラップトップコンピュータ、ノートブック、ハンドヘルドデバイス、ワークステーション、メインフレームコンピュータ、サーバ、ネットワーククラウドなどの様々なコンピューティングシステムにおいて実装されうる。
I/Oインタフェースデバイス(単数または複数)106は、様々なソフトウェアおよびハードウェアインタフェース、例えばウェブインタフェース、グラフィカルユーザインタフェースなどを含むことができ、例えばLAN、ケーブルなどの有線ネットワーク、およびWLAN、セルラ、または衛星などの無線ネットワークを含む多様なネットワークN/Wおよびプロトコルタイプ内での複数の通信を促進することができる。一実施形態では、I/Oインタフェースデバイス(単数または複数)は、いくつかのデバイスを互いにまたは別のサーバに接続するための一つ以上のポートを含みうる。
メモリ102は、例えばスタティックランダムアクセスメモリ(SRAM;static random access memory)およびダイナミックランダムアクセスメモリ(DRAM;dynamic random access memory)などの揮発性メモリ、および/または読み取り専用メモリ(ROM;read only memory)、消去可能プログラム可能ROM、フラッシュメモリ、ハードディスク、光ディスク、および磁気テープなどの不揮発性メモリを含む、当技術分野で知られる任意のコンピュータ可読媒体を含みうる。一実施形態では、一つ以上のデータベース(単数または複数)108A〜N(例えばオブジェクトデータベース、コンテキストデータベース、マップデータベース)がメモリ102に記憶されることができ、データベース(単数または複数)108A〜Nは、一つ以上のオブジェクト、一つ以上のコンテキスト、一つ以上の予め定義された閾値、一つ以上の予め定義された六角形空間マップ、訓練データなどに関する情報を含みうるがこれらに限定されない。一実施形態では、メモリ102は、本明細書に記載された方法論を行うためにデータパターンの学習を可能にし、学習パターンを評価し、訓練データを使用してシステム100を訓練するために一つ以上のハードウェアプロセッサ104によって(またはシステム100によって)利用される、システム100によって学習される訓練データを記憶しうる。
図2は、図1を参照して、本発明の一実施形態による図1のシステム100を用いた六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画のための例示的な方法を示す。一実施形態では、システム(単数または複数)100は、一つ以上のハードウェアプロセッサ104に動作可能に結合され、一つ以上のプロセッサ104による方法のステップの実行のための命令を記憶するように構成された、一つ以上のデータ記憶デバイスまたはメモリ102を含む。ここで本開示の方法のステップを、図1に示されるシステム100の構成要素および図2のフローダイヤグラムを参照して説明する。
図3Aは、図1〜2を参照して、G.BuzsakiおよびE.I.Moserにより表題「海馬‐内嗅系における記憶、ナビゲーションおよびシータリズム(Memory,navigation and theta rhythm in the hippocampal‐entorhinal system)」、Nature neuroscience,vol.16,no.2,pp.130‐138,2013の文献に著されたような例示的な実施形態による脳内のマップの六角形表現の例示的な図を表す。ロボットの経路計画は計算集約的な作業である。動的環境では、これは障害物の配置および向きが頻繁に変化する場合により厄介である。しかし、前述のように、哺乳動物の脳(特にヒトの脳)は同じ作業を非常に迅速かつ効率的に行う。哺乳動物の脳は、新たな環境に直面するたびに盲目的に再計画することはない。代わりに、哺乳動物の脳は、環境間の空間的類似性を見つけようとし、コンテキストの類似性を理解することを試み、以前に計画された経路の影響を受けた部分についてインテリジェントに再計画するか、またはいくつかの変形幾何学操作(transformational geometric operations)を行うことによって以前に計画された経路をそのまま使用しようとする。
最初のハードルとして、脳はロボットのようには環境を表現しない。ロボットは通常、正方形占有格子バージョンのマップにおいてロボットの経路を計画するのに対して、脳はそれを複数の六角形格子のテッセレーションの重ね合わせによって表現する。これらは、GRIDセルと呼ばれる海馬ニューロンの発火によって行われる。同時に、ヒトが興味のあるオブジェクトを見るといくつかのPLACEセルニューロンが発火する。ヒトのナビゲーションでは、これら二つのタイプの発火セルの複雑な表現が、図1に示されるような脳内のマップの六角形表現にほぼ見えるマップにおいて使用される。ロボットの経路計画をより効率的にするために、本開示は、そのような脳の機能性が計画された経路のためのベクトルナビゲーションのために実装されることを試みている。図2に戻って参照すると、ステップ202で、本開示の一実施形態では、一つ以上のハードウェアプロセッサ104が、二次元(2D)環境を取得し、この二次元(2D)環境を六角形格子マップに表現し、六角形格子マップは、複数の六角形格子セルを含む。
三角形および正方形とともに、六角形は2次元空間をテッセレートできる唯一の正多角形である。三角形や正方形とは異なり、六角形はわずかな利点を有する、例えば六角形は移動の自由度をもう二つ有し、六角形は同面積の他の二つの多角形(例えば三角形および正方形)よりも効率よく空間を占有する。同時に、2次元空間のニューラルマップは、脳において正六角形のテッセレーションによって表現される。ロボットでヒトのナビゲーションおよび経路計画を模倣するためには、最初のハードルは、六角形の効率的な表現を作成することである。2D空間を表現するためには最低二つのパラメータ、例えばデカルト座標系におけるX‐Y座標または極座標系における半径‐角度(Rad−Ang)が必要である。デカルト座標は、正規直交基底ベクトル(orthonormal basis vectors)に基づくため効率的である。しかし、デカルト格子セルの上に六角形格子を重ねることによりエイリアシング(aliasing)の問題が生じる。さらに、(行および列画素を有する)画素化ディスプレイ上での六角形格子の視覚表現のためには、六角形座標を表示段階でX‐Y値に転換する(translate)ことが必要である。したがって、データ構造は、表示の前に六角形格子への転換を必要とするアレイベース(array based)でありうるか、または、スクリーン上へのレンダリングの前に基本正規直交(fundamental orthonormal)X‐Y座標に転換される、全ての計算が基本Y軸(またはX軸)から60度回転された基底ベクトルで行われる六角形格子の中心のリストでありうる。後者の場合は、六角形セルの中心の位置を実際に記憶し、後に空間的類似性を見つけるために取り扱い易いために好ましい(図3B参照)。より具体的には、図3Bは、図1〜3Aを参照して、本開示の例示的実施形態による環境の六角形のテッセレーションを作成するための基本ビルディングブロックとして使用される二重の隣接する六角形の中心の作成を示す。六角形セルは、デカルトX軸に対してA軸が0度、B軸が60度の60度角の(60-deg angled)座標系にスナップされる(慣例:正の角度=反時計回り)。正六角形格子セルは直径(dで表される)を有し、これがマップの倍率または解像度(頂点から頂点の画素の距離)である。この新たなA‐B座標系における六角形格子セル(a,b)は、{x=(a+0.5b)d}および{y=(sqrt(3)b/2)d}の変形を用いて表示のためにX‐Y画素座標に容易に転換されうる。(a,b)の6つのムーア/フォンノイマン(Moore/von-Neumann)[参照]近傍セルは、{(a+1,b)、(a,b+1)、(a−1,b+1)、(a−1,b)、(a,b−1)、(a+1,b−1)}である。ムーア/フォンノイマン近傍セル技術は、J.Schiffにより著された文献、表題「セルオートマトン入門(Introduction to cellular automata)」、2005より参照される。以下は、ムーア近傍およびフォンノイマン近傍の説明である。
ムーア近傍(Moore neighbours):正方形格子における任意の所与のセルに対し八つの周囲セルがあり、そのうち四つは現在のセルと少なくとも一つの辺および頂点を共有し、残りの四つは少なくとも一つの頂点を共有する(が辺は共有しない)。正方形格子において、頂点を共有する角セル(vertex-sharing corner cells)は、辺を共有するセルに対して√2:1の距離比を有する。
フォンノイマン近傍(Von-Neumann neighbours):正方形格子で、四つの辺を共有するセル(side-sharing cells)のみが所与のセルのフォンノイマン近傍と考えられる。これらのセルの中心は全て、現在のセルの中心から等しい距離にある。
図4は、図1〜3を参照して、本開示の一実施形態による2D環境を示す。図5A〜5Cは、図1〜4を参照して、本開示の例示的実施形態による六角形格子セル間の異なる中心間距離に基づく一つ以上のズームレベルでの2D環境の六角形格子マップへの表現を示す。本開示の一実施形態では、ステップ204で、一つ以上のハードウェアプロセッサ104が、複数の六角形格子セルからの複数の二つ以上の隣接するセルに関連する赤緑青(RGB)値の比較に基づいて一つ以上のオブジェクトを識別する。一実施形態では、一つ以上のオブジェクトは、一つ以上の六角形の中心からの各六角形の中心の距離と六角形の中心の数とに基づいて識別される。一実施形態では、一つ以上のオブジェクトのサイズおよび形状は、距離に基づいて決定される。例示的実施形態では、本明細書における距離は、二つの六角形の中心の間のユークリッド距離またはマンハッタン距離のうちの少なくとも一つを指す。一実施形態では、各六角形格子セルの平均RGB値が、a‐b座標の六角形の中心とともに記憶される。したがって、各六角形の中心が平均RGB値と関連しうる。類似のRGB値を有する隣接する六角形セルは、当該オブジェクトの色および形状がそれほど変化し得ないと想定されるため一つのオブジェクトを表現しうる。
システム100は、初学者のように、環境(単数または複数)の画像(単数または複数)を受け取り、次に(上記のRGBスキームにより)そのマップ内で何が異なるオブジェクトであるかを見つけ出し、それらに列挙型で注釈を付ける。画像は、六角形の中心の累積距離に関しておよび六角形の中心の数に関して、六角形ドメインにおけるオブジェクトのサイズ、形状についてのアイデア(idea)も提供する。それ故、タプル(例えば9組タプル)が以下に例として示すように作成されうる。
<注釈、境界正方形の辺、テンプレート形状、色(r、g、b、rの分散、gの分散、bの分散)>
注釈の場合、形状は、環境の範囲に応じて定義済み列挙型(predefined enumerations)とすることができる。9組タプル(9 tuple)の最後の項目は、画像/環境内のオブジェクトのRGB値を含む色である。ますます多くの画像がシステム100に供給されるほど、色経験が変化し得、対応するr、gおよびb値の分散が更新され、記憶されうる。しかし、r、g、bの値が閾値を超えると、それは新たな色または新たなオブジェクトと解釈されうる。言い換えれば、一実施形態では、一つ以上のオブジェクトのRGB値が予め定義された閾値に等しいときには、一つ以上のオブジェクトは一つ以上の予め定義されたオブジェクトとして識別される。別の実施形態では、一つ以上のオブジェクトのRGB値が予め定義された閾値よりも大きいかまたは小さいときには、一つ以上のオブジェクトは新たなオブジェクトとして識別される。
実例を挙げると、一つのそのような9組タプルは、
<Obj_type_1,20pi X 35pi,Round,Grey(127,127,127,10,14,18)>
でありうる。
そのようなタプル(例えば9組タプル)はデータベース(例えばオブジェクトデータベース)に記憶される。
本開示の一実施形態では、ここでの分散値の所定の閾値は20とされ、それが全ての分散値がその許容限界内である理由です。
経験により、すなわちますます多くの画像により、システム100は、豊かなオブジェクト(単数または複数)/オブジェクトデータベースを作成し続ける。
一つ以上のオブジェクトを識別すると、ステップ206で、一つ以上のハードウェアプロセッサ104は、識別された一つ以上のオブジェクトについて作成されたタプル(例えば9組タプル)に基づいて一つ以上の候補コンテキストを識別する。本開示の一実施形態では、ステップ208で、一つ以上のハードウェアプロセッサ104は、六角形格子マップと一つ以上の予め記憶された六角形格子マップとの比較を反復的に行う。一実施形態では、より具体的には、空間的類似性指数(SSQ)を決定するために、表現された六角形格子マップが一つ以上のバリエーションに変形され(例えば一つ以上の角度で回転され)、(マップデータベースから取得される)一つ以上の予め記憶された六角形格子マップと反復的に比較される。図6は、図1〜5Cを参照して、本開示の例示的実施形態による空間的類似性指数(SSQ)を決定するために(コンテキストとしても知られる)一つ以上の予め記憶された六角形格子マップとの比較のための一つ以上のバリエーションに変形された六角形格子マップの表現を示す。本開示の一実施形態では、六角形格子マップは、回転技術、アフィン変形技術、トポロジー変形技術などのうちの少なくとも一つを用いて一つ以上のバリエーションに変形される。より具体的には、一例示的実施形態では、図6に示すように、六角形格子マップが、一つ以上の予め記憶された六角形格子マップとの比較のために一つ以上の角度で回転される。言い換えれば、SSQの決定または計算のために、六角形格子マップの一つ以上の変形されたバリエーションが、一つ以上の予め記憶された六角形格子マップと比較される。一実施形態では、SSQは「類似性の定量的尺度」とも呼ばれ、空間的類似性指数は、六角形格子マップと少なくとも一つの予め記憶された六角形格子マップのうちの少なくとも一つとの重なりの程度を示す。図7は、図1〜6を参照して、本開示の例示的実施形態による、六角形格子マップの元のバージョンと回転されたバージョンとの間の比較および200度で見出された最大類似性のグラフ表現を示す。より具体的には、200度の回転で、六角形格子マップと一つ以上の予め記憶された六角形格子マップのうちの少なくとも一つとのかなりの(または最大)程度の重なりを決定する最大類似性が得られる。より具体的には、図7は、本開示の例示的実施形態による図5Bおよび6の六角形格子マップの間の空間的類似性指数(SSQ)の比較のグラフ表現を示す。
図2に戻って参照すると、本開示の一実施形態では、ステップ210で、一つ以上のハードウェアプロセッサ104が、決定された空間的類似性指数に基づいて一つ以上の候補コンテキストから一つ以上のコンテキストを識別する。
システム100が入力としてますます多くの環境(単数または複数)を供給されるかまたは経験するにしたがい、システム100は「オブジェクトデータベース」すなわちタイプOデータベース内のオブジェクトのいずれがその環境に存在するのか、またいかなる確率で存在するのかを識別する。これは、タイプOデータベースにn個のオブジェクトがある場合には、各環境またはコンテキストCはn組タプルで表現され、タプル内の各要素は、オブジェクトnがそのコンテキスト内にある確率値であることを意味する。したがって、一コンテキストCは集合{P}となり、iは1〜nにわたり、Pはi番目のオブジェクトがそのコンテキストCで存在する確率を表す。一実施形態では、一環境内に全てのオブジェクトが存在するわけではないため、いくつかの確率がゼロではなく、残りの確率がゼロであることもある。例えば、あるコンテキスト(別名(aka)環境)は、BedRoom(例えばC)と呼ばれ、Bed、Bedlamp、AC(例えばO2、O8、O10)などと注釈を付けられたいくつかのタイプOオブジェクトを含む。別のコンテキストはDrawingRoom(例えばC)であり得、例えばChair、Table、TV(例えばO5、O9、O7)などのいくつかのタイプOオブジェクトが存在する。
したがって、これらの場合のコンテキストの表現は次のようになりうる。
={0,0.4,0,0,0,0,0,0.9,0,0.5,0,.....mまで}→BedRoom
Cj={0,0,0,0,0.5,0,0.9,0,0.2,0,0,.....mまで}→DrawingRoom
システム100がこの種の環境の経験をより多く集めるほど、システム100は、異なるコンテキストごとのタイプOオブジェクトの正確な集合をより信頼性をもって識別しうる。コンテキストの集合は、「タイプCデータベース」と呼称されうる。
したがって、タイプCデータベースの各エントリはコンテキストである。マッピングデータベースは、実際には、オブジェクトが異なるコンテキストに存在する確率を含む行列である、すなわち列はタイプBデータベースからのオブジェクトであり、行は環境またはコンテキスト、すなわちタイプCデータベースからのエントリである。コンテキストデータベースのサンプル行列が、以下に例として表現されうる。
本開示の一実施形態では、各セル内の確率の値は、システム100の存続期間が長くなるにしたがって変化し続けうる、すなわち、ますます多くの環境/オブジェクトおよび環境/オブジェクトの繰り返しがシステム100によって処理されるにしたがって値が変化する。
図2に戻って参照すると、一実施形態では、ステップ212で、一つ以上のハードウェアプロセッサ104は、一つ以上のオブジェクトと識別された一つ以上のコンテキストとに基づいて六角形格子マップ内のベクトルナビゲーションのための経路(例えば開始地点および終了地点)を動的に計画する。
タイプOおよびタイプCデータベースが生成されると、システム100が新たな環境を受け取ったときに、システム100は、(タイプOの)オブジェクトのいずれかがそのシーンに存在するか否かを判断する。タイプOオブジェクトのある集合が見つかった場合、タイプCからのコンテキストが検索される。しかし、タイプOの集合は、タイプCからのコンテキストと一対多数の関係を有しうる。したがって、所与のシーンについてタイプCからの複数のマッチ(matches)が検索されうる。例えば、タイプOからのボールおよび人(ball and man)が、タイプCからの「room」および「playground」の環境に一緒に存在しうる。
推定タイプCコンテキストの集合が識別されると、システム100は、これらの推定コンテキストと新たに到着したコンテキストとの間の意味的類似性を比較する。現在のマップおよび推定タイプCコンテキストによる最大空間的類似性指数(SSQ)を識別するために、幾何学的変形、六角形回転、拡大縮小技術などが、マップの全体または一部に適用されうる。本開示の一実施形態では、(ユースケースまたはエンドアプリケーションの精度要求にしたがって)SSQのある閾値が定義され、推定コンテキスト(または候補コンテキスト)と検討下の六角形格子マップとの間で比較が行われる。言い換えれば、一つ以上のハードウェアプロセッサ104は、最大SSQを取得するために六角形格子マップと一つ以上の候補コンテキストとの比較を行い、最大SSQと予め定義された閾値との比較に基づいて環境を新たな環境または予め定義された環境として識別する。最大SSQが予め定義された閾値を下回るときには、システム100は、対応するタイプOオブジェクトの部分集合を有する現在の六角形格子マップを新たな環境として識別する、すなわちタイプCコアデータベースのメンバーが一つ増加する。言い換えれば、最大SSQが閾値よりも大きい場合には、それは予め定義された環境であり、そうではなく最大SSQが閾値以下であるときには、それは新たな環境である。
以下は、SSQを計算するために実装される例示的式である。
所与のマップの一つの六角形の中心は座標(a,b)を有すると仮定される。マップ全体はそのような六角形の集合、例えばNであり、マップは{(a,b)}∀∈Nとして表現されうる。同時に、システム100がSSQを見つけたいマップは、例えば、以下のような類似の座標集合を有する。
これらの二つのマップがどの角度で最もマッチするかがさらに決定される。その目的のために、システム100は最初のマップをある角度ステップ、例えばr°で回転させる。このように、システムは各角度θ∈{r°,2r°,3r°,...,360°}についてSSQを見つけようとする。回転のため、各六角形の中心の座標ベクトル[a]が回転行列Rで乗算されて、新たな回転座標ベクトル
が生じ、ここでRは、例として以下の式で表される。
SSQは、そのような回転角度θごとに以下の例示的式によって計算される。
異なる試行ステップのうち、SSQθの最小値が得られるθが、二つのマップ間に最大類似性が存在する回転角度を表すと考えられる。ターゲット経路はマップのうちの一方について既知であり、経路計画アルゴリズムを実行することなく他方のマップでの経路の直接転換を見つけることが意図される。図7に示されるSSQθ対θのプロットは、これらの二つのマップが、SSQθが最小である200°の角度で空間的に類似することを示す。転換された経路が図8に点線表示で示される。
しかし、SSQが予め定義された閾値より高く、したがってコンテキスト、例えばコンテキストC1との意味的マッチを伝達する場合には、そのコンテキストの対応する詳細がこの新たなエントリからの読み取りで更新される、すなわちコンテキストC1が確信値(belief value)/確率および読み取りの数で更新される。同様に、(コンテキストC1に存在する)タイプOオブジェクトの対応するエントリも更新される、すなわち各オブジェクトの分散が更新される。
各コンテキストは、以下に例として提供される3組タプルからなるタイプSデータベースによって表現され:
<a,b,ObjectProbability>、ここでaおよびbは上記に定義された(a,b)座標系における六角形の中心の座標であり、ObjectProbabilityは、タイプOデータベースに定義されたものの中から任意のオブジェクトを見つける結合確率(combined probability)である。タイプSデータベースは、これら3組タプルにそれぞれ対応する複数のエントリを有する。
あるいは、(1−ObjectProbability)が、六角形格子セルがロボットの運動のためにフリーである確率として考えられることができる。これは、(1−ObjectProbability)がゼロの場合には、六角形格子セルはナビゲーションのために完全にフリーであり、六角形格子マップにおいてそのセルに障害物が存在しないことを意味する。
このコンテキストの表現は、以下の例によって提供されるより豊かな様式で考えられることができる。
<a,b,ObjectAnnotation,ObjectProbability,noOfObservation>
ここでa、b、ObjectProbabilityは同じ意味を持ち、ObjectAnnotationはタイプOデータベースからのオブジェクトの名前であり、noOfObservationは、システムがこの特定のオブジェクトがその環境においてこの特定の(a,b)座標を占有することを知ったこの環境を経験した回数を表す。最後のパラメータを含めることにより、この特定のオブジェクトがこの特定の場所を占有するというシステム100の確信の重みが提供される。これは次に、環境の時間発展をモデル化するために使用されうる。
実例を挙げると、コンテキストCにおける一つのそのようなタプルは以下のように表現されることができ、
<10,12,Chair,0.6,30>、これは、(10,12)の座標に0.6の確率で椅子が存在するとシステムが確信しており、それが過去30回の観察に基づいて計算されているかまたは真実であると確信されることを意味する。
ここで確率の値は観察回数の増加と共に変化し、例えば80回の観察後には、タプルは以下のように表現されうる。
<10,12,Chair,0.4,50>
そして、その座標に関して2つの新たなタプルが追加されて以下のように表現されうる。
<10,12,Table,0.4,20>
<10,12,none、0.2,10>
これは、(10,12)に常にChairがあるわけではないことを意味する。Chairは最初の50回の反復ではそこにあったが、次の20回の反復ではTableと呼ばれる新たなオブジェクトが存在し、そのため最初のタプルのChairの確率が低下し、Tableについての新たなタプルが作成される。これとともに、最後の10回の観察によればその特定の座標には何も置かれておらず、これはその特定の座標に障害物がないことを意味する。
このタプルの記録、反復または観察回数を経てそれらがどのように変化するかについての記録をシステムが記憶すれば、システムはそれらの記録から、オブジェクト(単数または複数)の配置の性質が時間または観察回数を経てどのように時間とともに変化するか、およびマップ全体が時間を経てどのように変化するかを自動的に推論することができる。この時間発展が通常の特徴であると分かった場合には、この時間発展がその環境についての安定した時間モデルを作成するために用いられうる。この時間発展の特徴を組み込むために、本開示はタプル内にタイムスタンプを組み込み、これらは以下のように表現されうる。
<10,12,Chair,Time1>,<10,12,Chair,Time2>....<10,12,Chair,Time50>
<10,12,Table,Time51>....<10,12,Table,Time71>
<10,12,none,Time72>....<10,12,none,Time82>
言うまでもなく、これらのタプルは、システム100がその存続期間または訓練において経験する複数の状況(ここでは観察)に基づいて作成される。訓練/経験が多くなるほど、注釈に対するこれらのタプルの確率値がより精緻化され、確信できるものとなる。
ロボット(または機械)のためにコンテキストが言及されると、そのロボット(または機械)は、Room内のどこにTVを探すべきか(TVの最も推定される場所は壁である)について公正なアイデアを持つことができ、またはRoom内でTable Lampを探すのに最も推定される場所は隅であることを事前に知っているであろう。オブジェクトの位置が何らかの既知のレベルの信頼度でよく知られているため、この情報は所与のコンテキストにおける経路計画に有用である。
本開示は、各六角形格子マップのコンテキストベースのベクトルナビゲーションを提供し、上述のように既知の環境を用いてSSQが識別される。次に、ユーザから現在のマップ上にスタート位置およびゴール位置が受け入れられる。この入力は、特定の六角形格子セル、またはマップ上の2つの識別可能なオブジェクト(例えばボックスおよびラック)としてのいずれかであってもよい。次に、システム100は、(既知の空間にはDLiteを、未知の空間にはQ学習技術を用いて)経路を動的に計画し、各ステップで、存在する実際の動的オブジェクトの(ロボットセンサをエミュレートする)ユーザからの入力を取り込む。経路は、選ばれたナビゲーションアルゴリズムに基づいてさらに調節されうる。
あるいは、システム100は、選択された環境の特徴(固定オブジェクトおよび動的オブジェクトの確率の両方)をロードすることを可能にする。システム100は、現在のマップとロードされた環境とを考慮に入れて、DLiteまたはQ学習アルゴリズムを用いて経路を計画する。選ばれた環境、別名タイプAのコンテキストは、訓練セットからの確率論的モデルであり、現在の入来マップは、見落とされるオブジェクトがないように賢明に重ね合わせされる必要があるグラウンドトゥルース(ground truth)を有するマップである。したがって、システム100は、選ばれた環境と所与のマップとの重み付けされた重ね合わせによって推定環境マップを作成する。そして、推定環境マップ内のオブジェクトに基づいて経路が計画される。
例えば、所与のタイプSマップにおいて、システムが開始地点からゴール地点までの経路を計算する。タイプSマップは、(データベース108A〜N(オブジェクトデータベース、コンテキストデータベース、マップデータベース)の後続の更新のためにメモリに記憶された履歴データを使用して)対応する環境におけるオブジェクトの配置および自由経路についての過去の経験を実際に提供するので、その後、許容可能オブジェクトの閾値(例えば40%)に基づいて、システムはオブジェクト(単数または複数)の確率がそれぞれ10%、20%および30%の三つの経路オプションを提供する。ここで同じ環境の現在のスナップショットについては何もアイデアが与えられなければ、システムは障害物の確率が10%の最初の経路を選びうる。この経路は最短経路でもあると想定される。しかし、システム100が当該環境の現在のスナップショットを入手し、この10%経路内にオブジェクトが存在することが分かった場合には、システム100はその経路を却下し、最小の移動コストおよび障害物の確率に基づいて残りの二つの経路のうちの一つを最適に選択する。これにより、システム100は、後続の経路計画およびベクトルナビゲーションのために識別された一つ以上のオブジェクト、一つ以上のコンテキスト、および動的に計画された経路を用いてロボットをさらに訓練し、将来のナビゲーションの効率上昇と容易さのために後続の経路計画およびベクトルナビゲーションに関する情報を含むデータベースをさらに生成することができる。
以下は、様々なデータベース(例えばオブジェクトデータベース、コンテキストデータベース、マップデータベースなど)の間の相関関係または関連性の実例のための例示的な説明である。
システム100は、タイプOおよびタイプCデータベースを使用して、所与のコンテキスト内のオブジェクトの間の相関関係または関連性を最終的に識別する。例えば、ソファは通常、コンテキスト内のテーブルに関連し、または鏡は通常、別のコンテキスト内の壁に関連するのがいくつかの例示的な関連性であり、これらの情報がシステム100による経験により理解されれば、これらの情報が経路計画の間に効率的に使用されうる。例えば、あるコンテキスト内に椅子が見つかれば、テーブルがどこか近く/付近にある可能性が高く、この情報が、Tableと名付けられた障害物を実際に識別するかわりにテーブルの推定配置を越える経路を探すためにロボットによって使用されうる。訓練/経験が多くなるほど、これらのオブジェクトの間の相関関係/関連性がより精緻化され、強力で、確信できるものとなる。
同様に、上述の構想はコンテキストに拡張されうる。別のコンテキストの後に現れる一つのコンテキストは、連続するコンテキストを繰り返し強化する。データベースから、順次的関連性だけでなく、並列的関連性または関連性が全くないことも見つけられうる。一例は、応接室が常にベッドルームの後にくること(順次的)、または応接室が複数の部屋に接続されていること(並列的)でありうる。この関連性/相関関係の確信は、以下に記載されるようなコンテキスト間経路計画に使用されうる。
コンテキスト間経路計画:
システム100は、現在または従来のロボットの経路計画システムでは不可能である、複数のコンテキストまたは環境にわたる経路を計画するために使用されうる。複数のコンテキストにわたるナビゲーションまたは経路計画は、両方のコンテキストの交差部分に含まれる共通オブジェクトを識別する必要がある。共通の交差部分にあるこれらのオブジェクトは、コンテキスト間経路計画のための接続点である。しかし、全てのオブジェクトがナビゲーションに実行できるように使用されうるわけではなく、両方のコンテキストの境界にあるオブジェクト、または両方のコンテキストにおいて隣接するオブジェクトのみがナビゲーションまたは経路計画に使用されうる。言い換えれば、システム100(または一つ以上のハードウェアプロセッサ104)は、二つ以上のコンテキスト(例えばキッチン、ダイニングおよびホール)の交差部分を示す一つ以上の共通オブジェクト(例えばドア、壁、窓など)を識別し、二つ以上のコンテキストの交差部分からの一つ以上の共通オブジェクトから識別された一つ以上のナビゲーション可能オブジェクト(例えばドア)に基づいて経路を生成する。
例えば、ベッドルームから外の道路へのナビゲーションでは、システム100は、三つのコンテキスト、すなわちベッドルーム、ダイニングルーム、および道路をカバーする必要があることを識別する。ここでベッドルームとダイニングルームとの交差部分には、ドア、椅子などのオブジェクトが存在しうる。しかし、ドアは両方のマップの境界にあるため、ドアがベッドルームのコンテキストからダイニングルームのコンテキストにわたるナビゲーションに使用されうる。この種のコンテキストステッチングおよびコンテキスト間経路計画は、ロボットおよび自動車の都市ナビゲーションに使用されうる。ナビゲーションの成功のためには、コンテキストの交差部分が必要であるだけでなく、現在の配置/マップの物理的スナップショットも必要であることに留意されたい。先の例を用いて詳述すると、ベッドルームの現在のスナップショットが、ベッドルームとダイニングルームとの間に共通するドアが何らかの理由で閉まっていることを示す場合、ドアが通過する最も実現可能なオブジェクトとして識別されるものの、経路計画は失敗しうる。
さらに、システム100は、一つ以上のセンサから取得された情報に基づいて、一つ以上のオブジェクト、一つ以上のコンテキストを識別することもできる。これは、以下の例によってさらに詳述される。
マルチセンサ拡張:
例えば、ロボットが音響センサを有する場合には、異なる音プロファイルが識別されることができ、タイプOオブジェクトまたはタイプS位置/コンテキストに投入する/関連付けられるために使用されうる。同様に、ロボットがハプティック(タッチ)センサを有する場合には、異なる表面または触感が識別されることができ、オブジェクトまたはコンテキストに関連付けられることができる。例えば温度、圧力などのセンサを使用しても同様の拡張が可能である。図9は、図1〜8を参照して、本開示の例示的実施形態によるシステム100の実施態様を示す例示的なブロック図を示す。
記述された説明は、任意の当業者が実施形態を製作および使用することを可能にするために本明細書における主題を説明する。主題の実施形態の範囲は特許請求の範囲によって定義され、当業者に想起される他の修正を含みうる。そのような他の修正は、それらが特許請求の範囲の文言と異ならない類似の要素を有する場合、またはそれらが特許請求の範囲の文言と実質的に異ならない等価の要素を含む場合には、特許請求の範囲内であることが意図される。
保護の範囲は、そのようなプログラムに加えてメッセージを内部に有するコンピュータ可読手段に拡張されるものと理解されねばならず、そのようなコンピュータ可読記憶手段は、プログラムがサーバまたはモバイルデバイスもしくは任意の適切なプログラム可能デバイス上で実行されるときに、本方法の一つ以上のステップの実施のためのプログラムコード手段を含む。ハードウェアデバイスは、例えばサーバもしくはパーソナルコンピュータなどのような任意の種類のコンピュータ、またはそれらの任意の組み合わせを含むプログラムされうる任意の種類のデバイスとすることができる。デバイスは、例えばハードウェア手段、例えば特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)、またはハードウェア手段とソフトウェア手段との組み合わせ、例えばASICおよびFPGA、もしくは少なくとも一つのマイクロプロセッサおよびソフトウェアモジュールが内部に位置する少なくとも一つのメモリでありうる手段も含みうる。したがって、手段はハードウェア手段およびソフトウェア手段の両方を含みうる。本明細書に記載の方法の実施形態は、ハードウェアおよびソフトウェアで実施されうる。デバイスはソフトウェア手段も含みうる。あるいは、実施形態は、異なるハードウェアデバイス上で、例えば複数のCPUを使用して実施されてもよい。
本明細書の実施形態は、ハードウェア要素およびソフトウェア要素を含みうる。ソフトウェアで実施される実施形態は、ファームウェア、常駐ソフトウェア、マイクロコードなどを含むがこれらに限定されない。本明細書に記載される様々なモジュールによって行われる機能は、他のモジュールまたは他のモジュールの組み合わせにおいて実施されてもよい。本説明の目的上、コンピュータ使用可能媒体またはコンピュータ可読媒体は、命令実行システム、装置、またはデバイスによる使用か、または関連する使用のためのプログラムを含み、記憶し、通信し、伝播し、または輸送することができる任意の装置でありうる。
例示されたステップは示された例示的な実施形態を説明するために提示され、進行中の技術発展が特定の機能が行われる様式を変更するであろうことが予期されるべきである。これらの例は限定ではなく例示の目的で本明細書に提示される。さらに、機能的ビルディングブロックの境界は、本明細書においては説明の便宜のために任意に定義されている。特定の機能およびそれらの関係が適切に行われる限り、代替的な境界が定義されうる。代替形態(本明細書に記載されたものの均等物、拡張物、変形物、派生物などを含む)は、本明細書に含まれる教示に基づいて関連技術(単数または複数)の当業者に明らかになるであろう。そのような代替形態は、開示された実施形態の範囲および本旨の範囲内に入る。また、「備える」、「有する」、「含有する」、および「含む」という単語、ならびに他の類似の形態は、意味において等価であり、これらの単語のうちのいずれか一つに続く単数または複数の項目がそのような単数または複数の項目の網羅的なリストであることを意味するものでも、リストされた単数または複数の項目のみに限定されることを意味するものでもないという意味で自由であることが意図される。本明細書および添付の特許請求の範囲において使用されるところの、単数形「一つの(a)」、「一つの(an)」、および「その(the)」は、文脈により別段の指定がない限り複数の言及を含むことにも留意されたい。
さらに、本開示と一致する実施形態を実施する際に、一つ以上のコンピュータ可読記憶媒体が利用されうる。コンピュータ可読記憶媒体は、プロセッサによって読み取り可能な情報またはデータが記憶されうる任意のタイプの物理的メモリを指す。したがって、コンピュータ可読記憶媒体は、本明細書に記載される実施形態と一致するステップまたはステージをプロセッサ(単数または複数)に行わせるための命令を含む、一つ以上のプロセッサによる実行のための命令を記憶しうる。「コンピュータ可読媒体」という用語は、有形の項目を含み、搬送波および過渡信号を除外する、すなわち非一時的なものと理解されねばならない。例には、ランダムアクセスメモリ(RAM)、読み取り専用メモリ(ROM)、揮発性メモリ、不揮発性メモリ、ハードドライブ、CD ROM、DVD、フラッシュドライブ、ディスク、および任意の他の既知の物理的記憶媒体が含まれる。
本開示および例は例示としてのみ考えられることが意図され、開示された実施形態の真の範囲および本旨は以下の特許請求の範囲によって示される。

Claims (20)

  1. 二次元(2D)環境を取得し六角形格子マップに表現するステップであって、前記六角形格子マップは複数の六角形格子セルを含む、ステップ(202)と、
    前記複数の六角形格子セルからの複数の二つ以上の隣接セルに関連する赤緑青(RGB)値の比較に基づいて一つ以上のオブジェクトを識別するステップであって、前記一つ以上のオブジェクトは、一つ以上の六角形格子セルの中心からの各六角形格子セルの中心の距離と六角形の中心の数とに基づいて識別される、ステップ(204)と、
    前記識別された一つ以上のオブジェクトについて作成されたタプルに基づいて一つ以上の候補コンテキストを識別するステップ(206)と、
    前記六角形格子マップと一つ以上の予め記憶された六角形格子マップとの比較を反復的に行うステップであって、前記六角形格子マップは、記述であり、空間的類似性指数(SSQ)を決定するためにマップデータベースから取得される前記一つ以上の予め記憶された六角形格子マップと反復的に比較され、前記空間的類似性指数は、前記六角形格子マップと前記一つ以上の予め記憶された六角形格子マップのうちの少なくとも一つとの重なりの程度を示す、ステップ(208)と、
    前記決定された空間的類似性指数に基づいて前記一つ以上の候補コンテキストから一つ以上のコンテキストを識別するステップ(210)と、
    前記一つ以上のオブジェクトと前記識別された一つ以上のコンテキストとに基づいて前記六角形格子マップ内のベクトルナビゲーションのための経路を動的に計画するステップ(212)と
    を備える、プロセッサ実施方法。
  2. 注釈、境界正方形の辺、テンプレート形状、および前記RGB値の分散に基づいて、前記一つ以上のオブジェクトのそれぞれについてオブジェクトデータベースを生成するステップをさらに備える、請求項1に記載のプロセッサ実施方法。
  3. タプル内の前記識別された一つ以上のオブジェクトを有する一つ以上の推定コンテキストのそれぞれについてコンテキストデータベースを生成するステップをさらに備える、請求項1に記載のプロセッサ実施方法。
  4. 前記一つ以上のオブジェクトの前記RGB値が予め定義された閾値に等しいときには、前記一つ以上のオブジェクトは一つ以上の予め定義されたオブジェクトとして識別される、請求項1に記載のプロセッサ実施方法。
  5. 前記一つ以上のオブジェクトの前記RGB値が予め定義された閾値よりも大きいかまたは小さいときには、前記一つ以上のオブジェクトは新たなオブジェクトとして決定される、請求項1に記載のプロセッサ実施方法。
  6. 前記一つ以上のオブジェクトのサイズおよび形状は、前記距離に基づいて決定される、請求項1に記載のプロセッサ実施方法。
  7. 二つ以上のコンテキストの交差部分を示す一つ以上の共通オブジェクトを識別するステップと、
    前記二つ以上のコンテキストの前記交差部分からの前記一つ以上の共通オブジェクトから識別された一つ以上のナビゲーション可能オブジェクトに基づいて経路を生成するステップと
    をさらに備える、請求項1に記載のプロセッサ実施方法。
  8. 前記一つ以上のコンテキストおよび前記一つ以上のオブジェクトは、一つ以上のセンサから取得される情報を用いて識別される、請求項1に記載のプロセッサ実施方法。
  9. 後続の経路計画およびベクトルナビゲーションのために識別された前記一つ以上のオブジェクト、前記一つ以上のコンテキスト、および前記動的に計画された経路を用いてロボットを訓練するステップと、
    前記後続の経路計画およびベクトルナビゲーションに関する情報を含むデータベースを生成するステップと
    をさらに備える、請求項1に記載のプロセッサ実施方法。
  10. 最大SSQを取得するために前記六角形格子マップと前記一つ以上の候補コンテキストとの比較を行うステップと、
    前記最大SSQと予め定義された閾値との比較に基づいて環境を新たな環境または予め定義された環境として識別するステップと
    をさらに備える、請求項1に記載のプロセッサ実施方法。
  11. 命令を記憶するメモリ(102)と、
    一つ以上の通信インタフェース(106)と、
    前記一つ以上の通信インタフェース(106)を介して前記メモリ(102)に結合された一つ以上のハードウェアプロセッサ(104)とを備え、前記一つ以上のハードウェアプロセッサ(104)は、前記命令により、
    二次元(2D)環境を取得し六角形格子マップに表現し、前記六角形格子マップは複数の六角形格子セルを含み、
    前記複数の六角形格子セルからの複数の二つ以上の隣接セルに関連する赤緑青(RGB)値の比較に基づいて一つ以上のオブジェクトを識別し、前記一つ以上のオブジェクトは、一つ以上の六角形格子セルの中心からの各六角形格子セルの中心の距離と六角形の中心の数とに基づいて識別され、
    前記識別された一つ以上のオブジェクトについて作成されたタプルに基づいて一つ以上の候補コンテキストを識別し、
    前記六角形格子マップと一つ以上の予め記憶された六角形格子マップとの比較を反復的に行い、前記六角形格子マップは、一つ以上のバリエーションに変形され、空間的類似性指数(SSQ)を決定するためにマップデータベースから取得される前記一つ以上の予め記憶された六角形格子マップと反復的に比較され、前記空間的類似性指数は、前記六角形格子マップと前記一つ以上の予め記憶された六角形格子マップのうちの少なくとも一つとの重なりの程度を示し、
    前記決定された空間的類似性指数に基づいて前記一つ以上の候補コンテキストから一つ以上のコンテキストを識別し、
    前記一つ以上のオブジェクトと前記識別された一つ以上のコンテキストとに基づいて前記六角形格子マップ内のベクトルナビゲーションのための経路を動的に計画する
    ように構成される、
    システム(100)。
  12. 前記一つ以上のハードウェアプロセッサは前記命令により、注釈、境界正方形の辺、テンプレート形状、および前記RGB値の分散に基づいて、前記一つ以上のオブジェクトのそれぞれについてオブジェクトデータベースを生成するようにさらに構成される、請求項11に記載のシステム。
  13. 前記一つ以上のハードウェアプロセッサは前記命令により、タプル内の前記識別された一つ以上のオブジェクトを有する一つ以上の推定コンテキストのそれぞれについてコンテキストデータベースを生成するようにさらに構成される、請求項11に記載のシステム。
  14. 前記一つ以上のオブジェクトの前記RGB値が予め定義された閾値に等しいときには、前記一つ以上のオブジェクトは一つ以上の予め定義されたオブジェクトとして識別される、請求項11に記載のシステム。
  15. 前記一つ以上のオブジェクトの前記RGB値が予め定義された閾値よりも大きいかまたは小さいときには、前記一つ以上のオブジェクトは新たなオブジェクトとして決定される、請求項11に記載のシステム。
  16. 前記一つ以上のオブジェクトのサイズおよび形状は、前記距離に基づいて決定される、請求項11に記載のシステム。
  17. 前記一つ以上のハードウェアプロセッサは前記命令により、
    二つ以上のコンテキストの交差部分を示す一つ以上の共通オブジェクトを識別し、
    前記二つ以上のコンテキストの前記交差部分からの前記一つ以上の共通オブジェクトから識別された一つ以上のナビゲーション可能オブジェクトに基づいて経路を生成する
    ようにさらに構成される、請求項11に記載のシステム。
  18. 前記一つ以上のコンテキストおよび前記一つ以上のオブジェクトは、一つ以上のセンサから取得される情報を用いて識別される、請求項11に記載のシステム。
  19. 前記一つ以上のハードウェアプロセッサは前記命令により、
    後続の経路計画およびベクトルナビゲーションのために識別された前記一つ以上のオブジェクト、前記一つ以上のコンテキスト、および前記動的に計画された経路を用いてロボットを訓練し、
    前記後続の経路計画およびベクトルナビゲーションに関する情報を含むデータベースを生成する
    ようにさらに構成される、請求項11に記載のシステム。
  20. 前記一つ以上のハードウェアプロセッサは前記命令により、
    最大SSQを取得するために前記六角形格子マップと前記一つ以上の候補コンテキストとの比較を行い、
    前記最大SSQと予め定義された閾値との比較に基づいて環境を新たな環境または予め定義された環境として識別する
    ようにさらに構成される、請求項11に記載のシステム。

JP2018241990A 2018-02-23 2018-12-26 六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画 Active JP6691202B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
IN201821007023 2018-02-23
IN201821007023 2018-02-23

Publications (2)

Publication Number Publication Date
JP2019169125A JP2019169125A (ja) 2019-10-03
JP6691202B2 true JP6691202B2 (ja) 2020-04-28

Family

ID=64331706

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018241990A Active JP6691202B2 (ja) 2018-02-23 2018-12-26 六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画

Country Status (3)

Country Link
US (1) US10948918B2 (ja)
EP (1) EP3531069B1 (ja)
JP (1) JP6691202B2 (ja)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11126199B2 (en) * 2018-04-16 2021-09-21 Baidu Usa Llc Learning based speed planner for autonomous driving vehicles
US11586914B2 (en) * 2019-01-11 2023-02-21 Arizona Board Of Regents On Behalf Of Arizona State University Systems and methods for evaluating perception systems for autonomous vehicles using quality temporal logic
CN110631601B (zh) * 2019-11-13 2021-04-27 中国电子科技集团公司第二十八研究所 一种基于非显示拓扑矢量地图的路径规划方法
CN111028350B (zh) 2019-11-21 2022-05-20 大连理工大学 一种利用双目立体相机构建栅格地图的方法
CN111811514B (zh) * 2020-07-03 2023-06-09 大连海事大学 一种基于正六边形栅格跳点搜索算法的路径规划方法
CN112067011B (zh) * 2020-08-24 2024-04-26 安庆师范大学 一种基于大规模多中心问题的路径规划方法
US11356801B1 (en) * 2020-12-25 2022-06-07 Mapsted Corp. Method and system for targeted calibration
CN112880663B (zh) * 2021-01-19 2022-07-26 西北工业大学 一种考虑累积误差的auv强化学习路径规划方法
CN112985405B (zh) * 2021-02-18 2023-06-09 湖南国科微电子股份有限公司 一种机器人全覆盖路径规划方法、装置、设备及介质
CN112807691B (zh) * 2021-02-22 2022-07-29 腾讯科技(深圳)有限公司 一种寻路方法、系统及存储介质和终端设备
CN113203420B (zh) * 2021-05-06 2022-11-18 浙江大学 一种基于变密度搜索空间的工业机器人动态路径规划方法
CN113607171B (zh) * 2021-08-04 2023-05-26 清华大学建筑设计研究院有限公司 一种疏散路径规划方法、装置、设备及存储介质
CN115638803A (zh) * 2022-10-06 2023-01-24 东南大学 城市兴趣点敏感的个性化路径规划方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4874936A (en) * 1988-04-08 1989-10-17 United Parcel Service Of America, Inc. Hexagonal, information encoding article, process and system
US4998010A (en) * 1988-04-08 1991-03-05 United Parcel Service Of America, Inc. Polygonal information encoding article, process and system
JP2003266349A (ja) * 2002-03-18 2003-09-24 Sony Corp 位置認識方法、その装置、そのプログラム、その記録媒体及び位置認識装置搭載型ロボット装置
KR100791382B1 (ko) * 2006-06-01 2008-01-07 삼성전자주식회사 로봇의 이동 경로에 따라 소정 영역의 특성에 관한 정보를수집하고 분류하는 방법 및 상기 영역 특성에 따라제어되는 로봇, 상기 영역 특성을 이용한 ui 구성 방법및 장치
US8626443B2 (en) 2009-09-18 2014-01-07 Deutsches Zentrum für Luft—und Raumfahrt e.V. Method for creating a map relating to location-related data on the probability of future movement of a person
US8942917B2 (en) 2011-02-14 2015-01-27 Microsoft Corporation Change invariant scene recognition by an agent
EP2570772A1 (en) * 2011-09-16 2013-03-20 Deutsches Zentrum für Luft- und Raumfahrt e.V. Method for localisation and mapping of pedestrians or robots using wireless access points
JP2013186615A (ja) * 2012-03-07 2013-09-19 Brother Ind Ltd 自動搬送体、自動搬送体制御装置、自動搬送システム、自動搬送方法、及び自動搬送プログラム
CN103413313B (zh) 2013-08-19 2016-08-10 国家电网公司 基于电力机器人的双目视觉导航系统及方法
US10922866B2 (en) * 2017-10-23 2021-02-16 Artificial Intelligence Foundation, Inc. Multi-dimensional puppet with photorealistic movement

Also Published As

Publication number Publication date
EP3531069A1 (en) 2019-08-28
US20190265711A1 (en) 2019-08-29
US10948918B2 (en) 2021-03-16
JP2019169125A (ja) 2019-10-03
EP3531069B1 (en) 2021-01-27

Similar Documents

Publication Publication Date Title
JP6691202B2 (ja) 六角形空間マップにおけるベクトルナビゲーションのためのコンテキストベースの経路計画
Brachmann et al. Visual camera re-localization from RGB and RGB-D images using DSAC
Shrestha et al. Learned map prediction for enhanced mobile robot exploration
Stylianou et al. Visualizing deep similarity networks
Lyu et al. Robot path planning by leveraging the graph-encoded Floyd algorithm
Kulhánek et al. Visual navigation in real-world indoor environments using end-to-end deep reinforcement learning
JP2018537766A (ja) ユニバーサル対応ネットワーク
JP2023501574A (ja) 仮想および拡張現実のためのシステムおよび方法
Zhu et al. Continual semantic segmentation with automatic memory sample selection
JP2019003299A (ja) 画像認識装置および画像認識方法
Meng et al. Exploiting points and lines in regression forests for RGB-D camera relocalization
CN107193923B (zh) 一种二维地理空间快速矢量叠加的方法及系统
EP4216015A1 (en) Systems and methods for object detection using a geometric semantic map based robot navigation
CN114061586B (zh) 用于生成电子设备的导航路径的方法和产品
Keshavarzi et al. Scenegen: Generative contextual scene augmentation using scene graph priors
WO2022031232A1 (en) Method and device for point cloud based object recognition
Best et al. Decentralised self-organising maps for the online orienteering problem with neighbourhoods
Li et al. Sparse-to-local-dense matching for geometry-guided correspondence estimation
Howard-Jenkins et al. LaLaLoc++: Global floor plan comprehension for layout localisation in unvisited environments
JP2023109570A (ja) 情報処理装置、学習装置、画像認識装置、情報処理方法、学習方法、画像認識方法
Soni et al. Multi-robot unknown area exploration using frontier trees
Feng et al. Floorplannet: Learning topometric floorplan matching for robot localization
CN108717302B (zh) 机器人跟随人物方法、装置及存储介质、机器人
Youngblood et al. A framework for autonomous mobile robot exploration and map learning through the use of place-centric occupancy grids
US20220180548A1 (en) Method and apparatus with object pose estimation

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190416

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200324

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200331

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200409

R150 Certificate of patent or registration of utility model

Ref document number: 6691202

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250