JP2022519788A - 複数の自律型車両を管理するためのシステムおよび方法 - Google Patents

複数の自律型車両を管理するためのシステムおよび方法 Download PDF

Info

Publication number
JP2022519788A
JP2022519788A JP2021569595A JP2021569595A JP2022519788A JP 2022519788 A JP2022519788 A JP 2022519788A JP 2021569595 A JP2021569595 A JP 2021569595A JP 2021569595 A JP2021569595 A JP 2021569595A JP 2022519788 A JP2022519788 A JP 2022519788A
Authority
JP
Japan
Prior art keywords
network
central control
control unit
area
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021569595A
Other languages
English (en)
Inventor
シャロム,アミール ベン
ロフェ,アリック
Original Assignee
643エーアイ リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 643エーアイ リミテッド filed Critical 643エーアイ リミテッド
Publication of JP2022519788A publication Critical patent/JP2022519788A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0214Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory in accordance with safety or protection criteria, e.g. avoiding hazardous areas
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0238Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/0274Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means using mapping information stored in a memory device
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • G05D1/028Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using a RF signal
    • G05D1/0282Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using a RF signal generated in a local control room
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/22Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G06V10/225Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on a marking or identifier characterising the area
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/54Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • G08G1/096805Systems involving transmission of navigation instructions to the vehicle where the transmitted instructions are used to compute a route
    • G08G1/096811Systems involving transmission of navigation instructions to the vehicle where the transmitted instructions are used to compute a route where the route is computed offboard
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Multimedia (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Electromagnetism (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Game Theory and Decision Science (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • General Factory Administration (AREA)
  • Traffic Control Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Navigation (AREA)

Abstract

倉庫内の車両の輸送を管理するための制御システムおよび方法。カメラのネットワークは、画像を撮影し、画像データを中央制御ユニットに送信することによって、経路ウェイネットワーク全体をカバーし、中央制御ユニットは、画像を処理し、ロボットスレーブの移動を制御するための信号を生成する。制御システムはまた、経路のネットワークのマップおよび障害物マトリックス機能を較正するための較正機構を含む。ロボットスレーブは、倉庫ネットワークの経路に沿ったロボットスレーブの移動の通路において、障害物または予期しない危険を検出した場合に、ロボットスレーブを自律的かつ独立して制御するための安全オーバーライド機構を含む。【選択図】図4

Description

本明細書の開示は、経路ウェイの既知のネットワークにおいて複数の自律型車両の集中管理を提供するためのシステムおよび方法に関する。特に、本システムおよび本方法は、自律型車両がアクティブなフィードバックを提供しない場合でも、複数の自律型車両の制御を可能にする。
ロボットや自律型車両の技術進歩に伴い、倉庫施設や工場施設でのそれらの使用が増えている。人工知能の高度化により、ロボットの機能が向上しただけでなく、複雑なタスクを実装する機能を活用する自動化も向上した。現在、多くの履行および在庫制御動作は、人間の労働者が注文を履行するのを支援するロボットに依存する。
倉庫管理および制御システムでは、注文履行プロセスは、タスクがロボットと手動オペレータの間で分散された半自立的である。注文履行要求を受信すると、ロボットは流通サイトをナビゲートして、各注文品目が置かれた棚の位置を特定する。ロボットは、顧客の注文の配達品目を棚から持ち上げて、手動オペレータの位置に配達する。次に、配達品目に配達情報がマークされ、配達の特定の順序で(手動またはロボットを介して自動的に)ソートされる。品目はスキャンされ、配達ボックスに梱包され、配達車両に置かれる。ロボットは、倉庫の自動化標準ごとに、これらのタスクの1つ以上を実行する。
従来の倉庫管理および制御システムでは、ロボットは中央制御システムによって制御される。ロボットは、倉庫のサイトをナビゲートしている間、一定間隔でその位置情報を送信することにより、中央制御システムに常にアクティブなフィードバックを提供する。次に、中央制御システムは、サイト内をナビゲートするためにこれらのロボットを案内する。各ロボットには、高度なカメラとナビゲーションシステムを装備する必要があり、これらはコストと複雑さを増加させる。ロボットのナビゲーションシステムのカメラに何らかのエラーが発生した場合、その動作は影響を受け、修理されるまで役に立たなくなる。各ロボットに予備のカメラを設置すると、プロセス全体に非常にコストがかかる。さらに、ロボットのカメラまたはナビゲーションシステムへの何らかの変更は、中央制御システムに複製される必要がある。
上記の制限に照らして、既存の倉庫または自律型ロボット車両のネットワークに後付けすることができ、既存のハードウェアに大幅な変更を加える必要なしにフリートを自己較正および制御できる制御システムを有することが望ましい。また、ロボット車両によってアクティブなフィードバックが提供されないときでも、システムは機能すべきである。本明細書で説明する自律型倉庫管理システムは、この必要性に対応するためのものである。
本発明の一態様では、倉庫または他のそのような既知の経路ウェイのネットワークにおける車両の輸送を管理するための制御システムおよび方法が開示されている。システムは、中央制御ユニット、複数のカメラ、較正機構、複数の半自律型車両またはロボットスレーブ、および通信ネットワークを含み得る。車両からアクティブなフィードバックが提供されない場合でも制御が提供され得るのは、システムの特定の特徴である。
本発明の別の態様では、エリア内のオブジェクトの移動を管理するためのシステムが開示され、エリアは、第1のトポロジーにおける経路のネットワークを含む。このシステムは、経路のネットワークに沿った複数の場所に位置する複数の画像撮影デバイスを含み、ネットワークの各経路およびオブジェクトの画像は、2つ以上の画像撮影デバイスによって撮影される。画像撮影デバイスは、撮影された画像を処理し、撮影された画像ごとに1つ以上のデルタファイルを作成するプリプロセッサユニットと、デルタファイルを送信するための送信ユニットとを含む。
システムは、第1の通信ネットワークを介して複数の画像撮影デバイスと通信するための第1の通信インターフェースを含む中央制御ユニットをさらに含み、中央制御ユニットは、画像撮影デバイスからデルタファイルを受信する。中央制御ユニットはまた、第2の通信ネットワークを介してオブジェクトと通信するための第2の通信インターフェースを含み、中央制御ユニットは、オブジェクトと通信して、経路のネットワークに沿ったオブジェクトの移動を制御する。中央制御ユニットは、経路のネットワークのマップと障害物マトリックス機能を構築するための処理ユニットをさらに含み、障害物マトリックス機能は、様々な時点でのネットワークの様々な経路の可用性と障害物を示す。処理ユニットはまた、経路のネットワーク内のオブジェクトの移動を制御するための制御信号を生成する。
システムはまた、較正機構を含み、較正機構は、中央制御ユニットが、経路のネットワークに沿った既知のポイントの1つ以上をマークすることによって、経路のネットワークのマップおよび障害物マトリックス機能を較正することを可能にする。画像撮影デバイスは、マークされた既知のポイントの画像を撮影し、デルタファイルを作成し、デルタファイルを中央制御ユニットに送信する。
本発明の特定の態様では、オブジェクトは、ネットワークの経路に沿ったオブジェクトの移動の通路において、障害物または予期しない危険を検出した場合に、オブジェクトを自律的かつ独立して制御するための安全オーバーライド機構を含む。安全オーバーライド機構は、オブジェクトが、通路における障害物または予期しない危険を検出することを可能にする感知デバイスと、オブジェクトが代替の移動通路を識別することを可能にする追加の制御デバイスと、を含む。
本発明のさらなる態様は、エリア内のオブジェクトの移動を管理するためのシステムを開示し、エリアは、複数の領域に分割されている。このシステムは、エリア内の複数の場所に位置する複数の画像撮影デバイスを含み、エリアの各領域の画像およびオブジェクトは、2つ以上の画像撮影デバイスによって撮影される。
本システムはまた、中央制御ユニットを含む。中央制御ユニットは、第1の通信ネットワークを介して複数の画像撮影デバイスと通信するための第1の通信インターフェースを含み、中央制御ユニットは、画像撮影デバイスから領域およびオブジェクトの撮影された画像を受信する。中央制御ユニットは、第2の通信ネットワークを介してオブジェクトと通信するための第2の通信インターフェースをさらに含み、中央制御ユニットは、オブジェクトと通信して、エリア内のオブジェクトの移動を制御する。
システムは、エリア内の1つ以上の既知のポイントをマークするための較正機構をさらに含み、画像撮影デバイスは、マークされた既知のポイントの画像を撮影する。
本発明のさらに別の態様では、オブジェクトは、イベントが発生した場合に自律的かつ独立してオブジェクトを制御するための安全オーバーライド機構を含む。
本発明のさらなる態様は、エリア内のオブジェクトの移動を制御するための方法を開示し、エリアは、第1のトポロジーにおける経路のネットワークを含む。本方法は、複数の画像撮影デバイスによって、ネットワークの各経路およびオブジェクトの複数の画像を撮影することを含み、ネットワークの各経路およびオブジェクトの画像は、2つ以上の画像撮影デバイスによって撮影される。本方法は、複数の画像撮影デバイスによって撮影された画像を処理して、1つ以上のデルタファイルを作成することと、デルタファイルを中央制御ユニットに送信することと、をさらに含む。本方法はまた、中央制御ユニットによって、経路のネットワークのマップおよび障害物マトリックス機能を構築することを含み、障害物マトリックス機能は、様々な時点でのネットワークの様々な経路の可用性と障害物を示す。本方法は、中央制御ユニットによって、経路のネットワーク内のオブジェクトの移動を制御するための制御信号を生成することと、中央制御ユニットによって、制御信号をオブジェクトに送信することをさらに含む。
本実施形態をより良く理解し、かつそれがどのように遂行され得るのかを示すために、ここで、単に例として、添付の図面を参照する。
ここで特に図面を詳細に参照すると、示されている詳細は例としてであり、選択された実施形態の例示的な説明のみを目的としており、最も有用であると考えられ、かつ容易に理解されるものを提供するために、原理および概念的な態様の説明が提示されていることを強調しておく。これに関して、基本的な理解のために、必要以上に詳細には、構造的な詳細を示そうとはしておらず、図面とともに用いられた説明によって、いくつかの選択された実施形態が実際にどのように実施され得るのかが当業者には明らかとなる。
本明細書で使用する場合、単数形の不定冠詞「a」、「an」、および定冠詞「the」は、内容が明確に別段の指示をしない限り、単一および複数の両方の指示対象を含むか、そうでなければカバーすると見なされるべきである。言い換えれば、これらの冠詞は1つ以上の指示対象に適用可能である。本明細書で使用する場合、「または」という用語は、内容が明確に別段の指示をしない限り、概して、「および/または」を含むか、そうでなければカバーするために使用される。
添付図面において、
カメラが設置された倉庫施設の概略図を示す。 倉庫施設の概略グリッドネットワークレイアウトを示す。 カメラのシステム構成要素を示す。 倉庫中央管理システムのシステム構成要素のブロック図を示す。 設定段階中に倉庫領域をマッピングするための方法を表すフローチャートを示す。 設定段階中に倉庫領域をマッピングするための方法を表すフローチャートを示す。 倉庫施設内のロボット車両の移動を制御するための方法を表すフローチャートを示す。 倉庫施設内のロボット車両の移動を制御するための方法を表すフローチャートを示す。 出発ポイントから目的ポイントへのロボット車両の移動のためのグリッドネットワークレイアウトにおけるネットワーク経路の例示的なマップを示す。 指向性レーザービームを使用する較正機構を示す。 バーコードサインマーカーを使用した較正機構を示す。 中央制御ユニットの基本構成要素を示すブロック図である。
本開示の態様は、経路ウェイのネットワーク内の複数の自律型車両の集中管理を提供するためのシステムおよび方法に関する。これにより、自律型車両がアクティブなフィードバックを提供しない場合でも、複数の自律型車両の制御が提供され得る。
必要に応じて、本発明の詳細な実施形態が本明細書に開示されるが、開示された実施形態は、様々な代替の形態で具体化され得る本発明の単なる例であることが理解されるべきである。図は必ずしも縮尺どおりではなく、一部の特徴は、特定の構成要素の詳細を示すために誇張または最小化されていることがある。したがって、本明細書に開示される特定の構造的および機能的詳細は、限定するものとして解釈されるべきではなく、単に本発明を様々に使用するために当業者に教示するための代表的な基礎として解釈されるべきである。
必要に応じて、本開示の様々な実施形態では、本明細書で説明される1つ以上のタスクは、複数の命令を実行するためのコンピューティングプラットフォームまたは分散コンピューティングシステムなどのデータプロセッサによって実行され得る。任意選択で、データプロセッサは、命令、データなどを記憶するための揮発性メモリを含むか、またはそれにアクセスする。追加的または代替的には、データプロセッサは、命令および/またはデータを記憶するために、不揮発性ストレージ、例えば、磁気ハードディスク、フラッシュドライブ、リムーバブルメディアなどにアクセスすることができる。
本明細書における本開示のシステムおよび方法は、その適用において、説明に記載されているか、または図面および例に示されている構成の詳細および構成要素の配置または方法に限定されることはないことに特に留意する。本開示のシステムおよび方法は、他の実施形態が可能であり得るか、または様々な方法および技術で実施および実行され得る。
本明細書で説明されたものと同様または同等の代替的な方法および材料が本開示の実施形態の実施または試験に使用され得る。それにもかかわらず、本明細書で説明される特定の方法および材料は、例示のみを目的としている。材料、方法、および例は、必ずしも限定することを意図していない。したがって、様々な実施形態は、必要に応じて、様々な手順または構成要素を省略、置換、または追加することができる。例えば、方法は、説明されたものとは異なる順序で実行されてもよく、そしてその様々なステップが追加され、省略され、または組み合わされてもよい。追加的に、特定の実施形態に関して説明された態様および構成要素は、他の様々な実施形態で組み合わされてもよい。
図1は、本発明の実施形態による倉庫施設102の概略図を示す。倉庫施設102は、通常、大量の品目の生産、保管、流通、および出荷に使用される広い閉鎖空間である。倉庫施設102は、ショッピングモール、工場、製造ユニット、組立ユニット、流通ユニット、または貨物ユニットであり得る。
倉庫施設102は、様々な場所に設置された複数のカメラ104を有する。倉庫施設102に設置された4つのカメラ104が示されている。当業者であれば、本発明の範囲を制限することなく、任意の数のカメラを倉庫施設102で使用できることを明確に理解するはずである。倉庫施設102内の全てのカメラ104のグループは、「カメラネットワーク」と呼ばれる。カメラ104は、倉庫施設102のエリア全体をカバーするように位置している。カメラ104は、一定の時間間隔で倉庫施設102の様々なポイントの画像を撮影する。カメラネットワークに冗長性を提供し、ワークフローを維持するために、倉庫施設102内の各ポイントの画像は、2つ以上のカメラ104によって撮影され得る。例えば、図2に示されるようなグリッドネットワークレイアウトでは、カメラ104は、倉庫施設102のエリア全体をカバーするように直線通路に沿って向けることができる。複数のリング(図示せず)の別の例示的なレイアウトでは、カメラ104は、各リングの周辺に設置することができる。
例示的なカメラ104は、アナログもしくはデジタル静止画像カメラ、ビデオカメラ、光学カメラ、レーザーカメラ、レーザーもしくは3D画像スキャナ、または倉庫施設102の高解像度画像を撮影することができる任意の他のデバイスを含む。カメラ104は、静止画像フォーマット、フラッシュ画像フォーマット、またはビデオ画像フォーマットで倉庫施設102の画像を撮影する。好ましい静止画像は、JPEG、GIF、PNG、または撮影された画像の処理を可能にする任意の適切な形式とすることができる。撮影された画像のビデオ形式は、TIFF(Tagged Image File Format)、RAW形式、AVI、DV、MOV、WMV、MP4、DCF(Design Rule for Camera Format)、ITU-TH 261、ITU-T H.263、ITU-T H.264、ITU-T CCIR 601、ASF、Exif(Exchangeable Image File Format)、およびDPOF(Digital Print Order Format)標準のうちの1つに基づき得る。
ロボット車両106を図1に示す。ロボット車両106は、半自律型車両、自律型車両、ロボットデバイス、またはショッピングカートであり得る。
カメラ300のシステム構成要素を図3に示す。カメラ300は、倉庫施設102およびロボット車両106の様々なポイントの画像を一定の時間間隔で自動的に撮影するための画像撮影ユニット302を含む。代替的には、画像撮影ユニット302は、特定の時間に画像を撮影するために手動入力によって制御することができる。例えば、倉庫施設102の特定の部分が1日の一部の間に動作不能である場合、倉庫施設102のその部分のカメラ300をオフに保つことができる。代替的には、カメラ300は、移動を感知したときにのみ倉庫施設102の画像を撮影するモーションセンサなどの感知ユニット306を含むことができる。さらに、カメラ300は、それらの画像化エリア内の移動を感知することに基づいてそれらの画像撮影間隔を自動的に調整するようにプログラムされ得る。
撮影された画像は、カメラ300の前処理ユニット304によって処理されて、ビデオ圧縮で使用されるような1つ以上のデルタファイル、フレーム間ストリームなどを作成することができる。前処理ユニットは、本明細書では、これらに限定されないが、少なくとも1つの命令に対して動作を実行することができる任意の集積回路または他の電子デバイス(またはデバイスの集合)を含むように使用され、縮小命令セットコア(RISC)プロセッサ、CISCマイクロプロセッサ、マイクロコントローラユニット(MCU)、CISCベースの中央処理ユニット(CPU)、およびデジタル信号プロセッサ(DSP)を含むが、これらに限定されない。
撮影された画像は、カメラ300のメモリユニット308に記憶される。メモリユニット308は、前処理ユニット304によって実行される情報および命令を記憶するために、ランダムアクセスメモリ(RAM)または他の動的記憶デバイス、読み取り専用メモリ(ROM)(または他の不揮発性メモリ)または他の静的記憶デバイス、磁気ディスクドライブ、および光学ディスクドライブを含む。
カメラ300はまた、図6に示されるように、さらなる処理のためにデルタファイルを中央制御ユニット402に送信するための送信ユニット310を含む。通信インターフェース312は、カメラ300が他のカメラ300および中央制御ユニット402と通信することを可能にする。カメラ300、ロボット車両106、および中央制御ユニット402の間の通信ネットワークは、有線LAN接続、無線LAN接続、WiFi接続、Bluetooth接続、Zigbee接続、Z-Wave接続またはイーサネット接続であり得る。例示的な通信インターフェース312は、対応するタイプの電話回線へのデータ通信接続を提供するための統合サービスデジタルネットワーク(ISDN)カードまたはモデムであり得る。別の非限定的な例として、通信インターフェース312は、互換性のあるLANへのデータ通信接続を提供するためのローカルエリアネットワーク(LAN)カードであり得る。上に開示された通信ネットワークおよび通信インターフェース312は、本質的に例示的なものであり、本発明の範囲を限定すべきでない。
冗長性を備えたカメラネットワークでは、カメラ300は互いに通信して、カメラの動作健全性を他のカメラに通知する。これは、カメラネットワーク内で一定間隔で「ハローメッセージ」を送信することによって達成され得る。カメラネットワークが適切に機能している場合、全てのカメラ300が動作状態にある状態で、一部のカメラ300をセミアクティブ状態に保つことができる。これらのセミアクティブカメラ300は、倉庫施設102およびロボット車両106の画像を撮影することができるが、画像を処理してデルタファイルを作成しない。これは、リソースを節約するのに役立ち、コストを削減する。特定のカメラでエラーが発生した場合、予備のカメラが引き継いでデルタファイルを作成し、それらを中央制御ユニット402に送信する。
図2は、倉庫施設102の概略グリッドネットワークレイアウト200を示す。グリッドネットワークレイアウト200は、倉庫施設102内を動き回ることを容易にする通路のシステムを含む。ブロック202は、倉庫施設102に配置された様々な棚を示す。「黒いブロック」204は、顧客に配達するためにロボット車両106によってピックされることを意図された例示的な品目を示す。経路206は、ロボット車両106によって取られて、倉庫施設102内をナビゲートして、品目204を選び取り、所望の目的地に到達することができる。倉庫施設102の他のトポロジーは、本発明の範囲を制限することなく、グリッドトポロジー、メッシュトポロジー、線形トポロジー、またはリングトポロジーであり得る。
図4は、倉庫中央管理システム400のシステム構成要素のブロック図を示す。倉庫中央管理システム400は、倉庫施設102内のロボット車両404の移動を制御する中央制御ユニット402を含む。ロボット車両404はまた、中央制御ユニット402と通信して、ロボット車両404の機能におけるエラーを示すことができる。さらに、ロボット車両404は、移動通路において障害物または予期しない危険に遭遇した場合、中央制御ユニット402と通信する。内部位置追跡システム408を使用して、初期設定段階中に倉庫施設102の領域をマッピングすることができる。Mervermind、Pozyx、Sewioなどから入手可能なような内部位置追跡システム408を使用して、倉庫施設102の領域をマッピングすることができる。
図5Aおよび図5Bは、内部位置追跡システム408を使用して、初期設定段階中に倉庫領域をマッピングするための方法を表すフローチャート500を示す。プロセスは、ステップ504で倉庫施設102内の既知の位置に参照オブジェクトを配置することによって、ステップ502で開始する。参照オブジェクトは、倉庫施設102の特定の領域内の静止品目または移動品目であり得る。参照オブジェクトの位置または移動領域は事前に知られており、中央制御ユニット402に記憶されている。参照オブジェクトの位置は、例えば、倉庫施設102の特定の領域内の「x」および「y」座標に関して定義され得る。代替的には、参照オブジェクトの位置は棚に対して定義され得る。ステップ506で、カメラが取り付けられたいくつかの自律型ロボットが倉庫施設102に配置される。ステップ508で、これらの自律型ロボットは、倉庫施設102内の既知の経路に沿って移動し、参照オブジェクトの画像を含む画像を撮影する。画像はまた、自律型ロボットとともにカメラ406a、406b、および406cによって撮影され得る。代替的には、倉庫施設102および参照オブジェクトの画像は、自律型ロボットの関与なしに、カメラ406a、406b、および406cによってのみ撮影することができる。ステップ510で、参照オブジェクトは、撮影された画像において追跡される。自律型ロボットは、ステップ512で、参照オブジェクトの撮影された画像を中央制御ユニット402に送信する。同じ参照オブジェクトの画像を撮影する複数の自律型ロボットは、画像を中央制御ユニット402に送信する。ステップ514で、中央制御ユニット402は、所与の時間での参照オブジェクトの撮影された画像を参照オブジェクトの既知の位置に関連付ける。ステップ516で、中央制御ユニット402は、参照オブジェクトの既知の位置を使用して、各自律型ロボットのカメラの視野のためのマップセグメントを準備する。同じ参照オブジェクトの複数の画像を使用して、中央制御ユニット402は、ステップ518で、全てのカメラのマップセグメントから重複領域を識別する。ステップ520で、中央制御ユニット402は、マップセグメントをステッチして、領域全体をマップする。ステップ522で、中央制御ユニット402は、倉庫施設102に配置された全ての参照オブジェクトが自律型ロボットによって画像化および追跡されているかどうかをチェックする。「はい」の場合、初期設定プロセスはステップ524で完了し、プロセスはステップ526で停止する。倉庫施設102に配置された全ての参照オブジェクトが自律型ロボットによって画像化および追跡されていない場合、プロセスはステップ508に進み、全ての参照オブジェクトが追跡され、倉庫施設102のエリアの全体がマップされるまで後続のステップを繰り返す。
一部のシステムでは、較正機構は、内部位置トラッカーを保持する参照オブジェクトを含んでもよい。このような参照オブジェクトは、エリア内を移動するときにビデオカメラで見ることができる。較正機構は、内部位置トラッカーを使用して、各時点での参照オブジェクトの実際の位置を記録することができる。各ビデオカメラについて、撮影されたフレーム内の参照オブジェクトの見かけの位置は、フレームが撮影されたときの参照オブジェクトの既知の実際の位置にマッピングされ得る。
図6Aおよび図6Bは、ロボット車両404の移動制御のための方法を示すフローチャートを示す。プロセスは、ステップ602で開始され、カメラ406a、406b、および406cは、ステップ604で、倉庫施設102およびロボット車両404の画像を撮影する。カメラ406a、406b、および406cは、ステップ606で、撮影された画像を処理してデルタファイルを作成し、デルタファイルを中央制御ユニット(CCU)402に送信する。ステップ608で、中央制御ユニット(CCU)402は、カメラ406a、406b、および406cから受信されたデルタファイルを処理し、ネットワーク経路のマップおよび障害物マトリックスを構築する。図2を参照すると、倉庫施設102のグリッドネットワークレイアウトにネットワーク経路206が示されている。ネットワーク経路のマップは、グリッドネットワークレイアウト内の全ての可能な経路を含む。図7は、出発ポイントから目的ポイントへのロボット車両404の移動のためのグリッドネットワークレイアウトにおけるネットワーク経路の例示的なマップ700を示す。いくつかの可能な経路が、出発ポイントと目的ポイントとの間の例示的な地図700に示されている。本発明の特定の実施形態では、ネットワーク経路のマップはまた、出発ポイントと目的ポイントとの間の最適経路をマークすることができる。障害物マトリックスは、経路内に配置された任意の障害物を含む。ブロック3に存在する障害物208が図2に示されている。障害物は、棚から落下した品目、手動作業者によって配置された工具または機械、倉庫の屋根から落下した壊れた設備、またはロボット車両404の自由な移動を妨げる可能性のある任意の他のオブジェクトであり得る。障害物マトリックスが示すのは、経路内に存在する障害物の説明を含むこともできる。例えば、障害物のサイズ、配置、またはタイプを説明することができる。
ステップ610で、中央制御ユニット(CCU)402は、倉庫施設102において何らかの較正機構が利用可能であるかどうかを検証する。較正機構は、中央制御ユニット402が、経路のネットワークに沿った1つ以上の既知のポイントをマークすることによって、経路のネットワークのマップおよび障害物マトリックス機能を較正することを可能にする。較正機構は、ステップ612で指向性レーザービームを使用して経路のネットワークに沿ったポイントをマークするために、倉庫施設102内に配置された1つ以上のミラー検流計を含むことができる。図8は、倉庫施設802の床上のポイント810をマークするために指向性レーザービーム808を放出するミラー検流計806を示す。較正機構はまた、可視光線ビーム、赤外線ビーム、または紫外線ビームなどの電磁放射の投影されたトレーサービームを含むことができる。さらに、較正機構は、経路のネットワークに沿ってポイントをマークすることを可能にする超音波ビーコンを含むことができる。さらに、較正機構は、経路のネットワークに沿って提供されるバーコードまたはQRコードなどのサインマーカーを含むことができる。EAN-8、EAN-13、UPC-A、UPC-E、EAN/UPCアドオン、Code-39、Code-32、CC/EAN/Code-128 Industrial-25、Interleved-25、Codebar/Nw7、MSI/Pressyなどを含む様々な標準バーコードを使用することができる。図9は、倉庫施設902の床上にマークされたバーコードサインマーカー906を使用した校正機構を示す。また、較正機構は、倉庫施設102内の経路のネットワークに沿って配置されたRFIDタグ付き品目を含むことができる。
マークされたポイント810および906の位置は、中央制御ユニット402に知られている。ステップ614で、カメラ804(または904)は、マークされたポイント810および906の画像を撮影し、ステップ616で追加のデルタファイルを作成する。追加のデルタファイルは、ステップ618で中央制御ユニット402に送信される。中央制御ユニット402は、ステップ620で追加のデルタファイルを使用して、ネットワーク経路のマップおよび障害物マトリックスを較正する。中央制御ユニット402は、ステップ622で制御信号を生成し、ステップ624で倉庫施設102内をナビゲートするために、制御信号をロボット車両404に送信する。制御信号は、品目のピックアップのため、配達ポイントへの経路に、および元の経路内に何らかの障害物がある場合に経路を変更するためにロボット車両404を案内する。プロセスはステップ626で停止する。
本発明の特定の実施形態では、ロボット車両404は、安全オーバーライド機構を含むことができる。安全オーバーライド機構は、ネットワークの経路に沿ったオブジェクトの移動の通路において、障害物または予期しない危険を検出した場合に、ロボット車両404が自律的かつ独立してそれ自体を制御することを可能にする。安全オーバーライド機構は、ロボット車両404が中央制御ユニット402からの入力を必要とせずにそれ自体を制御することを可能にする。例えば、品目がロボット車両404の前で(棚から)突然落下する特定の場合において。安全オーバーライド機構は、オブジェクトが移動通路内の障害物または予期しない危険を検出することを可能にする感知デバイスを含むことができる。安全オーバーライド機構の追加の制御装置は、ロボット車両404が目的ポイントへの代替通路を見つけることを可能にする。
図10は、中央制御ユニット1000の基本構成要素を示すブロック図である。中央制御ユニット1000は、デスクトップコンピュータ、ラップトップコンピュータ、デジタルノートブック、携帯電話、携帯情報端末(PDA)、画像処理デバイス(例えば、デジタルカメラまたはビデオレコーダ)などの携帯型電子デバイス、および/または任意の他のハンドヘルドもしくは固定場所コンピューティングデバイス、またはこれらのデバイスのいずれかの組み合わせとすることができる。中央制御ユニット1000はさらに、クライアントデバイス、サーバデバイス、またはルーティング/スイッチングデバイスとすることができる。中央制御ユニット1000は、バス1004、相互接続1016、または情報を通信するための他の通信機構、および情報を処理し、コンピュータ実行可能命令を実行するためにバス1004に結合された、一般に集積回路の形態のプロセッサ1014を含む。中央制御ユニット1000はまた、情報およびプロセッサ1014によって実行される命令を記憶するためにバス1004に結合された、ランダムアクセスメモリ(RAM)または他の動的記憶デバイスなどのメインメモリ1012aを含む。メインメモリ1012aはまた、プロセッサ1014によって実行される命令の実行中に一時変数または他の中間情報を記憶するために使用され得る。中央制御ユニット1000は、プロセッサ1014の静的情報および命令を記憶するためにバス1004に結合された読み取り専用メモリ(ROM)1012b(または他の不揮発性メモリ)または他の静的記憶デバイスをさらに含む。磁気ディスクまたは光ディスク、ハードディスクからの読み取りおよびこれへの書き込みのためのハードディスクドライブ(HDD)、磁気ディスクからの読み取りおよびこれへの書き込みのための磁気ディスクドライブ、および/または取り外し可能な光ディスクからの読み取りおよびこれへの書き込みのための光ディスクドライブ(DVDなど)などの記憶デバイス1012cは、情報および命令を記憶するためにバス1004に結合されている。通常、中央制御ユニット1000は、コンピュータリソースを管理するために不揮発性ストレージに記憶されたオペレーティングシステム(OS)を含み、アプリケーションおよびプログラムにコンピュータリソースおよびインターフェースへのアクセスを提供する。オペレーティングシステムの非限定的な例は、Microsoft Windows、Mac OS X、およびLinuxである。
「プロセッサ」という用語は、本明細書では、少なくとも1つの命令に対して動作を実行することができる任意の集積回路または他の電子デバイス(またはデバイスの集合)を含むように使用され、縮小命令セットコア(RISC)プロセッサ、CISCマイクロプロセッサ、マイクロコントローラユニット(MCU)、CISCベースの中央処理ユニット(CPU)、およびデジタル信号プロセッサ(DSP)を含むが、これに限定されない。
中央制御ユニット1000は、バス1004を介して、陰極線管(CRT)、液晶ディスプレイ(LDC)、フラットスクリーンモニタ、タッチスクリーンモニタ、またはユーザにテキストおよびグラフィカルデータを表示するための同様の手段などのディスプレイ1006に結合することができる。ディスプレイ1006は、ユーザが、システムの動作に関連する情報を閲覧、入力、および/または編集することを可能にする。英数字および他のキーを含む入力デバイス1008は、情報およびコマンド選択をプロセッサ1014に通信するためにバス1006に結合されている。別のタイプのユーザ入力デバイスは、方向情報およびコマンド選択をプロセッサ1014に通信し、ディスプレイ1006上のカーソルの移動を制御するための、マウス、トラックボール、またはカーソル方向キーなどのカーソル制御1010である。入力デバイス1008はさらに、マウス、ペン、もしくはトラックボールなどのタッチ入力デバイス、音声入力デバイス、走査デバイス、またはプロセッサ1014に入力を提供する別のデバイスであり得る。
中央制御ユニット1000は、バス1004に結合された通信インターフェース1016を含む。通信インターフェース1016は、ロボット車両404ならびにカメラ406a、406b、および406cとの双方向データ通信を提供する。例えば、通信インターフェース1016は、対応するタイプの電話回線へのデータ通信接続を提供する統合サービスデジタルネットワーク(ISDN)カードまたはモデムであり得る。別の非限定的な例として、通信インターフェース1016は、互換性のあるLANへのデータ通信接続を提供するローカルエリアネットワーク(LAN)カードであり得る。例えば、IEEE802.3標準に基づくイーサネットベースの接続が使用され得る。
本明細書で使用される技術用語および科学用語は、本開示が属する技術分野の当業者によって一般に理解されるのと同じ意味を有するべきである。とはいえ、本出願から成熟する特許の存続期間中に、多くの関連するシステムおよび方法が開発されることが予期される。したがって、コンピューティングユニット、ネットワーク、ディスプレイ、メモリ、サーバなどの用語の範囲は、そのような全ての新しい技術を先験的に含むことを意図している。
本明細書で使用する場合、「約」という用語は、少なくとも±10%を指す。「備える」、「備えている」、「含む」、「含んでいる」、「有する」という用語およびそれらの変化形は、「含むが、これらに限定されない」を意味し、列挙された構成要素が含まれるが、概して他の構成要素を除外しないことを示す。このような用語は、「からなる」および「本質的にからなる」という用語を包含する。
「本質的にからなる」という表現は、組成物または方法が追加の成分および/または工程を含み得るが、追加の成分および/または工程が請求された組成物または方法の基本的および新規の特性を実質的に変更しない場合に限ることを意味する。
本明細書で使用する場合、単数形「a」、「an」、および「the」は、文脈が明確に他のことを指示しない限り、複数の指示対象を含み得る。例えば、「1つの化合物」または「少なくとも1つの化合物」という用語は、これらの混合物を含む、複数の化合物を含み得る。
「例示的」という用語は、本明細書では、「例、事例、または例示として役立つ」ことを意味するために使用される。「例示的」として説明されるいかなる実施形態も、必ずしも他の実施形態よりも好ましいかもしくは有利であると解釈されるべきではなく、または他の実施形態からの特徴の組み込みを必ずしも除外するものではない。
「任意選択で」という単語は、本明細書では、「いくつかの実施形態では提供され、他の実施形態では提供されない」ことを意味するために使用される。本開示のいかなる特定の実施形態も、このような特徴が矛盾しない限り、複数の「任意選択の」特徴を含み得る。
本明細書で数値範囲が示される場合は常に、指示範囲内の任意の引用数字(分数または整数)を含むことを意味している。第1の指示数と第2の指示数との間の「範囲にある/範囲である」および第1の指示数から第2の指示数「まで」の「範囲にある/範囲である」という表現は、本明細書では互換的に使用され、第1および第2の指示数ならびにそれらの間の全ての分数および整数を含むことを意味する。範囲形式での説明は、単に便宜性および簡潔性のためであり、本開示の範囲への確固たる限定として解釈するべきではないと理解されたい。したがって、範囲の説明は、全ての可能な部分範囲ならびにその範囲内の個々の数値を具体的に開示していると見なされるべきである。例えば、1~6などの範囲の説明は、1~3、1~4、1~5、2~4、2~6、3~6などの部分範囲、ならびに、その範囲内の個々の数値、例えば、1、2、3、4、5、および6および非整数の中間値を具体的に開示していると見なされるべきである。これは、範囲の幅に関係なく適用される。
明確にするために、別個の実施形態の文脈において説明される本発明の特定の特徴がまた、単一の実施形態で組み合わせて提供され得ることが理解される。逆に、簡潔にするために、単一の実施形態の文脈において説明される本開示の様々な特徴はまた、別個に、もしくは任意の好適な部分的組み合わせで、または本開示の任意の他の説明された実施形態において好適として提供され得る。様々な実施形態の文脈で説明されている特定の特徴は、実施形態がそれらの要素なしでは機能しない場合を除いて、それらの実施形態の本質的な特徴と見なされるべきではない。
本発明は、その特定の実施形態と併せて説明されているが、他の代替物、修正物、変形物、および均等物が当業者には明白であろうことは明らかである。したがって、発明の精神および添付の特許請求の範囲の広範な範囲内に入るそのような全ての代替物、修正物、変形物、および均等物を包含することが意図されている。さらに、上記の様々な実施形態は、例示的なブロック図、フローチャート、および他の図の観点から説明されている。当業者には明らかであるように、図示の実施形態およびそれらの様々な代替物は、図示の例に限定されることなく実装され得る。例えば、ブロック図とそれに付随する説明は、特定のアーキテクチャ、レイアウト、または構成を義務付けるものとして解釈されるべきではない。
「1つ以上」、「少なくとも」、「ただしこれらに限定されない」などの広義の単語や表現または他の同様の表現の存在は、場合によっては、そのような広義の表現が存在しない場合に、より狭義の場合が意図されているか、または必要とされていることを意味するものと解釈されないものとする。「モジュール」という用語の使用は、モジュールの一部として説明または請求されている構成要素または機能が全て共通のパッケージで構成されていることを示唆しない。実際、モジュールの様々な構成要素のいずれかまたは全ては、制御ロジックまたは他の構成要素に関係なく、単一のパッケージに組み合わせるか、個別に維持することができ、さらに複数のグループもしくはパッケージに、または複数の場所に分散させることができる。
さらに、実施形態は、ハードウェア、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語、またはそれらの任意の組み合わせに実装され得る。ソフトウェア、ファームウェア、ミドルウェア、またはマイクロコードに実装されるときに、必要なタスクを実行するためのプログラムコードまたはコードセグメントは、記憶媒体などのコンピュータ可読媒体に記憶され得る。プロセッサは必要なタスクを実行し得る。
本明細書で言及する全ての公開物、特許、および特許出願は、各個々の公開物、特許、または特許出願が、参照により本明細書に組み込まれることが具体的かつ個々に示されているのと同程度に、参照によりそれらの全体が本明細書に組み込まれる。さらに、本出願における任意の参考文献の引用または確認は、そのような参考文献が本開示の先行技術として利用可能であることの承認として解釈されないものとする。節の見出しが使用されている限りにおいて、それらは必ずしも制限しているものとして解釈されるべきではない。開示された主題の範囲は、添付の特許請求の範囲によって定義され、上述の記載を読めば当業者には想起されるであろう、変形および修正と同様に、上記の様々な特徴の組み合わせ、および部分的組み合わせの両方を含む。

Claims (53)

  1. エリア内のオブジェクトの移動を管理するためのシステムであって、前記エリアは、第1のトポロジーにおける経路のネットワークを含み、前記システムは、
    前記経路のネットワークに沿った複数の場所に位置する複数の画像撮影デバイスであって、前記ネットワークの各経路および前記オブジェクトの画像が、2つ以上の画像撮影デバイスによって撮影され、前記画像撮影デバイスの各々は、
    前記撮影された画像を処理し、撮影された画像ごとに1つ以上のデルタファイルを作成するプリプロセッサユニットと、
    前記デルタファイルを送信するための送信ユニットと、を含む、複数の画像撮影デバイスと、
    中央制御ユニットであって、
    第1の通信ネットワークを介して前記複数の画像撮影デバイスと通信するための第1の通信インターフェースであって、前記中央制御ユニットは、前記画像撮影デバイスから前記デルタファイルを受信する、第1の通信インターフェースと、
    第2の通信ネットワークを介して前記オブジェクトと通信するための第2の通信インターフェースであって、前記中央制御ユニットは、前記オブジェクトと通信して、前記経路のネットワークに沿った前記オブジェクトの移動を制御する、第2の通信インターフェースと、
    処理ユニットであって、
    前記経路のネットワークと障害物マトリックス機能のマップを構築することであって、前記障害物マトリックス機能は、様々な時点での前記ネットワークの様々な経路の可用性と障害物を示す、構築することと、
    前記経路のネットワーク内の前記オブジェクトの前記移動を制御するための制御信号を生成することと、を行うための処理ユニットと、を含む中央制御ユニットと、
    較正機構であって、前記較正機構は、前記中央制御ユニットが、前記経路のネットワークに沿った1つ以上の既知のポイントをマークすることによって、前記経路のネットワークの前記マップと前記障害物マトリックス機能を較正することを可能にし、前記画像撮影デバイスは、前記マークされた既知のポイントの前記画像を撮影し、1つ以上の追加のデルタファイルを作成し、前記追加のデルタファイルを前記中央制御ユニットに送信する、較正機構と、を含み、
    前記オブジェクトは、前記ネットワークの経路に沿った前記オブジェクトの移動の通路において、障害物または予期しない危険を検出した場合に、前記オブジェクトが自律的かつ独立してそれ自体を制御することを可能にする安全オーバーライド機構を含み、前記安全オーバーライド機構は、
    前記オブジェクトが前記通路内の前記障害物または前記予期しない危険を検出することを可能にする感知デバイスと、
    前記オブジェクトが代替の移動通路を識別することを可能にする追加の制御デバイスと、を含む、システム。
  2. 前記第1の通信ネットワークおよび前記第2の通信ネットワークは、有線LAN接続、無線LAN接続、WiFi接続、Bluetooth接続、Zigbee接続、Z-Wave接続、またはイーサネット接続を含む、請求項1に記載のシステム。
  3. 前記第1の通信ネットワークおよび前記第2の通信ネットワークは、同じネットワークである、請求項1に記載のシステム。
  4. 前記第1の通信ネットワークおよび前記第2の通信ネットワークは、異なるネットワークである、請求項1に記載のシステム。
  5. 前記オブジェクトは、半自律型車両、自律型車両、ロボットデバイス、またはショッピングカートを含む、請求項1に記載のシステム。
  6. 前記エリアは、倉庫、ショッピングモール、工場、製造ユニット、組立ユニット、流通ユニット、または貨物ユニットを含む、請求項1に記載のシステム。
  7. 前記画像撮影デバイスは、前記エリア、前記オブジェクト、および前記マークされた既知のポイントの画像を一定の時間間隔で撮影する、請求項1に記載のシステム。
  8. 前記画像撮影デバイスは、前記エリア、前記オブジェクト、および前記マークされた既知のポイントの画像を、ユーザ入力を受信すると撮影する、請求項1に記載のシステム。
  9. 前記較正機構は、指向性レーザービームを使用して前記経路のネットワークに沿って前記ポイントをマークすることを可能にする1つ以上のミラー検流計を含む、請求項1に記載のシステム。
  10. 前記較正機構は、前記経路のネットワークに沿って前記ポイントをマークすることを可能にする、可視光線ビーム、赤外線ビーム、または紫外線ビームなどの電磁放射の投影されたトレーサービームを含む、請求項1に記載のシステム。
  11. 前記較正機構は、前記経路のネットワークに沿って前記ポイントをマークすることを可能にする超音波ビーコンを含む、請求項1に記載のシステム。
  12. 前記較正機構は、前記経路のネットワークに沿って提供されるバーコードまたはQRコードを含むサインマーカーを含む、請求項1に記載のシステム。
  13. 前記較正機構は、前記ネットワークの様々な経路に沿った既知のポイントで1つ以上の参照オブジェクトを追跡するための内部位置追跡システムを含み、前記較正機構は、
    前記1つ以上の参照オブジェクトの画像を撮影することと、
    前記撮影された画像を前記中央制御ユニットに送信することと、
    所与の時間での前記撮影された画像を前記参照オブジェクトの前記既知のポイントに関連付けることと、
    各カメラの視野のマップセグメントを準備し、前記マップセグメントから重複部分を識別し、前記マップセグメントをステッチして、前記エリアのマップを準備することと、を行うように動作可能である、請求項1に記載のシステム。
  14. 前記内部位置追跡システムは、1つ以上の自律型ロボット、半自律型ロボット、または前記画像撮影デバイスを含む、請求項13に記載のシステム。
  15. 前記較正機構は、前記ネットワークの様々な経路に沿って配置されたRFIDタグ付き品目を含む、請求項1に記載のシステム。
  16. 前記第1のトポロジーは、グリッドトポロジー、メッシュトポロジー、線形トポロジー、またはリングトポロジーを含む、請求項1に記載のシステム。
  17. 前記画像撮影デバイスは、アナログ静止画像カメラ、デジタル静止画像カメラ、ビデオカメラ、光学カメラ、レーザーカメラ、レーザー、または3D画像スキャナのうちの1つ以上を含む、請求項1に記載のシステム。
  18. エリア内のオブジェクトの前記移動を管理するためのシステムであって、前記エリアが複数の領域に分割されており、前記システムは、
    前記エリア内の複数の場所に位置する複数の画像撮影デバイスであって、前記エリアの各領域および前記オブジェクトの画像が、2つ以上の画像撮影デバイスによって撮影される、複数の画像撮影デバイスと、
    中央制御ユニットであって、
    第1の通信ネットワークを介して前記複数の画像撮影デバイスと通信するための第1の通信インターフェースであって、前記中央制御ユニットは、前記画像撮影デバイスから前記領域および前記オブジェクトの前記撮影された画像を受信する、第1の通信インターフェースと、
    第2の通信ネットワークを介して前記オブジェクトと通信するための第2の通信インターフェースであって、前記中央制御ユニットは、前記オブジェクトと通信して、前記エリア内の前記オブジェクトの移動を制御する、第2の通信インターフェースと、を含む中央制御ユニットと、
    前記エリア内の1つ以上の既知のポイントをマークするための較正機構であって、前記画像撮影デバイスは、前記マークされた既知のポイントの画像を撮影する、較正機構と、を含み、
    前記オブジェクトは、イベントが発生した場合に前記オブジェクトが自律的かつ独立してそれ自体を制御することを可能にする安全オーバーライド機構を含む、システム。
  19. 前記第1の通信ネットワークおよび前記第2の通信ネットワークは、有線LAN接続、無線LAN接続、WiFi接続、Bluetooth接続、Zigbee接続、Z-Wave接続、またはイーサネット接続を含む、請求項18に記載のシステム。
  20. 前記第1の通信ネットワークおよび前記第2の通信ネットワークは、同じネットワークである、請求項18に記載のシステム。
  21. 前記第1の通信ネットワークおよび前記第2の通信ネットワークは、異なるネットワークである、請求項18に記載のシステム。
  22. 前記オブジェクトは、半自律型車両、自律型車両、ロボットデバイス、またはショッピングカートを含む、請求項18に記載のシステム。
  23. 前記エリアは、倉庫、ショッピングモール、工場、製造ユニット、組立ユニット、流通ユニット、または貨物ユニットを含む、請求項18に記載のシステム。
  24. 前記イベントは、前記エリア内の前記オブジェクトの移動の通路における障害物または予期しない危険を検出することを含む、請求項18に記載のシステム。
  25. 前記安全オーバーライド機構は、感知デバイスおよび追加の制御デバイスを含み、前記感知デバイスは、前記オブジェクトが前記移動通路における前記障害物または前記予期しない危険を検出することを可能にし、前記追加の制御デバイスは、前記オブジェクトが代替の移動通路を識別することを可能にする、請求項24に記載のシステム。
  26. 前記画像撮影デバイスは、前記エリア、前記オブジェクト、および前記マークされた既知のポイントの画像を一定の時間間隔で撮影する、請求項18に記載のシステム。
  27. 前記画像撮影デバイスは、前記エリア、前記オブジェクト、および前記マークされた既知のポイントの画像を、ユーザ入力を受信すると撮影する、請求項18に記載のシステム。
  28. 前記画像撮影デバイスの各々は、撮影された画像ごとに1つ以上のデルタファイルを作成するように動作可能なプリプロセッサユニットを含む、請求項18に記載のシステム。
  29. 前記中央制御ユニットは、前記画像撮影デバイスから前記1つ以上のデルタファイルを受信し、前記デルタファイルを処理して、前記エリア内の前記オブジェクトの前記移動を制御するための制御信号を生成する、請求項28に記載のシステム。
  30. 前記中央制御ユニットは、前記受信された1つ以上のデルタファイルを使用して、前記エリアの経路ウェイネットワークのマップおよび障害物マトリックス機能をさらに構築し、前記障害物マトリックス機能は、様々な時点での前記経路ウェイネットワークの様々な経路の可用性および障害物を示す、請求項29に記載のシステム。
  31. 前記較正機構は、前記中央制御ユニットが、前記エリアの前記経路ウェイネットワークの前記マップおよび前記障害物マトリックス機能を較正することを可能にする、請求項30に記載のシステム。
  32. 前記較正機構は、指向性レーザービームを使用して前記経路ウェイネットワークの前記様々な経路に沿って前記ポイントをマークすることを可能にする1つ以上のミラー検流計を含む、請求項30に記載のシステム。
  33. 前記較正機構は、前記経路ウェイネットワークの前記様々な経路に沿って前記ポイントをマークすることを可能にする、可視光線ビーム、赤外線ビーム、または紫外線ビームなどの電磁放射の投影されたトレーサービームを含む、請求項30に記載のシステム。
  34. 前記較正機構は、前記経路ウェイネットワークの前記様々な経路に沿って前記ポイントをマークすることを可能にする超音波ビーコンを含む、請求項30に記載のシステム。
  35. 前記較正機構は、前記経路ウェイネットワークの前記様々な経路に沿って提供されるバーコードまたはQRコードを含むサインマーカーを含む、請求項30に記載のシステム。
  36. 前記較正機構は、前記経路ウェイネットワークの様々な経路に沿って配置されたRFIDタグ付き品目を含む、請求項30に記載のシステム。
  37. 前記較正機構は、前記経路ウェイネットワークの様々な経路に沿った既知の位置に配置された1つ以上の参照オブジェクトを追跡するための内部位置追跡システムを含み、前記較正機構は、
    前記1つ以上の参照オブジェクトの画像を撮影することと、
    前記撮影された画像を前記中央制御ユニットに送信することと、
    所与の時間での前記撮影された画像を前記参照オブジェクトの前記既知の位置に関連付けることと、
    各カメラの視野のマップセグメントを準備し、前記マップセグメントから重複部分を識別し、前記マップセグメントをステッチして、前記エリアのマップを準備することと、を行うように動作可能である、請求項30に記載のシステム。
  38. 前記内部位置追跡システムは、1つ以上の自律型ロボット、半自律型ロボット、または前記画像撮影デバイスを含む、請求項27に記載のシステム。
  39. 前記第1のトポロジーは、グリッドトポロジー、メッシュトポロジー、線形トポロジー、またはリングトポロジーを含む、請求項18に記載のシステム。
  40. 前記画像撮影デバイスは、アナログ静止画像カメラ、デジタル静止画像カメラ、ビデオカメラ、光学カメラ、レーザーカメラ、レーザー、または3D画像スキャナのうちの1つ以上を含む、請求項18に記載のシステム。
  41. エリア内のオブジェクトの移動を制御するための方法であって、前記エリアは、第1のトポロジーにおける経路のネットワークを含み、前記方法は、
    複数の画像撮影デバイスによって、前記ネットワークの各経路および前記オブジェクトの複数の画像を撮影することであって、前記ネットワークの各経路および前記オブジェクトの前記画像は、2つ以上の画像撮影デバイスによって撮影される、撮影することと、
    前記複数の画像撮影デバイスによって前記撮影された画像を処理して、1つ以上のデルタファイルを作成することと、
    前記1つ以上のデルタファイルを中央制御ユニットに送信することと、
    前記中央制御ユニットによって、前記経路のネットワークのマップと障害物マトリックス機能を構築することであって、前記障害物マトリックス機能は、様々な時点での前記ネットワークの様々な経路の可用性と障害物を示す、構築することと、
    前記中央制御ユニットによって、前記経路のネットワーク内の前記オブジェクトの前記移動を制御するための制御信号を生成することと、
    前記中央制御ユニットによって、前記制御信号を前記オブジェクトに送信することと、を含む、方法。
  42. 前記経路のネットワークに沿って1つ以上の既知のポイントをマークすることをさらに含む、請求項41に記載の方法。
  43. 前記画像撮影デバイスは、前記マークされた既知のポイントの画像を撮影し、1つ以上の追加のデルタファイルを作成し、前記追加のデルタファイルを前記中央制御ユニットに送信する、請求項42に記載の方法。
  44. 前記中央制御ユニットによって、前記追加のデルタファイルを使用して、前記経路のネットワークの前記マップおよび前記障害物マトリックス機能を較正することをさらに含む、請求項43に記載の方法。
  45. 前記経路のネットワークに沿った前記1つ以上の既知のポイントのマーキングは、1つ以上のミラー検流計から放出される指向性レーザービームを使用して行われる、請求項42に記載の方法。
  46. 前記経路のネットワークに沿った前記1つ以上の既知のポイントのマーキングは、可視光線ビーム、赤外線ビーム、または紫外線ビームなどの電磁放射の投影されたトレーサービームを使用して行われる、請求項42に記載の方法。
  47. 前記経路のネットワークに沿った前記1つ以上の既知のポイントのマーキングは、超音波ビーコンを使用して行われる、請求項42に記載の方法。
  48. 前記経路のネットワークに沿った前記1つ以上の既知のポイントのマーキングは、前記経路のネットワークに沿って提供されるバーコードまたはQRコードを含むサインマーカーを使用して行われる、請求項42に記載の方法。
  49. 前記経路のネットワークに沿った前記1つ以上の既知のポイントのマーキングは、前記ネットワークの様々な経路に沿って配置されたRFIDタグ付き品目を使用して行われる、請求項42に記載の方法。
  50. 内部位置追跡システムを使用して、前記経路のネットワークの前記マップおよび前記障害物マトリックス機能を較正することをさらに含み、前記内部位置追跡システムは、
    前記ネットワークの様々な経路に沿った既知の位置に配置された1つ以上の参照オブジェクトの画像を撮影することと、
    前記撮影された画像を前記中央制御ユニットに送信することと、
    所与の時間での前記撮影された画像を前記既知の位置に関連付けることと、
    各内部位置追跡システムの視野のためのマップセグメントを準備することと、
    前記マップセグメントから重複部分を識別することと、
    前記マップセグメントをステッチして、前記エリアのマップを準備することと、を実行する、請求項41に記載の方法。
  51. 前記内部位置追跡システムが、1つ以上の自律型ロボット、半自律型ロボット、または前記画像撮影デバイスを含む、請求項50に記載の方法。
  52. オブジェクト内に組み込まれた安全オーバーライド機構を使用して、エリア内の前記オブジェクトの移動を制御することをさらに含み、前記安全オーバーライド機構は、
    前記オブジェクトの前記移動通路における障害物または予期しない危険を感知することと、
    前記オブジェクトの代替の移動通路を識別することと、を実行する、請求項41に記載の方法。
  53. 前記第1のトポロジーは、グリッドトポロジー、メッシュトポロジー、線形トポロジー、またはリングトポロジーを含む、請求項41に記載の方法。

JP2021569595A 2019-02-11 2019-09-27 複数の自律型車両を管理するためのシステムおよび方法 Pending JP2022519788A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962803669P 2019-02-11 2019-02-11
US62/803,669 2019-02-11
PCT/IB2019/058209 WO2020165638A1 (en) 2019-02-11 2019-09-27 Systems and methods for managing multiple autonomous vehicles

Publications (1)

Publication Number Publication Date
JP2022519788A true JP2022519788A (ja) 2022-03-24

Family

ID=72044615

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021569595A Pending JP2022519788A (ja) 2019-02-11 2019-09-27 複数の自律型車両を管理するためのシステムおよび方法

Country Status (6)

Country Link
US (2) US11520344B2 (ja)
EP (1) EP3924868A4 (ja)
JP (1) JP2022519788A (ja)
KR (1) KR20210137049A (ja)
IL (1) IL285517B (ja)
WO (1) WO2020165638A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019101569A1 (de) * 2019-01-23 2020-07-23 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum fahrerlosen Umsetzen eines Fahrzeugs über eine Strecke innerhalb eines abgeschlossenen Geländes
EP3924868A4 (en) * 2019-02-11 2022-11-30 643AI Ltd. SYSTEMS AND PROCEDURES FOR MANAGEMENT OF MULTIPLE AUTONOMOUS VEHICLES
US11724883B2 (en) * 2020-09-11 2023-08-15 Locus Robotics Corp. Presort system for executing robot-assisted putaway tasks
JP7322902B2 (ja) * 2021-01-13 2023-08-08 トヨタ自動車株式会社 運転支援サーバ及びシステム
DE102021104920A1 (de) * 2021-03-02 2022-09-08 Jungheinrich Aktiengesellschaft Verfahren zum kalibrieren von koordinatensystemen in flurförderzeugen
US20220344187A1 (en) * 2021-04-23 2022-10-27 Taiwan Semiconductor Manufacturing Company, Ltd. Mobile stocker and methods of operation

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5828848A (en) * 1996-10-31 1998-10-27 Sensormatic Electronics Corporation Method and apparatus for compression and decompression of video data streams
US5822542A (en) * 1996-10-31 1998-10-13 Sensormatic Electronics Corporation Electronic and structural components of an intelligent video information management apparatus
US9151692B2 (en) * 2002-06-11 2015-10-06 Intelligent Technologies International, Inc. Asset monitoring system using multiple imagers
JP3945279B2 (ja) * 2002-03-15 2007-07-18 ソニー株式会社 障害物認識装置、障害物認識方法、及び障害物認識プログラム並びに移動型ロボット装置
JP3879848B2 (ja) * 2003-03-14 2007-02-14 松下電工株式会社 自律移動装置
US7839289B2 (en) * 2004-08-26 2010-11-23 Avante International Technology, Inc. Object monitoring, locating, and tracking system and method employing RFID devices
KR100933539B1 (ko) * 2007-12-11 2009-12-23 포스데이타 주식회사 이동로봇의 주행 제어 방법 및 이를 이용한 이동 로봇
KR100973016B1 (ko) * 2008-08-11 2010-07-30 삼성전기주식회사 원격 감시 장치
US9214074B1 (en) * 2008-08-29 2015-12-15 Target Brands, Inc. Video monitoring system for a path
US8473141B2 (en) * 2008-12-11 2013-06-25 Kabushiki Kaisha Yaskawa Denki Robot system
US8625973B2 (en) * 2009-10-30 2014-01-07 Verint Systems, Inc. Method and apparatus for operating a video system
US10705528B2 (en) * 2015-12-15 2020-07-07 Qualcomm Incorporated Autonomous visual navigation
US10732643B2 (en) * 2016-04-07 2020-08-04 Hitachi, Ltd. Control system, moving object, and control apparatus
CN115855022A (zh) * 2017-04-07 2023-03-28 辉达公司 使用深度神经网络执行自主路径导航
US10598760B2 (en) * 2017-08-23 2020-03-24 Blackberry Limited Determining locations of cargo transportation units using image data
CN109960247B (zh) * 2017-12-14 2023-08-29 深圳富联富桂精密工业有限公司 中央控制器、移动导航系统及方法
EP3924868A4 (en) * 2019-02-11 2022-11-30 643AI Ltd. SYSTEMS AND PROCEDURES FOR MANAGEMENT OF MULTIPLE AUTONOMOUS VEHICLES

Also Published As

Publication number Publication date
IL285517B (en) 2021-12-01
KR20210137049A (ko) 2021-11-17
US11520344B2 (en) 2022-12-06
EP3924868A1 (en) 2021-12-22
US20220083063A1 (en) 2022-03-17
IL285517A (en) 2021-09-30
EP3924868A4 (en) 2022-11-30
US20230032233A1 (en) 2023-02-02
WO2020165638A1 (en) 2020-08-20

Similar Documents

Publication Publication Date Title
JP2022519788A (ja) 複数の自律型車両を管理するためのシステムおよび方法
RU2587641C2 (ru) Способ и система для совместного использования информации карт, связанной с автоматическими промышленными транспортными средствами
US8508590B2 (en) Method and apparatus for simulating a physical environment to facilitate vehicle operation and task completion
CN108027915B (zh) 利用语义映射的机器人导航
CN109196433B (zh) 使用规划的机器人行进路径的导航
US9505554B1 (en) Capturing packaging image via scanner
US9688472B1 (en) Mobile robot manipulator
US8396591B2 (en) System and method for data collection and analysis using robotic devices
RU2542932C1 (ru) Улучшенный способ и система обработки информации карт для навигации промышленных транспортных средств
EP2583147B1 (en) Method and apparatus for managing and controlling manned and automated utility vehicles
KR20170134351A (ko) 상품을 취급하기 위한 방법 및 장치
JP2005320074A (ja) 物品探索収集装置およびプログラム
CN113632117A (zh) 仓库管理方法和系统
US10628790B1 (en) Automated floor expansion using an unmanned fiducial marker placement unit
EP4004669B1 (en) Self-driving system with tag reader
US11117263B2 (en) Method and apparatus for labeling of support structures
US20220402698A1 (en) Transport control device, transport control method, and computer-readable storage medium
US20200241551A1 (en) System and Method for Semantically Identifying One or More of an Object and a Location in a Robotic Environment
US20200074676A1 (en) Management system, storage medium, position calculation method, and management apparatus
JP2017214196A (ja) 自動倉庫システムおよび自動倉庫の管理方法
JP2017214197A (ja) 管理システム、管理方法および情報処理装置
US11015938B2 (en) Method, system and apparatus for navigational assistance
JP4962048B2 (ja) 仕分け作業支援プログラム、および仕分け作業支援方法
JP6690411B2 (ja) 管理システム、管理方法および搬送システム
JP2019063953A (ja) 作業システム、作業システムの制御方法及びプログラム