JP2019521053A - 振動テーブルを含む自動アイテムシンギュレーション - Google Patents

振動テーブルを含む自動アイテムシンギュレーション Download PDF

Info

Publication number
JP2019521053A
JP2019521053A JP2018566948A JP2018566948A JP2019521053A JP 2019521053 A JP2019521053 A JP 2019521053A JP 2018566948 A JP2018566948 A JP 2018566948A JP 2018566948 A JP2018566948 A JP 2018566948A JP 2019521053 A JP2019521053 A JP 2019521053A
Authority
JP
Japan
Prior art keywords
singulation
item
items
collection
location
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018566948A
Other languages
English (en)
Other versions
JP6690026B2 (ja
Inventor
ジョン ステュアート バトルス
ジョン ステュアート バトルス
マーティン ピーター アールンド
マーティン ピーター アールンド
トビー ジー スー
トビー ジー スー
サミュエル ガードナー ギャレット
サミュエル ガードナー ギャレット
ヤン ヤン
ヤン ヤン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Amazon Technologies Inc
Original Assignee
Amazon Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Amazon Technologies Inc filed Critical Amazon Technologies Inc
Publication of JP2019521053A publication Critical patent/JP2019521053A/ja
Application granted granted Critical
Publication of JP6690026B2 publication Critical patent/JP6690026B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G1/00Storing articles, individually or in orderly arrangement, in warehouses or magazines
    • B65G1/02Storage devices
    • B65G1/04Storage devices mechanical
    • B65G1/137Storage devices mechanical with arrangements or automatic control means for selecting which articles are to be removed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G27/00Jigging conveyors
    • B65G27/04Load carriers other than helical or spiral channels or conduits
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/02Devices for feeding articles or materials to conveyors
    • B65G47/04Devices for feeding articles or materials to conveyors for feeding articles
    • B65G47/12Devices for feeding articles or materials to conveyors for feeding articles from disorderly-arranged article piles or from loose assemblages of articles
    • B65G47/14Devices for feeding articles or materials to conveyors for feeding articles from disorderly-arranged article piles or from loose assemblages of articles arranging or orientating the articles by mechanical or pneumatic means during feeding
    • B65G47/1407Devices for feeding articles or materials to conveyors for feeding articles from disorderly-arranged article piles or from loose assemblages of articles arranging or orientating the articles by mechanical or pneumatic means during feeding the articles being fed from a container, e.g. a bowl
    • B65G47/1478Devices for feeding articles or materials to conveyors for feeding articles from disorderly-arranged article piles or from loose assemblages of articles arranging or orientating the articles by mechanical or pneumatic means during feeding the articles being fed from a container, e.g. a bowl by means of pick-up devices, the container remaining immobile
    • B65G47/1485Devices for feeding articles or materials to conveyors for feeding articles from disorderly-arranged article piles or from loose assemblages of articles arranging or orientating the articles by mechanical or pneumatic means during feeding the articles being fed from a container, e.g. a bowl by means of pick-up devices, the container remaining immobile using suction or magnetic forces
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/22Devices influencing the relative position or the attitude of articles during transit by conveyors
    • B65G47/26Devices influencing the relative position or the attitude of articles during transit by conveyors arranging the articles, e.g. varying spacing between individual articles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/74Feeding, transfer, or discharging devices of particular kinds or types
    • B65G47/90Devices for picking-up and depositing articles or materials
    • B65G47/902Devices for picking-up and depositing articles or materials provided with drive systems incorporating rotary and rectilinear movements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G2203/00Indexing code relating to control or detection of the articles or the load carriers during conveying
    • B65G2203/04Detection means
    • B65G2203/041Camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Robotics (AREA)
  • Specific Conveyance Elements (AREA)
  • Feeding Of Articles To Conveyors (AREA)
  • Attitude Control For Articles On Conveyors (AREA)
  • Manipulator (AREA)

Abstract

自動アイテムシンギュレーション用のシステム、方法、及び器具が記載される。本システムは、シンギュレーションステーション(205)を含み、そこに第1のロボット装置(202)によって複数の異種アイテムを配置し、これらを振動によって上記のシンギュレーションテーブルの上に移行させる。シンギュレーションテーブルが作動し、シンギュレーションテーブルの動きにより、アイテムが、重なり合わないよう配置され、互いに対して距離を置いて分離され、シンギュレーションテーブルに沿って採取コンベヤ(214)に向かって移行する。重なり合わないよう配置されて分離されたアイテムが採取コンベヤ上に到着すると、それらは検出され、第2のロボット装置(204)によって個別に採取され、シンギュレーションステーションから移行される。【選択図】図2

Description

優先権
本出願は、2016年6月27日に出願された「Automated Item Singulation」と題する米国特許出願第15/193,495号の利益を主張するものであり、参照によりその全体が本明細書に組み込まれる。
多くの企業は、荷役設備が提供しているアイテム及び/またはアイテム群の保管、梱包、及び出荷を行う。例えば、多くの電子商取引会社といくらかの旧来の小売会社とは、荷役設備に在庫を格納し、荷役設備から様々な目的地(例えば、顧客、店舗)にアイテムを出荷する。荷役設備における在庫の受入れ、荷役設備内の在庫の保管、荷役設備からのアイテムの出荷、及び荷役設備内のアイテムの(例えば、入荷から保管まで、及び/または保管から出荷までの)全般的な流れまたは移動は、多くの場合、労働集約的である。多くの場合、個々のアイテムは、設備を通り抜けるそのアイテムの特定の流れの間に、複数の人間のエージェントによって取り扱われる。複数人のやりとりは、アイテムを扱うためのコスト、荷役設備を通り抜けるアイテムの流れを完了させるのに要する時間、及びアイテムの誤った取扱いの機会を増大させる。
発明を実施するための形態を、添付図面を参照しながら説明する。図面において、参照番号の最も左の桁(複数可)は、参照番号が現れる図を明らかにする。
一実施態様による、荷役設備の運用の全体像を示す。 一実施態様による、シンギュレーションステーションを示す。 一実施態様による、シンギュレーションステーションの別図を示す。 一実施態様による、シンギュレーションステーションのインダクションロボット及びシンギュレーションテーブルの図を示す。 一実施態様による、シンギュレーションステーションの採取ロボット装置及び採取コンベヤの図を示す。 一実施態様による、図5に示す採取ロボットの収斂性エンドエフェクタの詳細図を示す。 一実施態様による、シンギュレーションステーションにアイテムを導き入れるアイテムインダクションプロセス例を示すフロー図である。 一実施態様による、シンギュレーションステーションでアイテムを採取するアイテム採取プロセス例を示すフロー図である。 一実施態様による、コンピュータシステム例を示すブロック図である。
本明細書には例として実施態様が記載されているが、当業者であれば、この実施態様が、記載される例または図に限定されるものではないことが認識されるはずである。図面及びその詳細な説明は、実施態様を、開示される特定の形態に限定することを意図するものではなく、むしろ添付の特許請求の範囲によって定義される趣旨及び範囲に含まれるあらゆる変更、均等物及び代替物を包含することを意図するものと理解されるべきである。本明細書で使用される見出しは、編成上のためだけのものであり、明細書及び特許請求の範囲の範囲を限定するのに使用されることを意図するものではない。本出願全体を通して使用される「〜することができる(may)」という語は、強制的な意味(すなわち、「〜しなければならない」を意味する)ではなく、許容的な意味(すなわち、「〜する可能性がある」を意味する)で使用される。同様に、「含む(include)」、「含んでいる(including)」、及び「含む(includes)」という語は、「〜を含むが、その〜に限定されない」ことを意味する。
自動アイテムシンギュレーション用のシステム、方法、及び器具が記載される。本システムは、シンギュレーションステーションを含み、そこで複数の異種アイテムをそのシンギュレーションステーションのシンギュレーションテーブルの上に移行させることができる。例えば、第1のロボット装置は、複数の様々なアイテムを含むトートを入荷することができ、その一部または全部が、別種及び/または別サイズのものであってもよい。ロボット装置は、トートからシンギュレーションテーブルの上にアイテムを移行させる。一実施態様では、ロボット装置は、アイテムが重力の下にトートからシンギュレーションテーブルの上に移行するように、トートを回転させることによってアイテムを移行させることができる。
アイテムがシンギュレーションテーブルに移行するとき、アイテムのいくつかは互いに、接触しているか、部分的に重なり合っているか、立てかけられている(本明細書では重なり合うよう配置されると称する)場合がある。以下にさらに説明するように、シンギュレーションテーブルは、シンギュレーションパターンに従って動く(例えば、振動する)ように構成される。シンギュレーションテーブルの動きによって、アイテムが接触しなくなるように、及び/または重なり合って配置されなくなるように、アイテムは、互いに対して距離を置いて重なり合わないよう配置されて分離する。さらに、シンギュレーションテーブルの表面材料、構成、勾配、及び/または動きによって、アイテムは、シンギュレーションテーブル伝いに採取コンベヤの方へ移行する。アイテムが採取コンベヤに到達するときに、アイテムは、採取コンベヤによって、採取場所に搬送される。
アイテムが採取場所内にある場合、そのアイテムは第2のロボット装置によって検出されて採取される。以下にさらに説明するように、第2のロボット装置は収斂性エンドエフェクタを含むことができ、収斂性エンドエフェクタは、吸引、接着、電気接着、または磁気のうちの少なくとも1つを利用して、採取場所からアイテムを採取し、そのアイテムをシンギュレーションステーションから移行させる。
本明細書で説明するように、シンギュレーションステーションの実施態様を、荷役設備内の様々な段階で利用することができる。例えば、荷役設備に最初に入荷されるときに、異種アイテムを分離するために、入荷ステーションでシンギュレーションステーションを利用することができる。アイテム入荷時のそのようなシンギュレーションは、分離されたアイテムが識別スキャナを通過して正確に識別され得るように、有益であり得る。例えば、アイテムが1つ以上のビジュアルタグ(例えば、バーコード、ボーコードなど)及び/またはアクティブタグもしくはパッシブタグ(例えば、無線自動識別(RFID)タグ)を含む場合、分離アイテムは、タグを基にアイテムを検出して識別するタグ識別システムを、自律的に通過することができる。
別の例として、シンギュレーションステーションは、採取されたアイテムを分離するために仕分けステーションで利用されてもよく、そのようにして、それらのアイテムが関連付けられた注文に従って、それらが個別の梱包ステーションに転送され得る。例えば、エージェントは、同種または別種の複数の個別のアイテムを同じトートの中に採取することができる。これらのアイテムの一部または全ては、別々の注文に関連付けられている場合がある。アイテムのトートが仕分けステーションに到着すると、アイテムはシンギュレーションステーションに移行され、分離され、シンギュレーションステーションから自律的に移行して、各アイテムが関連付けられた注文に従って転送される。
本明細書で使用する「出荷セット」とは、荷役設備を通って処理されて、荷役設備から出荷されるか、または他の方法で搬送されることになる1つ以上のアイテムのことである。出荷セットには、注文の全てのアイテム、注文の全てよりも少ないアイテム、荷役設備から別の場所へ(例えば、別の荷役設備へ)移送されることになる1つ以上のアイテムなどが含まれ得る。
一実施態様において、本明細書に記載の様々なシステム及び方法を利用するように構成された荷役設備であり得る荷役設備のブロック図を、図1に示す。この例では、複数の顧客100が、電子商取引用ウェブサイトなどの配給元に注文120を出すことができ、各注文120は、顧客に出荷されることになる1つ以上のアイテム、または注文に指定された別のエンティティに出荷されることになる1つ以上のアイテムを在庫130から指定する。
荷役設備には、典型的には、様々な業者から出荷される仕入れ品を入荷し、入荷した仕入れ品を在庫130に格納する入荷作業180が含まれる。注文120を履行するために、図のようにピッキング作業140によって、各注文で指定された1つ以上のアイテムを、荷役設備の在庫130(仕入れ品保管庫と称する場合もある)から取り出すか、または「ピッキングする」ことができる。一部の実施態様では、注文のアイテムは、フルフィルメント指示が生成される前に、プラニングサービスによって、フルフィルメント用に複数の出荷セットに分割されてもよい(図示せず)。
在庫場所からのアイテムのピッキングを、さまざまなピッキング技法のいずれかを使用して行うことができる。例えば、アイテムは、ピッキングされるべきアイテムを示すピッキングリストを受け取った人間のピッキングエージェントによってピッキングされてもよい。ピッキングリスト上のアイテムは、同一の及び/または別々の注文に対応する場合がある。これの代わりに、またはこれに加えて、モバイルドライブ装置などの1つ以上の自動化技術を使用して、在庫場所からアイテムをピッキングすることができる。理解されるように、エージェントまたはロボット装置は、様々なアイテム、別々の注文に関連するアイテムの一部もしくは全部、及び/または別種のアイテムをピッキングすることができる。エージェントがアイテムをピッキングするとき、トートが満杯になるか、エージェントがアイテムのピッキングを完了するまで、アイテムは全て同じトートに収納される。
ピッキングされたアイテムでトートが満たされたときに、トートを、アイテムのそれぞれの注文または出荷セットに仕分けするために、仕分けステーション150に転送する。アイテムは、任意の順序で仕分けステーションに到着してもよく、仕分けステーション150は、アイテムを対応する出荷セットに仕分けする。ピッキングされたアイテムは、アイテムのそれぞれの出荷セットへの仕分け作業150のために、荷役設備内の1つ以上のステーションに配送され、次いで出荷セットのアイテムを容器に詰め込む1つ以上の梱包ステーション160に移送することができる。転送作業165では、梱包済みアイテムを顧客へ出荷する目的で、梱包された注文品を出荷作業170のために仕分けすることができる。これの代わりに、またはこれに加えて、仕分けされたアイテムを、荷役設備内の他の処理ステーションに転送する、他の荷役設備に転送するなど、してもよい。
ここで留意すべきは、ピッキング、梱包、及び出荷がなされた出荷セットには、必ずしも顧客が注文したアイテムの全てが含まれているわけではないということである。つまり、出荷される出荷セットには、1つのフルフィルメント設備から一度に出荷可能な注文アイテムのサブセットのみを含めることができる。また、荷役設備の様々な作業は、1つの建物もしくは設備で行われてもよいし、またはその代わりに2つ以上の建物もしくは設備にわたって分散し、もしくはさらに分割されて行われてもよいことに留意されたい。
ここで留意すべきは、図1によって示される作業の割付及び順序は、多くのあり得る荷役設備作業の実施態様の単なる一例に過ぎないことである。他のタイプの荷役設備、製造設備または受注処理設備は、様々な実施態様に従って、異なった、より少ない、または追加の操作及び設備を含むことができる。荷役設備は、アイテムが処理される任意の種類の設備であってよく、荷役設備には、受注処理センター、レンタルセンター、小売業者センター、物流センター、梱包設備、出荷施設、図書館、美術館、倉庫保管施設などが含まれるがこれらに限定されない。
図2は、一実施態様による、シンギュレーションステーション200を示す。シンギュレーションステーションは、トート受入れ場所220、第1のロボット装置202、シンギュレーションテーブル205、採取コンベヤ214、採取場所215、及び第2のロボット装置204を含む。シンギュレーションステーション200またはその近くに、1つ以上の撮像素子216−1、216−2を備え、アイテムがシンギュレーションステーション200を通って移行するときに、アイテムの画像を取得するように構成することもできる。撮像素子216−1、216−2は、第1のロボット装置202、第2のロボット装置204、シンギュレーションテーブル205、及び採取コンベヤ214と共に、シンギュレーションコントローラ222と通信し、シンギュレーションコントローラ222によって制御することができる。
シンギュレーションコントローラ222は、荷役設備に対してローカルであってもリモートであってもよい、1つ以上のコンピューティング資源上で動作させることができる。コンピューティング資源は、プロセッサ、ストレージ、ソフトウェア、データアクセス、及び、ネットワークを介して維持されてアクセス可能な他のコンポーネントのコンピューティングインフラストラクチャとして実装されるネットワークアクセス可能なコンピューティングプラットフォームの一部を形成してもよい。シンギュレーションステーション200のコンポーネントは、有線技術(例えば、ワイヤ、USB、光ファイバケーブルなど)、無線技術(例えば、RF、セルラ、衛星、ブルートゥース(登録商標)など)、及び/または他の接続技術に相当し得るネットワークを介して、コンピューティング資源に通信可能に結合することができる。
コンピューティング資源は、一般にデータセンターで使用されるサーバファーム、スタックなど、いくつもの方法で配置され得る1つ以上のサーバを含むことができる。さらに、サーバは、シンギュレーションコントローラ222を格納し得る1つ以上のプロセッサ及びメモリを含むことができる。
トート受入れ場所220は、第1のロボット装置202に係合されて操作され得るトートを受け入れるための、第1のロボット装置に隣接する任意の空間または構成であってもよい。一部の実施態様では、複数のトートを含むパレットまたはカートであって、各トートが複数のアイテムを含むパレットまたはカートを、トート受入れ場所220に配置することができる。一部の実施態様では、トートは、1人以上のエージェントによって荷役設備の在庫場所からピッキングされたアイテムを含むことができ、アイテムは様々な出荷セットに対応することができる。同様に、トートは様々なサイズ及び形状であってもよく、その各々は第1のロボット装置による係合を可能にする係合場所を備え得る。
第1のロボット装置202は、トート受入れ場所220でトートを係合すること、トートをシンギュレーションテーブル205上に移動させること、及びアイテムが重力の下にトートからシンギュレーションテーブル205上に移行するように、トートを回転させることができる任意の種類の自律的な装置であり得る。一実施態様では、第1のロボット装置は、フック、クランプ、及び/または、トートの係合、持上げ、移動、及び回転が可能な他形態のリフトで構成される6方向で位置決め可能なロボットアームであってもよい。
他の実施態様では、第1のロボット装置202は、単一軸のメカトロニクス装置であってもよく、この装置は、その軸を中心に回転して、アイテムを受入れ場所206の上に移行させるように構成される。さらに別の例では、第1のロボット装置202は、複数のアイテム及び/または、複数のアイテムを含むトートを係合するように構成された、無人航空機(UAV)などの航空機であってもよく、係合したアイテムをシンギュレーションステーション200まで空中輸送して、係合した複数のアイテムを受入れ場所206の上に移行させる。さらに、シンギュレーションステーションは、第1のロボット装置202なしで構成されてもよく、アイテムは、シンギュレーションステーションの受入れ場所206に手動で移行されてもよい。例えば、人間であるエージェントが、複数のアイテムを含むトートを受け取り、それらのアイテムをトートから受入れ場所206の上に移行させてもよい。
図3〜図4に関して以下にさらに説明するように、シンギュレーションテーブル205は1つ以上の分割部分を含むことができ、その各々を一緒にまたは個別に稼働させることができる。図示される実施態様において、シンギュレーションテーブル205は受入れ場所206を含み、第1のロボット装置が最初にトートからアイテムをその上に移行させる。シンギュレーションテーブル205の受入れ場所206は、ほぼ水平の向きになっていてよい。他の実施態様では、受入れ場所206が、正の順方向勾配、負の順方向勾配、いずれかの向きの側方勾配、または順方向勾配(正または負)と側方勾配との組合せのいずれかであるように、受入れ場所206は傾斜していてもよい。同様に、全体的な表面の形状は、だいたいにおいて、平面、クラウン形状、ドーム形、凹形、凸形、不規則形状、または任意の他の形状もしくは形状の組合せであってもよい。さらに、アイテムが上に置かれる受入れ場所の上面を形成する材料は、様々な素材のうちの任意の1つ以上で形成されてもよい。例えば、シンギュレーションテーブル205の受入れ場所206の上面は、金属、プラスチック、ゴム、布地、カーペット、木材、タイル、ナイロンなどであってもよい。一部の実施態様では、受入れ場所の種々の部分が、異なった材料で形成されてもよく、及び/または異なった形状を有してもよく、それによって受入れ場所のその部分に置かれるアイテムとそのアイテムとの間に、異なる摩擦係数をもたらす。例えば、軽量アイテムを分離するのに有益な第1の摩擦係数をもたらす第1の材料が、仕分けテーブルの第1の区分に含まれてもよく、より重いアイテムを分離するのに有益な第2の摩擦係数をもたらす第2の材料が、仕分けテーブルの第2の区分に含まれてもよい。
潜在的に様々な構成(形状、材料、角度)を有するシンギュレーションテーブルの受入れ場所206に加えて、受入れ場所がアクティブであってもよい。具体的には、シンギュレーションテーブル205の受入れ場所206を、例えば、モータ、サーボ機構、発振器などのアクチュエータに結合させてもよく、このアクチュエータが、アイテムが上に置かれる受入れ場所206の表面を震わせる、揺らす、振り動かす、または他の方法で動かす。一部の実施態様では、アクチュエータが、異なる時間に、及び/または受入れ場所の異なる部分に沿って、異なる形態の動きを引き起こすように、受入れ場所206を複数のアクチュエータに結合させてもよい。以下にさらに説明するように、受入れ場所206の動きは、受入れ場所の構成と単独で、または受入れ場所の構成と関連して、受入れ場所に配置されたアイテムを、受入れ場所に沿って物理的に移行または移動させ、互いから距離を置いて重なり合わないよう配置して分離させる。
シンギュレーションテーブル205の受入れ場所206が動くとき、アイテムは、受入れ場所206に沿ってシンギュレーションテーブル205の接合区分208に向かい、その上に移行する。シンギュレーションテーブル205の接合区分208は、受入れ場所と同じように、様々な形状、サイズ、表面材料、及び/または他の特性を有し得る。図示の例では、接合区分208は、約180度のターンを含み、アイテムが接合区分208を通って移行する際に、アイテムが各段を移り降りるように、受入れ場所206から下方への一続きの段として段階的に接続され得る。
受入れ場所206と同様に、シンギュレーションテーブル205の接合区分208は、ほぼ水平の向きになっていてよい。他の実施態様では、接合区分208は一続きの段を含み、接合区分208が、正の順方向勾配、負の順方向勾配、いずれかの向きの側方勾配、または順方向勾配(正または負)と側方勾配との組合せのいずれかであるように、接合区分208は傾斜していてもよい。同様に、接合区分208の全体的な表面の形状は、だいたいにおいて、平面、クラウン形状、ドーム形、凹形、凸形、不規則形、または他の任意の形状であってもよい。さらに、アイテムが上に置かれる接合区分208の上面を形成する材料は、様々な素材のうちの任意の1つ以上で形成されてもよい。例えば、シンギュレーションテーブル205の接合区分208の上面は、金属、プラスチック、ゴム、布地、カーペット、木材、タイル、ナイロンなどであってもよい。一部の実施態様では、接合区分208の種々の部分が、異なった材料で形成されてもよく、及び/または異なった形状を有してもよく、それによって各種のアイテムに伴って異なる摩擦係数をもたらす。
潜在的に様々な構成(形状、材料、角度)を有するシンギュレーションテーブルの接合区分208に加えて、受入れ場所と同じように、接合区分208がアクティブであってもよい。具体的には、シンギュレーションテーブル205の接合区分208を、例えば、モータ、サーボ機構、発振器などのアクチュエータに結合させてもよく、このアクチュエータが、接合区分208の表面を震わせる、揺らす、振り動かす、または他の方法で動かす。一部の実施態様では、受入れ場所206の表面領域を動かすアクチュエータを使用して、接合区分208の表面を動かすこともできる。他の実施態様では、受入れ場所のアクチュエータとは別個の1つ以上のアクチュエータを使用することによって、接合区分208を動かすことができる。例えば、アクチュエータが、異なる時間に、及び/または接合区分の異なる部分に沿って、異なる形態の動きを引き起こすように、接合区分208を複数のアクチュエータに結合させてもよい。
別々のアクチュエータを使用してシンギュレーションテーブルの種々の区分を動かす実施態様では、そのシンギュレーションテーブルの種々の区分を、別々のシンギュレーションパターンに従って動かしてもよい。これは、別種の複数アイテムが異なった特性を有する場合に有益であり得る。例えば、軽いアイテムは、第1のシンギュレーションパターンに由来する動きに応答して、表面に沿って良好に移行及び移動をなし、重いアイテムは、第2のシンギュレーションパターンに応答して、表面に沿って良好に移行及び移動をなすようにすることができる。このような場合、それぞれの区分で種々のシンギュレーションパターンを使用して、複数のアイテムをさらに引き離し、分離させることができる。
図示された例では、接合区分208の対向する端部には、シンギュレーションテーブルの移行区分210がある。受入れ場所206及び接合区分208と同様に、移行区分は、ほぼ水平の向きになっていてもよく、または移行区分は、傾斜/勾配していてもよい。この図示された例では、移行区分210は順方向勾配を有し、したがって、アイテムが移行区分を下って採取コンベヤ214の上に移行する。他の実施態様では、移行区分210は一続きの段を含み、移行区分210が、負の順方向勾配、いずれかの向きの側方勾配、または順方向勾配(正または負)と側方勾配との組合せであるように、移行区分210は傾斜していてもよい。同様に、移行区分210の全体的な表面の形状は、だいたいにおいて、平面、クラウン形状、ドーム形、凹形、凸形、不規則形、または他の任意の形状であってもよい。さらに、アイテムが上に置かれる移行区分210の上面を形成する材料は、様々な素材のうちの任意の1つ以上で形成されてもよい。例えば、シンギュレーションテーブル205の移行区分210の上面は、金属、プラスチック、ゴム、布地、カーペット、木材、タイル、ナイロンなどであってもよい。一部の実施態様では、移行区分210の種々の部分が、異なった材料で形成されてもよく、及び/または異なった形状を有してもよく、それによって各種のアイテムに伴って異なる摩擦係数をもたらす。
潜在的に様々な構成(形状、材料、角度)を有するシンギュレーションテーブル205の移行区分210に加えて、受入れ場所及び接合区分と同じように、移行区分210がアクティブであってもよい。具体的には、シンギュレーションテーブル205の移行区分210を、例えば、モータ、サーボ機構、発振器などのアクチュエータに結合させてもよく、このアクチュエータが、移行区分210の表面を震わせる、揺らす、振り動かす、または他の方法で動かす。一部の実施態様では、受入れ場所206の表面領域及び/または接合区分208の表面を動かすアクチュエータを使用して、移行区分210の表面を動かすこともできる。他の実施態様では、受入れ場所及び/または接合区分のアクチュエータ(複数可)とは別個の1つ以上のアクチュエータを使用することによって、移行区分210を動かすことができる。例えば、アクチュエータが、異なる時間に、及び/または移行区分の異なる部分に沿って、異なる形態の動きを引き起こすように、移行区分210を複数のアクチュエータに結合させてもよい。
別々のアクチュエータを使用してシンギュレーションテーブルの種々の区分を動かす実施態様では、そのシンギュレーションテーブルの種々の区分を、別々のシンギュレーションパターンに従って動かしてもよい。これは、別種の複数アイテムが異なった特性を有する場合に有益であり得る。例えば、軽いアイテムは、第1のシンギュレーションパターンに由来する動きに応答して、表面に沿って良好に移行及び移動をなし、重いアイテムは、第2のシンギュレーションパターンに応答して、表面に沿って良好に移行及び移動をなすようにすることができる。このような場合、それぞれの区分で種々のシンギュレーションパターンを使用して、複数のアイテムをさらに引き離し、分離させることができる。
理解されるように、シンギュレーションテーブル205は任意数の区分を有することができ、図2に示した本明細書の他の箇所で説明される3区分のシンギュレーションテーブル205は、説明のために提供されたものに過ぎず、限定するものと見なされるべきではない。他の実施態様では、シンギュレーションテーブル205は、さらなる区分またはより少ない区分を含むことができ、その区分は、アイテムがシンギュレーションテーブル205の受入れ場所206から採取コンベヤ214に向かって移行する際に、アイテムの分離を促進する任意の種類の構成を有することができる。
一部の実施態様では、1つ以上の撮像素子216−1(例えば、カメラ)をシンギュレーションテーブル205に隣接して配置して、アイテムがシンギュレーションテーブルによって分離され、シンギュレーションテーブル205に沿って移行するときに、それらアイテムの画像を取得することができる。撮像素子はシンギュレーションコントローラ222と通信し、取得したシンギュレーションテーブル205上のアイテムの画像を、シンギュレーションコントローラ222に提供することができる。シンギュレーションコントローラは、画像を処理して、シンギュレーションコントローラに属する区分の、どのシンギュレーションパターンが、及び/または、どの構成が、別種アイテムのより良好なシンギュレーション及び分離をもたらすかを決定することができる。そのような情報は、シンギュレーションテーブル205のそれぞれの区分によって利用される1つ以上のシンギュレーションパターンを選択して、シンギュレーションテーブル205上で移行されるアイテムに基づいてアイテムを分離するために、シンギュレーションコントローラによって維持され、将来のシンギュレーションにおいて使用されてもよい。一部の実施態様では、画像を、1つ以上の物体検出アルゴリズムを使用して処理して、シンギュレーションテーブル205上に位置するアイテム及び/またはアイテムの種類を決定することもできる。
採取コンベヤ214は、シンギュレーションテーブルに隣接して配置され、アイテムがシンギュレーションテーブル205を離れて移行する際に、分離されたアイテムを受け取るように構成される。一部の実施態様では、採取コンベヤ214は、アイテムシンギュレーション機能を提供することもできる。例えば、アイテムがシンギュレーションテーブル205を離れて採取コンベヤ214上に移行するときに、採取コンベヤがそのアイテムをシンギュレーションテーブル205から遠ざける方に搬送している間、シンギュレーションテーブルの動きを一時期停止させることがある。これは、分離されたアイテムがシンギュレーションテーブル205の端部に達したときに、依然として互いに近接しているアイテムを、さらに分離させることができる。例えば、2つのアイテムがシンギュレーションテーブル205の端部に達したときに互いに接近している場合、第1のアイテムがピックコンベアに移行すると、第2のアイテムがシンギュレーションテーブルから採取コンベヤ214に移行しないように、シンギュレーションテーブルの動きが停止する。さらに、採取コンベヤが作動して、採取コンベヤ上に移行したアイテムをシンギュレーションテーブル205から遠ざける方に、したがって隣接するアイテムから離すように動かし、それによってさらに2つのアイテムをさらに分離する。採取コンベヤが第1のアイテムを設定された距離だけ移動させると、シンギュレーションテーブルが動きを再開し、それによってシンギュレーションテーブルから採取コンベヤ上へのアイテムの、分離された形での移行をもたらす。
採取コンベヤは、分離されたアイテムを、シンギュレーションテーブルから採取場所215に搬送する。採取場所は、第2のロボット装置204(本明細書では採取ロボット装置とも呼ばれる)が採取コンベヤから採取場所215内にあるアイテムを採取することができるように、第2のロボット装置204の届く範囲にある採取コンベヤの一部分であってもよい。
以下にさらに説明するように、採取場所が撮像素子216−2の視野の範囲内であるように、1つ以上の撮像素子216−2(例えば、カメラ)を配置することができる。カメラは、シンギュレーションコントローラ222によって処理される、採取場所の画像を取得して、採取場所内にアイテムが存在するかどうかを判断してもよい。同様に、画像を処理して、アイテムが第2のロボット装置204によって採取される位置を示すアイテムの形状及び/または採取箇所を判断することができる。例えば、採取場所215がカメラの視野の範囲内にあるような単一のカメラを、頭上に配置することができる。アイテムが採取コンベヤによって採取場所215に搬送されるときに、カメラは採取場所の画像を取得し、取得した画像をシンギュレーションコントローラ222に送ることができる。
シンギュレーションコントローラは画像を処理し、アイテムが採取される採取場所の範囲内の座標を決定する。例えば、採取場所は一連の座標(例えば、x座標、y座標)に分割され、頭上カメラは固定位置にあり、カメラによって形成された画像のピクセルを、採取場所の座標に対応するように較正することができる。アイテムが採取場所に搬送されると、画像が取得されて処理されて、画像内のアイテムの位置が決定される。例えば、エッジ検出アルゴリズム、物体検出アルゴリズム、グレースケールアルゴリズムなどの1つ以上の画像処理アルゴリズムを使用して、画像を処理し、採取場所215の範囲内に位置決めされた対象物の境界形状を決定することができる。
対象物の形状に基づいて、採取箇所が決定される。採取箇所は、対象物の決定された形状内の中心座標空間であってもよい。他の実施態様では、対象物の重量分布または他の特徴を、採取場所からアイテムを採取する採取箇所を選ぶための要素として、考慮して含めることができる。
採取箇所は第2のロボット装置204に与えられ、第2のロボット装置は、収斂性エンドエフェクタを利用して、受け取った採取箇所に基づき、採取場所からアイテムを採取する。第2のロボット装置204、すなわち採取ロボット装置は、採取場所からアイテムを採取し、アイテムをシンギュレーションステーションから移行することができる任意の種類の自律ユニットであってもよい。一実施態様では、第2のロボット装置204は、収斂性エンドエフェクタで構成される6方向で位置決め可能なロボットアームである。収斂性エンドエフェクタは、例えば吸引、接着、電気接着、または磁気を利用して、採取場所からアイテムを採取することができる。他の実施態様では、エンドエフェクタは、収斂性ではない場合がある。例えば、エンドエフェクタは、アイテムに隣接して配置され、シンギュレーションステーションから遠ざけるようにアイテムを拭い取ったり、押したり、または別の方法で採取場所からアイテムを動かしたりするために使用される物理的表面であってもよい。さらに別の例では、第2のロボット装置204は、採取場所からアイテムを採取し、または別の方法で移動させることができるエンドエフェクタを伴って構成されたUAVであってもよい。
アイテムの採取後に、アイテムは、第2のロボット装置204によってシンギュレーションステーションから移行される。例えば、シンギュレーションステーションが仕分けステーション150(図1)の一部として含まれる場合、シンギュレーションステーションは、コンベヤ218と、アイテムをスキャンして識別するアイテム識別コンポーネント219とを含むアイテム識別ステーションに隣接していてもよい。他の実施態様では、第2のロボット装置は、採取アイテムをシンギュレーションステーションから別のトートの中に、別のコンベヤの上に、出荷作業へ、及び/または採取アイテムが移行されるべき他の場所またはステーションに移行させることができる。
図3は、一実施態様による、シンギュレーションステーション300の別図を示す。図に示すように、シンギュレーションステーション300は、第1のロボット装置302と、受入れ場所306と、接合区分308と、移行区分310とを含むシンギュレーションテーブル305とを含む。この例では、第1のロボット装置302は、様々なサイズ及び形状の複数のアイテム307をシンギュレーションテーブル305上に移行させている。シンギュレーションテーブル305の動きに応じて、アイテムは移行し、互いから離れる。例えば、アイテム307−1など、アイテムの一部は、他のアイテムより先に、重なり合わないよう配置されて移行され、シンギュレーションテーブルの移行区分に入るところである。このアイテム307−1は、シンギュレーションテーブル305の動きに応じてアイテムを移動させているシンギュレーションテーブル305と接触する大きな表面領域を有するため、他のアイテムとは異なる速度で移行している。
分離されたアイテムを、移行区分310から採取場所315に、搬送するように構成された採取コンベヤ314が、移行区分に隣接している。採取場所の頭上及び上方に、撮像素子316が配置される。撮像素子316は、採取場所315が撮像素子316の視野の範囲内であるように、方向を合わせられている。一部の実施態様では、採取場所315は、撮像素子316に向かって照射する照射面またはバックライト317を備える。アイテムが採取場所に配置され、バックライト317が照らされると、撮像素子によって得られた画像は、明るい領域、すなわちアイテムを含まない採取場所の部分と、暗い領域、すなわちアイテムを含む採取場所の部分との間のコントラストがより一層大きくなる。明るい領域と暗い領域との間の境界線を利用して、画像を迅速に処理して対象物の形状を決定し、採取箇所を選択することができる。
採取コンベヤ上のアイテムの存在を検出するために、採取コンベヤに沿って1つ以上のアイテム検出コンポーネント319−1、319−2を配置してもよい。アイテム検出コンポーネントは、例えば、採取コンベヤ上のアイテムの有無を検出するために使用することができる光電子センサ(フォトアイとも呼ばれる)、圧力センサ、撮像素子、及び/または他のコンポーネントであり得る。一部の実施態様では、頭上カメラ316をアイテム検出コンポーネントとして使用してもよい。
他の実施態様では、第1のアイテム検出コンポーネント319−1を、移行区分310と採取コンベヤとの間の接合部にまたはその近傍に配置して、移行区分310から採取コンベヤ314上へのアイテムの移行を検出することができる。そのような構成では、採取コンベヤは、対象物検出時に作動して、シンギュレーションテーブルから採取場所315に対象物を搬送することができる。同様に、移行区分310を動かすのを、検出されたアイテムがシンギュレーションテーブルから移行して離れるまで、終了させてもよい。
一部の実施態様では、第2のアイテム検出コンポーネント319−2を、採取場所にまたはその近傍に配置して、採取場所315内の対象物の存在を検出することができる。採取場所内に対象物を検出した時点で、撮像素子316が採取場所の範囲内の対象物の画像を取得して、対象物の形状及び/または採取箇所を処理して決定できるように、採取コンベヤの動きを停止してもよい。
最終的に、上に述べたように、かつ以下にさらに述べるように、第2のロボット装置304は、採取場所に隣接して配置され、採取場所315からアイテムを採取し、アイテムをシンギュレーションステーション300から移行させるように構成される。
図4は、一実施態様による、シンギュレーションステーションの第1のロボット装置402及びシンギュレーションテーブル405の図を示す。上に述べたように、第1のロボット装置402は、複数のアイテム407を含むトート403に係合し、トートをシンギュレーションステーション400に移行させるとともに、アイテム407がトート403からシンギュレーションテーブル405の受入れ場所406に移行するように、トートを回転させることができる。例えば、第1のロボット装置402は、トート403を把持する把持機構404を含むことができる。同様に、ロボット装置は、アイテムがトートからシンギュレーションテーブル405の受入れ場所406上に移行するように、トート403を回転させるために使用することができる回転関節409を含むことができる。上記の通り、他の実施態様において、ロボット装置402は他の形態をとってもよい。例えば、ロボット装置402は、単一の軸を中心に回転し、アイテムをトートから受入れ場所406上に移行させるように構成される単一軸のメカトロニクス装置を含むことができる。他の実施態様では、ロボット装置は、複数のアイテム、または複数のアイテムを含むトートを係合するように構成され、アイテムを仕分けステーションまで空中輸送するように構成され、かつアイテムを受入れ場所に移行させるように構成されたUAVであってもよい。
トートから受入れ場所へのアイテムの移行は、ロボット装置402によるトート403の回転速度によって制御することができる。例えば、一部の実施態様では、ロボット装置402は、第1のロボット装置402にトートをゆっくりと回転させる命令を受け取り、その結果、異なるアイテムが異なる時間にトートから出て、受入れ場所406上に移行することができる。同様に、一部の実施態様では、アイテムがトート403から受入れテーブル405の受入れ場所406の違う部分の上に移行するように、トートが回転しているときに、トートの位置を受入れ場所406に対して移動させてもよい。同様に、受入れ場所406が、各種の表面を有する複数の異なる部分を含む実施態様では、受入れ場所406のそれぞれの表面領域種類に基づき、相違するアイテムを移行区分の異なった部分に移行させてもよい。
上に述べたように、シンギュレーションテーブル405の1つ以上の区分の上面は、例えば、様々な異なるテクスチャを有してもよく、異なる材料で形成されてもよく、異なる形状を有してもよい。例えば、移行区分408の第1の部分は、第1の材料420−1で形成された上面を有してもよく、移行区分408の第2の部分は、第2の材料420−2で形成されてもよい。同様に、移行区分410及び/または受入れ場所406は、材料420−3、420−4などの、複数の異なる材料で形成された上面を有してもよい。理解されるように、シンギュレーションテーブル405の異なる区分の形状、角度、勾配など、及び区分の上面を形成するために使用される材料は、変えてもよい。例えば、シンギュレーションテーブル405の様々な区分の様々な上面に異なる材料を使用してもよく、及び/またはシンギュレーションテーブル405の様々な区分の様々な部分に異なる材料を使用してもよい。例えば、上面の材料は、金属、プラスチック、ゴム、布地、カーペット、木材、タイル、ナイロンなどであってもよい。
同様に、シンギュレーションテーブルの区分の形状、角度及び/または向きは変えてもよい。さらに、上に述べたように、シンギュレーションステーションの区分の表面が、シンギュレーションパターンに従って動作するアクチュエータに応答して動くように、シンギュレーションテーブル405の区分の1つ以上はアクティブであってもよい。シンギュレーションパターンは、テーブルの表面領域の動きの方向、速度、振幅、周波数などを指定することができる。シンギュレーションテーブルの区分の動きには、上下の動き、左右の動き、卵形の動き、円形の動き、角度をなす動き、または任意の他のパターン及び/またはパターンの組合せが含まれるが、これらに限定されない任意の形態の変えられる動きであってもよい。
一部の実施態様では、シンギュレーションパターンはランダムであり得、シンギュレーションテーブルの区分の上面の異なった変えられる動作を、ある期間にわたって生成する。別の例では、シンギュレーションパターンは、シンギュレーションテーブルに移行されたアイテムに少なくとも部分的に基づいて、シンギュレーションコントローラによって決定されてもよい。例えば、シンギュレーションコントローラは、異なるアイテム種に対して良好な移行及びシンギュレーションをもたらすシンギュレーションパターンを決定することができる。一例では、重いアイテムは、大きな振幅を持つ低周波数の動きを伴うシンギュレーションパターンに応答して、良好に移行しかつ分離することができる。比較すると、軽いアイテムは、高周波数及び小振幅のシンギュレーションパターンに応答して、良好に移行しかつ分離する。
一部の実施態様では、シンギュレーションテーブルに沿ってアイテムが移行して分離するときのアイテムの画像を取得し、処理して、種々のアイテムと種々のシンギュレーションパターンとに対するシンギュレーション応答を決定することができる。処理された情報に基づいて、種々のアイテム及び/または、異なるシンギュレーションパターンに応答する仕方に基づいた様々なアイテムの種類について、シンギュレーションパターンを決定することができる。アイテム特性は、アイテムのより良いシンギュレーション及び/または移行をもたらすシンギュレーションパターンに基づいて更新されてもよい。
異なるアイテム種(例えば、異なるアイテム特性を有する)の複数のアイテムに対して、アイテムのシンギュレーションを最適化するために、異なるシンギュレーションパターンを交互に実行することができる。あるいは、シンギュレーションテーブルに沿った複数の異なるアイテムの最新の移行及びシンギュレーションに基づき、アイテムの画像を処理し、異なるシンギュレーションパターンをアクティブにしてもよい。
図5は、一実施態様による、シンギュレーションステーションの採取ロボット装置504及び採取コンベヤ514の図を示す。上に述べたように、採取コンベヤ514は、シンギュレーションテーブル505に隣接して配置され、アイテムがシンギュレーションテーブルの移行区分510を離れて採取コンベヤ上に移行する際に、アイテム507を受け取る。例えば、アイテム507−1及びアイテム507−2は、シンギュレーションテーブルの移行区分510から離れて移行し、採取コンベヤ514によって採取場所515に向けて搬送される。
アイテム507−1が採取場所内にあると検出されたとき、採取コンベヤは動きを停止し、採取場所515の画像が頭上撮像素子516によって取得される。画像は、シンギュレーションコントローラによって処理されて、アイテムの形状とアイテム上の採取箇所(例えば、中心点)とが決定される。採取箇所は採取場所515の範囲内の座標位置に対応し、その座標位置はシンギュレーションコントローラ経由で採取ロボット装置504に与えられる。
一部の実施態様では、採取場所は、採取場所515の内部に配置された対象物の識別を高めるために、バックライト517で照明される。頭上撮像素子516によってアイテムの画像が取得されると、対象物が存在しない照射領域と、対象物が存在する暗領域との識別が、シンギュレーションコントローラによって迅速に処理されて、対象物の形状を判定し、対象物の対応する採取箇所を選択することができる。例えば、撮像素子は、デジタルカメラであってもよく、このデジタルカメラは、デジタルカメラによって生成される画像の各ピクセルが採取場所の座標位置に対応するように、採取場所515のサイズ及び形状で較正される。画像を、1つ以上の画像処理アルゴリズムを使用して処理して、対象物の外周部を決定することができ、採取箇所は対象物の中心の座標位置にすることができる。他の実施態様では、カメラ対を利用して対象物の3次元描写を生成し、その結果、その対象物の形状及び/または構成に基づいて採取箇所を選択することができる。さらに他の例では、他形態のイメージングまたは対象物検出を使用して、採取場所515内の対象物の形状及び/または位置を決定し、対象物上の採取箇所を選択することができる。
決定された採取箇所は採取ロボット装置504に与えられ、採取ロボット装置504は、採取場所515内の受け取った採取箇所に収斂性エンドエフェクタ513を移動させ、吸引、接着、電気接着、または磁気のうちの少なくとも1つを利用して、採取場所からアイテムを採取する。例えば、採取ロボット装置504は、収斂性エンドエフェクタに負の吸引力を生成して、採取場所からアイテムを採取するように、収斂性エンドエフェクタ513に付けられた吸い込み管511を含むことができる。他の実施態様では、収斂性エンドエフェクタを使用するのではなく、ロボット装置504は、分離されたアイテムに隣接して配置されて、採取場所からアイテムを押し出すか、または別の方法で移動させ、アイテムをシンギュレーションステーションから移行させる、固い延長部、平面またはアームを含むことができる。例えば、採取ロボット装置504は、採取されたアイテムをコンベヤ518に移行させることができ、このコンベヤ518は、アイテムをシンギュレーションステーションから遠ざける方に移行させる。
一部の実施態様では、採取ロボット装置504がアイテムの採取を実行した後、採取場所515の第2の画像を頭上撮像素子516によって取得し、シンギュレーションコントローラによって処理して、そのアイテムがもはや採取場所にないことを判断することができる。このような確認は、アイテムの採取が成功したという肯定的な指標をもたらす。比較して、アイテムが第2の画像内で検出される場合には、採取が成功しなかったと判断され、更新された採取箇所が決定されてもよい。例えば、アイテムが移動しているが採取場所に残っている場合、更新される採取箇所はアイテムの新しい位置に基づいて決定されてもよい。同様に、アイテム上の中心点を採取するのではなく、引き続いて起こる採取の試行のために採取箇所をオフセットすることができる。
アイテムが採取不能であると判定される前に、後続の採取の試行が所定の回数(例えば、3回)だけ実行されてもよい。アイテムが採取不能であると判定された場合、第2のロボット装置は、そのアイテムに隣接して収斂性エンドエフェクタ513を位置付け、そのアイテムを採取場所515から拭い取らせるか、またはスライドさせて、シンギュレーションステーションから遠ざけるように指示されてもよい。
各採取、採取位置、採取の試行、成功した採取、失敗した採取、及び判定された採取可能ではないアイテムを示す情報が、シンギュレーションコントローラに提供され得る。シンギュレーションコントローラは、その情報を利用して、同一または類似の種類のアイテムのために、採取箇所を開拓することができる。例えば、アイテム上の中心点から約20ミリメートルオフセットされた採取箇所を有するアイテムの採取が成功したと判定された場合、その後、同じまたは類似の種類のアイテムが採取場所に到来したときに、中央の採取箇所からアイテムを採取しようとするのではなく、シンギュレーションコントローラは、最初に採取ロボット装置に、約20ミリメートルオフセットされた採取箇所からアイテムを採取するように指示することができる。
図6は、一実施態様による、図5に示す採取ロボット装置の収斂性エンドエフェクタ610の詳細図を示す。図に示すように、収斂性エンドエフェクタ610は、複数の吸着カップ612−1、612−2、612−3、及び612−4を含む。これら吸着カップは吸い込み管611に結合され、吸い込み管611が吸着カップを介して負の吸引力を生成してカップにアイテムを固定できるようにする。図示した例では、収斂性エンドエフェクタ610は、正方形のパターンで配置された4つの吸着カップ612を含む。他の実施態様において、収斂性エンドエフェクタ610は、さらなる吸着カップまたはより少ない吸着カップを含んでもよく、吸着カップは、任意の構成の収斂性エンドエフェクタ610に配置されてもよい。例えば、一部の実施態様では、吸着カップを、エンドエフェクタ610の側部に配置し、例示された吸着カップ612に対して約90度に配向させてもよい。このような構成では、エンドエフェクタ610の側面に位置する吸着カップは、側方からアイテムを採取し、採取場所からアイテムを引っ張る、押す、または別の方法で移動させるように使用することができる。
また、収斂性エンドエフェクタ610は、吸着カップ612及び収斂性エンドエフェクタ610に対して下方に向けられた距離測定素子613を含む。距離測定素子613は、吸着カップ612と、収斂性エンドエフェクタ610によって採取されるアイテムとの間の距離を測定するために使用することができる。距離測定素子は、素子と対象物との間の距離を測定することができる任意の種類の素子であってよい。例えば、距離測定素子は、飛行時間センサ、赤外線センサ、光検出と測距(LIDAR)センサ、音響航法と測距(SONAR)センサなどであってもよい。
収斂性エンドエフェクタ610は、吸着カップ612をアイテムに向けて整列させ、アイテムとの間に真空を生じさせることができ、その結果、アイテムが収斂性エンドエフェクタによって採取されるように、1つ以上のジンバルまたは回転部材614、616によって採取ロボット装置に結合されてもよい。
図7は、一実施態様による、シンギュレーションステーションにアイテムを導き入れるアイテムインダクションプロセス700の例を示すフロー図である。本プロセスは、論理フローグラフ内のブロックの集まりとして示される。ブロックの一部は、ハードウェア、ソフトウェア、またはそれらの組合せで実装され得る動作を表す。ソフトウェアという観点から、ブロックは、1つ以上のプロセッサによって実行されるときに、記述された動作を実行する、1つ以上のコンピュータ可読媒体に格納されたコンピュータ実行可能命令を表す。一般に、コンピュータ実行可能命令には、特定の機能を実行するか、または特定の抽象データ型を実装する、ルーチン、プログラム、オブジェクト、コンポーネント、データ構造などが含まれる。
コンピュータ可読媒体には、非一過性のコンピュータ可読記憶媒体を含めることができ、これには、ハードドライブ、フロッピーディスク、光ディスク、CD−ROM、DVD、リードオンリーメモリ(ROM)、ランダムアクセスメモリ(RAM)、EPROM、EEPROM、フラッシュメモリ、磁気カードもしくは光カード、ソリッドステートメモリデバイス、または、電子命令を記憶するのに好適な他の種類の記憶媒体が含まれ得る。さらに、一部の実施態様では、コンピュータ可読媒体には、一過性のコンピュータ可読信号(圧縮形式または非圧縮形式)を含めることができる。コンピュータ可読信号の例には、搬送波を使用して変調されているかどうかにかかわらず、コンピュータプログラムを動作または実行させるコンピュータシステムがアクセスするように構成され得る信号(インターネットまたは他のネットワークを介してダウンロードまたはアップロードされる信号を含む)が含まれるが、これに限定されない。最後に、動作が記載される順序は、限定として解釈されることを意図するものではなく、記載される任意数の動作を、任意の順序に及び/または並列に組み合わせて、プロセスを実装することができる。同様に、記載されたものに比べて追加の動作または少ない動作を、本明細書に記載された様々な実施態様で利用してもよい。
例示的なプロセス700は、702にあるように、第1のロボット装置が、第1のロボット装置にトート受入れ場所からアイテムの入ったトートを採取させる命令を受け取ることから始める。例えば、シンギュレーションコントローラは、トート受入れ場所の特定の位置からトートを採取するように、第1のロボット装置に指示を与えることができる。他の実施態様では、第1のロボット装置は、トートの存在を自律的に検出し、トートに対して把持機構を位置決めし、トート受入れ場所からトートを採取するように構成することができる。
採取されたトートに基づいて、トートに含まれる複数のアイテムを決定し、それらアイテムに対応するアイテム特性を、704にあるように決定する。例えば、トートが採取されるとき、トートが識別され、シンギュレーションコントローラは、採取されたトートに含まれるアイテムを示す情報を保持することができる。採取されたトートに含まれるアイテムに基づいて、アイテム特性を決定してもよい。
706にあるように、決定されたアイテム特性に基づいて、トートのトート位置及びトート回転特性を決定することができ、これらは、アイテムがシンギュレーションステーションのシンギュレーションテーブルの受入れ場所に移行するように、第1のロボット装置によってトートがどこでどのように回転されるべきかを指示する。上に述べたように、シンギュレーションステーションは、複数の異なる構成、形状、及び/または表面材料を含むことができる。アイテム特性に基づき、アイテムを、受入れ場所の特定の部分に、受入れ場所のその部分の表面領域及び/または構成に基づき、移行させることができる。他の実施態様では、トートを回転させるときにトートの位置を変化させ、アイテムが異なる位置で受入れ場所に移行するようにしてもよい。
708にあるように、トートを、決定されたトート位置及びトート回転特性に基づいて、アイテムがトートからシンギュレーションステーションのシンギュレーションテーブルの受入れ場所に移行するように、シンギュレーションステーションの決定された位置の上方で回転させる。アイテムがシンギュレーションステーションに移行するとき、710にあるように、アイテムの分離及び移行を監視する。例えば、アイテムを、重なり合わないよう配置して、他のアイテムに対して分離し、シンギュレーションステーションのシンギュレーションテーブルに沿って移行させるときに、アイテムの描写を含む一連の画像を、取得することができる。712にあるように、これらの画像を処理し、シンギュレーションテーブルの形状や材料など、及びシンギュレーションテーブルの個別の区分を動かすために使用されるシンギュレーションパターンと併せて、トートから移行された各アイテムのアイテム特性を更新することができる。
図8は、一実施態様による、シンギュレーションステーションでアイテムを採取するアイテム採取プロセス800の例を示すフロー図である。例示的なプロセスは、802にあるように、シンギュレーションステーションの採取場所内のアイテムを検出することから始める。アイテムが採取コンベヤによってアイテム採取場所に移されると、804にあるように、採取場所の画像を取得する。上に述べたように、採取場所が撮像素子の視野の範囲内であるように、1つ以上の撮像素子(例えば、カメラ)を配置することができる。
806にあるように、取得した画像を処理して、アイテム形状及びアイテム採取箇所を決定する。例えば、1つ以上のエッジ検出アルゴリズム、物体検出アルゴリズムなどを利用して、アイテムの外周部形状を決定することができる。一部の実施態様では、画像を処理して、アイテム種を決定し、及び/またはアイテムを決定することもできる。例えば、対象物の種類を検出するために、文字認識アルゴリズム、物体検出アルゴリズム及び/または他の処理アルゴリズムを利用することができる。一部の実施態様では、アイテムまたはアイテムの種類を、単にアイテムの形状に基づいて決定してもよい。例えば、シンギュレーションステーションに現在位置している複数のアイテムの全ての異なる種類は、トートからシンギュレーションステーションに移行したアイテムを基に区別ができる。寸法情報を同様にそれらのアイテムに備えて、保持してもよい。したがって、アイテムまたはアイテム種は、シンギュレーションステーション上にあることが分かっている潜在的なアイテムの形状と、採取場所内のアイテムの決定された形状とに基づいて決定してもよい。そのような情報を使用して、アイテムの採取箇所を更新し、または決定することができる。
808にあるように、決定された形状及び採取箇所に基づいて、収斂性エンドエフェクタを備えた第2のロボット装置に、アイテム上の決定された採取箇所に収斂性エンドエフェクタを位置付けすることによって、採取場所からアイテムを採取させる命令が送られる。次に、採取されたアイテムを、810にあるように、第2のロボット装置によってシンギュレーションステーションから移行させる。アイテムは、シンギュレーションステーションからどこへでも移行することができる。例えば、シンギュレーションステーションが荷役設備の仕分けステーションに組み込まれている場合、採取されたアイテムを、そのアイテムが一意に識別されるアイテム識別ステーションに移行させることができる。他の実施態様では、アイテムを、別のコンベヤ、別のトート内などに、移行させることができる。
第2のロボット装置がアイテムを採取して、シンギュレーションステーションからアイテムの移行を開始または完了させた後、812にあるように、採取場所の第2の画像を取得する。第2の画像を処理して、アイテムが採取場所から移されたかどうかを判断する。したがって、814にあるように、アイテム採取が成功したかどうかの判定が行われる。採取場所内でアイテムが検出されなくなった場合、アイテムピックは成功と判定される。対照的に、アイテムが依然として採取場所内にあると判断された場合、アイテム採取は不成功であると判定される。
アイテム採取が成功しなかったと判定された場合、816にあるように、採取試行が規定された回数を超過したかどうかについての判定が行われる。規定された回数は、任意の採取試行回数であってもよく、様々なシンギュレーションステーション、様々なアイテム、様々な種類のアイテムなどに対して異なっていてもよい。採取試行回数が超えていないと判定された場合、818にあるように、アイテム採取箇所を調整し、例示のプロセス800はブロック808に戻り、調整されたアイテム採取箇所に基づいて継続される。調整されたアイテム採取箇所は、アイテムの決定された形状の範囲内の領域で、ランダムに選択することができる。あるいは、別のアイテム採取箇所を、例えば、アイテムに付着した吸着カップや、アイテムが受入れ場所内で移動した方向などに基づいて、系統的に決定してもよい。
採取試行回数が超過したと判定された場合、第2のロボット装置に、アイテムに近接して収斂性エンドエフェクタを位置付けさせ、820にあるように、アイテムを採取場所及びシンギュレーションステーションから拭い取らせるか、または引きずらせる命令が送られる。例えば、命令は、第2のロボット装置に、採取場所から、アイテムをシンギュレーションステーションから遠ざける方に搬送する送出コンベヤの上に、アイテムを引きずらせることができる。
シンギュレーションステーションからアイテムを拭い取った後、または決定ブロック814においてアイテム採取が成功したと判定された場合、822にあるように、アイテムに対応するアイテム特性を、採取に伴って更新する。
本明細書に記載されるようなシンギュレーションコントローラの様々な動作は、様々な実装に従って、荷役設備内の様々な他のデバイスと相互作用する1つ以上のコンピュータシステム上で実行させることができる。例えば、上で論じたシンギュレーションコントローラは、1つ以上のコンピュータシステム上で機能し、動作することができる。そのようなコンピュータシステムの1つが、図9のブロック図によって示される。図示の実施態様では、コンピュータシステム900は、入出力(I/O)インタフェース930を介して、非一過性コンピュータ可読記憶媒体920に結合された1つ以上のプロセッサ910A、910B〜910Nを含む。コンピュータシステム900は、I/Oインタフェース930に結合されたネットワークインタフェース940と、1つ以上の入出力装置950とをさらに含む。一部の実施態様において、記述された実施態様は、コンピュータシステム900の単一のインスタンスを使用して実装され得る一方で、他の実施態様では、コンピュータシステム900を構成する複数のそのようなシステムまたは複数のノードが、記述された実施態様の種々の部分またはインスタンスを動作させるように構成され得ることが企図されている。例えば、一実装態様では、いくつかのデータソースまたはサービス(例えば、転送、仕分け、シンギュレーション、シンギュレーションパターン選択など)は、他のデータソースまたはサービスを実装するノードとは異なる、コンピュータシステム900の1つ以上のノードを介して実装されてもよい。
様々な実施態様において、コンピュータシステム900は、1つのプロセッサ910Aを含む単一プロセッサシステム、またはいくつかのプロセッサ910A〜910N(例えば、2つ、4つ、8つ、または別の適切な個数)を含むマルチプロセッサシステムであってもよい。プロセッサ910A〜910Nは、命令を実行することができる任意の適切なプロセッサであってよい。例えば、様々な実施態様において、プロセッサ910A〜910Nは、x86、PowerPC、SPARC、もしくはMIPS ISAなどの様々な命令セットアーキテクチャ(ISA)のいずれか、または任意の他の適切なISAを実装する汎用プロセッサまたは組込みプロセッサであってもよい。マルチプロセッサシステムでは、プロセッサ910A〜910Nのそれぞれは、一般に同じISAを実装し得るが、必ずしも同じである必要はない。
非一過性コンピュータ可読記憶媒体920は、1つ以上のプロセッサ910A〜910Nによってアクセス可能な実行可能命令及び/またはデータを格納するように構成されてもよい。様々な実施態様において、非一過性コンピュータ可読記憶媒体920は、スタティックランダムアクセスメモリ(SRAM)、同時性のダイナミックRAM(SDRAM)、不揮発性メモリ/フラッシュメモリ、または任意の他のメモリなどの任意の適切なメモリ技術を使用して実現され得る。図示の実施態様では、プログラム命令925及びデータストレージ935として、非一過性コンピュータ可読記憶媒体920内にそれぞれ格納された、上に記載されるような所望の機能及び/またはプロセスを実装するプログラム命令及びデータが示されている。他の実施態様では、プログラム命令及び/またはデータは、非一過性媒体などの異なる種類のコンピュータアクセス可能媒体に、または非一過性コンピュータ可読記憶媒体920もしくはコンピュータシステム900とは別個の類似の媒体上に、受信、送信、または格納がなされてもよい。概して、非一過性のコンピュータ可読記憶媒体は、I/Oインタフェース930を介してコンピュータシステム900に結合される磁気媒体または光媒体(例えばディスクまたはCD/DVD−ROM)などのストレージ媒体またはメモリ媒体を含むことができる。非一過性のコンピュータ可読媒体を介して格納されるプログラム命令及びデータは、伝送媒体、または電気信号、電磁信号、もしくはデジタル信号などの信号によって伝送され得る。これらは、ネットワークインタフェース940を介して実装され得るような、ネットワーク及び/または無線リンクなどの通信媒体を介して伝達され得る。
一実施態様では、I/Oインタフェース930は、プロセッサ910A〜910N、非一過性コンピュータ可読記憶媒体920、及び任意の周辺機器(ネットワークインタフェース940、または入出力装置950などの他の周辺インタフェースを含む)の間のI/Oトラフィックを調整するように構成してもよい。一部の実施態様では、I/Oインタフェース930は、一方のコンポーネント(例えば、非一過性コンピュータ可読記憶媒体920)からのデータ信号を、他方のコンポーネント(例えば、プロセッサ910A〜910N)による使用に適したフォーマットに変換するために、任意の必要なプロトコル、タイミングまたは他のデータ変換を実行することができる。一部の実施態様では、I/Oインタフェース930は、例えば、周辺構成要素相互接続(PCI)バス規格またはユニバーサルシリアルバス(USB)規格の変形など、様々な方式の周辺バスを介して接続されるデバイスのサポートを含むことができる。一部の実施態様では、I/Oインタフェース930の機能は、例えば、ノースブリッジ及びサウスブリッジなどの2つ以上の別個のコンポーネントに分割することができる。また、一部の実施態様では、非一過性コンピュータ可読記憶媒体920へのインタフェースなど、I/Oインタフェース930の機能の一部または全部をプロセッサ910A〜910Nに直接組み込むことができる。
ネットワークインタフェース940は、コンピュータシステム900と、他のコンピュータシステム、ロボット(例えば、第1及び第2のロボット装置)などのネットワーク、またはコンピュータシステム900のノード間に接続された他のデバイスとの間でデータを交換できるように構成されてもよい。様々な実施態様において、ネットワークインタフェース940は、任意の適切な種類のイーサネット(登録商標)ネットワークなどの、有線または無線の一般データネットワークを介した通信をサポートすることができる。
入出力装置950は、一部の実施態様において、1つ以上のディスプレイ、投影装置、オーディオ出力デバイス、キーボード、キーパッド、タッチパッド、スキャン装置、音声または光学認識装置、または1つ以上のコンピュータシステム900によってデータを入力する、または検索するのに適した任意の他のデバイスを含むことができる。複数の入出力装置950がコンピュータシステム900に存在してもよく、またはコンピュータシステム900の様々なノードに分散されていてもよい。一部の実施態様では、同様の入出力装置は、コンピュータシステム900から分離していてもよく、ネットワークインタフェース940を介してなど、有線接続または無線接続を介してコンピュータシステム900の1つ以上のノードとインタラクトすることができる。
図9に示すように、メモリ920は、記載された実施態様のうちの1つ以上を実装するように構成されてもよく、及び/またはデータストレージ935を提供するプログラム命令925を含むことができ、このデータストレージ935は、プログラム命令925によってアクセス可能な様々なテーブル、データストア及び/または他のデータ構造を含むことができる。データストレージ935は、1つ以上のアイテム特性、シンギュレーションパターンなどを保持するための様々なデータストアを含むことができる。
当業者であれば、コンピューティングシステム900は単なる例示のためのものであり、実施態様の範囲を限定するものではないことを理解されるはずである。具体的には、コンピューティングシステム及びデバイスは、コンピュータ、ネットワークデバイス、インターネット家電、ロボットデバイスなどを含む、指示された機能を実行することができるハードウェアまたはソフトウェアの任意の組合せを含むことができる。コンピューティングシステム900はまた、図示されていない他のデバイスに接続されてもよく、あるいはスタンドアロンシステムとして動作してもよい。さらに、図示されたコンポーネントによって提供される機能は、一部の実施態様において、より少数のコンポーネントに統合してもよく、または付加的なコンポーネントに分散させてもよい。同様に、一部の実施態様では、図示されたコンポーネントのいくつかの機能が提供されない場合があり、及び/または他の追加の機能を利用可能な場合がある。
当業者であれば、一部の実施態様では、上で論じられた方法、システム、及び装置によって提供される機能性が、例えば、多くのソフトウェアモジュールまたはルーチンに分割されるか、少数のモジュールまたはルーチンに統合されるか、及び/または追加のまたはより少数のロボット装置に分割されるなど、代替的な方法で提供され得ることを理解されるはずである。同様に、一部の実施態様では、図示された方法及びシステムは、例えば、他の図示された方法がそのような機能性をそれぞれ欠いているかまたは含んでいる場合、または提供される機能性の量が変更された場合など、説明されているよりも多くのまたは少ない機能性を提供することができる。さらに、様々な動作が特定の方法(例えば、直列にまたは並列に)及び/または特定の順序で実行されるものとして示されているが、他の実施態様では、動作は他の順序で、及び他の方法で実行されてもよいことを当業者は理解されるはずである。図面に図示され、本明細書で説明される様々な方法、装置、及びシステムは、例示的な実施態様を表す。本方法及びシステムは、他の実施態様において、ソフトウェア、ハードウェア、またはそれらの組合せで実装されてもよい。同様に、他の実施態様では、任意の方法の順序が変更されてもよいし、例えば、様々な特徴が追加され、並べ替えられ、結合され、省略され、変更されるなどしてもよい。
本明細書で開示される実施態様は、第1のロボット装置を使用して、複数のアイテムをトートからシンギュレーションテーブルに移行させることを含むアイテムシンギュレーション方法を含むことができ、複数のアイテムのうちの少なくとも2つのアイテムが、異なるサイズ及び異なる形状を有し、複数のアイテムのうちの少なくとも2つのアイテムが、シンギュレーションテーブルに移行したときに少なくとも部分的に重なり合うよう配置される。アイテムシンギュレーション方法は、シンギュレーションテーブルを作動させて、少なくとも2つのアイテムを、重なり合わないよう配置させること、複数のアイテムのうちの他のアイテムに対して、複数のアイテムを少なくとも部分的に距離を置いて分離させること、シンギュレーションテーブルの振動の結果として、複数のアイテムをシンギュレーションテーブルに沿って移行させること、及び第1のアイテムを採取コンベヤに移行させることを少なくとも含むこともできる。アイテムシンギュレーション方法は、採取コンベヤを作動させて、第1のアイテムを採取場所に搬送すること、及び採取場所から第1のアイテムを第2のロボット装置で採取することのうちの1つ以上を含むこともできる。
任意選択的に、アイテムシンギュレーション方法は、採取場所で第1のアイテムの画像を取得すること、及び画像を処理して、アイテムの形状またはアイテムに関する採取箇所の少なくとも1つを決定することのうちの1つ以上を含むこともでき、採取することが、アイテムまたは採取箇所の形状に少なくとも部分的に基づいてアイテムを採取することを含む。任意選択的に、第2のロボット装置は、吸着、接着、電気接着、または磁気のうちの少なくとも1つを利用して、採取箇所でアイテムを採取するように構成された収斂性エンドエフェクタを含むことができる。任意選択的に、シンギュレーションテーブルは、複数のアイテムがシンギュレーションテーブルに沿って移動するにつれて、複数のアイテムのシンギュレーションをさらに引き起こす、正の順方向勾配、負の順方向勾配、または側方勾配のうちの少なくとも1つを含むことができる。任意選択的に、シンギュレーションテーブルは、シンギュレーションテーブルの振動に応答して、複数のアイテムを移行させるテクスチャ加工された表面を含むことができる。
本明細書で開示される他の実施態様は、複数の異なるアイテムをシンギュレーションテーブルに移行させるように構成された第1のロボット装置を有するシンギュレーションステーションを含むことができる。シンギュレーションステーションは、複数の異なるアイテムからアイテムを採取し、アイテムをシンギュレーションステーションから移行させるように構成された第2のロボット装置を含むこともできる。シンギュレーションテーブルは、作動時にシンギュレーションテーブルを動かすアクチュエータと、アイテムを、複数の異なるアイテムのうちの他のアイテムに対して少なくとも部分的に分離させるとともに、シンギュレーションテーブルの変えられる動きに応じて、表面に沿って移行させるこの表面とを含むことができる。
任意選択的に、シンギュレーションステーションは、複数の異なるアイテムのうちのアイテムがシンギュレーションテーブルを離れて移行する際に、アイテムを受け取るように、シンギュレーションテーブルに隣接して配置された採取コンベヤを含む。採取コンベヤは、採取場所にアイテムを搬送するように構成されてもよく、第2のロボット装置は、採取場所からアイテムを採取するように構成されてもよい。任意選択的に、シンギュレーションステーションは、採取場所の上に配置されて、採取場所に配置されたアイテムの画像を取得する頭上カメラを含む。任意選択的に、第2のロボット装置は、採取場所に配置されたアイテムの画像の処理から決定されるアイテム位置情報に少なくとも部分的に基づく、アイテム上の採取箇所に対応する採取位置を受け取るように構成される。任意選択的に、シンギュレーションテーブルは、複数の区分を含み、複数の区分のそれぞれが、アイテムを、複数の異なるアイテムのうちの他のアイテムに対して少なくとも部分的に分離させるとともに、区分の変えられる動きに応じて、表面に沿って移行させる表面を含む。任意選択的に、アイテムが少なくとも2つの区分のそれぞれに沿って異なる方向に移行するように、少なくとも2つの区分が異なる方向に配向される。任意選択的に、第1のロボット装置は、6方向で位置決め可能なロボットアーム、単一軸のメカトロニクス装置、または無人航空機のうちの少なくとも1つである。任意選択的に、シンギュレーションステーションは、アイテムと、アイテムを採取するために使用される第2のロボット装置のエンドエフェクタとの間の距離を測定するように構成された距離測定素子を含む。任意選択的に、距離測定素子は、第2のロボット装置のエンドエフェクタに結合され、エンドエフェクタがアイテムを採取するように構成される。任意選択的に、第2のロボット装置は、吸着、接着、電気接着、または磁気のうちの少なくとも1つを利用して、アイテムを採取するように構成された収斂性エンドエフェクタをさらに含む。任意選択的に、第2のロボット装置は、収斂性エンドエフェクタ上に配置され、アイテムに接触したときに吸引して、アイテムの採取を可能にするように構成された複数の吸着カップをさらに含む。任意選択的に、表面は、第1の摩擦係数を有する第1の材料を含む第1の区分と、第2の摩擦係数を有する第2の材料を含む第2の区分とを有する。
本明細書で開示される他の実施態様は、別種の複数アイテムをシンギュレーションテーブルに移行させるように構成された第1のロボット装置を有するシステムを含むことができる。シンギュレーションテーブルは、シンギュレーションパターンに従って動くように構成され、複数のアイテムのうちの他のアイテムに対して、複数のアイテムのうちのアイテムを距離を置いて分離させる。本システムは、シンギュレーションテーブルに隣接して配置され、複数のアイテムのうちのアイテムを受け取り、このアイテムを採取場所に移行させるように構成された採取コンベヤを含むこともできる。本システムは、採取場所からアイテムを採取し、採取コンベヤからアイテムを移行させるように構成された第2のロボット装置を含むこともできる。
任意選択的に、システムは、シンギュレーションテーブルと通信するシンギュレーションコントローラをさらに含む。シンギュレーションコントローラは、少なくとも複数のアイテムの各アイテムの種類を決定し、複数のアイテムの各アイテムの種類に少なくとも部分的に基づいて、シンギュレーションパターンを決定し、シンギュレーションテーブルをシンギュレーションパターンに従って動かす命令をシンギュレーションテーブルに送るように構成され得る。任意選択的に、シンギュレーションパターンは、動きの振幅、動きの周波数、動きの方向、またはシンギュレーションパターンの変化のうちの少なくとも1つを指示する。任意選択的に、第2のロボット装置は、吸引を利用してアイテムを採取するように構成された収斂性エンドエフェクタと、収斂性エンドエフェクタ上に配置された距離測定素子とをさらに含み、距離測定素子が、アイテムと収斂性エンドエフェクタとの間の距離を決定するように構成される。任意選択的に、システムは、採取場所の画像を取得するように構成された撮像素子を含み、採取場所内のアイテムの位置、または採取場所からのアイテムの採取の確認のうちの少なくとも1つを判断するために画像が処理される。
以上のことから、例示の目的で特定の実施態様が本明細書に記載されているが、添付の特許請求の範囲及びその中に記載されている特徴の趣旨及び範囲から逸脱することなく、様々な修正を行うことができることが理解されよう。さらに、特定の態様は、特定の請求項の形態で以下に提示されるが、本発明者らは、あらゆる利用可能な請求項の形態における様々な態様を考慮する。例えば、現在、いくつかの態様のみが、非一過性コンピュータ可読記憶媒体に具体化されるものとして記載されているが、他の態様も同様に具体化することができる。本開示の恩恵を受ける当業者にとっては自明であるように、様々な修正及び変更がなされ得る。このような全ての修正及び変更を包含することが意図されており、したがって、上記の説明は限定的な意味ではなく例示的なものとみなされるべきである。

Claims (15)

  1. アイテムシンギュレーション方法であって、
    第1のロボット装置を使用して、複数のアイテムをトートからシンギュレーションテーブルに移行させることを含み、
    前記複数のアイテムのうちの少なくとも2つのアイテムが、異なるサイズ及び異なる形状を有し、
    前記複数のアイテムのうちの少なくとも2つのアイテムが、前記シンギュレーションテーブルに移行したときに少なくとも部分的に重なり合うよう配置され、
    シンギュレーションテーブルを作動させて、
    前記少なくとも2つのアイテムを、重なり合わないよう配置させること、
    前記複数のアイテムのうちの他のアイテムに対して、前記複数のアイテムを少なくとも部分的に距離を置いて分離させること、
    前記シンギュレーションテーブルの振動の結果として、前記複数のアイテムを前記シンギュレーションテーブルに沿って移行させること、及び
    第1のアイテムを採取コンベヤに移行させることを少なくとも含み、前記方法はさらに、
    前記採取コンベヤを作動させて、前記第1のアイテムを採取場所に搬送すること、ならびに
    前記採取場所から前記第1のアイテムを第2のロボット装置で採取することを含む、前記方法。
  2. 前記採取場所で前記第1のアイテムの画像を取得することと、
    前記画像を処理して、前記アイテムの形状または前記アイテムに関する採取箇所の少なくとも1つを決定することとをさらに含み、
    採取することが、前記アイテムまたは前記採取箇所の前記形状に少なくとも部分的に基づいて前記アイテムを採取することを含む、請求項1に記載の方法。
  3. 前記第2のロボット装置が、吸着、接着、電気接着、または磁気のうちの少なくとも1つを利用して、前記採取箇所で前記アイテムを採取するように構成された収斂性エンドエフェクタを含む、請求項1または請求項2に記載の方法。
  4. 前記シンギュレーションテーブルが、前記複数のアイテムが前記シンギュレーションテーブルに沿って移動するにつれて、前記複数のアイテムのシンギュレーションをさらに引き起こす、正の順方向勾配、負の順方向勾配、または側方勾配のうちの少なくとも1つを含む、先行請求項のいずれかに記載の方法。
  5. 前記シンギュレーションテーブルが、前記シンギュレーションテーブルの前記振動に応答して、前記複数のアイテムを移行させるテクスチャ加工された表面を含む、先行請求項のいずれかに記載の方法。
  6. シンギュレーションステーションであって、
    複数の異なるアイテムをシンギュレーションテーブルに移行させるように構成された第1のロボット装置を含み、
    前記シンギュレーションテーブルが、
    作動時に前記シンギュレーションテーブルを動かすアクチュエータと、
    アイテムを、前記複数の異なるアイテムのうちの他のアイテムに対して少なくとも部分的に分離させるとともに、前記シンギュレーションテーブルの変えられる動きに応じて、表面に沿って移行させる前記表面とを含み、前記シンギュレーションステーションはさらに、
    前記複数の異なるアイテムから前記アイテムを採取し、前記アイテムを前記シンギュレーションステーションから移行させるように構成された第2のロボット装置を含む、前記シンギュレーションステーション。
  7. 前記複数の異なるアイテムのうちのアイテムが前記シンギュレーションテーブルを離れて移行する際に、前記アイテムを受け取るように、前記シンギュレーションテーブルに隣接して配置された採取コンベヤであって、採取場所に前記アイテムを搬送するように構成された前記採取コンベヤをさらに含み、
    前記第2のロボット装置が、前記採取場所からアイテムを採取するように構成される、請求項6に記載のシンギュレーションステーション。
  8. 前記採取場所の上に配置されて、前記採取場所に配置されたアイテムの画像を取得する頭上カメラをさらに含み、
    前記第2のロボット装置が、前記採取場所に配置された前記アイテムの前記画像の処理から決定されるアイテム位置情報に少なくとも部分的に基づく、前記アイテム上の採取箇所に対応する採取位置を受け取るように構成される、請求項6または請求項7に記載のシンギュレーションステーション。
  9. 前記シンギュレーションテーブルが複数の区分を含み、前記複数の区分のそれぞれが、前記アイテムを、前記複数の異なるアイテムのうちの他のアイテムに対して少なくとも部分的に分離させるとともに、前記区分の変えられる動きに応じて、表面に沿って移行させる前記表面を含み、
    前記アイテムが少なくとも2つの区分のそれぞれに沿って異なる方向に移行するように、前記少なくとも2つの区分が異なる方向に配向される、請求項6〜8のいずれかに記載のシンギュレーションステーション。
  10. 前記第1のロボット装置が、6方向で位置決め可能なロボットアーム、単一軸のメカトロニクス装置、または無人航空機のうちの少なくとも1つである、請求項6〜9のいずれかに記載のシンギュレーションステーション。
  11. 前記アイテムと、前記アイテムを採取するために使用される前記第2のロボット装置のエンドエフェクタとの間の距離を測定するように構成された距離測定素子をさらに含む、請求項6〜10のいずれかに記載のシンギュレーションステーション。
  12. 前記距離測定素子が、前記第2のロボット装置の前記エンドエフェクタに結合され、
    前記エンドエフェクタが前記アイテムを採取するように構成される、請求項11に記載のシンギュレーションステーション。
  13. 前記第2のロボット装置が、
    吸着、接着、電気接着、または磁気のうちの少なくとも1つを利用して、前記アイテムを採取するように構成された収斂性エンドエフェクタをさらに含む、請求項6〜12のいずれかに記載のシンギュレーションステーション。
  14. 前記第2のロボット装置が、
    前記収斂性エンドエフェクタ上に配置され、前記アイテムに接触したときに吸引して、前記アイテムの採取を可能にするように構成された複数の吸着カップをさらに含む、請求項6〜13のいずれかに記載のシンギュレーションステーション。
  15. 前記表面の第1の区分が、第1の摩擦係数を有する第1の材料を含み、
    前記表面の第2の区分が、第2の摩擦係数を有する第2の材料を含む、請求項6〜14のいずれかに記載のシンギュレーションステーション。
JP2018566948A 2016-06-27 2017-06-26 振動テーブルを含む自動アイテムシンギュレーション Active JP6690026B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/193,495 2016-06-27
US15/193,495 US10221015B2 (en) 2016-06-27 2016-06-27 Automated item singulation
PCT/US2017/039297 WO2018005367A1 (en) 2016-06-27 2017-06-26 Automated item singulation comprising a vibrating table

Publications (2)

Publication Number Publication Date
JP2019521053A true JP2019521053A (ja) 2019-07-25
JP6690026B2 JP6690026B2 (ja) 2020-04-28

Family

ID=59351071

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018566948A Active JP6690026B2 (ja) 2016-06-27 2017-06-26 振動テーブルを含む自動アイテムシンギュレーション

Country Status (5)

Country Link
US (1) US10221015B2 (ja)
EP (1) EP3475195B1 (ja)
JP (1) JP6690026B2 (ja)
CN (1) CN109476425A (ja)
WO (1) WO2018005367A1 (ja)

Families Citing this family (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9139363B2 (en) 2013-03-15 2015-09-22 John Lert Automated system for transporting payloads
US9102055B1 (en) * 2013-03-15 2015-08-11 Industrial Perception, Inc. Detection and reconstruction of an environment to facilitate robotic interaction with the environment
EP3266731A4 (en) * 2015-03-06 2018-11-21 Kurashiki Boseki Kabushiki Kaisha Article supply device
US10435241B2 (en) 2015-06-02 2019-10-08 Alert Innovation Inc. Storage and retrieval system
FI127100B (en) * 2016-08-04 2017-11-15 Zenrobotics Oy A method and apparatus for separating at least one piece from a plurality of pieces
CN206537925U (zh) * 2016-10-20 2017-10-03 京东方科技集团股份有限公司 一种用于线源坩锅的加料装置
AU2017362508A1 (en) 2016-11-17 2019-06-20 Walmart Apollo, Llc Automated-service retail system and method
EP3544911B1 (en) 2016-11-28 2023-10-18 Berkshire Grey Operating Company, Inc. System for providing singulation of objects for processing
MX2019005988A (es) 2016-11-29 2019-10-14 Alert Innovation Inc Sistema automatizado de gestion de inventario y cadena de abastecimiento de minoristas.
DE102017000527A1 (de) 2017-01-20 2018-07-26 Liebherr-Verzahntechnik Gmbh Vorrichtung zum automatisierten Entnehmen von in einem Behälter angeordneten Werkstücken
DE102017000524A1 (de) * 2017-01-20 2018-07-26 Liebherr-Verzahntechnik Gmbh Vorrichtung zum automatisierten Entnehmen von in einem Behälter angeordneten Werkstücken
JP7478320B2 (ja) * 2017-02-24 2024-05-07 ウォルマート アポロ リミテッド ライアビリティ カンパニー 在庫管理システムおよび方法
US10537990B2 (en) 2017-03-30 2020-01-21 Dematic Corp. Split robotic article pick and put system
IT201700041616A1 (it) * 2017-04-13 2018-10-13 Ct Pack Srl Stazione automatica di prelevamento di articoli e relativo procedimento di utilizzo.
US11205059B2 (en) 2017-04-18 2021-12-21 Berkshire Grey, Inc. Systems and methods for separating objects using conveyor transfer with one or more object processing systems
US11080496B2 (en) 2017-04-18 2021-08-03 Berkshire Grey, Inc. Systems and methods for separating objects using vacuum diverts with one or more object processing systems
US11416695B2 (en) 2017-04-18 2022-08-16 Berkshire Grey Operating Company, Inc. Systems and methods for distributing induction of objects to a plurality of object processing systems
US11200390B2 (en) 2017-04-18 2021-12-14 Berkshire Grey, Inc. Systems and methods for separating objects using drop conveyors with one or more object processing systems
CA3152708A1 (en) 2017-04-18 2018-10-25 Berkshire Grey Operating Company, Inc. Systems and methods for processing objects including space efficient distribution stations and automated output processing
US11301654B2 (en) 2017-04-18 2022-04-12 Berkshire Grey Operating Company, Inc. Systems and methods for limiting induction of objects to one or more object processing systems
US11055504B2 (en) 2017-04-18 2021-07-06 Berkshire Grey, Inc. Systems and methods for separating objects using a vacuum roller with one or more object processing systems
CA3061181C (en) * 2017-04-24 2023-10-03 Berkshire Grey, Inc. Systems and methods for providing singulation of objects for processing using object movement redistribution
US10086510B1 (en) * 2017-07-07 2018-10-02 Fallas Automation, Inc. Dual robotic case packing system for standup product
JP6592043B2 (ja) * 2017-07-19 2019-10-16 ファナック株式会社 ワークを循環する供給装置を備える搬送装置
WO2019028146A1 (en) 2017-08-02 2019-02-07 Berkshire Grey, Inc. SYSTEMS AND METHODS FOR ACQUIRING AND MOVING OBJECTS HAVING COMPLEX EXTERIOR SURFACES
US10421613B2 (en) * 2018-02-23 2019-09-24 Grabit, Inc. Electroadhesive tilt sorter and control system
US10843333B2 (en) 2018-03-05 2020-11-24 Berkshire Grey, Inc. Systems and methods for processing objects, including automated re-circulating processing stations
US11584016B2 (en) * 2018-04-24 2023-02-21 Fanuc Corporation Robot controller and system
US11458635B2 (en) * 2018-05-09 2022-10-04 Intelligrated Headquarters, Llc Method and system for manipulating articles
US11318620B2 (en) 2018-05-09 2022-05-03 Intelligrated Headquarters, Llc Method and system for manipulating items
US10769587B2 (en) * 2018-07-02 2020-09-08 Walmart Apollo, Llc Systems and methods of storing and retrieving retail store product inventory
WO2020086748A1 (en) 2018-10-23 2020-04-30 Berkshire Grey, Inc. Systems and methods for dynamic processing of objects with data verification
US10781053B1 (en) 2018-12-13 2020-09-22 Amazon Technologies, Inc. Control system for automated singulation system
US10961060B1 (en) 2018-12-13 2021-03-30 Amazon Technologies, Inc. Automated singulation system
US11022961B2 (en) 2019-04-04 2021-06-01 Plus One Robotics, Inc. Industrial robotics systems and methods for continuous and automated learning
US10949635B2 (en) 2019-04-11 2021-03-16 Plus One Robotics, Inc. Systems and methods for identifying package properties in an automated industrial robotics system
US11359958B2 (en) * 2019-05-13 2022-06-14 Kindred Systems Inc. Multiple object detection
IT201900009663A1 (it) * 2019-06-20 2020-12-20 Cevolani Italia Srl Macchina per la lavorazione di spezzoni metallici nell’ambito della produzione di barattoli e relativo metodo.
EP3987469A1 (en) 2019-06-24 2022-04-27 Berkshire Grey Operating Company, Inc. Systems and methods for providing shipping of orders in an order fulfillment center
US10954081B1 (en) 2019-10-25 2021-03-23 Dexterity, Inc. Coordinating multiple robots to meet workflow and avoid conflict
NO20191511A1 (en) * 2019-12-20 2021-06-21 Autostore Tech As Picking system, storage system comprising a picking system and method of picking
US20210233258A1 (en) * 2020-01-28 2021-07-29 Embodied Intelligence Inc. Identifying scene correspondences with neural networks
US12110183B2 (en) 2020-06-04 2024-10-08 Walmart Apollo, Llc Robotic each picking in a micro-fulfillment center
US12059803B2 (en) 2020-06-22 2024-08-13 Material Handling Systems, Inc. Conveyor system with multiple robot singulators and buffering conveyor
US11753256B2 (en) * 2020-06-22 2023-09-12 Material Handling Systems, Inc. Conveyor system with multiple robot singulators
US11939164B1 (en) * 2020-06-23 2024-03-26 Amazon Technologies, Inc. Automated item handling systems and methods
CN112297047A (zh) * 2020-08-12 2021-02-02 北京京东乾石科技有限公司 端拾器、机械臂及机器人
TWI747554B (zh) * 2020-10-15 2021-11-21 鴻績工業股份有限公司 解包系統
US20220134384A1 (en) * 2020-11-05 2022-05-05 Beumer Corporation System and method for separating and singulating postal articles
US20220289502A1 (en) * 2021-03-15 2022-09-15 Dexterity, Inc. Adaptive robotic singulation system
US20220289501A1 (en) * 2021-03-15 2022-09-15 Dexterity, Inc. Singulation of arbitrary mixed items
US20240238162A1 (en) * 2021-08-27 2024-07-18 Multiply Labs Inc. System, method, and apparatus facilitating assembly of a capsule
CN114093094B (zh) * 2021-11-19 2022-12-30 临沂职业学院 一种带备用蜂巢柜的蜂巢系统
WO2024095120A1 (en) * 2022-11-02 2024-05-10 G.D S.P.A. Process for the automated handling of products within a plant

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS4829178A (ja) * 1971-08-16 1973-04-18
JPH11292276A (ja) * 1998-04-15 1999-10-26 Mitsubishi Heavy Ind Ltd 被把持物自動切り分け装置
JP2000061875A (ja) * 1998-08-25 2000-02-29 Matsushita Electric Works Ltd ロボットハンド
JP2006082186A (ja) * 2004-09-16 2006-03-30 Fanuc Ltd 物品供給装置
JP2010083648A (ja) * 2008-10-01 2010-04-15 Yamato Scale Co Ltd 組合せ秤の物品搬送装置
JP2010531796A (ja) * 2007-06-26 2010-09-30 アマゾン・テクノロジーズ・インコーポレーテッド 受注処理プロセスにおける非線形ユニットレベル仕分けのための方法及び装置
JP2013252961A (ja) * 2012-06-08 2013-12-19 Sinfonia Technology Co Ltd ワーク分別システム

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0264513U (ja) 1988-10-31 1990-05-15
WO1992003364A1 (en) * 1990-08-25 1992-03-05 Intelligent Automation Systems, Inc. Programmable reconfigurable parts feeder
JPH09202452A (ja) * 1996-01-22 1997-08-05 Kyodo Kumiai Techno Ueebu ブランク材整列装置
US6056108A (en) * 1997-11-17 2000-05-02 Adept Technology, Inc. Impulse-based, flexible parts feeder
US7028829B2 (en) 2002-06-06 2006-04-18 Buechi Felix Transport of bulk material items
FI116280B (fi) * 2003-05-05 2005-10-31 Wisematic Oy Pienten osien syöttölaite
JP4199264B2 (ja) * 2006-05-29 2008-12-17 ファナック株式会社 ワーク取り出し装置及び方法
JP4565023B2 (ja) * 2008-07-04 2010-10-20 ファナック株式会社 物品取り出し装置
JP5852364B2 (ja) * 2011-08-26 2016-02-03 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、およびプログラム
JP2014176926A (ja) * 2013-03-14 2014-09-25 Yaskawa Electric Corp ロボットシステムおよびワークの搬送方法
US9487361B2 (en) 2013-05-17 2016-11-08 Intelligrated Headquarters Llc Robotic carton unloader
CN105083976B (zh) * 2014-05-14 2018-02-06 泰科电子(上海)有限公司 电子设备生产系统
JP6415167B2 (ja) * 2014-08-04 2018-10-31 キヤノン株式会社 搬送制御装置、搬送制御方法、プログラムおよび搬送システム
JP5905549B1 (ja) * 2014-09-16 2016-04-20 ファナック株式会社 バラ積みされた物品を取出す物品取出装置
US9492923B2 (en) 2014-12-16 2016-11-15 Amazon Technologies, Inc. Generating robotic grasping instructions for inventory items

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS4829178A (ja) * 1971-08-16 1973-04-18
JPH11292276A (ja) * 1998-04-15 1999-10-26 Mitsubishi Heavy Ind Ltd 被把持物自動切り分け装置
JP2000061875A (ja) * 1998-08-25 2000-02-29 Matsushita Electric Works Ltd ロボットハンド
JP2006082186A (ja) * 2004-09-16 2006-03-30 Fanuc Ltd 物品供給装置
JP2010531796A (ja) * 2007-06-26 2010-09-30 アマゾン・テクノロジーズ・インコーポレーテッド 受注処理プロセスにおける非線形ユニットレベル仕分けのための方法及び装置
JP2010083648A (ja) * 2008-10-01 2010-04-15 Yamato Scale Co Ltd 組合せ秤の物品搬送装置
JP2013252961A (ja) * 2012-06-08 2013-12-19 Sinfonia Technology Co Ltd ワーク分別システム

Also Published As

Publication number Publication date
EP3475195A1 (en) 2019-05-01
JP6690026B2 (ja) 2020-04-28
US20170369244A1 (en) 2017-12-28
EP3475195B1 (en) 2021-05-05
US10221015B2 (en) 2019-03-05
CN109476425A (zh) 2019-03-15
WO2018005367A1 (en) 2018-01-04

Similar Documents

Publication Publication Date Title
JP6690026B2 (ja) 振動テーブルを含む自動アイテムシンギュレーション
US10614274B2 (en) Distributed autonomous robot systems and methods with RFID tracking
US11565881B1 (en) Mobile sortation and delivery of multiple items
US10272566B2 (en) Robotic grasping of items in inventory system
US9718188B2 (en) Networked robotic manipulators
KR102400028B1 (ko) 비순서적으로 도착하는 패키지를 처리하기 위한 로봇 시스템
US10625941B2 (en) Distributed autonomous robot systems and methods
US10023393B2 (en) Robotic tossing of items in inventory system
US10649446B2 (en) Techniques for conveyance device control
WO2018140690A1 (en) Systems and methods for distributed autonomous robot interfacing using live image feeds
EP3761245B1 (en) Robotic sortation system
US12076864B2 (en) Distributed autonomous robot interfacing systems and methods
WO2018140746A1 (en) Systems and methods for resolving issues in a distributed autonomous robot system
US10246257B1 (en) Rotating storage systems

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200213

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200316

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200408

R150 Certificate of patent or registration of utility model

Ref document number: 6690026

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250