JP2021075395A5 - - Google Patents

Download PDF

Info

Publication number
JP2021075395A5
JP2021075395A5 JP2020158291A JP2020158291A JP2021075395A5 JP 2021075395 A5 JP2021075395 A5 JP 2021075395A5 JP 2020158291 A JP2020158291 A JP 2020158291A JP 2020158291 A JP2020158291 A JP 2020158291A JP 2021075395 A5 JP2021075395 A5 JP 2021075395A5
Authority
JP
Japan
Prior art keywords
packing plan
plan
container
existing packing
placement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020158291A
Other languages
English (en)
Other versions
JP2021075395A (ja
Filing date
Publication date
Priority claimed from US16/905,837 external-priority patent/US11020854B2/en
Application filed filed Critical
Publication of JP2021075395A publication Critical patent/JP2021075395A/ja
Publication of JP2021075395A5 publication Critical patent/JP2021075395A5/ja
Pending legal-status Critical Current

Links

Claims (20)

  1. 1つまたは複数のプロセッサによって実行された場合に、前記1つまたは複数のプロセッサに方法を実施させるプロセッサ命令が記憶された有形非一時的コンピュータ可読媒体であって、
    前記方法は、
    タスク位置にあり、かつ既存のパッキングプランに従ってオブジェクトのセットを受け取るように指定されたコンテナを表すリアルタイム画像を取得することと、
    離散化単位に従う前記リアルタイム画像の分割に基づいて、実際のコンテナモデルを動的に生成することと、
    前記実際のコンテナモデルに基づいて前記コンテナ内の前記既存のパッキングプランの載置を調整するための候補パック位置を導出することと、
    前記候補パック位置に従って前記既存のパッキングプランを調整することと、
    ロボットアーム及びエンドエフェクタを使用して、前記オブジェクトのセットを前記コンテナ内に載置するための前記調整されたパッキングプランを実施することと、
    を含む、有形非一時的コンピュータ可読媒体。
  2. 前記方法は、
    前記リアルタイム画像に描かれた前記コンテナの輪郭及び/または前記コンテナの1つまたは複数の壁を分析することに基づいて想定外の状況を検出することをさらに含み、
    前記実際のコンテナモデルを動的に生成すること、前記候補パック位置を導出すること、前記既存のパッキングプランを調整すること、及び前記調整されたパッキングプランを実施することは、前記想定外の状況の検出に対する応答である、
    請求項1に記載の有形非一時的コンピュータ可読媒体。
  3. 前記方法は、
    前記既存のパッキングプランに基づいてパッキング単位を計算することであって、前記パッキング単位は、前記オブジェクトのセットの物理的な属性を表すことと、
    前記候補パック位置における前記パッキング単位を前記実際のコンテナと比較することに基づいて適合ステータスを決定することと、をさらに含み、
    前記既存のパッキングプランは、前記適合ステータスに従って調整される、
    請求項1に記載の有形非一時的コンピュータ可読媒体。
  4. 前記適合ステータスは、
    初期のパッキングプランを前記候補パック位置にずらすことに対応する、調整された位置における前記オブジェクトのセット内の基準オブジェクトの載置に関連するモーションプランを表す更新された進入路を導出することと、
    前記更新された進入路の導出に成功したことに基づいて、前記候補パック位置を有効化することと、
    を含む、請求項3に記載の有形非一時的コンピュータ可読媒体。
  5. 前記更新された進入路は、前記パッキングプランの載置シーケンス内の第1のオブジェクトを載置するためのものである、請求項4に記載の有形非一時的コンピュータ可読媒体。
  6. 前記更新された進入路は、前記パッキングプランの外周エッジまたはコーナーを形成する前記基準オブジェクトの配置に関連する前記モーションプランを表す、請求項4に記載の有形非一時的コンピュータ可読媒体。
  7. 前記既存のパッキングプランは、対応するオブジェクトのセットを前記コンテナ内に載置するための初期載置位置のセットを含み、
    前記既存のパッキングプランを調整することは、前記候補パック位置に基づいて前記初期載置位置のセットをずらすことを含む、
    請求項1に記載の有形非一時的コンピュータ可読媒体。
  8. 前記既存のパッキングプランを調整することは、
    前記初期のパッキングプランを前記候補パック位置にずらすことに対応する、調整された位置における前記オブジェクトのセット内の基準オブジェクトの載置に関連するモーションプランを表す更新された進入路を導出することと、
    (1)前記基準オブジェクトのための前記更新された進入路と(2)前記既存のパッキングプランに従った前記基準オブジェクトのための前の進入路との差に基づいて、前記オブジェクトのセット内の残りのオブジェクトのための既存のモーションプランを調整することと、
    を含む、請求項7に記載の有形非一時的コンピュータ可読媒体。
  9. 前記方法は、
    前記既存のパッキングプランが、前記コンテナの垂直な壁からの閾値距離内にオブジェクトを載置するための載置位置を含むか否かを決定することと、
    前記オブジェクトを載置するための前記候補位置に基づいて更新された載置位置を決定することと、をさらに含み、
    前記既存のパッキングプランを調整することは、垂直な向きの構造からの支持を分析するように構成された1つまたは複数のルールに従って、前記更新された載置位置を有効化することを含む、
    請求項1に記載の有形非一時的コンピュータ可読媒体。
  10. 前記既存のパッキングプランを調整することは、
    前記オブジェクトのセットを表すオブジェクトモデルを取得することと、
    前記オブジェクトのセットを載置するための候補場所を決定することと、
    前記候補場所に従って前記オブジェクトモデルを前記実際のコンテナモデルに重ねることと、
    1つまたは複数の載置ルールに基づいて前記候補場所を有効化することと、
    に基づいて、新しいパッキングプランを動的に再導出することを含む、請求項1に記載の有形非一時的コンピュータ可読媒体。
  11. タスク位置にあり、かつ既存のパッキングプランに従ってオブジェクトのセットを受け取るように指定されたコンテナを表すリアルタイム画像を取得するように構成される通信デバイスと、
    前記通信デバイスに結合された少なくとも1つのプロセッサと、
    を備え、
    前記少なくとも1つのプロセッサは、
    離散化単位に従う前記リアルタイム画像の分割に基づいて、実際のコンテナモデルを動的に生成することと、
    前記実際のコンテナモデルに基づいて前記コンテナ内の前記既存のパッキングプランの載置を調整するための候補パック位置を導出することと、
    前記候補パック位置に従って前記既存のパッキングプランを調整することと、
    ロボットアーム及びエンドエフェクタを使用して、前記オブジェクトのセットを前記コンテナ内に載置するための前記調整されたパッキングプランを実施することと、
    を行う、ロボットシステム。
  12. 前記少なくとも1つのプロセッサは、
    前記既存のパッキングプランのための軸平行バウンディングボックス(AABB:axis aligned bounding box)を決定することに基づいて、前記既存のパッキングプランに基づくパッキング単位を計算することとであって、前記AABBは、(1)所定の軸のセットに従って位置調整され、かつ(2)前記既存のパッキングプラン内に表された前記オブジェクトの最外点と一致する1つまたは複数の長方形を含むことと、
    前記候補パック位置における前記AABBが前記実際のコンテナモデルの壁及び/または境界によって画定されるアクセス可能なエリア内に含まれるように、前記既存のパッキングプランを調整することと、
    を行う、請求項11に記載のロボットシステム。
  13. 前記少なくとも1つのプロセッサは、
    前記パッキングプランを前記候補パック位置にずらすことに対応する、調整された位置における前記オブジェクトのセット内の基準オブジェクトの載置に関連するモーションプランを表す更新された進入路を導出することと、
    前記更新された進入路の導出に成功したことに基づいて、前記既存のパッキングプランを調整することと、
    を行う、請求項11に記載のロボットシステム。
  14. 前記少なくとも1つのプロセッサは、
    前記既存のパッキングプランが、前記コンテナの垂直な壁からの閾値距離内にオブジェクトを載置するための載置位置を含むか否かを決定することと、
    前記オブジェクトのための更新された載置位置を決定することに基づいて前記既存のパッキングプランを調整することと、

    垂直な向きの構造からの支持を分析するように構成された1つまたは複数のルールに従って、前記更新された載置位置を有効化することと、
    を行う、請求項11に記載のロボットシステム。
  15. 前記少なくとも1つのプロセッサは、
    前記オブジェクトのセットを表すオブジェクトモデルを取得することと、
    前記オブジェクトのセットを載置するための候補場所を決定することと、
    前記候補場所に従って前記オブジェクトモデルを前記実際のコンテナモデルに重ねることと、
    1つまたは複数の載置ルールに基づいて前記候補場所を有効化することと、
    に基づいて新しいパッキングプランを動的に再導出することにより、前記既存のパッキングプランを調整する、
    請求項11に記載のロボットシステム。
  16. ロボットシステムを動作させるための方法であって、
    タスク位置にあり、かつ既存のパッキングプランに従ってオブジェクトのセットを受け取るように指定されたコンテナを表すリアルタイム画像を取得することと、
    離散化単位に従う前記リアルタイム画像の分割に基づいて、実際のコンテナモデルを動的に生成することと、
    前記実際のコンテナモデルに基づいて前記コンテナ内の前記既存のパッキングプランの載置を調整するための候補パック位置を導出することと、
    前記候補パック位置に従って前記既存のパッキングプランを調整することと、
    ロボットアーム及びエンドエフェクタを使用して、前記オブジェクトのセットを前記コンテナ内に載置するための前記調整されたパッキングプランを実施することと、
    を含む、方法。
  17. 前記リアルタイム画像に描かれた前記コンテナの輪郭及び/または前記コンテナの1つまたは複数の壁を分析することに基づいて想定外の状況を検出することをさらに含み、
    前記実際のコンテナモデルを動的に生成すること、前記候補パック位置を導出すること、前記既存のパッキングプランを調整すること、及び前記調整されたパッキングプランを実施することは、前記想定外の状況の検出に対する応答である、
    請求項16に記載の方法。
  18. 前記既存のパッキングプランに基づいてパッキング単位を計算することであって、前記パッキング単位は、前記オブジェクトのセットの物理的な属性を表すことと、
    前記候補パック位置における前記パッキング単位を前記実際のコンテナと比較することに基づいて適合ステータスを決定することと、をさらに含み、
    前記既存のパッキングプランは、前記適合ステータスに従って調整される、
    請求項16に記載の方法。
  19. 前記既存のパッキングプランを調整することは、
    前記パッキングプランを前記候補パック位置にずらすことに対応する、調整された位置における前記オブジェクトのセット内の基準オブジェクトの載置に関連するモーションプランを表す更新された進入路を導出することと、
    前記更新された進入路の導出に成功したことに基づいて、前記候補パック位置を有効化することと、
    を含む、請求項16に記載の方法。
  20. 前記既存のパッキングプランが、前記コンテナの垂直な壁からの閾値距離内にオブジェクトを載置するための載置位置を含むか否かを決定することをさらに含み、
    前記既存のパッキングプランを調整することは、
    前記オブジェクトのための更新された載置位置を決定することと、
    垂直な向きの構造からの支持を分析するように構成された1つまたは複数のルールに従って、前記更新された載置位置を有効化することと、を含む、
    請求項16に記載の方法。
JP2020158291A 2019-11-05 2020-09-23 壁に基づくパッキング機構を有するロボットシステム及びその動作方法 Pending JP2021075395A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962931161P 2019-11-05 2019-11-05
US62/931,161 2019-11-05
US16/905,837 2020-06-18
US16/905,837 US11020854B2 (en) 2019-11-05 2020-06-18 Robotic system with wall-based packing mechanism and methods of operating same

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020130375A Division JP6771799B1 (ja) 2019-11-05 2020-07-31 壁に基づくパッキング機構を有するロボットシステム及びその動作方法

Publications (2)

Publication Number Publication Date
JP2021075395A JP2021075395A (ja) 2021-05-20
JP2021075395A5 true JP2021075395A5 (ja) 2023-10-23

Family

ID=75686827

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020130375A Active JP6771799B1 (ja) 2019-11-05 2020-07-31 壁に基づくパッキング機構を有するロボットシステム及びその動作方法
JP2020158291A Pending JP2021075395A (ja) 2019-11-05 2020-09-23 壁に基づくパッキング機構を有するロボットシステム及びその動作方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2020130375A Active JP6771799B1 (ja) 2019-11-05 2020-07-31 壁に基づくパッキング機構を有するロボットシステム及びその動作方法

Country Status (5)

Country Link
US (3) US11020854B2 (ja)
JP (2) JP6771799B1 (ja)
KR (1) KR20210054448A (ja)
CN (2) CN112775960A (ja)
DE (1) DE102020127473A1 (ja)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112019000125B4 (de) 2018-10-30 2021-07-01 Mujin, Inc. Systeme, vorrichtungen und verfahren zur automatisierten verpackungsregistrierung
US10369701B1 (en) 2018-10-30 2019-08-06 Mujin, Inc. Automated package registration systems, devices, and methods
US11216014B1 (en) * 2019-08-01 2022-01-04 Amazon Technologies, Inc. Combined semantic configuration spaces
US11020854B2 (en) * 2019-11-05 2021-06-01 Mujin, Inc. Robotic system with wall-based packing mechanism and methods of operating same
EP3862939A1 (en) * 2020-02-05 2021-08-11 Tata Consultancy Services Limited System and method for autonomous multi-bin parcel loading system
EP3866079A1 (en) * 2020-02-12 2021-08-18 Tata Consultancy Services Limited Method and system for automated object packing
US11443449B2 (en) * 2020-02-26 2022-09-13 Zebra Technologies Corporation Three-dimensional (3D) imaging systems and methods for virtual grading of package walls in commercial trailer loading
US11772833B1 (en) * 2020-03-30 2023-10-03 Amazon Technologies, Inc. Systems and methods for automated custom shipping containers
US11511417B1 (en) * 2020-05-18 2022-11-29 Amazon Technologies, Inc. Conveyance modulation based on fragility ratings
US11334085B2 (en) * 2020-05-22 2022-05-17 The Regents Of The University Of California Method to optimize robot motion planning using deep learning
US20220016779A1 (en) * 2020-07-15 2022-01-20 The Board Of Trustees Of The University Of Illinois Autonomous Robot Packaging of Arbitrary Objects
JP7395451B2 (ja) * 2020-09-16 2023-12-11 株式会社東芝 ハンドリング装置、処理装置、コントローラ及びプログラム
US11905115B2 (en) * 2021-04-30 2024-02-20 Dexterity, Inc. Robotic system for identifying items
EP4355672A1 (en) * 2021-06-16 2024-04-24 Dexterity, Inc. Workflow for using tree search-based approach for placing boxes on pallet with limited knowledge of future sequence
WO2022265933A1 (en) * 2021-06-16 2022-12-22 Dexterity, Inc. Collision avoidance based on vision data, geometric data and physics engine evaluation
WO2022265931A1 (en) * 2021-06-16 2022-12-22 Dexterity, Inc. Simulated box placement for algorithm evaluation and refinement
DE102021213568A1 (de) 2021-11-30 2023-06-01 Gebhardt Fördertechnik GmbH Lager- und Entnahmesystem sowie Verfahren zum Betreiben eines Lager- und Entnahmesystems
CN114275211B (zh) * 2022-01-10 2023-03-03 季华实验室 一种防止物体挤压的自动化堆放方法及装置
US20230245036A1 (en) * 2022-01-31 2023-08-03 Dexterity, Inc. Optimization of package weight distribution
CN114803570B (zh) * 2022-04-20 2023-06-09 北京汇力智能科技有限公司 物料抓取策略的确定方法、装置、存储介质以及电子设备
CN117961877A (zh) * 2022-10-25 2024-05-03 罗伯特·博世有限公司 用于确定放置对象的路径的方法、装置和计算机可读存储介质
CN115457088B (zh) * 2022-10-31 2023-03-24 成都盛锴科技有限公司 一种列车定轴方法及系统
CN117067204A (zh) 2023-08-18 2023-11-17 浙江恒逸石化有限公司 控制方法、装置、设备以及存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5908283A (en) 1996-11-26 1999-06-01 United Parcel Service Of Americia, Inc. Method and apparatus for palletizing packages of random size and weight
JP3969334B2 (ja) 2003-04-04 2007-09-05 株式会社ダイフク 物品の積付方法
EP3303188B1 (en) * 2015-06-02 2023-11-29 Alert Innovation Inc. Storage and retrieval system
US9600798B2 (en) * 2015-08-12 2017-03-21 Amazon Technologies, Inc. Automated materials handling facility
JP6737087B2 (ja) 2016-09-07 2020-08-05 株式会社ダイフク 物品積載設備
DE102017000524A1 (de) * 2017-01-20 2018-07-26 Liebherr-Verzahntechnik Gmbh Vorrichtung zum automatisierten Entnehmen von in einem Behälter angeordneten Werkstücken
US10766149B2 (en) * 2018-03-23 2020-09-08 Amazon Technologies, Inc. Optimization-based spring lattice deformation model for soft materials
US10335947B1 (en) * 2019-01-18 2019-07-02 Mujin, Inc. Robotic system with piece-loss management mechanism
US10456915B1 (en) * 2019-01-25 2019-10-29 Mujin, Inc. Robotic system with enhanced scanning mechanism
US10576630B1 (en) * 2019-05-31 2020-03-03 Mujin, Inc. Robotic system with a robot arm suction control mechanism and method of operation thereof
CN112405570A (zh) * 2019-08-21 2021-02-26 牧今科技 用于夹持和保持物体的机器人多夹持器组件和方法
US11020854B2 (en) * 2019-11-05 2021-06-01 Mujin, Inc. Robotic system with wall-based packing mechanism and methods of operating same

Similar Documents

Publication Publication Date Title
JP2021075395A5 (ja)
JP2020196124A5 (ja)
US11727593B1 (en) Automated data capture
WO2022073427A1 (zh) 物体抓取点的视觉定位方法、装置、存储介质及电子设备
US11640517B2 (en) Update of local features model based on correction to robot action
US11498210B2 (en) Object handling device and computer program product
US11559894B2 (en) Object handling control device, object handling device, object handling method, and computer program product
JP2024023692A5 (ja)
JP2021054660A5 (ja)
JP6415026B2 (ja) 干渉判定装置、干渉判定方法、コンピュータプログラム
JP5025598B2 (ja) 干渉チェック制御装置および干渉チェック制御方法
JP2022036243A5 (ja)
JP2017100216A (ja) 情報処理装置、情報処理方法
JP6632208B2 (ja) 情報処理装置、情報処理方法、プログラム
US20210046644A1 (en) Automated personalized feedback for interactive learning applications
JP2007241857A (ja) ロボットシミュレーションのための装置、プログラム、記録媒体及び方法
EP4102458A1 (en) Method and apparatus for identifying scene contour, and computer-readable medium and electronic device
JP7377627B2 (ja) 物体検出装置、物体把持システム、物体検出方法及び物体検出プログラム
JP2018126862A (ja) 干渉判定装置、干渉判定方法、コンピュータプログラム
JP2021139882A5 (ja)
CN110930422A (zh) 物体外框确定方法、装置、计算机设备和可读存储介质
TWM606382U (zh) 即時校正夾持座標之機械手臂系統
US20210240194A1 (en) Control apparatus, control method, robot apparatus and program
JPH10128686A (ja) ロボットマニピュレータの制御方法およびロボットマニピュレータの制御装置
RU2685996C1 (ru) Способ и система предиктивного избегания столкновения манипулятора с человеком