JP2021139882A5 - - Google Patents

Download PDF

Info

Publication number
JP2021139882A5
JP2021139882A5 JP2020186970A JP2020186970A JP2021139882A5 JP 2021139882 A5 JP2021139882 A5 JP 2021139882A5 JP 2020186970 A JP2020186970 A JP 2020186970A JP 2020186970 A JP2020186970 A JP 2020186970A JP 2021139882 A5 JP2021139882 A5 JP 2021139882A5
Authority
JP
Japan
Prior art keywords
drawer
spatial structure
processing circuit
determining
movement command
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020186970A
Other languages
English (en)
Other versions
JP2021139882A (ja
Filing date
Publication date
Priority claimed from US16/929,854 external-priority patent/US11130237B1/en
Priority claimed from JP2020150960A external-priority patent/JP6796901B1/ja
Application filed filed Critical
Publication of JP2021139882A publication Critical patent/JP2021139882A/ja
Publication of JP2021139882A5 publication Critical patent/JP2021139882A5/ja
Pending legal-status Critical Current

Links

Claims (20)

  1. 少なくとも1つの処理回路を備える計算システムであって、
    前記少なくとも1つの処理回路は、引き出しが開位置にある間に、前記引き出し内の物体が空間構造感知装置の環境内にあるか、または空間構造感知装置の環境内にあったときに、
    前記空間構造感知装置によって生成された空間構造情報に基づいて、引き出し姿勢を決定することと、
    前記引き出し姿勢に基づいて、物体姿勢を決定することと、
    前記物体とのロボット相互作用を引き起こすための移動コマンドであって、前記物体姿勢に基づいて生成される移動コマンドを出力することと、
    を行うように構成される、計算システム。
  2. 前記少なくとも一つの処理回路は、
    前記物体が配置されている引き出し表面の配向、または、前記引き出し表面上の少なくとも一つの位置の奥行き値、のうちの少なくとも一つを記述するための引き出し表面の姿勢として、
    前記引き出し姿勢を決定するように構成される、請求項1に記載の計算システム。
  3. 前記少なくとも一つの処理回路は、前記引き出しが、前記引き出し表面からずれている引き出し縁を有するときに、前記引き出し縁の配向、または前記引き出し縁上の少なくとも一つの位置の奥行き値、のうちの少なくとも一つを記述するための引き出し縁の姿勢を決定するように構成され、
    前記引き出し縁の姿勢が、前記空間構造情報に基づいて決定され、
    前記引き出し表面の姿勢が、前記引き出し縁の姿勢に基づいて、かつ、前記引き出し縁と前記引き出し表面との間の定義された距離に基づいて決定される、請求項2に記載の計算システム。
  4. 前記少なくとも一つの処理回路は、
    前記物体と関連付けられた引き出しセグメント識別子であって、前記引き出し表面のセグメントを識別するためのものである前記引き出しセグメント識別子を受信することと、
    前記引き出し表面の姿勢に基づいて、前記引き出しセグメント識別子と関連付けられた位置を決定することと、
    を行うように構成される、請求項3に記載の計算システム。
  5. 前記少なくとも一つの処理回路は、衝突事象を回避する物体移動経路を決定するように構成され、
    前記衝突事象は、前記物体と、前記引き出し縁を形成する引き出し境界との衝突を表し、
    前記移動コマンドは、前記物体移動経路に基づいて生成される、請求項3に記載の計算システム。
  6. 前記少なくとも一つの処理回路は、物体識別子が前記物体上に配置されているときに、
    前記物体識別子の2D位置を記述するための物体識別子位置を決定することと、
    前記物体識別子位置および前記空間構造情報に基づいて、前記物体を表す一つ以上の位置である、一つ以上の物体位置の集合を決定することと、
    を行うように構成され、
    前記移動コマンドは、前記一つ以上の物体位置の集合に基づいて生成される、請求項1に記載の計算システム。
  7. 前記少なくとも一つの処理回路は、
    前記物体識別子位置を囲む領域を決定することと、
    前記物体識別子位置を囲む前記領域に対応する、前記空間構造情報の一部分を検索することによって、前記一つ以上の物体位置の集合を決定することと、
    を行うように構成される、請求項6に記載の計算システム。
  8. 前記空間構造情報は、前記空間構造感知装置の前記環境より感知された、一つ以上の表面上の複数の位置を表す点群を含み、
    前記一つ以上の物体位置の集合が検索される、前記空間構造情報の前記一部分は、前記物体識別子位置を囲む前記領域内に位置する、前記複数の位置の部分集合を含む、請求項7に記載の計算システム。
  9. 前記少なくとも一つの処理回路は、
    前記物体識別子位置を表すための2D座標である、少なくとも一つの2D物体識別子の座標を決定することと、
    前記2D物体識別子の座標に基づいて、一つ以上の2D物体座標の少なくとも一つの集合を決定することと、
    を行うように構成され、
    前記一つ以上の2D物体座標の集合は、前記一つ以上の物体位置の集合を表すための、一つ以上のそれぞれの2D座標を含み、
    前記移動コマンドは、前記一つ以上の2D物体座標の集合に基づいて、かつ、前記物体の配向および前記物体の奥行き値に基づいて生成される、請求項6に記載の計算システム。
  10. 前記少なくとも一つの処理回路は、前記物体識別子でコード化された情報に基づいて、物体サイズを決定するように構成され、
    前記一つ以上の物体位置の集合は、前記物体の境界を表し、前記物体サイズに基づいて決定される、請求項6に記載の計算システム。
  11. 前記少なくとも一つの処理回路は、
    前記物体と関連付けられた物体識別情報を受信することと、
    前記物体識別子にコード化された情報が、前記物体識別情報に合致するかどうかを決定することと、
    を行うように構成される、請求項6に記載の計算システム。
  12. 物体識別子感知装置がロボットのロボットアーム上に配置されているときに、前記少なくとも一つの処理回路は、前記物体識別子感知装置によって感知された情報に基づいて、前記物体識別子位置を決定するように構成される、請求項6に記載の計算システム。
  13. 前記移動コマンドは、前記ロボットに前記物体を移動させるための物体移動コマンドであり、
    前記少なくとも一つの処理回路は、前記ロボットアームに、前記物体識別子感知装置を前記引き出しの画定近接レベル内に移動させるための、センサー移動コマンドを出力するように構成され、
    前記物体識別子の位置は、前記センサー移動コマンドの出力後に決定される、請求項12に記載の計算システム。
  14. 前記センサー移動コマンドは、前記ロボットアームに、前記空間構造感知装置を前記引き出しの前記画定近接レベル内に移動させるためのものでもあり、
    前記空間構造情報は、前記空間構造感知装置が前記引き出しの前記画定近接レベル内にあるときに生成され、前記物体が配置されている引き出し表面の一部分を表す、請求項13に記載の計算システム。
  15. 前記引き出しが閉位置にあり、ハンドルを含むとき、前記少なくとも一つの処理回路は、
    前記引き出しの外表面上の位置を記述するための、空間構造追加情報を受信することと、
    前記空間構造追加情報に基づいて、前記ハンドルを表すための一つ以上のハンドル位置を決定することと、
    前記ロボットアームに、前記引き出しを前記閉位置から前記開位置へ移動させるための、引き出し移動コマンドを出力することと、
    を行うように構成され、
    前記引き出し移動コマンドは、前記一つ以上のハンドル位置に基づいて生成され、
    前記センサー移動コマンド及び前記物体移動コマンドは、前記引き出し移動コマンドの後に出力される、請求項13に記載の計算システム。
  16. 命令を有する非一時的コンピュータ可読媒体であって、
    前記命令は、計算システムの少なくとも一つの処理回路によって実行された際に、
    引き出しが開位置にある間に、前記引き出し内の物体が空間構造感知装置の環境内にあるか、または空間構造感知装置の環境内にあったときに、
    前記空間構造感知装置によって生成された空間構造情報を受信することと、
    前記空間構造情報に基づいて引き出し姿勢を決定することと、
    前記引き出し姿勢に基づいて物体姿勢を決定することと、
    前記物体とのロボット相互作用を引き起こすための移動コマンドであって、前記物体姿勢に基づいて生成される移動コマンドを出力することと、
    を前記少なくとも一つの処理回路に行わせる、非一時的コンピュータ可読媒体。
  17. 前記命令は、前記少なくとも一つの処理回路によって実行されるとき、
    前記物体が配置されている引き出し表面の配向、または前記引き出し表面上の少なくとも一つの位置の奥行き値、のうちの少なくとも一つを記述するための引き出し表面の姿勢として、前記引き出し姿勢を決定すること、
    を前記少なくとも一つの処理回路に行わせる、請求項16に記載の非一時的コンピュータ可読媒体。
  18. 前記命令は、前記少なくとも一つの処理回路によって実行されるとき、かつ前記引き出しが、前記引き出し表面からずれている引き出し縁を有するときに、
    前記引き出し縁の配向、または前記引き出し縁上の少なくとも一つの位置の奥行き値、のうちの少なくとも一つを記述するための引き出し縁の姿勢を決定すること、
    を前記少なくとも一つの処理回路に行わせ、
    前記引き出し縁の姿勢は、前記空間構造情報に基づいて決定され、
    前記引き出し表面の姿勢は、前記引き出し縁の姿勢に基づいて、かつ、前記引き出し縁と前記引き出し表面との間の定義された距離に基づいて決定される、請求項17に記載の非一時的コンピュータ可読媒体。
  19. 引き出しが開位置にある間に、前記引き出し内の物体が空間構造感知装置の環境内にあるか、または空間構造感知装置の環境内にあったときに、計算システムの処理回路によって空間構造情報を受信することと、
    前記空間構造情報に基づいて引き出し姿勢を決定することと、
    前記引き出し姿勢に基づいて物体姿勢を決定することと、
    前記物体とのロボット相互作用を引き起こすための移動コマンドであって、前記物体姿勢に基づいて生成される移動コマンドを出力することと、
    を含む、物体検出のための方法。
  20. 前記引き出し姿勢を決定することは、前記物体が配置されている引き出し表面の配向、または前記引き出し表面上の少なくとも一つの位置の奥行き値、のうちの少なくとも一つを記述するための引き出し表面の姿勢を決定することを含む、請求項19に記載の方法。
JP2020186970A 2020-03-05 2020-11-10 容器検出および物体検出を行うための方法ならびに計算システム Pending JP2021139882A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US202062985336P 2020-03-05 2020-03-05
US62/985,336 2020-03-05
US16/929,854 2020-07-15
US16/929,854 US11130237B1 (en) 2020-03-05 2020-07-15 Method and computing system for performing container detection and object detection
JP2020150960A JP6796901B1 (ja) 2020-03-05 2020-09-09 容器検出および物体検出を行うための方法ならびに計算システム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020150960A Division JP6796901B1 (ja) 2020-03-05 2020-09-09 容器検出および物体検出を行うための方法ならびに計算システム

Publications (2)

Publication Number Publication Date
JP2021139882A JP2021139882A (ja) 2021-09-16
JP2021139882A5 true JP2021139882A5 (ja) 2023-11-15

Family

ID=73646911

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020150960A Active JP6796901B1 (ja) 2020-03-05 2020-09-09 容器検出および物体検出を行うための方法ならびに計算システム
JP2020186970A Pending JP2021139882A (ja) 2020-03-05 2020-11-10 容器検出および物体検出を行うための方法ならびに計算システム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2020150960A Active JP6796901B1 (ja) 2020-03-05 2020-09-09 容器検出および物体検出を行うための方法ならびに計算システム

Country Status (3)

Country Link
JP (2) JP6796901B1 (ja)
CN (1) CN113361740A (ja)
DE (2) DE102020124221A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220355474A1 (en) * 2021-05-04 2022-11-10 Mujin, Inc. Method and computing system for performing robot motion planning and repository detection
US20230294918A1 (en) * 2022-03-18 2023-09-21 Hexagon Metrology, Inc. Recessed Drawer Opening Apparatus

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61206709A (ja) * 1985-03-07 1986-09-13 Motoda Electronics Co Ltd トレ−配送装置
JP4007204B2 (ja) * 2003-01-30 2007-11-14 松下電器産業株式会社 ロボットシステム
JP6734728B2 (ja) * 2016-08-05 2020-08-05 株式会社日立製作所 ロボットシステム及びピッキング方法
JP7045139B2 (ja) * 2017-06-05 2022-03-31 株式会社日立製作所 機械学習装置、機械学習方法、および機械学習プログラム
JP6923383B2 (ja) * 2017-07-27 2021-08-18 株式会社日立物流 ピッキングロボットおよびピッキングシステム

Similar Documents

Publication Publication Date Title
JP6117901B1 (ja) 複数の物品の位置姿勢計測装置及び該位置姿勢計測装置を含むロボットシステム
JP2021054660A5 (ja)
US10894324B2 (en) Information processing apparatus, measuring apparatus, system, interference determination method, and article manufacturing method
US10335963B2 (en) Information processing apparatus, information processing method, and program
US11065767B2 (en) Object manipulation apparatus and object manipulation method for automatic machine that picks up and manipulates an object
JP2019523664A5 (ja)
TWI620627B (zh) 機器人及用於機器人之定位之方法
JP6747665B2 (ja) ロボット
JP2021139882A5 (ja)
JP2021022383A5 (ja)
US9802310B2 (en) Mobile robot estimating own position using a class-based own-position estimation unit
JP2014528057A5 (ja)
JP2008304268A5 (ja)
JP2014161965A (ja) 物品取り出し装置
Huang et al. Sensor-aided teleoperated grasping of transparent objects
JP5983506B2 (ja) 把持対象物の把持パターン検出方法およびロボット
Lutz et al. Probabilistic object recognition and pose estimation by fusing multiple algorithms
JP2015084173A5 (ja)
Lin et al. Cloud robotic grasping of Gaussian mixture model based on point cloud projection under occlusion
Zhu et al. Failure handling of robotic pick and place tasks with multimodal cues under partial object occlusion
JPH10128686A (ja) ロボットマニピュレータの制御方法およびロボットマニピュレータの制御装置
US11823414B2 (en) Information processing device, information processing method, and information processing non-transitory computer readable medium
US9410980B2 (en) Work monitoring system
Liu et al. Research on Target Pose Measurement Based on AprilTag Identification
JP7286524B2 (ja) ピッキングロボット、ピッキング方法及びプログラム