JP6758903B2 - 情報処理装置、情報処理方法、プログラム、システム、および物品製造方法 - Google Patents
情報処理装置、情報処理方法、プログラム、システム、および物品製造方法 Download PDFInfo
- Publication number
- JP6758903B2 JP6758903B2 JP2016093306A JP2016093306A JP6758903B2 JP 6758903 B2 JP6758903 B2 JP 6758903B2 JP 2016093306 A JP2016093306 A JP 2016093306A JP 2016093306 A JP2016093306 A JP 2016093306A JP 6758903 B2 JP6758903 B2 JP 6758903B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- distance
- information processing
- processing
- processing unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1694—Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
- B25J9/1697—Vision controlled systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/002—Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/40—Robotics, robotics mapping to robotics vision
- G05B2219/40053—Pick 3-D object from pile of objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
Description
前記物体の距離の情報を得る処理を行う第1処理部と、
前記物体が配置されうる領域を表す複数の面それぞれと、前記第1処理部により前記情報を得られた各点との間の距離の最小値の統計量に基づいて、前記物体が前記領域にないか判定する処理を行う第2処理部と、
を有することを特徴とする情報処理装置である。
図1は、情報処理装置を含むシステムの構成例を示す図である。図1において、情報処理装置1は、部品2(ワークまたは物体ともいう)と、それらを収容する為の容器としてのパレット3とを含む計測対象との距離を計測する距離計測装置10(単に計測装置ともいう)を含みうる。また、情報処理装置1は、距離計測装置10の出力に基づいて情報処理を行う情報処理部20を含みうる。また、情報処理装置1は、距離計測装置10および情報処理部20の動作の制御や解析処理を行うコントローラ30をも含みうる。距離計測装置10は、3次元情報取得部11(単に計測部ともいう)と距離取得部12とを含み、要求される計測精度によってはデータ修正部13も含みうる。3次元情報取得部11は、計測対象を測定し、計測データを取得するデバイスであり、距離取得部12は、当該計測データに基づいて計測対象の距離情報(3次元情報)を取得するデバイスである。3次元情報取得部11の構成は、例えば、いわゆるTOF(Time of Flight)センサを含むものとしうる。または、3次元情報取得部11は、2台のカメラ(撮像部)を含むステレオカメラを含むものとしうる。または、3次元情報取得部11は、パターン投影部(プロジェクター)とカメラ(撮像部)とを含んで構成され、パターンを投影された対象物の撮像結果(画像データ)を取得するものとしうる。投影パターンは、空間符号化法や位相シフト法によるものが用いられうる。または、3次元情報取得部11は、スリット光投影部と撮像部とを含み、光切断法にしたがったものとしうる。また、3次元情報取得部11は、1次元または2次元の情報を取得するデバイス(撮像部)を含み、デバイスと対象物との間の相対的なスキャンによりデータを取得するものとしうる。
本実施形態は、基準面同士(ある2面)が互いに凸角をなして配置(接続)されている箇所が存在し、かつ曲面を含むようなパレット(モデル)に関する。情報処理装置1のハードウェア構成は、実施形態1におけるそれと同様としうる。図5は、実施形態2に係るパレットおよび空判定処理を説明するための図である。図5(A)は、パレットモデルの斜視図、図5(B)は、パレットモデルの上視図、図5(C)は、パレットモデルの断面図、図5(D)は、パレットモデルと距離計測点との間の位置関係を示している。パレットモデル500は、突起部付きのパレット3をモデル化して得られたものである。パレットモデル500の内面は、4つの垂直面501(501−A、501−B、501−C、501−D)と、2つの傾斜面502(502−A、502−B)と、2つの水平面503(503−A、503−B)との合計8面からなる。境界線506−Aは、傾斜面502−Aと傾斜面502−Bとの間の境界線であり、境界線506−Bは、傾斜面502−Bと水平面503−Bとの間の境界線である。
上述の計測部11は、ある支持部材に支持された状態で使用されうる。計測部11は、例えば、ロボット4(把持装置)に備え付けられて使用されうる。ここで、情報処理装置1とロボット4とを含むシステムが構成されうる。当該情報処理装置、当該ロボット、または当該システムは、物品製造方法に用いられうる。情報処理装置1は、物体2の位置および姿勢の認識のための処理を行い(第1工程)、当該処理により得られた位置および姿勢の情報をロボット(の制御部)4が取得する。ロボット4は、当該位置および姿勢の情報に基づいて、物体2の処理を行う(第2工程)。当該処理は、例えば、ロボットの先端のハンドなど(保持部またはエンドエフェクタ)で物体2を保持して移動(並進や回転など)させることである。または、ロボット4によって物体2を他の物体に組み付けることである。または、ロボット4によって物体2を加工することである。このような処理により、複数の物体(部品)で構成された物品(例えば電子回路基板や機械など)を製造することができる。なお、ロボットの制御部は、CPUなどの演算装置やメモリなどの記憶装置を含みうる。また、ロボットを制御する制御部は、ロボットの外部に設けてもよい。また、計測装置10により得られた計測データや画像データは、ディスプレイ208などの表示部に表示しうる。
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータ(またはCPUやMPU等)がソフトウェアを読み出して実行する処理である。
12 距離取得部(第1処理部を構成)
21 空判定部(第2処理部を構成)
Claims (15)
- 物体の位置および姿勢の認識のための処理を行う情報処理装置であって、
前記物体の距離の情報を得る処理を行う第1処理部と、
前記物体が配置されうる領域を表す複数の面それぞれと、前記第1処理部により前記情報を得られた各点との間の距離の最小値の統計量に基づいて、前記物体が前記領域にないか判定する処理を行う第2処理部と、
を有することを特徴とする情報処理装置。 - 前記第2処理部は、前記領域の情報を生成することを特徴とする請求項1に記載の情報処理装置。
- 前記第2処理部は、前記複数の面それぞれと前記各点との間の距離の符号を前記複数の面それぞれのどちら側に前記各点があるかに基づいて正または負とし、前記符号に基づいて当該距離を有する点の信頼性を評価することを特徴とする請求項1に記載の情報処理装置。
- 前記第2処理部は、前記複数の面それぞれを平面または曲面として生成することを特徴とする請求項1ないし請求項3のうちいずれか1項に記載の情報処理装置。
- 前記第1処理部は、前記物体を撮像する撮像部からの画像データに基づいて前記物体の距離の情報を得、
前記第2処理部は、前記撮像部の光軸の情報に基づいて、前記領域の情報を生成する、ことを特徴とする請求項2に記載の情報処理装置。 - 前記第2処理部は、前記物体を収容する容器の配置の情報に基づいて、前記領域の情報を生成する請求項2に記載の情報処理装置。
- 前記第2処理部は、重力の方向に基づいて、前記領域の情報を生成する請求項6に記載の情報処理装置。
- 前記第2処理部は、互いに凹角をなす2面を前記複数の面が含むように、前記複数の面を生成することを特徴とする請求項4に記載の情報処理装置。
- 前記第2処理部は、互いに凸角をなす2面を前記複数の面が含むように、前記複数の面を生成することを特徴とする請求項4または請求項7に記載の情報処理装置。
- 前記判定に係る表示を行う表示部を含むことを特徴とする請求項1ないし請求項9のうちいずれか1項に記載の情報処理装置。
- 前記物体の距離の情報を得るための計測データを得る計測部を含むことを特徴とする請求項1ないし請求項10のうちいずれか1項に記載の情報処理装置。
- 物体の位置および姿勢の認識のための処理を行う情報処理方法であって、
前記物体の距離の情報を得る処理を行う第1処理工程と、
前記物体が配置されうる領域を表す複数の面それぞれと、前記第1処理部により前記情報を得られた各点との間の距離の最小値の統計量に基づいて、前記物体が前記領域にないか判定する処理を行う第2処理工程と、
を含むことを特徴とする情報処理方法。 - 請求項12に記載の情報処理方法の各工程をコンピュータに実行させることを特徴とするプログラム。
- 物体の位置および姿勢の認識のための処理を行う請求項1ないし請求項11のうちいずれか1項に記載の情報処理装置と、
前記情報処理装置により行われた前記処理に基づいて、前記物体を保持して移動させるロボットと、
を含むシステム。 - 請求項1ないし請求項11のうちいずれか1項に記載の情報処理装置を用いて物体の位置および姿勢の認識のための処理を行う工程と、
前記工程で前記処理を行われた前記物体を処理する工程と、
を含むことを特徴とする物品製造方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016093306A JP6758903B2 (ja) | 2016-05-06 | 2016-05-06 | 情報処理装置、情報処理方法、プログラム、システム、および物品製造方法 |
US15/586,718 US20170323456A1 (en) | 2016-05-06 | 2017-05-04 | Information processing apparatus, information processing method, program, system, and article manufacturing method |
EP17169571.1A EP3242108A1 (en) | 2016-05-06 | 2017-05-04 | Information processing apparatus, information processing method, program, system, and article manufacturing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016093306A JP6758903B2 (ja) | 2016-05-06 | 2016-05-06 | 情報処理装置、情報処理方法、プログラム、システム、および物品製造方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017201276A JP2017201276A (ja) | 2017-11-09 |
JP6758903B2 true JP6758903B2 (ja) | 2020-09-23 |
Family
ID=59053869
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016093306A Active JP6758903B2 (ja) | 2016-05-06 | 2016-05-06 | 情報処理装置、情報処理方法、プログラム、システム、および物品製造方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20170323456A1 (ja) |
EP (1) | EP3242108A1 (ja) |
JP (1) | JP6758903B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7064664B2 (ja) * | 2018-03-28 | 2022-05-11 | 太平洋セメント株式会社 | 対象認識装置、方法およびプログラムならびに対象除去システム |
KR102163660B1 (ko) * | 2018-11-13 | 2020-10-08 | 현대오트론 주식회사 | 라이다의 신호 처리 장치 및 라이다 장치 |
CN113804100B (zh) * | 2020-06-11 | 2023-02-10 | 华为技术有限公司 | 确定目标对象的空间坐标的方法、装置、设备和存储介质 |
CN113858188A (zh) * | 2020-06-30 | 2021-12-31 | 罗伯特·博世有限公司 | 工业机器人的抓取方法和设备、计算机存储介质以及工业机器人 |
CN113988607A (zh) * | 2021-10-26 | 2022-01-28 | 成都飞机工业(集团)有限责任公司 | 零件装配超差的分析方法、装置、设备以及存储介质 |
DE102022202587A1 (de) | 2022-03-16 | 2023-09-21 | Volkswagen Aktiengesellschaft | Entnahmevorrichtung zur Entnahme von Werkstücken aus einem Werkstückbehälter |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3805302B2 (ja) * | 2002-12-13 | 2006-08-02 | ファナック株式会社 | ワーク取出し装置 |
DE102007060653A1 (de) * | 2007-12-15 | 2009-06-18 | Abb Ag | Positionsermittlung eines Objektes |
US8285034B2 (en) * | 2009-08-26 | 2012-10-09 | Bally Gaming, Inc. | Apparatus, method and article for evaluating a stack of objects in an image |
US9437005B2 (en) * | 2011-07-08 | 2016-09-06 | Canon Kabushiki Kaisha | Information processing apparatus and information processing method |
JP5975685B2 (ja) * | 2012-03-09 | 2016-08-23 | キヤノン株式会社 | 情報処理装置、情報処理方法 |
JP5620445B2 (ja) * | 2012-09-13 | 2014-11-05 | ファナック株式会社 | 選択条件に基づいてロボットの保持位置姿勢を決定する物品取出装置 |
JP6415026B2 (ja) * | 2013-06-28 | 2018-10-31 | キヤノン株式会社 | 干渉判定装置、干渉判定方法、コンピュータプログラム |
EP2869023B1 (en) * | 2013-10-30 | 2018-06-13 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method and corresponding computer program |
JP6338421B2 (ja) | 2014-03-31 | 2018-06-06 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法、把持システムおよびプログラム |
-
2016
- 2016-05-06 JP JP2016093306A patent/JP6758903B2/ja active Active
-
2017
- 2017-05-04 US US15/586,718 patent/US20170323456A1/en not_active Abandoned
- 2017-05-04 EP EP17169571.1A patent/EP3242108A1/en not_active Withdrawn
Also Published As
Publication number | Publication date |
---|---|
US20170323456A1 (en) | 2017-11-09 |
EP3242108A1 (en) | 2017-11-08 |
JP2017201276A (ja) | 2017-11-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6758903B2 (ja) | 情報処理装置、情報処理方法、プログラム、システム、および物品製造方法 | |
US11046530B2 (en) | Article transfer apparatus, robot system, and article transfer method | |
JP7083189B2 (ja) | 学習データセット作製方法及び装置 | |
US9616569B2 (en) | Method for calibrating an articulated end effector employing a remote digital camera | |
US7894661B2 (en) | Calibration apparatus, calibration method, program for calibration, and calibration jig | |
JP6324025B2 (ja) | 情報処理装置、情報処理方法 | |
JP6594129B2 (ja) | 情報処理装置、情報処理方法、プログラム | |
US11654571B2 (en) | Three-dimensional data generation device and robot control system | |
US11446822B2 (en) | Simulation device that simulates operation of robot | |
US20180290300A1 (en) | Information processing apparatus, information processing method, storage medium, system, and article manufacturing method | |
CN109313015B (zh) | 用于视觉系统的校准 | |
CN111683798A (zh) | 工件拾取装置以及工件拾取方法 | |
JP6885856B2 (ja) | ロボットシステムおよびキャリブレーション方法 | |
JP2018136896A (ja) | 情報処理装置、システム、情報処理方法、および物品の製造方法 | |
WO2020217878A1 (ja) | 対象物の位置姿勢を検出する装置、方法およびプログラム | |
JP5544464B2 (ja) | 対象物の3次元位置・姿勢認識装置及びその方法 | |
JP7331527B2 (ja) | ロボットの動作を決定する装置、方法およびプログラム | |
JP5976089B2 (ja) | 位置姿勢計測装置、位置姿勢計測方法、およびプログラム | |
JP7264247B2 (ja) | 情報処理装置及び情報処理方法 | |
JP7180783B2 (ja) | コンピュータビジョンシステムのキャリブレーション方法及びこれに用いる基準立体物 | |
US10656097B2 (en) | Apparatus and method for generating operation program of inspection system | |
JP2009216480A (ja) | 三次元位置姿勢計測方法および装置 | |
EP3708309A1 (en) | A method for determining positional error within a robotic cell environment | |
JP7401250B2 (ja) | 画像処理装置、制御方法およびプログラム | |
JP2017156968A (ja) | 情報処理装置、情報処理方法、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190418 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200128 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200327 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200804 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200902 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6758903 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |