JP2019025572A - ロボットの制御装置、ロボット、ロボットシステム、並びに、ロボットの異常を確認する方法 - Google Patents
ロボットの制御装置、ロボット、ロボットシステム、並びに、ロボットの異常を確認する方法 Download PDFInfo
- Publication number
- JP2019025572A JP2019025572A JP2017146117A JP2017146117A JP2019025572A JP 2019025572 A JP2019025572 A JP 2019025572A JP 2017146117 A JP2017146117 A JP 2017146117A JP 2017146117 A JP2017146117 A JP 2017146117A JP 2019025572 A JP2019025572 A JP 2019025572A
- Authority
- JP
- Japan
- Prior art keywords
- arm
- camera
- predetermined position
- robot
- control device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1694—Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
- B25J9/1697—Vision controlled systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1612—Programme controls characterised by the hand, wrist, grip control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1679—Programme controls characterised by the tasks executed
- B25J9/1692—Calibration of manipulator
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0014—Image feed-back for automatic industrial control, e.g. robot with camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
Abstract
Description
図1は、第1実施形態におけるロボットシステムの概念図である。このロボットシステムは、ロボット100と、制御装置200とを備えている。このロボット100は、カメラ170L,170Rで作業対象を認識し、自在に力を加減して、自律的に判断しながら作業を行える自律型ロボットである。また、ロボット100は、予め作成された教示データに従って作業を実行するティーチングプレイバックロボットとして動作することも可能である。
図3は、プロセッサー210が実行する基準所定位置記憶処理を示すフローチャートである。基準所定位置記憶処理は、カメラ170およびアーム160の校正(キャリブレーション)が実施された後に実行される。
図8は、プロセッサー210が実行する位置判定処理を示すフローチャートである。位置判定処理は、ロボット100が稼動を開始する毎に実行される。
上述した第1実施形態における制御装置200では、基準所定位置記憶処理は、カメラ170およびアーム160の校正(キャリブレーション)が実施された後に実行されていたが、本発明はこれに限られない。例えば、基準所定位置記憶処理は、カメラ170およびアーム160の校正(キャリブレーション)が実施された後に実行されることに加えて、制御装置200に接続されたロボット100が工場から出荷される前の検品の段階でも行われてもよい。また、基準所定位置記憶処理は、カメラ170およびアーム160の状態が校正時と同様であると確認できる場合には、任意のタイミングで行われてもよい。
Claims (7)
- ロボットのアームと、前記アームとは独立して設置されたカメラと、を制御する制御装置であって、
前記アームを制御するアーム制御部と、
前記カメラを制御するカメラ制御部と、
前記アームが特定の位置姿勢をとるように前記アーム制御部により制御された状態で前記アームを前記カメラで撮影した画像から、前記アームに設けられた特定形状のカメラ座標系における所定位置を検出する位置検出部と、
前記位置検出部によって検出された前記所定位置と、前記制御装置内に予め記憶された基準所定位置とのずれが、予め設定された許容範囲内であるか否か判定する位置判定部と、
を備える、制御装置。 - 請求項1に記載の制御装置であって、
前記位置検出部が検出する前記特定形状は、前記アームに付されたマークであり、
前記マークは、図心が重なる複数の構成要素から成り、
前記位置検出部は、前記図心の重なりを検出することによって、前記画像から前記マークを検出するとともに、前記画像内における前記マークの図心を前記所定位置として検出する、制御装置。 - 請求項1または請求項2に記載の制御装置に接続されたロボット。
- ロボットと、
前記ロボットに接続された請求項1または請求項2に記載の制御装置と、
を備えるロボットシステム。 - アームと、前記アームとは独立して設置されたカメラと、制御部と、を含むロボットであって、
前記制御部は、
前記アームを制御するアーム制御部と、
前記カメラを制御するカメラ制御部と、を含み、
前記アームが特定の位置姿勢をとるように前記アーム制御部により制御された状態で前記アームを前記カメラで撮影した画像から、前記アームに設けられた特定形状のカメラ座標系における所定位置を検出する位置検出部と、
前記位置検出部によって検出された前記所定位置と、前記制御部内に予め記憶された基準所定位置とのずれが、予め設定された許容範囲内であるか否か判定する位置判定部と、
を備える、ロボット。 - ロボットのアームと、前記アームとは独立して設置されたカメラと、を制御する制御装置であって、
プロセッサーとメモリーとを備え、
前記プロセッサーは、前記アームが特定の位置姿勢をとるように前記アームを制御した状態で前記アームを前記カメラで撮影した画像から、前記アームに設けられた特定形状のカメラ座標系における所定位置を検出し、前記所定位置と、前記メモリーに予め記憶された基準所定位置とのずれが、予め設定された許容範囲内であるか否か判定する、制御装置。 - アームと、前記アームとは独立して設置されたカメラと、を備えるロボットにおいて前記カメラと前記アームとのうち少なくとも一方の異常を確認する方法であって、
前記アームが特定の位置姿勢をとるように制御された状態で前記アームを撮影した画像を取得する画像取得工程と、
前記画像から、前記アームに設けられた特定形状のカメラ座標系における所定位置を検出する位置検出工程と、
前記位置検出工程において検出された前記所定位置と、予め記憶された基準所定位置とのずれが、予め設定された許容範囲内であるか否か判定する位置判定工程と、
を備える、方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017146117A JP2019025572A (ja) | 2017-07-28 | 2017-07-28 | ロボットの制御装置、ロボット、ロボットシステム、並びに、ロボットの異常を確認する方法 |
US16/047,518 US10909720B2 (en) | 2017-07-28 | 2018-07-27 | Control device for robot, robot, robot system, and method of confirming abnormality of robot |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017146117A JP2019025572A (ja) | 2017-07-28 | 2017-07-28 | ロボットの制御装置、ロボット、ロボットシステム、並びに、ロボットの異常を確認する方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019025572A true JP2019025572A (ja) | 2019-02-21 |
JP2019025572A5 JP2019025572A5 (ja) | 2020-08-06 |
Family
ID=65038920
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017146117A Pending JP2019025572A (ja) | 2017-07-28 | 2017-07-28 | ロボットの制御装置、ロボット、ロボットシステム、並びに、ロボットの異常を確認する方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10909720B2 (ja) |
JP (1) | JP2019025572A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111805158A (zh) * | 2020-05-25 | 2020-10-23 | 福建星云电子股份有限公司 | 一种机器人的夹具位移自检测方法及系统 |
WO2023026750A1 (ja) * | 2021-08-26 | 2023-03-02 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 遠隔監視システム、異常検知システム、遠隔監視方法およびプログラム |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6538751B2 (ja) | 2017-05-18 | 2019-07-03 | ファナック株式会社 | プログラミング装置及びロボット制御方法 |
US10899012B2 (en) * | 2019-02-15 | 2021-01-26 | GM Global Technology Operations LLC | Coordinated robot to robot component assembly |
US11597078B2 (en) * | 2020-07-28 | 2023-03-07 | Nvidia Corporation | Machine learning control of object handovers |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63288696A (ja) * | 1987-05-21 | 1988-11-25 | 株式会社安川電機 | ロボット動作異常監視方式 |
JPH02262991A (ja) * | 1989-03-31 | 1990-10-25 | Mitsubishi Electric Corp | ロボット動作監視装置 |
JPH0538688A (ja) * | 1991-07-30 | 1993-02-19 | Nok Corp | 産業用ロボツトシステムの座標系較正方法 |
JPH07237160A (ja) * | 1994-02-25 | 1995-09-12 | Natl Space Dev Agency Japan<Nasda> | 遠隔操作型ロボットの自動実行監視方式 |
JP2011125976A (ja) * | 2009-12-18 | 2011-06-30 | Denso Wave Inc | ロボットの故障検出装置 |
JP2015136764A (ja) * | 2014-01-23 | 2015-07-30 | セイコーエプソン株式会社 | 制御装置、ロボットシステム、ロボット及びロボット制御方法 |
JP2015530276A (ja) * | 2012-10-05 | 2015-10-15 | ベックマン コールター, インコーポレイテッド | カメラベースの自動アライメントのシステム及び方法 |
JP2015199192A (ja) * | 2014-03-31 | 2015-11-12 | キヤノン株式会社 | ロボットシステムの制御方法、プログラム、記録媒体、及びロボットシステム |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3242108B2 (ja) * | 1992-01-30 | 2001-12-25 | 富士通株式会社 | ターゲットマークの認識・追跡システム及び方法 |
FR2846432B1 (fr) * | 2002-10-24 | 2005-03-11 | Commissariat Energie Atomique | Cible codee et procede de photogrammetre utilisant de telles cibles |
JP5447235B2 (ja) | 2009-07-31 | 2014-03-19 | セイコーエプソン株式会社 | マーカー処理方法、マーカー処理装置、およびマーカー処理プログラム |
US11699247B2 (en) | 2009-12-24 | 2023-07-11 | Cognex Corporation | System and method for runtime determination of camera miscalibration |
WO2013192598A1 (en) * | 2012-06-21 | 2013-12-27 | Excelsius Surgical, L.L.C. | Surgical robot platform |
US20170032529A1 (en) * | 2015-07-27 | 2017-02-02 | Csir | Method of calibrating a helmet and a system therefor |
JP2018012184A (ja) * | 2016-07-22 | 2018-01-25 | セイコーエプソン株式会社 | 制御装置、ロボットおよびロボットシステム |
-
2017
- 2017-07-28 JP JP2017146117A patent/JP2019025572A/ja active Pending
-
2018
- 2018-07-27 US US16/047,518 patent/US10909720B2/en active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63288696A (ja) * | 1987-05-21 | 1988-11-25 | 株式会社安川電機 | ロボット動作異常監視方式 |
JPH02262991A (ja) * | 1989-03-31 | 1990-10-25 | Mitsubishi Electric Corp | ロボット動作監視装置 |
JPH0538688A (ja) * | 1991-07-30 | 1993-02-19 | Nok Corp | 産業用ロボツトシステムの座標系較正方法 |
JPH07237160A (ja) * | 1994-02-25 | 1995-09-12 | Natl Space Dev Agency Japan<Nasda> | 遠隔操作型ロボットの自動実行監視方式 |
JP2011125976A (ja) * | 2009-12-18 | 2011-06-30 | Denso Wave Inc | ロボットの故障検出装置 |
JP2015530276A (ja) * | 2012-10-05 | 2015-10-15 | ベックマン コールター, インコーポレイテッド | カメラベースの自動アライメントのシステム及び方法 |
JP2015136764A (ja) * | 2014-01-23 | 2015-07-30 | セイコーエプソン株式会社 | 制御装置、ロボットシステム、ロボット及びロボット制御方法 |
JP2015199192A (ja) * | 2014-03-31 | 2015-11-12 | キヤノン株式会社 | ロボットシステムの制御方法、プログラム、記録媒体、及びロボットシステム |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111805158A (zh) * | 2020-05-25 | 2020-10-23 | 福建星云电子股份有限公司 | 一种机器人的夹具位移自检测方法及系统 |
WO2023026750A1 (ja) * | 2021-08-26 | 2023-03-02 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 遠隔監視システム、異常検知システム、遠隔監視方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
US10909720B2 (en) | 2021-02-02 |
US20190035108A1 (en) | 2019-01-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2019025572A (ja) | ロボットの制御装置、ロボット、ロボットシステム、並びに、ロボットの異常を確認する方法 | |
CN109227601B (zh) | 控制装置、机器人、机器人系统及校正方法 | |
JP7237483B2 (ja) | ロボットシステムの制御方法、制御プログラム、記録媒体、制御装置、ロボットシステム、物品の製造方法 | |
CN109227532B (zh) | 机器人的控制装置及其系统、机器人及摄像机的校正方法 | |
JP6429473B2 (ja) | ロボットシステム、ロボットシステムの校正方法、プログラム、およびコンピュータ読み取り可能な記録媒体 | |
TWI672206B (zh) | 機械手臂非接觸式工具中心點校正裝置及其方法以及具有校正功能的機械手臂系統 | |
JP5850962B2 (ja) | ビジュアルフィードバックを利用したロボットシステム | |
US9517560B2 (en) | Robot system and calibration method of the robot system | |
CN109648605B (zh) | 机器人系统 | |
JP5815761B2 (ja) | 視覚センサのデータ作成システム及び検出シミュレーションシステム | |
CN109940662B (zh) | 具备拍摄工件的视觉传感器的摄像装置 | |
US9884425B2 (en) | Robot, robot control device, and robotic system | |
JP2009269110A (ja) | 組立装置 | |
JP2018111165A (ja) | 視覚センサのキャリブレーション装置、方法及びプログラム | |
JP2005201824A (ja) | 計測装置 | |
JPWO2018043525A1 (ja) | ロボットシステム、ロボットシステム制御装置、およびロボットシステム制御方法 | |
JP2016185572A (ja) | ロボット、ロボット制御装置およびロボットシステム | |
JP6950638B2 (ja) | マニピュレータ制御装置、マニピュレータ制御方法、及びマニピュレータ制御プログラム | |
JP2008254150A (ja) | ロボットの教示装置及び教示方法 | |
JP6885856B2 (ja) | ロボットシステムおよびキャリブレーション方法 | |
WO2018209592A1 (zh) | 一种机器人的运动控制方法、机器人及控制器 | |
CN111152243A (zh) | 控制系统 | |
JP5787646B2 (ja) | ロボットシステム及び部品の製造方法 | |
US10491882B2 (en) | Calibration method and calibration tool of camera | |
JP5296624B2 (ja) | 枝管を母管に配置して溶接する溶接方法および枝管を母管に配置する配置方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200624 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200624 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210406 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210526 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20211130 |