CN105835074B - 机器手臂取放物件的教导方法 - Google Patents

机器手臂取放物件的教导方法 Download PDF

Info

Publication number
CN105835074B
CN105835074B CN201510013791.6A CN201510013791A CN105835074B CN 105835074 B CN105835074 B CN 105835074B CN 201510013791 A CN201510013791 A CN 201510013791A CN 105835074 B CN105835074 B CN 105835074B
Authority
CN
China
Prior art keywords
image
robot
pick
point
place
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510013791.6A
Other languages
English (en)
Other versions
CN105835074A (zh
Inventor
黄钟贤
黄识忠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Techman Robot Inc
Original Assignee
Techman Robot Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Techman Robot Inc filed Critical Techman Robot Inc
Priority to CN201510013791.6A priority Critical patent/CN105835074B/zh
Publication of CN105835074A publication Critical patent/CN105835074A/zh
Application granted granted Critical
Publication of CN105835074B publication Critical patent/CN105835074B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Manipulator (AREA)

Abstract

本发明公开一种机器手臂取放物件的教导方法,推动机器手臂使目标出现在视野,设定出现位置为视觉点,撷取第一影像,再推动机器手臂自视觉点到目标,设定目标的位置为取放点,启动机器手臂自动控制,机器手臂自动取或放物件,由取放点自动移回视觉点,在视觉点撷取第二影像,将第一影像减去第二影像形成差量影像,根据差量影像设定目标的影像,以简化教导作业。

Description

机器手臂取放物件的教导方法
技术领域
本发明涉及一种机器手臂的教导方法,尤其是涉及教导机器手臂在夹取及放置物件间移动路径的方法。
背景技术
随着生产技术的快速发展,工厂自动化利用视觉装置定位物件,引导机器手臂抓取物件,自动进行组装制造,以提高生产速度。而影响机器手臂自动移动效率的主要关键,在于教导机器手臂自动取放物件,已成为机器手臂重要的课题。
先前技术对机器手臂取放物件的教导,由使用者先圈选需要夹取的物件,撷取物件的影像,利用影像处理,决定物件的影像,再分析物件的影像特征,规划夹取物件的方位。接着由机器手臂的操作界面,输入物件的影像,移动机器手臂,进行教导机器手臂夹取物件的移动路径,设定夹取物件的影像特征及方位。
同样,先前技术对机器手臂放置物件的教导,由使用者先圈选需要放置物件的置物位置,撷取置物位置的影像,利用影像处理,决定置物位置的影像,分析置物位置的影像特征,规划物件放置在置放部的方位。再由机器手臂的操作界面,输入置放部的影像,移动机器手臂,进行教导机器手臂放置物件的移动路径,设定置放部的影像特征及方位。
然后启动机器手臂,由机器手臂的控制装置,依循教导夹取物件的移动路径自动移动接近物件,利用视觉装置定位物件的影像特征,夹取物件设定的特征外形。再依循教导放置物件的移动路径自动移动接近置物位置,利用视觉装置定位置物位置的影像特征,最后将物件放置在设定外形特征的放置位置。
然而,先前技术机器手臂的教导方法,物件及置物位置需由使用者撷取影像、影像处理、分析影像特征、及设定夹取及放置物件的方位,不仅工作内容专业,非一般使用者可随意执行,且教导的作业程序繁复,影响机器手臂的操作效率。因此,机器手臂在取放物件的教导方法上,仍有问题亟待解决。
发明内容
本发明的目的在于提供一种机器手臂取放物件的教导方法,通过机器手臂上的臂上视觉装置,先后在视觉点撷取第一影像及第二影像,由差量影像处理,自动学习物件及置放部的特征,以降低使用的困难性。
本发明另一目的在于提供一种机器手臂取放物件的教导方法,仅需移动机器手臂至视觉点及取放点,教导机器手臂的移动路径,其余由机器手臂自动学习,以简化教导的作业程序。
为了达到前述发明的目的,本发明机器手臂取放物件的教导方法,首先推动机器手臂使目标出现在臂上视觉装置的视野,设定目标出现的位置为视觉点,控制臂上视觉装置在视觉点撷取第一影像,再推动机器手臂自视觉点到达目标,将目标的位置设定为取放点,启动机器手臂自动移动控制,机器手臂自动取或放物件,由取放点自动移回视觉点,控制臂上视觉装置在视觉点撷取第二影像,使第一影像减去第二影像形成差量影像,根据差量影像设定目标的影像,自动学习目标的特征。
本发明在教导机器手臂夹取物件的过程,目标为机器手臂夹取置放部中的物件,夹取物件前撷取的第一影像,显示置放部中放置物件的影像,夹取物件后撷取的第二影像,显示置放部的影像,第一影像减去第二影像形成物件的差量影像。本发明在教导机器手臂放置物件的过程,目标为机器手臂放置物件的置放部,放置物件前撷取的第一影像,显示置放部的影像,放置物件后撷取的第二影像,显示置放部中放置物件的影像,第一影像减去第二影像形成物件的差量影像,再设定物件周围的置放部的影像。
本发明机器手臂取放物件的教导方法,在机器手臂连接一控制装置,控制装置连接的荧幕显示臂上视觉装置的视野,并将臂上视觉装置撷取的第一影像及第二影像,记录在控制装置,而机器手臂由视觉点推动至取放点为教导移动路径,记录在控制装置。机器手臂则依循教导移动路径,由取放点自动移回视觉点。
附图说明
图1为本发明移动机器手臂至视觉点的示意图;
图2为本发明移动机器手臂至取放点的示意图;
图3为本发明机器手臂退回视觉点的示意图;
图4为本发明物件影像处理的示意图;
图5为本发明置放部影像处理的示意图;
图6为本发明机器手臂夹取物件的教导方法的流程图。
符号说明
10 机器手臂
11 本体
12 活动部
13 臂上摄影机
14 控制装置
15 操作界面
16 荧幕
17 肘节
18 机台
19 夹取装置
20 置放部
21 物件
具体实施方式
有关本发明为达成上述目的,所采用的技术手段及其功效,兹举优选实施例,并配合图式加以说明如下。
请同时参阅图1、图2、图3及图4,图1为本发明移动机器手臂至视觉点的示意图,图2为本发明移动机器手臂至取放点的示意图,图3为本发明机器手臂退回视觉点的示意图,图4为本发明物件影像处理的示意图。图1中本发明的机器手臂10,一端固定在不动的本体11,并设定手臂参考坐标M,而在机器手臂10另一端的活动部12,装设臂上视觉装置13。机器手臂10连接控制装置14,由控制装置14的操作界面15及荧幕16,控制机器手臂10移动及臂上视觉装置13撷取影像,根据处理及分析撷取的影像,控制驱动机器手臂10的多个肘节17,驱动活动部12接近设在机器手臂10工作环境中的机台18,利用夹取装置19取放机台18的置放部20中的目标物件21。
本发明教导机器手臂10夹取物件21时,利用人力推动机器手臂10的活动部12,机器手臂10的多个肘节17随者转动,由于每一肘节17转动的角度均有感测器加以侦测,因此活动部12相对本体11的移动位置及轨迹,控制装置14利用手臂参考坐标M加以记录。人力推动活动部12移向机台18的置放部20的上方,使臂上视觉装置13的视野,显示在操作界面15的荧幕16上,直到机台18上的物件21出现在荧幕16。设定物件21出现位置为视觉点V,使臂上视觉装置13在视觉点V撷取第一影像,并由控制装置14记录第一影像。如图4所示,第一影像为夹取物件21前撷取的影像,因此,第一影像显示机台18的置放部20中放置物件21的影像。
图2中接着教导机器手臂10夹取物件21,人力推动机器手臂10的活动部12自视觉点V,依规划的移动路径接近置放部20上的物件21。当机器手臂10到达夹取物件21的位置,将夹取位置设定为取放点P。控制装置14通过侦测机器手臂10的多个肘节17的转动角度,记录活动部12由视觉点V移至取放点P的教导移动路径。
在图3中,然后启动机器手臂10自动移动控制,控制装置14控制机器手臂10的夹取装置19,从机台18的置放部20自动夹取物件21,并依循由视觉点V移至取放点P的教导移动路径,将活动部12由取放点P移回视觉点V,控制臂上视觉装置13在视觉点V撷取第二影像,并由控制装置14记录第二影像。如图4所示,第二影像为夹取物件21后撷取的影像,因此,第二影像仅显示机台18的置放部20的影像,物件21并不在第二影像内。
图4中,控制装置14将前述在视觉点V撷取的第一影像与第二影像,进行影像处理。使第一影像减去第二影像形成差量影像,因夹取物件21前的第一影像显示的置放部20及物件21的影像,减去夹取物件21后第二影像显示的置放部20的影像,影像处理后将仅剩下物件21的差量影像。控制装置14就可由影像处理后的物件21影像,自动学习物件21的特征,以利辨识及夹取置放部20中的物件21。
本发明教导机器手臂10放置物件21的过程,请同时参阅图1、图2、图3及图5,图5为本发明置放部的影像处理的示意图。同理,本发明教导机器手臂10放置物件21时,与教导机器手臂10夹取物件21的过程恰相反,差异仅在机器手臂10夹取物件21由视觉点出发至放置物件21的置放部20。图3中人力推动活动部12移向放置物件21的置放部20的上方,使臂上视觉装置13的视野,出现置放部20在荧幕16。设定置放部20出现位置为视觉点V,使臂上视觉装置13在视觉点V撷取第一影像,并由控制装置14记录第一影像。如图6所示,第一影像为放置物件21前撷取的影像,因此,第一影像仅显示机台18的置放部20的影像,物件21并不在第一影像内。
图2中教导机器手臂10放置物件21,人力推动机器手臂10的活动部12自视觉点V,到达放置物件21的位置,将放置位置设定为取放点P,并记录活动部12由视觉点V移至取放点P的教导移动路径。图1中启动机器手臂10自动移动控制,控制装置14控制机器手臂10的夹取装置19,自动放置物件21在机台18的置放部20,并依循教导移动路径,将活动部12由取放点P移回视觉点V,控制臂上视觉装置13在视觉点V撷取第二影像,并由控制装置14记录第二影像。如图6所示,第二影像为放置物件21后撷取的影像,因此,第二影像显示置放部20中物件21的影像。
图5中控制装置14将在视觉点V撷取的第一影像减去第二影像形成差量影像,获得物件21的差量影像,再设定物件21差量影像周边的影像为保留影像,因此影像处理后将仅剩下置放部20的影像。控制装置14就可由影像处理后的置放部20影像,自动学习置放部20的特征,以利辨识及放置物件21的置放部20。
如图6所示,为本发明机器手臂取放物件的教导方法的流程图。由前述本发明教导机器手臂夹取或放置物件的过程,可知夹取过程与放置过程相反,如将物件或置放部视为每一过程的移动的目标,则过程相似,因此以同一流程包含本发明夹取物件过程或放置物件过程,详细步骤说明如下:首先步骤S1,推动机器手臂使目标出现在臂上视觉装置的视野;在步骤S2,设定目标出现位置为视觉点;步骤S3,使臂上视觉装置在视觉点撷取第一影像,及记录第一影像;步骤S4,推动机器手臂自视觉点到达目标位置;步骤S5,将目标位置设定为取放点,并记录视觉点移至取放点的教导移动路径;步骤S6,启动机器手臂自动移动控制;步骤S7,机器手臂自动取或放物件,并依循教导移动路径,由取放点移回视觉点;步骤S8,控制臂上视觉装置在视觉点撷取第二影像,并记录第二影像;步骤S9,使第一影像减去第二影像形成差量影像,根据差量影像设定目标的影像,自动学习目标的特征。
综上所述,本发明机器手臂取放物件的教导方法,就可仅需人力移动机器手臂至视觉点及取放点,教导机器手臂的移动路径,并通过机器手臂上的臂上视觉装置,在视觉点撷取第一影像,及从取放点自动退回至视觉点时撷取第二影像,利用第一影像与第二影像的差量影像处理,设定需要的影像,自动学习物件及置放部的特征,不仅简化教导的作业程序,且可达到免除专业的影像处理技术,降低使用的困难性的发明目的。
以上所述者,仅为用以方便说明本发明的优选实施例,本发明的范围不限于该等优选实施例,凡依本发明所做的任何变更,在不脱离本发明的精神下,都属本发明申请专利的范围。

Claims (12)

1.一种机器手臂取放物件的教导方法,其步骤包含:
推动机器手臂使目标出现在臂上视觉装置的视野;
设定目标出现的位置为视觉点;
使该臂上视觉装置在该视觉点撷取第一影像;
推动机器手臂自该视觉点到达该目标;
将该目标的位置设定为取放点;
启动机器手臂自动移动控制;
机器手臂自动取或放物件,由该取放点自动移回该视觉点;
控制该臂上视觉装置在该视觉点撷取第二影像;
使第一影像减去第二影像形成差量影像,根据差量影像设定目标的影像,自动学习目标的特征,
其中该机器手臂连接一控制装置,控制装置连接的荧幕显示臂上视觉装置的视野,并将撷取的第一影像及第二影像,记录在控制装置,且该机器手臂由视觉点推动至取放点为教导移动路径,记录在控制装置。
2.如权利要求1所述的机器手臂取放物件的教导方法,其中该教导方法是在教导机器手臂夹取物件的过程。
3.如权利要求2所述的机器手臂取放物件的教导方法,其中该目标为机器手臂在夹取过程夹取置放部中的物件。
4.如权利要求3所述的机器手臂取放物件的教导方法,其中该第一影像为夹取物件前撷取的影像,显示置放部中放置物件的影像。
5.如权利要求4所述的机器手臂取放物件的教导方法,其中该第二影像为夹取物件后撷取的影像,显示置放部的影像。
6.如权利要求5所述的机器手臂取放物件的教导方法,其中该第一影像减去第二影像形成物件的差量影像。
7.如权利要求1所述的机器手臂取放物件的教导方法,其中该教导方法是在教导机器手臂放置物件的过程。
8.如权利要求7所述的机器手臂取放物件的教导方法,其中该目标为机器手臂在放置过程中物件放置的置放台。
9.如权利要求8所述的机器手臂取放物件的教导方法,其中该第一影像为放置物件前撷取的影像,显示置放部的影像。
10.如权利要求9所述的机器手臂取放物件的教导方法,其中该第二影像为放置物件后撷取的影像,显示置放部中放置物件的影像。
11.如权利要求1所述的机器手臂取放物件的教导方法,其中该第一影像减去第二影像形成物件的差量影像,再设定物件周围的置放部的影像。
12.如权利要求1所述的机器手臂取放物件的教导方法,其中该机器手臂依循教导移动路径,由取放点自动移回视觉点。
CN201510013791.6A 2015-01-12 2015-01-12 机器手臂取放物件的教导方法 Active CN105835074B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510013791.6A CN105835074B (zh) 2015-01-12 2015-01-12 机器手臂取放物件的教导方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510013791.6A CN105835074B (zh) 2015-01-12 2015-01-12 机器手臂取放物件的教导方法

Publications (2)

Publication Number Publication Date
CN105835074A CN105835074A (zh) 2016-08-10
CN105835074B true CN105835074B (zh) 2020-07-10

Family

ID=57178096

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510013791.6A Active CN105835074B (zh) 2015-01-12 2015-01-12 机器手臂取放物件的教导方法

Country Status (1)

Country Link
CN (1) CN105835074B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6534126B2 (ja) * 2016-11-22 2019-06-26 パナソニックIpマネジメント株式会社 ピッキングシステム及びその制御方法
CN106625726A (zh) * 2016-12-29 2017-05-10 吴中区穹窿山德毅新材料技术研究所 工业机器人臂部件

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0194630A2 (de) * 1985-03-14 1986-09-17 Traub AG Verfahren zum optischen Bestimmen und/oder Lokalisieren eines Objektes
JPS6214275A (ja) * 1985-07-11 1987-01-22 Toshiba Eng Co Ltd 画像入力装置
CN102128589A (zh) * 2010-01-20 2011-07-20 中国科学院自动化研究所 一种在轴孔装配中零件内孔方位误差的校正方法
CN102831398A (zh) * 2012-07-24 2012-12-19 中国农业大学 基于深度图像的树上苹果识别方法
CN103139447A (zh) * 2011-11-23 2013-06-05 三星泰科威株式会社 使用ptz相机检测对象的设备和方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0194630A2 (de) * 1985-03-14 1986-09-17 Traub AG Verfahren zum optischen Bestimmen und/oder Lokalisieren eines Objektes
JPS6214275A (ja) * 1985-07-11 1987-01-22 Toshiba Eng Co Ltd 画像入力装置
CN102128589A (zh) * 2010-01-20 2011-07-20 中国科学院自动化研究所 一种在轴孔装配中零件内孔方位误差的校正方法
CN103139447A (zh) * 2011-11-23 2013-06-05 三星泰科威株式会社 使用ptz相机检测对象的设备和方法
CN102831398A (zh) * 2012-07-24 2012-12-19 中国农业大学 基于深度图像的树上苹果识别方法

Also Published As

Publication number Publication date
CN105835074A (zh) 2016-08-10

Similar Documents

Publication Publication Date Title
US10059005B2 (en) Method for teaching a robotic arm to pick or place an object
CN110842928B (zh) 一种复合机器人视觉引导定位方法
TWI530375B (zh) 機器手臂的教導裝置及方法
KR102018242B1 (ko) 머니퓰레이터 시스템
JP6361213B2 (ja) ロボット制御装置、ロボット、ロボットシステム、教示方法、及びプログラム
CN104626169B (zh) 基于视觉与机械综合定位的机器人抓取零件的方法
JP2020075354A (ja) 外部入力装置、ロボットシステム、ロボットシステムの制御方法、制御プログラム、及び記録媒体
US20180056523A1 (en) Robot control device, robot, and robot system
CN104827457B (zh) 机器手臂的教导装置及方法
JP6322959B2 (ja) ロボット、ロボットシステム、及びロボット制御装置
CN105835074B (zh) 机器手臂取放物件的教导方法
US20220080581A1 (en) Dual arm robot teaching from dual hand human demonstration
JP7167681B2 (ja) ロボットシステムおよび接続方法
CN114770461B (zh) 一种基于单目视觉的移动机器人及其自动抓取方法
Shi et al. Combining learning from demonstration with learning by exploration to facilitate contact-rich tasks
CN106182054B (zh) 指尖视觉棱线识别自适应机器人手装置
JP6488571B2 (ja) 教示装置、及びロボットシステム
CN108000499B (zh) 机器人视觉坐标的编程方法
CN208020198U (zh) 一种基于rgbd的智能抓取机器人
JP2015003348A (ja) ロボット制御システム、制御装置、ロボット、ロボット制御システムの制御方法及びロボットの制御方法
JP2020151837A (ja) ロボット及びハンドの制御装置
CN211890823U (zh) 基于RealSense相机的四自由度机械臂视觉伺服控制系统
TW201825159A (zh) 抓物機
CN206501118U (zh) 一种机器人抓取装置
CN106476035A (zh) 机器手臂及其教导方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200414

Address after: Taoyuan City, Taiwan, China

Applicant after: Daming robot Co., Ltd

Address before: Taoyuan City, Taiwan, China

Applicant before: QUANTA STORAGE Inc.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant