CN207223988U - 基于双目视觉的机器人装配系统 - Google Patents
基于双目视觉的机器人装配系统 Download PDFInfo
- Publication number
- CN207223988U CN207223988U CN201721227231.1U CN201721227231U CN207223988U CN 207223988 U CN207223988 U CN 207223988U CN 201721227231 U CN201721227231 U CN 201721227231U CN 207223988 U CN207223988 U CN 207223988U
- Authority
- CN
- China
- Prior art keywords
- workpiece
- arm
- degree
- binocular vision
- freedom joint
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Manipulator (AREA)
Abstract
本实用新型公开了一种基于双目视觉的机器人装配系统,包括:一机器人,该机器人为六自由度关节机器臂,六自由度关节机器臂末端设有用于拾取工件的柔性吸盘;两台左右相对设置的工业相机,两台工业相机利用双目视觉原理采集图像并识别定位机器人和工件的位姿信息;用于放置工件的物件放置箱;两台工业相机与六自由度关节机器臂通信连接,六自由度关节机器臂获取机器人和工件的位姿信息后进行相应的装配动作。采用柔性吸盘拾取工件,便于识别定位工件的位姿信息和调整位姿。本技术方案采用双目视觉工业相机来准确定位工件并控制六自由度关节机器臂调整工件位姿进行高效准确装配作业。
Description
技术领域
本实用新型属于工业机器人技术领域,尤其涉及一种基于双目视觉的机器人装配系统。
背景技术
目前生产线上应用的工业机器人大多是通过示教再现或预编程来实现机器人的操作,这样物体的初始位姿和终止位姿都是严格限定的,工业机器人只是完成点到点的任务动作,生产线的柔性较差,满足不了柔性生产线对物料输送和搬运的要求。在这种情况下,为了保证工业机器人顺利、高效地完成工作任务和减少生产准备时间,引入机器人视觉技术来实现对工作目标物体的识别和定位就显得很有必要。
双目立体视觉是基于视差原理,由多幅图像获取物体三维几何信息的方法。在机器视觉系统中,双目视觉一般由双摄像机从不同角度同时获取周围景物的两幅数字图像,或有由单摄像机在不同时刻从不同角度获取周围景物的两幅数字图像,并基于视差原理即可恢复出物体三维几何信息,重建周围景物的三维形状与位置。《基于双目视觉的机器人运动目标检测与定位》(沈阳工业大学学报,第38卷第4期,2016年7月),《H—S直方图反向投影结合特征点提取的双目视觉定位算法》(控制理论与应用,第31卷第5期,2014年5月)提供了采用双目视差原理实现机器人和工件识别定位的算法。
发明内容
为了解决上述的技术问题,本实用新型的目的是提供一种基于双目视觉的机器人装配系统,采用双目视觉工业相机来准确定位工件并控制六自由度关节机器臂调整工件位姿进行高效准确装配作业。
为了达到上述的目的,本实用新型采用了以下的技术方案:
基于双目视觉的机器人装配系统,其特征在于,包括:一机器人,该机器人为六自由度关节机器臂,六自由度关节机器臂末端设有用于拾取工件的柔性吸盘;两台左右相对设置的工业相机,两台工业相机利用双目视觉原理采集图像并识别定位机器人和工件的位姿信息;用于放置工件的物件放置箱;两台工业相机与六自由度关节机器臂通信连接,六自由度关节机器臂获取机器人和工件的位姿信息后进行相应的装配动作。采用柔性吸盘拾取工件,便于识别定位工件的位姿信息和调整位姿。
作为优选,所述六自由度关节机器臂包括底座(11),底座(11)上安装旋转部(12),旋转部(12)由伺服驱动在水平面内旋转,旋转部(12)与摆臂(13)的一端铰接,摆臂(13)由伺服驱动在竖直面内上下摆动,摆臂(13)的另一端与旋转座(14)铰接,旋转座(14)由伺服驱动在竖直面内上下摆动,旋转座(14)与旋转臂(15)的一端活动连接,旋转臂(15)由伺服驱动相对于旋转座(14)转动,旋转臂(15)的转动轴线与旋转座(14)的转动轴线垂直,旋转臂(15)的另一端与末端部(16)的一端铰接,末端部(16)由伺服驱动相对于旋转臂(15)转动,末端部(16)的另一端安装用于拾取工件的柔性吸盘。采用这样结构的六自由度关节机器臂,结构简单,动作合理快速,方便工业相机布置和执行装配动作。
作为优选,所述六自由度关节机器臂设有多种通讯接口,支持Modbus通信或Socket通信,重复定位精度不高于0.5mm。
作为优选,所述工业相机是30万像素以上、每秒采集30帧以上图像的相机。
作为优选,所述工业相机距离放置工件的物件放置箱0.8-1.5m。
本实用新型由于采用了以上的技术方案,两台工业相机呈左右相对设置,实现对工件的检测和定位,并记录六自由度关节机器臂末端位置;两台工业相机分别与六自由度关节机器臂连接,采用双目视觉工业相机来准确定位工件和机器人末端的位姿信息,六自由度关节机器臂获取机器人和工件的位姿信息后进行相应的装配动作,这样装配作业高效准确。
附图说明
图1是本实用新型的装配作业示意图。
具体实施方式
下面详细描述本实用新型的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本实用新型,而不能理解为对本实用新型的限制。
在本实用新型的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本实用新型和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本实用新型的限制。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实用新型的描述中,除非另有说明,“多个”的含义是两个或两个以上,除非另有明确的限定。
在本实用新型中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本实用新型中的具体含义。
在本实用新型中,除非另有明确的规定和限定,第一特征在第二特征之“上”或之“下”可以包括第一和第二特征直接接触,也可以包括第一和第二特征不是直接接触而是通过它们之间的另外的特征接触。而且,第一特征在第二特征“之上”、“上方”和“上面”包括第一特征在第二特征正上方和斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”包括第一特征在第二特征正下方和斜下方,或仅仅表示第一特征水平高度小于第二特征。
如图1所示的一种基于双目视觉的机器人装配系统,包括:一机器人,该机器人为六自由度关节机器臂,六自由度关节机器臂末端设有用于拾取工件的柔性吸盘;两台左右相对设置的工业相机,两台工业相机利用双目视觉原理采集图像并识别定位机器人和工件的位姿信息;用于放置工件的物件放置箱;两台工业相机与六自由度关节机器臂通信连接,六自由度关节机器臂获取机器人和工件的位姿信息后进行相应的装配动作。
本实施例中,如图1所示,所述六自由度关节机器臂包括底座11,底座11上安装旋转部12,旋转部12由伺服驱动在水平面内旋转,旋转部12与摆臂13的一端铰接,摆臂13由伺服驱动在竖直面内上下摆动,摆臂13的另一端与旋转座14铰接,旋转座14由伺服驱动在竖直面内上下摆动,旋转座14与旋转臂15的一端活动连接,旋转臂15由伺服驱动相对于旋转座14转动,旋转臂15的转动轴线与旋转座14的转动轴线垂直,旋转臂15的另一端与末端部16的一端铰接,末端部16由伺服驱动相对于旋转臂15转动,末端部16的另一端安装用于拾取工件的柔性吸盘。所述六自由度关节机器臂编程接口丰富,支持Modbus通信或Socket通信,重复定位精度不高于0.5mm。立体视觉系统距离物体放置箱1m左右。所述工业相机是30万像素以上、每秒采集30帧以上图像的相机。
具体实施步骤分为系统标定,工件检测和定位,装配3个部分。
系统标定包括相机内外参数标定,相机机械手位置关系标定两部分。首先,利用上位机采集图像并记录标定所需的位姿数据。我们将标定板固定到机械臂末端,移动机械臂到某些点,并触发相机采像及记录机械臂末端位置。然后,利用采集的图像和位姿数据计算出相机的内参数,两相机间的相对位置,并同时计算出相机和机械臂机座的相对位置。
工件检测和定位:首先,在左相机图像中检测出工件。其次,左右相机图像进行矫正,这样同物体在左右视图中的行坐标相同,从而可以设定匹配区域。接着,在右视图匹配区域中搜索与左视图工件类型相同的工件。最后,通过匹配所得的视差结果进行工件定位以及优化补偿。具体过程和算法参见现有技术(本实用新型背景技术部分所列论文)。
装配是通过物体的3d位置和姿态信息,将工件调整到水平状态,并牵引到装配桩位置,完成装配。为简化此过程,使用了柔性吸盘,将机械臂工作面固定为水平。当吸住物体后,物体位姿自动变为水平。这样,只需要判断工件相对于装配桩的水平角度就可以进行装配作业。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本实用新型的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本实用新型的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本实用新型的限制,本领域的普通技术人员在不脱离本实用新型的原理和宗旨的情况下在本实用新型的范围内可以对上述实施例进行变化、修改、替换和变型。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (5)
1.基于双目视觉的机器人装配系统,其特征在于,包括:
一机器人,该机器人为六自由度关节机器臂,六自由度关节机器臂末端设有用于拾取工件的柔性吸盘;
两台左右相对设置的工业相机,两台工业相机利用双目视觉原理采集图像并识别定位机器人和工件的位姿信息;
用于放置工件的物件放置箱;
两台工业相机与六自由度关节机器臂通信连接,六自由度关节机器臂获取机器人和工件的位姿信息后进行相应的装配动作。
2.根据权利要求1所述的基于双目视觉的机器人装配系统,其特征在于,所述六自由度关节机器臂包括底座(11),底座(11)上安装旋转部(12),旋转部(12)由伺服驱动在水平面内旋转,旋转部(12)与摆臂(13)的一端铰接,摆臂(13)由伺服驱动在竖直面内上下摆动,摆臂(13)的另一端与旋转座(14)铰接,旋转座(14)由伺服驱动在竖直面内上下摆动,旋转座(14)与旋转臂(15)的一端活动连接,旋转臂(15)由伺服驱动相对于旋转座(14)转动,旋转臂(15)的转动轴线与旋转座(14)的转动轴线垂直,旋转臂(15)的另一端与末端部(16)的一端铰接,末端部(16)由伺服驱动相对于旋转臂(15)转动,末端部(16)的另一端安装用于拾取工件的柔性吸盘。
3.根据权利要求1所述的基于双目视觉的机器人装配系统,其特征在于,所述六自由度关节机器臂设有多种通讯接口,支持Modbus通信或Socket通信,重复定位精度不高于0.5mm。
4.根据权利要求1所述的基于双目视觉的机器人装配系统,其特征在于,所述工业相机是30万像素以上、每秒采集30帧以上图像的相机。
5.根据权利要求1中所述的基于双目视觉的机器人装配系统,其特征在于,所述工业相机距离放置工件的物件放置箱0.8-1.5m。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201721227231.1U CN207223988U (zh) | 2017-09-22 | 2017-09-22 | 基于双目视觉的机器人装配系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201721227231.1U CN207223988U (zh) | 2017-09-22 | 2017-09-22 | 基于双目视觉的机器人装配系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN207223988U true CN207223988U (zh) | 2018-04-13 |
Family
ID=61863843
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201721227231.1U Active CN207223988U (zh) | 2017-09-22 | 2017-09-22 | 基于双目视觉的机器人装配系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN207223988U (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108908120A (zh) * | 2018-08-07 | 2018-11-30 | 东南大学 | 基于六维力传感器和双目视觉的机器人打磨装置及打磨方法 |
CN109531567A (zh) * | 2018-11-23 | 2019-03-29 | 南京工程学院 | 基于ros的遥操作欠驱动机械手控制系统 |
CN109794382A (zh) * | 2019-02-27 | 2019-05-24 | 华南理工大学 | 一种3d微涂覆机器人及其涂覆方法 |
CN109968343A (zh) * | 2019-04-16 | 2019-07-05 | 广东省智能制造研究所 | 一种轮毂压铸件搬运六轴工业机器人 |
CN110666410A (zh) * | 2019-10-31 | 2020-01-10 | 上海船舶工艺研究所(中国船舶工业集团公司第十一研究所) | 一种基于双目视觉的船舶小组立自动装配装置及实现方法 |
CN110732437A (zh) * | 2019-12-04 | 2020-01-31 | 中国航空工业集团公司沈阳空气动力研究所 | 一种压敏涂料智能自动喷涂系统及喷涂方法 |
CN112743517A (zh) * | 2020-12-28 | 2021-05-04 | 浩科机器人(苏州)有限公司 | 一种基于视觉控制的智能机械手及其工作方法 |
CN113280758A (zh) * | 2021-04-15 | 2021-08-20 | 南京盛衡智能制造有限公司 | 一种堇青石三元催化剂载体视觉孔线垂直度定位装置 |
CN114905511A (zh) * | 2022-05-12 | 2022-08-16 | 南京航空航天大学 | 一种工业机器人装配误差检测与精度补偿系统标定方法 |
CN116276993A (zh) * | 2023-03-03 | 2023-06-23 | 中国人民解放军军事科学院国防科技创新研究院 | 基于合作标志的气囊型软体机械臂手眼标定与测量方法 |
CN117140540A (zh) * | 2023-08-04 | 2023-12-01 | 上海智元新创技术有限公司 | 紧固系统及紧固系统的拾取紧固方法 |
-
2017
- 2017-09-22 CN CN201721227231.1U patent/CN207223988U/zh active Active
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108908120A (zh) * | 2018-08-07 | 2018-11-30 | 东南大学 | 基于六维力传感器和双目视觉的机器人打磨装置及打磨方法 |
CN109531567A (zh) * | 2018-11-23 | 2019-03-29 | 南京工程学院 | 基于ros的遥操作欠驱动机械手控制系统 |
WO2020173111A1 (zh) * | 2019-02-27 | 2020-09-03 | 华南理工大学 | 一种 3d 微涂覆机器人及其涂覆方法 |
CN109794382A (zh) * | 2019-02-27 | 2019-05-24 | 华南理工大学 | 一种3d微涂覆机器人及其涂覆方法 |
CN109968343A (zh) * | 2019-04-16 | 2019-07-05 | 广东省智能制造研究所 | 一种轮毂压铸件搬运六轴工业机器人 |
CN110666410A (zh) * | 2019-10-31 | 2020-01-10 | 上海船舶工艺研究所(中国船舶工业集团公司第十一研究所) | 一种基于双目视觉的船舶小组立自动装配装置及实现方法 |
CN110666410B (zh) * | 2019-10-31 | 2024-04-05 | 上海船舶工艺研究所(中国船舶集团有限公司第十一研究所) | 一种基于双目视觉的船舶小组立自动装配装置及实现方法 |
CN110732437A (zh) * | 2019-12-04 | 2020-01-31 | 中国航空工业集团公司沈阳空气动力研究所 | 一种压敏涂料智能自动喷涂系统及喷涂方法 |
CN112743517A (zh) * | 2020-12-28 | 2021-05-04 | 浩科机器人(苏州)有限公司 | 一种基于视觉控制的智能机械手及其工作方法 |
CN113280758A (zh) * | 2021-04-15 | 2021-08-20 | 南京盛衡智能制造有限公司 | 一种堇青石三元催化剂载体视觉孔线垂直度定位装置 |
CN114905511A (zh) * | 2022-05-12 | 2022-08-16 | 南京航空航天大学 | 一种工业机器人装配误差检测与精度补偿系统标定方法 |
CN114905511B (zh) * | 2022-05-12 | 2023-08-11 | 南京航空航天大学 | 一种工业机器人装配误差检测与精度补偿系统标定方法 |
CN116276993A (zh) * | 2023-03-03 | 2023-06-23 | 中国人民解放军军事科学院国防科技创新研究院 | 基于合作标志的气囊型软体机械臂手眼标定与测量方法 |
CN116276993B (zh) * | 2023-03-03 | 2023-12-05 | 中国人民解放军军事科学院国防科技创新研究院 | 基于合作标志的气囊型软体机械臂手眼标定与测量方法 |
CN117140540A (zh) * | 2023-08-04 | 2023-12-01 | 上海智元新创技术有限公司 | 紧固系统及紧固系统的拾取紧固方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN207223988U (zh) | 基于双目视觉的机器人装配系统 | |
CN107767423B (zh) | 一种基于双目视觉的机械臂目标定位抓取方法 | |
CN104217441B (zh) | 一种基于机器视觉的机械臂定位抓取方法 | |
CN103264738B (zh) | 一种汽车风挡玻璃的自动装配系统及自动装配方法 | |
CN107160380B (zh) | 一种基于scara机械手的相机标定和坐标变换的方法 | |
CN109287077B (zh) | 一种电子元件插装方法和装置 | |
CN105547153B (zh) | 基于双目视觉的插件元件针脚视觉定位方法及装置 | |
CN110717943A (zh) | 用于二维平面的眼在手上机械手手眼标定方法及系统 | |
CN106514201A (zh) | 一种自动接插件装配机器人系统及其控制方法 | |
CN113715016B (zh) | 一种基于3d视觉的机器人抓取方法、系统、装置及介质 | |
CN111975200A (zh) | 一种基于视觉示教技术的智能焊接方法及智能焊接系统 | |
CN111823223A (zh) | 一种基于智能立体视觉的机器人手臂抓取控制系统及方法 | |
CN211028836U (zh) | 一种六轴工业机器人自动装配系统 | |
WO2021039775A1 (ja) | 画像処理装置、撮像装置、ロボット及びロボットシステム | |
CN111791226A (zh) | 通过机器人实现组装的方法、装置及机器人 | |
CN112356073A (zh) | 用于工业机器人的三维立体相机位姿在线标定装置及方法 | |
CN110232710B (zh) | 基于三维相机的物品定位方法、系统及设备 | |
CN113618367B (zh) | 基于七自由度并联双模块机器人的多视觉空间装配系统 | |
CN111080685A (zh) | 一种基于多视角立体视觉的飞机钣金零件三维重建方法及系统 | |
CN114193440A (zh) | 基于3d视觉的机器人自动抓取系统及方法 | |
CN205968985U (zh) | 一种基于智能移动终端控制的便携式侦查机器人 | |
CN102725713A (zh) | 操作输入设备 | |
CN209621798U (zh) | 多传感融合的复杂多构型微零件自动微装配设备 | |
CN110488751B (zh) | 一种自动化工艺线的石墨料盘视觉定位系统 | |
CN110977970A (zh) | 图像识别系统及其识别方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
GR01 | Patent grant | ||
GR01 | Patent grant |