CN102514002B - 一种数控车床单目视觉上下料机器人系统及方法 - Google Patents

一种数控车床单目视觉上下料机器人系统及方法 Download PDF

Info

Publication number
CN102514002B
CN102514002B CN201110448737.6A CN201110448737A CN102514002B CN 102514002 B CN102514002 B CN 102514002B CN 201110448737 A CN201110448737 A CN 201110448737A CN 102514002 B CN102514002 B CN 102514002B
Authority
CN
China
Prior art keywords
dsp
loading
robot
unloading
video camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110448737.6A
Other languages
English (en)
Other versions
CN102514002A (zh
Inventor
顾寄南
樊帆
关号兵
陈四杰
吴倩
陈艳
沈巍
徐军霞
丁卫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu University
Original Assignee
Jiangsu University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu University filed Critical Jiangsu University
Priority to CN201110448737.6A priority Critical patent/CN102514002B/zh
Publication of CN102514002A publication Critical patent/CN102514002A/zh
Application granted granted Critical
Publication of CN102514002B publication Critical patent/CN102514002B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

一种数控车床单目视觉上下料机器人系统和方法,利用传统的机床上下料机器人在料箱上部安装工业相机,将采集的图像信号传输至DSP,DSP通过对采集图像的处理确定车床棒料的尺寸特征。根据尺寸特征与工控机中零件库中的数据比对,确定零件的抓取方案。每一种类型的棒料第一次上下料需要人工示教,若再次出现该类型的棒料,DSP通过和零件库中采集的图像对比,调出该类型的棒料的上下料方案和智能识别抓取方案,将方案发送至机器人,机器人执行方案,最终实现机器人智能上下料。

Description

一种数控车床单目视觉上下料机器人系统及方法
技术领域
[0001] 本发明涉及上下料机器人,特别涉及数控车床上下料视觉机器人。其突出特点是使用单目视觉系统就可以实现数控车床的上下料。
背景技术
[0002] 中国的视觉技术的应用开始于90年代,因为行业本身就属于新兴的领域,再加之机器视觉产品技术的普及不够,导致以上各行业的应用几乎空白。到二十一世纪,大批海外从事视觉行业技术人员回国创业,视觉技术开始在自动化行业成熟应用,2004年,在国内视觉行业具有划时代意义的是深圳创科推出国内首款高性能机器视觉软件开发包CKVis1n,代表了国内视觉技术已经日益成熟。目前,在我国,机器视觉主要应用于产品的质量检测。
[0003]目前,数控车床上下料主要由人工完成,面对着劳动力成本的不断上升和生产效率的提升,人们把更多的目光转向了机器人。工业机器人的应用具有重复定位精度高,可靠性高,生产柔性化,自动化程度高等无可比拟的优势。与人工相比,能极大的提高生产效率和生产品质。但是由于数控机床的工件尺寸不固定,传统的上下料机器人需要专用夹具装夹,提高了生产成本,降低了生产效率。显然这种技术违反了数控车床柔性化的特点。武汉理工大学的型材搬运上下料机器人(专利号:03254701.3)使用摄像机作为光学传感器,通过鼠标点击操作完成上下料,需要有人值守,降低了机器人的智能化水平。江苏大学的服务于两台数控机床上下料移动机器人的控制方法(申请号201010603713.9)通过双目视觉系统实现上下料,需要两台工业CCD相机,控制系统比较复杂,虽然柔性较高,但是实现所需成本也较高。目前在国内视觉系统主要应用在焊接机器人上,极少涉及上下料机器人。
发明内容
[0004] 本发明的目的是通过视觉系统提高数控车床上下料的智能化和自动化水平,并且要降低控制系统的复杂度。对于普通上下料机器人,需要工件规则放置,有些还需要安装专用的夹具,有些机器人采用双目或多目视觉系统,系统较为复杂。本发明克服上述现有技术的缺点,提供一种能有效简单实现数控车床上下料的方法,根据摄像机采集的图像信息,确定一个离机器人距离最近的棒料零件。机器人对杂乱摆放的工件能有效识别,使用示教盒示教的方式提高了机器人的可靠性。该方法还能有效的提高数控车床的装夹精度,提高数控车床的柔性,降低生产成本。
[0005] 为了实现上述目的,本发明所采取的技术方案是:该发明由中小型通用机器人、摄像机、光源、示教盒、上料台和下料台组成。其中控制系统由安装有图像处理软件的DSP(或者ARM处理器)和MCS-51单片机组成。
[0006] DSP (或则ARM处理器)是整个机器人中的核心,负责处理机器人上下料过程中采集的信息。光源通过串口与DSP (或则ARM处理器)相连,DSP通过串口控制光源的打开和关闭;摄像机通过1394数据线与DSP (或则ARM处理器)相连,通过1394数据线传输摄像机采集的图像信息至DSP (或则ARM处理器);摄像机还通过8脚的RJ45接口与DSP相连,DSP (或则ARM处理器)通过RJ45接口触发控制摄像机进行图像采集;示教盒是由MCS-51单片机组成的,通过SPI接口与DSP (或则ARM处理器)连接;上料台放在中小型通用机器人的左边;下料台放在中小型通用机器人的前面,数控车床放在中小型通用机器人的右边;摄像机放在上料台的正上方;光源放在摄像机的下方。摄像机分辨率达到1600X1200像素,检测精度可以达到0.02mm。
[0007] 完整的视觉系统包括:光源、光学系统、图像捕捉系统,图像数字化模块、数字图像处理模块,智能判断决策模块,零件库模块和机械执行模块。视觉系统需要对摄像机进行标定来确定摄像机的位置、内参和外参。
[0008] 上下料的过程如下:
[0009] ①在响应数控车床上料请求信号后,系统打开工业相机光源,工业CXD相机采集数字图像信号通过图像采集卡采集至DSP中;
[0010] ②此时关闭工业相机光源,DSP内的视觉系统对采集的图像进行处理分析,包括去噪、图像增强、中值滤波、canny算子边缘检测、图像分割和视觉匹配;
[0011] ③通过和零件库中的零件进行比对,确定该零件的类型。视觉系统分辨率达到1600X1200像素,检测精度可以达到0.02mm;
[0012] ④图像处理分析过后,由DSP计算出距离机器人最近的那个棒料零件并确定抓取该零件。如果零件库中没有找到该类型的零件,则机器人请求进行人工示教,示教系统采用SPI接口和DSP进行通信,并将人工示教的机械手的轨迹存在零件库中。示教盒采用MCS-51系列单片机完成控制信息的接受和发送以及数码管的显示。DSP可向单片机传送检测到的机器人各个轴当前位置数据。之后如果再次出现该类型的零件,DSP则自动从零件库中获取该零件的上下料方案,包括零件的抓取方式,上料时的空间轨迹,下料时的空间轨迹;
[0013] ⑤分析上料台的棒料的空间位置及姿态,根据棒料的位置和姿态,机器人执行抓取方案和装夹方案,完成上料操作;
[0014] ⑥当机床需要下料时,机床停止运行,打开数控车床挡门,DSP接收下料信号,根据机器人记录上料时的信息确定下料方案,机械手执行方案完成下料。
[0015] 本发明的有益效果是,结合了单目视觉系统,零件库及人工示教模式,与传统的上下料机器人相比,视觉系统增加了该机器人的对不同零件的识别能力;与双目视觉系统相比,单目视觉原理简单,结构简单,更容易实现,又降低了成本;人工示教模式又提高了系统的可靠性。由此,上下料机器人的智能化水平大幅提高,该机器人基本上实现了数控车床无人值守,数控机床加工和上下料的过程的连续性得到提高,该发明适合于数控车床棒料类零件的自动上下料。
附图说明
[0016] 图1为机器人上下料系统示意图。
[0017] 图2为机器人上料过程流程图。
[0018] 图3为机器人下料过程流程图。
[0019] 其中:1 一摄像机,2—上料台,3—数控车床,4一机器人,5—光源,6—下料台。具体实施方式
[0020] 本发明所述的光源是指的机器视觉专用的光源,用于在摄像机I采集图像时提供照明,摄像机I通过1394数据线连接图像采集卡,图像采集卡安装在DSP上。工业CCD摄像机I安装在上料台的上方,摄像机I周围是环形光源5。选用的DSP型号为TMS320DM642,该类型的DSP具有强大的图像处理能力和运算能力。示教盒采用MCS-51系列单片机完成控制信号的接受和发送。DSP向单片机传送检测到的各轴当前位置数据,从单片机接收各轴运动的控制信号和示教信号。DSP作为控制系统的中枢,通过PCI总线集成六轴运动控制卡,六轴运动控制卡负责各个轴的运动控制和运动状态反馈。数控车床开始运行,发出上料指令,DSP响应并通过1394数据线向摄像机I发出图像采集指令,DSP根据采集到的图像和摄像机I标定的参数信息,确定工件的空间坐标位置和姿势,通过六轴运动控制卡控制机械手抓取棒料并执行上下料。

Claims (3)

1.一种数控车床单目视觉上下料机器人系统,其特征在于,包括控制系统、中小型通用机器人(4)、摄像机(1)、光源(5)、示教盒(7)、上料台(2)和下料台(6);所述控制系统由安装有图像处理软件的DSP和MCS-51单片机;DSP处理机器人上下料过程中采集的信息;所述光源(5)通过串口与DSP相连,DSP通过串口控制光源(5)的打开和关闭;摄像机(I)通过1394数据线与DSP相连,通过1394数据线传输摄像机采集的图像信息至DSP;摄像机(I)还通过8脚的RJ45接口与DSP相连,DSP通过RJ45接口触发控制摄像机(I)进行图像采集;示教盒(7)是由MCS-51单片机组成的,通过SPI接口与DSP连接;上料台放在中小型通用机器人(4)的左边;下料台(6)放在中小型通用机器人(4)的前面,数控车床放在中小型通用机器人(4)的右边;摄像机(I)放在上料台(2)的正上方;光源(5)放在摄像机(I)的下方;所述系统在数控车床需要上下料时,响应数控车床的请求,摄像机(I)开始采集上料台信息,对采集的图像信息处理获得工件的空间位置姿态和尺寸参数,把外形和尺寸参数与零件库中的数据进行比对,如果零件库中有该零件的上下料信息,则根据该信息执行上下料动作;如果零件库中没有该零件的信息,则系统请求人工示教,并把人工示教时机械手的抓取方案和空间轨迹记录在零件库中;所述摄像机(I)采用单目二维视觉测量的摄像机标定,不考虑镜头的畸变;摄像机上部安装光源;所述摄像机(I)分辨率达到1600X1200像素。
2.据权利要求1所述的一种数控车床单目视觉上下料机器人系统,其特征在于,所述图像处理软件的DSP用ARM处理器代替。
3.利用权利要求1所述的一种数控车床单目视觉上下料机器人系统的上下料方法,其特征在于,具体步骤为: A)在响应数控车床上料请求信号后,系统打开工业摄像机(I)光源,工业CCD摄像机(I)采集数字图像信号通过图像采集卡采集至DSP中; B)此时关闭工业摄像机(I)光源,DSP内的视觉系统对采集的图像进行处理分析,包括去噪、图像增强、中值滤波、canny算子边缘检测、图像分割和视觉匹配; C)通过和零件库中的零件进行比对,确定该零件的类型; D)图像处理分析过后,由DSP计算出距离机器人最近的那个棒料零件并确定抓取该零件;如果零件库中没有找到该类型的零件,则机器人请求进行人工示教,示教系统采用SPI接口和DSP进行通信,并将人工示教的机械手的轨迹存在零件库中;DSP向单片机传送检测到的机器人各个轴当前位置数据;之后如果再次出现该类型的零件,DSP则自动从零件库中获取该零件的上下料方案,包括零件的抓取方式,上料时的空间轨迹,下料时的空间轨迹; E)分析上料台的棒料的空间位置及姿态,根据棒料的位置和姿态,机器人执行抓取方案和装夹方案,完成上料操作; F)当机床需要下料时,机床停止运行,打开数控车床挡门,DSP接收下料信号,根据机器人记录上料时的信息确定下料方案,机械手执行方案完成下料。
CN201110448737.6A 2011-12-29 2011-12-29 一种数控车床单目视觉上下料机器人系统及方法 Active CN102514002B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110448737.6A CN102514002B (zh) 2011-12-29 2011-12-29 一种数控车床单目视觉上下料机器人系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110448737.6A CN102514002B (zh) 2011-12-29 2011-12-29 一种数控车床单目视觉上下料机器人系统及方法

Publications (2)

Publication Number Publication Date
CN102514002A CN102514002A (zh) 2012-06-27
CN102514002B true CN102514002B (zh) 2015-07-08

Family

ID=46285209

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110448737.6A Active CN102514002B (zh) 2011-12-29 2011-12-29 一种数控车床单目视觉上下料机器人系统及方法

Country Status (1)

Country Link
CN (1) CN102514002B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103192288B (zh) * 2013-04-10 2015-10-07 伟本机电(上海)有限公司 工件机床加工自动上下料线
CN103252508A (zh) * 2013-04-12 2013-08-21 湖北文理学院 车床加工状态随机视觉检测装置
CN103246226A (zh) * 2013-05-06 2013-08-14 西安航空学院 一种经济型上料机械手控制系统的硬件设计
CN103862477B (zh) * 2014-03-31 2016-03-30 内蒙古科技大学 一种自主抓物机械手的上位机控制方法
CN104626142A (zh) * 2014-12-24 2015-05-20 镇江市计量检定测试中心 一种用于砝码检定的双目视觉机械手自动定位和移动方法
CN106141223A (zh) * 2015-04-21 2016-11-23 思维福特南通精密机械有限公司 行架式工业机器人与数控车床联动控制系统
CN105084022B (zh) * 2015-07-04 2017-03-08 芜湖哈特机器人产业技术研究院有限公司 一种铅酸蓄电池上铅系统及其控制方法
CN105643664A (zh) * 2016-04-12 2016-06-08 上海应用技术学院 一种服务机器人的视觉识别判定方法及视觉系统
CN106897995B (zh) * 2017-02-04 2019-08-06 同济大学 一种面向机械装配过程的零部件自动识别方法
CN106903706A (zh) * 2017-03-13 2017-06-30 广东工业大学 一种工作台物品整理系统及方法
CN107139003A (zh) * 2017-06-27 2017-09-08 巨轮(广州)机器人与智能制造有限公司 模块化视觉系统制作方法
CN108594766A (zh) * 2017-12-31 2018-09-28 芜湖哈特机器人产业技术研究院有限公司 一种卧式镗铣智能机床控制系统和方法
CN109079777A (zh) * 2018-08-01 2018-12-25 北京科技大学 一种机械臂手眼协调作业系统
CN109051846A (zh) * 2018-08-24 2018-12-21 芜湖隆深机器人有限公司 一种曲轴自动拆跺装置
CN108838732B (zh) * 2018-09-06 2021-04-09 珠海格力智能装备有限公司 上下料处理方法及装置
CN110560710A (zh) * 2019-08-26 2019-12-13 青岛红远祥自动化设备有限公司 一种基于机器视觉的车床自动上料方法
CN110977180A (zh) * 2019-11-29 2020-04-10 深圳泰德半导体装备有限公司 打标设备的控制方法、打标设备及存储介质
CN111054841A (zh) * 2019-12-26 2020-04-24 芜湖哈特机器人产业技术研究院有限公司 冲压件自动上料方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1846951A (zh) * 2005-04-11 2006-10-18 中国科学院自动化研究所 一种自动拾取物体的智能移动机器人控制装置及方法
CN102073303A (zh) * 2010-12-24 2011-05-25 江苏大学 服务于两台数控机床上下料移动机器人的控制方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04311280A (en) * 1991-04-10 1992-11-04 Hitachi Ltd Visual recognition device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1846951A (zh) * 2005-04-11 2006-10-18 中国科学院自动化研究所 一种自动拾取物体的智能移动机器人控制装置及方法
CN102073303A (zh) * 2010-12-24 2011-05-25 江苏大学 服务于两台数控机床上下料移动机器人的控制方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于单目视觉的工业机器人智能抓取研究;王修岩等;《机械设计与制造》;20110531(第5期);135-136 *
工业机器人示教盒系统的设计;逄启寿等;《自动化与仪器仪表》;20060228(第2期);20-21 *

Also Published As

Publication number Publication date
CN102514002A (zh) 2012-06-27

Similar Documents

Publication Publication Date Title
CN106338521B (zh) 增材制造表面及内部缺陷与形貌复合检测方法及装置
CN104749184B (zh) 自动光学检测方法和系统
De-An et al. Design and control of an apple harvesting robot
JP5869583B2 (ja) ロボットシステムにおける対象物体画像のフィルタ方法
CN102120307B (zh) 一种基于视觉信息的工业机器人磨削系统及方法
CN104199453B (zh) 用于巡检电力仪表的智能机器人
CN106044570B (zh) 一种采用机器视觉的钢卷吊自动识别装置和方法
CN100487724C (zh) 一种快速目标识别与定位系统及方法
CN105397244A (zh) 一种管桩端板多工位机器人智能焊接系统
CN101840736B (zh) 一种视觉引导下的光学玻璃安装装置及安装方法
CN106226325B (zh) 一种基于机器视觉的座椅表面缺陷检测系统及其方法
CN104270570A (zh) 双目摄像机及其图像处理方法
CN104400279A (zh) 基于ccd的管道空间焊缝自动识别与轨迹规划的方法及系统
US20040019405A1 (en) Object taking out apparatus
CN108399639A (zh) 基于深度学习的快速自动抓取与摆放方法
CN102553833B (zh) 一种回转类零件多工位多参数视觉测量系统及方法
CN105729468A (zh) 一种基于多深度摄像机增强的机器人工作台
CN108055501A (zh) 一种目标检测及跟踪的视频监控系统及方法
CN108280856B (zh) 基于混合信息输入网络模型的未知物体抓取位姿估计方法
CN107192331A (zh) 一种基于双目视觉的工件抓取方法
CN106985161B (zh) 物品抓取系统和方法
CN201421436Y (zh) 一种产品表面污点和尺寸检测装置
CN102114635A (zh) 巡线机器人智能控制器
CN105333819A (zh) 基于面激光传感器的机器人工件装配及形位公差检测系统及其检测方法
CN105656260B (zh) 一种电机转子视觉组装生产线及组装工艺

Legal Events

Date Code Title Description
PB01 Publication
C06 Publication
SE01 Entry into force of request for substantive examination
C10 Entry into substantive examination
GR01 Patent grant
C14 Grant of patent or utility model