CN102514002B - 一种数控车床单目视觉上下料机器人系统及方法 - Google Patents
一种数控车床单目视觉上下料机器人系统及方法 Download PDFInfo
- Publication number
- CN102514002B CN102514002B CN201110448737.6A CN201110448737A CN102514002B CN 102514002 B CN102514002 B CN 102514002B CN 201110448737 A CN201110448737 A CN 201110448737A CN 102514002 B CN102514002 B CN 102514002B
- Authority
- CN
- China
- Prior art keywords
- dsp
- robot
- unloading
- loading
- video camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Manipulator (AREA)
Abstract
一种数控车床单目视觉上下料机器人系统和方法，利用传统的机床上下料机器人在料箱上部安装工业相机，将采集的图像信号传输至DSP，DSP通过对采集图像的处理确定车床棒料的尺寸特征。根据尺寸特征与工控机中零件库中的数据比对，确定零件的抓取方案。每一种类型的棒料第一次上下料需要人工示教，若再次出现该类型的棒料，DSP通过和零件库中采集的图像对比，调出该类型的棒料的上下料方案和智能识别抓取方案，将方案发送至机器人，机器人执行方案，最终实现机器人智能上下料。
Description
技术领域
本发明涉及上下料机器人，特别涉及数控车床上下料视觉机器人。其突出特点是使用单目视觉系统就可以实现数控车床的上下料。
背景技术
中国的视觉技术的应用开始于90年代，因为行业本身就属于新兴的领域，再加之机器视觉产品技术的普及不够，导致以上各行业的应用几乎空白。到二十一世纪，大批海外从事视觉行业技术人员回国创业，视觉技术开始在自动化行业成熟应用，2004年，在国内视觉行业具有划时代意义的是深圳创科推出国内首款高性能机器视觉软件开发包CKVision，代表了国内视觉技术已经日益成熟。目前，在我国，机器视觉主要应用于产品的质量检测。
目前，数控车床上下料主要由人工完成，面对着劳动力成本的不断上升和生产效率的提升，人们把更多的目光转向了机器人。工业机器人的应用具有重复定位精度高，可靠性高，生产柔性化，自动化程度高等无可比拟的优势。与人工相比，能极大的提高生产效率和生产品质。但是由于数控机床的工件尺寸不固定，传统的上下料机器人需要专用夹具装夹，提高了生产成本，降低了生产效率。显然这种技术违反了数控车床柔性化的特点。武汉理工大学的型材搬运上下料机器人（专利号：03254701.3）使用摄像机作为光学传感器，通过鼠标点击操作完成上下料，需要有人值守，降低了机器人的智能化水平。江苏大学的服务于两台数控机床上下料移动机器人的控制方法（申请号201010603713.9）通过双目视觉系统实现上下料，需要两台工业CCD相机，控制系统比较复杂，虽然柔性较高，但是实现所需成本也较高。目前在国内视觉系统主要应用在焊接机器人上，极少涉及上下料机器人。
发明内容
本发明的目的是通过视觉系统提高数控车床上下料的智能化和自动化水平，并且要降低控制系统的复杂度。对于普通上下料机器人，需要工件规则放置，有些还需要安装专用的夹具，有些机器人采用双目或多目视觉系统，系统较为复杂。本发明克服上述现有技术的缺点，提供一种能有效简单实现数控车床上下料的方法，根据摄像机采集的图像信息，确定一个离机器人距离最近的棒料零件。机器人对杂乱摆放的工件能有效识别，使用示教盒示教的方式提高了机器人的可靠性。该方法还能有效的提高数控车床的装夹精度，提高数控车床的柔性，降低生产成本。
为了实现上述目的，本发明所采取的技术方案是:该发明由中小型通用机器人、摄像机、光源、示教盒、上料台和下料台组成。其中控制系统由安装有图像处理软件的DSP（或者ARM处理器）和MCS-51单片机组成。
DSP（或则ARM处理器）是整个机器人中的核心，负责处理机器人上下料过程中采集的信息。光源通过串口与DSP（或则ARM处理器）相连，DSP通过串口控制光源的打开和关闭；摄像机通过1394数据线与DSP（或则ARM处理器）相连，通过1394数据线传输摄像机采集的图像信息至DSP（或则ARM处理器）；摄像机还通过8脚的RJ45接口与DSP相连，DSP（或则ARM处理器）通过RJ45接口触发控制摄像机进行图像采集；示教盒是由MCS-51单片机组成的，通过SPI接口与DSP（或则ARM处理器）连接；上料台放在中小型通用机器人的左边；下料台放在中小型通用机器人的前面，数控车床放在中小型通用机器人的右边；摄像机放在上料台的正上方；光源放在摄像机的下方。摄像机分辨率达到1600×1200像素，检测精度可以达到0.02mm。
完整的视觉系统包括：光源、光学系统、图像捕捉系统，图像数字化模块、数字图像处理模块，智能判断决策模块，零件库模块和机械执行模块。视觉系统需要对摄像机进行标定来确定摄像机的位置、内参和外参。
上下料的过程如下：
①在响应数控车床上料请求信号后，系统打开工业相机光源，工业CCD相机采集数字图像信号通过图像采集卡采集至DSP中；
②此时关闭工业相机光源，DSP内的视觉系统对采集的图像进行处理分析，包括去噪、图像增强、中值滤波、canny算子边缘检测、图像分割和视觉匹配；
③通过和零件库中的零件进行比对，确定该零件的类型。视觉系统分辨率达到1600×1200像素，检测精度可以达到0.02mm；
④图像处理分析过后，由DSP计算出距离机器人最近的那个棒料零件并确定抓取该零件。如果零件库中没有找到该类型的零件，则机器人请求进行人工示教，示教系统采用SPI接口和DSP进行通信，并将人工示教的机械手的轨迹存在零件库中。示教盒采用MCS-51系列单片机完成控制信息的接受和发送以及数码管的显示。DSP可向单片机传送检测到的机器人各个轴当前位置数据。之后如果再次出现该类型的零件，DSP则自动从零件库中获取该零件的上下料方案，包括零件的抓取方式，上料时的空间轨迹，下料时的空间轨迹；
⑤分析上料台的棒料的空间位置及姿态，根据棒料的位置和姿态，机器人执行抓取方案和装夹方案，完成上料操作；
⑥当机床需要下料时，机床停止运行，打开数控车床挡门，DSP接收下料信号，根据机器人记录上料时的信息确定下料方案，机械手执行方案完成下料。
本发明的有益效果是，结合了单目视觉系统，零件库及人工示教模式，与传统的上下料机器人相比，视觉系统增加了该机器人的对不同零件的识别能力；与双目视觉系统相比，单目视觉原理简单，结构简单，更容易实现，又降低了成本；人工示教模式又提高了系统的可靠性。由此，上下料机器人的智能化水平大幅提高，该机器人基本上实现了数控车床无人值守，数控机床加工和上下料的过程的连续性得到提高，该发明适合于数控车床棒料类零件的自动上下料。
附图说明
图1为机器人上下料系统示意图。
图2为机器人上料过程流程图。
图3为机器人下料过程流程图。
其中：1—摄像机，2—上料台，3—数控车床，4—机器人，5—光源，6—下料台。
具体实施方式
本发明所述的光源是指的机器视觉专用的光源，用于在摄像机1采集图像时提供照明，摄像机1通过1394数据线连接图像采集卡，图像采集卡安装在DSP上。工业CCD摄像机1安装在上料台的上方，摄像机1周围是环形光源5。选用的DSP型号为TMS320DM642，该类型的DSP具有强大的图像处理能力和运算能力。示教盒采用MCS-51系列单片机完成控制信号的接受和发送。DSP向单片机传送检测到的各轴当前位置数据，从单片机接收各轴运动的控制信号和示教信号。DSP作为控制系统的中枢，通过PCI总线集成六轴运动控制卡，六轴运动控制卡负责各个轴的运动控制和运动状态反馈。数控车床开始运行，发出上料指令，DSP响应并通过1394数据线向摄像机1发出图像采集指令，DSP根据采集到的图像和摄像机1标定的参数信息，确定工件的空间坐标位置和姿势，通过六轴运动控制卡控制机械手抓取棒料并执行上下料。
Claims (3)
1.一种数控车床单目视觉上下料机器人系统，其特征在于，包括控制系统、中小型通用机器人（4）、摄像机（1）、光源（5）、示教盒（7）、上料台（2）和下料台（6）；所述控制系统由安装有图像处理软件的DSP和MCS-51单片机；DSP处理机器人上下料过程中采集的信息；所述光源（5）通过串口与DSP相连，DSP通过串口控制光源（5）的打开和关闭；摄像机（1）通过1394数据线与DSP相连，通过1394数据线传输摄像机采集的图像信息至DSP；摄像机（1）还通过8脚的RJ45接口与DSP相连，DSP通过RJ45接口触发控制摄像机（1）进行图像采集；示教盒（7）是由MCS-51单片机组成的，通过SPI接口与DSP连接；上料台放在中小型通用机器人（4）的左边；下料台（6）放在中小型通用机器人（4）的前面，数控车床放在中小型通用机器人（4）的右边；摄像机（1）放在上料台（2）的正上方；光源（5）放在摄像机（1）的下方；所述系统在数控车床需要上下料时，响应数控车床的请求，摄像机（1）开始采集上料台信息，对采集的图像信息处理获得工件的空间位置姿态和尺寸参数，把外形和尺寸参数与零件库中的数据进行比对，如果零件库中有该零件的上下料信息，则根据该信息执行上下料动作；如果零件库中没有该零件的信息，则系统请求人工示教，并把人工示教时机械手的抓取方案和空间轨迹记录在零件库中；所述摄像机（1）采用单目二维视觉测量的摄像机标定，不考虑镜头的畸变；摄像机上部安装光源；所述摄像机（1）分辨率达到1600×1200像素。
2.据权利要求1所述的一种数控车床单目视觉上下料机器人系统，其特征在于，所述图像处理软件的DSP用ARM处理器代替。
3.利用权利要求1所述的一种数控车床单目视觉上下料机器人系统的上下料方法，其特征在于，具体步骤为：
A）在响应数控车床上料请求信号后，系统打开工业摄像机（1）光源，工业CCD摄像机（1）采集数字图像信号通过图像采集卡采集至DSP中；
B）此时关闭工业摄像机（1）光源，DSP内的视觉系统对采集的图像进行处理分析，包括去噪、图像增强、中值滤波、canny算子边缘检测、图像分割和视觉匹配；
C）通过和零件库中的零件进行比对，确定该零件的类型；
D）图像处理分析过后，由DSP计算出距离机器人最近的那个棒料零件并确定抓取该零件；如果零件库中没有找到该类型的零件，则机器人请求进行人工示教，示教系统采用SPI接口和DSP进行通信，并将人工示教的机械手的轨迹存在零件库中； DSP向单片机传送检测到的机器人各个轴当前位置数据；之后如果再次出现该类型的零件，DSP则自动从零件库中获取该零件的上下料方案，包括零件的抓取方式，上料时的空间轨迹，下料时的空间轨迹；
E）分析上料台的棒料的空间位置及姿态，根据棒料的位置和姿态，机器人执行抓取方案和装夹方案，完成上料操作；
F）当机床需要下料时，机床停止运行，打开数控车床挡门，DSP接收下料信号，根据机器人记录上料时的信息确定下料方案，机械手执行方案完成下料。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110448737.6A CN102514002B (zh) | 2011-12-29 | 2011-12-29 | 一种数控车床单目视觉上下料机器人系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110448737.6A CN102514002B (zh) | 2011-12-29 | 2011-12-29 | 一种数控车床单目视觉上下料机器人系统及方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102514002A CN102514002A (zh) | 2012-06-27 |
| CN102514002B true CN102514002B (zh) | 2015-07-08 |
Family
ID=46285209
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201110448737.6A Active CN102514002B (zh) | 2011-12-29 | 2011-12-29 | 一种数控车床单目视觉上下料机器人系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102514002B (zh) |
Families Citing this family (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103192288B (zh) * | 2013-04-10 | 2015-10-07 | 伟本机电（上海）有限公司 | 工件机床加工自动上下料线 |
| CN103252508A (zh) * | 2013-04-12 | 2013-08-21 | 湖北文理学院 | 车床加工状态随机视觉检测装置 |
| CN103246226A (zh) * | 2013-05-06 | 2013-08-14 | 西安航空学院 | 一种经济型上料机械手控制系统的硬件设计 |
| CN103862477B (zh) * | 2014-03-31 | 2016-03-30 | 内蒙古科技大学 | 一种自主抓物机械手的上位机控制方法 |
| CN104626142A (zh) * | 2014-12-24 | 2015-05-20 | 镇江市计量检定测试中心 | 一种用于砝码检定的双目视觉机械手自动定位和移动方法 |
| CN106141223A (zh) * | 2015-04-21 | 2016-11-23 | 思维福特南通精密机械有限公司 | 行架式工业机器人与数控车床联动控制系统 |
| CN105084022B (zh) * | 2015-07-04 | 2017-03-08 | 芜湖哈特机器人产业技术研究院有限公司 | 一种铅酸蓄电池上铅系统及其控制方法 |
| CN105643664A (zh) * | 2016-04-12 | 2016-06-08 | 上海应用技术学院 | 一种服务机器人的视觉识别判定方法及视觉系统 |
| CN106897995B (zh) * | 2017-02-04 | 2019-08-06 | 同济大学 | 一种面向机械装配过程的零部件自动识别方法 |
| CN106903706A (zh) * | 2017-03-13 | 2017-06-30 | 广东工业大学 | 一种工作台物品整理系统及方法 |
| CN107139003A (zh) * | 2017-06-27 | 2017-09-08 | 巨轮（广州）机器人与智能制造有限公司 | 模块化视觉系统制作方法 |
| CN108594766A (zh) * | 2017-12-31 | 2018-09-28 | 芜湖哈特机器人产业技术研究院有限公司 | 一种卧式镗铣智能机床控制系统和方法 |
| CN108544288A (zh) * | 2018-06-22 | 2018-09-18 | 聊城大学 | 一种基于机器视觉的棱形棒料工件自动对正上料系统及其应用 |
| CN109079777B (zh) * | 2018-08-01 | 2021-09-10 | 北京科技大学 | 一种机械臂手眼协调作业系统 |
| CN108723958B (zh) * | 2018-08-16 | 2024-01-23 | 上海发那科机器人有限公司 | 一种水龙头自动加工生产系统 |
| CN109051846A (zh) * | 2018-08-24 | 2018-12-21 | 芜湖隆深机器人有限公司 | 一种曲轴自动拆跺装置 |
| CN108838732B (zh) * | 2018-09-06 | 2021-04-09 | 珠海格力智能装备有限公司 | 上下料处理方法及装置 |
| CN109436786A (zh) * | 2018-12-21 | 2019-03-08 | 广东赛德英斯智能装备有限公司 | 一种尺寸自适应式物品抓取方法及实现该方法的装置 |
| CN110560710A (zh) * | 2019-08-26 | 2019-12-13 | 青岛红远祥自动化设备有限公司 | 一种基于机器视觉的车床自动上料方法 |
| CN110977180B (zh) * | 2019-11-29 | 2021-11-19 | 深圳泰德半导体装备有限公司 | 打标设备的控制方法、打标设备及存储介质 |
| CN111054841A (zh) * | 2019-12-26 | 2020-04-24 | 芜湖哈特机器人产业技术研究院有限公司 | 冲压件自动上料方法 |
| CN113126567A (zh) * | 2019-12-30 | 2021-07-16 | 苏州谷夫道自动化科技有限公司 | 一种数控系统及其印刷线路板 |
| CN111958604A (zh) * | 2020-08-20 | 2020-11-20 | 扬州蓝邦数控制刷设备有限公司 | 一种高效的基于cad模型的异形毛刷单目视觉示教抓取方法 |
| CN114131614A (zh) * | 2021-12-24 | 2022-03-04 | 深圳市道元实业有限公司 | 机器人控制方法、装置、计算机设备及介质 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1846951A (zh) * | 2005-04-11 | 2006-10-18 | 中国科学院自动化研究所 | 一种自动拾取物体的智能移动机器人控制装置及方法 |
| CN102073303A (zh) * | 2010-12-24 | 2011-05-25 | 江苏大学 | 服务于两台数控机床上下料移动机器人的控制方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04311280A (ja) * | 1991-04-10 | 1992-11-04 | Hitachi Ltd | 視覚認識装置 |
-
2011
- 2011-12-29 CN CN201110448737.6A patent/CN102514002B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1846951A (zh) * | 2005-04-11 | 2006-10-18 | 中国科学院自动化研究所 | 一种自动拾取物体的智能移动机器人控制装置及方法 |
| CN102073303A (zh) * | 2010-12-24 | 2011-05-25 | 江苏大学 | 服务于两台数控机床上下料移动机器人的控制方法 |
Non-Patent Citations (2)
| Title |
|---|
| 基于单目视觉的工业机器人智能抓取研究;王修岩等;《机械设计与制造》;20110531(第5期);135-136 * |
| 工业机器人示教盒系统的设计;逄启寿等;《自动化与仪器仪表》;20060228(第2期);20-21 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102514002A (zh) | 2012-06-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102514002B (zh) | 一种数控车床单目视觉上下料机器人系统及方法 | |
| CN111496770B (zh) | 基于3d视觉与深度学习的智能搬运机械臂系统及使用方法 | |
| CN107590835B (zh) | 一种核环境下机械臂工具快换视觉定位系统与定位方法 | |
| Chen et al. | Applying a 6-axis mechanical arm combine with computer vision to the research of object recognition in plane inspection | |
| CN101456159B (zh) | 火花识别对刀方法及磨削加工自动化系统 | |
| CN105891233B (zh) | 基于机器视觉的镜片表面缺陷智能检测系统及其实现方法 | |
| CN107009391B (zh) | 机器人抓取方法 | |
| CN112347887B (zh) | 一种物体检测方法、物体检测装置及电子设备 | |
| CN105930854A (zh) | 一种机械臂视觉系统 | |
| CN103529855A (zh) | 一种旋转可调式双目视觉的目标识别定位装置及其在农业果实采摘机械的应用 | |
| CN103706568A (zh) | 基于机器视觉的机器人分拣系统及方法 | |
| CN110640741A (zh) | 一种规则形状工件匹配的抓取工业机器人 | |
| CN105690393A (zh) | 一种基于机器视觉的四轴并联机器人分拣系统及其分拣方法 | |
| CN113689509A (zh) | 基于双目视觉的无序抓取方法、系统及存储介质 | |
| CN113744247A (zh) | 一种pcb焊点缺陷识别方法和系统 | |
| CN108144865A (zh) | 汽车油管粗检系统及其检测方法 | |
| CN114132745A (zh) | 一种基于agv及机器视觉进行工件自动上下料系统及方法 | |
| CN107818587B (zh) | 一种基于ros的机器视觉高精度定位方法 | |
| CN112975970A (zh) | 一种视觉抓取机械臂系统 | |
| Guo et al. | The research of material sorting system based on Machine Vision | |
| CN115861780B (zh) | 一种基于yolo-ggcnn的机械臂检测抓取方法 | |
| CN206764823U (zh) | 机器人抓取定位装置及具有其的机器人抓取系统 | |
| CN203636826U (zh) | 机械手装置 | |
| CN203221514U (zh) | 一种用于工业机器人定位引导的机器视觉系统 | |
| CN206416179U (zh) | 一种基于双目视觉的运动目标跟踪定位与抓取系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |