CN109483543B - 利用工件不同位置特征信息进行二次引导上件的方法及系统 - Google Patents

利用工件不同位置特征信息进行二次引导上件的方法及系统 Download PDF

Info

Publication number
CN109483543B
CN109483543B CN201811414938.2A CN201811414938A CN109483543B CN 109483543 B CN109483543 B CN 109483543B CN 201811414938 A CN201811414938 A CN 201811414938A CN 109483543 B CN109483543 B CN 109483543B
Authority
CN
China
Prior art keywords
workpiece
robot
deviation
characteristic
material box
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811414938.2A
Other languages
English (en)
Other versions
CN109483543A (zh
Inventor
邹剑
刘海庆
李怡鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yi Si Si Hangzhou Technology Co ltd
Original Assignee
Isvision Hangzhou Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Isvision Hangzhou Technology Co Ltd filed Critical Isvision Hangzhou Technology Co Ltd
Priority to CN201811414938.2A priority Critical patent/CN109483543B/zh
Publication of CN109483543A publication Critical patent/CN109483543A/zh
Application granted granted Critical
Publication of CN109483543B publication Critical patent/CN109483543B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • B25J9/1692Calibration of manipulator
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Manipulator (AREA)

Abstract

本发明提供一种利用工件不同位置特征信息进行二次引导上件的方法及系统,视觉传感器安装在机器人上,工件上有多个特征点,方法包括步骤如下:1)将装有工件的普通料箱运送至预设位置,固定,利用视觉传感器采集工件中间位置特征点的图像信息,计算视觉传感器坐标系下的偏差,将数据传输至工控机;2)工控机依偏差数据校正机器人轨迹,作为第二次引导的初始位置;3)机器人进行第二次引导,下探至图像采集位置,拍摄,采集工件边缘处特征点的位置信息,计算工件的位置坐标与存储的工件标准位置坐标的偏差,修正机器人的抓件位置,抓件,出件。该方法及系统不需增加设备,利用普通料箱,无需翻箱操作,即可实现利用普通料箱的自动化引导上件。

Description

利用工件不同位置特征信息进行二次引导上件的方法及系统
技术领域
本发明涉及工业现场测量用的引导方法,具体而言涉及一种利用工件不同位置特征信息进行二次引导上件。
背景技术
随着工业技术的发展,在汽车制造业中,自动化引导上件已成为提高生产效率、解放生产力的重要手段。目前,自动化引导上件的流程为:先经过翻箱,将置于普通料箱内的工件导入高精度料箱,再利用视觉传感器确定高精度料箱内工件的位置并将结果传输给机器人,机器人按照工件位置修正轨迹,完成自动上料。现有自动化引导上件主要依靠高精度料箱以及库位的高精度定位来保证工件处于视觉传感器的检测范围之内并保证检测精度;这是因为视觉检测传感器的容差范围最大仅有±70mm,使用普通料箱及简易定位必然不能满足视觉传感器的检测要求。但是,高精度料箱和高精度定位的加工难度大,加工成本及维护成本均较高。
发明内容
为了解决上述技术问题,本发明提供一种利用利用工件不同位置特征信息进行二次引导上件的方法及系统,不需增加设备,利用普通料箱,无需翻箱操作,即可实现利用普通料箱的自动化引导上件。
为此,本发明的技术方案如下:
一种利用工件不同位置特征信息进行二次引导上件的方法,所述视觉传感器安装在机器人上,所述工件上有多个特征点,包括如下步骤:
1)将装有工件的普通料箱运送至预设位置,固定,利用视觉传感器拍摄工件中间位置的特征点,采集工件中间位置特征点的图像信息;计算视觉传感器坐标系下工件中间位置特征点与存储的标准位置的偏差,并将此数据传输至工控机;
2)所述工控机利用工件中间位置特征点与存储的标准位置的偏差数据校正机器人轨迹,将校正后机器人的位置作为第二次引导的初始位置;
3)机器人从步骤2)确定的初始位置开始进行第二次引导,先下探至第二次引导的图像采集位置,拍摄,采集工件边缘处特征点的位置信息,计算工件的位置坐标与存储的工件标准位置坐标的偏差,修正机器人的抓件位置,抓件,出件。
步骤1)中选择拍摄工件中间位置的特征点是因为在工件大范围偏移时,存在部分工件超出视场的情况,只有中间区域的特征点能保证在视场中,并且选取多个特征,有一个特征可进行识别便可完成该次引导。
步骤3)中选择拍摄工件边缘的特征点是因为,完成工件的抓取需要精确抓取,而完成精确抓取时,位于工件多个边缘处的特征才能更好的表示工件的整体偏移及变形信息,方可精确计算工件与示教时的偏移关系,并且至少需要识别4个特征点才可用于精确引导。
为了满足每个普通料箱中放置有多个工件时的引导情况,以料箱固定的信号为新料箱的信号,按照上述步骤1)、2)的方法确定第二次引导的初始位置;按照上述步骤3)的方法完成普通料箱中第一个工件的出件,再重复进行步骤3),直至完成普通料箱内所有工件的出件。
进一步,所述工件中间位置特征点、工件边缘处特征点的形状为圆、椭圆、多边形、圆柱、椭圆柱、棱柱或异形孔。
进一步,步骤3)中所述第二次引导中工件的位置坐标与存储的工件标准位置坐标的偏差用三维坐标进行计算。
一种利用现有视觉传感器进行二次引导上件的系统,包括普通料箱、测试时普通料箱所在的预设位置、机器人及安装在机器人上的视觉传感器;所述工件上有多个特征点;
工作状态下,所述普通料箱放置于预设位置内;
所述视觉传感器拍摄工件中间位置的特征点,采集工件中间位置特征点的图像信息;计算视觉传感器坐标系下工件中间位置特征点与存储的标准位置的偏差,并将此数据传输至工控机;所述工控机利用工件中间位置特征点与存储的标准位置的偏差数据校正机器人轨迹,将校正后机器人的位置作为第二次引导的初始位置;
所述机器人设置于预设位置的侧面,用于带动视觉传感器到其工作位置,并完成从普通料箱内抓件;
所述视觉传感器还需完成机器人在抓件前,对工件边缘位置特征点的图像采集、计算工件的位置坐标与存储的工件标准位置坐标的偏差,并将该数据向机器人反馈。
本发明提供的利用工件不同位置特征信息进行二次引导上件的方法及系统,不需增加设备,不需翻箱,即可实现利用普通料箱的自动化引导上件。该方法使用的普通料箱单个造价仅为高精度料箱造价的10~20%,库位料箱普通定位也仅为高精度定位造价的10%,且上料过程无需翻箱,至少能节省一个岗位的人力成本。生产过程中减少翻箱也能减少工件的磕碰,从另一角度节约成本。
具体实施方式
以下结合实施例对本发明的技术方案进行详细描述:
一种利用工件不同位置特征信息进行二次引导上件的方法,视觉传感器安装在机器人上,工件上有多个特征点,包括如下步骤:
1)将装有车门内板的普通料箱运送至预设位置,预设位置为一预先划定的矩形框,四周仅简易角铁隔开,普通料箱抱合,利用视觉传感器拍摄工件中间位置的特征点,采集工件中间位置特征点的图像信息;计算视觉传感器坐标系下工件中间位置特征点与存储的标准位置的偏差,并将此数据传输至工控机;
在本发明的实施过程中,工件中间位置的特征点的形状可以为圆、椭圆、多边形、圆柱、椭圆柱、棱柱、异形孔,也可以为其他形状;
2)工控机利用工件中间位置特征点与存储的标准位置的偏差数据校正机器人轨迹,将校正后机器人的位置作为第二次引导的初始位置;
3)机器人从步骤2)确定的初始位置开始进行第二次引导,先下探至第二次引导的图像采集位置(在本发明的一个实施方式中,在顶盖外板正上方的1m处),拍摄,采集车门内板边缘处特征点的位置信息,计算车门内板的三维位置坐标与存储的车门内板的标准位置三维坐标之间的偏差,修正机器人的抓件位置,抓件,出件。
步骤1)中选择拍摄工件中间位置的特征点是因为在工件大范围偏移时,存在部分工件超出视场的情况,只有中间区域的特征点能保证在视场中,并且选取多个特征,有一个特征可进行识别便可完成该次引导。
步骤3)中选择拍摄工件边缘的特征点是因为,完成工件的抓取需要精确抓取,而完成精确抓取时,位于工件多个边缘处的特征才能更好的表示工件的整体偏移及变形信息,方可精确计算工件与示教时的偏移关系,并且至少需要识别4个特征点才可用于精确引导。
实施时,以普通料箱的抱合信号即为更换料箱的信号,也即为本方法步骤1)、2)第一次引导过程开始执行的信号。
本发明提供的方法最适用于内板件等表面多特征点的工件。
利用现有视觉传感器进行二次引导上件的系统,包括普通料箱、测试时普通料箱所在的预设位置、机器人及安装在机器人上的视觉传感器;工件上有多个特征点;
工作状态下,普通料箱放置于预设位置内;
普通料箱上设置有多个标识点;
视觉传感器拍摄工件中间位置的特征点,采集工件中间位置特征点的图像信息;计算视觉传感器坐标系下工件中间位置特征点与存储的标准位置的偏差,并将此数据传输至工控机;工控机利用工件中间位置特征点与存储的标准位置的偏差数据校正机器人轨迹,将校正后机器人的位置作为第二次引导的初始位置;
机器人设置于预设位置的侧面,用于带动视觉传感器到其工作位置,并完成从普通料箱内抓件;
视觉传感器还需完成机器人在抓件前,对工件边缘位置特征点的图像采集、计算工件的位置坐标与存储的工件标准位置坐标的偏差,并将该数据向机器人反馈。
本发明提供的利用工件不同位置特征信息进行二次引导上件的方法及系统,不需增加设备,不需翻箱,即可实现利用普通料箱的自动化引导上件。该方法使用的普通料箱单个造价仅为高精度料箱造价的10~20%,库位料箱普通定位也仅为高精度定位造价的10%,且上料过程无需翻箱,至少能节省一个岗位的人力成本。生产过程中减少翻箱也能减少工件的磕碰,从另一角度节约成本。
注:本发明中提到的标准数据均为均为引导系统示教时,机器人运行标准轨迹时,引导系统存储的特征点位置数据。
前面对本发明具体示例性实施方案所呈现的描述是出于说明和描述的目的。前面的描述并不想要成为毫无遗漏的,也不是想要把本发明限制为所公开的精确形式,显然,根据上述教导很多改变和变化都是可能的。选择示例性实施方案并进行描述是为了解释本发明的特定原理及其实际应用,从而使得本领域的其它技术人员能够实现并利用本发明的各种示例性实施方案及其不同选择形式和修改形式。本发明的范围旨在由所附权利要求书及其等价形式所限定。

Claims (5)

1.一种利用工件不同位置特征信息进行二次引导上件的方法,视觉传感器安装在机器人上,工件上有多个特征点,其特征在于包括如下步骤:
1)将装有工件的普通料箱运送至预设位置,固定,利用视觉传感器拍摄工件中间位置的特征点,采集工件中间位置特征点的图像信息;计算视觉传感器坐标系下工件中间位置特征点与存储的标准位置的偏差,并将此数据传输至工控机;
所述预设位置为一预先划定的矩形框,四周仅简易角铁隔开;
2)所述工控机利用工件中间位置特征点与存储的标准位置的偏差数据校正机器人轨迹,将校正后机器人的位置作为第二次引导的初始位置;
3)机器人从步骤2)确定的初始位置开始进行第二次引导,先下探至第二次引导的图像采集位置,拍摄,采集工件边缘处特征点的位置信息,计算工件的位置坐标与存储的工件标准位置坐标的偏差,修正机器人的抓件位置,抓件,出件。
2.如权利要求1所述利用工件不同位置特征信息进行二次引导上件的方法,其特征在于:所述步骤3)重复n次,n为单个普通料箱内装有的工件数量。
3.如权利要求1或2所述利用工件不同位置特征信息进行二次引导上件的方法,其特征在于:所述工件中间位置特征点、工件边缘处特征点的形状为圆、椭圆、多边形、圆柱、椭圆柱、棱柱或异形孔。
4.如权利要求1或2所述利用工件不同位置特征信息进行二次引导上件的方法,其特征在于:步骤3)中所述第二次引导中工件的位置坐标与存储的工件标准位置坐标的偏差用三维坐标进行计算。
5.一种利用现有视觉传感器进行二次引导上件的系统,其特征在于:包括普通料箱、测试时普通料箱所在的预设位置、机器人及安装在机器人上的视觉传感器;工件上有多个特征点;
工作状态下,所述普通料箱放置于预设位置内;所述预设位置为一预先划定的矩形框,四周仅简易角铁隔开;
所述视觉传感器拍摄工件中间位置的特征点,采集工件中间位置特征点的图像信息;计算视觉传感器坐标系下工件中间位置特征点与存储的标准位置的偏差,并将此数据传输至工控机;所述工控机利用工件中间位置特征点与存储的标准位置的偏差数据校正机器人轨迹,将校正后机器人的位置作为第二次引导的初始位置;
所述机器人设置于预设位置的侧面,用于带动视觉传感器到其工作位置,并完成从普通料箱内抓件;
所述视觉传感器还需完成机器人在抓件前,对工件边缘位置特征点的图像采集、计算工件的位置坐标与存储的工件标准位置坐标的偏差,并将该数据向机器人反馈。
CN201811414938.2A 2018-11-26 2018-11-26 利用工件不同位置特征信息进行二次引导上件的方法及系统 Active CN109483543B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811414938.2A CN109483543B (zh) 2018-11-26 2018-11-26 利用工件不同位置特征信息进行二次引导上件的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811414938.2A CN109483543B (zh) 2018-11-26 2018-11-26 利用工件不同位置特征信息进行二次引导上件的方法及系统

Publications (2)

Publication Number Publication Date
CN109483543A CN109483543A (zh) 2019-03-19
CN109483543B true CN109483543B (zh) 2021-01-12

Family

ID=65697833

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811414938.2A Active CN109483543B (zh) 2018-11-26 2018-11-26 利用工件不同位置特征信息进行二次引导上件的方法及系统

Country Status (1)

Country Link
CN (1) CN109483543B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111179234B (zh) * 2019-12-20 2023-08-25 珠海格力智能装备有限公司 压缩机的孔位信息确定方法及装置
CN111453411B (zh) * 2020-04-17 2022-02-22 华兴源创(成都)科技有限公司 液晶显示模组传输对位方法及系统
CN112374177A (zh) * 2020-10-30 2021-02-19 深圳创维-Rgb电子有限公司 上料方法、上料装置及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0151417A1 (en) * 1984-01-19 1985-08-14 Hitachi, Ltd. Method for correcting systems of coordinates in a robot having visual sensor device and apparatus therefor
CN101637908A (zh) * 2008-07-29 2010-02-03 上海发那科机器人有限公司 一种用于机器人搬运作业的视觉定位方法
EP1462224B1 (en) * 2003-02-27 2010-05-05 Fanuc Ltd Taught position modification device
CN106625676A (zh) * 2016-12-30 2017-05-10 易思维(天津)科技有限公司 一种汽车智能制造自动上料的三维视觉精确引导定位方法
CN108839024A (zh) * 2018-06-29 2018-11-20 易思维(杭州)科技有限公司 一种适用于汽车车门自动装载过程的视觉引导方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0151417A1 (en) * 1984-01-19 1985-08-14 Hitachi, Ltd. Method for correcting systems of coordinates in a robot having visual sensor device and apparatus therefor
EP1462224B1 (en) * 2003-02-27 2010-05-05 Fanuc Ltd Taught position modification device
CN101637908A (zh) * 2008-07-29 2010-02-03 上海发那科机器人有限公司 一种用于机器人搬运作业的视觉定位方法
CN106625676A (zh) * 2016-12-30 2017-05-10 易思维(天津)科技有限公司 一种汽车智能制造自动上料的三维视觉精确引导定位方法
CN108839024A (zh) * 2018-06-29 2018-11-20 易思维(杭州)科技有限公司 一种适用于汽车车门自动装载过程的视觉引导方法

Also Published As

Publication number Publication date
CN109483543A (zh) 2019-03-19

Similar Documents

Publication Publication Date Title
CN109353815B (zh) 利用现有视觉传感器进行二次引导上件的方法及系统
CN109483543B (zh) 利用工件不同位置特征信息进行二次引导上件的方法及系统
EP2846206B1 (en) Device and method for automatically setting tool offset value of machine tool
US7283661B2 (en) Image processing apparatus
DE102016013986A1 (de) Vorrichtung zum messen von positionen und stellungen einer mehrzahl von artikeln sowie die vorrichtung aufweisendes robotersystem
CN109516130B (zh) 自动化二次引导上件方法及系统
EP2694923B1 (en) Method and device for detecting the position of a conveyor
CN108356422B (zh) 带卷连续激光落料用在线测量、废料掉落及成品分离识别法
US9710904B2 (en) Tire appearance inspection apparatus
CN105323455B (zh) 一种基于机器视觉的定位补偿方法
CN100465836C (zh) 加工型材的方法和装置
US20190017815A1 (en) Deformation processing support system and deformation processing support method
CN105701492A (zh) 一种机器视觉识别系统及其实现方法
CN109590952A (zh) 成套工艺装配板的智能检测方法和检测工作台
CN113044349A (zh) 一种基于机器臂的产品贴标控制方法及装置
CN113188484A (zh) 一种热轧卷头部轮廓面积检测方法
CN110175621A (zh) 一种基于任意模板匹配的激光切割视觉定位方法
CN101678423A (zh) 用于在滚圆板材时调节挠曲站的方法和装置
CN112082482A (zh) 对仅有棱边特征物体的视觉定位方法、应用及精度评估方法
CN109840522B (zh) 一种大棒端面标记方案及字符图像矫正方法
CN205862063U (zh) 高速摄像机用焦距标定板
CN106530269A (zh) 焊缝检测方法
US7444850B2 (en) Method and device for shaping workpieces
DE102019120053B4 (de) Verfahren und Messzelle zum Überprüfen von nicht-eigensteifen Bauteilen und Fertigungsanlage
CN113146642B (zh) 一种用于油箱板加工的机械臂控制方法、装置及智能终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: Room 495, building 3, 1197 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province 310051

Patentee after: Yi Si Si (Hangzhou) Technology Co.,Ltd.

Address before: Room 495, building 3, 1197 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province 310051

Patentee before: ISVISION (HANGZHOU) TECHNOLOGY Co.,Ltd.

CP01 Change in the name or title of a patent holder