CN106514657B - 一种基于机器人运动规划的密封圈抓取和放置方法 - Google Patents

一种基于机器人运动规划的密封圈抓取和放置方法 Download PDF

Info

Publication number
CN106514657B
CN106514657B CN201611260183.6A CN201611260183A CN106514657B CN 106514657 B CN106514657 B CN 106514657B CN 201611260183 A CN201611260183 A CN 201611260183A CN 106514657 B CN106514657 B CN 106514657B
Authority
CN
China
Prior art keywords
sealing ring
crawl
coordinate
circle
seal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611260183.6A
Other languages
English (en)
Other versions
CN106514657A (zh
Inventor
高明煜
李潇
楼衍廷
杨宇翔
黄继业
何志伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Dianzi University
Original Assignee
Hangzhou Dianzi University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Dianzi University filed Critical Hangzhou Dianzi University
Priority to CN201611260183.6A priority Critical patent/CN106514657B/zh
Publication of CN106514657A publication Critical patent/CN106514657A/zh
Application granted granted Critical
Publication of CN106514657B publication Critical patent/CN106514657B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1656Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1671Programme controls characterised by programming, planning systems for manipulators characterised by simulation, either to verify existing program or to create and verify new program, CAD/CAM oriented, graphic oriented programming systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1656Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1661Programme controls characterised by programming, planning systems for manipulators characterised by task planning, object-oriented languages

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Manipulator (AREA)

Abstract

本发明公开了一种基于机器人运动规划的密封圈抓取和放置方法,包括密封圈识别和抓取实现步骤,电池盖板密封口识别实现步骤和机器人动态目标追踪实现步骤三个部分。本发明能够有效地取代传统电池生产密封圈密封方法,即人工精准地识别密封圈的正反面,并进行抓取,然后将密封圈盖在传送带上高速移动的蓄电池盖板密封口上。具有效率高、准确度高、工作环境适应能力强等特点,能满足电池工厂装配要求,提高工业生产自化水平,可以广泛的适用于当代流水线装配作业。

Description

一种基于机器人运动规划的密封圈抓取和放置方法
技术领域
本发明涉及一种蓄电池生产工业机器人应用系统,具体涉及一种基于机器人运动规划的密封圈抓取和放置方法。
背景技术
针对在蓄电池生产过程的密封圈密封的传统方法,即蓄电池生产企业完全依靠人工抓取密封圈,并将密封圈盖在蓄电池盖板上的密封口上。这需要花费很大的劳动力,存在生产效率低、工作环境恶劣等问题。以工业机器人运动规划、机器视觉技术为依托,提出了基于机器人运动规划的密封圈抓取和放置方法,让机器人将抓取起来的密封圈快速、准确地盖在传送带上高速运动的目标上。经测试,本方法具有效率高、准确度高、工作环境适应能力强等特点,能满足电池工厂装配要求,可以广泛的适用于当代流水线装配作业。
发明内容
本发明针对现有技术的不足,提出一种基于机器人运动规划的密封圈抓取和放置方法,包括密封圈识别和抓取实现步骤,电池盖板密封口识别实现步骤和机器人动态目标追踪实现步骤三个部分。
步骤(1):密封圈识别和抓取
①在竖直光照条件下,对抓取区域进行实时的图像采集,并通过网络接口传给抓取端图像处理单元;②抓取端图像处理单元运用霍夫圆检测算法和张正友标定法对图像进行处理,抽取密封圈圆形特征,得出密封圈圆心坐标;③对图像进行二值化处理,并进行密封圈正反面判断;④识别出正面向上的密封圈,并将其圆心坐标通过串口通讯传给机器人控制器;⑤控制机器人运动至密封圈坐标,通过内部IO开启气泵产生负压,完成密封圈的抓取。其中,密封圈正反面判断具体为:由于密封圈正反面的差异,密封圈正面较为光滑,而密封圈的反面有深色的数字和字母,所以在阈值为η1时,原始图像经过二值化处理可以明显看到密封圈正反面的差异,即反面黑色像素点多,正面黑色像素点少,所以设置黑色像素点阈值M1,因此可以通过统计图像中黑色像素点个数来判定密封圈的正反面:
其中,Rxy为识别出来的圆心坐标为(x,y)的圆形区域,M(x,y)表示Rxy内的黑色像素点数。
步骤(2):电池盖板密封口识别
①在竖直光照条件下,对传送带上的蓄电池盖板进行实时的图像采集,并网络接口传给放置端图像处理单元;②放置端图像处理单元对其进行二值化,识别盖板上密封口内的传送带的白色部分;③对白色轮廓进行拟合找圆算法处理找到圆心;④通过张正友标定法,就能得到传送带上的蓄电池盖板上密封口的圆心坐标;⑤当盖上密封圈后,因不满足拟合找圆算法的约束条件,不会再次被找到,从而来判断是否盖上。其中,拟合找圆算法具体为:①通过设置阈值为η2,将采集放置端图像二值化;②识别盖板上密封口内的传送带的白色部分,并通过拟合算法,对其轮廓进行拟合;③设定拟合出来的圆半径范围为rmin<r<rmax、圆的面积范围Smin<S<Smax和圆内黑色像素点数范围M<M2的约束条件,这样便可以找到盖板上密封口对应的圆。
步骤(3):机器人动态目标追踪的实现
①机器人在完成密封圈识别和抓取后-设在SR点,开始向放置端图像处理单元传来的传送带上的蓄电池盖板上密封口的坐标S0运动;②在运动的同时,通过定时器计时,得到机器人从SR运动到S0的时间t;③通过时间t和传送速度VC,通过运动学计算,得到传送带上的蓄电池盖板上密封口在t时间内偏移坐标S0′;④通过误差校正,完成坐标追踪,并进行放置动作。
竖直光照条件为自主设计的摄像头补光光源,两块250×250mm的光板,悬挂在摄像头的两侧,每块灯板上均匀的分布着200个工作功率为1.2mw的LED灯。
二值化处理具体为:将采集到的抓取端图像按照阈值η1进行黑白二值化,从而得到二值化后的图像:
其中,参数i表示图像平面的第i行,参数j表示图像平面的第j列,F(i,j)表示图像平面第i行第j列位置上的像素灰度值,其中0为黑色灰度值,255为白色灰度值。
定时器计时具体实现方法为:①机器人控制器在接收到放置坐标后,向抓取端控制器通过串口发送开始计时标志Tstart,并开始从SR向S0运动;②到达S0后,向抓取端控制器发送结束计时标志Tend;③然后抓取端控制器就可以根据两个标志,对上述运动过程计时。这样通过实时的反馈,便可以得到,机器人从SR运动到S0的时间t。
运动学计算具体为:①设θ为传送带与机器人坐标系x轴的夹角;②对传送带速度Vc进行分解,则有Vcx=Vc×cosθ、Vcy=Vc×sinθ;③求蓄电池盖板在t时间内产生的坐标偏移量Δx=Vcx×t,Δy=Vcy×t;④通过这一系列的推算,计算出高速移动后的蓄电池盖板的位置坐标S0′(x0+Δx,y0+Δy)。
误差校正具体为:由于在追踪坐标时,还会存在追踪过程以及放置动作的时间误差。但由于追踪过程较短以及精简放置动作,所以在误差允许范围内,对于每一个密封口,误差可以视为一个定值。因此可以通过实际的测试得到修正坐标量(Δx′,Δy′)。
与现有的技术相比,本发明的有益效果是:采用工业机器人运动规划和机器视觉技术,能够有效地取代传统电池生产密封圈密封方法,即人工精准地识别密封圈的正反面,并进行抓取,然后将密封圈盖在传送带上高速移动的蓄电池盖板密封口上。在当前设备条件下,一块6孔蓄电池盖板密封耗时为11.5s,坐标精度达到0.01mm。具有效率高、准确度高、工作环境适应能力强等特点,能满足电池工厂装配要求,提高工业生产自动化水平,可以广泛的适用于当代流水线装配作业。
附图说明
图1是基于机器人运动规划的密封圈抓取和放置方法实现框图。
具体实施方式
如图1所示:一种基于机器人运动规划的密封圈抓取和放置方法,包括密封圈识别和抓取实现步骤,电池盖板密封口识别实现步骤和机器人动态目标追踪实现步骤三个部分。
步骤(1):密封圈识别和抓取
①在竖直光照条件下,对抓取区域进行实时的图像采集,并通过网络接口传给抓取端图像处理单元;②抓取端图像处理单元运用霍夫圆检测算法和张正友标定法对图像进行处理,抽取密封圈圆形特征,得出密封圈圆心坐标;③对图像进行二值化处理,并进行密封圈正反面判断;④识别出正面向上的密封圈,并将其圆心坐标通过串口通讯传给机器人控制器;⑤控制机器人运动至密封圈坐标,通过内部IO开启气泵产生负压,完成密封圈的抓取。其中,密封圈正反面判断具体为:由于密封圈正反面的差异,密封圈正面较为光滑,而密封圈的反面有深色的数字和字母,所以在阈值为η1时,原始图像经过二值化处理可以明显看到密封圈正反面的差异,即反面黑色像素点多,正面黑色像素点少,所以设置黑色像素点阈值M1,因此可以通过统计图像中黑色像素点个数来判定密封圈的正反面:
其中,Rxy为识别出来的圆心坐标为(x,y)的圆形区域,M(x,y)表示Rxy内的黑色像素点数。
步骤(2):电池盖板密封口识别
①在竖直光照条件下,对传送带上的蓄电池盖板进行实时的图像采集,并网络接口传给放置端图像处理单元;②放置端图像处理单元对其进行二值化,识别盖板上密封口内的传送带的白色部分;③对白色轮廓进行拟合找圆算法处理找到圆心;④通过张正友标定法,就能得到传送带上的蓄电池盖板上密封口的圆心坐标;⑤当盖上密封圈后,因不满足拟合找圆算法的约束条件,不会再次被找到,从而来判断是否盖上。其中,拟合找圆算法具体为:①通过设置阈值为η2,将采集放置端图像二值化;②识别盖板上密封口内的传送带的白色部分,并通过拟合算法,对其轮廓进行拟合;③设定拟合出来的圆半径范围为rmin<r<rmax、圆的面积范围Smin<S<Smax和圆内黑色像素点数范围M<M2的约束条件,这样便可以找到盖板上密封口对应的圆。
步骤(3):机器人动态目标追踪的实现
①机器人在完成密封圈识别和抓取后-设在SR点,开始向放置端图像处理单元传来的传送带上的蓄电池盖板上密封口的坐标S0运动;②在运动的同时,通过定时器计时,得到机器人从SR运动到S0的时间t;③通过时间t和传送速度VC,通过运动学计算,得到传送带上的蓄电池盖板上密封口在t时间内偏移坐标S0′;④通过误差校正,完成坐标追踪,并进行放置动作。
竖直光照条件为自主设计的摄像头补光光源,两块250×250mm的光板,悬挂在摄像头的两侧,每块灯板上均匀的分布着200个工作功率为1.2mw的LED灯。
二值化处理具体为:将采集到的抓取端图像按照阈值η1进行黑白二值化,从而得到二值化后的图像:
其中,参数i表示图像平面的第i行,参数j表示图像平面的第j列,F(i,j)表示图像平面第i行第j列位置上的像素灰度值,其中0为黑色灰度值,255为白色灰度值。
定时器计时具体实现方法为:①机器人控制器在接收到放置坐标后,向抓取端控制器通过串口发送开始计时标志Tstart,并开始从SR向S0运动;②到达S0后,向抓取端控制器发送结束计时标志Tend;③然后抓取端控制器就可以根据两个标志,对上述运动过程计时。这样通过实时的反馈,便可以得到,机器人从SR运动到S0的时间t。
运动学计算具体为:①设θ为传送带与机器人坐标系x轴的夹角;②对传送带速度Vc进行分解,则有Vcx=Vc×cosθ、Vcy=Vc×sinθ;③求蓄电池盖板在t时间内产生的坐标偏移量Δx=Vcx×t,Δy=Vcy×t;④通过这一系列的推算,计算出高速移动后的蓄电池盖板的位置坐标S0′(x0+Δx,y0+Δy)。
误差校正具体为:由于在追踪坐标时,还会存在追踪过程以及放置动作的时间误差。但由于追踪过程较短以及精简放置动作,所以在误差允许范围内,对于每一个密封口,误差可以视为一个定值。因此可以通过实际的测试得到修正坐标量(Δx′,Δy′)。

Claims (6)

1.一种基于机器人运动规划的密封圈抓取和放置方法,其特征在于:
步骤(1):密封圈识别和抓取
①在竖直光照条件下,对抓取区域进行实时的图像采集,并通过网络接口传给抓取端图像处理单元;②抓取端图像处理单元运用霍夫圆检测算法和张正友标定法对图像进行处理,抽取密封圈圆形特征,得出密封圈圆心坐标;③对图像进行二值化处理,并进行密封圈正反面判断;④识别出正面向上的密封圈,并将其圆心坐标通过串口通讯传给机器人控制器;⑤控制机器人运动至密封圈坐标,通过内部IO开启气泵产生负压,完成密封圈的抓取;其中,密封圈正反面判断具体为:由于密封圈正反面的差异,密封圈正面较为光滑,而密封圈的反面有深色的数字和字母,所以在阈值为η1时,原始图像经过二值化处理可以明显看到密封圈正反面的差异,即反面黑色像素点多,正面黑色像素点少,设置黑色像素点阈值M1,因此可以通过统计图像中黑色像素点个数来判定密封圈的正反面:
其中,Rxy为识别出来的圆心坐标为(x,y)的圆形区域,M(x,y)表示Rxy内的黑色像素点数;
步骤(2):电池盖板密封口识别
①在竖直光照条件下,对传送带上的蓄电池盖板进行实时的图像采集,并通过网络接口传给放置端图像处理单元;②放置端图像处理单元对其进行二值化,识别盖板上密封口内的传送带的白色部分;③对白色轮廓进行拟合找圆算法处理找到圆心;④通过张正友标定法,就能得到传送带上的蓄电池盖板上密封口的圆心坐标;⑤当盖上密封圈后,因不满足拟合找圆算法的约束条件,不会再次被找到,从而来判断是否盖上;其中,拟合找圆算法具体为:①通过设置阈值为η2,将采集放置端的图像二值化;②识别盖板上密封口内的传送带的白色部分,并通过拟合算法,对其轮廓进行拟合;③设定拟合出来的圆半径范围:rmin<r<rmax、圆的面积范围Smin<S<Smax和圆内黑色像素点数范围M<M2的约束条件,这样便可以找到盖板上密封口对应的圆;
步骤(3):机器人动态目标追踪的实现
①机器人在完成密封圈识别和抓取后,设在SR点,开始向放置端图像处理单元传来的传送带上的蓄电池盖板上密封口的坐标S0运动;②在运动的同时,通过定时器计时,得到机器人从SR运动到S0的时间t;③通过时间t和传送速度VC,通过运动学计算,得到传送带上的蓄电池盖板上密封口在t时间内偏移坐标S0′;④通过误差校正,完成坐标追踪,并进行放置动作。
2.根据权利要求1所述的一种基于机器人运动规划的密封圈抓取和放置方法,其特征在于:竖直光照条件为自主设计的摄像头补光光源,两块250×250mm的灯板,悬挂在摄像头的两侧,每块灯板上均匀的分布着200个工作功率为1.2mw的LED灯。
3.根据权利要求1所述的一种基于机器人运动规划的密封圈抓取和放置方法,其特征在于:二值化处理具体为:将采集到的抓取端图像按照阈值η1进行黑白二值化,从而得到二值化后的图像:
其中,参数i表示图像平面的第i行,参数j表示图像平面的第j列,F(i,j)表示图像平面第i行第j列位置上的像素灰度值,其中0为黑色灰度值,255为白色灰度值。
4.根据权利要求1所述的一种基于机器人运动规划的密封圈抓取和放置方法,其特征在于:定时器计时具体实现方法为:①机器人控制器在接收到放置坐标后,向抓取端控制器通过串口发送开始计时标志Tstart,并开始从SR向S0运动;②到达S0后,向抓取端控制器发送结束计时标志Tend;③然后抓取端控制器就可以根据两个标志,对上述运动过程计时;这样通过实时的反馈,得到机器人从SR运动到S0的时间t。
5.根据权利要求1所述的一种基于机器人运动规划的密封圈抓取和放置方法,其特征在于:运动学计算具体为:①设θ为传送带与机器人坐标系x轴的夹角;②对传送带速度Vc进行分解,则有Vcx=Vc×cosθ、Vcy=Vc×sinθ;③求蓄电池盖板在t时间内产生的坐标偏移量Δx=Vcx×t,Δy=Vcy×t;④通过这一系列的推算,计算出高速移动后的蓄电池盖板的位置坐标S0′(x0+Δx,y0+Δy)。
6.根据权利要求1所述的一种基于机器人运动规划的密封圈抓取和放置方法,其特征在于:误差校正具体为:由于在追踪坐标时,还会存在追踪过程以及放置动作的时间误差;但由于追踪过程较短以及精简放置动作,所以在误差允许范围内,对于每一个密封口,误差可以视为一个定值;因此可以通过实际的测试得到修正坐标量(Δx′,Δy′)。
CN201611260183.6A 2016-12-30 2016-12-30 一种基于机器人运动规划的密封圈抓取和放置方法 Active CN106514657B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611260183.6A CN106514657B (zh) 2016-12-30 2016-12-30 一种基于机器人运动规划的密封圈抓取和放置方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611260183.6A CN106514657B (zh) 2016-12-30 2016-12-30 一种基于机器人运动规划的密封圈抓取和放置方法

Publications (2)

Publication Number Publication Date
CN106514657A CN106514657A (zh) 2017-03-22
CN106514657B true CN106514657B (zh) 2019-11-05

Family

ID=58336061

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611260183.6A Active CN106514657B (zh) 2016-12-30 2016-12-30 一种基于机器人运动规划的密封圈抓取和放置方法

Country Status (1)

Country Link
CN (1) CN106514657B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109632802A (zh) * 2019-02-01 2019-04-16 东莞中科蓝海智能视觉科技有限公司 零件正反面检测调节方法
CN110253579B (zh) * 2019-06-24 2021-11-19 合肥工业大学 基于圆弧特征提取的机器人定位方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1845607A (zh) * 2006-05-15 2006-10-11 华北电力大学(北京) 基于视频监控与图像识别的电力变压器风机状态识别方法
CN202695632U (zh) * 2012-07-04 2013-01-23 江苏理士电池有限公司 自动给电池槽盖套密封圈装置
CN103747667A (zh) * 2014-01-09 2014-04-23 南京信息工程大学 一种用于笔记本电池自动装盒的视觉检测和控制系统
CN104057290A (zh) * 2014-06-24 2014-09-24 中国科学院自动化研究所 一种基于视觉和力反馈控制的机器人装配方法与系统
CN106182004A (zh) * 2016-08-01 2016-12-07 上海交通大学 基于视觉引导的工业机器人自动销孔装配的方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4864363B2 (ja) * 2005-07-07 2012-02-01 東芝機械株式会社 ハンドリング装置、作業装置及びプログラム
JP6739212B2 (ja) * 2015-04-09 2020-08-12 花王株式会社 物品供給装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1845607A (zh) * 2006-05-15 2006-10-11 华北电力大学(北京) 基于视频监控与图像识别的电力变压器风机状态识别方法
CN202695632U (zh) * 2012-07-04 2013-01-23 江苏理士电池有限公司 自动给电池槽盖套密封圈装置
CN103747667A (zh) * 2014-01-09 2014-04-23 南京信息工程大学 一种用于笔记本电池自动装盒的视觉检测和控制系统
CN104057290A (zh) * 2014-06-24 2014-09-24 中国科学院自动化研究所 一种基于视觉和力反馈控制的机器人装配方法与系统
CN106182004A (zh) * 2016-08-01 2016-12-07 上海交通大学 基于视觉引导的工业机器人自动销孔装配的方法

Also Published As

Publication number Publication date
CN106514657A (zh) 2017-03-22

Similar Documents

Publication Publication Date Title
CN105234943B (zh) 一种基于视觉识别的工业机器人示教装置及方法
CN106824816B (zh) 一种基于机器视觉的pe瓶检测与分拣方法
CN106737665B (zh) 基于双目视觉和sift特征匹配的机械臂控制系统及实现方法
CN107192331A (zh) 一种基于双目视觉的工件抓取方法
KR101984339B1 (ko) 신발 부품의 자동 식별
CN109454638A (zh) 一种基于视觉引导的机器人抓取系统
CN113146172B (zh) 一种基于多视觉的检测与装配系统及方法
CN106514657B (zh) 一种基于机器人运动规划的密封圈抓取和放置方法
CN110948491A (zh) 一种基于视觉跟随的工业机器人抓取方法
WO2017092565A1 (zh) 充电系统和充电方法、计算机存储介质
CN110666801A (zh) 一种复杂工件匹配定位的抓取工业机器人
CN104626169A (zh) 基于视觉与机械综合定位的机器人抓取零件的方法
CN105690393A (zh) 一种基于机器视觉的四轴并联机器人分拣系统及其分拣方法
CN109291048A (zh) 一种磨抛工业机器人实时在线编程系统及方法
CN107886499B (zh) 一种物体表面检测照明系统及照明方法
CN1811644A (zh) 在复杂环境下智能机器人自主定位的方法
CN109625922A (zh) 一种用于智能制造的自动上下料系统及方法
CN109454501A (zh) 一种车床在线监测系统
CN109752627A (zh) 一种基于机器视觉的馈线终端单元插口状态自动识别的方法
CN104889074A (zh) 镀膜后硅片缺陷检测分选设备
KR102541180B1 (ko) 서로 다른 형태의 하우징을 가지는 led 혼합 폐조명으로부터 비전 인식을 통해 하우징 형태 별로 led 조명을 선별 분류하기 위한 분류 장치 및 분류 시스템
CN110553650A (zh) 一种基于小样本学习的移动机器人重定位方法
CN113878576A (zh) 一种机器人视觉分拣工艺程序编制方法
CN106097323B (zh) 一种基于机器视觉的发动机气缸体铸件的定位方法
CN109225941A (zh) 内螺纹攻丝情况自动检测与分拣系统及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant