CN109692889B - 一种基于机器视觉的伞杆工位调整系统及方法 - Google Patents

一种基于机器视觉的伞杆工位调整系统及方法 Download PDF

Info

Publication number
CN109692889B
CN109692889B CN201910021601.3A CN201910021601A CN109692889B CN 109692889 B CN109692889 B CN 109692889B CN 201910021601 A CN201910021601 A CN 201910021601A CN 109692889 B CN109692889 B CN 109692889B
Authority
CN
China
Prior art keywords
umbrella
umbrella rod
workpiece
industrial camera
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910021601.3A
Other languages
English (en)
Other versions
CN109692889A (zh
Inventor
陈刚
陆成刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ningbo Zhihua Digital Information Technology Co.,Ltd.
Original Assignee
Zhejiang University of Technology ZJUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Technology ZJUT filed Critical Zhejiang University of Technology ZJUT
Priority to CN201910021601.3A priority Critical patent/CN109692889B/zh
Publication of CN109692889A publication Critical patent/CN109692889A/zh
Application granted granted Critical
Publication of CN109692889B publication Critical patent/CN109692889B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B21MECHANICAL METAL-WORKING WITHOUT ESSENTIALLY REMOVING MATERIAL; PUNCHING METAL
    • B21CMANUFACTURE OF METAL SHEETS, WIRE, RODS, TUBES OR PROFILES, OTHERWISE THAN BY ROLLING; AUXILIARY OPERATIONS USED IN CONNECTION WITH METAL-WORKING WITHOUT ESSENTIALLY REMOVING MATERIAL
    • B21C51/00Measuring, gauging, indicating, counting, or marking devices specially adapted for use in the production or manipulation of material in accordance with subclasses B21B - B21F
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N2021/845Objects on a conveyor
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N2021/845Objects on a conveyor
    • G01N2021/8455Objects on a conveyor and using position detectors

Abstract

一种基于机器视觉的伞杆工位调整系统,包括:第一工业相机,第二工业相机分别用于采集伞杆工件的背面图和截面图,所述伞杆背面图用于检测是否有焊缝,所述截面图用于视觉定位;电脑分别与工业相机,第二工业相机相连;下位机采用PLC控制器,与上位机与电脑进行通讯;PLC控制器用于控制电机,带动机械抓手带着伞杆机械旋转,对工件位置进行调整;PLC控制电磁阀进一步控制气缸,目的是控制机械抓手的收紧与松弛,方便装上和卸下工件;PLC控制接近开关用于接收伞杆的位置信号,看其位置是否发生变化。以及提供一种基于机器视觉的伞杆工位调整方法。本发明效率较高、准确率较高、有效降低人工成本。

Description

一种基于机器视觉的伞杆工位调整系统及方法
技术领域
本发明属于视觉检测领域,具体涉及伞杆工件的图像处理与检测,根据检测结果进行位置调整的系统及方法。
背景技术
伞可以遮阳避雨,是我们生活中必不可少的工具。伞的构造大体是伞把、伞杆、伞骨和伞面。其中伞杆是伞的主心骨,支撑着整个伞,其主要由金属等材料制成,常用的金属材料有电镀铁、电镀铝等。目前伞杆的需求量大,但在伞杆的实际生产加工过程中,发现资源利用率低、劳动力成本高、技术落后、利润微薄等问题。
目前传统的普通金属伞杆工艺加工流程:首先待加工伞杆工件从杆件的料仓,任意无序地落料到加工生产线上,为了保障后续伞杆加工工序合理有效地进行,接着工人会手动调整机械工件人工地进行调整伞杆的位置,将伞杆工件旋转校正,同时保证工件的水平面朝上且该朝上的水平面上无焊缝存在即可。然后传送带会将被调整好位置的待加工伞杆工件传送到下面几个加工位置,依次进行冲大孔、冲小孔、压槽和压筋。最终就形成了目前常用的伞杆,出料即可。
由以上描述可知,目前传统伞杆加工工艺过程还采用人工检测配合机械定位的调整方式,该种方式效率低,准确率低,且人工费用开支逐年上升。所以,为了解决以上问题,此处设计
发明内容
为了克服已有伞杆加工方式的效率低、准确率低、人工成本较高的不足,本发明提供了一种效率较高、准确率较高、有效降低人工成本的基于机器视觉的伞杆工位调整系统及方法,用工业相机代替人眼进行定位和检测,再由控制器控制执行机构动作完成相应位置的调整。
本发明解决其技术问题所采用的技术方案是:
一种基于机器视觉的伞杆工位调整系统,包括:
第一工业相机,第二工业相机分别用于采集伞杆工件的背面图和截面图,所述伞杆背面图用于检测是否有焊缝,所述截面图用于视觉定位;
电脑分别与工业相机,第二工业相机相连,电脑用于采集图像,并进行图像处理和检测,同时与下位机控制器通讯;
下位机采用PLC控制器,提供24V电源对其供电,同时与上位机与电脑进行通讯;
PLC控制器用于控制电机,带动机械抓手带着伞杆机械旋转,对工件位置进行调整;PLC控制电磁阀进一步控制气缸,目的是控制机械抓手的收紧与松弛,方便装上和卸下工件;PLC控制接近开关用于接收伞杆的位置信号,看其位置是否发生变化。
进一步,所述系统还包括第一光源和第二光源,所述第一光源和第二光源分别给对应相机提供照明环境。
一种基于机器视觉的伞杆工位调整方法,包括以下步骤:
1)伞杆工件从出料仓逐个无序落料到生产线工作传送带上,达到第一个工位,机械抓手抓紧工件,任意旋转一定角度,直到接近开关收到信号,将信号由PLC通信传输给电脑,确定初始位置,PLC控制伞杆工件在此处停住不动;
2)水平方向上的第二工业相机采集一帧伞杆截面图,采集结束后电脑接收到伞杆截面图,开始伞杆的视觉定位检测,计算旋转校正的角度;
3)根据2)中计算出的旋转校正角度,电脑再将该角度数据通信传输给下位机PLC控制器,对伞杆工件进行旋转校正的操作;
4)经过步骤3)后,伞杆已经被校正为水平面朝上了,此时竖直方向上的第一工业相机在第一光源的照明情况下采集一帧伞杆背面图,采集结束后电脑接收到伞杆截面图,开始进行焊缝检测;
5)若该待加工面无焊缝,则PLC控制电机停住,伞杆在该工位固定;
6)若该待加工面还有焊缝,则PLC控制电机旋转固定角度值使另一个水平面朝上,重复步骤4)操作。
进一步,所述步骤2)中,视觉定位检测流程如下:首先,采集一帧伞杆截面图像,之后针对该图像进行灰度化、去噪和二值化处理;接着与标准水平位置的预处理后的模板图像进行模板匹配,模板匹配的检测阈值大于或等于预设定阈值时,证明杆件合格,否则杆件不合格,不合格就不进行接下来的视觉定位操作;然后,针对合格的伞杆工件,提取其截面图像的边缘特征与模板截面图像边缘特征进行特征匹配,特征匹配结果输出为一个仿射变换矩阵;最后,可以根据先前计算出的仿射变换矩阵,求出伞杆视觉定位中所需要的待旋转校正角度。
再进一步,所述步骤4)中,焊缝检测流程如下:首先,采集一帧伞杆背面图像(即伞杆的周面),之后针对该图像进行灰度化、去噪和二值化处理;接着,对上面预处理后的图像进行边缘检测与提取,做到只保留图像轮廓;然后,进行霍夫直线检测,通过预设置的边缘阈值,来进行过滤分割焊缝边界边缘与其它边缘线,通过实现的方法保证最后只保留焊缝边界线,接着将焊缝边界线用红色线重新在原图中绘制出来;若有红色线出现在原图中,则标记并记录该焊缝所在面即可。
更进一步,所述步骤6)中,固定角度值=360°/截面形状边数,所述截面形状为规则多边形。
所述步骤2)中,水平方向上的第二工业相机在第二光源的照明情况下采集一帧伞杆截面图;
所述步骤4)中,竖直方向上的第一工业相机在第一光源的照明情况下采集一帧伞杆背面图。
本发明的有益效果主要表现在:效率较高、准确率较高、有效降低人工成本。
附图说明
图1是基于机器视觉的伞杆工位调整系统的原理框图。
图2是视觉定位检测流程图。
图3是焊缝检测流程图。
图4是基于机器视觉的伞杆工位调整方法的流程图。
具体实施方式
下面结合附图对本发明作进一步描述。
参照图1~图4,一种基于机器视觉的伞杆工位调整系统,由于伞杆为长柱状结构,需要采集其背面和截面图像进行检测和定位,所以此处设计其系统功能框架如图1所示;
所述基于机器视觉的伞杆工位调整系统包括:
第一工业相机,第二工业相机分别用于采集伞杆工件的背面图和截面图,所述伞杆背面图用于检测是否有焊缝,所述截面图用于视觉定位;第一光源和第二光源分别给对应相机提供照明环境;
电脑分别与第一工业相机,第二工业相机相连,电脑用于采集图像,并进行图像处理和检测,同时与下位机控制器通讯;
下位机采用PLC(Programmable Logic Controller可编程逻辑控制器)作为总的控制器,提供24V电源对其供电,同时与上位机与电脑进行通讯;
PLC控制器用于控制电机,带动机械抓手带着伞杆机械旋转,对工件位置进行调整;PLC控制电磁阀进一步控制气缸,目的是控制机械抓手的收紧与松弛,方便装上和卸下工件;PLC控制接近开关用于接收伞杆的位置信号,看其位置是否发生变化。
本实施例中,伞杆的背面是指伞杆水平放置状态下的俯视面,即柱状面;伞杆截面是指伞杆水平放置状态下的左视面或右视面,即端面。
视觉定位检测流程如下:首先,采集一帧伞杆截面图像,之后针对该图像进行灰度化、去噪和二值化处理;接着与标准水平位置的预处理后的模板图像进行模板匹配,模板匹配的检测阈值大于或等于预设定阈值时,证明杆件合格,否则杆件不合格,不合格就不进行接下来的视觉定位操作;然后,针对合格的伞杆工件,提取其截面图像的边缘特征与模板截面图像边缘特征进行特征匹配,特征匹配结果输出为一个仿射变换矩阵;最后,可以根据先前计算出的仿射变换矩阵,求出伞杆视觉定位中所需要的待旋转校正角度。其检测流程如图2所示。
机器视觉焊缝检测过程如下:首先,采集一帧伞杆背面图像(即伞杆的周面),之后针对该图像进行灰度化、去噪和二值化处理;接着,对上面预处理后的图像进行边缘检测与提取,做到只保留图像轮廓;然后,进行霍夫直线检测,通过预设置的边缘阈值,来进行过滤分割焊缝边界边缘与其它边缘线,通过实现的方法保证最后只保留焊缝边界线,接着将焊缝边界线用红色线重新在原图中绘制出来;若有红色线出现在原图中,则标记并记录该焊缝所在面即可。
如果后续加工的待加工平面有焊缝时,在后续使用时焊缝面会摩擦其它伞杆光滑面导致伞杆表面被刮花,所以要进行焊缝检测,确保焊缝所在面为非加工面。焊缝检测的目的是确定焊缝所在面,记录并标记该面,为了后续调整该面为非水平朝上的待加工面即可。一般伞杆工件在初始加工过程中是条形焊接,所以此处设计焊缝检测流程如图3所示。
所述实验阈值是根据实际的实验视觉检测的环境确定的,即其与光源照明和实验环境有一定关系,若光源或实验环境变化,该阈值也会变化,具体阈值需要通过预处理实验获得,此处只是提出一种过滤检测的判定方法,即通过阈值进行判定。阈值具体多少还需要通过实验获得。
结合系统硬件控制部分和图像算法处理部分来设计整个系统的全流程实现方法,如图4所示。基于机器视觉的伞杆工位调整方法包括以下步骤:
1)伞杆工件从出料仓逐个无序落料到生产线工作传送带上,达到第一个工位,机械抓手抓紧工件,任意旋转一定角度,直到接近开关收到信号,将信号由PLC通信传输给电脑,确定初始位置,PLC控制伞杆工件在此处停住不动;
2)水平方向上的第二工业相机在第二光源的照明情况下采集一帧伞杆截面图,采集结束后电脑接收到伞杆截面图,开始伞杆的视觉定位检测,计算旋转校正的角度;视觉定位检测流程如图2;
3)根据2)中计算出的旋转校正角度,电脑再将该角度数据通信传输给下位机PLC控制器,对伞杆工件进行旋转校正的操作;
4)经过步骤3)后,伞杆已经被校正为水平面朝上了,此时竖直方向上的第一工业相机在第一光源的照明情况下采集一帧伞杆背面图,采集结束后电脑接收到伞杆截面图,开始进行焊缝检测,焊缝检测流程如图3所示;
5)若该待加工面无焊缝,则PLC控制电机停住,伞杆在该工位固定,等待后续打孔等其它工序操作;
6)若该待加工面还有焊缝,则PLC控制电机旋转固定角度值(固定角度值=360°/截面形状边数,此处以截面形状为规则多边形为例)使另一个水平面朝上,重复步骤4)操作。

Claims (7)

1.一种基于机器视觉的伞杆工位调整系统,其特征在于,所述系统包括:
第一工业相机,第二工业相机分别用于采集伞杆工件的背面图和截面图,所述伞杆工件背面图用于检测是否有焊缝,所述截面图用于视觉定位;
电脑分别与第一工业相机,第二工业相机相连,电脑用于采集图像,并进行图像处理和检测,同时与下位机控制器通讯;
下位机采用PLC控制器,提供24V电源对其供电,同时与电脑进行通讯;
PLC控制器用于控制电机,带动机械抓手带着伞杆工件机械旋转,对工件位置进行调整;PLC控制电磁阀进一步控制气缸,目的是控制机械抓手的收紧与松弛,方便装上和卸下工件;PLC控制接近开关用于接收伞杆工件的位置信号,看其位置是否发生变化。
2.如权利要求1所述的一种基于机器视觉的伞杆工位调整系统,其特征在于,所述系统还包括第一光源和第二光源,所述第一光源和第二光源分别给对应相机提供照明环境。
3.如权利要求1所述的基于机器视觉的伞杆工位调整系统实现的伞杆工位调整方法,其特征在于,所述方法包括以下步骤:
1)伞杆工件从出料仓逐个无序落料到生产线工作传送带上,达到第一个工位,机械抓手抓紧工件,任意旋转一定角度,直到接近开关收到信号,将信号由PLC通信传输给电脑,确定初始位置,PLC控制伞杆工件在此处停住不动;
2)水平方向上的第二工业相机采集一帧伞杆工件截面图,采集结束后电脑接收到伞杆工件截面图,开始伞杆工件的视觉定位检测,计算旋转校正的角度;
3)根据2)中计算出的旋转校正角度,电脑再将该角度数据通信传输给下位机PLC控制器,对伞杆工件进行旋转校正的操作;
4)经过步骤3)后,伞杆工件已经被校正为水平面朝上了,此时竖直方向上的第一工业相机在第一光源的照明情况下采集一帧伞杆工件背面图,采集结束后电脑接收到伞杆工件截面图,开始进行焊缝检测;
5)若待加工面无焊缝,则PLC控制电机停住,伞杆工件在该工位固定;
6)若该待加工面还有焊缝,则PLC控制电机旋转固定角度值使另一个水平面朝上,重复步骤4)操作。
4.如权利要求3所述的伞杆工位调整方法,其特征在于,所述步骤2)中,视觉定位检测流程如下:首先,采集一帧伞杆工件截面图像,之后针对该图像进行灰度化、去噪和二值化处理;接着与标准水平位置的预处理后的模板图像进行模板匹配,模板匹配的检测阈值大于或等于预设定阈值时,证明伞杆工件合格,否则伞杆工件不合格,不合格就不进行接下来的视觉定位操作;然后,针对合格的伞杆工件,提取其截面图像的边缘特征与模板截面图像边缘特征进行特征匹配,特征匹配结果输出为一个仿射变换矩阵;最后,根据先前计算出的仿射变换矩阵,求出伞杆工件视觉定位中所需要的待旋转校正角度。
5.如权利要求3或4所述的伞杆工位调整方法,其特征在于,所述步骤4)中,焊缝检测流程如下:首先,采集一帧伞杆工件背面图像,之后针对该图像进行灰度化、去噪和二值化处理;接着,对上面预处理后的图像进行边缘检测与提取,做到只保留图像轮廓;然后,进行霍夫直线检测,通过预设置的边缘阈值,来进行过滤分割焊缝边界边缘与其它边缘线,保证最后只保留焊缝边界线,接着将焊缝边界线用红色线重新在原图中绘制出来;最后,若有红色线出现在原图中,则标记并记录该焊缝所在面即可。
6.如权利要求3或4所述的伞杆工位调整方法,其特征在于,所述步骤6)中,固定角度值=360°/截面形状边数,所述截面形状为规则多边形。
7.如权利要求3或4所述的伞杆工位调整方法,其特征在于,所述步骤2)中,水平方向上的第二工业相机在第二光源的照明情况下采集一帧伞杆工件截面图。
CN201910021601.3A 2019-01-10 2019-01-10 一种基于机器视觉的伞杆工位调整系统及方法 Active CN109692889B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910021601.3A CN109692889B (zh) 2019-01-10 2019-01-10 一种基于机器视觉的伞杆工位调整系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910021601.3A CN109692889B (zh) 2019-01-10 2019-01-10 一种基于机器视觉的伞杆工位调整系统及方法

Publications (2)

Publication Number Publication Date
CN109692889A CN109692889A (zh) 2019-04-30
CN109692889B true CN109692889B (zh) 2020-02-21

Family

ID=66232629

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910021601.3A Active CN109692889B (zh) 2019-01-10 2019-01-10 一种基于机器视觉的伞杆工位调整系统及方法

Country Status (1)

Country Link
CN (1) CN109692889B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111513343B (zh) * 2020-04-21 2021-11-05 广州番禺职业技术学院 一种用于开心果裂壳加工的智能机械装备及其控制方法
CN112018424B (zh) * 2020-07-30 2021-12-31 惠州市德赛电池有限公司 一种用于电池生产线的自动修正方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5026967A (en) * 1990-07-09 1991-06-25 Jpi Transportation Products, Inc. Vision enhanced method for making a full round bushing
CN201844981U (zh) * 2010-10-22 2011-05-25 浙江工业大学 基于机器视觉的印制线路板缺陷自动检测装置
CN203156342U (zh) * 2013-03-25 2013-08-28 浙江工业大学 基于机器视觉的阀体陶瓷片定位装置
CN104943405B (zh) * 2015-07-03 2017-04-05 江苏北人机器人系统股份有限公司 一种汽车底盘摆臂件视觉打标系统
CN105976352B (zh) * 2016-04-14 2019-01-11 北京工业大学 一种基于灰度图像形态学的焊缝表面缺陷特征提取方法
CN106851062A (zh) * 2017-02-04 2017-06-13 同济大学 一种基于机器视觉的焊缝识别装置
CN107218889B (zh) * 2017-05-24 2020-03-31 深圳市神视检验有限公司 一种测量位置的方法及装置
CN107588794A (zh) * 2017-07-12 2018-01-16 浙江工业大学 一种箱装啤酒在线缺瓶检测装置

Also Published As

Publication number Publication date
CN109692889A (zh) 2019-04-30

Similar Documents

Publication Publication Date Title
CN110539109B (zh) 一种基于单双目视觉的机器人自动焊接系统及方法
CN111097664B (zh) 基于机器人涂胶的实时纠偏方法
CN109692889B (zh) 一种基于机器视觉的伞杆工位调整系统及方法
CN111230593B (zh) 一种基于动态图像序列的铣刀磨损量视觉测量方法
CN110293559B (zh) 一种自动识别定位对准的安装方法
CN108226164A (zh) 一种基于视觉检测的机器人打磨方法及系统
CN102490523A (zh) 一种基于计算机视觉的自动激光雕刻系统及其使用方法
CN109702290B (zh) 基于视觉识别的钢板坡口切割方法
CN210550070U (zh) 一种基于机器人的钢轨端面倒棱打磨装置和系统
CN115953397B (zh) 一种圆锥轴承保持器的工艺制备流程的监测方法及设备
CN113146172A (zh) 一种基于多视觉的检测与装配系统及方法
CN111681222A (zh) 一种刀痕崩边自动检测判断方法及其应用的划片机
CN109035241A (zh) 一种鞋底加工方法及系统
CN105414903A (zh) 一种小型薄板类零件加工的改进工艺
CN111267094A (zh) 一种基于双目视觉的工件定位与抓取方法
CN209408173U (zh) 一种机器人打磨系统
CN209223564U (zh) 一种切割轮毂冒口、浇口和预钻孔的柔性生产线
CN106052602B (zh) 基于机器视觉的cpu散热片底面平整系统及其平整方法
CN109345500B (zh) 一种基于机器视觉的机床刀具刀尖点位置计算方法
CN110664053A (zh) 一种基于视觉的鞋底纠偏系统及方法
CN109396847A (zh) 一种切割轮毂冒口、浇口和预钻孔的柔性生产线
CN113843575A (zh) 一种用于铝合金模板板面开孔的再制造修复系统及方法
CN113634915A (zh) 基于视觉的切割装置及其切割方法
CN108427389B (zh) 基于工业互联网的皮革优化排样与多机协调裁断方法
CN105904344A (zh) 金刚滚轮在机检测修整装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20230614

Address after: No. 10-7, Building 2, East Zone, Ningbo New Materials Innovation Center, High tech Zone, Ningbo City, Zhejiang Province, 315000

Patentee after: Ningbo Zhihua Digital Information Technology Co.,Ltd.

Address before: The city Zhaohui six districts Chao Wang Road Hangzhou City, Zhejiang province 310014 18

Patentee before: JIANG University OF TECHNOLOGY