CN109772733B - 一种基于视觉的缺陷竹块检测分拣装置及方法 - Google Patents

一种基于视觉的缺陷竹块检测分拣装置及方法 Download PDF

Info

Publication number
CN109772733B
CN109772733B CN201910035965.7A CN201910035965A CN109772733B CN 109772733 B CN109772733 B CN 109772733B CN 201910035965 A CN201910035965 A CN 201910035965A CN 109772733 B CN109772733 B CN 109772733B
Authority
CN
China
Prior art keywords
bamboo
camera
conveyor belt
blocks
encoder
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910035965.7A
Other languages
English (en)
Other versions
CN109772733A (zh
Inventor
王恪典
刘冬冬
贾国华
梅雪松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Jiaotong University
Original Assignee
Xian Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Jiaotong University filed Critical Xian Jiaotong University
Priority to CN201910035965.7A priority Critical patent/CN109772733B/zh
Publication of CN109772733A publication Critical patent/CN109772733A/zh
Application granted granted Critical
Publication of CN109772733B publication Critical patent/CN109772733B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

一种基于视觉的缺陷竹块检测分拣装置及方法,装置包括工件槽,工件槽通过第一传送带和第二传送带配合,在第二传送带上设有挡板与第一门型可调支架,第一门型可调支架上连接有第一矩形无影光源及第一相机,第二传送带末端设有第一delta机器人,第二传送带下方的第一摩擦轮与第一编码器同轴连接;第二传送带的末端和第三传送带的首端配合形成竹块翻面结构,第三传送带下方的第二摩擦轮与第二编码器同轴连接,第三传送带设有第二delta机器人和第二门型可调支架,第二门型可调支架连接有第二矩形无影光源及第二相机;方法是通过编码器、相机、delta机器人配合实现缺陷竹块检测分拣,本发明提高稳定性和鲁棒性,效率更高更智能化。

Description

一种基于视觉的缺陷竹块检测分拣装置及方法
技术领域
本发明涉及工业自动检测技术领域,特别涉及一种基于视觉的缺陷竹块检测分拣装置及方法。
背景技术
我国竹资源丰富,是世界上最主要的竹产国。竹块是竹资源有效利用的重要组成部分,其制作过程有竹材选料、切割、胚胎成型、打孔、打磨去头青、蒸煮漂白、竹块精选等工艺流程,其中任何一个环节出现问题,都会造成竹块在不同方面、不同程度上的缺陷。在竹块缺陷检测方面,目前仍是基于人工目测的方式进行竹块缺陷检测,需要加工厂支付巨额的人力成本,而且人工只能检出其中80%的残次品,严重影响后续的加工与产品质量。
国内外在工件缺陷检测、分类方面已经进行了比较多的研究,并将其研究成果用于实际生产加工中。随着工业自动化及机器视觉的发展,对竹块缺陷的研究逐渐展开,并取得相应的进展。宋树祥等提出了一种基于视觉的竹块在线检测方法及系统,实现了竹块的自动化输送及自动翻面,通过图像处理分析实现了轮廓、白斑及棕斑缺陷的检测。欧阳亮等公开了一种自动完成麻将凉席竹块分拣的分拣装置。目前竹块分拣设备多采用振动盘实现单个竹块上料,单个缺陷检测,检测效率低。竹块检测系统存在硬件系统冗余繁杂、单个竹块检测以致速度较慢、表面划痕等细小缺陷检测准确率不高等问题。对于色差缺陷,未进行过行之有效的研究。在调研过程中发现由于现有软硬件系统准确性、可靠性差、成本高等不足,特别是检测效率低难以满足生产需求,鲜有用于实际生产检测,仍是通过人眼辨别的方式进行竹块缺陷检测。实现竹块高效准确的缺陷检测以及快速分拣剔除,具有重要的实际应用价值,同时也是一项紧迫且具有挑战性的工作。
发明内容
为了克服上述现有技术的缺点,本发明的目的在于提出一种基于视觉的缺陷竹块检测分拣装置及方法,装置上料简单、速度快,分拣速度快;方法准确率高,效率高。
为了达到上述目的,本发明采取的技术方案为:
一种基于视觉的缺陷竹块检测分拣装置,包括工件槽1,工件槽1上设有带有卡槽的第一传送带2,第一传送带2下端置于工件槽1中并倾斜固定,第一传送带2顶端略高于水平设置的第二传送带3,在第二传送带3输送的方向依次设有挡板4与第一门型可调支架7,第一门型可调支架7固定在第二传送带3两侧,第一门型可调支架7上连接有第一矩形无影光源5及第一相机6,第二传送带3输送方向的末端设有第一delta机器人8,第一delta机器人8的侧边放置有第一废料箱10,第二传送带3下方和第一摩擦轮12保持接触,第一摩擦轮12与第一编码器11同轴连接;
第二传送带3的末端和第三传送带9的首端在输送方向相互平行并保持一定间隙,配合形成竹块翻面结构,第三传送带9下方和第二摩擦轮14保持接触,第二摩擦轮14与第二编码器13同轴连接,在第三传送带9输送的方向设有第二delta机器人20和第二门型可调支架18,第二门型可调支架18固定在第三传送带9两侧,第二门型可调支架18连接有第二矩形无影光源17及第二相机19,第二delta机器人20固定在第三传送带9输送方向的末端,第二delta机器人20侧边放置有第二废料箱15,第三传送带9传输方向最末端的下方设有合格箱16。
所述的第一矩形无影光源5、第一相机6、第一delta机器人8、第一编码器11、第二编码器13、第二矩形无影光源17、第二相机19、第二delta机器人20和工控机连接。
通过水平测量仪、标靶图像矩形对边相等的方式保证第一相机6、第二相机19分别平行第二传送带3、第三传送带9。
调整第一矩形无影光源5、第二矩形无影光源17中每个矩形光源的角度避开反光区。
所述的一种基于视觉的缺陷竹块检测分拣装置的方法,包括以下步骤:
步骤一,在运行之前,首先分别对第一相机6、第二相机19内外参数标定,对第一相机6与第一delta机器人8、第二相机19与第二delta机器人20手眼标定;第一相机6与第一delta机器人8手眼标定以第二传送带3为中介,先标定第一相机6与第二传送带3,再标定第二传送带3与第一delta机器人8;第二相机19与第二delta机器人20手眼标定同理;
步骤二:竹块上料,带有卡槽的第一传送带2将工件槽1中的竹块输送到第二传送带3上,通过挡板4隔挡形成单层多目标工件;
步骤三,第二传送带3移动时带动第一摩擦轮12转动,通过第一编码器11记录第二传送带3的位置;当有竹块输送上第二传送带3时,第一编码器11触发第一相机6采集图像及并记录当前位置;第一编码器11通过STM32将数值实时传到工控机上进行反馈;第一矩形无影光源5打光,第一相机6采集图像,识别正反面并检测缺陷,结合第一编码器11定位缺陷的位置,将缺陷目标的位置传给工控机;工控机控制第一delta机器人8运动,将缺陷竹块分拣到第一废料箱10;
步骤四:竹块翻转,在检测完一面之后,第二传送带3和第三传送带9形成竹块翻面结构,利用第二传送带3和第三传送带9之间的缝隙实现夹紧竹块,经翻面检测竹块另外一面;
步骤五:竹块反面视觉检测,第三传送带9与第二摩擦轮14、第二编码器13的工作过程同步骤二中第二传送带3、第一摩擦轮12、第一编码器11的工作过程相同,经翻面后,竹块由传第三送带9输送过来,第二矩形无影光源17打光,第二相机19采集图像,并触发第二编码器13,识别正反面并检测缺陷,结合第二编码器13的值定位缺陷目标的位置,将缺陷目标的位置传给工控机,工控机控制第二delta机器人20运动,将缺陷竹块分拣到第二废料箱15;
步骤六:经过竹块正反面的视觉缺陷检测后,合格竹块落到合格箱16中,完整整个分拣过程;
步骤七:取s为小于相机视场的某一固定距离,第一编码器11、第二编码器13分别记录距离长度s之后触发第一相机6、第二相机19采集图像,重复步骤三~步骤六。
所述的相机视觉检测方法,包括以下步骤:
步骤一,采集彩色图像,对其进行中值滤波、转灰度图;
步骤二,定位竹块位姿,首先采用基于标记的分水岭算法分割图像中粘连的竹块;然后检测图像中轮廓的闭合边缘,定位竹块;提取轮廓周长,设定阈值滤除噪声轮廓;
步骤三,通过判断目标中心距离相机视场边缘的距离,检测竹块是否完整在相机视场内,对于不完整在相机视场内的竹块不进行缺陷检测;
步骤四,当检测竹块完全在视场内时,提取目标竹块的面积、对称度、紧密度,合格的竹块面积在12000~13000像素之间,对称度大于0.9,紧密度大于0.87,若三个特征不同时满足要求,则被判定是轮廓缺陷竹块,记录轮廓缺陷竹块的位置;
步骤五,在竹块轮廓检测合格后,对于色差缺陷,通过将RGB图像转换为HSI图像,选取S阈值检测色差缺陷,记录色差缺陷竹块的位置;
步骤六,针对没有色差缺陷的竹块,求竹块的灰度均值并与设定的阈值相比区分竹块正反面;
步骤七:针对反面竹块,通过二值化后,判断缺陷面积占竹块面积的比例判别是否为缺陷竹块;当反面竹块存在缺陷时,记录缺陷竹块的位置;
步骤八:针对正面划痕、裂缝、斑点等纹理缺陷检测,提取并融合了局部二值模式与灰度共生矩阵的多位特征,使用SVM分类器判断纹理缺陷竹块;当正面存在纹理缺陷时,记录缺陷竹块的位置;
步骤九:在检测到竹块有缺陷时,提取目标竹块的中心。
所述的步骤二基于标记的分水岭算法为:对相机视场内的目标竹块先进行距离变换,以距离变换的图像作为分水岭算法的标记,作为先验知识;针对粘连竹块通过基于距离变换的分水岭算法来进行分割,对分离的竹块缺陷检测。
所述的步骤四中对称度的计算方法为:先求轮廓的中心,近似将最小外接矩形的中心为竹块中心,在竹块边缘检测之后,将边缘从全局坐标系转化为以竹块中心为原点的局部坐标系下,
Figure BDA0001945921670000051
式中,(x,y)为以图像左上角为原点的坐标,(X,Y)为以竹块中心为原点的坐标,θ为旋转角度,(Cx,Cy)为竹块的中心坐标;
竹块本身的加工精度以及坐标转化过程中近似代替,只要转化后的左右边缘相加之和控制在6个像素内,即认为是对称的,对称度是左右轮廓对称点数与单边边缘像素点数的比值。
所述的步骤五中S阈值的选取方法为:统计50片合格竹块在S空间内的灰度均值,50片有色差竹块的灰度均值,得出相应的S阈值。
所述的步骤八针对正面划痕、裂缝、斑点等纹理缺陷检测的具体方法为:
1)采集图像大小为1600*1200像素,提取每个竹块区域内像素点的LBP,将目标区域映射成大小为128*64像素;每个点的LBP是通过对比中心像素值与3*3的圆形邻域像素值,若此像素点小于等于中心像素值,则该像素被记为1,否则记为0;采用了基于uniform的旋转不变LBP模式,建立查找表,通过映射的方式找到对应的模式值;cell取32*32,将每个cell的统计直方图进行连接成为一个特征向量,则每个竹块区域生成9*4*2=72维特征;使用主成分分析法(PCA)对LBP特征进行降维,方差百分比设置为0.95,维数降低到44维;
2)提取竹块区域的水平及竖直方向的灰度共生矩阵(GLCM)的特征值,包括熵、能量、对比度、相关性,总计8维特征;结合LBP的44维特征与灰度共生矩阵的8维特征形成52维特征,分别采集300张合格竹块的图像,500张纹理缺陷图片,其中表面划痕、裂缝各100张,斑点缺陷300张;
3)读取图片并提取上述52维特征输入SVM分类器进行训练得到分类器,在进行纹理缺陷检测时,只需要加载模型。
与现有技术相比,本发明的有益效果为:
本发明装置通过带有卡槽的传送带上料,带有挡板的过滤,保证相机成像及机器人分拣是单层多目标,使相机对多个目标竹块同时进行检测,可以大大提高识别分拣效率,并降低成本;采用基于距离变换的分水岭算法,将相机图像内的竹块分割成单目标;在缺陷检测方法上,对于轮廓缺陷,采用面积、对称度、紧密度串行判别的方式有效保证了合格竹块;对于色差缺陷,通过将RGB图像转换为HSI图像,选取S阈值检测过度染色的图像;对于斑点缺陷,提取纹理特征和统计特征,并对纹理特征降维后进行融合形成多维向量,能够有效提高准确率及检测效率。本发明通过融合多种特征,对竹块的多种缺陷进行检测,有利于提高系统的稳定性和鲁棒性,效率更高更智能化。
附图说明
图1为本发明基于视觉的缺陷竹块检测分拣装置的示意图。
图2为本发明相机视觉检测方法流程图。
图3为竹块完整性检测示意图。
具体实施方式
下面结合附图和实施例对本发明作详细描述。
如图1所示,一种基于视觉的缺陷竹块检测分拣装置,包括工件槽1,工件槽1上设有带有卡槽的第一传送带2,第一传送带2下端置于工件槽1中并倾斜固定,第一传送带2顶端略高于水平设置的第二传送带3,在第二传送带3输送的方向依次设有挡板4与第一门型可调支架7,第一门型可调支架7固定在第二传送带3两侧,第一门型可调支架7上连接有第一矩形无影光源5及第一相机6,第二传送带3输送方向的末端设有第一delta机器人8,第一delta机器人8的侧边放置有第一废料箱10,第二传送带3下方和第一摩擦轮12保持接触,第一摩擦轮12与第一编码器11同轴连接;
第二传送带3的末端和第三传送带9的首端在输送方向相互平行并保持一定间隙,配合形成竹块翻面结构,第三传送带9下方和第二摩擦轮14保持接触,第二摩擦轮14与第二编码器13同轴连接,在第三传送带9输送的方向设有第二delta机器人20和第二门型可调支架18,第二门型可调支架18固定在第三传送带9两侧,第二门型可调支架18连接有第二矩形无影光源17及第二相机19,第二delta机器人20固定在第三传送带9输送方向的末端,第二delta机器人20侧边放置有第二废料箱15,第三传送带9传输方向最末端的下方设有合格箱16。
所述的第一矩形无影光源5、第一相机6、第一delta机器人8、第一编码器11、第二编码器13、第二矩形无影光源17、第二相机19、第二delta机器人20和工控机连接。
所述的第一传送带2的卡槽之间的宽度为50mm,高度为10mm。为避免过度堆积以及对第二传送带3本身的划伤,第一传送带2的上料速度与的检测速度相匹配。第二传送带3和第三传送带9运行速度同步。其中竹块的高度为5.2mm。挡板4设置为可调,其垂直距离第二传送带3的范围在7mm~9mm之间。通过水平测量仪、标靶图像矩形对边相等的方式保证第一相机6、第二相机19分别平行第二传送带3、第三传送带9,调整第一矩形无影光源5、第二矩形无影光源17中每个矩形光源的角度有效避开反光区。
所述的一种基于视觉的缺陷竹块检测分拣装置的方法,包括以下步骤:
步骤一,在运行之前,首先分别对第一相机6、第二相机19内外参数标定,对第一相机6与第一delta机器人8、第二相机19与第二delta机器人20手眼标定;第一相机6与第一delta机器人8手眼标定以第二传送带3为中介,先标定第一相机6与第二传送带3,再标定第二传送带3与第一delta机器人8;第二相机19与第二delta机器人20手眼标定同理;
步骤二:竹块上料,带有卡槽的第一传送带2将工件槽1中的竹块输送到第二传送带3上,通过挡板4隔挡形成单层多目标工件;
步骤三,第二传送带3移动时带动第一摩擦轮12转动,通过第一编码器11记录第二传送带3的位置;当有竹块输送上第二传送带3时,第一编码器11触发第一相机6采集图像及并记录当前位置;第一编码器11通过STM32将数值实时传到工控机上进行反馈;第一矩形无影光源5打光,第一相机6采集图像,识别正反面并检测缺陷,结合第一编码器11定位缺陷的位置,将缺陷目标的位置传给工控机;工控机控制第一delta机器人8运动,将缺陷竹块分拣到第一废料箱10;
步骤四:竹块翻转,在检测完一面之后,第二传送带3和第三传送带9形成竹块翻面结构,间距为3mm,利用第二传送带3和第三传送带9之间的缝隙实现夹紧竹块,经翻面检测竹块另外一面;
步骤五:竹块反面视觉检测,第三传送带9与第二摩擦轮14、第二编码器13的工作过程同步骤二中第二传送带3、第一摩擦轮12、第一编码器11的工作过程相同,经翻面后,竹块由传第三送带9输送过来,第二矩形无影光源17打光,第二相机19采集图像,并触发第二编码器13,识别正反面并检测缺陷,结合第二编码器13的值定位缺陷目标的位置,将缺陷目标的位置传给工控机,工控机控制第二delta机器人20运动,将缺陷竹块分拣到第二废料箱15;
步骤六:经过竹块正反面的视觉缺陷检测后,合格竹块落到合格箱16中,完整整个分拣过程;
步骤七:取s为小于相机视场的某一固定距离,第一编码器11、第二编码器13分别记录距离长度s之后触发第一相机6、第二相机19采集图像,重复步骤三~步骤六。
如图2所示,所述的相机视觉检测方法,包括以下步骤:
步骤一,采集彩色图像,对其进行中值滤波、转灰度图;
步骤二,定位竹块位姿,首先采用基于标记的分水岭算法分割图像中粘连的竹块;然后检测图像中轮廓的闭合边缘,定位竹块;提取轮廓周长,设定阈值滤除噪声轮廓;
基于标记的分水岭算法为:对相机视场内的目标竹块先进行距离变换,以距离变换的图像作为分水岭算法的标记,作为先验知识;针对粘连竹块通过基于距离变换的分水岭算法来进行分割,对分离的竹块缺陷检测;
步骤三,检测竹块是否完整在相机视场内,如图3所示,l表示最小外接矩形对角线的长度,a代表最小外接矩形中心点距左边缘的距离,b代表最小外接矩形中心距离右边缘的位置,若a或b的值小于l/2,说明该目标没有完全进入相机视场或已经出相机视场,不再对其进行缺陷检测;
步骤四,当检测竹块完全在相机视场内时,检测轮廓缺陷竹块,随机选取100块合格和100块具有轮廓缺陷的竹块,分别计算其面积、对称度、紧密度,统计发现,合格的竹块面积在12000~13000像素之间,对称度大于0.9,紧密度大于0.87;在检测竹块对三个形状特征串行使用,在不同时满足这三个特征阈值时,则被判定为轮廓不合格竹块;其中竹块面积统计的是在图像二值化之后像素点的个数总和;对称度是竹块轮廓边缘关于中轴线的对称性;由于竹块边缘缺陷只会出现在纵向边缘,所以只需要计算纵向边缘的对称度;紧密度是竹块本身的面积与最小外接矩形面积的比值;
对称度的计算是先求轮廓的中心,由于竹块形状近似于矩阵,为提高计算速度,近似将最小外接矩形的中心为竹块中心;在竹块边缘检测之后,将边缘从全局坐标系转化为以竹块中心为原点的局部坐标系下,
Figure BDA0001945921670000101
式中,(x,y)为以图像左上角为原点的坐标,(X,Y)为以竹块中心为原点的坐标,θ为旋转角度,(Cx,Cy)为竹块的中心坐标;
由于竹块本身的加工精度以及坐标转化过程中近似代替,只要转化后的左右边缘相加之和控制在6个像素内,即认为是对称的;对称度是左右轮廓对称点数与单边边缘像素点数的比值;
步骤五,在竹块轮廓检测合格后,对于色差缺陷,通常表现为过度染色,统计颜色空间的HSI特征值,统计50片合格竹块在S空间内的灰度均值,50片有色差竹块的灰度均值,选取相应的阈值即可区分缺陷竹块;
步骤六,针对没有色差缺陷的竹块,由于竹块的缺陷主要集中在正面且正面直接影响成品的质量效果,通过正面的缺陷检测即可识别出大部分缺陷竹块;求竹块的灰度均值并与设定的阈值相比即可区分出正反面;
步骤七:针对反面竹块,通过二值化后,判断缺陷面积占竹块面积的比例判别是否为缺陷竹块;当反面竹块存在缺陷时,记录缺陷竹块的位置;
步骤八:正面划痕、裂缝、斑点等纹理缺陷检测,
1)采集图像大小为1600*1200像素,提取每个竹块区域内像素点的LBP,为提高效率将目标区域映射成大小为128*64像素;每个点的LBP是通过对比中心像素值与3*3的圆形邻域像素值,若此像素点小于等于中心像素值,则该像素被记为1,否则记为0;为了降低维度,提高特征提取效率,采用了基于uniform的旋转不变LBP模式,建立查找表,通过映射的方式找到对应的模式值;cell取32*32,将每个cell的统计直方图进行连接成为一个特征向量,则每个竹块区域生成9*4*2=72维特征;为减少冗余,增强特征的鲁棒性,使用主成分分析法(PCA)对LBP特征进行降维,方差百分比设置为0.95,维数降低到44维;
2)提取竹块区域的水平及竖直方向的灰度共生矩阵(GLCM)的特征值,包括熵、能量、对比度、相关性,总计8维特征;结合LBP的44维特征与灰度共生矩阵的8维特征形成52维特征,分别采集300张合格竹块的图像,500张斑点缺陷图片,包括表面划痕、裂缝各100张,斑点缺陷(包括棕斑、白斑)300张;
3)读取图片并提取上述52维特征输入SVM分类器进行训练得到分类器,在进行纹理缺陷检测时,只需要加载模型即可;
步骤九:在检测到竹块有缺陷时,提取目标竹块的中心。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替换,都应当视为属于本发明的保护范围。

Claims (8)

1.一种基于视觉的缺陷竹块检测分拣装置的方法,其特征在于,包括以下步骤:
步骤一,在运行之前,首先分别对第一相机(6)、第二相机(19)内外参数标定,对第一相机(6)与第一delta机器人(8)、第二相机(19)与第二delta机器人(20)手眼标定;第一相机(6)与第一delta机器人(8)手眼标定以第二传送带(3)为中介,先标定第一相机(6)与第二传送带(3),再标定第二传送带(3)与第一delta机器人(8);第二相机(19)与第二delta机器人(20)手眼标定同理;
步骤二:竹块上料,带有卡槽的第一传送带(2)将工件槽(1)中的竹块输送到第二传送带(3)上,通过挡板(4)隔挡形成单层多目标工件;
步骤三,第二传送带(3)移动时带动第一摩擦轮(12)转动,通过第一编码器(11)记录第二传送带(3)的位置;当有竹块输送上第二传送带(3)时,第一编码器(11)触发第一相机(6)采集图像并记录当前位置;第一编码器(11)通过STM32将数值实时传到工控机上进行反馈;第一矩形无影光源(5)打光,第一相机(6)采集图像,识别正反面并检测缺陷,结合第一编码器(11)定位缺陷的位置,将缺陷目标的位置传给工控机;工控机控制第一delta机器人(8)运动,将缺陷竹块分拣到第一废料箱(10);
步骤四:竹块翻转,在检测完一面之后,第二传送带(3)和第三传送带(9)形成竹块翻面结构,利用第二传送带(3)和第三传送带(9)之间的缝隙实现夹紧竹块,经翻面检测竹块另外一面;
步骤五:竹块反面视觉检测,第三传送带(9)与第二摩擦轮(14)、第二编码器(13)的工作过程同步骤二中第二传送带(3)、第一摩擦轮(12)、第一编码器(11)的工作过程相同,经翻面后,竹块由传第三送带(9)输送过来,第二矩形无影光源(17)打光,第二相机(19)采集图像,并触发第二编码器(13),识别正反面并检测缺陷,结合第二编码器(13)的值定位缺陷目标的位置,将缺陷目标的位置传给工控机,工控机控制第二delta机器人(20)运动,将缺陷竹块分拣到第二废料箱(15);
步骤六:经过竹块正反面的视觉缺陷检测后,合格竹块落到合格箱(16)中,完成整个分拣过程;
步骤七:取s为小于相机视场的某一固定距离,第一编码器(11)、第二编码器(13)分别记录距离长度s之后触发第一相机(6)、第二相机(19)采集图像,重复步骤三~步骤六;
相机视觉检测方法,包括以下步骤:
步骤1,采集彩色图像,对其进行中值滤波、转灰度图;
步骤2,定位竹块位姿,首先采用基于标记的分水岭算法分割图像中粘连的竹块;然后检测图像中轮廓的闭合边缘,定位竹块;提取轮廓周长,设定阈值滤除噪声轮廓;
步骤3,通过判断目标中心距离相机视场边缘的距离,检测竹块是否完整在相机视场内,对于不完整在相机视场内的竹块不进行缺陷检测;
步骤4,当检测竹块完全在视场内时,提取目标竹块的面积、对称度、紧密度,合格的竹块面积在12000~13000像素之间,对称度大于0.9,紧密度大于0.87,若三个特征不同时满足要求,则被判定是轮廓缺陷竹块,记录轮廓缺陷竹块的位置;
步骤5,在竹块轮廓检测合格后,对于色差缺陷,通过将RGB图像转换为HSI图像,选取S阈值检测色差缺陷,记录色差缺陷竹块的位置;
步骤6,针对没有色差缺陷的竹块,求竹块的灰度均值并与设定的阈值相比区分竹块正反面;
步骤7:针对反面竹块,通过二值化后,判断缺陷面积占竹块面积的比例判别是否为缺陷竹块;当反面竹块存在缺陷时,记录缺陷竹块的位置;
步骤8:针对正面划痕、裂缝、斑点纹理缺陷检测,提取并融合了局部二值模式与灰度共生矩阵的多位特征,使用SVM分类器判断纹理缺陷竹块;当正面存在纹理缺陷时,记录缺陷竹块的位置;
步骤9:在检测到竹块有缺陷时,提取目标竹块的中心;
所述的一种基于视觉的缺陷竹块检测分拣装置,包括工件槽(1),工件槽(1)上设有带有卡槽的第一传送带(2),第一传送带(2)下端置于工件槽(1)中并倾斜固定,第一传送带(2)顶端略高于水平设置的第二传送带(3),在第二传送带(3)输送的方向依次设有挡板(4)与第一门型可调支架(7),第一门型可调支架(7)固定在第二传送带(3)两侧,第一门型可调支架(7)上连接有第一矩形无影光源(5)及第一相机(6),第二传送带(3)输送方向的末端设有第一delta机器人(8),第一delta机器人(8)的侧边放置有第一废料箱(10),第二传送带(3)下方和第一摩擦轮(12)保持接触,第一摩擦轮(12)与第一编码器(11)同轴连接;
第二传送带(3)的末端和第三传送带(9)的首端在输送方向相互平行并保持一定间隙,配合形成竹块翻面结构,第三传送带(9)下方和第二摩擦轮(14)保持接触,第二摩擦轮(14)与第二编码器(13)同轴连接,在第三传送带(9)输送的方向设有第二delta机器人(20)和第二门型可调支架(18),第二门型可调支架(18)固定在第三传送带(9)两侧,第二门型可调支架(18)连接有第二矩形无影光源(17)及第二相机(19),第二delta机器人(20)固定在第三传送带(9)输送方向的末端,第二delta机器人(20)侧边放置有第二废料箱(15),第三传送带(9)传输方向最末端的下方设有合格箱(16)。
2.根据权利要求1所述的一种基于视觉的缺陷竹块检测分拣装置的方法,其特征在于:所述的第一矩形无影光源(5)、第一相机(6)、第一delta机器人(8)、第一编码器(11)、第二编码器(13)、第二矩形无影光源(17)、第二相机(19)、第二delta机器人(20)和工控机连接。
3.根据权利要求1所述的一种基于视觉的缺陷竹块检测分拣装置的方法,其特征在于:通过水平测量仪、标靶图像矩形对边相等的方式保证第一相机(6)、第二相机(19)分别平行第二传送带(3)、第三传送带(9)。
4.根据权利要求1所述的一种基于视觉的缺陷竹块检测分拣装置的方法,其特征在于:调整第一矩形无影光源(5)、第二矩形无影光源(17)中每个矩形光源的角度避开反光区。
5.根据权利要求1所述的一种基于视觉的缺陷竹块检测分拣装置的方法,其特征在于,所述的步骤2基于标记的分水岭算法为:对相机视场内的目标竹块先进行距离变换,以距离变换的图像作为分水岭算法的标记,作为先验知识;针对粘连竹块通过基于距离变换的分水岭算法来进行分割,对分离的竹块缺陷检测。
6.根据权利要求1所述的一种基于视觉的缺陷竹块检测分拣装置的方法,其特征在于,所述的步骤4中对称度的计算方法为:先求轮廓的中心,近似将最小外接矩形的中心为竹块中心,在竹块边缘检测之后,将边缘从全局坐标系转化为以竹块中心为原点的局部坐标系下,
Figure FDA0002268180640000041
式中,(x,y)为以图像左上角为原点的坐标,(X,Y)为以竹块中心为原点的坐标,θ为旋转角度,(Cx,Cy)为竹块的中心坐标;
竹块本身的加工精度以及坐标转化过程中近似代替,只要转化后的左右边缘相加之和控制在6个像素内,即认为是对称的,对称度是左右轮廓对称点数与单边边缘像素点数的比值。
7.根据权利要求1所述的一种基于视觉的缺陷竹块检测分拣装置的方法,其特征在于,所述的步骤5中S阈值的选取方法为:统计50片合格竹块在S空间内的灰度均值,50片有色差竹块的灰度均值,得出相应的S阈值。
8.根据权利要求1所述的一种基于视觉的缺陷竹块检测分拣装置的方法,其特征在于,所述的步骤8针对正面划痕、裂缝、斑点纹理缺陷检测的具体方法为:
1)采集图像大小为1600*1200像素,提取每个竹块区域内像素点的LBP,将目标区域映射成大小为128*64像素;每个点的LBP是通过对比中心像素值与3*3的圆形邻域像素值,若此像素点小于等于中心像素值,则该像素被记为1,否则记为0;采用了基于uniform的旋转不变LBP模式,建立查找表,通过映射的方式找到对应的模式值;cell取32*32,将每个cell的统计直方图进行连接成为一个特征向量,则每个竹块区域生成9*4*2=72维特征;使用主成分分析法(PCA)对LBP特征进行降维,方差百分比设置为0.95,维数降低到44维;
2)提取竹块区域的水平及竖直方向的灰度共生矩阵(GLCM)的特征值,包括熵、能量、对比度、相关性,总计8维特征;结合LBP的44维特征与灰度共生矩阵的8维特征形成52维特征,分别采集300张合格竹块的图像,500张纹理缺陷图片,其中表面划痕、裂缝各100张,斑点缺陷300张;
3)读取图片并提取上述52维特征输入SVM分类器进行训练得到分类器,在进行纹理缺陷检测时,只需要加载模型。
CN201910035965.7A 2019-01-15 2019-01-15 一种基于视觉的缺陷竹块检测分拣装置及方法 Active CN109772733B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910035965.7A CN109772733B (zh) 2019-01-15 2019-01-15 一种基于视觉的缺陷竹块检测分拣装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910035965.7A CN109772733B (zh) 2019-01-15 2019-01-15 一种基于视觉的缺陷竹块检测分拣装置及方法

Publications (2)

Publication Number Publication Date
CN109772733A CN109772733A (zh) 2019-05-21
CN109772733B true CN109772733B (zh) 2020-02-18

Family

ID=66500553

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910035965.7A Active CN109772733B (zh) 2019-01-15 2019-01-15 一种基于视觉的缺陷竹块检测分拣装置及方法

Country Status (1)

Country Link
CN (1) CN109772733B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110216082B (zh) * 2019-05-23 2020-07-14 上海交通大学 荧光标记种子动态识别方法和系统
CN110102512A (zh) * 2019-06-05 2019-08-09 武汉库柏特科技有限公司 一种自动分拣装置
CN110404829A (zh) * 2019-07-04 2019-11-05 嵊州市荣飞纺织机械有限公司 一种用于控制五金配件间距的自动分拣装置
CN110694923A (zh) * 2019-09-26 2020-01-17 江门市鑫辉密封科技有限公司 一种密封圈良品检测设备
CN111046722A (zh) * 2019-10-16 2020-04-21 深圳市美思美科智能科技股份有限公司 一种视觉辅料智能识别系统
CN110516661B (zh) * 2019-10-21 2020-05-05 武汉虹识技术有限公司 应用于虹膜识别的美瞳检测方法及装置
CN111377213A (zh) * 2020-03-20 2020-07-07 上海电子信息职业技术学院 一种机器人动态分拣装置及方法
CN111389747A (zh) * 2020-04-26 2020-07-10 成都复星联创科技有限公司 一种基于视觉识别的竹条智能分选系统及方法
KR102308082B1 (ko) * 2020-11-06 2021-10-05 (주)에프피에이 다단조색 제어를 이용하는 펠릿 불량 검사 시스템 및 그의 제어 방법
CN112517443B (zh) * 2020-11-21 2022-03-25 正安县田湾方竹种植农民专业合作社 一种饮料加工用方竹笋验收用质量检测设备
CN113560207A (zh) * 2021-06-23 2021-10-29 山东东辰瑞森新材料科技有限公司 一种适用于透明尼龙颗粒的异物拣选机
CN114682526A (zh) * 2022-03-16 2022-07-01 滁州职业技术学院 一种基于机器视觉的机器人分拣系统
CN114985304B (zh) * 2022-05-25 2023-10-13 杭州电子科技大学 一种基于机器视觉的废旧电视机规格检测方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005345261A (ja) * 2004-06-03 2005-12-15 Tokyo Giken Kogyo Kk ワーク検査装置
WO2013067982A2 (de) * 2011-11-11 2013-05-16 Böwe Systec Gmbh Vorrichtung und verfahren zum zusammenführen von karten und kartenträgern, zum handhaben von karten und/oder zum sortieren von karten sowie kartenmagazin
WO2014013608A1 (ja) * 2012-07-20 2014-01-23 株式会社安川電機 ロボットシステムおよび物品移送方法
CN103706568B (zh) * 2013-11-26 2015-11-18 中国船舶重工集团公司第七一六研究所 基于机器视觉的机器人分拣方法
CN105107747A (zh) * 2015-09-23 2015-12-02 益阳新华美机电科技有限公司 麻将凉席竹块的分拣方法及分拣装置
CN107150032B (zh) * 2016-03-04 2020-06-23 上海电气集团股份有限公司 一种基于多图像获取设备的工件识别与分拣装置和方法
CN106053479B (zh) * 2016-07-21 2018-09-11 湘潭大学 一种基于图像处理的工件外观缺陷的视觉检测系统
CN206132660U (zh) * 2016-10-21 2017-04-26 泉州装备制造研究所 小规格瓷砖视觉分拣装置
CN108745925B (zh) * 2018-05-25 2020-12-15 合肥市雅视智能科技有限公司 一种零部件全方位检测方法
CN109079787B (zh) * 2018-08-20 2020-10-16 上海嘉奥信息科技发展有限公司 基于神经网络的非刚性机器人自动手眼标定方法

Also Published As

Publication number Publication date
CN109772733A (zh) 2019-05-21

Similar Documents

Publication Publication Date Title
CN109772733B (zh) 一种基于视觉的缺陷竹块检测分拣装置及方法
CN108230324B (zh) 磁瓦表面微缺陷视觉检测方法
CN107941808B (zh) 基于机器视觉的3d打印成型质量检测系统及方法
CN107664644B (zh) 一种基于机器视觉的物件表观自动检测装置及方法
CN109101976B (zh) 一种灭弧栅片表面缺陷的检测方法
CN109916910A (zh) 光伏玻璃边部缺陷检测系统及相应的方法
CN107301634A (zh) 一种机器人自动分拣方法及系统
CN110108712A (zh) 多功能视觉缺陷检测系统
CN111545483B (zh) 一种筷子分拣检测装置及其检测算法
CN106353336A (zh) 一种镜片镀膜自动检测系统
CN111968100B (zh) 机器视觉检测方法与系统
CN111487192A (zh) 一种基于人工智能的机器视觉表面缺陷检测装置及方法
WO2023134286A1 (zh) 一种阴极铜在线质量自动检测分类方法
CN114252452A (zh) 一种小型回转体外观缺陷和轮廓尺寸在线检测装置及方法
CN210775265U (zh) 一种人造板表面缺陷检测系统
CN114113129B (zh) 一种镜片微小缺陷识别抓取系统及方法
CN111833350B (zh) 机器视觉检测方法与系统
CN117649404A (zh) 一种基于图像数据分析的药品包装盒质量检测方法及系统
CN210377552U (zh) 一种水果分类用多面图像获取装置
CN116740449A (zh) 基于ai计算机视觉技术的刨花形态检测方法及系统
CN114187269A (zh) 小零器件表面缺陷边缘快速检测方法
CN115254655A (zh) 一种基于机器视觉的多指标百香果品质分级方法
CN111257339B (zh) 一种基于机器视觉的皮蛋裂纹在线检测方法及检测装置
CN113628155A (zh) 一种圆盘造球机的生球粒径检测方法及系统
Mizushima et al. Development of a cost-effective machine vision system for infield sorting and grading of apples: Fruit orientation and size estimation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant