CN105352437B - 板卡位置检测方法及装置 - Google Patents
板卡位置检测方法及装置 Download PDFInfo
- Publication number
- CN105352437B CN105352437B CN201510697415.3A CN201510697415A CN105352437B CN 105352437 B CN105352437 B CN 105352437B CN 201510697415 A CN201510697415 A CN 201510697415A CN 105352437 B CN105352437 B CN 105352437B
- Authority
- CN
- China
- Prior art keywords
- profile
- board
- image
- point coordinate
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 230000000877 morphologic effect Effects 0.000 claims abstract description 41
- 238000003708 edge detection Methods 0.000 claims abstract description 14
- 230000008569 process Effects 0.000 claims abstract description 13
- 238000012545 processing Methods 0.000 claims description 24
- 239000011159 matrix material Substances 0.000 claims description 7
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000001514 detection method Methods 0.000 abstract description 17
- 230000010339 dilation Effects 0.000 description 10
- 230000003628 erosive effect Effects 0.000 description 6
- 238000007689 inspection Methods 0.000 description 3
- 230000007547 defect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000009333 weeding Methods 0.000 description 2
- 241000196324 Embryophyta Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 229910000679 solder Inorganic materials 0.000 description 1
- 238000003466 welding Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/155—Segmentation; Edge detection involving morphological operators
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20112—Image segmentation details
- G06T2207/20164—Salient point detection; Corner detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30141—Printed circuit board [PCB]
Abstract
本发明涉及一种板卡位置检测方法及装置。其中,板卡位置检测方法包括以下步骤:拍摄待检测位置的图像,获取该图像的灰度图;对灰度图进行边缘检测处理,得到灰度图的边缘图,获取边缘图的包含若干连通区域的形态学图像,并计算形态学图像中的各连通区域的面积;获取面积中的最大值,并判断最大值是否大于或等于预设面积阈值;若判断结果为是,获取最大值对应的连通区域的中心点坐标,并将中心点坐标作为板卡的中心点坐标。通过本发明板卡位置检测方法及装置,使AOI系统能够通过软件方法判断板卡位置,实现流水线上板卡的进入检测,实现对板卡的精确定位,降低成本。
Description
技术领域
本发明涉及自动光学检测领域,特别是涉及一种板卡位置检测方法及装置。
背景技术
AOI(Automatic Optic Inspection,自动光学检测)设备是基于光学原理来对焊接生产中遇到的常见缺陷进行检测的设备。当自动检测时,机器通过摄像头自动扫描PCB(Printed circuit board,印制电路板),采集图像,测试的焊点与数据库中的合格的参数进行比较,经过图像处理,检查出PCB上的缺陷,并通过显示器或自动标志把缺陷显示/标示出来,供维修人员修整。
具体而言,AOI系统通过流水线传送带将PCB板卡移动到摄像头的拍摄范围内,光源的光照射在PCB板上并反射进入摄像机,摄像机根据反射光的强弱得到反映元件特征的图像,然后通过计算机采用图像处理技术对图像进行比对处理后得到检测结果。AOI系统需要探测PCB板卡是否移动到摄像头的拍摄范围内,并且自动截取板卡图片,从而启动检测元件等后续过程。AOI系统一般使用红外、激光等外部传感器探测板卡位置,但在实现过程中,发明人发现传统技术中至少存在如下问题:
AOI系统使用外部传感器判断板卡是否进入摄像头拍摄范围,会增加系统的复杂度和成本,且不能获取板卡的精确位置。
发明内容
基于此,有必要针对AOI系统检测板卡位置系统的复杂度与成本较高的问题,提供一种板卡位置检测方法及装置。
为了实现上述目的,本发明技术方案的实施例为:
一方面,提供了一种板卡位置检测方法,包括以下步骤:
拍摄待检测位置的图像,获取该图像的灰度图;
对灰度图进行边缘检测处理,得到灰度图的边缘图,获取边缘图的包含若干连通区域的形态学图像,并计算形态学图像中的各连通区域的面积;
获取面积中的最大值,并判断最大值是否大于或等于预设面积阈值;
若判断结果为是,获取最大值对应的连通区域的中心点坐标,并将中心点坐标作为板卡的中心点坐标。
另一方面,提供了一种板卡位置检测装置,包括:
图像获取模块,用于拍摄待检测位置的图像,获取该图像的灰度图;
图像处理模块,用于对灰度图进行边缘检测处理,得到灰度图的边缘图;并获取边缘图的包含若干连通区域的形态学图像;以及计算形态学图像中的各连通区域的面积;
判断模块,用于获取面积中的最大值,并判断最大值是否大于或等于预设面积阈值;
位置获取模块,用于在判断模块的判断结果为是时,获取最大值对应的连通区域的中心点坐标,并将中心点坐标作为板卡的中心点坐标。
上述技术方案具有如下有益效果:
通过本发明的板卡位置检测方法及装置,使AOI系统能够判断摄像头拍摄的图片中是否有板卡,从而判断板卡是否进入摄像头拍摄范围;并且能够通过所获得的定位信息在图片中截取板卡的图像,获取板卡的精确位置,然后将图像送入检测算法中,实现对PCB元件的检测;进而使AOI系统能够通过软件方法判断板卡位置,实现流水线上板卡的进入检测,实现对板卡的精确定位,降低成本。
附图说明
通过附图中所示的本发明的优选实施例的更具体说明,本发明的上述及其它目的、特征和优势将变得更加清晰。在全部附图中相同的附图标记指示相同的部分,且并未刻意按实际尺寸等比例缩放绘制附图,重点在于示出本发明的主旨。
图1为本发明板卡位置检测方法实施例1的流程图;
图2为本发明板卡位置检测方法一具体实施例的流程图;
图3为本发明板卡位置检测方法一具体实施例中获取的灰度图的图像;
图4为本发明板卡位置检测方法一具体实施例中边缘图的图像;
图5为本发明板卡位置检测方法一具体实施例中的形态学图像;
图6为本发明板卡位置检测装置实施例1的结构示意图。
具体实施方式
为了便于理解本发明,下面将参照相关附图对本发明进行更全面的描述。附图中给出了本发明的首选实施例。但是,本发明可以以许多不同的形式来实现,并不限于本文所描述的实施例。相反地,提供这些实施例的目的是使对本发明的公开内容更加透彻全面。
需要说明的是,当一个元件被认为是“连接”另一个元件,它可以是直接连接到另一个元件并与之结合为一体,或者可能同时存在居中元件。本文所使用的术语“边缘检测”、“数学形态学运算”、“最大值”以及类似的表述只是为了说明的目的。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
板卡位置检测方法实施例1:
针对AOI系统判断板卡位置的技术问题,本发明提供了一种板卡位置检测方法,图1为本发明板卡位置检测方法实施例1的流程图;如图1所示,板卡位置检测方法包括以下步骤:
步骤S110:拍摄待检测位置的图像,获取该图像的灰度图;
步骤S120:对灰度图进行边缘检测处理,得到灰度图的边缘图,获取边缘图的包含若干连通区域的形态学图像,并计算形态学图像中的各连通区域的面积;此步骤中的边缘检测处理可以将AOI系统拍摄范围内获取的图像中有效物点(PCB板卡或其它流水线上的杂物)与流水线(背景图像)相区分;此步骤中通过对该边缘图进行数学形态学运算能够填满板卡边缘图中间的空洞,可以将各有效物点的边缘图像连通成为拥有若干个白色的连通区域的形态学图像,以便于计算连通区域的面积。
步骤S130:获取面积中的最大值,并判断最大值是否大于或等于预设面积阈值;若判定结果为是,则进入步骤S140;
步骤S140:获取最大值对应的连通区域的中心点坐标,并将该中心点坐标作为板卡的中心点坐标。
而步骤S130至S140的目的在于,用预设面积阈值筛去面积少于该值的区域,若最大值小于预设面积阈值,可以认为摄像头拍摄的图中没有PCB板卡;具体而言,如果图中没有板卡,只有纯色的背景图案,那步骤S120中就不能获得白色的连通区域,或者只有一些面积小于预设面积阈值的区域。若当前摄像头获取的图像中没有PCB板卡,但是由于噪音或者有其他杂物,而导致在步骤S120中得到了一些面积较小的连通区域时,在本发明板卡位置检测方法的实施例中不会将这些区域判断为板卡。
在一个具体实施例中,步骤S140中获取所述最大值对应的连通区域的中心点坐标的步骤可以包括:
对最大值对应的连通区域进行边缘检测处理,得到最大值对应的连通区域的轮廓;
而为了得到该最大值对应的连通区域的轮廓的中心点坐标,在一个具体实施例中,计算中心点坐标的方法包括两种:
1)获取该轮廓的上、下、左、右的最值点坐标,将上述最值点坐标作为所述轮廓的边缘点坐标;对轮廓进行位置计算,得到轮廓的边缘点坐标;根据边缘点坐标,获取连通区域的中心点坐标。
2)对该轮廓进行位置计算,得到该轮廓的边角坐标(左上角坐标)和轮廓的长度与宽度;根据边角坐标和长度与宽度,获取中心点坐标。
而连通区域的中心点坐标即为PCB板卡的精确位置,AOI系统可根据该精确位置,判断PCB板卡是否移动到摄像头的拍摄范围内,并且自动截取板卡图片,从而启动检测元件等后续过程。
而步骤S120中计算形态学图像中的各连通区域的面积的步骤包括:
对形态学图像中各连通区域进行处理,得到各连通区域对应的轮廓;对轮廓进行面积计算,得到轮廓的面积。而各轮廓的面积即为各连通区域的面积。
步骤S120中获取边缘图的包含若干连通区域的形态学图像的步骤可以通过对边缘图进行数学形态学运算处理得以实现,具体包括:
基于数学形态学运算处理过程,将边缘图与运算内核进行卷积运算;在本发明实施例中,运算内核选用矩形核;具体而言,即对边缘图进行形态学闭运算处理,运算内核为n×n或n×m大小的矩形核,从而得到形态学图像;运算内核的形状会影响结果图,例如若运算内核为圆形核,经过形态学处理的图的边角会是圆弧。因为PCB板卡是矩形的,所以使用矩形核能得到与原图像更相近的结果。
通过本发明的板卡位置检测方法,使AOI系统能够判断摄像头拍摄的图片中是否有板卡,从而判断板卡是否进入摄像头拍摄范围;并且能够通过所获得的定位信息在图片中截取板卡的图像,获取板卡的精确位置,然后将图像送入检测算法中,实现对PCB元件的检测;进而使AOI系统能够通过软件方法判断板卡位置,实现流水线上板卡的进入检测,实现对板卡的精确定位,降低成本。
本发明板卡位置检测方法一具体实施例:
为了更清楚的说明本发明的技术方案,提供了板卡位置检测方法一具体实施例来说明本发明如何解决AOI系统判断板卡位置的技术问题;图2为本发明板卡位置检测方法一具体实施例的流程图;如图2所示:
A、通过摄像机(或其他拍摄设备)获取流水线上摄像头拍摄范围内的灰度图,I(x,y),x∈[0,w),y∈[0,h),h为灰度图图像的高,w为灰度图图像的宽。灰度图图像具体如图3所示,图3为本发明板卡位置检测方法一具体实施例中获取的灰度图的图像;
B、使用Canny或Sobel边缘检测算法,得到灰度图I(x,y)的边缘图Iedge;边缘图图像具体如图4所示,图4为本发明板卡位置检测方法一具体实施例中基于Canny算法得到的边缘图的图像;而Canny和Sobel缘检测算法在图形学中都是常用的算法。
C、对边缘图Iedge进行形态学闭运算处理,运算内核为矩形核,得到形态学图像I`edge;具体而言,即对边缘图Iedge进行形态学闭运算,运算内核为n×n大小的矩形核。通过该运算后能够填满板卡边缘图中间的空洞,获得形态学图像I`edge。I`edge的图像具体如图5所示,图5为本发明板卡位置检测方法一具体实施例中的形态学图像;
在一个具体实施例中,也可以利用膨胀运算对边缘图Iedge进行形态学运算处理,得到形态学图像I`edge;膨胀运算将断开的目标物进行接续,但经过膨胀处理之后,目标物的面积大于原有面积,会对PCB板卡定位造成误差。因此在本发明的实施例中优先选择形态学闭运算作为获取形态学图像的处理方案。
运算内核在形态学运算中的具体作用是将目标图像A(在本发明实施例中为边缘图Iedge)与核B进行卷积。
具体而言,在腐蚀运算中:
在膨胀运算中:Dilation(A,B)=(Erosion(Ac,B))c,其中,Ac表示A的补集;
在形态学闭运算中:Closing(A,B)=Erosion(Dilation(A,B),B);
而核心B的形状会影响结果图,例如若运算内核为圆形核,经过形态学处理的图的边角会是圆弧。因为PCB板卡是矩形的,所以使用矩形核心能得到与原图像更相近的结果。其中矩形核心n×n也可以为n×m。
D、计算形态学图像I`edge中连通区域Si(在一个具体的实施例中,如图5所示,连通区域Si是白色的)的面积Areai,i∈(0,1,...,m),其中m为连通区域的数目。Areamax=max(Areai)为面积最大区域Smax,AOI系统认为该区域是PCB板卡所在的区域。
对Si使用OpenCV(open source computer vision:开源计算机视觉库)库中的函数cvFindContours(OpenCV图像处理库:函数cvFindContours从二值图像中检索轮廓,并返回检测到的轮廓的个数)获得Si的轮廓Ci。然后再使用函数contourArea(函数cvContourArea用于计算整个或部分轮廓的面积)获得Ci的面积。
E、判断Areamax是否小于Areathreshold,其中Areai,i∈(0,1,...,m)是每一个连通区域中像素点的个数,表示区域的面积,而在一个具体的实施例中,如图5所示,上述像素点为白色的。而Areathreshold表示预设面积阈值,用来筛去面积少于该值的区域;Areathreshold作为实验的经验值,其大小在0到w*h之间。
若Areamax小于Areathreshold,可以认为摄像头拍摄的图中没有PCB板卡;具体而言,如果图中没有板卡,只有纯色的背景图案,那步骤D中就不能获得连通区域,或者只有一些面积小于Areathreshold的区域。步骤E具体用于:若当前摄像头获取的图像中没有PCB板卡,但是由于噪音或者有其他杂物,而导致在步骤D中得到了一些面积较小的连通区域时,在本发明板卡位置检测方法的实施例中AOI系统不会将这些区域判断为板卡。
F、若Areamax大于或等于Areathreshold,获取Smax的左上、左下、右上、右下边角的最值点坐标,如下所示:
Pleft-up=(xleft-up,yleft-up);
Pleft-down=(xleft-down,yleft-down);
Pright-up=(xright-up,yright-up);
Pright-down=(xright-down,yright-down);
其中,一般PCB板卡形状为矩形,在本发明一实施例的图像坐标系中,坐标原点在图像的左上角,原点往右方向为x轴方向,原点往下方向为y轴方向,因此可以得到:
xleft-up=xleft-down;xright-up=xright-down;yleft-up=yright-up;yleft-down=yright-down;
G、通过上述4个最值点,获得板卡的中心点坐标Pcenter=(xcenter,ycenter),即为PCB板卡的位置:
具体而言,步骤F和G通过以下方法实现:对Si使用OpenCV库中的函数cvFindContours获得Si的轮廓Ci。然后再使用函数boundingRect(计算点集的最外面(up-right)矩形边界)获得Ci的外接矩阵边角的最值点坐标,最后根据上述公式计算板卡中心点坐标;也可以使用函数boundingRect获得Ci的外接矩阵的左上角坐标(xleft-up,yleft-up),以及长w`和宽h`,此时步骤G中的中心点坐标为Pcenter=(xleft-up+w`/2,yleft-up+h`/2)。在一个具体的实施例中,也可以获取Ci的外接矩阵的其它边角坐标,以及以及长w`和宽h`,并通过相应的公式计算中心点坐标。
通过以上具体的实施例,可以看出通过本发明的板卡位置检测方法,使AOI系统能够判断摄像头拍摄的图片中是否有板卡,从而判断板卡是否进入摄像头拍摄范围;并且能够通过所获得的定位信息在图片中截取板卡的图像,获取板卡的精确位置,然后将图像送入检测算法中,实现对PCB元件的检测;进而使AOI系统能够通过软件方法判断板卡位置,实现流水线上板卡的进入检测,实现对板卡的精确定位,降低成本。
本发明板卡位置检测装置实施例1:
针对AOI系统判断板卡位置的技术问题,本发明还提供了一种板卡位置检测装置;图6为本发明板卡位置检测装置实施例1的结构示意图,如图6所示:板卡位置检测装置包括:
图像获取模块610,用于拍摄待检测位置的图像,获取该图像的灰度图;在一个具体的实施例中,即获取AOI系统流水线摄像头拍摄的图像的灰度图;
图像处理模块620,用于对灰度图进行边缘检测处理,得到灰度图的边缘图;并获取边缘图的包含若干连通区域的形态学图像;以及计算形态学图像中的各连通区域的面积;在一个具体的实施例中,即对灰度图进行边缘检测处理,得到灰度图的边缘图;并对边缘图进行数学形态学运算处理,得到形态学图像;以及对形态学图像中的各连通区域进行函数运算处理,得到各连通区域的面积;
判断模块630,用于获取面积中的最大值,并判断最大值是否大于或等于预设面积阈值;
位置获取模块640,用于在判断模块630的判断结果为是时,获取最大值对应的连通区域的中心点坐标,并将中心点坐标作为板卡的中心点坐标。
其中,位置获取模块640包括:
第一轮廓获取模块642,用于获取最大值对应的连通区域的轮廓;
第一坐标获取模块644,用于计算上述轮廓的边缘点坐标;并根据边缘点坐标,获取中心点坐标。
在一个具体的实施例中,位置获取模块640还可以通过第一轮廓获取模块642以及第二坐标获取模块645获取中心点坐标;第二坐标获取模块645用于计算轮廓的边角坐标和轮廓的长度与宽度;并根据边角坐标和长度与宽度,获取中心点坐标。
而图像处理模块620包括:
第二轮廓获取模块622,用于获取形态学图像中各连通区域的轮廓;
面积获取模块624,用于对上述轮廓进行面积计算,得到轮廓的面积。
为了进一步说明本发明板卡位置检测装置的具体作用过程,特提供一具体实施例来具体说明:
A、图像获取模块610通过摄像机(或其他拍摄设备)获取流水线上摄像头拍摄范围内拍摄的图像的灰度图,I(x,y),x∈[0,w),y∈[0,h),h为灰度图图像的高,w为灰度图图像的宽。
B、图像处理模块620使用Canny或Sobel边缘检测算法,获取灰度图I(x,y)的边缘图Iedge;而Canny和Sobel缘检测算法在图形学中都是常用的算法。
C、图像处理模块620对边缘图Iedge进行形态学闭运算处理,运算内核为矩形核,得到形态学图像I`edge;具体而言,即对边缘图Iedge进行形态学闭运算,运算内核为n×n大小的矩形核。通过该运算后能够填满板卡边缘图中间的空洞,获得形态学图像I`edge。
在一个具体实施例中,图像处理模块620运用膨胀运算也可以对边缘图Iedge进行形态学运算处理,得到形态学图像I`edge;膨胀运算将断开的目标物进行接续,但经过膨胀处理之后,目标物的面积大于原有面积,会对PCB板卡定位造成误差。因此在本发明的实施例中优先选择形态学闭运算作为获取形态学图像的处理方案。
运算内核在形态学运算中的具体作用是将目标图像A(在本发明实施例中为边缘图Iedge)与核B进行卷积。
具体而言,在腐蚀运算中:
在膨胀运算中:Dilation(A,B)=(Erosion(Ac,B))c,其中,Ac表示A的补集;
在形态学闭运算中:Closing(A,B)=Erosion(Dilation(A,B),B);
而核心B的形状会影响结果图,例如若运算内核为圆形核,经过形态学处理的图的边角会是圆弧。因为PCB板卡是矩形的,所以使用矩形核心能得到与原图像更相近的结果。其中矩形核心n×n也可以为n×m。
D、图像处理模块620计算形态学图像I`edge中连通区域Si的面积Areai,i∈(0,1,...,m),其中m为连通区域的数目。Areamax=max(Areai)为面积最大区域Smax,AOI系统认为该区域是PCB板卡所在的区域。
第二轮廓获取模块622对Si使用OpenCV(open source computer vision:开源计算机视觉库)库中的函数cvFindContours(OpenCV图像处理库:函数cvFindContours从二值图像中检索轮廓,并返回检测到的轮廓的个数)获得Si的轮廓Ci。然后由面积获取模块624使用函数contourArea(函数cvContourArea用于计算整个或部分轮廓的面积)获得Ci的面积,判断模块630根据Ci的面积,获取该面积中的最大值Areamax。
E、若Areamax是否小于Areathreshold,其中Areai,i∈(0,1,...,m)是每一个连通区域中像素点的个数,表示区域的面积。而Areathreshold表示预设面积阈值,用来筛去面积少于该值的区域;Areathreshold作为实验的经验值,其大小在0到w*h之间。
若Areamax小于Areathreshold,可以认为摄像头拍摄的图中没有PCB板卡;具体而言,如果图中没有板卡,只有纯色的背景图案,那形态学运算模块624就不能通过形态学运算获得连通区域,或者只有一些面积小于Areathreshold的区域。若当前摄像头获取的图像中没有PCB板卡,但是由于噪音或者有其他杂物,而导致在形态学运算中得到了一些面积较小的连通区域时,在本发明板卡位置检测装置的实施例中AOI系统不会将这些区域判断为板卡。
F、若Areamax大于或等于Areathreshold,位置获取模块640中的第一坐标获取模块644可获取Smax的左上、左下、右上、右下边角的最值点坐标,如下所示:
Pleft-up=(xleft-up,yleft-up);
Pleft-down=(xleft-down,yleft-down);
Pright-up=(xright-up,yright-up);
Pright-down=(xright-down,yright-down);
其中,一般PCB板卡形状为矩形,在本发明一实施例的图像坐标系中,坐标原点在图像的左上角,原点往右方向为x轴方向,原点往下方向为y轴方向,因此可以得到:
xleft-up=xleft-down;xright-up=xright-down;yleft-up=yright-up;yleft-down=yright-down;
G、通过上述4个最值点,第一坐标获取模块644获得板卡的中心点坐标Pcenter=(xcenter,ycenter),即为PCB板卡的位置:
具体而言,第一轮廓获取模块642对Si使用OpenCV库中的函数cvFindContours获得Si的轮廓Ci。
然后由第一坐标获取模块644使用函数boundingRect(计算点集的最外面(up-right)矩形边界)获得Ci的外接矩阵边角的最值点坐标,最后根据上述公式计算板卡中心点坐标;
或者由第二坐标获取模块645使用函数boundingRect获得Ci的外接矩阵的左上角坐标(xleft-up,yleft-up),以及长w`和宽h`,此时第二坐标获取模块645获取的中心点坐标为Pcenter=(xleft-up+w`/2,yleft-up+h`/2)。在一个具体的实施例中,第二坐标获取模块645也可以获取Ci的外接矩阵的其它边角坐标,以及以及长w`和宽h`,并通过相应的公式计算中心点坐标。
通过以上具体的实施例,可以看出通过本发明的板卡位置检测装置使AOI系统能够判断摄像头拍摄的图片中是否有板卡,从而判断板卡是否进入摄像头拍摄范围;并且能够通过所获得的定位信息在图片中截取板卡的图像,获取板卡的精确位置,然后将图像送入检测算法中,实现对PCB元件的检测;进而使AOI系统能够通过软件方法判断板卡位置,实现流水线上板卡的进入检测,实现对板卡的精确定位,降低成本。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种板卡位置检测方法,其特征在于,包括以下步骤:
采用摄像头拍摄流水线传送带上待检测位置的图像,获取所述图像的灰度图;其中,所述待检测位置为所述传送带当前落入所述摄像头拍摄范围内的位置;
对所述灰度图进行边缘检测处理,得到所述灰度图的边缘图,获取所述边缘图的包含若干连通区域的形态学图像,并计算所述形态学图像中的各连通区域的面积;
获取所述面积中的最大值,并判断所述最大值是否大于或等于预设面积阈值;
若所述判断结果为是,获取所述最大值对应的连通区域的中心点坐标,并将所述中心点坐标作为AOI系统判断板卡位置的所述板卡的中心点坐标。
2.根据权利要求1所述的板卡位置检测方法,其特征在于,所述获取所述最大值对应的连通区域的中心点坐标的步骤包括:
获取所述最大值对应的连通区域的轮廓;
计算所述轮廓的边缘点坐标;
根据所述边缘点坐标,获取所述中心点坐标。
3.根据权利要求2所述的板卡位置检测方法,其特征在于,所述计算所述轮廓的边缘点坐标的步骤包括:
获取所述轮廓的外接矩阵的最值点坐标,将所述最值点坐标作为所述轮廓的边缘点坐标。
4.根据权利要求1所述的板卡位置检测方法,其特征在于,所述获取所述最大值对应的连通区域的中心点坐标的步骤包括:
获取所述最大值对应的连通区域的轮廓;
计算所述轮廓的边角坐标和所述轮廓的长度与宽度;
根据所述边角坐标和所述长度与宽度,获取所述中心点坐标。
5.根据权利要求1所述的板卡位置检测方法,其特征在于,所述计算所述形态学图像中的各连通区域的面积,并获取所述面积中的最大值的步骤包括:
分别获取所述形态学图像中各连通区域的轮廓;对所述轮廓进行面积计算,得到所述轮廓的面积。
6.根据权利要求1至5任意一项所述的板卡位置检测方法,其特征在于,获取所述边缘图的包含若干连通区域的形态学图像的步骤包括:
对所述边缘图进行数学形态学运算处理,得到所述边缘图的包含若干连通区域的形态学图像;其中,所述数学形态学运算的运算内核为矩形核。
7.一种板卡位置检测装置,其特征在于,包括:
图像获取模块,用于采用摄像头拍摄流水线传送带上待检测位置的图像,获取所述图像的灰度图;其中,所述待检测位置为所述传送带当前落入所述摄像头拍摄范围内的位置;
图像处理模块,用于对所述灰度图进行边缘检测处理,得到所述灰度图的边缘图;并获取所述边缘图的包含若干连通区域的形态学图像;以及计算所述形态学图像中的各连通区域的面积;
判断模块,用于获取所述面积中的最大值,并判断所述最大值是否大于或等于预设面积阈值;
位置获取模块,用于在所述判断模块的判断结果为是时,获取所述最大值对应的连通区域的中心点坐标,并将所述中心点坐标作为AOI系统判断板卡位置的所述板卡的中心点坐标。
8.根据权利要求7所述的板卡位置检测装置,其特征在于,所述位置获取模块包括:
第一轮廓获取模块,用于获取所述最大值对应的连通区域的轮廓;
第一坐标获取模块,用于计算所述轮廓的边缘点坐标;并根据所述边缘点坐标,获取所述中心点坐标。
9.根据权利要求7所述的板卡位置检测装置,其特征在于,所述位置获取模块包括:
第一轮廓获取模块,用于获取所述最大值对应的连通区域的轮廓;
第二坐标获取模块,用于计算所述轮廓的边角坐标和所述轮廓的长度与宽度;并根据所述边角坐标和所述长度与宽度,获取所述中心点坐标。
10.根据权利要求7至9任意一项所述的板卡位置检测装置,其特征在于,所述图像处理模块包括:
第二轮廓获取模块,用于获取所述形态学图像中各连通区域的轮廓;
面积获取模块,用于对所述轮廓进行面积计算,得到所述轮廓的面积。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510697415.3A CN105352437B (zh) | 2015-10-21 | 2015-10-21 | 板卡位置检测方法及装置 |
PCT/CN2016/098222 WO2017067342A1 (zh) | 2015-10-21 | 2016-09-06 | 板卡位置检测方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510697415.3A CN105352437B (zh) | 2015-10-21 | 2015-10-21 | 板卡位置检测方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105352437A CN105352437A (zh) | 2016-02-24 |
CN105352437B true CN105352437B (zh) | 2019-05-07 |
Family
ID=55328448
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510697415.3A Active CN105352437B (zh) | 2015-10-21 | 2015-10-21 | 板卡位置检测方法及装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN105352437B (zh) |
WO (1) | WO2017067342A1 (zh) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105352437B (zh) * | 2015-10-21 | 2019-05-07 | 广州视源电子科技股份有限公司 | 板卡位置检测方法及装置 |
CN105975910A (zh) * | 2016-04-27 | 2016-09-28 | 梧州市自动化技术研究开发院 | 一种用于对运动物体进行视频识别的技术处理方法及其系统 |
CN106228546B (zh) * | 2016-07-13 | 2019-01-29 | 广州视源电子科技股份有限公司 | 一种板卡的检测方法及装置 |
CN106556352A (zh) * | 2016-11-30 | 2017-04-05 | 英业达科技有限公司 | 一种自动检测装置、系统及方法 |
CN109543665B (zh) * | 2017-09-22 | 2020-10-16 | 凌云光技术集团有限责任公司 | 图像定位方法及装置 |
CN108918093B (zh) * | 2018-05-23 | 2020-08-04 | 精锐视觉智能科技(深圳)有限公司 | 一种滤光片镜面缺陷检测方法、装置及终端设备 |
CN109190616B (zh) * | 2018-08-03 | 2021-10-15 | 东北大学 | 一种基于特征识别的热轧钢板在线视觉跟踪方法 |
CN111102917A (zh) * | 2018-10-26 | 2020-05-05 | 得力富企业股份有限公司 | 电路板的形心侦测设备 |
CN113034531A (zh) * | 2021-04-02 | 2021-06-25 | 广州绿怡信息科技有限公司 | 设备摆放检测方法及装置 |
CN114047123B (zh) * | 2021-10-09 | 2024-04-09 | 无锡芯羿达微电子有限公司 | 一种用于集成板生产缺陷检测方法及检测系统 |
CN116416181A (zh) * | 2021-12-29 | 2023-07-11 | 广州镭晨智能装备科技有限公司 | 一种插针缺陷的检测方法、检测设备和存储介质 |
CN114494060B (zh) * | 2022-01-20 | 2024-02-23 | 齐鲁工业大学 | 一种基于Opencv的菲涅尔透镜中心定位方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005164579A (ja) * | 2004-10-29 | 2005-06-23 | Alps Electric Co Ltd | 境界線の位置の検出方法およびこの検出方法を用いた磁気ヘッドの位置決め方法および位置決め装置 |
CN102163284A (zh) * | 2011-04-11 | 2011-08-24 | 西安电子科技大学 | 面向中文环境的复杂场景文本定位方法 |
CN104408722A (zh) * | 2014-11-26 | 2015-03-11 | 南京工业大学 | 一种用于pcb视觉定位的检测方法 |
CN104794421A (zh) * | 2015-04-29 | 2015-07-22 | 华中科技大学 | 一种qr码定位及识别方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003086919A (ja) * | 2001-09-07 | 2003-03-20 | Sun Tec Kk | パターン検査装置 |
CN102721364B (zh) * | 2011-03-30 | 2015-12-02 | 比亚迪股份有限公司 | 一种工件的定位方法及其装置 |
CN103235939A (zh) * | 2013-05-08 | 2013-08-07 | 哈尔滨工业大学 | 基于机器视觉的基准点定位方法 |
CN104297254B (zh) * | 2014-10-08 | 2017-04-12 | 华南理工大学 | 一种基于混合法的印刷电路板缺陷检测方法及系统 |
CN104484871B (zh) * | 2014-11-27 | 2018-09-04 | 小米科技有限责任公司 | 边缘提取方法和装置 |
CN105352437B (zh) * | 2015-10-21 | 2019-05-07 | 广州视源电子科技股份有限公司 | 板卡位置检测方法及装置 |
-
2015
- 2015-10-21 CN CN201510697415.3A patent/CN105352437B/zh active Active
-
2016
- 2016-09-06 WO PCT/CN2016/098222 patent/WO2017067342A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005164579A (ja) * | 2004-10-29 | 2005-06-23 | Alps Electric Co Ltd | 境界線の位置の検出方法およびこの検出方法を用いた磁気ヘッドの位置決め方法および位置決め装置 |
CN102163284A (zh) * | 2011-04-11 | 2011-08-24 | 西安电子科技大学 | 面向中文环境的复杂场景文本定位方法 |
CN104408722A (zh) * | 2014-11-26 | 2015-03-11 | 南京工业大学 | 一种用于pcb视觉定位的检测方法 |
CN104794421A (zh) * | 2015-04-29 | 2015-07-22 | 华中科技大学 | 一种qr码定位及识别方法 |
Non-Patent Citations (2)
Title |
---|
基于数学形态学的车牌定位研究与实现;孟晓莉等;《计算机技术与发展》;20101130;第20卷(第11期);84-86,91 |
基于边缘检测及数学形态学的快速汽车车牌定位;陈虹等;《交通与运输》;20081231;78-81 |
Also Published As
Publication number | Publication date |
---|---|
CN105352437A (zh) | 2016-02-24 |
WO2017067342A1 (zh) | 2017-04-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105352437B (zh) | 板卡位置检测方法及装置 | |
CN109785317A (zh) | 自动码垛桁架机器人的视觉系统 | |
US8908957B2 (en) | Method for building rule of thumb of defect classification, and methods for classifying defect and judging killer defect based on rule of thumb and critical area analysis | |
CN108765416A (zh) | 基于快速几何对准的pcb表面缺陷检测方法及装置 | |
CN107945184A (zh) | 一种基于彩色图像分割和梯度投影定位的贴装元件检测方法 | |
WO2023221801A9 (zh) | 图像处理方法及装置、计算机可读存储介质、电子设备 | |
CN111982921A (zh) | 孔缺陷的检测方法、装置、传送平台及存储介质 | |
JP3185559B2 (ja) | 表面欠陥検査装置 | |
JP2014038045A (ja) | 検査装置、照明、検査方法、プログラム及び基板の製造方法 | |
CN110189322A (zh) | 平整度检测方法、装置、设备、存储介质及系统 | |
JP2021022369A (ja) | 自動表面評価のためのシステム及び方法 | |
CN106501272A (zh) | 机器视觉焊锡定位检测系统 | |
CN110199317A (zh) | 使用手持设备对木板的自动检测、计数和测量 | |
TWI512284B (zh) | 玻璃氣泡瑕疵檢測系統 | |
CN112465787A (zh) | 基于深度学习的数字微镜高亮缺陷检测方法 | |
CN111915485A (zh) | 一种特征点稀疏工件图像的快速拼接方法及系统 | |
CN110288040A (zh) | 一种基于拓扑验证的图像相似评判方法及设备 | |
JP2006258713A (ja) | シミ欠陥検出方法及び装置 | |
TW202129269A (zh) | 基於雷射的夾雜物偵測系統及方法 | |
CN110530894B (zh) | 导光板亮点缺陷检测方法 | |
CN112033971A (zh) | 一种视觉瑕疵检测系统及方法 | |
CN105092604B (zh) | 线路信息及非线路区信息撷取方法、线路缺陷检测方法 | |
CN206470210U (zh) | 机器视觉焊锡定位检测系统 | |
JP2019200775A (ja) | 表面欠陥検査装置及び表面欠陥検査方法 | |
CN110148141A (zh) | 一种丝印滤光片小片检测计数方法及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |