CN108918526B - 一种柔性ic封装基板线路的缺口缺陷检测方法 - Google Patents

一种柔性ic封装基板线路的缺口缺陷检测方法 Download PDF

Info

Publication number
CN108918526B
CN108918526B CN201810315130.2A CN201810315130A CN108918526B CN 108918526 B CN108918526 B CN 108918526B CN 201810315130 A CN201810315130 A CN 201810315130A CN 108918526 B CN108918526 B CN 108918526B
Authority
CN
China
Prior art keywords
contour
line
distance
boundary straight
boundary
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810315130.2A
Other languages
English (en)
Other versions
CN108918526A (zh
Inventor
罗家祥
邹恒
胡跃明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China University of Technology SCUT
Original Assignee
South China University of Technology SCUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China University of Technology SCUT filed Critical South China University of Technology SCUT
Priority to CN201810315130.2A priority Critical patent/CN108918526B/zh
Publication of CN108918526A publication Critical patent/CN108918526A/zh
Application granted granted Critical
Publication of CN108918526B publication Critical patent/CN108918526B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种柔性IC封装基板线路的缺口缺陷检测方法,首先获得目标先验知识;提取需要检测的柔性IC封装基板图像的线路的边界轮廓得到轮廓图;将目标先验知识作为Radon变换的约束条件对轮廓图进行Radon变换,提取出轮廓图中边界直线,通过边界直线计算轮廓之间的标准线宽或标准线距;针对于轮廓图中的每一条轮廓,判定出该轮廓上的缺口缺陷以及该轮廓上的曲线部分;将每一轮廓的曲线部分中的每一像素点与下一轮廓的曲线部分之间的距离与该轮廓与下一轮廓之间的标准线距或线宽进行比较,根据比较结果判定轮廓的曲线部分中像素点是否有缺口缺陷。本发明能够准确快速的检测出直线部分和曲线部分的缺口缺陷。

Description

一种柔性IC封装基板线路的缺口缺陷检测方法
技术领域
本发明涉及图像处理技术领域,特别涉及一种柔性IC封装基板线路的缺口缺陷检测方法。
背景技术
高密度柔性IC封装基板线路尺寸的自动检测技术,可以实现微米级的高密度柔性IC封装基板线路的尺寸的检测,进而提高生产线的检测效率。其中涉及到的图像直线曲线检测是数值图像处理一个很重要的领域。高密度柔性IC封装基板线路的尺寸检测需要精准定位出线路轮廓的直线部分和曲线部分,并且对于直线部分和曲线部分需要使用不同的计算方法,标记出线路轮廓的缺口缺陷。所以一种新的线路尺寸检测、定位缺口缺陷的方法对高密度柔性IC封装基板线路尺寸的自动检测技术及图像处理来说有着极其重要的意义。
在高密度柔性IC封装基板电路板的制造过程中,如果线路中的线路边缘出现缺口,则实际线宽将会小于线路设计时的标准线宽,线路容易出现断路现象;如果线路边缘存在凸起,实际线宽将会大于标准线宽,线路之间将会相互干扰。因此,在高密度柔性IC封装基板的制造过程中,实时监测高密度柔性IC封装基板线路尺寸的大小,能够提高制造效率,减少有缺陷的高密度柔性IC封装基板的生产。
高密度柔性IC封装基板线路尺寸检测一般是通过高精度摄像头扫描高密度柔性IC封装基板,采集到图像,然后把彩色图转化为灰度图,接着转化为二值图,通过对二值图进行形态学细化处理可以提取出线路的中心线,然后就能通过中心线,计算出最小线宽线距,但上述这种传统的方法具有很多局限性,比如形态学细化算法对于线路复杂的高密度柔性IC封装基板,不能很好地提取出线路的中心线,如具有曲线特征的线路将会出一些毛刺,同时细化后的线路,将会掩盖掉线路的一些缺口缺陷,使得线路的最小线宽线距位置不能很好地体现出来。并且通过形态学细化算法来提取曲线中心线这一种方法耗时较长,加上需要对中心线的每一个像素计算最大最小线宽所需要消耗大量时间,这将使整个尺寸检测算法运行缓慢。
目前,通过轮廓检测图像的方法是比较常用的,但是目前通过轮廓检测图像中的直线一般用的是Hough变换,Hough变换的核心思想是将图像中直角坐标系下的线变换到极坐标系下的一个点,利用这种思想可以提取直线。但Hough变换,只能检测直线,无法检测出曲线的位置,而且是基于像素计算的变换方式,没有达到亚像素的精度,所以难以精准定位直线的位置。当使用Radon变换时,可以达到亚像素的精度,但一般的Radon变换因为无法定位直线的起始点,所以检测到的直线是横跨整个图的,无法精准度量直线的长度。对曲线的检测,一般有基于灰度值方法、基于脊的微分几何方法、基于并行边缘目标的方法,但这些方法都比较复杂,且需要大量的计算量;对曲线的线宽线距测量,一般方法需要二次项拟合曲线来计算曲线对应的线宽线距,但二次项拟合对于多个点拟合时需要巨大的计算空间和计算时间,并且只是粗略地计算曲线的线宽线距,无法达到精度要求。
发明内容
本发明的目的在于克服现有技术的缺点与不足,提供一种柔性IC封装基板线路的缺口缺陷检测方法,该方法能够实现边界直线以及线路曲线的快速精准定位,准确快速的检测出直线部分和曲线部分的缺口缺陷。
本发明的目的通过下述技术方案实现:一种柔性IC封装基板线路的缺口缺陷检测方法,步骤如下:
步骤S1、选取与需要检测缺口缺陷的柔性IC封装基板同类型的柔性IC封装基板,并且随机选择部分上述柔性IC封装基板的图像,然后对其中的线路特征进行预先学习,获得目标先验知识;
步骤S2、当获取到需要检测的柔性IC封装基板图像时,提取该柔性IC封装基板图像中线路的边界轮廓,得到轮廓图;
步骤S3、以步骤S1中获取到的目标先验知识作为Radon变换的约束条件,对步骤S2中获取到的轮廓图进行Radon变换,以提取出轮廓图中所有轮廓对应的边界直线,然后根据边界直线的斜率将边界直线分别归集到相应边界直线集合中,其中每一边界直线集合中各边界直线的斜率相等,针对于每一边界直线集合,按照直角坐标对其中的边界直线进行排序后,然后计算每相邻两条边界直线之间的距离,作为相邻两条边界直线对应轮廓之间的标准线宽或标准线距;
步骤S4、针对于轮廓图中的每一条轮廓,首先获取到该轮廓的边界直线,并且依次计算该轮廓上的各像素点与该轮廓的边界直线之间的距离D,根据该轮廓上的各像素点与该轮廓的边界直线之间的距离D判定该轮廓上的缺口缺陷以及该轮廓上的曲线部分;
步骤S5、针对于步骤S4获取到的每一轮廓的曲线部分中的每一像素点,首先计算该像素点与下一轮廓的曲线部分之间的距离,将该距离作为该轮廓的曲线部分与下一轮廓的曲线部分的线距或线宽,然后将该轮廓的曲线部分与下一轮廓的曲线部分的线距或线宽与该轮廓与下一轮廓的标准线距或线宽进行比较,若大于,则判定该轮廓的曲线部分中该像素点为缺口缺陷。
优选的,所述步骤S1中对柔性IC封装基板图像中的线路特征进行预先学习,获得目标先验知识的具体过程如下:
统计所选择的柔性IC封装基板图像中两条平行边界直线对应的Radon图中点的数据,从中选取出两条平行边界直线对应的最大倾斜角度差ε°、两条平行边界直线对应中心点的最大距离Twid、边界直线的最小长度Qmin和最大长度Qmax作为目标先验知识;
统计所选择的柔性IC封装基板图像中同一条轮廓的相邻两段边界直线对应的Radon图中点的数据,从中选择出两条相邻边界直线的最小倾斜角度差θmin°和两条相邻边界直线对应中心点的最大距离Twmd作为目标先验知识。
优选的,所述步骤S3中提取出轮廓图中所有轮廓对应的边界直线的具体过程如下:
步骤S31、首先以步骤S1中获取到的目标先验知识作为Radon变换的约束条件,对步骤S2中获取到的轮廓图进行Radon变换,获得Radon图,具体过程如下:
步骤S311、首先设定变换步进角度θs=0.5θmin,步进距离ρs=min(Twid,Twmd),步进长度Qs=Qmax
步骤S312、通过以下公式对步骤S2中获取到的轮廓图进行转化,将轮廓图转化为对应的Radon图;
Figure BDA0001623512030000031
0<θk=kθs<180°;
0<ρk=kρs<ρmax
其中f(x,y)为在轮廓图中坐标为(x,y)处的像素值;ρmax为轮廓图中直线到图像中心点的最大距离,其中k为一常数,k=0,1,2,...;
其中轮廓图在通过上述公式转化过程中,当同一条线路轮廓的两条平行边界直线在Radon图中对应为Q111)和Q222)强度值的两像素点,则这两像素点满足0°<|θ12|<ε°,0<|ρ12|<Twid,Qmin<|Q111),Q222)|<Qmax这三个关系;当同一条轮廓的相邻两段边界直线在Radon图中对应为Q333)和Q444)强度值的两像素点,则这两像素点点满足θmin°|<|θ34|<90°,0<|ρ34|<Twmd,Qmin<|Q333),Q444)|<Qmax这三个关系;其中Q111)、Q222)、Q333)和Q444)分别对应为Radon图中四个像素点的强度值,θ1、θ2、θ3和θ4分别对应为Radon图中四个像点的横坐标,表示轮廓图中对应直线的倾斜角,ρ1、ρ2、ρ3和ρ4分别对应为Radon图中四个像点的纵坐标,表示轮廓图中对应直线到图像中心点的距离;
步骤S32、对步骤S31获取到的Radon图中的点进行聚类处理,获得Radon图中的强度极大值点集P,具体过程如下:
步骤S321、定义所有强度值大于定值Nmin的点作为强度较大值点,构建强度较大值点集合;
步骤S323、通过定义一个一定大小的模板,按滤除寄生较大值的策略,进一步获得强度极大值点集P;
步骤S33、针对于强度极大值点集P中的每个极值点,将该极值点转变为直角坐标点,定位出对应边界直线位置,同时通过该极值点计算出对应边界直线的斜率和截距;其中
ρi=xicosθi+yisinθi
ki=sin(θi*π/180°)/cos(θi*π/180°);
bi=sin(θi*π/180°)*ρi
其中(ρii)为强度极大值点集P中第i个极值点pi的极坐标,(xi,yi)为强度极大值点集P中第i个极值点pi的极坐标所转换得到的直角坐标,对应为直角坐标点Pi的直角坐标;ki为强度极大值点集P中第i个极值点pi对应定位出的边界直线的斜率,bi为强度极大值点集P中第i个极值点pi对应定位出的边界直线的截距。
更进一步的,所述步骤S3中,针对于每一边界直线集合,按照直角坐标对其中的边界直线进行排序后,每相邻两条边界直线之间的距离Dsw计算公式如下:
Dsw=|(bj1-bj2)*cos(|(arctan(kj))|)|;
其中bj1和bj2分别为第j个边界直线集合中相邻的两条边界直线的截距,kj为第j个边界直线集合各条边界直线的斜率。
优选的,所述步骤S3中,针对于每一边界直线集合,在计算得到每相邻两条边界直线之间的距离后,判断两条边界直线之间的像素值是否大于一定值;
若是,则该相邻两条线之间即为线路,上述计算得到的相邻两条边界直线之间的距离作为该相邻两条边界直线对应轮廓之间的标准线宽;
若否,则该相邻两条线之间即不为线路,上述计算得到的相邻两条边界直线之间的距离作为该相邻两条边界直线对应轮廓之间的标准线距。
优选的,所述步骤S4中,得到轮廓上的缺口缺陷以及轮廓上的曲线部分的具体过程如下:
针对于轮廓图中的每一条轮廓,首先计算该轮廓起始点与各边界直线之间的距离,选择与该轮廓起始点之间距离最小的边界直线作为该轮廓的边界直线;然后依次计算该轮廓上的各像素点与该轮廓的边界直线之间的距离D;其中:
当某像素点与该轮廓的边界直线之间的距离D大于第一阈值Dmin时,则将该像素点作为异常点;
当出现连续异常点,判断连续异常点的个数是否超过第二阈值T;若否,则
将这些异常点标记为缺口缺陷;若是,则将这些连续异常点构成的线判定为轮廓曲线部分;同时针对于上述连续异常点,判断各异常点与其他边界直线的距离,当存在某个异常点与一条边界直线的距离小于等于第一阈值时,则将该边界直线确定为该轮廓的边界直线;
同时针对于轮廓图中的每一条轮廓,根据该轮廓与下一轮廓之间的像素值大小判断该轮廓是线路线宽线还是线路线距线。
更进一步的,所述轮廓上的各像素点与该轮廓的边界直线之间的距离D为:
Figure BDA0001623512030000051
其中(x0,y0)为轮廓上的像素点坐标,kc为该轮廓的边界直线的斜率,bc为该轮廓的边界直线的截距。
优选的,所述步骤S5中判定出轮廓的曲线部分的缺口缺陷的具体过程如下:
针对于步骤S4获取到的每一轮廓的曲线部分,首先寻找到下一轮廓的曲线部分中心点,然后在该中心点前后选择多个像素点构建边界直线,计算该轮廓的曲线部分上每一像素点到该边界直线的垂直距离;其中:
若该轮廓为线路线宽线,则将上述计算得到的垂直距离作为该轮廓的曲线部分与下一轮廓的曲线部分的线路线宽,然后判断该轮廓的曲线部分与下一轮廓的曲线部分的线路线宽是否大于该轮廓与下一轮廓的标准线宽,若是,则判定该轮廓的曲线部分在该像素点为缺口缺陷;
若该轮廓曲线为线路线距线,则将上述计算得到的垂直距离作为该轮廓曲线与下一轮廓缺陷的线路线距;然后判断该轮廓曲线与下一轮廓曲线的线路线宽是否大于该轮廓曲线与下一轮廓曲线的标准线距,若是,则判定该轮廓曲线该像素点为缺口缺陷。
更进一步的,轮廓的曲线部分上每一像素点到边界直线的垂直距离为:
Figure BDA0001623512030000061
其中(xc,yc)为轮廓的曲线部分上像素点的坐标,(xc1,yc1),(xc2,yc2)分别对应边界直线的两个端点的坐标。
更进一步的,所述步骤S2中,得到轮廓图的具体过程如下:
步骤S21、首先对需要检测的柔性IC封装基板图像进行灰度化得到灰度图,然后对灰度图进行OTSU阈值分割,得到二值化图像G;
步骤S22、对二值化图像G进行形态学腐蚀膨胀操作,获得目标二值图Gb;
步骤S23、通过Canny算子提取目标二值化图Gb的轮廓,获得清晰轮廓图E。
本发明相对于现有技术具有如下的优点及效果:
(1)本发明一种柔性IC封装基板线路的缺口缺陷检测方法,首先选取柔性IC封装基板进行线路特征预先学习后获得目标先验知识;在当获取到需要检测的柔性IC封装基板图像时,提取线路的边界轮廓得到轮廓图;然后目标先验知识作为Radon变换的约束条件对轮廓图进行Radon变换,以提取出轮廓图中所有轮廓对应的边界直线并通过相邻两条边界直线之间的距离获取到对应轮廓之间的标准线宽或标准线距;针对于轮廓图中的每一条轮廓,根据该轮廓上的各像素点与该轮廓的边界直线之间的距离D判定该轮廓上的缺口缺陷以及该轮廓上的曲线部分;将每一轮廓的曲线部分中的每一像素点与下一轮廓的曲线部分之间的距离与该轮廓与下一轮廓之间的标准线距或线宽进行比较,根据比较结果判定轮廓的曲线部分中像素点是否有缺口缺陷。由上述可见,本发明通过改进的Radon变换方法,并结合轮廓边缘走向,能够实现边界直线的快速精准定位,并且本发明通过图像轮廓像素点到所在边界直线的距离,实现了线路边缘曲线的准确定位以及线路直线部分的缺口缺陷检测,同时本发明通过对轮廓曲线之间线宽线距的检测能够实现轮廓曲线部分缺口缺陷的检测,具有直线部分和曲线部分的缺口缺陷检测简单、快速以及精准的优点,解决了现有技术中柔性IC封装基板线路检测精度低和耗时长的问题。
(2)本发明柔性IC封装基板线路的缺口缺陷检测方法中,通过结合OTUS阈值分割和Canny算子检测边缘的算法,解决了高密度柔性IC封装基板线路边缘模糊导致边界提取不准确的问题。
附图说明
图1是本发明方法流程图。
图2是柔性IC封装基板的原始图像。
图3是柔性IC封装基板的轮廓图。
图4是柔性IC封装基板的Radon图中定位出的边界直线图。
图5是柔性IC封装基板的Radon图中标记的轮廓直线部分缺口缺陷示意图。
图6是柔性IC封装基板的Radon图中标记的轮廓曲线部分示意图。
图7是柔性IC封装基板的Radon图中标记的轮廓曲线部分缺口缺陷示意图。
具体实施方式
下面结合实施例及附图对本发明作进一步详细的描述,但本发明的实施方式不限于此。
实施例
本实施例公开了一种柔性IC封装基板线路的缺口缺陷检测方法,如图1所示,步骤如下:
步骤S1、选取与需要检测缺口缺陷的柔性IC封装基板同类型的柔性IC封装基板,并且随机选择部分上述柔性IC封装基板的图像,然后对其中的线路特征进行预先学习,获得目标先验知识;
其中在本实施例中,本步骤对柔性IC封装基板图像中的线路特征进行预先学习,获得目标先验知识的具体过程如下:
统计所选择的柔性IC封装基板图像中两条平行边界直线对应的Radon图中点的数据,从中选取出两条平行边界直线对应的最大倾斜角度差ε°、两条平行边界直线对应中心点的最大距离Twid,边界直线的最小长度Qmin和最大长度Qmax作为目标先验知识;
统计所选择的柔性IC封装基板图像中同一条轮廓的相邻两段边界直线对应的Radon图中点的数据,从中选择出两条相邻边界直线的最小倾斜角度差θmin°和两条相邻边界直线对应中心点的最大距离Twmd作为目标先验知识。
步骤S2、当获取到如图2所示的需要检测的柔性IC封装基板图像时,提取该柔性IC封装基板图像中线路的边界轮廓,得到轮廓图,如图3所示;
其中在本实施例中,本步骤得到轮廓图的具体过程如下:
步骤S21、首先对需要检测的柔性IC封装基板图像进行灰度化得到灰度图,然后对灰度图进行OTSU阈值分割,得到二值化图像G;
步骤S22、对二值化图像G进行形态学腐蚀膨胀操作,获得目标二值图Gb;
步骤S23、通过Canny算子提取目标二值化图Gb的轮廓,获得清晰轮廓图E。
步骤S3、以步骤S1中获取到的目标先验知识作为Radon变换的约束条件,对步骤S2中获取到的轮廓图进行Radon变换,以提取出轮廓图中所有轮廓对应的边界直线,然后根据边界直线的斜率将边界直线分别归集到相应边界直线集合中,其中每一边界直线集合中各边界直线的斜率相等,针对于每一边界直线集合,按照直角坐标对其中的边界直线进行排序后,然后计算每相邻两条边界直线之间的距离,作为相邻两条边界直线对应轮廓之间的标准线宽或标准线距;
其中在本实施例中,本步骤提取出轮廓图中所有轮廓对应的边界直线的具体过程如下:
步骤S31、首先以步骤S1中获取到的目标先验知识作为Radon变换的约束条件,对步骤S2中获取到的轮廓图进行Radon变换,获得Radon图,具体过程如下:
步骤S311、首先设定变换步进角度θs=0.5θmin,步进距离ρs=min(Twid,Twmd),步进长度Qs=Qmax
步骤S312、通过以下公式对步骤S2中获取到的轮廓图进行转化,将轮廓图转化为对应的Radon图;
Figure BDA0001623512030000081
0<θk=kθs<180°;
0<ρk=kρs<ρmax
其中f(x,y)为在轮廓图中坐标为(x,y)处的像素值;ρmax为轮廓图中直线到图像中心点的最大距离,其中k为一常数,k=0,1,2,...;
其中轮廓图在通过上述公式转化过程中,当同一条线路轮廓的两条平行边界直线在Radon图中对应为Q111)和Q222)强度值的两像素点,则这两像素点满足0°<|θ12|<ε°,0<|ρ12|<Twid,Qmin<|Q111),Q222)|<Qmax这三个关系;当同一条轮廓的相邻两段边界直线在Radon图中对应为Q333)和Q444)强度值的两像素点,则这两像素点点满足θmin°<|θ34|<90°,0<|ρ34|<Twmd,Qmin<|Q333),Q444)|<Qmax这三个关系;其中Q111)、Q222)、Q333)和Q444)分别对应为Radon图中四个像素点的强度值,θ1、θ2、θ3和θ4分别对应为Radon图中四个像点的横坐标,表示轮廓图中对应直线的倾斜角,ρ1、ρ2、ρ3和ρ4分别对应为Radon图中四个像点的纵坐标,表示轮廓图中对应直线到图像中心点的距离。
步骤S32、对步骤S31获取到的Radon图中的点进行聚类处理,获得Radon图中的强度极大值点集P,具体过程如下:
步骤S321、定义所有强度值大于定值Nmin的点作为强度较大值点,构建强度较大值点集合;在本实施例中Nmin可以设置为50。
步骤S323、通过定义一个一定大小的模板,按滤除寄生较大值的策略,进一步获得强度极大值点集P;在本实施例中,上述定义一个4×4的模板。
步骤S33、针对于强度极大值点集P中的每个极值点,将该极值点转变为直角坐标点,定位出对应边界直线位置,其中定位出的边界直线如图4所示。同时通过该极值点计算出对应边界直线的斜率和截距;其中
ρi=xicosθi+yisinθi
ki=sin(θi*π/180°)/cos(θi*π/180°);
bi=sin(θi*π/180°)*ρi
其中(ρii)为强度极大值点集P中第i个极值点pi的极坐标,(xi,yi)为强度极大值点集P中第i个极值点pi的极坐标所转换得到的直角坐标,对应为直角坐标点Pi的直角坐标;ki为强度极大值点集P中第i个极值点pi对应定位出的边界直线的斜率,bi为强度极大值点集P中第i个极值点pi对应定位出的边界直线的截距。
另外,在本步骤中,针对于每一边界直线集合,在计算得到每相邻两条边界直线之间的距离后,判断两条边界直线之间的像素值是否大于一定值H;
若是,则该相邻两条线之间即为线路,上述计算得到的相邻两条边界直线之间的距离作为该相邻两条边界直线对应轮廓之间的标准线宽;
若否,则该相邻两条线之间即不为线路,上述计算得到的相邻两条边界直线之间的距离作为该相邻两条边界直线对应轮廓之间的标准线距。
其中上述的一定值H可以为0。
在本步骤中,上述每相邻两条边界直线之间的距离Dsw计算公式如下:
Dsw=|(bj1-bj2)*cos(|(arctan(kj))|)|;
其中bj1和bj2分别为第j个边界直线集合中相邻的两条边界直线的截距,kj为第j个边界直线集合各条边界直线的斜率。
步骤S4、针对于轮廓图中的每一条轮廓,首先获取到该轮廓的边界直线,并且依次计算该轮廓上的各像素点与该轮廓的边界直线之间的距离D,根据该轮廓上的各像素点与该轮廓的边界直线之间的距离D判定该轮廓上的缺口缺陷以及该轮廓上的曲线部分;
其在本实施例中,本步骤得到轮廓上的缺口缺陷以及轮廓上的曲线部分的具体过程如下:
针对于轮廓图中的每一条轮廓,首先计算该轮廓起始点与各边界直线之间的距离,选择与该轮廓起始点之间距离最小的边界直线作为该轮廓的边界直线;然后依次计算该轮廓上的各像素点与该轮廓的边界直线之间的距离D:
Figure BDA0001623512030000101
其中(x0,y0)为轮廓上的像素点坐标,kc为该轮廓的边界直线的斜率,bc为该轮廓的边界直线的截距。
其中:
当某像素点与该轮廓的边界直线之间的距离D大于第一阈值Dmin时,即D>Dmin,则将该像素点作为异常点;在本实施例中,第一阈值Dmin设置为3个像素。
当出现连续异常点,判断连续异常点的个数t是否超过第二阈值T;
若否,即t≤T,则将这些异常点标记为轮廓直线部分的缺口缺陷,如图5中直线部分十字标记的地方。
若是,即t>T,则将这些连续异常点构成的线判定为轮廓曲线部分,如图6中多个连续十字标记的地方;同时针对于上述连续异常点,判断各异常点与其他边界直线的距离,当存在某个异常点与一条边界直线的距离小于等于第一阈值时,则将该边界直线确定为该轮廓的边界直线;
在本实施例中上述第二阈值T可以为8。
同时针对于轮廓图中的每一条轮廓,根据该轮廓与下一轮廓之间的像素值大小判断该轮廓是线路线宽线还是线路线距线,其中当该轮廓与下一轮廓之间的对应原图的像素值大于0时,则将该轮廓判定为线路线宽线,否则,将该轮廓判定为线路线距线。
步骤S5、针对于步骤S4获取到的每一轮廓的曲线部分中的每一像素点,首先计算该像素点与下一轮廓的曲线部分之间的距离,将该距离作为该轮廓的曲线部分与下一轮廓的曲线部分的线距或线宽,然后将该轮廓的曲线部分与下一轮廓的曲线部分的线距或线宽与该轮廓与下一轮廓的标准线距或线宽进行比较,若大于,则判定该轮廓的曲线部分中该像素点为缺口缺陷,如图7中十字标记的位置。
其中在本实施例中,本步骤判定出轮廓的曲线部分的缺口缺陷的具体过程如下:
针对于步骤S4获取到的每一轮廓的曲线部分,首先寻找到下一轮廓的曲线部分中心点,然后在该中心点前后选择多个像素点构建边界直线,计算该轮廓的曲线部分上每一像素点到该边界直线的垂直距离Dcur
Figure BDA0001623512030000111
其中(xc,yc)为轮廓的曲线部分上像素点的坐标,(xc1,yc1),(xc2,yc2)分别对应边界直线的两个端点的坐标。
其中:
若该轮廓为线路线宽线,则将上述计算得到的垂直距离Dcur作为该轮廓的曲线部分与下一轮廓的曲线部分的线路线宽,然后判断该轮廓的曲线部分与下一轮廓的曲线部分的线路线宽是否大于该轮廓与下一轮廓的标准线宽,若是,则判定该轮廓的曲线部分在该像素点为缺口缺陷;
若该轮廓曲线为线路线距线,则将上述计算得到的垂直距离作为该轮廓曲线与下一轮廓缺陷的线路线距;然后判断该轮廓曲线与下一轮廓曲线的线路线宽是否大于该轮廓曲线与下一轮廓曲线的标准线距,若是,则判定该轮廓曲线该像素点为缺口缺陷。
上述实施例为本发明较佳的实施方式,但本发明的实施方式并不受上述实施例的限制,其他的任何未背离本发明的精神实质与原理下所作的改变、修饰、替代、组合、简化,均应为等效的置换方式,都包含在本发明的保护范围之内。

Claims (10)

1.一种柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,步骤如下:
步骤S1、选取与需要检测缺口缺陷的柔性IC封装基板同类型的柔性IC封装基板,并且随机选择部分上述柔性IC封装基板的图像,然后对其中的线路特征进行预先学习,获得目标先验知识;
步骤S2、当获取到需要检测的柔性IC封装基板图像时,提取该柔性IC封装基板图像中线路的边界轮廓,得到轮廓图;
步骤S3、以步骤S1中获取到的目标先验知识作为Radon变换的约束条件,对步骤S2中获取到的轮廓图进行Radon变换,以提取出轮廓图中所有轮廓对应的边界直线,然后根据边界直线的斜率将边界直线分别归集到相应边界直线集合中,其中每一边界直线集合中各边界直线的斜率相等,针对于每一边界直线集合,按照直角坐标对其中的边界直线进行排序后,然后计算每相邻两条边界直线之间的距离,作为相邻两条边界直线对应轮廓之间的标准线宽或标准线距;
步骤S4、针对于轮廓图中的每一条轮廓,首先获取到该轮廓的边界直线,并且依次计算该轮廓上的各像素点与该轮廓的边界直线之间的距离D,根据该轮廓上的各像素点与该轮廓的边界直线之间的距离D判定该轮廓上的缺口缺陷以及该轮廓上的曲线部分;
步骤S5、针对于步骤S4获取到的每一轮廓的曲线部分中的每一像素点,首先计算该像素点与下一轮廓的曲线部分之间的距离,将该距离作为该轮廓的曲线部分与下一轮廓的曲线部分的线距或线宽,然后将该轮廓的曲线部分与下一轮廓的曲线部分的线距或线宽与该轮廓与下一轮廓的标准线距或线宽进行比较,若大于,则判定该轮廓的曲线部分中该像素点为缺口缺陷。
2.根据权利要求1所述的柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,所述步骤S1中对柔性IC封装基板图像中的线路特征进行预先学习,获得目标先验知识的具体过程如下:
统计所选择的柔性IC封装基板图像中两条平行边界直线对应的Radon图中点的数据,从中选取出两条平行边界直线对应的最大倾斜角度差ε°、两条平行边界直线对应中心点的最大距离Twid、边界直线的最小长度Qmin和最大长度Qmax作为目标先验知识;
统计所选择的柔性IC封装基板图像中同一条轮廓的相邻两段边界直线对应的Radon图中点的数据,从中选择出两条相邻边界直线的最小倾斜角度差θmin°和两条相邻边界直线对应中心点的最大距离Twmd作为目标先验知识。
3.根据权利要求2所述的柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,所述步骤S3中提取出轮廓图中所有轮廓对应的边界直线的具体过程如下:
步骤S31、首先以步骤S1中获取到的目标先验知识作为Radon变换的约束条件,对步骤S2中获取到的轮廓图进行Radon变换,获得Radon图,具体过程如下:
步骤S311、首先设定变换步进角度θs=0.5θmin,步进距离ρs=min(Twid,Twmd),步进长度Qs=Qmax
步骤S312、通过以下公式对步骤S2中获取到的轮廓图进行转化,将轮廓图转化为对应的Radon图;
Figure FDA0001623512020000021
0<θk=kθs<180°;
0<ρk=kρs<ρmax
其中f(x,y)为在轮廓图中坐标为(x,y)处的像素值;ρmax为轮廓图中直线到图像中心点的最大距离,其中k为一常数,k=0,1,2,...;
其中轮廓图在通过上述公式转化过程中,当同一条线路轮廓的两条平行边界直线在Radon图中对应为Q111)和Q222)强度值的两像素点,则这两像素点满足0°<|θ12|<ε°,0<|ρ12|<Twid,Qmin<|Q111),Q222)|<Qmax这三个关系;当同一条轮廓的相邻两段边界直线在Radon图中对应为Q333)和Q444)强度值的两像素点,则这两像素点点满足θmin°<|θ34|<90°,0<|ρ34|<Twmd,Qmin<|Q333),Q444)|<Qmax这三个关系;其中Q111)、Q222)、Q333)和Q444)分别对应为Radon图中四个像素点的强度值,θ1、θ2、θ3和θ4分别对应为Radon图中四个像点的横坐标,表示轮廓图中对应直线的倾斜角,ρ1、ρ2、ρ3和ρ4分别对应为Radon图中四个像点的纵坐标,表示轮廓图中对应直线到图像中心点的距离;
步骤S32、对步骤S31获取到的Radon图中的点进行聚类处理,获得Radon图中的强度极大值点集P,具体过程如下:
步骤S321、定义所有强度值大于定值Nmin的点作为强度较大值点,构建强度较大值点集合;
步骤S323、通过定义一个一定大小的模板,按滤除寄生较大值的策略,进一步获得强度极大值点集P;
步骤S33、针对于强度极大值点集P中的每个极值点,将该极值点转变为直角坐标点,定位出对应边界直线位置,同时通过该极值点计算出对应边界直线的斜率和截距;其中
ρi=xicosθi+yisinθi
ki=sin(θi*π/180°)/cos(θi*π/180°);
bi=sin(θi*π/180°)*ρi
其中(ρii)为强度极大值点集P中第i个极值点pi的极坐标,(xi,yi)为强度极大值点集P中第i个极值点pi的极坐标所转换得到的直角坐标,对应为直角坐标点Pi的直角坐标;ki为强度极大值点集P中第i个极值点pi对应定位出的边界直线的斜率,bi为强度极大值点集P中第i个极值点pi对应定位出的边界直线的截距。
4.根据权利要求3所述的柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,所述步骤S3中,针对于每一边界直线集合,按照直角坐标对其中的边界直线进行排序后,每相邻两条边界直线之间的距离Dsw计算公式如下:
Dsw=|(bj1-bj2)*cos(|(arctan(kj))|)|;
其中bj1和bj2分别为第j个边界直线集合中相邻的两条边界直线的截距,kj为第j个边界直线集合各条边界直线的斜率。
5.根据权利要求1所述的柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,所述步骤S3中,针对于每一边界直线集合,在计算得到每相邻两条边界直线之间的距离后,判断两条边界直线之间的像素值是否大于一定值;
若是,则该相邻两条线之间即为线路,上述计算得到的相邻两条边界直线之间的距离作为该相邻两条边界直线对应轮廓之间的标准线宽;
若否,则该相邻两条线之间即不为线路,上述计算得到的相邻两条边界直线之间的距离作为该相邻两条边界直线对应轮廓之间的标准线距。
6.根据权利要求1所述的柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,所述步骤S4中,得到轮廓上的缺口缺陷以及轮廓上的曲线部分的具体过程如下:
针对于轮廓图中的每一条轮廓,首先计算该轮廓起始点与各边界直线之间的距离,选择与该轮廓起始点之间距离最小的边界直线作为该轮廓的边界直线;然后依次计算该轮廓上的各像素点与该轮廓的边界直线之间的距离D;其中:
当某像素点与该轮廓的边界直线之间的距离D大于第一阈值Dmin时,则将该像素点作为异常点;
当出现连续异常点,判断连续异常点的个数是否超过第二阈值T;若否,则
将这些异常点标记为缺口缺陷;若是,则将这些连续异常点构成的线判定为轮廓曲线部分;同时针对于上述连续异常点,判断各异常点与其他边界直线的距离,当存在某个异常点与一条边界直线的距离小于等于第一阈值时,则将该边界直线确定为该轮廓的边界直线;
同时针对于轮廓图中的每一条轮廓,根据该轮廓与下一轮廓之间的像素值大小判断该轮廓是线路线宽线还是线路线距线。
7.根据权利要求6所述的柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,所述轮廓上的各像素点与该轮廓的边界直线之间的距离D为:
Figure FDA0001623512020000041
其中(x0,y0)为轮廓上的像素点坐标,kc为该轮廓的边界直线的斜率,bc为该轮廓的边界直线的截距。
8.根据权利要求1所述的柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,所述步骤S5中判定出轮廓的曲线部分的缺口缺陷的具体过程如下:
针对于步骤S4获取到的每一轮廓的曲线部分,首先寻找到下一轮廓的曲线部分中心点,然后在该中心点前后选择多个像素点构建边界直线,计算该轮廓的曲线部分上每一像素点到该边界直线的垂直距离;其中:
若该轮廓为线路线宽线,则将上述计算得到的垂直距离作为该轮廓的曲线部分与下一轮廓的曲线部分的线路线宽,然后判断该轮廓的曲线部分与下一轮廓的曲线部分的线路线宽是否大于该轮廓与下一轮廓的标准线宽,若是,则判定该轮廓的曲线部分在该像素点为缺口缺陷;
若该轮廓曲线为线路线距线,则将上述计算得到的垂直距离作为该轮廓曲线与下一轮廓缺陷的线路线距;然后判断该轮廓曲线与下一轮廓曲线的线路线宽是否大于该轮廓曲线与下一轮廓曲线的标准线距,若是,则判定该轮廓曲线该像素点为缺口缺陷。
9.根据权利要求8所述的柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,轮廓的曲线部分上每一像素点到边界直线的垂直距离为:
Figure FDA0001623512020000042
其中(xc,yc)为轮廓的曲线部分上像素点的坐标,(xc1,yc1),(xc2,yc2)分别对应边界直线的两个端点的坐标。
10.根据权利要求1所述的柔性IC封装基板线路的缺口缺陷检测方法,其特征在于,所述步骤S2中,得到轮廓图的具体过程如下:
步骤S21、首先对需要检测的柔性IC封装基板图像进行灰度化得到灰度图,然后对灰度图进行OTSU阈值分割,得到二值化图像G;
步骤S22、对二值化图像G进行形态学腐蚀膨胀操作,获得目标二值图Gb;
步骤S23、通过Canny算子提取目标二值化图Gb的轮廓,获得清晰轮廓图E。
CN201810315130.2A 2018-04-10 2018-04-10 一种柔性ic封装基板线路的缺口缺陷检测方法 Active CN108918526B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810315130.2A CN108918526B (zh) 2018-04-10 2018-04-10 一种柔性ic封装基板线路的缺口缺陷检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810315130.2A CN108918526B (zh) 2018-04-10 2018-04-10 一种柔性ic封装基板线路的缺口缺陷检测方法

Publications (2)

Publication Number Publication Date
CN108918526A CN108918526A (zh) 2018-11-30
CN108918526B true CN108918526B (zh) 2020-08-18

Family

ID=64402890

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810315130.2A Active CN108918526B (zh) 2018-04-10 2018-04-10 一种柔性ic封装基板线路的缺口缺陷检测方法

Country Status (1)

Country Link
CN (1) CN108918526B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109872287B (zh) * 2019-01-31 2021-01-22 上海华虹宏力半导体制造有限公司 Sem图像轮廓线图的修正方法
CN111721229B (zh) * 2019-03-19 2022-06-21 宝山钢铁股份有限公司 一种线材截面形状缺陷检测系统及其检测方法
CN110163853B (zh) * 2019-05-14 2021-05-25 广东奥普特科技股份有限公司 一种边缘缺陷的检测方法
CN111504198B (zh) * 2020-06-08 2022-04-22 无锡和博永新科技有限公司 一种电阻切割刀口的检测方法
CN111862132A (zh) * 2020-08-09 2020-10-30 成都市精卫鸟科技有限责任公司 一种曲线检测方法、装置、设备和介质
CN112485709B (zh) * 2020-11-09 2024-03-29 泓准达科技(上海)有限公司 一种内部线路异常的检测方法、装置、介质及电子设备
CN112387604B (zh) * 2021-01-04 2021-04-20 深圳和美精艺半导体科技股份有限公司 一种avi检测机与自动找点机联网检测封装基板的方法
CN112819845B (zh) * 2021-02-26 2023-10-27 华南理工大学 柔性封装基板轮廓、线宽线距缺陷检测方法及介质和设备
CN113092486B (zh) * 2021-04-07 2023-04-07 沧澜智能科技(昆山)有限公司 一种适于高光面产品表面水波纹检测的方法
CN113052829B (zh) * 2021-04-07 2022-06-28 深圳市磐锋精密技术有限公司 一种基于物联网的主板aoi检测方法
CN113450399B (zh) * 2021-05-28 2022-02-25 北京医准智能科技有限公司 一种正位胸片心胸比测量方法及装置
CN113870266B (zh) * 2021-12-03 2022-03-11 中导光电设备股份有限公司 一种基于tft-lcd线条缺陷真实性判定方法和系统
CN115035056B (zh) * 2022-05-31 2024-04-30 华南理工大学 基于微分几何的柔性ic基板线路刻蚀缺陷检测方法及系统
CN116740057B (zh) * 2023-08-11 2023-12-01 深圳市鹏基精密工业有限公司 一种圆柱形工件毛刺在线检测方法及系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60132326A (ja) * 1983-12-20 1985-07-15 Nec Corp フオトマスク欠陥検査方法
CN101320004A (zh) * 2008-07-03 2008-12-10 西北工业大学 基于机器视觉的竹条缺陷在线检测方法
US8493057B2 (en) * 2009-05-15 2013-07-23 Advantest Corporation Electromagnetic wave measuring apparatus, measuring method, program, and recording medium
CN104076235A (zh) * 2013-03-27 2014-10-01 深圳市海洋王照明工程有限公司 Pcb板的印制线开路检测方法
CN104616275B (zh) * 2013-11-04 2017-08-25 北京兆维电子(集团)有限责任公司 一种缺陷检测方法和装置
CN105023013B (zh) * 2015-08-13 2018-03-06 西安电子科技大学 基于局部标准差和Radon变换的目标检测方法
CN205229058U (zh) * 2015-11-06 2016-05-11 天津普林电路股份有限公司 一种高密度积层板用aoi自动光学检查机缺陷测试板
CN106530273B (zh) * 2016-10-10 2020-05-22 华南理工大学 高精度fpc直线线路检测与缺陷定位方法

Also Published As

Publication number Publication date
CN108918526A (zh) 2018-11-30

Similar Documents

Publication Publication Date Title
CN108918526B (zh) 一种柔性ic封装基板线路的缺口缺陷检测方法
CN111243032B (zh) 一种棋盘格角点全自动检测方法
CN108389179B (zh) 一种基于机器视觉的罐盖表面缺陷检测方法
CN104915963B (zh) 一种用于plcc元件的检测与定位方法
CN106803244B (zh) 缺陷识别方法及系统
CN106446894B (zh) 一种基于轮廓识别球型目标物位置的方法
CN109115800B (zh) 一种产品毛刺的快速检测及长度精确测量方法
CN110807355A (zh) 一种基于移动机器人的指针仪表检测与读数识别方法
CN111062940B (zh) 一种基于机器视觉的螺钉定位与识别方法
CN107729853B (zh) 一种适用于变电站窄刻度指针式仪表的自动识别方法
CN108960237B (zh) 一种指针式油位计读数识别方法
CN104331695B (zh) 一种鲁棒的圆形标志符形状质量检测方法
CN111507186B (zh) 一种变电站指针式仪表读数识别方法
CN110415296B (zh) 一种有阴影光照下矩形状电器件的定位方法
CN107145890A (zh) 一种远距离多视角环境下的指针式仪表盘自动读数方法
CN114627080B (zh) 基于计算机视觉的车辆冲压配件缺陷检测方法
CN112233116A (zh) 基于邻域决策与灰度共生矩阵描述的凹凸痕视觉检测方法
CN116503316A (zh) 一种基于图像处理的芯片缺陷量测方法及系统
CN107862319A (zh) 一种基于邻域投票的异源高分光学影像匹配误差剔除方法
CN115690670A (zh) 一种晶圆瑕疵智能识别方法和系统
CN115619845A (zh) 一种自适应扫描文档图像倾斜角检测方法
CN113902894A (zh) 一种基于图像处理的条式水平仪自动读数识别方法
CN114926635B (zh) 与深度学习方法相结合的多焦图像中目标分割方法
CN116402868A (zh) 一种检测三维物体标志点的系统及其方法
CN103871048B (zh) 一种基于直线基元的几何哈希法实时定位与匹配方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant