CN104200496B - 最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法 - Google Patents

最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法 Download PDF

Info

Publication number
CN104200496B
CN104200496B CN201410440285.0A CN201410440285A CN104200496B CN 104200496 B CN104200496 B CN 104200496B CN 201410440285 A CN201410440285 A CN 201410440285A CN 104200496 B CN104200496 B CN 104200496B
Authority
CN
China
Prior art keywords
straight line
point
rectangular
profile
sides
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410440285.0A
Other languages
English (en)
Other versions
CN104200496A (zh
Inventor
齐敏
吴志超
李珂
辛红娟
樊养余
董勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northwestern Polytechnical University
Original Assignee
Northwestern Polytechnical University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northwestern Polytechnical University filed Critical Northwestern Polytechnical University
Priority to CN201410440285.0A priority Critical patent/CN104200496B/zh
Publication of CN104200496A publication Critical patent/CN104200496A/zh
Application granted granted Critical
Publication of CN104200496B publication Critical patent/CN104200496B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供了一种最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法,对获取的灰度图像经预处理分离出矩形标志符,进行边缘提取,获取矩形标志符的初始轮廓点集,将其分割成四个轮廓子集;筛选轮廓子集中的有效点集并去噪优化,获得用于拟合矩形标志符四条直边的原型边子集;利用相邻的原型边子集进行基于最小二乘的垂直边拟合,获得四条边的拟合直线方程;根据矩形四个顶点坐标计算得到精确的矩形标志符几何中心位置,用于定位。本发明能够快速准确地定位矩形标志符的几何中心,满足高精度定位要求,同时对图像质量要求一般。

Description

最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法
技术领域
本发明涉及一种图像检测定位技术,尤其是面向矩形标志符的高精度检测定位技术。
背景技术
随着电子行业的发展,电子产品朝着小型化,轻型化和高可靠性方向发展,使得表面贴装电子元器件不断朝着轻薄微小的高集成化发展,基于机器视觉的图像检测高精度定位技术在表面贴装行业中的应用变得越来越重要和广泛。表面贴装行业中常用的定位标志符有圆形、矩形、正方形、菱形、十字形、三角形等,除圆形标志符外,其他标识符的检测定位算法研究很少,已有的算法操作步骤复杂,严重降低生产效率,不能很好地满足实际需求。
常见的矩形标志符视觉检测方法包括重心法、模板匹配法和四边检测法等。重心法通过阈值分割求取标志符的图像重心,可以满足速度要求,但精度不高,且无法检测角度偏转。模板匹配法对检测图像和模板图像质量要求都较高,存在运算量大,速度慢等缺点。四边检测法包括霍夫变换方法和直线拟合方法,要达到良好的检测精度,需要依赖高的图像质量,以实现较好的边缘检测。其中,霍夫变换是常用的直线检测方法,算法稳定性较好,但计算量大,运算速度慢;直线拟合方法考虑了随机误差对检测精度的影响,其检测结果具有较高的精度,但是边缘破损或者毛刺等非随机因素对算法影响显著,会造成较大的检测误差。
发明内容
为了克服现有技术的不足,本发明提供一种同时拟合相邻边垂直直线的矩形标志符检测定位方法,通过筛选矩形标志符每条边的有效点集和对有效点集的进一步去毛刺点优化,提高算法的抗噪能力;通过最小二乘垂直拟合重构矩形标志符的四条直线边,实现精确定位,能够快速准确地定位矩形标志符的几何中心,能够满足高精度定位要求,同时对图像质量要求一般。该方法同样适用于正方形标志符和四个角为直角的菱形标志符。
本发明解决其技术问题所采用的技术方案是:首先,对获取的灰度图像经预处理分离出矩形标志符,进行边缘提取,获取矩形标志符的初始轮廓点集,并按照初始几何中心将其分割成四个轮廓子集;筛选轮廓子集中的有效点集和去噪优化,获得用于拟合矩形标志符四条直边的原型边子集;利用相邻的原型边子集进行基于最小二乘的垂直边拟合,获得四条边的拟合直线方程,并计算矩形四个顶点坐标;最后,根据四个顶点坐标计算得到精确的矩形标志符几何中心位置,用于定位。主要包括如下步骤:
步骤一、对N行M列的灰度图像Iorg=g(x,y)进行去噪预处理,分离出矩形标志符,得到其二值图像Ibi=f(x,y),采用canny算子进行标志符所在区域Ω的边缘提取,获取矩形标志符的初始轮廓点集S={Pi(xi,yi)|i=1,2,…,Q},式中,Q为S中轮廓点Pi的个数;
步骤二、求矩形标志符二值图像Ibi=f(x,y)的初始几何中心O1(x0,y0), i、j为矩形标志符所在区域Ω中像素点的X、Y坐标,n为像素点总个数;找出S中距离初始几何中心O1(x0,y0)最近的点E(xmin,ymin),过E、O1两点作参考直线L1,再作一经过O1并垂直于L1的参考直线L2,参考直线L1的方程为参考直线L2的方程为L1和L2将矩形标志符的初始轮廓点集S分割成四个轮廓子集Sac、Sad、Sbc和Sbd
步骤三、从轮廓子集中筛选矩形标志符四条边的有效子集,包括以下步骤:
已知矩形标志符两相邻边长之比为W:H,将对应W值的两条平行边称为W边,将对应H值的两条平行边称为H边,W边有效点集的筛选阈值H边有效点集的筛选阈值γ和μ均为控制因子,取值范围均为0.7±0.1;计算轮廓子集Sac中所有的点到参考直线L1的距离dac1、轮廓子集Sbc中所有的点到参考直线L1的距离dbc1,若dac1≤α则Pac∈Svac,若dbc1≤α则Pbc∈Svbc,其中,Svac为轮廓子集Sac中与参考直线L1相交的部分W边的有效点集,Svbc为轮廓子集Sbc中与参考直线L1相交的部分W边的有效点集,Svac与Svbc的并集Svc为矩形轮廓中与参考直线L1相交的一条完整W边的有效点集;计算轮廓子集Sad中所有的点到参考直线L1的距离dad1、轮廓子集Sbd中所有的点到参考直线L1的距离dbd1,若dad1≤α则Pad∈Svad,若dbd1≤α则Pbd∈Svbd,其中,Svad为轮廓子集Sad中与直线L1相交的部分W边的有效点集,Svbd为轮廓子集Sbd中与直线L1相交的部分W边的有效点集,Svad与Svbd的并集Svd为矩形轮廓中与参考直线L1相交的另一条完整W边的有效点集;计算轮廓子集Sac中所有的点到参考直线L2的距离dac2、轮廓子集Sad,设Sad中所有点到参考直线L2的距离dad2,若dac2≤β则Pac∈Shac,若dad2≤β则Pad∈Shad,其中,Shac为轮廓子集Sac中与参考直线L2相交的部分H边的有效点集,Shad为轮廓子集Sad中与参考直线L2相交的部分H边的有效点集,Shac与Shad的并集Sha为矩形轮廓中与参考直线L2相交的一条完整H边的有效点集;计算轮廓子集Sbc中所有的点到参考直线L2的距离dbc2、轮廓子集Sbd中所有的点到参考直线L2的距离dbd2,若dbc2≤β则Pbc∈Shbc,若dbd2≤β则Pbd∈Shbd,其中,Shbc为轮廓子集Sbc中与参考直线L2相交的部分H边的有效点集,Shbd为轮廓子集Sbd中与直线L2相交的部分H边的有效点集,Shbc与Shbd的并集Shb为矩形轮廓中与直线L2相交的另一条完整H边的有效点集;
步骤四、对矩形标志符四条边的有效点集进行优化,得到用于直线拟合的原型边子集:
设Svc中有n_vc个点pvc(xvc,yvc),则Svc的中心点Nc(xc,yc)为:
计算出Svc中每一点与中心点Nc构成的斜率kvc∈Kvc,式中,Kvc为Svc中每一点与中心点Nc构成的斜率集合,
将每一点斜率kvc与自适应斜率阈值比较,kvc小于δvc的点被判决为最终的原型边子集Sc
重复本步骤,获取另外三边的有效子集Svd,Sha和Shb优化后的原型边子集Sd、Sa和Sb
步骤五、利用相邻的原型边子集,进行基于最小二乘的邻边垂直拟合及精确定位,步骤如下:
设原型边子集Sa、Sb、Sc和Sd中任一条原型边的待拟合直线lj的方程为yj=kjxj+bj,其相邻垂直边的待拟合直线ljv的方程为其中kj为待拟合直线lj的斜率,bj,bjv分别为待拟合直线lj和ljv的截距,j=1,2,3,4;设基于最小二乘的目标函数式中,(xj,yj)为lj对应的原型边子集中的点,nj为点的数量;(xjv,yjv)为ljv对应的原型边子集中的点,njv为点的数量;分别对F求偏导,令解得:
将所求参数kj、bj和bjv分别代入两个待拟合直线方程中,得到矩形标志符两相邻垂直边的拟合直线方程lj和ljv,联立求解两方程,得到两条直线的交点Cj(Xj,Yj),Cj(Xj,Yj)即为矩形标志符的一个拟合顶点;
重复本步骤,用原型边子集Sa与Sc、Sa与Sd、Sb与Sc,以及Sb与Sd分别进行最小二乘垂直拟合,获得矩形标志符四个拟合顶点的坐标C1(X1,Y1)、C2(X2,Y2)、C3(X3,Y3)和C4(X4,Y4),由四个顶点坐标求得矩形标志符的中心点坐标Oc(Xcenter,Ycenter),
本发明的有益效果是:利用基于距离阈值的轮廓子集有效点集筛选方法,将用于直线拟合的四条边的点集限定在一定范围内,避免了矩形标志符拐角位置的圆角效应对计算定位精度产生的影响;针对每条边上存在毛刺点,影响拟合精度的问题,进一步对四条边的有效子集进行优化,去除毛刺点,筛选出有利于直线拟合中反映直线性的优良点,构成原型边子集,提高了矩形标志符四条边的直线拟合精度;最后,以矩形邻边的垂直关系作为约束条件,对相邻的原型边子集,实施基于最小二乘的邻边垂直拟合,有效减小了直接单边拟合直线时产生的误差,提高了拟合精度,减小了边缘破损或者毛刺等非随机因素造成的检测误差,具有更好的抗噪能力,摆脱了对图像质量的依赖过大的不足,可以获得良好的定位结果,提高了定位精度。是一种性能稳定的矩形标志符高精度定位算法。
附图说明
图1是矩形标志符检测定位方法流程图;
图2是矩形标志符四个轮廓子集示意图;
图中,1-矩形标志符轮廓初始轮廓点集S(完整轮廓),2-初始几何中心O1,3-初始轮廓点集中距离初始几何中心最近的点E,4-参考直线L1,5-参考直线L2,6-轮廓子集Sac,7-轮廓子集Sbc,8-轮廓子集Sad,9-轮廓子集Sbd,10-XOY图像坐标系。
具体实施方式
下面结合附图和实施例对本发明进一步说明,本发明包括但不仅限于下述实施例。
本发明包括如下步骤:
定义图像坐标系为:X轴正方向水平向右,Y轴正方向垂直向下,原点位于左上角。原始图像Iorg=g(x,y)为N行M列的灰度图像,0≤x≤M-1,0≤y≤N-1,灰度取值范围为[0,255]。
步骤一、获取矩形标志符的初始轮廓点集。
对获取的灰度图像Iorg经去噪预处理,分离出矩形标志符,得到其二值图像Ibi=f(x,y),令标志符所在区域为Ω。采用canny算子进行边缘提取,获取矩形标志符的初始轮廓点集S:
S={Pi(xi,yi)|i=1,2,…,Q} (1)
式中,Q为S中轮廓点Pi的个数。
步骤二、将初始轮廓点集S分割成四个轮廓子集。
1.求矩形标志符二值图像Ibi=f(x,y)的初始几何中心O1(x0,y0):
式中,i、j为矩形标志符所在区域Ω中像素点的X、Y坐标,n为像素点总个数。
2.将初始轮廓点集S分割成四个轮廓子集。
找出S中距离初始几何中心O1(x0,y0)最近的点E(xmin,ymin),以E、O1两点作参考直线L1,再作一经过初始中心点O1并垂直于L1的参考直线L2。则参考直线L1方程为:
参考直线L2方程为:
两条互相垂直的直线可以将矩形标志符的初始轮廓点集S分割成四个轮廓子集Sac、Sad、Sbc和Sbd,即当S中的点(xi,yi)满足下列四组条件时,分别形成四个不同轮廓子集:
时,形成Sac
时,形成Sad
时,形成Sbc
时,形成Sbd
满足:
S=Sac∪Sad∪Sbc∪Sbd (5)
步骤三、从轮廓子集中筛选矩形标志符四条边的有效子集。
基于距离阈值,去除拐角干扰,筛选轮廓子集中用于直线拟合的有效点集。
直线拟合是基于大量数据统计特性的运算,数据越多越准确,拟合直线的精确度就越高。反之,当数据较少或引入了偏差较大的数据时,拟合直线的精确度就很难保证。而矩形标志符轮廓的四个拐角并非绝对的直角,每条边在拐角处均有弯曲,出现了圆角效应。子区域分割时,若将拐角附近位置的像素点引入拟合直线的计算中,将影响该直线斜率的拟合精度。因此,应将用于直线拟合的有效点集限定在一定范围内,避免涉及到拐角位置小邻域内的点。
本发明提出一种基于距离阈值的轮廓子集中有效点集的筛选方法:已知矩形标志符两相邻边长之比为W:H,这里将对应W值的两条平行边称为W边,将对应H值的两条平行边称为H边。设置W边有效点集的筛选阈值α为:
H边有效点集的筛选阈值β为:
式(6)和式(7)中,γ和μ均为控制因子,0<γ<1,0<μ<1。根据实验验证,γ和μ的取值范围均为0.7±0.1。
有效点集的筛选步骤如下:
1)获得与参考直线L1相交的两条W边各自的有效点集。
(1)计算轮廓子集Sac中所有的点到参考直线L1的距离,设Sac中任一点为Pac(xac,yac),有:
将dac1与W边筛选阈值α比较:
其中,Svac为轮廓子集Sac中与参考直线L1相交的部分W边的有效点集。
同理,对轮廓子集Sbc,设Sbc中任一点为Pbc(xbc,ybc),有:
将dbc1与W边筛选阈值α比较:
其中,Svbc为轮廓子集Sbc中与参考直线L1相交的部分W边的有效点集。
则Svac与Svbc的并集:
Svc=Svac∪Svbc (12)
为矩形轮廓中与参考直线L1相交的一条完整W边的有效点集。
(2)类似地,计算轮廓子集Sad中所有的点到参考直线L1的距离dad1,将dad1与W边筛选阈值α比较:
其中,Pad为Sad中任一点,Svad为轮廓子集Sad中与直线L1相交的部分W边的有效点集。
同理,对轮廓子集Sbd,计算轮廓子集Sbd中所有的点到参考直线L1的距离dbd1,将dbd1与W边筛选阈值α比较:
其中,Pbd为Sbd中任一点,Svbd为轮廓子集Sbd中与直线L1相交的部分W边的有效点集。
则Svad与Svbd的并集:
Svd=Svad∪Svbd (15)
为矩形轮廓中与参考直线L1相交的另一条完整W边的有效点集。
综上所述,有效点集Svc和Svd为与参考直线L1相交的两条W边各自的有效点集。
2)获得与参考直线L2相交的两条H边各自的有效点集。
与上述求解两条W边有效点集的方法类似,步骤如下:
(1)计算轮廓子集Sac中所有的点到参考直线L2的距离,设Sac中任一点为Pac(xac,yac),有:
将dac2与H边筛选阈值β比较:
其中,Shac为轮廓子集Sac中与参考直线L2相交的部分H边的有效点集。
同理,对轮廓子集Sad,设Sad中任一点为Pad(xad,yad),有:
将dad2与H边筛选阈值β比较:
其中,Shad为轮廓子集Sad中与参考直线L2相交的部分H边的有效点集。
则Shac与Shad的并集:
Sha=Shac∪Shad (20)
为矩形轮廓中与参考直线L2相交的一条完整H边的有效点集。
(2)类似地,计算轮廓子集Sbc中所有的点到参考直线L2的距离dbc2,将dbc2与H边筛选阈值β比较:
其中,Pbc为Sbc中任一点,Shbc为轮廓子集Sbc中与参考直线L2相交的部分H边的有效点集。
同理,对轮廓子集Sbd,计算轮廓子集Sbd中所有的点到参考直线L2的距离dbd2,将dbd2与H边筛选阈值β比较:
其中,Pbd为Sbd中任一点,Shbd为轮廓子集Sbd中与直线L2相交的部分H边的有效点集。
则Shbc与Shbd的并集:
Shb=Shbc∪Shbd (23)
为矩形轮廓中与直线L2相交的另一条完整H边的有效点集。
综上所述,有效点集Sha和Shb为与参考直线L2相交的两条H边各自的有效点集。
步骤四、对矩形标志符四条边的有效子集进行优化,得到用于直线拟合的原型边子集。
通过上述步骤实现了矩形标志符四条边有效点集的筛选,分别为Svc和Svd,Sha和Shb,这些有效点集是初始轮廓点集中每条边去除拐角附近的中间那部分点集。由于利用canny算子提取出的轮廓,在每条边上都不是严格的直线特性,总是存在一些凹凸不平的点,即毛刺现象。针对这一问题,进一步对筛选出的矩形标志符每条边的有效点集进行优化,尽量去除毛刺点,以有利于直线拟合矩形直边时的精度提高。
以Svc对应的一条W边为例:
设Svc中有n_vc个点,其中任一点为pvc(xvc,yvc),则Svc的中心点Nc(xc,yc)为:
计算出Svc中每一点与中心点Nc构成的斜率kvc
式中Kvc为Svc中每一点与中心点Nc构成的斜率集合,δvc为自适应斜率阈值。
由于Svc中大部分点基本都在一条直线上,每一点斜率kvc基本一致,而其中的毛刺点,即偏离直线平均水平较严重的点,其斜率明显偏离自适应斜率阈值δvc,可通过如下判决:
将每一点斜率kvc与自适应斜率阈值δvc比较:
即kvc小于δvc的点被判决为有效点集Sc,从而剔除Svc中的毛刺点,得到最终的原型边子集Sc
对于另外三边的有效子集Svd,Sha和Shb做同样处理,获取优化后的原型边子集Sd、Sa和Sb
步骤五、利用相邻的原型边子集,进行基于最小二乘的邻边垂直拟合及精确定位。
根据矩形四条边为直线且邻边相互垂直的特征,本发明提出一种基于最小二乘邻边垂直拟合的方法,利用矩形邻边的垂直关系作为约束条件,从而减小直接单边拟合直线时产生的误差,有效地提高拟合精度。步骤如下:
设矩形标志符原型边子集Sa、Sb、Sc和Sd中任一条原型边的待拟合直线lj(j=1,2,3,4)的方程为:
yj=kjxj+bj (28)
其相邻垂直边的待拟合直线ljv的方程为:
其中kj为待拟合直线lj的斜率,bj,bjv分别为待拟合直线lj和ljv的截距。设基于最小二乘的目标函数为:
式中,(xj,yj)为lj对应的原型边子集中的点,nj为点的数量;(xjv,yjv)为ljv对应的原型边子集中的点,njv为点的数量。
分别对F求偏导,令可解得:
将所求参数kj,bj和bjv分别代入式(28)和式(29)中,得到矩形标志符两相邻垂直边的拟合直线方程lj和ljv,联立求解两方程,得到两条直线的交点Cj(Xj,Yj):
Cj(Xj,Yj)即为矩形标志符的一个拟合顶点。
用原型边子集Sa与Sc、Sa与Sd、Sb与Sc,以及Sb与Sd分别进行上述最小二乘垂直拟合,获得矩形标志符四个拟合顶点的坐标C1(X1,Y1)、C2(X2,Y2)、C3(X3,Y3)和C4(X4,Y4),由四个顶点坐标求得矩形标志符的中心点坐标Oc(Xcenter,Ycenter)为:
本实施例包括以下五个步骤:
步骤一、获取矩形标志符的初始轮廓点集。
对获取的灰度图像Iorg经去噪预处理,分离出矩形标志符,得到其二值图像Ibi=f(x,y),令标志符所在区域为Ω。采用canny算子进行边缘提取,获取矩形标志符的初始轮廓点集S:
S={Pi(xi,yi)|i=1,2,…,Q} (38)
式中,Q为S中轮廓点Pi的个数。
步骤二、将初始轮廓点集S分割成四个轮廓子集。
1.求矩形标志符二值图像Ibi=f(x,y)的初始几何中心O1(x0,y0):
式中,i、j为矩形标志符所在区域Ω中像素点的X、Y坐标,n为像素点总个数。
2.将初始轮廓点集S分割成四个轮廓子集。
找出S中距离初始几何中心O1(x0,y0)最近的点E(xmin,ymin),以E、O1两点作参考直线L1,再作一经过初始中心点O1并垂直于L1的参考直线L2。则参考直线L1方程为:
参考直线L2方程为:
两条互相垂直的直线可以将矩形标志符的初始轮廓点集S分割成四个轮廓子集Sac、Sad、Sbc和Sbd,即当S中的点(xi,yi)满足下列四组条件时,分别形成四个不同轮廓子集:
时,形成Sac;当时,形成Sad
时,形成Sbc;当时,形成Sbd
步骤三、从轮廓子集中筛选矩形标志符四条边的有效子集。
1.基于距离阈值,去除拐角干扰,筛选轮廓子集中用于直线拟合的有效点集。
已知矩形标志符两相邻边长之比为W:H,这里将对应W值的两条平行边称为W边,将对应H值的两条平行边称为H边。设置W边有效点集的筛选阈值α为:
H边有效点集的筛选阈值β为:
式(42)、(43)中,γ和μ均为控制因子,0<γ<1,0<μ<1。根据实验验证,γ和μ的取值范围均为0.7±0.1。
有效点集的筛选步骤如下:
1)获得与参考直线L1相交的两条W边各自的有效点集。
(1)计算轮廓子集Sac中所有的点到参考直线L1的距离,设Sac中任一点为Pac(xac,yac),有:
将dac1与W边筛选阈值α比较:
其中,Svac为轮廓子集Sac中与参考直线L1相交的部分W边的有效点集。
同理,对轮廓子集Sbc,设Sbc中任一点为Pbc(xbc,ybc),有:
将dbc1与W边筛选阈值α比较:
其中,Svbc为轮廓子集Sbc中与参考直线L1相交的部分W边的有效点集。
则Svac与Svbc的并集:
Svc=Svac∪Svbc (48)
为矩形轮廓中与参考直线L1相交的一条完整W边的有效点集。
(2)类似地,计算轮廓子集Sad中所有的点到参考直线L1的距离dad1,将dad1与W边筛选阈值α比较:
其中,Pad为Sad中任一点,Svad为轮廓子集Sad中与直线L1相交的部分W边的有效点集。
同理,对轮廓子集Sbd,计算轮廓子集Sbd中所有的点到参考直线L1的距离dbd1,将dbd1与W边筛选阈值α比较:
其中,Pbd为Sbd中任一点,Svbd为轮廓子集Sbd中与直线L1相交的部分W边的有效点集。
则Svad与Svbd的并集:
Svd=Svad∪Svbd (51)
为矩形轮廓中与直线L1相交的另一条完整W边的有效点集。
2)获得与参考直线L2相交的两条H边各自的有效点集。
(1)计算轮廓子集Sac中所有的点到参考直线L2的距离,设Sac中任一点为Pac(xac,yac),有:
将dac2与短边筛选阈值β比较:
其中,Shac为轮廓子集Sac中与参考直线L2相交的部分H边的有效点集。
同理,对轮廓子集Sad,设Sad中任一点为Pad(xad,yad),有:
将dad2与H边筛选阈值β比较:
其中,Shad为轮廓子集Sad中与参考直线L2相交的部分H边的有效点集。
则Shac与Shad的并集:
Sha=Shac∪Shad (56)
为矩形轮廓中与参考直线L2相交的一条完整H边的有效点集。
(2)类似地,计算轮廓子集Sbc中所有的点到参考直线L2的距离dbc2,将dbc2与H边筛选阈值β比较:
其中,Pbc为Sbc中任一点,Shbc为轮廓子集Sbc中与参考直线L2相交的部分H边的有效点集。
同理,对轮廓子集Sbd,计算轮廓子集Sbd中所有的点到参考直线L2的距离dbd2,将dbd2与H边筛选阈值β比较:
其中,Pbd为Sbd中任一点,Shbd为轮廓子集Sbd中与直线L2相交的部分H边的有效点集。
则Shbc与Shbd的并集:
Shb=Shbc∪Shbd (59)
为矩形轮廓中与直线L2相交的另一条完整H边的有效点集。
步骤四、对矩形标志符四条边的有效子集进行优化,得到用于直线拟合的原型边子集。
由于利用canny算子提取出的轮廓,在每条边上都不是严格的直线特性,存在一些凹凸不平的点,即毛刺现象。针对这一问题,进一步对筛选出的矩形标志符每条边的有效点集进行优化,尽量去除毛刺点,以有利于直线拟合矩形直边时的精度提高。
以Svc对应的一条W边为例:
设Svc中有n_vc个点,其中任一点为pvc(xvc,yvc),则Svc的中心点Nc(xc,yc)为:
计算出Svc中每一点与中心点Nc构成的斜率kvc
式中Kvc为Svc中每一点与中心点Nc构成的斜率集合,δvc为自适应斜率阈值。
将每一点斜率kvc与自适应斜率阈值δvc比较:
通过以上判决剔除Svc中的毛刺点,得到最终的原型边子集Sc
对于另外三边的有效子集Svd,Sha和Shb做同样处理,获取优化后的原型边子集Sd、Sa和Sb
步骤五、利用相邻的原型边子集,进行基于最小二乘的邻边垂直拟合及精确定位。
设矩形标志符原型边子集Sa、Sb、Sc和Sd中任一条原型边的待拟合直线lj(j=1,2,3,4)的方程为:
yj=kjxj+bj (64)
其相邻垂直边的待拟合直线ljv的方程为:
其中kj为待拟合直线lj的斜率,bj,bjv分别为待拟合直线lj和ljv的截距。设基于最小二乘的目标函数为:
式中,(xj,yj)为lj对应的原型边子集中的点,nj为点的数量;(xjv,yjv)为ljv对应的原型边子集中的点,njv为点的数量。
分别对F求偏导,令可解得:
将所求参数kj,bj和bjv分别代入式(64)和式(65)中,得到矩形标志符两相邻垂直边的拟合直线方程lj和ljv,联立求解两方程,得到两条直线的交点Cj(Xj,Yj):
Cj(Xj,Yj)即为矩形标志符的一个拟合顶点。
用原型边子集Sa与Sc、Sa与Sd、Sb与Sc,以及Sb与Sd分别进行上述最小二乘垂直拟合,获得矩形标志符四个拟合顶点的坐标C1(X1,Y1)、C2(X2,Y2)、C3(X3,Y3)和C4(X4,Y4)。根据矩形的对称性,由四个顶点坐标求得矩形标志符的中心点坐标
Oc(Xcenter,Ycenter)为:
以下四个实例对标准矩形标志符加入不同参数的高斯噪声、椒盐噪声后作为仿真实验用图,均获得精确的检测定位结果。标准矩形标志符中心坐标(301.00,168.00),单位为像素;两相邻边长之比W:H=14:11。
实例1:
获得矩形标志符初始轮廓点集S中轮廓点的个数Q=800;分割成四个轮廓子集;从轮廓子集中筛选有效子集,控制因子γ=0.7,μ=0.7,根据公式(6)、(7)计算得α=83.5821,β=66.4179,得到矩形标志符四条边的有效子集;对有效子集进行去毛刺优化,得到用于直线拟合的原型边子集;利用相邻的原型边子集,经过最小二乘邻边垂直拟合后,计算得矩形标志符中心点坐标为(301.0138,168.0131)。与标准中心的偏差为(0.0138,0.0131)。
实例2:
获得矩形标志符初始轮廓点集S中轮廓点的个数Q=802;分割成四个轮廓子集;从轮廓子集中筛选有效子集,控制因子γ=0.8,μ=0.79,根据公式(6)、(7)计算得α=84.2100,β=66.1650,得到矩形标志符四条边的有效子集;对有效子集进行去毛刺优化,得到用于直线拟合的原型边子集;利用相邻的原型边子集,经过最小二乘邻边垂直拟合后,计算得矩形标志符中心点坐标为(301.0384,168.1098)。与标准中心的偏差为(0.0384,0.1098)。
实例3:
获得矩形标志符初始轮廓点集S中轮廓点的个数Q=796;分割成四个轮廓子集;从轮廓子集中筛选有效子集,控制因子γ=0.59,μ=0.6,根据公式(6)、(7)计算得α=83.5800,β=65.6700,得到矩形标志符四条边的有效子集;对有效子集进行去毛刺优化,得到用于直线拟合的原型边子集;利用相邻的原型边子集,经过最小二乘邻边垂直拟合后,计算得矩形标志符中心点坐标为(301.0660,168.1403)。与标准中心的偏差为(0.0660,0.1403)。
实例4:
获得矩形标志符初始轮廓点集S中轮廓点的个数Q=818;分割成四个轮廓子集;从轮廓子集中筛选有效子集,控制因子γ=0.65,μ=0.73,根据公式(6)、(7)计算得α=85.8900,β=67.4850,得到矩形标志符四条边的有效子集;对有效子集进行去毛刺优化,得到用于直线拟合的原型边子集;利用相邻的原型边子集,经过最小二乘邻边垂直拟合后,计算得矩形标志符中心点坐标为(301.0904,168.2230)。与标准中心的偏差为(0.0904,0.2230)。

Claims (1)

1.一种最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法,其特征在于包括下述步骤:
步骤一、对N行M列的灰度图像Iorg=g(x,y)进行去噪预处理,分离出矩形标志符,得到其二值图像Ibi=f(x,y),采用canny算子进行标志符所在区域Ω的边缘提取,获取矩形标志符的初始轮廓点集S={Pi(xi,yi)|i=1,2,…,Q},式中,Q为S中轮廓点Pi的个数;
步骤二、求矩形标志符二值图像Ibi=f(x,y)的初始几何中心O1(x0,y0), i、j为矩形标志符所在区域Ω中像素点的X、Y坐标,n为像素点总个数;找出S中距离初始几何中心O1(x0,y0)最近的点E(xmin,ymin),过E、O1两点作参考直线L1,再作一经过O1并垂直于L1的参考直线L2,参考直线L1的方程为参考直线L2的方程为L1和L2将矩形标志符的初始轮廓点集S分割成四个轮廓子集Sac、Sad、Sbc和Sbd
步骤三、从轮廓子集中筛选矩形标志符四条边的有效子集,包括以下步骤:
已知矩形标志符两相邻边长之比为W:H,将对应W值的两条平行边称为W边,将对应H值的两条平行边称为H边,W边有效点集的筛选阈值H边有效点集的筛选阈值γ和μ均为控制因子,取值范围均为0.7±0.1;计算轮廓子集Sac中所有的点到参考直线L1的距离dac1、轮廓子集Sbc中所有的点到参考直线L1的距离dbc1,Pac为Sac中任一点,若dac1≤α则Pac∈Svac,若dbc1≤α则Pbc∈Svbc,其中,Svac为轮廓子集Sac中与参考直线L1相交的部分W边的有效点集,Svbc为轮廓子集Sbc中与参考直线L1相交的部分W边的有效点集,Svac与Svbc的并集Svc为矩形轮廓中与参考直线L1相交的一条完整W边的有效点集;计算轮廓子集Sad中所有的点到参考直线L1的距离dad1、轮廓子集Sbd中所有的点到参考直线L1的距离dbd1,Pad为Sad中任一点,Pbd为Sbd中任一点,若dad1≤α则Pad∈Svad,若dbd1≤α则Pbd∈Svbd,其中,Svad为轮廓子集Sad中与直线L1相交的部分W边的有效点集,Svbd为轮廓子集Sbd中与直线L1相交的部分W边的有效点集,Svad与Svbd的并集Svd为矩形轮廓中与参考直线L1相交的另一条完整W边的有效点集;计算轮廓子集Sac中所有的点到参考直线L2的距离dac2、轮廓子集Sad,设Sad中所有点到参考直线L2的距离dad2,若dac2≤β则Pac∈Shac,若dad2≤β则Pad∈Shad,其中,Shac为轮廓子集Sac中与参考直线L2相交的部分H边的有效点集,Shad为轮廓子集Sad中与参考直线L2相交的部分H边的有效点集,Shac与Shad的并集Sha为矩形轮廓中与参考直线L2相交的一条完整H边的有效点集;计算轮廓子集Sbc中所有的点到参考直线L2的距离dbc2、轮廓子集Sbd中所有的点到参考直线L2的距离dbd2,Pbc为Sbc中任一点,若dbc2≤β则Pbc∈Shbc,若dbd2≤β则Pbd∈Shbd,其中,Shbc为轮廓子集Sbc中与参考直线L2相交的部分H边的有效点集,Shbd为轮廓子集Sbd中与直线L2相交的部分H边的有效点集,Shbc与Shbd的并集Shb为矩形轮廓中与直线L2相交的另一条完整H边的有效点集;
步骤四、对矩形标志符四条边的有效点集进行优化,得到用于直线拟合的原型边子集:
设Svc中有n_vc个点pvc(xvc,yvc),则Svc的中心点Nc(xc,yc)为:
x c = 1 n _ v c Σ v c = 1 n _ v c x v c , y c = 1 n _ v c Σ v c = 1 n _ v c y v c
计算出Svc中每一点与中心点Nc构成的斜率kvc∈Kvc,式中,Kvc为Svc中每一点与中心点Nc构成的斜率集合,
将每一点斜率kvc与自适应斜率阈值比较,kvc小于δvc的点被判决为最终的原型边子集Sc
重复本步骤,获取另外三边的有效子集Svd,Sha和Shb优化后的原型边子集Sd、Sa和Sb
步骤五、利用相邻的原型边子集,进行基于最小二乘的邻边垂直拟合及精确定位,步骤如下:
设原型边子集Sa、Sb、Sc和Sd中任一条原型边的待拟合直线lj的方程为yj=kjxj+bj,其相邻垂直边的待拟合直线ljv的方程为其中kj为待拟合直线lj的斜率,bj,bjv分别为待拟合直线lj和ljv的截距,j=1,2,3,4;设基于最小二乘的目标函数式中,(xj,yj)为lj对应的原型边子集中的点,nj为点的数量;(xjv,yjv)为ljv对应的原型边子集中的点,njv为点的数量;分别对F求偏导,令解得:
k j = Σ j = 1 n j ( x j y j ) - 1 n j Σ j = 1 n j x j Σ j = 1 n j y j - Σ j v = 1 n j v ( x j v y j v ) + 1 n j v Σ j v = 1 n j v x j v Σ j v = 1 n j v y j v Σ j = 1 n j x j 2 - 1 n j ( Σ j = 1 n j x j ) 2 + Σ j v = 1 n j v y j v 2 - 1 n j v ( Σ j v = 1 n j v y j v ) 2
b j = 1 n j Σ j = 1 n j y j - k j n j Σ j = 1 n j x j
b j v = 1 n j v Σ j v = 1 n j v x j v + k j n j v Σ j v = 1 n j v y j v
将所求参数kj、bj和bjv分别代入两个待拟合直线方程中,得到矩形标志符两相邻垂直边的拟合直线方程lj和ljv,联立求解两方程,得到两条直线的交点Cj(Xj,Yj),Cj(Xj,Yj)即为矩形标志符的一个拟合顶点;
重复本步骤,用原型边子集Sa与Sc、Sa与Sd、Sb与Sc,以及Sb与Sd分别进行最小二乘垂直拟合,获得矩形标志符四个拟合顶点的坐标C1(X1,Y1)、C2(X2,Y2)、C3(X3,Y3)和C4(X4,Y4),由四个顶点坐标求得矩形标志符的中心点坐标Oc(Xcenter,Ycenter),
CN201410440285.0A 2014-09-01 2014-09-01 最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法 Active CN104200496B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410440285.0A CN104200496B (zh) 2014-09-01 2014-09-01 最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410440285.0A CN104200496B (zh) 2014-09-01 2014-09-01 最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法

Publications (2)

Publication Number Publication Date
CN104200496A CN104200496A (zh) 2014-12-10
CN104200496B true CN104200496B (zh) 2017-04-12

Family

ID=52085782

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410440285.0A Active CN104200496B (zh) 2014-09-01 2014-09-01 最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法

Country Status (1)

Country Link
CN (1) CN104200496B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107369150B (zh) * 2016-05-12 2020-10-27 株式会社理光 一种检测矩形目标的方法及矩形目标检测装置
CN109035266B (zh) * 2017-06-08 2022-11-15 杭州睿沃科技有限公司 一种利用普通摄像完成身份证便携扫描的方法
CN109902694B (zh) * 2019-02-28 2022-02-18 易思维(杭州)科技有限公司 一种方孔特征的提取方法
CN111076946B (zh) * 2020-01-02 2020-11-06 中国科学院苏州生物医学工程技术研究所 车辆轮距、轮宽、轴距、位姿、质心自动测量方法及装置
CN113256715B (zh) * 2020-02-12 2024-04-05 北京京东乾石科技有限公司 机器人的定位方法和装置
CN112327325B (zh) * 2020-09-16 2024-05-14 安歌智慧科技(上海)有限公司 一种基于特征路标的提升2d-slam精度和稳定性的方法
CN115393442A (zh) * 2022-03-02 2022-11-25 深圳市深视智能科技有限公司 一种三维相机的标定方法、装置及标定系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101574709A (zh) * 2009-06-12 2009-11-11 东北大学 一种中厚板自动转钢方法
CN101839690A (zh) * 2010-04-13 2010-09-22 河海大学常州校区 一种基于边缘拟合的片式电子元件位置误差视觉检测方法
CN101936708A (zh) * 2010-08-13 2011-01-05 河海大学常州校区 Qfp芯片的定位检测方法
CN103729655A (zh) * 2014-01-22 2014-04-16 哈尔滨工业大学 一种用于片式元件视觉定位的检测方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101574709A (zh) * 2009-06-12 2009-11-11 东北大学 一种中厚板自动转钢方法
CN101839690A (zh) * 2010-04-13 2010-09-22 河海大学常州校区 一种基于边缘拟合的片式电子元件位置误差视觉检测方法
CN101936708A (zh) * 2010-08-13 2011-01-05 河海大学常州校区 Qfp芯片的定位检测方法
CN103729655A (zh) * 2014-01-22 2014-04-16 哈尔滨工业大学 一种用于片式元件视觉定位的检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"Processive Probabilistic Hough transform for line detection";C.Galamhos et al.;《Computer Vision and Pattern Recognition,1999.IEEE Computer Society Conference on》;19990625;第1卷;554-560 *
"机器视觉中矩形几何提取和校正";王红军等;《机电工程》;20100430;第27卷(第4期);第1-4节 *

Also Published As

Publication number Publication date
CN104200496A (zh) 2014-12-10

Similar Documents

Publication Publication Date Title
CN104200496B (zh) 最小二乘邻边垂直拟合的矩形标志符高精度检测定位方法
CN107808378B (zh) 基于垂直纵横线轮廓特征的复杂结构铸件潜在缺陷检测方法
CN104915963B (zh) 一种用于plcc元件的检测与定位方法
TWI455034B (zh) 條碼辨識方法及其電腦程式產品
CN104359402A (zh) 一种用于矩形引脚元件视觉定位的检测方法
CN104376319B (zh) 一种基于各向异性高斯核提取封闭边缘图像轮廓的方法
CN110992326A (zh) 一种qfn芯片引脚图像快速倾斜校正方法
CN105023265A (zh) 鱼眼镜头下的棋盘格角点自动检测方法
CN106485749A (zh) 一种基于角点的矩形引脚元件粗定位方法
CN105551046A (zh) 车脸定位方法及装置
CN107784646A (zh) 一种路用集料的自适应检测方法
CN111462214A (zh) 一种基于Hough变换的线结构光条纹中心线提取方法
CN117576219A (zh) 大广角鱼眼镜头单次拍摄图像的相机标定设备及标定方法
CN111462119A (zh) 一种基于机器视觉的宽厚板剪切排样方法
CN110059566A (zh) 一种图像识别方法及装置
CN111476792B (zh) 一种板带钢图像轮廓的提取方法
CN117853510A (zh) 基于双边滤波和自适应阈值的Canny边缘检测方法
CN115775278B (zh) 包含局部特征约束的元件识别定位方法及系统、存储介质
Pan et al. An efficient method for skew correction of license plate
CN107833227A (zh) 一种圆形裁剪区域的绘制方法及其系统
CN107577842B (zh) 致密油气储层三维离散裂缝网络裂缝相交检测方法及系统
CN114862765A (zh) 一种细胞分层图像处理方法
CN113128247A (zh) 一种图像定位标识验证方法及服务器
CN107818292A (zh) 一种基于背散射扫描电镜的矿物颗粒识别方法及系统
CN107909563B (zh) 一种基于模板的快速Hough变换直线检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant