CN112116553A - 一种基于k-d树的无源三维点云模型缺陷识别方法 - Google Patents

一种基于k-d树的无源三维点云模型缺陷识别方法 Download PDF

Info

Publication number
CN112116553A
CN112116553A CN202010719773.0A CN202010719773A CN112116553A CN 112116553 A CN112116553 A CN 112116553A CN 202010719773 A CN202010719773 A CN 202010719773A CN 112116553 A CN112116553 A CN 112116553A
Authority
CN
China
Prior art keywords
point cloud
curvature
tree
cloud model
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010719773.0A
Other languages
English (en)
Other versions
CN112116553B (zh
Inventor
李鹏堂
石振锋
刘敏
李俊堂
宋海丰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Shimadabig Bird Industrial Co ltd Sbi
Original Assignee
Harbin Shimadabig Bird Industrial Co ltd Sbi
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Shimadabig Bird Industrial Co ltd Sbi filed Critical Harbin Shimadabig Bird Industrial Co ltd Sbi
Priority to CN202010719773.0A priority Critical patent/CN112116553B/zh
Publication of CN112116553A publication Critical patent/CN112116553A/zh
Application granted granted Critical
Publication of CN112116553B publication Critical patent/CN112116553B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/213Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
    • G06F18/2135Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on approximation criteria, e.g. principal component analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/48Extraction of image or video features by mapping characteristic values of the pattern into a parameter space, e.g. Hough transformation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于K‑D树的无源三维点云模型缺陷识别方法步骤1:建立点云模型K‑D树结构;步骤2:将两种法向量估算方法进行对比;步骤3:得出随机霍夫变换在精度上高;步骤4:估算点云模型法向量和曲率;步骤5:根据法向量阈值和曲率阈值,共同确定需要分割的区域;步骤6:选择模型中曲率值最小的点为初始种子点xi;步骤7:对于每个xi,通过点云的拓扑结构找到其K近邻点yi,计算xi与yi法线nx和ny的夹角α;步骤8:比较xi与yi的曲率kx和ky,如果ky小于kx,则将yi添加到种子点集合中;步骤9:删除xi,循环执行5到7,直到种子集合为空结束算法。

Description

一种基于K-D树的无源三维点云模型缺陷识别方法
技术领域
本发明属于缺陷识别领域;具体涉及一种基于K-D树的无源三维点云模型缺陷识别方法。
背景技术
在智能制造的大背景下,产品表面的缺陷识别是提高工业产品制造水平的关键环节。目前比较高效的产品表面缺陷识别的方法主要有五种,分别为基于磁通量、基于超声波、基于涡流、基于射线和基于机器视觉。
基于磁通量的基本原理是,首先将待检测工件通电磁化,然后将细磁粉颗粒沉积在其表面上,粉末将沿着磁力线排列,缺陷区域上的磁力线将会变形,即可通过粉末分布图案来识别缺陷。比较磁通量法的二维磁场分量,使用平行于感应磁场的y分量有效的识别出铁板背面的凹坑并估计出凹坑的大小。
基于超声波的基本原理是,超声波在工件表面传播时遇到缺陷部位会出现散射,通过波超声波传播的波形来即可确定是否存在缺陷,优点是成本低,但不能够直观的显示缺陷。使用超声波阵列识别缺陷,利用对可能散射体位置和方向的先验知识,使阵列缺陷识别的性能最大化。
基于涡流的基本原理是,导体在通电的线圈附近会产生涡流,若表面存在缺陷,则会改变涡流的强度,优点是速度快,但工件的材料需要能够导电。采用阵列式低频涡流技术提高了受热管缺陷识别的效率。
基于射线的基本原理是,将X射线或γ射线的能量注入工件中,能量与工件的物质发生交互作用,利用图像将能量与物质交互后的结果显示出来,然后判断是否存在缺陷,缺点是耗费胶片、周期性长、对人体有伤害。
基于机器视觉可以分为二维图像和三维模型,前者利用光源和图像传感器获取图像,然后通过计算机系统进行处理,在成本、准确度、实时性等方面有较大优势,但环境的光线,产品表面的材质,缺陷的形状等因素都会对产品的成像质量有影响。采用改进的Retinex算法降低了光照变化对成像的影响,对钢轨表面缺陷的图像进行了增强。以三维模型为载体的缺陷识别技术利用计算机设备进行处理,其识别的方法可以归纳为:将标准模型与待检测模型进行比较,根据两者的偏差情况识别产品表面的缺陷,如何有效并且快速的计算模型间的偏差是该技术的难点。
上述5种产品表面缺陷识别的方法均存在很大的缺陷。
发明内容
本发明提供一种基于K-D树的无源三维点云模型缺陷识别方法,在智能制造的大背景下,产品表面的缺陷识别是提高工业产品制造水平的关键环节;在没有标准模型的情况下,基于随机霍夫变换的法向量与特征值曲率估算对模型表面缺陷进行准确识别。
本发明通过以下技术方案实现:
一种基于K-D树的无源三维点云模型缺陷识别方法,所述识别方法包括以下步骤:
步骤1:建立点云模型K-D树结构;
步骤2:将主成分分析和随机霍夫变换这两种法向量估算方法进行对比;
步骤3:根据步骤2对比后得出随机霍夫变换在精度上高;
步骤4:根据步骤3的随机霍夫变换的法向量与特征值曲率估算,估算点云模型法向量和曲率;
步骤5:利用法向量阈值和曲率阈值对点云模型进行区域划分,使用待测目标表面的法线特征和曲率特征共同确定需要分割的区域;
步骤6:选择待测目标模型中曲率值最小的点为初始种子点xi
步骤7:对于每个xi,通过点云的拓扑结构找到其K领域内的近邻点yi,计算xi与yi法线nx和ny的夹角α,若α小于设定的阈值,则将yi添加到xi所在的区域;
步骤8:比较xi与yi的曲率kx和ky,如果ky小于kx,则将yi添加到种子点集合中;
步骤9:删除xi,循环执行步骤5到步骤7,直到种子集合为空结束缺陷识别。
进一步的,所述步骤2中的随机霍夫变换法向量估算方法包括以下步骤:
步骤2.1:球型累加器的纬线代表参数
Figure RE-GDA0002764961860000021
纬度圈之间的距离为定值
Figure RE-GDA0002764961860000022
经线代表参数θ,经线的分辨率取决于所在纬度圈的长度,其步长dθ的计算如下:
Figure RE-GDA0002764961860000023
Figure RE-GDA0002764961860000024
其中,
Figure RE-GDA0002764961860000025
Figure RE-GDA0002764961860000026
在[0,180°]上平均划分的个数;nθ为θ在
Figure RE-GDA0002764961860000027
平均划分的个数; lmax
Figure RE-GDA0002764961860000028
所在纬线的长度;
Figure RE-GDA0002764961860000029
Figure RE-GDA00027649618600000210
处纬线长度;
步骤2.2:计算球型累加器中取得投票最多的一点
Figure RE-GDA00027649618600000211
将其转换为确定一个选取平面次数的上界TR
步骤2.3:根据步骤2.2得到的上界TR,投票数最多的单元m1的概率为
Figure RE-GDA0002764961860000031
投票数次多的单元m2的概率为
Figure RE-GDA0002764961860000032
当概率
Figure RE-GDA0002764961860000033
的置信度区间与概率
Figure RE-GDA0002764961860000034
不相交时,即可确认投票最多的单元不会改变,停止取平面操作;根据中心极限定理,定义一个服从正态分布N(0,1)的随机变量,
Figure RE-GDA0002764961860000035
则置信区间为:
Figure RE-GDA0002764961860000036
因为pm∈[0,1],所以有:
Figure RE-GDA0002764961860000037
于是得到:
Figure RE-GDA0002764961860000038
进一步的,所述步骤2.2具体包括以下步骤:
步骤2.2.1:定义一个函数f(t),它表示第t∈{1,…,T}次选取平面并进行了霍夫变换后得到的累加器单元m∈{1,…,M},其中T为法向量估算中选取平面的总次数,M为累加器的离散单元个数;
步骤2.2.2:定义一个相互独立的随机变量Xm,t为:
Figure RE-GDA0002764961860000039
步骤2.2.3:同时记
Figure RE-GDA00027649618600000310
为投票到累加器单元m的经验概率
Figure RE-GDA00027649618600000311
由概率论得到实际概率pm与观测概率
Figure RE-GDA00027649618600000312
满足式(4):
Figure RE-GDA00027649618600000313
其中,δ∈[0,1]表示pm
Figure RE-GDA00027649618600000314
的最大距离;α∈[0,1]表示pm
Figure RE-GDA00027649618600000315
的差值不超过δ的可能性;
步骤2.2.4:因为Xm,t是独立的随机变量,通过霍夫丁不等式得到式(5):
Figure RE-GDA0002764961860000041
其中,[bt-at]为Xm,t所在区间;
步骤2.2.5:根据步骤2.2.4得到式(6):
Figure RE-GDA0002764961860000042
步骤2.2.6:因为式(5)对任意的m都满足,所以可得:
Figure RE-GDA0002764961860000043
然后可以得到式(7):
Figure RE-GDA0002764961860000044
又由式(6),Tmin满足下式:
Figure RE-GDA0002764961860000045
步骤2.2.7:使用估算法向量时取平面的次数T能够取得Tmin的最小值时,设定投票次数的上界为:
Figure RE-GDA0002764961860000046
进一步的,所述步骤2的特征值曲率估算为,首先用二次曲面拟合点云模型邻域集合 Np,采用PCA的协方差矩阵的特征值来计算曲率信息,具体为
给定采样点p的3×3协方差矩阵C;
Figure RE-GDA0002764961860000047
其中,
Figure RE-GDA0002764961860000048
是点云数据中的点,
Figure RE-GDA0002764961860000049
是大小为Np邻域的重心;协方差矩阵C的特征值的定义如下:
C·vl=λl·vl,l∈{0,1,2}
其中,C是对称且半正定的,C的所有特征值λl都是实数并且特征向量vl相互正交;特征值λl反应了pi,i∈Np沿着相应特征向量方向上的变化程度,总的变化程度是pi与其重心距离的平方和,见式(8),
Figure RE-GDA0002764961860000051
其中,v0为平面的法向量,特征值λ0定量的描述了沿平面法线的变化程度,即邻域中的点与拟合平面T(x)的偏移量;定义大小为Np的邻域中点p的曲率为沿平面法线变换程度式(8)的比值,得到式(9):
Figure RE-GDA0002764961860000052
如果式(9)为零,那么表示邻域中的点都在平面上,并且δn(p)的取值与邻域大小Np有关;
综上所述,立方体点云模型因为在平面处的曲率为零,而在尖锐特征处的曲率大于零,因此,尖锐特征部分能够区分出来。
进一步的,所述K-D树根据坐标轴将空间递归地进行分割,左右子树所存储的点各占点云模型的一半,将坐标的方差
Figure RE-GDA0002764961860000053
作为选择划分维度的依据,其中 pi∈(x,y,z)为点云模型中的一点;将点云N中坐标分量的方差最大的作为划分轴,按照此规则递归执行直到没有点时停止。
进一步的,首先以X方向作为划分轴,选取在X维度上坐标的中值,将在X维度上比中值小的点划分到左子树,反之划分到右子树,然后再将左子树和右子树以Y方向为划分轴,直到将N中所有的点划分完;
通常物体表面受损部位边缘的法向量和曲率值都会与周围的非受损区域有差异,令Q 为被检测点云模型,根据不同的区域将Q分为n个子点云Q1,Q2,…,Qn,n个子点云模型需满足三个条件:①
Figure RE-GDA0002764961860000054
②Qi是连通的区域,③当i≠j时,
Figure RE-GDA0002764961860000055
本发明的有益效果是:
1.本发明基于随机霍夫变换(PHT)的法向量估计的算法,在模型的尖锐区域估算的非常准确,并且对噪声点和异常点不敏感。
2.本发明的立方体点云模型因为在平面处的曲率为零,而在尖锐特征处的曲率大于零,所以能够很尖锐特征部分比较容易能够区分出来。
3.本发明识别的准确性好,没有错误识别的部位。
附图说明
附图1霍夫变换原理图。
附图2球型累加器原理图。
附图3本发明PCA估算法向量示意图,图3-(a)K邻域半径为0.01cm,图3-(b) K邻域半径为0.1cm。
附图4本发明PHT估算法向量示意图,图4-(a)K邻域半径为0.05cm,图4-(b) K邻域半径为0.005cm。
附图5本发明尖锐特征的曲率示意图,图5-(a)兔子点云,图5-(b)立方体点云。
附图6本发明K-D树结构,图6-(a)是k-d树的二维情况的示意图,图6-(b)是 k-d树二维情况下的二叉树表示图。
附图7本发明缺陷表面的法线。
附图8曲面的缺陷识别示意图,图8-(a)待检测点云模型,图8-(b)缺陷识别结果。
具体实施方式
下面将结合本发明实施例中的附图对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
三维空间中的平面一般可以用到坐标系原点的距离ρ,在X轴、Y轴的斜率mx和my来表示,见式(1),而在平面垂直的情况下该方法不太适用,为此可以换Hesse法线式来表示平面,即通过平面到原点距离ρ和法向量n来确定平面,见式(2),
z=mxx+mxy+ρ (1)
ρ=p·n=pxnx+pyny+pznz (2)
其中,p=(px,py,pz)为平面上的任意一点。通过n与坐标系之间的角度关系,能够将n分解,然后得到
Figure RE-GDA0002764961860000071
其中θ是n在XY平面的投影与X正向的夹角,
Figure RE-GDA0002764961860000072
是n与Z轴正向的夹角,如图1所示。
Figure RE-GDA0002764961860000073
θ和ρ定义了一个空间,该空间中
Figure RE-GDA0002764961860000074
代表着欧式空间中的一个平面。随机霍夫变换的基本思想是:在点p的邻域NP随机选择三个点p1,p2和p3,将这三个点构成的平面映射到霍夫空间中一点。平面到原点的距离ρ、角度
Figure RE-GDA0002764961860000075
和θ的计算如式(3)。
Figure RE-GDA0002764961860000076
一种基于K-D树的无源三维点云模型缺陷识别方法,所述识别方法包括以下步骤:
步骤1:建立点云模型K-D树结构;
步骤2:将主成分分析和随机霍夫变换这两种法向量估算方法进行对比;
步骤3:根据步骤2对比后得出随机霍夫变换在精度上高;
步骤4:根据步骤3的随机霍夫变换的法向量与特征值曲率估算,估算点云模型法向量和曲率;
步骤5:利用法向量阈值和曲率阈值对点云模型进行区域划分,使用待测目标表面的法线特征和曲率特征共同确定需要分割的区域;
步骤6:选择待测目标模型中曲率值最小的点为初始种子点xi
步骤7:对于每个xi,通过点云的拓扑结构找到其K领域内的近邻点yi,计算xi与yi法线nx和ny的夹角α,若α小于设定的阈值,则将yi添加到xi所在的区域;
步骤8:比较xi与yi的曲率kx和ky,如果ky小于kx,则将yi添加到种子点集合中;
步骤9:删除xi,循环执行步骤5到步骤7,直到种子集合为空结束缺陷识别。
基于随机霍夫变换(PHT)提出了一种法向量估计的算法,在模型的尖锐区域估算的非常准确,并且对噪声点和异常点不敏感。
进一步的,所述步骤2中的随机霍夫变换法向量估算方法包括以下步骤:
累加器模型的选择是PHT估算法向量的核心之一,其类型需要根据点云的特征进行选择,其每个单元用来存储霍夫空间中的点,单元的数目取决于霍夫空间离散化点数的多少。设计了每个单元都有相同的尺寸并且极坐标的分辨率依据球体位置的不同而变换的累加器,称为球型累加器,如图2所示。
步骤2.1:球型累加器的纬线代表参数
Figure RE-GDA0002764961860000081
纬度圈之间的距离为定值
Figure RE-GDA0002764961860000082
经线代表参数θ,经线的分辨率取决于所在纬度圈的长度,其步长dθ的计算如下:
Figure RE-GDA0002764961860000083
Figure RE-GDA0002764961860000084
其中,
Figure RE-GDA0002764961860000085
Figure RE-GDA0002764961860000086
在[0,180°]上平均划分的个数;nθ为θ在
Figure RE-GDA0002764961860000087
平均划分的个数; lmax
Figure RE-GDA0002764961860000088
所在纬线的长度;
Figure RE-GDA0002764961860000089
Figure RE-GDA00027649618600000810
处纬线长度;
步骤2.2:PHT算法估计点p的法向量需要其邻域NP进行T次的随机选择三点p1, p2和p3,将这三个点构成的平面映射到霍夫空间,同时在累加器中对经过霍夫变换后的点投票,直到累加器中得票数最高的点x超过设定的阈值时,即可认为x所对应的向量为点p的法向量;计算球型累加器中取得投票最多的一点
Figure RE-GDA00027649618600000811
将其转换为确定一个选取平面次数的上界TR
步骤2.3:根据步骤2.2得到的上界TR,通常判断累加器中的单元所对应的平面是否在点云中存在可以通过投票数超过阈值的大小,但实际可以在达到阈值前就能够做出判断,从而避免不必要的计算,投票数最多的单元m1的概率为
Figure RE-GDA00027649618600000812
投票数次多的单元m2的概率为
Figure RE-GDA00027649618600000813
当概率
Figure RE-GDA00027649618600000814
的置信度区间与概率
Figure RE-GDA00027649618600000815
不相交时,即可确认投票最多的单元不会改变,停止取平面操作;根据中心极限定理,定义一个服从正态分布N(0,1)的随机变量,
Figure RE-GDA00027649618600000816
则置信区间为:
Figure RE-GDA00027649618600000817
因为pm∈[0,1],所以有:
Figure RE-GDA00027649618600000818
于是得到:
Figure RE-GDA0002764961860000091
进一步的,所述步骤2.2具体包括以下步骤:
步骤2.2.1:定义一个函数f(t),它表示第t∈{1,…,T}次选取平面并进行了霍夫变换后得到的累加器单元m∈{1,…,M},其中T为法向量估算中选取平面的总次数,M为累加器的离散单元个数;
步骤2.2.2:定义一个相互独立的随机变量Xm,t为:
Figure RE-GDA0002764961860000092
步骤2.2.3:同时记
Figure RE-GDA0002764961860000093
为投票到累加器单元m的经验概率
Figure RE-GDA0002764961860000094
由概率论得到实际概率pm与观测概率
Figure RE-GDA0002764961860000095
满足式(4):
Figure RE-GDA0002764961860000096
其中,δ∈[0,1]表示pm
Figure RE-GDA0002764961860000097
的最大距离;α∈[0,1]表示pm
Figure RE-GDA0002764961860000098
的差值不超过δ的可能性;
步骤2.2.4:因为Xm,t是独立的随机变量,通过霍夫丁不等式得到式(5):
Figure RE-GDA0002764961860000099
其中,[bt-at]为Xm,t所在区间;
步骤2.2.5:根据步骤2.2.4得到式(6):
Figure RE-GDA00027649618600000910
步骤2.2.6:因为式(5)对任意的m都满足,所以可得:
Figure RE-GDA00027649618600000911
然后可以得到式(7):
Figure RE-GDA0002764961860000101
又由式(6),Tmin满足下式:
Figure RE-GDA0002764961860000102
步骤2.2.7:使用估算法向量时取平面的次数T能够取得Tmin的最小值时,设定投票次数的上界为:
Figure RE-GDA0002764961860000103
进一步的,选取具有尖锐特征无噪声的立方体点云模型,点云的数据量为599884个点,因为PCA估算用的是K邻域内的点,所以估算的准确度与邻域的大小密切相关,从图3(a)中立方体的法向量可以看到,若K邻域点数目过小会导致估计的法向量方向杂乱,明显不准确;图3(b)为PCA法向量估计算法在最优的K邻域半径下的估算结果,从图中立方体的边可以看到,点云模型光滑区域的法向量估计比较良好,但尖锐区域的结果很不理想;
图4(a)为PHT算法的法向量估算结果,当K邻域半径为0.05cm时,其结果在尖锐区域的估算仍然达不到很好的结果,通过调整K邻域半径为最优的值时,如图4(b), PHT算法的估算结果不仅在光滑区域的估算结果准确,在尖锐区域的估算也是明显优于 PCA法向量估计算法图3(b)的法向量估算结果;
PHT和PCA估算方法对比的结果表明,前者的准确度更高。
进一步的,所述步骤2的特征值曲率估算为,在三维空间中曲率是曲面的基本形状信息,它的大小反应了物体表面的凹凸程度。在几何中有很多的方法可以定义曲面一点的曲率,例如有高斯曲率(K=k1k2)、平均值曲率(H=k1+k2/2),其中,k1和k2是表面的主曲率,这两种曲率都被广泛的应用于计算曲率信息;首先用二次曲面拟合点云模型邻域集合Np,采用PCA的协方差矩阵的特征值来计算曲率信息,具体为
给定采样点p的3×3协方差矩阵C;
Figure RE-GDA0002764961860000104
其中,
Figure RE-GDA0002764961860000105
是点云数据中的点,
Figure RE-GDA0002764961860000106
是大小为Np邻域的重心;协方差矩阵C的特征值的定义如下:
C·vl=λl·vl,l∈{0,1,2}
其中,C是对称且半正定的,C的所有特征值λl都是实数并且特征向量vl相互正交;特征值λl反应了pi,i∈Np沿着相应特征向量方向上的变化程度,总的变化程度是pi与其重心距离的平方和,见式(8),
Figure RE-GDA0002764961860000111
其中,v0为平面的法向量,特征值λ0定量的描述了沿平面法线的变化程度,即邻域中的点与拟合平面T(x)的偏移量;定义大小为Np的邻域中点p的曲率为沿平面法线变换程度式(8)的比值,得到式(9):
Figure RE-GDA0002764961860000112
如果式(9)为零,那么表示邻域中的点都在平面上,并且δn(p)的取值与邻域大小Np有关;
综上所述,图5为尖锐部分曲率的可视化结果,图5(a)为兔子模型,图5(b)为立方体模型,曲率值大的点用红色进行标记,曲率低的点用灰色进行标记。在曲率估算过程中,需要对点云的邻域大小进行人为设置,这需要根据不同的点云模型的数据量、点云的密度等来不断的测试。对兔子模型这种尖锐特征比较多的点云模型,其邻域大小的确定相对比较困难,很难确定一个合适的大小,本发明通过实验得到兔子点云模型的邻域半径取值为0.5厘米时估算的结果比较准确,立方体点云模型因为在平面处的曲率为零,而在尖锐特征处的曲率大于零,因此,尖锐特征部分能够区分出来。
K-D树是构建空间中点的拓扑关系的二叉树。通过K-D树可以快速的对最近邻点进行搜索,由于点云模型所在的空间是三维的,因此本发明所用的K-D树对应也是三维的;进一步的,所述K-D树根据坐标轴将空间递归地进行分割,左右子树所存储的点各占点云模型的一半,将坐标的方差
Figure RE-GDA0002764961860000113
作为选择划分维度的依据,其中pi∈(x,y,z)为点云模型中的一点;K-D树是构建空间中点的拓扑关系的二叉树。通过K-D树可以快速的对最近邻点进行搜索,由于点云模型所在的空间是三维的,因此本发明所用的K-D树对应也是三维的,将点云N中坐标分量的方差最大的作为划分轴,按照此规则递归执行直到没有点时停止。
进一步的,首先以X方向作为划分轴,选取在X维度上坐标的中值,将在X维度上比中值小的点划分到左子树,反之划分到右子树,然后再将左子树和右子树以Y方向为划分轴,直到将N中所有的点划分完;当K=3时,分割的过程与二维相同,区别是增加了一个分割的维度;
通常物体表面受损部位边缘的法向量和曲率值都会与周围的非受损区域有差异,如图 7所示;令Q为被检测点云模型,根据不同的区域将Q分为n个子点云Q1,Q2,…,Qn,n个子点云模型需满足三个条件:①
Figure RE-GDA0002764961860000121
②Qi是连通的区域,③当i≠j时,
Figure RE-GDA0002764961860000122
在没有标准点云模型的情况下,本发明采用基于点云的法线和曲率对表面进行缺陷识别。图8(a)为待检测模型,图8(b)为缺陷识别后的模型,红色标记为识别出的缺陷部位,从图中可以看到识别的准确性比较好,没有错误识别的部位。

Claims (6)

1.一种基于K-D树的无源三维点云模型缺陷识别方法,其特征在于,所述识别方法包括以下步骤:
步骤1:建立点云模型K-D树结构;
步骤2:利用随机霍夫变换的法向量与特征值曲率估算,估算点云模型法向量和曲率;
步骤3:利用法向量阈值和曲率阈值对点云模型进行区域划分,使用待测目标表面的法线特征和曲率特征共同确定需要分割的区域;
步骤4:选择待测目标模型中曲率值最小的点为初始种子点xi
步骤5:对于每个xi,通过点云的拓扑结构找到其K领域内的近邻点yi,计算xi与yi法线nx和ny的夹角α,若α小于设定的阈值,则将yi添加到xi所在的区域;
步骤6:比较xi与yi的曲率kx和ky,如果ky小于kx,则将yi添加到种子点集合中;
步骤7:删除xi,循环执行步骤5到步骤7,直到种子集合为空,结束缺陷识别。
2.根据权利要求1所述一种基于K-D树的无源三维点云模型缺陷识别方法,其特征在于,所述步骤2中的随机霍夫变换法向量估算方法包括以下步骤:
步骤2.1:球型累加器的纬线代表参数
Figure FDA0002599534700000017
纬度圈之间的距离为定值
Figure FDA0002599534700000018
经线代表参数θ,经线的分辨率取决于所在纬度圈的长度,其步长dθ的计算如下:
Figure FDA0002599534700000011
Figure FDA0002599534700000012
其中,
Figure FDA0002599534700000019
Figure FDA00025995347000000110
在[0,180°]上平均划分的个数;nθ为θ在
Figure FDA00025995347000000115
平均划分的个数;lmax
Figure FDA00025995347000000111
所在纬线的长度;
Figure FDA00025995347000000112
Figure FDA00025995347000000113
处纬线长度;
步骤2.2:计算球型累加器中取得投票最多的一点
Figure FDA00025995347000000114
将其转换为确定一个选取平面次数的上界TR
步骤2.3:根据步骤2.2得到的上界TR,投票数最多的单元m1的概率为
Figure FDA00025995347000000116
投票数次多的单元m2的概率为
Figure FDA0002599534700000014
当概率
Figure FDA0002599534700000015
的置信度区间与概率
Figure FDA0002599534700000016
不相交时,即可确认投票最多的单元不会改变,停止取平面操作;根据中心极限定理,定义一个服从正态分布N(0,1)的随机变量,
Figure FDA0002599534700000021
则置信区间为:
Figure FDA0002599534700000022
因为pm∈[0,1],所以有:
Figure FDA0002599534700000023
于是得到:
Figure FDA0002599534700000024
3.根据权利要求2所述一种基于K-D树的无源三维点云模型缺陷识别方法,其特征在于,所述步骤2.2具体包括以下步骤:
步骤2.2.1:定义一个函数f(t),它表示第t∈{1,…,T}次选取平面并进行了霍夫变换后得到的累加器单元m∈{1,…,M},其中T为法向量估算中选取平面的总次数,M为累加器的离散单元个数;
步骤2.2.2:定义一个相互独立的随机变量Xm,t为:
Figure FDA0002599534700000025
步骤2.2.3:同时记
Figure FDA0002599534700000026
为投票到累加器单元m的经验概率
Figure FDA0002599534700000027
由概率论得到实际概率pm与观测概率
Figure FDA0002599534700000028
满足式(4):
Figure FDA0002599534700000029
其中,δ∈[0,1]表示pm
Figure FDA00025995347000000210
的最大距离;α∈[0,1]表示pm
Figure FDA00025995347000000211
的差值不超过δ的可能性;
步骤2.2.4:因为Xm,t是独立的随机变量,通过霍夫丁不等式得到式(5):
Figure FDA00025995347000000212
其中,[bt-at]为Xm,t所在区间;
步骤2.2.5:根据步骤2.2.4得到式(6):
Figure FDA0002599534700000031
步骤2.2.6:因为式(5)对任意的m都满足,所以可得:
Figure FDA0002599534700000032
然后可以得到式(7):
Figure FDA0002599534700000033
又由式(6),Tmin满足下式:
Figure FDA0002599534700000034
步骤2.2.7:使用估算法向量时取平面的次数T能够取得Tmin的最小值时,设定投票次数的上界为:
Figure FDA0002599534700000035
4.根据权利要求1所述一种基于K-D树的无源三维点云模型缺陷识别方法,其特征在于,所述步骤2的特征值曲率估算为,首先用二次曲面拟合点云模型邻域集合Np,采用PCA的协方差矩阵的特征值来计算曲率信息,具体为
给定采样点p的3×3协方差矩阵C;
Figure FDA0002599534700000036
其中,
Figure FDA0002599534700000037
是点云数据中的点,
Figure FDA0002599534700000038
是大小为Np邻域的重心;协方差矩阵C的特征值的定义如下:
C·vl=λl·vl,l∈{0,1,2}
其中,C是对称且半正定的,C的所有特征值λl都是实数并且特征向量vl相互正交;特征值λl反应了pi,i∈Np沿着相应特征向量方向上的变化程度,总的变化程度是pi与其重心距离的平方和,见式(8),
Figure FDA0002599534700000041
其中,v0为平面的法向量,特征值λ0定量的描述了沿平面法线的变化程度,即邻域中的点与拟合平面T(x)的偏移量;定义大小为Np的邻域中点p的曲率为沿平面法线变换程度式(8)的比值,得到式(9):
Figure FDA0002599534700000042
如果式(9)为零,那么表示邻域中的点都在平面上,并且δn(p)的取值与邻域大小Np有关;
综上所述,立方体点云模型因为在平面处的曲率为零,而在尖锐特征处的曲率大于零,因此,尖锐特征部分能够区分出来。
5.根据权利要求1所述一种基于K-D树的无源三维点云模型缺陷识别方法,其特征在于,所述K-D树根据坐标轴将空间递归地进行分割,左右子树所存储的点各占点云模型的一半,将坐标的方差
Figure FDA0002599534700000043
作为选择划分维度的依据,其中pi∈(x,y,z)为点云模型中的一点;将点云N中坐标分量的方差最大的作为划分轴,按照此规则递归执行直到没有点时停止。
6.根据权利要求5所述一种基于K-D树的无源三维点云模型缺陷识别方法,其特征在于,首先以X方向作为划分轴,选取在X维度上坐标的中值,将在X维度上比中值小的点划分到左子树,反之划分到右子树,然后再将左子树和右子树以Y方向为划分轴,直到将N中所有的点划分完;
通常物体表面受损部位边缘的法向量和曲率值都会与周围的非受损区域有差异,令Q为被检测点云模型,根据不同的区域将Q分为n个子点云Q1,Q2,…,Qn,n个子点云模型需满足三个条件:①
Figure FDA0002599534700000044
②Qi是连通的区域,③当i≠j时,
Figure FDA0002599534700000045
CN202010719773.0A 2020-07-23 2020-07-23 一种基于k-d树的无源三维点云模型缺陷识别方法 Active CN112116553B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010719773.0A CN112116553B (zh) 2020-07-23 2020-07-23 一种基于k-d树的无源三维点云模型缺陷识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010719773.0A CN112116553B (zh) 2020-07-23 2020-07-23 一种基于k-d树的无源三维点云模型缺陷识别方法

Publications (2)

Publication Number Publication Date
CN112116553A true CN112116553A (zh) 2020-12-22
CN112116553B CN112116553B (zh) 2022-05-10

Family

ID=73799084

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010719773.0A Active CN112116553B (zh) 2020-07-23 2020-07-23 一种基于k-d树的无源三维点云模型缺陷识别方法

Country Status (1)

Country Link
CN (1) CN112116553B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112632780A (zh) * 2020-12-24 2021-04-09 西北工业大学 一种复合材料三维模型建立方法
CN112802194A (zh) * 2021-03-31 2021-05-14 电子科技大学 一种基于点云数据的核设施高精度重构方法
CN113551622A (zh) * 2021-08-26 2021-10-26 西南交通大学 一种基于三维激光扫描的碎石颗粒表面粗糙度测量方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150199839A1 (en) * 2012-08-02 2015-07-16 Earthmine, Inc. Three-Dimentional Plane Panorama Creation Through Hough-Based Line Detection
CN105957076A (zh) * 2016-04-27 2016-09-21 武汉大学 一种基于聚类的点云分割方法及系统
CN109345523A (zh) * 2018-09-21 2019-02-15 中国科学院苏州生物医学工程技术研究所 表面缺陷检测和三维建模方法
CN109685080A (zh) * 2018-12-27 2019-04-26 中国科学院大学 基于霍夫变换与区域生长的多尺度平面提取方法
CN111311576A (zh) * 2020-02-14 2020-06-19 易思维(杭州)科技有限公司 基于点云信息的缺陷检测方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150199839A1 (en) * 2012-08-02 2015-07-16 Earthmine, Inc. Three-Dimentional Plane Panorama Creation Through Hough-Based Line Detection
CN105957076A (zh) * 2016-04-27 2016-09-21 武汉大学 一种基于聚类的点云分割方法及系统
CN109345523A (zh) * 2018-09-21 2019-02-15 中国科学院苏州生物医学工程技术研究所 表面缺陷检测和三维建模方法
CN109685080A (zh) * 2018-12-27 2019-04-26 中国科学院大学 基于霍夫变换与区域生长的多尺度平面提取方法
CN111311576A (zh) * 2020-02-14 2020-06-19 易思维(杭州)科技有限公司 基于点云信息的缺陷检测方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王丽: "基于kd_tree算法和法向量估计的点云数据精简方法", 《宿州学院学报》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112632780A (zh) * 2020-12-24 2021-04-09 西北工业大学 一种复合材料三维模型建立方法
CN112802194A (zh) * 2021-03-31 2021-05-14 电子科技大学 一种基于点云数据的核设施高精度重构方法
CN112802194B (zh) * 2021-03-31 2023-09-19 电子科技大学 一种基于点云数据的核设施高精度重构方法
CN113551622A (zh) * 2021-08-26 2021-10-26 西南交通大学 一种基于三维激光扫描的碎石颗粒表面粗糙度测量方法

Also Published As

Publication number Publication date
CN112116553B (zh) 2022-05-10

Similar Documents

Publication Publication Date Title
CN112116553B (zh) 一种基于k-d树的无源三维点云模型缺陷识别方法
McLean et al. Vanishing point detection by line clustering
Lukács et al. Faithful least-squares fitting of spheres, cylinders, cones and tori for reliable segmentation
EP2824415B1 (en) Tolerance evaluation with reduced measured points
CN106023298B (zh) 基于局部泊松曲面重建的点云刚性配准方法
CN111553409B (zh) 一种基于体素形状描述符的点云识别方法
CN111723721A (zh) 基于rgb-d的三维目标检测方法、系统及装置
CN110807781B (zh) 一种保留细节与边界特征的点云精简方法
CN107622277B (zh) 一种基于贝叶斯分类器的复杂曲面缺陷分类方法
CN106373118A (zh) 可有效保留边界和局部特征的复杂曲面零件点云精简方法
Sveier et al. Object detection in point clouds using conformal geometric algebra
EP2054835A1 (en) Target orientation
CN102506753B (zh) 基于十四点球面小波变换的不规则零件形状差异检测方法
Teutsch et al. Real-time detection of elliptic shapes for automated object recognition and object tracking
WO2018131163A1 (ja) 情報処理装置、データベース生成装置、方法、プログラム、及び記憶媒体
CN105139013A (zh) 一种融合形状特征和兴趣点的物体识别方法
CN106778491A (zh) 人脸3d特征信息的获取方法及设备
CN116843742B (zh) 一种针对装载黑色煤车辆的点云配准后堆料体积的计算方法及系统
CN117292181A (zh) 基于3d点云处理的钣金件孔组分类及全尺寸测量方法
Bonde et al. Multi scale shape index for 3d object recognition
Spek et al. A fast method for computing principal curvatures from range images
CN105678708B (zh) 一种适用于已配准多视角有序点云的整体优化方法
Huber-Mörk et al. Automatic coin classification and identification
CN112184616A (zh) 一种基于八叉树的有源三维点云模型缺陷识别方法
Walter et al. Susan 3d operator, principal saliency degrees and directions extraction and a brief study on the robustness to noise

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant