CN105046694A - 一种基于曲面拟合系数特征的点云快速配准方法 - Google Patents

一种基于曲面拟合系数特征的点云快速配准方法 Download PDF

Info

Publication number
CN105046694A
CN105046694A CN201510381926.4A CN201510381926A CN105046694A CN 105046694 A CN105046694 A CN 105046694A CN 201510381926 A CN201510381926 A CN 201510381926A CN 105046694 A CN105046694 A CN 105046694A
Authority
CN
China
Prior art keywords
point
corresponding relation
cloud
key
coarse
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510381926.4A
Other languages
English (en)
Other versions
CN105046694B (zh
Inventor
陆军
方莹
王成成
夏桂华
蔡成涛
朱齐丹
韩吉瑞
邵强
欧林渠
郭聪玲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Engineering University
Original Assignee
Harbin Engineering University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Engineering University filed Critical Harbin Engineering University
Priority to CN201510381926.4A priority Critical patent/CN105046694B/zh
Publication of CN105046694A publication Critical patent/CN105046694A/zh
Application granted granted Critical
Publication of CN105046694B publication Critical patent/CN105046694B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/04Indexing scheme for image data processing or generation, in general involving 3D image data

Abstract

本发明公开了一种基于曲面拟合系数特征的点云快速配准方法。比较不同大小邻域的曲率均值差异,选取差异值超过所设阈值的点作为关键点,并自适应的根据该差异值选择关键点候选点。关键点处取多个邻域进行曲面拟合再把曲面系数作为该点的特征描述子。通过比较关键点特征描述子间距离选取距离最小的关键点对作为初始对应关系。通过初始对应关系得到的变换矩阵调整对应关系的位姿,使其基本重合,设定距离阈值去除距离大于阈值的对应关系。接着用聚类方法使对应关系分布均匀,计算优化后的对应关系的协方差矩阵,再对其进行奇异值分解得到最终变换矩阵。本发明具有配准快速、精度高和抗噪能力好的优点。

Description

一种基于曲面拟合系数特征的点云快速配准方法
技术领域
本发明属于结构光三维测量、机器视觉领域,尤其涉及一种基于曲面拟合系数特征的点云快速配准方法。
背景技术
随着计算机产业的不断升级,各种计算设备越来越强大,低成本高质量的获取物体点云成为可能,从而推动了点云配准技术在逆向工程、游戏娱乐、医疗图像及工业检测等领域的发展。受点云获取设备视角及被测物体本身形状等因素的影响,单次测量难以得到物体的完整点云,通常是通过分次测量再拼接的方法来实现这一过程,即运用点云配准技术把多次测量的点云拼接到同一个坐标系下形成一个完整的物体点云。各领域的应用需求推动了点云配准技术的快速发展,其中Besl等人提出的迭代最近点(ICP,IterativeClosestPoint)算法和基于几何特征的拼接算法较热。迭代最近点算法以其简单易行,配准精度高而被广泛研究,但该算法对初始位置和点云重合程度要求较高,计算较为耗时,尽管诸多学者对此进行改进上述问题依然存在。
发明内容
本发明的目的是提供配准快速、精度高和抗噪能力好的,一种基于曲面拟合系数特征的点云快速配准方法。
一种基于曲面拟合系数特征的点云快速配准方法,包括以下步骤,
步骤一:输入目标点云P和源点云Q,通过曲率均值差值找出目标点云P的关键点集Pkey和源点云Q的关键点集Qkey
步骤二:计算关键点处的特征描述子,通过选取关键点附近三个不同大小的邻域进行曲面拟合,以曲面系数作为该关键点的特征描述子,得到关键点集Pkey的特征描述子集MP,以及关键点集Qkey的特征描述子集MQ
步骤三:比较目标点云P和源点云Q关键点处特征描述子的距离,选取特征描述子距离最小的关键点对作为初步的对应关系;
步骤四:去除初步对应关系中的错误对应关系;
步骤五:对上步得到的对应关系用聚类的方法使其分布均匀;
步骤六:对聚类处理后的对应关系求取最终的平移矩阵和旋转矩阵。
本发明一种基于曲面拟合系数特征的点云快速配准方法,还可以包括:
1、步骤一中通过曲率均值差值找出关键点的方法为:
(1)输入目标点云P={pi|i=1…n},其中pi为点云P中的点,n为点云点的总个数,pi坐标为(xi,yi,zi),pi点邻域曲面的曲率为:
k i = λ 1 λ 1 + λ 2 + λ 3
为以pi为中心,r0为半径的邻域,是邻域的形心,pj为该邻域中的点,m为邻域中三维点的总数,在该邻域内的协方差矩阵E为:
E = 1 m Σ j = 1 m ( p j - p ‾ ) ( p j - p ‾ ) T
p ‾ = 1 m Σ j = 1 m p j
对协方差矩阵E奇异值分解可得特征根λk,k=1,2,3且λ1≤λ2≤λ3,及与之相对应的特征向量vk,k=1,2,3;
(2)初始化点云中点的标志位,把全部标志位置1,即flgi=1,i=1,2,…n;
(3)取点云中一点pi,依据pi点的标志位跳转,等于1则继续到步骤(4),等于0则跳转到步骤(6);
(4)以pi点为中心取两个不同半径的邻域r1<r2,计算两个邻域的曲率均值,比较pi点的曲率与较小邻域曲率均值的差异η,判断差异η的是否大于阈值,如果大于阈值,该点是为噪声点跳转至步骤(6),否则该点不是噪声点,继续到步骤(5);
(5)计算点pi的邻域曲率均值差异值ξ,并根据差异值ξ筛选出关键点并且修改该点较小邻域内所有点的标志位flg,
如果ξ≥c2则该点为不可信点,全部flgj=1;c2>ξ≥c1则该点为关键点,全部flgj=1;c1>ξ≥c0则该点为过渡点,flgj部分取0;c0>ξ则该点为非关键点,全部flgj=0;flgj,j=1,2,…m为p点较小邻域点云中pj点处的标志位,c0、c1、c2为判断曲率变化大小的阈值;
(6)是否遍历完全部点云中的点,是则退出,得到目标点云P的关键点集Pkey,否则跳转到步骤(3);
输入源点云Q,采用上述步骤(1)到(6)相同方法得到源点云的关键点集Qkey
2、关键点pi处的特征描述子为:
M P i = &lsqb; X o 1 T , X o 2 T , X o 3 T &rsqb;
i=1,2,3,为关键点pi周围三个邻域分别进行拟合得到的三组曲面系数。
3、求得初步的对应关系的方法为:
建立目标点云P和源点云Q关键点处特征描述子的距离:
&delta; p i q j = &Sigma; k = 1 15 a b s ( M P p i k - M Q q j k )
其中表示关键点pi和qj对应特征描述子距离,表示pi点特征描述子中第k项的值,表示属于源点云关键点集Qkey的qj点特征描述子中第k项的值;
取特征描述子集MP中pi点的特征描述子遍历MQ得到使得两描述子距离最小的项得到对应描述子从而可以找到对应点qj
如果小于阈值c3,则把pi与qj作为目标点云P和源点云Q中的一对匹配点,遍历目标点云的关键点的特征描述子集MP中所有特征向量,找到两片点云的初始对应点集Pcoarse和Qcoarse,两点集一一对应,分别属于目标点云P和源点云Q,得到初步的对应关系。
4、对初步对应关系进行初配准的方法为:
(1)通过初步对应关系,确定初步平移矩阵Tcoarse=Cn-RcoarseCm和初步旋转矩阵Rcoarse=UVT,其中Cm和Cn为初步对应关系的质心,
C m = 1 k &Sigma; i = 1 k P coarse i
C n = 1 k &Sigma; i = 1 k Q coarse i
E 3 &times; 3 &prime; = 1 k &Sigma; i = 1 k ( P coarse i - C m ) ( Q coarse i - C n ) T
其中,k为对应关系的对数,奇异值分解该协方差阵E′可以求得E′=UΛVT
(2)对初步对应关系进行位姿调整,
P′coarse=Rcoarse·Pcoarse+Tcoarse
确定距离阈值d
d = 1 k &Sigma; i = 1 k | P coarse i &prime; - Q coarse i |
(3)求取调整位姿之后的对应关系的距离
&rho; = | P coarse i &prime; - Q coarse i |
根据距离阈值去除对应关系中的错误对应关系,如果对应关系的距离大于距离阈值,则去除该对对应关系,否则保留该对对应关系。
5、用聚类的方法使对应关系分布均匀的方法为:
(1)取点该点为中心,r4为半径在点集Pprecise中寻找属于该邻域的点及其对应关系,根据描述子间距离δ,选择对应关系的距离在该邻域最小的作为该区域点云的对应关系;
(2)遍历集合Pprecise中的点,重复步骤(1)操作。
有益效果:
通过自适应曲率均值差异关键点算法提取关键点,既利用邻域信息来提高抗干扰能力,又自适应的选取关键点候选点减少关键点提取时间。优异的关键点为后续步骤提供了基石。以多邻域曲面拟合系数为特征能够以较小的计算量最大程度的提取出关键点周围的点的空间分布信息,同时又有较好的抗噪性能。用RANSAC算法去除误点后的对应点的质心连线向量作参考对对应关系做进一步筛选,很好的保证了对应关系的质量。最后聚类分选方法的引入使得对应关系分布均匀。该配准方法抗噪能力强、精度较高,并且计算量较小,适合于实时测量应用。
附图说明
图1为本发明方法流程图。
图2点云初始位置图,图2(a)为Bunny点云两个不同视角的初始位置,图2(b)为Dragon点云两个不同视角的初始位置,图2(c)为Happy_backdrop点云两个不同视角的初始位置。
图3关键点分布图,图3(a)为Bunny关键点提取效果图,图3(b)为Dragon关键点提取效果图,图3(c)为Happy_backdrop的关键点提取效果图。
图4对应关系的演变过程图,图4(a)为Bunny点云初始对应关系图,图4(b)为Bunny点云错误对应关系去除后的对应关系图,图4(c)为Bunny点云最终对应关系图。
图5三组点云配准结果。图5(a)为Bunny点云模型的最终匹配效果图及局部放大图,图5(b)为Dragon点云模型的最终匹配效果图及局部放大图,图5(c)为Happy_backdrop点云模型的最终匹配效果图及局部放大图。
图6(a)添加10%噪声配准结果图,图6(b)添加25%噪声配准结果图,图6(c)添加40%噪声配准结果图。
图7配准参数及结果数据表。
图8为Dragon模型在10%、25%、40%的噪声情况下结果数据表。
具体实施方式
下面将结合附图对本发明做进一步详细说明。
本发明的目的是公开一种以曲面拟合系数为特征的点云快速配准方法。首先设计了自适应多邻域曲率均值差关键点提取算法,找出点云表面变化明显而非噪声的点作为关键点,通过计算不同半径大小的两个邻域曲率均值,依据两均值差异大小决定该点是否为关键点及自适应的选择余下作为关键点的候选点。再以关键点三个不同半径邻域的曲面拟合系数为关键点处的特征描述子。通过比较两片点云各关键点的特征描述子间的距离,选取描述子间距离最小的对应点作为初始匹配点,由初始对应关系进行初次配准,设定距离阈值进行错误对应关系去除。引入聚类方法使所得精确匹配点对信息分布均匀。最后通过奇异值分解算法得到用于拼接的平移旋转矩阵。
本发明的具体实施步骤是,如图1所示:
1)输入点云,找出关键点。通过候选点处两个大小不同邻域的曲率均值差值筛选出点云曲率变化明显而非噪声的点作为关键点。同时依据曲率变化差值的大小选择出后续关键点的候选点,减少不必要的计算。
2)计算关键点处的特征描述子。通过选取关键点周围三个不同大小的邻域分别进行曲面拟合,把曲面系数作为该关键点的特征描述子。
3)初步确定对应关系。比较两片点云关键点特征描述子的距离,选取特征描述子距离最小的关键点对作为初步的对应关系。
4)初配准及筛选对应关系。计算初始对应关系的协方差矩阵,再对协方差阵进行奇异值分解得到变换矩阵,由该变换矩阵对初始对应关系进行初配准。设定距离阈值去除大于阈值的对应关系。
5)对应关系聚类优化。用聚类的方法使对应关系分布均匀。
6)二次配准。通过奇异值分解由最终对应关系得到的协方差矩阵得到拼接矩阵。
本发明配准用的点云通过激光三角测距仪获得,使用Bunny、Dragon和Happy_backdrop三组点云进行配准操作说明,并配有相应图片。图2中(a)、(b)、(c)分别为Bunny、Dragon和Happy_backdrop三组点云两个不同视角的初始位置。
步骤1:输入目标点云P和源点云Q,通过曲率均值差值自适应算法找出关键点。算法流程如下,
1)取目标点云P,计算点云中所有点的曲率值。
给定点集P={pi|i=1…n},其中pi为点云P中的点,n为点云点的总个数。为以pi为中心,r0为半径的邻域,本发明中该邻域半径为0.002m。在该邻域内构造协方差矩阵E:
E = 1 m &Sigma; j = 1 m ( p j - p &OverBar; ) ( p j - p &OverBar; ) T - - - ( 1 )
p &OverBar; = 1 m &Sigma; j = 1 m p j - - - ( 2 )
其中,是邻域的形心,pj为该邻域中的点,m为邻域中三维点的总数。协方差矩阵E为半正定矩阵,由奇异值分解可得特征根λk(k=1,2,3且λ1≤λ2≤λ3)及与之相对应的特征向量vk(k=1,2,3)。其中v1可以看作邻域曲面上的法向量ni,其他两向量构成与该法向量垂直的平面。pi点邻域曲面的曲率近似为:
k i = &lambda; 1 &lambda; 1 + &lambda; 2 + &lambda; 3 - - - ( 3 )
遍历目标点云P中所有的点,由式(1)-(3)计算得到目标点云P中所有点的曲率值。
2)初始化点云中点的标志位,把全部标志位置1。即flgi=1,(i=1,2,…n)。
3)任意取点云中一点pi,依据pi点的标志位跳转。等于1则继续到步骤4),等于0则跳转到6)。
4)以pi点为中心取两个不同半径大小的邻域r1<r2(本发明中r1=0.001m,r2=0.005m)计算两个邻域的曲率均值。比较pi点的曲率与较小邻域曲率均值的差异大小η,根据η的大小判断该点是否为噪声点,如果不是噪声点则继续到5),否则跳转至6)。
k 1 &OverBar; = 1 m 1 &Sigma; i = 1 m 1 k i , ( k i &Element; N r 1 ( p i ) ) - - - ( 4 )
k 2 &OverBar; = 1 m 2 &Sigma; i = 1 m 2 k i , ( k i &Element; N r 2 ( p i ) ) - - - ( 5 )
其中,c为判断该点是否为噪声点的阈值,本发明中c=0.15。ki为步骤1计算得到的点的曲率值,m1、m2分别为邻域内总的点数,η表示pi点的曲率与它的邻域曲率均值的差异值。
5)计算pi的的邻域曲率均值差异值ξ,并根根据ξ值筛选出关键点并且修改该点较小邻域内所有点的标志位flg。据如果ξ≥c2则该点为不可信点,全部flgj=1;c2>ξ≥c1则该点为关键点,全部flgj=1;c1>ξ≥c0则该点为过渡点,flgj部分取0;c0>ξ则该点为非关键点,全部flgj=0。
其中,为pi点在其邻域中由式(4)、(5)计算得到的曲率均值。flgj(j=1,2,…m1)为p点较小邻域点云中pj点处的标志位。c0、c1、c2为判断曲率变化大小的阈值,取值依次为:0.008、0.3、0.8。
6)是否遍历完全部点云中的点,是则退出,否则跳转到3)。
由上述过程即可得到目标点云P的关键点集Pkey。取出源点云Q,重复上述过程1)到6)选择出源点云的关键点集Qkey。关键点聚集于曲率变化较大处,而并非变化剧烈不可靠的点,图3中(a)、(b)、(c)依次对应Bunny、Dragon和Happy_backdrop的关键点提取效果图,由图可以看出关键点分布情况是合理的。
步骤2:计算关键点处的特征描述子。
取目标点云P和目标点云的关键点集Pkey,在Pkey中取一点pi,以pi为中心分别以三个不同的半径roi在目标点云P中用kd-tree算法进行最近邻搜索,得到点pi附近三个不同大小的邻域其中,roi(i=1,2,3且ro1<ro2<ro3),本发明中ro3=0.007m,ro2和ro1分别为ro3的2/3和1/3,分别把邻域内点pj的全局坐标(xj,yj,zj)映射到pi局部坐标系的局部坐标(uj,vj,hj),然后分别进行曲面拟合。设用于曲面拟合的曲面方程表示如下:
h(u,v)=au2+buv+cv2+du+ev(8)
由步骤1中式(1)和(2),通过奇异值分解矩阵E已经得到pi点邻域的三个相互垂直向量v1、v2、v3。把v1看作局部坐标系Z轴,v2、v3依次作为X轴和Y轴。则局部坐标可由如下关系获得:
u j = ( x j - x p i ) d o t ( v 2 ) | v 2 | - - - ( 9 )
v j = ( y j - y p i ) d o t ( v 3 ) | v 3 | - - - ( 10 )
h j = ( z j - z p i ) d o t ( v 1 ) | v 1 | - - - ( 11 )
其中,为点pi的全局坐标,(xj,yj,zj)为邻域内点pj的全局坐标,相应的(uj,vj,zj)为pj点在坐标系v2v3v1下的局部坐标。dot为点积符号。
为了得到曲面拟合的系数a、b、c、d、e,记
X o i = &lsqb; a , b , c , d , e &rsqb; T - - - ( 12 )
B o i = &lsqb; h 1 , h 2 , ... h k &rsqb; - - - ( 13 )
A o i = u 1 2 u 1 v 1 v 1 2 u 1 v 1 u 2 2 u 2 v 2 v 2 2 u 2 v 2 ... ... ... ... ... u k 2 u k v k v k 2 u k v k k &times; 5 - - - ( 14 )
由式 A o i X o i = B o i 得,
X o i = ( A o i T A o i ) - 1 A o i T B o i - - - ( 15 )
其中,oi=o1,o2,o3为不同半径邻域的标识符。根据式(8)-(15)对所取的三个邻域分别进行拟合可得到三组曲面系数分别对进行归一化合并为15维向量作为关键点pi处的特征描述子。
遍历Pkey中所有的点,得到关键点集Pkey的特征描述子集MP。同理,取源点云Q和源点云的关键点集Qkey,用同样的方法计算得到源点云关键点集的特征描述子集MQ
步骤3:通过特征描述子间的距离确定对应关系。
为描述特征描述子间的相似程度,记特征描述子间距离为:
&delta; p i q j = &Sigma; k = 1 15 a b s ( M P p i k - M Q q j k ) - - - ( 16 )
其中表示关键点pi和qj对应特征描述子距离,表示pi点特征描述子中第k项的值。与之相似,表示属于源点云关键点集Qkey的qj点特征描述子中第k项的值。确定关键点间初始对应关系的具体过程如下:
1)取特征描述子集MP中pi点的描述子根据(16)式遍历MQ得到使得两描述子距离最小的项得到对应描述子描述子与关键点是一一对应的,从而可以找到对应点qj
2)如果小于阈值c3(本发明中c3为0.02),则把pi与qj视为源点云与目标点云中的一对匹配点,遍历目标点云的关键点的特征描述子集MP中所有特征向量,找到两片点云的初始对应点集Pcoarse和Qcoarse,两点集一一对应,分别属于目标点云P和源点云Q。
步骤4:初配准后错误对应去除。
由于噪声的存在,并不是所有的对应关系都是正确的,所以需要对错误对应关系进行去除以提高最后的配准效率和精度。在两不同视角点云位姿相差较大时,各匹配点对间的距离差异较小,在此状态下通过距离阈值很难区分正确对应点对与错误对应点对。然而当把两点云平移变换到基本重合的位置时,正确对应关系与错误对应关系的距离差异度将放大,设定距离阈值进行对应关系筛选能够获得较好效果。
由初始对应关系奇异值分解得到初始的变换矩阵,对初始对应点对进行初配准,以变换后对应关系的平均距离作为阈值去除大于该阈值的对应关系。描述如下:
由步骤3已经得到的初步的对应关系点集Pcoarse和Qcoarse,得到他们之间的协方差阵,
C m = 1 k &Sigma; i = 1 k P coarse i - - - ( 17 )
C n = 1 k &Sigma; i = 1 k Q coarse i - - - ( 18 )
E 3 &times; 3 &prime; = 1 k &Sigma; i = 1 k ( P coarse i - C m ) ( Q coarse i - C n ) T - - - ( 19 )
其中,k为对应关系的对数,奇异值分解该协方差阵E′可以求得E′=UΛVT,则初步转矩阵Rcoarse=UVT,初步平移矩阵Tcoarse=Cn-RcoarseCm。Pcoarse经过变换后的点集P′coarse为:
P′coarse=Rcoarse·Pcoarse+Tcoarse(20)
以变换后初始对应关系平均距离d为距离阈值,去除大于距离阈值的对应关系得到初始对应关系的子集:Pprecise和Qprecise。即:
d = 1 k &Sigma; i = 1 k | P coarse i &prime; - Q coarse i | - - - ( 21 )
其中,k为初始对应关系的对数。||表示向量的模。d为变换后初始对应关系平均距离。
步骤5:引入聚类方法对对应关系进行进一步优化。
经过上述对应关系去除,对应关系已基本正确,但得到的对应关系数量较大并且分布并不合理,在几何特征明显的区域对应关系相对集中,而在相对平坦的区域则分布较少。这样的分布最后会使得配准结果在对应关系明显区域结合的较好而对应关系较少区域出现间隙,从而影响到最终整体配准效果。
取一点以该点为中心,r4为半径在点集Pprecise中寻找属于该邻域的点(本发明r4=0.002m),Pprecise和Qprecise是一一对应的,在邻域内找到多少个点就找到了多少对对应关系。根据式(16)中描述子间距离δ,选择距离在该邻域最小的那个对应关系作为该区域点云的对应关系保留,其他的属于该区域的对应关系则舍弃。然后在该区域外继续取点 按照前述规则选取该区域的最佳对应关系。依次取点直到Pprecise中全部的点取完得到最终的分布合理对应关系作为计算旋转矩阵的输入。
步骤6:二次配准。
经过步骤4和步骤5对所得对应关系的处理,最终的对应关系变的精确合理,图4给出了对应关系的演变过程。
通过最终的对应关系由式(17)-(19)得到他们之间的协方差矩阵E,对协方差阵E进行奇异值分解得到最终的平移旋转矩阵。得到了平移旋转矩阵就可以把两片点云平移旋转到一起,从而完成拼接过程。
图5依次为Bunny、Dragon和Happy_backdrop点云模型的最终匹配效果图及局部放大图,图7为这几个模型的配准参数及结果数据表。从图5和图7可以看出各点云的配准视觉效果良好,精度较高,全部的模型配准精度都达到了e-006级,并且点云个数较少的Bunny、Dragon用时才3秒左右,而点数较多的Happy_backdrop模型也只用了9.184秒。
图6中(a)、(b)、(c)给出了Dragon模型在人工分别加入10%、25%、40%的噪声情况下的配准结果,图8给出了Dragon模型在10%、25%、40%的噪声情况下结果数据表。从配准结果图片和表格数据可以看出,本发明所用方法对噪声并不敏感,在加入噪声高达40%的情况下依然能够获得不错的配准结果,并且配准精度仍保持e-006数量级。
综上所述,曲面拟合系数为特征的点云快速配准方法无论在配准速度、精度还是抗噪声性能上都表现良好,是一种非常好的点云配准方法,能够满足实时三维测量应用的需求。
应三维数据测量的需要,本发明设计了一种以曲面拟合系数为特征的快速点云配准方法。比较不同大小邻域的曲率均值差异,选取差异值超过所设阈值的点作为关键点,并自适应的根据该差异值选择关键点候选点。关键点处取多个邻域进行曲面拟合再把曲面系数作为该点的特征描述子。通过比较关键点特征描述子间距离选取距离最小的关键点对作为初始对应关系。通过初始对应关系得到的变换矩阵调整对应关系的位姿,使其基本重合,设定距离阈值去除距离大于阈值的对应关系。接着用聚类方法使对应关系分布均匀,计算优化后的对应关系的协方差矩阵,再对其进行奇异值分解得到最终变换矩阵。实验结果表明,该方法配准精度较高,抗干扰性能强,并且运行速度快,适合于实时三维测量应用。

Claims (6)

1.一种基于曲面拟合系数特征的点云快速配准方法,特征在于:包括以下步骤,
步骤一:输入目标点云P和源点云Q,通过曲率均值差值找出目标点云P的关键点集Pkey和源点云Q的关键点集Qkey
步骤二:计算关键点处的特征描述子,通过选取关键点附近三个不同大小的邻域进行曲面拟合,以曲面系数作为该关键点的特征描述子,得到关键点集Pkey的特征描述子集MP,以及关键点集Qkey的特征描述子集MQ
步骤三:比较目标点云P和源点云Q关键点处特征描述子的距离,选取特征描述子距离最小的关键点对作为初步的对应关系;
步骤四:去除初步对应关系中的错误对应关系;
步骤五:对上步得到的对应关系用聚类的方法使其分布均匀;
步骤六:对聚类处理后的对应关系求取最终的平移矩阵和旋转矩阵。
2.根据权利要求1所述的一种基于曲面拟合系数特征的点云快速配准方法,特征在于:所述的步骤一中通过曲率均值差值找出关键点的方法为:
(1)输入目标点云P={pi|i=1…n},其中pi为点云P中的点,n为点云点的总个数,pi坐标为(xi,yi,zi),pi点邻域曲面的曲率为:
k i = &lambda; 1 &lambda; 1 + &lambda; 2 + &lambda; 3
为以pi为中心,r0为半径的邻域,是邻域的形心,pj为该邻域中的点,m为邻域中三维点的总数,在该邻域内的协方差矩阵E为:
E = 1 m &Sigma; j = 1 m ( p j - p &OverBar; ) ( p j - p &OverBar; ) T
p &OverBar; = 1 m &Sigma; j = 1 m p j
对协方差矩阵E奇异值分解可得特征根λk,k=1,2,3且λ1≤λ2≤λ3,及与之相对应的特征向量vk,k=1,2,3;
(2)初始化点云中点的标志位,把全部标志位置1,即flgi=1,i=1,2,…n;
(3)取点云中一点pi,依据pi点的标志位跳转,flgpi等于1则继续到步骤(4),flgpi等于0则跳转到步骤(6);
(4)以pi点为中心取两个不同半径的邻域r1<r2,计算两个邻域的曲率均值,比较pi点的曲率与较小邻域曲率均值的差异η,判断差异η的是否大于阈值,如果大于阈值,该点是为噪声点跳转至步骤(6),否则该点不是噪声点,继续到步骤(5);
(5)计算点pi的邻域曲率均值差异值ξ,并根据差异值ξ筛选出关键点并且修改该点较小邻域内所有点的标志位flg,
如果ξ≥c2则该点为不可信点,全部flgj=1;c2>ξ≥c1则该点为关键点,全部flgj=1;c1>ξ≥c0则该点为过渡点,flgj部分取0;c0>ξ则该点为非关键点,全部flgj=0;flgj,j=1,2,…m为p点较小邻域Nr1(pi)点云中pj点处的标志位,c0、c1、c2为判断曲率变化大小的阈值;
(6)是否遍历完全部点云中的点,是则退出,得到目标点云P的关键点集Pkey,否则跳转到步骤(3);
输入源点云Q,采用上述步骤(1)到(6)相同方法得到源点云的关键点集Qkey
3.根据权利要求1所述的一种基于曲面拟合系数特征的点云快速配准方法,特征在于:所述的关键点pi处的特征描述子为:
M P i = &lsqb; X o 1 T , X o 2 T , X o 3 T &rsqb;
i=1,2,3,为关键点pi周围三个邻域分别进行拟合得到的三组曲面系数。
4.根据权利要求1所述的一种基于曲面拟合系数特征的点云快速配准方法,特征在于:所述的求得初步的对应关系的方法为:
建立目标点云P和源点云Q关键点处特征描述子的距离:
&delta; p i q j = &Sigma; k = 1 15 a b s ( M P p i k - M Q q j k )
其中表示关键点pi和qj对应特征描述子距离,表示pi点特征描述子中第k项的值,表示属于源点云关键点集Qkey的qj点特征描述子中第k项的值;
取特征描述子集MP中pi点的特征描述子遍历MQ得到使得两描述子距离最小的项得到对应描述子从而可以找到对应点qj
如果小于阈值c3,则把pi与qj作为目标点云P和源点云Q中的一对匹配点,遍历目标点云的关键点的特征描述子集MP中所有特征向量,找到两片点云的初始对应点集Pcoarse和Qcoarse,两点集一一对应,分别属于目标点云P和源点云Q,得到初步的对应关系。
5.根据权利要求1所述的一种基于曲面拟合系数特征的点云快速配准方法,特征在于:所述的对初步对应关系进行初配准的方法为:
(1)通过初步对应关系,确定初步平移矩阵Tcoarse=Cn-RcoarseCm和初步旋转矩阵Rcoarse=UVT,其中Cm和Cn为初步对应关系的质心,
C m = 1 k &Sigma; i = 1 k P coarse i
C n = 1 k &Sigma; i = 1 k Q coarse i
E 3 &times; 3 &prime; = 1 k &Sigma; i = 1 k ( P coarse i - C m ) ( Q coarse i - C n ) T
其中,k为对应关系的对数,奇异值分解该协方差阵E′可以求得E′=UΛVT
(2)对初步对应关系进行位姿调整,
P′coarse=Rcoarse·Pcoarse+Tcoarse
确定距离阈值d
d = 1 k &Sigma; i = 1 k | P coarse i &prime; - Q coarse i |
(3)求取调整位姿之后的对应关系的距离
&rho; = | P coarse i &prime; - Q coarse i |
根据距离阈值去除对应关系中的错误对应关系,如果对应关系的距离大于距离阈值,则去除该对对应关系,否则保留该对对应关系。
6.根据权利要求1所述的一种基于曲面拟合系数特征的点云快速配准方法,特征在于:所述的用聚类的方法使对应关系分布均匀的方法为:
(1)取点该点为中心,r4为半径在点集Pprecise中寻找属于该邻域的点及其对应关系,根据描述子间距离δ,选择对应关系的距离在该邻域最小的作为该区域点云的对应关系;
(2)遍历集合Pprecise中的点,重复步骤(1)操作。
CN201510381926.4A 2015-07-02 2015-07-02 一种基于曲面拟合系数特征的点云快速配准方法 Active CN105046694B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510381926.4A CN105046694B (zh) 2015-07-02 2015-07-02 一种基于曲面拟合系数特征的点云快速配准方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510381926.4A CN105046694B (zh) 2015-07-02 2015-07-02 一种基于曲面拟合系数特征的点云快速配准方法

Publications (2)

Publication Number Publication Date
CN105046694A true CN105046694A (zh) 2015-11-11
CN105046694B CN105046694B (zh) 2018-08-17

Family

ID=54453212

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510381926.4A Active CN105046694B (zh) 2015-07-02 2015-07-02 一种基于曲面拟合系数特征的点云快速配准方法

Country Status (1)

Country Link
CN (1) CN105046694B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108133226A (zh) * 2017-11-27 2018-06-08 西北工业大学 一种基于harris改进的三维点云特征提取方法
CN108303037A (zh) * 2018-01-31 2018-07-20 广东工业大学 一种基于点云分析的工件表面形状差异的检测方法及装置
CN108564096A (zh) * 2018-04-26 2018-09-21 电子科技大学 一种邻域拟合rcs序列特征提取方法
CN109544612A (zh) * 2018-11-20 2019-03-29 西南石油大学 基于特征点几何表面描述的点云配准方法
CN109685841A (zh) * 2019-01-03 2019-04-26 上海狮迈科技有限公司 三维模型与点云的配准方法及系统
CN109766903A (zh) * 2018-08-13 2019-05-17 西安理工大学 一种基于曲面特征的点云模型曲面匹配方法
CN109887015A (zh) * 2019-03-08 2019-06-14 哈尔滨工程大学 一种基于局部曲面特征直方图的点云自动配准方法
CN110211167A (zh) * 2019-06-14 2019-09-06 北京百度网讯科技有限公司 用于处理点云数据的方法和装置
CN111161331A (zh) * 2019-12-25 2020-05-15 盈嘉互联(北京)科技有限公司 一种bim模型和gis模型配准方法
CN112912756A (zh) * 2019-09-17 2021-06-04 深圳市大疆创新科技有限公司 点云滤噪的方法、测距装置、系统、存储介质和移动平台
CN113450269A (zh) * 2021-05-24 2021-09-28 南京航空航天大学 一种基于3d视觉的点云关键点提取方法
CN114462493A (zh) * 2021-12-29 2022-05-10 浙江大华技术股份有限公司 聚类方法、聚类装置及计算机可读存储介质
CN116297495A (zh) * 2023-05-09 2023-06-23 武汉理工大学 一种基于结构光图像的管壁检测方法及管壁检测装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102944174A (zh) * 2012-11-28 2013-02-27 北京矿冶研究总院 一种点云数据的处理方法及系统
CN104143210A (zh) * 2014-07-31 2014-11-12 哈尔滨工程大学 一种多尺度法向特征点云配准方法
CN104299260A (zh) * 2014-09-10 2015-01-21 西南交通大学 一种基于sift和lbp的点云配准的接触网三维重建方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102944174A (zh) * 2012-11-28 2013-02-27 北京矿冶研究总院 一种点云数据的处理方法及系统
CN104143210A (zh) * 2014-07-31 2014-11-12 哈尔滨工程大学 一种多尺度法向特征点云配准方法
CN104299260A (zh) * 2014-09-10 2015-01-21 西南交通大学 一种基于sift和lbp的点云配准的接触网三维重建方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
陆军 等: "基于快速点特征直方图的特征点云迭代插值配准算法", 《国防科技大学学报》 *
陆军 等: "点云FPFH特征提取优化配准算法", 《新型工业化》 *
陆军 等: "点云多法向量邻域特征配准算法", 《光电子 激光》 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108133226A (zh) * 2017-11-27 2018-06-08 西北工业大学 一种基于harris改进的三维点云特征提取方法
CN108133226B (zh) * 2017-11-27 2021-07-13 西北工业大学 一种基于harris改进的三维点云特征提取方法
CN108303037A (zh) * 2018-01-31 2018-07-20 广东工业大学 一种基于点云分析的工件表面形状差异的检测方法及装置
CN108564096B (zh) * 2018-04-26 2019-11-19 电子科技大学 一种邻域拟合rcs序列特征提取方法
CN108564096A (zh) * 2018-04-26 2018-09-21 电子科技大学 一种邻域拟合rcs序列特征提取方法
CN109766903A (zh) * 2018-08-13 2019-05-17 西安理工大学 一种基于曲面特征的点云模型曲面匹配方法
CN109766903B (zh) * 2018-08-13 2022-10-11 西安理工大学 一种基于曲面特征的点云模型曲面匹配方法
CN109544612A (zh) * 2018-11-20 2019-03-29 西南石油大学 基于特征点几何表面描述的点云配准方法
CN109685841A (zh) * 2019-01-03 2019-04-26 上海狮迈科技有限公司 三维模型与点云的配准方法及系统
CN109887015A (zh) * 2019-03-08 2019-06-14 哈尔滨工程大学 一种基于局部曲面特征直方图的点云自动配准方法
CN110211167A (zh) * 2019-06-14 2019-09-06 北京百度网讯科技有限公司 用于处理点云数据的方法和装置
CN112912756A (zh) * 2019-09-17 2021-06-04 深圳市大疆创新科技有限公司 点云滤噪的方法、测距装置、系统、存储介质和移动平台
CN111161331A (zh) * 2019-12-25 2020-05-15 盈嘉互联(北京)科技有限公司 一种bim模型和gis模型配准方法
CN113450269A (zh) * 2021-05-24 2021-09-28 南京航空航天大学 一种基于3d视觉的点云关键点提取方法
CN114462493A (zh) * 2021-12-29 2022-05-10 浙江大华技术股份有限公司 聚类方法、聚类装置及计算机可读存储介质
CN116297495A (zh) * 2023-05-09 2023-06-23 武汉理工大学 一种基于结构光图像的管壁检测方法及管壁检测装置

Also Published As

Publication number Publication date
CN105046694B (zh) 2018-08-17

Similar Documents

Publication Publication Date Title
CN105046694A (zh) 一种基于曲面拟合系数特征的点云快速配准方法
US10929649B2 (en) Multi-pose face feature point detection method based on cascade regression
CN107886529B (zh) 一种用于三维重建的点云配准方法
CN109767463B (zh) 一种三维点云自动配准方法
CN109993748B (zh) 一种基于点云处理网络的三维网格物体分割方法
CN105740899B (zh) 一种机器视觉图像特征点检测与匹配复合的优化方法
CN108038906B (zh) 一种基于图像的三维四边形网格模型重建方法
CN105551015A (zh) 一种散乱点云图像配准方法
CN108665491B (zh) 一种基于局部参考点的快速点云配准方法
CN101477529B (zh) 一种三维对象的检索方法和装置
CN108022262A (zh) 一种基于点的邻域重心向量特征的点云配准方法
CN106257498A (zh) 基于异构纹理特征的锌浮选工况状态划分方法
CN105243139A (zh) 一种基于深度学习的三维模型检索方法及其检索装置
CN109741268B (zh) 一种针对壁画的破损图像补全方法
CN104899607B (zh) 一种传统云纹图案的自动分类方法
CN104038792B (zh) 用于iptv监管的视频内容分析方法及设备
CN111311702B (zh) 一种基于BlockGAN的图像生成和识别模块及方法
CN107180436A (zh) 一种改进的kaze图像匹配算法
CN110222661B (zh) 一种用于运动目标识别及跟踪的特征提取方法
CN109920050B (zh) 一种基于深度学习和薄板样条的单视图三维火焰重建方法
CN114119922A (zh) 基于点云三维重构的复杂轮廓缺陷校验方法
CN112364881B (zh) 一种进阶采样一致性图像匹配方法
CN109598261B (zh) 一种基于区域分割的三维人脸识别方法
CN106934395B (zh) 一种采用surf特征和颜色特征相融合的刚体目标跟踪方法
CN117132630A (zh) 一种基于二阶空间兼容性度量的点云配准方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant