CN109544612B - 基于特征点几何表面描述的点云配准方法 - Google Patents

基于特征点几何表面描述的点云配准方法 Download PDF

Info

Publication number
CN109544612B
CN109544612B CN201811383890.3A CN201811383890A CN109544612B CN 109544612 B CN109544612 B CN 109544612B CN 201811383890 A CN201811383890 A CN 201811383890A CN 109544612 B CN109544612 B CN 109544612B
Authority
CN
China
Prior art keywords
point cloud
point
points
calculating
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811383890.3A
Other languages
English (en)
Other versions
CN109544612A (zh
Inventor
秦大辉
程栋
段云飞
苏铭著
邵永波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southwest Petroleum University
Original Assignee
Southwest Petroleum University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southwest Petroleum University filed Critical Southwest Petroleum University
Priority to CN201811383890.3A priority Critical patent/CN109544612B/zh
Publication of CN109544612A publication Critical patent/CN109544612A/zh
Application granted granted Critical
Publication of CN109544612B publication Critical patent/CN109544612B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices With Unspecified Measuring Means (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明提供一种基于特征点几何表面描述的点云配准方法,属于三维重建领域。其首先载入源点云和目标点云,并计算曲率进行数据降采样;然后通过3D Harris检测器提取两片点云的所有特征点,计算特征点间的几何距离构建距离最近三特征点的子集合,再通过子集合的几何转换关系描述目标表面;最后通过匹配源点云和目标点云上的几何表面描述计算旋转平移矩阵,通过计算配准后对应点的距离之和评价配准效果,选出最优矩阵,完成点云初始配准。

Description

基于特征点几何表面描述的点云配准方法
技术领域
本发明涉及三维重建领域,特别是一种基于特征点几何表面描述的点云配准方法。
背景技术
三维重建(3D Reconstruction)指对三维物体建立适合计算机表示和处理的数学模型,是在计算机环境下对其进行处理、操作和分析其性质的基础,也是在计算机中建立表达客观世界的虚拟现实的关键技术。
点云(Point Cloud)是由测距设备获取的目标表面信息的海量点集合。其扫描资料以点的形式进行记录,这些点既可以是三维坐标(XYZ),也可以是颜色(RGB)或者反射强度(Intensity)等信息。通常所使用的点云数据一般包括点坐标精度、空间分辨率和表面法向量等内容。
点云的格式:*.pcd;*.ply;*obj.;*.stl;*.imw;*.x3d;
点云在计算机视觉,逆向工程,工业设计等领域早有应用,而近几年来摄影测量、激光扫描、雷达干涉等三维扫描设备普及和扫描技术快速发展,在带来便利的同时对点云处理相关技术也提出了新的要求。在机器人导航过程中获取的点云数据点可达上百万个,快速,智能化的扫描方式使滑坡检测,城市规划,森林管理等领域均可应用点云三维重建相关技术。所以为了三维点云数据建模的准确性和实效性,在对大规模点云进行三维建模前,必须使用点云处理相关技术对点云进行预处理,其中点云自动配准是获取目标完整三维点云的关键步骤,是目标自动点云重建的关键技术之一。由于扫描视角的限制以及被扫描物体间的相互遮挡,需要从不同视角进行多次扫描才能覆盖全部场景,因此必须将所有扫描转换到同一坐标系,转换的本质是刚体变换,而求解的刚体变换参数优劣,直接影响了点云配准的准确性和效率,进而影响实体化效果。
传统点云配准通过放置标记,然后手动或自动提取在至少两次扫描可见的标志点为特征点进行点云配准,这一过程受限于现实条件,耗时严重,并且会不可避免的遮挡或损坏被测物体表面的真实点云数据,增加后期处理的时间。在大规模场景点云,机器人实时化导航中,这都是不可接受的。
点云的无标记自动化配准主要分为初始粗略配准和精确配准两步,而且实践证明,初始配准远远难于精确配准。1992年Besl和McKay提出的最近点迭代算法(ICP)是最经典的精确配准算法,ICP算法的原理是尽量减少点间欧式距离,通过建立对应关系和评估转换参数迭代进行处理问题。而ICP算法容易陷入局部最优,所以针对初始位置差别较大的点云需要进行初始配准,而常用的初始配准方法可分为基于局部特征描述,基于全局搜索策略和基于概率统计三类。其中的代表算法如点特征直方图(PFH)、快速点特征直方图(FPFH)、遗传算法、4PCS(4-points congruent sets4-点同余集合)算法、正态分布变换(NDT)等,常用的3D特征点检测器包括高斯差分DoG、3D Harris、NARF、HKS等。
发明内容
本发明的主要目的是改善点云配准初始算法计算复杂度大、鲁棒性差、抗噪能力弱、精度差的问题。本发明提供了一种基于特征点几何表面描述的点云配准方法,通过特征点几何关系计算点云表面描述进行点云初始配准。
本发明的技术方案是:一种基于特征点几何表面描述的点云配准方法,包括如下基本步骤:
步骤1:获取点云数据;
步骤2:通过3D Harris检测器获取点云特征点;
步骤3:在获取的特征点集中,计算特征点两两之间的距离,然后选取特征点的两个最小距离组成子集合,最后通过子集合的几何关系计算特征点的表面描述
Figure GDA0003028283880000021
将所有特征点的表面描述
Figure GDA0003028283880000022
和局部坐标LRF统一储存。通过计算所有表面描述之间的角度,去除相似描述,排除配准干扰;
步骤4:利用特征点几何表面描述寻找对应关系进行点云初始配准,通过点对储存的信息计算旋转矩阵和平移矩阵,完成初始配准。
本发明与其他算法相比具有一些优点:
第一,不依赖于对检测关键点周围的多尺度邻域进行特征计算。相反,它利用检测到的三维特征点计算几何关系进行目标局部表面表示,描述了点云上的稳定局部关系,进行配准不易受噪声影响,鲁棒性好;
第二,减小了局部特征计算量,大大加快计算速度,提升配准效率;
第三,易与各种先进特征检测器结合使用。
进一步的,上述的基于特征点几何表面描述的点云配准方法中:所述的步骤1中包括:
步骤1.1:通过点云扫描设备获取初始源点云、目标点云数据;
步骤1.2:基于点云曲率采样,计算点云曲率的同时将曲率从大到小插入排序。配准过程中,结合实际需要设置采样比例进行曲率筛选;
进一步的,上述的基于特征点几何表面描述的点云配准方法中:所述步骤2采用如下步骤实现提取特征点:
步骤2.1:计算邻域N内所有点的局部法线ni
步骤2.2:通过法线计算协方差矩阵COV;
Figure GDA0003028283880000031
协方差矩阵基于行列式Det和迹Tr提供各点的响应RH
RH=Der(COV)-γ·Tr(COV)2
其中γ为恰当的常数。
进一步的,上述的基于特征点几何表面描述的点云配准方法中:所述步骤3采用如下步骤计算特征点表面关系:
步骤3.1:计算特征点间几何距离d(Pl,Pk),k为检测到的特征点总数:
Figure GDA0003028283880000041
步骤3.2:选取与特征点Pl距离最近的两个特征点组成子集αl,组成形式如下:
al=[PlPn1Pn2]
其中Pn1和Pn2为距离Pl最近的两点,具体包含了三组坐标信息:
Figure GDA0003028283880000042
同理可计算αl+1为点Pl+1与周围两点形成的子集合,αl与αl+1的几何关系转换为:
Figure GDA0003028283880000043
Figure GDA0003028283880000044
其中,
Figure GDA0003028283880000045
定义为关键点的几何表面描述
步骤3.3:计算几何表面描述量间的角度,排除相似量,减小对配准影响:
Figure GDA0003028283880000046
进一步的,上述的基于特征点几何表面描述的点云配准方法中:所述步骤4采用如下步骤完成源点云P和目标点云Q的初始配准:
步骤4.1:匹配相同τα∈P和τβ∈Q,得到一组对应关系
Figure GDA0003028283880000047
其中NC为对应描述个数,对于每个Ci计算旋转矩阵和平移矩阵:
Figure GDA0003028283880000048
t=q1-p1R
其中p1和q1是一组对应点,LRFq和LRFp为相应点储存的局部坐标信息。
步骤4.2:计算对齐后对应点间距离和,评价转换效果,选取对应距离最小时所求矩阵为最终矩阵。
下面结合附图和具体实施方式对本发明进行进一步的说明。
附图说明
附图1为本发明的整体流程。
附图2为目标特征点几何表面描述示意图。
具体实施方式
本实施例是一种基于特征点几何表面描述的点云配准方法,如图1所示,具体如下:
步骤1:采集源点云P和目标点云Q两组数据,要求点云数据是通过不同视角获取的,具有一定重叠度。
步骤2:基于点云曲率进行数据降采样。移动最小二乘法曲面拟合计算点云曲率,为保证运行速度,计算同时将曲率值从大到小插入排序,结合实际需要,按百分比保留大曲率点,简化数据,加快配准速度。高斯曲率k通过下式计算:
Figure GDA0003028283880000051
其中g(x)是求能量函数e(y,a)偏导数的最小值,移动最小二乘曲面就是求e(y,a)沿向量场n(x)方向的局部最小值:
Figure GDA0003028283880000061
Figure GDA0003028283880000062
Figure GDA0003028283880000063
式中:y、a分别是位置向量和方向向量;qi为源点云P中的数据点;vi为点qi对应的法向量,法向量的计算方法展示在步骤3.1中。
上面两步得到了得到降采样精简点云。曲率采样的方法在删减数据的同时很好地保留了点的特征明显区域,未改变点的原始空间坐标,既加快速度又保留精度。
步骤3:在精简点云中使用Harris 3D检测器提取特征点,具体步骤包括:
步骤3.1:计算法向量vi,点pi的法向量计算如下,其中点c为pi的邻域N内所有点的质心:
Figure GDA0003028283880000064
Figure GDA0003028283880000065
步骤4.2:计算协方差矩阵COV:
Figure GDA0003028283880000071
点基于协方差的响应为RH,提取对应点为特征点:
RH=Det(COV)-γ·Tr(COV)2
步骤4:通过计算所有特征点的几何距离,建立特征点基于几何关系的表面描述,具体步骤如下:
步骤4.1:源点云通过上步提取到特征点Pk,(k=1,2...K,K为特征点总数)计算特征点两两之间的几何距离d(Pl,Pk):
Figure GDA0003028283880000072
步骤4.2:选取特征点Pl的两个最近点Pn1和Pn2组成集合αl,αl∈Pk,αl的每列包含一个特征点的坐标信息。其余关键点Pl+1...Pk对应子集合αl+1...αk均可用相似方法求出:
al=[PlPn1Pn2]
Figure GDA0003028283880000081
子集合α1和α2的几何转换关系如下:
Figure GDA0003028283880000082
Figure GDA0003028283880000083
其中αl+1=[Pl+1 Pm1 Pm2],Pm1和Pm2表示特征点Pl+1的最近两点。定义
Figure GDA0003028283880000084
为特征点子集αl和αl+1的几何表面关系描述。同样的方法,我们可以从子集合αl+1...αk得到源点云所有特征点的几何描述
Figure GDA0003028283880000085
同理可获得目标点云的所有特征点几何表面描述
Figure GDA0003028283880000086
L为目标点云Q提取的特征总数。
步骤4.3:计算出点云的所有特征点几何描述后,同一片点云有很小概率可能存在相似描述,为排除相似性干扰,计算他们之间的角度err,取值范围为0到π/2,通过比较角度删除特征点相似表面描述:
Figure GDA0003028283880000087
步骤5:获得τα和τβ为源点云P,目标点云Q的特征点几何表面描述,匹配τα和τβ,得到所有对应关系
Figure GDA0003028283880000091
其中NC为对应描述的个数,通过特征点的局部坐标信息(LRF)计算每组Ci的旋转矩阵R和平移矩阵t。
Figure GDA0003028283880000092
t=q1-p1R
计算配准后对应点间的距离和,评价转换效果,选出最优矩阵,进行点云初始配准。
本实施例具有以上优点,主要在于:
曲率采样方式对点云数据精简是针对性的,保留特征明显区域,削减特征薄弱区域数据量,同时保留数据点原始坐标信息,对高精细配准尤其重要。
基于特征点的几何关系形成了稳定的表面描述,不易受噪声和采样比例的干扰,鲁棒性强。减少了特征点邻域的多尺度计算,加快了配准速度。
任何先进的3D特征点检测器均可结合使用,可移植性强,可进行目标识别等拓展应用。

Claims (4)

1.一种基于特征点几何表面描述的点云配准方法,其特征在于:包括如下基本步骤:
步骤1:获取点云数据;
步骤2:通过3D Harris检测器获取点云特征点;
步骤3:由特征点获取特征点集;计算特征点两两之间的距离,然后选取特征点的两个最小距离组成子集合,最后通过子集合的几何关系计算特征点的表面描述
Figure FDA0003028283870000011
将所有特征点的表面描述
Figure FDA0003028283870000012
和局部坐标LRF统一储存;
该步骤采用如下步骤计算特征点几何关系进行目标表面描述:
步骤3.1:计算特征点间几何距离d(Pl,Pk),k为检测到的特征点总数:
Figure FDA0003028283870000013
步骤3.2:选取与特征点Pl距离最近的两个特征点组成子集αl,组成形式如下:
αl=[Pl Pn1 Pn2]
其中Pn1和Pn2为距离Pl最近的两点,具体包含了三组坐标信息:
Figure FDA0003028283870000014
同理可计算αl+1为点Pl+1与周围两点形成的子集合,αl与αl+1的几何关系转换为:
Figure FDA0003028283870000015
Figure FDA0003028283870000016
其中,
Figure FDA0003028283870000021
定义为关键点的几何表面描述;
步骤3.3:计算几何表面描述量间的角度,排除相似量,减小对配准影响:
Figure FDA0003028283870000022
步骤4:利用特征点几何表面描述寻找对应关系进行点云初始配准,通过点对储存的信息计算旋转矩阵和平移矩阵,完成点云配准。
2.根据权利要求1所述的基于特征点几何表面描述的点云配准方法,其特征在于:所述的步骤1中包括:
步骤1.1:通过点云扫描设备获取初始源点云、目标点云数据;
步骤1.2:基于点云曲率采样,结合实际需要设置采样比例进行曲率筛选,计算点云曲率的同时将曲率从大到小插入排序。
3.根据权利要求1所述的基于特征点几何表面描述的点云配准方法,其特征在于:所述步骤2采用如下步骤提取特征点:
步骤2.1:计算邻域N内所有点的局部法线ni
步骤2.2:通过法线计算协方差矩阵COV;
Figure FDA0003028283870000023
协方差矩阵基于行列式Det和迹Tr提供各点的响应RH
RH=Det(COV)-γ·Tr(COV)2
其中γ为恰当的常数。
4.根据权利要求1所述的基于特征点几何表面描述的点云配准方法,其特征在于:所述的步骤4中采用如下步骤完成两片点云的初始配准:
步骤4.1:匹配相同τα∈P和τβ∈Q,得到一组对应关系
Figure FDA0003028283870000024
其中NC为对应描述个数,对于每个Ci计算旋转矩阵和平移矩阵:
Figure FDA0003028283870000031
t=q1-p1R
其中p1和q1是一组对应点,LRFq和LRFp为相应点储存的局部坐标信息;
步骤4.2:计算对齐后对应点间距离和,评价转换效果,选取对应距离最小时所求矩阵为最终矩阵。
CN201811383890.3A 2018-11-20 2018-11-20 基于特征点几何表面描述的点云配准方法 Active CN109544612B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811383890.3A CN109544612B (zh) 2018-11-20 2018-11-20 基于特征点几何表面描述的点云配准方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811383890.3A CN109544612B (zh) 2018-11-20 2018-11-20 基于特征点几何表面描述的点云配准方法

Publications (2)

Publication Number Publication Date
CN109544612A CN109544612A (zh) 2019-03-29
CN109544612B true CN109544612B (zh) 2021-06-22

Family

ID=65848579

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811383890.3A Active CN109544612B (zh) 2018-11-20 2018-11-20 基于特征点几何表面描述的点云配准方法

Country Status (1)

Country Link
CN (1) CN109544612B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111815686B (zh) * 2019-04-12 2023-08-18 四川大学 基于几何特征由粗到细点云配准方法
CN110111421B (zh) * 2019-05-10 2023-01-31 武汉海达数云技术有限公司 一种移动测绘点云的方法及装置
CN110097582B (zh) * 2019-05-16 2023-03-31 广西师范大学 一种点云优化配准与实时显示系统及工作方法
CN111009002B (zh) * 2019-10-16 2020-11-06 贝壳找房(北京)科技有限公司 点云配准检测方法、装置以及电子设备、存储介质
CN111325779B (zh) * 2020-02-07 2020-12-11 贝壳找房(北京)科技有限公司 点云配准方法和装置、电子设备和存储介质
CN112150606B (zh) * 2020-08-24 2022-11-08 上海大学 一种基于点云数据的螺纹表面三维重构方法
CN112669359B (zh) * 2021-01-14 2023-05-26 武汉理工大学 一种三维点云配准方法、装置、设备及存储介质
CN112819869A (zh) * 2021-01-22 2021-05-18 辽宁工程技术大学 一种基于IHarris-TICP算法的三维点云配准方法
CN113112615B (zh) * 2021-03-31 2023-10-13 江苏航空职业技术学院 一种基于几何特征的云拼合方法
CN113223062B (zh) * 2021-06-04 2024-05-07 武汉工控仪器仪表有限公司 一种基于角点特征点选取与快速描述子的点云配准方法
CN113484875B (zh) * 2021-07-30 2022-05-24 燕山大学 一种基于混合高斯排序的激光雷达点云目标分级识别方法
CN113436237B (zh) * 2021-08-26 2021-12-21 之江实验室 一种基于高斯过程迁移学习的复杂曲面高效测量系统
CN115349967B (zh) * 2022-08-19 2024-04-12 首都医科大学附属北京口腔医院 一种显示方法、装置、电子设备及计算机可读存储介质
CN116152303B (zh) * 2022-09-08 2023-11-24 上海贝特威自动化科技有限公司 一种基于几何空间一致性加权的二部图点云匹配算法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104766302B (zh) * 2015-02-05 2017-11-24 武汉大势智慧科技有限公司 一种利用无人机图像优化激光扫描点云数据的方法及系统
CN105046694B (zh) * 2015-07-02 2018-08-17 哈尔滨工程大学 一种基于曲面拟合系数特征的点云快速配准方法
CN107038717B (zh) * 2017-04-14 2019-08-27 东南大学 一种基于立体栅格自动分析3d点云配准误差的方法

Also Published As

Publication number Publication date
CN109544612A (zh) 2019-03-29

Similar Documents

Publication Publication Date Title
CN109544612B (zh) 基于特征点几何表面描述的点云配准方法
Hughes et al. A deep learning framework for matching of SAR and optical imagery
CN107093205B (zh) 一种基于无人机图像的三维空间建筑物窗户检测重建方法
CN104299260B (zh) 一种基于sift和lbp的点云配准的接触网三维重建方法
CN108107444B (zh) 基于激光数据的变电站异物识别方法
CN104331699B (zh) 一种三维点云平面化快速搜索比对的方法
CN108932475A (zh) 一种基于激光雷达和单目视觉的三维目标识别系统及方法
CN104933434A (zh) 一种结合LBP特征提取和surf特征提取方法的图像匹配方法
CN104700398A (zh) 一种点云场景物体提取方法
CN108257155B (zh) 一种基于局部和全局耦合的扩展目标稳定跟踪点提取方法
Wei et al. Automatic coarse registration of point clouds using plane contour shape descriptor and topological graph voting
CN103927511A (zh) 基于差异特征描述的图像识别方法
CN106446833B (zh) 一种用于复杂场景图像识别的多通道仿生视觉方法
CN108182705A (zh) 一种基于机器视觉的三维坐标定位方法
CN107689058A (zh) 一种基于surf特征提取的图像配准算法
Wang Automatic extraction of building outline from high resolution aerial imagery
Yuan et al. 3D point cloud recognition of substation equipment based on plane detection
CN116310355A (zh) 一种复杂结构件的激光点云去噪和缺陷检测方法
CN106709432B (zh) 基于双目立体视觉的人头检测计数方法
CN117710603B (zh) 一种直线几何结构约束下无人机图像三维建筑物建模方法
Seo et al. Ortho-image analysis for producing lane-level highway maps
CN112529072A (zh) 一种基于声呐图像处理的水下沉埋物识别与定位方法
Han et al. Accurate and robust vanishing point detection method in unstructured road scenes
CN116823940A (zh) 一种三维场景移动物体检测方法
CN110738098A (zh) 一种目标的识别定位与锁定跟踪方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP02 Change in the address of a patent holder
CP02 Change in the address of a patent holder

Address after: 610500, Xindu Avenue, Xindu District, Sichuan, Chengdu, 8

Patentee after: SOUTHWEST PETROLEUM University

Address before: No.8 Xindu Avenue, Gaodu District, Chengdu, Sichuan 610000

Patentee before: SOUTHWEST PETROLEUM University