CN114280626A - 一种基于局部结构信息扩展的激光雷达slam方法及系统 - Google Patents

一种基于局部结构信息扩展的激光雷达slam方法及系统 Download PDF

Info

Publication number
CN114280626A
CN114280626A CN202111553771.XA CN202111553771A CN114280626A CN 114280626 A CN114280626 A CN 114280626A CN 202111553771 A CN202111553771 A CN 202111553771A CN 114280626 A CN114280626 A CN 114280626A
Authority
CN
China
Prior art keywords
information
point cloud
point
frame
registering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111553771.XA
Other languages
English (en)
Inventor
郭宏亮
朱健康
陈启明
郑鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Puwei Technology Co ltd
Original Assignee
Chengdu Puwei Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Puwei Technology Co ltd filed Critical Chengdu Puwei Technology Co ltd
Priority to CN202111553771.XA priority Critical patent/CN114280626A/zh
Publication of CN114280626A publication Critical patent/CN114280626A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明提供了一种基于局部结构信息扩展的激光雷达SLAM方法,步骤如下:获取雷达点云数据;计算点云数据各点的曲率信息及相对反射强度信息提取特征点;1.通过点到直线和点到平面的配准方式对相邻的两帧特征点进行配准;2.筛选大于预设阈值的特征点,得到局部的结构化点云信息,采用正态分布变换法NDT对局部的结构化点云信息进行配准;通过对相邻两帧特征点的配准和拟合的正态分布配准,得到机器人每帧的位姿,同时将每帧的点云信息与地图点云进行配准建造增量式地图。本方法通过反射强度信息提取了额外的特征并且在特征点附近提取局部的结构化点云信息,通过正态分布的方式进行配准,仅增加了少量计算量,便使得方法更加的精准和鲁棒。

Description

一种基于局部结构信息扩展的激光雷达SLAM方法及系统
技术领域
本发明涉及计算机视觉技术领域,具体而言,涉及一种基于局部结构信息扩展的激光雷达SLAM方法及系统。
背景技术
在SLAM中,最常用的传感器是激光雷达(LiDAR),激光雷达可以直接获取周围的距离信息,与视觉传感器相比,激光雷达几乎不受天气等因素的影响,非常地鲁棒。此外,激光雷达传感器的价格已经在过去十年中不断下降。因此,基于LiDAR的SLAM方法一直是一个热门的研究课题,吸引了很多的研究人员。
基于激光雷达的SLAM系统通常分为基于点的配准(Iterative Closest Point,ICP)、基于分布的配准(Normal Distribution Transform,NDT)和基于特征的配准。
基于点的配准方法和基于分布的配准方法在计算量都很大,因此难以应用于实时的SLAM中,而基于特征的点云配准方法,由于其轻量级特征提取和匹配过程,更有潜力用于实时地图构建;但是,当我们使用基于特征配准方法在非结构化场景中进行配准时,提取的特征太稀疏,使得配准结果不准确,从而影响构建地图的质量。
发明内容
本发明的目的在于提供一种基于局部结构信息扩展的激光雷达SLAM方法及系统,其通过额外提取反射强度特征和局部结构化信息,使得基于激光雷达的SLAM方法更加的精准和鲁棒。
本发明的实施例通过以下技术方案实现:一种基于局部结构信息扩展的激光雷达SLAM方法,包括如下步骤:
获取雷达传感器采集的点云数据;
针对每一帧点云数据,通过计算其每个点的曲率信息以及相对反射强度信息提取特征点;
通过点到直线和点到平面的配准方式对相邻的两帧特征点进行配准;
以大于预设阈值为条件进行特征点筛选,得到局部的结构化点云信息,采用正态分布变换法NDT对所述局部的结构化点云信息进行配准;
通过对相邻两帧特征点中拟合的正态分布进行配准,得到机器人每帧的位姿,同时将每帧局部的结构化点云信息进行配准建造增量式地图。
进一步地,所述曲率信息的计算公式表示为:
Figure BDA0003417911810000021
上式中,Δci表示曲率,Pi表示待求目标点,Pj表示Pi相邻点,S表示以Pi为中心,同一圈周围点的点集;
所述相对反射强度信息的计算公式表示为:
Figure BDA0003417911810000031
上式中,ΔIi表示相对反射强度,Ii表示点i的反射强度,Ij表示点j的反射强度。
进一步地,所述提取特征点包括根据曲率信息提取角点特征和平面特征。
进一步地,所述通过点到直线和点到平面的配准方式对相邻的两帧特征点进行配准具体包括:
若Pi为角点上的边缘点或强度点,则通过点到直线的配准方式对相邻的两帧特征点进行配准,公式表示为:
Figure BDA0003417911810000032
若Pi为平面点,则通过点到平面的配准方式对相邻的两帧特征点进行配准,公式表示为:
Figure BDA0003417911810000033
上式中,
Figure BDA0003417911810000034
均为损失函数,Pi′表示当前帧转换到上一帧的点,Pj1,Pj2,Pj3为上一帧的点。
进一步地,所述采用正态分布变换法NDT对所述局部的结构化点云信息进行配准包括:
通过如下公式进行正态分布的拟合,公式表示为:
Figure BDA0003417911810000041
Figure BDA0003417911810000042
上式中,μi表示正态分布的均值,Vi表示筛选所得特征点周围的原始点云,∑i表示正态分布的协方差。
进一步地,所述对相邻两帧特征点中拟合的正态分布进行配准,包括:通过分布式NDT进行无损检测,表达式为:
Figure BDA0003417911810000043
上式中,fd2d表示损失函数值,R为旋转矩阵,Pk为某帧点云数据,Pk-1为Pk相邻帧点云数据,d1和d2为正则化因子。
进一步地,所述方法还包括:构建每一帧贝叶斯因子图,通过因子图优化的方式对机器人的位姿序列进行优化。
进一步地,所述同时将每帧局部的结构化点云信息进行配准建造增量式地图还包括:通过体素滤波器对每帧局部的结构化点云信息进行滤波处理。
进一步地,所述方法还包括:
对关键帧进行回环优化:分别计算三欧式距离和两帧之间的反射强度相似度,当所得值小于预设阈值时,通过ICP配准方法计算ICP的误差得分,当误差得分小于预设阈值时,将认定的回环边转化为因子图,通过因子图优化的方式进行优化。
本发明还提供一种基于局部结构信息扩展的激光雷达SLAM系统,应用到如上述所述的方法,包括:
输入模块,用于获取雷达传感器采集的点云数据;
特征提取模块,用于针对每一帧点云数据,通过计算其每个点的曲率信息以及相对反射强度信息提取特征点;
配准模块,用于通过点到直线和点到平面的配准方式对相邻的两帧特征点进行配准;
局部结构化信息提取和配准模块,用于以大于预设阈值为条件进行特征点筛选,得到局部的结构化点云信息,采用正态分布变换法NDT对所述局部的结构化点云信息进行配准;
地图构建模块,用于通过对相邻两帧特征点中拟合的正态分布进行配准,得到机器人每帧的位姿,同时将每帧局部的结构化点云信息进行配准建造增量式地图。
本发明实施例的技术方案至少具有如下优点和有益效果:本方法通过提取反射强度特征,因此在现实的场景中,尤其是在非结构化场景中,本方法比其他SLAM算法配准的结构会更精确;此外,本方法在一些具有代表性的特征点附近,提取了局部的结构化点云信息,通过正态分布的方式进行配准,使得本方法仅仅增加了少量计算量,便使得SLAM系统更加的鲁棒和精准,综上,本方法通过提出反射强度特征和局部结构化信息,使得基于激光雷达的SLAM方法更加的精准和鲁棒。
附图说明
图1为本发明实施例1提供的基于局部结构信息扩展的激光雷达SLAM方法流程示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
实施例1
经申请人研究发现,基于激光雷达的SLAM系统通常分为基于点的配准(IterativeClosest Point,ICP)、基于分布的配准(Normal Distribution Transform,NDT)和基于特征的配准。
基于点的配准方法和基于分布的配准方法在计算量都很大,因此难以应用于实时的SLAM中,而基于特征的点云配准方法,由于其轻量级特征提取和匹配过程,更有潜力用于实时地图构建;但是,当我们使用基于特征配准方法在非结构化场景中进行配准时,提取的特征太稀疏,使得配准结果不准确,从而影响构建地图的质量。
因此,本发明实施例提供一种基于局部结构信息扩展的激光雷达SLAM方法。
参考图1,具体步骤包括:获取雷达传感器采集的点云数据,针对每一帧点云数据,通过计算其每个点的曲率信息以及相对反射强度信息提取特征点,所述提取特征点包括根据曲率信息提取角点特征和平面特征;在本发明实施例的一种实施方式中,给出一帧点云数据Pk,通过如下两个公式计算每一个点Pi的曲率信息Δci和相对反射强度信息ΔIi,其中,所述曲率信息的计算公式表示为:
Figure BDA0003417911810000071
上式中,Pj表示Pi相邻点,S表示以Pi为中心,同一圈周围点的点集,Pi包含于其中;
所述相对反射强度信息的计算公式表示为:
Figure BDA0003417911810000072
上式中,Ii表示点i的反射强度,Ij表示点j的反射强度。
在计算完每一帧的特征点之后,进一步地对相邻的两帧特征点进行配准,方案具体如下:
若Pi为角点上的边缘点或强度点,则通过点到直线的配准方式对相邻的两帧特征点进行配准,公式表示为:
Figure BDA0003417911810000081
若Pi为平面点,则通过点到平面的配准方式对相邻的两帧特征点进行配准,公式表示为:
Figure BDA0003417911810000082
上式中,
Figure BDA0003417911810000083
均为损失函数,Pi′表示当前帧转换到上一帧的点,Pj1,Pj2,Pj3为上一帧的点。
在对相邻帧的特征点进行配准之后,以大于预设阈值为条件进行特征点筛选,选取具有代表性的特征点(Δc大于预设阈值的点),然后获取其附近的原始点云,例如其附近0.4m立方体内的原始点云,由此得到局部的结构化点云信息;进一步地,采用正态分布变换法NDT对所述局部的结构化点云信息进行配准,具体包括如下:
通过如下公式进行正态分布的拟合,公式表示为:
Figure BDA0003417911810000084
Figure BDA0003417911810000085
上式中,μi表示正态分布的均值,∑i表示正态分布的协方差。
然后对相邻两帧特征点中拟合的正态分布进行配准,通过分布式NDT进行无损检测,表达式为:
Figure BDA0003417911810000091
上式中,fd2d表示损失函数值,R为旋转矩阵,Pk为某帧点云数据,Pk-1为Pk相邻帧点云数据,d1和d2为正则化因子。需要说明的是,D2D-NDT(分布式NDT)过程是NDT的扩展,它对原点云和目标点云进行体素化,并计算原点云与目标点云之间的距离,其用于累计距离误差的方案与GICP相似,即通过协方差进行权重的控制。
在点云配准的过程中,即可得到机器人每帧的位姿,本发明实施例同时将每帧局部的结构化点云信息配准在一起,经过体素滤波器对每帧局部的结构化点云信息进行滤波处理之后建造增量式地图。
考虑到随着SLAM过程的推移,机器人的位姿序列会不可避免地产生累积误差,因此需要优化机器人一段时间后的位姿序列,本实施例所采用的方案如下:在本实施例中,通过构建每一关键帧贝叶斯因子图,然后通过因子图优化的方式进行统一的后端优化,以此实现对机器人位姿序列的优化目的。
此外,考虑到在激光雷达SLAM中,长时间的建图会产生累积误差,进而导致所构建的地图质量下降,为避免该问题的出现,本实施还对关键帧进行回环优化处理。
本实施例回环优化具体方案如下:分别计算三欧式距离和两帧之间的反射强度相似度,当所得值小于预设阈值时,即可得知有潜在的回环;进一步地,通过ICP配准方法计算ICP的误差得分,当误差得分小于预设阈值时,则认定潜在的回环为真正的回环,将回环边转化为因子图加入到后端优化中,通过因子图优化的方式进行优化。
此外,本发明实施例还提供一种基于局部结构信息扩展的激光雷达SLAM系统,应用到如上述所述的方法,包括:
输入模块,用于获取雷达传感器采集的点云数据;
特征提取模块,用于针对每一帧点云数据,通过计算其每个点的曲率信息以及相对反射强度信息提取特征点;
配准模块,用于通过点到直线和点到平面的配准方式对相邻的两帧特征点进行配准;
局部结构化信息提取和配准模块,用于以大于预设阈值为条件进行特征点筛选,得到局部的结构化点云信息,采用正态分布变换法NDT对所述局部的结构化点云信息进行配准;
地图构建模块,用于通过对相邻两帧特征点中拟合的正态分布进行配准,得到机器人每帧的位姿,同时将每帧局部的结构化点云信息进行配准建造增量式地图。
综上所述,本方法通过提取反射强度特征,因此在现实的场景中,尤其是在非结构化场景中,本方法比其他SLAM算法配准的结构会更精确;此外,本方法在一些具有代表性的特征点附近,提取了局部的结构化点云信息,通过正态分布的方式进行配准,使得本方法仅仅增加了少量计算量,便使得SLAM系统更加的鲁棒和精准,综上,本算法通过提出反射强度特征和局部结构化信息,使得基于激光雷达的SLAM方法更加的精准和鲁棒。
以上仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于局部结构信息扩展的激光雷达SLAM方法,其特征在于,包括如下步骤:
获取雷达传感器采集的点云数据;
针对每一帧点云数据,通过计算其每个点的曲率信息以及相对反射强度信息提取特征点;
通过点到直线和点到平面的配准方式对相邻的两帧特征点进行配准;
以大于预设阈值为条件进行特征点筛选,得到局部的结构化点云信息,采用正态分布变换法NDT对所述局部的结构化点云信息进行配准;
通过对相邻两帧特征点中拟合的正态分布进行配准,得到机器人每帧的位姿,同时将每帧局部的结构化点云信息进行配准建造增量式地图。
2.如权利要求1所述的基于局部结构信息扩展的激光雷达SLAM方法,其特征在于,所述曲率信息的计算公式表示为:
Figure FDA0003417911800000011
上式中,Δci表示曲率,Pi表示待求目标点,Pj表示Pi相邻点,S表示以Pi为中心,同一圈周围点的点集;
所述相对反射强度信息的计算公式表示为:
Figure FDA0003417911800000021
上式中,ΔIi表示相对反射强度,Ii表示点i的反射强度,Ij表示点j的反射强度。
3.如权利要求2所述的基于局部结构信息扩展的激光雷达SLAM方法,其特征在于,所述提取特征点包括根据曲率信息提取角点特征和平面特征。
4.如权利要求3所述的基于局部结构信息扩展的激光雷达SLAM方法,其特征在于,所述通过点到直线和点到平面的配准方式对相邻的两帧特征点进行配准具体包括:
若Pi为角点上的边缘点或强度点,则通过点到直线的配准方式对相邻的两帧特征点进行配准,公式表示为:
Figure FDA0003417911800000022
若Pi为平面点,则通过点到平面的配准方式对相邻的两帧特征点进行配准,公式表示为:
Figure FDA0003417911800000023
上式中,
Figure FDA0003417911800000024
均为损失函数,P′i表示当前帧转换到上一帧的点,Pj1,Pj2,Pj3为上一帧的点。
5.如权利要求4所述的基于局部结构信息扩展的激光雷达SLAM方法,其特征在于,所述采用正态分布变换法NDT对所述局部的结构化点云信息进行配准包括:
通过如下公式进行正态分布的拟合,公式表示为:
Figure FDA0003417911800000031
Figure FDA0003417911800000032
上式中,μi表示正态分布的均值,Vi表示筛选所得特征点周围的原始点云,∑i表示正态分布的协方差。
6.如权利要求5所述的基于局部结构信息扩展的激光雷达SLAM方法,其特征在于,所述对相邻两帧特征点中拟合的正态分布进行配准,包括:
通过分布式NDT进行无损检测,表达式为:
Figure FDA0003417911800000033
上式中,fd2d表示损失函数值,R为旋转矩阵,Pk为某帧点云数据,Pk-1为Pk相邻帧点云数据,d1和d2为正则化因子。
7.如权利要求6所述的基于局部结构信息扩展的激光雷达SLAM方法,其特征在于,所述方法还包括:构建每一帧贝叶斯因子图,通过因子图优化的方式对机器人的位姿序列进行优化。
8.如权利要求7所述的基于局部结构信息扩展的激光雷达SLAM方法,其特征在于,所述同时将每帧局部的结构化点云信息进行配准建造增量式地图还包括:通过体素滤波器对每帧局部的结构化点云信息进行滤波处理。
9.如权利要求8所述的基于局部结构信息扩展的激光雷达SLAM方法,其特征在于,所述方法还包括:
对关键帧进行回环优化:分别计算三欧式距离和两帧之间的反射强度相似度,当所得值小于预设阈值时,通过ICP配准方法计算ICP的误差得分,当误差得分小于预设阈值时,将认定的回环边转化为因子图,通过因子图优化的方式进行优化。
10.一种基于局部结构信息扩展的激光雷达SLAM系统,应用到如权利要求1至9任一项所述的方法,其特征在于,包括:
输入模块,用于获取雷达传感器采集的点云数据;
特征提取模块,用于针对每一帧点云数据,通过计算其每个点的曲率信息以及相对反射强度信息提取特征点;
配准模块,用于通过点到直线和点到平面的配准方式对相邻的两帧特征点进行配准;
局部结构化信息提取和配准模块,用于以大于预设阈值为条件进行特征点筛选,得到局部的结构化点云信息,采用正态分布变换法NDT对所述局部的结构化点云信息进行配准;
地图构建模块,用于通过对相邻两帧特征点中拟合的正态分布进行配准,得到机器人每帧的位姿,同时将每帧局部的结构化点云信息进行配准建造增量式地图。
CN202111553771.XA 2021-12-17 2021-12-17 一种基于局部结构信息扩展的激光雷达slam方法及系统 Pending CN114280626A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111553771.XA CN114280626A (zh) 2021-12-17 2021-12-17 一种基于局部结构信息扩展的激光雷达slam方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111553771.XA CN114280626A (zh) 2021-12-17 2021-12-17 一种基于局部结构信息扩展的激光雷达slam方法及系统

Publications (1)

Publication Number Publication Date
CN114280626A true CN114280626A (zh) 2022-04-05

Family

ID=80873270

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111553771.XA Pending CN114280626A (zh) 2021-12-17 2021-12-17 一种基于局部结构信息扩展的激光雷达slam方法及系统

Country Status (1)

Country Link
CN (1) CN114280626A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115290098A (zh) * 2022-09-30 2022-11-04 成都朴为科技有限公司 一种基于变步长的机器人定位方法和系统
CN115356747A (zh) * 2022-10-19 2022-11-18 成都朴为科技有限公司 一种多线激光雷达障碍物识别方法和装置
CN117095061A (zh) * 2023-10-20 2023-11-21 山东大学 基于点云强度显著点的机器人位姿优化方法及系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115290098A (zh) * 2022-09-30 2022-11-04 成都朴为科技有限公司 一种基于变步长的机器人定位方法和系统
CN115356747A (zh) * 2022-10-19 2022-11-18 成都朴为科技有限公司 一种多线激光雷达障碍物识别方法和装置
CN115356747B (zh) * 2022-10-19 2023-01-24 成都朴为科技有限公司 一种多线激光雷达障碍物识别方法和装置
CN117095061A (zh) * 2023-10-20 2023-11-21 山东大学 基于点云强度显著点的机器人位姿优化方法及系统
CN117095061B (zh) * 2023-10-20 2024-02-09 山东大学 基于点云强度显著点的机器人位姿优化方法及系统

Similar Documents

Publication Publication Date Title
CN111563442B (zh) 基于激光雷达的点云和相机图像数据融合的slam方法及系统
CN111222474B (zh) 一种任意尺度的高分辨率图像小目标检测方法
CN114280626A (zh) 一种基于局部结构信息扩展的激光雷达slam方法及系统
CN110728658A (zh) 一种基于深度学习的高分辨率遥感影像弱目标检测方法
CN111340875B (zh) 一种基于三维激光雷达的空间移动目标检测方法
WO2022188663A1 (zh) 一种目标检测方法及装置
CN103262121A (zh) 移动物体的检测和跟踪
CN108960190B (zh) 基于fcn图像序列模型的sar视频目标检测方法
CN112949407B (zh) 一种基于深度学习和点集优化的遥感影像建筑物矢量化方法
CN103353988A (zh) 异源sar景象特征匹配算法性能评估方法
US20210350705A1 (en) Deep-learning-based driving assistance system and method thereof
CN110097047B (zh) 一种基于深度学习采用单线激光雷达的车辆检测方法
CN103077537B (zh) 基于l1正则化的实时运动目标跟踪的新方法
CN113743385A (zh) 一种无人船水面目标检测方法、装置及无人船
CN112966553A (zh) 基于孪生网络的强耦合目标跟踪方法、装置、介质及设备
Venugopal Sample selection based change detection with dilated network learning in remote sensing images
CN115457152A (zh) 外参标定方法、装置、电子设备及存储介质
CN116907509A (zh) 基于图像匹配的auv水下辅助导航方法、系统、设备及介质
CN115100741A (zh) 一种点云行人距离风险检测方法、系统、设备和介质
CN114241448A (zh) 障碍物航向角的获取方法、装置、电子设备及车辆
CN113759364A (zh) 一种基于激光地图的毫米波雷达连续定位方法及装置
Wang et al. Improved LeGO-LOAM method based on outlier points elimination
CN113191427A (zh) 一种多目标车辆跟踪方法及相关装置
CN111275748B (zh) 动态环境下基于激光雷达的点云配准方法
CN116643291A (zh) 一种视觉与激光雷达联合剔除动态目标的slam方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination