CN110781827B - 一种基于激光雷达与扇状空间分割的路沿检测系统及其方法 - Google Patents
一种基于激光雷达与扇状空间分割的路沿检测系统及其方法 Download PDFInfo
- Publication number
- CN110781827B CN110781827B CN201911025983.3A CN201911025983A CN110781827B CN 110781827 B CN110781827 B CN 110781827B CN 201911025983 A CN201911025983 A CN 201911025983A CN 110781827 B CN110781827 B CN 110781827B
- Authority
- CN
- China
- Prior art keywords
- road edge
- point cloud
- road
- point
- fan
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/23—Clustering techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
- G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
- G06V10/464—Salient features, e.g. scale invariant feature transforms [SIFT] using a plurality of salient features, e.g. bag-of-words [BoW] representations
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明涉及一种基于激光雷达与扇状空间分割的路沿检测系统及其方法。方法包括:1.激光雷达扫描车辆周围环境,获取反射点云信息并转换到本地构建的三维坐标系中;2.对点云数据进行预处理,把每一帧点云中的地面数据分离并提取出来;3.根据激光雷达与点云的数据特征,将坐标系中的空间分割为扇状的结构体,根据地面信息和扇状结构体,识别道路延伸方向;4.使用并行的路沿检索算法,提取点云中的路沿候选点;5.对路沿候选点进行聚类,根据扇状空间特征,排除干扰点集合;6.对最后确定的路沿点做B样条曲线拟合,得到路沿检测结果。本发明适应性强,能适应各种形状的道路,能减少障碍物的影响,精度和还原度高,可靠性强,误差率低。
Description
技术领域
本发明属于自动驾驶技术领域,更具体地,涉及一种基于激光雷达与扇状空间分割的路沿检测系统及其方法。
背景技术
随着无人驾驶行业技术的发展,激光雷达的感知算法成为了研究的热点。激光雷达作为无人驾驶车辆的传感器,具有数据维度高、深度信息准确、响应频率快和检测精度高的优点。
现有技术曾提出利用梯度滤波获取路沿候选点的方法,但该方法在应对有障碍物遮挡路沿、路沿形状变化和坡度变化的情况下效果不佳,因为多线雷达发射线的扫描半径并不相同,而离车不同距离的路沿反射点特征也不相同,因此对路沿进行再次扫描、结合障碍物识别结果进行分析、聚类是更为稳定的选择;另有基于欧式聚类分割点云,按离车距离提取路沿点集的方法,但该方法只是将离车最近的坡度变化点找出来,聚类特征单一,难以处理雷达线数较多、点云信息丰富的大型数据,鲁棒性较差;另有根据路沿的线性特征采用一种基于距离的算法来提取候选路沿特征点的方法,但提取结果容易被道路上的障碍物所影响,即难以分辨出识别的路沿点到底属于障碍物还是路沿,因为障碍物也能被认作是一种短距离的“路沿”,而道路上的障碍物往往会遮挡激光雷达对路沿的探测,只能在比较理想化的情况下完成检测;而近两年比较的路沿检测研究有基于栅格网的方法,将点云降维至二维的栅格网上,获取栅格网单元像素的信息,但这种方法降低了点云的维度丰富性,且正方形栅格网破坏了激光雷达的数据特性,容易造成人为的特征。
提取出路沿的信息对无人驾驶系统非常重要,路沿规定了道路的边界,限制了车辆的可行范围,能给路径规划或其他感知系统提供大量信息。但是路沿的稳定性是非常重要的,能在连续时间内稳定存在又能检测到微小变化的路沿是非常可取的,因此需要有效地降低道路上的障碍物、路边的树木、植被、行人和路标等噪声的干扰。
发明内容
本发明为克服上述现有技术中的缺陷,提供一种基于激光雷达与扇状空间分割的路沿检测系统及其方法,能克服障碍物的干扰,可以更好地还原不同形态的路沿信息,可以适用在多种自动驾驶场景下。
为解决上述技术问题,本发明采用的技术方案是:一种基于激光雷达与扇状空间分割的路沿检测系统,包括:
点云采集模块,用于通过32/64线激光雷达扫描车辆周围环境,采集周围环境的点云数据并进行处理,将带有空间坐标、反射亮度和雷达环数的点云数据转换给本地坐标系中,将每一帧数据输出给地面分离模块;
地面分离模块:用于从一帧点云数据中提取出当前点云集的道路路面,所述道路路面指的是点云空间中所有物体最贴近地面的点所组成的曲面,地面点云集合输出给路沿检测模块;
扇状空间分割模块:用于根据激光雷达反射点云的特性,将三维坐标内的空间分成不同的扇状区域,扇状区域的特性由点云的数据特性所决定,能匹配点云的分布特征,根据地面检测结果,将扇状结构输出给道路延伸识别模块和路沿检测模块;
道路延伸识别模块:用于接收地面点云集合和扇状空间结构,结合两者特征,检测出车辆的可行驶区域,以此判断自动驾驶场景中道路的延伸方向,并将结果输出给路沿检测模块;
路沿检测模块:用于接收地面点云集合和扇状空间结构,根据道路的延伸方向将点云数据分类,通过方位角排序、点法线差聚类、点坐标数值滤波的方法,并行地从点云数据中提取各雷达扫描线检测得到的路沿,根据各扫描线检测得到的路沿特征点,进行基于欧几里得聚类方法的处理,得到多个路沿特征点集合,输出给路沿点筛选模块;
路沿点筛选模块:用于接收聚类点集合,根据扇状空间结构,排除候选路沿特征点中的干扰点,得到可靠性高的路沿点结果,输出给路沿拟合模块;
路沿拟合模块:用于接收最终的路沿点,根据路沿点连接关系,用基于B样条曲线拟合的算法求出相应的路沿,结合道路延伸方向,得到每一帧的路沿检测结果。
可选的,所述点云采集模块所得数据来自32线或64线的激光雷达。
可选的,所述地面分离模块根据雷达线数,设定模型算法的迭代次数k、数据是否适应于模型的阈值t、判定模型是否适用于数据集的数据数目d。
可选的,所述路沿检测模块的检测点云范围,可根据精度需求做出改变。
可选的,所述道路延伸识别模块,可根据精度需求调整道路延伸扇形的夹角角度和延伸长度。
本发明还提供一种基于激光雷达与扇状空间分割的路沿检测方法,利用以上所述的路沿检测系统,具体包括以下步骤:
S1.利用点云采集模块,使激光雷达扫描车辆周围环境,获取反射点云数据,转换到本地坐标系中进行一定程度的矫正,并根据雷达线数对测量精度范围有相应的预估;
S2.利用地面分离模块,并利用采样一致性分割算法,从处理后的点云数据中提取地面点云集合;
S3.利用扇状空间分割模块,根据激光雷达反射点云的特性,计算分割参数,将三维坐标内的空间分成不同的扇状空间区域;
S4.利用道路延伸识别模块,根据点云集合和扇状空间结构,检测出车辆的可行驶区域,以此判断场景中道路的延伸方向;
S5.利用路沿检测模块,根据道路的延伸方向将点云数据分类,通过方位角排序、点法线差聚类、点坐标数值滤波的方法,并行地从点云数据中提取各雷达扫描线检测得到的路沿,根据各扫描线检测得到的路沿特征点,进行基于欧几里得聚类方法的处理,得到多个路沿特征点集合;
S6.利用路沿点筛选模块,根据聚类点集合和扇状空间结构,排除候选路沿特征点中的干扰点,得到可靠性高的路沿点结果;
S7.利用路沿拟合模块,使用B样条曲线拟合的算法,对最终的路沿点集合进行拟合,构建出最终的道路路沿。
进一步的,所述的点云数据所得数据来自32/64线Velodyne激光雷达,数据转换后的新坐标系以激光雷达的安放位置为原点,车辆前行方向为y轴方向,车辆正右方向为x轴方向,车辆正上方向为z轴方向,反射点同时带有反射强度和所属雷达扫描线的编号信息,信息接收频率为10Hz。
进一步的,车辆行驶过程中,激光雷达旋转时会产生车辆抖动带来的波动误差和旋转一周带来的时间延迟误差,因此对每帧点云数据进行一定程度的校正;校正方法为使用基于RANSAC的平面检测方法得到平面Ax+By+Cz+D=0及其法向量P(A,B,C),由坐标系的竖直向量Q(0,0,1),推出P、Q之间的夹角θ=arccos((P·Q)/|P||Q|)和P、Q向量的旋转轴单位向量将夹角和旋转轴代入罗德里格旋转公式:
式中,E为单位矩阵,计算从法向量旋转到竖直向量(0,0,1)的旋转矩阵R;并将此旋转矩阵R应用到点云,点云即可得到旋转。
进一步的,所述的S2步骤具体包括:收集转换后的原始点云数据,根据雷达线数,提取稳定线数范围内的点云数据,使用基于采样一致性分割的算法,设置x-y轴水平面为提取目标模型,设置RANSAC为采样方法,根据雷达线数设定模型算法的迭代次数k、数据是否适应于模型的阈值t、判定模型是否适用于数据集的数据数目d,最后求出代表点云中每个位置最低点的所组成的曲面。所组成的曲面具有以下的特征:包含地面,包含连接地面的路沿,包含道路地面的延伸。由于障碍物会像路沿一样产生具有坡度的点云,因此障碍物和地面的连接处也会像路沿一样留在曲面上。
进一步的,所述的S3步骤具体包括:
S31.由地面分离模块我们可以得到所有地面点的集合Pground,在点云坐标系中,激光雷达位置处在原点,可以求得集合Pground中所有点z值的平均值Hs,则点云坐标系中z值为-Hs的平面为理想地面;在点云数据预处理步骤中,对点云做了时间校正处理,激光雷达任意雷达线Li都有对应的垂直夹角βi,垂直夹角βi为雷达射线和点云坐标系中z坐标轴反方向的夹角;
S32.按夹角βi的大小顺序排列雷达线L1-L64,其中L1的夹角最小,L64的夹角最大;在扇区分割中,只考虑夹角小于90度的雷达线;对于第i条符合条件的雷达线Li来说,Li上任意点Pi,k(xi,k,yi,k,zi,k)的垂直夹角为:
式中,xi,k,yi,k,zi,k为点Pi,k在点云坐标系中的x轴、y轴、z轴坐标值,k为点Pi,k在雷达线Li中的第k个点;设定雷达线Li的垂直夹角为:
式中Pti为雷达线Li中点的数量,对于第i条雷达线Li,若所有点的垂直夹角都设定为βi,则雷达线投在理想地面上会形成一个圆,此圆的半径ri由已知的传感器高度Hs和夹角βi可以求得ri=Hstanβi;雷达线Li的地面圆半径为ri,构造一系列同心圆R0、R1...Rmax,圆心Os为传感器在地面上的投影,max表示激光雷达的线数,圆Ri的半径为:
从圆心Os出发,设定分割角度α,将理想地面分为多个扇形,此处将α设定为1度;在x-y坐标系中,从x轴方向逆时针开始,以射线分割,设定第j个分割射线Bj在x-y坐标系中的角度为j*α;
S33.设定区域Si,j为圆Ri、圆Ri+1、射线Bj和射线Bj+1所围成的扇状区域,点云中的任意点在理想地面上的垂直投影都会落在某个扇状区域内或者在整个扇状结构之外;
进一步的,所述的S4步骤具体包括:
S42.根据扇状分割模型,从车辆周围的扇状区域出发,以搜索临近区域的方法,搜索所有连通的地面扇状区域;如果一个α夹角的扇形内地面扇状区域的延伸长度达到20m,则认为是一个道路延伸扇形;
S43.将一组夹角和超过10度的连续的道路延伸扇形看作是一条延伸的道路。
进一步的,所述的S5步骤具体包括:
S51.将点云数据按照道路延伸识别结果和雷达线进行分类;将点云数据分为多个区域,对于每个区域,需要做单独的路沿检测,因为每一个被分割的空间都有一段单独的路沿;
S52.在路沿上设置点坐标,会基于雷达线数、距离、路沿斜率等进行相应变化;对区域内单线雷达数据点集合Vi进行方位角大小排序,沿方位角大小检索聚类得到的路沿;
S53.由于雷达线Li上的点已排序,对于第k个点Pi,k(xi,k,yi,k,zi,k),设定从Pi,k出发的两个向量Va和Vb,其计算公式为:
式中,Nv为激光雷达的单道雷达线能打在路沿上的激光点数量的经验值,
设定点Pi,k的特征角为θi,k,θi,k为向量Va和向量Vb的夹角;当点Pi,k的特征角θi,k小于150°,则标记为路沿候选点,雷达线Li能打在路沿上的最少激光点个数为Nv,由路沿高度和Li决定;
S54.使用欧几里得聚类将路沿候选点聚类为多个路沿特征点集合。
进一步的,所述的S7步骤中B样条曲线拟合算法具体包括:根据雷达线数的不同,选取不同的曲线控制点和多项式的次数;B样条曲线的k阶参数曲线为:
式中,折线P1,P2...Pn为P(t)的控制多边形,对给定参数t轴上的一个分割T,Bi,k(t)为T的k阶B样条基函数:
与现有技术相比,有益效果是:
1.本发明利用点云空间分割的技术,有效地降低了单次算法中目标点云数据的规模,又能并行地进行路沿点检测操作,提高了路沿检测算法的效率,克服了多线激光雷达原始数据庞大的问题;
2.本发明根据激光雷达的特性,将空间分割成能较好地装载点云的扇状空间,根据扇状空间的标记值,可以分辨出当前区域的大致属性,对多种后续算法提供可靠的判断依据,又能实时反映当前帧的点云场景信息;
3.本发明通过道路延伸识别模块,能识别出车辆当前所处道路的延伸信息,能处理多个场景下的道路,如Y型道路,T型道路,十字路口等。
4.本发明通过路沿检测算法,检测点云中打在路沿上的候选点,能有效快速地将带有路沿特征的点云归类出来,并聚类成多个点集合;
5.本发明通过路沿点筛选模块,能将非路沿点的干扰点集合排除,使得预留下来的路沿点可靠性高;
6.本发明通过路沿拟合模块,使用B样条曲线模型,能直观反映多种形状的道路路沿,能给建图、决策等其他自动驾驶模块提供有力支持。
附图说明
图1为本发明中系统的结构简图。
图2为本发明中方法的流程图。
图3为本发明中扇状分割模型的立体示意图。
图4为本发明中扇状分割模型的平面示意图。
图5为本发明中扇状分割模型中一个扇状区域的示意图。
图6为本发明中道路延伸识别模型的立体示意图。
图7位本发明中数据实例的检测结果。
具体实施方式
附图仅用于示例性说明,不能理解为对本发明的限制;为了更好说明本实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;对于本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。附图中描述位置关系仅用于示例性说明,不能理解为对本发明的限制。
实施例1:
如图1所示,一种基于激光雷达与扇状空间分割的路沿检测系统,包括:
点云采集模块,用于通过32/64线激光雷达扫描车辆周围环境,采集周围环境的点云数据并进行处理,将带有空间坐标、反射亮度和雷达环数的点云数据转换给本地坐标系中,将每一帧数据输出给地面分离模块;
地面分离模块:用于从一帧点云数据中提取出当前点云集的道路路面,所述道路路面指的是点云空间中所有物体最贴近地面的点所组成的曲面,地面点云集合输出给路沿检测模块;
扇状空间分割模块:用于根据激光雷达反射点云的特性,将三维坐标内的空间分成不同的扇状区域,扇状区域的特性由点云的数据特性所决定,能匹配点云的分布特征,根据地面检测结果,将扇状结构输出给道路延伸识别模块和路沿检测模块;
道路延伸识别模块:用于接收地面点云集合和扇状空间结构,结合两者特征,检测出车辆的可行驶区域,以此判断自动驾驶场景中道路的延伸方向,并将结果输出给路沿检测模块;
路沿检测模块:用于接收地面点云集合和扇状空间结构,根据道路的延伸方向将点云数据分类,通过方位角排序、点法线差聚类、点坐标数值滤波的方法,并行地从点云数据中提取各雷达扫描线检测得到的路沿,根据各扫描线检测得到的路沿特征点,进行基于欧几里得聚类方法的处理,得到多个路沿特征点集合,输出给路沿点筛选模块;
路沿点筛选模块:用于接收聚类点集合,根据扇状空间结构,排除候选路沿特征点中的干扰点,得到可靠性高的路沿点结果,输出给路沿拟合模块;
路沿拟合模块:用于接收最终的路沿点,根据路沿点连接关系,用基于B样条曲线拟合的算法求出相应的路沿,结合道路延伸方向,得到每一帧的路沿检测结果。
本系统的应用场景为搭载32/64线激光雷达的车辆,行驶在道路上。需要激光雷达平稳、水平地放在车顶,能够收集稳定的数据。为了能应对10Hz频率的数据,需要无人驾驶系统搭载先进的处理器,用于执行地面分离算法、扇状空间分割算法、道路延伸识别算法、路沿检测算法和路沿拟合算法。
实施例2
如图2至7所示,一种基于激光雷达与扇状空间分割的路沿检测方法,利用实施例1所述的路沿检测系统,具体包括以下步骤:
S1.利用点云采集模块,使激光雷达扫描车辆周围环境,获取反射点云数据,转换到本地坐标系中进行一定程度的矫正,并根据雷达线数对测量精度范围有相应的预估;
S2.利用地面分离模块,并利用采样一致性分割算法,从处理后的点云数据中提取地面点云集合;
S3.利用扇状空间分割模块,根据激光雷达反射点云的特性,计算分割参数,将三维坐标内的空间分成不同的扇状空间区域;
S4.利用道路延伸识别模块,根据点云集合和扇状空间结构,检测出车辆的可行驶区域,以此判断场景中道路的延伸方向;
S5.利用路沿检测模块,根据道路的延伸方向将点云数据分类,通过方位角排序、点法线差聚类、点坐标数值滤波的方法,并行地从点云数据中提取各雷达扫描线检测得到的路沿,根据各扫描线检测得到的路沿特征点,进行基于欧几里得聚类方法的处理,得到多个路沿特征点集合;
S6.利用路沿点筛选模块,根据聚类点集合和扇状空间结构,排除候选路沿特征点中的干扰点,得到可靠性高的路沿点结果;具体包括:如果聚类点集合在所处的分割空间中,其左侧和右侧的扇状区域同时存在被标记为地面的扇状区域,则认为此聚类点为干扰点;
S7.利用路沿拟合模块,使用B样条曲线拟合的算法,对最终的路沿点集合进行拟合,构建出最终的道路路沿。
其中,所述的点云数据所得数据来自32/64线Velodyne激光雷达,数据转换后的新坐标系以激光雷达的安放位置为原点,车辆前行方向为y轴方向,车辆正右方向为x轴方向,车辆正上方向为z轴方向,反射点同时带有反射强度和所属雷达扫描线的编号信息,信息接收频率为10Hz。
具体的,车辆行驶过程中,激光雷达旋转时会产生车辆抖动带来的波动误差和旋转一周带来的时间延迟误差,因此对每帧点云数据进行一定程度的校正;校正方法为使用基于RANSAC的平面检测方法得到平面Ax+By+Cz+D=0及其法向量P(A,B,C),由坐标系的竖直向量Q(0,0,1),推出P、Q之间的夹角θ=arccos((P·Q)/|P||Q|)和P、Q向量的旋转轴单位向量将夹角和旋转轴代入罗德里格旋转公式:
式中,E为单位矩阵,计算从法向量旋转到竖直向量(0,0,1)的旋转矩阵R;并将此旋转矩阵R应用到点云,点云即可得到旋转。
其中,所述的S2步骤具体包括:收集转换后的原始点云数据,根据雷达线数,提取稳定线数范围内的点云数据,使用基于采样一致性分割的算法,设置x-y轴水平面为提取目标模型,设置RANSAC为采样方法,根据雷达线数设定模型算法的迭代次数k、数据是否适应于模型的阈值t、判定模型是否适用于数据集的数据数目d,最后求出代表点云中每个位置最低点的所组成的曲面。所组成的曲面具有以下的特征:包含地面,包含连接地面的路沿,包含道路地面的延伸。由于障碍物会像路沿一样产生具有坡度的点云,因此障碍物和地面的连接处也会像路沿一样留在曲面上。
另外,所述的S3步骤具体包括:
S31.由地面分离模块可以得到所有地面点的集合Pground,在点云坐标系中,激光雷达位置处在原点,可以求得集合Pground中所有点z值的平均值Hs,则点云坐标系中z值为-Hs的平面为理想地面。在点云数据预处理步骤中,对点云做了时间校正处理,激光雷达任意雷达线Li都有对应的垂直夹角βi,如图3所示,底部两个圆形为理想地面,垂直夹角βi为雷达射线和点云坐标系中z坐标轴反方向的夹角;
S32.按夹角βi的大小顺序排列雷达线L1-L64,其中L1的夹角最小,L64的夹角最大;在扇区分割中,只考虑夹角小于90度的雷达线;对于第i条符合条件的雷达线Li来说,Li上任意点Pi,k(xi,k,yi,k,zi,k)的垂直夹角为:
式中,xi,k,yi,k,zi,k为点Pi,k在点云坐标系中的x轴、y轴、z轴坐标值,k为点Pi,k在雷达线Li中的第k个点;设定雷达线Li的垂直夹角为:
式中Pti为雷达线Li中点的数量,对于第i条雷达线Li,若所有点的垂直夹角都设定为βi,则雷达线投在理想地面上会形成一个圆,此圆的半径ri由已知的传感器高度Hs和夹角βi可以求得ri=Hstanβi。如图3所示,雷达线Li的地面圆半径为ri,构造一系列同心圆R0、R1...Rmax,圆心Os为传感器在地面上的投影,max表示激光雷达的线数,圆Ri的半径为:
从圆心Os出发,设定分割角度α,将理想地面分为多个扇形,此处将α设定为1度。在x-y坐标系中,从x轴方向逆时针开始,以射线分割,设定第j个分割射线Bj在x-y坐标系中的角度为j*α,如图4所示;
S33.设定区域Si,j为圆Ri、圆Ri+1、射线Bj和射线Bj+1所围成的扇状区域,如图5所示。点云中的任意点在理想地面上的垂直投影都会落在某个扇状区域内或者在整个扇状结构之外;
其中,所述的S4步骤具体包括:
S42.根据扇状分割模型,从车辆周围的扇状区域出发,以搜索临近区域的方法,搜索所有连通的地面扇状区域;如果一个α夹角的扇形内地面扇状区域的延伸长度达到20m,则认为是一个道路延伸扇形;
S43.将一组夹角和超过10度的连续的道路延伸扇形看作是一条延伸的道路,如图6所示,为一个识别出前后延伸道路的模型,箭头为延伸方向。
另外,所述的S5步骤具体包括:
S51.将点云数据按照道路延伸识别结果和雷达线进行分类。如图6所示,相邻的延伸箭头之间有一个虚线的角平分线,每一个延伸箭头和临近的角平分线组成一个被分割的扇形,此分割算法将点云数据分为多个区域,对于每个区域,需要做单独的路沿检测,因为每一个被分割的空间都有一段单独的路沿;
S52.在路沿上设置点坐标,打在路沿上的点坐标属性是稳定、有规律的,会基于雷达线数、距离、路沿斜率等进行相应变化。对区域内单线雷达数据点集合Vi进行方位角大小排序,沿方位角大小检索聚类得到的路沿,具有以下特性:满足一定数量,相邻点法线差、点坐标性质相似,路沿点紧密、连续,路沿高度、斜率变化稳定;
S53.由于雷达线Li上的点已排序,对于第k个点Pi,k(xi,k,yi,k,zi,k),设定从Pi,k出发的两个向量Va和Vb,其计算公式为:
式中,Nv为激光雷达的单道雷达线能打在路沿上的激光点数量的经验值,
设定点Pi,k的特征角为θi,k,θi,k为向量Va和向量Vb的夹角;当点Pi,k的特征角θi,k小于150°,则标记为路沿候选点,雷达线Li能打在路沿上的最少激光点个数为Nv,由路沿高度和Li决定;
S54.使用欧几里得聚类将路沿候选点聚类为多个路沿特征点集合。根据扇状空间结构,排除干扰点集合,余下的为可靠性高的路沿点集合。
其中,Nv可由以下步骤进行推导计算:
1)设当前雷达线Li的垂直夹角为βi,则雷达线和x-y水平面的夹角θi为:
θi=90°-βi
2)设定雷达的角分辨率为ρ,ρ的计算公式为:
式中:Np为一道雷达线在一帧内产生的点数量,此处设Np=2000。
3)在当前雷达线Li中,设定一个值δxy,i,表示雷达线打到理想地面上,相邻激光点之间的距离期望值。δxy,i的计算公式为
式中:Hs为传感器离理想地面的垂直距离。
4)得到理想地面上相邻激光点之间的距离期望值δxy,i后,我们设定一个垂直距离期望值δz,i,表示理想地面上相邻激光点之间垂直距离最大差值。δz,i的计算公式为
δz,i=δxy,i*sinθi
4)路沿点和相邻点之间的垂直距离差值都会大于δz,i,而平整面上的相邻点垂直距离差值会小于δz,i。设路沿高度的判断值为Hc,因此可以计算出当前雷达线Li理论上能打在路沿上的激光点个数。设定理想情况下,雷达线Li能打在路沿上的最少激光点个数为Nv,Nv的计算公式为:
在本实施例中,将聚类点集合中的非地面区域大于地面区域的点集合标记为干扰集合,将其从路沿候选点中删除。
其中,所述的S7步骤中B样条曲线拟合算法具体包括:根据雷达线数的不同,选取不同的曲线控制点和多项式的次数;B样条曲线的k阶参数曲线为:
式中,折线P1,P2...Pn为P(t)的控制多边形,对给定参数t轴上的一个分割T,Bi,k(t)为T的k阶B样条基函数:
在本实施例中,地面分离模块仅处理50m内的点云数据。扇状分割模块,分割角度设定为1度。地面延伸识别模块,夹角角度设为10度,延伸长度设为20m。路沿检测模块的检测点云范围,根据精度需求设置为30m之内。
显然,本发明的上述实施例仅仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明权利要求的保护范围之内。
Claims (9)
1.一种基于激光雷达与扇状空间分割的路沿检测系统,其特征在于,包括:
点云采集模块,用于通过32/64线激光雷达扫描车辆周围环境,采集周围环境的点云数据并进行处理,将带有空间坐标、反射亮度和雷达环数的点云数据转换给本地坐标系中,将每一帧数据输出给地面分离模块;
地面分离模块:用于从一帧点云数据中提取出当前点云集的道路路面,所述道路路面指的是点云空间中所有物体最贴近地面的点所组成的曲面,地面点云集合输出给路沿检测模块;
扇状空间分割模块:用于根据激光雷达反射点云的特性,将三维坐标内的空间分成不同的扇状区域,扇状区域的特性由点云的数据特性所决定,能匹配点云的分布特征,根据地面检测结果,将扇状结构输出给道路延伸识别模块和路沿检测模块;
道路延伸识别模块:用于接收地面点云集合和扇状空间结构,结合两者特征,检测出车辆的可行驶区域,以此判断自动驾驶场景中道路的延伸方向,并将结果输出给路沿检测模块;
路沿检测模块:用于接收地面点云集合和扇状空间结构,根据道路的延伸方向将点云数据分类,通过方位角排序、点法线差聚类、点坐标数值滤波的方法,并行地从点云数据中提取各雷达扫描线检测得到的路沿,根据各扫描线检测得到的路沿特征点,进行基于欧几里得聚类方法的处理,得到多个路沿特征点集合,输出给路沿点筛选模块;
路沿点筛选模块:用于接收聚类点集合,根据扇状空间结构,排除候选路沿特征点中的干扰点,得到可靠性高的路沿点结果,输出给路沿拟合模块;
路沿拟合模块:用于接收最终的路沿点,根据路沿点连接关系,用基于B样条曲线拟合的算法求出相应的路沿,结合道路延伸方向,得到每一帧的路沿检测结果。
2.一种基于激光雷达与扇状空间分割的路沿检测方法,其特征在于,利用权利要求1所述的路沿检测系统,具体包括以下步骤:
S1.利用点云采集模块,使激光雷达扫描车辆周围环境,获取反射点云数据,转换到本地坐标系中进行一定程度的矫正,并根据雷达线数对测量精度范围有相应的预估;
S2.利用地面分离模块,并利用采样一致性分割算法,从处理后的点云数据中提取地面点云集合;
S3.利用扇状空间分割模块,根据激光雷达反射点云的特性,计算分割参数,将三维坐标内的空间分成不同的扇状空间区域;
S4.利用道路延伸识别模块,根据点云集合和扇状空间结构,检测出车辆的可行驶区域,以此判断场景中道路的延伸方向;
S5.利用路沿检测模块,根据道路的延伸方向将点云数据分类,通过方位角排序、点法线差聚类、点坐标数值滤波的方法,并行地从点云数据中提取各雷达扫描线检测得到的路沿,根据各扫描线检测得到的路沿特征点,进行基于欧几里得聚类方法的处理,得到多个路沿特征点集合;
S6.利用路沿点筛选模块,根据聚类点集合和扇状空间结构,排除候选路沿特征点中的干扰点,得到可靠性高的路沿点结果;
S7.利用路沿拟合模块,使用B样条曲线拟合的算法,对最终的路沿点集合进行拟合,构建出最终的道路路沿。
3.根据权利要求2所述的基于激光雷达与扇状空间分割的路沿检测方法,其特征在于,所述的点云数据所得数据来自32/64线Velodyne激光雷达,数据转换后的新坐标系以激光雷达的安放位置为原点,车辆前行方向为y轴方向,车辆正右方向为x轴方向,车辆正上方向为z轴方向,反射点同时带有反射强度和所属雷达扫描线的编号信息,信息接收频率为10Hz。
5.根据权利要求2所述的基于激光雷达与扇状空间分割的路沿检测方法,其特征在于,所述的S2步骤具体包括:收集转换后的原始点云数据,根据雷达线数,提取稳定线数范围内的点云数据,使用基于采样一致性分割的算法,设置x-y轴水平面为提取目标模型,设置RANSAC为采样方法,根据雷达线数设定模型算法的迭代次数k、数据是否适应于模型的阈值t、判定模型是否适用于数据集的数据数目d,最后求出代表点云中每个位置最低点的所组成的曲面。
6.根据权利要求2所述的基于激光雷达与扇状空间分割的路沿检测方法,其特征在于,所述的S3步骤具体包括:
S31.由地面分离模块可以得到所有地面点的集合Pground,在点云坐标系中,激光雷达位置处在原点,可以求得集合Pground中所有点z值的平均值Hs,则点云坐标系中z值为-Hs的平面为理想地面;在点云数据预处理步骤中,对点云做了时间校正处理,激光雷达任意雷达线Li都有对应的垂直夹角βi,垂直夹角βi为雷达射线和点云坐标系中z坐标轴反方向的夹角;
S32.按夹角βi的大小顺序排列雷达线L1-L64,其中L1的夹角最小,L64的夹角最大;在扇区分割中,只考虑夹角小于90度的雷达线;对于第i条符合条件的雷达线Li来说,Li上任意点Pi,k(xi,k,yi,k,zi,k)的垂直夹角为:
式中,xi,k,yi,k,zi,k为点Pi,k在点云坐标系中的x轴、y轴、z轴坐标值,k为点Pi,k在雷达线Li中的第k个点;设定雷达线Li的垂直夹角为:
式中Pti为雷达线Li中点的数量,对于第i条雷达线Li,若所有点的垂直夹角都设定为βi,则雷达线投在理想地面上会形成一个圆,此圆的半径ri由已知的传感器高度Hs和夹角βi可以求得ri=Hstanβi;雷达线Li的地面圆半径为ri,构造一系列同心圆R0、R1...Rmax,圆心Os为传感器在地面上的投影,max表示激光雷达的线数,圆Ri的半径为:
从圆心Os出发,设定分割角度α,将理想地面分为多个扇形,此处将α设定为1度;在x-y坐标系中,从x轴方向逆时针开始,以射线分割,设定第j个分割射线Bj在x-y坐标系中的角度为j*α;
S33.设定区域Si,j为圆Ri、圆Ri+1、射线Bj和射线Bj+1所围成的扇状区域,点云中的任意点在理想地面上的垂直投影都会落在某个扇状区域内或者在整个扇状结构之外;
8.根据权利要求7所述的基于激光雷达与扇状空间分割的路沿检测方法,其特征在于,所述的S5步骤具体包括:
S51.将点云数据按照道路延伸识别结果和雷达线进行分类;将点云数据分为多个区域,对于每个区域,需要做单独的路沿检测,因为每一个被分割的空间都有一段单独的路沿;
S52.在路沿上设置点坐标,会基于雷达线数、距离、路沿斜率进行相应变化;对区域内单线雷达数据点集合Vi进行方位角大小排序,沿方位角大小检索聚类得到的路沿;
S53.由于雷达线Li上的点已排序,对于第k个点Pi,k(xi,k,yi,k,zi,k),设定从Pi,k出发的两个向量Va和Vb,其计算公式为:
式中,:Nv为激光雷达的单道雷达线能打在路沿上的激光点数量的经验值,Nv=max/8;
设定点Pi,k的特征角为θi,k,θi,k为向量Va和向量Vb的夹角;当点Pi,k的特征角θi,k小于150°,则标记为路沿候选点,雷达线Li能打在路沿上的最少激光点个数为Nv,由路沿高度和Li决定;
S54.使用欧几里得聚类将路沿候选点聚类为多个路沿特征点集合。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911025983.3A CN110781827B (zh) | 2019-10-25 | 2019-10-25 | 一种基于激光雷达与扇状空间分割的路沿检测系统及其方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911025983.3A CN110781827B (zh) | 2019-10-25 | 2019-10-25 | 一种基于激光雷达与扇状空间分割的路沿检测系统及其方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110781827A CN110781827A (zh) | 2020-02-11 |
CN110781827B true CN110781827B (zh) | 2021-05-11 |
Family
ID=69386655
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911025983.3A Active CN110781827B (zh) | 2019-10-25 | 2019-10-25 | 一种基于激光雷达与扇状空间分割的路沿检测系统及其方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110781827B (zh) |
Families Citing this family (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111275816B (zh) * | 2020-02-25 | 2022-05-10 | 华为技术有限公司 | 获取点云数据的方法及相关设备 |
CN111208495A (zh) * | 2020-02-28 | 2020-05-29 | 燕山大学 | 一种基于激光雷达点云特征线与平面校准的地面提取方法 |
CN111382695A (zh) * | 2020-03-06 | 2020-07-07 | 北京百度网讯科技有限公司 | 用于检测目标的边界点的方法和装置 |
CN111435163B (zh) * | 2020-03-18 | 2023-06-30 | 深圳市镭神智能系统有限公司 | 地面点云数据过滤方法、装置、探测系统及存储介质 |
CN111323802B (zh) * | 2020-03-20 | 2023-02-28 | 阿波罗智能技术(北京)有限公司 | 智能驾驶车辆定位方法、装置及设备 |
CN113009453B (zh) * | 2020-03-20 | 2022-11-08 | 青岛慧拓智能机器有限公司 | 矿山路沿检测及建图方法及装置 |
CN111580131B (zh) * | 2020-04-08 | 2023-07-07 | 西安邮电大学 | 三维激光雷达智能车在高速公路上识别车辆的方法 |
CN111665524A (zh) * | 2020-04-29 | 2020-09-15 | 武汉光庭科技有限公司 | 一种利用多线激光雷达进行地面剔除的方法及系统 |
CN113009503A (zh) * | 2020-07-20 | 2021-06-22 | 青岛慧拓智能机器有限公司 | 一种用于矿山道路的拓扑结构自动构建系统及方法 |
CN111982152B (zh) * | 2020-07-31 | 2022-04-05 | 广州文远知行科技有限公司 | 点云地图量化方法、装置、计算机设备和存储介质 |
CN114170579B (zh) * | 2020-08-21 | 2024-09-27 | 广州汽车集团股份有限公司 | 一种路沿检测方法、装置及汽车 |
WO2022056816A1 (zh) * | 2020-09-18 | 2022-03-24 | 中国科学院重庆绿色智能技术研究院 | 一种车辆防抖稳定器感知方法、应用、系统 |
CN112149572A (zh) * | 2020-09-24 | 2020-12-29 | 知行汽车科技(苏州)有限公司 | 路沿检测方法、装置和存储介质 |
CN112180343A (zh) * | 2020-09-30 | 2021-01-05 | 东软睿驰汽车技术(沈阳)有限公司 | 激光点云数据处理方法、装置、设备及无人驾驶系统 |
CN113762011B (zh) * | 2020-11-25 | 2024-06-21 | 北京京东乾石科技有限公司 | 路牙检测方法、装置、设备和存储介质 |
CN112540616B (zh) * | 2020-12-11 | 2021-07-16 | 北京赛目科技有限公司 | 一种基于无人驾驶的激光点云生成方法及装置 |
CN112650230B (zh) * | 2020-12-15 | 2024-05-03 | 广东盈峰智能环卫科技有限公司 | 基于单线激光雷达的自适应贴边作业方法、装置及机器人 |
CN112258566B (zh) * | 2020-12-22 | 2021-03-23 | 中智行科技有限公司 | 一种路面的采集点识别方法、装置及服务器 |
CN112381941B (zh) * | 2021-01-15 | 2021-03-26 | 武汉鸿宇飞规划设计技术有限公司 | 一种航飞影像坐标纠正的方法 |
CN112767429B (zh) * | 2021-01-18 | 2022-11-01 | 南京理工大学 | 一种地面-雪面点云快速分割方法 |
CN112912894B (zh) * | 2021-02-07 | 2022-08-09 | 华为技术有限公司 | 道路边界识别方法和装置 |
CN112949489B (zh) * | 2021-03-01 | 2023-05-12 | 成都安智杰科技有限公司 | 一种道路边界识别方法、装置、电子设备和存储介质 |
CN113140002B (zh) * | 2021-03-22 | 2022-12-13 | 北京中科慧眼科技有限公司 | 基于双目立体相机的道路状况检测方法、系统和智能终端 |
CN113156451B (zh) * | 2021-03-23 | 2023-04-18 | 北京易控智驾科技有限公司 | 非结构化道路边界检测方法、装置、存储介质和电子设备 |
CN113160143B (zh) * | 2021-03-23 | 2022-05-24 | 中南大学 | 物料搅拌槽内物料液面高度测量方法及系统 |
CN113281717A (zh) * | 2021-06-04 | 2021-08-20 | 上海西井信息科技有限公司 | 基于激光雷达的地面过滤方法、系统、设备及存储介质 |
CN113515513B (zh) * | 2021-06-30 | 2023-04-21 | 同济大学 | 轨迹矫正方法及装置、点云地图生成方法及装置 |
CN113313629B (zh) * | 2021-07-30 | 2021-10-29 | 北京理工大学 | 交叉路口自动识别方法、系统及其模型保存方法、系统 |
CN113963061B (zh) * | 2021-10-29 | 2024-07-12 | 广州文远知行科技有限公司 | 路沿分布信息获取方法、装置、电子设备和存储介质 |
CN114187425A (zh) * | 2021-12-13 | 2022-03-15 | 河北工业大学 | 基于二进制占用网格的点云聚类与包围方法 |
CN114279452B (zh) * | 2021-12-29 | 2024-04-12 | 北京斯年智驾科技有限公司 | 无人集卡挂车姿态检测方法及检测系统 |
CN114425774B (zh) * | 2022-01-21 | 2023-11-03 | 深圳优地科技有限公司 | 机器人行走道路的识别方法、识别设备以及存储介质 |
CN115015964A (zh) * | 2022-05-13 | 2022-09-06 | 深圳优地科技有限公司 | 一种路沿检测方法、装置、终端设备和存储介质 |
CN115376365B (zh) * | 2022-10-21 | 2023-01-13 | 北京德风新征程科技有限公司 | 车辆控制方法、装置、电子设备和计算机可读介质 |
CN116148869B (zh) * | 2023-04-21 | 2023-08-18 | 深圳市龙之源科技股份有限公司 | 手持测距仪 |
CN117553686B (zh) * | 2024-01-12 | 2024-05-07 | 成都航空职业技术学院 | 一种基于激光雷达点云的车厢散料超限检测方法 |
CN117726886B (zh) * | 2024-02-08 | 2024-05-14 | 华侨大学 | 鲁棒的激光雷达点云地面点提取方法、装置、设备及介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103675939B (zh) * | 2013-12-11 | 2016-05-18 | 中国民用航空总局第二研究所 | 一种基于点云探测的跑道路面监测装置及方法 |
JP6733370B2 (ja) * | 2016-06-30 | 2020-07-29 | 株式会社大林組 | 孔壁測定方法、孔壁測定装置及び測定結果表示装置 |
CN109858460B (zh) * | 2019-02-20 | 2022-06-10 | 重庆邮电大学 | 一种基于三维激光雷达的车道线检测方法 |
CN110764108B (zh) * | 2019-11-05 | 2023-05-02 | 畅加风行(苏州)智能科技有限公司 | 一种用于港口自动驾驶场景的障碍物检测方法及装置 |
-
2019
- 2019-10-25 CN CN201911025983.3A patent/CN110781827B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN110781827A (zh) | 2020-02-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110781827B (zh) | 一种基于激光雷达与扇状空间分割的路沿检测系统及其方法 | |
CN106650640B (zh) | 一种基于激光雷达点云局部结构特征的负障碍物检测方法 | |
CN108509918B (zh) | 融合激光点云与图像的目标检测与跟踪方法 | |
CN109444911B (zh) | 一种单目相机和激光雷达信息融合的无人艇水面目标检测识别与定位方法 | |
CN108828621A (zh) | 基于三维激光雷达的障碍检测和路面分割算法 | |
WO2022188663A1 (zh) | 一种目标检测方法及装置 | |
CN107392929B (zh) | 一种基于人眼视觉模型的智能化目标检测及尺寸测量方法 | |
CN112766184B (zh) | 基于多层级特征选择卷积神经网络的遥感目标检测方法 | |
CN110992341A (zh) | 一种基于分割的机载LiDAR点云建筑物提取方法 | |
Wang et al. | Bionic vision inspired on-road obstacle detection and tracking using radar and visual information | |
CN106127791A (zh) | 一种航空遥感影像的建筑物轮廓线提取方法 | |
CN111781608A (zh) | 一种基于fmcw激光雷达的运动目标检测方法及系统 | |
CN113221648B (zh) | 一种基于移动测量系统的融合点云序列影像路牌检测方法 | |
Wang et al. | An overview of 3d object detection | |
CN114200477A (zh) | 一种激光三维成像雷达地面目标点云数据处理方法 | |
CN111487646A (zh) | 一种玉米植株形态在线检测方法 | |
CN112365592B (zh) | 一种基于双向高程模型的局部环境特征描述方法 | |
CN108710818A (zh) | 一种基于三维激光雷达的人数实时监测统计系统及方法 | |
CN116524219A (zh) | 一种基于激光雷达点云聚类的障碍物检测方法 | |
CN115187803B (zh) | 一种用于名优茶嫩芽采摘过程的定位方法 | |
CN116079749B (zh) | 基于聚类分离条件随机场的机器人视觉避障方法及机器人 | |
CN113281782A (zh) | 一种基于无人驾驶车的激光雷达雪点滤除方法 | |
CN113985435A (zh) | 一种融合多激光雷达的建图方法及系统 | |
CN115760898A (zh) | 一种混合高斯域下道路抛洒物的世界坐标定位方法 | |
Bulatov et al. | Automatic tree-crown detection in challenging scenarios |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |