CN114359866A - 基于激光雷达的道路边界检测方法和装置 - Google Patents
基于激光雷达的道路边界检测方法和装置 Download PDFInfo
- Publication number
- CN114359866A CN114359866A CN202111676309.9A CN202111676309A CN114359866A CN 114359866 A CN114359866 A CN 114359866A CN 202111676309 A CN202111676309 A CN 202111676309A CN 114359866 A CN114359866 A CN 114359866A
- Authority
- CN
- China
- Prior art keywords
- candidate
- grids
- grid
- road
- point cloud
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title abstract description 73
- 238000012216 screening Methods 0.000 claims abstract description 132
- 238000000034 method Methods 0.000 claims abstract description 90
- 238000001914 filtration Methods 0.000 claims description 39
- 230000008569 process Effects 0.000 claims description 35
- 238000012545 processing Methods 0.000 claims description 25
- 238000007781 pre-processing Methods 0.000 claims description 13
- 238000010845 search algorithm Methods 0.000 claims description 9
- 238000002372 labelling Methods 0.000 claims description 5
- 239000007787 solid Substances 0.000 description 14
- 238000012360 testing method Methods 0.000 description 12
- 238000003860 storage Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000010276 construction Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 241000282414 Homo sapiens Species 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000003708 edge detection Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005034 decoration Methods 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 239000004575 stone Substances 0.000 description 2
- 230000004888 barrier function Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 230000035772 mutation Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011897 real-time detection Methods 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/30—Noise filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/762—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using clustering, e.g. of similar faces in social networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种基于激光雷达的道路边界检测方法和装置。其中,该方法包括:扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据;对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格;对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域;基于每个路沿候选区域中的区域候选点,生成结构化道路的道路边界。本发明解决了当前道路检测算法无法适用于固态激光雷达场景的技术问题。
Description
技术领域
本发明涉及车辆领域,具体而言,涉及一种基于激光雷达的道路边界检测方法和装置。
背景技术
目前,自动驾驶都离不开道路边界的检测,道路边界的检测是辅助驾驶中为人类提供安全行驶区域的核心功能模块,也是为全自动无人驾驶提供有效检测范围与可行驶区域的重要前置功能模块。
在相关技术中,道路边缘检测算法大都基于机械式激光雷达点云展开,但由于机械式激光雷达具有价格高、体积大、不便于量产等缺点,固态激光雷达应运而生,且在量产自动驾驶汽车的占据越来越高的地位。由于扫描方式不同,固态激光雷达与机械式激光雷达所形成的点云也有很大不同,从而存在道路检测算法均无法很好的适用于固态激光雷达场景的问题。
针对上述当前道路检测算法无法适用于固态激光雷达场景的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种基于激光雷达的道路边界检测方法和装置,以至少解决当前道路检测算法无法适用于固态激光雷达场景的技术问题。
根据本发明实施例的一个方面,提供了一种基于激光雷达的道路边界检测方法,包括:扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据;对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格;对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域;基于每个路沿候选区域中的区域候选点,生成结构化道路的道路边界。
可选地,基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,包括:采用至少一种筛选条件对每个栅格内点云的栅格特征信息进行筛选处理,其中,筛选条件包括如下至少之一:第一筛选条件,其中,所述第一筛选条件包含的筛选因素包括:所述栅格内最高点的高度、所述栅格内最低点的高度和所述栅格内点云的高度差;第二筛选条件,其中,第二筛选条件包含的筛选因素包括:当前候选栅格周围的候选栅格数量是否处于筛选阈值范围内。
可选地,采用第一筛选条件对每个栅格内点云的栅格特征信息进行筛选处理,包括:采用第一筛选条件中的一个或多个筛选因素,对每个栅格内点云的栅格特征信息进行筛选处理,得到第一组候选栅格,其中,第一组候选栅格内的点云包括如下特征:不存在假边缘、低矮障碍物、有高度差物体的点云数据。
可选地,在得到第一组候选栅格之后,方法还包括:采用第二筛选条件对第一组候选栅格中的候选栅格进行二次筛选,获取第二组候选栅格,其中,第二组候选栅格为第一组候选栅格中进行了二次栅格标记的候选栅格。
可选地,采用第二筛选条件对第一组候选栅格中的候选栅格进行二次筛选,获取第二组候选栅格,包括:检测第一组候选栅格中每个候选栅格在各自邻域内候选栅格的数量,其中,候选栅格为第一组候选栅格内的栅格;如果第一组候选栅格中任意一个候选栅格邻域内候选栅格的数量处于筛选阈值范围内,则将处于筛选阈值范围内的候选栅格进行二次栅格标记。
可选地,在获取第二组候选栅格之后,对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域,包括:采用搜索算法对第二组候选栅格中的候选栅格进行合并处理,并统计合并后每个候选区域内候选栅格的数量;对进行了合并处理的第二组候选栅格进行区域标记,并获取至少一个路沿候选区域,其中,路沿候选区域包括多个目标候选栅格。
可选地,如果任意一个候选区域内的候选栅格数量超过目标阈值,则将候选区域进行区域标记。
可选地,基于每个路沿候选区域中的区域候选点,生成结构化道路的道路边界,包括:获取任意一个路沿候选区域内的多个栅格;从多个栅格中选取候选点,获取每个路沿候选区域内的候选点;对每个路沿候选区域内的所有候选点进行曲线拟合,其中,拟合后的曲线为结构化道路的道路边界。
可选地,在获取结构化道路的激光雷达点云数据之后,方法还包括:对激光雷达点云数据进行预处理,其中,预处理包括如下至少之一:点云未定义值过滤,噪声点过滤以及点云高度过滤。
根据本发明实施例的另一方面,还提供了一种基于激光雷达的道路边界的检测装置,包括:获取模块,用于扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据;处理模块,用于对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;筛选模块,用于基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格;标记模块,用于对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域;生成模块,用于基于原始模型的检测误差和目标模型的检测误差,生成目标模型的总体误差。
根据本发明实施例的另一方面,还提供了一种计算机可读存储介质。该计算机可读存储介质包括存储的程序,其中,在程序运行时控制计算机可读存储介质所在设备执行本发明实施例的基于激光雷达的道路边界的检测。
根据本发明实施例的另一方面,还提供了一种处理器。该处理器用于运行程序,其中,程序运行时执行本发明实施例的基于激光雷达的道路边界的检测。
在本发明实施例中,扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据;对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格;对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域;基于每个路沿候选区域中的区域候选点,生成结构化道路的道路边。也就是说,本申请检测流程中的使用候选区域中所有候选点结合道路边界的实际情况,进行曲线拟合,最终拟合的曲线即为道路边缘曲线,从而实现了当前道路检测算法可以适用于固态激光雷达场的技术效果,解决了当前道路检测算法无法适用于固态激光雷达场的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种基于激光雷达的道路边界检测方法的流程图;
图2是根据本发明实施例的另一种基于激光雷达的道路边界检测方法的流程图;
图3是根据本发明实施例的一种路沿分布情况的示意图;
图4是根据本发明实施例的一种基于激光雷达的道路边界检测方法装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本发明实施例,提供了一种基于激光雷达的道路边界检测方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1根据本发明实施例的一种基于激光雷达的道路边界检测方法的流程图,如图1所示的基于激光雷达的道路边界检测方法流程图,该方法包括如下步骤:
步骤S102,扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据。
在本发明上述步骤S102提供的技术方案中,扫描结构化道路的道路图像,从而获取结构化道路的激光雷达点云数据。
在该实施例中,结构化道路可以为城市道路中比较正规的结构化的路沿,也可以对路边灌木丛或者是道路临时施工出现的水马、临时挡板等进行检测,但是,对于乡村路等不具有明显的、明确的道路边界的非结构化道路,则不属于检测目标。
可选地,激光雷达点云数据可以为激光雷达传感器通过测定传感器发射器与目标物体之间的传播距离,分析出物体表面的反射能量的大小,反射波谱的幅度、频率和相位等信息,从而呈现出自动驾驶车辆行驶过程中收集数据的三维点云数据,其中,激光雷达传感器可以为双目相机、三维扫描仪等。比如,扫描激光雷达传感器拍摄的图形,基于相机的内在参数得到激光雷达点云数据。
步骤S104,对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息。
在本发明上述步骤S104提供的技术方案中,在得到结构化道路的激光雷达点云数据之后,对激光雷达点云数据进行栅格化处理,生成多个栅格,在栅格化过程中统计栅格内点云的特征信息。
在该实施例中,栅格化处理可以为将向量图形格式表示的图形转换成栅格图形,可以为将点云在水平坐标轴的两个方向平均划分为多个栅格,划分过程中分别统计每个栅格的特征信息,其中,特征信息可以为栅格内点云高度差,栅格内点云的最大高度,栅格内点云的最小高度等。
可选地,栅格内点云高度差可以用Zdiff表示,栅格内点云的最大高度可以用Zgrid_max表示,栅格内点云的最小高度可以用Zgrid_min表示。
举例而言,将点云在xy方向平均划分为m*n个栅格,划分过程中分别统计每个栅格的三个特征信息,包括栅格内点云高度差,栅格内点云的最大高度,栅格内点云的最小高度。
步骤S106,基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格。
在本发明上述步骤S106提供的技术方案中,基于获取的每个栅格内点云的栅格特征信息,同时根据设定的筛选条件,对栅格进行一次筛选处理,从而得到目标候选栅格。
可选地,在该实施例中,筛选处理可以为根据设定的条件筛选掉不符合条件的栅格,筛选处理至少一次,其中,筛选条件可以为根据特征信息所设定的至少一条的条件,比如,设定栅格内点云的最大高度,当统计的特征信息大于设定栅格内点云的最大高度时,则过滤掉此栅格,从而得到目标候选栅格,或/和,设定栅格内点云的最小高度,当统计的特征信息小于设定栅格内点云的最小高度时,则过滤掉此栅格,从而得到目标候选栅格,或/和,设定栅格内点云的最大高度差,当统计的特征信息大于设定栅格内点云的最大高度差时,则过滤掉此栅格,从而得到目标候选栅格,或/和,设定栅格内点云的最小高度差,当统计的特征信息小于设定栅格内点云的最小高度差时,则过滤掉此栅格,从而得到目标候选栅格。
可选地,目标候选栅格可以为对得到的结构化道路的激光雷达点云数据栅格化处理之后,根据设定的条件筛选掉不符合条件的栅格之后所得到的栅格。
步骤S108,对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域。
在本发明上述步骤S108提供的技术方案中,对多个目标候选栅格进行区域标记,即选取目标候选栅格内所有的重心作为候选点并进行区域标记,从而得到结构化道路的至少一个路沿候选区域。
步骤S110,基于每个路沿候选区域中的区域候选点,生成结构化道路的道路边界。
在本发明上述步骤S110提供的技术方案中,使用候选区域中所有候选点进行曲线拟合,结合道路边界的实际情况,最终拟合出来道路边缘曲线,生成结构化道路的道路边界。
本申请上述步骤S102至步骤S110,扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据;对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格;对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域;基于每个路沿候选区域中的区域候选点,生成结构化道路的道路边。也就是说,本申请检测流程中的使用候选区域中所有候选点结合道路边界的实际情况,进行曲线拟合,最终拟合的曲线即为道路边缘曲线,从而实现了当前道路检测算法可以适用于固态激光雷达场的技术效果,解决了当前道路检测算法无法适用于固态激光雷达场的技术问题。
下面对该实施例的上述方法进行进一步介绍。
作为一种可选的实施例方式,步骤S106,基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,该方法还包括:采用至少一种筛选条件对每个栅格内点云的栅格特征信息进行筛选处理,其中,筛选条件包括如下至少之一:第一筛选条件,其中,第一筛选条件包含的筛选因素包括:栅格内最高点的高度、栅格内最低点的高度和栅格内点云的高度差;第二筛选条件,其中,第二筛选条件包含的筛选因素包括:当前候选栅格周围的候选栅格数量是否处于筛选阈值范围内。
在该实施例中,对获取的激光雷达点云数据进行栅格化,生成多个栅格信息,同时,统计每个栅格内点云的栅格特征信息,当特征信息满足第一筛选条件时,则标记栅格将其作为候选栅格,其他不满足第一筛选条件的栅格不进行标记,并且后期不再做处理,然后,判断标记的候选栅格是否满足第二筛选条件,对于满足第二筛选条件的栅格进行标记,得到目标候选栅格。
在该实施例中,第一筛选条件包含的筛选因素可以包括:栅格内最高点的高度、栅格内最低点的高度、栅格内点云的最大高度差和栅格内点云的最小高度差,其中,栅格内最高点的高度、栅格内最低点的高度和栅格内点云的高度差可以为经过多次测试得到的数值,由用户设定并输入系统中。第二筛选条件包含的筛选因素可以包括当前候选栅格周围的候选栅格数量是否处于筛选阈值范围内。对于经过第一筛选条件留下来的候选栅格,统计候选栅格8邻域内候选栅格的个数,第二筛选条件用于筛选掉当前候选栅格周围的候选栅格数量过多或多少的栅格,其中,设定测试候选栅格数量的最大值和最小值,从而过滤掉数量过多或多少的栅格候选栅格。
可选地,在经过第一筛选条件和第二筛选条件的筛选之后,得到目标候选栅格。
作为一种可选的实施例方式,采用第一筛选条件对每个栅格内点云的栅格特征信息进行筛选处理,包括:采用第一筛选条件中的一个或多个筛选因素,对每个栅格内点云的栅格特征信息进行筛选处理,得到第一组候选栅格,其中,第一组候选栅格内的点云包括如下特征:不存在假边缘、低矮障碍物、有高度差物体的点云数据。
在该实施例中,采用第一筛选条件中的一个或多个筛选因素,对每个栅格内点云的栅格特征信息进行筛选处理,得到第一组候选栅格,其中,第一筛选条件可以为:栅格特征信息中的高度差不可以大于设定的栅格内点云的最大高度差;栅格特征信息中的高度差不可以小于设定的栅格内点云的最小高度差;栅格特征信息中的最高点的高度不可以小于栅格内最低点的高度;栅格特征信息中的最低点的高度不可以大于栅格内最高点的高度,经过第一筛选数据的筛选得到第一候选数据。
可选地,栅格内点云的最大高度差可以用max_threshold表示,栅格特征信息中的高度差不可以大于设定的栅格内点云的最大高度差,即,Zdiff<max_threshold,从而过滤掉高楼等假边缘。栅格内点云的最小高度差可以用min_threshold表示,栅格特征信息中的高度差不可以小于设定的栅格内点云的最小高度差,即,Zdiff>min_threshold,从而过滤掉地面以及地面的小突起等低矮障碍物。栅格内最低点的高度可以用min_height表示,栅格特征信息中的最高点的高度不可以小于栅格内最低点的高度,即,Zgrid_max>min_height,从而过滤掉一些特殊的低矮障碍物。栅格内最高点的高度可以用max_height表示,栅格特征信息中的最低点的高度不可以大于栅格内最高点的高度,从而过滤掉一些距离地面较远的或者悬空有高度差的物体。
举例而言,设定测试时栅格内点云的最大高度差为3.0米,当栅格特征信息中的高度差大于设定的栅格内点云的最大高度差,则过滤掉,并标记符合条件的栅格;由于国家规定路沿石的顺直高度应在10厘米以上,因此,设定测试使用的栅格内点云的最小高度差为0.10米,当栅格特征信息中的高度差大于设定的栅格内点云的最小高度差时,则过滤掉,并标记符合条件的栅格;设定测试时栅格内最低点的高度为0.05米,栅格特征信息中的最高点的高度小于栅格内最低点的高度时,则过滤掉,并标记符合条件的栅格;设定测试时栅格内最高点的高度为0.2米,当栅格特征信息中的最低点的高度大于栅格内最高点的高度时,则过滤掉,并标记符合条件的栅格。
可选地,标记栅格的方式可以为标记用颜色、图形等进行标记,此处不做限制。
作为一种可选的实施例方式,在得到第一组候选栅格之后,该方法还包括:采用第二筛选条件对第一组候选栅格中的候选栅格进行二次筛选,获取第二组候选栅格,其中,第二组候选栅格为第一组候选栅格中进行了二次栅格标记的候选栅格。
在该实施例中,得到第一组候选栅格并标记,采用第二筛选条件对第一组标记过的候选数据进行筛选并标记,选取存在两次候选标记的栅格作为第二组候选栅格,其中,标记可以为用颜色、图形等,此处不做限定。
作为一种可选的实施例方式,采用第二筛选条件对第一组候选栅格中的候选栅格进行二次筛选,获取第二组候选栅格,包括:检测第一组候选栅格中每个候选栅格在各自邻域内候选栅格的数量,其中,候选栅格为第一组候选栅格内的栅格;如果第一组候选栅格中任意一个候选栅格邻域内候选栅格的数量处于筛选阈值范围内,则将处于筛选阈值范围内的候选栅格进行二次栅格标记。
在该实施例中,采用第二筛选条件对第一组候选栅格中的候选栅格进行二次筛选,获取第二组候选栅格。
可选地,第二筛选条件包含的筛选因素可以包括当前候选栅格周围的候选栅格数量是否处于筛选阈值范围内。对经过第一筛选条件得到的第一组候选栅格,统计第一组候选栅格8邻域内候选栅格的个数,其中,候选领域可以为上下左右、左上、左下、右上、右下。比如,若当前选择栅格为候选栅格,则统计该栅格上下左右、左上、左下、右上、右下八个栅格中同样是候选栅格的个数,其中,候选栅格的个数可以用neighbour表示。
可选地,第二筛选条件用于筛选掉当前候选栅格周围的候选栅格数量过多或多少的栅格,即,候选栅格的最个数大于等于候选栅格的最小个数并且小于等于候选栅格的最大个数,其中,候选栅格的最大个数可以用Max_neighbour,候选栅格的最小个数可以用Min_neighbour表示。
作为一种可选的实施例方式,步骤S108,在获取第二组候选栅格之后,对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域,包括:采用搜索算法对第二组候选栅格中的候选栅格进行合并,并统计合并后每个候选区域内候选栅格的数量;对进行了合并处理的第二组候选栅格进行区域标记,并获取至少一个路沿候选区域,其中,所述路沿候选区域包括多个目标候选栅格。
在该实施例中,采用搜索算法对第二组候选栅格中的候选栅格进行合并,并统计合并后每个候选区域内候选栅格的数量;对进行了合并处理的第二组候选栅格进行区域标记,并获取多个目标候选区域。
可选地,搜索算法可以为随机选取一个第一组候选栅格作为种子点,新建候选栅格集合用于存放栅格,判断种子点8领域内是否存在候选栅格,如果有则放入集合,直至将与种子点想通的所有栅格均放入集合之后,重新选择一个未被访问过的候选栅格作为种子点,再次新建候选栅格集合,重复上述操作,从而得到多个候选区域的多个候选栅格集。统计每个候选栅格集的数量,其中,候选栅格集的数量可以用Ncandidate表示。
需要说明,在该实施例中,搜索算法不做具体的限定,可以通过其他搜索算法完成统计候选栅格集的数量。
作为一种可选的实施例方式,如果任意一个候选区域内的候选栅格数量超过目标阈值,则将候选区域进行区域标记。
在该实施例中,目标阈值可以为系统设定的值,通过Min_candidate表示,因为正常情况下道路边界都是连续出现的,所以当候选区域内栅格数量过少时,则认定为误检,不作为道路边界进行后续处理。
距离而言,设定测试时目标阈值为15,则候选栅格集的数量要大于目标阈值,即Ncandidate>Min_candidate,当候选栅格集的数量小于目标阈值时,则不将该候选栅格集作为道路边界,并不进行后续处理。
作为一种可选的实施例方式,步骤S110,基于每个路沿候选区域中的区域候选点,生成结构化道路的道路边界,包括:获取任意一个路沿候选区域内的多个栅格;从多个栅格中选取候选点,获取每个路沿候选区域内的候选点;对每个路沿候选区域内的所有候选点进行曲线拟合,其中,拟合后的曲线为结构化道路的道路边界。
在该实施例中,获取任意一个路沿候选区域内的多个栅格;从多个栅格中选取候选点,获取每个路沿候选区域内的候选点;对每个路沿候选区域内的所有候选点进行曲线拟合,从而得到结构化道路的道路边界。
可选地,从多个栅格中选取候选点可以为选取栅格每所有点的重心作为候选点,从而减小计算量,结合道路边界的实际情况,选择合适的拟合方式对使用的候选区域中所有的候选点进行曲线拟合,从而得到结构化道路的道路边界。
可选地,拟合方式为可以完成曲线拟合的拟合方式,如最小二乘法、随机采样一致性算法等,此处不做具体限定。
举例而言,从多个栅格中选取候选点可以为选取栅格每所有点的重心作为候选点,选用三次曲线方程进行拟合,拟合方式采用随机采样一致性算法,最终拟合的曲线即为道路边缘曲线。
作为一种可选的实施例方式,在获取结构化道路的激光雷达点云数据之后,该方法还包括:对激光雷达点云数据进行预处理,其中,预处理包括如下至少之一:点云未定义的值过滤,噪声点过滤以及点云高度过滤。
在该实施例中,对激光雷达点云数据进行预处理可以为主要包括:点云未定义的值过滤,噪声点过滤以及点云高度过滤。其中,点云未定义的值过滤用于过滤掉原始点云数据中点云坐标异常的点,可以为通过遍历点云、判断点云坐标完成;噪声点过滤可以为通过点云栅格化完成,将点云从三个维度划分为两个维度的栅格,统计栅格内点云的数量,用户根据实际情况设定一个阈值,若单个栅格内点云少于用户设定的阈值,则认为栅格内点云均为噪声点,从而过滤掉噪声点;点云高度过滤可以为过滤掉点云绝对高度过高或者过低的点云。
该实施例在自动驾驶车辆行驶过程中,扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据;对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格;对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域;基于每个路沿候选区域中的区域候选点,生成结构化道路的道路边。也就是说,本申请检测流程中的使用候选区域中所有候选点结合道路边界的实际情况,进行曲线拟合,最终拟合的曲线即为道路边缘曲线,从而实现了当前道路检测算法可以适用于固态激光雷达场的技术效果,解决了当前道路检测算法无法适用于固态激光雷达场的技术问题。
实施例2
下面结合优选的实施方式对本发明实施例的技术方案进行举例说明。
随着科技的不断进步,自动驾驶为解放人类双手提供了更多的可能。纵观自动驾驶的发展历程,无论是L2、L3等辅助驾驶还是L4、L5等更高级的自动驾驶都离不开道路边界的检测,它是辅助驾驶中为人类提供安全行驶区域的核心功能模块,也是为全自动无人驾驶提供有效检测范围与可行驶区域的重要前置功能模块。
以往的道路边缘检测算法大都基于机械式激光雷达点云展开,但由于机械式激光雷达具有价格高、体积大、不便于量产等缺点,固态激光雷达应运而生,且在量产自动驾驶汽车的占据越来越多的地位,但是,由于扫描方式不同,固态激光雷达与机械式激光雷达所形成的点云也有很大不同,所以之前道路检测算法均无法很好的适用于固态激光雷达场景下。
目前,现有道路边界检测算法主要存在以下几点局限性:(1)检测算法过于依赖机械式激光的扫描模型,即理想情况下雷达高度h、扫描线俯仰角α以及探测距离l满足h=cos(α)*l,基于这个基本模型就可以对扫描物状态进行估计,进而进行道路边界检测,但是,对于固态激光雷达来说不满足这个基本物理模型,因而导致以往算法的准确性大大降低;(2)检测算法依赖额外的激光雷达线束信息,对于同一条扫描线来说,从地面扫描到路沿的过程会产生较大的高度及曲率突变,大部分道路边界检测算法都基于这个基本思想,该方法的前提就是需要获取同一条扫描线的点云,即需要雷达的线束信息,但对于一帧点云来说点的坐标,强度等才是基本信息,而激光线束是额外的。同时,固态激光雷达并不是一条扫描线扇形扫描,也大都不具备所谓的线束信息,因而导致基于线束信息的检测方法无法适用;(3)检测算法依赖结构化道路模型,检测对象比较单一。以往检测算法大都基于非常理想化的结构化道路模型,检测对象大都是城市道路中比较正规的结构化的路沿,而对于路边灌木丛或者是道路临时施工出现的水马、临时挡板等都无法进行检测。
在该实施例中,为了克服以上问题,在一种相关技术中,设计出了一种基于三维激光雷达的道路边界检测方法,通过使用栅格点云高度差做障碍物与非障碍物的判别,同时,对距离灰度图进行分析,并采用区域生长法获取区域轮廓,但该算法对于路边灌木丛或者是道路临时施工出现的水马、临时挡板等,仍存在无法进行检测的问题。
在另一种相关技术中,提出一种道路边缘检测方法和装置,该方法使用点云的法线和法向曲率进行道路边缘候选点提取,然后采用区域生长和凹包算法进行噪声点去除,但该算法同样对于路边灌木丛或者是道路临时施工出现的水马、临时挡板等,仍存在无法进行检测的问题。
在另一种相关技术中,提出一种基于点云局部凹凸特征的道路边界实时检测方法,该方法将点云转换为深度展开图像,然后利用图像的凹凸特征进行边界检测,从而实现道路检测,但该方法存在不适用于固态激光雷达点云的问题。
在另一种相关技术中,提出一种道路边界实时提取及测量方法和装置,该方法针对机械式激光雷达的扫描特点,将点云角度突变的点作为边界候选点,然后对左右两侧分别构建数学描述模型,从而提高道路检测过程中算法运行的速度,但是该方法存在不适用于固态激光雷达点云的问题。
为克服现有技术的局限性,在该实施例中,提出一种基于激光雷达的道路边界检测方法,该方法不需要借助额外的线束信息,仅凭借单帧点云中点的位置信息就可以进行道路边界的检测;不仅可以检测结构化道路中的正规的路沿,也可以检测路边灌木丛形成的道路边界以及由于道路施工放置的水马、临时挡板等形成的临时道路边界,且本发明算法实时性较高,设计出了既适用于机械式激光雷达点云,也适用于固态激光雷达点云的检测模型。
该实施例的算法流程图如图2所示,图2是根据本发明实施例的一种基于激光雷达的道路边界检测方法的流程图,该方法可以包括以下步骤:
步骤S201,对点云进行预处理。
首先对点云进行预处理,对于检测流程中所述点云预处理主要包括点云不确定值过滤,噪声点过滤以及点云高度过滤三个部分。其中,不确定值过滤是指过滤掉原始点云中点云坐标异常的点,通过遍历点云,判断点云坐标即可完成;噪声点过滤通过点云栅格化完成,即将点云从xyz三个维度划分为m*n*l个栅格,统计栅格内点云的数量,若单个栅格内点云少于设定的阈值N(N可根据用户实际情况自行设定,本发明测试采用N=10,需说明,本发明所有的参数设定仅作为参考与测试使用,不作为本发明的具体限定)则认为栅格内点云均为噪声点;点云高度过滤只指过滤掉点云绝对高度过高或者过低的点云,因为对于道路边缘来说其高度不会过高或者过低,因此若点云高度方向坐标z满足z<Zmin或者z>Zmax(Zmin与Zmax的设定需要结合用户实际情况,即雷达安装高度、点云坐标系原点定位来决定,本发明测试采用值为Zmin=-2.0m,Zmax=5.0m),则过滤掉该点,不作为算法的感兴趣区域。
步骤S202,将点云栅格格式化,并统计栅格特征信息。
对点云进行预处理之后,对处理后的点进行栅格化,同时,栅格化过程中统计栅格内点云的特征信息。
检测流程中所述点云栅格化,并统计栅格内点云信息具体是指将点云在xy方向平均划分为m*n个栅格,划分过程中分别统计每个栅格的三个特征信息,包括栅格内点云高度差Zdiff,栅格内点云的最大高度Zgrid_max,栅格内点云的最小高度Zgrid_min。
步骤S203,判断数据是否满足条件1。
判断数据是否满足条件1,其中,检测流程中所述条件1具体指:1)Zdiff<max_threshold,即栅格内点云高度差不可过大,以此过滤掉高楼等假边缘,本发明测试使用max_threshold=3.0m;2)Zdiff>min_threshold,即栅格内点云的高度差不可过小,以此过滤掉地面以及地面的小突起等低矮障碍物,调查发现国家规定路沿石的顺直高度应在10cm以上,因此本发明测试使用min_threshold=0.10m;3)Zgrid_max>min_height,即栅格内最高点的高度不能过低,以过滤一些特殊的低矮障碍物,本发明测试使用min_height=0.05m;4)Zgrid_min<max_height,即栅格内点云的最低点不能过高,以此过滤掉一些距离地面较远的或者悬空的有高度差的物体,本发明测试使用max_height=0.2m。
步骤S204,把栅格标记为候选栅格。
对符合条件1的候选栅格进行标记为候选栅格。
步骤S205,统计候选栅格8领域候选栅格的数量。
对于候选栅格,计算每个栅格8邻域内候选栅格的数量。
检测流程中所述统计候选栅格8邻域内候选栅格的个数具体是指若当前栅格为候选栅格,那么就统计该栅格上下左右,左上,右上,左下,右下八个栅格中同样是候选栅格的个数Nneighbour。
步骤S206,栅格不参与后续处理。
当特征信息满足条件1时,则实施步骤S204,将栅格标记为候选栅格,当特征信息不满足条件1时,对于不满足条件的栅格实施步骤S206,不参与后期处理。
步骤S207,判断数据是否满足条件2。
判断候选上是否满足条件2,其中,所述条件2是指当前候选栅格周围的候选栅格数量不能过多或者过少,即Min_neighbour≤Nneighbour≤Max_neighbour。其中两个阈值参数Min_neighbour与Max_neighbour的设定遵循一定原则。如图3所示,图3是根据本发明实施例的一种路沿分布情况示意图,道路边界存在的状态一般有4种,蓝色的曲线是道路边界在栅格中存在的状态,蓝色的栅格点是当前候选栅格,橙黄色的栅格是当前候选栅格8邻域中同样是候选栅格的栅格,根据这个原则本发明使用阈值为Min_neighbour=2,Max_neighbour=5。
满足条件2,则实施步骤S208;不满足条件2,则实施步骤S206。
步骤S208,将栅格标记为二次候选栅格。
对满足条件2的栅格标记为二次候选栅格。
步骤S209,搜索合并候选区域,并统计合并后每个区域的栅格数。
对于二次筛选后的候选栅格,采用搜索算法进行候选栅格的合并,统计合并后每个区域栅格的数量。
检测流程中所述的搜索合并候选区域并统计区域内候选栅格数量具体指,随机选取一个候选栅格作为种子点,新建候选栅格集合A,然后判断种子点8邻域内是否存在候选栅格,如果有则将其放入集合A,然后对判断该点执行同样上述操作,直至与种子点相通的所有栅格均被放入集合A。然后重新选择一个未被访问过的候选栅格作为种子点,执行上述操作,直至所有候选点均被访问。此时就可以得到所有候选区域的多个候选栅格集合。然后统计每个候选区域内栅格数量为Ncandidate。需说明,此搜索方法不作为本发明具体限定,用户也可以使用其他搜索方法完成本次聚类,同样在本发明的保护范围内。
步骤S210,判断数据是否满足条件3。
对候选栅格进行判断,其中,所述的条件3具体指Ncandidate>Min_candidate,即每个候选区域的候选栅格数应该大于设定的阈值,因为正常情况下道路边界都是连续出现的,所以当候选区域内栅格数量过少时本发明认定为误检,不作为道路边界进行后续处理。本发明设定Min_candidate=15。
满足条件3,则实施步骤S211;不满足条件3,则实施步骤S206,其余栅格不参与后期处理。
步骤S211,标记为真正的路沿边界候选区域。
对满足条件3的栅格标记为真正的路沿边界候选区域。
步骤S212,对每个候选区域栅格选取候选点。
对于所有候选区域内的所有栅格,每个栅格按照一定规则选取一个候选点,其中,检测流程中所述的在每个候选栅格内选取候选点具体是指,截止目前我们所有的检测分类都是针对栅格进行的,栅格具有一定大小,栅格内也有很多的点,使用所有的点进行后续曲线拟合不仅不够合理也会增大计算量。所以我们选取栅格内所有点的重心作为候选点,再进行后续处理。重心计算方式如下:
其中(x,y,z)为最终重心坐标,(xi,yi,zi)为候选栅格中第i个点的坐标,Ngrid为栅格内的点数。
步骤S213,将每个区域候选点拟合为道路边界曲线。
对每个候选区域内的所有候选点进行三次曲线拟合,拟合后的曲线即为道路边界的曲线,即完成道路边界的检测。
检测流程中所述的使用候选区域中所有候选点进行曲线拟合,结合道路边界的实际情况,本发明选用三次曲线方程进行拟合,拟合方式采用随机采样一致性算法。最终拟合的曲线即为道路边缘曲线。同时,拟合方法同样不作为本发明的具体限定,其他可以完成同样功能的曲线拟合方式如最小二乘法等也应在本发明的保护范围内。
该实施例在自动驾驶车辆行驶过程中,扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据;对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格;对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域;基于每个路沿候选区域中的区域候选点,生成结构化道路的道路边。也就是说,本申请检测流程中的使用候选区域中所有候选点结合道路边界的实际情况,进行拟合,最终拟合的曲线即为道路边缘曲线,从而实现了当前道路检测算法可以适用于固态激光雷达场的技术效果,解决了当前道路检测算法无法适用于固态激光雷达场的技术问题。
实施例3
根据本发明实施例,还提供了一种基于激光雷达的道路边界的检测装置。需要说明的是,该基于激光雷达的道路边界的检测装置可以用于执行实施例1中的基于激光雷达的道路边界的检测方法。
图4是根据本发明实施例的一种基于激光雷达的道路边界的检测装置示意图。如图4所示,该基于激光雷达的道路边界的检测装置400可以包括:获取模块401、处理模块402、筛选模块403、标记模块404和生成模块405。
获取模块401,用于扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据。
处理模块402,用于对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息。
筛选模块403,用于基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格。
标记模块404,用于对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域。
生成模块405,用于基于原始模型的检测误差和目标模型的检测误差,生成目标模型的总体误差。
可选地,筛选模块403包括:第一筛选单元,用于采用至少一种筛选条件对每个栅格内点云的栅格特征信息进行筛选处理,其中,筛选条件包括如下至少之一:第一筛选条件,其中,第一筛选条件包含的筛选因素包括:栅格内最高点的高度、栅格内最低点的高度和栅格内点云的高度差;第二筛选条件,其中,第二筛选条件包含的筛选因素包括:当前候选栅格周围的候选栅格数量是否处于筛选阈值范围内。
可选地,第一筛选单元包括:第一筛选子单元,用于采用第一筛选条件中的一个或多个筛选因素,对每个栅格内点云的栅格特征信息进行筛选处理,得到第一组候选栅格,其中,第一组候选栅格内的点云包括如下特征:不存在假边缘、低矮障碍物、有高度差物体的点云数据。
可选地,第一筛选单元包括:第二筛选子单元,用于在得到第一组候选栅格之后,采用第二筛选条件对第一组候选栅格中的候选栅格进行二次筛选,获取第二组候选栅格,其中,第二组候选栅格为第一组候选栅格中进行了二次栅格标记的候选栅格。
可选地,第二筛选子单元用于通过以下步骤来采用第二筛选条件对第一组候选栅格中的候选栅格进行二次筛选,获取第二组候选栅格:检测第一组候选栅格中每个候选栅格在各自邻域内候选栅格的数量,其中,候选栅格为第一组候选栅格内的栅格;如果第一组候选栅格中任意一个候选栅格邻域内候选栅格的数量处于筛选阈值范围内,则将处于筛选阈值范围内的候选栅格进行二次栅格标记。
可选地,标记模块404包括:第一处理单元,用于采用搜索算法对第二组候选栅格中的候选栅格进行合并,并统计合并后每个候选区域内候选栅格的数量;第二处理单元,用于对进行了合并处理的所述第二组候选栅格进行区域标记,并获取至少一个路沿候选区域,其中,路沿候选区域包括多个目标候选栅格。
可选地,所述装置还包括:第一标记模块,用于在任意一个候选区域内的候选栅格数量超过目标阈值的情况下,将候选区域进行区域标记。
可选地,生成模块404包括:第一获取单元,用于获取任意一个路沿候选区域内的多个栅格;第二获取单元,用于从多个栅格中选取候选点,获取每个路沿候选区域内的候选点;拟合单元,用于对每个路沿候选区域内的所有候选点进行曲线拟合,其中,拟合后的曲线为结构化道路的道路边界。
可选地,所述装置还包括:预处理单元,用于在获取结构化道路的激光雷达点云数据之后,对激光雷达点云数据进行预处理,其中,预处理包括如下至少之一:点云未定义的值过滤,噪声点过滤以及点云高度过滤。
在本发明实施例中,通过使用获取模块扫描结构化道路的道路图像,获取结构化道路的激光雷达点云数据;通过使用处理模块对激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;通过使用筛选模块基于每个栅格内点云的栅格特征信息,对多个栅格进行至少一次筛选处理,得到多个目标候选栅格;通过标记模块,对多个目标候选栅格进行区域标记,得到结构化道路的至少一个路沿候选区域;通过生成模块,基于每个路沿候选区域中的区域候选点,从而生成结构化道路的道路边界。也就是说,本申请检测流程中的使用候选区域中所有候选点结合道路边界的实际情况,进行曲线拟合,最终拟合的曲线即为道路边缘曲线,从而实现了当前道路检测算法可以适用于固态激光雷达场的技术效果,解决了当前道路检测算法无法适用于固态激光雷达场的技术问题。
实施例4
根据本发明实施例,还提供了一种计算机可读存储介质,该存储介质包括存储的程序,其中,所述程序执行实施例1中所述的基于激光雷达的道路边界检测方法。
实施例5
根据本发明实施例,还提供了一种处理器,该处理器用于运行程序,其中,所述程序运行时执行实施例1中所述的基于激光雷达的道路边界检测方法。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种基于激光雷达的道路边界检测方法,其特征在于,所述方法包括:
扫描结构化道路的道路图像,获取所述结构化道路的激光雷达点云数据;
对所述激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;
基于所述每个栅格内点云的栅格特征信息,对所述多个栅格进行至少一次筛选处理,得到多个目标候选栅格;
对所述多个目标候选栅格进行区域标记,得到所述结构化道路的至少一个路沿候选区域;
基于每个所述路沿候选区域中的区域候选点,生成所述结构化道路的道路边界。
2.根据权利要求1所述的方法,其特征在于,基于所述每个栅格内点云的栅格特征信息,对所述多个栅格进行至少一次筛选处理,包括:
采用至少一种筛选条件对所述每个栅格内点云的栅格特征信息进行所述筛选处理,其中,所述筛选条件包括如下至少之一:
第一筛选条件,其中,所述第一筛选条件包含的筛选因素包括:所述栅格内最高点的高度、所述栅格内最低点的高度和所述栅格内点云的高度差;
第二筛选条件,其中,所述第二筛选条件包含的筛选因素包括:当前候选栅格周围的候选栅格数量是否处于筛选阈值范围内。
3.根据权利要求2所述的方法,其特征在于,采用所述第一筛选条件对所述每个栅格内点云的栅格特征信息进行所述筛选处理,包括:
采用所述第一筛选条件中的一个或多个筛选因素,对所述每个栅格内点云的栅格特征信息进行所述筛选处理,得到第一组候选栅格,其中,所述第一组候选栅格内的点云包括如下特征:不存在假边缘、低矮障碍物、有高度差物体的点云数据。
4.根据权利要求3所述的方法,其特征在于,在得到第一组候选栅格之后,所述方法还包括:
采用所述第二筛选条件对所述第一组候选栅格中的候选栅格进行二次筛选,获取第二组候选栅格,其中,所述第二组候选栅格为所述第一组候选栅格中进行了二次栅格标记的候选栅格。
5.根据权利要求4所述的方法,其特征在于,采用所述第二筛选条件对所述第一组候选栅格中的候选栅格进行二次筛选,获取第二组候选栅格,包括:
检测所述第一组候选栅格中每个候选栅格在各自邻域内候选栅格的数量,其中,所述候选栅格为所述第一组候选栅格内的栅格;
如果所述第一组候选栅格中任意一个候选栅格邻域内候选栅格的数量处于所述筛选阈值范围内,则将处于所述筛选阈值范围内的所述候选栅格进行所述二次栅格标记。
6.根据权利要求4所述的方法,其特征在于,在获取第二组候选栅格之后,对所述多个目标候选栅格进行区域标记,得到所述结构化道路的至少一个路沿候选区域,包括:
采用搜索算法对所述第二组候选栅格中的候选栅格进行合并处理,并统计合并后每个候选区域内候选栅格的数量;
对进行了所述合并处理的所述第二组候选栅格进行区域标记,并获取所述至少一个路沿候选区域,其中,所述路沿候选区域包括多个目标候选栅格。
7.根据权利要求6所述的方法,其特征在于,如果任意一个候选区域内的候选栅格数量超过目标阈值,则将所述候选区域进行所述区域标记。
8.根据权利要求1-7中任意一项所述的方法,其特征在于,基于每个所述路沿候选区域中的区域候选点,生成所述结构化道路的道路边界,包括:
获取任意一个所述路沿候选区域内的多个栅格;
从所述多个栅格中选取候选点,获取每个路沿候选区域内的候选点;
对每个所述路沿候选区域内的所有候选点进行曲线拟合,其中,拟合后的曲线为所述结构化道路的道路边界。
9.根据权利要求1-7中任意一项所述的方法,其特征在于,在获取所述结构化道路的激光雷达点云数据之后,所述方法还包括:
对所述激光雷达点云数据进行预处理,其中,所述预处理包括如下至少之一:点云未定义的值过滤,噪声点过滤以及点云高度过滤。
10.一种基于激光雷达的道路边界的检测装置,其特征在于,应用于自动驾驶车辆,所述装置包括:
获取模块,用于扫描结构化道路的道路图像,获取所述结构化道路的激光雷达点云数据;
处理模块,用于对所述激光雷达点云数据进行栅格化处理,生成多个栅格,并获取每个栅格内点云的栅格特征信息;
筛选模块,用于基于所述每个栅格内点云的栅格特征信息,对所述多个栅格进行至少一次筛选处理,得到多个目标候选栅格;
标记模块,用于对所述多个目标候选栅格进行区域标记,得到所述结构化道路的至少一个路沿候选区域;
生成模块,用于基于每个所述路沿候选区域中的区域候选点,生成所述结构化道路的道路边界。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111676309.9A CN114359866A (zh) | 2021-12-31 | 2021-12-31 | 基于激光雷达的道路边界检测方法和装置 |
PCT/CN2022/118213 WO2023124231A1 (zh) | 2021-12-31 | 2022-09-09 | 基于激光雷达的道路边界检测方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111676309.9A CN114359866A (zh) | 2021-12-31 | 2021-12-31 | 基于激光雷达的道路边界检测方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114359866A true CN114359866A (zh) | 2022-04-15 |
Family
ID=81105241
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111676309.9A Pending CN114359866A (zh) | 2021-12-31 | 2021-12-31 | 基于激光雷达的道路边界检测方法和装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN114359866A (zh) |
WO (1) | WO2023124231A1 (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115840227A (zh) * | 2023-02-27 | 2023-03-24 | 福思(杭州)智能科技有限公司 | 道路边缘的检测方法及装置 |
CN115861959A (zh) * | 2023-02-24 | 2023-03-28 | 中国第一汽车股份有限公司 | 一种车道线识别方法、装置、电子设备及存储介质 |
CN116047537A (zh) * | 2022-12-05 | 2023-05-02 | 北京中科东信科技有限公司 | 基于激光雷达的道路信息生成方法及系统 |
WO2023124231A1 (zh) * | 2021-12-31 | 2023-07-06 | 中国第一汽车股份有限公司 | 基于激光雷达的道路边界检测方法和装置 |
CN116609740A (zh) * | 2023-05-31 | 2023-08-18 | 深圳市镭神智能系统有限公司 | 激光雷达的调整方法、装置、车辆和可读存储介质 |
CN116990832A (zh) * | 2023-08-04 | 2023-11-03 | 长沙行深智能科技有限公司 | 危险道路边沿感知方法、装置、终端设备及存储介质 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117491983B (zh) * | 2024-01-02 | 2024-03-08 | 上海几何伙伴智能驾驶有限公司 | 实现可通行区域边界获取及目标相对位置判别的方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106204705A (zh) * | 2016-07-05 | 2016-12-07 | 长安大学 | 一种基于多线激光雷达的3d点云分割方法 |
CN106650640A (zh) * | 2016-12-05 | 2017-05-10 | 浙江大学 | 一种基于激光雷达点云局部结构特征的负障碍物检测方法 |
WO2018205119A1 (zh) * | 2017-05-09 | 2018-11-15 | 深圳市速腾聚创科技有限公司 | 基于激光雷达扫描的路沿检测方法和系统 |
US20190204423A1 (en) * | 2016-05-18 | 2019-07-04 | James Thomas O'Keeffe | Vehicle-integrated lidar system |
CN113009453A (zh) * | 2020-03-20 | 2021-06-22 | 青岛慧拓智能机器有限公司 | 矿山路沿检测及建图方法及装置 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106127113A (zh) * | 2016-06-15 | 2016-11-16 | 北京联合大学 | 一种基于三维激光雷达的道路车道线检测方法 |
CN110320504B (zh) * | 2019-07-29 | 2021-05-18 | 浙江大学 | 一种基于激光雷达点云统计几何模型的非结构化道路检测方法 |
WO2021168854A1 (zh) * | 2020-02-29 | 2021-09-02 | 华为技术有限公司 | 可行驶区域检测的方法和装置 |
CN114359866A (zh) * | 2021-12-31 | 2022-04-15 | 中国第一汽车股份有限公司 | 基于激光雷达的道路边界检测方法和装置 |
-
2021
- 2021-12-31 CN CN202111676309.9A patent/CN114359866A/zh active Pending
-
2022
- 2022-09-09 WO PCT/CN2022/118213 patent/WO2023124231A1/zh unknown
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190204423A1 (en) * | 2016-05-18 | 2019-07-04 | James Thomas O'Keeffe | Vehicle-integrated lidar system |
CN106204705A (zh) * | 2016-07-05 | 2016-12-07 | 长安大学 | 一种基于多线激光雷达的3d点云分割方法 |
CN106650640A (zh) * | 2016-12-05 | 2017-05-10 | 浙江大学 | 一种基于激光雷达点云局部结构特征的负障碍物检测方法 |
WO2018205119A1 (zh) * | 2017-05-09 | 2018-11-15 | 深圳市速腾聚创科技有限公司 | 基于激光雷达扫描的路沿检测方法和系统 |
CN113009453A (zh) * | 2020-03-20 | 2021-06-22 | 青岛慧拓智能机器有限公司 | 矿山路沿检测及建图方法及装置 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023124231A1 (zh) * | 2021-12-31 | 2023-07-06 | 中国第一汽车股份有限公司 | 基于激光雷达的道路边界检测方法和装置 |
CN116047537A (zh) * | 2022-12-05 | 2023-05-02 | 北京中科东信科技有限公司 | 基于激光雷达的道路信息生成方法及系统 |
CN116047537B (zh) * | 2022-12-05 | 2023-12-26 | 北京中科东信科技有限公司 | 基于激光雷达的道路信息生成方法及系统 |
CN115861959A (zh) * | 2023-02-24 | 2023-03-28 | 中国第一汽车股份有限公司 | 一种车道线识别方法、装置、电子设备及存储介质 |
CN115840227A (zh) * | 2023-02-27 | 2023-03-24 | 福思(杭州)智能科技有限公司 | 道路边缘的检测方法及装置 |
CN116609740A (zh) * | 2023-05-31 | 2023-08-18 | 深圳市镭神智能系统有限公司 | 激光雷达的调整方法、装置、车辆和可读存储介质 |
CN116990832A (zh) * | 2023-08-04 | 2023-11-03 | 长沙行深智能科技有限公司 | 危险道路边沿感知方法、装置、终端设备及存储介质 |
CN116990832B (zh) * | 2023-08-04 | 2024-07-23 | 长沙行深智能科技有限公司 | 危险道路边沿感知方法、装置、终端设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2023124231A1 (zh) | 2023-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114359866A (zh) | 基于激光雷达的道路边界检测方法和装置 | |
CN102103202B (zh) | 一种融合影像的机载激光雷达数据半监督分类方法 | |
CN109858460B (zh) | 一种基于三维激光雷达的车道线检测方法 | |
CN112801022B (zh) | 一种无人驾驶矿卡作业区道路边界快速检测更新的方法 | |
Xu et al. | Multiple-entity based classification of airborne laser scanning data in urban areas | |
CN103500338B (zh) | 基于车载激光扫描点云的道路斑马线自动提取方法 | |
CN106204547B (zh) | 从车载激光扫描点云中自动提取杆状地物空间位置的方法 | |
CN109584294B (zh) | 一种基于激光点云的路面点云提取方法和装置 | |
Meng et al. | Morphology-based building detection from airborne LIDAR data | |
KR101258668B1 (ko) | 한반도 통합형 기상 레이더 품질 관리 시스템 및 그 방법 | |
CN110208819A (zh) | 一种多个障碍物三维激光雷达数据的处理方法 | |
JP6871782B2 (ja) | 道路標示検出装置、道路標示検出方法、プログラム、及び道路面検出装置 | |
CN106503678A (zh) | 基于移动激光扫描点云的道路标线自动检测和分类方法 | |
CN111325138B (zh) | 一种基于点云局部凹凸特征的道路边界实时检测方法 | |
CN104049245A (zh) | 基于LiDAR点云空间差异分析的城市建筑物变化检测方法 | |
CN103605953A (zh) | 基于滑窗搜索的车辆兴趣目标检测方法 | |
Xu et al. | Entities and features for classifcation of airborne laser scanning data in urban area | |
WO2023060632A1 (zh) | 基于点云数据的街景地物多维度提取方法和系统 | |
CN110502973A (zh) | 一种基于车载激光点云的道路标线自动化提取和识别方法 | |
CN112789521B (zh) | 感知区域的确定方法、装置、存储介质及车辆 | |
Zhang et al. | Filtering photogrammetric point clouds using standard lidar filters towards dtm generation | |
Hu et al. | A fast and simple method of building detection from LiDAR data based on scan line analysis | |
CN116704333B (zh) | 一种基于激光点云数据的单株林木检测方法 | |
CN114332410A (zh) | 一种用于智能路侧单元的点云背景滤波方法及系统 | |
CN114063107A (zh) | 一种基于激光束的地面点云提取方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |