CN104091321B - 适用于地面激光雷达点云分类的多层次点集特征的提取方法 - Google Patents

适用于地面激光雷达点云分类的多层次点集特征的提取方法 Download PDF

Info

Publication number
CN104091321B
CN104091321B CN201410146272.2A CN201410146272A CN104091321B CN 104091321 B CN104091321 B CN 104091321B CN 201410146272 A CN201410146272 A CN 201410146272A CN 104091321 B CN104091321 B CN 104091321B
Authority
CN
China
Prior art keywords
point
feature
cloud
point set
grid
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201410146272.2A
Other languages
English (en)
Other versions
CN104091321A (zh
Inventor
张立强
王臻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Normal University
Original Assignee
Beijing Normal University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Normal University filed Critical Beijing Normal University
Priority to CN201410146272.2A priority Critical patent/CN104091321B/zh
Publication of CN104091321A publication Critical patent/CN104091321A/zh
Application granted granted Critical
Publication of CN104091321B publication Critical patent/CN104091321B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明涉及适用于地面激光雷达点云分类的多层次点集特征的提取方法。基于点集特征实现了场景中行人、树木、建筑和汽车等四类比较常见地物的高精度分类。首先,构建点集,将点云重采样成不同尺度的点云,聚类形成不同大小、具有层次结构的点集,获得点集中每一点的特征;接下去,采用LDA(Latent Dirichlet Allocation)方法把每个点集中所有点的基于点的特征综合成点集的形状特征;最后,基于点集的形状特征,采用Adaboost分类器对不同层次的点集进行训练,获得整个点云的分类结果。本发明具有较高的分类精度,尤其在行人和车的分类精度方面,远高于基于点的特征、基于Bag‑of‑Word的特征和基于概率潜语义分析(PLSA)特征的分类精度。

Description

适用于地面激光雷达点云分类的多层次点集特征的提取方法
一、技术领域
本发明涉及适用于地面激光雷达点云分类的多层次点集特征的提取方法,属于空间信息技术领域。
二、背景技术
只有有效的分类识别地面激光雷达点云,才能实现复杂场景的认知。单站式地面激光雷达点云一般随距离扫描仪的远近不同密度由稀到密变化,如果场景范围较大,近处和远处地物的点密度会相差数倍,加上点密度不均一导致同一地物在相同尺寸窗口内纹理信息具有较大的差异。城市场景中除了建筑和植被,还存在人和汽车等,这些目标往往个体较小,形态各异,容易被其它物体所遮挡,造成点云不完整,用这部分点云判断它们所属的类别是比较困难的,并且在扫描过程中这些小目标可能处于运动状态,造成点云的拉升,比较显著的纹理特征因拉伸变的模糊而难以识别。
机载激光雷达点云分布较为均一,所以机载激光雷达点云分类方法较少考虑点云密度的变化,相应的难以应用到地面激光雷达点云分类中。近年来有许多相关研究集中在地面激光雷达点云分类中,部分方法对已经分割出来的点集或地物进行分类,另外一部分从上下文关系识别点云类别,但这些方法离不开对单点或点集特征的选取。基于单点的特征易受到噪声的影响,已有的点集特征使用点集的平均点数、平均法向量等特征,在复杂场景中,这些特征的稳定性较差。目前,仍缺乏对点集特征进行有效描述的方法,基于此,本发明研究一种鲁棒的、具有较高区分度的特征来表达目标或点集,能有效的描述每个点的特征,以及点与点之间的联系,很好的适应地面激光雷达点云密度不均一、噪声以及数据缺失等问题。
三、发明内容
1、目的:有效获取激光雷达点云数据的特征是实现复杂场景地物识别和分类的基础。地物离扫描仪距离远近不同或者地物间相互遮挡会造成点云密度不均一、地物局部点云的缺失,使得基于点的特征缺乏稳定性,应用这些特征对地物分类精度不高,尤其是造成一些小地物分类精度过低。本发明提出了一种多层次多尺度点集特征的提取方法,基于点集特征实现了场景中行人、树木、建筑和汽车等四类比较常见地物的高精度分类。
2、技术方案:
适用于地面激光雷达点云分类的多层次点集特征的提取方法,其特征在于,包括如下步骤(如图1):
步骤一:构建多层次多尺度的点集
为了从点集中提取鲁棒的、具有较高区分度的形状特征,重采样点云成若干个尺度,每个尺度的点云再分割成若干个层次,生成的最终点集称作多尺度多层次点集。构建多尺度多层次点集的方法如下:
(1)去除点云中孤立点和地面点。在水平方向建立2m×2m的栅格图像,把点云按照其水平坐标归属到对应的栅格中,每个栅格中点云最低高度作为该栅格的值,每个栅格分成地面点或非地面点。如果它周围存在一个栅格值比它低0.5m,就把它作为非地面点;如果一个栅格的周围均是非地面点,该栅格也是非地面点。地面点的去除分为两步:首先去除地面点栅格中和该栅格最低点高差小于0.1m的点;为了去除那些道路两旁台阶上的点,对周围存在地面点的栅格,剔除该栅格中和周围地面点栅格中最低点高差小于0.1m的点。
(2)为了使获得的特征有尺度不变性以及对点密度变化具有不敏感性,重采样点云成若干个尺度。假设存在第i个尺度的点云,对其重采样获得第i+1个尺度的点云。递归进行直到该尺度的点云密度小于需要分类点云平均密度的50%为止。根据Shannon采样定理,如果点云采样密度小于原来密度的50%,那么它就无法描述物体的表面信息,该点云作为训练数据会降低分类结果。用点密度小的采样尺度处理远处的物体表面点云,而点密度大的采样尺度有效的处理近处的物体表面。下面分割步骤是在每一个尺度上同时进行的。
(3)采用图组织点云。将点云中每一点作为一个顶点,寻找每一个点最邻近的k1个点,连接这些点形成边,获得无向图G1(V,E),每条边的欧氏距离作为这条边的权重。通过判断图的连通性获得所有连通分量。
(4)在比较复杂的区域有些物体是聚集在一起的,一个连通分量会包含多个物体,需要对连通分量进一步分割。区域内一个局部最高点通常意味着该区域内存在一个地物,局部最高点作为地物标识进一步分割。用类似步骤一的过程形成一个1m×1m栅格图像,栅格中的最高点作为该栅格的值。用移动窗口法采用5×5的窗口在栅格上滑动,搜索局部最高点,这些最高点作为地物存在的标志;接下去,用图割(Graph Cut)对包含多个地物标志的连通分量进行分割。把最高点称作为种子点,最后一个连通分量会分成几个围绕着这些种子点的点集。
(5)引入Normalized Cut分割点云。一个点集Normalized Cut二分,直到点集小于预先定义的阈值δm。为了保证点集包含足够多的形状特征信息,δm由扫描仪设定的角分辨率来决定的。在判断点集属于哪一类时,需要从多个层次对点集进行联合判别,即采用不同的δm获得不同大小的点集,用这些点集进行联合判别。设定δm为最小的那个阈值,对应最深的层次为第n层,那么第j(j<n)层的阈值为(n-j)×δm。
步骤二:提取多层次多尺度点集的特征
(1)基于点的特征的提取
首先,定义点云中每点的支撑区域。集合Np={q|q是p的k2个最邻近点中的一个}作为点p的支撑区域。为了保证支撑区域中点分布均一,k2不能取太大,太大的k2会导致Np中的点落到不同的物体上或者物体的不同部分,k2也不能取太小,太小会造成用来特征提取的点太少,难以获得稳定的特征。
定义了支撑区域后,用基于特征值的特征和spin图对一个点的特征进行描述。特征值λ1,λ2,λ31>λ2>λ3)是通过求解下面的协方差矩阵Cp获得的。
C p = 1 | N p | Σ q ∈ N p ( q - p ‾ ) ( q - p ‾ ) T - - - ( 1 )
上式(1)中,是集合Np中所有点的中心。
不同协方差矩阵获得的特征值的取值范围是不同的,为了便于比较这些特征值,需要对其进行归一化。
λi=λi/∑iλi i=1,2,3 (2)
获取了特征值以后,计算基于特征值的特征并构建形成一个6维的向量Feigen
F e i g e n = [ Π i = 1 3 λ i 3 , λ 1 - λ 3 λ 1 , λ 2 - λ 3 λ 1 , λ 3 λ 1 , - Σ i = 1 3 λ i l o g ( λ i ) , λ 1 - λ 2 λ 1 ] - - - ( 3 )
Feigen中基于特征值的特征依次代表结构张量全方差、结构张量的各向异性、结构张量的平面、球形结构张量、结构张量特征熵和线性结构张量。
spin图用来求取场景中一点周围区域的大量形状特征,它通过2维直方图分布表达三维空间的信息。采用一个点的法向量作为spin图的旋转轴。接着,支撑区域中的一个点p按照式(4)计算它在spin图中的坐标。获得了每个三维点对应到spin图坐标后,完成一个三维点到spin图上点的转化。
x = | q - p | 2 - [ n * ( q - p ) ] 2 - - - ( 4 )
y=n*(q-p)
式(4)中,x代表三维点在spin图x轴的坐标,y代表三维点在spin图y轴的坐标,q代表q点的三维坐标,p代表p点的三维坐标,n表示p点的法向量。
生成每一点的3×4spin图像。为了减少spin图中0值的数量,计算所有投影在负y轴上点所对应该方向上的绝对值作为它们的y值。这样y轴的范围就从原来的-∞到+∞变成了0到+∞。在spin图中,x轴方向的栅格值是该点支撑范围内距离该点最远点到该点距离的1/3。手工设定y轴方向的栅格值,第一个刻度是从0-0.02m,第二个刻度是从0.02-0.04m,第三个刻度是从0.04-0.06m,第四个刻度是0.06到+∞。一个点支撑区域中所有点落入到spin图中后,计算spin图中每个栅格中点的数量,这些栅格形成了一个2D直方图,用向量Fspin来表示。12个栅格的值形成了一个12维的Fspin,它和6维的Feigen通过[Fspin,Feigen]的方式构成了一个18维的向量Fpoint。Fpoint就是本发明采用的基于点的特征,它具有Fspin和Feigen的方向不变性的特点。
(2)基于LDA(Latent DirichletAllocation)提取多层次多尺度点集的特征
获得多层次多尺度点集中所有点的Fpoint后,需用一个特征向量表达一个点集中所有点的Fpoint。这个特征向量是对这些点的Fpoint的综合,并且该特征向量能够表达点之间的关系。LDA模型提取的特征继承了Fpoint的旋转不变性,也抑制了基于点的特征对噪声的不稳定性。
为了建立LDA模型,先定义点集中的文档、文档集合、字典以及单词。所有的多层次多尺度的点集定义成文档,整个多层次多尺度的点集集合定义为文档集合,字典和单词采用矢量量化的方式获得。采用K-means算法对多层次多尺度的点集中所有点的Fpoint进行聚类,获得K个中心向量,这K个中心向量就是单词,这些单词的集合就是字典。获得了单词和字典以后,重新编码所有点的Fpoint,每个Fpoint用离它最近的单词代替。代替完Fpoint后,所有的特征压缩到一个由这些单词构成的空间内。统计每一个点集中的词频,这样每一集合就表示成一个词频的向量,向量长度是单词的数量,向量的值是对应单词在这个点集中的频率。通过这些词频向量学习到LDA模型。
获得LDA模型后,提取每一点集的隐语义向量,构成多尺度多层次点集的特征。计算每点的Fpoint与每个单词的距离,对整个Fpoint构成的矩阵按列归一化。本发明采用式(5)进行归一化。
n = f - m i n m a x - m i n - - - ( 5 )
式(5)中,n代表归一化后的值,f代表当前值,max表示一列中最大值,min表示这一列中最小值。
记录归一化的方法和参数用于计算未知点集对应维数值。当提取未知点集的多层次多尺度特征时,计算该点集每点的Fpoint,按照训练过程中归一化的方式,归一化每点Fpoint中每一维的值,用字典中的单词代替归一化后的Fpoint,得到点集中每个单词后,也就获得了该点集的词频向量,用学习得到的LDA模型识别词频向量获得这个点集的多尺度多层次特征。
LDA模型没有改变Fpoint的方向不变性,提取的多尺度多层次特征具有方向不变性,并且它是由多尺度多层次的点集所训练得到的,也保持了尺度不变性。这个特征是由点集中的隐语义构成的,每个隐语义表示点集中那些具有相似特性的特征总和。
步骤三:基于多层次多尺度特征的分类
将训练样本聚类成多层次多尺度点集,获得多层次多尺度特征。为了避免训练LDA模型受聚类形成的碎片影响,保持训练集对主要地物的纯净性,点数小于20的点集不参与训练LDA模型。当获得所有多尺度多层次的点集特征后,训练得到多个一对多的AdaBoost分类器。每一点集的集合训练4个AdaBoost分类器,分别对应人、树、建筑、汽车4个类别。当LDA模型和AdaBoost分类器学习完毕以后,结束训练过程,就对未知的点云进行分类。
遇到未标识的点云时,首先将其分成多层次点集,采用LDA获得这些点集的特征,通过AdaBoost分类器对这些点集进行分类。通过AdaBoost分类器分类以后,计算得到每一个点集属于某一类li的概率:
P n u m ( l i , F ) = exp ( H n u m ( l i , F ) ) Σ i exp ( H n u m ( l i , F ) ) - - - ( 6 )
式(6)中,F是多层次多尺度的特征,num表示第num个层次(1≤num≤n),n表示多层次点集的层数,Pnum(li,F)是这个点集在第num层标识为li的概率,Hnum(li,F)是AdaBoost分类器对这一点集属于li类的输出权重。
这样会得到所有的点集分成哪一类的概率,但是在未知点云分类过程中,一个点集在较粗层次上可能包含多个地物,所以只对最大层次的点集进行标识,其它层次只起辅助作用。最大层次点集包含点数少,又经过normalized cut分割形成的,绝大部分点集只包含一个地物。点集标识为li的概率由式(7)决定:
P ( l i ) = Π n u m = 1 n P n u m ( l i , F ) - - - ( 7 )
点集归属类别是取这个点集所有类别中概率最大的那一类,至此完成整个点云分类。
3、优点及功效:本发明提出了一种提取点集特征的方法,基于点集特征实现了场景中行人、树木、建筑和汽车等四类比较常见地物的高精度分类。首先,构建点集,将点云重采样成不同尺度的点云,聚类形成不同大小、具有层次结构的点集,获得点集中每一点的特征;接下去,采用LDA方法把每个点集中所有点的基于点的特征综合成点集的形状特征;最后,基于点集的形状特征,采用Adaboost分类器对不同层次的点集进行训练,获得整个点云的分类结果。本发明具有较高的分类精度,尤其在行人和车的分类精度方面,远高于基于点的特征、基于Bag-of-Word的特征和基于概率潜语义分析(PLSA)的特征的分类精度。
四、附图说明
图1采用多尺度多层次点集特征进行分类流程图
五、具体实施方式
本发明涉及适用于地面激光雷达点云分类的多层次点集特征的提取方法,其特征在于,该方法的具体步骤如下(如图1):
步骤一:构建多层次多尺度的点集
为了从点集中提取鲁棒的、具有较高区分度的形状特征,重采样点云成若干个尺度,每个尺度的点云再分割成若干个层次,生成的最终点集称作多尺度多层次点集。构建多尺度多层次点集的方法如下:
(1)去除点云中孤立点和地面点。在水平方向建立2m×2m的栅格图像,把点云按照其水平坐标归属到对应的栅格中,每个栅格中点云最低高度作为该栅格的值,每个栅格分成地面点或非地面点。如果它周围存在一个栅格值比它低0.5m,就把它作为非地面点;如果一个栅格的周围均是非地面点,该栅格也是非地面点。地面点的去除分为两步:首先去除地面点栅格中和该栅格最低点高差小于0.1m的点;为了去除那些道路两旁台阶上的点,对周围存在地面点的栅格,剔除该栅格中和周围地面点栅格中最低点高差小于0.1m的点。
(2)为了使获得的特征有尺度不变性以及对点密度变化具有不敏感性,重采样点云成若干个尺度。假设存在第i个尺度的点云,对其重采样获得第i+1个尺度的点云。递归进行直到该尺度的点云密度小于需要分类点云平均密度的50%为止。根据Shannon采样定理,如果点云采样密度小于原来密度的50%,那么它就无法描述物体的表面信息,该点云作为训练数据会降低分类结果。用点密度小的采样尺度处理远处的物体表面点云,而点密度大的采样尺度有效的处理近处的物体表面。下面分割步骤是在每一个尺度上同时进行的。
(3)采用图组织点云。将点云中每一点作为一个顶点,寻找每一个点最邻近的k1个点,连接这些点形成边,获得无向图G1(V,E),每条边的欧氏距离作为这条边的权重。通过判断图的连通性获得所有连通分量。
(4)在比较复杂的区域有些物体是聚集在一起的,一个连通分量会包含多个物体,需要对连通分量进一步分割。区域内一个局部最高点通常意味着该区域内存在一个地物,局部最高点作为地物标识进一步分割。用类似步骤一的过程形成一个1m×1m栅格图像,栅格中的最高点作为该栅格的值。用移动窗口法采用5×5的窗口在栅格上滑动,搜索局部最高点,这些最高点作为地物存在的标志;接下去,用图割(Graph Cut)对包含多个地物标志的连通分量进行分割。把最高点称作为种子点,最后一个连通分量会分成几个围绕着这些种子点的点集。
(5)引入Normalized Cut分割点云。一个点集Normalized Cut二分,直到点集小于预先定义的阈值δm。为了保证点集包含足够多的形状特征信息,δm由扫描仪设定的角分辨率来决定的。在判断点集属于哪一类时,需要从多个层次对点集进行联合判别,即采用不同的δm获得不同大小的点集,用这些点集进行联合判别。设定δm为最小的那个阈值,对应最深的层次为第n层,那么第j(j<n)层的阈值为(n-j)×δm。
步骤二:提取多层次多尺度点集的特征
(1)基于点的特征的提取
首先,定义点云中每点的支撑区域。集合Np={q|q是p的k2个最邻近点中的一个}作为点p的支撑区域。为了保证支撑区域中点分布均一,k2不能取太大,太大的k2会导致Np中的点落到不同的物体上或者物体的不同部分,k2也不能取太小,太小会造成用来特征提取的点太少,难以获得稳定的特征。
定义了支撑区域后,用基于特征值的特征和spin图对一个点的特征进行描述。特征值λ1,λ2,λ31>λ2>λ3)是通过求解下面的协方差矩阵Cp获得的。
C p = 1 | N p | Σ q ∈ N p ( q - p ‾ ) ( q - p ‾ ) T - - - ( 1 )
上式(1)中,是集合Np中所有点的中心。
不同协方差矩阵获得的特征值的取值范围是不同的,为了便于比较这些特征值,需要对其进行归一化。
λi=λi/∑iλi i=1,2,3 (2)
获取了特征值以后,计算基于特征值的特征并构建形成一个6维的向量Feigen
F e i g e n = [ Π i = 1 3 λ i 3 , λ 1 - λ 3 λ 1 , λ 2 - λ 3 λ 1 , λ 3 λ 1 , - Σ i = 1 3 λ i l o g ( λ i ) , λ 1 - λ 2 λ 1 ] - - - ( 3 )
Feigen中基于特征值的特征依次代表结构张量全方差、结构张量的各向异性、结构张量的平面、球形结构张量、结构张量特征熵和线性结构张量。
spin图用来求取场景中一点周围区域的大量形状特征,它通过2维直方图分布表达三维空间的信息。采用一个点的法向量作为spin图的旋转轴。接着,支撑区域中的一个点p按照式(4)计算它在spin图中的坐标。获得了每个三维点对应到spin图坐标后,完成一个三维点到spin图上点的转化。
x = | q - p | 2 - [ n * ( q - p ) ] 2 - - - ( 4 )
y=n*(q-p)
式(4)中,x代表三维点在spin图x轴的坐标,y代表三维点在spin图y轴的坐标,q代表q点的三维坐标,p代表p点的三维坐标,n表示p点的法向量。
生成每一点的3×4spin图像。考虑到支撑区域内点不多,为了减少spin图中0值的数量,计算所有投影在负y轴上点所对应该方向上的绝对值作为它们的y值。这样y轴的范围就从原来的-∞到+∞变成了0到+∞。在spin图中,x轴方向的栅格值是该点支撑范围内距离该点最远点到该点距离的1/3。手工设定y轴方向的栅格值,第一个刻度是从0-0.02m,第二个刻度是从0.02-0.04m,第三个刻度是从0.04-0.06m,第四个刻度是0.06到+∞。一个点支撑区域中所有点落入到spin图中后,计算spin图中每个栅格中点的数量,这些栅格形成了一个2D直方图,用向量Fspin来表示。12个栅格的值形成了一个12维的Fspin,它和6维的Feigen通过[Fspin,Feigen]的方式构成了一个18维的向量Fpoint。Fpoint就是本发明采用的基于点的特征,它具有Fspin和Feigen的方向不变性的特点。
(2)LDA提取多层次多尺度点集的特征
获得多层次多尺度点集中所有点的Fpoint后,需用一个特征向量表达一个点集中所有点的Fpoint。这个特征向量是对这些点的Fpoint的综合,并且该特征向量能够表达点之间的关系。LDA模型提取的特征继承了Fpoint的旋转不变性,也抑制了基于点的特征对噪声的不稳定性。
为了建立LDA模型,先定义点集中的文档、文档集合、字典以及单词。所有的多层次多尺度的点集定义成文档,整个多层次多尺度的点集集合定义为文档集合,字典和单词采用矢量量化的方式获得。采用K-means算法对多层次多尺度的点集中所有点的Fpoint进行聚类,获得K个中心向量,这K个中心向量就是单词,这些单词的集合就是字典。获得了单词和字典以后,重新编码所有点的Fpoint,每个Fpoint用离它最近的单词代替。代替完Fpoint后,所有的特征压缩到一个由这些单词构成的空间内。统计每一个点集中的词频,这样每一集合就表示成一个词频的向量,向量长度是单词的数量,向量的值是对应单词在这个点集中的频率。通过这些词频向量学习到LDA模型。
获得LDA模型后,提取每一点集的隐语义向量,构成多尺度多层次点集的特征。计算每点的Fpoint与每个单词的距离,对整个Fpoint构成的矩阵按列归一化。本发明采用式(5)进行归一化。
n = f - m i n m a x - m i n - - - ( 5 )
式(5)中,n代表归一化后的值,f代表当前值,max表示一列中最大值,min表示这一列中最小值。
记录归一化方法和参数用于计算未知点集对应维数值。当提取未知点集的多层次多尺度特征时,计算该点集每点的Fpoint,按照训练过程中归一化的方式,归一化每点Fpoint中每一维的值,用字典中的单词代替归一化后的Fpoint,得到点集中每一个单词后,也就获得了这个点集的词频向量,用学习得到的LDA模型识别词频向量获得这个点集的多尺度多层次特征。
LDA模型没有改变Fpoint的方向不变性,提取的多尺度多层次特征具有方向不变性,并且它是由多尺度多层次的点集所训练得到的,也保持了尺度不变性。这个特征是由点集中的隐语义构成的,每个隐语义表示点集中那些具有相似特性的特征总和。
步骤三:基于多层次多尺度特征的分类
将训练样本聚类成多层次多尺度点集,获得多层次多尺度特征。为了避免训练LDA模型受聚类形成的碎片影响,保持训练集对主要地物的纯净性,点数小于20的点集不参与训练LDA模型。当获得所有多尺度多层次的点集特征后,训练得到多个一对多的AdaBoost分类器。每一点集的集合训练4个AdaBoost分类器,分别对应人、树、建筑、汽车4个类别。当LDA模型和AdaBoost分类器学习完毕以后,结束训练过程,就对未知的点云进行分类。
遇到未标识的点云时,首先将其分成多层次点集,采用LDA获得这些点集的特征,通过AdaBoost分类器对这些点集进行分类。通过AdaBoost分类器分类以后,计算得到每一个点集属于某一类li的概率:
P n u m ( l i , F ) = exp ( H n u m ( l i , F ) ) Σ i exp ( H n u m ( l i , F ) ) - - - ( 6 )
式(6)中,F是多层次多尺度的特征,num表示第num个层次(1≤num≤n),Pnum(li,F)是这个点集在第num层标识为li的概率,Hnum(li,F)是AdaBoost分类器对这一点集属于li类的输出权重。
这样会得到所有的点集分成哪一类的概率,但是在未知点云分类过程中,一个点集在较粗层次上可能包含多个地物,所以只对最大层次的点集进行标识,其它层次只起辅助作用。最大层次点集包含点数少,又经过normalized cut分割形成的,绝大部分点集只包含一个地物。点集标识为li的概率由式(7)决定:
P ( l i ) = Π n u m = 1 n P n u m ( l i , F ) - - - ( 7 )
点集归属类别是取这个点集所有类别中概率最大的那一类,至此完成整个点云分类。
实施例1:
利用三个城市场景点云数据进行定性和定量验证本发明的性能。这三个场景的点云是通过地面激光雷达单站式扫描获得的,场景中主要地物包含建筑、树、人和汽车。场景范围较大,相应的点密度变化也较大,近处的一棵小树往往包含了十几万个点,而远处的一栋高楼只包含几千个点。单站扫描只能获取物体面向扫面仪的表面数据,而且后方物体经常前方物体遮挡造成数据缺失。为了训练这些分类器和评估本发明,这三个场景手动进行的标识,标识的结果作为真值。
从学习过程和分类过程的精度等方面,本发明和其它三种特征以及sLDA方法进行了比较。sLDA是LDA和广义线性模型结合而形成的一种生成模型,它只有一个层次。方法I用基于点的特征进行分类,因为获取基于点的特征不需要聚类过程,所以方法I不存在多层次性或者多尺度性;方法II用词袋(BoW)替代LDA作为特征,用词频向量作为分类器的输入,而不用LDA模型对这些词频向量进一步压缩提取隐语义。方法III用概率潜语义分析(PLSA)代替LDA对词频向量压缩提取隐语义,隐语义数量和LDA的隐语义数量是相同的。方法IV采用sLDA方法。
如表所示,本发明的学习结果的正确率(precision)和召回率(recall)高于其它方法,说明本发明能有效的描述这些训练数据。
表1.不同方法的学习结果比较(precision/recall).
如表2所示,在三个场景中,本发明对大多数类别分类结果的precision和recall是良好的,能有效区分场景中不同类别目标。虽然有些目标在局部空间上具有较小的可区分性,但还能较好的分类这些地物。和其它方法相比,所有场景的精度是最高的,说明本发明获得正确分类点最多。
表2.不同方法对三个场景分类性能的定量评价(precision/recall)
场景I 人(%) 树(%) 建筑(%) 汽车(%)
本发明 82.9/62.7 95.4/98.3 89.9/86.7 52.9/45.4
方法I 28.6/32.5 89.5/87.4 61.3/62.0 9.1/12.8
方法II 81.6/52.6 94.6/98.0 87.8/88.2 50.2/33.4
方法III 32.2/12.5 84.0/95.2 60.0/41.0 0/0
sLDA 68.4/33.5 91.9/97.7 84.1/80.7 42.9/18.1
场景II 人(%) 树(%) 建筑(%) 汽车(%)
本发明 78.8/77.5 95.9/90.1 89.0/93.3 83.7/86.4
方法I 53.8/54.8 79.6/86.2 84.4/79.0 63.0/59.8
方法II 70.9/81.1 93.0/90.8 92.8/89.2 80.3/89.6
方法III 68.8/56.2 89.0/91.2 82.9/91.2 82.0/65.8
sLDA 66.8/50.5 94.6/90.2 84.8/94.1 79.7/72.9
场景III 人(%) 树(%) 建筑(%) 汽车(%)
本发明 84.9/69.4 98.2/95.6 83.7/92.3 77.4/85.6
方法I 56.9/47.4 92.2/85.1 56.5/73.2 50.5/55.1
方法II 56.8/75.2 98.2/95.0 88.4/90.4 78.1/88.0
方法III 71.7/33.7 91.2/94.9 75.7/79.1 72.3/51.4
sLDA 84.3/63.6 95.2/96.4 81.6/87.7 74.9/58.4

Claims (1)

1.适用于地面激光雷达点云分类的多层次点集特征的提取方法,其特征在于,包括如下步骤:
步骤一:构建多层次多尺度的点集
(1)去除点云中孤立点和地面点,在水平方向建立2m×2m的栅格图像,把点云按照其水平坐标归属到对应的栅格中,每个栅格中点云最低高度作为该栅格的值,如果它周围存在一个栅格值比它低0.5m,就把它作为非地面点;如果一个栅格的周围均是非地面点,该栅格也是非地面点,地面点的去除分为两步:首先去除地面点栅格中和该栅格最低点高差小于0.1m的点;为了去除那些道路两旁台阶上的点,对周围存在地面点的栅格,剔除该栅格中和周围地面点栅格中最低点高差小于0.1m的点;
(2)为了使获得的特征有尺度不变性以及对点密度变化具有不敏感性,重采样点云成若干个尺度,假设存在第i个尺度的点云,对其重采样获得第i+1个尺度的点云,递归进行直到该尺度的点云密度小于需要分类点云平均密度的50%为止,用点密度小的采样尺度处理远处的物体表面点云,而点密度大的采样尺度有效的处理近处的物体表面,下面分割步骤是在每一个尺度上同时进行的;
(3)采用图组织点云,将点云中每一点作为一个顶点,寻找每一个点最邻近的k1个点,连接这些点形成边,获得无向图G1(V,E),每条边的欧氏距离作为这条边的权重,通过判断图的连通性获得所有连通分量;
(4)区域内一个局部最高点通常意味着该区域内存在一个地物,局部最高点作为地物标识进一步分割,采用类似步骤一的过程形成一个1m×1m栅格图像,栅格中的最高点作为该栅格的值,用移动窗口法采用5×5的窗口在栅格上滑动,搜索局部最高点,这些最高点作为地物存在的标志;接下去,用图割对包含多个地物标志的连通分量进行分割;
(5)引入Normalized Cut分割点云,一个点集Normalized Cut二分,直到点集小于预先定义的阈值δm,为了保证点集包含足够多的形状特征信息,δm由扫描仪设定的角分辨率来决定的,在判断点集属于哪一类时,需要从多个层次对点集进行联合判别,即采用不同的δm获得不同大小的点集,用这些点集进行联合判别;
步骤二:提取多层次多尺度点集的特征
(1)基于点的特征的提取
首先,定义点云中每点的支撑区域,集合Np={q|q是p的k2个最邻近点中的一个}作为点p的支撑区域,定义了支撑区域后,用基于特征值的特征和spin图对一个点的特征进行描述,特征值λ1,λ2,λ31>λ2>λ3)是通过求解下面的协方差矩阵Cp获得的,
上式(1)中,是集合Np中所有点的中心,
不同协方差矩阵获得的特征值的取值范围是不同的,为了便于比较这些特征值,需要对其进行归一化,
λi=λi/∑iλi i=1,2,3 (2)
获取了特征值以后,计算基于特征值的特征并构建形成一个6维的向量Feigen
Feigen中基于特征值的特征依次代表结构张量全方差、结构张量的各向异性、结构张量的平面、球形结构张量、结构张量特征熵和线性结构张量;
spin图用来求取场景中一点周围区域的大量形状特征,它通过2维直方图分布表达三维空间的信息,采用一个点的法向量作为spin图的旋转轴,接着,按照式(4)计算支撑区域中点p在spin图中的坐标;获得了每个三维点对应到spin图坐标后,完成一个三维点到spin图上点的转化,
y=n*(q-p)
式(4)中,x代表三维点在spin图x轴的坐标,y代表三维点在spin图y轴的坐标,q代表q点的三维坐标,p代表p点的三维坐标,n表示p点的法向量;
生成每一点的3×4spin图像,为了减少spin图中0值的数量,计算所有投影在负y轴上点所对应该方向上的绝对值作为它们的y值,在spin图中,x轴方向的栅格值是该点支撑范围内距离该点最远点到该点距离的1/3,手工设定y轴方向的栅格值,第一个刻度是从0-0.02m,第二个刻度是从0.02-0.04m,第三个刻度是从0.04-0.06m,第四个刻度是0.06到+∞,一个点支撑区域中所有点落入到spin图中后,计算spin图中每个栅格中点的数量,这些栅格形成了一个二维直方图,用向量Fspin来表示,12个栅格的值形成了一个12维的Fspin,它和6维的Feigen通过[Fspin,Feigen]的方式构成了一个18维的向量Fpoint,Fpoint就是采用的基于点的特征,它具有Fspin和Feigen的方向不变性的特点;
(2)基于LDA(Latent Dirichlet Allocation)提取多层次多尺度点集的特征
采用K-means算法对多层次多尺度的点集中所有点的Fpoint进行聚类,获得K个中心向量,这K个中心向量就是单词,这些单词的集合就是字典,获得了单词和字典以后,重新编码所有点的Fpoint,每个Fpoint用离它最近的单词代替,代替完Fpoint后,所有的特征压缩到一个由这些单词构成的空间内,统计每一个点集中的词频,这样每一集合就表示成一个词频的向量,向量长度是单词的数量,向量的值是对应单词在这个点集中的频率,通过这些词频向量学习到LDA模型,
获得LDA模型后,提取每一点集的隐语义向量,构成多尺度多层次点集的特征,计算每点的Fpoint与每个单词的距离,对整个Fpoint构成的矩阵按列归一化,采用式(5)进行归一化,
式(5)中,n代表归一化后的值,f代表当前值,max表示一列中最大值,min表示这一列中最小值;
记录归一化的方法和参数用于计算未知点集对应维数值,当提取一个未知点集的多层次多尺度特征时,计算该点集每点的Fpoint,按照训练过程中归一化的方式,归一化每点Fpoint中每一维的值,用字典中单词代替归一化后的Fpoint,得到点集中每个单词后,也就获得了该点集的词频向量,用学习得到的LDA模型识别词频向量获得这个点集的多尺度多层次特征;步骤三:基于多层次多尺度特征的分类
为了避免训练LDA模型受聚类形成的碎片影响,保持训练集对主要地物的纯净性,点数小于20的点集不参与训练LDA模型,当获得所有多尺度多层次的点集特征后,训练得到多个一对多的AdaBoost分类器,每一点集的集合训练4个AdaBoost分类器,分别对应人、树、建筑、汽车4个类别,当LDA模型和AdaBoost分类器学习完毕以后,结束训练过程,就对未知的点云进行分类;
遇到未标识的点云时,首先将其分成多层次点集,采用LDA获得这些点集的特征,通过AdaBoost分类器对这些点集进行分类,通过AdaBoost分类器分类以后,计算得到每一个点集属于某一类li的概率:
式(6)中,F是多层次多尺度的特征,num表示第num个层次(1≤num≤n),n表示多层次点集的层数,Pnum(li,F)是这个点集在第num层标识为li的概率,Hnum(li,F)是AdaBoost分类器对这一点集属于li类的输出权重,
点集标识为li的概率由式(7)决定:
点集归属类别是取这个点集所有类别中概率最大的那一类,至此完成整个点云分类。
CN201410146272.2A 2014-04-14 2014-04-14 适用于地面激光雷达点云分类的多层次点集特征的提取方法 Expired - Fee Related CN104091321B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410146272.2A CN104091321B (zh) 2014-04-14 2014-04-14 适用于地面激光雷达点云分类的多层次点集特征的提取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410146272.2A CN104091321B (zh) 2014-04-14 2014-04-14 适用于地面激光雷达点云分类的多层次点集特征的提取方法

Publications (2)

Publication Number Publication Date
CN104091321A CN104091321A (zh) 2014-10-08
CN104091321B true CN104091321B (zh) 2016-10-19

Family

ID=51639036

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410146272.2A Expired - Fee Related CN104091321B (zh) 2014-04-14 2014-04-14 适用于地面激光雷达点云分类的多层次点集特征的提取方法

Country Status (1)

Country Link
CN (1) CN104091321B (zh)

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105335699B (zh) * 2015-09-30 2016-10-19 深圳大学 读写场景中读写元素三维坐标的智能认定方法及其应用
CN105354828B (zh) * 2015-09-30 2016-10-19 深圳大学 读写场景中读物三维坐标的智能认定方法及其应用
CN105354591B (zh) * 2015-10-20 2019-05-03 南京大学 基于高阶类别相关先验知识的三维室外场景语义分割系统
CN105223561B (zh) * 2015-10-23 2017-10-24 西安电子科技大学 基于空间分布的雷达地面目标鉴别器设计方法
CN105631459B (zh) * 2015-12-31 2019-11-26 百度在线网络技术(北京)有限公司 防护栏点云提取方法及装置
CN106443641B (zh) * 2016-09-28 2019-03-08 中国林业科学研究院资源信息研究所 一种激光雷达扫描均一性测量方法
CN106529573A (zh) * 2016-10-14 2017-03-22 北京联合大学 一种结合三维点云分割和局部特征匹配的实时物体检测方法
CN106845412B (zh) * 2017-01-20 2020-07-10 百度在线网络技术(北京)有限公司 障碍物识别方法及装置、计算机设备及可读介质
CN106897686A (zh) * 2017-02-19 2017-06-27 北京林业大学 一种机载lidar电力巡检点云分类方法
CN108470174B (zh) * 2017-02-23 2021-12-24 百度在线网络技术(北京)有限公司 障碍物分割方法及装置、计算机设备及可读介质
CN106934853A (zh) * 2017-03-13 2017-07-07 浙江优迈德智能装备有限公司 一种基于点云模型的汽车工件表面法向量的求取方法
CN107316048B (zh) * 2017-05-03 2020-08-28 深圳市速腾聚创科技有限公司 点云分类方法及装置
US10509413B2 (en) * 2017-09-07 2019-12-17 GM Global Technology Operations LLC Ground reference determination for autonomous vehicle operations
CN107944356B (zh) * 2017-11-13 2019-02-19 湖南商学院 综合多类型特征的层次主题模型掌纹图像识别的身份认证方法
CN107958209B (zh) * 2017-11-16 2021-10-29 深圳天眼激光科技有限公司 一种违建识别方法、系统及电子设备
CN108955564B (zh) * 2018-06-20 2021-05-07 北京云迹科技有限公司 激光数据重采样方法及系统
CN108717540B (zh) * 2018-08-03 2024-02-06 浙江梧斯源通信科技股份有限公司 基于2d激光雷达区分行人和车辆的方法及装置
CN109141402B (zh) * 2018-09-26 2021-02-02 亿嘉和科技股份有限公司 一种基于激光栅格的定位方法以及机器人自主充电方法
CN109754020B (zh) * 2019-01-10 2020-08-04 东华理工大学 融合多层级渐进策略和非监督学习的地面点云提取方法
CN110276266B (zh) * 2019-05-28 2021-09-10 暗物智能科技(广州)有限公司 一种基于旋转的点云数据的处理方法、装置及终端设备
CN114270406A (zh) * 2019-09-30 2022-04-01 深圳市大疆创新科技有限公司 一种参数标定方法、装置及设备
CN111208530B (zh) * 2020-01-15 2022-06-17 北京四维图新科技股份有限公司 定位图层生成方法、装置、高精度地图及设备
CN113748693B (zh) * 2020-03-27 2023-09-15 深圳市速腾聚创科技有限公司 路基传感器的位姿校正方法、装置和路基传感器
CN111814874B (zh) * 2020-07-08 2024-04-02 东华大学 一种用于点云深度学习的多尺度特征提取增强方法及系统
CN111860359B (zh) * 2020-07-23 2021-08-17 江苏食品药品职业技术学院 一种基于改进随机森林算法的点云分类方法
CN112348781A (zh) * 2020-10-26 2021-02-09 广东博智林机器人有限公司 一种基准面高度检测方法、装置、设备及存储介质
CN112434637B (zh) * 2020-12-04 2021-07-16 上海交通大学 基于量子计算线路和LiDAR点云分类的物体识别方法
CN113052109A (zh) * 2021-04-01 2021-06-29 西安建筑科技大学 一种3d目标检测系统及其3d目标检测方法
CN113963259A (zh) * 2021-10-14 2022-01-21 重庆数字城市科技有限公司 基于点云数据的街景地物多维度提取方法和系统
CN115019105A (zh) * 2022-06-24 2022-09-06 厦门大学 点云分类模型的隐语义分析方法、装置、介质及设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102915558A (zh) * 2011-08-01 2013-02-06 李慧盈 一种快速提取机载LiDAR数据中建筑物三维轮廓信息的方法
CN102930246A (zh) * 2012-10-16 2013-02-13 同济大学 一种基于点云片段分割的室内场景识别方法
CN103218817A (zh) * 2013-04-19 2013-07-24 深圳先进技术研究院 植物器官点云的分割方法和系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130338525A1 (en) * 2012-04-24 2013-12-19 Irobot Corporation Mobile Human Interface Robot
WO2013162735A1 (en) * 2012-04-25 2013-10-31 University Of Southern California 3d body modeling from one or more depth cameras in the presence of articulated motion
US20130342568A1 (en) * 2012-06-20 2013-12-26 Tony Ambrus Low light scene augmentation

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102915558A (zh) * 2011-08-01 2013-02-06 李慧盈 一种快速提取机载LiDAR数据中建筑物三维轮廓信息的方法
CN102930246A (zh) * 2012-10-16 2013-02-13 同济大学 一种基于点云片段分割的室内场景识别方法
CN103218817A (zh) * 2013-04-19 2013-07-24 深圳先进技术研究院 植物器官点云的分割方法和系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
一种基于分割的机载LIDAR点云数据滤波;胡举 等;《武汉大学学报-信息科学版》;20120331;第37卷(第3期);第318-321页 *

Also Published As

Publication number Publication date
CN104091321A (zh) 2014-10-08

Similar Documents

Publication Publication Date Title
CN104091321B (zh) 适用于地面激光雷达点云分类的多层次点集特征的提取方法
CN110992341A (zh) 一种基于分割的机载LiDAR点云建筑物提取方法
CN102254303B (zh) 遥感图像分割方法及遥感图像检索方法
CN102324038B (zh) 一种基于数字图像的植物种类识别方法
CN107506703A (zh) 一种基于无监督局部度量学习和重排序的行人再识别方法
CN104408469A (zh) 基于图像深度学习的烟火识别方法及系统
CN111080678B (zh) 一种基于深度学习的多时相sar图像变化检测方法
CN109657610A (zh) 一种高分辨率多源遥感影像的土地利用变化检测方法
CN105718866A (zh) 一种视觉目标检测与识别方法
CN102982338A (zh) 基于谱聚类的极化sar图像分类方法
CN111191628B (zh) 基于决策树与特征优化的遥感影像震害建筑物识别方法
CN103246894B (zh) 一种解决光照不敏感问题的地基云图识别方法
CN108629373B (zh) 一种图像分类方法、系统、设备及计算机可读存储介质
CN101196564A (zh) 拉普拉斯正则化最小二乘合成孔径雷达自动目标识别方法
CN104616319A (zh) 基于支持向量机的多特征选择目标跟踪方法
CN103208011A (zh) 基于均值漂移和组稀疏编码的高光谱图像空谱域分类方法
CN103955709A (zh) 基于加权合成核与tmf的极化sar图像分类方法
CN105046259A (zh) 基于多特征融合的日冕物质抛射检测方法
CN103679207A (zh) 一种手写体数字识别方法及系统
CN106228136A (zh) 基于聚合通道特征的全景街景隐私保护方法
CN105205816A (zh) 多特征加权融合的高分辨率sar影像建筑区提取方法
CN101067659B (zh) 一种遥感图像分类方法
CN105894035B (zh) 基于sar-sift和dbn的sar图像分类方法
CN105069471A (zh) 基于模糊标签的高光谱数据子空间投影和分类方法
Al-Ghrairi et al. Classification of satellite images based on color features using remote sensing

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20161019

Termination date: 20170414