CN111612896B - 一种基于机载激光雷达树点云重建三维树模型的方法 - Google Patents

一种基于机载激光雷达树点云重建三维树模型的方法 Download PDF

Info

Publication number
CN111612896B
CN111612896B CN202010469062.2A CN202010469062A CN111612896B CN 111612896 B CN111612896 B CN 111612896B CN 202010469062 A CN202010469062 A CN 202010469062A CN 111612896 B CN111612896 B CN 111612896B
Authority
CN
China
Prior art keywords
tree
point cloud
points
dimensional
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010469062.2A
Other languages
English (en)
Other versions
CN111612896A (zh
Inventor
胡少军
李峥嵘
董苏营
周远山
张志毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northwest A&F University
Original Assignee
Northwest A&F University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northwest A&F University filed Critical Northwest A&F University
Priority to CN202010469062.2A priority Critical patent/CN111612896B/zh
Publication of CN111612896A publication Critical patent/CN111612896A/zh
Application granted granted Critical
Publication of CN111612896B publication Critical patent/CN111612896B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/005Tree description, e.g. octree, quadtree
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/10Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/12Bounding box

Abstract

本发明涉及计算机科学技术领域,公开了一种基于机载激光雷达树点云重建三维树模型的方法,包括:S1、将机载激光雷达树点云投影至平面形成高度图;S2、采用切片法交互式分隔获取单棵树点云;S3、基于单棵树点云构造连通图;S4、基于植物学规律构建树点云的方向场;S5、基于贪婪算法生成树骨架;S6、基于管道模型和广义圆柱体重建树的三维几何模型,这种重建三维树模型的方法,实现稀疏树点云的有效重建,且重建后的树模型能够较好地保留原始点云的细节特征。

Description

一种基于机载激光雷达树点云重建三维树模型的方法
技术领域
本发明涉及计算机科学技术领域,特别涉及一种基于机载激光雷达树点云重建三维树模型的方法。
背景技术
树是地球上不可或缺的植物,树的三维重建在计算机动画、虚拟现实、林学、农学等领域具有广泛的研究与应用价值。一方面,重建的三维树木模型可提供树木生物量、叶面积指数和产量等表型参数信息,为森林管理与决策提供新手段;另一方面,通过计算机生成的树木模型能直观向非专业人员展现农林业科研工作中的复杂模型,也可为机器人喷药等提供重要的空间信息。然而,由于树木分支结构复杂、种类繁多,如何实现真实世界树木的三维重建一直是计算机图形学、计算机视觉、植物学等交叉学科研究领域中的难点。
激光雷达是基于激光测距原理开发的用于获取目标三维信息的软硬件系统,早期由于其价格昂贵且扫描精度偏低,很少用于获取树木点云。但近年来,随着激光雷达设备价格的不断下降和扫描精度的不断提高,采用激光扫描设备获取植物三维数据成为可能,从而有助于以较高精度实现大规模树木的结构参数提取和景观层面的三维重建。根据采集平台的差异性,激光雷达主要分为地基激光雷达系统和机载激光雷达系统。地基激光雷达系统主要将激光雷达安装在地面固定或移动平台上,通过旋转扫描装置获取目标点云信息;而机载激光雷达系统则将扫描设备安装在无人机或有人驾驶飞机上获取地面目标信息。采用地基激光雷达系统采集的树木点云密度高,枝干信息清晰,但采用机载激光雷达系统获取的点云密度低且枝干辨析度低。针对地基激光雷达系统及相关树木点云的处理与三维重建,在遥感和图形学领域已经开展了较多研究,但面向机载激光雷达系统获取的低密度且枝干辨析度低的树点云分割与重建则较少有研究者涉及,因此本发明拟提出一种基于高度图的交互式层次分割方法提取单棵树点云,然后采用基于双约束的贪婪算法实现树的几何重建,从而解决低密度树点云难以分割与重建这一技术问题。
前期研究采用地面激光雷达获取的高密度树点云[1-3][1]H.Xu,N.Gossett,andB.Chen,“Knowledge and heuristic based modeling of laser-scanned trees,”ACMTransactions on Graphics,vol.26,no.4,pp.1-19,2007.[2]Y.Livny,F.Yan,M.Olson,B.Chen,H.Zhang,and J.El-Sana,“Automatic reconstruction of tree skeletalstructures from point clouds,”ACM Transactions on Graphics,vol.29,no.6,pp.1-8,2010.[3]Y.Livny,S.Pirk,Z.Cheng,F.Yan,O.Deussen,D.Cohen-Or,and B.Chen,“Texture-lobes for tree modelling,”ACM Transactions on Graphics,vol.30,no.4,pp.1-10,2011.重建了真实树的三维几何模型,上述方要求点云中树枝骨架清晰,而机载激光雷达只能采集到树的稀疏点云,难以体现树的分枝结构。
树三维重建方法可分为基于图像的方法[7-14][7]胡少军,耿楠,张志毅,杨沛,何东健,“基于稀疏图像的真实树交互式建模方法,”农业工程学报,vol.30,no.9,pp.168-175,2014.[8]R.Alex,I.Martin,G.Drettakis,“Volumetric reconstruction andinteractive rendering of trees from photographs”,ACM Trans.Graph.,2004,23(3):720-727.[9]L.Quan,P.Tan,G.Zeng,L.Yuan,J.Wang,and SB.Kang,“Image-based plantmodeling”,ACM Trans.Graph.,25(3):599-604,2006.[10]P.Tan,G.Zeng,J.Wang,S.B.Kang,and L.Quan,“Image-based tree modeling,”ACM Transactions on Graphics,vol.26,no.3,pp.1-7,2007.[11]B.Neubert,T.Franken,and O.Deussen,“Approximateimage-based tree-modeling using particle flows,”ACM Transactions on Graphics,vol.26,no.99,2007.[12]
P.Tan,T.Fang,J.Xiao,P.Zhao,and L.Quan,“Single image tree modeling,”ACM Transactions on Graphics,vol.27,no.5,pp.1-7,2008.[13]O.Argudo,A.Chica,andC.Andujar,“Single-picture reconstruction and rendering of trees for plausiblevegetation synthesis,”Computers&Graphics,vol.57,pp.55–67,2016.[14]S.Hu,Z.Zhang,H.Xie,and T.Igarashi,“Data-driven modeling and animation of outdoortrees through interactive approach,”The Visual Computer,vol.33,no.6-8,pp.1017-1027,2017、基于规则或基于过程的方法[15-18][15]K.Xie,F.Yan,A.Sharf,O.Deussen,H.Huang,and B.Chen,“Tree modeling with real tree-parts examples,”IEEE Trans.Vis.Comput.Graph.,vol.22,no.12,pp.2608-2618,Dec,2016.[16]A.Runions,B.Lane,and P.Prusinkiewicz,“Modeling trees with a spacecolonization algorithm,”in Eurographics Workshop on Natural Phenomena,2007,pp.1-9.[17]O.Deussen,and B.Lintermann,“Digital design of nature:computergenerated plants and organics”,New York:Springer-Verlag Press,2005.[18]W.Palubicki,K.Horel,S.Longay,A.Runions,B.Lane,R.Mech,and P.Prusinkiewicz,“Self-organizing tree models for image synthesis”.ACM Transactions onGraphics 28(3),58:1-10,2009.和基于草图的方法[19-22][19]M.Okabe,S.Owada,andT.Igarashi,“Interactive design of botanical trees using freehand sketches andexample-based editing,”Comput.Graph.Forum,vol.24,no.3,pp.487-496,2005.[20]X.Chen,B.Neubert,Y.-Q.Xu,O.Deussen,and S.B.Kang,“Sketch-based tree modelingusing Markov Random Field,”ACM Transactions on Graphics,vol.27,no.5,pp.1-9,2008.[21]J.Wither,F.Boudon,M.-P.Cani,and C.Godin,“Structure from silhouettes:a new paradigm for fast sketch-based design of trees,”Comput.Graph.Forum,vol.28,no.2,pp.1-10,2008.[22]S.Longay,A.Runions,F.Boudon,and P.Prusinkiewicz,“TreeSketch:Interactive procedural modeling of trees on a tablet,”inEUROGRAPHICS Symposium on Sketch-Based Interfaces and Modeling,2012,pp.107-120。随着激光扫描技术的发展,最近基于点云的重建方法[1-6]已成为研究热点。Runions等[16]采用空间殖民算法从给定的树冠体中随机分布的点构建了真实感强的树结构模型。Palubicki等[18]和Longay等[22]扩展了Runions等[16]的方法,提出了更高效的方法生成了三维树模型。由于空间殖民算法中骨架点不是从原始点云中进行选择,难以保留树的分枝细节。Tan等[10]根据图像序列重建树点云并通过复制可见分枝来生成被遮挡部分的分枝。Xu等[1]基于地面激光扫描点云生成了树的分枝结构,首先利用最短路径方法构建子图,通过连接相邻簇质心提取树的骨架结构,最后对点云缺失部分的分枝进行骨架合成。Livny等[2]提出了一种针对多棵树点云的自动全局优化算法,与Xu等[1]的算法相比,重建时间从分钟缩短到秒。最近,Livny等[3]又提出了一种新的基于叶簇的树模型生成方法。植物点云分割算法可采用基于分水岭的分割、基于区域增长的分割、基于最小生成树的分割、基于最小割的分割等方法实现。在树木点云分割方面,Livny等[2]将三维点云投影到地面上,并将高密度点识别为根节点,然后利用Dijkstra最短路径算法生成一棵生成树,最后用零权值去除根边实现了单棵树的分割。然而上述方法和技术存在以下问题:
上述方法均采用地面激光雷达获取的高密度树点云,要求点云中树枝骨架清晰,而机载激光雷达只能采集到树的稀疏点云,不能体现树的分枝结构,因此难以有效实现稀疏点云的分割与重建。
Livny等[2]提出的基于最小生成树的方法不适于树间距小且点云稀疏情况下的单木分割。
空间殖民算法可以实现稀疏点云的重建,但难以保留树的分枝细节。
针对现有技术缺点,本发明提出一种从机载雷达点云中重建出三维树模型的新方法,较准确地从稀疏树点云中提取单棵树点云,从而避免自动分割树点云出现的分割不准确问题;提取单棵树的几何重建,从而实现稀疏树点云的有效重建,且重建后的树模型能够较好地保留原始点云的细节特征。
发明内容
本发明提供一种基于机载激光雷达树点云重建三维树模型的方法,实现稀疏树点云的有效重建,且重建后的树模型能够较好地保留原始点云的细节特征。
本发明提供了一种基于机载激光雷达树点云重建三维树模型的方法,包括以下步骤:
S1、生成高度图
树冠形状表明树干中心位置高、周围高度低且从中心到四周高度呈递减趋势,基于树冠这一特点,将点云的最高位置投影到平面上,颜色用对应高度值表示形成高度图;
S2、根据高度图交互式粗选单棵树区域
根据高度图选择树冠中心,确定树冠的大致区域半径,同时对应三维空间对应联动生成一个圆柱体区域,计算落入圆柱体内的点;
将落入圆柱体内的点根据高度方向分成多个切片,针对切片内的点,获得对应的凸包;
S3、交互式精细调整切片凸包
交互式调整或删除凸包形成的多边形的顶点,并动态判断哪些点落入了新凸包的多边形区域内;
若点均在凸包的多边形内部,则全部选定为当前单棵树切片中的点云,至上而下依次调整所有切片,连接相邻切片形成三维凸包,导出三维凸包内的点云即形成分割后的单棵树点云;
S4、构造连通图
基于单棵树点云构造一个连通图;
S5、建立方向场
方向场几乎对称于树的中心线;树干方向几乎垂直于地面;当从中心线移动到图像的侧面时,方向角减小,分枝逐渐指向水平;高枝的方向角变化较低,枝的方向角变化慢;
S6、生成树骨架
在连通图的基础上,结合方向场生成树骨架,根据树骨架采用广义圆柱体进行绘制,获得三维树模型。
上述步骤S1生成高度图的方法为:
选取一片机载雷达树林点云,点云中任意一点在三维空间表示为Pi=(Pix,Piy,Piz)(i=1,2,…,n),Pmin和Pmax分别表示点云包围盒最小和最大坐标值点,Δs为分辨率,将点云离散化投影的二维高度图像的长宽分别表示为
Figure BDA0002513677770000061
Figure BDA0002513677770000062
Figure BDA0002513677770000063
上述步骤S2获得对应的凸包的方法为:
圆柱体的上下底中心位置分别为(aΔs+Pmax.x,Pmax.y,bΔs+Pmax.z)和(aΔs+Pmin.x,Pmin.y,bΔs+Pmin.z),圆柱的半径为rΔs,然后计算出落入圆柱体内的点并表示为P′i(i=1,2,…,m),P′min和P′max分别表示圆柱体内点云包围盒最小坐标值点和最大坐标值点,设定Δh为高度方向切片分辨率,将落入圆柱体内的点分为
Figure BDA0002513677770000064
个切片,落入第i个切片的点Qi(i=1,2,…,N)对应高度范围为[P′min.y+(i–0.5)Δh,P′min.y+(i+0.5)Δh],针对切片i内的点Qi,采用安德鲁单调链凸包算法求得对应凸包,步骤如下:
a.将给定Qi按x坐标升序排序,x坐标值若相同则按y坐标升序排序;
b.创建凸包上部
将排序后的点按照x坐标从小到大加入凸包S,若新加入点使得S不再是凸多边形,则逆序删除之前加入S的点,直到S重新成为凸多边形为止;
c.创建凸包下部
将排序后的点按照x坐标从大到小加入凸包V,若新加入点使得V不再是凸多边形,则逆序删除之前加入V的点,直到V重新成为凸多边形为止;
合并集合S∪V形成最终Qi对应凸包。
上述步骤S4中,为构造一个具有足够邻域的连通图以适应大多数机载激光雷达点云,利用k-d树数据结构,将固定半径最近邻FRNN算法和KNN算法相结合,生成连通图。
上述步骤S5中方向场的建立方法为:
一个边界盒(pmin,pmax)图像,计算其中点pi方向角的公式如下:
Figure BDA0002513677770000071
其中μ1=(pi.y/(pmax.y-pmin.y)k1,μ2=(|pi.x-Lc|/Lc)k2,Lc是从pmin到中心线的距离,k1和k2是控制方向角变化速率的指数,θu和θl是用户定义的角度,用归一化向量(pi.x-pc.x,||pi-pc||tan(θi),pi.z-pc.z)表示方向场ui,其中pc是三维包围盒中心线上的点,pc.y=pi.y,将二维方向场围绕中心线旋转,生成三维方向场。
上述步骤S6中生成树骨架的方法为:
为生成自然的分枝结构,通过具有双约束的快速贪婪算法来求解,第一约束对应为给定点pi的父段vparent和子段vchild间夹角αj,该角度应该小于阈值αmax以形成平滑分支,第二约束βj用于描述其方向角uj与子段vchild之间的差,引入阈值角度βmax,使树枝方向符合给定的方向场,当满足αj<αmax和βj<βmax时,则将候选点pj选为骨架点,结合方向场{ui}和加权边{eij}从候选骨架点云{pi}生成树骨架。
上述候选骨架点云的生成方法为:引入剪枝角
Figure BDA0002513677770000072
和剪枝阈值
Figure BDA0002513677770000073
来删除可能重叠的树枝,为继续搜索剩余的骨架点,使用一个优先级队列Q存储有效的弯曲角{αj},弯曲角越小,优先级越高,从而避免了因弯曲角急剧变化而产生锯齿形分支的现象,然后,从优先级队列的顶部开始检索新的向量,直到所有有效骨架候选点被访问。
与现有技术相比,本发明的有益效果在于:
本发明能够较准确地从稀疏树点云中提取单棵树点云,从而避免自动分割树点云出现的分割不准确问题;
实现稀疏树点云的有效重建,且重建后的树模型能够较好地保留原始点云的细节特征。
附图说明
图1为本发明实施例提供的基于机载雷达点云树点云生成的点云高度图。
图2为本发明实施例提供的根据高度图交互式选择单棵树点云柱形区域,生成点云切片与凸包。
图3为本发明实施例提供的交互式调整切片凸包确定单棵树点云区域图。
图4(a)为本发明实施例提供的调整好的所有点云切片凸包覆盖的点即为目标点图。
图4(b)为本发明实施例提供的对应切片生成的三维凸包表面图。
图5为本发明实施例提供的rp和k的三种组合生成的图(a)rp=0.8m,k=0;(b)rp=1.2m,k=0;(c)rp=0.8m,k=8。
图6为本发明实施例提供的不同参数设置生成的3D方向场(a)θl=-10°,θu=60°,k1=1.2,k2=0.3;(b)θl=-10°,θu=60°,k1=0.6,k2=1.0。
图7为本发明实施例提供的构造树骨架算法示意图。
图8为本发明实施例提供的基于贪婪算法生成的树骨架及添加粗度后的树几何结构示意图。
图9为本发明实施例提供的不同方法分割结果比较示意图;(a)最小生成树分割;(b)正规割分割;(c)交互式分割。
图10为本发明实施例提供的几何重建结果比较(从左至右分别为原始点云、空间殖民算法重建结果、本文提出算法重建结果)示意图。
图11为本发明实施例提供的(a,d)为原始点云,(b,e)为重建树枝,(c,f)为带白杨树和樱桃树叶的渲染后的树几何模型示意图。
图12为本发明实施例提供的含有14棵树点云的树林重建结果示意图;(上)点云;(下)重建后的树模型。
图13为本发明实施例提供的建模时间与点云数量间的关系示意图。
图14为本发明提供的一种基于机载激光雷达树点云重建三维树模型方法的步骤框图。
具体实施方式
下面结合附图1-14,对本发明的一个具体实施方式进行详细描述,但应当理解本发明的保护范围并不受具体实施方式的限制。
1.基于高度图的交互式树点云层次分割方法
点云分割算法可分为自动分割算法和交互式分割算法,自动分割算法如基于分水岭的分割、基于区域增长的分割、基于最小生成树的分割、基于最小割的分割等方法可高效实现大面积树点云的分割,但机载雷达树点云密度低、枝叶交叉错综复杂导致自动分割精度不高,因此本发明提出一种交互式分割方法,该方法利用高度图和切片技术,通过交互式调整每个切片生成精度较高的单棵树点云。如图14所示,提出的方法主要包括以下3个步骤:
(1)生成高度图。树冠形状表明树干中心位置高、周围高度低且从中心到四周高度呈递减趋势,基于树冠这一特点,可将点云的最高位置投影到平面上,颜色用对应高度值表示形成高度图,从而便于分辨出单棵树点云。如图1所示,选取一片机载雷达树林点云,点云中任意一点在三维空间表示为Pi=(Pix,Piy,Piz)(i=1,2,…,n),Pmin和Pmax分别表示点云包围盒最小和最大坐标值点,Δs为分辨率,将点云离散化投影的二维高度图像的长宽分别表示为
Figure BDA0002513677770000091
Figure BDA0002513677770000092
Figure BDA0002513677770000093
生成高度图算法如下:
Figure BDA0002513677770000094
图1右下角为对应树点云生成的高度图,从图1中可以较清晰看出每棵树的大致中心位置和覆盖区域,从而为下一步进行单棵树的粗选提供了依据。
(2)交互式粗选单棵树区域。在图1生成的高度图上可直观发现单棵树的大致区域,本发明采用鼠标单击高度图区域选择树冠中心(a,b),然后再次鼠标单击确定树冠的大致区域半径r,同时对应三维空间也对应联动生成一个圆柱型区域,对应圆柱的上下底中心位置分别为(aΔs+Pmax.x,Pmax.y,bΔs+Pmax.z)和(aΔs+Pmin.x,Pmin.y,bΔs+Pmin.z),圆柱的半径为rΔs。然后计算出落入圆柱体内的点并表示为P′i(i=1,2,…,m),P′min和P′max分别表示圆柱体内点云包围盒最小和最大坐标值点。设定Δh为高度方向切片分辨率,可将落入圆柱体内的点分为
Figure BDA0002513677770000102
个切片,落入第i个切片的点Qi(i=1,2,…,N)对应高度范围为[P′min.y+(i–0.5)Δh,P′min.y+(i+0.5)Δh]。针对切片i内的点Qi,采用安德鲁单调链凸包算法(Andrew's Monotone Chain Convex Hull Algorithm)求得对应凸包,算法步骤如下:
a.将给定Qi按x坐标升序排序,x坐标值若相同则按y坐标升序排序;
b.创建凸包上部。将排序后的点按照x坐标从小到大加入凸包S,若新加入点使得S不再是凸多边形,则逆序删除之前加入S的点,直到S重新成为凸多边形为止;
c.创建凸包下部。将排序后的点按照x坐标从大到小加入凸包V,若新加入点使得V不再是凸多边形,则逆序删除之前加入V的点,直到V重新成为凸多边形为止。
合并集合S=S∪V形成最终Qi对应凸包,图2右上角形成区域即为切片i中的点形成的凸包,观察可见,粗选的点云分割精度低,出现了不相关的两簇点云被分到同一切片的问题。
(3)交互式精细调整切片凸包。为解决图2切片中明显出现的两簇点云被分到同一棵树的问题,针对凸包,本发明设计了鼠标交互式调整或删除凸包多边形的顶点并动态判断哪些点落入了新的多边形区域。设定多边形顶点为Si(i=1,2,…,N),判断点p是否在多边形内部的算法如下:
Figure BDA0002513677770000101
Figure BDA0002513677770000111
在调整凸包顶点的过程中,动态判断Qi中的所有点是否在新的多边形内,如图3所示,若在多边形内部,则全部选定为当前单棵树切片中的点云,至上而下依次调整所有切片,最终形成的切片如图4(左)所示,连接相邻切片形成的三维凸包如图4(右)所示,最后导出三维凸包内的点云即形成分割后的单棵树点云。
2.基于机载激光雷达点云的树木模型重建
针对机载激光雷达采集到的稀疏点云难以体现树的分枝结构从而导致重建困难等问题,本发明提出一种基于双约束的贪婪算法实现单棵树的几何重建,且重建后的树模型能够较好地保留原始点云的细节特征,具体步骤如下。
(1)构建连通图
为生成真实感强的树骨架,首先基于树点云构造一个连通图,然后从该图中构建一棵生成树(Spanning tree)。设图中顶点P={pi=1,2,…,n},边E={eij}由相邻点pi和pj之间的欧氏距离|pi-pj|计算。构建图的一个关键参数是设置给定点pi的搜索半径rp。Xu等[1]选择rp=0.2m从输入树点云中构建了多个子图。为构造一个具有足够邻域的连通图以适应大多数机载激光雷达点云,本发明利用k-d树数据结构,将固定半径最近邻(FRNN)算法和K最近邻(KNN)算法相结合,生成连通图。然后在连通图的基础上,直接提取一个完整树骨架,而不是考虑子图骨架的连接。图5(a)显示了具有较大搜索半径0.8米的点云的生成的图,由于点云稀疏、采样不均匀,难以形成连通图;当搜索半径增加到1.2m时,连通图仍然无法生成(如图5(b)所示)。本发明采用的策略是对于搜索半径相对较小的连通图,当点pi没有足够的邻接点rp时,利用KNN算法再搜索其k个最近点。因此,即使使用FRNN算法确定给定点的邻接点个数为零,接下来的KNN算法仍然能计算出该点的k个最近邻。图5(c)体现了可以用相对较小的rp(0.8m)和较小的KNN参数k(8)生成的连通图。
(2)建立方向场
从树点云生成的图为实际的树分支结构提供了一个很好的候选集,从而为后续确定自然树骨架提供参考。观察发现,树干通常垂直生长,次级树枝则自然水平生长,这一观察表明,树分枝上某一点的生长方向与它的位置相关。若该位置靠近树干,那么它可能垂直生长,如果它靠近分枝,则可能倾向于水平生长。受Livny等[2]和Neubert等[11]工作的启发,本文假设:(a)方向场几乎对称于树的中心线;(b)树干方向几乎垂直于地面;(c)当从中心线移动到图像的侧面时,方向角θi减小,分枝逐渐指向水平;(d)高枝的方向角变化较低枝的方向角变化慢。上述现象可用向日性、顶端优势和曲地性等综合因素来解释,从而提供了一种根据树冠上点的位置近似确定θi的可能性。考虑有一个边界盒(pmin,pmax)图像,计算点pi方向角的公式如下:
Figure BDA0002513677770000121
其中μ1=(pi.y/(pmax.y-pmin.y)k1,μ2=(|pi.x-Lc|/Lc)k2,Lc是从pmin到中心线的距离,k1和k2是控制方向角变化速率的指数,θu和θl是用户定义的角度。为生成三维方向场,将二维方向场围绕中心线旋转,用归一化向量(pi.x-pc.x,||pi-pc||tan(θi),pi.z-pc.z)表示ui,其中pc是三维包围盒中心线上的点,pc.y=pi.y。图6是调整公式(1)中的参数生成的不同3D方向场,可以发现,大k1和小k2组合比小k1和大k2组合生成的分枝方向更加水平。
(3)骨架生成
创建好方向场后,下一步则结合方向场{ui}和加权边{eij}从候选骨架点云{pi}生成树骨架。为生成自然的分枝结构,本发明提出了一种具有双约束的快速贪婪算法来求解。第一约束对应为给定点pi的父段vparent和子段vchild间夹角αj,如图7(a)所示。该角度应该小于阈值αmax(例如90°)以形成平滑分支。第二约束βj用于描述其方向角uj与子段vchild之间的差,类似地引入阈值角度βmax(例如60°),使树枝方向符合给定的方向场。当满足αj<αmax和βj<βmax时,则将候选点pj选为骨架点。
如图7(b)所示,在某些情况下,选定的骨架点可能彼此非常接近,本发明引入剪枝角
Figure BDA0002513677770000131
和剪枝阈值
Figure BDA0002513677770000132
(如30°)来删除可能重叠的树枝。为继续搜索剩余的骨架点,本文使用一个优先级队列Q存储有效的弯曲角{αj},弯曲角越小,优先级越高,从而避免了因弯曲角急剧变化而产生锯齿形分支的现象。然后,从优先级队列的顶部开始检索新的向量,如图7(c)所示,重复上述过程,直到所有有效骨架候选点被访问。在搜索过程中,所有线段的集合形成一个由数组T表示的树结构。T的每个节点由值(plow、pup、nchild、ptrchild)组成,其中plow和pup分别是分枝段的上下顶点位置;nchild是子段数目;ptrchild是存储子段索引的地址。算法3描述了双约束条件下快速贪婪骨架生成过程:
Figure BDA0002513677770000141
算法3基于优先级队列考虑候选点pj的弯曲角,并及时将所选段添加到未回溯的树集T中,因此具有速度快、效率高的优势。图8(a,b)为采用提出方法生成的树点云骨架,树的粗度信息基于Runions等[16]提出的管道模型(Pipe model)和深度优先搜索算法实现,然后采用广义圆柱体进行绘制,最终表示的几何模型如图8(c,d)所示。
本发明通过:
(1)一种基于高度图的交互式层次树点云分割方法,该方法可较准确地从一片稀疏树点云中提取单棵树;
(2)一种基于双约束的贪婪算法用于实现单棵树点云的几何重建。
(1)建立了一种基于高度图的交互式激光雷达树点云分割方法。
如图9所示,与Livny等[2](图9(a))和Shi等[23](图9(b))分割结果相比,本发明提出的交互式分割方法能够更加准确地分割开出两棵稀疏激光雷达树点云。
(2)构建了一种基于双约束的单棵树点云几何重建贪婪算法。
如图10所示,与Runions等[16]提出的空间殖民算法相比,本发明提出的基于双约束的贪婪算法能够更好地保留点云的枝干细节等信息。
图11(a-f)是采用该算法测试的机载激光雷达点云最终重构的树几何模型,在重构过程中,90%以上的骨架点均被访问,通过比较可以发现,重建的分枝结构与原始数据吻合良好。
针对机载激光雷达只能采集到树的稀疏点云、难以有效实现单棵树点云分割与重建等问题,本发明提出了一种基于高度图的交互式层次分割方法可以较准确地提取单棵树点云,然后采用基于双约束的贪婪算法实现了树的高效几何重建,且重建后的树模型能较好保留树枝细节,从而解决了低密度树点云的分割与重建这一技术难题。本发明的相关成果可应用于计算机动画、虚拟现实、林学、农学等领域。一方面,重建的三维树木模型可提供树木生物量、叶面积指数和产量等表型参数信息,为森林管理与决策提供新手段;另一方面,通过计算机生成的树模型能直观向非专业人员展现农林业中的复杂模型,也可为机器人喷药等提供重要的空间信息。
为验证算法有效性,选择了一片含有14棵树的机载激光雷达树林点云,对应点数从1483到30243个不等,并给每棵树分配了一个唯一的字母,如图12所示,由于建模过程主要包括细化、连通图生成和骨架生成阶段,通过记录每个阶段的计算时间,结果表明,最短重建时间小于1ms,最长重建时间也小于0.9s,因此提出的算法运行效率高,能够满足实时重建的需求。
图13表明,随着有效点云数量的增加,模拟时间增加,且算法时间复杂度从4000点到10000点近似线性O(n),从而验证了算法的高效性。
以上公开的仅为本发明的几个具体实施例,但是,本发明实施例并非局限于此,任何本领域的技术人员能思之的变化都应落入本发明的保护范围。

Claims (7)

1.一种基于机载激光雷达树点云重建三维树模型的方法,其特征在于,包括以下步骤:
S1、将机载激光雷达树点云投影至平面形成高度图;
树冠的形状表明树干的中心位置高、周围高度低且从中心到四周高度呈递减趋势,基于树冠这一特点,将树点云的最高位置投影到平面上,颜色用对应高度值表示形成高度图;
S2、采用切片法交互式分隔获取单棵树点云;
S21、根据高度图交互式粗选单棵树区域;
根据高度图选择树冠的中心,确定树冠的大致区域半径,同时对应三维空间联动生成一个圆柱体区域,计算落入圆柱体内的点;
将落入圆柱体内的点根据高度方向分成多个切片,针对切片内的点,获得对应的切片凸包;
S22、交互式精细调整凸包;
交互式调整或删除凸包形成的多边形的顶点,并动态判断哪些点落入了新凸包的多边形区域内;
若点均在凸包的多边形内部,则全部选定为当前单棵树切片中的点云,至上而下依次调整所有切片,连接相邻切片形成三维凸包,导出三维凸包内的点云即形成分割后的单棵树点云;
S3、基于单棵树点云构造连通图;
S4、基于植物学规律构建树点云的方向场;
方向场几乎对称于树的中心线;树干方向几乎垂直于地面;当从中心线移动到图像的侧面时,方向角减小,分枝逐渐指向水平;高枝的方向角变化较低,枝的方向角变化慢;
S5、基于贪婪算法生成树骨架;
在连通图的基础上,基于贪婪算法结合方向场生成树骨架;
S6、基于管道模型和广义圆柱体重建树的三维几何模型;
根据树骨架采用管道模型和广义圆柱体进行绘制,获得三维树模型。
2.如权利要求1所述的基于机载激光雷达树点云重建三维树模型的方法,其特征在于,所述步骤S1生成高度图的方法为:
选取一片机载雷达树林点云,点云中任意一点在三维空间表示为Pi=(Pix,Piy,Piz)(i=1,2,…,n),Pmin和Pmax分别表示点云包围盒最小和最大坐标值点,Δs为分辨率,将点云离散化投影的二维高度图像的长宽分别表示为
Figure FDA0002513677760000023
Figure FDA0002513677760000022
Figure FDA0002513677760000024
3.如权利要求2所述的基于机载激光雷达树点云重建三维树模型的方法,其特征在于,所述步骤S21获得对应的凸包的方法为:
圆柱体的上下底中心位置分别为(aΔs+Pmax.x,Pmax.y,bΔs+Pmax.z)和(aΔs+Pmin.x,Pmin.y,bΔs+Pmin.z),圆柱的半径为rΔs,然后计算出落入圆柱体内的点并表示为P′i(i=1,2,…,m),P′min和P′max分别表示圆柱体内点云包围盒最小坐标值点和最大坐标值点,设定Δh为高度方向切片分辨率,将落入圆柱体内的点分为
Figure FDA0002513677760000021
个切片,落入第i个切片的点Qi(i=1,2,…,N)对应高度范围为[P′min.y+(i–0.5)Δh,P′min.y+(i+0.5)Δh],针对切片i内的点Qi,采用安德鲁单调链凸包算法求得对应凸包,步骤如下:
a.将给定Qi按x坐标升序排序,x坐标值若相同则按y坐标升序排序;
b.创建凸包上部
将排序后的点按照x坐标从小到大加入凸包S,若新加入点使得S不再是凸多边形,则逆序删除之前加入S的点,直到S重新成为凸多边形为止;
c.创建凸包下部
将排序后的点按照x坐标从大到小加入凸包V,若新加入点使得V不再是凸多边形,则逆序删除之前加入V的点,直到V重新成为凸多边形为止;
合并集合S∪V形成最终Qi对应凸包。
4.如权利要求1所述的基于机载激光雷达树点云重建三维树模型的方法,其特征在于,所述步骤S3中,为构造一个具有足够邻域的连通图以适应大多数机载激光雷达点云,利用k-d树数据结构,将固定半径最近邻FRNN(Fixed-Radius Nearest Neighbors,固定半径最近邻)算法和(K Nearest Neighbors,K最近邻)算法相结合,生成连通图。
5.如权利要求3所述的基于机载激光雷达树点云重建三维树模型的方法,其特征在于,所述步骤S4中方向场的建立方法为:
一个边界盒(pmin,pmax)图像,计算其中点pi方向角的公式如下:
Figure FDA0002513677760000031
其中μ1=(pi.y/(pmax.y-pmin.y)k1,μ2=(|pi.x-Lc|/Lc)k2,Lc是从pmin到中心线的距离,k1和k2是控制方向角变化速率的指数,θu和θl是用户定义的角度,用归一化向量(pi.x-pc.x,||pi-pc||tan(θi),pi.z-pc.z)表示方向场ui,其中pc是三维包围盒中心线上的点,pc.y=pi.y,将二维方向场围绕中心线旋转,生成三维方向场。
6.如权利要求5所述的基于机载激光雷达树点云重建三维树模型的方法,其特征在于,所述步骤S5中生成树骨架的方法为:
为生成自然的分枝结构,通过具有双约束的快速贪婪算法来求解,第一约束对应为给定点pi的父段vparent和子段vchild间夹角αj,该角度应该小于阈值αmax以形成平滑分支,第二约束βj用于描述其方向角uj与子段vchild之间的差,引入阈值角度βmax,使树枝方向符合给定的方向场,当满足αj<αmax和βj<βmax时,则将候选点pj选为骨架点,结合方向场{ui}和加权边{eij}从候选骨架点云{pi}生成树骨架。
7.如权利要求6所述的基于机载激光雷达树点云重建三维树模型的方法,其特征在于,所述候选骨架点云的生成方法为:引入剪枝角
Figure FDA0002513677760000032
和剪枝阈值
Figure FDA0002513677760000033
来删除可能重叠的树枝,为继续搜索剩余的骨架点,使用一个优先级队列Q存储有效的弯曲角{αj},弯曲角越小,优先级越高,从而避免了因弯曲角急剧变化而产生锯齿形分支的现象,然后,从优先级队列的顶部开始检索新的向量,直到所有有效骨架候选点被访问。
CN202010469062.2A 2020-05-28 2020-05-28 一种基于机载激光雷达树点云重建三维树模型的方法 Active CN111612896B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010469062.2A CN111612896B (zh) 2020-05-28 2020-05-28 一种基于机载激光雷达树点云重建三维树模型的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010469062.2A CN111612896B (zh) 2020-05-28 2020-05-28 一种基于机载激光雷达树点云重建三维树模型的方法

Publications (2)

Publication Number Publication Date
CN111612896A CN111612896A (zh) 2020-09-01
CN111612896B true CN111612896B (zh) 2023-02-03

Family

ID=72199952

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010469062.2A Active CN111612896B (zh) 2020-05-28 2020-05-28 一种基于机载激光雷达树点云重建三维树模型的方法

Country Status (1)

Country Link
CN (1) CN111612896B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112305554B (zh) * 2020-11-23 2021-05-28 中国科学院自动化研究所 基于有向几何点和稀疏帧的激光里程计方法、系统、装置
CN113276130B (zh) * 2021-05-28 2022-10-04 山东大学 一种基于点云切片的自由曲面喷涂路径规划方法及系统
CN113590885B (zh) * 2021-06-28 2024-04-16 源卓微电子技术(上海)有限公司 一种矢量图形的栅格化方法
CN113570621A (zh) * 2021-07-19 2021-10-29 广东科诺勘测工程有限公司 一种基于高精度点云与影像的树木信息提取方法及装置
CN114241217B (zh) * 2021-11-25 2023-03-07 电子科技大学 一种基于圆柱特征的树干点云高效提取方法
CN117475151B (zh) * 2023-11-08 2024-04-30 中南林业科技大学 一种结合树顶树干检测与林木模型的机载点云分割方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102682475A (zh) * 2012-05-11 2012-09-19 北京师范大学 一种基于地面激光雷达点云数据自适应构建三维树木骨架的方法
WO2015149302A1 (zh) * 2014-04-02 2015-10-08 中国科学院自动化研究所 基于点云与数据驱动的树木模型重建方法
CN106815847A (zh) * 2017-01-12 2017-06-09 非凡智慧(宁夏)科技有限公司 基于激光雷达点云的树木分割方法及单棵树提取方法
CN108335354A (zh) * 2018-03-01 2018-07-27 东北林业大学 一种基于移动最小二乘法的贪婪投影三角化算法单木重建方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102682475A (zh) * 2012-05-11 2012-09-19 北京师范大学 一种基于地面激光雷达点云数据自适应构建三维树木骨架的方法
WO2015149302A1 (zh) * 2014-04-02 2015-10-08 中国科学院自动化研究所 基于点云与数据驱动的树木模型重建方法
CN106815847A (zh) * 2017-01-12 2017-06-09 非凡智慧(宁夏)科技有限公司 基于激光雷达点云的树木分割方法及单棵树提取方法
CN108335354A (zh) * 2018-03-01 2018-07-27 东北林业大学 一种基于移动最小二乘法的贪婪投影三角化算法单木重建方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于地面激光雷达点云数据的单木三维建模综述;黄洪宇等;《林业科学》;20130415(第04期);全文 *

Also Published As

Publication number Publication date
CN111612896A (zh) 2020-09-01

Similar Documents

Publication Publication Date Title
CN111612896B (zh) 一种基于机载激光雷达树点云重建三维树模型的方法
Wu et al. An accurate skeleton extraction approach from 3D point clouds of maize plants
Wang et al. Lidar point clouds to 3-D urban models $: $ A review
CN101887596B (zh) 树木点云数据基于分割和自动生长的三维模型重建方法
CN106199557B (zh) 一种机载激光雷达数据植被提取方法
CN106815847A (zh) 基于激光雷达点云的树木分割方法及单棵树提取方法
CN110992473B (zh) 一种基于车载激光扫描点云的树木枝干建模方法及系统
CN112819830A (zh) 基于深度学习与机载激光点云的单株树冠分割方法
CN103942838A (zh) 基于点云数据的单树三维建模与形态参数提取的方法
CN109446691B (zh) 基于激光点云与空气动力学的活立木抗风性能分析方法
JP2011512606A (ja) 樹冠植生ポイントのグループに対しシミュレーションによる木の幹と枝とを与えるジオスペースモデリングシステム及び関連方法
Li et al. An automatic tree skeleton extracting method based on point cloud of terrestrial laser scanner
CN105354883A (zh) 基于点云的3ds Max快速精细三维建模方法及系统
CN110322497A (zh) 一种基于三维可视化的交互式点云对象提取方法
CN115205690B (zh) 基于mls点云数据的行道树单体化提取方法及装置
Risse et al. Software to convert terrestrial LiDAR scans of natural environments into photorealistic meshes
Xu et al. A new clustering-based framework to the stem estimation and growth fitting of street trees from mobile laser scanning data
Chen et al. 3D model-based terrestrial laser scanning (TLS) observation network planning for large-scale building facades
CN115018982A (zh) 一种基于地基激光雷达点云的树木数字孪生方法
CN107705344A (zh) 激光扫描环境点云数据中树冠模型提取方法
Huang et al. A 3D individual tree modeling technique based on terrestrial LiDAR point cloud data
CN116543117B (zh) 一种无人机影像的高精度大场景三维建模方法
Cárdenas-Donoso et al. Modeling of the 3D tree skeleton using real-world data: A survey
CN114494586B (zh) 晶格投影的深度学习网络阔叶树枝叶分离与骨架重建方法
Gao et al. Force field driven skeleton extraction method for point cloud trees

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant