CN104063894A - 点云三维模型重建方法及系统 - Google Patents

点云三维模型重建方法及系统 Download PDF

Info

Publication number
CN104063894A
CN104063894A CN201410264099.6A CN201410264099A CN104063894A CN 104063894 A CN104063894 A CN 104063894A CN 201410264099 A CN201410264099 A CN 201410264099A CN 104063894 A CN104063894 A CN 104063894A
Authority
CN
China
Prior art keywords
cloud
scanning
confidence
module
degree
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410264099.6A
Other languages
English (en)
Other versions
CN104063894B (zh
Inventor
黄惠
伍世浩
孙威
龙品辛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Institute of Advanced Technology of CAS
Original Assignee
Shenzhen Institute of Advanced Technology of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Institute of Advanced Technology of CAS filed Critical Shenzhen Institute of Advanced Technology of CAS
Priority to CN201410264099.6A priority Critical patent/CN104063894B/zh
Priority to PCT/CN2014/084701 priority patent/WO2015188445A1/zh
Publication of CN104063894A publication Critical patent/CN104063894A/zh
Priority to US15/342,267 priority patent/US10062207B2/en
Application granted granted Critical
Publication of CN104063894B publication Critical patent/CN104063894B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20Finite element generation, e.g. wire-frame surface description, tesselation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/08Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/56Particle system, point based geometry or rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Architecture (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Generation (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及一种点云三维模型重建方法,包括如下步骤:a.扫描获得需要三维模型重建的物体的点云;b.对上述获得的点云进行品质分析;c.对上述品质分析后的点云,计算得到新的扫描视点;d.根据所述新的扫描视点进行扫描,并根据所述新的扫描视点扫描得到的点云对步骤a的点云进行实时更新;e.根据实时更新后得到的点云进行三维模型重建。本发明还涉及一种点云三维模型重建系统。本发明能够对三维模型实现全自动重建,并产生高品质的点云模型,同时本发明实现方案简单,效率高。

Description

点云三维模型重建方法及系统
技术领域
本发明涉及一种点云三维模型重建方法及系统。
背景技术
计算机三维模型在人们当今的生活(如游戏、影视和虚拟现实等)和生产(如3D打印、逆向工程和数字化城市等)活动中,起着重要的基础性作用。传统的手工三维建模已经远远不能满足人们日益增长的需求,发展的瓶颈在于没有一种快速自动建模的手段。尽管三维点云扫描技术已发展二十多年,但是想要扫描一个模型并获得高品质的点云数据,即便是专业用户配备专业设备,仍需花费大量的时间和精力。
现有技术的缺点概括如下:
第一:过分依赖已有点云的重建曲面。现有技术要求必须在已有点云的基础上重建曲面。这种做法效率虽高,但是有两大缺点:一是在物体细节丰富的地方,可能初步扫描的时候就有少量点云覆盖并且能够重建曲面,但还需要更多不同角度的扫描才能够得到足够的点云来恢复原貌,而现有技术假设能重建曲面的部位的点云数据已经足够好,不需要进一步扫描,因而丢失了大量细节和尖锐特征。二是,对于拓扑结构较为复杂的模型(如人体,树木,或工艺摆件),现有的曲面重建方法在不完整的点云上生成的曲面很可能是错误的,然而现有技术假设已生成的曲面都是正确,因而只能处理外形简单的模型。
第二:不分析已有点云的品质。众所周知,受扫描设备的精度,扫描环境的干扰,以及被扫描物体的自身遮挡和材质问题的影响,已扫描到的点云往往有大量的噪声、杂点和空洞。现有自动扫描技术不对这些点云数据固有的缺陷做处理分析,而只是简单地用点云对源模型的覆盖程度作为指引,自动扫描到的点云模型必然会和真实模型有较大的差异。
第三:点云的拼接和更新效率不高。点云的拼接是指把两个(或多个)从不同视点扫描到的点云数据,根据它们的重叠信息,平移或旋转其中一个点云数据,使得该重叠的部位在空间上完全重合,形成一个合理的整体。现有的点云拼接技术绝大部分是基于迭代最近点算法发展而来的。在模型带特征的地方往往扫描不完整,噪声和杂点较多,因此这种方法在没有人工辅助情况下,依然不够可靠。此外,现有技术都是把所有新扫描的点云数据直接加入到总点云模型当中,造成数据体积过大,或者局部区域数据冗余。
发明内容
有鉴于此,有必要提供一种点云三维模型重建方法及系统。
本发明提供一种点云三维模型重建方法,该方法包括如下步骤:a.扫描获得需要三维模型重建的物体的点云;b.对上述获得的点云进行品质分析;c.对上述品质分析后的点云,计算得到新的扫描视点;d.根据所述新的扫描视点进行扫描,并根据所述新的扫描视点扫描得到的点云对步骤a的点云进行实时更新;e.根据实时更新后得到的点云进行三维模型重建。
其中,该方法在步骤d和步骤e之间还包括步骤:判断是否满足终止条件:如果满足终止条件,则进入步骤e;如果不满足终止条件,则返回步骤a。
所述的步骤b包括:对获得的点云进行降噪预处理;根据预处理后的点云构建距离场,并进行所述距离场的等值面采样得到等值面采样点;对上述每一个等值面采样点进行置信度计算。
所述的步骤c包括:根据得到的每一个等值面采样点的置信度,生成扫描视点向量场;根据生成的扫描视点向量场选择下一个扫描视点;根据上述得到的下一个扫描视点形成扫描路径。
所述的步骤d包括:采用带置信度权重的方法进行点云拼接;采用带置信度概率的方法进行点云增添。
所述的终止条件为等值面采样点的全局平均置信度达到稳定状态。
本发明还提供一种点云三维模型重建系统,包括获取模块、分析模块、计算模块、更新模块、判断模块及重建模块,其中:所述获取模块用于扫描获得需要三维模型重建的物体的点云;所述分析模块用于对上述获得的点云进行品质分析;所述计算模块用于对上述品质分析后的点云,计算得到新的扫描视点;所述更新模块用于根据所述新的扫描视点进行扫描,并根据所述新的扫描视点扫描得到的点云对所述获取模块的点云进行实时更新;所述重建模块用于根据根据实时更新后得到的点云进行三维模型重建。
其中,该系统还包括用于判断是否满足终止条件的判断模块:如果满足终止条件,则所述重建模块进行三维模型重建;如果不满足终止条件,则返回所述获取模块继续获取点云。
所述的分析模块具体用于:对获得的点云进行降噪预处理;根据预处理后的点云构建距离场,并进行所述距离场的等值面采样得到等值面采样点;对上述每一个等值面采样点进行置信度计算。
所述的计算模块具体用于:根据得到的每一个等值面采样点的置信度,生成扫描视点向量场;根据生成的扫描视点向量场选择下一个扫描视点;根据上述得到的下一个扫描视点形成扫描路径。
所述的更新模块具体用于:采用带置信度权重的方法进行点云拼接;采用带置信度概率的方法进行点云增添。
所述的终止条件为等值面采样点的全局平均置信度达到稳定状态。
本发明点云三维模型重建方法及系统,能够对三维模型实现全自动扫描及重建,通过试探性曲面重建预测,全面分析已有点云的品质,规划扫描路径,对低置信度的部位进行自动地扫描和拼接,最终得到一个高品质的点云模型,同时本发明实现方案简单,效率高。
附图说明
图1为本发明点云三维模型重建方法的流程图;
图2为本发明点云三维模型重建系统的硬件架构图。
具体实施方式
下面结合附图及具体实施例对本发明作进一步详细的说明。
参阅图1所示,是本发明点云三维模型重建方法较佳实施例的作业流程图。
步骤S401,自动扫描需要三维模型重建的物体,获得所述物体的点云。
步骤S402,对上述获得的点云进行品质分析。具体如下:
第一步,对上述获得的点云进行降噪预处理,以过滤掉所述点云中大量的噪声和杂点,进行点云优化操作。
第二步,根据预处理后的点云构建距离场,并进行所述距离场的等值面采样,得到等值面采样点。具体而言:
本实施例的点云曲面重建算法采用隐式重建,其核心是构建一个基于带正负的距离隐函数的场(以下简称“距离场”)。给定一个点云模型,空间上每一个点x在该场中都有一个对应的值f(x)。若x在所述点云模型外部,则f(x)<0;反之,则f(x)>0;若f(x)=0,则表示该点在所述点云模型表面上。本实施例得到空间中f(x)=0的位置采样点,然后连接构造一个等值曲面。
采用Poisson(泊松)方程求解所述距离场:对任意输入点集,把原问题转换成为解一个Poisson方程,得到一个基于八叉树的基函数集合。如此,对于空间上任意一点x,都可以快速通过基函数混合得到对应的距离隐函数值f(x)。
等值面提取和采样:在所述距离场上采用Marching Cube技术在f(x)=0上构造一个封闭的等值面网格。用置信度评估该等值面网格的品质,从离散实现的角度来说,利用Poisson-disk技术在曲面网格上均匀地采样点(本实施例中采样点数目为5000),然后,为每一个点计算一个置信度(值域范围0-1)。也就是说,置信度低的地方,几何和拓扑结构信息都比较充分,不需要进一步扫描。下文中,我们称等值面采样点为iso-points,也称sk
第三步,对上述每一个等值面采样点进行置信度计算。具体而言:
首先分别用不同方法算出改点处的点云数据的缺失率(基于距离场梯度分析的置信度fg)和属于细节部位的可能性(基于平滑度分析的置信度fs)。然后把这两种置信度相乘混合得到最终的置信度:fk=fg*fs
基于距离场梯度分析的置信度fg:经过实验观察发现,一直未被关注的距离场的梯度值df(x)有重要作用。简单来说,梯度越大的地方,函数值的变化越陡峭,越能说明该区域在足够数据的支撑下里外拓扑分明,则等值曲面的置信度越大。反之亦然。计算距离场梯度的方法也十分简单,因为Poisson方程的解本身就是距离场的梯度值。也就是说,每一个sk都有个fg
基于平滑度分析的置信度fs:通过下述方法计算得到每个sk平滑度分析的置信度。所述平滑度分析的置信度值越大,说明局部点云分布越不规整,则越有可能是需要多扫描的细节区域。其中,nk是sk的法向量,Ωk是sk的K近邻点(也就是附近最近的前K个已扫描点q,本实施例中K的数目一般为100),hk是指最远的第k个点离sk的距离。
f s ( s k , n k ) = &Sigma; j &Element; &Omega; k &theta; ( | | s k - q j | | ) &phi; ( n k , q j - s k )
&theta; ( | | s k - q j | | ) = e - | | s k - q j | | 2 / ( h k / 2 ) 2
&phi; ( n k , q j - s k ) = e - | | n k T ( q j - s k ) | | 2 / ( h k / 4 ) 2 .
步骤S403,对上述品质分析后的点云,计算得到新的扫描视点。具体步骤如下:
得到每一个等值面采样点的置信度后,需要决定最佳的位置和朝向来放置扫描仪,这个位置叫做NBV(Next Best View,下一个最佳视点)。为了有效的设定自动扫描的行径,每一个扫描迭代选择多个NBV,通过所述NBV决策扫描仪下一个需要移动的部位。所述NBV的选择由视点向量场指导,在视点向量场里每个向量的幅度代表了这个点对NBV的贡献度,同时也考虑了向量的方向及时扫描仪的朝向。
第一步,根据上述得到的每一个等值面采样点的置信度,生成扫描视点向量场。
向量场里每个扫描仪都有其最佳的工作距离[d_near,d_far]。不能把扫描仪放的离物体太近或者太远。基于最远的工作距离,选择一个外包围盒B,所述外包围盒B包含了目标物体的所有点,包围盒B内的空间即是NBVs的搜索空间。将包围盒B转换成三维的立体网格。所述NBV得分只在某些格子的中心点计算,所述格子必须没有被目标物体占据。对每一个空的体素vi,从每一个iso-point射出一个光线来测试它的可见性。通过计算NBV得分g(vi),来评价空间中的某一点是否适合作为下个扫描点:
g ( v i ) = max s k { w ( v i , s k ) ( 1 - f ( s k ) ) }
其中,f(sk)为上述iso-point的置信度,且已经被归一化到了[0,1]范围;权重w(vi,sk)通过三个子项的乘积进行计算:基于距离的wd,基于朝向的wo,基于可见性的wv。如下所示:
w(vi,sk)=wd(sk,vi)wo(sk,vi)wv(sk,vi),
w d ( s k , v i ) = e - ( | | ( v i - s k ) | | - d o ) 2 / ( d n / 4 ) 2 ,
w o ( s k , v i ) = e - ( 1 + n k T d ( v i , s k ) ) 2 / ( 1 - cos ( &sigma; ) ) 2 ,
w v ( s k , v i ) = 1 if s k isvisiblefrom v i 0 otherwise .
本实施例中,扫描仪最优工作距离do=(dn+df)/2.d(vi,sk)=(vi-sk)/||vi–sk||代表从sk指向vi的归一化之后的方向。参数σ默认设定为25°。当指向vi点的iso-point sk的置信度比较低的时候,得分函数g(vi)有一个较高的值。如果得到g(vi)的最大值,则将该得分记录在3D向量中。为包围盒B的所有体素计算最好的sk,以得到视场向量域。
第二步,根据生成的扫描视点向量场,利用贪心算法选择下一个扫描视点。
为下一轮的扫描选择扫描点的位置和朝向。首先在VVF(viewingvector field,视点向量场)里选择出局部最大的位置,把其作为下一次扫描位置。所述VVF被分为很多很多体素,在每个体素中选取局部最大的点。然后选择所述局部最大的点的一个子集作为优化扫描仪朝向的基础。在选择子集的时候,避免选择靠得太近的位置,只选择不相邻的网格中的点作为下一次可能的扫描位置。
使用贪心算法计算得到不相邻的局部最大的点。首先每个细分后的体素中有一个最大的值,这些值形成了一个最初的集合V,如果该点的幅值低于给定的阈值,则从集合V中删除该点。当某一个点vi被选中之后,将所述点vi加入集合V*中。然后集合V中的所有与vi相邻的点都会被删除,直至该集合V为空。
所述贪心算法确保每一次选择的位置是不相邻的,并且拥有余下点的最大幅值的位置。因此,集合V*就是要寻找的NBVs,选择出来的位置的方向是置信度比较低的iso-points sk。接下来,需要选择最优描方向使得下一次扫描能够覆盖尽可能多的低置信度的iso-points,同时又尽可能多的覆盖部分高置信度的iso-point以确保配准的准确性。因此没有直接使用d(vi;sk)设定扫描仪的朝向,而是在局部范围内选择一个更优的点sk′
arg max s k &prime; &Element; &gamma; k &eta; ( s k &prime; ) &zeta; ( s k &prime; ) ,
&eta; ( s k &prime; ) = max j &Element; &gamma; k &prime; { w ( v i , s j ) f ( s j ) } ,
&zeta; ( s k &prime; ) = &Sigma; j &Element; &gamma; k &prime; w ( v i , s j ) ( 1 - f ( s j ) ) .
第三步,根据上述得到的下一个扫描视点,形成扫描路径。
本实施例将得到的NBVs按照顺时针的顺序排列,形成特定扫描路径规划。
步骤S404,根据所述新的扫描视点进行扫描,并根据所述新的扫描视点扫描得到的点云对步骤S401的点云进行实时更新。具体步骤如下:
第一步,采用带置信度权重的ICP(Iterative Closest Point)方法进行点云拼接。
当扫描仪被精确地安置在指定的NBV上之后,将新扫描出来的点直接加入到点云中,也就是说这里不需要配准。然而,在实际中,由于移动配准误差的确会发生。为了补偿这些误差,采用带权重的ICP算法,权重根据iso-points的置信度确定,即置信度越高的地方权重越高。
第二步,在上述拼接完成之后,采用带置信度概率的方法进行点云增添。
新扫描的点跟已有扫描点配准好了之后,新扫描点需要加入已有点集。值得注意的是这些点不仅仅包含哪些不确定的区域,也包含确定的区域。如果最终目标是利用泊松表面重建或者其他的方式生成3D模型,可以简单的将这些点加入到已有点中。但是,如果目标是生成能够准确描述物体的表面,那些多余的点会增加冗余和噪声点。因此,本实施例在加入点云的时候,采用了概率形式:
P(pi)=(1-f(sk))ρ
其中:sk是里pi最近的iso-points。根据上式的定义,f(sk)越低,pi被加进来的可能性越大。这就使得新加进来的点云在置信度低的地方,这样能有效的提高扫描的质量,并且保证了高置信度的区域不受影响。参数ρ控制了点被加进去的可能性。
步骤S405,判断是否满足终止条件。所述终止条件为iso-points的全局平均置信度达到稳定状态,在本实施例中,所述稳定状态指两次迭代之间的平均置信的差值小于0.005。若满足终止条件,则终止自动扫描,进入步骤S406;若不满足终止条件,则返回步骤S401,继续扫描。
步骤S406,根据此时得到的点云进行高精度三维模型重建。
参阅图2所示,是本发明点云三维模型重建系统的硬件架构图。该系统包括获取模块、分析模块、计算模块、更新模块、判断模块及重建模块。
所述获取提取模块用于自动扫描需要三维模型重建的物体,获得所述物体的点云。
所述分析模块用于对上述获得的点云进行品质分析。具体如下:
第一步,对上述获得的点云进行降噪预处理,以过滤掉所述点云中大量的噪声和杂点,进行点云优化操作。
第二步,根据预处理后的点云构建距离场,并进行所述距离场的等值面采样,得到等值面采样点。具体而言:
本实施例的点云曲面重建算法采用隐式重建,其核心是构建一个基于带正负的距离隐函数的场(以下简称“距离场”)。给定一个点云模型,空间上每一个点x在该场中都有一个对应的值f(x)。若x在所述点云模型外部,则f(x)<0;反之,则f(x)>0;若f(x)=0,则表示该点在所述点云模型表面上。本实施例得到空间中f(x)=0的位置采样点,然后连接构造一个等值曲面。
采用Poisson(泊松)方程求解所述距离场:对任意输入点集,把原问题转换成为解一个Poisson方程,得到一个基于八叉树的基函数集合。如此,对于空间上任意一点x,都可以快速通过基函数混合得到对应的距离隐函数值f(x)。
等值面提取和采样:在所述距离场上采用Marching Cube技术在f(x)=0上构造一个封闭的等值面网格。用置信度评估该等值面网格的品质,从离散实现的角度来说,利用Poisson-disk技术在曲面网格上均匀地采样点(本实施例中采样点数目为5000),然后,为每一个点计算一个置信度(值域范围0-1)。也就是说,置信度低的地方,几何和拓扑结构信息都比较充分,不需要进一步扫描。下文中,我们称等值面采样点为iso-points,也称sk
第三步,对上述每一个等值面采样点进行置信度计算。具体而言:
首先分别用不同方法算出改点处的点云数据的缺失率(基于距离场梯度分析的置信度fg)和属于细节部位的可能性(基于平滑度分析的置信度fs)。然后把这两种置信度相乘混合得到最终的置信度:fk=fg*fs
基于距离场梯度分析的置信度fg:经过实验观察发现,一直未被关注的距离场的梯度值df(x)有重要作用。简单来说,梯度越大的地方,函数值的变化越陡峭,越能说明该区域在足够数据的支撑下里外拓扑分明,则等值曲面的置信度越大。反之亦然。计算距离场梯度的方法也十分简单,因为Poisson方程的解本身就是距离场的梯度值。也就是说,每一个sk都有个fg
基于平滑度分析的置信度fs:通过下述方法计算得到每个sk平滑度分析的置信度。所述平滑度分析的置信度值越大,说明局部点云分布越不规整,则越有可能是需要多扫描的细节区域。其中,nk是sk的法向量,Ωk是sk的K近邻点(也就是附近最近的前K个已扫描点q,本实施例中K的数目一般为100),hk是指最远的第k个点离sk的距离。
f s ( s k , n k ) = &Sigma; j &Element; &Omega; k &theta; ( | | s k - q j | | ) &phi; ( n k , q j - s k )
&theta; ( | | s k - q j | | ) = e - | | s k - q j | | 2 / ( h k / 2 ) 2
&phi; ( n k , q j - s k ) = e - | | n k T ( q j - s k ) | | 2 / ( h k / 4 ) 2 .
所述计算模块用于对上述品质分析后的点云,计算得到新的扫描视点。具体步骤如下:
得到每一个等值面采样点的置信度后,需要决定最佳的位置和朝向来放置扫描仪,这个位置叫做NBV(Next Best View,下一个最佳视点)。为了有效的设定自动扫描的行径,每一个扫描迭代选择多个NBV,通过所述NBV决策扫描仪下一个需要移动的部位。所述NBV的选择由视点向量场指导,在视点向量场里每个向量的幅度代表了这个点对NBV的贡献度,同时也考虑了向量的方向及时扫描仪的朝向。
第一步,根据上述得到的每一个等值面采样点的置信度,生成扫描视点向量场。
向量场里每个扫描仪都有其最佳的工作距离[d_near,d_far]。不能把扫描仪放的离物体太近或者太远。基于最远的工作距离,选择一个外包围盒B,所述外包围盒B包含了目标物体的所有点,包围盒B内的空间即是NBVs的搜索空间。将包围盒B转换成三维的立体网格。所述NBV得分只在某些格子的中心点计算,所述格子必须没有被目标物体占据。对每一个空的体素vi,从每一个iso-point射出一个光线来测试它的可见性。通过计算NBV得分g(vi),来评价空间中的某一点是否适合作为下个扫描点:
g ( v i ) = max s k { w ( v i , s k ) ( 1 - f ( s k ) ) }
其中,f(sk)为上述iso-point的置信度,且已经被归一化到了[0,1]范围;权重w(vi,sk)通过三个子项的乘积进行计算:基于距离的wd,基于朝向的wo,基于可见性的wv。如下所示:
w(vi,sk)=wd(sk,vi)wo(sk,vi)wv(sk,vi),
w d ( s k , v i ) = e - ( | | ( v i - s k ) | | - d o ) 2 / ( d n / 4 ) 2 ,
w o ( s k , v i ) = e - ( 1 + n k T d ( v i , s k ) ) 2 / ( 1 - cos ( &sigma; ) ) 2 ,
w v ( s k , v i ) = 1 if s k isvisiblefrom v i 0 otherwise .
本实施例中,扫描仪最优工作距离do=(dn+df)/2.d(vi,sk)=(vi-sk)/||vi–sk||代表从sk指向vi的归一化之后的方向。参数σ默认设定为25°。当指向vi点的iso-point sk的置信度比较低的时候,得分函数g(vi)有一个较高的值。如果得到g(vi)的最大值,则将该得分记录在3D向量中。为包围盒B的所有体素计算最好的sk,以得到视场向量域。
第二步,根据生成的扫描视点向量场,利用贪心算法选择下一个扫描视点。
为下一轮的扫描选择扫描点的位置和朝向。首先在VVF(viewingvector field,视点向量场)里选择出局部最大的位置,把其作为下一次扫描位置。所述VVF被分为很多很多体素,在每个体素中选取局部最大的点。然后选择所述局部最大的点的一个子集作为优化扫描仪朝向的基础。在选择子集的时候,避免选择靠得太近的位置,只选择不相邻的网格中的点作为下一次可能的扫描位置。
使用贪心算法计算得到不相邻的局部最大的点。首先每个细分后的体素中有一个最大的值,这些值形成了一个最初的集合V,如果该点的幅值低于给定的阈值,则从集合V中删除该点。当某一个点vi被选中之后,将所述点vi加入集合V*中。然后集合V中的所有与vi相邻的点都会被删除,直至该集合V为空。
所述贪心算法确保每一次选择的位置是不相邻的,并且拥有余下点的最大幅值的位置。因此,集合V*就是要寻找的NBVs,选择出来的位置的方向是置信度比较低的iso-points sk。接下来,需要选择最优描方向使得下一次扫描能够覆盖尽可能多的低置信度的iso-points,同时又尽可能多的覆盖部分高置信度的iso-point以确保配准的准确性。因此没有直接使用d(vi;sk)设定扫描仪的朝向,而是在局部范围内选择一个更优的点sk′
arg max s k &prime; &Element; &gamma; k &eta; ( s k &prime; ) &zeta; ( s k &prime; ) ,
&eta; ( s k &prime; ) = max j &Element; &gamma; k &prime; { w ( v i , s j ) f ( s j ) } ,
&zeta; ( s k &prime; ) = &Sigma; j &Element; &gamma; k &prime; w ( v i , s j ) ( 1 - f ( s j ) ) .
第三步,根据上述得到的下一个扫描视点,形成扫描路径。
本实施例将得到的NBVs按照顺时针的顺序排列,形成特定扫描路径规划。
所述更新模块用于根据所述新的扫描视点进行扫描,并根据所述新的扫描视点扫描得到的点云对步骤S401的点云进行实时更新。具体步骤如下:
第一步,带置信度权重的ICP(Iterative Closest Point)方法进行点云拼接。
当扫描仪被精确地安置在指定的NBV上之后,将新扫描出来的点直接加入到点云中,也就是说这里不需要配准。然而,在实际中,由于移动配准误差的确会发生。为了补偿这些误差,采用带权重的ICP算法,权重根据iso-points的置信度确定,即置信度越高的地方权重越高。
第二步,在上述拼接完成之后,采用带置信度概率的方法进行点云增添。
新扫描的点跟已有扫描点配准好了之后,新扫描点需要加入已有点集。值得注意的是这些点不仅仅包含哪些不确定的区域,也包含确定的区域。如果最终目标是利用泊松表面重建或者其他的方式生成3D模型,可以简单的将这些点加入到已有点中。但是,如果目标是生成能够准确描述物体的表面,那些多余的点会增加冗余和噪声点。因此,本实施例在加入点云的时候,采用了概率形式:
P(pi)=(1-f(sk))ρ
其中:sk是里pi最近的iso-points。根据上式的定义,f(sk)越低,pi被加进来的可能性越大。这就使得新加进来的点云在置信度低的地方,这样能有效的提高扫描的质量,并且保证了高置信度的区域不受影响。参数ρ控制了点被加进去的可能性。
所述判断模块用于判断是否满足终止条件。所述终止条件为iso-points的全局平均置信度达到稳定状态,在本实施例中,所述稳定状态指两次迭代之间的平均置信的差值小于0.005。若满足终止条件,则终止自动扫描;若不满足终止条件,则继续扫描。
所述重建模块用于根据满足终止条件时的点云进行高精度三维模型重建。
虽然本发明参照当前的较佳实施方式进行了描述,但本领域的技术人员应能理解,上述较佳实施方式仅用来说明本发明,并非用来限定本发明的保护范围,任何在本发明的精神和原则范围之内,所做的任何修饰、等效替换、改进等,均应包含在本发明的权利保护范围之内。

Claims (12)

1.一种点云三维模型重建方法,其特征在于,该方法包括如下步骤:
a.扫描获得需要三维模型重建的物体的点云;
b.对上述获得的点云进行品质分析;
c.对上述品质分析后的点云,计算得到新的扫描视点;
d.根据所述新的扫描视点进行扫描,并根据所述新的扫描视点扫描得到的点云对步骤a的点云进行实时更新;
e.根据实时更新后得到的点云进行三维模型重建。
2.如权利要求1所述的方法,其特征在于,该方法在步骤d和步骤e之间还包括步骤:
判断是否满足终止条件:如果满足终止条件,则进入步骤e;如果不满足终止条件,则返回步骤a。
3.如权利要求1所述的方法,其特征在于,所述的步骤b包括:
对获得的点云进行降噪预处理;
根据预处理后的点云构建距离场,并进行所述距离场的等值面采样得到等值面采样点;
对上述每一个等值面采样点进行置信度计算。
4.如权利要求1所述的方法,其特征在于,所述的步骤c包括:
根据得到的每一个等值面采样点的置信度,生成扫描视点向量场;
根据生成的扫描视点向量场选择下一个扫描视点;
根据上述得到的下一个扫描视点形成扫描路径。
5.如权利要求1所述的方法,其特征在于,所述的步骤d包括:
采用带置信度权重的方法进行点云拼接;
采用带置信度概率的方法进行点云增添。
6.如权利要求2所述的方法,其特征在于,所述的终止条件为等值面采样点的全局平均置信度达到稳定状态。
7.一种点云三维模型重建系统,其特征在于,该系统包括获取模块、分析模块、计算模块、更新模块、判断模块及重建模块,其中:
所述获取模块用于扫描获得需要三维模型重建的物体的点云;
所述分析模块用于对上述获得的点云进行品质分析;
所述计算模块用于对上述品质分析后的点云,计算得到新的扫描视点;
所述更新模块用于根据所述新的扫描视点进行扫描,并根据所述新的扫描视点扫描得到的点云对所述获取模块的点云进行实时更新;
所述重建模块用于根据根据实时更新后得到的点云进行三维模型重建。
8.如权利要求7所述的系统,其特征在于,该系统还包括用于判断是否满足终止条件的判断模块:
如果满足终止条件,则所述重建模块进行三维模型重建;
如果不满足终止条件,则返回所述获取模块继续获取点云。
9.如权利要求7所述的系统,其特征在于,所述的分析模块具体用于:
对获得的点云进行降噪预处理;
根据预处理后的点云构建距离场,并进行所述距离场的等值面采样得到等值面采样点;
对上述每一个等值面采样点进行置信度计算。
10.如权利要求7所述的系统,其特征在于,所述的计算模块具体用于:
根据得到的每一个等值面采样点的置信度,生成扫描视点向量场;
根据生成的扫描视点向量场选择下一个扫描视点;
根据上述得到的下一个扫描视点形成扫描路径。
11.如权利要求7所述的系统,其特征在于,所述的更新模块具体用于:
采用带置信度权重的方法进行点云拼接;
采用带置信度概率的方法进行点云增添。
12.如权利要求8所述的系统,其特征在于,所述的终止条件为等值面采样点的全局平均置信度达到稳定状态。
CN201410264099.6A 2014-06-13 2014-06-13 点云三维模型重建方法及系统 Active CN104063894B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201410264099.6A CN104063894B (zh) 2014-06-13 2014-06-13 点云三维模型重建方法及系统
PCT/CN2014/084701 WO2015188445A1 (zh) 2014-06-13 2014-08-19 点云三维模型重建方法及系统
US15/342,267 US10062207B2 (en) 2014-06-13 2016-11-03 Method and system for reconstructing a three-dimensional model of point clouds

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410264099.6A CN104063894B (zh) 2014-06-13 2014-06-13 点云三维模型重建方法及系统

Publications (2)

Publication Number Publication Date
CN104063894A true CN104063894A (zh) 2014-09-24
CN104063894B CN104063894B (zh) 2017-02-22

Family

ID=51551586

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410264099.6A Active CN104063894B (zh) 2014-06-13 2014-06-13 点云三维模型重建方法及系统

Country Status (3)

Country Link
US (1) US10062207B2 (zh)
CN (1) CN104063894B (zh)
WO (1) WO2015188445A1 (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104408762A (zh) * 2014-10-30 2015-03-11 福州大学 利用单目和二维平台获取物体图像信息及三维模型的方法
CN104527078A (zh) * 2015-01-22 2015-04-22 合肥阿巴赛信息科技有限公司 一种三维打印的可打印性获取方法及系统
CN105160344A (zh) * 2015-06-18 2015-12-16 北京大学深圳研究生院 一种三维点云的局部特征提取方法及装置
CN105260989A (zh) * 2015-09-10 2016-01-20 安徽工业大学 基于多图配准复原三维图像的方法
CN107808062A (zh) * 2017-11-21 2018-03-16 北京恒华伟业科技股份有限公司 一种三维电缆模型的生成方法及系统
CN107851178A (zh) * 2015-06-30 2018-03-27 微软技术许可有限责任公司 基于多个表面模型的混合三维场景重构
CN109472861A (zh) * 2018-12-03 2019-03-15 山东大学 交互式树木建模方法、模型生成方法、系统及仿生树木
CN109523581A (zh) * 2017-09-19 2019-03-26 华为技术有限公司 一种三维点云对齐的方法和装置
CN110186467A (zh) * 2018-02-23 2019-08-30 通用汽车环球科技运作有限责任公司 群感测点云地图
CN110992410A (zh) * 2019-11-29 2020-04-10 广东技术师范大学 基于rgb-d数据融合的机器人视觉引导方法和装置
CN111523441A (zh) * 2020-04-21 2020-08-11 南京工程学院 水下机器人复杂水下环境自主探测方法
WO2020168685A1 (zh) * 2019-02-20 2020-08-27 深圳大学 一种三维扫描视点规划方法、装置及计算机可读存储介质
CN111640109A (zh) * 2020-06-05 2020-09-08 贝壳技术有限公司 模型检测方法及系统
CN111798569A (zh) * 2019-04-09 2020-10-20 韩国科学技术研究院 基于基元的三维自动扫描方法及系统
US20210004503A1 (en) * 2016-09-14 2021-01-07 Mixed Dimensions Inc. 3d model validation and optimization system and method thereof
CN112446827A (zh) * 2020-11-23 2021-03-05 北京百度网讯科技有限公司 点云信息的处理方法和装置
CN116228994A (zh) * 2023-05-09 2023-06-06 腾讯科技(深圳)有限公司 三维模型获取方法、装置、设备及存储介质
CN116465827A (zh) * 2023-03-17 2023-07-21 中国科学院自动化研究所 视点路径规划方法、装置、电子设备及存储介质
CN117499547A (zh) * 2023-12-29 2024-02-02 先临三维科技股份有限公司 自动化三维扫描方法、装置、设备及存储介质

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103489218B (zh) * 2013-09-17 2016-06-29 中国科学院深圳先进技术研究院 点云数据质量自动优化方法及系统
US10252460B1 (en) * 2014-09-15 2019-04-09 Lockheed Martin Corporation Method of forming an optical element using an additive manufactured component, and related devices, components, and systems
GB201512304D0 (en) * 2015-07-13 2015-08-19 Whispering Gibbon Ltd Preparing a polygon mesh for printing
WO2017031718A1 (zh) * 2015-08-26 2017-03-02 中国科学院深圳先进技术研究院 弹性物体变形运动的建模方法
JP6730440B2 (ja) 2016-02-25 2020-07-29 ストラタシス リミテッド 3d距離フィールドを用いる3d印刷のためのgpu材料指定
US10600199B2 (en) * 2017-06-27 2020-03-24 Toyota Research Institute, Inc. Extending object detection and identification capability for an object sensor device
US10438408B2 (en) 2017-07-28 2019-10-08 The Boeing Company Resolution adaptive mesh for performing 3-D metrology of an object
US10354444B2 (en) 2017-07-28 2019-07-16 The Boeing Company Resolution adaptive mesh that is generated using an intermediate implicit representation of a point cloud
US10732284B2 (en) 2017-07-28 2020-08-04 The Boeing Company Live metrology of an object during manufacturing or other operations
CN107610223B (zh) * 2017-09-20 2020-09-25 广东电网有限责任公司机巡作业中心 基于LiDAR点云的电力塔三维重建方法
CN107832849B (zh) * 2017-11-01 2021-03-12 广东电网有限责任公司电力科学研究院 一种基于知识库的电力线廊道三维信息提取方法及装置
GB2568687B (en) 2017-11-22 2021-11-17 Sony Interactive Entertainment Inc A system and method of 3D print modelling
CN108492329B (zh) * 2018-03-19 2022-04-12 北京航空航天大学 一种三维重建点云精度和完整度评价方法
CN108776990A (zh) * 2018-04-10 2018-11-09 清华大学 基于三阶球面谐波的动态场景高精度实时三维重建方法及系统
CN108648277B (zh) * 2018-04-25 2021-11-09 南京理工大学 一种激光雷达点云数据的快速重建方法
CN109448135B (zh) * 2018-09-26 2022-12-23 速度时空信息科技股份有限公司 一种基于多源数据的三维模型修补的方法
US10712730B2 (en) 2018-10-04 2020-07-14 The Boeing Company Methods of synchronizing manufacturing of a shimless assembly
CN109636718B (zh) * 2018-10-31 2021-04-20 百度在线网络技术(北京)有限公司 点云拼接质量的检测方法、装置、设备及存储介质
CN109712230B (zh) * 2018-11-27 2023-02-28 先临三维科技股份有限公司 三维模型补充方法、装置、存储介质及处理器
US20220051385A1 (en) * 2018-12-12 2022-02-17 Shenzhen Institutes Of Advanced Technology Chinese Academy Of Sciences Method, device and apparatus for predicting picture-wise jnd threshold, and storage medium
US11665372B2 (en) * 2019-01-07 2023-05-30 Samsung Electronics Co., Ltd. Fast projection method in video-based point cloud compression codecs
US11592820B2 (en) 2019-09-13 2023-02-28 The Boeing Company Obstacle detection and vehicle navigation using resolution-adaptive fusion of point clouds
CN111091613A (zh) * 2019-10-31 2020-05-01 中国化学工程第六建设有限公司 基于无人机航测的三维实景建模方法
CN111062069B (zh) * 2019-11-14 2023-05-26 上海市建筑装饰工程集团有限公司 适用于建筑装饰工程复杂多曲构件的数字化建造辅助施工方法
CN111275747B (zh) * 2019-11-18 2023-05-23 中国商用飞机有限责任公司 一种虚拟装配方法、装置、设备和介质
CN111009029B (zh) * 2019-11-25 2021-05-11 视辰信息科技(上海)有限公司 三维重建的数据处理方法、装置、电子设备与存储介质
CN111053574B (zh) * 2019-12-05 2022-10-04 深圳开立生物医疗科技股份有限公司 一种三维表面重建方法、装置及超声设备和存储介质
CN111241615A (zh) * 2019-12-31 2020-06-05 国网山西省电力公司晋中供电公司 一种高度真实感的变电站多源融合三维建模方法
CN111540001B (zh) * 2020-04-09 2022-08-05 上海交通大学 航空发动机涡轮叶片气膜孔轴线方向检测方法
CN112446951B (zh) * 2020-11-06 2024-03-26 杭州易现先进科技有限公司 三维重建方法、装置、电子设备及计算机存储介质
CN112541264B (zh) * 2020-12-08 2023-07-04 石河子大学 一种基于隐式建模的高效曲面增厚方法
CN113256773B (zh) * 2021-05-10 2022-10-28 青岛小鸟看看科技有限公司 表面网格扫描及显示方法、系统及装置
CN113766082B (zh) * 2021-09-08 2022-05-24 泰兴市建设工程施工图审查服务中心 一种基于施工图审查矢量图纸编译方法及系统
CN114063616B (zh) * 2021-11-11 2024-03-01 深圳市城市公共安全技术研究院有限公司 基于三维激光扫描探测规划林区路径的方法及装置
CN114565689B (zh) * 2022-02-28 2024-02-02 燕山大学 一种面向轴对称类三维模型数据压缩重建方法
CN116246121B (zh) * 2023-05-12 2023-08-11 山东科技大学 一种基于改进最远点采样的点云数据处理方法
CN117078891B (zh) * 2023-10-17 2024-01-09 西安第六镜网络科技有限公司 激光轮廓mesh重建方法、装置、电子设备和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120243774A1 (en) * 2010-07-28 2012-09-27 Shenzhen Institutes Of Advanced Technology Chinese Academy Of Sciences Method for reconstruction of urban scenes
CN102722907A (zh) * 2012-05-22 2012-10-10 清华大学 基于管道工厂点云的几何建模方法
CN103489218A (zh) * 2013-09-17 2014-01-01 中国科学院深圳先进技术研究院 点云数据质量自动优化方法及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120243774A1 (en) * 2010-07-28 2012-09-27 Shenzhen Institutes Of Advanced Technology Chinese Academy Of Sciences Method for reconstruction of urban scenes
CN102722907A (zh) * 2012-05-22 2012-10-10 清华大学 基于管道工厂点云的几何建模方法
CN103489218A (zh) * 2013-09-17 2014-01-01 中国科学院深圳先进技术研究院 点云数据质量自动优化方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
YINGHUI WANG ET AL.: "A New Interpolation Method in Mesh Reconstruction from 3D Point Cloud", 《PROCEEDINGS OF THE 10TH INTERNATIONAL CONFERENCE ON VIRTUAL REALITY CONTINUUM AND ITS APPLICATIONS IN INDUSTRY》 *
涂志强 等: "三维模型重建中点云ICP拼接算法的改进", 《焊接学报》 *

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104408762A (zh) * 2014-10-30 2015-03-11 福州大学 利用单目和二维平台获取物体图像信息及三维模型的方法
CN104527078B (zh) * 2015-01-22 2017-05-24 合肥阿巴赛信息科技有限公司 一种三维打印的可打印性获取方法及系统
CN104527078A (zh) * 2015-01-22 2015-04-22 合肥阿巴赛信息科技有限公司 一种三维打印的可打印性获取方法及系统
CN105160344A (zh) * 2015-06-18 2015-12-16 北京大学深圳研究生院 一种三维点云的局部特征提取方法及装置
CN107851178B (zh) * 2015-06-30 2022-04-01 微软技术许可有限责任公司 基于多个表面模型的混合三维场景重构
CN107851178A (zh) * 2015-06-30 2018-03-27 微软技术许可有限责任公司 基于多个表面模型的混合三维场景重构
CN105260989B (zh) * 2015-09-10 2019-01-29 安徽工业大学 基于多图配准复原三维图像的方法
CN105260989A (zh) * 2015-09-10 2016-01-20 安徽工业大学 基于多图配准复原三维图像的方法
US11829686B2 (en) * 2016-09-14 2023-11-28 Integral Reality Labs, Inc. 3D model validation and optimization system and method thereof
US20210004503A1 (en) * 2016-09-14 2021-01-07 Mixed Dimensions Inc. 3d model validation and optimization system and method thereof
CN109523581A (zh) * 2017-09-19 2019-03-26 华为技术有限公司 一种三维点云对齐的方法和装置
CN107808062A (zh) * 2017-11-21 2018-03-16 北京恒华伟业科技股份有限公司 一种三维电缆模型的生成方法及系统
CN110186467A (zh) * 2018-02-23 2019-08-30 通用汽车环球科技运作有限责任公司 群感测点云地图
CN109472861A (zh) * 2018-12-03 2019-03-15 山东大学 交互式树木建模方法、模型生成方法、系统及仿生树木
WO2020168685A1 (zh) * 2019-02-20 2020-08-27 深圳大学 一种三维扫描视点规划方法、装置及计算机可读存储介质
CN111798569A (zh) * 2019-04-09 2020-10-20 韩国科学技术研究院 基于基元的三维自动扫描方法及系统
CN110992410A (zh) * 2019-11-29 2020-04-10 广东技术师范大学 基于rgb-d数据融合的机器人视觉引导方法和装置
CN111523441A (zh) * 2020-04-21 2020-08-11 南京工程学院 水下机器人复杂水下环境自主探测方法
CN111523441B (zh) * 2020-04-21 2023-09-26 南京工程学院 水下机器人复杂水下环境自主探测方法
CN111640109A (zh) * 2020-06-05 2020-09-08 贝壳技术有限公司 模型检测方法及系统
CN112446827A (zh) * 2020-11-23 2021-03-05 北京百度网讯科技有限公司 点云信息的处理方法和装置
CN112446827B (zh) * 2020-11-23 2023-06-23 北京百度网讯科技有限公司 点云信息的处理方法和装置
CN116465827A (zh) * 2023-03-17 2023-07-21 中国科学院自动化研究所 视点路径规划方法、装置、电子设备及存储介质
CN116465827B (zh) * 2023-03-17 2023-10-31 中国科学院自动化研究所 视点路径规划方法、装置、电子设备及存储介质
CN116228994A (zh) * 2023-05-09 2023-06-06 腾讯科技(深圳)有限公司 三维模型获取方法、装置、设备及存储介质
CN117499547A (zh) * 2023-12-29 2024-02-02 先临三维科技股份有限公司 自动化三维扫描方法、装置、设备及存储介质

Also Published As

Publication number Publication date
WO2015188445A1 (zh) 2015-12-17
US10062207B2 (en) 2018-08-28
CN104063894B (zh) 2017-02-22
US20170053438A1 (en) 2017-02-23

Similar Documents

Publication Publication Date Title
CN104063894A (zh) 点云三维模型重建方法及系统
CN107025685B (zh) 拓扑感知下的机载建筑屋顶点云建模方法
Chen et al. Topologically aware building rooftop reconstruction from airborne laser scanning point clouds
CN107862738B (zh) 一种基于移动激光测量点云进行室内结构化三维重建方法
US10297074B2 (en) Three-dimensional modeling from optical capture
US20190026400A1 (en) Three-dimensional modeling from point cloud data migration
Oleynikova et al. Sparse 3d topological graphs for micro-aerial vehicle planning
CN106127857B (zh) 综合数据驱动与模型驱动的机载LiDAR数据建模方法
CN106023312B (zh) 基于航空LiDAR数据的三维建筑物模型自动重建方法
CN109635748B (zh) 高分辨率影像中道路特征的提取方法
CN112418245B (zh) 基于城市环境物理模型的电磁发射点定位方法
CN108171780A (zh) 一种基于激光雷达构建室内真实三维地图的方法
CN104599314A (zh) 三维模型重建方法与系统
CN110136246A (zh) 基于类主干点的三维树木几何模型重建方法
Lee et al. Perceptual organization of 3D surface points
CN107590825A (zh) 一种基于sfm的点云孔洞修补方法
CN102136155A (zh) 基于三维激光扫描数据的物体立面矢量化方法和系统
CN112528508A (zh) 电磁可视化方法和装置
CN114186112B (zh) 一种基于贝叶斯优化多重信息增益探索策略的机器人导航方法
CN109636077B (zh) 基于双重局部位姿变换的变节点装配路径规划方法
Sreevalsan-Nair et al. Contour extraction in buildings in airborne lidar point clouds using multiscale local geometric descriptors and visual analytics
CN113763529B (zh) 一种基于三维扫描的变电站建模方法
CN104090945A (zh) 一种地理空间实体构建方法及系统
CN113141570A (zh) 地下场景定位方法、装置、计算设备及计算机存储介质
CN106097336A (zh) 基于置信传播和自相似差异测度的前后景立体匹配方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant