CN108010002B - 一种基于自适应隐式移动最小二乘的结构化点云去噪方法 - Google Patents

一种基于自适应隐式移动最小二乘的结构化点云去噪方法 Download PDF

Info

Publication number
CN108010002B
CN108010002B CN201711422135.7A CN201711422135A CN108010002B CN 108010002 B CN108010002 B CN 108010002B CN 201711422135 A CN201711422135 A CN 201711422135A CN 108010002 B CN108010002 B CN 108010002B
Authority
CN
China
Prior art keywords
point
implicit
local
dimensional
neighborhood
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711422135.7A
Other languages
English (en)
Other versions
CN108010002A (zh
Inventor
冯结青
唐逸之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Priority to CN201711422135.7A priority Critical patent/CN108010002B/zh
Publication of CN108010002A publication Critical patent/CN108010002A/zh
Application granted granted Critical
Publication of CN108010002B publication Critical patent/CN108010002B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于自适应隐式移动最小二乘的结构化点云去噪方法,包括以下步骤:步骤1,根据深度值自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小;步骤2,对于每个三维点,根据该点的邻域窗口大小查找邻域点,通过主元分析估算该点的法向;步骤3,依次以每个三维点为中心,利用该点的邻域点及邻域点的法向,定义局部隐函数;步骤4,利用定义的局部隐函数构造隐式局部曲面,沿视线方向优化求解每条视线与局部隐式曲面的交点。本发明能对结构化点云去噪并保证点数据在深度相机模型下的透视变换不变性,具有运算速度快,去噪后点数据分布均匀,对深度不连续和噪声随深度变化等问题鲁棒性高的优点。

Description

一种基于自适应隐式移动最小二乘的结构化点云去噪方法
技术领域
本发明涉及计算机图形中的面向真实物体的3D建模领域,具体涉及一种基于自适应隐式移动最小二乘的结构化点云去噪方法。
背景技术
所谓结构化点云去噪是指消除结构化点云中噪声的过程。结构化点云是目前大多数三维获取设备,如深度相机,采集到的物体的原始三维表面数据。所谓结构化点云是指具有规则二维矩阵结构的一些三维点组成的集合,其中每个三维点与二维图像中的每个像素对应。去噪的目的是使结构化点云表示的曲面光滑,这样有助于提升3D建模的精度。结构化点云去噪研究具有重要意义,因为利用三维获取设备对真实世界的物体建模已经被广泛应用于三维建模的领域中,可以省去大量的手工建模操作并捕获更多模型的细节。无论是小型的物体或是大型的建筑,甚至整个城市都可以利用三维获取设备采集表面的结构化点云数据。这些结构化点云通常都带有噪声,而噪声可能会严重降低配准、表面重建等三维建模操作的精度,因此,结构化点云去噪是对真实物体进行三维建模时的不可缺少的重要步骤。
目前,现存相当数量的各式各样的点云去噪算法,例如著名的移动最小二乘算法等。然而现存的诸多算法通常针对散乱点云,即无拓扑结构的三维点集合。虽然这些算法也可用于结构化点云去噪,但不足之处是没有利用结构化点云的结构信息。这样导致一方面需要建立复杂的空间数据结构,如Kd树,进行邻域查找,另一方面对优化缺乏相应的约束,不能保持点数据在深度相机模型下的透视变换不变性。现有的针对结构化点云的算法通常直接借鉴图像处理中的滤波算法,如高斯滤波等。该类算法一般通过矩阵窗口直接查找邻域,因此算法复杂度相对较低,但是在噪声较大时不容易保持几何特征。另外,噪声在结构化点云中不同深度的位置一般会发生变化,采用统一大小的邻域窗口往往不能保证对全部点数据起到良好的去噪效果。
发明内容
本发明提供一种基于自适应隐式移动最小二乘的结构化点云去噪方法,能够消除结构化点云中噪声并保持点数据在深度相机模型下的透视变换不变性,运算速度快,对深度不连续和噪声随深度变化等问题鲁棒性高。
一种基于自适应隐式移动最小二乘的结构化点云去噪方法,包括以下步骤:
步骤1,根据深度值自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小;
步骤2,对于每个三维点,根据该点的邻域窗口大小查找邻域点,通过主元分析(PCA)估算该点的法向;
步骤3,依次以每个三维点为中心,利用该点的邻域点及邻域点的法向,定义局部隐函数;
步骤4,利用定义的局部隐函数构造隐式局部曲面,沿视线方向优化求解每条视线与局部隐式曲面的交点。
作为优选,步骤1中,自适应确定结构化点云中每个三维点pi在二维矩阵结构中的邻域窗口大小的公式为:
Figure GDA0001566646970000021
其中,hi表示点pi的邻域窗口的半边长;
di是点pi的深度值,即点pi的Z轴坐标值;
α和β是手动输入的参数。
作为优选,步骤2中,通过主元分析(PCA)估算每个三维点pi的法向ni的方法是,首先,按如下公式计算协方差矩阵Ci
Figure GDA0001566646970000031
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点qi的邻域窗口的半边长;
Figure GDA0001566646970000032
表示点集N(pi)的重心坐标,定义为:
Figure GDA0001566646970000033
其中,card(N(pi))表示点集N(pi)中点的数目;
然后,对矩阵Ci进行特征值分解,得到3个特征值和对应的3个特征向量,
其中,最小特征值对应的特征向量即是估算的点pi的法向ni
作为优选,步骤3中,定义局部隐函数的方式是,对于每个三维点pi,根据隐式移动最小二乘方法,定义函数fi(x):R3→R如下:
Figure GDA0001566646970000035
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点pi的邻域窗口的半边长;
n(x):R3→R3是混合的法向量场函数,定义为:
Figure GDA0001566646970000034
其中,nj是步骤2计算得到的点pj的法向;
di是点pi的深度值,即点pi的Z轴坐标值;
Figure GDA0001566646970000041
是双边滤波核函数,ti=γ·hi表示点pi的深度值差异敏感度,γ是手动输入的参数。
作为优选,步骤4中,沿视线方向优化求解每条视线与局部隐式曲面的交点的方法是,首先,从视点(0,0,0)向每个三维点pi发出射线Li(t),简称视线,定义为:
Figure GDA0001566646970000042
其中,t>0是自变量参数;
然后,优化求解视线Li(t)与局部隐式曲面fi(x)=0的交点;
其中,fi(x)是步骤3中定义的局部隐函数;
优化求解视线Li(t)与局部隐式曲面fi(x)=0交点的迭代算法描述如下:初始化
Figure GDA0001566646970000043
对于k=0,1,2,...,∞:
首先,定义局部隐函数
Figure GDA0001566646970000044
Figure GDA0001566646970000045
其中,各变量的定义参考步骤3中的fi(x);
然后,计算视线Li(t)与隐式曲面
Figure GDA0001566646970000046
的交点
Figure GDA0001566646970000047
公式为:
Figure GDA0001566646970000048
其中,各变量的定义参考步骤3中的fi(x)和n(x);
根据k的取值,依次重复上述两个步骤,直至
Figure GDA0001566646970000049
小于给定的阈值;
算法收敛时的
Figure GDA00015666469700000410
即是优化求解的视线Li(t)与局部隐式曲面fi(x)=0的交点。
与现有技术相比,本发明具有以下有益效果:
(1)本发明首先通过主元分析(PCA)计算结构化点云中每个三维点的法向,然后逐个三维点为中心,根据隐式移动最小二乘方法定义局部隐函数,最后优化求解每条视线与局部隐式曲面的交点,达到了消除噪声的目的,能够保证点数据在深度相机模型下的透视变换不变性,能够利用矩阵窗口实现快速的邻域查找并且去噪后的点数据分布均匀。
(2)每个三维点的邻域窗口大小根据深度值自适应确定,克服了噪声随深度变化的问题,保证了全部点数据都能得到良好的去噪效果,并且局部隐函数的定义采用双边滤波核函数进行局部加权,提高了对深度不连续问题的鲁棒性。
附图说明
图1为本发明的基本流程示意图;
图2为本发明的视线方向与局部隐式曲面的二维示意图;
图3为本发明的输入输出效果对比图。
具体实施方式
下面结合说明书附图对本发明的实施方式进行描述。
如图1所示,为本发明的基本流程示意图,实施步骤如下:
步骤1:确定结构化点云中每个三维点pi的在二维矩阵结构中的邻域窗口大小,计算公式为:
Figure GDA0001566646970000051
其中,hi表示点pi的邻域窗口的半边长;
di是点pi的深度值,即点pi的Z轴坐标值;
α和β是手动输入的参数:通过手动调节观察去噪效果确定最佳参数。
步骤2:通过主元分析(PCA)估算每个三维点pi的法向ni,计算方式为,首先,按如下公式计算协方差矩阵Ci
Figure GDA0001566646970000052
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pi| ||qi-qj||≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点qi的邻域窗口的半边长;
Figure GDA0001566646970000061
表示点集N(pi)的重心坐标,定义为:
Figure GDA0001566646970000062
其中,card(N(pi))表示点集N(pi)中点的数目;
然后,对矩阵Ci进行特征值分解,得到3个特征值和对应的3个特征向量,
其中,最小特征值对应的特征向量即是估算的点pi的法向ni
步骤3:对于每个三维点pi,根据隐式移动最小二乘方法,定义局部隐函数fi(x):R3→R如下:
Figure GDA0001566646970000065
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点pi的邻域窗口的半边长;
n(x):R3→R3是混合的法向量场函数,定义为:
Figure GDA0001566646970000063
其中,nj是步骤2计算得到的点pj的法向;
di是点pi的深度值,即点pi的Z轴坐标值;
Figure GDA0001566646970000064
是双边滤波核函数,ri=γ·hi表示点pi的深度值差异敏感度,γ是手动输入的参数。
步骤4:如图2所示,沿视线方向优化求解每条视线与局部隐式曲面的交点,求解方法为,首先,从视点(0,0,0)向每个三维点pi发出射线Li(t),简称视线,定义为:
Figure GDA0001566646970000071
其中,t>0是自变量参数;
然后,优化求解视线Li(t)与局部隐式曲面fi(x)=0的交点;
其中,fi(x)是步骤3中定义的局部隐函数;
优化求解视线Li(t)与局部隐式曲面fi(x)=0交点的迭代算法描述如下:
初始化
Figure GDA0001566646970000072
对于k=0,1,2,...,∞:
首先,定义局部隐函数
Figure GDA0001566646970000073
Figure GDA0001566646970000074
其中,各变量的定义参考步骤3中的fi(x);
然后,计算视线Li(t)与隐式曲面
Figure GDA0001566646970000075
的交点
Figure GDA0001566646970000076
公式为:
Figure GDA0001566646970000077
其中,各变量的定义参考步骤3中的fi(x)和n(x);
根据k的取值,依次重复上述两个步骤,直至
Figure GDA0001566646970000078
小于给定的阈值;
算法收敛时的
Figure GDA0001566646970000079
即是优化求解的视线Li(t)与局部隐式曲面fi(x)=0的交点。
如图3所示,为输入输出效果对比图,可以看出,使用本方法,起到了良好的去噪效果,而且很好的保留了面部几何特征。
以上所述仅为本发明的优选实施方式,本发明的保护范围并不仅限于上述实施方式,凡是属于本发明原理的技术方案均属于本发明的保护范围。对于本领域的技术人员而言,在不脱离本发明的原理的前提下进行的若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (5)

1.一种基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,包括以下步骤:
步骤1,根据深度值自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小;
步骤2,对于每个三维点,根据该点的邻域窗口大小查找邻域点,通过主元分析估算该点的法向;
步骤3,依次以每个三维点为中心,利用该点的邻域点及邻域点的法向,定义局部隐函数;
步骤4,利用定义的局部隐函数构造隐式局部曲面,沿视线方向优化求解每条视线与局部隐式曲面的交点。
2.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤1中,所述的自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小的公式为:
Figure FDA0001566646960000011
其中,hi表示点pi的邻域窗口的半边长;
di是点pi的深度值,即点pi的Z轴坐标值;
α和β是手动输入的参数。
3.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤2中,所述的通过主元分析估算该点的法向的具体方法为:
首先,按如下公式计算协方差矩阵Ci
Figure FDA0001566646960000012
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj|||qi-qj||≤hi}
其中,qi=(ui,υi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点qi的邻域窗口的半边长;
Figure FDA0001566646960000025
表示点集N(pi)的重心坐标,定义为:
Figure FDA0001566646960000021
其中,card(N(pi))表示点集N(pi)中点的数目;
然后,对矩阵Ci进行特征值分解,得到3个特征值和对应的3个特征向量,
其中,最小特征值对应的特征向量即是估算的点pi的法向ni
4.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤3中,所述的定义局部隐函数的方式是,对于每个三维点pi,根据隐式移动最小二乘方法,定义函数fi(x):R3→R如下:
Figure FDA0001566646960000022
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj|||qi-qj||≤hi}
其中,qi=(ui,υi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点pi的邻域窗口的半边长;
n(x):R3→R3是混合的法向量场函数,定义为:
Figure FDA0001566646960000023
其中,nj是步骤2计算得到的点pj的法向;
di是点pi的深度值,即点pi的Z轴坐标值;
Figure FDA0001566646960000024
是双边滤波核函数,ri=γ·hi表示点pi的深度值差异敏感度,γ是手动输入的参数。
5.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤4中的具体过程是,首先,从视点(0,0,0)向每个三维点pi发出射线Li(t),简称视线,定义为:
Figure FDA0001566646960000031
其中,t>0是自变量参数;
然后,优化求解视线Li(t)与局部隐式曲面fi(x)=0的交点;
其中,fi(x)是步骤(3)中定义的局部隐函数;
优化求解视线Li(t)与局部隐式曲面fi(x)=0交点的迭代算法具体如下:初始化
Figure FDA0001566646960000038
对于k=0,1,2,...,∞:
首先,定义局部隐函数fi k(x):R3→R:
Figure FDA0001566646960000032
其中,各变量的定义参考步骤3中的fi(x);
然后,计算视线Li(t)与隐式曲面
Figure FDA0001566646960000033
的交点
Figure FDA0001566646960000034
公式为:
Figure FDA0001566646960000035
其中,各变量的定义参考步骤3中的fi(x)和n(x);
根据k的取值,依次重复上述两个步骤,直至
Figure FDA0001566646960000036
小于给定的阈值;
算法收敛时的
Figure FDA0001566646960000037
即是优化求解的视线Li(t)与局部隐式曲面fi(x)=0的交点。
CN201711422135.7A 2017-12-25 2017-12-25 一种基于自适应隐式移动最小二乘的结构化点云去噪方法 Active CN108010002B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711422135.7A CN108010002B (zh) 2017-12-25 2017-12-25 一种基于自适应隐式移动最小二乘的结构化点云去噪方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711422135.7A CN108010002B (zh) 2017-12-25 2017-12-25 一种基于自适应隐式移动最小二乘的结构化点云去噪方法

Publications (2)

Publication Number Publication Date
CN108010002A CN108010002A (zh) 2018-05-08
CN108010002B true CN108010002B (zh) 2021-06-01

Family

ID=62061044

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711422135.7A Active CN108010002B (zh) 2017-12-25 2017-12-25 一种基于自适应隐式移动最小二乘的结构化点云去噪方法

Country Status (1)

Country Link
CN (1) CN108010002B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108876744B (zh) * 2018-06-27 2020-01-17 大连理工大学 一种基于区域分割的大尺度点云噪声去噪方法
CN111507921B (zh) * 2020-04-20 2022-01-25 南京航空航天大学 一种基于低秩恢复的隧道点云去噪方法
CN113837952A (zh) * 2020-06-24 2021-12-24 影石创新科技股份有限公司 基于法向量的三维点云降噪方法、装置、计算机可读存储介质及电子设备
CN115619983B (zh) * 2022-12-02 2023-04-07 中南大学 一种基于径向基函数的平均曲率可控隐式曲面生成方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103049622A (zh) * 2013-01-16 2013-04-17 杨安康 基于空间编码投影的逆向工程加工系统与方法
CN103530899A (zh) * 2013-10-10 2014-01-22 浙江万里学院 基于几何特征性的点云简化方法
CN104318100A (zh) * 2014-10-22 2015-01-28 北京航空航天大学 一种基于特征敏感投影算子的厚度点云薄化方法
CN105574929A (zh) * 2015-12-15 2016-05-11 电子科技大学 一种基于地面LiDAR点云数据的单株植被三维建模方法
CN106250881A (zh) * 2016-08-25 2016-12-21 深圳大学 一种基于三维点云数据的目标识别方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103049622A (zh) * 2013-01-16 2013-04-17 杨安康 基于空间编码投影的逆向工程加工系统与方法
CN103530899A (zh) * 2013-10-10 2014-01-22 浙江万里学院 基于几何特征性的点云简化方法
CN104318100A (zh) * 2014-10-22 2015-01-28 北京航空航天大学 一种基于特征敏感投影算子的厚度点云薄化方法
CN105574929A (zh) * 2015-12-15 2016-05-11 电子科技大学 一种基于地面LiDAR点云数据的单株植被三维建模方法
CN106250881A (zh) * 2016-08-25 2016-12-21 深圳大学 一种基于三维点云数据的目标识别方法及系统

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
"Defining point-set surfaces";Amenta N et al.;《ACM Trans.Graph》;20041231;第23卷(第3期);全文 *
"POINT CLOUD DENOISING USING ROUBUST PRINCIPAL COMPONENT ANALYSIS";A.Leal Narvaez et al.;《In Proceedings of the First International Conference on Computer Graphics Theroy and Applications》;20061231;全文 *
"Pointshop 3D: an interactive system for point-based surface editing";Zwicker M et al.;《ACM Trans. Graph》;20021231;第21卷(第3期);全文 *
"Robust Feature-Preserving Denoising of 3D Point Clouds";Sk.Mohammadual Haque et al.;《IEEE》;20161219;全文 *
"局部表面拟合的点云模型法向估计及重定向算法";王醒策 等;《计算机辅助设计与图形学学报》;20150430;第27卷(第4期);全文 *
"点云驱动的计算机图形学综述";伍龙华 等;《计算机辅助设计与图形学学报》;20150831;第27卷(第8期);全文 *

Also Published As

Publication number Publication date
CN108010002A (zh) 2018-05-08

Similar Documents

Publication Publication Date Title
CN108010002B (zh) 一种基于自适应隐式移动最小二乘的结构化点云去噪方法
CN109409437B (zh) 一种点云分割方法、装置、计算机可读存储介质及终端
CN106780576B (zh) 一种面向rgbd数据流的相机位姿估计方法
CN107967675B (zh) 一种基于自适应投影移动最小二乘的结构化点云去噪方法
CN110276317B (zh) 一种物体尺寸检测方法、物体尺寸检测装置及移动终端
CN109086724B (zh) 一种加速的人脸检测方法及存储介质
CN113077476B (zh) 一种高度测量方法、终端设备以及计算机存储介质
CN113298870B (zh) 一种物体的姿态跟踪方法、装置、终端设备和存储介质
WO2018133119A1 (zh) 基于深度相机进行室内完整场景三维重建的方法及系统
CN111105452A (zh) 基于双目视觉的高低分辨率融合立体匹配方法
CN105023246B (zh) 一种基于对比度和结构相似度的图像增强方法
CN108447038B (zh) 一种基于非局部全变分算子的网格去噪方法
CN109658357A (zh) 一种面向遥感卫星图像的去噪方法
Zhao et al. 3D object tracking via boundary constrained region-based model
CN106127147B (zh) 一种基于三维数据的人脸深度纹理修复方法
US10867441B2 (en) Method and apparatus for prefetching data items to a cache
CN108876711B (zh) 一种基于图像特征点的草图生成方法、服务器及系统
Reich et al. A Real-Time Edge-Preserving Denoising Filter.
CN108428216B (zh) 基于散布矩阵特征的二阶偏微分方程遥感图像去噪方法
US10861174B2 (en) Selective 3D registration
CN102831616A (zh) 一种视频流体运动矢量计算方法
Xing et al. Robust mesh denoising based on collaborative filters
CN111798506A (zh) 一种图像处理方法、控制方法、终端及计算机可读存储介质
CN112419164B (zh) 一种基于曲率和邻域重构的加权引导点云模型去噪方法
Shi et al. Fast and effective integration of multiple overlapping range images

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant