CN108010002A - 一种基于自适应隐式移动最小二乘的结构化点云去噪方法 - Google Patents

一种基于自适应隐式移动最小二乘的结构化点云去噪方法 Download PDF

Info

Publication number
CN108010002A
CN108010002A CN201711422135.7A CN201711422135A CN108010002A CN 108010002 A CN108010002 A CN 108010002A CN 201711422135 A CN201711422135 A CN 201711422135A CN 108010002 A CN108010002 A CN 108010002A
Authority
CN
China
Prior art keywords
point
implicit
neighborhood
dimensional
local
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711422135.7A
Other languages
English (en)
Other versions
CN108010002B (zh
Inventor
冯结青
唐逸之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Priority to CN201711422135.7A priority Critical patent/CN108010002B/zh
Publication of CN108010002A publication Critical patent/CN108010002A/zh
Application granted granted Critical
Publication of CN108010002B publication Critical patent/CN108010002B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于自适应隐式移动最小二乘的结构化点云去噪方法,包括以下步骤:步骤1,根据深度值自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小;步骤2,对于每个三维点,根据该点的邻域窗口大小查找邻域点,通过主元分析估算该点的法向;步骤3,依次以每个三维点为中心,利用该点的邻域点及邻域点的法向,定义局部隐函数;步骤4,利用定义的局部隐函数构造隐式局部曲面,沿视线方向优化求解每条视线与局部隐式曲面的交点。本发明能对结构化点云去噪并保证点数据在深度相机模型下的透视变换不变性,具有运算速度快,去噪后点数据分布均匀,对深度不连续和噪声随深度变化等问题鲁棒性高的优点。

Description

一种基于自适应隐式移动最小二乘的结构化点云去噪方法
技术领域
本发明涉及计算机图形中的面向真实物体的3D建模领域,具体涉及一种基于自适应隐式移动最小二乘的结构化点云去噪方法。
背景技术
所谓结构化点云去噪是指消除结构化点云中噪声的过程。结构化点云是目前大多数三维获取设备,如深度相机,采集到的物体的原始三维表面数据。所谓结构化点云是指具有规则二维矩阵结构的一些三维点组成的集合,其中每个三维点与二维图像中的每个像素对应。去噪的目的是使结构化点云表示的曲面光滑,这样有助于提升3D建模的精度。结构化点云去噪研究具有重要意义,因为利用三维获取设备对真实世界的物体建模已经被广泛应用于三维建模的领域中,可以省去大量的手工建模操作并捕获更多模型的细节。无论是小型的物体或是大型的建筑,甚至整个城市都可以利用三维获取设备采集表面的结构化点云数据。这些结构化点云通常都带有噪声,而噪声可能会严重降低配准、表面重建等三维建模操作的精度,因此,结构化点云去噪是对真实物体进行三维建模时的不可缺少的重要步骤。
目前,现存相当数量的各式各样的点云去噪算法,例如著名的移动最小二乘算法等。然而现存的诸多算法通常针对散乱点云,即无拓扑结构的三维点集合。虽然这些算法也可用于结构化点云去噪,但不足之处是没有利用结构化点云的结构信息。这样导致一方面需要建立复杂的空间数据结构,如Kd树,进行邻域查找,另一方面对优化缺乏相应的约束,不能保持点数据在深度相机模型下的透视变换不变性。现有的针对结构化点云的算法通常直接借鉴图像处理中的滤波算法,如高斯滤波等。该类算法一般通过矩阵窗口直接查找邻域,因此算法复杂度相对较低,但是在噪声较大时不容易保持几何特征。另外,噪声在结构化点云中不同深度的位置一般会发生变化,采用统一大小的邻域窗口往往不能保证对全部点数据起到良好的去噪效果。
发明内容
本发明提供一种基于自适应隐式移动最小二乘的结构化点云去噪方法,能够消除结构化点云中噪声并保持点数据在深度相机模型下的透视变换不变性,运算速度快,对深度不连续和噪声随深度变化等问题鲁棒性高。
一种基于自适应隐式移动最小二乘的结构化点云去噪方法,包括以下步骤:
步骤1,根据深度值自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小;
步骤2,对于每个三维点,根据该点的邻域窗口大小查找邻域点,通过主元分析(PCA)估算该点的法向;
步骤3,依次以每个三维点为中心,利用该点的邻域点及邻域点的法向,定义局部隐函数;
步骤4,利用定义的局部隐函数构造隐式局部曲面,沿视线方向优化求解每条视线与局部隐式曲面的交点。
作为优选,步骤1中,自适应确定结构化点云中每个三维点pi在二维矩阵结构中的邻域窗口大小的公式为:
其中,hi表示点pi的邻域窗口的半边长;
di是点pi的深度值,即点pi的Z轴坐标值;
α和β是手动输入的参数。
作为优选,步骤2中,通过主元分析(PCA)估算每个三维点pi的法向ni的方法是,首先,按如下公式计算协方差矩阵Ci
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点qi的邻域窗口的半边长;
表示点集N(pi)的重心坐标,定义为:
其中,card(N(pi))表示点集N(pi)中点的数目;
然后,对矩阵Ci进行特征值分解,得到3个特征值和对应的3个特征向量,
其中,最小特征值对应的特征向量即是估算的点pi的法向ni
作为优选,步骤3中,定义局部隐函数的方式是,对于每个三维点pi,根据隐式移动最小二乘方法,定义函数fi(x):R3→R如下:
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点pi的邻域窗口的半边长;
n(x):R3→R3是混合的法向量场函数,定义为:
其中,nj是步骤2计算得到的点pj的法向;
di是点pi的深度值,即点pi的Z轴坐标值;
是双边滤波核函数,ri=γ·hi表示点pi的深度值差异敏感度,γ是手动输入的参数。
作为优选,步骤4中,沿视线方向优化求解每条视线与局部隐式曲面的交点的方法是,首先,从视点(0,0,0)向每个三维点pi发出射线Li(t),简称视线,定义为:
其中,t>0是自变量参数;
然后,优化求解视线Li(t)与局部隐式曲面fi(x)=0的交点;
其中,fi(x)是步骤3中定义的局部隐函数;
优化求解视线Li(t)与局部隐式曲面fi(x)=0交点的迭代算法描述如下:初始化对于k=0,1,2,...,∞:
首先,定义局部隐函数
其中,各变量的定义参考步骤3中的fi(x);
然后,计算视线Li(t)与隐式曲面的交点公式为:
其中,各变量的定义参考步骤3中的fi(x)和n(x);
根据k的取值,依次重复上述两个步骤,直至小于给定的阈值;
算法收敛时的即是优化求解的视线Li(t)与局部隐式曲面fi(x)=0的交点。
与现有技术相比,本发明具有以下有益效果:
(1)本发明首先通过主元分析(PCA)计算结构化点云中每个三维点的法向,然后逐个三维点为中心,根据隐式移动最小二乘方法定义局部隐函数,最后优化求解每条视线与局部隐式曲面的交点,达到了消除噪声的目的,能够保证点数据在深度相机模型下的透视变换不变性,能够利用矩阵窗口实现快速的邻域查找并且去噪后的点数据分布均匀。
(2)每个三维点的邻域窗口大小根据深度值自适应确定,克服了噪声随深度变化的问题,保证了全部点数据都能得到良好的去噪效果,并且局部隐函数的定义采用双边滤波核函数进行局部加权,提高了对深度不连续问题的鲁棒性。
附图说明
图1为本发明的基本流程示意图;
图2为本发明的视线方向与局部隐式曲面的二维示意图;
图3为本发明的输入输出效果对比图。
具体实施方式
下面结合说明书附图对本发明的实施方式进行描述。
如图1所示,为本发明的基本流程示意图,实施步骤如下:
步骤1:确定结构化点云中每个三维点pi的在二维矩阵结构中的邻域窗口大小,计算公式为:
其中,hi表示点pi的邻域窗口的半边长;
di是点pi的深度值,即点pi的Z轴坐标值;
α和β是手动输入的参数:通过手动调节观察去噪效果确定最佳参数。
步骤2:通过主元分析(PCA)估算每个三维点pi的法向ni,计算方式为,首先,按如下公式计算协方差矩阵Ci
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点qi的邻域窗口的半边长;
表示点集N(pi)的重心坐标,定义为:
其中,card(N(pi))表示点集N(pi)中点的数目;
然后,对矩阵Ci进行特征值分解,得到3个特征值和对应的3个特征向量,
其中,最小特征值对应的特征向量即是估算的点pi的法向ni
步骤3:对于每个三维点pi,根据隐式移动最小二乘方法,定义局部隐函数fi(x):R3→R如下:
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点pi的邻域窗口的半边长;
n(x):R3→R3是混合的法向量场函数,定义为:
其中,nj是步骤2计算得到的点pj的法向;
di是点pi的深度值,即点pi的Z轴坐标值;
是双边滤波核函数,ri=γ·hi表示点pi的深度值差异敏感度,γ是手动输入的参数。
步骤4:如图2所示,沿视线方向优化求解每条视线与局部隐式曲面的交点,求解方法为,首先,从视点(0,0,0)向每个三维点pi发出射线Li(t),简称视线,定义为:
其中,t>0是自变量参数;
然后,优化求解视线Li(t)与局部隐式曲面fi(x)=0的交点;
其中,fi(x)是步骤3中定义的局部隐函数;
优化求解视线Li(t)与局部隐式曲面fi(x)=0交点的迭代算法描述如下:
初始化对于k=0,1,2,...,∞:
首先,定义局部隐函数
其中,各变量的定义参考步骤3中的fi(x);
然后,计算视线Li(t)与隐式曲面的交点公式为:
其中,各变量的定义参考步骤3中的fi(x)和n(x);
根据k的取值,依次重复上述两个步骤,直至小于给定的阈值;
算法收敛时的即是优化求解的视线Li(t)与局部隐式曲面fi(x)=0的交点。
如图3所示,为输入输出效果对比图,可以看出,使用本方法,起到了良好的去噪效果,而且很好的保留了面部几何特征。
以上所述仅为本发明的优选实施方式,本发明的保护范围并不仅限于上述实施方式,凡是属于本发明原理的技术方案均属于本发明的保护范围。对于本领域的技术人员而言,在不脱离本发明的原理的前提下进行的若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (5)

1.一种基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,包括以下步骤:
步骤1,根据深度值自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小;
步骤2,对于每个三维点,根据该点的邻域窗口大小查找邻域点,通过主元分析估算该点的法向;
步骤3,依次以每个三维点为中心,利用该点的邻域点及邻域点的法向,定义局部隐函数;
步骤4,利用定义的局部隐函数构造隐式局部曲面,沿视线方向优化求解每条视线与局部隐式曲面的交点。
2.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤1中,所述的自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小的公式为:
其中,hi表示点pi的邻域窗口的半边长;
di是点pi的深度值,即点pi的Z轴坐标值;
α和β是手动输入的参数。
3.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤2中,所述的通过主元分析估算该点的法向的具体方法为:
首先,按如下公式计算协方差矩阵Ci
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj|||qi-qj||≤hi}
其中,qi=(ui,υi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点qi的邻域窗口的半边长;
表示点集N(pi)的重心坐标,定义为:
其中,card(N(pi))表示点集N(pi)中点的数目;
然后,对矩阵Ci进行特征值分解,得到3个特征值和对应的3个特征向量,
其中,最小特征值对应的特征向量即是估算的点pi的法向ni
4.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤3中,所述的定义局部隐函数的方式是,对于每个三维点pi,根据隐式移动最小二乘方法,定义函数fi(x):R3→R如下:
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj|||qi-qj||≤hi}
其中,qi=(ui,υi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点pi的邻域窗口的半边长;
n(x):R3→R3是混合的法向量场函数,定义为:
其中,nj是步骤2计算得到的点pj的法向;
di是点pi的深度值,即点pi的Z轴坐标值;
是双边滤波核函数,ri=γ·hi表示点pi的深度值差异敏感度,γ是手动输入的参数。
5.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤4中的具体过程是,首先,从视点(0,0,0)向每个三维点pi发出射线Li(t),简称视线,定义为:
其中,t>0是自变量参数;
然后,优化求解视线Li(t)与局部隐式曲面fi(x)=0的交点;
其中,fi(x)是步骤(3)中定义的局部隐函数;
优化求解视线Li(t)与局部隐式曲面fi(x)=0交点的迭代算法具体如下:初始化对于k=0,1,2,...,∞:
首先,定义局部隐函数fi k(x):R3→R:
其中,各变量的定义参考步骤3中的fi(x);
然后,计算视线Li(t)与隐式曲面的交点公式为:
其中,各变量的定义参考步骤3中的fi(x)和n(x);
根据k的取值,依次重复上述两个步骤,直至小于给定的阈值;
算法收敛时的即是优化求解的视线Li(t)与局部隐式曲面fi(x)=0的交点。
CN201711422135.7A 2017-12-25 2017-12-25 一种基于自适应隐式移动最小二乘的结构化点云去噪方法 Active CN108010002B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711422135.7A CN108010002B (zh) 2017-12-25 2017-12-25 一种基于自适应隐式移动最小二乘的结构化点云去噪方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711422135.7A CN108010002B (zh) 2017-12-25 2017-12-25 一种基于自适应隐式移动最小二乘的结构化点云去噪方法

Publications (2)

Publication Number Publication Date
CN108010002A true CN108010002A (zh) 2018-05-08
CN108010002B CN108010002B (zh) 2021-06-01

Family

ID=62061044

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711422135.7A Active CN108010002B (zh) 2017-12-25 2017-12-25 一种基于自适应隐式移动最小二乘的结构化点云去噪方法

Country Status (1)

Country Link
CN (1) CN108010002B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108876744A (zh) * 2018-06-27 2018-11-23 大连理工大学 一种基于区域分割的大尺度点云噪声去噪方法
CN111507921A (zh) * 2020-04-20 2020-08-07 南京航空航天大学 一种基于低秩恢复的隧道点云去噪方法
CN113837952A (zh) * 2020-06-24 2021-12-24 影石创新科技股份有限公司 基于法向量的三维点云降噪方法、装置、计算机可读存储介质及电子设备
CN115619983A (zh) * 2022-12-02 2023-01-17 中南大学 一种基于径向基函数的平均曲率可控隐式曲面生成方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103049622A (zh) * 2013-01-16 2013-04-17 杨安康 基于空间编码投影的逆向工程加工系统与方法
CN103530899A (zh) * 2013-10-10 2014-01-22 浙江万里学院 基于几何特征性的点云简化方法
CN104318100A (zh) * 2014-10-22 2015-01-28 北京航空航天大学 一种基于特征敏感投影算子的厚度点云薄化方法
CN105574929A (zh) * 2015-12-15 2016-05-11 电子科技大学 一种基于地面LiDAR点云数据的单株植被三维建模方法
CN106250881A (zh) * 2016-08-25 2016-12-21 深圳大学 一种基于三维点云数据的目标识别方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103049622A (zh) * 2013-01-16 2013-04-17 杨安康 基于空间编码投影的逆向工程加工系统与方法
CN103530899A (zh) * 2013-10-10 2014-01-22 浙江万里学院 基于几何特征性的点云简化方法
CN104318100A (zh) * 2014-10-22 2015-01-28 北京航空航天大学 一种基于特征敏感投影算子的厚度点云薄化方法
CN105574929A (zh) * 2015-12-15 2016-05-11 电子科技大学 一种基于地面LiDAR点云数据的单株植被三维建模方法
CN106250881A (zh) * 2016-08-25 2016-12-21 深圳大学 一种基于三维点云数据的目标识别方法及系统

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
A.LEAL NARVAEZ ET AL.: ""POINT CLOUD DENOISING USING ROUBUST PRINCIPAL COMPONENT ANALYSIS"", 《IN PROCEEDINGS OF THE FIRST INTERNATIONAL CONFERENCE ON COMPUTER GRAPHICS THEROY AND APPLICATIONS》 *
AMENTA N ET AL.: ""Defining point-set surfaces"", 《ACM TRANS.GRAPH》 *
SK.MOHAMMADUAL HAQUE ET AL.: ""Robust Feature-Preserving Denoising of 3D Point Clouds"", 《IEEE》 *
ZWICKER M ET AL.: ""Pointshop 3D: an interactive system for point-based surface editing"", 《ACM TRANS. GRAPH》 *
伍龙华 等: ""点云驱动的计算机图形学综述"", 《计算机辅助设计与图形学学报》 *
王醒策 等: ""局部表面拟合的点云模型法向估计及重定向算法"", 《计算机辅助设计与图形学学报》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108876744A (zh) * 2018-06-27 2018-11-23 大连理工大学 一种基于区域分割的大尺度点云噪声去噪方法
CN111507921A (zh) * 2020-04-20 2020-08-07 南京航空航天大学 一种基于低秩恢复的隧道点云去噪方法
CN113837952A (zh) * 2020-06-24 2021-12-24 影石创新科技股份有限公司 基于法向量的三维点云降噪方法、装置、计算机可读存储介质及电子设备
CN115619983A (zh) * 2022-12-02 2023-01-17 中南大学 一种基于径向基函数的平均曲率可控隐式曲面生成方法
CN115619983B (zh) * 2022-12-02 2023-04-07 中南大学 一种基于径向基函数的平均曲率可控隐式曲面生成方法

Also Published As

Publication number Publication date
CN108010002B (zh) 2021-06-01

Similar Documents

Publication Publication Date Title
CN106780576B (zh) 一种面向rgbd数据流的相机位姿估计方法
CN104834922B (zh) 基于混合神经网络的手势识别方法
CN100559398C (zh) 自动的深度图像配准方法
CN102592136B (zh) 基于几何图像中中频信息的三维人脸识别方法
CN110837768B (zh) 一种面向珍稀动物保护的在线检测与识别方法
CN107358629B (zh) 一种基于目标识别的室内建图与定位方法
CN108876799B (zh) 一种基于双目相机的实时台阶检测方法
CN108010002A (zh) 一种基于自适应隐式移动最小二乘的结构化点云去噪方法
CN107705322A (zh) 运动目标识别跟踪方法和系统
CN101339669A (zh) 基于正侧面影像的三维人脸建模方法
CN107967675B (zh) 一种基于自适应投影移动最小二乘的结构化点云去噪方法
CN108416801B (zh) 一种面向立体视觉三维重建的Har-SURF-RAN特征点匹配方法
CN108460781A (zh) 一种基于改进spf的活动轮廓图像分割方法及装置
CN112184762A (zh) 一种基于特征融合的灰狼优化粒子滤波目标跟踪算法
Liu et al. Image edge recognition of virtual reality scene based on multi-operator dynamic weight detection
CN117132630A (zh) 一种基于二阶空间兼容性度量的点云配准方法
CN113409332A (zh) 一种基于三维点云的建筑物平面分割方法
CN108510591A (zh) 一种基于非局部均值与双边滤波的改进泊松曲面重建方法
CN113642397B (zh) 一种基于手机视频的物体长度测量方法
CN108447038B (zh) 一种基于非局部全变分算子的网格去噪方法
Zhao et al. 3D object tracking via boundary constrained region-based model
WO2020167435A1 (en) Detecting pose of 3d objects
Laskov et al. Curvature-based algorithms for nonrigid motion and correspondence estimation
CN111127667A (zh) 基于区域曲率二进制描述符的点云初始配准方法
CN114022526B (zh) 一种基于三维形状上下文的sac-ia点云配准方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant