CN108010002B - 一种基于自适应隐式移动最小二乘的结构化点云去噪方法 - Google Patents
一种基于自适应隐式移动最小二乘的结构化点云去噪方法 Download PDFInfo
- Publication number
- CN108010002B CN108010002B CN201711422135.7A CN201711422135A CN108010002B CN 108010002 B CN108010002 B CN 108010002B CN 201711422135 A CN201711422135 A CN 201711422135A CN 108010002 B CN108010002 B CN 108010002B
- Authority
- CN
- China
- Prior art keywords
- point
- implicit
- local
- dimensional
- neighborhood
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 230000003044 adaptive effect Effects 0.000 title claims abstract description 11
- 239000011159 matrix material Substances 0.000 claims abstract description 21
- 238000000513 principal component analysis Methods 0.000 claims abstract description 11
- 238000001914 filtration Methods 0.000 claims description 6
- 230000002146 bilateral effect Effects 0.000 claims description 4
- 230000008569 process Effects 0.000 claims description 3
- 230000035945 sensitivity Effects 0.000 claims description 3
- 230000009466 transformation Effects 0.000 abstract description 4
- 238000009827 uniform distribution Methods 0.000 abstract 1
- 230000000694 effects Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种基于自适应隐式移动最小二乘的结构化点云去噪方法,包括以下步骤:步骤1,根据深度值自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小;步骤2,对于每个三维点,根据该点的邻域窗口大小查找邻域点,通过主元分析估算该点的法向;步骤3,依次以每个三维点为中心,利用该点的邻域点及邻域点的法向,定义局部隐函数;步骤4,利用定义的局部隐函数构造隐式局部曲面,沿视线方向优化求解每条视线与局部隐式曲面的交点。本发明能对结构化点云去噪并保证点数据在深度相机模型下的透视变换不变性,具有运算速度快,去噪后点数据分布均匀,对深度不连续和噪声随深度变化等问题鲁棒性高的优点。
Description
技术领域
本发明涉及计算机图形中的面向真实物体的3D建模领域,具体涉及一种基于自适应隐式移动最小二乘的结构化点云去噪方法。
背景技术
所谓结构化点云去噪是指消除结构化点云中噪声的过程。结构化点云是目前大多数三维获取设备,如深度相机,采集到的物体的原始三维表面数据。所谓结构化点云是指具有规则二维矩阵结构的一些三维点组成的集合,其中每个三维点与二维图像中的每个像素对应。去噪的目的是使结构化点云表示的曲面光滑,这样有助于提升3D建模的精度。结构化点云去噪研究具有重要意义,因为利用三维获取设备对真实世界的物体建模已经被广泛应用于三维建模的领域中,可以省去大量的手工建模操作并捕获更多模型的细节。无论是小型的物体或是大型的建筑,甚至整个城市都可以利用三维获取设备采集表面的结构化点云数据。这些结构化点云通常都带有噪声,而噪声可能会严重降低配准、表面重建等三维建模操作的精度,因此,结构化点云去噪是对真实物体进行三维建模时的不可缺少的重要步骤。
目前,现存相当数量的各式各样的点云去噪算法,例如著名的移动最小二乘算法等。然而现存的诸多算法通常针对散乱点云,即无拓扑结构的三维点集合。虽然这些算法也可用于结构化点云去噪,但不足之处是没有利用结构化点云的结构信息。这样导致一方面需要建立复杂的空间数据结构,如Kd树,进行邻域查找,另一方面对优化缺乏相应的约束,不能保持点数据在深度相机模型下的透视变换不变性。现有的针对结构化点云的算法通常直接借鉴图像处理中的滤波算法,如高斯滤波等。该类算法一般通过矩阵窗口直接查找邻域,因此算法复杂度相对较低,但是在噪声较大时不容易保持几何特征。另外,噪声在结构化点云中不同深度的位置一般会发生变化,采用统一大小的邻域窗口往往不能保证对全部点数据起到良好的去噪效果。
发明内容
本发明提供一种基于自适应隐式移动最小二乘的结构化点云去噪方法,能够消除结构化点云中噪声并保持点数据在深度相机模型下的透视变换不变性,运算速度快,对深度不连续和噪声随深度变化等问题鲁棒性高。
一种基于自适应隐式移动最小二乘的结构化点云去噪方法,包括以下步骤:
步骤1,根据深度值自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小;
步骤2,对于每个三维点,根据该点的邻域窗口大小查找邻域点,通过主元分析(PCA)估算该点的法向;
步骤3,依次以每个三维点为中心,利用该点的邻域点及邻域点的法向,定义局部隐函数;
步骤4,利用定义的局部隐函数构造隐式局部曲面,沿视线方向优化求解每条视线与局部隐式曲面的交点。
作为优选,步骤1中,自适应确定结构化点云中每个三维点pi在二维矩阵结构中的邻域窗口大小的公式为:
其中,hi表示点pi的邻域窗口的半边长;
di是点pi的深度值,即点pi的Z轴坐标值;
α和β是手动输入的参数。
作为优选,步骤2中,通过主元分析(PCA)估算每个三维点pi的法向ni的方法是,首先,按如下公式计算协方差矩阵Ci:
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||∞≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点qi的邻域窗口的半边长;
其中,card(N(pi))表示点集N(pi)中点的数目;
然后,对矩阵Ci进行特征值分解,得到3个特征值和对应的3个特征向量,
其中,最小特征值对应的特征向量即是估算的点pi的法向ni。
作为优选,步骤3中,定义局部隐函数的方式是,对于每个三维点pi,根据隐式移动最小二乘方法,定义函数fi(x):R3→R如下:
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||∞≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点pi的邻域窗口的半边长;
n(x):R3→R3是混合的法向量场函数,定义为:
其中,nj是步骤2计算得到的点pj的法向;
di是点pi的深度值,即点pi的Z轴坐标值;
作为优选,步骤4中,沿视线方向优化求解每条视线与局部隐式曲面的交点的方法是,首先,从视点(0,0,0)向每个三维点pi发出射线Li(t),简称视线,定义为:
其中,t>0是自变量参数;
然后,优化求解视线Li(t)与局部隐式曲面fi(x)=0的交点;
其中,fi(x)是步骤3中定义的局部隐函数;
其中,各变量的定义参考步骤3中的fi(x);
其中,各变量的定义参考步骤3中的fi(x)和n(x);
与现有技术相比,本发明具有以下有益效果:
(1)本发明首先通过主元分析(PCA)计算结构化点云中每个三维点的法向,然后逐个三维点为中心,根据隐式移动最小二乘方法定义局部隐函数,最后优化求解每条视线与局部隐式曲面的交点,达到了消除噪声的目的,能够保证点数据在深度相机模型下的透视变换不变性,能够利用矩阵窗口实现快速的邻域查找并且去噪后的点数据分布均匀。
(2)每个三维点的邻域窗口大小根据深度值自适应确定,克服了噪声随深度变化的问题,保证了全部点数据都能得到良好的去噪效果,并且局部隐函数的定义采用双边滤波核函数进行局部加权,提高了对深度不连续问题的鲁棒性。
附图说明
图1为本发明的基本流程示意图;
图2为本发明的视线方向与局部隐式曲面的二维示意图;
图3为本发明的输入输出效果对比图。
具体实施方式
下面结合说明书附图对本发明的实施方式进行描述。
如图1所示,为本发明的基本流程示意图,实施步骤如下:
步骤1:确定结构化点云中每个三维点pi的在二维矩阵结构中的邻域窗口大小,计算公式为:
其中,hi表示点pi的邻域窗口的半边长;
di是点pi的深度值,即点pi的Z轴坐标值;
α和β是手动输入的参数:通过手动调节观察去噪效果确定最佳参数。
步骤2:通过主元分析(PCA)估算每个三维点pi的法向ni,计算方式为,首先,按如下公式计算协方差矩阵Ci:
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pi| ||qi-qj||∞≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点qi的邻域窗口的半边长;
其中,card(N(pi))表示点集N(pi)中点的数目;
然后,对矩阵Ci进行特征值分解,得到3个特征值和对应的3个特征向量,
其中,最小特征值对应的特征向量即是估算的点pi的法向ni。
步骤3:对于每个三维点pi,根据隐式移动最小二乘方法,定义局部隐函数fi(x):R3→R如下:
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj| ||qi-qj||∞≤hi}
其中,qi=(ui,vi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点pi的邻域窗口的半边长;
n(x):R3→R3是混合的法向量场函数,定义为:
其中,nj是步骤2计算得到的点pj的法向;
di是点pi的深度值,即点pi的Z轴坐标值;
步骤4:如图2所示,沿视线方向优化求解每条视线与局部隐式曲面的交点,求解方法为,首先,从视点(0,0,0)向每个三维点pi发出射线Li(t),简称视线,定义为:
其中,t>0是自变量参数;
然后,优化求解视线Li(t)与局部隐式曲面fi(x)=0的交点;
其中,fi(x)是步骤3中定义的局部隐函数;
优化求解视线Li(t)与局部隐式曲面fi(x)=0交点的迭代算法描述如下:
其中,各变量的定义参考步骤3中的fi(x);
其中,各变量的定义参考步骤3中的fi(x)和n(x);
如图3所示,为输入输出效果对比图,可以看出,使用本方法,起到了良好的去噪效果,而且很好的保留了面部几何特征。
以上所述仅为本发明的优选实施方式,本发明的保护范围并不仅限于上述实施方式,凡是属于本发明原理的技术方案均属于本发明的保护范围。对于本领域的技术人员而言,在不脱离本发明的原理的前提下进行的若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (5)
1.一种基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,包括以下步骤:
步骤1,根据深度值自适应确定结构化点云中每个三维点在二维矩阵结构中的邻域窗口大小;
步骤2,对于每个三维点,根据该点的邻域窗口大小查找邻域点,通过主元分析估算该点的法向;
步骤3,依次以每个三维点为中心,利用该点的邻域点及邻域点的法向,定义局部隐函数;
步骤4,利用定义的局部隐函数构造隐式局部曲面,沿视线方向优化求解每条视线与局部隐式曲面的交点。
3.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤2中,所述的通过主元分析估算该点的法向的具体方法为:
首先,按如下公式计算协方差矩阵Ci:
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj|||qi-qj||∞≤hi}
其中,qi=(ui,υi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点qi的邻域窗口的半边长;
其中,card(N(pi))表示点集N(pi)中点的数目;
然后,对矩阵Ci进行特征值分解,得到3个特征值和对应的3个特征向量,
其中,最小特征值对应的特征向量即是估算的点pi的法向ni。
4.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤3中,所述的定义局部隐函数的方式是,对于每个三维点pi,根据隐式移动最小二乘方法,定义函数fi(x):R3→R如下:
其中,N(pi)表示点pi的邻域窗口内的点集,定义为:
N(pi)={pj|||qi-qj||∞≤hi}
其中,qi=(ui,υi)是点pi在二维矩阵结构中的坐标;
hi是步骤1计算得到的点pi的邻域窗口的半边长;
n(x):R3→R3是混合的法向量场函数,定义为:
其中,nj是步骤2计算得到的点pj的法向;
di是点pi的深度值,即点pi的Z轴坐标值;
5.根据权利要求1所述的基于自适应隐式移动最小二乘的结构化点云去噪方法,其特征在于,步骤4中的具体过程是,首先,从视点(0,0,0)向每个三维点pi发出射线Li(t),简称视线,定义为:
其中,t>0是自变量参数;
然后,优化求解视线Li(t)与局部隐式曲面fi(x)=0的交点;
其中,fi(x)是步骤(3)中定义的局部隐函数;
首先,定义局部隐函数fi k(x):R3→R:
其中,各变量的定义参考步骤3中的fi(x);
其中,各变量的定义参考步骤3中的fi(x)和n(x);
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711422135.7A CN108010002B (zh) | 2017-12-25 | 2017-12-25 | 一种基于自适应隐式移动最小二乘的结构化点云去噪方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711422135.7A CN108010002B (zh) | 2017-12-25 | 2017-12-25 | 一种基于自适应隐式移动最小二乘的结构化点云去噪方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108010002A CN108010002A (zh) | 2018-05-08 |
CN108010002B true CN108010002B (zh) | 2021-06-01 |
Family
ID=62061044
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711422135.7A Active CN108010002B (zh) | 2017-12-25 | 2017-12-25 | 一种基于自适应隐式移动最小二乘的结构化点云去噪方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108010002B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108876744B (zh) * | 2018-06-27 | 2020-01-17 | 大连理工大学 | 一种基于区域分割的大尺度点云噪声去噪方法 |
CN111507921B (zh) * | 2020-04-20 | 2022-01-25 | 南京航空航天大学 | 一种基于低秩恢复的隧道点云去噪方法 |
CN113837952A (zh) * | 2020-06-24 | 2021-12-24 | 影石创新科技股份有限公司 | 基于法向量的三维点云降噪方法、装置、计算机可读存储介质及电子设备 |
CN115619983B (zh) * | 2022-12-02 | 2023-04-07 | 中南大学 | 一种基于径向基函数的平均曲率可控隐式曲面生成方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103049622A (zh) * | 2013-01-16 | 2013-04-17 | 杨安康 | 基于空间编码投影的逆向工程加工系统与方法 |
CN103530899A (zh) * | 2013-10-10 | 2014-01-22 | 浙江万里学院 | 基于几何特征性的点云简化方法 |
CN104318100A (zh) * | 2014-10-22 | 2015-01-28 | 北京航空航天大学 | 一种基于特征敏感投影算子的厚度点云薄化方法 |
CN105574929A (zh) * | 2015-12-15 | 2016-05-11 | 电子科技大学 | 一种基于地面LiDAR点云数据的单株植被三维建模方法 |
CN106250881A (zh) * | 2016-08-25 | 2016-12-21 | 深圳大学 | 一种基于三维点云数据的目标识别方法及系统 |
-
2017
- 2017-12-25 CN CN201711422135.7A patent/CN108010002B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103049622A (zh) * | 2013-01-16 | 2013-04-17 | 杨安康 | 基于空间编码投影的逆向工程加工系统与方法 |
CN103530899A (zh) * | 2013-10-10 | 2014-01-22 | 浙江万里学院 | 基于几何特征性的点云简化方法 |
CN104318100A (zh) * | 2014-10-22 | 2015-01-28 | 北京航空航天大学 | 一种基于特征敏感投影算子的厚度点云薄化方法 |
CN105574929A (zh) * | 2015-12-15 | 2016-05-11 | 电子科技大学 | 一种基于地面LiDAR点云数据的单株植被三维建模方法 |
CN106250881A (zh) * | 2016-08-25 | 2016-12-21 | 深圳大学 | 一种基于三维点云数据的目标识别方法及系统 |
Non-Patent Citations (6)
Title |
---|
"Defining point-set surfaces";Amenta N et al.;《ACM Trans.Graph》;20041231;第23卷(第3期);全文 * |
"POINT CLOUD DENOISING USING ROUBUST PRINCIPAL COMPONENT ANALYSIS";A.Leal Narvaez et al.;《In Proceedings of the First International Conference on Computer Graphics Theroy and Applications》;20061231;全文 * |
"Pointshop 3D: an interactive system for point-based surface editing";Zwicker M et al.;《ACM Trans. Graph》;20021231;第21卷(第3期);全文 * |
"Robust Feature-Preserving Denoising of 3D Point Clouds";Sk.Mohammadual Haque et al.;《IEEE》;20161219;全文 * |
"局部表面拟合的点云模型法向估计及重定向算法";王醒策 等;《计算机辅助设计与图形学学报》;20150430;第27卷(第4期);全文 * |
"点云驱动的计算机图形学综述";伍龙华 等;《计算机辅助设计与图形学学报》;20150831;第27卷(第8期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN108010002A (zh) | 2018-05-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108010002B (zh) | 一种基于自适应隐式移动最小二乘的结构化点云去噪方法 | |
CN109409437B (zh) | 一种点云分割方法、装置、计算机可读存储介质及终端 | |
CN106780576B (zh) | 一种面向rgbd数据流的相机位姿估计方法 | |
CN107967675B (zh) | 一种基于自适应投影移动最小二乘的结构化点云去噪方法 | |
CN110276317B (zh) | 一种物体尺寸检测方法、物体尺寸检测装置及移动终端 | |
CN109086724B (zh) | 一种加速的人脸检测方法及存储介质 | |
CN113077476B (zh) | 一种高度测量方法、终端设备以及计算机存储介质 | |
CN113298870B (zh) | 一种物体的姿态跟踪方法、装置、终端设备和存储介质 | |
WO2018133119A1 (zh) | 基于深度相机进行室内完整场景三维重建的方法及系统 | |
CN111105452A (zh) | 基于双目视觉的高低分辨率融合立体匹配方法 | |
CN105023246B (zh) | 一种基于对比度和结构相似度的图像增强方法 | |
CN108447038B (zh) | 一种基于非局部全变分算子的网格去噪方法 | |
CN109658357A (zh) | 一种面向遥感卫星图像的去噪方法 | |
Zhao et al. | 3D object tracking via boundary constrained region-based model | |
CN106127147B (zh) | 一种基于三维数据的人脸深度纹理修复方法 | |
US10867441B2 (en) | Method and apparatus for prefetching data items to a cache | |
CN108876711B (zh) | 一种基于图像特征点的草图生成方法、服务器及系统 | |
Reich et al. | A Real-Time Edge-Preserving Denoising Filter. | |
CN108428216B (zh) | 基于散布矩阵特征的二阶偏微分方程遥感图像去噪方法 | |
US10861174B2 (en) | Selective 3D registration | |
CN102831616A (zh) | 一种视频流体运动矢量计算方法 | |
Xing et al. | Robust mesh denoising based on collaborative filters | |
CN111798506A (zh) | 一种图像处理方法、控制方法、终端及计算机可读存储介质 | |
CN112419164B (zh) | 一种基于曲率和邻域重构的加权引导点云模型去噪方法 | |
Shi et al. | Fast and effective integration of multiple overlapping range images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |