CN114627346A - 一种保留重要特征的点云数据下采样方法 - Google Patents

一种保留重要特征的点云数据下采样方法 Download PDF

Info

Publication number
CN114627346A
CN114627346A CN202210255755.0A CN202210255755A CN114627346A CN 114627346 A CN114627346 A CN 114627346A CN 202210255755 A CN202210255755 A CN 202210255755A CN 114627346 A CN114627346 A CN 114627346A
Authority
CN
China
Prior art keywords
point
sampling
cloud data
points
point cloud
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210255755.0A
Other languages
English (en)
Other versions
CN114627346B (zh
Inventor
王靖雅
周荣好
张斌
夏金祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Electronic Science and Technology of China
Original Assignee
University of Electronic Science and Technology of China
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Electronic Science and Technology of China filed Critical University of Electronic Science and Technology of China
Priority to CN202210255755.0A priority Critical patent/CN114627346B/zh
Publication of CN114627346A publication Critical patent/CN114627346A/zh
Application granted granted Critical
Publication of CN114627346B publication Critical patent/CN114627346B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本发明属于计算机视觉和点云下采样技术领域,尤其涉及一种保留重要特征的点云数据下采样方法;本发明采用最远点采样方法得到点云数据的采样点集合,之后,在每个特征维度上选取最大的点组成关键特征点集合,计算采样点集合和关键特征点集合两个集合中点与点之间的距离值;最后,按照距离最近原则把采样点集合与关键关键特征点集合的差集替换为关键特征点,得到最终的采样点集合。本发明通过上述下采样方法实现了关键点的提取,实现稀疏点云数据的输出,或者作为形状轮廓及细节提取的方法,为后续点云数据的高效处理带来便利。

Description

一种保留重要特征的点云数据下采样方法
技术领域
本发明属于计算机视觉和点云下采样技术领域,尤其涉及一种保留重要特征的点云数据下采样方法。
背景技术
三维点云数据在计算机视觉、自动驾驶和机器人等众多领域有着广泛应用,近来引起了越来越多的关注。使用点云数据可以有效感知场景,实现静态环境识别、动态目标检测以及同步定位与映射等任务。
随着PointNet(Charles R Qi,Hao Su,Kaichun Mo,and Leonidas JGuibas.Pointnet:Deep learning on point sets for 3d classification andsegmentation.Proc.Computer Vision and Pattern Recognition(CVPR),IEEE,1(2):4,2017.)、PointNet++(Charles Ruizhongtai Qi,Li Yi,Hao Su,and Leonidas JGuibas.Pointnet++:Deep hierarchical feature learning on point sets in ametric space.In Advances in Neural Information Processing Systems,pages 5099–5108,2017.)等方法的引入,基于深度学习从无序点云中提取特征已成为一个非常活跃的研究领域。
在实际情况下,激光雷达形成的点云中的点的数量十分庞大,虽然密集的点云数据更有利于网络从点云数据中的点中提取到丰富的特征信息,但是海量数据会造成特征提取算法的计算量激增、计算效率低下等问题。减少计算的一种有效方法是对输入网络前的点云数据进行下采样,使点云数据量尽量减少,同时保留被测对象特征的表达能力。
现有的点云下采样方法大多使用随机采样、最远点采样以及网格化的均匀采样方法。随机采样不能保证采样点分布均匀,很容易在采样过程中丢失重要信息;最远点采样方法的第一个点是随机选择的,后续采样的点与第一个随机选择的点的空间位置有关,有可能采样不到带有重要特征的点,同时对噪点比较敏感;网格化的均匀采样方法需要对点云数据进行网格化处理,虽然采样点分布均匀,但是并不能很好的保留三维点云的轮廓以及纹理等特征。
发明内容
为了解决上述现有技术中存在的技术问题,本发明提供了一种保留重要特征的点云数据下采样方法,拟解决现有技术中提到的目前点云数据下采样方法的采样点分布不均匀、对噪点敏感、轮廓及布局特征保留不完整的技术问题。
本发明采用的技术方案如下:
一种保留重要特征的点云数据下采样方法,包括以下步骤:
步骤1:输入点云数据,并设置用于训练点云数据的训练模型参数,所述训练模型参数包括采样点个数以及是否使用输入点云的法向量特征;
步骤2:采用最远点采样方法对输入的点云数据进行第一次采样,得到采样点集合,记为集合A;
步骤3:对所有输入的点云数据进行一次卷积计算,增大点的特征维度数;
步骤4:对进行卷积计算后的点云数据的每个维度的特征进行最大池化操作,最大池化操作参照二维图像的最大池化操作进行,选取特征信息最大的点作为重要特征点,并记录该重要特征点对应的索引值;
步骤5:通过重要特征点所对应的索引值得到该重要特征点的空间位置特征;
步骤6:计算每个重要特征点与集合A中采样点的距离,并保存在距离矩阵中;
步骤7:求出每个重要特征点到集合A中采样点的距离最小值,并求出距离最小值对应的集合A中采样点的索引值,记为mindis_idx;
步骤8:通过步骤7中得到的距离最小值是否为0来判断第一次采样是否采样到对应的重要特征点;
步骤9:将集合A中为非重要特征点的采样点替换为离该非重要特征点距离最近的重要特征点,作为采样点;
步骤10:输出经过步骤9替换后的所有采样点的索引值;
步骤11:输出下采样后的点云数据。
本发明能够下采样不同输入数目的点云数据,输出固定数目的点云数据,且可进行多重不同任务需求的稀疏操作。本发明不仅可针对点云数据的空间位置特征,还可以同时处理带有属性的点云特征,例如颜色、法向量等特征。
并且本发明提出的点云数据的下采样方法为非均匀采样,与基于网格的点云数据下采样方法相比,更合理的表达了点云数据的整体结构且对异常值有抑制作用,且本方法的鲁棒性和保留重要特征的能力更强。同时本发明也可以用于关键点的提取,实现稀疏点云数据的输出,或者作为形状轮廓及细节提取的方法,为后续点云数据的高效处理带来便利。
优选的,所述步骤2包括以下步骤:
步骤2.1:计算点云数据的质心,计算公式为:
Figure BDA0003548383440000021
式中:Pc为点云数据的质心的空间位置坐标;xi、yi以及zi分别为输入的点云数据中的第i个点在三个维度上的坐标值;
步骤2.2:利用欧几里得三维空间距离计算方法求出距离质心最接近的点P1,计算公式为:
Figure BDA0003548383440000031
式中:D为两点之间的距离,x1、y1、z1和x2、y2、z2分别为两个点的空间位置坐标;
步骤2.3:将P1作为第一个采样点,再利用最远点采样方法进行下采样,得到采样点集合,记为集合A。
优选的,所述最远点采样方法包括以下步骤:
设输入的点云数据有n个点,采样点个数为x;
A.从点云数据中随机选取一个点fi作为起始点,并将点fi写入采样点集合A中,得到采样点集合Ai记为Ai={fi},并建立一个用于保存每个点与采样点集合A的距离最小值的距离集合D;
B.计算剩余n-1个点与点fi的距离,将n-1个距离值保存在距离集合D中,记为Di={d1,d2,d3,...,dn-1},从集合Di中选择距离最大值对应的点fj,并将点fj写入所述采样点集合Ai中,得到采样点集合Aj,记为Aj={fi,fj};
C.计算剩余的n-2个点与点fj的距离,对于剩余的n-2中的每一个点,若其距离点fj的距离小于其距离点fi的距离,则将距离集合Di中该点的距离值更新为其距离点fj的距离,得到距离集合Dj={d1,d2,d3,...,dn-2};从距离集合Dj中选取距离最大值所对应的点fk,将其写入采样点集合Ak={fi,fj,fk},同时剩余n-3个点;
D.重复上述步骤B-C直到采样点集合中有x个点为止。
本发明通过使用上述最远点采样方法,能够使采样点分布均匀,有利于后续点云数据的多重任务的实现。传统的最远点采样方法随机指定第一个采样点,后续采样点的位置与第一个采样点息息相关,每次采样结果都具有差异,算法稳定性差。而本发明选择距离质点最近的点作为第一个采样点,通过指定第一个采样点的位置,保证每次采样结果是相同的,提升算法稳定性,同时第一个点分布在中心位置,有利于提高采样点的分布均匀性。
本发明参照二维图像的最大池化操作对点云数据的每个维度的特征进行最大池化操作,并结合本发明所述的保留重要特征的点云数据下采样方法,能够保留原始点云数据的重要特征,例如轮廓形状等特征。同时在下采样过程中不重新生成点云,采样之后获得的点云数据即为原始点云数据中的点,即不涉及重新构造和生成过程,为后续点云数据的多重任务提供稀疏化点云数据。
优选的,步骤6中所述的距离矩阵中的行表示每个重要特征点,列表示第一次采样得到的点。
优选的,所述步骤8中的重要特征点是否已采样到的判断条件以及判断结果具体如下:当距离最小值为0时,说明该重要特征点已被采样;当距离最小值不等于0时,则表明第一次采样后未采样到该重要特征点,则进行步骤9所述的替换操作。
优选的,所述步骤9包括以下步骤:
步骤9.1:创建一个与距离最小矩阵大小相同的矩阵,命名为替换判断矩阵,替换判断矩阵的所有元素赋值为常数c;
步骤9.2:若距离最小值不等于0,则将对应的集合A中的采样点索引值mindis_idx保存在替换判断矩阵中;
步骤9.3:若替换判断矩阵中的元素值不等于常数c,则进行替换操作:将所述元素值对应的重要特征点的索引值赋值给集合A中第mindis_idx个采样点。
优选的,所述步骤10中若还需再次采样,则输出采样点索引值作为下一层次采样过程的点云输入数据,循环步骤2-9进行下一层次的采样过程直到采样完成;若不需再次采样的,则采样完毕。
本发明的有益效果包括:
1.本发明能够下采样不同输入数目的点云数据,输出固定数目的点云数据,且可进行多重不同任务需求的稀疏操作。本发明不仅可针对点云数据的空间位置特征,还可以同时处理带有属性的点云特征,例如颜色、法向量等特征。
并且本发明提出的点云数据的下采样方法为非均匀采样,与基于网格的点云数据下采样方法相比,更合理的表达了点云数据的整体结构且对异常值有抑制作用,且本方法的鲁棒性和保留重要特征的能力更强。同时本发明也可以用于关键点的提取,实现稀疏点云数据的输出,或者作为形状轮廓及细节提取的方法,为后续点云数据的高效处理带来便利。
2.本发明通过使用上述最远点采样方法,能够使采样点分布均匀,有利于后续点云数据的多重任务的实现。传统的最远点采样方法随机指定第一个采样点,后续采样点的位置与第一个采样点息息相关,每次采样结果都具有差异,算法稳定性差。而本发明选择距离质点最近的点作为第一个采样点,通过指定第一个采样点的位置,保证每次采样结果是相同的,提升算法稳定性,同时第一个点分布在中心位置,有利于提高采样点的分布均匀性。
3.本发明参照二维图像的最大池化操作对点云数据的每个维度的特征进行最大池化操作,并结合本发明所述的保留重要特征的点云数据下采样方法,能够保留原始点云数据的重要特征,例如轮廓形状等特征。同时在下采样过程中不重新生成点云,采样之后获得的点云数据即为原始点云数据中的点,即不涉及重新构造和生成过程,为后续点云数据的多重任务提供稀疏化点云数据。
附图说明
图1为本发明的流程示意图。
图2为本发明的整体框架示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
下面结合附图1到附图2对本发明作进一步的详细说明:
实施例1
一种保留重要特征的点云数据下采样方法,包括以下步骤:
步骤1:输入点云数据的大小为1024个点,设置第一层次采样点个数为512个,第二层采样点个数为128个,且不输入点云数据的法向量特征;
步骤2:采用最远点采样方法对输入的点云数据进行第一次采样,得到采样点集合,记为集合A;
所述步骤2包括以下步骤:
步骤2.1:计算点云数据的质心,计算公式为:
Figure BDA0003548383440000051
式中:Pc为点云数据的质心的空间位置坐标;xi、yi以及zi分别为输入的点云数据中的第i个点在三个维度上的坐标值;
步骤2.2:利用欧几里得三维空间距离计算方法求出距离质心最接近的点P1,计算公式为:
Figure BDA0003548383440000052
式中:D为两点之间的距离,x1、y1、z1和x2、y2、z2分别为两个点的空间位置坐标;
步骤2.3:将P1作为第一个采样点,再利用最远点采样方法进行下采样,得到采样点集合,记为集合A。
所述最远点采样方法包括以下步骤:
设输入的点云数据有n个点,采样点个数为x;
A.从点云数据中随机选取一个点fi作为起始点,并将点fi写入采样点集合A中,得到采样点集合Ai记为Ai={fi},并建立一个用于保存每个点与采样点集合A的距离最小值的距离集合D;
B.计算剩余n-1个点与点fi的距离,将n-1个距离值保存在距离集合D中,记为Di={d1,d2,d3,...,dn-1},从集合Di中选择距离最大值对应的点fj,并将点fj写入所述采样点集合Ai中,得到采样点集合Aj,记为Aj={fi,fj};
C.计算剩余的n-2个点与点fj的距离,对于剩余的n-2中的每一个点,若其距离点fj的距离小于其距离点fi的距离,则将距离集合Di中该点的距离值更新为其距离点fj的距离,得到距离集合Dj={d1,d2,d3,...,dn-2};从距离集合Dj中选取距离最大值所对应的点fk,将其写入采样点集合Ak={fi,fj,fk},同时剩余n-3个点;
D.重复上述步骤B-C直到采样点集合中有x个点为止。
步骤3:对所有输入的点云数据进行一次卷积计算,第一层次的采样过程中使特征维度由3增大到128,第二层次的采样过程中使特征维度由128增大到320;
步骤4:对进行卷积计算后的点云数据的每个维度的特征进行最大池化操作,最大池化操作参照二维图像的最大池化操作进行,选取特征信息最大的点作为重要特征点,并记录该重要特征点对应的索引值,记为idx;
步骤5:通过重要特征点所对应的索引值idx得到该重要特征点的空间位置特征idx_xyz;
步骤6:计算每个重要特征点与集合A中采样点的距离值,记为dis,并保存在距离矩阵中;所述的距离矩阵中的行表示每个重要特征点,列表示第一次采样得到的点。
步骤7:求出每个重要特征点到集合A中采样点的距离最小值,记为mindis,并求出距离最小值对应的集合A中采样点的索引值,记为mindis_idx;
步骤8:通过步骤7中得到的距离最小值是否为0来判断第一次采样是否采样到对应的重要特征点;
所述步骤8中的重要特征点是否已采样到的判断条件以及判断结果具体如下:当距离最小值为0时,说明该重要特征点已被采样;当距离最小值不等于0时,则表明第一次采样后未采样到该重要特征点,需要进行步骤9的替换操作。
步骤9:将集合A中为非重要特征点的采样点替换为离该非重要特征点距离最近的重要特征点,作为采样点;
所述步骤9包括以下步骤:
步骤9.1:创建一个与距离最小矩阵大小相同的矩阵,命名为替换判断矩阵,替换判断矩阵的所有元素赋值为常数2048;
步骤9.2:若距离最小值不等于0,则将对应的集合A中的采样点索引值mindis_idx保存在替换判断矩阵中;
步骤9.3:若替换判断矩阵中的元素值不等于常数2048,则进行替换操作:将所述元素值对应的重要特征点的索引值赋值给集合A中第mindis_idx个采样点。
步骤10:输出经过步骤9替换后的所有采样点的索引值;若还未进行第二层次采样过程,则输出采样点索引值作为第二层次采样过程的点云输入数据,循环步骤2-9进行第二层次的采样过程;若已完成第二次采样过程,则采样完毕。
步骤11:输出下采样后的点云数据。
具体的,请参见如下伪代码:
Figure BDA0003548383440000071
本发明能够下采样不同输入数目的点云数据,输出固定数目的点云数据,且可进行多重不同任务需求的稀疏操作。本发明不仅可针对点云数据的空间位置特征,还可以同时处理带有属性的点云特征,例如颜色、法向量等特征。
并且本发明提出的点云数据的下采样方法为非均匀采样,与基于网格的点云数据下采样方法相比,更合理的表达了点云数据的整体结构且对异常值有抑制作用,且本方法的鲁棒性和保留重要特征的能力更强。同时本发明也可以用于关键点的提取,实现稀疏点云数据的输出,或者作为形状轮廓及细节提取的方法,为后续点云数据的高效处理带来便利。
本发明通过使用上述最远点采样方法,能够使采样点分布均匀,有利于后续点云数据的多重任务的实现。传统的最远点采样方法随机指定第一个采样点,后续采样点的位置与第一个采样点息息相关,每次采样结果都具有差异,算法稳定性差。而本发明选择距离质点最近的点作为第一个采样点,通过指定第一个采样点的位置,保证每次采样结果是相同的,提升算法稳定性,同时第一个点分布在中心位置,有利于提高采样点的分布均匀性。
本发明参照二维图像的最大池化操作对点云数据的每个维度的特征进行最大池化操作,并结合本发明所述的保留重要特征的点云数据下采样方法,能够保留原始点云数据的重要特征,例如轮廓形状等特征。同时在下采样过程中不重新生成点云,采样之后获得的点云数据即为原始点云数据中的点,即不涉及重新构造和生成过程,为后续点云数据的多重任务提供稀疏化点云数据。
实施例2
一种保留重要特征的点云数据下采样方法,包括以下步骤:
步骤1:输入点云数据的大小为1024个点,设置第一层次采样点个数为512个,第二层采样点个数为128个,在点云数据的输入特征后面连接上点云数据的空间位置特征;
步骤2:采用最远点采样方法对输入的点云数据进行第一次采样,得到采样点集合,记为集合A;
所述步骤2包括以下步骤:
步骤2.1:计算点云数据的质心,计算公式为:
Figure BDA0003548383440000081
式中:Pc为点云数据的质心的空间位置坐标;xi、yi以及zi分别为输入的点云数据中的第i个点在三个维度上的坐标值;
步骤2.2:利用欧几里得三维空间距离计算方法求出距离质心最接近的点P1,计算公式为:
Figure BDA0003548383440000082
式中:D为两点之间的距离,x1、y1、z1和x2、y2、z2分别为两个点的空间位置坐标;
步骤2.3:将P1作为第一个采样点,再利用最远点采样方法进行下采样,得到采样点集合,记为集合A。
所述最远点采样方法包括以下步骤:
设输入的点云数据有n个点,采样点个数为x;
A.从点云数据中随机选取一个点fi作为起始点,并将点fi写入采样点集合A中,得到采样点集合Ai记为Ai={fi},同时建立一个距离集合D,其中保存每个点与采样点集合A的距离最小值;
B.计算剩余n-1个点与点fi的距离,将n-1个距离值保存在距离集合D中,记为Di={d1,d2,d3,...,dn-1},从集合Di中选择距离最大值对应的点fj,并将点fj写入所述采样点集合Ai中,得到采样点集合Aj,记为Aj={fi,fj};
C.计算剩余的n-2个点与点fj的距离,对于剩余的n-2中的每一个点,若其距离点fj的距离小于其距离点fi的距离,则将距离集合Di中该点的距离值更新为其距离点fj的距离,得到距离集合Dj={d1,d2,d3,...,dn-2}。之后从距离集合Dj中选取距离最大值所对应的点fk,将其写入采样点集合Ak={fi,fj,fk},同时剩余n-3个点;
D.重复上述步骤B-C直到采样点集合中有x个点为止。
步骤3:对所有输入的点云数据进行一次卷积计算,第一层次的采样过程中使特征维度由6增大到128,第二层次的采样过程中使特征维度由131增大到320;
步骤4:对进行卷积计算后的点云数据的每个维度的特征进行最大池化操作,最大池化操作参照二维图像的最大池化操作进行,选取特征信息最大的点作为重要特征点,并记录该重要特征点对应的索引值,记为idx;
步骤5:通过重要特征点所对应的索引值idx得到该重要特征点的空间位置特征idx_xyz;
步骤6:计算每个重要特征点与集合A中采样点的距离值,记为dis,并保存在距离矩阵中;所述的距离矩阵中的行表示每个重要特征点,列表示第一次采样得到的点。
步骤7:求出每个重要特征点到集合A中采样点的距离最小值,记为mindis,并求出距离最小值对应的集合A中采样点的索引值,记为mindis_idx;
步骤8:通过步骤7中得到的距离最小值是否为0来判断第一次采样是否采样到对应的重要特征点;
所述步骤8中的重要特征点是否已采样到的判断条件以及判断结果具体如下:当距离最小值为0时,说明该重要特征点已被采样;当距离最小值不等于0时,则表明第一次采样后未采样到该重要特征点,需要进行步骤9的替换操作。
步骤9:将集合A中为非重要特征点的采样点替换为离该非重要特征点距离最近的重要特征点,作为采样点;
所述步骤9包括以下步骤:
步骤9.1:创建一个与距离最小矩阵大小相同的矩阵,命名为替换判断矩阵,替换判断矩阵的所有元素赋值为常数2048;
步骤9.2:若距离最小值不等于0,则将对应的集合A中的采样点索引值mindis_idx保存在替换判断矩阵中;
步骤9.3:若替换判断矩阵中的元素值不等于常数2048,则进行替换操作:将所述元素值对应的重要特征点的索引值赋值给集合A中第mindis_idx个采样点。
步骤10:输出经过步骤9替换后的所有采样点的索引值;若还未进行第二层次采样过程,则输出采样点索引值作为第二层次采样过程的点云输入数据,循环步骤2-9进行第二层次的采样过程;若已完成第二次采样过程,则采样完毕。
步骤11:输出下采样后的点云数据。
具体的,请参见如下伪代码:
Figure BDA0003548383440000101
本发明能够下采样不同输入数目的点云数据,输出固定数目的点云数据,且可进行多重不同任务需求的稀疏操作。本发明不仅可针对点云数据的空间位置特征,还可以同时处理带有属性的点云特征,例如颜色、法向量等特征。
并且本发明提出的点云数据的下采样方法为非均匀采样,与基于网格的点云数据下采样方法相比,更合理的表达了点云数据的整体结构且对异常值有抑制作用,且本方法的鲁棒性和保留重要特征的能力更强。同时本发明也可以用于关键点的提取,实现稀疏点云数据的输出,或者作为形状轮廓及细节提取的方法,为后续点云数据的高效处理带来便利。
本发明通过使用上述最远点采样方法,能够使采样点分布均匀,有利于后续点云数据的多重任务的实现。传统的最远点采样方法随机指定第一个采样点,后续采样点的位置与第一个采样点息息相关,每次采样结果都具有差异,算法稳定性差。而本发明选择距离质点最近的点作为第一个采样点,通过指定第一个采样点的位置,保证每次采样结果是相同的,提升算法稳定性,同时第一个点分布在中心位置,有利于提高采样点的分布均匀性。
本发明参照二维图像的最大池化操作对点云数据的每个维度的特征进行最大池化操作,并结合本发明所述的保留重要特征的点云数据下采样方法,能够保留原始点云数据的重要特征,例如轮廓形状等特征。同时在下采样过程中不重新生成点云,采样之后获得的点云数据即为原始点云数据中的点,即不涉及重新构造和生成过程,为后续点云数据的多重任务提供稀疏化点云数据。
为验证本发明所述的下采样方法特提供如下实验数据以供证明:
参见表1所示,将PointNet++模型中的下采样方法替换为本发明方法,针对点云数据分类任务使用ModelNet40数据集进行点云数据分类任务实验,采用官方数据,选取9843个数据作为训练数据,2468个数据作为测试数据进行实验,当点云数据输入只有位置特征时,如表1所示,本发明的分类总体精度达到92.3%,比PointNet++原有的分类精度高出1.6%。
表1
Figure BDA0003548383440000111
Figure BDA0003548383440000121
参见表2所示,当点云数据输入为位置和法向量特征时,采用本发明时的分类精度达到93.2%,并且在参数数量少5倍的情况下,仍比PointNet++原有的分类进度高出1.3%。
表2
Figure BDA0003548383440000122
本发明针对点云数据分割任务,选用ShapeNet数据集,采用官方数据,选取13998个数据作为训练数据,2874个数据作为测试数据,参见表3所示,本发明的分割平均精度达到85.4%。本发明方法应用在PointNet++模型中的点云数据分类分割精度与目前现有的点云数据分割模型(Yi、Kd-Net、PN、SSCNN、Pointnet++、DG-CNN)相比取得了领先的效果,证明了本发明方法的有效性和先进性。
表3
Figure BDA0003548383440000123
Figure BDA0003548383440000131
以上所述实施例仅表达了本申请的具体实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请保护范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请技术方案构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。

Claims (7)

1.一种保留重要特征的点云数据下采样方法,其特征在于,包括以下步骤:
步骤1:输入点云数据,并设置用于训练点云数据的训练模型参数,所述训练模型参数包括采样点个数以及是否使用输入点云的法向量特征;
步骤2:采用最远点采样方法对输入的点云数据进行第一次采样,得到采样点集合,记为集合A;
步骤3:对所有输入的点云数据进行一次卷积计算,增大点的特征维度数;
步骤4:对进行卷积计算后的点云数据的每个维度的特征进行最大池化操作,最大池化操作参照二维图像的最大池化操作进行,选取特征信息最大的点作为重要特征点,并记录该重要特征点对应的索引值;
步骤5:通过重要特征点所对应的索引值得到该重要特征点的空间位置特征;
步骤6:计算每个重要特征点与集合A中采样点的距离,并保存在距离矩阵中;
步骤7:求出每个重要特征点到集合A中采样点的距离最小值,并求出距离最小值对应的集合A中采样点的索引值,记为mindis_idx;
步骤8:通过步骤7中得到的距离最小值是否为0来判断第一次采样是否采样到对应的重要特征点;
步骤9:将集合A中为非重要特征点的采样点替换为离该非重要特征点距离最近的重要特征点,作为采样点;
步骤10:输出经过步骤9替换后的所有采样点的索引值;
步骤11:输出下采样后的点云数据。
2.根据权利要求1所述的一种保留重要特征的点云数据下采样方法,其特征在于,所述步骤2包括以下步骤:
步骤2.1:计算点云数据的质心,计算公式为:
Figure FDA0003548383430000011
式中:Pc为点云数据的质心的空间位置坐标;xi、yi以及zi分别为输入的点云数据中的第i个点在三个维度上的坐标值;
步骤2.2:利用欧几里得三维空间距离计算方法求出距离质心最接近的点P1,计算公式为:
Figure FDA0003548383430000012
式中:D为两点之间的距离,x1、y1、z1和x2、y2、z2分别为两个点的空间位置坐标;
步骤2.3:将P1作为第一个采样点,再利用最远点采样方法进行下采样,得到采样点集合,记为集合A。
3.根据权利要求1所述的一种保留重要特征的点云数据下采样方法,其特征在于,步骤6中所述的距离矩阵中的行表示每个重要特征点,列表示第一次采样得到的点。
4.根据权利要求1所述的一种保留重要特征的点云数据下采样方法,其特征在于,所述步骤8中的重要特征点是否已采样到的判断条件以及判断结果具体如下:当距离最小值为0时,说明该重要特征点已被采样;当距离最小值不等于0时,则表明第一次采样后未采样到该重要特征点,则进行步骤9所述的替换操作。
5.根据权利要求1所述的一种保留重要特征的点云数据下采样方法,其特征在于,所述步骤9包括以下步骤:
步骤9.1:创建一个与距离最小矩阵大小相同的矩阵,命名为替换判断矩阵,替换判断矩阵的所有元素赋值为常数c;
步骤9.2:若距离最小值不等于0,则将对应的集合A中的采样点索引值mindis_idx保存在替换判断矩阵中;
步骤9.3:若替换判断矩阵中的元素值不等于常数c,则进行替换操作:将所述元素值对应的重要特征点的索引值赋值给集合A中第mindis_idx个采样点。
6.根据权利要求1所述的一种保留重要特征的点云数据下采样方法,其特征在于,所述最远点采样方法包括以下步骤:
设输入的点云数据有n个点,采样点个数为x;
A.从点云数据中随机选取一个点fi作为起始点,并将点fi写入采样点集合A中,得到采样点集合Ai记为Ai={fi},并建立一个用于保存每个点与采样点集合A的距离最小值的距离集合D;
B.计算剩余n-1个点与点fi的距离,将n-1个距离值保存在距离集合D中,记为Di={d1,d2,d3,...,dn-1},从集合Di中选择距离最大值对应的点fj,并将点fj写入所述采样点集合Ai中,得到采样点集合Aj,记为Aj={fi,fj};
C.计算剩余的n-2个点与点fj的距离,对于剩余的n-2中的每一个点,若其距离点fj的距离小于其距离点fi的距离,则将距离集合Di中该点的距离值更新为其距离点fj的距离,得到距离集合Dj={d1,d2,d3,...,dn-2};从距离集合Dj中选取距离最大值所对应的点fk,将其写入采样点集合Ak={fi,fj,fk},同时剩余n-3个点;
D.重复上述步骤B-C直到采样点集合中有x个点为止。
7.根据权利要求1所述的一种保留重要特征的点云数据下采样方法,其特征在于,所述步骤10中若还需再次采样,则输出采样点索引值作为下一层次采样过程的点云输入数据,循环步骤2-9进行下一层次的采样过程直到采样完成;若不需再次采样的,则采样完毕。
CN202210255755.0A 2022-03-15 2022-03-15 一种保留重要特征的点云数据下采样方法 Active CN114627346B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210255755.0A CN114627346B (zh) 2022-03-15 2022-03-15 一种保留重要特征的点云数据下采样方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210255755.0A CN114627346B (zh) 2022-03-15 2022-03-15 一种保留重要特征的点云数据下采样方法

Publications (2)

Publication Number Publication Date
CN114627346A true CN114627346A (zh) 2022-06-14
CN114627346B CN114627346B (zh) 2023-06-16

Family

ID=81902532

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210255755.0A Active CN114627346B (zh) 2022-03-15 2022-03-15 一种保留重要特征的点云数据下采样方法

Country Status (1)

Country Link
CN (1) CN114627346B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116246121A (zh) * 2023-05-12 2023-06-09 山东科技大学 一种基于改进最远点采样的点云数据处理方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107123138A (zh) * 2017-04-28 2017-09-01 电子科技大学 基于vanilla‑R点对剔除策略的点云配准算法
US9858640B1 (en) * 2015-07-15 2018-01-02 Hrl Laboratories, Llc Device and method for merging 3D point clouds from sparsely distributed viewpoints
CN110991468A (zh) * 2019-12-13 2020-04-10 深圳市商汤科技有限公司 三维目标检测和智能行驶方法、装置、设备
CN111782739A (zh) * 2019-04-04 2020-10-16 西安四维图新信息技术有限公司 地图更新方法及装置
CN113378112A (zh) * 2021-06-18 2021-09-10 浙江工业大学 一种基于各向异性卷积的点云补全方法及装置
CN113569979A (zh) * 2021-08-06 2021-10-29 中国科学院宁波材料技术与工程研究所 一种基于注意力机制的三维物体点云分类方法
CN113628263A (zh) * 2021-09-06 2021-11-09 西安热工研究院有限公司 一种基于局部曲率及其近邻特征的点云配准方法
CN113674425A (zh) * 2021-10-25 2021-11-19 深圳市信润富联数字科技有限公司 点云采样方法、装置、设备及计算机可读存储介质
CN113807366A (zh) * 2021-09-16 2021-12-17 电子科技大学 一种基于深度学习的点云关键点提取方法
CN114155524A (zh) * 2021-10-29 2022-03-08 中国科学院信息工程研究所 单阶段3d点云目标检测方法及装置、计算机设备、介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9858640B1 (en) * 2015-07-15 2018-01-02 Hrl Laboratories, Llc Device and method for merging 3D point clouds from sparsely distributed viewpoints
CN107123138A (zh) * 2017-04-28 2017-09-01 电子科技大学 基于vanilla‑R点对剔除策略的点云配准算法
CN111782739A (zh) * 2019-04-04 2020-10-16 西安四维图新信息技术有限公司 地图更新方法及装置
CN110991468A (zh) * 2019-12-13 2020-04-10 深圳市商汤科技有限公司 三维目标检测和智能行驶方法、装置、设备
CN113378112A (zh) * 2021-06-18 2021-09-10 浙江工业大学 一种基于各向异性卷积的点云补全方法及装置
CN113569979A (zh) * 2021-08-06 2021-10-29 中国科学院宁波材料技术与工程研究所 一种基于注意力机制的三维物体点云分类方法
CN113628263A (zh) * 2021-09-06 2021-11-09 西安热工研究院有限公司 一种基于局部曲率及其近邻特征的点云配准方法
CN113807366A (zh) * 2021-09-16 2021-12-17 电子科技大学 一种基于深度学习的点云关键点提取方法
CN113674425A (zh) * 2021-10-25 2021-11-19 深圳市信润富联数字科技有限公司 点云采样方法、装置、设备及计算机可读存储介质
CN114155524A (zh) * 2021-10-29 2022-03-08 中国科学院信息工程研究所 单阶段3d点云目标检测方法及装置、计算机设备、介质

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
EHSAN NEZHADARYA 等: "Adaptive Hierarchical Down-Sampling for Point Cloud Classification" *
仇倩雨 等: "保留灰度特征的配准点云数据精简算法" *
张彬;熊传兵;: "基于体素下采样和关键点提取的点云自动配准" *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116246121A (zh) * 2023-05-12 2023-06-09 山东科技大学 一种基于改进最远点采样的点云数据处理方法
CN116246121B (zh) * 2023-05-12 2023-08-11 山东科技大学 一种基于改进最远点采样的点云数据处理方法

Also Published As

Publication number Publication date
CN114627346B (zh) 2023-06-16

Similar Documents

Publication Publication Date Title
US20240202871A1 (en) Three-dimensional point cloud upsampling method, system and device, and medium
CN110263659B (zh) 一种基于三元组损失和轻量级网络的指静脉识别方法及系统
CN110135227B (zh) 一种基于机器学习的激光点云室外场景自动分割方法
CN106228185B (zh) 一种基于神经网络的通用图像分类识别系统及方法
CN112149725B (zh) 基于傅立叶变换的谱域图卷积3d点云分类方法
CN108009222B (zh) 基于较优视图和深度卷积神经网络的三维模型检索方法
CN111414953B (zh) 点云分类方法和装置
CN104036255A (zh) 一种人脸表情识别方法
CN108038435A (zh) 一种基于卷积神经网络的特征提取与目标跟踪方法
CN113159232A (zh) 一种三维目标分类、分割方法
CN111415379A (zh) 一种基于布谷鸟优化的三维点云数据配准方法
JP6107531B2 (ja) 特徴抽出プログラム及び情報処理装置
CN112328715A (zh) 视觉定位方法及相关模型的训练方法及相关装置、设备
TW202207092A (zh) 卷積神經網路的排序方法、運算方法及裝置
CN112085072A (zh) 基于时空特征信息的草图检索三维模型的跨模态检索方法
CN105957149A (zh) 一种适用于高效渲染的城市三维模型数据预处理方法
Du et al. Stereo-matching network for structured light
CN114627346B (zh) 一种保留重要特征的点云数据下采样方法
Ouadiay et al. Simultaneous object detection and localization using convolutional neural networks
Sanghi et al. Sketch-a-shape: Zero-shot sketch-to-3d shape generation
CN115131384B (zh) 基于边缘保持的仿生机器人3d打印方法、装置及介质
CN114445280B (zh) 一种基于注意力机制的点云下采样方法
CN107403145B (zh) 图像特征点定位方法及装置
WO2022017129A1 (zh) 目标对象检测方法、装置、电子设备及存储介质
CN109658489B (zh) 一种基于神经网络的立体网格数据处理方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant