CN104778691A - 一种三维点云数据的处理方法 - Google Patents

一种三维点云数据的处理方法 Download PDF

Info

Publication number
CN104778691A
CN104778691A CN201510160208.4A CN201510160208A CN104778691A CN 104778691 A CN104778691 A CN 104778691A CN 201510160208 A CN201510160208 A CN 201510160208A CN 104778691 A CN104778691 A CN 104778691A
Authority
CN
China
Prior art keywords
dimensional point
point cloud
coordinate system
dimensional
gray
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510160208.4A
Other languages
English (en)
Other versions
CN104778691B (zh
Inventor
况立群
姚亚盼
韩燮
于雅慧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
North University of China
Original Assignee
North University of China
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by North University of China filed Critical North University of China
Priority to CN201510160208.4A priority Critical patent/CN104778691B/zh
Publication of CN104778691A publication Critical patent/CN104778691A/zh
Application granted granted Critical
Publication of CN104778691B publication Critical patent/CN104778691B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)

Abstract

本发明属于三维点云数据处理方法技术领域,具体涉及一种三维点云数据的精简处理方法。本发明主要解决了现有对三维点云进行精简的方法存在的三维物体表面特征保留不好、重建的效果不好和计算量大的技术问题。本发明利用采集点云数据时Kinect相机同步得到的彩色图像中的信息对三维点云进行精简,该方法将彩色图与点云结合起来进行精简,能够避免采集及精简过程造成的物体表面一些曲率没有显著变化但却是特征信息的点云数据的丢失;可以根据物体本身的灰度信息设定相应的精简率进行精简;也可以根据主观因素保留自己认为比较重要的特征点,选择性的精简点云。本发明具有能够很好的保留三维物体表面特征并且具有良好的三维重建效果和计算量小的优点。

Description

一种三维点云数据的处理方法
技术领域
本发明属于三维点云数据处理方法技术领域,具体涉及一种三维点云数据的精简处理方法。
背景技术
随着计算机视觉、光学领域等相关技术的发展,逆向工程的发展也越发迅速。目前,在逆向工程中,数据采集技术主要分为接触式采集方式与非接触式采集方式两大类,采集得到的点云主要有扫描线式点云数据、阵列式点云数据、三角网格式点云数据以及散乱点云数据四类。由于采集得到的点云密度一般比较大,所以为了节省存储空间以及缩短后续重建的时间,对得到的点云数据进行精简尤为必要。
近年来,国内外许多学者都对点云精简进行过研究,方法也有很多。对于三维点云进行精简,主要可以划分为两大类,第一类就是利用拓扑关系进行精简,比如利用包围盒进行精简;第二类是根据不同的方式寻找代表点来进行点云精简,例如:基于曲率的精简方法、基于法向量的精简方法等。但是目前的这些方法都有一定的缺点,如包围盒法进行点云精简时对所有数据一视同仁,这样对特征的保留就不明显;曲率精简法对特征的保留很好,但是对于曲面上的点,由于计算出的曲率值大小变化不大,所以会当成是非特征点而进行大幅度的精简,这样会导致最后重建的效果不好;还有一些方法虽然可以较好地保留特征信息,但计算量增加。
发明内容
本发明的目的是解决现有对三维点云进行精简的方法存在的三维物体表面特征保留不好、重建的效果不好和计算量大的技术问题,提供一种三维点云数据的处理方法。
为解决上述技术问题,本发明采用的技术方案为:
一种三维点云数据的处理方法,包括以下步骤:
1)将三维物体放置在旋转平台上,利用Kinect相机同时采集三维物体在多个视角下的彩色图像与深度图信息,并由深度图信息得到三维物体在多个视角下的三维点云数据;
2)将多个视角下的三维点云数据利用配准算法得到三维物体整体的三维点云数据;
3)将彩色图像进行灰度化处理得到灰度图像,将灰度图像的每个像素点的灰度值记为gi
4)进行坐标系变换:首先将灰度图像像素坐标系对应到彩色图像像素坐标系,并按照以下转换方式将彩色图像像素坐标系变换至深度图像像素坐标系:彩色图像像素坐标系→彩色图像物理坐标系→彩色图像摄像机坐标系→世界坐标系→深度图像摄像机坐标系→深度图像物理坐标系→深度图像像素坐标系,最后将深度图像像素坐标系对应到整体的三维点云数据中;
5)对步骤2)中得到的整体的三维点云数据利用八叉树的方法进行拓扑划分,在进行八叉树拓扑划分之后,对每一个子立方体进行编码,编码为Q,编码Q是每一个子立方体的唯一编码,将编码Q对应子立方体中的三维点记为ai,其中i∈{0,…,k},k为该子立方体中三维点的个数;
6)计算每一个子立方体中的三维点ai的平均距离比较三维点ai的平均距离的大小,将最小的平均距离所对应的三维点记为a0,接着将三维点ai所对应的灰度值gi与三维点a0所对应的灰度值g0进行比较,获得灰度值gi与灰度值g0差的绝对值,该绝对值记为e,通过比较绝对值e与给定阈值的大小,来判断该处灰度值变换是否明显,特征信息是否充足,并根据灰度图像像素坐标系与三维点云数据的对应关系设定相应的精简率;若绝对值e小于给定阈值,则认为该处灰度值变换不明显,特征信息不足,并根据灰度图像像素坐标系与三维点云数据的对应关系设定较大的精简率;反之,若绝对值e大于给定阈值,则认为该处灰度值变换明显,特征信息较多,并根据灰度图像像素坐标系与三维点云数据的对应关系设定较小的精简率。
本发明采用以上技术方案,利用采集点云数据时Kinect相机同步得到的彩色图像中的信息对三维点云进行精简,该方法将彩色图与点云结合起来进行精简,能够避免采集及精简过程造成的物体表面一些曲率没有显著变化但却是特征信息的点云数据的丢失;可以根据物体本身的灰度信息设定相应的精简率进行精简;也可以根据主观因素保留自己认为比较重要的特征点,选择性的精简点云。因此,与背景技术相比,本发明具有能够很好的保留三维物体表面特征并且具有良好的三维重建效果和计算量小的优点。
为表明本发明具有以上优点,对同一三维物体整体点云数据采用曲率精简法、格栅法以及本发明所述处理方法进行了对比,对比结果见表1。
表1 三种算法精简结果对比
从图4和图5可以看出,虽然对点云数据进行了精简处理,在物体外形变化比较明显的地方也达到和比较不错的效果,但是并没有表现出物体表面上的一些特征信息。结合图3、图4、图5与表1可以看出,本发明在精简处理程度相差不大时,有更好的精简效果。
附图说明
图1是三维物体某一角度灰度图;
图2是三维物体整体点云数据;
图3是本发明所述方法对三维物体整体点云数据精简后的效果图;
图4是曲率精简法对三维物体整体点云数据精简后的效果图;
图5是格栅法对三维物体整体点云数据精简后的效果图。
具体实施方式
本实施例中的一种三维点云数据的处理方法,包括以下步骤:
1)将三维物体放置在旋转平台上,利用Kinect相机同时采集三维物体在多个视角下的彩色图像与深度图信息,初始时记为0°,旋转平台每旋转10°记录一次数据,直至旋转平台旋转350°,并由深度图信息得到三维物体在35个视角下的三维点云数据;
2)将35个视角下的三维点云数据利用改进的ICP配准算法得到三维物体整体的三维点云数据;
3)将彩色图像进行灰度化处理得到灰度图像,将灰度图像的每个像素点的灰度值记为gi,其中,灰度值gi的计算公式为:
g=0.3R+0.59G+0.11B
式中:R、G、B为彩色图像的各像素点对应的红、绿、蓝三个分量,输出并记录每个点的灰度值;
4)进行坐标系变换:首先将灰度图像像素坐标系对应到彩色图像像素坐标系,并按照以下转换方式将彩色图像像素坐标系变换至深度图像像素坐标系:彩色图像像素坐标系→彩色图像物理坐标系→彩色图像摄像机坐标系→世界坐标系→深度图像摄像机坐标系→深度图像物理坐标系→深度图像像素坐标系,最后将深度图像像素坐标系对应到整体的三维点云数据中;
由于Kinect相机是固定不变的,所以将世界坐标系定义为深度相机的摄像机坐标系;图像物理坐标系中的一点坐标(x,y)与图像像素坐标系中的坐标(u,v)之间的关系可以用齐次坐标表示为:
u v 1 = 1 / dx 0 u 0 0 1 / dy v 0 0 0 1 x y 1
摄像机坐标(xc,yc,zc)与图像物理坐标(x,y)可以根据相似三角形的关系得到
x = f X c Z c
y = f Y c Z c
用齐次坐标和矩阵表示为:
Z c x y 1 = f 0 0 0 0 f 0 0 0 0 1 0 X c Y c Z c 1
5)对步骤2)中得到的整体的三维点云数据利用八叉树的方法进行拓扑划分,在进行八叉树拓扑划分之后,对每一个子立方体进行编码,编码为Q,编码Q是每一个子立方体的唯一编码,将编码Q对应子立方体中的三维点记为ai,其中i∈{0,…,k},k为该子立方体中三维点的个数,本实施例取k为50;
6)计算每一个子立方体中的三维点ai的平均距离其中平均距离由以下公式计算:
l ‾ = 1 k Σ j = 1 k ( a ix - a jx ) 2 + ( a iy - a jy ) 2 + ( a iz - a jz ) 2
式中:ai表示一个三维点,aj表示不同于ai的一个三维点,aix表示ai点的x坐标值,aiy表示ai点的y坐标值,aiz表示ai点的z坐标值,ajx表示aj点的x坐标值,ajy表示aj点的y坐标值,ajz表示aj点的z坐标值,aj,j∈{1,…,k}。
比较三维点ai的平均距离l的大小,将最小的平均距离l所对应的三维点记为a0,接着将三维点ai所对应的灰度值gi与三维点a0所对应的灰度值g0进行比较,获得灰度值gi与灰度值g0差的绝对值,该绝对值记为e,即
e=|gi-g0|
通过比较绝对值e与给定阈值的大小,来判断该处灰度值变换是否明显,特征信息是否充足,并根据灰度图像像素坐标系与三维点云数据的对应关系设定相应的精简率。
若绝对值e小于给定阈值,则认为该处灰度值变换不明显,特征信息不足,并根据灰度图像像素坐标系与三维点云数据的对应关系设定精简率为95%;反之,若绝对值e大于给定阈值,则认为该处灰度值变换明显,特征信息较多,并根据灰度图像像素坐标系与三维点云数据的对应关系设定精简率为10%。附图中,为了展示精简效果,设定灰度值变换不明显处精简率为10%,而灰度值变换明显处精简率为95%。
上述实施例步骤5)中各子立方体中三维点的个数可以按照实际需要任意取值。
上述实施例中的灰度值gi和三维点的平均距离还可以采用其他计算方法得到。
上述实施例中的精简率还可以按照具体情况设定不同的精简率。

Claims (1)

1.一种三维点云数据的处理方法,其特征在于:包括以下步骤:
1)将三维物体放置在旋转平台上,利用Kinect相机同时采集三维物体在多个视角下的彩色图像与深度图信息,并由深度图信息得到三维物体在多个视角下的三维点云数据;
2)将多个视角下的三维点云数据利用配准算法得到三维物体整体的三维点云数据;
3)将彩色图像进行灰度化处理得到灰度图像,将灰度图像的每个像素点的灰度值记为gi
4)进行坐标系变换:首先将灰度图像像素坐标系对应到彩色图像像素坐标系,并按照以下转换方式将彩色图像像素坐标系变换至深度图像像素坐标系:彩色图像像素坐标系→彩色图像物理坐标系→彩色图像摄像机坐标系→世界坐标系→深度图像摄像机坐标系→深度图像物理坐标系→深度图像像素坐标系,最后将深度图像像素坐标系对应到整体的三维点云数据中;
5)对步骤2)中得到的整体的三维点云数据利用八叉树的方法进行拓扑划分,在进行八叉树拓扑划分之后,对每一个子立方体进行编码,编码为Q,编码Q是每一个子立方体的唯一编码,将编码Q对应子立方体中的三维点记为ai,其中i∈{0,…,k},k为该子立方体中三维点的个数;
6)计算每一个子立方体中的三维点ai的平均距离比较三维点ai的平均距离的大小,将最小的平均距离所对应的三维点记为a0,接着将三维点ai所对应的灰度值gi与三维点a0所对应的灰度值g0进行比较,获得灰度值gi与灰度值g0差的绝对值,该绝对值记为e,通过比较绝对值e与给定阈值的大小,来判断该处灰度值变换是否明显,特征信息是否充足,并根据灰度图像像素坐标系与三维点云数据的对应关系设定相应的精简率。
CN201510160208.4A 2015-04-07 2015-04-07 一种三维点云数据的处理方法 Active CN104778691B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510160208.4A CN104778691B (zh) 2015-04-07 2015-04-07 一种三维点云数据的处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510160208.4A CN104778691B (zh) 2015-04-07 2015-04-07 一种三维点云数据的处理方法

Publications (2)

Publication Number Publication Date
CN104778691A true CN104778691A (zh) 2015-07-15
CN104778691B CN104778691B (zh) 2017-05-17

Family

ID=53620137

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510160208.4A Active CN104778691B (zh) 2015-04-07 2015-04-07 一种三维点云数据的处理方法

Country Status (1)

Country Link
CN (1) CN104778691B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105184789A (zh) * 2015-08-31 2015-12-23 中国科学院自动化研究所 一种基于点云约减的相机定位系统及方法
CN108346134A (zh) * 2017-01-24 2018-07-31 莱卡地球系统公开股份有限公司 对着色的三维点云进行图像修复的方法和装置
CN109785241A (zh) * 2017-11-15 2019-05-21 宁波盈芯信息科技有限公司 一种畸变校正方法及装置、一种深度感知计算方法及装置
CN110915219A (zh) * 2017-07-13 2020-03-24 交互数字Vc控股公司 用于对几何形状由基于八叉树的结构表示的有色点云的颜色进行编码/解码的方法和装置
CN111161338A (zh) * 2019-12-26 2020-05-15 浙江大学 一种基于二维图像灰度进行深度预测的点云密度提升方法
CN111476841B (zh) * 2020-03-04 2020-12-29 哈尔滨工业大学 一种基于点云和图像的识别定位方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101021954A (zh) * 2007-03-23 2007-08-22 东南大学 三维扫描的点云精简方法
CN103310481A (zh) * 2013-05-20 2013-09-18 东南大学 一种基于模糊熵迭代的点云精简方法
US20150036870A1 (en) * 2013-07-30 2015-02-05 The Boeing Company Automated graph local constellation (glc) method of correspondence search for registration of 2-d and 3-d data

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101021954A (zh) * 2007-03-23 2007-08-22 东南大学 三维扫描的点云精简方法
CN103310481A (zh) * 2013-05-20 2013-09-18 东南大学 一种基于模糊熵迭代的点云精简方法
US20150036870A1 (en) * 2013-07-30 2015-02-05 The Boeing Company Automated graph local constellation (glc) method of correspondence search for registration of 2-d and 3-d data

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
武敬民等: ""基于法向夹角与Hausdorff距离的点云精简方法研究"", 《微电子学与计算机》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105184789A (zh) * 2015-08-31 2015-12-23 中国科学院自动化研究所 一种基于点云约减的相机定位系统及方法
CN105184789B (zh) * 2015-08-31 2017-12-05 中国科学院自动化研究所 一种基于点云约减的相机定位系统及方法
CN108346134A (zh) * 2017-01-24 2018-07-31 莱卡地球系统公开股份有限公司 对着色的三维点云进行图像修复的方法和装置
CN108346134B (zh) * 2017-01-24 2022-04-05 莱卡地球系统公开股份有限公司 对三维点云进行着色的方法和测量仪器
CN110915219A (zh) * 2017-07-13 2020-03-24 交互数字Vc控股公司 用于对几何形状由基于八叉树的结构表示的有色点云的颜色进行编码/解码的方法和装置
CN109785241A (zh) * 2017-11-15 2019-05-21 宁波盈芯信息科技有限公司 一种畸变校正方法及装置、一种深度感知计算方法及装置
CN111161338A (zh) * 2019-12-26 2020-05-15 浙江大学 一种基于二维图像灰度进行深度预测的点云密度提升方法
CN111161338B (zh) * 2019-12-26 2022-05-17 浙江大学 一种基于二维图像灰度进行深度预测的点云密度提升方法
CN111476841B (zh) * 2020-03-04 2020-12-29 哈尔滨工业大学 一种基于点云和图像的识别定位方法及系统

Also Published As

Publication number Publication date
CN104778691B (zh) 2017-05-17

Similar Documents

Publication Publication Date Title
CN104778691A (zh) 一种三维点云数据的处理方法
CN110335343B (zh) 基于rgbd单视角图像人体三维重建方法及装置
CN104077804B (zh) 一种基于多帧视频图像构建三维人脸模型的方法
CN104061907B (zh) 基于步态三维轮廓匹配合成的视角大幅可变步态识别方法
CN103400409B (zh) 一种基于摄像头姿态快速估计的覆盖范围3d可视化方法
CN103810685B (zh) 一种深度图的超分辨率处理方法
CN104616345B (zh) 一种基于八叉树森林压缩的三维体素存取方法
CN106709947A (zh) 一种基于rgbd相机的三维人体快速建模系统
CN115564926B (zh) 基于影像建筑物结构学习的三维面片模型构建方法
CN104599284A (zh) 基于多视角手机自拍图像的三维人脸重建方法
CN103971366A (zh) 一种基于双权重聚合的立体匹配方法
CN105938619A (zh) 一种融合RGB和Depth信息的视觉里程计实现方法
CN102867313A (zh) 一种融合区域颜色和HoG特征的视觉显著性检测方法
CN104318560B (zh) 一种基于非对称逆布局模型的图像分割方法
CN104657986B (zh) 一种基于子空间融合和一致性约束的准稠密匹配扩展方法
CN103514625A (zh) 基于多视角自适应特征配准的三维重建方法
CN105069751A (zh) 一种深度图像缺失数据的插值方法
Bódis-Szomorú et al. Efficient edge-aware surface mesh reconstruction for urban scenes
CN115272494B (zh) 相机与惯性测量单元的标定方法、装置和计算机设备
CN111754618A (zh) 一种面向对象的实景三维模型多层次解译方法及系统
CN111145338A (zh) 一种基于单视角rgb图像的椅子模型重建方法及系统
CN103679808A (zh) 利用二维核磁图像重建头部三维模型的方法及系统
CN113392879A (zh) 一种航空影像多视图匹配方法
CN115063542A (zh) 一种几何不变量的预测和模型构建方法与系统
CN102621143B (zh) 基于多维阈值约束的双视角多气泡同名匹配方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant