CN104794748A - 基于Kinect视觉技术的三维空间地图构建方法 - Google Patents

基于Kinect视觉技术的三维空间地图构建方法 Download PDF

Info

Publication number
CN104794748A
CN104794748A CN201510116276.0A CN201510116276A CN104794748A CN 104794748 A CN104794748 A CN 104794748A CN 201510116276 A CN201510116276 A CN 201510116276A CN 104794748 A CN104794748 A CN 104794748A
Authority
CN
China
Prior art keywords
point cloud
kinect
dimensional
data
construction method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510116276.0A
Other languages
English (en)
Inventor
张云
孟婉婷
杨弘儒
苏培涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Maritime University
Shanghai Ocean University
Original Assignee
Shanghai Maritime University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Maritime University filed Critical Shanghai Maritime University
Priority to CN201510116276.0A priority Critical patent/CN104794748A/zh
Publication of CN104794748A publication Critical patent/CN104794748A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种基于Kinect视觉技术的三维空间地图构建方法,包括以下步骤:步骤S1,基于light coding的Kinect成像技术获取视场空间的各个点的三维坐标,构成单幅点云,且进行点云处理,获取点云数据;步骤S2,基于ICP算法的点云配准技术统一点云数据到同一坐标系下;步骤S3,基于Octree的点云压缩及可视化技术,提升点云读写速度、减少数据的存储空间;步骤S4,基于贪婪三角化的点云曲面重建技术,获取无序离散点云,构建出空间物体的模型。其优点表现在:成本与能源消耗上都大大降低;Kinect配备了RGB彩色摄像机,故构建出的地图能够更加丰富彩色纹理的信息;避免了人为进行标定的麻烦,提高了三维重建的效率;可应用与机器人导航、数字城市、立体测量等领域。

Description

基于Kinect视觉技术的三维空间地图构建方法
技术领域
本发明涉及三维空间构建技术领域,具体地说,是一种基于Kinect视觉技术的三维空间地图构建方法。
背景技术
视觉是获知外界物体的形状、亮度、颜色的等重要信息的渠道,研究表明人类80%以上的外界信息是通过视觉获得。近年来,计算机视觉技术的不断发展,可代替人类眼睛完成对目标物体的识别以及跟踪测试的功能。尤其是通过计算机视技术研究三维空间成为现在研究的热点。
三维空间研究内容非常广泛,包含有以数字城市为目的的城市环境模型构建,建筑物、文物或艺术品的模型构建,大型室内环境模型的构建以及医学图像的三维表面模型的构建;移动机器人在未知室内环境的三维感知问题;以及立体测量等。
传统的三维空间地图构建方法主要有两种:一种是CAD建模,但其人力成本高,建模周期长,另一种是使用类似于激光扫描仪等复杂的传感器,虽然能满足对地图构建精度的要求,但是设备造价昂贵,构建成本过高。
中国专利文献CN201310302977.4,申请日2013年07月18日,专利名称为“基于Kinect相机的术中实时注册的方法”,公开了一种基于Kinect相机的术中实时注册的方法,包括如下步骤:在患者腹部粘贴标记点;扫描患者腹部,获取患者腹部的术前图像;在术前图像中提取术前标记点;利用Kinect相机获取患者腹部的术中图像,所述术中图像包括在患者腹部设置的标记点的图像信息;在术中图像中提取术中标记点;对术前标记点与术中标记点作配准得到术前图像与术中图像之间的变换关系。上述基于Kinect相机的术中实时注册方法能够自动计算标记点在术前图像及术中图像中的位置,避免了手动取点的过程,同时整个注册过程对人体不具有伤害性,且通过Kinect相机采集到的术中图像只有很小的误差,从而有效降低配准误差,最终得到术前图像与术中图像之间的变换关系并用于手术导航系统中。
中国专利文献CN201410456796.1,申请日2014年09月10日,专利名称为“一种基于SIFT和LBP的点云配准的接触网三维重建方法”,公开了一种基于SIFT和LBP的点云配准的接触网三维重建方法,通过体感外设Kinect获取待重建接触网零部件所在环境初始三维点云数据,对其进行去噪、简化、分割聚类、融合等预处理操作,得到待重建接触网零部件单视角点云数据;然后采用SIFT算法进行关键点提取,并运用均匀模式LBP特征构建关键点描述向量,依照向量间的距离确定不同点云中关键点间对应关系;接着利用粗配准和ICP精配准法完成点云配准,获得待重建接触网零部件完整三维点云数据;最后利用泊松曲面重建法完成三维重建,得到三维模型。本发明方法针对点云配准是影响三维重建速度的关键步骤这一重要因素,运用均匀模式LBP特征来构建关键点描述向量,从而降低向量维数,加快对应关系匹配速度,加速配准,从而提高三维重建的速度。但是关于基于Kinect视觉技术的三维空间地图构建方法目前还未见报道。
综上所述,亟需一种对室内空间进行扫描重建室内环境,建立三维空间环境,成本低、丰富彩色纹理信息的基于Kinect视觉技术的三维空间地图构建方法。
发明内容
本发明的目的是针对现有技术中的不足,提供一种对室内空间进行扫描重建室内环境,建立三维空间环境,成本低、丰富彩色纹理信息的基于Kinect视觉技术的三维空间地图构建方法。
为实现上述目的,本发明采取的技术方案是:
一种基于Kinect视觉技术的三维空间地图构建方法,包括以下步骤:步骤S1,基于light coding的Kinect成像技术获取视场空间的各个点的三维坐标,构成单幅点云,且进行点云处理,获取点云数据;步骤S2,基于ICP算法的点云配准技术统一点云数据到同一坐标系下;步骤S3,基于Octree的点云压缩及可视化技术,提升点云读写速度、减少数据的存储空间;步骤S4,基于贪婪三角化的点云曲面重建技术,获取无序离散点云,构建出空间物体的模型。
所述步骤S2中采用ICP算法结合K维树数据结构处理,加快算法的收敛速度。
所述步骤S4中基于OpenNI框架驱动Kinect,获取原始深度数据及RGB数据,获取得到标准数据,利用步骤S1和步骤S2中的点云处理及配准算法,构建出三维空间的模型,基于QT框架实现用户的可视化。
本发明优点在于:
1、本发明的一种基于Kinect视觉技术的三维空间地图构建方法,与传统采用激光扫描等技术相比,本发明在成功实现三维地图构建的同时,成本与能源消耗上都大大降低。
2、采用自主开发点云处理及配准算法,避免了人为进行标定的麻烦,提高了三维重建的效率;
3、Kinect配备了RGB彩色摄像机,故构建出的地图能够更加丰富彩色纹理的信息;
4、Kincet作为视觉传感器,方便经济,信息量大,且与激光传感器相比,Kinect能够快速获取彩色场景图像和深度信息;
5、采用低成本点云获取设备Kinect,基于Qt跨平台程序开发框架及自主开发的点云处理以及点云配准等一系列技术,对室内空间进行扫描重建室内环境,建立三维空间环境。可应用与机器人导航、数字城市、立体测量等领域。
附图说明
附图1为发明的一种基于Kinect视觉技术的三维空间地图构建方法的流程图。
附图2为获取点云数据的图像。
附图3为点云数据配准的图像。
附图4为构建模型图。
附图5为数据流程图。
具体实施方式
下面结合附图对本发明提供的具体实施方式作详细说明。
实施例1
请参照图1,图1为发明的一种基于Kinect视觉技术的三维空间地图构建方法的流程图。一种基于Kinect视觉技术的三维空间地图构建方法,具体包括以下步骤:步骤S1,基于light coding的Kinect成像技术获取视场空间的各个点的三维坐标,构成单幅点云,且进行点云处理,获取点云数据;其中,Kinect是一种体感外设,共有三个摄像头,中间镜头为RGB彩色摄像机,左右边镜头分别为红外线发射器和红外线CMOS摄像机组成。其中红外线能对空间进行编码,也称为Light coding技术,就是用光源照明给需要测量的空间编上码,实质是结构光技术。只要在空间中打上这样的结构光,整个空间就都被做了标记,把一个物体放进这个空间,只要看看物体上面的散斑图案,就可以确定物体的位置,以此获取视场空间中各个点的三维坐标,构成单幅点云,获取点云数据,如图2所示,图2为获取点云数据的图像。
其中,散斑为雷射光照射到粗糙物体或是穿透毛玻璃光纤后所形成的反射斑点,散斑具有高度随机性,随着距离变换图像,空间中任何两处的散斑都是不同的团,等于整个空间加上了标记,所以任何物体进入该空间,以及移动时,都可确切记录物体的位置。
步骤S2,基于ICP算法的点云配准技术统一点云数据到同一坐标系下;具体为:请参照图3,图3为点云数据配准的图像。点云配准过程采用ICP算法结合K维树数据结构处理。ICP算法在大量点云处理中通常会消耗很多时间,通过K维树可以加速对邻近点的搜索,加快算法的收敛速度。只要通过移动设备改变其视角,进而获取多幅不同视角下的点云数据,就可以通过点云配准技术统一到同一坐标系下。
其中,ICP算法(Iterative Closest Point)也叫最近点迭代算法,是一种高层次的基于自由形态曲面的配准方法,该方法通过迭代运算实现点云之间配准的最佳结果。K维树是一种K维二叉查找数,每个节点表示K维空间的一个点,树的毎一层都根据这层的分辩器做出分支决策。
步骤S3,基于Octree的点云压缩及可视化技术,提升点云读写速度、减少数据的存储空间;具体为:配准过程中,点云数据量不断增加,海量的数据将为计算机处理运算增加沉重的负担,大大降低显示、处理和分析点云数据的效率。因此,为了在保留点云数据特征的同时,达到提升点云读写速度的目的,采用基于Octree(八叉树)的点云压缩技术,大大减少了数据的存储空间,提升了点云读写速度。
其中,八叉树是一种用于描述三维空间的树状数据结构。八叉树的每个节点表示一个正方体的体积元素,每个节点有八个子节点,将八个子节点所表示的体积元素加在一起就等于父节点的体积。
步骤S4,基于贪婪三角化的点云曲面重建技术,获取无序离散点云,构建出空间物体的模型,请参照图4,图4为构建模型图。点云的曲面重建采用贪婪投影三角化算法对点云进行三角化,再构建出曲面模型。
请参照图5,图5为数据流程图,基于OpenNI框架驱动Kinect,获取原始深度数据及RGB数据,获取得到标准数据,利用上述的点云处理及配准算法,构建出三维空间的模型,基于QT框架实现用户的可视化。其QT作为高质量的跨平台框架,具有支持平台广泛,功能完整,开源执行效率高,开发工具完备等特性。
本发明的一种基于Kinect视觉技术的三维空间地图构建方法,与传统采用激光扫描等技术相比,本发明在成功实现三维地图构建的同时,成本与能源消耗上都大大降低。采用自主开发点云处理及配准算法,避免了人为进行标定的麻烦,提高了三维重建的效率;Kincet作为视觉传感器,方便经济,信息量大,且与激光传感器相比,Kinect能够快速获取彩色场景图像和深度信息;Kinect配备了RGB彩色摄像机,故构建出的地图能够更加丰富彩色纹理的信息;采用低成本点云获取设备Kinect,基于Qt跨平台程序开发框架及自主开发的点云处理以及点云配准等一系列技术,对室内空间进行扫描重建室内环境,建立三维空间环境。可应用与机器人导航、数字城市、立体测量等领域。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员,在不脱离本发明方法的前提下,还可以做出若干改进和补充,这些改进和补充也应视为本发明的保护范围。

Claims (3)

1.一种基于Kinect视觉技术的三维空间地图构建方法,其特征在于,包括以下步骤:步骤S1,基于light coding的Kinect成像技术获取视场空间的各个点的三维坐标,构成单幅点云,且进行点云处理,获取点云数据;步骤S2,基于ICP算法的点云配准技术统一点云数据到同一坐标系下;步骤S3,基于Octree的点云压缩及可视化技术,提升点云读写速度、减少数据的存储空间;步骤S4,基于贪婪三角化的点云曲面重建技术,获取无序离散点云,构建出空间物体的模型。
2.根据权利要求1所述的方法,其特征在于,所述步骤S2中采用ICP算法结合K维树数据结构处理,加快算法的收敛速度。
3.根据权利要求1所述的方法,其特征在于,所述步骤S4中基于OpenNI框架驱动Kinect,获取原始深度数据及RGB数据,获取得到标准数据,利用步骤S1和步骤S2中的点云处理及配准算法,构建出三维空间的模型,基于QT框架实现用户的可视化。
CN201510116276.0A 2015-03-17 2015-03-17 基于Kinect视觉技术的三维空间地图构建方法 Pending CN104794748A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510116276.0A CN104794748A (zh) 2015-03-17 2015-03-17 基于Kinect视觉技术的三维空间地图构建方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510116276.0A CN104794748A (zh) 2015-03-17 2015-03-17 基于Kinect视觉技术的三维空间地图构建方法

Publications (1)

Publication Number Publication Date
CN104794748A true CN104794748A (zh) 2015-07-22

Family

ID=53559527

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510116276.0A Pending CN104794748A (zh) 2015-03-17 2015-03-17 基于Kinect视觉技术的三维空间地图构建方法

Country Status (1)

Country Link
CN (1) CN104794748A (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105446338A (zh) * 2015-12-21 2016-03-30 福州华鹰重工机械有限公司 云辅助自动驾驶方法及系统
CN105700525A (zh) * 2015-12-07 2016-06-22 沈阳工业大学 基于Kinect传感器深度图机器人工作环境不确定性地图构建法
CN106897719A (zh) * 2017-01-06 2017-06-27 沈阳工业大学 基于Kinect的典型零部件识别与定位方法
CN106991723A (zh) * 2015-10-12 2017-07-28 莲嚮科技有限公司 立体虚拟实境的互动房屋浏览方法及其系统
CN107123161A (zh) * 2017-06-14 2017-09-01 西南交通大学 一种基于narf和fpfh的接触网零全网三维重建方法
CN107169089A (zh) * 2017-05-12 2017-09-15 武汉理工大学 一种基于聚类的多维流数据可视分析方法
CN107263473A (zh) * 2017-06-19 2017-10-20 中国人民解放军国防科学技术大学 一种基于虚拟现实的人机交互方法
CN107272454A (zh) * 2017-06-19 2017-10-20 中国人民解放军国防科学技术大学 一种基于虚拟现实的实时人机交互方法
CN108765270A (zh) * 2018-05-30 2018-11-06 链家网(北京)科技有限公司 一种虚拟三维空间标签绑定方法及装置
CN108898629A (zh) * 2018-06-06 2018-11-27 中国民航大学 用于三维建模中航空行李表面纹理增强的投影编码方法
CN109286946A (zh) * 2018-11-13 2019-01-29 山东建筑大学 基于无依托定位的移动通信室内无线网络优化方法和系统
CN115564820A (zh) * 2022-11-10 2023-01-03 武汉工程大学 基于贪婪投影三角化的体积确定方法、系统、设备及介质
CN117095119A (zh) * 2023-08-17 2023-11-21 郑州众益信息科技有限公司 一种地空一体测绘方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005088539A2 (en) * 2004-03-15 2005-09-22 Université Catholique de Louvain Augmented reality system with coregistration of virtual objects on images of real objects
CN102938142A (zh) * 2012-09-20 2013-02-20 武汉大学 基于Kinect的室内LiDAR缺失数据填补方法
CN103279987A (zh) * 2013-06-18 2013-09-04 厦门理工学院 基于Kinect的物体快速三维建模方法
WO2013174671A1 (en) * 2012-05-22 2013-11-28 Telefonica, S.A. A method and a system for generating a realistic 3d reconstruction model for an object or being

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005088539A2 (en) * 2004-03-15 2005-09-22 Université Catholique de Louvain Augmented reality system with coregistration of virtual objects on images of real objects
WO2013174671A1 (en) * 2012-05-22 2013-11-28 Telefonica, S.A. A method and a system for generating a realistic 3d reconstruction model for an object or being
CN102938142A (zh) * 2012-09-20 2013-02-20 武汉大学 基于Kinect的室内LiDAR缺失数据填补方法
CN103279987A (zh) * 2013-06-18 2013-09-04 厦门理工学院 基于Kinect的物体快速三维建模方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
SIYUAN LIN 等: "Preproessing and Modeling for Visual-based 3D Indoor Scene Reconstruction", 《THE 8TH INTERNATIONAL CONFERENCE ON COMPUTER SCIENCE & EDUCATION (ICCSE 2013)》 *
张会霞: "基于八叉树的点云数据的组织与可视化", 《太原师范学院学报(自然科学版)》 *
王君 等: "一种ICP 改进算法", 《重庆理工大学学报(自然科学)》 *

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106991723A (zh) * 2015-10-12 2017-07-28 莲嚮科技有限公司 立体虚拟实境的互动房屋浏览方法及其系统
CN105700525B (zh) * 2015-12-07 2018-09-07 沈阳工业大学 基于Kinect传感器深度图机器人工作环境不确定性地图构建法
CN105700525A (zh) * 2015-12-07 2016-06-22 沈阳工业大学 基于Kinect传感器深度图机器人工作环境不确定性地图构建法
CN105446338A (zh) * 2015-12-21 2016-03-30 福州华鹰重工机械有限公司 云辅助自动驾驶方法及系统
CN106897719B (zh) * 2017-01-06 2019-09-06 沈阳工业大学 基于Kinect的典型零部件识别与定位方法
CN106897719A (zh) * 2017-01-06 2017-06-27 沈阳工业大学 基于Kinect的典型零部件识别与定位方法
CN107169089A (zh) * 2017-05-12 2017-09-15 武汉理工大学 一种基于聚类的多维流数据可视分析方法
CN107123161A (zh) * 2017-06-14 2017-09-01 西南交通大学 一种基于narf和fpfh的接触网零全网三维重建方法
CN107263473A (zh) * 2017-06-19 2017-10-20 中国人民解放军国防科学技术大学 一种基于虚拟现实的人机交互方法
CN107272454A (zh) * 2017-06-19 2017-10-20 中国人民解放军国防科学技术大学 一种基于虚拟现实的实时人机交互方法
CN108765270A (zh) * 2018-05-30 2018-11-06 链家网(北京)科技有限公司 一种虚拟三维空间标签绑定方法及装置
CN108898629B (zh) * 2018-06-06 2021-06-08 中国民航大学 用于三维建模中航空行李表面纹理增强的投影编码方法
CN108898629A (zh) * 2018-06-06 2018-11-27 中国民航大学 用于三维建模中航空行李表面纹理增强的投影编码方法
CN109286946A (zh) * 2018-11-13 2019-01-29 山东建筑大学 基于无依托定位的移动通信室内无线网络优化方法和系统
CN109286946B (zh) * 2018-11-13 2021-03-09 山东建筑大学 基于无依托定位的移动通信室内无线网络优化方法和系统
CN115564820A (zh) * 2022-11-10 2023-01-03 武汉工程大学 基于贪婪投影三角化的体积确定方法、系统、设备及介质
CN115564820B (zh) * 2022-11-10 2023-03-21 武汉工程大学 基于贪婪投影三角化的体积确定方法、系统、设备及介质
CN117095119A (zh) * 2023-08-17 2023-11-21 郑州众益信息科技有限公司 一种地空一体测绘方法及系统
CN117095119B (zh) * 2023-08-17 2024-05-28 郑州众益信息科技有限公司 一种地空一体测绘方法及系统

Similar Documents

Publication Publication Date Title
CN104794748A (zh) 基于Kinect视觉技术的三维空间地图构建方法
CN109003325B (zh) 一种三维重建的方法、介质、装置和计算设备
Gomes et al. 3D reconstruction methods for digital preservation of cultural heritage: A survey
CN107240129A (zh) 基于rgb‑d相机数据的物体及室内小场景恢复与建模方法
CN107392947B (zh) 基于轮廓共面四点集的2d-3d图像配准方法
CN105453559B (zh) 手持式便携光学扫描器及其使用方法
CN105547189B (zh) 基于变尺度的高精度光学三维测量方法
CN106803267A (zh) 基于Kinect的室内场景三维重建方法
CN110084243B (zh) 一种基于二维码和单目相机的档案识别与定位方法
CN104537705B (zh) 基于增强现实的移动平台三维生物分子展示系统和方法
CN105184857A (zh) 基于点结构光测距的单目视觉重建中尺度因子确定方法
CN101667303A (zh) 一种基于编码结构光的三维重建方法
CN107833273B (zh) 基于三维仿真模型的倾斜摄影三维模型对象化应用方法
WO2012096747A1 (en) Forming range maps using periodic illumination patterns
CN104123751A (zh) Kinect与关节臂结合的复合式测量和三维重建方法
CN106155299B (zh) 一种对智能设备进行手势控制的方法及装置
CN109559349A (zh) 一种用于标定的方法和装置
CN112347882A (zh) 一种智能分拣控制方法和智能分拣控制系统
Andrade et al. Digital preservation of Brazilian indigenous artworks: Generating high quality textures for 3D models
CN109712232A (zh) 一种基于光场的物体表面轮廓三维成像方法
CN109540023A (zh) 基于二值网格编码模板结构光的物体表面深度值测量方法
CN103440638A (zh) 利用双平面镜装置和圆环点性质求解摄像机内参数
CN114792345B (zh) 一种基于单目结构光系统的标定方法
Taubin et al. 3d scanning for personal 3d printing: build your own desktop 3d scanner
Saval-Calvo et al. μ-MAR: multiplane 3D marker based registration for depth-sensing cameras

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150722