CN108665535A - 一种基于编码光栅结构光的三维结构重建方法与系统 - Google Patents

一种基于编码光栅结构光的三维结构重建方法与系统 Download PDF

Info

Publication number
CN108665535A
CN108665535A CN201810444467.3A CN201810444467A CN108665535A CN 108665535 A CN108665535 A CN 108665535A CN 201810444467 A CN201810444467 A CN 201810444467A CN 108665535 A CN108665535 A CN 108665535A
Authority
CN
China
Prior art keywords
target object
structured light
dimensional structure
coding grating
point cloud
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810444467.3A
Other languages
English (en)
Inventor
李虹
杜先鹏
郭俊兴
代启强
金传广
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Xiaoyou Intelligent Technology Co Ltd
Original Assignee
Qingdao Xiaoyou Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Xiaoyou Intelligent Technology Co Ltd filed Critical Qingdao Xiaoyou Intelligent Technology Co Ltd
Priority to CN201810444467.3A priority Critical patent/CN108665535A/zh
Publication of CN108665535A publication Critical patent/CN108665535A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85Stereo camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds

Abstract

本发明公开了一种基于编码光栅结构光的三维结构重建方法,A、将编码光栅结构光投射到目标物体表面,利用编码光栅结构光对目标物体表面进行扫描;B、利用双目立体视觉装置获取目标物体两个不同视角的图像;C、对双目图像进行处理,并利用处理后数据和编码光栅条纹进行相位计算和立体匹配,以此计算得到物体表面结构的点云数据;D、通过点云数据对目标物体的三维结构表面进行重建;E、对重建后的多帧深度图像进行配准、拼接,获得目标物体的三维结构模型。基于编码光栅结构光技术的3D机器视觉技术,无需单独进行手工标记点标记,极大的提高了建模精度以及建模速度。

Description

一种基于编码光栅结构光的三维结构重建方法与系统
技术领域
本发明涉及结构光扫描成像领域,具体涉及一种基于编码光栅结构光的三维结构重建方法与系统。
背景技术
随着社会的发展,3D建模技术越来越普遍。双目3D建模技术中,一般需要做大量标记点才能进行三维结构物体的识别与重建。传统的双目3D建模方法其效率和可靠性都无法保证,严重制约了3D机器视觉技术在工业识别、人体扫描等领域的应用。
因此,现有技术还需要进一步改进和发展。
发明内容
本发明的目的是为了提供一种基于编码光栅结构光的三维结构重建方法与系统,旨在解决现有建模方法效率低、可靠性差的问题。
所采用的技术方案为:
一种基于编码光栅结构光的三维结构重建方法,
A、将编码光栅结构光投射到目标物体表面,利用编码光栅结构光对目标物体表面进行扫描;
B、利用双目立体视觉装置获取目标物体两个不同视角的图像;
C、对双目图像进行处理,并利用处理后数据和编码光栅条纹进行相位计算和立体匹配,以此计算得到物体表面结构的点云数据;
D、通过点云数据对目标物体的三维结构表面进行重建;
E、对重建后的多帧深度图像进行配准、拼接,获得目标物体的三维结构模型。
编码光栅结构光由红外激光扫描模组输出,针对同一目标物体,红外激光扫描模组输出至少两种不同频率的编码光栅结构光,编码光栅结构光的不同之处在于光栅线数不同及相移不同。
双目立体视觉装置为双目立体视觉相机,或者,双目立体视觉装置由两个黑白相机或者两个彩色相机配置对应波长的滤光片组成。
双目立体视觉装置使用前进行联合标定,计算得到左右相机的内外参数,进而计算得双目立体视觉装置中左右相机之间的旋转矩阵和位移矢量。
深度图像处理具体包括:深度图像中有效区域的选取,利用旋转矩阵和位移矢量进行双目立体矫正,依据光栅图像进行分析解相位,立体匹配,去噪声处理等。
步骤C具体为:
通过标定和相位匹配找到物点的对应点对,然后基于三角测量原理求出该组点所对应的空间点坐标,得到目标物体表面结构的点云数据,对得到的点云数据进行去燥和平滑处理。
步骤E具体为:利用从不同的方位对目标物体进行多次扫描测量获得多个深度图像,计算每一深度图像的点云数据,确定不同点云数据之间的旋转及平移关系,将多次测量的点云数据拼接成一个整体,利用Geomagic对拼接后的点云进行配准拟合,生成目标物体的三维结构模型。
双目立体视觉装置的联合标定的定标物为机器视觉MV-SB型平面标定板。
系统包括:
扫描模块,用于将编码光栅结构光投射到目标物体表面,利用编码光栅结构光对目标物体表面进行扫描;
图像获取模块,用于利用双目立体视觉装置获取目标物体的深度图像;
计算模块,用于利用处理后数据和编码光栅条纹计算得到点云数据,并通过点云数据对目标物体的三维结构进行重建;
建构模块,用于对重建后的多帧深度图像进行合并,配准,获得目标物体的三维结构模型。
有益效果:本发明提供一种基于编码光栅结构光的三维结构重建方法与系统,基于编码光栅结构光技术的3D机器视觉技术,无需单独进行手工标记点标记,极大的提高了建模精度以及建模速度。
附图说明
图1是本发明具体实施例中三维结构重建方法的流程示意图。
图2是本发明具体实施例中硬件组成结构示意图。
图3是本发明具体实施例中的实物模型。
图4是本发明具体实施例中实物模型重建的三维点云结构。
图5是本发明具体实施例中三维重建系统的结构示意图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚、明确,以下参照附图并举实施例对本发明进一步详细说明。
如图1所示,一种基于编码光栅结构光的三维结构重建方法,步骤包括:
S1、将编码光栅结构光投射到如图3所示的物体表面,利用编码光栅结构光对目标物体表面进行扫描;编码光栅结构光由红外激光扫描模组300输出,针对同一目标物体,红外激光扫描模组300输出至少两种不同频率的编码光栅结构光,编码光栅结构光的不同之处在于光栅线数不同及相移不同。
S2、利用双目立体视觉装置获取目标物体两个不同视角的图像;如图2所示,双目立体视觉装置为两个彩色相机相机100和相机200配置对应波长的滤光片组成。双目立体视觉装置使用前进行联合标定,计算得到相机100和相机200的内外参数,进而计算得双目立体视觉装置中相机100和相机200之间的旋转矩阵和位移矢量。双目立体视觉装置的联合标定的定标物为机器视觉MV-SB型平面标定板。
S3、对双目图像进行处理,并利用处理后数据和编码光栅条纹进行相位和立体匹配,以此计算得到物体表面结构的点云数据;通过标定和相位匹配找到物点的对应点对,然后基于三角测量原理求出该组点所对应的空间点坐标,得到目标物体表面结构的点云数据,对得到的点云数据进行去燥和平滑处理;深度图像处理具体包括:深度图像中有效区域的选取,利用旋转矩阵和位移矢量进行双目立体矫正,依据光栅图像进行分析解相位,立体匹配,去噪声处理等。
S4、通过点云数据对目标物体的三维结构表面进行重建;点云数据三维重建,具体步骤可分为编码图像的采集、编码图像的处理和三维点云的获取。
S5、对重建后的多帧深度图像进行配准、拼接,获得目标物体的三维结构模型。利用从不同的方位对目标物体进行多次扫描测量获得多个深度图像,计算每一深度图像的点云数据,确定不同点云数据之间的旋转及平移关系,将多次测量的点云数据拼接成一个整体,利用Geomagic对拼接后的点云进行配准拟合,生成如图4所示的目标物体的三维结构模型。具体的,拼接方法可选用基于机械约束的点云拼接方法、基于标志点的点云拼接方法等。
如图5所示,基于编码光栅结构光的三维重建系统包括:
扫描模块,用于将编码光栅结构光投射到目标物体表面,利用编码光栅结构光对目标物体表面进行扫描;
图像获取模块,用于利用双目立体视觉装置获取目标物体的深度图像;
计算模块,用于利用处理后数据和编码光栅条纹计算得到点云数据,并通过点云数据对目标物体的三维结构进行重建;
建构模块,用于对重建后的多帧深度图像进行合并,配准,获得目标物体的三维结构模型。
应当理解的是,本发明的应用不限于上述的举例,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (9)

1.一种基于编码光栅结构光的三维结构重建方法,其特征在于,
A、将编码光栅结构光投射到目标物体表面,利用编码光栅结构光对目标物体表面进行扫描;
B、利用双目立体视觉装置获取目标物体两个不同视角的图像;
C、对双目图像进行处理,并利用处理后数据和编码光栅条纹进行相位计算和立体匹配,以此计算得到物体表面的点云数据;
D、通过点云数据对目标物体的三维结构表面进行重建;
E、对重建后的多帧深度图像进行配准、拼接,获得目标物体的三维结构模型。
2.根据权利要求1所述的基于编码光栅结构光的三维结构重建方法,其特征在于,所述编码光栅结构光由红外激光扫描模组输出,针对同一目标物体,红外激光扫描模组输出至少两种不同频率的编码光栅结构光,编码光栅结构光的不同之处在于光栅线数不同及相移不同。
3.根据权利要求1所述的基于编码光栅结构光的三维结构重建方法,其特征在于,所述双目立体视觉装置为双目立体视觉相机,或者,所述双目立体视觉装置由两个黑白相机或者两个彩色相机配置对应波长的滤光片组成。
4.根据权利要求3所述的基于编码光栅结构光的三维结构重建方法,其特征在于,所述双目立体视觉装置使用前进行联合标定,计算得到左右相机的内外参数,进而计算得双目立体视觉装置中左右相机之间的旋转矩阵和位移矢量。
5.根据权利要求4所述的基于编码光栅结构光的三维结构重建方法,深度图像处理具体包括:深度图像中有效区域的选取,利用旋转矩阵和位移矢量进行双目立体矫正,依据光栅图像进行分析解相位,立体匹配,去噪声处理等。
6.根据权利要求5所述的基于编码光栅结构光的三维结构重建方法,其特征在于,所述步骤C具体为:
通过标定和相位匹配找到物点的对应点对,然后基于三角测量原理求出该组点所对应的空间点坐标,得到目标物体表面结构的点云数据,对得到的点云数据进行去燥和平滑处理。
7.根据权利要求6所述的基于编码光栅结构光的三维结构重建方法,其特征在于,所述步骤E具体为:利用从不同的方位对目标物体进行多次扫描测量获得多个深度图像,计算每一深度图像的点云数据,确定不同点云数据之间的旋转及平移关系,将多次测量的点云数据拼接成一个整体,利用Geomagic对拼接后的点云进行配准拟合,生成目标物体的三维结构模型。
8.根据权利要求4所述的基于编码光栅结构光的三维结构重建方法,其特征在于,双目立体视觉装置的联合标定的定标物为机器视觉MV-SB型平面标定板。
9.一种基于编码光栅结构光的三维结构重建系统,其特征在于,所述系统包括:
扫描模块,用于将编码光栅结构光投射到目标物体表面,利用编码光栅结构光对目标物体表面进行扫描;
图像获取模块,用于利用双目立体视觉装置获取目标物体的深度图像;
计算模块,用于利用处理后数据和编码光栅条纹计算得到点云数据,并通过点云数据对目标物体的三维结构进行重建;
建构模块,用于对重建后的多帧深度图像进行合并,配准,获得目标物体的三维结构模型。
CN201810444467.3A 2018-05-10 2018-05-10 一种基于编码光栅结构光的三维结构重建方法与系统 Pending CN108665535A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810444467.3A CN108665535A (zh) 2018-05-10 2018-05-10 一种基于编码光栅结构光的三维结构重建方法与系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810444467.3A CN108665535A (zh) 2018-05-10 2018-05-10 一种基于编码光栅结构光的三维结构重建方法与系统

Publications (1)

Publication Number Publication Date
CN108665535A true CN108665535A (zh) 2018-10-16

Family

ID=63778271

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810444467.3A Pending CN108665535A (zh) 2018-05-10 2018-05-10 一种基于编码光栅结构光的三维结构重建方法与系统

Country Status (1)

Country Link
CN (1) CN108665535A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109583304A (zh) * 2018-10-23 2019-04-05 宁波盈芯信息科技有限公司 一种基于结构光模组的快速3d人脸点云生成方法及装置
CN109927036A (zh) * 2019-04-08 2019-06-25 青岛小优智能科技有限公司 一种三维视觉引导机械手抓取的方法及系统
CN110243307A (zh) * 2019-04-15 2019-09-17 深圳市易尚展示股份有限公司 一种自动化三维彩色成像与测量系统
CN110349257A (zh) * 2019-07-16 2019-10-18 四川大学 一种基于相位伪映射的双目测量缺失点云插补方法
CN110415338A (zh) * 2019-07-18 2019-11-05 深兰科技(上海)有限公司 一种三维立体数据生成方法及设备
CN111023994A (zh) * 2020-01-11 2020-04-17 武汉玄景科技有限公司 一种基于多重测量的光栅三维扫描方法及系统
WO2020186825A1 (zh) * 2019-03-15 2020-09-24 上海图漾信息科技有限公司 深度数据测量头、测量装置和测量方法
CN112319845A (zh) * 2020-08-04 2021-02-05 杨海成 用于飞机壁板精度自修正的变形监测方法及系统
CN112378349A (zh) * 2020-09-28 2021-02-19 湖南海森格诺信息技术有限公司 基于双目结构光的匣钵平整度检测装置及其检测方法
WO2022267434A1 (zh) * 2021-06-23 2022-12-29 达闼机器人股份有限公司 获取物体点云数据的系统及方法
CN115578524A (zh) * 2022-12-09 2023-01-06 华东交通大学 红外三维重构方法、系统、存储介质及计算机设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160300383A1 (en) * 2014-09-10 2016-10-13 Shenzhen University Human body three-dimensional imaging method and system
CN106767527A (zh) * 2016-12-07 2017-05-31 西安知象光电科技有限公司 一种三维轮廓的光学混合检测方法
CN107063128A (zh) * 2016-04-29 2017-08-18 华南师范大学 一种双频相移三维测量方法及系统
CN107170043A (zh) * 2017-06-19 2017-09-15 电子科技大学 一种三维重建方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160300383A1 (en) * 2014-09-10 2016-10-13 Shenzhen University Human body three-dimensional imaging method and system
CN107063128A (zh) * 2016-04-29 2017-08-18 华南师范大学 一种双频相移三维测量方法及系统
CN106767527A (zh) * 2016-12-07 2017-05-31 西安知象光电科技有限公司 一种三维轮廓的光学混合检测方法
CN107170043A (zh) * 2017-06-19 2017-09-15 电子科技大学 一种三维重建方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
邱运春: "双目光栅投影关键技术研究", 《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》 *

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109583304A (zh) * 2018-10-23 2019-04-05 宁波盈芯信息科技有限公司 一种基于结构光模组的快速3d人脸点云生成方法及装置
WO2020186825A1 (zh) * 2019-03-15 2020-09-24 上海图漾信息科技有限公司 深度数据测量头、测量装置和测量方法
CN109927036A (zh) * 2019-04-08 2019-06-25 青岛小优智能科技有限公司 一种三维视觉引导机械手抓取的方法及系统
CN110243307A (zh) * 2019-04-15 2019-09-17 深圳市易尚展示股份有限公司 一种自动化三维彩色成像与测量系统
CN110349257A (zh) * 2019-07-16 2019-10-18 四川大学 一种基于相位伪映射的双目测量缺失点云插补方法
CN110349257B (zh) * 2019-07-16 2020-02-28 四川大学 一种基于相位伪映射的双目测量缺失点云插补方法
CN110415338A (zh) * 2019-07-18 2019-11-05 深兰科技(上海)有限公司 一种三维立体数据生成方法及设备
CN111023994A (zh) * 2020-01-11 2020-04-17 武汉玄景科技有限公司 一种基于多重测量的光栅三维扫描方法及系统
CN111023994B (zh) * 2020-01-11 2023-06-23 武汉玄景科技有限公司 一种基于多重测量的光栅三维扫描方法及系统
CN112319845A (zh) * 2020-08-04 2021-02-05 杨海成 用于飞机壁板精度自修正的变形监测方法及系统
CN112378349A (zh) * 2020-09-28 2021-02-19 湖南海森格诺信息技术有限公司 基于双目结构光的匣钵平整度检测装置及其检测方法
WO2022267434A1 (zh) * 2021-06-23 2022-12-29 达闼机器人股份有限公司 获取物体点云数据的系统及方法
CN115578524A (zh) * 2022-12-09 2023-01-06 华东交通大学 红外三维重构方法、系统、存储介质及计算机设备

Similar Documents

Publication Publication Date Title
CN108665535A (zh) 一种基于编码光栅结构光的三维结构重建方法与系统
CN108151671B (zh) 一种三维数字成像传感器、三维扫描系统及其扫描方法
EP3531066B1 (en) Three-dimensional scanning method including a plurality of lasers with different wavelengths, and scanner
Pages et al. Optimised De Bruijn patterns for one-shot shape acquisition
US10911672B2 (en) Highly efficient three-dimensional image acquisition method based on multi-mode composite encoding and epipolar constraint
CN104299261B (zh) 人体三维成像方法及系统
CA2731680C (en) System for adaptive three-dimensional scanning of surface characteristics
CN102032878B (zh) 基于双目立体视觉测量系统的精确在线测量方法
CN105547189B (zh) 基于变尺度的高精度光学三维测量方法
EP2870428B1 (en) System and method for 3d measurement of the surface geometry of an object
CN102721376B (zh) 一种大视场三维视觉传感器的标定方法
CA2961921A1 (en) Camera calibration method using a calibration target
CN104596439A (zh) 一种基于相位信息辅助的散斑匹配三维测量方法
CN110838164B (zh) 基于物体点深度的单目图像三维重建方法、系统及装置
EP2751521A1 (en) Method and system for alignment of a pattern on a spatial coded slide image
CN113129430B (zh) 基于双目结构光的水下三维重建方法
CN113205592B (zh) 一种基于相位相似性的光场三维重建方法及系统
CN100561118C (zh) 三维数字化测量中的一种颜色渲染方法
CN101246595A (zh) 光学三维扫描系统中多视点云数据拼合方法
Ye et al. An accurate 3D point cloud registration approach for the turntable-based 3D scanning system
Beltran et al. A comparison between active and passive 3d vision sensors: Bumblebeexb3 and Microsoft Kinect
CN108175535A (zh) 一种基于微透镜阵列的牙科三维扫描仪
CN111833392A (zh) 标记点多角度扫描方法、系统及装置
CN109406520A (zh) 一种mems微振镜技术产生的结构光的痕迹提取装置及方法
CN104296690A (zh) 一种基于图像融合的多线结构光三维测量方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181016

RJ01 Rejection of invention patent application after publication