CN108288285B - 一种基于全向环的三维全景扫描系统及方法 - Google Patents
一种基于全向环的三维全景扫描系统及方法 Download PDFInfo
- Publication number
- CN108288285B CN108288285B CN201810143708.0A CN201810143708A CN108288285B CN 108288285 B CN108288285 B CN 108288285B CN 201810143708 A CN201810143708 A CN 201810143708A CN 108288285 B CN108288285 B CN 108288285B
- Authority
- CN
- China
- Prior art keywords
- pixel
- point
- coordinate system
- camera
- dimensional panoramic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
Abstract
本发明提出一种基于全向环的三维全景扫描系统及方法,该系统包括全景摄像机、环带结构光发生装置、扫描仪固定架、360度旋转平台、PC机和微处理器;所述全景摄像机、环带结构光发生装置安装于扫描仪固定架上,所述扫描仪固定架固定于360度旋转平台上,所述全景摄像机的输出端连接PC机,所述360度旋转平台和环带结构光发生装置连接微处理器;该方法利用折反射全景相机视场大的优点并结合环带激光,形成了主动视觉测量系统,解决了单次拍摄完成360度大场景深度测量的难题,而且有利于测量范围内精度的提高以及各组件参数的优化。
Description
技术领域
本发明属于测量技术领域,具体涉及一种基于全向环的三维全景扫描系统及方法。
背景技术
深度信息的获取是计算机视觉(Computer Vision)领域一项重要的研究内容。现阶段,机器人通常使用激光雷达对未知空间进行深度感知,使用深度信息对场景进行理解,但是高昂的价格一直是阻碍激光雷达推广的一个重要因素。超声测距虽然比激光雷达便宜得多,但是在深度测量方面具有较差的方向性,无法精确对物体进行测量,存在单次拍摄无法完成360 度大场景深度测量的难题。
发明内容
针对现有技术的不足,本发明提出一种基于全向环的三维全景扫描系统及方法。
一种基于全向环的三维全景扫描系统,包括全景摄像机、环带结构光发生装置、扫描仪固定架、360度旋转平台、PC机和微处理器;
所述全景摄像机、环带结构光发生装置安装于扫描仪固定架上,所述扫描仪固定架固定于360度旋转平台上,所述全景摄像机的输出端连接PC机,所述360度旋转平台和环带结构光发生装置连接微处理器;
所述全景摄像机,包括:双曲面反射镜和摄像机;
所述摄像机设置于双曲面反射镜的对立面的焦点处,所述摄像机镜头与双曲面反射镜相对设置,所述摄像机的轴心与环带结构光发生装置的锥镜的轴心在同一水平线上。
所述360度旋转平台包括360度数字舵机和固定扫描仪的平台,360度数字舵机径向放置,转动时可将扫描仪旋转360度。
采用所述的基于全向环的三维全景扫描系统的扫描方法,包括以下步骤:
步骤1:通过微处理器控制360度旋转平台进行旋转,同时控制环带结构光发生装置形成激光扫描平面,并投影于全景摄像机中;
步骤2:通过全景摄像机采集三维全景投影图像,并传送至PC机中;
步骤3:通过PC机对三维全景投影图像进行换算,得到图像中环带结构光处的像素的空间坐标;所述步骤3包括以下步骤:
步骤3.1:获取三维全景投影图像中的被测点Pw在像素坐标系中对应的像素点pw(uw,vw),确定双曲面反射镜焦点OM和被测点Pw的连线与环带结构光所在平面的夹角αw,其中,w=1,2,...W,W为三维全景投影图像中像素点的总数,uw为像素坐标系中的像素点pw的x轴坐标,vw为像素坐标系中的像素点pw的y轴坐标;
所述确定双曲面反射镜焦点OM和被测点Pw的连线与环带结构光所在平面的夹角αw的计算公式如下所示:
步骤3.2:根据双曲面反射镜焦点OM和被测点Pw的连线与环带结构光所在平面的夹角αw确定像素坐标系中的像素点pw的测量深度dw;
所述像素坐标系中的点pw的测量深度dw的计算公式如下所示:
dw=S·cotαw;
其中,S为环带结构光发生装置的锥镜的原点与双曲面反射镜的焦点的距离;
步骤3.3:根据像素坐标系中的像素点pw的测量深度dw确定像素坐标系中的像素点pw的空间坐标pw′(xw,yw,zw);
所述像素坐标系中的像素点pw的空间坐标pw′(xw,yw,zw)的计算公式如下所示:
其中,xw为像素坐标系中的像素点pw的空间坐标的x轴坐标,yw为像素坐标系中的像素点pw的空间坐标的y轴坐标,zw为像素坐标系中的像素点pw的空间坐标的z轴坐标,为三维全景扫描系统Yaw轴角度,ωw为三维全景扫描系统Roll轴角度。
步骤4:通过PC机将三维全景投影图像中像素点的空间坐标存储为PCD格式的点云数据,并显示。
本发明的有益效果:
本发明提出一种基于全向环的三维全景扫描系统及方法,该方法利用折反射全景相机视场大的优点并结合环带激光,形成了主动视觉测量系统,解决了单次拍摄完成360度大场景深度测量的难题,而且有利于测量范围内精度的提高以及各组件参数的优化。使用本发明提出的深度感知设备进行深度测量,在机器人导航与避障、空间场景三维重建等方面均取得了较好的实验效果。
附图说明
图1为本发明具体实施方式中基于全向环的三维全景扫描系统的结构示意图;
图2为本发明具体实施方式中全景摄像机的结构示意图;
图3为本发明具体实施方式中采用基于全向环的三维全景扫描系统的扫描方法的流程图;
图4为本发明具体实施方式中三维全景投影图像中的像素坐标系中的像素点的成像示意图;
其中,(a)为像素点在图像坐标系中的成像示意图;
(b)为双曲面反射镜的焦点与摄像机中图像传感器原点所在平面成像示意图;
图5为本发明具体实施方式中双曲面反射镜的焦点与摄像机中图像传感器原点之间成像示意图
图6为本发明具体实施方式中像素坐标系中的像素点pw的空间坐标pw′(xw,yw,zw)的示意图;
其中,1-全景摄像机、2-环带结构光发生装置、3-扫描仪固定架、4-360度旋转平台、1-1- 双曲面反射镜、1-2-摄像机,5-摄像机中图像传感器俯视图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
本发明提出一种基于全向环的三维全景扫描系统,即利用了主动视觉进行深度感知的优点,又利用了全景相机成像大视场的优点,在获取广视角采集的同时,还可以获得周围场景的深度信息,进而实现深度测量、替代激光雷达进行机器人导航与避障以及对空间场景进行三维重建,如图1所示,包括全景摄像机1、环带结构光发生装置2、扫描仪固定架3、360 度旋转平台4、PC机和微处理器。
所述全景摄像机1、环带结构光发生装置2安装于扫描仪固定架3上,所述扫描仪固定架3固定于360度旋转平台4上,所述全景摄像机1的输出端连接PC机,所述360度旋转平台4和环带结构光发生装置2连接微处理器。
本实施方式中,扫描仪固定架3用于固定全景摄像机1、环带结构光发生装置2,从而保证激光投射平面平行于全景摄像机1的PCB表面以及相机平面平行于双曲面镜底面平面。
本实施方式中,环带结构光发生装置2包括激光发射器和锥镜,激光发射器发射一束平行光,平行光照射在锥镜上,其中,使用45°表面光滑平整的金属锥镜上,保证激光在接触锥镜时发生90°反射,形成一个激光扫描平面。
本实施方式中,所述全景摄像机1,如图2所示,包括:双曲面反射镜1-1和摄像机1-2。由于双曲面反射镜1-1具有单视点的优点,能够一次拍摄获取水平方向360°、垂直方向240°视野范围内场景的高清晰图像。
所述摄像机1-2设置于双曲面反射镜1-1的对立面的焦点处,所述摄像机1-2镜头与双曲面反射镜相对设置,所述摄像机1-2的轴心与环带结构光发生装置2的锥镜的轴心位于同一位置。
所述360度旋转平台包括360度数字舵机和固定扫描仪的平台,360度数字舵机径向放置,转动时可将扫描仪旋转360度。
所述微处理器使用了STM32微处理器,搭配USB转串口芯片CP2102来控制整个测量过程的数据通信、I0高速中断以及舵机的旋转。
本实施方式中,采用基于全向环的三维全景扫描系统的扫描方法,如图3所示,包括以下步骤:
步骤1:通过微处理器控制360度旋转平台进行旋转,同时控制环带结构光发生装置形成激光扫描平面,并投影于全景摄像机中。
步骤2:通过全景摄像机采集三维全景投影图像,并传送至PC机中。
步骤3:通过PC机对三维全景投影图像进行换算,得到图像中环带结构光处的像素的空间坐标。步骤3.1:获取三维全景投影图像中的被测点Pw在像素坐标系中对应的像素点pw(uw,vw),确定双曲面反射镜焦点OM和被测点Pw的连线与环带结构光所在平面的夹角αw,其中, w=1,2,...W,W为三维全景投影图像中像素点的总数,uw为像素坐标系中的像素点pw的x轴坐标,vw为像素坐标系中的像素点pw的y轴坐标,如图4、图5所示,图中,OM为双曲面反射镜的焦点,OC为摄像机中图像传感器原点,H表示图像的行像素,W表示图像的列像素,空间中的像素点P1、P2、P3在激光平面不同深度处,测量深度分别为d1、d2、d3,α1、α2、α3为像素点P1、P2、P3到双曲面焦距与环带结构光所在平面的夹角。
所述确定双曲面反射镜焦点OM和被测点Pw的连线与环带结构光所在平面的夹角αw的计算公式如式(1)所示:
步骤3.2:根据双曲面反射镜焦点OM和被测点Pw的连线与环带结构光所在平面的夹角αw确定像素坐标系中的像素点pw的测量深度dw。
所述像素坐标系中的点pw的测量深度dw的计算公式如式(2)所示:
dw=S·cotαw (2)
其中,S为环带结构光发生装置的锥镜的原点与双曲面反射镜的焦点的距离。
本实施方式中,得到的像素坐标系中的像素点pw的测量深度dw与实际深度的比较结果如表1所示。
表1像素坐标系中的像素点pw的测量深度dw与实际深度的比较结果
实际深度/mm | 测量深度/mm | 测量误差/mm |
530 | 530.310 | 0.310 |
540 | 539.121 | 0.121 |
550 | 550.212 | 0.212 |
560 | 560.023 | 0.023 |
570 | 569.630 | 0.630 |
580 | 580.401 | 0.401 |
590 | 590.365 | 0.365 |
步骤3.3:根据像素坐标系中的像素点pw的测量深度dw确定像素坐标系中的像素点pw的空间坐标pw′(xw,yw,zw),如图6所示。
所述像素坐标系中的像素点pw的空间坐标pw′(xw,yw,zw)的计算公式如式(3)-(5)所示:
其中,xw为像素坐标系中的像素点pw的空间坐标的x轴坐标,yw为像素坐标系中的像素点pw的空间坐标的y轴坐标,zw为像素坐标系中的像素点pw的空间坐标的z轴坐标,为三维全景扫描系统Yaw轴角度,ωw为三维全景扫描系统Roll轴角度。
步骤4:通过PC机将三维全景投影图像中像素点的空间坐标存储为PCD格式的点云数据,并显示。
Claims (1)
1.一种基于全向环的三维全景扫描系统,其特征在于,包括全景摄像机、环带结构光发生装置、扫描仪固定架、360度旋转平台、PC机和微处理器;
所述全景摄像机、环带结构光发生装置安装于扫描仪固定架上,所述扫描仪固定架固定于360度旋转平台上,所述全景摄像机的输出端连接PC机,所述360度旋转平台和环带结构光发生装置连接微处理器;
所述全景摄像机,包括:双曲面反射镜和摄像机;
所述摄像机设置于双曲面反射镜的对立面的焦点处,所述摄像机镜头与双曲面反射镜相对设置,所述摄像机的轴心与环带结构光发生装置的锥镜的轴心在同一水平线上;
所述360度旋转平台包括360度数字舵机和固定扫描仪的平台,360度数字舵机径向放置,转动时可将扫描仪旋转360度;
所述基于全向环的三维全景扫描系统的扫描方法,包括以下步骤:
步骤1:通过微处理器控制360度旋转平台进行旋转,同时控制环带结构光发生装置形成激光扫描平面,并投影于全景摄像机中;
步骤2:通过全景摄像机采集三维全景投影图像,并传送至PC机中;
步骤3:通过PC机对三维全景投影图像进行换算,得到图像中环带结构光处的像素的空间坐标;
步骤4:通过PC机将三维全景投影图像中像素点的空间坐标存储为PCD格式的点云数据,并显示;
所述步骤3包括以下步骤:
步骤3.1:获取三维全景投影图像中的被测点Pw在像素坐标系中对应的像素点pw(uw,vw),确定双曲面反射镜焦点OM和被测点Pw的连线与环带结构光所在平面的夹角αw,其中,w=1,2,...W,W为三维全景投影图像中像素点的总数,uw为像素坐标系中的像素点pw的x轴坐标,vw为像素坐标系中的像素点pw的y轴坐标;
所述确定双曲面反射镜焦点OM和被测点Pw的连线与环带结构光所在平面的夹角αw的计算公式如下所示:
步骤3.2:根据双曲面反射镜焦点OM和被测点Pw的连线与环带结构光所在平面的夹角αw确定像素坐标系中的像素点pw的测量深度dw;
所述像素坐标系中的点pw的测量深度dw的计算公式如下所示:
dw=S·cotαw;
其中,S为环带结构光发生装置的锥镜的原点与双曲面反射镜的焦点的距离;
步骤3.3:根据像素坐标系中的像素点pw的测量深度dw确定像素坐标系中的像素点pw的空间坐标pw′(xw,yw,zw);
所述像素坐标系中的像素点pw的空间坐标pw′(xw,yw,zw)的计算公式如下所示:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810143708.0A CN108288285B (zh) | 2018-02-12 | 2018-02-12 | 一种基于全向环的三维全景扫描系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810143708.0A CN108288285B (zh) | 2018-02-12 | 2018-02-12 | 一种基于全向环的三维全景扫描系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108288285A CN108288285A (zh) | 2018-07-17 |
CN108288285B true CN108288285B (zh) | 2021-10-29 |
Family
ID=62832638
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810143708.0A Active CN108288285B (zh) | 2018-02-12 | 2018-02-12 | 一种基于全向环的三维全景扫描系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108288285B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109343033A (zh) * | 2018-09-19 | 2019-02-15 | 中国电子科技集团公司第三十八研究所 | 一种基于衍射分束元件的时间复用激光雷达发射系统 |
CN114925937A (zh) * | 2022-06-27 | 2022-08-19 | 东北大学 | 一种舞台场景点云扫描站点选取与路径规划方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000023842A1 (en) * | 1998-10-21 | 2000-04-27 | Aleadesign S.R.L. | Anamorphic technique for filming and projecting images of 360 degree |
CN101777193A (zh) * | 2010-02-03 | 2010-07-14 | 中国人民解放军国防科学技术大学 | 基于双向映射精确插值的折反射全向图柱面全景展开方法 |
CN104568983A (zh) * | 2015-01-06 | 2015-04-29 | 浙江工业大学 | 基于主动式全景视觉的管道内部功缺陷检测装置及方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070126864A1 (en) * | 2005-12-05 | 2007-06-07 | Kiran Bhat | Synthesizing three-dimensional surround visual field |
-
2018
- 2018-02-12 CN CN201810143708.0A patent/CN108288285B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000023842A1 (en) * | 1998-10-21 | 2000-04-27 | Aleadesign S.R.L. | Anamorphic technique for filming and projecting images of 360 degree |
CN101777193A (zh) * | 2010-02-03 | 2010-07-14 | 中国人民解放军国防科学技术大学 | 基于双向映射精确插值的折反射全向图柱面全景展开方法 |
CN104568983A (zh) * | 2015-01-06 | 2015-04-29 | 浙江工业大学 | 基于主动式全景视觉的管道内部功缺陷检测装置及方法 |
Non-Patent Citations (3)
Title |
---|
An Automatic Laser Scanning System for Accurate 3D Reconstruction of Indoor Scenes;Danrong Li et.al;《2017 IEEE International Conference on Information and Automation》;20171231;第1页 * |
Depth perception based on omnidirectional ring structured light;Tong Jia et.al;《Optics and Laser Technology》;20181231;第123-132页 * |
Omni-directional 3D Measurement by Hyperbolic Mirror Cameras and Pattern Projection;Hiroyuki Ukida1 et.al;《IEEE International Instrumentation and Measurement Technology Conference》;20081231;第1-6页 * |
Also Published As
Publication number | Publication date |
---|---|
CN108288285A (zh) | 2018-07-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109269430B (zh) | 基于深度提取模型的多株立木胸径被动测量方法 | |
JP5580164B2 (ja) | 光学情報処理装置、光学情報処理方法、光学情報処理システム、光学情報処理プログラム | |
CN109859272B (zh) | 一种自动对焦双目摄像头标定方法及装置 | |
CN106871787B (zh) | 大空间线扫描成像三维测量方法 | |
CN111462213A (zh) | 一种在运动过程中获取物体3d坐标及尺寸的设备及方法 | |
CN106403900B (zh) | 飞行物追踪定位系统及方法 | |
WO2021185217A1 (zh) | 一种基于多激光测距和测角的标定方法 | |
CN109739239B (zh) | 一种用于巡检机器人的不间断仪表识别的规划方法 | |
CN102509261A (zh) | 一种鱼眼镜头的畸变校正方法 | |
CN105243637A (zh) | 一种基于三维激光点云进行全景影像拼接方法 | |
CN105190235A (zh) | 以六自由度跟踪的结构光扫描仪的补偿 | |
WO2018211926A1 (ja) | 画像生成装置、画像生成システム、画像生成方法、及び画像生成プログラム | |
US20140152771A1 (en) | Method and apparatus of profile measurement | |
CN111307046B (zh) | 基于半球图像的树高测量方法 | |
CN107084671B (zh) | 一种基于三线结构光的凹球直径测量系统及测量方法 | |
WO2022188293A1 (zh) | 一种带有集成镜头的视觉检测系统 | |
CN103983203A (zh) | 一种激光熔覆熔池离焦量测量装置及其测量方法 | |
CN111429523A (zh) | 一种在3d建模中远距离标定方法 | |
WO2022078442A1 (zh) | 一种基于光扫描和智能视觉融合的3d信息采集方法 | |
CN108288285B (zh) | 一种基于全向环的三维全景扫描系统及方法 | |
US20210364288A1 (en) | Optical measurement and calibration method for pose based on three linear array charge coupled devices (ccd) assisted by two area array ccds | |
CN111561868A (zh) | 一种利用光学跟踪结构光扫描器实现天线型面非接触测量的方法 | |
CN102589529B (zh) | 扫描近景摄影测量方法 | |
JP2017524122A (ja) | モバイルプラットフォームの変位を計測する方法及び装置 | |
CN102053475A (zh) | 单相机全方位立体视觉系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |