CN111433818A - 目标场景三维重建方法、系统及无人机 - Google Patents
目标场景三维重建方法、系统及无人机 Download PDFInfo
- Publication number
- CN111433818A CN111433818A CN201880072188.7A CN201880072188A CN111433818A CN 111433818 A CN111433818 A CN 111433818A CN 201880072188 A CN201880072188 A CN 201880072188A CN 111433818 A CN111433818 A CN 111433818A
- Authority
- CN
- China
- Prior art keywords
- information
- image
- key frame
- frame
- image sequence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 96
- 239000011159 matrix material Substances 0.000 claims description 113
- 230000000007 visual effect Effects 0.000 claims description 44
- 230000009466 transformation Effects 0.000 claims description 42
- 238000013519 translation Methods 0.000 claims description 36
- 238000001914 filtration Methods 0.000 claims description 24
- 238000005070 sampling Methods 0.000 claims description 24
- 238000005457 optimization Methods 0.000 claims description 22
- 238000012545 processing Methods 0.000 claims description 22
- 238000005286 illumination Methods 0.000 claims description 12
- 230000008569 process Effects 0.000 claims description 9
- 238000005192 partition Methods 0.000 claims 1
- 230000000875 corresponding effect Effects 0.000 description 113
- 238000010586 diagram Methods 0.000 description 13
- 238000004590 computer program Methods 0.000 description 7
- 230000033001 locomotion Effects 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 238000013507 mapping Methods 0.000 description 4
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 239000013598 vector Substances 0.000 description 3
- 101100134058 Caenorhabditis elegans nth-1 gene Proteins 0.000 description 2
- 230000004075 alteration Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000004807 localization Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000007500 overflow downdraw method Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
一种目标场景三维重建方法、系统及无人机，通过获取目标场景的图像序列，所述图像序列包含在时序上连续的多个图像帧(S201)；根据所述图像序列获得关键帧，并基于所述图像序列获得所述关键帧的三维点云(S202)；融合所述关键帧的三维点云，获得所述目标场景的三维模型(S203)。该方法既无需依赖价格高昂的双目视觉系统，也不受深度传感器的深度限制，能够满足无人机航拍场景下，对目标场景的三维重建需求。
Description
PCT国内申请，说明书已公开。
Claims (57)
- PCT国内申请，权利要求书已公开。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/CN2018/119190 WO2020113423A1 (zh) | 2018-12-04 | 2018-12-04 | 目标场景三维重建方法、系统及无人机 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111433818A true CN111433818A (zh) | 2020-07-17 |
Family
ID=70974832
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201880072188.7A Pending CN111433818A (zh) | 2018-12-04 | 2018-12-04 | 目标场景三维重建方法、系统及无人机 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN111433818A (zh) |
| WO (1) | WO2020113423A1 (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112288817A (zh) * | 2020-11-18 | 2021-01-29 | Oppo广东移动通信有限公司 | 基于图像的三维重建处理方法及装置 |
| CN112767534A (zh) * | 2020-12-31 | 2021-05-07 | 北京达佳互联信息技术有限公司 | 视频图像处理方法、装置、电子设备及存储介质 |
| CN113190515A (zh) * | 2021-05-14 | 2021-07-30 | 重庆市勘测院 | 基于异构并行计算的城市级海量点云坐标转换方法 |
| CN113884025A (zh) * | 2021-09-16 | 2022-01-04 | 河南垂天智能制造有限公司 | 增材制造结构光回环检测方法、装置、电子设备和存储介质 |
| CN113985436A (zh) * | 2021-11-04 | 2022-01-28 | 广州中科云图智能科技有限公司 | 基于slam的无人机三维地图构建与定位方法及装置 |
| CN114429495A (zh) * | 2022-03-14 | 2022-05-03 | 荣耀终端有限公司 | 一种三维场景的重建方法和电子设备 |
| CN114820935A (zh) * | 2022-04-19 | 2022-07-29 | 北京达佳互联信息技术有限公司 | 三维重建方法、装置、设备及存储介质 |
| CN114898074A (zh) * | 2022-04-29 | 2022-08-12 | 北京达佳互联信息技术有限公司 | 三维信息确定方法、装置、电子设备及存储介质 |
| CN115311424A (zh) * | 2022-08-02 | 2022-11-08 | 深圳市华赛睿飞智能科技有限公司 | 一种目标场景的三维重建方法、装置、无人机及存储介质 |
| WO2023082306A1 (zh) * | 2021-11-12 | 2023-05-19 | 苏州瑞派宁科技有限公司 | 图像处理方法、装置、电子设备以及计算机可读存储介质 |
| CN116452776A (zh) * | 2023-06-19 | 2023-07-18 | 国网浙江省电力有限公司湖州供电公司 | 基于视觉同步定位与建图系统的低碳变电站场景重建方法 |
| CN117475358A (zh) * | 2023-12-27 | 2024-01-30 | 广东南方电信规划咨询设计院有限公司 | 一种基于无人机视觉的碰撞预测方法及装置 |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112634370A (zh) * | 2020-12-31 | 2021-04-09 | 广州极飞科技有限公司 | 一种无人机打点方法、装置、设备及存储介质 |
| CN112927271B (zh) * | 2021-03-31 | 2024-04-05 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理装置、存储介质与电子设备 |
| CN113240615B (zh) * | 2021-05-20 | 2022-06-07 | 北京城市网邻信息技术有限公司 | 图像处理方法、装置、电子设备和计算机可读存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102750687A (zh) * | 2011-09-23 | 2012-10-24 | 新奥特（北京）视频技术有限公司 | 一种摄像机参数标定和三维点云生成方法和装置 |
| CN106570507A (zh) * | 2016-10-26 | 2017-04-19 | 北京航空航天大学 | 单目视频场景三维结构的多视角一致的平面检测解析方法 |
| CN107481288A (zh) * | 2017-03-31 | 2017-12-15 | 触景无限科技（北京）有限公司 | 双目摄像头的内外参确定方法和装置 |
| CN108335353A (zh) * | 2018-02-23 | 2018-07-27 | 清华-伯克利深圳学院筹备办公室 | 动态场景的三维重建方法、装置和系统、服务器、介质 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102568026B (zh) * | 2011-12-12 | 2014-01-29 | 浙江大学 | 一种多视点自由立体显示的三维增强现实方法 |
| CN103679674B (zh) * | 2013-11-29 | 2017-01-11 | 航天恒星科技有限公司 | 一种无人飞行器实时图像拼接方法及系统 |
| CN104537709B (zh) * | 2014-12-15 | 2017-09-29 | 西北工业大学 | 一种基于位姿变化的实时三维重建关键帧确定方法 |
| CN107945220B (zh) * | 2017-11-30 | 2020-07-10 | 华中科技大学 | 一种基于双目视觉的重建方法 |
| CN108846857A (zh) * | 2018-06-28 | 2018-11-20 | 清华大学深圳研究生院 | 视觉里程计的测量方法及视觉里程计 |
-
2018
- 2018-12-04 CN CN201880072188.7A patent/CN111433818A/zh active Pending
- 2018-12-04 WO PCT/CN2018/119190 patent/WO2020113423A1/zh active Application Filing
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102750687A (zh) * | 2011-09-23 | 2012-10-24 | 新奥特（北京）视频技术有限公司 | 一种摄像机参数标定和三维点云生成方法和装置 |
| CN106570507A (zh) * | 2016-10-26 | 2017-04-19 | 北京航空航天大学 | 单目视频场景三维结构的多视角一致的平面检测解析方法 |
| CN107481288A (zh) * | 2017-03-31 | 2017-12-15 | 触景无限科技（北京）有限公司 | 双目摄像头的内外参确定方法和装置 |
| CN108335353A (zh) * | 2018-02-23 | 2018-07-27 | 清华-伯克利深圳学院筹备办公室 | 动态场景的三维重建方法、装置和系统、服务器、介质 |
Non-Patent Citations (1)
| Title |
|---|
| 洪亮等: "基于RGB-D相机数据的SLAM算法", 《电子设计工程》 * |
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112288817A (zh) * | 2020-11-18 | 2021-01-29 | Oppo广东移动通信有限公司 | 基于图像的三维重建处理方法及装置 |
| CN112288817B (zh) * | 2020-11-18 | 2024-05-07 | Oppo广东移动通信有限公司 | 基于图像的三维重建处理方法及装置 |
| CN112767534B (zh) * | 2020-12-31 | 2024-02-09 | 北京达佳互联信息技术有限公司 | 视频图像处理方法、装置、电子设备及存储介质 |
| CN112767534A (zh) * | 2020-12-31 | 2021-05-07 | 北京达佳互联信息技术有限公司 | 视频图像处理方法、装置、电子设备及存储介质 |
| CN113190515A (zh) * | 2021-05-14 | 2021-07-30 | 重庆市勘测院 | 基于异构并行计算的城市级海量点云坐标转换方法 |
| CN113884025A (zh) * | 2021-09-16 | 2022-01-04 | 河南垂天智能制造有限公司 | 增材制造结构光回环检测方法、装置、电子设备和存储介质 |
| CN113884025B (zh) * | 2021-09-16 | 2024-05-03 | 河南垂天智能制造有限公司 | 增材制造结构光回环检测方法、装置、电子设备和存储介质 |
| CN113985436A (zh) * | 2021-11-04 | 2022-01-28 | 广州中科云图智能科技有限公司 | 基于slam的无人机三维地图构建与定位方法及装置 |
| WO2023082306A1 (zh) * | 2021-11-12 | 2023-05-19 | 苏州瑞派宁科技有限公司 | 图像处理方法、装置、电子设备以及计算机可读存储介质 |
| CN114429495A (zh) * | 2022-03-14 | 2022-05-03 | 荣耀终端有限公司 | 一种三维场景的重建方法和电子设备 |
| CN114820935A (zh) * | 2022-04-19 | 2022-07-29 | 北京达佳互联信息技术有限公司 | 三维重建方法、装置、设备及存储介质 |
| CN114898074A (zh) * | 2022-04-29 | 2022-08-12 | 北京达佳互联信息技术有限公司 | 三维信息确定方法、装置、电子设备及存储介质 |
| CN115311424A (zh) * | 2022-08-02 | 2022-11-08 | 深圳市华赛睿飞智能科技有限公司 | 一种目标场景的三维重建方法、装置、无人机及存储介质 |
| CN115311424B (zh) * | 2022-08-02 | 2023-04-07 | 深圳市华赛睿飞智能科技有限公司 | 一种目标场景的三维重建方法、装置、无人机及存储介质 |
| CN116452776B (zh) * | 2023-06-19 | 2023-10-20 | 国网浙江省电力有限公司湖州供电公司 | 基于视觉同步定位与建图系统的低碳变电站场景重建方法 |
| CN116452776A (zh) * | 2023-06-19 | 2023-07-18 | 国网浙江省电力有限公司湖州供电公司 | 基于视觉同步定位与建图系统的低碳变电站场景重建方法 |
| CN117475358A (zh) * | 2023-12-27 | 2024-01-30 | 广东南方电信规划咨询设计院有限公司 | 一种基于无人机视觉的碰撞预测方法及装置 |
| CN117475358B (zh) * | 2023-12-27 | 2024-04-23 | 广东南方电信规划咨询设计院有限公司 | 一种基于无人机视觉的碰撞预测方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2020113423A1 (zh) | 2020-06-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111433818A (zh) | 目标场景三维重建方法、系统及无人机 | |
| US20210141378A1 (en) | Imaging method and device, and unmanned aerial vehicle | |
| JP7252943B2 (ja) | 航空機のための対象物検出及び回避 | |
| US10339387B2 (en) | Automated multiple target detection and tracking system | |
| Won et al. | Sweepnet: Wide-baseline omnidirectional depth estimation | |
| EP2116975B1 (en) | Method and apparatus for vision based motion determination | |
| WO2019119328A1 (zh) | 一种基于视觉的定位方法及飞行器 | |
| CN111213155A (zh) | 图像处理方法、设备、可移动平台、无人机及存储介质 | |
| CN108171715B (zh) | 一种图像分割方法及装置 | |
| CN111316288A (zh) | 道路结构信息的提取方法、无人机及自动驾驶系统 | |
| CN114637023A (zh) | 用于激光深度图取样的系统及方法 | |
| Krombach et al. | Feature-based visual odometry prior for real-time semi-dense stereo SLAM | |
| CN109631911B (zh) | 一种基于深度学习目标识别算法的卫星姿态转动信息确定方法 | |
| CN110570463B (zh) | 一种目标状态估计方法、装置和无人机 | |
| CN108496201A (zh) | 图像处理方法和设备 | |
| CN113240813B (zh) | 三维点云信息确定方法及装置 | |
| CN116359873A (zh) | 结合鱼眼相机实现车端4d毫米波雷达slam处理的方法、装置、处理器及其存储介质 | |
| Zingoni et al. | Real-time 3D reconstruction from images taken from an UAV | |
| CN111433819A (zh) | 目标场景三维重建方法、系统及无人机 | |
| Tsao et al. | Stitching aerial images for vehicle positioning and tracking | |
| CN113129422A (zh) | 一种三维模型构建方法、装置、存储介质和计算机设备 | |
| CN116630556A (zh) | 基于空中地图数据重构地图的方法、系统及存储介质 | |
| US20210256732A1 (en) | Image processing method and unmanned aerial vehicle | |
| CN112154477A (zh) | 图像处理方法、装置和可移动平台 | |
| Bazin et al. | An original approach for automatic plane extraction by omnidirectional vision |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20200717 |
|
| WD01 | Invention patent application deemed withdrawn after publication |