CN112985361A - 一种基于无人机免相控实景三维建模测绘方法及系统 - Google Patents
一种基于无人机免相控实景三维建模测绘方法及系统 Download PDFInfo
- Publication number
- CN112985361A CN112985361A CN202011432866.1A CN202011432866A CN112985361A CN 112985361 A CN112985361 A CN 112985361A CN 202011432866 A CN202011432866 A CN 202011432866A CN 112985361 A CN112985361 A CN 112985361A
- Authority
- CN
- China
- Prior art keywords
- live
- unmanned aerial
- image data
- aerial vehicle
- action image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000013507 mapping Methods 0.000 claims abstract description 46
- 238000012545 processing Methods 0.000 claims abstract description 32
- 238000003860 storage Methods 0.000 claims description 12
- 238000004458 analytical method Methods 0.000 claims description 10
- 230000000007 visual effect Effects 0.000 claims description 9
- 238000005286 illumination Methods 0.000 claims description 6
- 238000012800 visualization Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 4
- 238000013500 data storage Methods 0.000 claims description 3
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 description 37
- 238000013519 translation Methods 0.000 description 21
- 238000004891 communication Methods 0.000 description 12
- 238000013461 design Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 235000015110 jellies Nutrition 0.000 description 5
- 239000008274 jelly Substances 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 3
- 238000005096 rolling process Methods 0.000 description 3
- 238000004260 weight control Methods 0.000 description 3
- 239000000047 product Substances 0.000 description 2
- 230000002035 prolonged effect Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
- G01C11/04—Interpretation of pictures
- G01C11/06—Interpretation of pictures by comparison of two or more pictures of the same area
- G01C11/08—Interpretation of pictures by comparison of two or more pictures of the same area the pictures not being supported in the same relative position as when they were taken
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Studio Devices (AREA)
Abstract
本发明属于无人机技术领域,具体涉及一种基于无人机免相控实景三维建模测绘方法、系统及平台。本发明方案通过采集待建模测绘的实景图像数据信息;获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;实时生成实景三维测绘图。可以实现倾斜摄影或拍照,可以规避相机照片的畸变,可以延长相机快门的使用寿命,可以减少设备抖动幅度,本发明方案系统装,装置重量轻,并且可以按照预定设置线路进行飞行运作。
Description
技术领域
本发明属于无人机技术领域,具体涉及一种基于无人机免相控实景三维建模测绘方法、系统及平台。
背景技术
实景三维建模是使用数码相机对实际场景进行多角度环视拍摄之后,对照片进行后期拼合,生成实际场景的三维模型的技术。用于拼合生成三维模型的照片质量及照片拍摄的空间位置精度直接决定了拼合的三维模型几何精度。
目前用于户外实景三维建模的照片,主要使用无人机挂载使用多台数码相机拼接改造的的多镜头相机(倾斜摄影相机)实现。
受限于传统数码相机的固有性能,目前的倾斜摄影相机没有能够避免Sensor(图像传感器)使用卷帘曝光的运作方式导致的照片果冻效应。
同时为了最大幅度减少照片果冻效应的影响,目前的倾斜摄影相机完全使用机械快门实现曝光控制,机械快门作为相机系统磨损最快的组件,制约了倾斜摄影相机的使用寿命。
独立的数码相机拼接在照片拍摄过程中,不同相机采集的图像通过互相独立的主控模块计算生成独立的照片,无法保证所有相机在一个绝对瞬间完成图像采集,导致无人机在某个空间位置给出拍照指令后,不同相机完成拍摄的位置,伴随无人机的移动及姿态变化,不同相机的完成拍照位置已经不在拍摄计划位置。
多台数码相机拼接改造倾斜摄影相机的方案,倾斜摄影相机的重量取决于选用的数码相机型号,大量的冗余组件导致整机重量难以控制。
因此,基于上述的技术问题,急需设计开发一种基于无人机免相控实景三维建模测绘方法、系统及平台。
发明内容
本发明的第一目的在于提供一种基于无人机免相控实景三维建模测绘的方法。
本发明的第二目的在于提供一种基于无人机免相控实景三维建模测绘的系统。
本发明的第三目的在于提供一种基于无人机免相控实景三维建模测绘的平台。
本发明的第一目的是这样实现的:所述方法包括:
采集待建模测绘的实景图像数据信息;
获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;
实时生成实景三维测绘图
本发明的第二目的是这样实现的:所述系统具体包括:
数据采集单元,用于采集待建模测绘的实景图像数据信息;
获取单元,用于获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
分析处理单元,用于结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;
生成单元,用于实时生成实景三维测绘图。
本发明的第三目的是这样实现的:所述平台包括:
处理器、存储器以及基于无人机免相控实景三维建模测绘平台控制程序;
其中在所述的处理器执行所述的基于无人机免相控实景三维建模测绘平台控制程序,所述的基于无人机免相控实景三维建模测绘平台控制程序被存储在所述存储器中,所述的基于无人机免相控实景三维建模测绘平台控制程序,实现所述的基于无人机免相控实景三维建模测绘方法步骤。
本发明通过一种基于无人机免相控实景三维建模测绘方法、系统及平台,可以通过一个主控模块同时从多个Sensor(图像传感器)获取图像,确保倾斜摄影相机不同方向的图像采集在1ms之内完成,保证多个方向的照片拍摄完成瞬间,倾斜摄影相机的实际空间位置位置与无人机飞控提供的瞬时空间位置信息完全匹配,大幅度提高后期三维建模的几何精度。
通过选用的Sensor(图像传感器)使用全局曝光,区别于数码相机的卷帘曝光,照片完全不出现果冻效应,零畸变,规避畸变导致的三维建模精度损失甚至建模失败的问题。
使用电子快门进行曝光控制,规避使用机械快门导致的快门寿命限制,大幅度提高倾斜摄影相机使用寿命。并且通过高度集成的模块化设计,5镜头设计产品重量控制在400克以内,对比使用数码相机拼接的方案700克以上的重量,大幅减少了无人机的挂载负担,提高作业效率。
也就是说,可以实现倾斜摄影或拍照,可以规避相机照片的畸变,可以延长相机快门的使用寿命,可以减少设备抖动幅度,本发明方案系统装,装置重量轻,并且可以按照预定设置线路进行飞行运作。
附图说明
图1为本发明主控模块及Sensor(图像传感器)结构侧示意图;
图2为本发明主控模块之俯视示意图;
图3为本发明Sensor(图像传感器)镜头之正视示意图;
图4为本发明Sensor(图像传感器)镜头之仰视示意图;
图5为本发明主控模块及Sensor(图像传感器)结构俯视示意图;
图6为本发明飞控转译单元之一示意图;
图7为本发明飞控转译单元之二示意图;
图8为本发明镜头结构示意图;
图9为本发明系统装置结构外形立体图之一示意图;
图10为本发明系统装置方案结构外形立体图之二示意图;
图11为本发明一种基于无人机免相控实景三维建模测绘的方法流程架构示意图;
图12为本发明一种基于无人机免相控实景三维建模测绘的系统架构示意图;
图13为本发明一种基于无人机免相控实景三维建模测绘平台架构示意图;
图中:
1-图像传感器主控单元;a-第一图像传感器镜头尺寸;b-图像传感器镜头夹角;c-第一主控模块内尺寸;d-第一主控模块外尺寸;e-第二主控模块内尺寸;f-第二主控模块外尺寸;h-第二图像传感器镜头;h-第一图像传感器镜头螺纹通孔;i-第一镜头尺寸;j-第二镜头尺寸;3-镜头通孔;4-第三镜头尺寸;5-第二图像传感器镜头螺纹通孔;k-第一主控板及图像传感器镜头尺寸;l-第二主控板及图像传感器镜头尺寸;m-第三主控板及图像传感器镜头尺寸;n-第四主控板及图像传感器镜头尺寸;o-第五主控板及图像传感器镜头尺寸;6-主控板模块。
具体实施方式
下面结合附图和实施例对本发明作进一步说明,以便所属领域技术人员详细了解本发明,但不以任何方式对本发明加以限制。依据本发明的技术启示所做的任何变换或改进均属于本发明的保护范围。
以下结合附图对本发明作进一步阐述。
如图1~13所示,本发明提供了一种基于无人机免相控实景三维建模测绘的方法,所述的方法包括如下步骤:
S1、采集待建模测绘的实景图像数据信息;
S2、获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
S3、结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;
S4、实时生成实景三维测绘图。
所述采集待建模测绘的实景图像数据信息之中,还包括:
S11、根据采集实景图像数据信息指令,实时生成至少五个实景图像数据;
S12、生成已完成采集实景图像数据信息。
所述根据采集实景图像数据信息指令,实时生成至少五个实景图像数据之中,还包括:
S111、调试识别所述实景图像数据信息指令。
所述根据采集实景图像数据信息指令,实时生成至少五个实景图像数据之中,还包括:
S112、结合光照,通过解析为图像的电信号,于同一时间点生成至少五个实景图像数据。
所述获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据之中,还包括:
S21、根据已完成采集实景图像数据信息指令,获取与采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据。
所述结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据之中,还包括:
S31、根据采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据,结合镜头畸变参数,实时生成可视化数据;
S32、于单一存储位置中对所述可视化数据进行存储。
所述根据采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据,结合镜头畸变参数,实时生成可视化数据之中,还包括:
S311、结合镜头畸变参数,分析处理实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
S312、生成实景图像相对应的空间坐标信息,并实时写入所述实景图像中。
为实现本发明方案目的,还提供一种基于无人机免相控实景三维建模测绘系统,所述系统具体包括:
数据采集单元,用于采集待建模测绘的实景图像数据信息;
获取单元,用于获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
分析处理单元,用于结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;
生成单元,用于实时生成实景三维测绘图。
所述数据采集单元中,还包括:
第一生成模块,用于根据采集实景图像数据信息指令,实时生成至少五个实景图像数据;
第二生成模块,用于生成已完成采集实景图像数据信息;
调试识别模块,用于调试识别所述实景图像数据信息指令;
第三生成模块,用于结合光照,通过解析为图像的电信号,于同一时间点生成至少五个实景图像数据;
所述获取单元中,还包括:
第一获取模块,用于根据已完成采集实景图像数据信息指令,获取与采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
所述分析处理单元中,还包括:
第四生成模块,用于根据采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据,结合镜头畸变参数,实时生成可视化数据;
数据存储模块,用于于单一存储位置中对所述可视化数据进行存储;
第一分析处理模块,用于结合镜头畸变参数,分析处理实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
第五生成模块,用于生成实景图像相对应的空间坐标信息,并实时写入所述实景图像中。
为实现本发明方案目的,还提供一种基于无人机免相控实景三维建模测绘平台,包括:处理器、存储器以及基于无人机免相控实景三维建模测绘平台控制程序;
其中在所述的处理器执行所述的基于无人机免相控实景三维建模测绘平台控制程序,所述的基于无人机免相控实景三维建模测绘平台控制程序被存储在所述存储器中,所述的基于无人机免相控实景三维建模测绘平台控制程序,实现所述的基于无人机免相控实景三维建模测绘方法步骤。
优选地,本发明一种基于无人机免相控实景三维建模测绘方法应用在一个或者多个终端或者服务器中。所述终端是一种能够按照事先设定或存储的指令,自动进行数值计算和/或信息处理的设备,其硬件包括但不限于微处理器、专用集成电路(ApplicationSpecific Integrated Circuit,ASIC)、可编程门阵列(Field-Programmable GateArray,FPGA)、数字处理器(Digital Signal Processor,DSP)、嵌入式设备等。
所述终端可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端可以与客户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互。
本发明为实现一种基于无人机免相控实景三维建模测绘方法、系统、平台及存储介质。
如图11所示,是本发明实施例提供的基于无人机免相控实景三维建模测绘方法的流程图。
在本实施例中,所述基于无人机免相控实景三维建模测绘方法,可以应用于具备显示功能的终端或者固定终端中,所述终端并不限定于个人电脑、智能手机、平板电脑、安装有摄像头的台式机或一体机等。
所述基于无人机免相控实景三维建模测绘方法也可以应用于由终端和通过网络与所述终端进行连接的服务器所构成的硬件环境中。网络包括但不限于:广域网、城域网或局域网。本发明实施例的基于无人机免相控实景三维建模测绘方法可以由服务器来执行,也可以由终端来执行,还可以是由服务器和终端共同执行。
例如,对于需要进行基于无人机免相控实景三维建模测绘终端,可以直接在终端上集成本发明的方法所提供的基于无人机免相控实景三维建模测绘功能,或者安装用于实现本发明的方法的客户端。再如,本发明所提供的方法还可以软件开发工具包(SoftwareDevelopment Kit,SDK)的形式运行在服务器等设备上,以SDK的形式提供基于无人机免相控实景三维建模测绘功能的接口,终端或其他设备通过所提供的接口即可实现基于无人机免相控实景三维建模测绘功能。
以下结合附图对本发明作进一步阐述。
如图11所示,本发明提供了一种基于无人机免相控实景三维建模测绘的方法,所述的方法包括如下步骤:
S1、采集待建模测绘的实景图像数据信息;
S2、获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
S3、结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;
S4、实时生成实景三维测绘图。
也就是说,通过采集待建模测绘的实景图像数据信息;同时获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;最终实时生成实景三维测绘图。
具体地,在所述采集待建模测绘的实景图像数据信息之中,还包括:
S11、根据采集实景图像数据信息指令,实时生成至少五个实景图像数据;
S12、生成已完成采集实景图像数据信息。
也就是说,在步骤采集待建模测绘的实景图像数据信息中,首先根据采集实景图像数据信息指令,通过接受到拍照指令后,实时生成至少五个实景图像数据,在完成生产至少五个实景图像数据后,实时生成已完成采集实景图像数据信息,并进行下一步操作。
较佳地,所述根据采集实景图像数据信息指令,实时生成至少五个实景图像数据之中,还包括:
S111、调试识别所述实景图像数据信息指令。
也就是说,在获得采集实景图像数据信息指令之前,还将对于获取实景图像相关指令进行调试识别,换言之,在本发明方案中,包括飞控转译单元和主控板单元,在所述的飞控转译单元中,设置有定制开发的基于MPU(微型数据处理器)单板计算机,用串口实现与倾斜摄影相机单一主控板之间的数据交换。用串口或网络协议接口实现与无人机飞控的数据交换。不同无人机飞控系统的通讯控制协议并不相同,飞控转译单元配合定制的(针对某无人机飞控系统的通讯控制协议)通讯协议转换程序,实现倾斜摄影相机与不同无人机飞控的兼容使用。
优选地,所述根据采集实景图像数据信息指令,实时生成至少五个实景图像数据之中,还包括:
S112、结合光照,通过解析为图像的电信号,于同一时间点生成至少五个实景图像数据。
也就是说,所述的同时在5个Sensor上获取图像具体为:同时向5个Sensor施加电流,电流在接受可见光照射的Sensor表面通过微光敏二极管结构,成为可解析为图像的电信号。
具体地,所述获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据之中,还包括:
S21、根据已完成采集实景图像数据信息指令,获取与采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据。
也就是说,获取与采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据的前提是:根据已完成采集实景图像数据信息指令才能执行。
较佳地,所述结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据之中,还包括:
S31、根据采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据,结合镜头畸变参数,实时生成可视化数据;
S32、于单一存储位置中对所述可视化数据进行存储。
优选地,所述根据采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据,结合镜头畸变参数,实时生成可视化数据之中,还包括:
S311、结合镜头畸变参数,分析处理实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
S312、生成实景图像相对应的空间坐标信息,并实时写入所述实景图像中。
也就是说,通过定制开发的基于MPU(微型数据处理器)单板计算机,倾斜摄影相机的主要控制单元。接受到飞控转译单元给到的拍照指令后,同时在5个Sensor上采集图像数据(在本发明方案中,所述的Sensor图像传感器数量至少为5个),完成采集后,主控板单元并向飞控转译单元询问当前无人机飞控提供的空间坐标信息(RTK、GPS)、无人机飞行姿态信息,上述信息加上镜头畸变参数经过分析处理后,整合到照片文件中,照片统一保存至单一存储位置(SD卡或SSD硬盘)。
在本发明实施例中,如图1所示,主控模块及Sensor(图像传感器)结构示意图所示,本发明通过单一运算板的图像采集主控模块实现对多个Sensor的控制。每个Sensor不使用独立的图像采集控制单元,不同Sensor可以在同一时间采集不同照片并统一保存至主控模块上的SD卡或SSD硬盘。每个Sensor前不设置机械快门组件,直接安装镜头。
如图2所示,本发明飞控转译单元示意图所示,本发明通过基于MPU运算单元的微型计算板实现无人机飞行控制系统与倾斜摄影相机的控制通讯,改写运行于MPU的程序即可实现倾斜摄影相机和不同种类无人机飞控的对接。
如图3所示,本发明的镜头结构图,小巧轻便,满足本系统重量控制的要求。
如图4所示,本发明外形示意图,本发明结构紧凑,便于挂载在不同负载能力的无人机使用。
具体地,在本发明方案中,包括飞控转译单元和主控板单元,在所述的飞控转译单元中,设置有定制开发的基于MPU(微型数据处理器)单板计算机,用串口实现与倾斜摄影相机单一主控板之间的数据交换。用串口或网络协议接口实现与无人机飞控的数据交换。不同无人机飞控系统的通讯控制协议并不相同,飞控转译单元配合定制的(针对某无人机飞控系统的通讯控制协议)通讯协议转换程序,实现倾斜摄影相机与不同无人机飞控的兼容使用。
倾斜摄影相机挂载到无人机后,飞控转译单元用无人机飞控的通讯控制协议向无人机注册挂载设备,配合无人机完成初始化检查。
当无人机发出拍照指令时,飞控转译单元翻译这个指令,用倾斜摄影相机的通讯控制协议控制倾斜摄影相机主控板完成拍照工作。
倾斜摄影相机主控板告知飞控转译单元拍照完成后,飞控转译单元用无人机飞控的通讯控制协议向无人机飞控询问无人机空间位置、飞行姿态等信息。飞控转译单元翻译这些信息后用倾斜摄影相机的通讯控制协议送给倾斜摄影相机主控板。
所述的主控板单元,通过定制开发的基于MPU(微型数据处理器)单板计算机,倾斜摄影相机的主要控制单元。接受到飞控转译单元给到的拍照指令后,同时在5个Sensor上采集图像数据(在本发明方案中,所述的Sensor图像传感器数量至少为5个),完成采集后,主控板单元并向飞控转译单元询问当前无人机飞控提供的空间坐标信息(RTK、GPS)、无人机飞行姿态信息,上述信息加上镜头畸变参数经过分析处理后,整合到照片文件中,照片统一保存至单一存储位置(SD卡或SSD硬盘)。
较佳地,所述的同时在5个Sensor上获取图像具体为:同时向5个Sensor施加电流,电流在接受可见光照射的Sensor表面通过微光敏二极管结构,成为可解析为图像的电信号。
具体地,单一的单板计算机来实现不同Sensor的图像获取,统一了拍照获取图像的时间,确保每次拍照时所有Sensor都在计划拍照的空间位置采集图像,不受到无人机运动的影响。
向照片文件中写入空间坐标信息(RTK、GPS)、无人机飞行姿态信息及镜头畸变参数是数码相机拍照无法实现的功能,这大大简化了利用照片拼合的三维模型的工作流程(规避了人工整理数据)。
在本发明方案中,具体还涉及到镜头单元,通过完全定制,用以满足Sensor对镜头的光学参数要求。由于选用的Sensor结构区别于数码相机的Sensor,要求通过镜头照射到Sensor表面的光线完全垂直于Sensor表面。定制镜头采用了垂直光路设计;
具体地,在本发明方案中,包括实施保存照片数据,即属于存储单元,用于实时存储照片数据,比如将相应的数据实时保存于SD卡或SSD硬盘中;
换言之,在本发明优选的实施例中,通过选用全局曝光工作方式的的Sensor(图像传感器),定制开发多Sensor单控制板的倾斜摄影相机,使用模块化设计,独立开发飞控转译单元,满足倾斜摄影相机与不同无人机的的通讯控制转译功能,所有镜头拍摄的照片在整合空间坐标信息(RTK、GPS)、无人机飞行姿态信息及镜头畸变参数后统一存储到单一SD卡或单一SSD硬盘中。
具体地,通过采用Sensor(图像传感器)的全局曝光工作方式:避免照片出现果冻效应,无畸变。使用电子快门曝光:避免使用机械快门,无机械快门的使用寿命限制。
采用多Sensor单控制板的倾斜摄影相机:避免多数码相机集成导致的拍照完成时间不统一问题。多Sensor单控制板设计的倾斜摄影相机是真正的多镜头单一相机,多镜头的拍照完成时间可以做到完全一致。
多镜头单一相机:规避多数码相机拼接方案中多块相机主控制板等冗余结构,减少系统结构大小及重量。也可以规避多数码相机拼接方案导致的不同相机拍摄照片各自存储到不同SD卡中,照片不携带特殊信息的弊端。多数码相机拼接倾斜摄影相机在照片采集完成后,在拼合三维模型过程中,需要人工多次从不同SD卡拷贝照片、整理照片顺序、对照并补充空间坐标信息(RTK、GPS)、无人机飞行姿态信息及镜头畸变参数等大量工作。多镜头单一相机在照片采集完成后,工作人员可以从单一存储介质(SD卡或SSD硬盘)拷贝出已经整理好顺序,并且照片文件本身集成空间坐标信息(RTK、GPS)、无人机飞行姿态信息及镜头畸变参数的照片文件,大大提高了使用照片进行三维建模的工作效率。
通过模块化设计,独立开发飞控转译单元:适配不同的无人机使用时,完全不需要对倾斜摄影相机的主控制板做出调整改造,提高了整个系统对不同的无人机的兼容性。
垂直光路设计的小型化定制镜头:满足全局曝光Sensor(图像传感器)对镜头最大主光角(CRA)接近0°的特殊光学要求,轻量化、小型化设计,减少了倾斜摄影相机整机重量及体积,同时保证照片色彩观感。
为实现上述目的,本发明还提供一种基于无人机免相控实景三维建模测绘系统,如图12所示,所述的系统具体包括:
数据采集单元,用于采集待建模测绘的实景图像数据信息;
获取单元,用于获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
分析处理单元,用于结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;
生成单元,用于实时生成实景三维测绘图。
所述数据采集单元中,还包括:
第一生成模块,用于根据采集实景图像数据信息指令,实时生成至少五个实景图像数据;
第二生成模块,用于生成已完成采集实景图像数据信息;
调试识别模块,用于调试识别所述实景图像数据信息指令;
第三生成模块,用于结合光照,通过解析为图像的电信号,于同一时间点生成至少五个实景图像数据;
所述获取单元中,还包括:
第一获取模块,用于根据已完成采集实景图像数据信息指令,获取与采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
所述分析处理单元中,还包括:
第四生成模块,用于根据采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据,结合镜头畸变参数,实时生成可视化数据;
数据存储模块,用于于单一存储位置中对所述可视化数据进行存储;
第一分析处理模块,用于结合镜头畸变参数,分析处理实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
第五生成模块,用于生成实景图像相对应的空间坐标信息,并实时写入所述实景图像中。
在本发明系统方案实施例中,所述的一种基于无人机免相控实景三维建模测绘系统中涉及的方法步骤,具体细节已在上文阐述,此处不再赘述。
为实现上述目的,本发明还提供一种基于无人机免相控实景三维建模测绘平台,如图13所示,包括:
处理器、存储器以及基于无人机免相控实景三维建模测绘平台控制程序;
其中在所述的处理器执行所述的基于无人机免相控实景三维建模测绘平台控制程序,所述的基于无人机免相控实景三维建模测绘平台控制程序被存储在所述存储器中,所述的基于无人机免相控实景三维建模测绘平台控制程序,实现所述的基于无人机免相控实景三维建模测绘方法步骤,例如:
S1、采集待建模测绘的实景图像数据信息;
S2、获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
S3、结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;
S4、实时生成实景三维测绘图。
步骤具体细节已在上文阐述,此处不再赘述。
本发明实施例中,所述的基于无人机免相控实景三维建模测绘平台内置处理器,可以由集成电路组成,例如可以由单个封装的集成电路所组成,也可以是由多个相同功能或不同功能封装的集成电路所组成,包括一个或者多个中央处理器(Central Processingunit,CPU)、微处理器、数字处理芯片、图形处理器及各种控制芯片的组合等。处理器利用各种接口和线路连接取各个部件,通过运行或执行存储在存储器内的程序或者单元,以及调用存储在存储器内的数据,以执行基于无人机免相控实景三维建模测绘各种功能和处理数据;
存储器用于存储程序代码和各种数据,安装在基于无人机免相控实景三维建模测绘平台中,并在运行过程中实现高速、自动地完成程序或数据的存取。
所述存储器包括只读存储器(Read-Only Memory,ROM),随机存储器(RandomAccess Memory,RAM)、可编程只读存储器(Programmable Read-Only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子擦除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(Compact Disc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
本发明通过一种基于无人机免相控实景三维建模测绘方法、系统及平台,可以通过一个主控模块同时从多个Sensor(图像传感器)获取图像,确保倾斜摄影相机不同方向的图像采集在1ms之内完成,保证多个方向的照片拍摄完成瞬间,倾斜摄影相机的实际空间位置位置与无人机飞控提供的瞬时空间位置信息完全匹配,大幅度提高后期三维建模的几何精度。
通过选用的Sensor(图像传感器)使用全局曝光,区别于数码相机的卷帘曝光,照片完全不出现果冻效应,零畸变,规避畸变导致的三维建模精度损失甚至建模失败的问题。
使用电子快门进行曝光控制,规避使用机械快门导致的快门寿命限制,大幅度提高倾斜摄影相机使用寿命。并且通过高度集成的模块化设计,5镜头设计产品重量控制在400克以内,对比使用数码相机拼接的方案700克以上的重量,大幅减少了无人机的挂载负担,提高作业效率。
也就是说,可以实现倾斜摄影或拍照,可以规避相机照片的畸变,可以延长相机快门的使用寿命,可以减少设备抖动幅度,本发明方案系统装,装置重量轻,并且可以按照预定设置线路进行飞行运作。
Claims (10)
1.一种基于无人机免相控实景三维建模测绘方法,其特征在于,所述方法包括:
采集待建模测绘的实景图像数据信息;
获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;
实时生成实景三维测绘图。
2.根据权利要求1所述的一种基于无人机免相控实景三维建模测绘方法,其特征在于,所述采集待建模测绘的实景图像数据信息之中,还包括:
根据采集实景图像数据信息指令,实时生成至少五个实景图像数据;
生成已完成采集实景图像数据信息。
3.根据权利要求2所述的一种基于无人机免相控实景三维建模测绘方法,其特征在于,所述根据采集实景图像数据信息指令,实时生成至少五个实景图像数据之中,还包括:
调试识别所述实景图像数据信息指令。
4.根据权利要求2或3所述的一种基于无人机免相控实景三维建模测绘方法,其特征在于,所述根据采集实景图像数据信息指令,实时生成至少五个实景图像数据之中,还包括:
结合光照,通过解析为图像的电信号,于同一时间点生成至少五个实景图像数据。
5.根据权利要求1所述的一种基于无人机免相控实景三维建模测绘方法,其特征在于,所述获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据之中,还包括:
根据已完成采集实景图像数据信息指令,获取与采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据。
6.根据权利要求1所述的一种基于无人机免相控实景三维建模测绘方法,其特征在于,所述结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据之中,还包括:
根据采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据,结合镜头畸变参数,实时生成可视化数据;
于单一存储位置中对所述可视化数据进行存储。
7.根据权利要求6所述的一种基于无人机免相控实景三维建模测绘方法,其特征在于,所述根据采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据,结合镜头畸变参数,实时生成可视化数据之中,还包括:
结合镜头畸变参数,分析处理实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
生成实景图像相对应的空间坐标信息,并实时写入所述实景图像中。
8.一种基于无人机免相控实景三维建模测绘系统,其特征在于,所述系统具体包括:
数据采集单元,用于采集待建模测绘的实景图像数据信息;
获取单元,用于获取所述实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
分析处理单元,用于结合所述实景图像数据信息,实时分析处理所述实景图像数据信息的位置及无人机飞行姿态数据;
生成单元,用于实时生成实景三维测绘图。
9.根据权利要求8所述的一种基于无人机免相控实景三维建模测绘系统,其特征在于,所述数据采集单元中,还包括:
第一生成模块,用于根据采集实景图像数据信息指令,实时生成至少五个实景图像数据;
第二生成模块,用于生成已完成采集实景图像数据信息;
调试识别模块,用于调试识别所述实景图像数据信息指令;
第三生成模块,用于结合光照,通过解析为图像的电信号,于同一时间点生成至少五个实景图像数据;
所述获取单元中,还包括:
第一获取模块,用于根据已完成采集实景图像数据信息指令,获取与采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
所述分析处理单元中,还包括:
第四生成模块,用于根据采集到实景图像数据信息相对应的无人机空间位置及飞行姿态数据,结合镜头畸变参数,实时生成可视化数据;
数据存储模块,用于于单一存储位置中对所述可视化数据进行存储;
第一分析处理模块,用于结合镜头畸变参数,分析处理实景图像数据信息相对应的无人机空间位置及飞行姿态数据;
第五生成模块,用于生成实景图像相对应的空间坐标信息,并实时写入所述实景图像中。
10.一种基于无人机免相控实景三维建模测绘平台,其特征在于,包括:
处理器、存储器以及基于无人机免相控实景三维建模测绘平台控制程序;
其中在所述的处理器执行所述的基于无人机免相控实景三维建模测绘平台控制程序,所述的基于无人机免相控实景三维建模测绘平台控制程序被存储在所述存储器中,所述的基于无人机免相控实景三维建模测绘平台控制程序,实现如权利要求1至7中任一项所述的基于无人机免相控实景三维建模测绘方法步骤。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011050070 | 2020-09-29 | ||
CN202011050070X | 2020-09-29 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112985361A true CN112985361A (zh) | 2021-06-18 |
Family
ID=76344902
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011432866.1A Pending CN112985361A (zh) | 2020-09-29 | 2020-12-10 | 一种基于无人机免相控实景三维建模测绘方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112985361A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114993263A (zh) * | 2022-05-26 | 2022-09-02 | 邓州市邓房测绘有限公司 | 一种基于水准点定位的高精度建筑物无人机测绘系统 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106052648A (zh) * | 2016-06-17 | 2016-10-26 | 陈长军 | 一种轻小型倾斜摄影测量系统及方法 |
CN106814751A (zh) * | 2017-02-28 | 2017-06-09 | 建荣半导体(深圳)有限公司 | 一种飞行控制协议自动适配方法、装置及系统 |
CN206609424U (zh) * | 2016-09-26 | 2017-11-03 | 中国科学院遥感与数字地球研究所 | 超轻型可变角度航空倾斜摄影系统 |
CN107908197A (zh) * | 2017-11-23 | 2018-04-13 | 深圳市智璟科技有限公司 | 基于红外信标及视觉的无人机精准降落系统和方法 |
CN108423153A (zh) * | 2018-05-17 | 2018-08-21 | 王瀚晨 | 模块化微型无人机 |
CN109141362A (zh) * | 2017-07-27 | 2019-01-04 | 上海华测导航技术股份有限公司 | 一种无人机高精度倾斜摄影测量系统及方法 |
CN110398985A (zh) * | 2019-08-14 | 2019-11-01 | 北京信成未来科技有限公司 | 一种分布式自适应无人机测控系统及方法 |
CN110445987A (zh) * | 2019-08-05 | 2019-11-12 | 上海海鸥数码照相机有限公司 | 一种多相机曝光同步控制系统及其方法和无人机 |
CN209877958U (zh) * | 2019-04-11 | 2019-12-31 | 广州笨笨网络科技有限公司 | 一种倾斜摄影系统 |
CN110910502A (zh) * | 2019-12-25 | 2020-03-24 | 河南思拓力测绘科技有限公司 | 一种无人机三维建模系统 |
-
2020
- 2020-12-10 CN CN202011432866.1A patent/CN112985361A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106052648A (zh) * | 2016-06-17 | 2016-10-26 | 陈长军 | 一种轻小型倾斜摄影测量系统及方法 |
CN206609424U (zh) * | 2016-09-26 | 2017-11-03 | 中国科学院遥感与数字地球研究所 | 超轻型可变角度航空倾斜摄影系统 |
CN106814751A (zh) * | 2017-02-28 | 2017-06-09 | 建荣半导体(深圳)有限公司 | 一种飞行控制协议自动适配方法、装置及系统 |
CN109141362A (zh) * | 2017-07-27 | 2019-01-04 | 上海华测导航技术股份有限公司 | 一种无人机高精度倾斜摄影测量系统及方法 |
CN107908197A (zh) * | 2017-11-23 | 2018-04-13 | 深圳市智璟科技有限公司 | 基于红外信标及视觉的无人机精准降落系统和方法 |
CN108423153A (zh) * | 2018-05-17 | 2018-08-21 | 王瀚晨 | 模块化微型无人机 |
CN209877958U (zh) * | 2019-04-11 | 2019-12-31 | 广州笨笨网络科技有限公司 | 一种倾斜摄影系统 |
CN110445987A (zh) * | 2019-08-05 | 2019-11-12 | 上海海鸥数码照相机有限公司 | 一种多相机曝光同步控制系统及其方法和无人机 |
CN110398985A (zh) * | 2019-08-14 | 2019-11-01 | 北京信成未来科技有限公司 | 一种分布式自适应无人机测控系统及方法 |
CN110910502A (zh) * | 2019-12-25 | 2020-03-24 | 河南思拓力测绘科技有限公司 | 一种无人机三维建模系统 |
Non-Patent Citations (3)
Title |
---|
周前飞等: "航空变焦距斜视成像几何畸变的自动校正", 《光学精密工程》 * |
朱闫霞: "浅谈无人机倾斜摄影外业航飞解决方案", 《电子测试》 * |
韩飞等: "无人机航测在海外高速公路地形测绘中的应用研究", 《路基工程》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114993263A (zh) * | 2022-05-26 | 2022-09-02 | 邓州市邓房测绘有限公司 | 一种基于水准点定位的高精度建筑物无人机测绘系统 |
CN114993263B (zh) * | 2022-05-26 | 2023-11-21 | 邓州市邓房测绘有限公司 | 一种基于水准点定位的高精度建筑物无人机测绘系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2018292610B2 (en) | Method and system for performing simultaneous localization and mapping using convolutional image transformation | |
CN108711166B (zh) | 一种基于四旋翼无人机的单目相机尺度估计方法 | |
CN107223269B (zh) | 三维场景定位方法和装置 | |
CN111344644B (zh) | 用于基于运动的自动图像捕获的技术 | |
CN110572630B (zh) | 三维图像拍摄系统、方法、装置、设备以及存储介质 | |
US11610373B2 (en) | Method of generating three-dimensional model data of object | |
CN109416744A (zh) | 改进的相机校准系统、目标和过程 | |
KR101896654B1 (ko) | 드론을 이용한 3d 영상 처리 시스템 및 방법 | |
WO2020014987A1 (zh) | 移动机器人的控制方法、装置、设备及存储介质 | |
CN111275015A (zh) | 一种基于无人机的电力巡线电塔检测识别方法及系统 | |
CN110213491B (zh) | 一种对焦方法、装置及存储介质 | |
CN110378898B (zh) | 一种信标定位的方法、装置、存储介质及设备 | |
CN110062916A (zh) | 用于模拟可移动平台的操作的视觉模拟系统 | |
CN112509057A (zh) | 相机外参标定方法、装置、电子设备以及计算机可读介质 | |
CN114766042A (zh) | 目标检测方法、装置、终端设备及介质 | |
CN113228103A (zh) | 目标跟踪方法、装置、无人机、系统及可读存储介质 | |
CN112750168A (zh) | 事件相机内参的标定方法、装置、计算机设备和存储介质 | |
CN110264530A (zh) | 一种相机标定方法、装置和无人机 | |
CN113031462A (zh) | 无人机用港机巡检航线规划系统及方法 | |
CN110544278A (zh) | 刚体运动捕捉方法及装置、agv位姿捕捉系统 | |
CN111369632A (zh) | 相机标定中内参获取的方法及装置 | |
JP7220784B2 (ja) | 測量用サンプリング点の計画方法、装置、制御端末及び記憶媒体 | |
CN112985361A (zh) | 一种基于无人机免相控实景三维建模测绘方法及系统 | |
CN109360277A (zh) | 虚拟仿真显示控制方法和装置,存储介质及电子装置 | |
Grießbach et al. | IPS–a system for real-time navigation and 3D modeling |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210618 |