CN110989674A - 一种基于ArUco标签的无人机视觉引导降落方法 - Google Patents
一种基于ArUco标签的无人机视觉引导降落方法 Download PDFInfo
- Publication number
- CN110989674A CN110989674A CN201911293408.1A CN201911293408A CN110989674A CN 110989674 A CN110989674 A CN 110989674A CN 201911293408 A CN201911293408 A CN 201911293408A CN 110989674 A CN110989674 A CN 110989674A
- Authority
- CN
- China
- Prior art keywords
- marker
- unmanned aerial
- camera
- aerial vehicle
- aruco
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000000007 visual effect Effects 0.000 title claims abstract description 62
- 238000000034 method Methods 0.000 title claims abstract description 35
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 claims abstract description 60
- 238000012545 processing Methods 0.000 claims abstract description 16
- 230000009471 action Effects 0.000 claims abstract description 9
- 230000004044 response Effects 0.000 claims abstract description 8
- 239000003550 marker Substances 0.000 claims description 121
- 239000011159 matrix material Substances 0.000 claims description 21
- 238000001514 detection method Methods 0.000 claims description 10
- 230000008569 process Effects 0.000 claims description 9
- 230000009466 transformation Effects 0.000 claims description 9
- 238000013519 translation Methods 0.000 claims description 9
- 230000005540 biological transmission Effects 0.000 claims description 4
- 239000000284 extract Substances 0.000 claims description 4
- 238000001914 filtration Methods 0.000 claims description 4
- 238000004891 communication Methods 0.000 abstract description 3
- 238000012937 correction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/10—Simultaneous control of position or course in three dimensions
- G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/12—Target-seeking control
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automation & Control Theory (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
本发明公开了一种基于ArUco标签的无人机视觉引导降落方法,包含ArUco标志板生成端、视觉算法处理端、飞控和视觉算法通讯端、以及飞控动作响应端;根据ArUco标签编码丰富的特性实现机场的有效扩展,利用背投灯点亮标志板的方式确保机场夜间的正常作业,并借助ArUco算法库容错性高和姿态解算准的特点进一步提高视觉降落的准确性。
Description
技术领域
本发明属于无人机应用技术领域,特别涉及一种基于ArUco标签的无人机视觉引导降落方法。
背景技术
随着无人机在行业应用领域的逐渐多元化,面对复杂严苛的作业环境,可靠性和智能化程度就成为衡量无人机系统成熟与否的重要因素。无人机视觉引导降落模块作为空基机器人智能化应用的一部分,能够有效地规避无人机降落时刻GPS信息不准导致的位置偏移,为无人机在固定机场或车载机场的末端降落提供准确的辅助信息。
近几年,为解决普通GPS精度等级不足导致的无人机降落准确性问题,出现了多种应对方案,主要包括采用差分GPS硬件进行全程引导以及采用计算机视觉进行末端引导。其中,差分GPS硬件的定位精度可以达到厘米级,但其受环境因素影响较大,在遮挡较多或偏远区域的信号强度较差,适用场景的局限性很大;视觉末端引导则主要通过计算机视觉算法跟踪标志板来估算飞机位置,从而实现飞行末端的精准降落,但如何将其扩展至可用于多架飞机降落的机场、如何实现白天和夜晚全天候作业以及如何保证引导降落的准确性则是目前该类方法所要重点解决的问题。
发明内容
本发明的目的在于提供一种基于ArUco标签的无人机视觉引导降落方法,以解决上述问题。
为实现上述目的,本发明采用以下技术方案:
一种基于ArUco标签的无人机视觉引导降落方法,包括以下步骤:
步骤1,生成ArUco标志板:每一个ArUco Marker都是一个二进制平方标记,它由一个宽的黑边和一个内部的二进制矩阵组成;
步骤2,接收解析飞控指令:飞控和视觉算法之间通过串口通信,而串口端口和波特率信息记录在配置文件中,算法流程从配置文件中打开对应端口并创建接收解析飞控指令的线程;
步骤3,执行视觉降落算法:视觉算法处理端根据读取到的视频帧和预先标定的相机参数,采用ArUco算法库对视频帧中的Marker进行检测,并估算得到当前时刻无人机相对于Marker的位置和姿态;当接收到飞控发送的视觉着陆启动信号时,视觉降落算法进入跟随状态;
步骤4,发送结果至飞控:在完成每一个视频帧的处理后,将处理结果发送至飞控;
步骤5,飞控动作响应:当飞控接收到视觉算法的数据包后,如果定位状态为1,则说明此时算法数据可信任,飞控将根据当前相机相对于Marker中心的偏移量以及偏航角对飞机位姿进行反向补偿和降落策略的控制,从而实现无人机的准确着陆。
进一步的,步骤1具体为:黑色边界用于快速检测到图像,二进制编码用于决定Marker的ID;Marker存在多种表现形式,而Marker的字典就是各个形式的集合,其主要性质是字典大小和Marker大小,其中,字典大小是组成字典的Marker数量,而Marker大小则是二进制位的个数;
采用多个Marker嵌套的模式确保无人机在降落阶段的不同高度都能看到完整的Marker,从而实现姿态估计,每组嵌套Marker内部二进制编码均不同且有特定的对应关系,能够实现机场扩展。
进一步的,步骤2中具体为:飞控按照包的形式发送数据,主要的信息包括机场ID号以及开关命令,其中,机场ID号用于确保无人机降落到指定机场,而开关命令用于切换引导控制权,当算法读取到开始指令时则启动视觉引导着陆任务。
进一步的,步骤3中具体为:
1)连接相机,以获取视频图像信息;如果相机连接失败,则发送错误信号给飞控;
2)读取相机参数、机场信息和Marker信息;其中,相机参数通过标定相机所得,用于记录相机内参和畸变参数等固有属性;机场信息用于记录降落区域的机场个数及编号,采用外大里小两层Marker嵌套的方式,每个机场包含了两个Marker ID;而Marker信息用于记录Marker隶属的字典以及对应的边长,单位为米;
3)调用ArUco库中的检测函数,用于标记画面中出现的指定ID的Marker;具体地,检测算法先通过灰度化将图像由RGB通道转为Gray通道,再使用中值滤波去除噪声干扰,并利用自适应阈值Otsu的方式将灰度图进行二值化,随后提取轮廓,并找出所有可能的凸四边形作为候选,最后通过ID值和Marker内部矩阵比对筛选出指定Marker进行框选,且优先选择大Marker;
4)调用ArUco库中的位姿估算函数,得到Marker相对于相机的位置和姿态;具体地,根据相机坐标系和Marker坐标系的对应关系,根据PnP方式建立二者的旋转和平移关系,得到Marker相对于相机的变换矩阵;
5)对上一步的变换矩阵求逆得到相机相对于Marker的旋转和平移矩阵,确保所有估算得到的相机位姿都相对于同一个坐标系。
进一步的,步骤4中视觉算法发送给飞控的数据包括定位状态、X方向偏移量、Y方向偏移量、Z方向偏移量以及偏航角;该数据同样采用数据包的形式发送,数据发送频率和视频帧率保持一致。
进一步的,步骤5中进一步的,在修正无人机在水平方向上不断居中的同时,还需控制其在垂直方向的高度;在降落过程中Marker偏出相机视野时,需要拉高飞机至一定高度以使Marker重新出现在画面中。
与现有技术相比,本发明有以下技术效果:
本发明提供了一种基于ArUco标签的无人机视觉引导降落方法,能够很好地利用ArUco标签编码丰富、算法库容错性高和姿态解算准等特点,在保证视觉引导降落准确性的前提下,实现无人机机场的有效扩展。同时,整个算法流程运行于机载端的ARM板上,通过多线程方式将数据传输端和视觉算法处理端分开计算,确保了算法的实时运行。另外,为保证该系统可以全天候作业,使用了背投灯点亮标志板的方式,在不改变视觉引导流程的前提下,很好地避免了夜间降落使用额外传感器所带来的安装和成本等问题。
附图说明
图1是基于ArUco标签的无人机视觉引导降落方法的流程框图;
图2是不同字典下的Marker示例图;
图3是DICT_4*4_1000字典中ID为0和1的Marker编码示例;
图4是嵌套模式的Marker组合。
具体实施方式
下面结合附图对本发明进行详细说明。
请参阅图1至图4,一种基于ArUco标签的无人机视觉引导降落方法,包括以下步骤:
步骤1,生成ArUco标志板:每一个ArUco Marker都是一个二进制平方标记,它由一个宽的黑边和一个内部的二进制矩阵组成;
步骤2,接收解析飞控指令:飞控和视觉算法之间通过串口通信,而串口端口和波特率信息记录在配置文件中,算法流程从配置文件中打开对应端口并创建接收解析飞控指令的线程;
步骤3,执行视觉降落算法:视觉算法处理端根据读取到的视频帧和预先标定的相机参数,采用ArUco算法库对视频帧中的Marker进行检测,并估算得到当前时刻无人机相对于Marker的位置和姿态;当接收到飞控发送的视觉着陆启动信号时,视觉降落算法进入跟随状态;
步骤4,发送结果至飞控:在完成每一个视频帧的处理后,将处理结果发送至飞控;
步骤5,飞控动作响应:当飞控接收到视觉算法的数据包后,如果定位状态为1,则说明此时算法数据可信任,飞控将根据当前相机相对于Marker中心的偏移量以及偏航角对飞机位姿进行反向补偿和降落策略的控制,从而实现无人机的准确着陆。
步骤1具体为:黑色边界用于快速检测到图像,二进制编码用于决定Marker的ID;Marker存在多种表现形式,而Marker的字典就是各个形式的集合,其主要性质是字典大小和Marker大小,其中,字典大小是组成字典的Marker数量,而Marker大小则是二进制位的个数;
采用多个Marker嵌套的模式确保无人机在降落阶段的不同高度都能看到完整的Marker,从而实现姿态估计,每组嵌套Marker内部二进制编码均不同且有特定的对应关系,能够实现机场扩展。
步骤2中具体为:飞控按照包的形式发送数据,主要的信息包括机场ID号以及开关命令,其中,机场ID号用于确保无人机降落到指定机场,而开关命令用于切换引导控制权,当算法读取到开始指令时则启动视觉引导着陆任务。
步骤3中具体为:
1)连接相机,以获取视频图像信息;如果相机连接失败,则发送错误信号给飞控;
2)读取相机参数、机场信息和Marker信息;其中,相机参数通过标定相机所得,用于记录相机内参和畸变参数等固有属性;机场信息用于记录降落区域的机场个数及编号,采用外大里小两层Marker嵌套的方式,每个机场包含了两个Marker ID;而Marker信息用于记录Marker隶属的字典以及对应的边长,单位为米;
3)调用ArUco库中的检测函数,用于标记画面中出现的指定ID的Marker;具体地,检测算法先通过灰度化将图像由RGB通道转为Gray通道,再使用中值滤波去除噪声干扰,并利用自适应阈值Otsu的方式将灰度图进行二值化,随后提取轮廓,并找出所有可能的凸四边形作为候选,最后通过ID值和Marker内部矩阵比对筛选出指定Marker进行框选,且优先选择大Marker;
4)调用ArUco库中的位姿估算函数,得到Marker相对于相机的位置和姿态;具体地,根据相机坐标系和Marker坐标系的对应关系,根据PnP方式建立二者的旋转和平移关系,得到Marker相对于相机的变换矩阵;
5)对上一步的变换矩阵求逆得到相机相对于Marker的旋转和平移矩阵,确保所有估算得到的相机位姿都相对于同一个坐标系。
步骤4中视觉算法发送给飞控的数据包括定位状态、X方向偏移量、Y方向偏移量、Z方向偏移量以及偏航角;该数据同样采用数据包的形式发送,数据发送频率和视频帧率保持一致。
步骤5中进一步的,在修正无人机在水平方向上不断居中的同时,还需控制其在垂直方向的高度;在降落过程中Marker偏出相机视野时,需要拉高飞机至一定高度以使Marker重新出现在画面中。
本发明提供了一种基于ArUco标签的无人机视觉引导降落方法,根据ArUco标签编码丰富的特性实现机场的有效扩展,利用背投灯点亮标志板的方式确保机场夜间的正常作业,并借助ArUco算法库容错性高和姿态解算准的特点进一步提高视觉降落的准确性。
本发明所采用的技术方案包含ArUco标志板生成端、视觉算法处理端、飞控和视觉算法通讯端、以及飞控动作响应端,整个算法流程均在机载ARM板NVIDIAJetson Nano上完成。其中,ArUco标志板生成端采用多个Marker嵌套的模式确保无人机在降落阶段的不同高度都能看到完整的Marker,从而实现姿态估计,由于每组嵌套Marker内部二进制编码均不同且有特定的对应关系,因此能够方便的实现机场扩展;
视觉算法处理端根据读取到的视频帧和预先标定的相机参数,采用ArUco算法库对视频帧中的Marker进行检测,并估算得到当前时刻无人机相对于Marker的位置和姿态;
飞控和视觉算法通讯端通过串口实现数据包的接收和发送,其中接收端是指视觉算法接收飞控发来的开关指令、机场ID号等信息,而发送端是指视觉算法将处理得到的位姿状态发送给飞控以供其对无人机进行控制;
飞控动作响应端根据视觉算法得到的偏移量和姿态角对无人机进行反向补偿和降落策略的控制,从而实现无人机的准确着陆。
实施例:
本发明提供了一种基于ArUco标签的无人机视觉引导降落方法。整个流程包含五个主要部分:生成ArUco标志板、接收解析飞控指令、执行视觉降落算法、发送结果至飞控、以及飞控动作响应,而其中的算法主体均在机载ARM板NVIDIA Jetson Nano上完成。该方法的流程框图如图1所示。
所述方法的具体实施步骤如下:
步骤S1:生成ArUco标志板。每一个ArUco Marker都是一个二进制平方标记,它由一个宽的黑边和一个内部的二进制矩阵组成,其中,黑色边界有利于快速检测到图像,二进制编码用于决定Marker的ID,并加入了错误检测和矫正技术,提高了容错性。Marker存在多种表现形式,而Marker的字典就是各个形式的集合,其主要性质是字典大小和Marker大小。其中,字典大小是组成字典的Marker数量,而Marker大小则是二进制位的个数。例如一个4*4的Marker由16bits组成,一个5*5的Marker由25bits组成,部分Marker的示例如图2所示。
ArUco标签提供了字典类来描述Marker字典,并通过文件记录不同字典的编码。例如DICT_4*4_1000就是一个预定义的字典,包含1000个不同的Marker,且每个Marker都由16bits组成。在预先建立的字典中,ID0和ID1的编码及对应样式如图3所示,按照白为1黑为0、每8bits一组的方式,从左到右从上到下进行编码,则ID0所在Marker对应的二进制编码为10110101,00110010,转换为十进制则是181,50;将图像逆时针旋转90度,再次按照从左到右从上到下的方式编码,则二进制编码为11101011,01001000,转换为十进制则是235,72;再依次逆时针旋转90度就可以得到余下的两个编码值。由此可见,字典预编码格式和Marker样式是一一对应的,且Marker具有方向性。
系统实际运行时,为应对相机在降落过程中因高度变化带来的视场范围不断缩小的问题,我们采用了嵌套模式的Marker组合,以确保在高空可以看到最大的Marker,而在着陆时可以看到最小的Marker,如图4所示。当需要对机场进行扩展时,只需按照类似的嵌套方式,将不同ID的Marker组合在一起即可实现多个具有不同ID的机场创建。
步骤S2:接收解析飞控指令。飞控和视觉算法之间通过串口通信,而串口端口和波特率信息记录在配置文件中,算法流程从配置文件中打开对应端口并创建接收解析飞控指令的线程。如图1中S2所示,飞控按照包的形式发送数据,其频率为50Hz,每个数据包有16个字节,主要的信息包括机场ID号以及开关命令。其中,机场ID号用于确保无人机降落到指定机场,而开关命令用于切换引导控制权,当算法读取到开始指令时则启动视觉引导着陆任务。
步骤S3:执行视觉降落算法。该部分运算启用了另一个线程完成,当接收到飞控发送的视觉着陆启动信号时,算法进入跟随状态,开始执行如下操作:
1)连接相机,以获取视频图像信息。如果相机连接失败,则发送错误信号给飞控;
2)读取相机参数、机场信息和Marker信息。其中,相机参数通过标定相机所得,用于记录相机内参和畸变参数等固有属性;机场信息用于记录降落区域的机场个数及编号,由于目前采用了外大里小两层Marker嵌套的方式,因此每个机场包含了两个Marker ID;而Marker信息用于记录Marker隶属的字典以及对应的边长(单位为米);
3)调用ArUco库中的检测函数,用于标记画面中出现的指定ID的Marker。具体地,检测算法先通过灰度化将图像由RGB通道转为Gray通道,再使用中值滤波去除噪声干扰,并利用自适应阈值Otsu的方式将灰度图进行二值化,随后提取轮廓,并找出所有可能的凸四边形作为候选,最后通过ID值和Marker内部矩阵比对筛选出指定Marker进行框选,且优先选择大Marker;
4)调用ArUco库中的位姿估算函数,从而得到Marker相对于相机的位置和姿态。具体地,由于知道Marker的实际尺寸、相机参数以及图像中Marker的像素位置,根据相机坐标系和Marker坐标系的对应关系,可以根据PnP方式建立二者的旋转和平移关系,得到Marker相对于相机的变换矩阵;
5)由于实际使用时Marker降落的基准位置,因此需要对上一步的变换矩阵求逆得到相机相对于Marker的旋转和平移矩阵,从而确保所有估算得到的相机位姿都相对于同一个坐标系。
步骤S4:发送结果至飞控。在完成每一个视频帧的处理后,就需要将处理结果发送至飞控,确保其快速响应。由于求取的相机相对于Marker的变换矩阵包括旋转和平移向量,且无人机响应的主要为偏航角和相对于Marker的偏移量,因此视觉算法发送给飞控的数据主要包括定位状态、X方向偏移量、Y方向偏移量、Z方向偏移量以及偏航角。该数据同样采用数据包的形式发送,每个数据包为14个字节,数据发送频率和视频帧率保持一致;
步骤S5:飞控动作响应。当飞控接收到视觉算法的数据包后,如果定位状态为1,则说明此时算法数据可信任,飞控将根据当前相机相对于Marker中心的偏移量以及偏航角对飞机位姿进行反向补偿,例如无人机的X方向偏移量为正时,则需要将飞机往相反方向拉。在修正无人机在水平方向上不断居中的同时,还需控制其在垂直方向的高度,确保其能够按照一定速度平稳降落。另外,降落策略的控制也是飞控动作响应的一个重要环节,比如在降落过程中由于强风导致Marker偏出相机视野时,需要拉高飞机至一定高度以确保Marker重新出现在画面中。因此,该步骤主要保证了降落过程的准确性和容错性。
Claims (6)
1.一种基于ArUco标签的无人机视觉引导降落方法,其特征在于,包括以下步骤:
步骤1,生成ArUcoMarker:每一个ArUco Marker都是一个二进制平方标记,它由一个宽的黑边和一个内部的二进制矩阵组成;ArUcoMarker为ArUco标志板;
步骤2,接收解析飞控指令:飞控和视觉算法之间通过串口通信,而串口端口和波特率信息记录在配置文件中,算法流程从配置文件中打开对应端口并创建接收解析飞控指令的线程;
步骤3,执行视觉降落算法:视觉算法处理端根据读取到的视频帧和预先标定的相机参数,采用ArUco算法库对视频帧中的Marker进行检测,并估算得到当前时刻无人机相对于Marker的位置和姿态;当接收到飞控发送的视觉着陆启动信号时,视觉降落算法进入跟随状态;
步骤4,发送结果至飞控:在完成每一个视频帧的处理后,将处理结果发送至飞控;
步骤5,飞控动作响应:当飞控接收到视觉算法的数据包后,如果定位状态为1,则说明此时算法数据可信任,飞控将根据当前相机相对于Marker中心的偏移量以及偏航角对飞机位姿进行反向补偿和降落策略的控制,从而实现无人机的准确着陆。
2.根据权利要求1所述的一种基于ArUco标签的无人机视觉引导降落方法,其特征在于,步骤1具体为:黑色边界用于快速检测到图像,二进制编码用于决定Marker的ID;Marker存在多种表现形式,而Marker的字典就是各个形式的集合,其主要性质是字典大小和Marker大小,其中,字典大小是组成字典的Marker数量,而Marker大小则是二进制位的个数;
采用多个Marker嵌套的模式确保无人机在降落阶段的不同高度都能看到完整的Marker,从而实现姿态估计,每组嵌套Marker内部二进制编码均不同且有特定的对应关系,能够实现机场扩展。
3.根据权利要求1所述的一种基于ArUco标签的无人机视觉引导降落方法,其特征在于,步骤2中具体为:飞控按照包的形式发送数据,主要的信息包括机场ID号以及开关命令,其中,机场ID号用于确保无人机降落到指定机场,而开关命令用于切换引导控制权,当算法读取到开始指令时则启动视觉引导着陆任务。
4.根据权利要求1所述的一种基于ArUco标签的无人机视觉引导降落方法,其特征在于,步骤3中具体为:
1)连接相机,以获取视频图像信息;如果相机连接失败,则发送错误信号给飞控;
2)读取相机参数、机场信息和Marker信息;其中,相机参数通过标定相机所得,用于记录相机内参和畸变参数等固有属性;机场信息用于记录降落区域的机场个数及编号,采用外大里小两层Marker嵌套的方式,每个机场包含了两个Marker ID;而Marker信息用于记录Marker隶属的字典以及对应的边长,单位为米;
3)调用ArUco库中的检测函数,用于标记画面中出现的指定ID的Marker;具体地,检测算法先通过灰度化将图像由RGB通道转为Gray通道,再使用中值滤波去除噪声干扰,并利用自适应阈值Otsu的方式将灰度图进行二值化,随后提取轮廓,并找出所有可能的凸四边形作为候选,最后通过ID值和Marker内部矩阵比对筛选出指定Marker进行框选,且优先选择大Marker;
4)调用ArUco库中的位姿估算函数,得到Marker相对于相机的位置和姿态;具体地,根据相机坐标系和Marker坐标系的对应关系,根据PnP方式建立二者的旋转和平移关系,得到Marker相对于相机的变换矩阵;
5)对上一步的变换矩阵求逆得到相机相对于Marker的旋转和平移矩阵,确保所有估算得到的相机位姿都相对于同一个坐标系。
5.根据权利要求1所述的一种基于ArUco标签的无人机视觉引导降落方法,其特征在于,步骤4中视觉算法发送给飞控的数据包括定位状态、X方向偏移量、Y方向偏移量、Z方向偏移量以及偏航角;该数据同样采用数据包的形式发送,数据发送频率和视频帧率保持一致。
6.根据权利要求1所述的一种基于ArUco标签的无人机视觉引导降落方法,其特征在于,步骤5中进一步的,在修正无人机在水平方向上不断居中的同时,还需控制其在垂直方向的高度;在降落过程中Marker偏出相机视野时,需要拉高飞机至一定高度以使Marker重新出现在画面中。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911293408.1A CN110989674B (zh) | 2019-12-16 | 2019-12-16 | 一种基于ArUco标签的无人机视觉引导降落方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911293408.1A CN110989674B (zh) | 2019-12-16 | 2019-12-16 | 一种基于ArUco标签的无人机视觉引导降落方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110989674A true CN110989674A (zh) | 2020-04-10 |
CN110989674B CN110989674B (zh) | 2023-03-31 |
Family
ID=70093978
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911293408.1A Active CN110989674B (zh) | 2019-12-16 | 2019-12-16 | 一种基于ArUco标签的无人机视觉引导降落方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110989674B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112304305A (zh) * | 2020-10-31 | 2021-02-02 | 中环曼普科技(南京)有限公司 | 一种结合marker图像的车辆初始定位方法及系统 |
CN113220020A (zh) * | 2021-04-30 | 2021-08-06 | 西安鲲鹏易飞无人机科技有限公司 | 基于图形标签的无人机任务规划方法 |
CN113821047A (zh) * | 2021-08-18 | 2021-12-21 | 杭州电子科技大学 | 一种基于单目视觉的无人机自主降落方法 |
CN114360296A (zh) * | 2021-12-15 | 2022-04-15 | 中国飞行试验研究院 | 基于地基光电设备的全自动飞机进近降落过程监视方法 |
CN114415901A (zh) * | 2022-03-30 | 2022-04-29 | 深圳市海清视讯科技有限公司 | 人机交互方法、装置、设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150346722A1 (en) * | 2014-05-27 | 2015-12-03 | Recreational Drone Event Systems, Llc | Virtual and Augmented Reality Cockpit and Operational Control Systems |
CN106127201A (zh) * | 2016-06-21 | 2016-11-16 | 西安因诺航空科技有限公司 | 一种基于视觉定位降落末端的无人机降落方法 |
WO2017160192A1 (ru) * | 2016-03-18 | 2017-09-21 | Павел Константинович ГЕРАСИМОВ | Способ точной посадки беспилотного летательного аппарата |
CN108828500A (zh) * | 2018-06-22 | 2018-11-16 | 深圳草莓创新技术有限公司 | 无人机精准的降落引导方法及相关产品 |
-
2019
- 2019-12-16 CN CN201911293408.1A patent/CN110989674B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150346722A1 (en) * | 2014-05-27 | 2015-12-03 | Recreational Drone Event Systems, Llc | Virtual and Augmented Reality Cockpit and Operational Control Systems |
WO2017160192A1 (ru) * | 2016-03-18 | 2017-09-21 | Павел Константинович ГЕРАСИМОВ | Способ точной посадки беспилотного летательного аппарата |
CN106127201A (zh) * | 2016-06-21 | 2016-11-16 | 西安因诺航空科技有限公司 | 一种基于视觉定位降落末端的无人机降落方法 |
CN108828500A (zh) * | 2018-06-22 | 2018-11-16 | 深圳草莓创新技术有限公司 | 无人机精准的降落引导方法及相关产品 |
Non-Patent Citations (1)
Title |
---|
张咪;赵勇;布树辉;张臻炜;杨君;: "基于阶层标识的无人机自主精准降落系统" * |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112304305A (zh) * | 2020-10-31 | 2021-02-02 | 中环曼普科技(南京)有限公司 | 一种结合marker图像的车辆初始定位方法及系统 |
CN113220020A (zh) * | 2021-04-30 | 2021-08-06 | 西安鲲鹏易飞无人机科技有限公司 | 基于图形标签的无人机任务规划方法 |
CN113220020B (zh) * | 2021-04-30 | 2023-10-31 | 西安鲲鹏易飞无人机科技有限公司 | 基于图形标签的无人机任务规划方法 |
CN113821047A (zh) * | 2021-08-18 | 2021-12-21 | 杭州电子科技大学 | 一种基于单目视觉的无人机自主降落方法 |
CN114360296A (zh) * | 2021-12-15 | 2022-04-15 | 中国飞行试验研究院 | 基于地基光电设备的全自动飞机进近降落过程监视方法 |
CN114360296B (zh) * | 2021-12-15 | 2024-04-09 | 中国飞行试验研究院 | 基于地基光电设备的全自动飞机进近降落过程监视方法 |
CN114415901A (zh) * | 2022-03-30 | 2022-04-29 | 深圳市海清视讯科技有限公司 | 人机交互方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110989674B (zh) | 2023-03-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110989674B (zh) | 一种基于ArUco标签的无人机视觉引导降落方法 | |
CN109270953B (zh) | 一种基于同心圆视觉标识的多旋翼无人机自主降落方法 | |
CN111968128B (zh) | 一种基于图像标记的无人机视觉姿态和位置解算方法 | |
CN105716611B (zh) | 基于环境信息的室内移动机器人及其定位方法 | |
CN107144281B (zh) | 基于合作目标和单目视觉的无人机室内定位系统及定位方法 | |
CN105197252A (zh) | 一种小型无人机降落方法及系统 | |
CN113657256B (zh) | 一种无人艇载无人机海空协同视觉跟踪与自主回收方法 | |
CN110562455A (zh) | 一种智能型无人机自动充电系统 | |
CN110296707A (zh) | 基于vlc技术的室内服务机器人 | |
CN106970649A (zh) | 一种无人机无线充电自动控制平台及控制方法 | |
CN109781120B (zh) | 一种基于同步定位构图的车辆组合定位方法 | |
CN108710381A (zh) | 一种无人机随动起降方法 | |
US20220383755A1 (en) | Unmanned aerial vehicle positioning method based on millimeter-wave radar | |
CN111562791A (zh) | 一种无人机合作目标识别视觉辅助着陆的系统及方法 | |
CN111273679A (zh) | 一种视觉引导的小型固定翼无人机撞网回收纵向制导方法 | |
CN111823237B (zh) | 基于rgb led动态信标的多机器人定位方法及系统 | |
CN114721001A (zh) | 一种基于多传感器融合的移动机器人定位方法 | |
CN114815871A (zh) | 一种基于视觉的垂直起降无人机动平台自主降落方法 | |
CN110618424B (zh) | 一种基于多传感器融合的远距离高压线发现方法 | |
CN111137453A (zh) | 一种舰载垂直起降侦查无人机的测控跟踪系统及方法 | |
CN110568437A (zh) | 一种基于雷达辅助的精确环境建模方法 | |
CN113608556A (zh) | 一种基于多传感器融合的多机器人相对定位方法 | |
CN209821632U (zh) | 一种空地协同无人攻击系统 | |
CN210072415U (zh) | 一种无人机合作目标识别视觉辅助着陆的系统 | |
CN113959412B (zh) | 一种基于红外探测的无人机对接过程主动视觉导航方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |