CN114200954A - 基于Apriltag的无人机降落方法、装置、介质和电子设备 - Google Patents

基于Apriltag的无人机降落方法、装置、介质和电子设备 Download PDF

Info

Publication number
CN114200954A
CN114200954A CN202111266427.2A CN202111266427A CN114200954A CN 114200954 A CN114200954 A CN 114200954A CN 202111266427 A CN202111266427 A CN 202111266427A CN 114200954 A CN114200954 A CN 114200954A
Authority
CN
China
Prior art keywords
position offset
unmanned aerial
aerial vehicle
apriltag
frame image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111266427.2A
Other languages
English (en)
Other versions
CN114200954B (zh
Inventor
李勇
潘屹峰
黄吴蒙
王丹
谢志杰
周成虎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Foshan Zhongke Yuntu Intelligent Technology Co ltd
Original Assignee
Foshan Zhongke Yuntu Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Foshan Zhongke Yuntu Intelligent Technology Co ltd filed Critical Foshan Zhongke Yuntu Intelligent Technology Co ltd
Priority to CN202111266427.2A priority Critical patent/CN114200954B/zh
Publication of CN114200954A publication Critical patent/CN114200954A/zh
Application granted granted Critical
Publication of CN114200954B publication Critical patent/CN114200954B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/10Simultaneous control of position or course in three dimensions
    • G05D1/101Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02TCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00Road transport of goods or passengers
    • Y02T10/10Internal combustion engine [ICE] based vehicles
    • Y02T10/40Engine management systems

Abstract

本发明涉及一种基于Apriltag的无人机降落方法、装置、存储介质以及电子设备,该方法包括:获取无人机对目标降落中心点拍摄的当前帧图像,并识别获得Apriltag标签。计算无人机相对于Apriltag标签的位置偏移量,并对位置偏移量的计算过程进行计时。若计算过程的计时时长超过预设时长,获取当前帧图像之前的预设数量帧图像。根据预设数量帧图像,获得对应的预设数量的位置偏移量。利用二次指数平滑方法对预设数量的位置偏移量进行拟合,建立位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量。根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点,提高了Apriltag标签识别效率,从而使无人机降落更具连续性。

Description

基于Apriltag的无人机降落方法、装置、介质和电子设备
技术领域
本发明涉及无人机技术领域,特别是涉及一种基于Apriltag的无人机降落方法、装置、存储介质以及电子设备。
背景技术
Apriltag是一种视觉基准系统,适用于各种任务,包括增强现实、机器人和相机校准,Apriltag检测软件计算Apriltag标签相对于摄像机的精确3D位置、方向和标识。
然而,目前市面上通过Apriltag库进行编译使用,识别Apriltag标签的效率可能达不到无人机飞控处理速率,从而导致飞机降落断断续续。
发明内容
基于此,本发明的目的在于,提供一种基于Apriltag的无人机降落方法、装置、存储介质以及电子设备,其具有提高Apriltag标签识别效率、使无人机降落更具有连续性的优点。
根据本申请实施例的第一方面,提供一种基于Apriltag的无人机降落方法,包括如下步骤:
获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签;其中,所述目标降落中心点设置有所述Apriltag标签;
计算所述无人机相对于所述Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时;
若所述计算过程的计时时长超过预设时长,获取所述当前帧图像之前的预设数量帧图像;
根据所述预设数量帧图像,获得对应的预设数量的位置偏移量;
利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型;
根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量;
根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点。
根据本申请实施例的第二方面,提供一种基于Apriltag的无人机降落装置,包括:
当前帧图像获取模块,用于获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签;其中,所述目标降落中心点设置有所述Apriltag标签;
位置偏移量计算模块,用于计算所述无人机相对于所述Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时;
预设数量帧图像获取模块,用于若所述计算过程的计时时长超过预设时长,获取所述当前帧图像之前的预设数量帧图像;
位置偏移量获得模块,用于根据所述预设数量帧图像,获得对应的预设数量的位置偏移量;
模型建立模块,用于利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型;
位置偏移量预测模块,用于根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量;
无人机降落模块,用于根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点。
根据本申请实施例的第三方面,提供一种电子设备,包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行如上述任意一项所述的基于Apriltag的无人机降落方法。
根据本申请实施例的第四方面,提供一种计算机可读存储介质,其上储存有计算机程序,该计算机程序被处理器执行时实现如上述任意一项所述的基于Apriltag的无人机降落方法。
本发明实施例通过获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签;其中,所述目标降落中心点设置有所述Apriltag标签;计算所述无人机相对于所述Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时;若所述计算过程的计时时长超过预设时长,获取所述当前帧图像之前的预设数量帧图像;根据所述预设数量帧图像,获得对应的预设数量的位置偏移量;利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型;根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量;根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点。本发明实施例通过利用二次指数平滑方法对超过预设时长的偏移量计算进行模型预测偏移量值的替换,提高了Apriltag标签识别效率,从而使无人机降落更具连续性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
为了更好地理解和实施,下面结合附图详细说明本发明。
附图说明
图1为本发明基于Apriltag的无人机降落方法的流程示意图;
图2为本发明基于Apriltag的无人机降落方法中S10的流程示意图;
图3为本发明基于Apriltag的无人机降落方法中S50的流程示意图;
图4为本发明基于Apriltag的无人机降落方法中S60的流程示意图;
图5为本发明基于Apriltag的无人机降落方法中S70的流程示意图;
图6为本发明基于Apriltag的无人机降落装置的结构框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施例方式作进一步地详细描述。
应当明确,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在本申请实施例使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请实施例。在本申请实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。在本申请的描述中,需要理解的是,术语“第一”、“第二”、“第三”等仅用于区别类似的对象,而不必用于描述特定的顺序或先后次序,也不能理解为指示或暗示相对重要性。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本申请中的具体含义。
此外,在本申请的描述中,除非另有说明,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
请参阅图1,本发明实施例提供一种基于Apriltag的无人机降落方法,包括的步骤如下:
S10.获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签;其中,所述目标降落中心点设置有所述Apriltag标签。
在本申请实施例中,将Apriltag标签设置于目标降落中心点,无人机位于所述目标降落中心点的上空。将无人机云台上搭载的摄像头调整至向下垂直方向,使得Apriltag标签出现在摄像头视野范围内。在无人机降落过程中,无人机开启摄像头对目标降落中心点进行实时拍摄,获得当前帧图像,并从所述当前帧图像中识别获得Apriltag标签。
S20.计算所述无人机相对于所述Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时。
在本申请实施例中,无人机的位置默认为所述当前帧图像的正中心,获取所述Apriltag标签在所述当前帧图像的像素坐标。根据正中心的像素坐标以及所述当前帧图像的像素坐标之间的坐标差,获得所述无人机相对于所述Apriltag标签的位置偏移量,并且对所述位置偏移量的计算过程进行计时,从而实时得到所述计算过程的计时时长。
S30.若所述计算过程的计时时长超过预设时长,获取所述当前帧图像之前的预设数量帧图像。
在本申请实施例中,所述预设时长为无人机飞控的处理数据时长。发明人在实现本发明的过程中,发现:若所述计算过程的计时时长超过所述预设时长,表示所述计算过程可能遇到网络故障或者未知错误,此时,最终计算得到的位置偏移量的计算时长可能偏长,导致无人机降落断断续续,或者计算出的位置偏移量有问题,导致无人机降落不准确。因此,本申请获取所述当前帧图像之前的预设数量帧图像来预测所述当前帧图像对应的位置偏移量。其中,所述预设数量帧图像为摄像头对目标降落中心点拍摄的相邻帧图像。
S40.根据所述预设数量帧图像,获得对应的预设数量的位置偏移量。
在本申请实施例中,对所述预设数量帧图像识别获得Apriltag标签,计算所述无人机相对于所述预设数量帧图像的Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时。其中,所述计算过程的计时时长小于所述预设时长。
S50.利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型。
二次指数平滑法是对一次指数平滑值作再一次指数平滑的方法。它不能单独地进行预测,必须与一次指数平滑法配合,建立预测的数学模型,然后运用数学模型确定预测值。在本申请实施例中,利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型,所述位置偏移量预测模型用于预测计时时长大于预设时长的位置偏移量。
S60.根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量。
在本申请实施例中,由于当前帧图像对应的位置偏移量的计算过程对应的计时时长超过预设时长,通过所述位置偏移量预测模型预测的位置偏移量作为为当前帧图像对应的位置偏移量,从而提高Apriltag标签的识别效率。
S70.根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点。
在本申请实施例中,在无人机降落过程中,对所有计算时长大于预设时长的位置偏移量进行替换,从而提高Apriltag标签识别效率,使所述无人机降落至所述目标降落中心点更加连续。
应用本申请实施例,通过获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签;其中,所述目标降落中心点设置有所述Apriltag标签;计算所述无人机相对于所述Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时;若所述计算过程的计时时长超过预设时长,获取所述当前帧图像之前的预设数量帧图像;根据所述预设数量帧图像,获得对应的预设数量的位置偏移量;利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型;根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量;根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点。本发明实施例通过利用二次指数平滑方法对超过预设时长的偏移量计算进行模型预测偏移量值的替换,提高了Apriltag标签识别效率,从而使无人机降落更具连续性。
在一个可选的实施例中,请参阅图2,所述步骤S10,包括S11~S14,具体如下:
S11.采用自适应阈值方法对所述当前帧图像进行分割,获得二值图像。
在本申请实施例中,采用自适应阈值进行图像分割,主要考虑了光照不均和黑暗照明对当前帧图像的影响,提高分割的准确性,而自适应阈值的主要思想就是在像素领域内寻找一个合理的阈值进行分割,选取灰度均值和中值。
S12.使用Union-find方法查找所述二值图像的连通域,获得所述二值图像的轮廓。
通过自适应阈值后,得到一张二值图像,接下来就是要寻找可能组成Apriltag标签的轮廓,由于连通域查找的简单方法就是计算二值图像中的黑白边缘,但是这样查找的连通域很容易出现两个Apriltag标签公用一条边时导致连通域查找错误,因此采用了Union-find方法来求连通域,使得每个连通域都有一个唯一的ID。其中,Union-find即并查集,是解决动态连通性问题的一类非常高效的数据结构。
S13.对所述轮廓进行直线拟合,获得拟合四边形。
轮廓有了之后,对每一个轮廓进行分割,产生一个残差最小的凸四边形,作为Apriltag标签位置的候选,首先对无序的轮廓点按照对重心的角度进行排序,然后就是按部就班的按照顺序选取距离中心点一定范围内的点进行直线拟合,不断迭代索引,计算每条直线的误差总和。对误差总和进行一个低通滤波,使系统更加鲁棒,然后选取误差总和最大的四条直线对应的角点索引作为四边形角点,然后取角点间的点拟合直线,获得拟合四边形。
S14.对所述拟合四边形进行编解码,识别获得所述Apriltag标签。
利用Apriltag编解码方法,先做透视校正,再找到Apriltag标签的期望姿势和实际姿势之间的坐标转换,识别获得所述Apriltag标签。
在本申请实施例中,由于识别的Apriltag标签只有一个,可以减少四边形检测的阈值。具体地,通过对当前帧图像进行缩放,从而减少检测时间,提高Apriltag标签识别方法的处理效率。
在一个可选的实施例中,请参阅图3,所述步骤S50,包括S51~S53,具体如下:
S51.将预设数量的位置偏移量进行编号,获得编号序列Yt,t=1,2,...,k;
S52.根据所述编号序列Yt计算所述二次指数平滑方法的一次指数平滑序列
Figure BDA0003326994090000081
和二次指数平滑序列
Figure BDA0003326994090000082
S53.根据所述一次指数平滑序列
Figure BDA0003326994090000083
和所述二次指数平滑序列
Figure BDA0003326994090000084
计算所述位置偏移量预测模型的参数at和bt
S54.建立位置偏移量预测模型:
Figure BDA0003326994090000085
其中,L表示第k期,即L=k,aL和bL分别表示L=k时的参数,T是预测超前期数,
Figure BDA0003326994090000086
是第L+T期的位置偏移量预测值。
在本申请实施例中,k值可以预设,例如,获取连续10帧图像对应的10个位置偏移量,第11帧图像(即当前帧图像)对应的位置偏移量的计时时长超过预设时长,将所述10个位置偏移量进行编号,获得编号序列Y1,Y2,...,Y10。根据所述编号序列以及二次指数平滑方法,分别计算一次指数平滑序列
Figure BDA0003326994090000087
和二次指数平滑序列
Figure BDA0003326994090000088
即获得
Figure BDA0003326994090000089
Figure BDA00033269940900000810
获得所述一次指数平滑序列
Figure BDA00033269940900000811
和所述二次指数平滑序列
Figure BDA00033269940900000812
之后,可以计算所述位置偏移量预测模型的参数at和bt,即获得a10和b10。根据所述参数at和bt,从而建立位置偏移量预测模型:
Figure BDA00033269940900000813
进而可以获得第11帧图像的位置偏移量为:
Figure BDA00033269940900000814
在一个可选的实施例中,通过以下公式计算所述一次指数平滑序列
Figure BDA00033269940900000815
和二次指数平滑序列
Figure BDA0003326994090000091
Figure BDA0003326994090000092
Figure BDA0003326994090000093
其中,a是预设的平滑系数,
Figure BDA0003326994090000094
在本申请实施例中,令
Figure BDA0003326994090000095
Figure BDA0003326994090000096
为第零期的一次指数平滑值,
Figure BDA0003326994090000097
为第零期的二次指数平滑值,Y1为第一个位置偏移量。例如,第1期的一次指数平滑预测值
Figure BDA0003326994090000098
和二次指数平滑预测值
Figure BDA0003326994090000099
计算为:
Figure BDA00033269940900000910
Figure BDA00033269940900000911
从而,已知所述第零期的一次指数平滑值和所述第零期的二次指数平滑值,以及设定平滑系数a,可以计算出每期的一次指数平滑预测值和二次指数平滑预测值。
在一个可选的实施例中,通过以下公式计算所述位置偏移量预测模型的参数at和bt
Figure BDA00033269940900000912
Figure BDA00033269940900000913
在本申请实施例中,对于第1期的参数a1和b1,计算结果为:
Figure BDA00033269940900000914
Figure BDA00033269940900000915
类似地,根据上述公式可以计算出每期位置偏移量预测模型的参数a1,a2,...,a10和b1,b2,...,b10,从而获得位置偏移量预测模型。
在一个可选的实施例中,请参阅图4,所述步骤S60,包括S61~S62,具体如下:
S61.根据所述位置偏移量预测模型,计算第k+1期的位置偏移量预测值;
S62.将所述第k+1期的位置偏移量预测值作为当前帧图像对应的位置偏移量;其中,通过以下公式计算所述第k+1期的位置偏移量预测值:
Figure BDA0003326994090000101
在本申请实施例中,根据位置偏移量预测模型,可以计算出第11期的位置偏移量预测值,即为:
Figure BDA0003326994090000102
在一个可选的实施例中,请参阅图5,所述步骤S70,包括S71~S72,具体如下:
S71.将所述当前帧图像对应的位置偏移量与所述预设时长的比值作为无人机的降落速度;
S72.根据所述降落速度,将无人机降落至所述无人机降落中心点。
无人机的降落速度包括水平方向移动速度、竖直方向移动速度以及垂直方向降落速度,对无人机在所述水平方向、竖直方向和垂直方向的位置偏移量均采用二次指数平滑方法进行拟合,将所述当前帧图像对应的位置偏移量与所述预设时长的比值作为无人机的降落速度,根据所述降落速度,将无人机降落至所述无人机降落中心点,使无人机降落更连续。
相应于上述方法实施例,请参阅图6,本发明实施例提供一种基于Apriltag的无人机降落装置8,包括:
当前帧图像获取模块81,用于获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签;其中,所述目标降落中心点设置有所述Apriltag标签;
位置偏移量计算模块82,用于计算所述无人机相对于所述Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时;
预设数量帧图像获取模块83,用于若所述计算过程的计时时长超过预设时长,获取所述当前帧图像之前的预设数量帧图像;
位置偏移量获得模块84,用于根据所述预设数量帧图像,获得对应的预设数量的位置偏移量;
模型建立模块85,用于利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型;
位置偏移量预测模块86,用于根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量;
无人机降落模块87,用于根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点。
可选的,所述当前帧图像获取模块81,包括:
图像分割单元812,用于采用自适应阈值方法对所述当前帧图像进行分割,获得二值图像;
连通域查找单元814,用于使用Union-find方法查找所述二值图像的连通域,获得所述二值图像的轮廓;
直线拟合单元816,用于对所述轮廓进行直线拟合,获得拟合四边形;
编解码单元818,用于对所述拟合四边形进行编解码,识别获得所述Apriltag标签。
可选的,所述模型建立模块85,包括:
位置偏移量编号单元852,用于将预设数量的位置偏移量进行编号,获得编号序列Yt,t=1,2,...,k;
指数平滑序列计算单元854,用于根据所述编号序列Yt计算所述二次指数平滑方法的一次指数平滑序列
Figure BDA0003326994090000111
和二次指数平滑序列
Figure BDA0003326994090000112
参数计算单元856,用于根据所述一次指数平滑序列
Figure BDA0003326994090000121
和所述二次指数平滑序列
Figure BDA0003326994090000122
计算所述位置偏移量预测模型的参数at和bt
模型建立单元858,用于建立位置偏移量预测模型:
Figure BDA0003326994090000123
其中,L表示第k期,即L=k,aL和bL分别表示L=k时的参数,T是预测超前期数,
Figure BDA0003326994090000124
是第L+T期的位置偏移量预测值。
可选的,所述无人机降落模块87,包括:
降落速度计算单元872,用于将所述当前帧图像对应的位置偏移量与所述预设时长的比值作为无人机的降落速度;
无人机降落单元874,用于根据所述降落速度,将无人机降落至所述无人机降落中心点。
应用本申请实施例,通过获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签;其中,所述目标降落中心点设置有所述Apriltag标签;计算所述无人机相对于所述Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时;若所述计算过程的计时时长超过预设时长,获取所述当前帧图像之前的预设数量帧图像;根据所述预设数量帧图像,获得对应的预设数量的位置偏移量;利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型;根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量;根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点。本发明实施例通过利用二次指数平滑方法对超过预设时长的偏移量计算进行模型预测偏移量值的替换,提高了Apriltag标签识别效率,从而使无人机降落更具连续性。
本申请还提供一种电子设备,包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行上述实施例的方法步骤。
本申请还提供一种计算机可读存储介质,其上储存有计算机程序,其特征在于,该计算机程序被处理器执行时实现上述实施例的方法步骤。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,则本发明也意图包含这些改动和变形。

Claims (10)

1.一种基于Apriltag的无人机降落方法,其特征在于,包括:
获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签;其中,所述目标降落中心点设置有所述Apriltag标签;
计算所述无人机相对于所述Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时;
若所述计算过程的计时时长超过预设时长,获取所述当前帧图像之前的预设数量帧图像;
根据所述预设数量帧图像,获得对应的预设数量的位置偏移量;
利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型;
根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量;
根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点。
2.根据权利要求1所述的基于Apriltag的无人机降落方法,其特征在于,所述利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型的步骤,包括:
将预设数量的位置偏移量进行编号,获得编号序列Yt,t=1,2,...,k;
根据所述编号序列Yt计算所述二次指数平滑方法的一次指数平滑序列
Figure FDA0003326994080000011
和二次指数平滑序列
Figure FDA0003326994080000012
根据所述一次指数平滑序列
Figure FDA0003326994080000013
和所述二次指数平滑序列
Figure FDA0003326994080000014
计算所述位置偏移量预测模型的参数at和bt
建立位置偏移量预测模型:
Figure FDA0003326994080000015
其中,L表示第k期,即L=k,aL和bL分别表示L=k时的参数,T是预测超前期数,
Figure FDA0003326994080000016
是第L+T期的位置偏移量预测值。
3.根据权利要求2所述的基于Apriltag的无人机降落方法,其特征在于,通过以下公式计算所述一次指数平滑序列
Figure FDA0003326994080000021
和二次指数平滑序列
Figure FDA0003326994080000022
Figure FDA0003326994080000023
Figure FDA0003326994080000024
其中,a是预设的平滑系数,
Figure FDA0003326994080000025
4.根据权利要求2所述的基于Apriltag的无人机降落方法,其特征在于,通过以下公式计算所述位置偏移量预测模型的参数at和bt
Figure FDA0003326994080000026
Figure FDA0003326994080000027
5.根据权利要求2所述的基于Apriltag的无人机降落方法,其特征在于,所述根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量的步骤,包括:
根据所述位置偏移量预测模型,计算第k+1期的位置偏移量预测值;
将所述第k+1期的位置偏移量预测值作为当前帧图像对应的位置偏移量;
其中,通过以下公式计算所述第k+1期的位置偏移量预测值:
Figure FDA0003326994080000028
6.根据权利要求1所述的基于Apriltag的无人机降落方法,其特征在于,所述根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点的步骤,包括:
将所述当前帧图像对应的位置偏移量与所述预设时长的比值作为无人机的降落速度;
根据所述降落速度,将无人机降落至所述无人机降落中心点。
7.根据权利要求1所述的基于Apriltag的无人机降落方法,其特征在于,所述获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签的步骤,包括:
采用自适应阈值方法对所述当前帧图像进行分割,获得二值图像;
使用Union-find方法查找所述二值图像的连通域,获得所述二值图像的轮廓;
对所述轮廓进行直线拟合,获得拟合四边形;
对所述拟合四边形进行编解码,识别获得所述Apriltag标签。
8.一种基于Apriltag的无人机降落装置,其特征在于,包括:
当前帧图像获取模块,用于获取无人机对目标降落中心点拍摄的当前帧图像,并从所述当前帧图像中识别获得Apriltag标签;其中,所述目标降落中心点设置有所述Apriltag标签;
位置偏移量计算模块,用于计算所述无人机相对于所述Apriltag标签的位置偏移量,并对所述位置偏移量的计算过程进行计时;
预设数量帧图像获取模块,用于若所述计算过程的计时时长超过预设时长,获取所述当前帧图像之前的预设数量帧图像;
位置偏移量获得模块,用于根据所述预设数量帧图像,获得对应的预设数量的位置偏移量;
模型建立模块,用于利用二次指数平滑方法对所述预设数量的位置偏移量进行拟合,建立位置偏移量预测模型;
位置偏移量预测模块,用于根据所述位置偏移量预测模型,预测获得当前帧图像对应的位置偏移量;
无人机降落模块,用于根据所述当前帧图像对应的位置偏移量,调整所述无人机的飞行速度,使所述无人机降落至所述目标降落中心点。
9.一种电子设备,其特征在于,包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行如权利要求1至7中任意一项所述的基于Apriltag的无人机降落方法。
10.一种计算机可读存储介质,其上储存有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1至7中任意一项所述的基于Apriltag的无人机降落方法。
CN202111266427.2A 2021-10-28 2021-10-28 基于Apriltag的无人机降落方法、装置、介质和电子设备 Active CN114200954B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111266427.2A CN114200954B (zh) 2021-10-28 2021-10-28 基于Apriltag的无人机降落方法、装置、介质和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111266427.2A CN114200954B (zh) 2021-10-28 2021-10-28 基于Apriltag的无人机降落方法、装置、介质和电子设备

Publications (2)

Publication Number Publication Date
CN114200954A true CN114200954A (zh) 2022-03-18
CN114200954B CN114200954B (zh) 2023-05-23

Family

ID=80646551

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111266427.2A Active CN114200954B (zh) 2021-10-28 2021-10-28 基于Apriltag的无人机降落方法、装置、介质和电子设备

Country Status (1)

Country Link
CN (1) CN114200954B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114782841A (zh) * 2022-04-21 2022-07-22 广州中科云图智能科技有限公司 基于降落图案的校正方法和装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104932522A (zh) * 2015-05-27 2015-09-23 深圳市大疆创新科技有限公司 一种飞行器的自主降落方法和系统
CN107589758A (zh) * 2017-08-30 2018-01-16 武汉大学 一种基于双源视频分析的智能化野外无人机搜救方法与系统
CN110991207A (zh) * 2019-11-19 2020-04-10 山东大学 综合H图案识别和AprilTag二维码识别的无人机精准降落方法
WO2020211812A1 (zh) * 2019-04-19 2020-10-22 深圳市道通智能航空技术有限公司 一种飞行器降落方法及装置
CN112650298A (zh) * 2020-12-30 2021-04-13 广东工业大学 一种无人机追踪降落方法及系统
CN112987764A (zh) * 2021-02-01 2021-06-18 鹏城实验室 降落方法、装置、无人机以及计算机可读存储介质
CN113204891A (zh) * 2021-05-24 2021-08-03 中国人民解放军空军预警学院 基于指数平滑预测的dp-tbd算法跟踪方法及设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104932522A (zh) * 2015-05-27 2015-09-23 深圳市大疆创新科技有限公司 一种飞行器的自主降落方法和系统
CN107589758A (zh) * 2017-08-30 2018-01-16 武汉大学 一种基于双源视频分析的智能化野外无人机搜救方法与系统
WO2020211812A1 (zh) * 2019-04-19 2020-10-22 深圳市道通智能航空技术有限公司 一种飞行器降落方法及装置
CN110991207A (zh) * 2019-11-19 2020-04-10 山东大学 综合H图案识别和AprilTag二维码识别的无人机精准降落方法
CN112650298A (zh) * 2020-12-30 2021-04-13 广东工业大学 一种无人机追踪降落方法及系统
CN112987764A (zh) * 2021-02-01 2021-06-18 鹏城实验室 降落方法、装置、无人机以及计算机可读存储介质
CN113204891A (zh) * 2021-05-24 2021-08-03 中国人民解放军空军预警学院 基于指数平滑预测的dp-tbd算法跟踪方法及设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114782841A (zh) * 2022-04-21 2022-07-22 广州中科云图智能科技有限公司 基于降落图案的校正方法和装置
CN114782841B (zh) * 2022-04-21 2023-12-15 广州中科云图智能科技有限公司 基于降落图案的校正方法和装置

Also Published As

Publication number Publication date
CN114200954B (zh) 2023-05-23

Similar Documents

Publication Publication Date Title
CN108665496B (zh) 一种基于深度学习的端到端的语义即时定位与建图方法
CN106940704B (zh) 一种基于栅格地图的定位方法及装置
CN110919653B (zh) 机器人的爬楼控制方法、装置、存储介质和机器人
CN107844750A (zh) 一种水面全景图像目标检测识别方法
CN108322724B (zh) 图像立体匹配方法以及双目视觉设备
US10878277B2 (en) Ship identification system and method
CN112488067B (zh) 人脸姿态估计方法、装置、电子设备和存储介质
CN109543634B (zh) 定位过程中的数据处理方法、装置、电子设备和存储介质
CN114200954B (zh) 基于Apriltag的无人机降落方法、装置、介质和电子设备
Fan et al. Vision algorithms for fixed-wing unmanned aerial vehicle landing system
CN110276801B (zh) 一种物体定位方法、装置及存储介质
CN111539352A (zh) 一种判断人体关节运动方向的方法及系统
CN111160280A (zh) 基于rgbd相机的目标物体识别与定位方法及移动机器人
CN114815871A (zh) 一种基于视觉的垂直起降无人机动平台自主降落方法
CN112991374A (zh) 基于Canny算法的边缘增强方法、装置、设备及存储介质
CN110853097A (zh) 一种应用于饼干表面图案打印设备的饼干识别定位方法
CN110472640A (zh) 一种目标检测模型预测框处理方法及装置
CN113034613B (zh) 相机的外部参数标定方法及相关装置
CN115953465A (zh) 基于模块化机器人实训平台的三维视觉随机抓取处理方法
CN110569810B (zh) 坐标信息的获取方法及装置、存储介质、电子装置
JP7086386B2 (ja) 点群マッチング装置、点群マッチング方法及びプログラム
CN113592947A (zh) 一种半直接法的视觉里程计实现方法
CN109215049B (zh) 基于多尺度三维先验信息的屋顶分割方法、系统与设备
CN117649409B (zh) 基于机器视觉的滑台自主限位系统、方法、装置及介质
CN114155281B (zh) 一种无人机目标跟踪自动初始化方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant