CN107943102A - 一种基于视觉伺服的飞行器及其自主追踪系统 - Google Patents

一种基于视觉伺服的飞行器及其自主追踪系统 Download PDF

Info

Publication number
CN107943102A
CN107943102A CN201711454142.5A CN201711454142A CN107943102A CN 107943102 A CN107943102 A CN 107943102A CN 201711454142 A CN201711454142 A CN 201711454142A CN 107943102 A CN107943102 A CN 107943102A
Authority
CN
China
Prior art keywords
aircraft
sensor
data
based access
access control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711454142.5A
Other languages
English (en)
Inventor
谢宾
谢一宾
曾宪阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Institute of Technology
Original Assignee
Nanjing Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Institute of Technology filed Critical Nanjing Institute of Technology
Priority to CN201711454142.5A priority Critical patent/CN107943102A/zh
Publication of CN107943102A publication Critical patent/CN107943102A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/12Target-seeking control

Abstract

本发明公开了一种基于视觉伺服的飞行器及其自主追踪系统,其特征是,包括飞行控制器、激光传感器、摄像头、光流传感器、GPS定位模块和螺旋桨;所述飞行控制器通过减震架安装在飞行器机架上,位于飞行器的中央,用于控制飞行器的运动情况;所述激光传感器、摄像头、光流传感器均设置在飞行器下方;所述GPS定位模块固定在飞行器机架的后方。本发明所达到的有益效果:使用激光传感器进行定高,不会受到电机震动的影响,而且数据的精度更高,有利于飞行器的定高控制;本专利所描述的基于视觉伺服的飞行器自主跟踪系统,具有跟踪精度高,稳定的优点。

Description

一种基于视觉伺服的飞行器及其自主追踪系统
技术领域
本发明涉及一种基于视觉伺服的飞行器及其自主追踪系统,属于飞行器追踪技术领域。
背景技术
市面上很少有可以自主跟踪的飞行器,有部分可以实现自主跟踪的飞行器,他们值利用摄像头获取目标物体的相对误差,追踪精度差,在目标快速运动的时候甚至会丢失目标。市面上常见的飞行器低空定高大多采用超声波传感器,但是超声波传感器容易受到电机震动产生的声波的影响,造成数据错误。
发明内容
为解决现有技术的不足,本发明的目的在于提供一种基于视觉伺服的飞行器及其自主追踪系统,具有跟踪精度高,稳定的优点。
为了实现上述目标,本发明采用如下的技术方案:
一种基于视觉伺服的飞行器,其特征是,包括飞行控制器、激光传感器、摄像头、光流传感器、GPS定位模块和螺旋桨;所述飞行控制器通过减震架安装在飞行器机架上,位于飞行器的中央,用于控制飞行器的运动情况;所述激光传感器、摄像头、光流传感器均设置在飞行器下方;所述激光传感器用于测量飞行器距离地面的相对高度;所述摄像头用于识别目标物体,将数据返回给飞行控制器,飞行控制器利用此数据来控制飞行器的飞行,实现跟踪目标;所述光流传感器用于为飞行器提供水平方向的移动速度数据;所述GPS定位模块固定在飞行器机架的后方,为飞行器提供位置信息,用于飞行器的定位;所述螺旋桨匹配有电机和电子调速器,螺旋桨位于飞行器机架的上部,由电机带动旋转,为飞行器提供升力,电机位于飞行器机架的四个角上;所述电子调速器位于飞行器的机臂上,用于接收控制信号控制电机的旋转。
前述的一种基于视觉伺服的飞行器,其特征是,所述飞行控制器内设置有控制芯片、图像处理器、加速度传感器、角速度传感器、三轴磁力计和气压计。
前述的一种基于视觉伺服的飞行器,其特征是,所述加速度传感器、角速度传感器、三轴磁力计和气压计均与控制芯片相连接;所述加速度传感器用于测量重力加速度在X、Y和Z轴下的分量;所述角速度传感器用于测量飞行器绕着X、Y和Z轴旋转的角速度;所述三轴磁力计用于测量磁场在X、Y和Z三轴的分量;所述图像处理器与摄像头相连接,进行图像处理,计算出距离目标物体的相对位置数据,将数据传输给控制芯片。
前述的一种基于视觉伺服的飞行器,其特征是,所述激光传感器、摄像头、光流传感器均通过尼龙柱设置在飞行器下方。
前述的一种基于视觉伺服的飞行器,其特征是,所述光流传感器、摄像头和激光传感器位于飞行器的中线上。
前述的一种基于视觉伺服的飞行器,其特征是,所述飞行器中部设置有电池仓,电池仓内设置有锂电池。
一种基于视觉伺服的飞行器自主追踪系统,其特征是,包括如下步骤:
1)通过控制芯片读取加速度传感器、角速度传感器和三轴磁力计的数据,计算出飞行器的当前姿态。
2)读取气压计、光流传感器和激光传感器的数据,获得飞行器的高度和水平方向的速度;
3)进行PID控制,改变飞行器的运行状态;
4)图像处理器读取摄像头的数据,进行高斯滤波,滤除图像中的噪点,根据事先设定的阈值进行图像二值化处理,获取目标物体的质心和轮廓后,根据像素点计算出位置误差;
5)将数据反馈给控制芯片,进行伺服控制。
本发明所达到的有益效果:本专利不仅使用了摄像头获取目标物体的相对误差,还增加了光流传感器,光流传感器可以获得飞行器相对于地面的运动速度,这使得在控制的时候不仅有了位置环,还有了速度环,有利于提高控制的稳定性和跟踪的精度;本专利使用激光传感器进行定高,不会受到电机震动的影响,而且数据的精度更高,有利于飞行器的定高控制;本专利所描述的基于视觉伺服的飞行器自主跟踪系统,具有跟踪精度高,稳定的优点。
附图说明
图1是飞行器的整体架构图;
图2是图1的侧视图;
图3是本系统的流程图。
图中附图标记的含义:
1-飞行控制器,2-激光传感器,3-摄像头,4-光流传感器,5-GPS定位模块,6-螺旋桨,7-电机,8-电子调速器。
具体实施方式
下面结合附图对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。
图1所示为飞行器的整体架构,在图1中,飞行控制器、激光传感器、摄像头、光流传感器、GPS定位模块和螺旋桨构成了本套系统的功能部分,在飞行器下方固定着的依次是激光传感器、摄像头和光流传感器。
飞行控制器通过减震架安装在机架上,基本处于飞行器的中央,用于控制飞行器的运动情况。激光传感器通过尼龙柱安装在飞行器的下方,测量飞行器距离地面的相对高度。摄像头通过尼龙柱固定在机架的下方,摄像头用来识别目标物体,将数据返回给飞行控制器,飞行控制器利用此数据来控制飞行器的飞行,达到跟踪目标,视觉伺服的效果。光流传感器利用尼龙柱固定于飞行器的下方,为飞行器提供水平方向的移动速度数据,用于闭环控制中,提高系统的稳定性。GPS定位模块使用GPS支架固定于飞行器机架的右后方,可以为飞行器提供绝对的位置信息,用于飞行器的定位。螺旋桨由电机带动旋转,为飞行器提供升力。
图2所示为飞行器的侧视图,飞行控制器接收来自光流传感器的速度数据、摄像头距离目标物体相对位置数据、激光传感器返回的飞行器相对于地面的高度信息和GPS定位模块返回的绝对位置数据,在飞行控制器上的处理器经过处理后,发出命令,改变飞行器的运动状态,达到预期的视觉伺服效果。
工作流程:当飞行器启动之后,会先飞行到预定的高度,在这个高度下,利用摄像头搜寻目标物体,搜寻到目标物体之后,它将锁定目标物体,跟随目标物体移动,直至操作人员命令飞行器降落。
飞行控制器内部结构由控制芯片、图像处理器、加速度传感器、角速度传感器、三轴磁力计和气压计组成。控制芯片和图像处理器靠近,便于传输数据。
加速度传感器、角速度传感器、三轴磁力计和气压计相邻排布,便于控制芯片读取数据。其中,加速度传感器、角速度传感器、三轴磁力计和气压计与控制芯片相连,加速度传感器可以测量重力加速度在X、Y和Z轴下的分量,角速度传感器可以测量飞行器绕着X、Y和Z轴旋转的角速度,三轴磁力计可以测量磁场在X、Y和Z三轴的分量。图像处理器与摄像头相连,进行图像处理,计算出距离目标物体的相对位置数据,利用串口通信返回数据给控制芯片处理。
图3为伺服控制系统执行框图,包括如下步骤:
1)通过控制芯片读取加速度传感器、角速度传感器和三轴磁力计的数据,计算出飞行器的当前姿态。
2)读取气压计、光流传感器和激光传感器的数据,获得飞行器的高度和水平方向的速度;
3)进行PID控制,改变飞行器的运行状态;
4)图像处理器读取摄像头的数据,进行高斯滤波,滤除图像中的噪点,根据事先设定的阈值进行图像二值化处理,获取目标物体的质心和轮廓后,根据像素点计算出位置误差;
5)将数据反馈给控制芯片,进行伺服控制。
该系统使用图像处理器反馈的位置误差数据,光流传感器返回的速度数据,控制芯片根据传感器计算出的姿态数据和陀螺仪传感器计算出的角速度数据,设计出了位置-速度-姿态-角速度多级串联的控制器,使系统的伺服性能提高,跟踪更加稳定。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明技术原理的前提下,还可以做出若干改进和变形,这些改进和变形也应视为本发明的保护范围。

Claims (7)

1.一种基于视觉伺服的飞行器,其特征是,包括飞行控制器、激光传感器、摄像头、光流传感器、GPS定位模块和螺旋桨;
所述飞行控制器通过减震架安装在飞行器机架上,位于飞行器的中央,用于控制飞行器的运动情况;
所述激光传感器、摄像头、光流传感器均设置在飞行器下方;所述激光传感器用于测量飞行器距离地面的相对高度;所述摄像头用于识别目标物体,将数据返回给飞行控制器,飞行控制器利用此数据来控制飞行器的飞行,实现跟踪目标;所述光流传感器用于为飞行器提供水平方向的移动速度数据;
所述GPS定位模块固定在飞行器机架的后方,为飞行器提供位置信息,用于飞行器的定位;所述螺旋桨匹配有电机和电子调速器,螺旋桨位于飞行器机架的上部,由电机带动旋转,为飞行器提供升力,电机位于飞行器机架的四个角上;所述电子调速器位于飞行器的机臂上,用于接收控制信号控制电机的旋转。
2.根据权利要求1所述的一种基于视觉伺服的飞行器,其特征是,所述飞行控制器内设置有控制芯片、图像处理器、加速度传感器、角速度传感器、三轴磁力计和气压计。
3.根据权利要求1所述的一种基于视觉伺服的飞行器,其特征是,所述加速度传感器、角速度传感器、三轴磁力计和气压计均与控制芯片相连接;所述加速度传感器用于测量重力加速度在X、Y和Z轴下的分量;所述角速度传感器用于测量飞行器绕着X、Y和Z轴旋转的角速度;所述三轴磁力计用于测量磁场在X、Y和Z三轴的分量;所述图像处理器与摄像头相连接,进行图像处理,计算出距离目标物体的相对位置数据,将数据传输给控制芯片。
4.根据权利要求1所述的一种基于视觉伺服的飞行器,其特征是,所述激光传感器、摄像头、光流传感器均通过尼龙柱设置在飞行器下方。
5.根据权利要求1所述的一种基于视觉伺服的飞行器,其特征是,所述光流传感器、摄像头和激光传感器位于飞行器的中线上。
6.根据权利要求1所述的一种基于视觉伺服的飞行器,其特征是,所述飞行器中部设置有电池仓,电池仓内设置有锂电池。
7.一种基于权利要求1-6任意一项所述的基于视觉伺服的飞行器的自主追踪系统,其特征是,包括如下步骤:
1)通过控制芯片读取加速度传感器、角速度传感器和三轴磁力计的数据,计算出飞行器的当前姿态;
2)读取气压计、光流传感器和激光传感器的数据,获得飞行器的高度和水平方向的速度;
3)进行PID控制,改变飞行器的运行状态;
4)图像处理器读取摄像头的数据,进行高斯滤波,滤除图像中的噪点,根据事先设定的阈值进行图像二值化处理,获取目标物体的质心和轮廓后,根据像素点计算出位置误差;
5)将数据反馈给控制芯片,进行伺服控制。
CN201711454142.5A 2017-12-28 2017-12-28 一种基于视觉伺服的飞行器及其自主追踪系统 Pending CN107943102A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711454142.5A CN107943102A (zh) 2017-12-28 2017-12-28 一种基于视觉伺服的飞行器及其自主追踪系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711454142.5A CN107943102A (zh) 2017-12-28 2017-12-28 一种基于视觉伺服的飞行器及其自主追踪系统

Publications (1)

Publication Number Publication Date
CN107943102A true CN107943102A (zh) 2018-04-20

Family

ID=61940617

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711454142.5A Pending CN107943102A (zh) 2017-12-28 2017-12-28 一种基于视觉伺服的飞行器及其自主追踪系统

Country Status (1)

Country Link
CN (1) CN107943102A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108614572A (zh) * 2018-04-28 2018-10-02 中国地质大学(武汉) 一种基于飞行器的目标识别追踪方法、设备及存储设备
CN109085852A (zh) * 2018-09-20 2018-12-25 清华四川能源互联网研究院 一种适用于高层非平整结构的飞行机器人系统
CN111931387A (zh) * 2020-09-23 2020-11-13 湖南师范大学 一种面向移动柱状组合体的视觉伺服趋近方法

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103839274A (zh) * 2014-03-25 2014-06-04 中国科学院光电技术研究所 一种基于几何比例关系的扩展目标跟踪方法
CN204360217U (zh) * 2015-02-05 2015-05-27 陈志超 一种新型自主导航四旋翼飞行器
CN104777847A (zh) * 2014-01-13 2015-07-15 中南大学 基于机器视觉和超宽带定位技术的无人机目标追踪系统
CN104820435A (zh) * 2015-02-12 2015-08-05 武汉科技大学 基于智能手机与双目视觉的四旋翼运动目标追踪系统和方法
CN104875890A (zh) * 2015-06-01 2015-09-02 中国人民解放军装甲兵工程学院 四旋翼飞行器
WO2016066008A1 (zh) * 2014-10-27 2016-05-06 广州极飞电子科技有限公司 旋翼飞行器及其自动降落系统及方法
CN106093455A (zh) * 2014-04-10 2016-11-09 深圳市大疆创新科技有限公司 无人飞行器的飞行参数的测量方法及装置
CN106444809A (zh) * 2016-10-12 2017-02-22 湖南绿野航空科技有限公司 一种无人机飞行控制器
CN106970651A (zh) * 2017-06-06 2017-07-21 南京理工大学泰州科技学院 一种基于视觉导航的四旋翼无人机的自主飞行系统及控制方法
US20170300051A1 (en) * 2013-02-06 2017-10-19 Dylan T X Zhou Amphibious vertical take off and landing unmanned device with AI data processing apparatus
CN107463181A (zh) * 2017-08-30 2017-12-12 南京邮电大学 一种基于AprilTag的四旋翼飞行器自适应追踪系统
CN207650657U (zh) * 2017-12-28 2018-07-24 南京工程学院 一种基于视觉伺服的飞行器

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170300051A1 (en) * 2013-02-06 2017-10-19 Dylan T X Zhou Amphibious vertical take off and landing unmanned device with AI data processing apparatus
CN104777847A (zh) * 2014-01-13 2015-07-15 中南大学 基于机器视觉和超宽带定位技术的无人机目标追踪系统
CN103839274A (zh) * 2014-03-25 2014-06-04 中国科学院光电技术研究所 一种基于几何比例关系的扩展目标跟踪方法
CN106093455A (zh) * 2014-04-10 2016-11-09 深圳市大疆创新科技有限公司 无人飞行器的飞行参数的测量方法及装置
WO2016066008A1 (zh) * 2014-10-27 2016-05-06 广州极飞电子科技有限公司 旋翼飞行器及其自动降落系统及方法
CN204360217U (zh) * 2015-02-05 2015-05-27 陈志超 一种新型自主导航四旋翼飞行器
CN104820435A (zh) * 2015-02-12 2015-08-05 武汉科技大学 基于智能手机与双目视觉的四旋翼运动目标追踪系统和方法
CN104875890A (zh) * 2015-06-01 2015-09-02 中国人民解放军装甲兵工程学院 四旋翼飞行器
CN106444809A (zh) * 2016-10-12 2017-02-22 湖南绿野航空科技有限公司 一种无人机飞行控制器
CN106970651A (zh) * 2017-06-06 2017-07-21 南京理工大学泰州科技学院 一种基于视觉导航的四旋翼无人机的自主飞行系统及控制方法
CN107463181A (zh) * 2017-08-30 2017-12-12 南京邮电大学 一种基于AprilTag的四旋翼飞行器自适应追踪系统
CN207650657U (zh) * 2017-12-28 2018-07-24 南京工程学院 一种基于视觉伺服的飞行器

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108614572A (zh) * 2018-04-28 2018-10-02 中国地质大学(武汉) 一种基于飞行器的目标识别追踪方法、设备及存储设备
CN109085852A (zh) * 2018-09-20 2018-12-25 清华四川能源互联网研究院 一种适用于高层非平整结构的飞行机器人系统
CN109085852B (zh) * 2018-09-20 2020-05-08 清华四川能源互联网研究院 一种适用于高层非平整结构的飞行机器人系统
CN111931387A (zh) * 2020-09-23 2020-11-13 湖南师范大学 一种面向移动柱状组合体的视觉伺服趋近方法
CN111931387B (zh) * 2020-09-23 2020-12-22 湖南师范大学 一种面向移动柱状组合体的视觉伺服趋近方法

Similar Documents

Publication Publication Date Title
Wenzel et al. Automatic take off, tracking and landing of a miniature UAV on a moving carrier vehicle
CN104309803B (zh) 旋翼飞行器自动降落系统及方法
CN103587708B (zh) 超小型无人旋翼飞行器野外定点零盲区自主软着陆方法
CN103853156B (zh) 一种基于机载传感器的小型四旋翼飞行器控制系统及方法
US20190094023A1 (en) Adaptive Compass Calibration Based on Local Field Conditions
CN102355574B (zh) 机载云台运动目标自主跟踪系统的图像稳定方法
CN204731643U (zh) 一种无人机的控制装置
CN107463181A (zh) 一种基于AprilTag的四旋翼飞行器自适应追踪系统
CN106527481A (zh) 无人机飞行控制方法、装置及无人机
CN106970651A (zh) 一种基于视觉导航的四旋翼无人机的自主飞行系统及控制方法
CN203825466U (zh) 一种基于机载传感器的小型四旋翼飞行器控制系统
CN202255404U (zh) 一种室内移动机器人双目视觉导航系统
CN107943102A (zh) 一种基于视觉伺服的飞行器及其自主追踪系统
CN105929836B (zh) 用于四旋翼飞行器的控制方法
CN109079799A (zh) 一种基于仿生的机器人感知控制系统及控制方法
CN104811641A (zh) 一种带有云台的头戴式摄录系统及其控制方法
CN110498039A (zh) 一种基于仿生扑翼飞行器的智能监控系统
CN108780322A (zh) 用于控制无人机的方法和装置及无人机系统
CN109254587A (zh) 可在无线充电条件下稳定悬停的小型无人机及其控制方法
CN107389968A (zh) 一种基于光流传感器和加速度传感器的无人机定点实现方法和装置
CN110568860A (zh) 一种无人飞行器的返航方法、装置及无人飞行器
CN207650657U (zh) 一种基于视觉伺服的飞行器
CN108614572A (zh) 一种基于飞行器的目标识别追踪方法、设备及存储设备
CN112612294A (zh) 一种带激光雷达自动避障系统的无人机
CN109343558A (zh) 一种旋翼无人机自动校正导航控制系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination