CN115185301A - 一种基于视频识别的无人机组侦察方法 - Google Patents

一种基于视频识别的无人机组侦察方法 Download PDF

Info

Publication number
CN115185301A
CN115185301A CN202211032344.1A CN202211032344A CN115185301A CN 115185301 A CN115185301 A CN 115185301A CN 202211032344 A CN202211032344 A CN 202211032344A CN 115185301 A CN115185301 A CN 115185301A
Authority
CN
China
Prior art keywords
unmanned aerial
aerial vehicle
video identification
ground
method based
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211032344.1A
Other languages
English (en)
Inventor
胡云峰
姚永明
代淙戈
聂鹏飞
郭程伟
王骏超
阿依森巴提·阿勒马斯别克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jilin University
Original Assignee
Jilin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jilin University filed Critical Jilin University
Priority to CN202211032344.1A priority Critical patent/CN115185301A/zh
Publication of CN115185301A publication Critical patent/CN115185301A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10Simultaneous control of position or course in three dimensions
    • G05D1/101Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

本发明公开了一种基于视频识别的无人机组侦察方法,属于无人机组技术领域,包括以下步骤:S1、提前在地面站上规划好无人机组的飞行路线,通过操控平台系统使固定翼无人机自动起飞、巡航以及降落,固定翼载机搭载机械视觉模块和4.8GHz图像传输模块,在机械视觉模块上使用Yolo算法对视频中的物体进行识别并分类,然后将画面用远传通信模块传输至地面端的操控平台上,令操作人员能够进行清晰的观察和准确地记录,微型四旋翼无人机能够延长侦察飞行距离,使本发明的侦察范围更大,通过对视频中的物体识别分类,在方便地面操作员观察的同时,地面终端对物体识别数量进行统计也较为方便,能够直接对类出现的次数进行统计。

Description

一种基于视频识别的无人机组侦察方法
技术领域
本发明涉及无人机组技术领域,具体为一种基于视频识别的无人机组侦察方法。
背景技术
无人机是指利用无线电遥控设备和自备的程序控制装置操纵的不载人飞行器。无人机实际上是无人驾驶飞行器的统称,从技术角度定义可以分为:无人固定翼飞机、无人垂直起降飞机、无人飞艇、无人直升机、无人多旋翼飞行器、无人伞翼机等。目前,随着通信、微电子计算机以及各类机载传感器的飞速发展,无人机越来越多地被应用于各个领域中。
现有的无人机组的画面拍摄设备只能对画面进行拍摄然后传输至地面端,不能够对画面中的物体进行分类和识别,不方便地面操作人员进行辨识和统计,并且受无人机续航能力的影响,现有的无人机侦察范围直径较小,为此,提出一种基于视频识别的无人机组侦察方法。
发明内容
本发明的目的在于提供一种基于视频识别的无人机组侦察方法,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种基于视频识别的无人机组侦察方法,包括以下步骤:
S1、提前在地面站上规划好无人机组的飞行路线,通过操控平台系统使固定翼无人机自动起飞、巡航以及降落,固定翼载机搭载机械视觉模块和4.8GHz图像传输模块,让地面操作员可以随时观察摄像头采集到的画面;
S2、识别到目标后远程通信模块向地面端反馈,地面操作员开始微型四轴无人机的放飞操作;
S3、机械视觉模块在完成环境的搭建以及程序编写后读取摄像头数据进行视频识别;
S4、在经过识别后将识别到的物体以及物体类别以一个变量的形式发送给地面端;
S5、将识别到的物体类别通过远程通信模块发送到地面端,使地面操作员可以随时了解无人机侦察到的目标;
S6、地面操作员在收到画面和物体类别目标之后,可以操作固定翼无人机放飞微型四旋翼无人机、返航和固定翼无人机继续飞行。
优选的,在所述S1中,操控平台系统的主控制中心是开源控制平台pixhawk4。
优选的,在所述S1中,机械视觉模块主要内容是基于Tensorflow环境下运用Yolo算法进行多层卷积的图片识别。
优选的,在所述S1中,机械视觉模块的硬件为树莓派4B微型计算机。
优选的,在所述S2中,远程通信模块为sx1268芯片。
优选的,在所述S6中,微型四旋翼无人机的放飞装置将微型四旋翼无人机从机身中抬出,并给定30°~45°的角度,使微型四旋翼无人机纵轴与载机航向的角度小于90°。
与现有技术相比,本发明的有益效果是:
本发明通过在机械视觉模块上使用Yolo算法对视频中的物体进行识别并分类,然后将画面用远传通信模块传输至地面端的操控平台上,令操作人员能够进行清晰的观察和准确地记录,并在固定翼无人机内放置了微型四旋翼无人机,地面操作员确认物体目标后或者需要飞行更远的距离时,可以将微型四旋翼无人机从固定翼无人机内放出,微型四旋翼无人机上同样携带视觉模块和远程通信模块,能够延长侦察飞行距离,使本发明的侦察范围更大,通过对视频中的物体识别分类,在方便地面操作员观察的同时,地面终端对物体识别数量进行统计也较为方便,能够直接对类出现的次数进行统计。
附图说明
图1为本发明的方法流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,本发明提供一种技术方案:
实施例1
一种基于视频识别的无人机组侦察方法,包括以下步骤:
S1、提前在地面站上规划好无人机组的飞行路线,通过操控平台系统使固定翼无人机自动起飞、巡航以及降落,固定翼载机搭载机械视觉模块和4.8GHz图像传输模块,让地面操作员可以随时观察摄像头采集到的画面;
S2、识别到目标后远程通信模块向地面端反馈,地面操作员开始微型四轴无人机的放飞操作;
S3、机械视觉模块在完成环境的搭建以及程序编写后读取摄像头数据进行视频识别;
S4、在经过识别后将识别到的物体以及物体类别以一个变量的形式发送给地面端;
S5、将识别到的物体类别通过远程通信模块发送到地面端,使地面操作员可以随时了解无人机侦察到的目标;
S6、地面操作员在收到画面和物体类别目标之后,可以操作固定翼无人机放飞微型四旋翼无人机。
具体的,在所述S1中,操控平台系统的主控制中心是开源控制平台pixhawk4。
具体的,在所述S1中,机械视觉模块主要内容是基于Tensorflow环境下运用Yolo算法进行多层卷积的图片识别。
具体的,在所述S1中,机械视觉模块的硬件为树莓派4B微型计算机。
具体的,在所述S2中,远程通信模块为sx1268芯片。
具体的,在所述S6中,微型四旋翼无人机的放飞装置将微型四旋翼无人机从机身中抬出,并给定30°的角度,使微型四旋翼无人机纵轴与载机航向的角度小于90°。
实施例2
一种基于视频识别的无人机组侦察方法,包括以下步骤:
S1、提前在地面站上规划好无人机组的飞行路线,通过操控平台系统使固定翼无人机自动起飞、巡航以及降落,固定翼载机搭载机械视觉模块和4.8GHz图像传输模块,让地面操作员可以随时观察摄像头采集到的画面;
S2、识别到目标后远程通信模块向地面端反馈,地面操作员开始微型四轴无人机的放飞操作;
S3、机械视觉模块在完成环境的搭建以及程序编写后读取摄像头数据进行视频识别;
S4、在经过识别后将识别到的物体以及物体类别以一个变量的形式发送给地面端;
S5、将识别到的物体类别通过远程通信模块发送到地面端,使地面操作员可以随时了解无人机侦察到的目标;
S6、地面操作员在收到画面和物体类别目标之后,可以操作固定翼无人机放飞返航。
具体的,在所述S1中,操控平台系统的主控制中心是开源控制平台pixhawk4。
具体的,在所述S1中,机械视觉模块主要内容是基于Tensorflow环境下运用Yolo算法进行多层卷积的图片识别。
具体的,在所述S1中,机械视觉模块的硬件为树莓派4B微型计算机。
具体的,在所述S2中,远程通信模块为sx1268芯片。
实施例3
一种基于视频识别的无人机组侦察方法,包括以下步骤:
S1、提前在地面站上规划好无人机组的飞行路线,通过操控平台系统使固定翼无人机自动起飞、巡航以及降落,固定翼载机搭载机械视觉模块和4.8GHz图像传输模块,让地面操作员可以随时观察摄像头采集到的画面;
S2、识别到目标后远程通信模块向地面端反馈,地面操作员开始微型四轴无人机的放飞操作;
S3、机械视觉模块在完成环境的搭建以及程序编写后读取摄像头数据进行视频识别;
S4、在经过识别后将识别到的物体以及物体类别以一个变量的形式发送给地面端;
S5、将识别到的物体类别通过远程通信模块发送到地面端,使地面操作员可以随时了解无人机侦察到的目标;
S6、地面操作员在收到画面和物体类别目标之后,可以操作固定翼无人机放飞微型四旋翼无人机继续飞行。
具体的,在所述S1中,操控平台系统的主控制中心是开源控制平台pixhawk4。
具体的,在所述S1中,机械视觉模块主要内容是基于Tensorflow环境下运用Yolo算法进行多层卷积的图片识别。
具体的,在所述S1中,机械视觉模块的硬件为树莓派4B微型计算机。
具体的,在所述S2中,远程通信模块为sx1268芯片。
具体的,在所述S6中,微型四旋翼无人机的放飞装置将微型四旋翼无人机从机身中抬出,并给定45°的角度,使微型四旋翼无人机纵轴与载机航向的角度小于90°。
综上:本发明通过在机械视觉模块上使用Yolo算法对视频中的物体进行识别并分类,然后将画面用远传通信模块传输至地面端的操控平台上,令操作人员能够进行清晰的观察和准确地记录,并在固定翼无人机内放置了微型四旋翼无人机,在地面操作员确认物体目标后或者需要飞行更远的距离时,可以将微型四旋翼无人机从固定翼无人机内放出,微型四旋翼无人机上同样携带视觉模块和远程通信模块,能够延长侦察飞行距离,使本发明的侦察范围更大,本发明通过对视频中的物体识别分类,在方便地面操作员观察的同时,地面终端对物体识别数量进行统计也较为方便,能够直接对类出现的次数进行统计。
本发明中未涉及部分均与现有技术相同或可采用现有技术加以实现。尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

Claims (6)

1.一种基于视频识别的无人机组侦察方法,其特征在于,包括以下步骤:
S1、提前在地面站上规划好无人机组的飞行路线,通过操控平台系统使固定翼无人机自动起飞、巡航以及降落,固定翼载机搭载机械视觉模块和4.8GHz图像传输模块,让地面操作员可以随时观察摄像头采集到的画面;
S2、识别到目标后远程通信模块向地面端反馈,地面操作员开始微型四轴无人机的放飞操作;
S3、机械视觉模块在完成环境的搭建以及程序编写后读取摄像头数据进行视频识别;
S4、在经过识别后将识别到的物体以及物体类别以一个变量的形式发送给地面端;
S5、将识别到的物体类别通过远程通信模块发送到地面端,使地面操作员可以随时了解无人机侦察到的目标;
S6、地面操作员在收到画面和物体类别目标之后,可以操作固定翼无人机放飞微型四旋翼无人机、返航和固定翼无人机继续飞行。
2.根据权利要求1所述的一种基于视频识别的无人机组侦察方法,其特征在于:在所述S1中,操控平台系统的主控制中心是开源控制平台pixhawk4。
3.根据权利要求1所述的一种基于视频识别的无人机组侦察方法,其特征在于:在所述S1中,机械视觉模块主要内容是基于Tensorflow环境下运用Yolo算法进行多层卷积的图片识别。
4.根据权利要求3所述的一种基于视频识别的无人机组侦察方法,其特征在于:在所述S1中,机械视觉模块的硬件为树莓派4B微型计算机。
5.根据权利要求1所述的一种基于视频识别的无人机组侦察方法,其特征在于:在所述S2中,远程通信模块为sx1268芯片。
6.根据权利要求1所述的一种基于视频识别的无人机组侦察方法,其特征在于:在所述S6中,微型四旋翼无人机的放飞装置将微型四旋翼无人机从机身中抬出,并给定30°~45°的角度,使微型四旋翼无人机纵轴与载机航向的角度小于90°。
CN202211032344.1A 2022-08-26 2022-08-26 一种基于视频识别的无人机组侦察方法 Pending CN115185301A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211032344.1A CN115185301A (zh) 2022-08-26 2022-08-26 一种基于视频识别的无人机组侦察方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211032344.1A CN115185301A (zh) 2022-08-26 2022-08-26 一种基于视频识别的无人机组侦察方法

Publications (1)

Publication Number Publication Date
CN115185301A true CN115185301A (zh) 2022-10-14

Family

ID=83523336

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211032344.1A Pending CN115185301A (zh) 2022-08-26 2022-08-26 一种基于视频识别的无人机组侦察方法

Country Status (1)

Country Link
CN (1) CN115185301A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110588987A (zh) * 2019-10-09 2019-12-20 北京中航智科技有限公司 一种挂载型无人机及其侦察方法
CN112327893A (zh) * 2019-08-05 2021-02-05 旭日蓝天(武汉)科技有限公司 一种基于ai技术的无人机飞控前端人数统计系统及方法
CN112668696A (zh) * 2020-12-25 2021-04-16 杭州中科先进技术研究院有限公司 一种基于嵌入式深度学习的无人机电网巡检方法和系统
CN113716049A (zh) * 2021-07-23 2021-11-30 西安交通大学 一种子母式无人机系统及其工作方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112327893A (zh) * 2019-08-05 2021-02-05 旭日蓝天(武汉)科技有限公司 一种基于ai技术的无人机飞控前端人数统计系统及方法
CN110588987A (zh) * 2019-10-09 2019-12-20 北京中航智科技有限公司 一种挂载型无人机及其侦察方法
CN112668696A (zh) * 2020-12-25 2021-04-16 杭州中科先进技术研究院有限公司 一种基于嵌入式深度学习的无人机电网巡检方法和系统
CN113716049A (zh) * 2021-07-23 2021-11-30 西安交通大学 一种子母式无人机系统及其工作方法

Similar Documents

Publication Publication Date Title
CN104932525B (zh) 无人机的控制方法、装置、地面控制系统及无人机
CN106788677B (zh) 一种基于移动数据网络的无人机数据中继装置及其方法
WO2017185607A1 (zh) 一种无人机飞行控制方式切换方法、装置及其无人机
CN105242686A (zh) 一种无人机航拍系统和航拍方法
CN106020239A (zh) 无人机精准降落控制方法
CN104820431A (zh) 多无人机集群对地观测系统及其编队控制方法
CN105652884A (zh) 无人机飞行方法以及无人机飞行系统
CN106931944A (zh) 一种无人机实时三维地理测绘系统
CN205103662U (zh) 一种无人机航拍系统
CN111780797B (zh) 天临空协同遥感系统模拟试验装置及方法
CN114115287B (zh) 一种无人车-无人机空地协同巡逻和引导系统
CN112672323A (zh) 一种无人机组网飞行系统以及运用该系统的无人机远程通信方法
US20240036573A1 (en) Deployment mechanism, communication and operation for a host-parasite drone system
CN107918402A (zh) 一种基于移动网络无人机集群飞行系统
CN106843252A (zh) 无人机及无人机控制方法
KR20160128144A (ko) 상용 이동 통신망을 이용한 소형 uav 항공 교통 관제 시스템
WO2017185651A1 (zh) 一种无人机图像传输方式切换方法、装置及其无人机
CN105208346B (zh) 基于无人机的输电设备辨认方法
CN106875655A (zh) 一种无人机数据通信抗干扰系统及方法
CN106094866A (zh) 一种无人机电力线路巡检装置及其使用方法
CN115185301A (zh) 一种基于视频识别的无人机组侦察方法
CN105489067A (zh) 一种用于高低扇管制单位间的电子移交方法及系统
Moraes et al. Autonomous Quadrotor for accurate positioning
CN106526607A (zh) 一种基于激光雷达技术的远程控制系统
KR102381070B1 (ko) 무인기 및 지상통제장비를 위한 다중 운용 시스템 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination