CN107817811A - 基于视觉的无人机防碰撞装置及方法 - Google Patents

基于视觉的无人机防碰撞装置及方法 Download PDF

Info

Publication number
CN107817811A
CN107817811A CN201711019867.1A CN201711019867A CN107817811A CN 107817811 A CN107817811 A CN 107817811A CN 201711019867 A CN201711019867 A CN 201711019867A CN 107817811 A CN107817811 A CN 107817811A
Authority
CN
China
Prior art keywords
unmanned plane
module
barrier
based access
access control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201711019867.1A
Other languages
English (en)
Inventor
李建英
朱磊
韩琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Yishe Technology Co Ltd
Original Assignee
Harbin Yishe Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Yishe Technology Co Ltd filed Critical Harbin Yishe Technology Co Ltd
Priority to CN201711019867.1A priority Critical patent/CN107817811A/zh
Publication of CN107817811A publication Critical patent/CN107817811A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10Simultaneous control of position or course in three dimensions
    • G05D1/101Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0055Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots with safety arrangements
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours

Landscapes

  • Engineering & Computer Science (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Artificial Intelligence (AREA)
  • Medical Informatics (AREA)
  • Game Theory and Decision Science (AREA)
  • Evolutionary Computation (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

本发明提出一种基于视觉的无人机防碰撞装置及方法,包括:摄像模块及检测模块;所述摄像模块在无人机飞行期间实时采集各方向图像,并传输至检测模块;所述检测模块在接收到摄像模块传输的图像后,根据图像特征信息,计算无人机到障碍物的最短距离,若距离小于预设安全距离,则向无人机的控制模块发出预警信号。通过本发明,能够控制无人机与障碍物保持安全距离,该装置单独挂载于无人机下方,不需要对无人机进行过多调整或增加额外设备,就可以通过图像信息来标定距离,解决无人机碰撞障碍物的问题,有效节约成本且简单易用。

Description

基于视觉的无人机防碰撞装置及方法
技术领域
本发明涉及无人机技术领域,特别涉及一种基于视觉的无人机防碰撞装置及方法。
背景技术
随着无人机技术的发展,目前无人机在各行业领域的应用越来越广泛。无人机在跟多复杂的环境下飞行,就很容易发生碰撞等情况,传统无人机上的测距系统只是固定测量某个特定方向,而无法同时兼顾前后及地面等多个方向的距离测定。而且现有的无人机防碰撞装置,大部分都是通过无人机集成传感器采集飞行中无人机运行状态,获取障碍物信息并分析是否存在碰撞的可能,虽然高灵敏度传感器可以获得精准数据,但其采集距离却有限,观察范围也较小。
发明内容
基于上述问题,本发明提出了一种基于视觉的无人机防碰撞装置及方法,通过将该装置挂载在无人机下方,能够通过装置上的多个摄像模组在多个方向上进行距离测定,并禁止向小于安全距离的方向飞行。
一种基于视觉的无人机防碰撞装置,包括:摄像模块及检测模块;
所述摄像模块在无分机飞行期间实时采集各方向图像,并传输至检测模块;所述摄像模块由至少四个摄像模组组成,所述摄像模组可以为广角或超广角摄像头;
所述检测模块包括:接收单元、校验单元及比对单元;
所述接收单元接收摄像模块传输的图像;
所述校验单元提取图像的特征信息,通过几何关系投影,结合摄像机标定方法,根据摄像模组内部参数和外部参数计算出摄像模组到障碍物的最短距离,在根据无人机和摄像模组的固定关系,计算无人机到障碍物的最短距离;
所述比对单元对比无人机到障碍物的最短距离与预设安全距离的大小,若距离小于预设安全距离,则向无人机的控制模块发出预警信号。
所述的一种基于视觉的无人机防碰撞装置中,还包括:
在无人机控制模块接收到检测模块发出的预警信号后,向无人机飞行驱动模块发出禁止向该方向移动的指令,锁死无人机向该方向移动。
所述的任一基于视觉的无人机防碰撞装置中,所述装置通过通信模块与无人机通信。
所述的基于视觉的无人机防碰撞装置,其特征在于,所述装置固定挂载于无人机下方,或集成到无人机设备中。
本发明还提出一种基于视觉的无人机防碰撞方法,包括以下步骤:
摄像模块实时采集各方向的图像信息,并传输到检测模块;
检测模块接收图像信息,并提取图像特征信息;
根据提取的图像信息,通过几何关系投影,结合摄像机标定方法,根据摄像模组内部参数和外部参数计算出摄像模组到障碍物的最短距离;
根据无人机和摄像模组的固定关系,计算无人机到障碍物的最短距离;
判断无人机到障碍物的最短距离与预设安全距离的大小,若无人机到障碍物的最短距离小于预设安全距离,则向无人机的控制模块发出预警信号。
所述的一种基于视觉的无人机防碰撞方法中,无人机控制模块收到预警信号后,向无人机飞行驱动模块发出禁止向该方向移动的指令,锁死无人机向该方向移动,当无人机向除该方向以外的任一方向移动后,则解锁无人机向该方向移动。
本发明的优势在于,无人机挂载防碰撞装置能够实时控制无人机与障碍物的距离,控制无人机距离障碍物安全距离时停止朝向障碍物一侧移动,不需要对无人机飞行控制系统进行过多的调整,也不需要增加额外的辅助测距装置等硬件设备,只需要图像信息来标定距离,解决无人机碰撞障碍物问题。有效节约成本且简便易用。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明基于视觉的无人机防碰撞装置实施例结构示意图;
图2为本发明基于视觉的无人机防碰撞方法实施例流程图;
图3为本发明基于视觉的无人机防碰撞装置与无人机挂载通信示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明实施例中的技术方案,并使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图对本发明中技术方案作进一步详细的说明。
一种基于视觉的无人机防碰撞装置,如图1所示,包括:摄像模块11及检测模块12;
所述摄像模块在无分机飞行期间实时采集各方向图像,并传输至检测模块;
所述检测模块包括:接收单元12-1、校验单元12-2及比对单元12-3;
所述接收单元接收摄像模块传输的图像;
所述校验单元提取图像的特征信息,通过几何关系投影,结合摄像机标定方法,根据摄像模组内部参数和外部参数计算出摄像模组到障碍物的最短距离,在根据无人机和摄像模组的固定关系,计算无人机到障碍物的最短距离;
所述比对单元对比无人机到障碍物的最短距离与预设安全距离的大小,若距离小于预设安全距离,则向无人机的控制模块发出预警信号。检测模块根据摄像模块发送的图像,对障碍物进行实时检测。
假设无人机与障碍物之间的安全距离为M,实测距离为T,当T<M时,发出预警信号到控制模块。
所述的一种基于视觉的无人机防碰撞装置中,所述摄像模块由至少四个广角或超广角摄像头组成。所述的摄像模组能够在无人机飞行期间实时采集各个方向的图像,并传输至检测模块。
所述的一种基于视觉的无人机防碰撞装置中,还包括:
在无人机控制模块接收到检测模块发出的预警信号后,向无人机飞行驱动模块发出禁止向该方向移动的指令,锁死无人机向该方向移动的控制电路。
所述的任一基于视觉的无人机防碰撞装置中,还包括,所述装置通过通信模块与无人机通信。
所述的基于视觉的无人机防碰撞装置,其特征在于,所述装置固定挂载于无人机下方,或集成到无人机设备中。
本发明还提出一种基于视觉的无人机防碰撞方法,如图2所示,包括以下步骤:
S21:摄像模块实时采集各方向的图像信息,并传输到检测模块;
S22:检测模块接收图像信息,并提取图像特征信息;
S23:根据提取的图像信息,通过几何关系投影,结合摄像机标定方法,根据摄像模组内部参数和外部参数计算出摄像模组到障碍物的最短距离;
S24:根据无人机和摄像模组的固定关系,计算无人机到障碍物的最短距离;
S25:判断无人机到障碍物的最短距离与预设安全距离的大小,若无人机到障碍物的最短距离小于预设安全距离,则向无人机的控制模块发出预警信号。
所述的一种基于视觉的无人机防碰撞方法中,无人机控制模块收到预警信号后,向无人机飞行驱动模块发出禁止向该方向移动的指令,锁死无人机向该方向移动,当无人机向除该方向以外的任一方向移动后,则解锁无人机向该方向移动。
本发明还给出一种基于视觉的无人机防碰撞装置与无人机挂载通信示意图,如图3所示:
无人机上包含控制模块31、飞行驱动模块32、第二通信模块33;
防碰撞装置的摄像模块11实时采集各方向的图像信息,传输到检测模块12,检测模块对距离进行检测后,若发现小于安全距离,则通过通信模块13将预警信号发给无人机;无人机第二通信模块33获取到通信模块13发来的预警信号,将该预警信号传输给无人机控制模块31,无人机控制模块根据预警信息,产生相应控制指令,发送给飞行驱动模块32,实现对无人机防碰撞的控制。
在无人机飞行过程中,控制模块在接收到飞行控制指令时输出飞行控制信号至飞行驱动模块,飞行驱动模块根据飞行控制信号驱动无人机飞行;无人机控制模块在接收到预警信号后,输出继续朝向该方向的移动禁止指令至飞行驱动模块,控制无人机不再向发出预警方向移动,锁死该方向控制电路;此时,无人机控制模块向发出预警方向的继续前进操作指令被禁止,但不影响反方向或者其它方向的操作指令的执行。
本发明的优势在于,无人机挂载防碰撞装置能够实时控制无人机与障碍物的距离,控制无人机距离障碍物安全距离时停止朝向障碍物一侧移动,不需要对无人机飞行控制系统进行过多的调整,也不需要增加额外的辅助测距装置等硬件设备,只需要图像信息来标定距离,解决无人机碰撞障碍物问题。有效节约成本且简便易用。
虽然通过实施例描绘了本发明,本领域普通技术人员知道,本发明有许多变形和变化而不脱离本发明的精神,希望所附的权利要求包括这些变形和变化而不脱离本发明的精神。

Claims (6)

1.一种基于视觉的无人机防碰撞装置,其特征在于,包括:摄像模块及检测模块;
所述摄像模块在无人机飞行期间实时采集各方向图像,并传输至检测模块;所述摄像模块包括至少四个摄像模组;
所述检测模块包括:接收单元、校验单元及比对单元;
所述接收单元接收摄像模块传输的图像;
所述校验单元提取图像的特征信息,通过几何关系投影,结合摄像机标定方法,根据摄像模组内部参数和外部参数计算出摄像模组到障碍物的最短距离,再根据无人机和摄像模组的固定关系,计算无人机到障碍物的最短距离;
所述比对单元对比无人机到障碍物的最短距离与预设安全距离的大小,若无人机到障碍物的最短距离小于预设安全距离,则向无人机的控制模块发出预警信号。
2.如权利要求1所述的一种基于视觉的无人机防碰撞装置,其特征在于,还包括控制电路,所述控制电路用于在无人机控制模块接收到检测模块发出的预警信号后,向无人机飞行驱动模块发出禁止向该方向移动的指令,锁死无人机向该方向移动。
3.如权利要求1或2所述的任一基于视觉的无人机防碰撞装置,其特征在于,所述装置通过通信模块与无人机通信。
4.如权利要求3所述的基于视觉的无人机防碰撞装置,其特征在于,所述装置固定挂载于无人机下方,或集成到无人机设备中。
5.一种基于视觉的无人机防碰撞方法,其特征在于,包括以下步骤:
摄像模块实时采集各方向的图像信息,并传输到检测模块;
检测模块接收图像信息,并提取图像特征信息;
根据提取的图像信息,通过几何关系投影,结合摄像机标定方法,根据摄像模组内部参数和外部参数计算出摄像模组到障碍物的最短距离;
根据无人机和摄像模组的固定关系,计算无人机到障碍物的最短距离;
判断无人机到障碍物的最短距离与预设安全距离的大小,若无人机到障碍物的最短距离小于预设安全距离,则向无人机的控制模块发出预警信号。
6.如权利要求5所述的一种基于视觉的无人机防碰撞方法,其特征在于,无人机控制模块收到预警信号后,向无人机飞行驱动模块发出禁止向该方向移动的指令,锁死无人机向该方向移动,当无人机向除该方向以外的任一方向移动后,则解锁无人机向该方向移动。
CN201711019867.1A 2017-10-26 2017-10-26 基于视觉的无人机防碰撞装置及方法 Withdrawn CN107817811A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711019867.1A CN107817811A (zh) 2017-10-26 2017-10-26 基于视觉的无人机防碰撞装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711019867.1A CN107817811A (zh) 2017-10-26 2017-10-26 基于视觉的无人机防碰撞装置及方法

Publications (1)

Publication Number Publication Date
CN107817811A true CN107817811A (zh) 2018-03-20

Family

ID=61603289

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711019867.1A Withdrawn CN107817811A (zh) 2017-10-26 2017-10-26 基于视觉的无人机防碰撞装置及方法

Country Status (1)

Country Link
CN (1) CN107817811A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108490938A (zh) * 2018-03-21 2018-09-04 沈阳上博智像科技有限公司 无人驾驶设备视觉避障系统及方法
CN108735001A (zh) * 2018-05-31 2018-11-02 智飞智能装备科技东台有限公司 一种基于北斗导航的无人机防撞及预警装置
CN108776492A (zh) * 2018-06-27 2018-11-09 电子科技大学 一种基于双目相机的四轴飞行器自主避障与导航方法
CN108805906A (zh) * 2018-05-25 2018-11-13 哈尔滨工业大学 一种基于深度图的运动障碍物检测及定位方法
CN109443407A (zh) * 2018-09-28 2019-03-08 南安市罗兴工业设计有限公司 一种具有防测量进位错误而撞毁功能的光学测量装置
CN110548276A (zh) * 2018-05-30 2019-12-10 深圳市掌网科技股份有限公司 球场辅助判罚系统
CN111326023A (zh) * 2018-12-13 2020-06-23 顺丰科技有限公司 一种无人机航线预警方法、装置、设备及存储介质
WO2021088684A1 (zh) * 2019-11-07 2021-05-14 深圳市道通智能航空技术股份有限公司 全向避障方法及无人飞行器

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150136209A (ko) * 2014-05-26 2015-12-07 서울대학교산학협력단 다중 영상 기반 장애물 회피 시스템 및 방법
CN105138002A (zh) * 2015-09-10 2015-12-09 华南农业大学 基于激光与双目视觉的无人机避险探测系统及方法
CN105717933A (zh) * 2016-03-31 2016-06-29 深圳奥比中光科技有限公司 无人机以及无人机防撞方法
CN106444837A (zh) * 2016-10-17 2017-02-22 北京理工大学 一种无人机避障方法及系统
CN106529495A (zh) * 2016-11-24 2017-03-22 腾讯科技(深圳)有限公司 一种飞行器的障碍物检测方法和装置
CN106708084A (zh) * 2016-11-24 2017-05-24 中国科学院自动化研究所 复杂环境下无人机自动障碍物检测和避障方法
CN106814744A (zh) * 2017-03-14 2017-06-09 吉林化工学院 一种无人机飞行控制系统以及方法
CN106933243A (zh) * 2015-12-30 2017-07-07 湖南基石信息技术有限公司 一种基于双目视觉的无人机实时避障系统及方法
US20170201738A1 (en) * 2015-06-13 2017-07-13 Alberto Daniel Lacaze Senising on uavs for mapping and obstacle avoidance

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150136209A (ko) * 2014-05-26 2015-12-07 서울대학교산학협력단 다중 영상 기반 장애물 회피 시스템 및 방법
US20170201738A1 (en) * 2015-06-13 2017-07-13 Alberto Daniel Lacaze Senising on uavs for mapping and obstacle avoidance
CN105138002A (zh) * 2015-09-10 2015-12-09 华南农业大学 基于激光与双目视觉的无人机避险探测系统及方法
CN106933243A (zh) * 2015-12-30 2017-07-07 湖南基石信息技术有限公司 一种基于双目视觉的无人机实时避障系统及方法
CN105717933A (zh) * 2016-03-31 2016-06-29 深圳奥比中光科技有限公司 无人机以及无人机防撞方法
CN106444837A (zh) * 2016-10-17 2017-02-22 北京理工大学 一种无人机避障方法及系统
CN106529495A (zh) * 2016-11-24 2017-03-22 腾讯科技(深圳)有限公司 一种飞行器的障碍物检测方法和装置
CN106708084A (zh) * 2016-11-24 2017-05-24 中国科学院自动化研究所 复杂环境下无人机自动障碍物检测和避障方法
CN106814744A (zh) * 2017-03-14 2017-06-09 吉林化工学院 一种无人机飞行控制系统以及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张立鹏等: "无人机自主防碰撞控制器设计", 《电光与控制》 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108490938A (zh) * 2018-03-21 2018-09-04 沈阳上博智像科技有限公司 无人驾驶设备视觉避障系统及方法
CN108805906A (zh) * 2018-05-25 2018-11-13 哈尔滨工业大学 一种基于深度图的运动障碍物检测及定位方法
CN110548276A (zh) * 2018-05-30 2019-12-10 深圳市掌网科技股份有限公司 球场辅助判罚系统
CN108735001A (zh) * 2018-05-31 2018-11-02 智飞智能装备科技东台有限公司 一种基于北斗导航的无人机防撞及预警装置
CN108776492A (zh) * 2018-06-27 2018-11-09 电子科技大学 一种基于双目相机的四轴飞行器自主避障与导航方法
CN108776492B (zh) * 2018-06-27 2021-01-26 电子科技大学 一种基于双目相机的四轴飞行器自主避障与导航方法
CN109443407A (zh) * 2018-09-28 2019-03-08 南安市罗兴工业设计有限公司 一种具有防测量进位错误而撞毁功能的光学测量装置
CN109443407B (zh) * 2018-09-28 2021-01-26 南安市罗兴工业设计有限公司 一种具有防测量进位错误而撞毁功能的光学测量装置
CN111326023A (zh) * 2018-12-13 2020-06-23 顺丰科技有限公司 一种无人机航线预警方法、装置、设备及存储介质
CN111326023B (zh) * 2018-12-13 2022-03-29 丰翼科技(深圳)有限公司 一种无人机航线预警方法、装置、设备及存储介质
WO2021088684A1 (zh) * 2019-11-07 2021-05-14 深圳市道通智能航空技术股份有限公司 全向避障方法及无人飞行器

Similar Documents

Publication Publication Date Title
CN107817811A (zh) 基于视觉的无人机防碰撞装置及方法
CN102707724B (zh) 一种无人机的视觉定位与避障方法及系统
US9632509B1 (en) Operating a UAV with a narrow obstacle-sensor field-of-view
CN113359810A (zh) 一种基于多传感器的无人机着陆区域识别方法
WO2020072808A1 (en) Aerial vehicles having countermeasures for neutralizing target aerial vehicles
CN112201051B (zh) 一种无人机端路面车辆违停检测及取证系统和方法
CN109791413A (zh) 用于使无人机着陆在移动基座上的系统和方法
CN107703951B (zh) 一种基于双目视觉的无人机避障方法及系统
JP2024053085A (ja) 飛行体制御装置、飛行体制御方法、及びプログラム
RU151809U1 (ru) Видеосистема для обеспечения безопасности транспортных средств
TWI686686B (zh) 飛行器的控制方法和裝置
CN106444837A (zh) 一种无人机避障方法及系统
CN106875707A (zh) 一种针对应急交通场景的空中交警系统
CN105759834A (zh) 一种主动捕获低空小型无人飞行器的系统及方法
CN105334347B (zh) 一种基于无人机的粒子图像测速检测系统及方法
EP3020634A1 (en) Deployable airborne sensor array system and method of use
CN109828274A (zh) 调整机载雷达的主探测方向的方法、装置和无人机
CN106945835A (zh) 一种无人飞行器
CN111627256A (zh) 无人机控制方法、车载终端及计算机可读存储介质
CN116434088A (zh) 基于无人机航拍图像的车道线检测及车道辅助保持方法
US9583012B1 (en) System and method for detection and avoidance
CN112119428A (zh) 获取降落位置的方法、设备、无人机、系统及存储介质
CN107576329B (zh) 基于机器视觉的固定翼无人机着降引导合作信标设计方法
CN111413999A (zh) 一种基于无人机的安全巡检方法
CN115291219A (zh) 利用单目摄像头实现无人机动态避障方法、装置及无人机

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 150016 Heilongjiang Province, Harbin City Economic Development Zone haping Road District Dalian road and Xingkai road junction

Applicant after: HARBIN YISHE TECHNOLOGY CO., LTD.

Address before: 150016 Heilongjiang City, Harbin province Daoli District, quiet street, unit 54, unit 2, layer 4, No. 3

Applicant before: HARBIN YISHE TECHNOLOGY CO., LTD.

CB02 Change of applicant information
WW01 Invention patent application withdrawn after publication

Application publication date: 20180320

WW01 Invention patent application withdrawn after publication