CN105068542A - 一种基于视觉的旋翼无人机引导飞行控制系统 - Google Patents
一种基于视觉的旋翼无人机引导飞行控制系统 Download PDFInfo
- Publication number
- CN105068542A CN105068542A CN201510416706.0A CN201510416706A CN105068542A CN 105068542 A CN105068542 A CN 105068542A CN 201510416706 A CN201510416706 A CN 201510416706A CN 105068542 A CN105068542 A CN 105068542A
- Authority
- CN
- China
- Prior art keywords
- image
- module
- image processing
- processing module
- vision
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 title claims abstract description 11
- 239000003550 marker Substances 0.000 claims abstract description 25
- 238000000034 method Methods 0.000 description 5
- 206010034719 Personality change Diseases 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
Landscapes
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
本发明提供一种基于视觉的旋翼无人机引导飞行控制系统，能够利用旋翼无人机普遍搭载的CCD摄像机实现对旋翼无人机的飞行引导功能。包括图像采集模块，用以拍摄标识物的视频图像供图像存储模块和图像处理模块使用；图像存储模块，用于存储引导标识物的图像；图像处理模块，进行视频图像处理，检测并跟踪引导标识物，计算每一帧图像中引导标识物相对上一帧的偏移量，并根据该偏移量计算出使引导标识物位于图像中央时飞行器及云台所需的控制量；报警系统模块，当图像处理模块发现相似引导物时，发出警报并向姿态控制模块发出悬停控制指令；云台控制模块，利用图像处理模块给出的云台姿态控制量控制云台姿态。
Description
技术领域
本发明属于无人飞行器自动控制领域，涉及一种基于视觉的旋翼无人机引导飞行控制系统。
背景技术
传统固定翼无人机，平飞速度快，效率高，但是只能盘旋监测，不能悬停，转弯半径有一定要求。
旋翼无人机由电机驱动螺旋桨提供动力，可以完成垂直起降，空中悬停、侧飞、后退飞等类似直升机所有的动作，姿态变换灵活，可在飞行中实现较小的转弯半径，很少受到场地的限制。搭载CCD摄像机的旋翼无人机，通过精确地位置和姿态变换在建筑物周围也能安全飞行并进行精确地图像拍摄。
无人机的跟随功能是指通过某种技术手段使无人机自主跟随运动中的特定人或物，实现操作人员对无人机的引导飞行，是无人机自主飞行中的一项重要技术。在实际应用中，该技术相较手动遥控更简便，而与提前的航点规划功能相比有了更高的灵活性。
现有对无人机的引导功能主要是通过装备有GPS模块的可移动地面站实现：地面站通过GPS模块获取自身地理位置信息，然后经无线传输模块将地理位置信息传输给无人机，无人机据此跟踪移动的地面站。
以上方法可实现操作员对无人机较好的引导功能，但该方法中的无线传输链路易受电磁干扰，而GPS模块信号在有建筑物遮挡或云层较厚等情况下会受到影响甚至丢失。这些都是引导功能实现过程中的不稳定因素。
发明内容
本发明的主要目的在于提供一种基于视觉的旋翼无人机引导飞行控制系统，能够利用旋翼无人机普遍搭载的CCD摄像机实现对旋翼无人机的飞行引导功能。
本发明通过以下技术方案实现：
一种基于视觉的旋翼无人机引导飞行控制系统，包括：
图像采集模块，用以拍摄标识物的视频图像供图像存储模块和图像处理模块使用；
图像存储模块，用于存储引导标识物的图像，以便后续图像处理模块将实时视频图像与之进行对比计算；
图像处理模块，进行视频图像处理，检测并跟踪引导标识物，计算每一帧图像中引导标识物相对上一帧的偏移量，并根据该偏移量计算出使引导标识物位于图像中央时飞行器及云台所需的控制量；
报警系统模块，当图像处理模块发现相似引导物时，发出警报并向姿态控制模块发出悬停控制指令；
云台控制模块，利用图像处理模块给出的云台姿态控制量控制云台姿态。
本发明的有益效果：
本发明中飞行器的位置和姿态改变以及云台的姿态改变共同决定了摄像机的位置和姿态，从而实现摄像机对标识物的跟踪，进而实现对旋翼无人飞行器的引导飞行。
附图说明
图1是本发明基于视觉的引导旋翼无人机飞行的控制系统图；
图2是本发明基于视觉的引导旋翼无人机飞行的操作流程图。
具体实施方式
下面结合附图和实施例对本发明进行详细说明。
应当理解，此处所描述的具体实施案例仅仅用以解释本发明，并不用于限定本发明。
如附图1所示，本发明的基于视觉的旋翼无人机引导飞行控制系统包括：
图像采集模块，用以拍摄标识物的视频图像供图像存储模块和图像处理模块使用，在具体使用中使用两个机载CCD摄像头组成双目视觉图像采集模块。
图像存储模块，用于存储引导标识物的图像，以便后续图像处理模块将实时视频图像与之进行对比计算；
图像处理模块，进行视频图像处理，检测并跟踪引导标识物，计算每一帧图像中引导标识物相对上一帧的偏移量，并根据该偏移量计算出使引导标识物位于图像中央时飞行器及云台所需的控制量。为了实现对飞行器的实时引导，图像处理模块须采用运算速度较快的处理器，如采用FPGA+DSP架构。
报警系统模块，用于当图像检测模块发现相似引导物时，发出警报并向姿态控制模块发出悬停控制指令，此报警可以是发出声音或其他措施。
飞行控制模块，利用图像处理模块给出的飞行控制量控制飞行器位置及姿态。
云台控制模块，利用图像处理模块给出的云台姿态控制量控制云台姿态。
举引导标识物和旋翼飞行器为例。其中p1为一块白色薄板，在其表面画有特定颜色的五角星图案，作为引导标识物。A为通过云台搭载了CCD摄像机的小型旋翼无人机，a1为云台，a2为CCD摄像机。
要实现引导标识物对旋翼无人机的飞行引导，主要分为以下几个步骤：
步骤S10，录入引导标识物，用CCD摄像机a2拍摄引导标识物p1，使p1上的五角星图案全部进入图像中。
步骤S20，遥控飞行器起飞后，将引导标识物p1置于CCD摄像机a2拍摄范围内。
步骤S30，飞行器切换为引导飞行模式，等待图像处理模块检测到引导标识物后发出可引导飞行的信号(如特定声音，但不限于此)。
步骤S40，可引导飞行信号发出后，引导标识物通过移动位置便可间接控制云台a1和整个飞行器A姿态及位置从而实现对飞行器的飞行引导。
步骤S50，特别的，如图2，在引导飞行过程中，另一与p1相似引导标识物p2进入CCD摄像机a2拍摄范围，则系统发出警报(如特定声音，但不限于此)，并使飞行器悬停。
Claims (3)
1.一种基于视觉的旋翼无人机引导飞行控制系统，其特征在于，包括：
图像采集模块，用以拍摄标识物的视频图像供图像存储模块和图像处理模块使用；
图像存储模块，用于存储引导标识物的图像，以便后续图像处理模块将实时视频图像与之进行对比计算；
图像处理模块，进行视频图像处理，检测并跟踪引导标识物，计算每一帧图像中引导标识物相对上一帧的偏移量，并根据该偏移量计算出使引导标识物位于图像中央时飞行器及云台所需的控制量；
报警系统模块，当图像处理模块发现相似引导物时，发出警报并向姿态控制模块发出悬停控制指令；
云台控制模块，利用图像处理模块给出的云台姿态控制量控制云台姿态。
2.如权利要求1所述的一种基于视觉的旋翼无人机引导飞行控制系统，其特征在于，使用两个机载CCD摄像头组成双目视觉图像采集模块。
3.如权利要求1或2所述的一种基于视觉的旋翼无人机引导飞行控制系统，其特征在于，图像处理模块采用FPGA+DSP架构。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510416706.0A CN105068542A (zh) | 2015-07-15 | 2015-07-15 | 一种基于视觉的旋翼无人机引导飞行控制系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510416706.0A CN105068542A (zh) | 2015-07-15 | 2015-07-15 | 一种基于视觉的旋翼无人机引导飞行控制系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN105068542A true CN105068542A (zh) | 2015-11-18 |
Family
ID=54497932
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510416706.0A Pending CN105068542A (zh) | 2015-07-15 | 2015-07-15 | 一种基于视觉的旋翼无人机引导飞行控制系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105068542A (zh) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105759535A (zh) * | 2016-04-21 | 2016-07-13 | 捷西迪（广州）光学科技有限公司 | 无人飞机的镜头模组的光轴变动补偿装置及其补偿方法 |
| CN106155081A (zh) * | 2016-06-17 | 2016-11-23 | 北京理工大学 | 一种旋翼无人机大范围目标监测和精确定位方法 |
| CN106292721A (zh) * | 2016-09-29 | 2017-01-04 | 腾讯科技（深圳）有限公司 | 一种控制飞行器跟踪目标对象的方法、设备及系统 |
| CN106354156A (zh) * | 2016-09-29 | 2017-01-25 | 腾讯科技（深圳）有限公司 | 一种跟踪目标对象的方法、装置及飞行器 |
| CN106422358A (zh) * | 2016-12-19 | 2017-02-22 | 深圳高灿科技有限公司 | 基于视觉控制的悬停和近距离跟踪装置及方法、电动玩具 |
| CN106525074A (zh) * | 2016-10-13 | 2017-03-22 | 重庆零度智控智能科技有限公司 | 一种云台漂移的补偿方法、装置、云台和无人机 |
| CN108573498A (zh) * | 2018-03-08 | 2018-09-25 | 李绪臣 | 基于无人机的行驶车辆即时跟踪系统 |
| CN109814588A (zh) * | 2017-11-20 | 2019-05-28 | 深圳富泰宏精密工业有限公司 | 飞行器以及应用于飞行器的目标物追踪系统和方法 |
| WO2021259253A1 (zh) * | 2020-06-24 | 2021-12-30 | 深圳市道通智能航空技术股份有限公司 | 一种轨迹跟踪方法及无人机 |
| CN115237160A (zh) * | 2022-08-16 | 2022-10-25 | 中国科学院深圳先进技术研究院 | 用于无人机采集led模组照片的自动引导飞行方法及装置 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE19521600A1 (de) * | 1995-06-14 | 1996-12-19 | Bodenseewerk Geraetetech | Landeverfahren für unbemannte Luftfahrzeuge |
| CN104298248A (zh) * | 2014-10-08 | 2015-01-21 | 南京航空航天大学 | 旋翼无人机精确视觉定位定向方法 |
| CN104656664A (zh) * | 2015-02-16 | 2015-05-27 | 南京航空航天大学 | 车载多旋翼无人直升机着陆导引控制系统及导引控制方法 |
-
2015
- 2015-07-15 CN CN201510416706.0A patent/CN105068542A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE19521600A1 (de) * | 1995-06-14 | 1996-12-19 | Bodenseewerk Geraetetech | Landeverfahren für unbemannte Luftfahrzeuge |
| CN104298248A (zh) * | 2014-10-08 | 2015-01-21 | 南京航空航天大学 | 旋翼无人机精确视觉定位定向方法 |
| CN104656664A (zh) * | 2015-02-16 | 2015-05-27 | 南京航空航天大学 | 车载多旋翼无人直升机着陆导引控制系统及导引控制方法 |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105759535B (zh) * | 2016-04-21 | 2018-12-07 | 捷西迪（广州）光学科技有限公司 | 无人飞机的镜头模组的光轴变动补偿装置及其补偿方法 |
| CN105759535A (zh) * | 2016-04-21 | 2016-07-13 | 捷西迪（广州）光学科技有限公司 | 无人飞机的镜头模组的光轴变动补偿装置及其补偿方法 |
| CN106155081B (zh) * | 2016-06-17 | 2018-02-16 | 北京理工大学 | 一种旋翼无人机大范围目标监测和精确定位方法 |
| CN106155081A (zh) * | 2016-06-17 | 2016-11-23 | 北京理工大学 | 一种旋翼无人机大范围目标监测和精确定位方法 |
| CN106354156A (zh) * | 2016-09-29 | 2017-01-25 | 腾讯科技（深圳）有限公司 | 一种跟踪目标对象的方法、装置及飞行器 |
| CN106292721A (zh) * | 2016-09-29 | 2017-01-04 | 腾讯科技（深圳）有限公司 | 一种控制飞行器跟踪目标对象的方法、设备及系统 |
| CN106525074A (zh) * | 2016-10-13 | 2017-03-22 | 重庆零度智控智能科技有限公司 | 一种云台漂移的补偿方法、装置、云台和无人机 |
| CN106525074B (zh) * | 2016-10-13 | 2019-11-08 | 天津远度科技有限公司 | 一种云台漂移的补偿方法、装置、云台和无人机 |
| CN106422358A (zh) * | 2016-12-19 | 2017-02-22 | 深圳高灿科技有限公司 | 基于视觉控制的悬停和近距离跟踪装置及方法、电动玩具 |
| CN109814588A (zh) * | 2017-11-20 | 2019-05-28 | 深圳富泰宏精密工业有限公司 | 飞行器以及应用于飞行器的目标物追踪系统和方法 |
| CN108573498A (zh) * | 2018-03-08 | 2018-09-25 | 李绪臣 | 基于无人机的行驶车辆即时跟踪系统 |
| CN108573498B (zh) * | 2018-03-08 | 2019-04-26 | 上海申雪供应链管理有限公司 | 基于无人机的行驶车辆即时跟踪系统 |
| WO2021259253A1 (zh) * | 2020-06-24 | 2021-12-30 | 深圳市道通智能航空技术股份有限公司 | 一种轨迹跟踪方法及无人机 |
| CN115237160A (zh) * | 2022-08-16 | 2022-10-25 | 中国科学院深圳先进技术研究院 | 用于无人机采集led模组照片的自动引导飞行方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105068542A (zh) | 一种基于视觉的旋翼无人机引导飞行控制系统 | |
| US11604479B2 (en) | Methods and system for vision-based landing | |
| CN109911231B (zh) | 基于gps和图像识别混合导航的无人机自主着舰方法与系统 | |
| JP6312178B2 (ja) | ナビゲーションシステム、輸送機の状態情報を評価する方法、及び、輸送機の状態情報を評価する装置 | |
| CN107240063B (zh) | 一种面向移动平台的旋翼无人机自主起降方法 | |
| CN104309803B (zh) | 旋翼飞行器自动降落系统及方法 | |
| CN107817820A (zh) | 一种基于深度学习的无人机自主飞行控制方法与系统 | |
| WO2016138687A1 (zh) | 多旋翼飞行器的控制系统、终端及机载飞控系统 | |
| CN105759833A (zh) | 一种沉浸式无人机驾驶飞行系统 | |
| CN106647790A (zh) | 面向复杂环境的四旋翼无人机飞行器系统及飞行方法 | |
| CN109240328A (zh) | 一种基于无人机的杆塔自主巡检方法 | |
| CN108052110A (zh) | 基于双目视觉的无人机编队飞行方法和系统 | |
| CN110113570A (zh) | 一种输电线路无人机自主巡检系统及其工作方法 | |
| CN204757989U (zh) | 一种无人机着陆导航系统 | |
| WO2017166724A1 (zh) | 停机坪装置、飞行器及飞行器停机系统 | |
| CN108628346A (zh) | 一种智慧物流空地协同系统控制方法 | |
| CN205375196U (zh) | 用于风电场巡检的群组机器人控制装置 | |
| CN107544550A (zh) | 一种基于视觉引导的无人机自动着陆方法 | |
| CN107329487A (zh) | 一种无人机与机器人空中联动作业平台 | |
| CN103730864B (zh) | 无人机电力线路巡检的协同控制方法 | |
| CN104908960A (zh) | 一种可进行人机对话功能的空中指挥无人机 | |
| CN106483969A (zh) | 一种多旋翼视觉循迹无人机 | |
| CN106774365A (zh) | 一种基于外部视觉定位的无人机调试系统 | |
| CN207249489U (zh) | 一种无人机与机器人空中联动作业平台 | |
| CN106527484A (zh) | 一种基于机电一体化的无人机飞行航线管理系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20151118 |