CN105338309B - 一种用于跟踪采煤机的无人机视频感知系统 - Google Patents

一种用于跟踪采煤机的无人机视频感知系统 Download PDF

Info

Publication number
CN105338309B
CN105338309B CN201510617082.9A CN201510617082A CN105338309B CN 105338309 B CN105338309 B CN 105338309B CN 201510617082 A CN201510617082 A CN 201510617082A CN 105338309 B CN105338309 B CN 105338309B
Authority
CN
China
Prior art keywords
coalcutter
aircraft
tracking
sensory perceptual
perceptual system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510617082.9A
Other languages
English (en)
Other versions
CN105338309A (zh
Inventor
田成金
毕东柱
黄曾华
洪鹃
李然
马楠
魏文艳
张晶晶
王旭鸣
李森
何勇华
周如林
付振
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Tianma Intelligent Control Technology Co Ltd
Original Assignee
Beijing Tiandi Marco Electro Hydraulic Control System Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Tiandi Marco Electro Hydraulic Control System Co Ltd filed Critical Beijing Tiandi Marco Electro Hydraulic Control System Co Ltd
Priority to CN201510617082.9A priority Critical patent/CN105338309B/zh
Publication of CN105338309A publication Critical patent/CN105338309A/zh
Application granted granted Critical
Publication of CN105338309B publication Critical patent/CN105338309B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

一种用于跟踪采煤机的无人机视频感知系统,包括多个四旋翼飞行器、红外发射器、耦合器和计算机;飞行器上设置有摄像头和控制器;红外发射器设置在采煤机上,用于确定采煤机的空间位置;耦合器设置在工作面,用于组成无线局域网通过无线路由功能与飞行器进行通讯;计算机用以太网连接耦合器。本发明把无人机的自动跟踪技术应用到煤矿工作面,用少量的摄像头代替传统工作面大量的摄像头,节约成本,节省线缆,避免了密集布线;使用设备少,减少了潜在的故障点;无人机跟随拍摄,距离、角度可调,比传统摄像头方式拍摄的画面更清晰,灵活度更高,且画面连续,无需切换;可实现由控制器控制的无人机休眠模式,节省电量,续航时间更长。

Description

一种用于跟踪采煤机的无人机视频感知系统
技术领域
本发明涉及一种无人机视频感知系统,尤其涉及一种用于跟踪煤矿井下采煤机的无人机视频感知系统。
背景技术
采煤机是综采工作面最重要的设备之一,其正常运行是整个综采工作面完成采掘作业的基础,因此,对采煤机的监测是煤矿井下综采工作面的一项重要任务。综采工作面采煤机滚筒及周边顶底板的状况过去一直是由人工目测,然后根据实际情况调整采煤机滚筒,费事费力,精确度差,同时也非常的不安全。
随着综采技术的不断进步,煤矿井下引入了摄像头技术,既在工作面的支架上每隔n架安装一个摄像头,经过视频拼接技术可观察采煤机的运行情况和顶底板的情况,摄像头安装在顶梁下,朝向煤壁,带或者不带云台的摄像头把摄的实时数据通过光纤传回顺槽主控计算机。但这种摄像头监控方式安装成本高,同时需要根据采煤机的位置主视频进行切换,当滚筒落在2个摄像头中间时易产生盲点,影响了监控效果。
在其他监控领域,如CN103869819A、CN104536456A等,公开了使用四旋翼无人机进行路桥、输送机、电力线路等的监控。但其仅能监测一个目标,且目标无运动或者运动方式单一,对无人机的移动的校准方式没有严格的要求,无法用于井下恶劣的环境,也无法对运动方式复杂、监测目标众多的采煤机进行有效的监控。
发明内容
为解决上述问题,本发明提出一种用于跟踪采煤机的无人机视频感知系统,包括多个四旋翼飞行器、红外发射器、带无线路由功能的耦合器和计算机;所述飞行器上设置有摄像头和控制器;所述红外发射器设置在所述采煤机上,用于确定采煤机的空间位置;所述耦合器设置在工作面,用于组成无线局域网通过无线路由功能与所述飞行器进行通讯;所述计算机用以太网连接所述耦合器。
优选所述四旋翼飞行器有四个。
优选所述四旋翼飞行器分别设置在所述采煤机前滚筒的两侧和后滚筒的两侧。
优选所述飞行器上还是设置有定高单元。
优选所述定高单元包括超声波定高装置、加速度计、视觉定位装置、3维陀螺仪、红外光栅定位中的一种或几种。
优选所述控制器带有无线WIFI模块。
本发明把无人机的自动跟踪技术应用到煤矿工作面,用无人机替代人工,解决工作面采煤机无人化监控的问题;用少量的摄像头代替传统工作面大量的摄像头,节约成本,节省线缆,避免了密集布线;使用设备少,减少了潜在的故障点;无人机跟随拍摄,距离、角度可调,比传统摄像头方式拍摄的画面更清晰,灵活度更高,且画面连续,无需切换;可实现由控制器控制的无人机休眠模式,节省电量,续航时间更长。
附图说明
附图1为本发明所述无人机视频感知系统的结构简图;
附图2为本发明所使用飞行器的结构布置图。
附图标记如下:
1-煤壁;2-采煤机;3-液压支架;4-带无线路由功能的耦合器;5-红外发射器;6-飞行器(无人机);7-控制器;8-摄像头。
具体实施方式
参见附图1,其描述了根据本发明所述无人机视频感知系统的一个优选实施例。无人机视频感知系统主要用于监测煤矿井下采煤机等采掘设备的运行状况,包括四个四旋翼飞行器、红外发射器、耦合器和计算机;飞行器为一种无人机,参见附图2,其可以实现程控或遥控的全方位运动和悬停,其上设置有摄像头和控制器,摄像头为高清摄像头,达到1280*720的分辨率,拍摄现场画面,控制器带有无线WIFI模块,以每秒2M的传输速率即可实时摄像头实时场景的画面传输,并通过WiFi接收控制信号,通过WiFi传送视频信号,控制飞行器的高低左右位置,控制器上还具有休眠功能,在需要时可以关闭飞行器,增加飞行器的续航时间,由于采煤机的结构复杂,因此,四个飞行器应分开设置,如分别设置采煤机前滚筒的两侧和后滚筒的两侧,实现对采煤机的全方位监控,消除视频死角;工作面空间狭小,为避免飞行器碰撞顶板或支架,飞行器上还需要设置定高单元,以随时确定和改变飞行器的飞行高度,定高单元可以为超声波定高装置、加速度计、视觉定位装置、3维陀螺仪、红外光栅定位中的一种,也可以同时使用多种装置定高,红外发射器设置在采煤机上,其与工作面红外系统连接,用于确定采煤机的空间位置;耦合器设置在工作面的液压支架上,用于组成无线局域网通过无线路由功能与飞行器进行通讯;计算机用以太网连接耦合器,一方面,其接收摄像头采集的采煤机视频信号,通过显示屏进行显示;另一方面,其接收采煤机和无人机的位置信息,保证飞行器跟随采煤机运行,并随时校正各飞行器的跟随轨迹。
系统的工作原理和工作过程如下:
(1)选定工作面起点位置为原点(X,Y,Z),根据采煤机红外发射器的位置,通过固定参数计算出4个飞行器A1(x1,y1,z1),A2(x2,y2,z2),A3(x3,y3,z3),A4(x1,y1,z1)的相对坐标,通过2.4GHz频率无线WiFi信号,802.11n协议,把数据传到工作面的路由器,由端头无线路由发送数据(数据类型1,0,A1,x1,y1,z1,A2,x2,y2,z2,A3,x3,y3,z3,A4,x1,y1,z1),当飞行器的控制器收到数据后根据自身的ID号,唤醒飞行器,存储位置信号,并回复(数据类型1,1,An,xn,yn,zn),系统集成计算机接收回复信号并校验,校验无误等待计算机发送启动命令;
(2)系统集成计算机发送启动命令(数据类型2,O,A1,A2,A3,A4,方向,速度),无人机接收命令启动,飞到坐标位置,开启高清摄像头,并回传数据(数据类型2,1,An,视频数据),等待采煤机运转;
(3)采煤机运转,系统集成计算机每5秒通过采煤机附近的无线路由器发送位置及速度校正信号;
(4)根据采煤机运行方向,前滚筒的无人机一个拍摄前滚筒和煤壁工况,一个拍摄顶板和煤壁工况;后滚筒的无人机一个拍摄后滚筒和煤壁工况,一个拍摄底板和煤壁的工况。
(5)观察人员可随时通过输入坐标和摄像头角度来调整实时画面;
(6)当采煤机停机后,系统集成计算机发送返回命令(数据类型3,0,A1,A2,A3,A4),无人机顺次平飞到各自起飞坐标,然后关闭摄像头,休眠无人机,回复(数据类型3,1,An,1,1,1)。
以上所述,仅为本发明专利较佳的具体实施方式,但本发明专利的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明专利揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明专利的保护范围之内。

Claims (6)

1.一种用于跟踪采煤机的无人机视频感知系统,其特征在于:包括多个飞行器、红外发射器、带无线路由功能的耦合器和计算机;
所述多个飞行器设置有摄像头和控制器,所述控制器控制飞行器对于采煤机的不同方位进行视频监控;
所述多个飞行器中至少包括分别设置在所述采煤机前滚筒的两侧和后滚筒的两侧的飞行器;
实时控制飞行器飞行至指定位置,并控制所述飞行器跟随采煤机的运行,监测采煤机和邻接煤壁的工况;
所述红外发射器设置在采煤机上,根据所述红外发射器的位置,计算出上述所述多个飞行器的相对坐标,以确定采煤机的空间位置;
所述耦合器设置在工作面,用于组成无线局域网通过无线路由功能与所述飞行器进行通讯;
所述计算机用以太网连接所述耦合器,接收所述视频监控信号,并接收所述采煤机和所述飞行器的位置信息,矫正各飞行器的跟随轨迹。
2.如权利要求1所述的用于跟踪采煤机的无人机视频感知系统,其特征在于:所述飞行器为四旋翼飞行器。
3.如权利要求2所述的用于跟踪采煤机的无人机视频感知系统,其特征在于:所述四旋翼飞行器有四个。
4.如权利要求1所述的用于跟踪采煤机的无人机视频感知系统,其特征在于:所述飞行器上有定高单元。
5.如权利要求4所述的用于跟踪采煤机的无人机视频感知系统,其特征在于:所述定高单元包括超声波定高装置、加速度计、视觉定位装置、3维陀螺仪、红外光栅定位中的一种或几种。
6.如权利要求1所述的用于跟踪采煤机的无人机视频感知系统,其特征在于:所述控制器带有无线WIFI模块。
CN201510617082.9A 2015-09-24 2015-09-24 一种用于跟踪采煤机的无人机视频感知系统 Active CN105338309B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510617082.9A CN105338309B (zh) 2015-09-24 2015-09-24 一种用于跟踪采煤机的无人机视频感知系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510617082.9A CN105338309B (zh) 2015-09-24 2015-09-24 一种用于跟踪采煤机的无人机视频感知系统

Publications (2)

Publication Number Publication Date
CN105338309A CN105338309A (zh) 2016-02-17
CN105338309B true CN105338309B (zh) 2018-08-28

Family

ID=55288554

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510617082.9A Active CN105338309B (zh) 2015-09-24 2015-09-24 一种用于跟踪采煤机的无人机视频感知系统

Country Status (1)

Country Link
CN (1) CN105338309B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109505601B (zh) * 2018-11-26 2020-05-05 三一重型装备有限公司 无人化智能综采工作面

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102291575A (zh) * 2011-09-01 2011-12-21 天地科技股份有限公司 智能化综采工作面视频监控系统
CN203241794U (zh) * 2013-04-22 2013-10-16 常州联力自动化科技有限公司 煤矿综采面智能化视频监视系统
CN103869819A (zh) * 2014-03-10 2014-06-18 中国矿业大学 一种基于多旋翼无人机的带式输送机自动巡检系统及方法
CN204536909U (zh) * 2015-03-10 2015-08-05 深圳市科比特航空科技有限公司 一种基于植保无人机超声波可控定高作业系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8880241B2 (en) * 2013-02-20 2014-11-04 Farrokh Mohamadi Vertical takeoff and landing (VTOL) small unmanned aerial system for monitoring oil and gas pipelines

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102291575A (zh) * 2011-09-01 2011-12-21 天地科技股份有限公司 智能化综采工作面视频监控系统
CN203241794U (zh) * 2013-04-22 2013-10-16 常州联力自动化科技有限公司 煤矿综采面智能化视频监视系统
CN103869819A (zh) * 2014-03-10 2014-06-18 中国矿业大学 一种基于多旋翼无人机的带式输送机自动巡检系统及方法
CN204536909U (zh) * 2015-03-10 2015-08-05 深圳市科比特航空科技有限公司 一种基于植保无人机超声波可控定高作业系统

Also Published As

Publication number Publication date
CN105338309A (zh) 2016-02-17

Similar Documents

Publication Publication Date Title
CN105338308B (zh) 一种用于跟踪采煤机的无人机视频感知方法
EP2724204B1 (en) Method for acquiring images from arbitrary perspectives with uavs equipped with fixed imagers
CN103867205B (zh) 一种掘进机远程控制系统及方法
CN103149893B (zh) 机动自组织态势监测系统
CN109885083A (zh) 基于激光雷达的输电线路精细化巡检飞行平台及巡检方法
CN102929297B (zh) 一种飞机起飞降落跟踪系统及其方法
CN108334103A (zh) 无人机多距离避障方法及避障系统
KR20160034013A (ko) 무인 항공기를 이용한 건설현장 관리 시스템 및 방법
CN107289953A (zh) 一种无人机群的导航控制方法
CN103986913A (zh) 一种综采工作面跟机视频动态切换监控系统
Mueggler et al. Towards evasive maneuvers with quadrotors using dynamic vision sensors
CN103244164B (zh) 一种带有视频控制系统的液压支架组
CN112258840A (zh) 图像采集的控制方法、装置、设备及存储介质
JP2006027448A (ja) 無人飛行体を利用した空撮方法及びその装置
CN102878976A (zh) 掘进机位姿检测系统和掘进机
CN104792313A (zh) 无人侦查系统的测绘控制方法、装置及系统
AU2015309677A1 (en) An aerial survey image capture system
Beul et al. A high-performance MAV for autonomous navigation in complex 3D environments
KR101256650B1 (ko) 궤도 주행형 관측 시스템
KR101695254B1 (ko) 감시 및 추적 시스템
CN106781709A (zh) 一种飞机着陆监视引导系统
CN105338309B (zh) 一种用于跟踪采煤机的无人机视频感知系统
CN218488424U (zh) 矿下机器人及矿下机器人操控系统
AU2022350996A1 (en) Method and a control node for controlling a mining rig
CN210578909U (zh) 一种工程机械遥控器360°图像无缝回传系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 100013, Beijing, Chaoyang District, Hepingli Youth ditch East Road, building 5, one floor

Patentee after: Beijing Tianma Zhikong Technology Co.,Ltd.

Address before: 100013, Beijing, Chaoyang District, Hepingli Youth ditch East Road, building 5, one floor

Patentee before: BEIJING TIANDI-MARCO ELECTRO-HYDRAULIC CONTROL SYSTEM Co.,Ltd.

CP01 Change in the name or title of a patent holder