CN105120240B - 高倍变焦无人机空中高清多维实时侦查传输监控装置 - Google Patents
高倍变焦无人机空中高清多维实时侦查传输监控装置 Download PDFInfo
- Publication number
- CN105120240B CN105120240B CN201510609325.4A CN201510609325A CN105120240B CN 105120240 B CN105120240 B CN 105120240B CN 201510609325 A CN201510609325 A CN 201510609325A CN 105120240 B CN105120240 B CN 105120240B
- Authority
- CN
- China
- Prior art keywords
- image
- unit
- data
- parameter
- decoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012806 monitoring device Methods 0.000 title claims abstract description 13
- 238000012544 monitoring process Methods 0.000 claims abstract description 32
- 238000012545 processing Methods 0.000 claims abstract description 25
- 230000008859 change Effects 0.000 claims abstract description 9
- 230000005540 biological transmission Effects 0.000 claims description 39
- 238000000034 method Methods 0.000 claims description 20
- 238000013139 quantization Methods 0.000 claims description 20
- 230000008569 process Effects 0.000 claims description 11
- 238000011835 investigation Methods 0.000 claims description 8
- 238000005259 measurement Methods 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 3
- 230000004927 fusion Effects 0.000 claims description 3
- 230000003287 optical effect Effects 0.000 claims description 3
- 230000008054 signal transmission Effects 0.000 claims 3
- 238000004891 communication Methods 0.000 abstract description 21
- 238000005516 engineering process Methods 0.000 description 9
- 230000002159 abnormal effect Effects 0.000 description 5
- 238000010276 construction Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 238000005070 sampling Methods 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 3
- 238000011897 real-time detection Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001629 suppression Effects 0.000 description 2
- 230000003416 augmentation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000000135 prohibitive effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Landscapes
- Closed-Circuit Television Systems (AREA)
Abstract
本发明公开了一种高倍变焦无人机空中高清多维实时侦查传输监控装置,该监控装置包括:安装在无人机上的监控计算机、机端图像处理模块、卫星导航单元、高清高倍变焦运动摄像机、视频图像无线发射模块;所述机端图像处理模块包括:数据接收单元、参数改变单元、解码单元和图像识别单元,数据接收单元接收包括图像编码数据和参数的图像编码流,参数改变单元能够改变数据接收单元接收的参数,解码单元根据被参数改变单元改变的参数对接收的图像编码数据解码并生成图像解码数据,图像识别单元对解码后的图像解码数据执行图像识别。该装置支持视觉导航、图像识别与避障,能够在不受传送延迟影响的情况下适当地改变参数,由此提高图像识别率,将卫星通信网络模式与传统通信模式融合在一起,可解决大容量图像数据的高速交换,并具有较高的安全性。
Description
所属技术领域
本发明涉及无人机侦查领域,具体涉及高倍变焦无人机空中高清多维实时侦查传输监控装置。
背景技术
无人飞行器,尤其是四轴飞行器随着科技的发展得到了相当的发展和应用,而无人飞行器的一个广泛应用领域就是航拍侦查。这种航拍侦查在专业环境下,专业环境下,取景时间长,拍摄要求高,操作者专业,所以一般采用的都是反复多次拍摄,然后后期剪辑拼接,得到用户所能享受的最佳呈现效果的侦查拍摄方式。也因此,在专业环境下,拍摄效果的提升为本领域技术人员所关注,比如:防抖、稳定等。
现有的侦查视频图像的回传,大多数是基于模拟视频信号,图像不清晰,还需要一个称为IOSD的设备,这个设备实际上就将高清摄像机的模拟视频信号与飞行参数进行叠加回传地面,因此虽然飞机上存储的是高清图像,但回传到地面的图像是叠加了飞行状态参数的模拟图像,而人们往往需要实时看到飞机上拍摄的高清数字图像。
无人机系统包括了无人机机体平台、任务载荷及数据无线传输三个部分。无人机视频数据传输应用实现的关键在于无线传输链路手段。目前的无线传输技术主要有包括以下技术:3G网络(CDMA2000、WCDMA、TD-SCDMA)、4G(TD-LTE和FDD-LTE)网络、无线局域网(WIFI)、卫星、微波等。
卫星和微波技术是无线视频传输的传统手段,且卫星通信技术的最大优点是服务范围广、功能强大、使用灵活,不受地理环境和其它外部环境的影响,尤其是不受外界电磁环境的影响。但这两种技术成本居高不下,其昂贵的初始建造费用和通讯费用常使人望而却步,无法大面积推广。
WIMAX/WIFI等技术构建无线城域网来进行大范围覆盖的视频应用,需要建设方建设大量基站,一方面基站建设成本巨大,非一般用户能够承受;另一方面即使某一单位建成了无线城域网,由于其初始建设费用巨大而不愿与其他用户进行共享,从而对社会资源造成了较大浪费。
发明内容
本发明提供一种高倍变焦无人机空中高清多维实时侦查传输监控装置,该装置支持视觉导航、图像识别与避障,能够在不受传送延迟影响的情况下适当地改变参数,由此提高图像识别率,将卫星通信网络模式与传统通信模式融合在一起,可解决大容量图像数据的高速交换,并具有较高的安全性。
为了实现上述目的,本发明提供一种高倍变焦无人机空中高清多维实时侦查传输监控装置,该监控装置包括:
安装在无人机上的监控计算机、机端图像处理模块、卫星导航单元、高清高倍变焦运动摄像机、视频图像无线发射模块;
所述机端图像处理模块包括:数据接收单元、参数改变单元、解码单元和图像识别单元,数据接收单元接收包括图像编码数据和参数的图像编码流,参数改变单元能够改变数据接收单元接收的参数,解码单元根据被参数改变单元改变的参数对接收的图像编码数据解码并生成图像解码数据,图像识别单元对解码后的图像解码数据执行图像识别。
优选的,所述机端图像处理模块,以百兆以太网口与所述监控计算机连接,通过所述监控计算机的以太网交换芯片(LANswitch)所扩展的以太网交换式总线接收高清运动相机传回的图片,进行图像的分析解算,并与光流传感器、超声波传感器、惯性测量单元数据进行融合,进行视觉导航、障碍规避、图像目标识别跟踪。
优选的,图像识别单元在图像识别过程中计算指示图像识别准确度的指标,参数改变单元基于在图像识别过程中计算出的指示图像识别准确度的指标改变由数据接收单元接收的参数。
优选的,解码单元包括解块滤波器,参数改变单元改变作为由数据接收单元接收的参数的、指示是否针对图像编码数据利用解块滤波器的参数和解块滤波器的滤波器系数中的至少一个。
优选的,解码单元包括逆量化单元,所述参数含有用于生成图像编码数据的编码中所包含的量化参数。参数改变单元改变数据接收单元接收的参数中含有的量化参数,然后将该量化参数提供给逆量化单元。
优选的,解码单元包括正交逆变换单元。所述参数含有用于为了生成图像编码数据所执行的编码中包含的正交变换的正交变换系数。参数改变单元改变由数据接收单元接收的参数中含有的正交变换系数,然后将所述系数提供给正交逆变换单元。
优选的,所述监控计算机具有图像编码单元,对高清高倍变焦运动摄像机获取的图像进行编码,然后机端图像处理模块通过数据接收单元接收通过所述图像编码生成的图像编码流,参数改变单元根据无人机的运行情况改变数据接收单元接收的参数。
优选的,所述高清高倍变焦运动摄像机直接由以太网口与监控计算机所扩展的以太网交换式总线进行连接,支持多个视频流的转发,通过以太网交换芯片(LANswitch)将高清视频数据传给机端图像处理模块(DSP+ARM)进行图像计算。
优选的,所述卫星导航单元为GPS/北斗接收芯片、磁罗盘、单片机,出CAN总线与监控计算机(ARM)连接,支持GPS和北斗导航定位,支持磁航向计对飞行器姿态的解算,并与惯性测量单元(IMU)进行数据融合,最终由监控计算机解算飞行器姿态和飞行器位置。
优选的,所述视频图像无线发射模块可兼容多种信号发射模式,包括距离无线传输模式,卫星信号发射模式,3G/4G移动信号发射模式等。
本发明具有以下优点和有益效果:(1)支持高清数字图像实时传回地面,满足高清数字传输要求,支持视觉导航、障碍规避和图像目标识别跟踪,满足新技术发展要求;(2)能够在不受传送延迟影响的情况下适当地改变参数,由此提高图像识别率;(3)该设备是通过将卫星通信网络模式与传统通信模式融合在一起,只需要一套视频图像采集系统和多信道分发系统设备,就能将两种通信链路捆绑传输音视频信号,使得应急指挥通信宽带成本降低,并且使得使用范围提升。
附图说明
图1示出了本发明的一种高倍变焦无人机空中高清多维实时侦查传输系统及其监控装置的框图。
图2示出了本发明的一种高倍变焦无人机空中高清多维实时侦查传输方法。
具体实施方式
图1是示出了本发明的一种高倍变焦无人机空中高清多维实时侦查传输系统。该系统包括:安装在无人机内的监控装置1和安装在地面中心站的视频传输装置2。
其中,监控装置1包括:安装在无人机上的监控计算机11、卫星导航单元13、高清高倍变焦运动摄像机12、机端图像处理模块14和视频图像无线发射模块15。
所述监控计算机11还嵌入有以太网交换芯片(LANswitch),所述以太网交换芯片(LANswitch)与监控计算机11(ARM)通过局域网(LAN)连接,
所述机端图像处理模块14以百兆以太网口与所述监控计算机连接,通过所述监控计算机的以太网交换芯片(LANswitch)所扩展的以太网交换式总线接收高清运动相机传回的图片,进行图像的分析解算,并与光流传感器、超声波传感器、惯性测量单元数据进行融合,进行视觉导航、障碍规避、图像目标识别跟踪。
数据接收单元接收分组数据,并从所述分组数据中提取图像编码流。图像编码流是被称为基本(elementary)流的编码图像数据。例如,一些基本流符合诸如MPEG-2(MPEG:运动图象专家组)和HEVC(高效率视频编码)的H.264的编码标准,具有至少由序列层级和图片层级构成的双层结构,每一层级包括报头部分和数据部分。报头部分含有各种用于编码的各种参数。通过典型的解码器利用所述参数作为解码参数对数据部分进行解码。参数改变单元改变图像编码流中的参数并将含有改变后的参数的图像编码流提供给解码器。解码器利用图像编码流中的改变后的参数作为解码参数对图像编码流的数据部分解码,从而生成解码图像。图像识别单元检测、辨识、跟踪解码图像中的对象等。
图像识别单元在图像识别过程中计算指示图像识别准确度的指标,参数改变单元基于在图像识别过程中计算出的指示图像识别准确度的指标改变由数据接收单元接收的参数。
后面将具体描述参数改变单元进行的参数改变方法。将通过图像编码流中含有的报头中的参数从由编码器单元生成并添加的值改变为另一值。假定解码图像是供人查看的,对编码器单元生成并添加的参数进行优化以抑制图像劣化。所述参数并非总是设定在用于图像识别单元中的识别的适当值。因而,参数改变单元将通过网络接收的图像编码流中含有的报头中的参数改变为用于图像识别单元中的识别的适当值。这能够改善图象识别单元中的图像识别率。能够按照适当的方式快速地改变所述参数而不受的传送延迟的影响,这与改变编码器生成的参数值的情况不同。
此时,图象识别单元优选地在图像识别过程中计算指示图象识别准确度的指标,然后将指标提供给参数改变单元,参数改变单元优选地根据指示图像识别准确度的指标改变所述参数。这是因为能够针对图象识别单元实施的图像识别更加适当地改变参数值。
例如,指示图像识别准确度的指标是指示图像识别单元中的图像检测、识别和跟踪的结果的准确度的指标,是有关识别区域的信息或者图像识别区域信息。能够根据指示每一过程中的相似度的阈值或者根据所通过的鉴别器(discriminator)级数确定识别和检测结果的准确度。能够利用如下用于识别和检测的算法和应用通过各种方法确定识别和检测结果的准确度。
解码单元包括解块滤波器,参数改变单元改变作为由数据接收单元接收的参数的、指示是否针对图像编码数据利用解块滤波器的参数和解块滤波器的滤波器系数中的至少一个。
解码单元包括逆量化单元,所述参数含有用于生成图像编码数据的编码中所包含的量化参数。参数改变单元改变数据接收单元接收的参数中含有的量化参数,然后将该量化参数提供给逆量化单元。
解码单元包括正交逆变换单元。所述参数含有用于为了生成图像编码数据所执行的编码中包含的正交变换的正交变换系数。参数改变单元改变由数据接收单元接收的参数中含有的正交变换系数,然后将所述系数提供给正交逆变换单元。
所述监控计算机11具有图像编码单元,对高清高倍变焦运动摄像机获取的图像进行编码,然后机端图像处理模块通过数据接收单元接收通过所述图像编码生成的图像编码流,参数改变单元根据无人机的运行情况改变数据接收单元接收的参数。
所述高清高倍变焦运动摄像机12直接由以太网口与监控计算机11所扩展的以太网交换式总线进行连接,支持多个视频流的转发,通过以太网交换芯片(LANswitch)将高清视频数据传给机端图像处理模块(DSP+ARM)进行图像计算。
所述视频图像无线发射模块15可兼容多种信号发射模式,包括短距离无线传输,卫星信号发射模式,3G/4G移动信号发射模式等。
所述卫星导航单元13为GPS/北斗接收芯片、磁罗盘、单片机,出CAN总线与监控计算机(ARM)连接,支持GPS和北斗导航定位,支持磁航向计对飞行器姿态的解算,并与惯性测量单元(IMU)进行数据融合,最终由监控计算机11解算飞行器姿态和飞行器位置。
视频传输装置2包括:视频图像接收模块21、多信道分发模块22、中心站点图像处理模块23和显示终端24。所述视频图像接收模块21,经卫星网络或移动通信网络接收所述图像发射模块发射14的图像信号;所述的多信道分发模块22由视频压缩编码器,多信道通信分发设备,通信设备,网关设备组成,所述的通信设备包括有线传输设备,短距离无线通信设备,移动通信设备,卫星通信设备,所述的中心图像处理系统由解码设备,图像显示设备组成。
多信道分发系统通过对于现有信道的检测,寻找最佳信道,视频压缩编码器对视频图像采集系统采集到的视频和图像进行压缩编码,减小文件大小,减小信道压力,通过最佳信道进行视频文件传输,将视频文件就、传输至网络服务器,中心图像处理系统接入internet公网,对视频文件进行实时解码,并且显示在图像显示设备上。
所述多信道分发设备上设置有加密装置,所述的中心站点图像处理系统上设置有解密设备,采用这种设计以后,通过对于数据的加密,从而保证了数据传输过程中的安全性,采用硬件加密和硬件解密设备,使得软件破解难度非常大,即使有人截获了相关的文件,但是由于没有相对应的硬件,也难以进行文件的解密,最大程度的保证了传输文件的安全性。
所述的移动通信设备采用多种网络制式设备,兼容3G和4G网络。采用这种设计以后,国家3G已经基本稳定,4G高速发展,现阶段,是3G和4G共存的一个阶段,两种制式都能满足传输音视频文件的需求,因为其覆盖面和覆盖强度的不同,采用兼容3G和4G的方法是最佳选择,4G的数据传输量比较大,但是覆盖面比较差,适合在具有4G信号的地方进行高质量视频传输,3G覆盖面比较广,但是数据传输量比较小,适合在没有4G信号的地方进行视频传输。
所述的卫星通信设备包括卫星天线,卫星功放,LNB,卫星调制解调器,采用这种设计以后,通过该卫星通信设备,可以实现视频数据通过卫星信号进行传输,提升了设备适用范围。
图2示出了本发明的一种高倍变焦无人机空中高清多维实时侦查传输方法。该方法具体包括如下步骤:
S1.监控计算机启动监控程序,所述卫星导航单元启动GPS导航程序;
S2.高清高倍变焦运动摄像机按照监控程序的轨迹采集视频图像,机端图像处理模块对图像进行处理;
S3.视频图像无线发射模块,和视频图像接收模块,配合完成图像信号的无线发送和接收;
S4.中心站点图像处理模块对接收到的图像信号进行处理,并在显示终端上显示。
优选的,在步骤S1中,还包括如下导航定位步骤:
监控计算机11对卫星导航单元13传递来的定位数据进行判断:
若定位数据在正常范围内:则监控计算机11将接收到的定位数据存入存储器中;
所述在正常范围的定位数据是指:将定位数据中相邻两个采样点的经度值、纬度值、高度值两两进行比较,若相邻两个采样点的经度的差值不超过0.0002度,且相邻两个采样点的纬度的差值不超过0.00018度,且相邻两个采样点的高度的差值不超过20米,判定定位数据为正常范围;
若定位数据发生异常:则监控计算机11将存储在存储器中的定位数据调出,按照历史轨迹返回到出发位置;
所述定位数据发生异常是指:将定位数据中相邻两个采样点的经度值、纬度值、高度值两两进行比较,若经度的差值超过0.0002度,或纬度的差值超过0.00018度,或高度的差值超过20米,则判定定位数据发生异常。
优选的,所述定位数据为无人机在每个时间点的经度信息x、纬度信息y、高度信息z的集合,记为{xt yt zt};其中,
(x1y1z1)为无人机在第1个时间点的经度、纬度、高度信息;
(x2y2z2)为无人机在第2个时间点的经度、纬度、高度信息;
以此类推,(xt-1yt-1zt-1)为无人机在第t-1个时间点的的经度、纬度、高度信息;(xt yt zt)为无人机在第t个时间点的经度、纬度、高度信息;
相邻两个时间点的间隔取0.5至5.0秒;每个历史定位数据均存储在监控计算机11的存储器中;
将第t个时间点的定位数据与第t-1个时间点的定位数据进行比较:
若xt-xt-1<0.0002,且yt-yt-1<0.00018,且zt-zt-1<20米,
即经度的差值不超过0.0002度,且纬度的差值不超过0.00018度,高度的差值不超过20米时,判定第t个时间点的定位数据属于正常范围,并将该第t个时间点的定位数据存入监控计算机11的存储器;
若xt-xt-1≥0.0002,或yt-yt-1≥0.00018,或zt-zt-1≥20米;即经度的差值、纬度的差值、高度的差值中的任一个超出正常范围,均判定第t个时间点的定位数据发生了异常,也即认为无人机的飞行发生了异常;
由监控计算机11将存储器中的第t-1个时间点的定位数据、第t-2个时间点的定位数据、……第2个时间点的定位数据、第1个时间点的定位数据逐次读取,并控制无人飞行器按照原来的轨迹返回的出发地。
优选的,在步骤S1中,监控程序包括应用级程序、实时任务调度程序和外部中断处理程序、硬件初始化程序、硬件驱动程序、CAN通信协议程序、LAN(TCP/IP)通信协议程序,所述应用级程序与实时任务调度程序和外部中断处理程序连接,所述实时任务调度程序和外部中断处理程序与硬件初始化程序连接,所述硬件初始化程序与硬件驱动程序连接。
优选的,所述应用级程序包括应用层接口程序、电源管理与电量监测程序、飞行指示灯控制程序、安全控制程序、视觉控制程序、航迹控制程序、增稳控制程序、遥控器解码程序、通信处理程序。
优选的,在步骤S2中,可采用如下步骤中的一个或多个对视频图像进行处理:
S21:数据接收单元接收包括图像编码数据和参数的图像编码流。
数据接收单元接收包括图像编码数据和参数的图像编码流。参数改变单元能够改变数据接收单元接收的参数。解码单元通过对包括数据接收单元接收的图像编码数据和参数改变单元改变的参数的图像编码流进行解码,生成图像解码数据。图像识别单元对图像解码数据执行图像识别。
因而,能够在不受传送延迟影响的情况下以适当方式快速地改变参数,由此提高图像识别率。这是因为图像编码流中包含的参数是通过图像传送装置中的编码器传送的,于是这能够被适当地改变为适于图像接收装置中的图像识别的参数。
S22:基于指示图像识别准确度的指标改变参数。
图像识别单元在图像识别过程中计算指示图像识别准确度的指标。参数改变单元基于在图像识别过程中计算出的指示图像识别准确度的指标改变由数据接收单元接收的参数。
这能够针对图像识别更加适当地改变参数。
S23:基于图像接收装置的环境信息改变参数。
参数改变单元基于图像接收装置的环境信息改变由数据接收单元接收的参数。
S24:根据运行情况改变参数。
参数改变单元根据无人机的运行情况改变数据接收单元接收的参数。
S25:改变解块滤波器的参数
解码单元包括解块滤波器。参数改变单元改变作为由数据接收单元接收的参数的、指示是否针对图像编码数据利用解块滤波器的参数和解块滤波器的滤波器系数中的至少一个。
因而,在图像识别率不够高的情况下,降低了解块滤波器的强度以避免对图像的高频分量的抑制,或者降低抑制程度,由此提高识别率。
S26:改变量化参数
解码单元包括逆量化单元。所述参数含有用于生成图像编码数据的编码中所包含的量化的量化参数。参数改变单元改变数据接收单元接收的参数中含有的量化参数,然后将该量化参数提供给逆量化单元。
因而,在图像识别率不够高的情况下,增大了量化参数,从而放大并强调预测误差分量,由此提高识别率。
S27:改变正交变换系数
解码单元包括正交逆变换单元。所述参数含有用于为了生成图像编码数据所执行的编码中包含的正交变换的正交变换系数。参数改变单元改变由数据接收单元接收的参数中含有的正交变换系数,然后将所述系数提供给正交逆变换单元。
因而,在图像识别率不够高的情况下,能够改变正交变换系数,以提高识别率。例如,删除正交变换系数的高频范围,从而允许输入至图像识别单元的解码图像的频率分量与图像识别所需的频率分量匹配。
优选的,在步骤S3中,多信道分发系统对信道进行检测,选择最优的信道,优先级依次为:短距离无线传输,移动通信传输,卫星通信传输。
优选的,在步骤S4中,包括如下子步骤:
S41.视频文件分割器对视频文件进行分割;
S42.视频压缩编码器对分割完成的文件进行压缩;
S43.加密装置对压缩完的视频文件进行加密操作。
优选的,在步骤S3中,多信道分发设备选择一个或者多个信道进行视频文件的传输,多信道分发模块同时对信道进行监测,在信道资源发生改变的时候进行合理的信道切换。
优选的,信道切换时,视频文件同时通过两个信道进行传输,待信道传输稳定之后,中心图像处理系统对原始传输源进行屏蔽,此时,多信道分发设备停止该信道传输,保证在信道切换时,监控画面不间断。
优选的,在步骤S4中,中心站点图像处理模块的解密装置对于视频文件进行解密后,解码设备对文件进行解码,显示设备进行视频实时显示。
如上所述,虽然根据实施例所限定的实施例和附图进行了说明,但对本技术领域具有一般知识的技术人员来说能从上述的记载中进行各种修改和变形。例如,根据与说明的技术中所说明的方法相不同的顺序来进行,和/或根据与说明的系统、结构、装置、电路等构成要素所说明的方法相不同的形态进行结合或组合,或根据其他构成要素或均等物进行替换或置换也可达成适当的效果。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,做出若干等同替代或明显变型,而且性能或用途相同,都应当视为属于本发明的保护范围。
Claims (3)
1.一种高倍变焦无人机空中高清多维实时侦查传输监控装置,该监控装置包括:
安装在无人机上的监控计算机、机端图像处理模块、卫星导航单元、高清高倍变焦运动摄像机、视频图像无线发射模块;
所述机端图像处理模块包括:数据接收单元、参数改变单元、解码单元和图像识别单元,数据接收单元接收包括图像编码数据和参数的图像编码流,参数改变单元能够改变数据接收单元接收的参数,解码单元根据被参数改变单元改变的参数对接收的图像编码数据解码并生成图像解码数据,图像识别单元对解码后的图像解码数据执行图像识别;
所述机端图像处理模块,以百兆以太网口与所述监控计算机连接,通过所述监控计算机的以太网交换芯片(LANswitch)所扩展的以太网交换式总线接收高清运动相机传回的图片,进行图像的分析解算,并与光流传感器、超声波传感器、惯性测量单元数据进行融合,进行视觉导航、障碍规避、图像目标识别跟踪;
图像识别单元在图像识别过程中计算指示图像识别准确度的指标,参数改变单元基于在图像识别过程中计算出的指示图像识别准确度的指标改变由数据接收单元接收的参数;
解码单元包括解块滤波器,参数改变单元改变作为由数据接收单元接收的参数的、指示是否针对图像编码数据利用解块滤波器的参数和解块滤波器的滤波器系数中的至少一个;
解码单元包括逆量化单元,所述参数含有用于生成图像编码数据的编码中所包含的量化参数,参数改变单元改变数据接收单元接收的参数中含有的量化参数,然后将该量化参数提供给逆量化单元;
解码单元包括正交逆变换单元,所述参数含有用于为了生成图像编码数据所执行的编码中包含的正交变换的正交变换系数,参数改变单元改变由数据接收单元接收的参数中含有的正交变换系数,然后将所述系数提供给正交逆变换单元;
所述监控计算机具有图像编码单元,对高清高倍变焦运动摄像机获取的图像进行编码,然后机端图像处理模块通过数据接收单元接收通过所述图像编码生成的图像编码流,参数改变单元根据无人机的运行情况改变数据接收单元接收的参数;
所述高清高倍变焦运动摄像机直接由以太网口与监控计算机所扩展的以太网交换式总线进行连接,支持多个视频流的转发,通过以太网交换芯片将高清视频数据传给机端图像处理模块进行图像计算。
2.如权利要求1所述的监控装置,其特征在于,所述卫星导航单元为GPS/北斗接收芯片、磁罗盘、单片机,出CAN总线与监控计算机连接,支持GPS和北斗导航定位,支持磁航向计对飞行器姿态的解算,并与惯性测量单元(IMU)进行数据融合,最终由监控计算机解算飞行器姿态和飞行器位置。
3.如权利要求1所述的监控装置,其特征在于,如权利要求1所述的监控装置,其特征在于,所述视频图像无线发射模块可兼容多种信号发射模式,包括距离无线传输模式,卫星信号发射模式,3G/4G移动信号发射模式等。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510609325.4A CN105120240B (zh) | 2015-09-22 | 2015-09-22 | 高倍变焦无人机空中高清多维实时侦查传输监控装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510609325.4A CN105120240B (zh) | 2015-09-22 | 2015-09-22 | 高倍变焦无人机空中高清多维实时侦查传输监控装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105120240A CN105120240A (zh) | 2015-12-02 |
CN105120240B true CN105120240B (zh) | 2018-08-28 |
Family
ID=54668111
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510609325.4A Active CN105120240B (zh) | 2015-09-22 | 2015-09-22 | 高倍变焦无人机空中高清多维实时侦查传输监控装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105120240B (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105872413A (zh) * | 2016-05-31 | 2016-08-17 | 成都德善能科技有限公司 | 一种智能航拍系统 |
CN106965945B (zh) * | 2016-07-14 | 2019-09-03 | 科盾科技股份有限公司 | 一种基于数据同步的避免碰撞障碍的方法及飞行器 |
CN106375720A (zh) * | 2016-09-12 | 2017-02-01 | 中国科学院自动化研究所 | 智能视觉云台系统及其实现方法 |
CN106776486A (zh) * | 2016-12-26 | 2017-05-31 | 重庆西楚智捷科技有限公司 | 一种基于计算机的鸟类数量预估方法 |
CN107317622A (zh) * | 2017-06-30 | 2017-11-03 | 广东电网有限责任公司电力科学研究院 | 一种用于无人机电力巡线的机载卫星通信调制解调器 |
EP3820129A4 (en) * | 2018-07-02 | 2021-09-29 | SZ DJI Technology Co., Ltd. | VIDEO RECORDING AND PROCESSING PROCESS AND APPARATUS, AND VIDEO RECORDING AND PROCESSING SYSTEM |
CN112307262A (zh) * | 2020-02-28 | 2021-02-02 | 钱秀华 | 一种图像识别方法和服务器 |
CN111694305B (zh) * | 2020-06-12 | 2021-11-09 | 西安微电子技术研究所 | 一种异构多核无人机控制计算机 |
CN112304290A (zh) * | 2020-09-16 | 2021-02-02 | 华恩慧图科技(石家庄)有限公司 | 一种基于无人机应用的地理数据自动采集系统 |
CN112995597B (zh) * | 2021-02-24 | 2022-09-06 | 四川腾盾科技有限公司 | 一种用于高速无人机实时锁定目标的系统及方法 |
CN116400739B (zh) * | 2023-06-06 | 2023-09-08 | 成都时代星光科技有限公司 | 基于外力策略的智能无人机移动引导方法、系统和介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102183955A (zh) * | 2011-03-09 | 2011-09-14 | 南京航空航天大学 | 基于多旋翼无人飞行器的输电线路巡检系统 |
CN203278900U (zh) * | 2013-06-18 | 2013-11-06 | 西安博宇信息科技有限公司 | 空天地一体化北斗应急指挥系统 |
CN203773717U (zh) * | 2013-11-12 | 2014-08-13 | 武汉大学 | 一种无人机远程可视触摸屏控制系统 |
CN104881039A (zh) * | 2015-05-12 | 2015-09-02 | 零度智控(北京)智能科技有限公司 | 一种无人机返航的方法及系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR2961601B1 (fr) * | 2010-06-22 | 2012-07-27 | Parrot | Procede d'evaluation de la vitesse horizontale d'un drone, notamment d'un drone apte au vol stationnaire autopilote |
-
2015
- 2015-09-22 CN CN201510609325.4A patent/CN105120240B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102183955A (zh) * | 2011-03-09 | 2011-09-14 | 南京航空航天大学 | 基于多旋翼无人飞行器的输电线路巡检系统 |
CN203278900U (zh) * | 2013-06-18 | 2013-11-06 | 西安博宇信息科技有限公司 | 空天地一体化北斗应急指挥系统 |
CN203773717U (zh) * | 2013-11-12 | 2014-08-13 | 武汉大学 | 一种无人机远程可视触摸屏控制系统 |
CN104881039A (zh) * | 2015-05-12 | 2015-09-02 | 零度智控(北京)智能科技有限公司 | 一种无人机返航的方法及系统 |
Non-Patent Citations (2)
Title |
---|
GPS失效下的无人机组合导航系统;柳明;《济南大学学报(自然科学版)》;20150331;第29卷(第2期);全文 * |
基于Stateflow的无人机应急返航控制仿真;邹宇翔,肖敏;《计算机仿真》;20150731;第32卷(第7期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN105120240A (zh) | 2015-12-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105120240B (zh) | 高倍变焦无人机空中高清多维实时侦查传输监控装置 | |
CN105208335B (zh) | 高倍变焦无人机空中高清多维实时侦查传输系统 | |
CN105120230B (zh) | 无人机图像监控和传输系统 | |
CN105262989B (zh) | 铁路线空中无人机自动巡查与实时图像采集传输方法 | |
CN105208347B (zh) | 铁路线空中无人机自动巡查与实时图像采集传输监控装置 | |
CN105120232B (zh) | 无人机图像监控和传输方法 | |
CN105208348B (zh) | 铁路线空中无人机自动巡查与实时图像采集传输系统 | |
US20140012417A1 (en) | System and method for creating virtual presence | |
CN108768496A (zh) | 无人机数据传输系统、方法、装置和计算机设备 | |
CN105208336B (zh) | 高倍变焦无人机空中高清多维实时侦查传输方法 | |
CN110636255A (zh) | 一种基于4g网络的无人机图像、视频传输分发系统及方法 | |
CN110989840B (zh) | 数据处理方法、前端设备、后端设备及地理信息系统 | |
KR20230041016A (ko) | 혼합현실/증강현실을 지원하는 통신 시스템에서 3차원 미디어 데이터에 대해 지연 시간 보상 포즈 예측을 사용하는 렌더링을 수행하는 방법 및 장치 | |
US20110255590A1 (en) | Data transmission apparatus and method, network data transmission system and method using the same | |
CN109905714A (zh) | 帧间预测方法、装置及终端设备 | |
CN108496369A (zh) | 视频传输、接收方法、系统、设备及无人飞行器 | |
Gong et al. | An image-sequence compressing algorithm based on homography transformation for unmanned aerial vehicle | |
CN205812229U (zh) | 一种头戴显示器、视频输出设备和视频处理系统 | |
Angelino et al. | Sensor aided h. 264 video encoder for uav applications | |
CN103428493A (zh) | 轻型化高清视频无线传输系统 | |
Hofer et al. | Comparison of Analyze-Then-Compress Methods in Edge-Assisted Visual SLAM | |
Jin et al. | Design of UAV video and control signal real-time transmission system based on 5G network | |
CN108141564B (zh) | 用于视频广播的系统和方法 | |
WO2013017387A1 (en) | Methods for compressing and decompressing animated images | |
KR102535024B1 (ko) | 고고도 위성통신을 통한 실시간 영상 스트리밍 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |