CN109358656A - 一种适用于机载光电系统的目标捕获方法 - Google Patents

一种适用于机载光电系统的目标捕获方法 Download PDF

Info

Publication number
CN109358656A
CN109358656A CN201811058906.3A CN201811058906A CN109358656A CN 109358656 A CN109358656 A CN 109358656A CN 201811058906 A CN201811058906 A CN 201811058906A CN 109358656 A CN109358656 A CN 109358656A
Authority
CN
China
Prior art keywords
electro
optical system
target
image
coordinate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811058906.3A
Other languages
English (en)
Inventor
边赟
吴斌
王惠林
杨光
宁飞
任元斌
郑凤翥
常新宇
赵文峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian institute of Applied Optics
Original Assignee
Xian institute of Applied Optics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian institute of Applied Optics filed Critical Xian institute of Applied Optics
Priority to CN201811058906.3A priority Critical patent/CN109358656A/zh
Publication of CN109358656A publication Critical patent/CN109358656A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D3/00—Control of position or direction
    • G05D3/12—Control of position or direction using feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明公开了一种机载光电系统目标快速捕获方法，属于机载光电侦察指示技术领域。本发明中在机载光电系统惯性模式下，操作手观察到图像目标后，直接鼠标点击或在具有触摸功能的显控设备上手指触碰目标，显控设备获得当前图像上被选择的像素点坐标后，先通过机载电缆或无线数据链传送给光电系统任务管理器，后者再通过系统内部总线传送给光电系统视频跟踪器和伺服解算及驱动器。伺服驱动器根据解算结果驱动光电系统运动，使其瞄准线指向目标位置，完成目标捕获与跟踪。该方法显著提高了目标捕获的快速性和便捷性。

Description

一种适用于机载光电系统的目标捕获方法
技术领域
本发明属于机载光电系统技术领域，涉及一种适用于机载光电系统的目标捕获方法。
背景技术
机载光电系统一般都采用手压摇杆移动图像十字压中目标后确认跟踪的方式来捕获目标。载机与目标的相对运动会对目标的捕获跟踪产生较大的影响，载机在飞行过程中的姿态变化和平动影响可通过光电平台惯性稳定和线性运动补偿的方式进行一定程度的克服，但对于高速移动的地面目标而言，手动快速准确捕获目标并不容易，特别是当在载机处于大的机动时，由于线性运动补偿方法的精度有限，手动快速准确捕获目标仍很困难。当载机为无人机时，受无人机系统与地面站操控设备间数据链传输时延的影响，操作手通过手压摇杆快速准确捕获目标更加困难。高速移动目标出现在光电系统视场中的时间很短，目标在视场移动很快，加之上述手动快速准确捕获的困难因素，给操作手带了较大的心理负担和操作压力，因此迫切需要找到一种新的目标捕获方法，以实现对目标的快速准确捕获。
发明内容
为克服现有机载光电系统采用手压摇杆方式难以快速准确捕获目标的问题，本发明提出一种适用于机载光电系统的目标捕获方法，当图像显示屏为触摸屏的显控设备上可用手指直接点击目标，在非触摸显示屏上可以采用鼠标点击目标的方式。
本发明的技术方案为：
所述一种适用于机载光电系统的目标捕获方法，其特征在于：包括以下步骤：
步骤1：光电系统在惯性态工作模式下搜索和侦察目标，当操作手发现目标后，根据图像信息调整光电传感器到合适视场，选择图像中的需要捕获的目标并触碰或鼠标点击该目标点；
步骤2：显控设备响应该点击操作，采集触碰或鼠标点击位置，并产生跟踪指令；其中点击位置在屏幕坐标系下的坐标为(x，y)，根据坐标变换公式
得到点击位置在光电图像坐标系下的像素坐标(u，v)，其中(X，Y)为显示屏分辨率，(U，V)为光电系统图像分辨率；显控设备将点击位置的像素坐标值和跟踪指令通过光电系统控制总线发送到光电系统任务管理器；
步骤3：光电系统任务管理器对接收到的跟踪指令和点击位置的像素坐标数据进行解析，再将解析后的像素坐标位置和跟踪指令发送到光电系统图像跟踪器；同时光电系统任务管理器将光电系统的工作模式调整为跟踪模式，并将工作模式调整指令发给光电系统图像跟踪器和光电系统伺服解算器；
光电系统图像跟踪器以收到的像素坐标位置为中心建立跟踪波门，实时计算当前图像中心十字线与跟踪波门的像素偏差值并反馈至光电系统任务管理器；
步骤4：光电系统任务管理器将像素偏差值发送给光电系统伺服解算器进行解算处理：
光电系统伺服解算器先将像素偏差值转换为角位置偏差值，然后以角位置偏差值作为光电系统驱动控制器的输入指令，驱动电机使光电系统转塔发生调转，形成闭环控制。
进一步的优选方案，所述一种适用于机载光电系统的目标捕获方法，其特征在于：所述闭环控制过程为：从光电系统转塔启动调转开始，通过对陀螺速度积分来判断调转所经历的角位置值，并和输入的角位置偏差值做差，得到的差值作为光电系统驱动控制器的输入，若调转经历的角位置值等于角位置偏差值输入，则结束调转，否则继续调转。
有益效果
本发明的有益效果体现在以下方面：
(1)本发明利用已有的图像自动跟踪技术，提出通过显控设备上光电图像直接点选的方式来实现目标的捕获跟踪，解决了传统手压摇杆移动图像十字捕获目标困难的问题，提高了载机大机动或目标快速移动时捕获目标的便捷性、快速性，减轻了操作人员的压力。
(2)本发明所述方法的实现，不需要额外增加光电系统或显控设备的硬件资源，仅需基于现有图像处理和伺服控制算法增加软件处理方法和流程，应用方式简单、移植性强。
附图说明
图1是目标捕获方法实现流程图；
图2是根据目标图像信息点选目标示意图；
图3是根据所选目标点建立跟踪波门示意图；
图4是伺服系统调转到位示意图。
具体实施方式
下面结合附图及实例对本发明作进一步的详述。
本发明选取某型无人机载光电系统，利用该方法捕获地面目标为例，详细说明这种目标捕获的实现方法。
该光电系统挂载在某型无人机上，执行侦察监视和目标指示任务。该光电系统包括连续变焦的电视摄像机、伺服解算器、任务管理器、图像跟踪器和综合显控装置。本发明通过综合显控装置、任务管理器、图像跟踪器、伺服解算器、伺服驱动器回路实现，该方法实现流程如图1所示。
无人机挂载光电系统飞行，在惯性态工作模式下搜索和侦察目标，操作人员当发现感兴趣目标后，首先将连续变焦电视摄像机视场调整到合适大小，使目标较稳定地出现在电视摄像机视场中。为实现快速捕获目标，操作手根据目标在显控设备上的图像信息用鼠标在图像显示屏上点击该目标，如图2所示。
显控设备上运行的显控软件响应该点击操作，采集手指或鼠标点击位置，并产生跟踪指令。由于点击操作产生的直接位置坐标为屏幕坐标，须根据式(1)进行坐标变换。设(X，Y)为显示设备分辨率，(U，V)为光电图像分辨率，(x，y)为显示设备上的点击坐标位置，则目标点在光电图像上的像素坐标(u，v)为
显控设备将该像素坐标值和跟踪指令通过机载数据链和光电系统控制总线(异步422)发送到光电系统任务管理器。
任务管理器收到该指令和数据后，通过指令解析后调用与图像跟踪器通讯任务进行处理，向图像跟踪器发送跟踪指令和目标点在光电图像上的像素坐标(u，v)，同时调用工作模式处理任务将当前光电系统工作模式置为跟踪模式并发给图像跟踪器和伺服解算器。
图像跟踪器接收到跟踪指令和目标点在图像上的像素坐标后，以目标点所在位置为中心建立图像跟踪波门，如图3所示。实时将跟踪波门中心位置与图像中心十字线的像素偏差值和跟踪器正在跟踪的状态信息反馈至任务管理器。任务管理器实时调用伺服解算器在跟踪控制回路中对该偏差值进行解算处理。
伺服解算器根据当前视场值将跟踪波门中心位置与图像中心的像素偏差值转换为需要调转的角位置偏差信息，并开启图像捕获的标志。然后以角位置偏差值作为驱动控制器的输入指令，驱动电机进而使光电系统转塔发生调转，形成闭环控制。从光电系统转塔启动调转开始，通过对陀螺速度积分来判断调转所经历的角位置值，并和输入的角位置偏差做差，差值作为驱动控制器的输入，若调转经历的角位置值等于角位置偏差输入，则结束调转，否则继续调转。
当光电系统方位和俯仰角均调转到位后，代表瞄准线的中心十字线与代表图像目标的跟踪波门重合，实现了对所选目标的快速捕获与稳定跟踪，如图4所示。

Claims (2)

1.一种适用于机载光电系统的目标捕获方法，其特征在于：包括以下步骤：
步骤1：光电系统在惯性态工作模式下搜索和侦察目标，当操作手发现目标后，根据图像信息调整光电传感器到合适视场，选择图像中的需要捕获的目标并触碰或鼠标点击该目标点；
步骤2：显控设备响应该点击操作，采集触碰或鼠标点击位置，并产生跟踪指令；其中点击位置在屏幕坐标系下的坐标为(x，y)，根据坐标变换公式
得到点击位置在光电图像坐标系下的像素坐标(u，v)，其中(X，Y)为显示屏分辨率，(U，V)为光电系统图像分辨率；显控设备将点击位置的像素坐标值和跟踪指令通过光电系统控制总线发送到光电系统任务管理器；
步骤3：光电系统任务管理器对接收到的跟踪指令和点击位置的像素坐标数据进行解析，再将解析后的像素坐标位置和跟踪指令发送到光电系统图像跟踪器；同时光电系统任务管理器将光电系统的工作模式调整为跟踪模式，并将工作模式调整指令发给光电系统图像跟踪器和光电系统伺服解算器；
光电系统图像跟踪器以收到的像素坐标位置为中心建立跟踪波门，实时计算当前图像中心十字线与跟踪波门的像素偏差值并反馈至光电系统任务管理器；
步骤4：光电系统任务管理器将像素偏差值发送给光电系统伺服解算器进行解算处理：
光电系统伺服解算器先将像素偏差值转换为角位置偏差值，然后以角位置偏差值作为光电系统驱动控制器的输入指令，驱动电机使光电系统转塔发生调转，形成闭环控制。
2.根据权利要求1所述一种适用于机载光电系统的目标捕获方法，其特征在于：所述闭环控制过程为：从光电系统转塔启动调转开始，通过对陀螺速度积分来判断调转所经历的角位置值，并和输入的角位置偏差值做差，得到的差值作为光电系统驱动控制器的输入，若调转经历的角位置值等于角位置偏差值输入，则结束调转，否则继续调转。
CN201811058906.3A 2018-09-11 2018-09-11 一种适用于机载光电系统的目标捕获方法 Pending CN109358656A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811058906.3A CN109358656A (zh) 2018-09-11 2018-09-11 一种适用于机载光电系统的目标捕获方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811058906.3A CN109358656A (zh) 2018-09-11 2018-09-11 一种适用于机载光电系统的目标捕获方法

Publications (1)

Publication Number Publication Date
CN109358656A true CN109358656A (zh) 2019-02-19

Family

ID=65350832

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811058906.3A Pending CN109358656A (zh) 2018-09-11 2018-09-11 一种适用于机载光电系统的目标捕获方法

Country Status (1)

Country Link
CN (1) CN109358656A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111487999A (zh) * 2020-04-23 2020-08-04 中国北方工业有限公司 一种转塔伺服和光电伺服协同控制系统和方法
CN112099718A (zh) * 2020-09-07 2020-12-18 四川傲势科技有限公司 一种光电吊舱操纵方法及系统
CN112672281A (zh) * 2020-12-24 2021-04-16 中航贵州飞机有限责任公司 一种利用无线电链路装订光电侦察设备安装误差的方法
CN113108811A (zh) * 2021-04-08 2021-07-13 西安应用光学研究所 光电转塔跟踪精度自动分析计算装置
CN114280978A (zh) * 2021-11-29 2022-04-05 中国航空工业集团公司洛阳电光设备研究所 一种用于光电吊舱的跟踪解耦合控制方法
CN114637453A (zh) * 2020-12-16 2022-06-17 北京华航无线电测量研究所 一种光电载荷的指向角控制方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103149939A (zh) * 2013-02-26 2013-06-12 北京航空航天大学 一种基于视觉的无人机动态目标跟踪与定位方法
CN104536353A (zh) * 2015-01-09 2015-04-22 西安应用光学研究所 一种用于机载光电系统的综合显控装置
WO2015132281A1 (fr) * 2014-03-04 2015-09-11 Thales Procédé de contrôle d'un système de détection et de suivi d'une cible
CN105573328A (zh) * 2014-11-05 2016-05-11 北京航天计量测试技术研究所 光学跟踪/瞄准系统的动态参数校准装置及其使用方法
CN105947227A (zh) * 2016-05-26 2016-09-21 苏州天地衡遥感科技有限公司 一种机载光电吊舱的稳定平台
CN106131482A (zh) * 2016-06-27 2016-11-16 西安应用光学研究所 无人载体光电系统目标捕获系统及方法
CN106292733A (zh) * 2016-07-26 2017-01-04 北京电子工程总体研究所 一种基于位置信息的触摸式跟踪确认系统及方法
CN106468552A (zh) * 2016-08-30 2017-03-01 中国科学院长春光学精密机械与物理研究所 一种基于机载光电平台的双机交会定位方法
CN107765963A (zh) * 2017-04-24 2018-03-06 西安应用光学研究所 一种无人机载多模复合侦查系统综合显控装置
CN107992100A (zh) * 2017-12-13 2018-05-04 中国科学院长春光学精密机械与物理研究所 基于可编程逻辑阵列的高帧频图像跟踪方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103149939A (zh) * 2013-02-26 2013-06-12 北京航空航天大学 一种基于视觉的无人机动态目标跟踪与定位方法
WO2015132281A1 (fr) * 2014-03-04 2015-09-11 Thales Procédé de contrôle d'un système de détection et de suivi d'une cible
CN105573328A (zh) * 2014-11-05 2016-05-11 北京航天计量测试技术研究所 光学跟踪/瞄准系统的动态参数校准装置及其使用方法
CN104536353A (zh) * 2015-01-09 2015-04-22 西安应用光学研究所 一种用于机载光电系统的综合显控装置
CN105947227A (zh) * 2016-05-26 2016-09-21 苏州天地衡遥感科技有限公司 一种机载光电吊舱的稳定平台
CN106131482A (zh) * 2016-06-27 2016-11-16 西安应用光学研究所 无人载体光电系统目标捕获系统及方法
CN106292733A (zh) * 2016-07-26 2017-01-04 北京电子工程总体研究所 一种基于位置信息的触摸式跟踪确认系统及方法
CN106468552A (zh) * 2016-08-30 2017-03-01 中国科学院长春光学精密机械与物理研究所 一种基于机载光电平台的双机交会定位方法
CN107765963A (zh) * 2017-04-24 2018-03-06 西安应用光学研究所 一种无人机载多模复合侦查系统综合显控装置
CN107992100A (zh) * 2017-12-13 2018-05-04 中国科学院长春光学精密机械与物理研究所 基于可编程逻辑阵列的高帧频图像跟踪方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王宣: "机载光电平台稳定跟踪系统关键技术研究", 《中国博士学位论文全文数据库 工程科技II辑》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111487999A (zh) * 2020-04-23 2020-08-04 中国北方工业有限公司 一种转塔伺服和光电伺服协同控制系统和方法
CN111487999B (zh) * 2020-04-23 2021-06-08 中国北方工业有限公司 一种转塔伺服和光电伺服协同控制系统和方法
CN112099718A (zh) * 2020-09-07 2020-12-18 四川傲势科技有限公司 一种光电吊舱操纵方法及系统
CN114637453A (zh) * 2020-12-16 2022-06-17 北京华航无线电测量研究所 一种光电载荷的指向角控制方法
CN112672281A (zh) * 2020-12-24 2021-04-16 中航贵州飞机有限责任公司 一种利用无线电链路装订光电侦察设备安装误差的方法
CN112672281B (zh) * 2020-12-24 2022-11-01 中航贵州飞机有限责任公司 一种利用无线电链路装订光电侦察设备安装误差的方法
CN113108811A (zh) * 2021-04-08 2021-07-13 西安应用光学研究所 光电转塔跟踪精度自动分析计算装置
CN114280978A (zh) * 2021-11-29 2022-04-05 中国航空工业集团公司洛阳电光设备研究所 一种用于光电吊舱的跟踪解耦合控制方法
CN114280978B (zh) * 2021-11-29 2024-03-15 中国航空工业集团公司洛阳电光设备研究所 一种用于光电吊舱的跟踪解耦合控制方法

Similar Documents

Publication Publication Date Title
CN109358656A (zh) 一种适用于机载光电系统的目标捕获方法
CN108257145B (zh) 一种基于ar技术的无人机智能侦察处理系统及方法
CN106598226A (zh) 一种基于双目视觉和深度学习的无人机人机交互方法
CN205693769U (zh) 一种运动摄像机对全景目标快速定位捕捉系统
CN102799191B (zh) 基于动作识别技术的云台控制方法及系统
CN110580054B (zh) 一种基于自主视觉跟踪的光电吊舱的控制系统及方法
CN110929669A (zh) 数据标注方法及装置
KR101657086B1 (ko) 고정 카메라를 장착한 무인 항공기의 영상기반 유도 제어시스템
CN105759650A (zh) 一种用于智能机器人系统实时跟踪人脸的方法
CN105319991A (zh) 一种基于Kinect视觉信息的机器人环境识别与作业控制方法
CN114972818B (zh) 一种基于深度学习与混合现实技术的目标锁定系统
CN105701789A (zh) 飞机近场飞行轨迹跟踪方法
CN107765963B (zh) 一种无人机载多模复合侦查系统综合显控装置
CN106078747B (zh) 一种基于虚拟现实的延时工业操作控制系统
US10820036B1 (en) System and method for establishing and controlling a direct video output feed from a selected remote device
CN111784842A (zh) 三维重建方法、装置、设备及可读储存介质
US20220073213A1 (en) Method and system for controlling photoelectric pod
US10459533B2 (en) Information processing method and electronic device
EP3432204B1 (en) Telepresence framework for region of interest marking using headmount devices
WO2020172878A1 (zh) 可移动平台的射击瞄准控制方法、设备及可读存储介质
CN106506944A (zh) 用于无人机的图像跟踪方法和设备
CN112036213A (zh) 一种机器人的手势定位方法、机器人以及装置
CN110531775A (zh) 一种无人装置控制方法、无人装置航行控制方法及其探测系统
CN108683840A (zh) 拍摄控制方法、拍摄方法以及无人设备端
CN111147830B (zh) 一种实时视频与gis融合的实现方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190219