CN111857188A - 一种空中远距离目标跟拍系统和方法 - Google Patents

一种空中远距离目标跟拍系统和方法 Download PDF

Info

Publication number
CN111857188A
CN111857188A CN202010704646.3A CN202010704646A CN111857188A CN 111857188 A CN111857188 A CN 111857188A CN 202010704646 A CN202010704646 A CN 202010704646A CN 111857188 A CN111857188 A CN 111857188A
Authority
CN
China
Prior art keywords
target
camera
base station
tracking
follow
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010704646.3A
Other languages
English (en)
Inventor
何紫阳
赵敏
姚敏
李宇辉
郭瑞鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Aeronautics and Astronautics
Original Assignee
Nanjing University of Aeronautics and Astronautics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Aeronautics and Astronautics filed Critical Nanjing University of Aeronautics and Astronautics
Priority to CN202010704646.3A priority Critical patent/CN111857188A/zh
Publication of CN111857188A publication Critical patent/CN111857188A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D3/00Control of position or direction
    • G05D3/12Control of position or direction using feedback

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明公开了一种空中远距离目标跟拍系统和方法。系统包括至少三座基站,每座基站包括基座以及设置在基座内的工控机和显示屏,基座顶部设有分别与工控机连接的无线通讯模块、GPS授时定位模块、跟踪摄像头、跟拍摄像头和云台。基站初始化后开始探测目标,在跟踪目标成功后同时调整两个摄像头的焦距并向系统广播目标的空间位置,所有基站进入跟踪状态后共享目标信息,利用三组目标成像信息确定目标具体的空间位置,预测目标下一时刻位置并提前调整云台角度,基站动态调整跟拍摄像头的焦距,使目标在跟拍画面内始终占据中心区域。本发明能够迅速探测并稳定跟踪空中远距离目标,清晰拍摄目标的飞行姿态。

Description

一种空中远距离目标跟拍系统和方法
技术领域
本发明属于目标跟拍技术领域,特别涉及了一种空中远距离目标跟拍系统和方法。
背景技术
利用摄像机对空中远距离目标进行跟拍时,如果摄像机焦距较大,则容易丢失目标,如果摄像机焦距较小,则难以清晰拍摄目标的飞行姿态;如果由人手持摄像设备进行拍摄,容易出现画面抖动的现象,拍摄效果难以保证,所以需要一种装置自动实现对空中目标的跟拍。
现有的对空中目标的自动跟拍装置只采用单个摄像头,由于存在云层,太阳等背景物体的干扰,极易丢失目标;同时,由于单个摄像头监控的空间区域较小,难以迅速地捕捉出现的目标;并且由于摄像头的焦距无法动态地调整至合理范围,所以无法清晰拍摄目标运动时的画面。
发明内容
为了解决上述背景技术提到的技术问题,本发明提出了一种空中远距离目标跟拍系统和方法。
为了实现上述技术目的,本发明的技术方案为:
一种空中远距离目标跟拍系统,包括至少三座基站,每座基站包括基座以及设置在基座内的工控机和显示屏,基座顶部设有分别与所述工控机连接的无线通讯模块、GPS授时定位模块、跟踪摄像头、跟拍摄像头和云台,所述跟踪摄像头和跟拍摄像头并排固定于云台上并且保持光轴平行;系统利用无线通讯模块建立无线通讯网络,并利用该网络共享目标信息;系统利用GPS授时定位模块进行时间同步,确保各基站同步拍摄目标跟踪图像;系统利用GPS授时定位模块获取各基站的空间位置;通过云台转动带动跟踪摄像头、跟拍摄像头始终对准移动的目标;跟踪摄像头的图像输出接口与工控机连接,将跟踪图像输入工控机进行处理;跟拍摄像头的图像输出接口与显示屏连接,将跟拍图像直接在显示屏上显示。
进一步地,基站沿顺光方向面对目标空域,并呈环形分布,相邻基站间隔20米以上。
进一步地,基站中的工控机通过跟踪摄像头和跟拍摄像头的控制接口获取和调整摄像头的焦距;所述跟踪摄像头拍摄目标在大视场下的图像,防止目标丢失;所述跟拍摄像头拍摄目标在小视场下的图像,获取目标清晰的画面。
进一步地,基站中的工控机通过云台的控制接口获取和调整云台的角度。
基于上述空中远距离目标跟拍系统的空中远距离目标跟拍方法,基站初始化后开始探测目标,在跟踪目标成功后同时调整跟踪摄像头和跟拍摄像头的焦距并向系统广播目标的空间位置,所有基站进入跟踪状态后共享目标信息,基站利用三组目标成像信息确定目标具体的空间位置,预测目标下一时刻位置并提前调整云台角度,基站动态调整跟拍摄像头的焦距,使目标在跟拍画面内始终占据中心区域。
进一步地,包括以下步骤:
(1)系统开机工作后,各基站跟踪摄像头、跟拍摄像头的焦距同时初始化到默认值f0;初始化云台角度,使跟踪摄像头、跟拍摄像头对准目标空域;基站间建立稳定的无线通讯网络;
(2)某座基站探测到目标后,调整云台角度,使目标成像在图像中心区域,该基站进入跟踪状态;基站估算目标距离和目标空间位置,计算跟踪摄像头理想的焦距值f1,将跟踪摄像头、跟拍摄像头的焦距同时调整至f1;同时基站向系统广播目标的空间位置,其他基站据此调整云台的角度,发现目标后进入跟踪状态;
(3)整个系统进入跟踪状态后,各基站定时、同步向其他基站广播目标的成像信息,各基站利用三组目标成像信息计算目标具体的空间位置;
(4)各基站采用卡尔曼滤波与轨迹拟合相结合的位置预测方法,预测目标下一时刻的位置,提前调整云台以保证目标在下一帧中成像在图像中心区域;
(5)各基站计算跟拍摄像头理想的焦距值f2,并将跟拍摄像头的焦距逐步调整至f2,根据目标距离的变化,动态调整跟拍摄像头的焦距,使目标在拍摄画面内始终占据1/4的中心区域。
进一步地,利用三组目标成像信息确定目标具体的空间位置的方法步骤如下:
(a)设三座基站的经度、纬度和海拔分别为(E1,N1,H1)、(E2,N2,H2)、(E3,N3,H3),其中E1、E2和E3分别为三座基站的经度,N1、N2和N3分别为三座基站的纬度,H1、H2和H3分别为三座基站的海拔;以第一座基站为坐标系的原点,以正东方向为X轴正方向,以正北方向为Y轴正方向,以竖直向上为Z轴正方向,建立三维空间直角坐标系;近似认为跟踪摄像头的成像平面中心与基站位置重合,且忽略其在工作中的微小变化,则三座基站中的跟踪摄像头的成像平面中心O1、O2、O3的三维空间坐标分别如下:
(XO1,YO1,ZO1)=(0,0,0)
(XO2,YO2,ZO2)=((E2-E1)×111000×cosN1,(N2-N1)×111000,H2-H1)
(XO3,YO3,ZO3)=((E3-E1)×111000×cosN1,(N3-N1)×111000,H3-H1)
(b)设从云台控制接口获得的三座基站的跟踪摄像头光轴与正东方向的夹角和俯仰角分别为(α11)、(α22)、(α33),则三座基站的跟踪摄像头光轴方向的单位方向向量n分别如下:
n1=(cosβ1cosα1,cosβ1sinα1,sinβ1)
n2=(cosβ2cosα2,cosβ2sinα2,sinβ2)
n3=(cosβ3cosα3,cosβ3sinα3,sinβ3)
同时得到三个跟踪摄像头成像平面X轴正方向和Y轴正方向的单位方向向量i和j分别如下:
Figure BDA0002594225030000041
Figure BDA0002594225030000042
Figure BDA0002594225030000043
(c)设目标在三个跟踪摄像头的成像平面上成像点P1、P2、P3的坐标分别为(x1,y1)、(x2,y2)、(x3,y3),则其对应的三维空间坐标分别如下:
(XP1,YP1,ZP1)=(XO1,YO1,ZO1)+x1i1+y1j1
(XP2,YP2,ZP2)=(XO2,YO2,ZO2)+x2i2+y2j2
(XP3,YP3,ZP3)=(XO3,YO3,ZO3)+x3i3+y3j3
(d)设三个跟踪摄像头的焦距为r1、r2、r3,则三个跟踪摄像头的焦点R1、R2、R3的三维空间坐标分别如下:
(XR1,YR1,ZR1)=(XO1,YO1,ZO1)+r1n1
(XR2,YR2,ZR2)=(XO2,YO2,ZO2)+r2n2
(XR3,YR3,ZR3)=(XO3,YO3,ZO3)+r3n3
(e)组成三组点集(O1,P1,R1)、(O2,P2,R2)、(O3,P3,R3),确定三个平面O1P1R1、O2P2R2、O3P3R3,由这三个平面相交则求得目标的空间坐标;
(f)若出现上述三个面共线而无法求解交点的情况,设Q点为第三个成像平面上一点,其坐标为(x4,y4),且直线QP3不平行于OP3,则Q点的三维空间坐标如下:
(XQ,YQ,ZQ)=(XO3,YO3,ZO3)+x4i3+y4j3
再根据平面O1P1R1、O2P2R2、QP3R3相交求得目标的空间坐标。
进一步地,卡尔曼滤波与轨迹拟合相结合的位置预测方法的步骤如下:
(A)建立目标的运动模型和观测模型:
Figure BDA0002594225030000051
其中,状态转移矩阵
Figure BDA0002594225030000052
观测矩阵B=[1 0];系统噪声wk和测量噪声uk是相互独立的零均值高斯白噪声,其方差分别为S和R;xk和vk分别代表k时刻目标的空间位置和速度的状态值,zk代表k时刻目标的空间位置的观测值,Δt代表采样间隔;
(B)利用卡尔曼滤波法减小当前时刻k目标位置状态量的误差,设定k-1时刻的协方差矩阵为P(k-1|k-1),k时刻的一步预测协方差阵为P(k|k-1)=AP(k-1|k-1)AT+S,k时刻滤波增益矩阵为K(k)=P(k|k-1)BT[BP(k|k-1)BT+RT]-1,得到当前时刻k的状态量滤波值:
Figure BDA0002594225030000053
其中,
Figure BDA0002594225030000054
为k-1时刻状态量滤波值;
(C)利用当前时刻k和前i-1个时刻的目标空间位置状态量的滤波值进行轨迹拟合,获得轨迹拟合曲线xk=f(k),由此预测k+1时刻目标空间位置为xk+1=f(k+1)。
采用上述技术方案带来的有益效果:
本发明利用三个基站跟拍空中远距离目标。在目标探测阶段,三个基站可以分别监控空中的不同区域,当其中一个基站发现目标时,可以将目标方位信息共享给其他基站,从而指引其他基站调整观测角度,使所有基站都较快地发现目标。
相较于现有技术,本发明在探测目标时能够监控更大的空间区域,能够更迅速地发现目标,并且所有基站能够协同探测;各基站可以利用基站间共享的目标信息确定目标的具体空间位置;采用长短焦摄像头并排放置拍摄目标的方法,既能保证基站能够拍摄足够大的空间区域而不丢失目标,又能保证基站获得较为清晰的目标图像;在目标拍摄过程中,利用卡尔曼滤波和轨迹拟合相结合的位置预测方法,预测目标在下一帧中可能出现的坐标位置,并提前调整云台角度,能够保证目标始终成像在图像中心区域,既能防止丢失目标,又能保证长焦摄像头拍摄到完整的目标。
附图说明
图1为本发明中系统整体布设示意图;
图2为本发明中一座基站的结构示意图;
图3为本发明中跟拍方法的流程图;
图4为本发明中利用三个基站确定目标位置的示意图。
标号说明:1、一号基站;2、二号基站;3、三号基站;4、目标;5、基座;6、工控机;7、显示屏;8、无线通讯模块;9、GPS授时定位模块;10、跟踪摄像头;11、跟拍摄像头;12、云台。
具体实施方式
以下将结合附图,对本发明的技术方案进行详细说明。
本发明设计了一种空中远距离目标跟拍系统,如图1所示,包括三座基站1、2、3,基站沿顺光方向面对目标4空域,并呈环形分布,相邻基站间隔20米以上。如图2所示,每座基站包括基座5以及设置在基座内的工控机6和显示屏7,基座5顶部设有分别与所述工控机6连接的无线通讯模块8、GPS授时定位模块9、跟踪摄像头10、跟拍摄像头11和云台12。所述跟踪摄像头10和跟拍摄像头11并排固定于云台12上,保持光轴平行确保两者对准同一空域。系统利用无线通讯模块8建立无线通讯网络,并利用该网络共享目标信息。系统利用GPS授时定位模块9进行时间同步,确保各基站同步拍摄目标跟踪图像。系统利用GPS授时定位模块9获取各基站的空间位置。通过云台12转动带动跟踪摄像头10、跟拍摄像头11始终对准移动的目标。跟踪摄像头10的图像输出接口与工控机6连接,将跟踪图像输入工控机6进行处理。跟拍摄像头11的图像输出接口与显示屏7连接,将跟拍图像直接在显示屏7上显示。
在本实施例中,基站中的工控机6通过跟踪摄像头10和跟拍摄像头11的控制接口获取和调整摄像头的焦距。所述跟踪摄像头10拍摄目标在大视场下的图像,防止目标丢失。所述跟拍摄像头11拍摄目标在小视场下的图像,获取目标清晰的画面。
在本实施例中,基站中的工控机6通过云台12的控制接口获取和调整云台12的角度。云台12带动固定在其左右两侧的跟踪摄像头10和跟拍摄像头11转动,使摄像头始终对准移动的目标。跟踪摄像头10和跟拍摄像头11光轴保持平行,确保两者对准同一空域。
在本实施例中,为保证系统工作的精度和稳定性,基站个数可以扩展到3个以上。
本发明还包括基于上述空中远距离目标跟拍系统的方法,基站初始化后开始探测目标,在跟踪目标成功后同时调整跟踪摄像头和跟拍摄像头的焦距并向系统广播目标的空间位置,所有基站进入跟踪状态后共享目标信息,基站利用三组目标成像信息确定目标具体的空间位置,预测目标下一时刻位置并提前调整云台角度,基站动态调整跟拍摄像头的焦距,使目标在跟拍画面内始终占据中心区域。如图3所示,具体步骤如下:
步骤1:系统开机工作后,各基站跟踪摄像头、跟拍摄像头的焦距同时初始化到较小的默认值f0;初始化云台角度,使跟踪摄像头、跟拍摄像头对准目标空域;基站间建立稳定的无线通讯网络;
步骤2:某座基站探测到目标后,调整云台角度,使目标成像在图像中心区域,该基站进入跟踪状态;基站估算目标距离和目标空间位置,计算跟踪摄像头理想的焦距值f1,将跟踪摄像头、跟拍摄像头的焦距同时调整至f1;同时基站向系统广播目标的空间位置,其他基站据此调整云台的角度,发现目标后进入跟踪状态;
步骤3:整个系统进入跟踪状态后,各基站定时、同步向其他基站广播目标的成像信息,各基站利用三组目标成像信息计算目标具体的空间位置;
步骤4:各基站采用卡尔曼滤波与轨迹拟合相结合的位置预测方法,预测目标下一时刻的位置,提前调整云台以保证目标在下一帧中成像在图像中心区域;
步骤5:各基站计算跟拍摄像头理想的焦距值f2,并将跟拍摄像头的焦距逐步调整至f2,根据目标距离的变化,动态调整跟拍摄像头的焦距,使目标在拍摄画面内始终占据1/4的中心区域。
在本实施例中,上述步骤2中云台角度调整量的计算方法如下:
设目标成像坐标为(X,Y),摄像头焦距为f0,设摄像机的水平视场角和垂直视场角分别为φ和θ,水平方向和垂直方向像平面像素总长为Width和Height。水平旋转调整角度为Δα,垂直旋转调整角度为Δβ,根据公式:
Figure BDA0002594225030000081
求得调整角度:
Figure BDA0002594225030000091
在本实施例中,上述步骤2中估算目标距离和目标空间位置的方法如下:
设目标二维尺寸为D,像素尺寸为d,图像中的目标像素个数为M,摄像机焦距值为f0,摄像机与正东方向的夹角为α,俯仰角为β。由GPS定位仪知基站的经纬度和海拔为(E,N,H),则目标距离为
Figure BDA0002594225030000092
求得目标的经纬度和海拔:
Figure BDA0002594225030000093
在本实施例中,上述步骤2中跟踪摄像头理想的焦距值f1的计算方法如下:
设目标能够清晰识别所需的像素个数为M1,则跟踪摄像头理想的焦距值f1
Figure BDA0002594225030000094
在本实施例中,如图4所示,上述步骤3中利用三组目标成像信息计算目标具体的空间位置的方法如下:
步骤301:设三座基站的经度、纬度和海拔分别为(E1,N1,H1)、(E2,N2,H2)、(E3,N3,H3);以第一座基站为坐标系的原点,以正东方向为X轴正方向,以正北方向为Y轴正方向,以竖直向上为Z轴正方向,建立三维空间直角坐标系;近似认为跟踪摄像头的成像平面中心与基站位置重合,且忽略其在工作中的微小变化,则三座基站中的跟踪摄像头的成像平面中心O1、O2、O3的三维空间坐标分别如下:
(XO1,YO1,ZO1)=(0,0,0)
(XO2,YO2,ZO2)=((E2-E1)×111000×cosN1,(N2-N1)×111000,H2-H1)
(XO3,YO3,ZO3)=((E3-E1)×111000×cosN1,(N3-N1)×111000,H3-H1)
步骤302:设从云台控制接口获得的三座基站的跟踪摄像头光轴与正东方向的夹角和俯仰角分别为(α11)、(α22)、(α33),则三座基站的跟踪摄像头光轴方向的单位方向向量n分别如下:
n1=(cosβ1cosα1,cosβ1sinα1,sinβ1)
n2=(cosβ2cosα2,cosβ2sinα2,sinβ2)
n3=(cosβ3cosα3,cosβ3sinα3,sinβ3)
同时得到三个跟踪摄像头成像平面X轴正方向和Y轴正方向的单位方向向量i和j分别如下:
Figure BDA0002594225030000101
Figure BDA0002594225030000102
Figure BDA0002594225030000103
步骤303:设目标在三个跟踪摄像头的成像平面上成像点P1、P2、P3的坐标分别为(x1,y1)、(x2,y2)、(x3,y3),则其对应的三维空间坐标分别如下:
(XP1,YP1,ZP1)=(XO1,YO1,ZO1)+x1i1+y1j1
(XP2,YP2,ZP2)=(XO2,YO2,ZO2)+x2i2+y2j2
(XP3,YP3,ZP3)=(XO3,YO3,ZO3)+x3i3+y3j3
步骤304:设三个跟踪摄像头的焦距为r1、r2、r3,则三个跟踪摄像头的焦点R1、R2、R3的三维空间坐标分别如下:
(XR1,YR1,ZR1)=(XO1,YO1,ZO1)+r1n1
(XR2,YR2,ZR2)=(XO2,YO2,ZO2)+r2n2
(XR3,YR3,ZR3)=(XO3,YO3,ZO3)+r3n3
步骤305:组成三组点集(O1,P1,R1)、(O2,P2,R2)、(O3,P3,R3),确定三个平面O1P1R1、O2P2R2、O3P3R3,由这三个平面相交则求得目标的空间坐标;
步骤306:若出现上述三个面共线而无法求解交点的情况,设Q点为第三个成像平面上一点,其坐标为(x4,y4),且直线QP3不平行于OP3,则Q点的三维空间坐标如下:
(XQ,YQ,ZQ)=(XO3,YO3,ZO3)+x4i3+y4j3
再根据平面O1P1R1、O2P2R2、QP3R3相交求得目标的空间坐标。
在本实施例中,上述步骤4中采用卡尔曼滤波与轨迹拟合相结合的位置预测方法如下:
步骤401:建立目标的运动模型和观测模型:
Figure BDA0002594225030000111
其中,状态转移矩阵
Figure BDA0002594225030000112
观测矩阵B=[1 0];系统噪声wk和测量噪声uk是相互独立的零均值高斯白噪声,其方差分别为S和R;xk和vk分别代表k时刻目标的空间位置和速度的状态值,zk代表k时刻目标的空间位置的观测值,Δt代表采样间隔;
步骤402:利用卡尔曼滤波法减小当前时刻k目标位置状态量的误差,设定k-1时刻的协方差矩阵为P(k-1|k-1),k时刻的一步预测协方差阵为P(k|k-1)=AP(k-1|k-1)AT+S,k时刻滤波增益矩阵为K(k)=P(k|k-1)BT[BP(k|k-1)BT+RT]-1,得到当前时刻k的状态量滤波值:
Figure BDA0002594225030000113
其中,
Figure BDA0002594225030000114
为k-1时刻状态量滤波值;
步骤403:利用当前时刻k和前i-1个时刻的目标空间位置状态量的滤波值进行轨迹拟合,获得轨迹拟合曲线xk=f(k),由此预测k+1时刻目标空间位置为xk+1=f(k+1)。
在本实施例中,上述步骤5中跟拍摄像头理想的焦距值f2的计算方法如下:
设目标成像区域占据图像1/4画面时的像素个数为M2,则跟踪摄像头理想的焦距值f2
Figure BDA0002594225030000121
实施例仅为说明本发明的技术思想,不能以此限定本发明的保护范围,凡是按照本发明提出的技术思想,在技术方案基础上所做的任何改动,均落入本发明保护范围之内。

Claims (8)

1.一种空中远距离目标跟拍系统,其特征在于,包括至少三座基站,每座基站包括基座以及设置在基座内的工控机和显示屏,基座顶部设有分别与所述工控机连接的无线通讯模块、GPS授时定位模块、跟踪摄像头、跟拍摄像头和云台,所述跟踪摄像头和跟拍摄像头并排固定于云台上并且保持光轴平行;系统利用无线通讯模块建立无线通讯网络,并利用该网络共享目标信息;系统利用GPS授时定位模块进行时间同步,确保各基站同步拍摄目标跟踪图像;系统利用GPS授时定位模块获取各基站的空间位置;通过云台转动带动跟踪摄像头、跟拍摄像头始终对准移动的目标;跟踪摄像头的图像输出接口与工控机连接,将跟踪图像输入工控机进行处理;跟拍摄像头的图像输出接口与显示屏连接,将跟拍图像直接在显示屏上显示。
2.根据权利要求1所述空中远距离目标跟拍系统,其特征在于,基站沿顺光方向面对目标空域,并呈环形分布,相邻基站间隔20米以上。
3.根据权利要求1所述空中远距离目标跟拍系统,其特征在于,基站中的工控机通过跟踪摄像头和跟拍摄像头的控制接口获取和调整摄像头的焦距;所述跟踪摄像头拍摄目标在大视场下的图像,防止目标丢失;所述跟拍摄像头拍摄目标在小视场下的图像,获取目标清晰的画面。
4.根据权利要求1所述空中远距离目标跟拍系统,其特征在于,基站中的工控机通过云台的控制接口获取和调整云台的角度。
5.基于权利要求1所述空中远距离目标跟拍系统的空中远距离目标跟拍方法,其特征在于,基站初始化后开始探测目标,在跟踪目标成功后同时调整跟踪摄像头和跟拍摄像头的焦距并向系统广播目标的空间位置,所有基站进入跟踪状态后共享目标信息,基站利用三组目标成像信息确定目标具体的空间位置,预测目标下一时刻位置并提前调整云台角度,基站动态调整跟拍摄像头的焦距,使目标在跟拍画面内始终占据中心区域。
6.根据权利要求5所述空中远距离目标跟拍方法,其特征在于,包括以下步骤:
(1)系统开机工作后,各基站跟踪摄像头、跟拍摄像头的焦距同时初始化到默认值f0;初始化云台角度,使跟踪摄像头、跟拍摄像头对准目标空域;基站间建立稳定的无线通讯网络;
(2)某座基站探测到目标后,调整云台角度,使目标成像在图像中心区域,该基站进入跟踪状态;基站估算目标距离和目标空间位置,计算跟踪摄像头理想的焦距值f1,将跟踪摄像头、跟拍摄像头的焦距同时调整至f1;同时基站向系统广播目标的空间位置,其他基站据此调整云台的角度,发现目标后进入跟踪状态;
(3)整个系统进入跟踪状态后,各基站定时、同步向其他基站广播目标的成像信息,各基站利用三组目标成像信息计算目标具体的空间位置;
(4)各基站采用卡尔曼滤波与轨迹拟合相结合的位置预测方法,预测目标下一时刻的位置,提前调整云台以保证目标在下一帧中成像在图像中心区域;
(5)各基站计算跟拍摄像头理想的焦距值f2,并将跟拍摄像头的焦距逐步调整至f2,根据目标距离的变化,动态调整跟拍摄像头的焦距,使目标在拍摄画面内始终占据1/4的中心区域。
7.根据权利要求5或6所述空中远距离目标跟拍方法,其特征在于,利用三组目标成像信息确定目标具体的空间位置的方法步骤如下:
(a)设三座基站的经度、纬度和海拔分别为(E1,N1,H1)、(E2,N2,H2)、(E3,N3,H3),其中E1、E2和E3分别为三座基站的经度,N1、N2和N3分别为三座基站的纬度,H1、H2和H3分别为三座基站的海拔;以第一座基站为坐标系的原点,以正东方向为X轴正方向,以正北方向为Y轴正方向,以竖直向上为Z轴正方向,建立三维空间直角坐标系;近似认为跟踪摄像头的成像平面中心与基站位置重合,且忽略其在工作中的微小变化,则三座基站中的跟踪摄像头的成像平面中心O1、O2、O3的三维空间坐标分别如下:
(XO1,YO1,ZO1)=(0,0,0)
(XO2,YO2,ZO2)=((E2-E1)×111000×cosN1,(N2-N1)×111000,H2-H1)
(XO3,YO3,ZO3)=((E3-E1)×111000×cosN1,(N3-N1)×111000,H3-H1)
(b)设从云台控制接口获得的三座基站的跟踪摄像头光轴与正东方向的夹角和俯仰角分别为(α11)、(α22)、(α33),则三座基站的跟踪摄像头光轴方向的单位方向向量n分别如下:
n1=(cosβ1cosα1,cosβ1sinα1,sinβ1)
n2=(cosβ2cosα2,cosβ2sinα2,sinβ2)
n3=(cosβ3cosα3,cosβ3sinα3,sinβ3)
同时得到三个跟踪摄像头成像平面X轴正方向和Y轴正方向的单位方向向量i和j分别如下:
Figure FDA0002594225020000031
Figure FDA0002594225020000032
Figure FDA0002594225020000033
(c)设目标在三个跟踪摄像头的成像平面上成像点P1、P2、P3的坐标分别为(x1,y1)、(x2,y2)、(x3,y3),则其对应的三维空间坐标分别如下:
(XP1,YP1,ZP1)=(XO1,YO1,ZO1)+x1i1+y1j1
(XP2,YP2,ZP2)=(XO2,YO2,ZO2)+x2i2+y2j2
(XP3,YP3,ZP3)=(XO3,YO3,ZO3)+x3i3+y3j3
(d)设三个跟踪摄像头的焦距为r1、r2、r3,则三个跟踪摄像头的焦点R1、R2、R3的三维空间坐标分别如下:
(XR1,YR1,ZR1)=(XO1,YO1,ZO1)+r1n1
(XR2,YR2,ZR2)=(XO2,YO2,ZO2)+r2n2
(XR3,YR3,ZR3)=(XO3,YO3,ZO3)+r3n3
(e)组成三组点集(O1,P1,R1)、(O2,P2,R2)、(O3,P3,R3),确定三个平面O1P1R1、O2P2R2、O3P3R3,由这三个平面相交则求得目标的空间坐标;
(f)若出现上述三个面共线而无法求解交点的情况,设Q点为第三个成像平面上一点,其坐标为(x4,y4),且直线QP3不平行于OP3,则Q点的三维空间坐标如下:
(XQ,YQ,ZQ)=(XO3,YO3,ZO3)+x4i3+y4j3
再根据平面O1P1R1、O2P2R2、QP3R3相交求得目标的空间坐标。
8.根据权利要求6所述空中远距离目标跟拍方法,其特征在于,卡尔曼滤波与轨迹拟合相结合的位置预测方法的步骤如下:
(A)建立目标的运动模型和观测模型:
Figure FDA0002594225020000041
其中,状态转移矩阵
Figure FDA0002594225020000042
观测矩阵B=[1 0];系统噪声wk和测量噪声uk是相互独立的零均值高斯白噪声,其方差分别为S和R;xk和vk分别代表k时刻目标的空间位置和速度的状态值,zk代表k时刻目标的空间位置的观测值,Δt代表采样间隔;
(B)利用卡尔曼滤波法减小当前时刻k目标位置状态量的误差,设定k-1时刻的协方差矩阵为P(k-1|k-1),k时刻的一步预测协方差阵为P(k|k-1)=AP(k-1|k-1)AT+S,k时刻滤波增益矩阵为K(k)=P(k|k-1)BT[BP(k|k-1)BT+RT]-1,得到当前时刻k的状态量滤波值:
Figure FDA0002594225020000051
其中,
Figure FDA0002594225020000052
为k-1时刻状态量滤波值;
(C)利用当前时刻k和前i-1个时刻的目标空间位置状态量的滤波值进行轨迹拟合,获得轨迹拟合曲线xk=f(k),由此预测k+1时刻目标空间位置为xk+1=f(k+1)。
CN202010704646.3A 2020-07-21 2020-07-21 一种空中远距离目标跟拍系统和方法 Pending CN111857188A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010704646.3A CN111857188A (zh) 2020-07-21 2020-07-21 一种空中远距离目标跟拍系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010704646.3A CN111857188A (zh) 2020-07-21 2020-07-21 一种空中远距离目标跟拍系统和方法

Publications (1)

Publication Number Publication Date
CN111857188A true CN111857188A (zh) 2020-10-30

Family

ID=73002197

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010704646.3A Pending CN111857188A (zh) 2020-07-21 2020-07-21 一种空中远距离目标跟拍系统和方法

Country Status (1)

Country Link
CN (1) CN111857188A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113126126A (zh) * 2021-04-20 2021-07-16 上海技威光电技术有限公司 一种全天时自动报靶系统及其弹药落点定位方法
CN114905511A (zh) * 2022-05-12 2022-08-16 南京航空航天大学 一种工业机器人装配误差检测与精度补偿系统标定方法
CN115103110A (zh) * 2022-06-10 2022-09-23 慧之安信息技术股份有限公司 基于边缘计算的家庭智能监控方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1042917A1 (en) * 1998-08-07 2000-10-11 Koninklijke Philips Electronics N.V. Figure tracking in a multiple camera system
CN104125433A (zh) * 2014-07-30 2014-10-29 西安冉科信息技术有限公司 基于多球机联动结构的视频运动目标监控方法
CN104377447A (zh) * 2014-10-27 2015-02-25 北京遥测技术研究所 一种基于Kalman滤波器的机动目标跟踪控制系统
CN104616322A (zh) * 2015-02-10 2015-05-13 山东省科学院海洋仪器仪表研究所 船载红外目标图像辨识跟踪方法及其装置
CN107367262A (zh) * 2017-06-17 2017-11-21 周超 一种无人机远距离实时定位测绘显示互联式控制方法
CN108881702A (zh) * 2017-05-09 2018-11-23 上海凡后科技有限公司 一种多摄像头捕捉物体运动轨迹的系统及方法
CN109407049A (zh) * 2018-12-10 2019-03-01 中国电子科技集团公司第十研究所 一种全被动探测的目标定位方法和系统
CN109828610A (zh) * 2019-01-30 2019-05-31 华通科技有限公司 基于长短焦摄像头组的远距离目标跟踪系统及方法
CN210986254U (zh) * 2019-10-07 2020-07-10 青岛宇航慧恒信息科技有限公司 一种全景式侦扰一体视频监控系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1042917A1 (en) * 1998-08-07 2000-10-11 Koninklijke Philips Electronics N.V. Figure tracking in a multiple camera system
CN104125433A (zh) * 2014-07-30 2014-10-29 西安冉科信息技术有限公司 基于多球机联动结构的视频运动目标监控方法
CN104377447A (zh) * 2014-10-27 2015-02-25 北京遥测技术研究所 一种基于Kalman滤波器的机动目标跟踪控制系统
CN104616322A (zh) * 2015-02-10 2015-05-13 山东省科学院海洋仪器仪表研究所 船载红外目标图像辨识跟踪方法及其装置
CN108881702A (zh) * 2017-05-09 2018-11-23 上海凡后科技有限公司 一种多摄像头捕捉物体运动轨迹的系统及方法
CN107367262A (zh) * 2017-06-17 2017-11-21 周超 一种无人机远距离实时定位测绘显示互联式控制方法
CN109407049A (zh) * 2018-12-10 2019-03-01 中国电子科技集团公司第十研究所 一种全被动探测的目标定位方法和系统
CN109828610A (zh) * 2019-01-30 2019-05-31 华通科技有限公司 基于长短焦摄像头组的远距离目标跟踪系统及方法
CN210986254U (zh) * 2019-10-07 2020-07-10 青岛宇航慧恒信息科技有限公司 一种全景式侦扰一体视频监控系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113126126A (zh) * 2021-04-20 2021-07-16 上海技威光电技术有限公司 一种全天时自动报靶系统及其弹药落点定位方法
CN114905511A (zh) * 2022-05-12 2022-08-16 南京航空航天大学 一种工业机器人装配误差检测与精度补偿系统标定方法
CN114905511B (zh) * 2022-05-12 2023-08-11 南京航空航天大学 一种工业机器人装配误差检测与精度补偿系统标定方法
CN115103110A (zh) * 2022-06-10 2022-09-23 慧之安信息技术股份有限公司 基于边缘计算的家庭智能监控方法
CN115103110B (zh) * 2022-06-10 2023-07-04 慧之安信息技术股份有限公司 基于边缘计算的家庭智能监控方法

Similar Documents

Publication Publication Date Title
CN109753076B (zh) 一种无人机视觉追踪实现方法
CN108614273B (zh) 一种机载双波段光电广域侦察与跟踪装置及方法
CN111857188A (zh) 一种空中远距离目标跟拍系统和方法
CN105184776B (zh) 目标跟踪方法
CN104215239B (zh) 基于视觉的无人机自主着陆导引装置实现的导引方法
US9641810B2 (en) Method for acquiring images from arbitrary perspectives with UAVs equipped with fixed imagers
JP4302625B2 (ja) 航空偵察システム
CN110537365B (zh) 信息处理装置、信息处理方法、信息处理程序、图像处理装置以及图像处理系统
CN110033480B (zh) 基于航摄测量的机载光电系统目标运动矢量估计方法
WO2018120350A1 (zh) 对无人机进行定位的方法及装置
US10337863B2 (en) Survey system
CN103149788A (zh) 空中360°全景照片拍摄装置及方法
CN106094876A (zh) 一种无人机目标锁定系统及其方法
CN203204299U (zh) 空中360°全景照片拍摄装置
WO2021217371A1 (zh) 可移动平台的控制方法和装置
JP2004056664A (ja) 共同撮影システム
CN110896331B (zh) 一种测量天线工程参数的方法、装置和存储介质
WO2020048365A1 (zh) 飞行器的飞行控制方法、装置、终端设备及飞行控制系统
CN111247389A (zh) 关于拍摄设备的数据处理方法、装置及图像处理设备
JP2016118994A (ja) 監視システム
CN113821052A (zh) 集群无人机协同目标定位方法、系统、协同目标定位终端
CN107635096B (zh) 一种增加照相重叠率的全景航空相机倾斜成像方法
WO2022109860A1 (zh) 跟踪目标对象的方法和云台
WO2020006709A1 (zh) 视觉定位系统、无人机以及自检测无人机自身位置的方法
CN113063401A (zh) 一种无人机航测系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20201030

RJ01 Rejection of invention patent application after publication