CN103456027B - 一种机场空间关系约束下的时敏目标检测定位方法 - Google Patents

一种机场空间关系约束下的时敏目标检测定位方法 Download PDF

Info

Publication number
CN103456027B
CN103456027B CN201310332128.3A CN201310332128A CN103456027B CN 103456027 B CN103456027 B CN 103456027B CN 201310332128 A CN201310332128 A CN 201310332128A CN 103456027 B CN103456027 B CN 103456027B
Authority
CN
China
Prior art keywords
time
moving
time critical
real
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310332128.3A
Other languages
English (en)
Other versions
CN103456027A (zh
Inventor
张天序
王岳环
高士英
吴明强
彭凡
张力
药珩
杨智慧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huazhong University of Science and Technology
Original Assignee
Huazhong University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huazhong University of Science and Technology filed Critical Huazhong University of Science and Technology
Priority to CN201310332128.3A priority Critical patent/CN103456027B/zh
Publication of CN103456027A publication Critical patent/CN103456027A/zh
Application granted granted Critical
Publication of CN103456027B publication Critical patent/CN103456027B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明公开了一种机场空间关系约束下的时敏目标检测定位方法,包括:从卫星图片中选取包括机场区域及机场建筑物的正视影像图,根据该正视影像图生成机场参考图,在机场参考图中选取机场区域各子地标参考图,在子地标参考图中构建时敏目标运动区域及时敏目标驻留区域约束。获取实时图,根据实时图的实时成像行数和实时成像列数、以及动平台的飞行保障参数对子地标参考图进行透视变换,以得到变换后的时敏目标运动区域以及其驻留区域。在时敏目标驻留区域内对驻留目标进行识别定位,在时敏目标运动区域内对运动目标进行检测定位。本发明的方法能够解决时敏目标检测中目标尺度变化、地面背景下存在较多干扰、检测实时性差等技术问题。

Description

一种机场空间关系约束下的时敏目标检测定位方法
技术领域
本发明属于成像自动目标识别与导航制导交叉的技术领域,更具体地,涉及一种机场空间关系约束下的时敏目标检测定位方法。
背景技术
时敏目标指的是在时间变化时目标的位置、姿态等特征也在变化。这类目标既可驻留在包括机场掩蔽库、停机坪等建筑物内,又可停留在跑道、公路旁的驻地,也可以移出驻留地在道路、跑道上运动。相对于固定目标,其不仅处于复杂的背景中,难于识别,而且其位置是动态变化的。故其检测、识别、定位问题具有极大的挑战性。
不管在民用领域还是军用领域,机场都是一个很重要的场景。对机场跑道上的运动目标检测,对于民用的航班调度、机场监控管理有突出作用,而在军事上,军用机场上的运动目标常常是重要战略目标,对其检测识别的战略意义不言而喻。
对点源时敏动目标的检测,有所谓“先检测后跟踪”和“先跟踪后检测”等两类方法研究的广泛报道。在现实的场景中,特别是复杂背景条件下,存在各种大小尺寸的运动对象及各种运动速度的对象需要我们一并检测和分析。然而,现有的大多数方法和算法是单一时间尺度的,即依据相邻帧的逐帧检测。这样当成像平台逐渐靠近目标,时敏目标在实时图中的尺度就会发生变化,传统的运动目标检测仅考虑一种尺度,不能适应目标尺度变化,这样在动平台条件下现有方法算法不能有效检测运动目标。
再者,现有的时敏动目标检测识别方法都是就运动目标的本身而言,对目标所处的背景以及场景约束没有考虑到。许多地面时敏动目标都会有一定的场景约束,比如公路、桥梁、飞机跑道等,传统的时敏动目标检测没有考虑到运动目标的约束范围,而对全图进行搜索,使得背景区域中的干扰也被当做目标,导致大量虚警。
而对全图进行时敏目标检测,算法开销很大,使得时敏目标检测的实时性没有保障。
发明内容
针对现有技术的以上缺陷或改进需求,本发明提供了一种机场空间关系约束下的时敏目标检测定位方法,其目的在于解决现有动平台条件下运动目标尺度变化导致难以检测、地面背景下存在较多干扰而导致虚警、以及时敏目标检测实时性差的技术问题。
为实现上述目的,按照本发明的一个方面,提供了一种机场空间关系约束下的时敏目标检测定位方法,包括以下步骤:
(1)从卫星图片中选取包括整个机场区域的正视影像图,并根据该正视影像图生成机场地标参考图;
(2)根据预先规划的动平台的飞行航路在机场地标参考图中选取机场跑道子地标参考图,并根据该机场跑道子地标参考图构建时敏目标运动区域;
(3)获取实时图,根据实时图的实时成像行数和实时成像列数、以及动平台的飞行保障参数对机场跑道子地标参考图进行透视变换,以得到变换后的时敏目标运动区域的中心点和时敏目标运动区域,以及时敏目标驻留区域的中心点和时敏目标驻留区域;
(4)根据步骤(3)中变换后的时敏目标运动区域的中心点和时敏目标运动区域、以及变换后的时敏目标驻留区域的中心点和时敏目标驻留区域确定其在实时图中的位置,并提取实时图中的时敏目标运动区域及时敏目标驻留区域;
(5)对步骤(4)中得到的时敏目标驻留区域内进行驻留目标识别定位;
(6)在动平台下对两帧实时图进行配准,并在步骤(5)提取的时敏目标运动区域中进行多尺度运动目标窗口选择,以获得每帧实时图中每一像素点对应的窗口区域;
(7)使用时空多尺度运动目标检测方法计算步骤(6)获得的不同窗口区域的运动显著性度量值,确定最大的运动显著性度量值对应的窗口区域作为运动显著性区域,并获得该运动显著性区域的最佳时间间隔;
(8)利用最佳时间间隔、多帧累积差分方法和标记方法对步骤(4)提取的时敏目标运动区域中每个运动显著性区域提取区域内运动目标,以完成对机场空间约束下的时敏动目标检测。
优选地,机场地标参考图中包含机场跑道、机库区、机场跑道连接处。
优选地,步骤(3)包括以下子步骤:
(3-1)根据动平台的飞行保障参数计算时敏目标运动区域的中心点在前视图中的位置坐标(Xr,Yr);具体采用以下公式:
Xr=ROW/2+(∠OMP-θ)*ROW/φ
以上公式中,
OT0=h/tanθ
OM=OT0+(yc-y0)×cosα+(xc-x0)×sinα
tan(∠OMP)=h/OM
(x0,y0)为大地坐标系下动平台的光轴瞄准点,OT0为动平台的光轴指向与大地水平面交点T0与动平台成像仪在大地水平面上的水平投影点O之间的距离,M为时敏目标运动区域的中心点T1在光轴纵向方向的投影与OT0直线的交点,OM为水平投影点O与M点之间的距离,φ为动平台成像仪的纵向成像视场角,为成像仪的横向成像角,ROW为实时图的实时成像行数,COL为实时图的实时成像列数,α为动平台成像仪的成像方位角,θ为动平台成像仪的成像俯仰角,h为动平台成像仪的成像高度;
(3-2)根据时敏目标运动区域的顶点坐标(x1,y1)、(x2,y2)、(x3,y3)和(x4,y4)计算时敏目标运动区域的四个顶点在前视图中的位置坐标(x'1,y'1)、(x'2,y'2)、(x'3,y'3)以及(x'4,y'4);
(3-3)根据时敏目标驻留区域的中心点F1的坐标(ec,gc)和时敏目标驻留区域的四个顶点坐标(e1,g1),(e2,g2),(e3,g3),(e4,g4)计算时敏目标驻留区域的中心点F1在前视图中的位置坐标(e'c,g'c)和时敏目标运动区域的四个顶点在前视图中的位置坐标(e'1,g'1),(e'2,g'2),(e'3,g'3),(e'4,g'4)。
优选地,步骤(5)包括以下子步骤:
(5-1)制备飞机的模板;
(5-2)根据制备的飞机模板对时敏目标驻留区域Ur进行基于模板的目标识别。
优选地,步骤(6)包括以下子步骤:
(6-1)选择初始时间间隔Δt,采用尺度不变特征转换(Scale-invariant feature transform,简称SIFT)方法对两帧实时图f(x,y,tc)和f(x,y,tc+Δt)进行配准;其中x为其中一帧实时图的横坐标,y为其纵坐标,tc为实时图的当前图像帧;
(6-2)在步骤(4)提取的时敏目标运动区域中确定K个窗口,其尺寸从小到大依次为:Smin_x×Smin_y,(Smin_x+ΔSx)×(Smin_y+ΔSy),…,(Smin_x+(K-1)ΔSx)×(Smin_y+(K-1)ΔSy),其中K为正整数,Smin_x表示窗口长度的最小值,Smin_y表示窗口宽度的最小值,ΔSx表示长度增量,ΔSy表示宽度增量;
(6-3)利用最小窗口分别对两帧实时图和f(x,y,tc+Δt)进行逐像素点遍历,以分别得到每帧实时图中每一像素点(x,y)对应的窗口区域
优选地,步骤(7)包括以下子步骤:
(7-1)计算最小窗口(Smin_x,Smin_y)在像素点(x,y)处的覆盖区域Ωx,y的运动显著性度量值Value(x,y);
(7-2)针对每一个运动标记像素点(x′,y′),从其对应的M个运动显著性度量值Value(x′,y′)中确定最大值,该最大值对应的覆盖区域即为运动显著性区域,记为ωx′,y′,对于步骤(4)提取的时敏目标运动区域中的N个运动标记像素点而言,可得到N个运动显著性区域,记为
(7-3)在步骤(5)提取的时敏目标运动区域中,计算每一运动显著性区域ωx′,y′的最佳时间间隔
优选地,步骤(7)具体为,对每个运动显著性区域取图像对ft(x,y)与在两幅图像的区域内做多帧累积差分,前后对称两帧与当前帧分别进行累积差分,分别提取步骤(5)提取的时敏目标运动区域中的累积差分图像,然后通过图像融合增强累积差分图像之间的差异,以得到运动目标检测结果。
总体而言,通过本发明所构思的以上技术方案与现有技术相比,能够取得下列有益效果:
1、由于采用了步骤(3)和步骤(4)提取时敏目标所在的时敏目标运动区域以及其驻留区域,而不是对全图进行时敏目标检测,因而将动目标的检测限定在约束区域内,有效的排除了大量的背景干扰,很大程度降低了虚警。
2、由于采用了步骤(3)和步骤(4)提取目标所在的时敏目标运动区域,而不是对全图进行时敏动目标检测,因而减小了时敏动目标检测算法开销,保障了实时性;
3、由于采用了步骤(5)对时敏目标运动区域内进行多尺度运动窗口选择,使得时敏动目标检测具有多尺度的特性,能检测动平台条件下有不同时—空位置、尺寸的目标。
附图说明
图1是本发明机场空间关系约束下的时敏目标检测定位方法的流程图。
图2是机场区域卫星正视影像图。
图3是机场地标参考图。
图4是透视变换原理图。
图5是带有机场跑道约束的子地标参考图。
图6是参考图透视变换结果图。
图7是所制备飞机模板图。
图8是第46帧实时图时敏目标驻留区域目标识别定位结果。
图9是第46帧单帧实时图。
图10(a)是第46帧实时图时敏目标运动区域提取结果。
图10(b)是第46帧实时图时敏目标驻留区域提取结果。
图11是第6帧和16帧sift角点匹配结果。
图12(a)是第46帧单帧实时图区域差分结果。
图12(b)是第56帧单帧实时图区域差分结果。
图12(c)是第66帧单帧实时图区域差分结果。
图13(a)是第46帧单帧实时图区域分割结果。
图13(b)是第56帧单帧实时图区域分割结果。
图13(c)是第66帧单帧实时图区域分割结果。
图14是第46帧实时图时敏动目标检测结果。
图15是第100帧实时图时敏动目标检测结果。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。此外,下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
如图1所示,本发明一种机场空间关系约束下的时敏目标检测定位方法包括以下步骤:
(1)从卫星图片中选取包括整个机场区域的正视影像图,并根据该正视影像图生成机场地标参考图;图2为获得的卫星图片,该图片分辨率为0.8米,大小为1000×1000像素。
具体生成机场地标参考图的过程已经在本申请人提交的中国专利“一种用于前视导航制导的平面地标选择和参考图制备方法”(专利号ZL200910273308.2)中予以披露,在此不再赘述,图3为生成的机场地标参考图,该机场地标参考图中包含机场跑道、机库区、机场跑道连接处等子地标。
(2)根据预先规划的动平台的飞行航路在机场地标参考图中选取机场跑道子地标参考图,并根据该机场跑道子地标参考图构建时敏目标运动区域;在图3所示的机场地标参考图中,机场跑道子地标参考图包括机场跑道、机库区、机场跑道连接处等子地标,在机场跑道子地标参考图中的机场跑道上选择一段跑道区域作为时敏目标运动区域,图5中所示的较大虚线框,即为选取的时敏目标运动区域,并用Si表示,该时敏目标运动区域的中心点T1的坐标为(xc,yc),时敏目标运动区域的四个顶点坐标分别为(x1,y1)=(74,132),(x2,y2)=(151,155),(x3,y3)=(68,151),(x4,y4)=(146,172)。图5中较小虚线框为时敏目标驻留区域,用Ui表示,该时敏目标驻留区域的中心点F1的坐标为(ec,gc),时敏目标运动区域的四个顶点坐标分别为(e1,g1)=(160,158),(e2,g2)=(182,162),(e3,g3)=(158,173),(e4,g4)=(175,179)。
(3)获取实时图,根据实时图的实时成像行数和实时成像列数、以及动平台的飞行保障参数对机场跑道子地标参考图进行透视变换,以得到变换后的时敏目标运动区域的中心点和时敏目标运动区域,以及时敏目标驻留区域的中心点和时敏目标驻留区域。本步骤包括以下子步骤:
(3-1)根据动平台的飞行保障参数计算时敏目标运动区域的中心点在前视图中的位置坐标(Xr,Yr);具体采用以下公式:
Xr=ROW/2+(∠OMP-θ)*ROW/φ
以上公式中,
OT0=h/tanθ
OM=OT0+(yc-y0)×cosα+(xc-x0)×sinα
tan(∠OMP)=h/OM
(x0,y0)为大地坐标系下动平台的光轴瞄准点,OT0为动平台的光轴指向与大地水平面交点T0与动平台成像仪在大地水平面上的水平投影点O之间的距离,M为时敏目标运动区域的中心点T1在光轴纵向方向的投影与OT0直线的交点,OM为水平投影点O与M点之间的距离,φ为动平台成像仪的纵向成像视场角,为成像仪的横向成像角,ROW为实时图的实时成像行数,COL为实时图的实时成像列数,α为动平台成像仪的成像方位角,θ为动平台成像仪的成像俯仰角,h为动平台成像仪的成像高度。
通过以上计算可知,图3的时敏目标运动区域的中心点在前视图中的位置坐标为(xr,yr)=(113,135)。
(3-2)根据时敏目标运动区域的顶点坐标(x1,y1)、(x2,y2)、(x3,y3)和(x4,y4)计算时敏目标运动区域的四个顶点在前视图中的位置坐标(x'1,y'1)、(x'2,y'2)、(x'3,y'3)以及(x'4,y'4);其计算公式与以上步骤(3-1)完全相同,唯一的区别在于分别使用时敏目标运动区域的顶点坐标(x1,y1)、(x2,y2)、(x3,y3)和(x4,y4)去替换时敏目标运动区域的中心点T1的坐标(xc,yc)。
经过计算,可得到图3中光电传感器获取的实时成像图中对应时敏目标运动区域四个顶点的结果分别为(x'1,y'1)=(56,131),(x'2,y'2)=(172,128),(x'2,y'2)=(170,140),(x'4,y'4)=(53,145)。四个顶点构成的时敏目标运动区域Si在透视变换结果中的位置Sr如图5所示的白色方框内区域所示。
(3-3)根据时敏目标驻留区域的中心点F1的坐标(ec,gc)和时敏目标驻留区域的四个顶点坐标(e1,g1),(e2,g2),(e3,g3),(e4,g4)计算时敏目标驻留区域的中心点F1在前视图中的位置坐标(e'c,g'c)和时敏目标运动区域的四个顶点在前视图中的位置坐标(e'1,g'1),(e'2,g'2),(e'3,g'3),(e'4,g'4),具体计算公式与以上步骤(3-1)和(3-2)完全相同。
经过计算,可得到图3中光电传感器获取的实时成像图中对应时敏目标驻留区域中心点坐标结果为(e'c,g'c)=(281,182)四个顶点的结果分别为(e'1,g'1)=(261,174),(e'2,g'2)=(292,173),(e'3,g'3)=(266,189),(e'4,g'4)=(303,190)。四个顶点构成的时敏目标驻留区域Ui在透视变换结果中的位置Ur如图5所示的白色方框内区域所示。
(4)根据步骤(3)中变换后的时敏目标运动区域的中心点和时敏目标运动区域、以及变换后的时敏目标驻留区域的中心点和时敏目标驻留区域确定其在实时图中的位置,并提取实时图中的时敏目标运动区域及时敏目标驻留区域;
每一帧透视变换结果与一帧实时图相对应,如图9所示为第一帧实时图,与步骤(3)所得第一帧透视变换结果和图5相对应。通过图6中时敏目标运动区域的中心点映射到实时图9中约束中心点的对应位置,也为(xr,yr)=(113,135,同时时敏目标运动区域四个顶点对应实时图中一块区域Arear的四个顶点(x'1,y'1)=(56,131),(x'2,y'2)=(172,128),(x'2,y'2)=(170,140),(x'4,y'4)=(53,145),所得的实时图区域Sr即为时敏目标运动区域,如图10(a)所示。
通过图6中时敏目标运动区域的中心点映射到实时图9中约束中心点的对应位置,也为(e'c,g'c)=(281,182),同时时敏目标驻留区域四个顶点对应实时图中一块区域四个顶点的结果分别为(e'1,g'1)=(261,174),(e'2,g'2)=(292,173),(e'3,g'3)=(266,189),(e'4,g'4)=(303,190)。所得的实时图区域Ur即为时敏目标驻留区域,如图10(b)所示。
(5)对步骤(4)中得到的时敏目标驻留区域Ur内进行驻留目标识别定位,包括以下子步骤:
(5-1)制备飞机的模板;
由于时敏目标驻留区域为停机坪一部分,所识别的停机坪上的时敏目标为飞机,且为民用中小型飞机,
制备普通飞机的二值模板图,具体模板生成原理参见本申请人申请专利“一种地面静止目标实时识别跟踪方法”(专利号ZL201010158786.1),飞机模板图如图7所示。
(5-2)根据制备的飞机模板对时敏目标驻留区域Ur进行基于模板的目标识别,具体识别方法见本申请人的专利“一种地面静止目标实时识别跟踪方法”(专利号ZL201010158786.1),识别结果如图8所示。
(6)在动平台下对两帧实时图进行配准,并在步骤(5)提取的时敏目标运动区域中进行多尺度运动目标窗口选择,以获得每帧实时图中每一像素点对应的窗口区域;本步骤包括以下子步骤:
(6-1)选择初始时间间隔Δt,采用尺度不变特征转换(Scale-invariant feature transform,简称SIFT)方法对两帧实时图f(x,y,tc)和f(x,y,tc+Δt)进行配准;其中x为其中一帧实时图的横坐标,y为其纵坐标,tc为实时图的当前图像帧,Δt为大于5的正整数,优选地,其取值为10帧帧间间隔,第1帧和第10帧实时图像的配准结果如图11所示。
(6-2)在步骤(4)提取的时敏目标运动区域中确定K个窗口,其尺寸从小到大依次为:Smin_x×Smin_y,(Smin_x+ΔSx)×(Smin_y+ΔSy),…,(Smin_x+(K-1)ΔSx)×(Smin_y+(K-1)ΔSy),其中K为正整数,Smin_x表示窗口长度的最小值,其取值范围是大于2个像素,Smin_y表示窗口宽度的最小值,其取值范围是大于2个像素,ΔSx表示长度增量,其取值等于2,ΔSy表示宽度增量,其取值等于2;
(6-3)利用最小窗口分别对两帧实时图和f(x,y,tc+Δt)进行逐像素点遍历,以分别得到每帧实时图中每一像素点(x,y)对应的窗口区域
(7)使用时空多尺度运动目标检测方法计算步骤(6)获得的不同窗口区域的运动显著性度量值,确定最大的运动显著性度量值对应的窗口区域作为运动显著性区域,并获得该运动显著性区域的最佳时间间隔;本步骤包括以下子步骤:
(7-1)计算最小窗口(Smin_x,Smin_y)在像素点(x,y)处的覆盖区域Ωx,y的运动显著性度量值Value(x,y);具体运动显著性度量值推导的过程已经在本申请人提交的中国专利“时空多尺度运动目标检测方法”(申请号201210591104.5)中已经予以披露,在此不再赘述。其中,若运动显著性度量值Value(x,y)大于等于预定阈值,则区域Ωx,y属于候选运动显著性区域,其对应的像素点为运动标记像素点(x′,y′),否则,区域Ωx,y不属于候选运动显著性区域,预订阈值的取值范围是0到1,优选为0.6;
(7-2)针对每一个运动标记像素点(x′,y′),从其对应的M个运动显著性度量值Value(x′,y′)中确定最大值,该最大值对应的覆盖区域即为运动显著性区域,记为ωx′,y′,从而对于步骤(4)提取的时敏目标运动区域中的N个运动标记像素点而言,可得到N个运动显著性区域,记为其中
(7-3)在步骤(5)提取的时敏目标运动区域中,计算每一运动显著性区域ωx′,y′的最佳时间间隔具体最佳时间间隔的计算过程参见中国专利“时空多尺度运动目标检测方法”中所述。
(8)利用最佳时间间隔多帧累积差分方法和标记方法对步骤(4)提取的时敏目标运动区域中每个运动显著性区域提取区域内运动目标,以完成对机场空间约束下的时敏动目标检测。
具体而言,对于每个运动显著性区域其最佳帧间间隔已在上一步中求出。对每个运动显著性区域取图像对ft(x,y)与在两幅图像的区域内做多帧累积差分,多帧累积差分的过程参见中国专利“时空多尺度运动目标检测方法”中所述。前后对称两帧与当前帧分别进行累积差分,分别提取步骤(5)提取的时敏目标运动区域中的累积差分图像,然后通过图像融合增强累积差分图像之间的差异。
如图12(a)、(b)、(c)分别为第46帧、第56帧、第66帧实时图时敏目标运动区域差分结果。
再通过OTSU算法对累积差分图像进行阈值分割、形态学处理和标记,以提取累积差分图像中的运动目标,最终得到时敏动目标检测结果。
如图13(a)、(b)、(c)分别为第46帧、第56帧、第66帧实时图时敏目标运动区域内累积差分图像阈值分割结果。
如图14和图15所示分别为第46帧和第100帧实时图运时敏动目标检测结果,目标为机场跑道上的一个运动车辆,可以看到考虑到动平台以及目标尺寸的改变,该方法仍然能可靠检测到机场空间约束下的时敏动目标。
本领域的技术人员容易理解,以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.一种机场空间关系约束下的时敏目标检测定位方法,其特征在于,包括以下步骤:
(1)从卫星图片中选取包括整个机场区域的正视影像图,并根据该正视影像图生成机场地标参考图;
(2)根据预先规划的动平台的飞行航路在机场地标参考图中选取机场跑道子地标参考图,并根据该机场跑道子地标参考图构建时敏目标运动区域;
(3)获取实时图,根据实时图的实时成像行数和实时成像列数、以及动平台的飞行保障参数对机场跑道子地标参考图进行透视变换,以得到变换后的时敏目标运动区域的中心点和时敏目标运动区域,以及时敏目标驻留区域的中心点和时敏目标驻留区域;
(4)根据步骤(3)中变换后的时敏目标运动区域的中心点和时敏目标运动区域、以及变换后的时敏目标驻留区域的中心点和时敏目标驻留区域确定其在实时图中的位置,并提取实时图中的时敏目标运动区域及时敏目标驻留区域;
(5)对步骤(4)中得到的时敏目标驻留区域内进行驻留目标识别定位;
(6)在动平台下对两帧实时图进行配准,并在步骤(5)提取的时敏目标运动区域中进行多尺度运动目标窗口选择,以获得每帧实时图中每一像素点对应的窗口区域;
(7)使用时空多尺度运动目标检测方法计算步骤(6)获得的不同窗口区域的运动显著性度量值,确定最大的运动显著性度量值对应的窗口区域作为运动显著性区域,并获得该运动显著性区域的最佳时间间隔;
(8)利用最佳时间间隔、多帧累积差分方法和标记方法对步骤(4)提取的时敏目标运动区域中每个运动显著性区域提取区域内运动目标,以完成对机场空间约束下的时敏动目标检测。
2.根据权利要求1所述的动平台动目标检测方法,其特征在于,机场地标参考图中包含机场跑道、机库区、机场跑道连接处。
3.根据权利要求1所述的动平台动目标检测方法,其特征在于,步骤(3)包括以下子步骤:
(3-1)根据动平台的飞行保障参数计算时敏目标运动区域的中心点在前视图中的位置坐标(Xr,Yr);具体采用以下公式:
Xr=ROW/2+(∠OMP-θ)*ROW/φ
以上公式中,
OT0=h/tanθ
OM=OT0+(yc-y0)×cosα+(xc-x0)×sinα
tan(∠OMP)=h/OM
(xc,yc)为时敏目标运动区域的中心点的坐标,(x0,y0)为大地坐标系下动平台的光轴瞄准点,OT0为动平台的光轴指向与大地水平面交点T0与动平台成像仪在大地水平面上的水平投影点O之间的距离,M为时敏目标运动区域的中心点T1在光轴纵向方向的投影与OT0直线的交点,OM为水平投影点O与M点之间的距离,φ为动平台成像仪的纵向成像视场角,为成像仪的横向成像角,ROW为实时图的实时成像行数,COL为实时图的实时成像列数,α为动平台成像仪的成像方位角,θ为动平台成像仪的成像俯仰角,h为动平台成像仪的成像高度;
(3-2)根据时敏目标运动区域的顶点坐标(x1,y1)、(x2,y2)、(x3,y3)和(x4,y4)计算时敏目标运动区域的四个顶点在前视图中的位置坐标(x'1,y'1)、(x'2,y'2)、(x'3,y'3)以及(x'4,y'4);
(3-3)根据时敏目标驻留区域的中心点F1的坐标(ec,gc)和时敏目标驻留区域的四个顶点坐标(e1,g1),(e2,g2),(e3,g3),(e4,g4)计算时敏目标驻留区域的中心点F1在前视图中的位置坐标(e'c,g'c)和时敏目标运动区域的四个顶点在前视图中的位置坐标(e'1,g'1),(e'2,g'2),(e'3,g'3),(e'4,g'4)。
4.根据权利要求3所述的动平台动目标检测方法,其特征在于,步骤(5)包括以下子步骤:
(5-1)制备飞机的模板;
(5-2)根据制备的飞机模板对时敏目标驻留区域Ur进行基于模板的目标识别。
5.根据权利要求4所述的动平台动目标检测方法,其特征在于,步骤(6)包括以下子步骤:
(6-1)选择初始时间间隔Δt,采用尺度不变特征转换方法对两帧实时图f(x,y,tc)和f(x,y,tc+Δt)进行配准;其中x为其中一帧实时图的横坐标,y为其纵坐标,tc为实时图的当前图像帧;
(6-2)在步骤(4)提取的时敏目标运动区域中确定K个窗口,其尺寸从小到大依次为:Smin_x×Smin_y,(Smin_x+ΔSx)×(Smin_y+ΔSy),…,(Smin_x+(K-1)ΔSx)×(Smin_y+(K-1)ΔSy),其中K为正整数,Smin_x表示窗口长度的最小值,Smin_y表示窗口宽度的最小值,ΔSx表示长度增量,ΔSy表示宽度增量;
(6-3)利用最小窗口(Smin_x×Smin_y)分别对两帧实时图f(x,y,tc)和f(x,y,tc+Δt)进行逐像素点遍历,以分别得到每帧实时图中每一像素点(x,y)对应的窗口区域
6.根据权利要求5所述的动平台动目标检测方法,其特征在于,步骤(7)包括以下子步骤:
(7-1)计算最小窗口(Smin_x,Smin_y)在像素点(x,y)处的覆盖区域Ωx,y的运动显著性度量值Value(x,y);
(7-2)针对每一个运动标记像素点(x′,y′),从其对应的M个运动显著性度量值Value(x′,y′)中确定最大值,该最大值对应的覆盖区域即为运动显著性区域,记为ωx′,y′,对于步骤(4)提取的时敏目标运动区域中的N个运动标记像素点而言,可得到N个运动显著性区域,记为
(7-3)在步骤(5)提取的时敏目标运动区域中,计算每一运动显著性区域ωx′,y′的最佳时间间隔
7.根据权利要求6所述的动平台动目标检测方法,其特征在于,步骤(8)具体为,对每个运动显著性区域取图像对ft(x,y)与在两幅图像的区域内做多帧累积差分,前后对称两帧与当前帧分别进行累积差分,分别提取步骤(5)提取的时敏目标运动区域中的累积差分图像,然后通过图像融合增强累积差分图像之间的差异,以得到运动目标检测结果。
CN201310332128.3A 2013-08-01 2013-08-01 一种机场空间关系约束下的时敏目标检测定位方法 Active CN103456027B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310332128.3A CN103456027B (zh) 2013-08-01 2013-08-01 一种机场空间关系约束下的时敏目标检测定位方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310332128.3A CN103456027B (zh) 2013-08-01 2013-08-01 一种机场空间关系约束下的时敏目标检测定位方法

Publications (2)

Publication Number Publication Date
CN103456027A CN103456027A (zh) 2013-12-18
CN103456027B true CN103456027B (zh) 2015-06-17

Family

ID=49738354

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310332128.3A Active CN103456027B (zh) 2013-08-01 2013-08-01 一种机场空间关系约束下的时敏目标检测定位方法

Country Status (1)

Country Link
CN (1) CN103456027B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104408401B (zh) * 2014-10-28 2017-08-15 中国科学院自动化研究所 一种时敏目标的在轨检测方法
CN108062574B (zh) * 2017-12-31 2020-06-16 厦门大学 一种基于特定类别空间约束的弱监督目标检测方法
CN109522808B (zh) * 2018-10-22 2019-09-20 杭州视在科技有限公司 一种停机坪上反光锥筒摆放的自动识别方法
CN110609261B (zh) * 2019-07-31 2024-03-26 四川九洲电器集团有限责任公司 一种多元多域一体化目标识别方法、装置及系统
CN112213264B (zh) * 2020-09-22 2024-04-05 武汉工程大学 用于景象匹配制导的机场参考图制备方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050078747A1 (en) * 2003-10-14 2005-04-14 Honeywell International Inc. Multi-stage moving object segmentation
CN101393641B (zh) * 2008-11-07 2010-06-09 华中科技大学 一种基于上下文的机场目标解译方法
CN102142147A (zh) * 2010-01-29 2011-08-03 索尼公司 场地内容分析装置和方法及目标检测与跟踪装置和方法
CN101944233B (zh) * 2010-09-25 2012-09-05 西北工业大学 高分辨遥感图像中快速提取机场目标的方法

Also Published As

Publication number Publication date
CN103456027A (zh) 2013-12-18

Similar Documents

Publication Publication Date Title
EP3519770B1 (en) Methods and systems for generating and using localisation reference data
KR102128851B1 (ko) 제1 랜드마크의 글로벌 위치를 결정하는 방법 및 시스템
CN107850448B (zh) 用于生成及使用定位参考数据的方法及系统
JP6301828B2 (ja) 誘導用線路に沿って移動する車両の速度及び位置を測定する装置、並びに対応する方法及びコンピュータプログラム製品
Brenner Extraction of features from mobile laser scanning data for future driver assistance systems
CN103456027B (zh) 一种机场空间关系约束下的时敏目标检测定位方法
Schlichting et al. Localization using automotive laser scanners and local pattern matching
Qu et al. Landmark based localization in urban environment
CN106407315A (zh) 一种基于街景图像数据库的车辆自主定位方法
CN110595476A (zh) 一种基于gps和图像视觉融合的无人机降落导航方法及装置
KR20150109633A (ko) 이동체의 위치 인식 장치 및 방법
CN110514212A (zh) 一种融合单目视觉和差分gnss的智能车地图地标定位方法
CN103697883B (zh) 一种基于天际线成像的飞行器水平姿态确定方法
Brenner Vehicle localization using landmarks obtained by a lidar mobile mapping system
KR20210034253A (ko) 위치 추정 장치 및 방법
CN101620672B (zh) 一种利用立体地标定位识别地面立体建筑物的方法
CN103488801B (zh) 一种基于地理信息空间库的机场目标检测方法
CN103456026B (zh) 一种公路地标约束下的地面运动目标检测方法
Zhang et al. AVP-Loc: Surround view localization and relocalization based on HD vector map for automated valet parking
CN109358315A (zh) 一种辅助目标间接定位方法及系统
CN113221883A (zh) 无人机飞行导航路线实时修正方法
CN108846363A (zh) 一种基于发散式扫描的分区域车底阴影检测方法
Ji et al. Particle filtering methods for georeferencing panoramic image sequence in complex urban scenes
CN103473787B (zh) 一种基于空间几何关系的桥梁上运动目标检测方法
KR102316818B1 (ko) 도로 네트워크를 갱신하는 방법 및 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant