CN1916801A - 无人机自主着陆的合作目标识别方法 - Google Patents

无人机自主着陆的合作目标识别方法 Download PDF

Info

Publication number
CN1916801A
CN1916801A CN 200510095085 CN200510095085A CN1916801A CN 1916801 A CN1916801 A CN 1916801A CN 200510095085 CN200510095085 CN 200510095085 CN 200510095085 A CN200510095085 A CN 200510095085A CN 1916801 A CN1916801 A CN 1916801A
Authority
CN
China
Prior art keywords
target
chain code
landing
cooperative target
unmanned plane
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 200510095085
Other languages
English (en)
Other versions
CN100464271C (zh
Inventor
徐贵力
倪立学
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Aeronautics and Astronautics
Original Assignee
Nanjing University of Aeronautics and Astronautics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Aeronautics and Astronautics filed Critical Nanjing University of Aeronautics and Astronautics
Priority to CNB2005100950857A priority Critical patent/CN100464271C/zh
Publication of CN1916801A publication Critical patent/CN1916801A/zh
Application granted granted Critical
Publication of CN100464271C publication Critical patent/CN100464271C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

一种无人机自主着陆的合作目标的识别方法,属于计算机视觉研究领域。本发明为了解决无人机的自主着陆和提高其机动性以及生存能力,提出利用设计的特殊的合作目标放置在广场或者公路上实现无人机的自主着陆,从合作目标自身的形状特征出发,提出了基于目标轮廓的方向链码提取目标的长宽比,进而识别出目标的一种新的方法,并通过目标的形状特征确定无人机自主着陆的方向。实验表明,该方法与传统的不变矩识别法相比,能够快捷和较好识别合作目标,为进一步进行无人机自主着陆的技术应用奠定了很好的基础。

Description

无人机自主着陆的合作目标识别方法
技术领域
本发明涉及一种无人机自主着陆合作目标的识别方法,具体讲是一种基于方向链码识别目标的新方法。属于计算机视觉研究领域。
背景技术
无人机的自主着陆是目前世界上众多国家迫切需要解决的问题。计算机视觉是目标探测与识别的有效手段之。由于其实现目标探测和识别的高度隐蔽性,且可以在被动状态下探测和识别目标。因而其也成为国内外在解决无人机自主着陆研究的一个重要方向。目前国外在利用计算机视觉解决无人机的自主着陆中主要有以下两种研究方法。方法一:通过识别跑道或附近的已知相对位置的特征点,从而计算出飞机相对跑道的位置和方向,但该研究主要是通过海上舰船的舰载特征点及烟囱发出的烟来完成无人直升机的自主着舰;方法二:通过已知机载的跑道三维模型资料库,假设某个观察点,生成期望的跑道合成透视图像,与用机载摄像机拍摄到的实际跑道图像对照,逼近到一定的误差范围内,就可以得出机载视觉系统,即飞机的位置,如美国加州大学伯克力分校(University of California at Berkeley)和南加州大学(University of Southern California)都使用具有特殊形状的人造着陆平台,其目的是简化图像处理过程,使无人直升机易于找到降落点。但上述的研究主要是针对无人直升机的应用。
也有文献提出了采用视觉/惯导作为主导航系统,并结合压力高度表,估算无人机相对于舰船的位置和速度,并实现无人机的自主着舰。但是由于其识别算法是以海平面作为为单一背景的三个单独的可视点实现无人机的自主着舰,因而对于要求自主着陆于陆地着陆跑道的无人机来说,由于其背景的复杂性及着陆的安全性、隐蔽性等因素,还需要作进一步的研究。
国内在利用计算机视觉实现无人机的自主着陆方面也陆续投入了研究,其主要是利用数字地图或景象匹配以及固定靶标等特征点实现无人机的目标定位。由于其需要无人机所飞行路径中具有明显的地形地貌特征或者固定的着陆跑道,这样无人机的航行自主性、灵活性则受到很大限制,也影响战时无人机任务执行的灵活性和机动性。
发明内容
本发明的目的是为了使无人机具有更大的机动性和更好的生存能力,提出了通过在广场或公路上预设合作目标,利用计算机视觉快速识别合作目标实现无人机的进场并自主着陆。由于飞机飞临着陆点的位置、飞行方向、高度等因素的影响,使目标产生旋转、平移、缩放等。但目标的长宽比却不会受到旋转、平移、缩放等因素的影响,因此,我们设计了特殊长宽比的长十字形状的合作目标,并且基于方向链码提出了更快捷的识别方法。
本发明是通过以下技术方案实现的,首先根据无人机着陆的特点设计特殊的合作目标,然后根据此目标提出基于方向链码的识别方法,最后得出着陆点的坐标和导引飞机着陆的方向。
以下对本发明作进一步的说明,方法包括如下步骤:
(1)中值滤波;
(2)根据图像中像素的邻域关系进行对象的分割;
(3)利用Sobel算子提取图像的边缘;
(4)计算出各个对象边缘的方向链码;
(5)根据方向链码得出对象的长宽比,并且与标准比值对比,从而识别出合作目标,根据光学成像关系得到飞机相对于合作目标的坐标:
(6)根据链码中最长的链码方向得出导引无人机的着陆方向。
本发明的不仅提高了无人机的着陆的机动灵活和生存能力,而且基于方向链码的识别算法和传统的不变矩识别算法相比,不但快捷而且识别精度较高。
附图说明
图1是合作目标的形状图。
图2是方向链码。
图3实验图像。
具体实施方式
1.合作目标的设计:
人们总是依据视野中各部分之间的亮度或颜色的差异,从环境中识别出目标。根据Purkinje效应可知,对视觉来说,在观察物体时,起决定作用的是物体和背景的亮度差异,所以目标探测与识别的理论一般都是基于目标与背景的亮度对比展开的。而目标一背景对比度的特性与目标的形状、发光或反射特性、大气传输特性和人眼或仪器的接收特性等因素密切相关。鉴于目前的机场着陆跑道(广场或公路)路面的实际情况,为了使无人机更易进场并自主着陆,且在机场(广场或公路)预设的合作目标更容易被识别出来,根据资料,本发明所设计的合作目标为黑色长十字形,其长宽比为 ,如图l所示。
2.合作目标的识别算法:
本识别算法的输入是图像中被分割出的各小目标的二值图像,输出则是目标轮廓的长、宽边像素点数的比例,即目标的长宽比,由此快速判断出所识别的目标是否为合作目标,并根据目标的长边确定出无人机的进场方向。
确定目标长宽比的算法主要有4个步骤:
第一步:根据所分割出的目标轮廓曲线,确定出目标轮廓的方向链码。
第二步:根据所计算出的各目标轮廓直线段对其形状作出初步判断。并将目标轮廓上明显长于其他轮廓的两条直线段从边界上分离出来。
第三步:计算出目标的两长边直线段及其之间所包含的较短边缘轮廓方向链码的数目,并与剩余的差分链码的数目进行比较。
第四步:根据上一步所计算出的比值进一步判断是否满足目标本身的尺寸比例,以此确定是否是合作目标。若是,则确定出着陆点的坐标和无人机的进场方向,并根据目标的长边确定出无人机的着陆方向。
具体步骤如下:
(1)提取目标轮廓的方向链码:
链码是沿着轮廓记录边缘表的一种表示方法。对于目标轮廓曲线上任意两个连续的点P1和P2,P2相对于P1只有8种可能的位置(图2)。并且链码规定了边缘表中每一个边缘点所对应的轮廓方向,这里采用8方向链码。
设点Pn、Pn+1方向上。由于目标是直线十字架型,则点Pn+2
Figure A20051009508500052
方向上的概率最大,然后是L4、L6,再次则是L3、L7,最后才是L2、L8。当确定了点Pn+2
Figure A20051009508500053
方向上,则在该方向上继续寻找Pn+3点,若方向改变,则得到一直线段。继续以该点为起点继续按照上述的概率顺序进行直线段的提取,直到目标的轮廓采用直线段表示出来。并将目标的轮廓通过方向链码表示出来。下面为实验中的一组目标轮廓的部分方向链码:
0000077655544454445444545444544445445444
差分链码是关于旋转不变的边界描述方法,即无论曲线如何旋转,其差分链码总是不变的。差分码的大小表示方向角的变化幅度,符号表示方向角的变化方向。设Fn、Fn+1为连续的两个方向链码,令Δ=Fn+1-Fn,则对该方向链码的差分码分析如下:
①Δ=0:两码值相等,曲线的方向角不变;
②Δ=±1:两码值相邻。若Δ=1,Pn+1的方向角按照链码的方向转变45°;若Δ=-1,则表示Pn+1的方向角按照链码的反方向转变45°;
③Δ=±2:两链码间隔一个码值。若Δ=2,Pn+1的方向角按照链码的方向转变90°;若Δ=-2,则Pn+1的方向角按照链码的反方向转变90°;
④Δ=±3:两链码间隔两个码值。若Δ=3,Pn+1的方向角按照链码的方向转变135°;若Δ=-3,则Pn+1的方向角按照链码的反方向转变135°;
⑤Δ=±4:此时两链码相对,方向转变180°。此种情况不会出现。对于负的差分链码一般将其值加上8。上述方向链码的差分链码为:
000070770070017001700171700170001701700
通过对差分链码的分析,可以分析目标轮廓曲线的变化方向。由于合作目标为特定长宽比的十字架形,无论方向如何变化,在不考虑长宽不等的情况下,总可以认为目标的轮廓线为90°的轨迹变化。所以这里主要是差分码的前三种情况。
(2)目标形状的分析和确定
通过直线段可以粗略的看出目标的形状,而轮廓的方向链码可以更好的对目标的形状进行分析和验证。
由于合作目标是特定长宽比(7×3)的十字架,且十字架的最长一边的长度约为剩余的每一边的5倍,所以对于确定出轮廓的直线段来说,其最长边的长度也大约为其剩余每一边的5倍或稍大于5倍。确定目标的重点就是确定出十字架目标的最长一部分的两条平行轮廓直线段,即先确定出目标的两条长边。
①在轮廓点的方向链码中按顺时针(或逆时针)寻找规律性的连续方向链码组(中间有少量断点的方向链码(一般为1或2点)也看作一个连续的方向链码组,通过前后两段链码是否在同一方向上来判断。若在同一方向上,则将其修正为连续的方向链码),并按照其方向链码的数目从大到小按序排列,记为P(i)。由于目标拐点非常容易失去,根据合作目标的形状可知i值应不小于12。
②比较p(1)和p(2)两组方向链码是否满足链码的平行排列。对两组方向链码的值进行比较:若方向链码的平均斜率相等,则两组方向链码的直线是平行的。
③比较最大的两个链码组的链码数目的比值是否近似等于1,即p(1)/p(2)。若接近于1,则继续比较p(3)/p(2)的值。由于图像处理时拐点容易失去,当长边和短边同时失去明显的拐点时,短边与长边的比值将会比原来的比值要小。由于合作目标的实际短边与长边的比值为0.2,因而判断其比较值的参考标准时选取0.2作为判断的标准。因而如果其值不大于0.2,则认为其初步符合目标寻找形状的要求。
④根据步骤1所获取的方向链码及其变化,可以确定出目标轮廓曲线的直线(即90°)变化,根据目标轮廓相邻直线之间的90°关系,进而可以确定出目标轮廓的直线段,即可判断出目标是否符合预设的合作目标的形状。
(3)求取目标的长宽比:
根据所得出的轮廓计算出方向链码数目的总和lz。然后根据所识别出的方向链码,相对较长的链码确定出长边的两方向链码组和其中所包括的较短的一边的方向链码组数目的总和lc。最后根据方向链码数目的比值得出目标的长宽比l:
l = l c l z - l c - - - ( 1 )
根据合作目标的自身的长宽比例可知l的理论值为11∶9(约为1.222)。由此可以快速的确定出合作目标。同时根据光学成像关系确定出飞机相对于合作目标的位置,并根据相对较长的链码组(即长边)的数值,确定出合作目标的长轴方向,这样既可以得到着陆的导引方向,来导引无人机以正确的方向着陆。
实验发表明,该方法可以很好的识别合作目标,而且识别所用时间短于常用的不变矩识别方法,为进一步进行无人机自主着陆的技术应用奠定了很好的基础。

Claims (3)

1、一种无人机自主着陆合作目标的识别方法,其特征在于,首先提出了利用长十字合作目标放置在广场或者公路上作为临时着陆点,再基于对象边缘的方向链码法识别出合作目标实现自主着陆的方法,从而使其具有更大的机动性和更好的生存能力。
2、根据权利要求1所述的无人机自主着陆合作目标的识别方法,其特征是,提出了长宽比特殊的易于识别的长十字合作目标,并且将其放置在广场或者公路上构成临时无人机着陆点。
3、根据权利要求1所述的无人机自主着陆合作目标的识别方法,其特征是,对本发明的识别方法进一步限定如下:
(1)中值滤波图像预处理;
(2)根据图像中像素的邻域关系进行对象的分割;
(3)利用Sobel算子提取图像的边缘;
(4)计算出各个对象边缘的方向链码;
(5)根据方向链码得出对象的长宽比,并且与标准比值对比,从而识别出合作目标,根据光学成像关系得到飞机相对于合作目标的坐标;
(6)根据链码中最长的链码方向得出导引无人机的着陆方向。
CNB2005100950857A 2005-10-28 2005-10-28 无人机自主着陆的合作目标识别方法 Expired - Fee Related CN100464271C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNB2005100950857A CN100464271C (zh) 2005-10-28 2005-10-28 无人机自主着陆的合作目标识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB2005100950857A CN100464271C (zh) 2005-10-28 2005-10-28 无人机自主着陆的合作目标识别方法

Publications (2)

Publication Number Publication Date
CN1916801A true CN1916801A (zh) 2007-02-21
CN100464271C CN100464271C (zh) 2009-02-25

Family

ID=37737812

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2005100950857A Expired - Fee Related CN100464271C (zh) 2005-10-28 2005-10-28 无人机自主着陆的合作目标识别方法

Country Status (1)

Country Link
CN (1) CN100464271C (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101833761A (zh) * 2010-04-20 2010-09-15 南京航空航天大学 基于合作目标特征线的无人机位姿估计方法
CN102298332A (zh) * 2010-12-30 2011-12-28 清华大学 无人直升机飞行动力学模型复合辨识方法
CN102914302A (zh) * 2012-09-12 2013-02-06 西北工业大学 一种无人机着陆视觉导航合作目标鲁棒检测方法
CN103218607A (zh) * 2013-04-11 2013-07-24 北京航空航天大学 一种用于无人机自主着舰的合作目标设计与定位方法
CN103700286A (zh) * 2013-12-11 2014-04-02 南京航空航天大学 一种舰载无人机自动着舰引导方法
CN104049641A (zh) * 2014-05-29 2014-09-17 深圳市大疆创新科技有限公司 一种自动降落方法、装置及飞行器
CN104408446A (zh) * 2014-12-19 2015-03-11 中国人民解放军国防科学技术大学 一种基于图像显著性的无人机自主着陆目标检测方法
CN104503459A (zh) * 2014-11-25 2015-04-08 深圳市鸣鑫航空科技有限公司 多旋翼无人机回收系统
CN105204515A (zh) * 2015-08-27 2015-12-30 泉州装备制造研究所 无人机自主着陆的测量解析及控制方法和装置
CN105912980A (zh) * 2016-03-31 2016-08-31 深圳奥比中光科技有限公司 无人机以及无人机系统
CN106687878A (zh) * 2014-10-31 2017-05-17 深圳市大疆创新科技有限公司 用于利用视觉标记进行监视的系统和方法
CN108398946A (zh) * 2018-01-25 2018-08-14 成都图灵智控科技有限公司 智能循迹精确定位装置与方法
CN112183159A (zh) * 2019-07-03 2021-01-05 四川大学 利用关键点构建非人类目标在图像中的骨架模型

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101833761A (zh) * 2010-04-20 2010-09-15 南京航空航天大学 基于合作目标特征线的无人机位姿估计方法
CN102298332A (zh) * 2010-12-30 2011-12-28 清华大学 无人直升机飞行动力学模型复合辨识方法
CN102914302B (zh) * 2012-09-12 2015-04-29 西北工业大学 一种无人机着陆视觉导航合作目标鲁棒检测方法
CN102914302A (zh) * 2012-09-12 2013-02-06 西北工业大学 一种无人机着陆视觉导航合作目标鲁棒检测方法
CN103218607A (zh) * 2013-04-11 2013-07-24 北京航空航天大学 一种用于无人机自主着舰的合作目标设计与定位方法
CN103218607B (zh) * 2013-04-11 2016-08-24 北京航空航天大学 一种用于无人机自主着舰的合作目标设计与定位方法
CN103700286A (zh) * 2013-12-11 2014-04-02 南京航空航天大学 一种舰载无人机自动着舰引导方法
CN103700286B (zh) * 2013-12-11 2015-07-29 南京航空航天大学 一种舰载无人机自动着舰引导方法
CN104049641A (zh) * 2014-05-29 2014-09-17 深圳市大疆创新科技有限公司 一种自动降落方法、装置及飞行器
US10691141B2 (en) 2014-10-31 2020-06-23 SZ DJI Technology Co., Ltd. Systems and methods for surveillance with a visual marker
US11442473B2 (en) 2014-10-31 2022-09-13 SZ DJI Technology Co., Ltd. Systems and methods for surveillance with a visual marker
CN106687878A (zh) * 2014-10-31 2017-05-17 深圳市大疆创新科技有限公司 用于利用视觉标记进行监视的系统和方法
US10698423B2 (en) 2014-10-31 2020-06-30 SZ DJI Technology Co., Ltd. Systems and methods for surveillance with a visual marker
CN104503459A (zh) * 2014-11-25 2015-04-08 深圳市鸣鑫航空科技有限公司 多旋翼无人机回收系统
CN104408446A (zh) * 2014-12-19 2015-03-11 中国人民解放军国防科学技术大学 一种基于图像显著性的无人机自主着陆目标检测方法
CN104408446B (zh) * 2014-12-19 2017-10-03 中国人民解放军国防科学技术大学 一种基于图像显著性的无人机自主着陆目标检测方法
CN105204515A (zh) * 2015-08-27 2015-12-30 泉州装备制造研究所 无人机自主着陆的测量解析及控制方法和装置
CN105204515B (zh) * 2015-08-27 2018-04-10 泉州装备制造研究所 无人机自主着陆的测量解析及控制方法和装置
CN105912980B (zh) * 2016-03-31 2019-08-30 深圳奥比中光科技有限公司 无人机以及无人机系统
CN105912980A (zh) * 2016-03-31 2016-08-31 深圳奥比中光科技有限公司 无人机以及无人机系统
CN108398946A (zh) * 2018-01-25 2018-08-14 成都图灵智控科技有限公司 智能循迹精确定位装置与方法
CN108398946B (zh) * 2018-01-25 2021-12-21 成都图灵时代科技有限公司 智能循迹精确定位装置与方法
CN112183159A (zh) * 2019-07-03 2021-01-05 四川大学 利用关键点构建非人类目标在图像中的骨架模型

Also Published As

Publication number Publication date
CN100464271C (zh) 2009-02-25

Similar Documents

Publication Publication Date Title
CN1916801A (zh) 无人机自主着陆的合作目标识别方法
CN111626290B (zh) 一种复杂海面环境下的红外舰船目标检测识别方法
CN103761524B (zh) 一种基于图像的线性目标识别与提取方法
CN101509782B (zh) 一种小型地标捕获定位方法
CN110443201B (zh) 基于多源影像联合形状分析与多属性融合的目标识别方法
Shen et al. A vision-based automatic safe landing-site detection system
CN107622231A (zh) 一种水天一体智能漂浮物收集系统及其收集方法
CN108596165B (zh) 基于无人机低空航拍图像的道路交通标线检测方法及系统
US9082219B2 (en) Orientation invariant object identification using model-based image processing
EP2166375A2 (en) System and method of extracting plane features
CN109740604A (zh) 一种行驶区域检测的方法和设备
CN103822635A (zh) 基于视觉信息的无人机飞行中空间位置实时计算方法
Shen et al. A new algorithm of building boundary extraction based on LIDAR data
CN103617328A (zh) 一种飞机三维姿态解算方法
CN111985274A (zh) 一种基于卷积神经网络的遥感图像分割算法
CN104913784A (zh) 一种行星表面导航特征自主提取方法
CN105513119A (zh) 一种基于无人机的路桥三维重建方法及装置
CN110472500A (zh) 一种基于高速无人艇的水面视觉目标快速检测算法
CN102063707A (zh) 基于均值漂移的灰关联红外成像目标分割方法
CN106500594B (zh) 融合反射强度和几何特征的铁路轨道半自动检测方法
CN102147867A (zh) 一种基于主体的国画图像和书法图像的识别方法
CN1958394A (zh) 一种快速星图识别方法
CN1598487A (zh) 人工路标视觉导航方法
CN117710458A (zh) 一种基于双目视觉的舰载机着舰过程相对位置测量方法及系统
CN106780577B (zh) 一种基于组特征的直线匹配方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Assignee: Chengdu Feiya Airborne Equipment Application Research Co., Ltd.

Assignor: Nanjing University of Aeronautics and Astronautics

Contract fulfillment period: 2009.3.24 to 2015.3.23 contract change

Contract record no.: 2009510000166

Denomination of invention: Method for identifying cooperated object for self-landing pilotless aircraft

Granted publication date: 20090225

License type: Exclusive license

Record date: 20091123

LIC Patent licence contract for exploitation submitted for record

Free format text: EXCLUSIVE LICENSE; TIME LIMIT OF IMPLEMENTING CONTACT: 2009.3.24 TO 2015.3.23; CHANGE OF CONTRACT

Name of requester: CHENGDU FEIYA AVIATION EQUIPMENT APPLICATION INSTI

Effective date: 20091123

C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090225

Termination date: 20111028