CN109859225A - 一种基于改进orb特征点匹配的无人机景象匹配定位方法 - Google Patents
一种基于改进orb特征点匹配的无人机景象匹配定位方法 Download PDFInfo
- Publication number
- CN109859225A CN109859225A CN201811578947.5A CN201811578947A CN109859225A CN 109859225 A CN109859225 A CN 109859225A CN 201811578947 A CN201811578947 A CN 201811578947A CN 109859225 A CN109859225 A CN 109859225A
- Authority
- CN
- China
- Prior art keywords
- point
- characteristic point
- orb
- matching
- scale
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 24
- 230000004807 localization Effects 0.000 title claims abstract description 8
- 230000007547 defect Effects 0.000 abstract description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000002567 autonomic effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000012887 quadratic function Methods 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- VMXUWOKSQNHOCA-UKTHLTGXSA-N ranitidine Chemical compound [O-][N+](=O)\C=C(/NC)NCCSCC1=CC=C(CN(C)C)O1 VMXUWOKSQNHOCA-UKTHLTGXSA-N 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
Landscapes
- Image Analysis (AREA)
Abstract
本发明提供了一种基于改进ORB特征点匹配的无人机景象匹配定位方法,将图像的尺度定义为一个函数,并将该尺度空间的局部极值点作为候选特征点,对尺度空间求得的极值点进行筛选,利用灰度质心法计算ORB特征点的方向,计算特征点半径r范围内的矩作为质心,特征点到质心之间的向量就是特征点的方向,使用Hamming距离对特征点进行匹配,两个图像上的特征点的Hamming距离小于设定阈值,即认为是匹配点。本发明通过在原有ORB算法上进行改进,既解决了原ORB不具备尺度不变性的缺陷,也保留了其快速计算的能力,在无人机获取的图像与地图库预存的图像尺度发生变化时也能够起到快速匹配的能力。
Description
技术领域
本发明涉及一种定位方法,属于视觉导航领域。
背景技术
近年来,无人机各方面性能不断提升,在城市反恐侦察、灾害监测、物流配送、交通疏导等军事和民用领域都有较为广泛的应用。当前无人机主要依赖于卫星导航定位,但由于卫导信号存在固有的脆弱性,极易受电磁、遮挡环境的影响,为无人机的任务实施留下了巨大隐患。
采用自主导航方式是解决卫导拒止环境下完成导航任务的有效途径,基于视觉的景象匹配是实现自主导航的有效手段之一。景象匹配导航源于巡航导弹景象匹配(SceneMatching Navigation System,SMNS)末端制导技术,其工作原理是:事先获取飞行器预定飞行区域的地物景象作为基准图像,并标注真实地理信息,存于飞行器机载计算机中作为基准图数据库;当飞行器飞到预定区域时,机载图像传感器实时获取当地景象作为实测图像送到机载计算机中和基准图像进行匹配比较。由于基准图的地理坐标位置是已知的,因此,根据与实测图的匹配位置,即可以确定当前飞行器的准确位置。因此,景象匹配导航是一种实现飞行器导航的自主绝对定位技术。无人机景象匹配定位方法通过使用预先存储包含精确地理信息的导航地图,利用一帧实拍图像与导航地图匹配即可实现飞行器的绝对定位。
景象匹配的实现中目前常用的是基于特征点匹配的方法,通过检测两幅图像目标的特征来实现匹配。Erhan Rublee在ORB:An efficient alternative to SIFT or SURF一文中提出的ORB(Oriented FAST and Rotated BRIEF)算法,虽然具有快速匹配的功能,但却不具备尺度不变性,在图像尺度发生变化时匹配效果较差。Jun Gao在Moving ObjectDetection for Driving Assistance System Based on Improved ORB FeatureMatching一文中通过对ORB算法进行改进,提高了该算法的匹配准确性;曾世聪等在基于算法改进的影像匹配方法基于ORB和角点方向夹角约束的快速图像配准方法一文中将ORB算法和角点方向夹角约束相结合,以角点方向夹角一致性作为约束条件,剔除误配点,有效降低了错误匹配率;陈慧颖等人在基于ORB算法改进的影像匹配方法一文中通过增加核线约束及相关系数条件,并结合最小二乘匹配算法,使得算法对大角度旋转影像具有一定适应性。但是上述方法均未解决ORB算法不具备尺度不变性的缺陷,在两幅待匹配的图像尺度大小不一致时,匹配正确率将大大下降。
发明内容
为了克服现有技术的不足,本发明提供一种基于改进ORB特征点匹配的景象匹配定位方法。在图像尺度发生变化的情况下,也能较好的实现快速匹配定位。
本发明解决其技术问题所采用的技术方案包括以下步骤:
(1)将图像的尺度定义为一个函数F(x,y),x为图像像素坐标横轴,y为图像像素坐标纵轴,通过与高斯函数卷积得到尺度空间,并将该尺度空间的局部极值点作为候选特征点;
(2)对尺度空间求得的极值点进行筛选,去除对比度小于设定阈值的不稳定特征点和边界极值点;
(3)利用灰度质心法计算ORB特征点的方向;计算特征点半径r范围内的矩作为质心,特征点到质心之间的向量就是特征点的方向;
(4)使用Hamming距离对特征点进行匹配,两个图像上的特征点的Hamming距离小于设定阈值,即认为是匹配点。
本发明的有益效果是:通过在原有ORB算法上进行改进,既解决了原ORB不具备尺度不变性的缺陷,也保留了其快速计算的能力。在无人机获取的图像与地图库预存的图像尺度发生变化时也能够起到快速匹配的能力。
附图说明
图1是改进ORB算法流程图;
图2是为待匹配的两张不同尺度的图像,其中,(a)表示来自高精度地图库的截图,(b)表示来自无人机相机获取的图像帧;
图3是改进ORC算法的匹配点对示意图。
具体实施方式
下面结合附图和实施例对本发明进一步说明,本发明包括但不仅限于下述实施例。
本发明为基于改进ORB(Oriented FAST and Rotated BRIEF)特征点匹配的无人机景象匹自主定位方法,通过获取环境实时图像与高精度地图库进行匹配来对无人机进行定位,可为无人机等各类低空飞行平台提供导航定位参数。
本发明包括以下步骤:
(1)建立尺度空间并求取极值点:将图像的尺度定义为一个函数F(x,y),x为图像像素坐标横轴,y为图像像素坐标纵轴,通过与高斯函数卷积得到尺度空间,并将该尺度空间的局部极值点作为候选特征点。
(2)获取稳定特征点:通过对尺度空间求得的极值点进行筛选,去除对比度小于阈值的不稳定特征点和边界极值点。
(3)特征点质心方向计算:利用灰度质心法来计算ORB特征点的方向。通过计算特征点半径r范围内的矩作为质心,特征点到质心之间构成的向量就是特征点的方向。
(4)ORB特征匹配及过滤:通过使用Hamming距离对特征点进行匹配,由于匹配点与非匹配点的Hamming距离有着明显的不同,通过设定阈值来实现匹配。
本发明的实施例是一种利用改进ORB特征点匹配的无人机景象匹配定位方法,在预存了该区域的高精度地图库后,利用无人机实时获取的图像与地图库数据进行景象匹配来对无人机进行定位。改进ORB算法流程如图1所示,通过建立多尺度空间来提取具备尺度不变性的特征点,筛选出稳定的特征点,然后再对特征点进行ORB描述,生成ORB描述子,进而利用Hamming距离进行特征点匹配,最终在预存的高精度地图库上标识出无人机的当前位置。两张待匹配的不同尺度的图像,见图2,图2(a)表示来自高精度地图库的截图,图2(b)表示来自无人机相机获取的图像帧。
本发明实施例的具体实施步骤如下:
(1)建立尺度空间并求取极值点:在一定约束下,高斯函数是最优的尺度空间的平滑核函数。将图像F(x,y)的尺度定义为一个函数L(x,y,σ)(σ为尺度因子),它由高斯函数G(x,y,σ)和图像F(x,y)卷积得到:
为在尺度空间获得有效稳定的特征点,在高斯差分函数与图像卷积得到的空间D(x,y,σ)中寻找极值点,其局部极值点作为尺度空间的候选特征点:
其中,k为相邻两个尺度空间的尺度倍数关系,一般取值范围0.7~0.9,在本方法中k取0.8。
寻找极值点时,每一个像素点和它所有相邻点比较,当它大于(或小于)它的图像域和尺度域的所有相邻点时,即为极值点。
(2)获取稳定特征点:在求得尺度空间的极值点后,需要对极值点进行筛选,去除不稳定的极值点,来增强特征点匹配时的稳定性和抗噪能力。对于某个尺度上求得的极值点,通过3维的二次函数求该极值点在原图像上的位置,并去除低对比度的极值点。首先在某极值点处对D(x,y,σ)进行泰勒展开:
式中对X求偏倒数,并令偏导数为零,可以得到极值点
将其带入上式可得:
如果的绝对值小于某一阈值,在本方法设定为0.03,则将对应的极值点去除,从而滤除低对比度的极值点。
为了得到稳定的极值点,还需去除边缘上的极值点,这可以通过计算主曲率比值来实现。首先计算待检测极值点的海瑟矩阵:
设α是H最大的特征值,β是最小的特征值,由矩阵性质可知:
由于H的特征值与D的主曲率对应成比例,所以只需要关心特征值的比值。设γ是最大、最小特征值的比值,即α=γβ,可求得:
上式的结果只和两个特征值的比例有关,而与具体特征值无关,因其随着γ的增加而增加。所以要想检查主曲率的比值小于某一阈值γ,只要检查下式是否成立:
当阈值γ=8,即认为主曲率比值大于8的极值点为边缘上的点,从而被滤除。
(3)特征点质心方向计算:ORB算法采用灰度质心法来计算ORB特征点的方向。通过计算特征点半径r范围内的矩作为质心,特征点到质心之间构成的向量就是特征点的方向。矩mpq定义为公式:
mpq=∑x,y∈rxpyqI(x,y)
其中,p+q为特征点半径r范围内的矩,I(x,y)为点(x,y)处的灰度值。
可知m00表示特征点邻域的像素和,m10表示仅以横坐标值为权重的邻域像素和,m01表示仅以纵坐标值为权重的邻域像素和。由矩计算图像的质心C为:
特征点与质心的向量角度θ就是ORB特征点的方向,
θ=arctan(Cy,Cx)
其中,Cx,Cy分别为质心C在x,y方向的质心坐标值。
(4)ORB特征匹配及过滤:图像的相似度量化就是计算图像的特征点描述子之间的距离,常用的距离计算方式有欧式距离、余弦距离、切比雪夫距离、汉明距离等。汉明距离常用来计算两个等长字符串的差异,本方法选用汉明距离计算ORB特征描述子间的相似度。
两张图像的ORB特征点匹配,就是计算第一张图像上每个ORB特征点描述子与第二张图像上所有ORB特征点描述子间的汉明距离,汉明距离越小,两个ORB特征点匹配度越高。两幅图像特征点汉明距离记作D(Vp,Vq),对于n维的描述子计算方式见如下公式:
其中Vp是第一张图像特征点p的描述子,Vq是第二张图像特征点q的描述子,pi和qi是各自描述子上的一位二进制位。
以图2(a)作为基准,以汉明距离计算每个ORB特征点在图2(b)图中的最佳匹配点,每个匹配点对间用一条直线相连,得到图3。可见改进后的ORB算法在不同尺度的图像匹配中仍具有较好的效果。
当无人机飞到预定区域时,机载图像传感器实时获取当地景象作为实测图像送到机载计算机中和基准图像进行匹配,由于基准图的地理坐标位置是已知的,因此,根据与实测图的匹配位置,即可以确定当前飞行器的准确位置。
以上实施例仅用于说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围。
Claims (1)
1.一种基于改进ORB特征点匹配的无人机景象匹配定位方法,其特征在于包括下述步骤:
(1)将图像的尺度定义为一个函数F(x,y),x为图像像素坐标横轴,y为图像像素坐标纵轴,通过与高斯函数卷积得到尺度空间,并将该尺度空间的局部极值点作为候选特征点;
(2)对尺度空间求得的极值点进行筛选,去除对比度小于设定阈值的不稳定特征点和边界极值点;
(3)利用灰度质心法计算ORB特征点的方向;计算特征点半径r范围内的矩作为质心,特征点到质心之间的向量就是特征点的方向;
(4)使用Hamming距离对特征点进行匹配,两个图像上的特征点的Hamming距离小于设定阈值,即认为是匹配点。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811578947.5A CN109859225A (zh) | 2018-12-24 | 2018-12-24 | 一种基于改进orb特征点匹配的无人机景象匹配定位方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811578947.5A CN109859225A (zh) | 2018-12-24 | 2018-12-24 | 一种基于改进orb特征点匹配的无人机景象匹配定位方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109859225A true CN109859225A (zh) | 2019-06-07 |
Family
ID=66892093
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811578947.5A Pending CN109859225A (zh) | 2018-12-24 | 2018-12-24 | 一种基于改进orb特征点匹配的无人机景象匹配定位方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109859225A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110631588A (zh) * | 2019-09-23 | 2019-12-31 | 电子科技大学 | 一种基于rbf网络的无人机视觉导航定位方法 |
CN110941989A (zh) * | 2019-10-18 | 2020-03-31 | 北京达佳互联信息技术有限公司 | 图像校验、视频校验方法、装置、设备及存储介质 |
CN112037193A (zh) * | 2020-08-28 | 2020-12-04 | 长安大学 | 一种电力线路特征标记方法及装置 |
CN112115770A (zh) * | 2020-08-05 | 2020-12-22 | 中国电力科学研究院有限公司 | 一种用于架空线路无人机自主巡检缺陷识别的方法及系统 |
CN113537351A (zh) * | 2021-07-16 | 2021-10-22 | 重庆邮电大学 | 面向移动设备拍摄的遥感图像坐标匹配方法 |
CN114283065A (zh) * | 2021-12-28 | 2022-04-05 | 北京理工大学 | 一种基于硬件加速的orb特征点匹配系统及匹配方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104850851A (zh) * | 2015-04-22 | 2015-08-19 | 福州大学 | 一种具有尺度不变性的orb特征点匹配方法 |
WO2016062159A1 (zh) * | 2014-10-20 | 2016-04-28 | 网易(杭州)网络有限公司 | 图像匹配方法及手机应用测试平台 |
-
2018
- 2018-12-24 CN CN201811578947.5A patent/CN109859225A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016062159A1 (zh) * | 2014-10-20 | 2016-04-28 | 网易(杭州)网络有限公司 | 图像匹配方法及手机应用测试平台 |
CN104850851A (zh) * | 2015-04-22 | 2015-08-19 | 福州大学 | 一种具有尺度不变性的orb特征点匹配方法 |
Non-Patent Citations (2)
Title |
---|
曾海长等: "基于改进ORB的无人机航拍图像拼接算法", 《工业控制计算机》 * |
陈天华等: "基于改进ORB和对称匹配的图像特征点匹配", 《计算机系统应用》 * |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110631588A (zh) * | 2019-09-23 | 2019-12-31 | 电子科技大学 | 一种基于rbf网络的无人机视觉导航定位方法 |
CN110941989A (zh) * | 2019-10-18 | 2020-03-31 | 北京达佳互联信息技术有限公司 | 图像校验、视频校验方法、装置、设备及存储介质 |
US11625819B2 (en) | 2019-10-18 | 2023-04-11 | Beijing Dajia Internet Information Technology Co., Ltd. | Method and device for verifying image and video |
CN112115770A (zh) * | 2020-08-05 | 2020-12-22 | 中国电力科学研究院有限公司 | 一种用于架空线路无人机自主巡检缺陷识别的方法及系统 |
CN112037193A (zh) * | 2020-08-28 | 2020-12-04 | 长安大学 | 一种电力线路特征标记方法及装置 |
CN113537351A (zh) * | 2021-07-16 | 2021-10-22 | 重庆邮电大学 | 面向移动设备拍摄的遥感图像坐标匹配方法 |
CN114283065A (zh) * | 2021-12-28 | 2022-04-05 | 北京理工大学 | 一种基于硬件加速的orb特征点匹配系统及匹配方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109859225A (zh) | 一种基于改进orb特征点匹配的无人机景象匹配定位方法 | |
Ding et al. | Object detection in aerial images: A large-scale benchmark and challenges | |
CN111583110B (zh) | 一种航拍图像的拼接方法 | |
CN107690840B (zh) | 无人机视觉辅助导航方法及系统 | |
EP3309751A1 (en) | Image processing device, method, and program | |
CN109341700B (zh) | 一种低能见度下固定翼飞机视觉辅助着陆导航方法 | |
CN103337052B (zh) | 面向宽幅遥感影像的自动几何纠正方法 | |
WO2020090428A1 (ja) | 地物検出装置、地物検出方法および地物検出プログラム | |
CN103697855B (zh) | 一种基于海天线检测的船体水平姿态测量方法 | |
US9569668B2 (en) | Method and device for image-assisted runway localization | |
CN108491838A (zh) | 基于sift和hough的指针型仪表示数读取方法 | |
CN110222638B (zh) | 一种基于素描图候选框策略和Fast R-CNN的飞机目标检测方法 | |
US20210090285A1 (en) | Method and apparatus with location estimation | |
CN111507204A (zh) | 倒计时信号灯的检测方法、装置、电子设备及存储介质 | |
CN112529957A (zh) | 确定摄像设备位姿的方法和装置、存储介质、电子设备 | |
CN114280583B (zh) | 无gps信号下激光雷达定位精度验证方法及系统 | |
CN117218201A (zh) | Gnss拒止条件下无人机影像定位精度提升方法及系统 | |
CN112634130A (zh) | Quick-SIFT算子下无人机航拍图像拼接方法 | |
Bhanu et al. | Qualitative target motion detection and tracking | |
CN116704037B (zh) | 一种基于图像处理技术的卫星失锁重定位方法及系统 | |
Zhang et al. | Infrared-based autonomous navigation for civil aircraft precision approach and landing | |
CN117870659A (zh) | 基于点线特征的视觉惯性组合导航算法 | |
Abratkiewicz et al. | The concept of applying a SIFT algorithm and orthophotomaps in SAR-based augmented integrity navigation systems | |
CN114241022A (zh) | 一种无人机图像自动配准方法及系统 | |
CN109003295A (zh) | 一种无人机航空影像快速匹配方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20190607 |