CN115049708A - 基于lsd直线检测与模板匹配的sar图像配准方法 - Google Patents
基于lsd直线检测与模板匹配的sar图像配准方法 Download PDFInfo
- Publication number
- CN115049708A CN115049708A CN202210379931.1A CN202210379931A CN115049708A CN 115049708 A CN115049708 A CN 115049708A CN 202210379931 A CN202210379931 A CN 202210379931A CN 115049708 A CN115049708 A CN 115049708A
- Authority
- CN
- China
- Prior art keywords
- image
- sar image
- calculating
- sar
- satellite digital
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000001514 detection method Methods 0.000 title claims abstract description 29
- 230000009466 transformation Effects 0.000 claims abstract description 55
- 239000011159 matrix material Substances 0.000 claims abstract description 31
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 claims abstract description 19
- 238000013519 translation Methods 0.000 claims abstract description 19
- 238000007781 pre-processing Methods 0.000 claims abstract description 11
- 238000001914 filtration Methods 0.000 claims description 42
- 238000012545 processing Methods 0.000 claims description 20
- 238000003708 edge detection Methods 0.000 claims description 11
- 230000000877 morphologic effect Effects 0.000 claims description 11
- 230000001629 suppression Effects 0.000 claims description 9
- 102000002274 Matrix Metalloproteinases Human genes 0.000 claims description 4
- 108010000684 Matrix Metalloproteinases Proteins 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 4
- 238000012216 screening Methods 0.000 claims description 4
- 238000010606 normalization Methods 0.000 claims description 3
- 238000010276 construction Methods 0.000 claims description 2
- 241000896693 Disa Species 0.000 claims 1
- 238000003384 imaging method Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000005923 long-lasting effect Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration by the use of local operators
- G06T5/30—Erosion or dilatation, e.g. thinning
-
- G06T5/70—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10032—Satellite or aerial image; Remote sensing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10032—Satellite or aerial image; Remote sensing
- G06T2207/10044—Radar image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20036—Morphological image processing
Abstract
本发明公开的基于LSD(Line Segment Detector)直线检测与模板匹配的SAR图像配准方法,包括:读取SAR图像与卫星数字地图,构建待配准图像对并进行预处理;采用LSD直线检测方法检测预处理结果中的直线特征;计算待配准图像之间的尺度参数、角度参数,计算变换矩阵;采用变换矩阵对SAR图像进行仿射变换;选择模板与卫星数字地图进行匹配;根据模板匹配结果计算出SAR图像相对于卫星数字地图平移量;根据平移量和变换矩阵,再次对SAR图像进行仿射变换,实现SAR图像与卫星数字地图的配准工作,计算匹配点坐标;根据匹配点坐标获取目标点经纬度信息。本发明能够获取高精度配准结果,具有很好的鲁棒性。
Description
技术领域
本发明涉及SAR图像配准技术领域,具体涉及基于LSD直线检测与模板匹配的SAR图像配准方法。
背景技术
合成孔径雷达(Synthetic Aperture Radar,SAR)成像具有全天时、全天候、可穿透性等优点,以及它在不同频段、不同极化下可得到目标的高分辨率雷达图像,为人们提供非常有用的目标信息,因此,一直以来针对SAR图像配准的研究热度经久不息,大量研究成果已经被广泛应用于经济和科技等众多领域,有着广泛的应用前景和发展潜力。
图像配准方法一般分为两种:一种是基于灰度的方法,另一种是基于特征的方法。基于灰度的方法使用图像或者图像块的灰度信息,通过相似性度量算法,测度两幅对应图像或对应图像块之间的相似性,搜索参数空间,寻找相似性最优的变换模型的参数值,从而实现图像配准,但是因为其全局优化的计算复杂度太高是不太适用于对时间要求比较严格的配准的。基于特征的方法用对图像中具有稳定性和重复性图像特征的分析,代替对整个图像的分析,降低计算量以及配准算法对传感器变化的敏感性。
对比基于灰度的方法,基于特征的方法因为具有更好的重复性和稳定性,所以它具有更强大的区分能力,对局部有差异的图像对有更好的鲁棒性。而且基于特征的方法使用少量图像特征,对相同图像来说,算法的运算性能普遍高于基于灰度的方法。同时,因为SAR图像分辨率高、数据量大、受噪声影响严重的问题,现有的配准算法处理速度很慢,所以为了高效性和高精度的合成孔径雷达图像的配准,对原有的配准算法改进使其具有高效性和高精度特性是一种比较普遍存在的方式。因为基于特征方法相较于基于灰度方法具有计算量低的特征,所以基于特征的方法是当前SAR图像使用最多的配准方法。
由于SAR图像的成像方式与可见光成像方式的不同,造成两种不同图像在点特征上的差异,若仅依赖某一类特征对SAR图像与卫星数字地图进行配准,二者之间匹配存在较大的误差。
发明内容
发明目的:本发明目的在于针对现有技术的不足,提供基于LSD(Line SegmentDetector)直线检测与模板匹配的SAR图像配准方法,能够获取高精度配准结果,实现目标的精准定位,并且对视角和光照变化具有很好的鲁棒性,结果准确、误检可控。
技术方案:本发明所述基于LSD直线检测与模板匹配的SAR图像配准方法,包括如下步骤:
S6:在仿射变换后的SAR图像中选择模板,根据归一化模板匹配算法对选择的模板与卫星数字地图进行匹配;
S7:根据模板匹配结果计算出SAR图像相对于卫星数字地图在x轴方向以及y轴方向上的平移量;
进一步完善上述技术方案,所述S1中对进行的预处理操作包括灰度化、滤波、二值化、形态学运算、高斯滤波、Canny边缘检测,对进行的预处理操作包括灰度化、滤波、二值化、形态学运算、相干斑抑制、高斯滤波、Canny边缘检测。
进一步地,所述S1中灰度化、滤波、二值化、形态学运算、相干斑抑制、高斯滤波、Canny边缘检测的处理过程包括:
S11:采用平均值法对待配准图像对进行灰度化处理
S12:对待配准图像对进行滤波处理,然后对滤波结果进行二值化处理,再根据二值化图像中非零像素个数的占比重复滤波及二值化操作,迭代至非零像素个数占比达到预设阈值;
设置卷积核kernel的大小,以核内中心位置对应的像素为目标像素,使用kernel对待配准图像对进行卷积操作,卷积结果为:
按从左到右,从上到下滑动卷积核,直到处理完图像最后一个像素;
相干斑噪声抑制步骤如下:
进一步地,所述S2包括:
利用伪排序得到梯度幅值大的点作为种子点,以该点水平线角度作为区域的初始角度,在八邻域中寻找与的偏差小于预设阈值的点,将该点加入到区域中并更新,得到线支持区域,最后通过矩形逼近得到直线特征,检测到的直线特征以点数据的形式进行存储,分别表示为、;
S223、提取距离间隔较大的直线特征,
进一步地,所述S3包括:
S332、计算SAR图像与卫星数字地图中每组平行直线极坐标的极径差
将SAR图像的旋转中心点平移至坐标原点,对应的变换矩阵为:
进一步地,所述S7包括:
有益效果:与现有技术相比,本发明的优点在于:本发明通过分析SAR图像中关键区域的线、面特征之间的属性关联,选择图像中目标线、面特征对SAR图像进行智能配准,提高了SAR图像与卫星数字地图的配准精准度,降低目标匹配错误概率,采用直线检测与模板匹配的配准方法,相对于单独的直线检测,具有更好的匹配精度,效果也会更好。本发明能够获取高精度配准结果,实现目标的精准定位,并且对视角和光照变化具有很好的鲁棒性,结果准确、误检可控。
附图说明
图1是本发明的方法处理流程图;
图2是滤波卷积核的示意图;
图3是待卷积图像区域;
图4是SAR图像的仿射变换前的示意图;
图5是SAR图像的仿射变换后的示意图;
图6是SAR图像与卫星数字地图匹配结果;
图7是SAR图像中已匹配目标的经纬度信息结果。
具体实施方式
下面通过附图对本发明技术方案进行详细说明,但是本发明的保护范围不局限于所述实施例。
如图1所示的基于LSD直线检测与模板匹配的SAR图像配准方法,
S1:对待配准图像对进行预处理,主要包括灰度化、滤波、二值化、形态学运算、相干斑抑制、高斯滤波、Canny边缘检测;
S2:采用LSD直线检测方法检测图像预处理结果中的直线特征;
S3:根据直线特征计算待配准图像之间的尺度参数、角度参数;
S4:根据尺度参数与角度参数计算变换矩阵;
S5:对SAR图像进行仿射变换;
S6:在仿射变换后的SAR图像中选择模板,根据归一化模板匹配算法对选择的模板与卫星数字地图进行匹配;
S7:通过模板匹配结果计算出在x轴方向与y轴方向的平移量;
S8:根据平移量与变换矩阵,再次对SAR图像进行仿射变换,实现SAR图像与卫星数字地图的配准工作,计算匹配点;
S9:采用匹配点坐标计算目标点经纬度信息。
S1:对待配准图像对进行预处理,主要包括灰度化、滤波、二值化、形态学运算,相干斑抑制,高斯滤波、Canny边缘检测。
最终将待配准图像对按公式1处理,得到SAR图像与卫星数字地图的灰度图。
S12、对待配准图像进行滤波处理,提高对比度,突显图像边缘等特征,然后对滤波结果进行二值化处理,再根据二值化图像中非零像素个数的占比重复滤波与二值化操作,迭代至非零像素个数占比达到预设阈值。
设卷积核kernel的大小为(kernel的大小根据实际情况可以设置),如图2所示。以核内中心位置对应的像素为目标像素,使用kernel对待配准图像对进行卷积操作,对应待卷积的图像区域如图3所示,卷积结果为:
按从左到右、从上到下滑动卷积核,直到处理完图像最后一个像素。
相干斑噪声抑制步骤如下:
S2:采用LSD直线检测方法检测图像预处理结果中的直线特征。
本发明在采用LSD直线检测方法之前对图像进行去噪与边缘提取操作,能够提取出质量较高的直线特征。
S21:LSD直线检测方法能在线性的时间内得出亚像素级精度的检测结果,且无需调节任何参数。
利用伪排序得到梯度幅值大的点作为种子点,以该点水平线角度作为区域的初始角度,在八邻域中寻找与的偏差小于预设阈值的点,将该点加入到区域中并更新,得到线支持区域,最后通过矩形逼近得到直线特征,检测到的直线特征以点数据的形式进行存储,分别表示为、。
筛选步骤如下:
3)提取距离间隔较大的直线特征,
S3:根据直线特征计算待配准图像之间的尺度参数、角度参数。
3)计算极坐标的极角与极径:
尺度参数计算步骤如下:
2)计算SAR图像与卫星数字地图中每组平行直线极坐标的极径差,
S4:根据尺度参数与角度参数计算变换矩阵。
S5:对SAR图像进行仿射变换。
步骤6:在仿射变换后的SAR图像中选择模板,根据归一化模板匹配算法对选择的模板与卫星数字地图进行匹配。
S62:在二值化后的卫星数字地图结果上,从左到右,从上到下计算模板图像与重叠子图像的匹配度量值,将匹配度量值保存到结果图像矩阵中,在中的每个位置都包含匹配度量值,匹配度量值由归一化模板匹配算法计算得到,如下式:
步骤7:通过模板匹配结果计算出在x轴方向与y轴方向的平移量。
采用模板图像中心点在SAR图像中的坐标信息,与模板图像在卫星数字地图中最佳匹配位置坐标信息,计算出SAR图像相对卫星数字地图在x轴方向与y轴方向的平移量,如下式:
匹配结果如图6所示,其中A点为SAR图像中的目标点,B点为卫星数字地图中与A对应的匹配点。
步骤9:采用匹配点坐标计算目标点经纬度信息。
如上所述,尽管参照特定的优选实施例已经表示和表述了本发明,但其不得解释为对本发明自身的限制。在不脱离所附权利要求定义的本发明的精神和范围前提下,可对其在形式上和细节上作出各种变化。
Claims (10)
1.基于LSD直线检测与模板匹配的SAR图像配准方法,其特征在于,包括如下步骤:
S6:在仿射变换后的SAR图像中选择模板,根据归一化模板匹配算法对选择的模板与卫星数字地图进行匹配;
3.根据权利要求1所述的改进的基于LSD直线检测与模板匹配的SAR图像区域配准方法,其特征在于,所述S1中灰度化、滤波、二值化、形态学运算、相干斑抑制、高斯滤波、Canny边缘检测的处理过程包括:
S11:采用平均值法对待配准图像对进行灰度化处理
S12:对SAR图像与卫星数字地图的灰度图归一化后进行滤波处理,然后对滤波结果进行二值化处理,再根据二值化图像中非零像素个数的占比重复滤波及二值化操作,迭代至非零像素个数占比达到预设阈值,包括:
设置卷积核kernel的大小,以核内中心位置对应的像素为目标像素,使用kernel对待配准图像对进行卷积操作,卷积结果为:
按从左到右、从上到下滑动卷积核,直到处理完图像最后一个像素;
相干斑噪声抑制步骤如下:
4.根据权利要求2所述的改进的基于LSD直线检测与模板匹配的SAR图像区域配准方法,其特征在于:所述S2包括
利用伪排序得到梯度幅值大的点作为种子点,以该点水平线角度作为区域的初始角度,在八邻域中寻找与的偏差小于预设阈值的点,将该点加入到区域中并更新,得到线支持区域,最后通过矩形逼近得到直线特征,检测到的直线特征以点数据的形式进行存储,分别表示为、;
S223、提取距离间隔较大的直线特征,
5.根据权利要求3所述的改进的基于LSD直线检测与模板匹配的SAR图像区域配准方法,其特征在于:所述S3包括
S332、计算SAR图像与卫星数字地图中每组平行直线极坐标的极径差
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210379931.1A CN115049708B (zh) | 2022-04-12 | 2022-04-12 | 基于lsd直线检测与模板匹配的sar图像配准方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210379931.1A CN115049708B (zh) | 2022-04-12 | 2022-04-12 | 基于lsd直线检测与模板匹配的sar图像配准方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115049708A true CN115049708A (zh) | 2022-09-13 |
CN115049708B CN115049708B (zh) | 2023-04-07 |
Family
ID=83157883
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210379931.1A Active CN115049708B (zh) | 2022-04-12 | 2022-04-12 | 基于lsd直线检测与模板匹配的sar图像配准方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115049708B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120274505A1 (en) * | 2011-04-27 | 2012-11-01 | Lockheed Martin Corporation | Automated registration of synthetic aperture radar imagery with high resolution digital elevation models |
CN103295232A (zh) * | 2013-05-15 | 2013-09-11 | 西安电子科技大学 | 基于直线和区域的sar图像配准方法 |
CN105184801A (zh) * | 2015-09-28 | 2015-12-23 | 武汉大学 | 一种基于多层次策略的光学与sar影像高精度配准方法 |
CN107301661A (zh) * | 2017-07-10 | 2017-10-27 | 中国科学院遥感与数字地球研究所 | 基于边缘点特征的高分辨率遥感图像配准方法 |
CN111145228A (zh) * | 2019-12-23 | 2020-05-12 | 西安电子科技大学 | 基于局部轮廓点与形状特征融合的异源图像配准方法 |
CN113256653A (zh) * | 2021-05-25 | 2021-08-13 | 南京信息工程大学 | 一种面向高层地物的异源高分遥感影像配准方法 |
-
2022
- 2022-04-12 CN CN202210379931.1A patent/CN115049708B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120274505A1 (en) * | 2011-04-27 | 2012-11-01 | Lockheed Martin Corporation | Automated registration of synthetic aperture radar imagery with high resolution digital elevation models |
CN103295232A (zh) * | 2013-05-15 | 2013-09-11 | 西安电子科技大学 | 基于直线和区域的sar图像配准方法 |
CN105184801A (zh) * | 2015-09-28 | 2015-12-23 | 武汉大学 | 一种基于多层次策略的光学与sar影像高精度配准方法 |
CN107301661A (zh) * | 2017-07-10 | 2017-10-27 | 中国科学院遥感与数字地球研究所 | 基于边缘点特征的高分辨率遥感图像配准方法 |
CN111145228A (zh) * | 2019-12-23 | 2020-05-12 | 西安电子科技大学 | 基于局部轮廓点与形状特征融合的异源图像配准方法 |
CN113256653A (zh) * | 2021-05-25 | 2021-08-13 | 南京信息工程大学 | 一种面向高层地物的异源高分遥感影像配准方法 |
Non-Patent Citations (3)
Title |
---|
CHENGUANG LIU ET AL.: "\"A Line Segment Detector for SAR Images with Controlled False Alarm Rate\"" * |
WU PENG ET AL.: ""Fast and Robust SAR Image Matching Algorithm"" * |
刘中杰等: ""基于控制线方法的机载SAR和可见光图像匹配应用研究"" * |
Also Published As
Publication number | Publication date |
---|---|
CN115049708B (zh) | 2023-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107301661B (zh) | 基于边缘点特征的高分辨率遥感图像配准方法 | |
CN108109163A (zh) | 一种航拍视频的运动目标检测方法 | |
CN107688777B (zh) | 一种协同多源遥感影像的城市绿地提取方法 | |
CN110070545B (zh) | 一种城镇纹理特征密度自动提取城镇建成区的方法 | |
CN111369605A (zh) | 一种基于边缘特征的红外与可见光图像的配准方法和系统 | |
CN108564532B (zh) | 大尺度地距星载sar图像镶嵌方法 | |
CN111008664A (zh) | 一种基于空谱联合特征的高光谱海冰检测方法 | |
CN114897705A (zh) | 一种基于特征优化的无人机遥感图像拼接方法 | |
CN112734729A (zh) | 适用于夜间补光条件的水尺水位线图像检测方法、装置及存储介质 | |
CN114723677A (zh) | 图像缺陷检测方法、检测装置、检测设备及存储介质 | |
CN113609984A (zh) | 一种指针式仪表读数识别方法、装置及电子设备 | |
CN111950559A (zh) | 一种基于径向灰度的指针仪表自动读数方法 | |
CN108537832A (zh) | 基于局部不变灰度特征的图像配准方法、图像处理系统 | |
CN113793309B (zh) | 一种基于形态学特征的亚像素级椭圆检测方法 | |
CN114723794B (zh) | 基于lsd直线检测的sar图像配准方法 | |
CN107808165B (zh) | 一种基于susan角点检测的红外图像匹配方法 | |
CN115049708B (zh) | 基于lsd直线检测与模板匹配的sar图像配准方法 | |
CN114742849B (zh) | 一种基于图像增强的水准仪距离测量方法 | |
CN116206139A (zh) | 一种基于局部自卷积的无人机图像升尺度匹配方法 | |
CN111325722A (zh) | 印章图像精确识别方法、印章图像识别处理方法和印章图像识别系统 | |
CN116091818A (zh) | 基于多神经网络级联模型的指针式仪表读数识别方法 | |
CN114972453B (zh) | 改进的基于lsd与模板匹配的sar图像区域配准方法 | |
CN114862883A (zh) | 一种目标边缘提取方法、图像分割方法及系统 | |
CN111507177B (zh) | 一种用于计量周转柜的识别方法及装置 | |
CN113554688A (zh) | 一种基于单目视觉的o型密封圈尺寸测量方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder | ||
CP01 | Change in the name or title of a patent holder |
Address after: 210000 Room 301, floor 3, building 75, zone B, entrepreneurship and innovation city, No. 15, Fengji Avenue, Yuhuatai District, Nanjing, Jiangsu Province Patentee after: Nanjing Thunderbolt Information Technology Co.,Ltd. Address before: 210000 Room 301, floor 3, building 75, zone B, entrepreneurship and innovation city, No. 15, Fengji Avenue, Yuhuatai District, Nanjing, Jiangsu Province Patentee before: NANJING LEADING INFORMATION TECHNOLOGY Co.,Ltd. |