CN106405531B - 基于图像处理技术的被动毫米波辐射成像系统测距方法 - Google Patents

基于图像处理技术的被动毫米波辐射成像系统测距方法 Download PDF

Info

Publication number
CN106405531B
CN106405531B CN201610804082.4A CN201610804082A CN106405531B CN 106405531 B CN106405531 B CN 106405531B CN 201610804082 A CN201610804082 A CN 201610804082A CN 106405531 B CN106405531 B CN 106405531B
Authority
CN
China
Prior art keywords
image
passive
millimeter wave
wave radiation
radiation image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201610804082.4A
Other languages
English (en)
Other versions
CN106405531A (zh
Inventor
吴礼
王强
李冬
周仁峰
李勇强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Science and Technology
Original Assignee
Nanjing University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Science and Technology filed Critical Nanjing University of Science and Technology
Priority to CN201610804082.4A priority Critical patent/CN106405531B/zh
Publication of CN106405531A publication Critical patent/CN106405531A/zh
Application granted granted Critical
Publication of CN106405531B publication Critical patent/CN106405531B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S11/00Systems for determining distance or velocity not using reflection or reradiation
    • G01S11/12Systems for determining distance or velocity not using reflection or reradiation using electromagnetic waves other than radio waves

Landscapes

  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于图像处理技术的被动毫米波辐射成像系统测距方法,包括以下步骤:按照被动测距模型,将两台参数设置一致的被动毫米波辐射成像系统相对于目标场景前后放置于一条直线上,通过两台被动毫米波辐射成像系统对同一个目标场景成像,得到相应的测量成像数据;通过surf匹配算法分别提取出两组测量成像数据中目标场景匹配度最高的三个特征点;分别计算特征点连通域的面积,通过被动测距模型计算得到目标距离。本发明采用被动毫米波辐射计进行成像,在云、雾、战场烟尘、施放烟雾等恶劣环境中,相较光电和红外被动测距方法,能够获得更好的成像结果,测距精度更高。

Description

基于图像处理技术的被动毫米波辐射成像系统测距方法
技术领域
本发明属于被动测距技术,特别是一种基于图像处理技术的被动毫米波辐射成像系统测距方法。
背景技术
物理温度高于绝对零度的物体都会向外辐射电磁波,当物体被外界电磁波照射时,还会产生反射、散射、透射和吸收现象。物体物质结构不同,其对电磁波的辐射、散射和反射也具有差异。毫米波被动成像系统就是根据目标辐射亮度温度差异来分辨不同物体,进而达到观测场景成像目的。相比于红外成像系统,被动毫米波辐射成像系统具有穿透烟雾及恶劣环境下工作的能力,但被动成像系统存在无法获取目标距离信息的缺点。
随着计算机技术的发展,人们开始用计算机处理图像,除获得更好的视觉信息外,依靠分析目标图像信息获得距离信息的技术也引起了研究人员的广泛关注。目前基于图像处理的被动测距方法主要包括:
(1)立体视觉测距方法,该方法由于采用成像系统左右摆放的方式,当空间三维场景经投影变为图像上的二维场景时,成像会发生不同程度的畸变,导致特征点匹配错误进而造成较大的测距误差。
(2)图像序列法,该方法跟踪并分析运动图像序列中目标的稳定特征尺寸,进而获取目标的距离消息,但是存在需预先知道目标尺寸大小的问题。
(3)单目成像测距方法,该方法仅采用一台成像系统对目标场景进行成像,需要对几幅图片进行特征点的匹配,匹配误差决定了测量结果的精度,多幅图像进行处理,需要耗费大量的计算时间。
发明内容
本发明的目的在于提供一种基于图像处理技术的被动毫米波辐射成像系统测距方法。
实现本发明目的的技术方案为:一种基于图像处理技术的被动毫米波辐射成像系统测距方法,包括以下步骤:
步骤1,按照被动测距模型,将两台参数设置一致的被动毫米波辐射成像系统相对于目标场景前后放置于一条直线上,通过两台被动毫米波辐射成像系统对同一个目标场景成像,得到相应的测量成像数据;
步骤2,通过surf匹配算法分别提取出两组测量成像数据中目标场景匹配度最高的三个特征点;
步骤3,分别计算特征点连通域的面积,通过被动测距模型计算得到目标距离。
本发明与现有技术相比,其显著效果为:
(1)本发明采用被动毫米波辐射成像系统,相较于光电和红外成像系统,在云,雾,战场烟尘,施放烟雾的恶劣环境中,仍能够获得很好成像结果。
(2)本发明中的测距模型采样前后分别放置成像系统的方式,所得目标场景的成像结果不易产生畸变,且目标场景的成像结果特征相似,有利于特征点的匹配,反演出更加准确的测距结果。
附图说明
图1为本发明被动毫米波辐射成像系统测距方法的流程图。
图2为基于辐射计成像系统的被动测距模型图。
图3(a)和图3(b)分别为两台辐射计成像系统的成像结果图。
图4(a)和图4(b)分别为Lxx和Lxy的框状近似模板示意图。
图5(a)和图5(b)分别为两台辐射计成像系统经频域低通滤波处理后成像结果示意图。
图6为图像匹配点检测的结果图。
具体实施方式
结合图1,本发明的一种基于图像处理技术的被动毫米波辐射成像系统测距方法,包括以下步骤:
步骤1,按照被动测距模型,将两台参数设置一致的被动毫米波辐射成像系统相对于目标场景前后放置于一条直线上,通过两台被动毫米波辐射成像系统对同一个目标场景成像,得到相应的测量成像数据,成像结果如图3(a)和图3(b)所示;具体为:
被动测距模型如图2所示,设f为被动毫米波辐射成像系统的焦距,d1为前后两台成像系统的间隔距离,d为目标与第一成像系统之间的距离,则目标与第二成像系统之间的距离为d+d1;假定目标的面积为P,在第一成像系统成像的图像中为区域P1,在第二成像系统成像的图像中为区域P2,那么根据小孔成像的基本模型有:
联合上述两式可得被动测距模型为:
步骤2,通过surf匹配算法分别提取出两组测量成像数据中目标场景匹配度最高的三个特征点;具体为:
步骤2-1,对两台被动毫米波辐射成像系统成像数据进行频域低通滤波处理,采用频域低通滤波处理后得到的图像数据的矩阵Hessian行列式的值描述图像数据中的特征点;
步骤2-2,在尺度空间中通过非极大值抑制,找出图像中特征值大于设定阈值且大于临近点特征值的特征点;
步骤2-3,对步骤2-2得到的特征点进行描述并匹配,得到匹配度最高的三个特征点的位置。
步骤3,分别计算特征点连通域的面积,通过被动测距模型计算得到目标距离;具体为:
步骤3-1,根据步骤2中得到的匹配点,分别计算三个匹配点在各自图像中连通域的面积;
步骤3-2,将连通域面积代入被动测距模型,解算出目标距离。
进一步的,步骤2中通过surf匹配算法分别提取出两组测量成像数据中目标场景匹配度最高的三个特征点的具体方法为:
第一步,特征点检测
(11)对两台被动毫米波辐射成像系统成像数据A1、A2进行频域低通滤波处理,所述成像数据A1、A2为辐射计探测到目标场景的辐射强度,处理后的数据成像结果如图5(a)、图5(b)所示,利用Hessian矩阵行列式的值来检测预处理后的图像B1、B2中的特征点,对于图像中某点X=(x,y),在X点的σ尺度上的Hessian矩阵定义如下:
其中,Lxx(X,σ)、Lxy(X,σ)、Lyy(X,σ)分别为高斯二阶偏导在X处与图像的卷积,高斯二阶偏导采用结构如图4(a)和图4(b)所示的框状滤波器近似;Hessian矩阵中Lxx(X,σ)、Lxy(X,σ)、Lyy(X,σ)分别采用如图4(a)和图4(b)所示的近似模板与图像卷积的结果Dxx、Dyy、Dxy近似,其行列式为:
det(Happrox)=DxxDyy-(wDxy)2
式中,w是权重系数,本具体实施方式取0.9,按照近似Hessian矩阵的行列式的公式,对图像中每一点求取响应并记录下来,得到图像B1、B2在σ尺度上的响应图;
(12)利用不同尺度因子的框状滤波器对预处理后的图像数据B1、B2进行处理,构建图像金子塔;初始尺度对应的近似模板大小为9*9,采用初始尺度的近似模板与图像数据B1、B2进行卷积,得到尺度空间的第一层;接下来的层依次通过尺寸逐渐增大的模板与原始图像做卷积获得,每4个模板为一阶(Octave),本方法中取4阶,相应的模板大小为:
Octave1 9 15 21 27
Octave2 15 27 39 51
Octave3 27 51 75 99
Octave4 51 99 147 195
用S表示近似模板的尺度,依次用不同的尺度的模板对图像数据A1,A2做卷积,在卷积的过程中采用步骤(11)中得到的近似Hessian矩阵Happrox的行列式计算在每一点的响应,把这些响应记录下来,得到不同尺度σ对应的响应图构成3维尺度空间(x,y,S);
(13)在3维(x,y,S)尺度空间中每个3*3*3的局部区域里,进行非最大值抑制,只有比临近的26个点的响应值都大的点才被选为特征点,把符合条件的点筛选为候选极值,同时记下位置与尺寸信息(xi,yi,Si),其中i为点的个数,Si为该特征点对应的尺度;
第二步,特征点描述
(21)利用第一步中得到的特征点的位置与尺寸信息(xi,yi,Si),对于每个特征点,以其位置(x,y)为圆心,以6S为半径的圆形领域里,用尺寸为4S的Harr小波模板对图像进行处理,得到x,y两个方向的Haar小波响应;然后用以特征点为中心的高斯函数(σ=2S)对这些响应进行加权;
(22)用一个圆心角为π/3的扇形以特征点为中心环绕一周,计算该扇形处于每个角度时,它所覆盖图像中点的Haar小波响应之和;由于每一点都有x,y两个方向的响应,因此扇形区域中所有点的响应之和构成一个矢量;记录扇形区域环绕一周所形成的矢量,取长度最大的矢量,其方向即为该特征点所对应的方向;
(23)以第一步中得到的特征点为中心的正方形邻域,该邻域的边长为20S,将步骤(22)中所确定的特征点方向作为该邻域的Y轴方向,将该正方形区域分成4×4个子块区域,在每一个子块区域中用模板尺寸为2S*2S的Haar小波滤波器进行处理,相对于特征点的方向,用dx表示水平方向的Haar小波响应,用dy表示竖直方向的Haar小波响应;构建描述子向量之前,对于所有的dx、dy,均采用一个以特征点为中心的高斯函数加权,该高斯函数的σ=3.3S;
在每个子块区域中对水平方向、竖直方向的Haar小波响应dx、dy及对应的绝对值|dx|、|dy|求和,从而得到一个4维向量V(∑dx、∑dy、∑|dx|、∑|dy|);将4*4个子块区域的向量连接起来得到一个64维的向量,此向量即为描述该特征点的描述子特征向量;
第三步,特征点的匹配
(31)在第一步检测特征点的过程中,计算了Hessian矩阵的行列式,同时,计算得到了Hessian矩阵的迹,矩阵的迹为对角元素之和;按照亮度的不同,将特征点分为两种,第一种为特征点及其周围小邻域的亮度比背景区域要亮,Hessian矩阵的迹为正;另外一种为特征点及其周围小邻域的亮度比背景区域要暗,Hessian矩阵为负值;根据这个特性,在匹配过程中,首先对特征点的Hessian矩阵的迹进行比较;如果同号,说明两个特征点具有相同的对比度;如果是异号的话,说明两个特征点的对比度不同,放弃特征点之间后续的相似性度量;
(32)采用欧式距离对图像A1、A2中特征点描述子特征向量的相似性进行度量:
其中Disij表示图像数据A1中的第i个特征点与图像数据A2中的第j个特征点之间的相似性,A1ik表示图像数据A1中的第i个特征点子特征向量的第k个元素,A2jk表示图像数据A1中的第j个特征点子特征向量的第k个元素,n表示特征向量的维数。
进一步的,步骤3-1中求解连通域面积的具体方法为:
由步骤2得到图像数据A1、A2中匹配度最高的三个点的坐标(x1,y1),(x2,y2),(x3,y3),具体结果如图6所示,按照下式分别计算匹配点连通域的面积P1,P2
其中a,b,c为三个匹配点两两之间的长度,L=(a+b+c)/2。
本发明采用被动毫米波辐射计进行成像,在云,雾,战场烟尘,施放烟雾等恶劣环境中,相较光电和红外被动测距方法,能够获得更好的成像结果,测距精度更高。

Claims (2)

1.一种基于图像处理技术的被动毫米波辐射成像系统测距方法,其特征在于,包括以下步骤:
步骤1,按照被动测距模型,将两台参数设置一致的被动毫米波辐射成像系统相对于目标场景前后放置于一条直线上,通过两台被动毫米波辐射成像系统对同一个目标场景成像,得到相应的测量成像数据;具体为:
设f为被动毫米波辐射成像系统的焦距,d1为前后两台成像系统的间隔距离,d为目标与第一成像系统之间的距离,则目标与第二成像系统之间的距离为d+d1;假定目标的面积为P,在第一成像系统成像的图像中区域面积为P1,在第二成像系统成像的图像中区域面积为P2,根据小孔成像的基本模型有:
联合上述两式可得被动测距模型为:
步骤2,通过surf匹配算法分别提取出两组测量成像数据中目标场景匹配度最高的三个特征点;
步骤3,分别计算特征点连通域的面积,通过被动测距模型计算得到目标距离;具体为:
步骤3-1,根据步骤2中得到的特征点,分别计算三个特征点在各自图像中连通域的面积;
由步骤2得到图像数据中匹配度最高的三个特征点的坐标,按照下式分别计算特征点连通域的面积P1,P2
其中a,b,c为三个特征点两两之间的长度,L=(a+b+c)/2;
步骤3-2,将连通域面积代入被动测距模型,解算出目标距离。
2.根据权利要求1所述的基于图像处理技术的被动毫米波辐射成像系统测距方法,其特征在于,步骤2具体为:
步骤2-1,对两台被动毫米波辐射成像系统成像数据进行频域低通滤波处理,采用频域低通滤波处理后得到的图像数据的矩阵Hessian行列式的值描述图像数据中的特征点;
步骤2-2,在尺度空间中通过非极大值抑制,找出图像中特征值大于设定阈值且大于临近点特征值的特征点;
步骤2-3,对步骤2-2得到的特征点进行描述并匹配,得到匹配度最高的三个特征点的位置。
CN201610804082.4A 2016-09-05 2016-09-05 基于图像处理技术的被动毫米波辐射成像系统测距方法 Expired - Fee Related CN106405531B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610804082.4A CN106405531B (zh) 2016-09-05 2016-09-05 基于图像处理技术的被动毫米波辐射成像系统测距方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610804082.4A CN106405531B (zh) 2016-09-05 2016-09-05 基于图像处理技术的被动毫米波辐射成像系统测距方法

Publications (2)

Publication Number Publication Date
CN106405531A CN106405531A (zh) 2017-02-15
CN106405531B true CN106405531B (zh) 2019-05-07

Family

ID=57998502

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610804082.4A Expired - Fee Related CN106405531B (zh) 2016-09-05 2016-09-05 基于图像处理技术的被动毫米波辐射成像系统测距方法

Country Status (1)

Country Link
CN (1) CN106405531B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110411375B (zh) * 2019-08-05 2021-05-11 上海亨临光电科技有限公司 一种基于被动式毫米波/太赫兹成像技术的三维成像方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101858742A (zh) * 2010-05-27 2010-10-13 沈阳理工大学 一种基于单相机的定焦测距方法
CN102980556A (zh) * 2012-11-29 2013-03-20 北京小米科技有限责任公司 一种测距方法及装置
CN103017730A (zh) * 2012-11-30 2013-04-03 中兴通讯股份有限公司 一种单摄像头测距的方法和系统
CN103075998A (zh) * 2012-12-31 2013-05-01 华中科技大学 一种单目空间目标测距测角方法
CN105184784A (zh) * 2015-08-28 2015-12-23 西交利物浦大学 基于运动信息的单目相机获取深度信息的方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102867311B (zh) * 2011-07-07 2015-11-25 株式会社理光 目标跟踪方法和目标跟踪设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101858742A (zh) * 2010-05-27 2010-10-13 沈阳理工大学 一种基于单相机的定焦测距方法
CN102980556A (zh) * 2012-11-29 2013-03-20 北京小米科技有限责任公司 一种测距方法及装置
CN103017730A (zh) * 2012-11-30 2013-04-03 中兴通讯股份有限公司 一种单摄像头测距的方法和系统
CN103075998A (zh) * 2012-12-31 2013-05-01 华中科技大学 一种单目空间目标测距测角方法
CN105184784A (zh) * 2015-08-28 2015-12-23 西交利物浦大学 基于运动信息的单目相机获取深度信息的方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于单目视觉的实时测距算法;赵松等;《宿州学院学报》;20160831;第31卷(第8期);第114-117页
用于目标测距的单目视觉测量方法;韩延祥等;《光学精密工程》;20110531;第19卷(第5期);第1110-1117页

Also Published As

Publication number Publication date
CN106405531A (zh) 2017-02-15

Similar Documents

Publication Publication Date Title
Deng et al. Infrared small-target detection using multiscale gray difference weighted image entropy
Hashemi et al. Template matching advances and applications in image analysis
CN105809693B (zh) 基于深度神经网络的sar图像配准方法
CN105574527B (zh) 一种基于局部特征学习的快速物体检测方法
CN105957054B (zh) 一种图像变化检测方法
CN104766334B (zh) 红外弱小目标检测跟踪方法及其装置
US8103055B2 (en) Detection of blobs in images
CN106228201A (zh) 一种基于阴影特性的合成孔径雷达抗欺骗式干扰方法
CN107560592B (zh) 一种用于光电跟踪仪联动目标的精确测距方法
CN114022830A (zh) 一种目标确定方法以及目标确定装置
CN106682678A (zh) 一种基于支撑域的图像角点检测和分类方法
CN113850725A (zh) 一种滤波增强深度学习的被动式太赫兹图像目标检测方法
Li et al. Research on a product quality monitoring method based on multi scale PP-YOLO
Laviada et al. Artifact mitigation for high-resolution near-field sar images by means of conditional generative adversarial networks
Tian et al. An SAR ATR method based on scattering centre feature and bipartite graph matching
He et al. Human segmentation of infrared image for mobile robot search
CN106405531B (zh) 基于图像处理技术的被动毫米波辐射成像系统测距方法
CN104502992B (zh) 一种基于空时过采样扫描的弱小点目标精确定位方法及系统
CN108388854A (zh) 一种基于改进fast-surf算法的定位方法
Dey et al. A robust FLIR target detection employing an auto-convergent pulse coupled neural network
Lee et al. A modified Harris corner detection for breast IR image
Kim et al. Depth map enhancement using adaptive steering kernel regression based on distance transform
CN104732190A (zh) 一种基于正交纹理相关分析的合成孔径声纳目标检测方法
Chen et al. Corner detection based on gradient ghost imaging
Cai et al. Image Fusion Method Based on Directional Contrast-Inspired Unit-Linking Pulse Coupled Neural Networks in Contourlet Domain.

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190507

Termination date: 20200905

CF01 Termination of patent right due to non-payment of annual fee