CN110471048B - 基于声呐三维图像置信度的自适应变尺度卷积核计算方法 - Google Patents

基于声呐三维图像置信度的自适应变尺度卷积核计算方法 Download PDF

Info

Publication number
CN110471048B
CN110471048B CN201910675932.9A CN201910675932A CN110471048B CN 110471048 B CN110471048 B CN 110471048B CN 201910675932 A CN201910675932 A CN 201910675932A CN 110471048 B CN110471048 B CN 110471048B
Authority
CN
China
Prior art keywords
sonar
dimensional image
pixel point
confidence coefficient
target object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910675932.9A
Other languages
English (en)
Other versions
CN110471048A (zh
Inventor
胡凯
张彦雯
郑翡
刘佳
苗国英
刘云平
严飞
龚毅光
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Information Science and Technology
Original Assignee
Nanjing University of Information Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Information Science and Technology filed Critical Nanjing University of Information Science and Technology
Priority to CN201910675932.9A priority Critical patent/CN110471048B/zh
Publication of CN110471048A publication Critical patent/CN110471048A/zh
Application granted granted Critical
Publication of CN110471048B publication Critical patent/CN110471048B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/02Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
    • G01S15/50Systems of measurement, based on relative movement of the target
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/89Sonar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/89Sonar systems specially adapted for specific applications for mapping or imaging
    • G01S15/8906Short-range imaging systems; Acoustic microscope systems using pulse-echo techniques
    • G01S15/8993Three dimensional imaging systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/539Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20084Artificial neural networks [ANN]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)

Abstract

本发明公开了一种基于声呐三维图像置信度的自适应变尺度卷积核计算方法,根据声呐获取的三维图像中目标物的置信度,计算出三维卷积核的尺度及个数,不仅解决了空间上提取图像的特征信息分布不均的问题,而且还能克服由于声呐成像远近导致的问题,同时,本发明能够减轻计算量,且效果更佳。

Description

基于声呐三维图像置信度的自适应变尺度卷积核计算方法
技术领域
本发明涉及图像信息领域,尤其涉及一种基于声呐三维图像置信度的自适应变尺度卷积核计算方法。
背景技术
随着深度学习的提出与发展,人们常利用卷积神经网络进行图像处理,以达到目标检测、图像分类等目的。
卷积神经网络中需要设定不同卷积核提取图像不同层次的特征,传统二维卷积,每个卷积核的大小、通道数,以及卷积核的个数的选择都是通过实验挑选出最佳值,并没有理论支撑。三维卷积也是如此。在处理声呐三维图像时,由于距离的远近,图像中生成目标物的的准确率不一样,声呐距离目标物越近时,得到的图像更精确。如果运用传统的方法对不同远近生成三维图像进行三维卷积,那么效果肯定是不是令人满意的。
发明内容
本发明所要解决的技术问题是针对背景技术中所涉及到的缺陷,提供一种基于声呐三维图像置信度的自适应变尺度卷积核计算方法。
本发明为解决上述技术问题采用以下技术方案:
基于声呐三维图像置信度的自适应变尺度卷积核计算方法,包含以下步骤:
步骤1),选用MK 3侧扫声呐对水下目标进行检测,获得三维图像;
步骤2),计算出三维图像中各个像素点的物理距离分辨率以及物理方位分辨率,物理距离分辨率用来表示三维图像中像素点z轴的物理分辨率,物理方位分辨率用来表示三维图像中像素点x轴、y轴的物理分辨率,三维图像中像素点的物理距离分辨率Δz以及物理方位分辨率Δx、Δy的计算公式如下:
Δz=Ssonar·τ/2
Δx=Δy=sinθ·R
R=Ssonar·t/2
其中,Ssonar是声呐的声速,τ是声呐硬件能够发出的脉冲长度最小值,θ是声束宽度,R是声呐和该像素点所在位置之间的距离,t为声呐检测出第一个回波达到的时间与初始发射脉冲间的时间差;
步骤3),根据以下公式计算三维图像中各个像素点的初始置信度CC:
Figure BDA0002143267860000021
步骤4),对三维图像中各个像素点进行检测,判断它是否被侧扫声呐两个相邻扫射角度同时检测到,如果是,则将该像素点的置信度加倍,得到三维图像中各个像素点的最终置信度;
步骤5),计算出三维图像中目标物的最终置信度,令其为(a,b,c),其中,a是目标物在三维图像中x轴上的置信度,b是目标物在三维图像中y轴上的置信度,c是目标物在三维图像中z轴上的置信度,a、b、c分别对应三维卷积核的宽度、高度、深度;令目标物三维卷积核在宽度、高度、深度三个方向上提取可用特征信息量相等,则根据以下公式计算三维卷积核的尺度:
Figure BDA0002143267860000022
Figure BDA0002143267860000023
其中,m表示预设的可用特征信息量的阈值,w、h、d分别为目标物三维卷积核的宽度、高度、深度,且w、h、d为小数时向上取整数;
步骤6),根据w、h、d计算目标物的三维卷积核。
本发明采用以上技术方案与现有技术相比,具有以下技术效果:
本发明能够根据声呐获取的三维图像中目标物的置信度,计算出三维卷积核的尺度及个数,不仅解决了空间上提取图像的特征信息分布不均的问题,而且还能克服由于声呐成像远近导致的问题,同时,本发明能够减轻计算量,且效果更佳。
附图说明
图1为本发明实施例的侧视声呐原理示意图;
图2为本发明实施例的工作流程图。
具体实施方式
下面结合附图对本发明的技术方案做进一步的详细说明:
在声呐三维图像中,由于声呐与目标物距离有长有短,声呐图像中目标物的置信度就不一样,所以要通过三维卷积获取图像中更深层的特征信息就需要不同尺度的三维卷积核。
实本发明基于本发明基于现有的人工智能技术,提出了一种基于声呐三维图像置信度的自适应变尺度卷积核计算方法,包括声呐图像中目标物置信度的计算和自适应变尺度卷积核的计算。
超声波是频率高于20KHz的声波,它方向性好,穿透能力强,易于获得较集中的声能。声呐通过测量超声波经反射到达接收传感器的时间和发射时间之差来实现与障碍物之间的测距,也叫渡越时间法。发射传感器向空气中发射超声波脉冲,声波脉冲遇到被测物体反射回来,由接收传感器检测回波信号。若测出第一个回波达到的时间与发射脉冲间的时间差,即可算得传感器与反射点间的距离。
如图1所示,声呐是利用水下声波对水下目标检测、定位、通信的电子设备。声呐虽然每个时刻只产生一个声波,但是它有一个类似于云台一样的结构,可以改变声波的对准方向,每个很短的时刻中,得到一个检测数据。采用声呐逐行进行各个角度的检测,最后即可获得完整的声呐图像。
如图2所示,本发明的步骤如下:
步骤1),选用MK 3侧扫声呐对水下目标进行检测,获得三维图像。
步骤2),计算出三维图像中各个像素点的物理距离分辨率以及物理方位分辨率,物理距离分辨率用来表示三维图像中像素点z轴的物理分辨率,物理方位分辨率用来表示三维图像中像素点x轴、y轴的物理分辨率,三维图像中像素点的物理距离分辨率Δz以及物理方位分辨率Δx、Δy的计算公式如下:
Δz=Ssonarτ/2
Δx=Δy=sinθ·R
R=Ssonar·t/2
其中Ssonar是声音在水下传播的速度,τ是声呐硬件能够发出的脉冲长度最小值,θ是声束宽度(即上述中的类似于手电筒的发射光的角度),R是声呐与物体的距离,t为声呐检测出第一个回波达到的时间与初始发射脉冲间的时间差。
步骤3),由于图像分辨率与物理分辨率成倒数关系,根据以下公式计算三维图像中各个像素点的初始置信度CC:
Figure BDA0002143267860000041
步骤4),对三维图像中各个像素点进行检测,判断它是否被侧扫声呐两个相邻扫射角度同时检测到,如果是,则将该像素点的置信度加倍,得到三维图像中各个像素点的最终置信度。
步骤5),计算出三维图像中目标物的最终置信度,令其为(a,b,c),其中,a是目标物在三维图像中x轴上的置信度,b是目标物在三维图像中y轴上的置信度,c是目标物在三维图像中z轴上的置信度,a、b、c分别对应三维卷积核的宽度、高度、深度。
由于目标物三维卷积核在宽度、高度、深度三个方向上的置信度是不一样的,如果用同一尺度的卷积核对图像进行卷积,那么提取可用的特征信息有多有少,所以对于置信度大的方向,卷积核在该方向的尺度会小些;对于置信度小的方向,卷积核在该方向上的尺度会大些,以确保提取到足够的特征信息。
为了确保在空间图像上能够提取到足够的特征信息,令目标物三维卷积核在宽度、高度、深度三个方向上提取可用特征信息量相等,则根据以下公式计算三维卷积核的尺度:
Figure BDA0002143267860000042
Figure BDA0002143267860000043
其中m表示预设的的可用特征信息量的阈值,w、h、d分别为目标物三维卷积核的宽度、高度、深度的像素的个数。通过上述方法我们确定出三维卷积核的尺度。在卷积时,可能会出现图像中角落和边界的信息发挥作用较少的情况,这时需要外接填充。在面对多个三维图像的多个置信度时,w、h、d可能出现小数,此时向上取整数。
步骤6),根据w、h、d计算目标物的三维卷积核。
本实施例中,假设具体目标在某处比较远的地方,其置信度根据模块1计算得到为CC=(2/5,2/5,1/5);即a=b=2/5,c=1/5。根据需要,例如常见的3*3*3的卷积的情况,那么此处m=3,此时,
Figure BDA0002143267860000051
向上取整后的结果是w=8,h=8,d=15。此刻,参与卷积的像素为x轴8个像素,y轴8个像素,z轴15个像素,从而使用变尺度卷积的方法,提高了整体各个方向的一致置信度的效果。
本发明基于本发明基于现有的人工智能技术,提出了基于声呐三维图像置信度的自适应变尺度卷积核的计算方法,不仅能够解决空间上提取图像的特征信息分布不均的问题,而且还能克服由于声呐成像远近导致的问题。不仅减轻了计算量,而且有更加显著的效果。
本技术领域技术人员可以理解的是,除非另外定义,这里使用的所有术语(包括技术术语和科学术语)具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样定义,不会用理想化或过于正式的含义来解释。
以上所述的具体实施方式,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施方式而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (1)

1.基于声呐三维图像置信度的自适应变尺度卷积核计算方法,其特征在于,包含以下步骤:
步骤1),选用MK3侧扫声呐对水下目标进行检测,获得三维图像;
步骤2),计算出三维图像中各个像素点的物理距离分辨率以及物理方位分辨率,物理距离分辨率用来表示三维图像中像素点z轴的物理分辨率,物理方位分辨率用来表示三维图像中像素点x轴、y轴的物理分辨率,三维图像中像素点的物理距离分辨率Δz以及物理方位分辨率Δx、Δy的计算公式如下:
Δz=Ssonarτ/2
Δx=Δy=sinθ·R
R=Ssonar·t/2
其中,Ssonar是声呐的声速,τ是声呐硬件能够发出的脉冲长度最小值,θ是声束宽度,R是声呐和该像素点所在位置之间的距离,t为声呐检测出第一个回波达到的时间与初始发射脉冲间的时间差;
步骤3),根据以下公式计算三维图像中各个像素点的初始置信度CC:
Figure FDA0002143267850000011
步骤4),对三维图像中各个像素点进行检测,判断它是否被侧扫声呐两个相邻扫射角度同时检测到,如果是,则将该像素点的置信度加倍,得到三维图像中各个像素点的最终置信度;
步骤5),计算出三维图像中目标物的最终置信度,令其为(a,b,c),其中,a是目标物在三维图像中x轴上的置信度,b是目标物在三维图像中y轴上的置信度,c是目标物在三维图像中z轴上的置信度,a、b、c分别对应三维卷积核的宽度、高度、深度;令目标物三维卷积核在宽度、高度、深度三个方向上提取可用特征信息量相等,则根据以下公式计算三维卷积核的尺度:
Figure FDA0002143267850000012
Figure FDA0002143267850000021
其中,m表示预设的可用特征信息量的阈值,w、h、d分别为目标物三维卷积核的宽度、高度、深度,且w、h、d为小数时向上取整数;
步骤6),根据w、h、d计算目标物的三维卷积核。
CN201910675932.9A 2019-07-25 2019-07-25 基于声呐三维图像置信度的自适应变尺度卷积核计算方法 Active CN110471048B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910675932.9A CN110471048B (zh) 2019-07-25 2019-07-25 基于声呐三维图像置信度的自适应变尺度卷积核计算方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910675932.9A CN110471048B (zh) 2019-07-25 2019-07-25 基于声呐三维图像置信度的自适应变尺度卷积核计算方法

Publications (2)

Publication Number Publication Date
CN110471048A CN110471048A (zh) 2019-11-19
CN110471048B true CN110471048B (zh) 2022-04-15

Family

ID=68508950

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910675932.9A Active CN110471048B (zh) 2019-07-25 2019-07-25 基于声呐三维图像置信度的自适应变尺度卷积核计算方法

Country Status (1)

Country Link
CN (1) CN110471048B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114897033B (zh) * 2022-07-13 2022-09-27 中国人民解放军海军工程大学 用于多波束窄带历程数据的三维卷积核组计算方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108416840A (zh) * 2018-03-14 2018-08-17 大连理工大学 一种基于单目相机的三维场景稠密重建方法
CN108510458A (zh) * 2018-03-29 2018-09-07 中国海洋大学 基于深度学习方法和非参数化采样的侧扫声呐图像合成方法
CN109506628A (zh) * 2018-11-29 2019-03-22 东北大学 一种基于深度学习的卡车环境下目标物测距方法
CN109544609A (zh) * 2018-10-11 2019-03-29 天津大学 一种基于sift算法的侧扫声呐图像匹配方法
CN109655815A (zh) * 2018-11-23 2019-04-19 杭州电子科技大学 基于ssd的声呐目标检测方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108416840A (zh) * 2018-03-14 2018-08-17 大连理工大学 一种基于单目相机的三维场景稠密重建方法
CN108510458A (zh) * 2018-03-29 2018-09-07 中国海洋大学 基于深度学习方法和非参数化采样的侧扫声呐图像合成方法
CN109544609A (zh) * 2018-10-11 2019-03-29 天津大学 一种基于sift算法的侧扫声呐图像匹配方法
CN109655815A (zh) * 2018-11-23 2019-04-19 杭州电子科技大学 基于ssd的声呐目标检测方法
CN109506628A (zh) * 2018-11-29 2019-03-22 东北大学 一种基于深度学习的卡车环境下目标物测距方法

Also Published As

Publication number Publication date
CN110471048A (zh) 2019-11-19

Similar Documents

Publication Publication Date Title
EP1097393B1 (en) Method for producing a 3d image
EP2325672B1 (en) Spatial compound imaging in an ultrasound system
US5200931A (en) Volumetric and terrain imaging sonar
Aykin et al. Forward-look 2-D sonar image formation and 3-D reconstruction
EP3581961A1 (en) Method and apparatus for ultrasound imaging with improved beamforming
US20110046486A1 (en) Ultrasound image enhancement in an ultrasound system
WO2022166097A1 (zh) 一种侧扫声呐的水下目标多模式成像方法
CN110412588B (zh) 一种基于交叉阵列的目标三维信息测量方法及系统
CN111291327A (zh) 一种基于分治思想的多波束海底底质分类方法
US20110172532A1 (en) Automatic adjustment of scan angle, scan depth and scan speed in an ultrasound system
US10908269B2 (en) Clutter suppression in ultrasonic imaging systems
CN109281651B (zh) 一种应用于柱面超声阵列的超声井壁成像方法
CN110471048B (zh) 基于声呐三维图像置信度的自适应变尺度卷积核计算方法
Teixeira et al. Multibeam data processing for underwater mapping
JP2008212441A (ja) 超音波撮像で使用するための正確な時間遅延推定の方法及びシステム
CN116381661B (zh) 一种海洋地貌探测方法及装置
AU2010297455B2 (en) Method and device for measuring a profile of the ground
JP2014020795A (ja) 水中探知装置、水中探知方法、および水中探知プログラム
JP5497302B2 (ja) 合成開口ソーナー
JP7142400B1 (ja) 多入力多出力レーダーに基づく見通し外ターゲット測位の方法及びシステム
Kerstens et al. An optimized planar MIMO array approach to in-air synthetic aperture sonar
CN111528901A (zh) 四维的超声成像方法、超声成像方法及相关系统
CN112862677B (zh) 一种同平台异源声呐的声学图像拼接方法
CN115272461A (zh) 一种基于先验知识的侧扫声呐图像的海底高程检测方法
CN113126030B (zh) 基于宽带声场干涉结构的深海直达声区目标深度估计方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant