CN112364779B - 信号处理与深-浅网络多模型融合的水声目标识别方法 - Google Patents

信号处理与深-浅网络多模型融合的水声目标识别方法 Download PDF

Info

Publication number
CN112364779B
CN112364779B CN202011264120.4A CN202011264120A CN112364779B CN 112364779 B CN112364779 B CN 112364779B CN 202011264120 A CN202011264120 A CN 202011264120A CN 112364779 B CN112364779 B CN 112364779B
Authority
CN
China
Prior art keywords
network
model
neural network
layers
convolutional neural
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011264120.4A
Other languages
English (en)
Other versions
CN112364779A (zh
Inventor
罗恒光
张博轩
王大宇
宋高宇
曾昕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CETC 54 Research Institute
Original Assignee
CETC 54 Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CETC 54 Research Institute filed Critical CETC 54 Research Institute
Priority to CN202011264120.4A priority Critical patent/CN112364779B/zh
Publication of CN112364779A publication Critical patent/CN112364779A/zh
Application granted granted Critical
Publication of CN112364779B publication Critical patent/CN112364779B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/02Preprocessing
    • G06F2218/04Denoising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/08Feature extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching

Abstract

本发明公开了一种信号处理与深‑浅网络多模型融合的水声目标识别方法,属于水声目标被动侦察技术领域。本方法首先用信号处理方法对被动侦察阵列采集的目标信号数据进行预处理,滤除干扰并提取目标特征,然后采用卷积神经网络和残差网络构建多模型识别架构,最后引入投票决策机制,实现对水中机动目标的分类识别。本发明以声纳信号处理为预处理应对复杂海况下干净样本获取困难的问题;采用多个维度的特征作为训练样本提升不同海况和工况下适应能力和识别正确率;基于多神经网路模型的融合识别提升本方法的识别正确率和鲁棒性。

Description

信号处理与深-浅网络多模型融合的水声目标识别方法
技术领域
本发明属于水声目标被动侦察技术领域,特别是指一种信号处理与深-浅网络多模型融合的水声目标识别方法,可用于分析探测阵列采集的目标辐射噪声信号。
背景技术
水声目标被动分类识别是对声纳设备接收的目标辐射噪声信号进行分析处理,提取目标特征并判别目标类型的信息处理技术。常用的目标分类识别方法主要有统计分类、模型匹配和专家系统等,但是,由于目标种类繁杂、噪声信号产生机理复杂、易受海洋环境影响和高质量样本获取困难等原因,使得不同的方法均存在应用局限性。此外,如果根据噪声信号的节拍、音色、起伏和频谱等信息判断未知目标的属性,则难免受到精神状态、心理因素等影响,使判断结果出现偏差。
随着深度学习技术在相关分类识别问题上取得突破性进展,人工智能在水声信号处理中的应用技术成为研究热点。由此,基于典型信号处理方法与深度学习相结合的水中机动目标被动识别技术不失为一种有效解决途径。但是,目前现有技术中还缺少这样的方案。
发明内容
有鉴于此,本发明的目的在于提供一种信号处理与深-浅网络多模型融合的水声目标识别方法,其具有准确率高,环境适应性强,提取特征鲁棒性好的优点。
为了实现上述目的,本发明采用的技术方案为:
一种信号处理与深-浅网络多模型融合的水声目标识别方法,括以下步骤:
(1)对基阵接收的水声目标辐射噪声信号进行滤波降噪,得到干净和增强后的时域信号数据;
(2)对步骤(1)的时域信号数据做域变换,提取具有类间区分度的时频谱图和梅尔倒谱系数作为特征样本;
(3)搭建三通道深-浅网络,所述三通道深-浅网络包括两个卷积神经网络和一个残差网络;将步骤(2)得到特征样本标注所属类别,使用特征样本中的时频谱图分别对一个卷积神经网络和残差网络进行训练,使用特征样本中的梅尔倒谱系数特征对另一个卷积神经网络进行训练,形成多模型联合识别的处理架构;
其中,使用特征样本中的时频谱图分别对一个卷积神经网络和残差网络进行训练的具体方式为:
(A301)将所有时频谱图按照3:1:1的比例划分为训练集、验证集和测试集,并打乱顺序以确保每个样本集中各类数据均匀分布;
(A302)根据时频谱图的特征搭建卷积神经网络分类模型,卷积神经网络包括1个输入层、4个卷积层、4个极大池化层、1个全连接层和1个Softmax层,卷积层使用ReLU函数作为激活函数;
(A303)对卷积神经网络进行训练,得到具有分类识别能力的卷积神经网络模型;
(A304)根据时频图谱数据搭建残差网络分类模型,所述残差网络包括4层layer,每个layer由不同个数的block构成,4层layer的block个数分别为3、4、6、3,每个block均包括卷积层、批量标准化层和Softmax分类层;根据样本特性,对残差网络分类模型进行适应性迁移,调整输入层维度,加载预训练好的模型参数并进行训练,得到可以分辨不同目标时频谱图的残差网络模型;
使用特征样本中的梅尔倒谱系数特征对另一个卷积神经网络进行训练的具体方式为:
(B301)将所有梅尔倒谱系数样本数据按照3:1:1的比例划分为训练集、验证集和测试集,并打乱顺序以确保每个样本集中各类数据均匀分布;
(B302)根据梅尔倒谱系数的特征搭建基本的卷积神经网络分类模型,卷积神经网络包括1个输入层、2个卷积层、2个极大池化层、4个Dropout层、2个全连接层和1个Softmax层,卷积层和全连接层使用的激活函数均为ReLU;
(B303)对卷积神经网络进行训练,得到可以分辨不同目标梅尔倒谱系数特征的卷积神经网络模型;
(4)对步骤(3)中的三个网络模型赋予不同的权重,使用投票表决机制得出最终判决结果,若投票结果各不相同,则使用权重最大的模型的识别结果作为最终判决结果。
进一步的,步骤(1)的具体方式为:
(101)将基阵采集的实数形式的信号分割成等时长样本;
(102)对样本数据采用分裂波束相关法进行波束形成,在全方位进行谱峰检测选取目标疑似方位;
(103)对步骤(102)输出的疑似方位进行时间累积,通过经验门限判决,得到目标精准方位;
(104)根据步骤(103)得到的目标精准方位,进行时域波束形成,完成空域滤波过程,并提取增强后的时域信号数据;
(105)对步骤(104)得到的时域信号数据通过FIR滤波器做频域滤波,完成滤波降噪。
进一步的,步骤(2)的具体方式为:
(201)对时域信号数据进行归一化处理;
(202)对处理后的每帧信号做短时傅里叶变换,提取信号的线谱特征;
(203)对处理后的每帧时域信号做快速傅立叶变换,对结果取平方值得到信号的能量谱,通过梅尔滤波器组进行滤波,得到信号的梅尔频率,然后做对数运算和离散余弦变换求倒谱,得到信号的梅尔倒谱特征。
进一步的,步骤(4)中对三个网络模型赋予不同的权重的具体方式为:
(401)将训练好的三个网络模型进行预加载,对步骤(3)各网络模型训练阶段的识别准确率由高到低进行排序,并依次赋予高、中、低三个权重;
(402)将三个网络的识别结果输入softmax函数,并将softmax函数的输出送入投票器中,将概率向量进行加权求和,得到最终识别结果;
(403)若投票结果为1:1:1,即预测结果各不相同的情况时,则以权重最大模型的识别结果为最终判决结果。
本发明所取得的有益效果在于:
1、本发明使用了深度学习建模的水声目标识别方法,首先滤除了声纳信号数据中的干扰与杂波,其次提取出类间表征能力强的特征信息,接着利用神经网络学习不同噪声目标的特征,最终达到分类识别的目的。这种方式自动化程度高,可以提高水声目标识别的效率。
2、本发明根据不同海况和工况下各特征量表现出不同程度的区分性,设计了多神经网络模型融合识别架构,使网络在变化的环境中都能利用当下最具区分度的特征,实现对水声目标稳高识别准确率和环境宽容性的识别能力。
3、本发明采用深-浅网络多模型融合的水声目标智能识别方式,能够提高水声目标被动识别的准确率,并具有良好的环境适应性。此外,本发明采用高效信号处理方法与深度学习相合的识别模式,能够克服深度学习方法采用单一滤波降噪方式所带来的提取特征鲁棒性差的问题。
附图说明
图1是本发明实施例中的滤波降噪处理流程图;
图2是本发明实施例中特征提取的流程图;
图3是本发明实施例中用于学习时频特征的卷积神经网络的结构示意图;
图4是本发明实施例中用于学习梅尔倒谱特征的卷积神经网络的结构示意图;
图5是本发明实施例中用于学习时频特征的残差网络的结构示意图。
具体实施方式
下面结合附图,对本发明的技术方案作进一步的详细说明。
一种信号处理与深-浅网络多模型融合的水声目标识别方法,本方法首先用信号处理方法对被动侦察阵列采集的目标信号数据进行预处理,滤除干扰并提取目标特征,然后采用卷积神经网络(CNN)和残差网络(ResNet)构建多模型识别架构,最后引入投票决策机制,实现对水中机动目标的分类识别。具体包括以下步骤:
(1)对于基阵接收的水声目标辐射噪声信号进行滤波降噪,得到“干净”且增强后的目标时域信号数据;
(2)对步骤(1)的信号数据做域变换,提取具有类间区分度的时频谱图(LOFAR)和梅尔倒谱系数(MFCC)特征样本;
(3)将步骤(2)得到特征样本标注所属类别,搭建由双通道“卷积神经网络”(CNN)和单通道“残差网络”(ResNet)共同组成的三通道深-浅网络,使用时频特征分别对“卷积神经网络”(CNN)和“残差网络”(ResNet)进行训练;使用梅尔倒谱系数特征对CNN网络进行训练,从而形成多模型联合识别的处理架构。在网络训练中可使用“dropout”的训练技巧,以防止出现过拟合现象;
(4)对步骤(3)中的三个网络模型赋予不同的权重,使用投票表决机制得出最终判决结果,若投票结果各不相同,则使用权重最大的模型的识别结果作为最终判决结果。
步骤(1)中,分别从空域和频率对信号数据进行滤波,具体步骤包括:
(101)将基阵采集的实数形式的信号分割成等时长样本;
(102)对样本数据采用分裂波束相关法进行波束形成,,在全方位进行谱峰检测选取目标疑似方位;
(103)对步骤(102)输出的疑似方位进行时间累积,通过经验门限判决,得到目标精准方位;
(104)根据步骤(103)得到的目标方位,作时域波束形成完成空域滤波过程,提取增强后的时域信号数据;
(105)对步骤(104)得到的时域信号数据通过FIR滤波器作频域滤波.
步骤(2)中,对信号数据进行短时傅里叶变换和梅尔倒谱分析,得到二维时频谱图和梅尔倒谱系数,具体步骤包括:
(201)对时域信号数据进行归一化处理;
(202)对处理后的每帧信号xk(n)做短时傅里叶变换得到Fk(m,n),提取信号的线谱特征;
(203)对处理后的每帧时域信号xk(n)做FFT变换,对结果取平方值得到信号的能量谱,通过梅尔滤波器组进行滤波,得到信号的梅尔频率,作对数运算和离散余弦变换求倒谱,得到信号的梅尔倒谱特征。
步骤(3)中,根据采集时记录的目标类型对特征样本进行分类标注,作为神经网络的训练样本;
使用时频特征分别对CNN网络和ResNet进行训练的具体步骤包括:
(A301)将所有时频特征按照3:1:1的比例划分为训练集、验证集和测试集,打乱顺序以确保每个样本集中各类数据均匀分布;
(A302)根据时频数据的特征搭建CNN分类模型,网络结构由1层输入层,4层卷积层,4层极大池化层,1层全连接层和1层Softmax层构成,卷积层使用ReLU函数作为激活函数;
(A303)在训练阶段,首先初始化可训练参数和超参数,将时频数据输入CNN抽取特征信息,将其通过一个非线性激活函数;
(A304)将激活函数的输出送入池化层,进行特征降维,保留关键信息;
(A305)调整对应参数,重复(A303)、(A304)两步三次后,将结果输入全连接层,使特征可以映射到样本标记空间;
(A306)将(A305)结果输入softmax分类函数,得到预测类别;
(A307)用(A306)的输出与标签值计算损失,更新模型参数;
(A308)训练过程中根据验证集分类准确率的变化趋势进行自适应优化,直至得到具有分类识别能力的网络模型;
(A309)根据时频数据的特征搭建的ResNet分类模型,包括4层layer,layer层的block个数分别为3,4,6,3,每个block主要由卷积层、批量标准化层和Softmax分类层组成,根据样本特性,调整输入层维度,对模型进行适应性迁移;
(A310)参照(A303)至(A308)步骤的训练过程,得到可以分辨不同目标时频特征的ResNet网络模型。
步骤(3)中,使用梅尔倒谱征对CNN模型进行训练的具体步骤包括:
(B301)将所有梅尔倒谱系数样本数据按照3:1:1的比例划分为训练集、验证集和测试集,打乱顺序以确保每个样本集中各类数据均匀分布;
(B302)根据梅尔倒谱系数的特征搭建基本的CNN分类模型,由1层输入层,2层卷积层,2层极大池化层,4层Dropout层,2层全连接层和1层Softmax层构成,卷积层和全连接层使用的激活函数均为ReLU;
(B303)参照(A303)至(A308)步骤的训练过程,得到可以分辨不同目标梅尔倒谱系数特征的CNN网络模型。
以下为一个更具体的例子:
一种信号处理与深-浅网络多模型融合的水声目标识别方法,具体方式如下:
S1:滤波降噪
由于在实际工作环境中,探测范围的海域内,通常会出现多个目标同时存在的情况,即声纳设备采集的数据中存在多目标特征交织的情况,而深度学习需要尽量干净的特征样本,需要一种方法在获取某一目标的信号数据时,尽量抑制其他目标的噪声信号。图1为本实施例中的滤波降噪处理流程图,首先需要将数据进行等间隔的划分,利用目标空间分布特性,采用分裂波束相关法在全方位进行谱峰检测选取目标疑似方位,对其进行时间累积,通过经验门限判决,得到目标精准方位,针对该方位执行时域波束形成完成空域滤波,实现滤除其他方位目标信号的目的;进一步对空域滤波得到的数据通过FIR滤波器做频率滤波,降低海洋背景噪声及其他杂波的干扰,得到干净的样本数据。
S2:时频特征提取
参考图2上半部分时频特征提取处理流程,对滤波后的声纳信号数据(L1(n),L2(n),...,Lk(n))进行短时傅立叶变换,生成时频谱序列(F1(u,v),F2(u,v),…,Fk(u,v)),实现步骤如下:
S21:通过控制帧间的重叠,将原始信号的采样序列分为存在前后联系的连续若干帧;
S22:对每帧信号样本Lk(n)(1≤k≤M)做归一化和中心化处理;
归一化处理:
Figure GDA0003725216030000101
中心化处理:
Figure GDA0003725216030000102
(N为信号的帧数)。
S23:对每帧信号xk(n)做短时傅里叶变换得到Fk(m,n);
通过使用窗函数,使得短时傅里叶变换具有局部特性,从而可以利用它获取水声信号的“局部频谱”,运算操作如下:
Figure GDA0003725216030000103
其中g*为窗函数,N为总采样点数,m为滑动步长
窗函数选择汉宁窗,通过快速傅里叶变换,得到了LOFAR谱图,提取出声信号的低频线谱特征。
S3:梅尔倒谱系数特征提取
参见图2中下半部分梅尔倒谱系数特征提取流程,提取出基于人耳听觉特性的MFCC特征并制成二维谱图,作为分类模型的输入,实现步骤如下:
S31:对每帧信号样本Lk(n)(1≤k≤M)做归一化和中心化处理;
S32:将经上一步处理后得到的结果逐帧进行FFT得到帧信号频谱。经过STFT后,对结果取绝对值再平方得到能量谱图。每帧信号的能量谱计算公式如下所示:
p(f)=|X(f)2|=|FFT(x(n))|2
其中,x(n)为输入帧信号,X(f)为输入帧信号频谱。
S33:构造一个梅尔滤波器组,并与能量谱进行点积运算得到梅尔频谱图,滤波过程可以用以下公式进行表示:
Figure GDA0003725216030000111
其中N表示各帧信号总点数,Hm(f)为梅尔滤波器组系数。
S34:模拟人耳对声音响度的“对数式”特性,对梅尔频谱图取对数得到:
E′(m)=lgE(m).
S35:对每帧数据,利用DCT改变数据分布,将大部分信号数据将集中在低频区,取变换后的前33个低频数据作为该帧的MFCC特征。
S4:神经网络模型训练
参考图3的网络模型结构搭建学习时频特征的卷积神经网络,将所有样本数据按照3∶1∶1的比例划分为训练集、验证集和测试集。在训练阶段,训练集和验证集的特征图为模型输入,观察训练过程中验证集的分类准确率变化,手动调整超参数来提高模型的泛化能力和鲁棒性。在测试阶段,测试集中的特征图输入训练完成的CNN模型中,完成本模型的训练过程。
S41:在基于LOFAR谱图特征搭建CNN模型时,需要将谱图的尺寸归一化为128*128,确保维度一致;
S42:将归一化后的LOFAR谱图输入一个卷积核为8*8,通道数为5,步长为1的卷积层,得到第i个隐藏层hi,卷积层中卷积核工作过程可由下式来表示:
Figure GDA0003725216030000121
(i,j)∈{0,1,...,Ll+1}
Figure GDA0003725216030000122
式中b为偏差量,Zl和Zl+1表示第l+1层的卷积输入和输出,也被称为特征图,Ll+1为Zl+1的尺寸,这里假设特征图长宽相同。Z(i,j)对应特征图的像素,K为特征图的通道数,f、s0和p是卷积层参数,对应卷积核大小、卷积步长和填充层数。
为了增加神经网络各层间的非线性关系,同时缓解过拟合问题,需将hi输入ReLU激活函数,如下式:
Figure GDA0003725216030000123
S43:将结果输入窗长为2、步长为2的池化层,对特征图进行采样降维,剔除掉无关信息,减少参数量,池化层的一般表示形式为:
Figure GDA0003725216030000124
式中步长s0、像素(i,j)的含义与卷积层相同,p是预指定参数。当p→∞时,池化在区域内取极大值,被称为极大池化。
S44:调整卷积层的卷积核参数,继续采用卷积层+ReLU函数+池化层的方法迭代2次,进一步提取特征图的深层特征。在获得所需的所有局部特征之后,将它们先后通过3个全连接层,映射到样本的标记空间,得到一个一维向量;使用3个全连接层,是为更好地拟合真实的概率分布;
S45:之后利用softmax函数,以概率形式呈现的多分类结果,softmax函数的计算方法如下:
Figure GDA0003725216030000131
其中,fc表示标签为c的向量;
S46:利用交叉熵函数作为损失函数,具体形式如下
Figure GDA0003725216030000132
其中ti表示标签值,yi表示softmax函数的输出。根
S47:采用Adam(Adaptive Moment Estimation)算法作为深度学习模型的优化算法,利用一阶矩估计和二阶矩估计实现学习率的自适应调整,公式如下:
vdw=0vdb=0Sdw=0Sdb=0
Figure GDA0003725216030000133
Figure GDA0003725216030000134
Figure GDA0003725216030000135
Figure GDA0003725216030000136
参数更新公式:
Figure GDA0003725216030000141
Figure GDA0003725216030000142
在使用指数加权平均值算法的时通过下面的方法进行偏差修正:
Figure GDA0003725216030000143
Figure GDA0003725216030000144
其中,t表示的是迭代的次数,β1是动量的参数,通常取0.9,β是RMSprop的参数,通常取0.999,∈主要是用来避免分母为0的情况,一般取10-8,w和b分别代表神经网络的权重和偏置,α表示学习率。
Figure GDA0003725216030000145
表示的是参数w的梯度的平方。
S48:参考图4的网络模型结构,搭建用于学习梅尔倒谱系数的卷积神经网络,在根据MFCC谱图特征搭建基本的CNN模型时,由于作为模型输入的32*32MFCC谱图的尺寸较小,在CNN结构中仅设计2层卷积层和2层极大池化层对MFCC谱图交替进行局部特征提取。其余步骤与根据时频搭建CNN模型步骤类似;
S49:参考图5的网络模型结构,搭建用于学习时频特征的残差网络,将深层网络模型构建为浅层网络模型和自身映射的增加层,把训练好的浅层结构与自身映射的增加层,通过残差块连接在一起。将CNN中的最优映射改写成H(X)=F(X)+X,此处通过在前馈网络中增加一个短接层来实现。短接层以不同的步长跳过一个或多个层与主径回合,这样结构的输出为:
Figure GDA0003725216030000151
如果输入和输出维度不同,则需要增加一个线性投影,计算公式如下式:
Figure GDA0003725216030000152
S410:在训练ResNet过程中,为了利用先前类似任务的训练结果,采用了迁移学习的思想,准备已经在ImageNet上训练过的ResNet-34,并去掉ResNet-34的最后一层全连接层。在训练时只需要训练替换过的全连接层的参数。
步骤S5:投票机制的运用
S51:将三个通道网络经过softmax函数的输出概率向量赋予不同的权重,单独测试准确率更高的网络可以赋予其更大的权重;
S52:取出经过加权求和的概率向量中值最大的索引作为最终类别判别的结果
S53:当三个模型的预测结论中出现1:1:1,即预测结果各不相同的情况时,则以权重最大模型的识别结果为最终判决结果。
本发明通过时频谱分析和梅尔倒谱分析方法提取声纳信号有效特征,使用双通道卷积神经网络CNN和单通道残差网络ResNet对该特征进行深度学习形成稳定的辨析能力,最后对三通道的结果进行投票融合,实现了对水中机动目标准确、稳定的识别。通过大样本的真实数据集测试取得了很好的实验结果,数据集采集于南海近海海域,共有4类总计14600个样本,每个样本都是采样率为5kS/s长度不到3.768秒的数据。在实验时,将数据集做进一步的划分,其中5300个样本作为训练数据,900个样本作为验证数据,8400个样本作为测试数据。最终结果显示,当设置在LOFAR-CNN、MFCC-CNN、LOFAR-ResNet的权重比分别是3:2:4时,深浅网络的准确率不仅比单通道网络的最高准确率高出4%,还比传统方法的准确率高出至少9%,达到93.17%识别正确率;相对于单网络识别模型和其他经典识别方法表现出更好的稳定性和拓展性,具有很好的应用前景。
总之,本发明以声纳信号处理为预处理应对复杂海况下干净样本获取困难的问题;采用多个维度的特征作为训练样本提升不同海况和工况下适应能力和识别正确率;基于多神经网络模型的融合识别提升本方法的识别正确率和鲁棒性。

Claims (4)

1.一种信号处理与深-浅网络多模型融合的水声目标识别方法,其特征在于,包括以下步骤:
(1)对基阵接收的水声目标辐射噪声信号进行滤波降噪,得到干净和增强后的时域信号数据;
(2)对步骤(1)的时域信号数据做域变换,提取具有类间区分度的时频谱图和梅尔倒谱系数作为特征样本;
(3)搭建三通道深-浅网络,所述三通道深-浅网络包括两个卷积神经网络和一个残差网络;将步骤(2)得到特征样本标注所属类别,使用特征样本中的时频谱图分别对一个卷积神经网络和残差网络进行训练,使用特征样本中的梅尔倒谱系数特征对另一个卷积神经网络进行训练,形成多模型联合识别的处理架构;
其中,使用特征样本中的时频谱图分别对一个卷积神经网络和残差网络进行训练的具体方式为:
(A301)将所有时频谱图按照3:1:1的比例划分为训练集、验证集和测试集,并打乱顺序以确保每个样本集中各类数据均匀分布;
(A302)根据时频谱图的特征搭建卷积神经网络分类模型,卷积神经网络包括1个输入层、4个卷积层、4个极大池化层、1个全连接层和1个Softmax层,卷积层使用ReLU函数作为激活函数;
(A303)对卷积神经网络进行训练,得到具有分类识别能力的卷积神经网络模型;
(A304)根据时频图谱数据搭建残差网络分类模型,所述残差网络包括4层layer,每个layer由不同个数的block构成,4层layer的block个数分别为3、4、6、3,每个block均包括卷积层、批量标准化层和Softmax分类层;根据样本特性,对残差网络分类模型进行适应性迁移,调整输入层维度,加载预训练好的模型参数并进行训练,得到可以分辨不同目标时频谱图的残差网络模型;
使用特征样本中的梅尔倒谱系数特征对另一个卷积神经网络进行训练的具体方式为:
(B301)将所有梅尔倒谱系数样本数据按照3:1:1的比例划分为训练集、验证集和测试集,并打乱顺序以确保每个样本集中各类数据均匀分布;
(B302)根据梅尔倒谱系数的特征搭建基本的卷积神经网络分类模型,卷积神经网络包括1个输入层、2个卷积层、2个极大池化层、4个Dropout层、2个全连接层和1个Softmax层,卷积层和全连接层使用的激活函数均为ReLU;
(B303)对卷积神经网络进行训练,得到可以分辨不同目标梅尔倒谱系数特征的卷积神经网络模型;
(4)对步骤(3)中的三个网络模型赋予不同的权重,使用投票表决机制得出最终判决结果,若投票结果各不相同,则使用权重最大的模型的识别结果作为最终判决结果。
2.根据权利要求1所述的一种信号处理与深-浅网络多模型融合的水声目标识别方法,其特征在于,步骤(1)的具体方式为:
(101)将基阵采集的实数形式的信号分割成等时长样本;
(102)对样本数据采用分裂波束相关法进行波束形成,在全方位进行谱峰检测选取目标疑似方位;
(103)对步骤(102)输出的疑似方位进行时间累积,通过经验门限判决,得到目标精准方位;
(104)根据步骤(103)得到的目标精准方位,进行时域波束形成,完成空域滤波过程,并提取增强后的时域信号数据;
(105)对步骤(104)得到的时域信号数据通过FIR滤波器做频域滤波,完成滤波降噪。
3.根据权利要求1所述的一种信号处理与深-浅网络多模型融合的水声目标识别方法,其特征在于,步骤(2)的具体方式为:
(201)对时域信号数据进行归一化处理;
(202)对处理后的每帧信号做短时傅里叶变换,提取信号的线谱特征;
(203)对处理后的每帧时域信号做快速傅立叶变换,对结果取平方值得到信号的能量谱,通过梅尔滤波器组进行滤波,得到信号的梅尔频率,然后做对数运算和离散余弦变换求倒谱,得到信号的梅尔倒谱特征。
4.根据权利要求1所述的一种信号处理与深-浅网络多模型融合的水声目标识别方法,其特征在于,步骤(4)的具体方式为:
(401)将训练好的三个网络模型进行预加载,对步骤(3)各网络模型训练阶段的识别准确率由高到低进行排序,并依次赋予高、中、低三个权重;
(402)将三个网络的识别结果输入softmax函数,并将softmax函数的输出送入投票器中,将概率向量进行加权求和,得到最终识别结果;
(403)若投票结果为1:1:1,即预测结果各不相同的情况时,则以权重最大模型的识别结果为最终判决结果。
CN202011264120.4A 2020-11-12 2020-11-12 信号处理与深-浅网络多模型融合的水声目标识别方法 Active CN112364779B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011264120.4A CN112364779B (zh) 2020-11-12 2020-11-12 信号处理与深-浅网络多模型融合的水声目标识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011264120.4A CN112364779B (zh) 2020-11-12 2020-11-12 信号处理与深-浅网络多模型融合的水声目标识别方法

Publications (2)

Publication Number Publication Date
CN112364779A CN112364779A (zh) 2021-02-12
CN112364779B true CN112364779B (zh) 2022-10-21

Family

ID=74514657

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011264120.4A Active CN112364779B (zh) 2020-11-12 2020-11-12 信号处理与深-浅网络多模型融合的水声目标识别方法

Country Status (1)

Country Link
CN (1) CN112364779B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112949712A (zh) * 2021-03-01 2021-06-11 北京小白世纪网络科技有限公司 一种基于多模态的甲状腺结节自动识别模型构建方法
CN113242197B (zh) * 2021-03-24 2022-06-07 厦门大学 基于人工智能的水声信号调制识别方法及系统
CN112801065B (zh) * 2021-04-12 2021-06-25 中国空气动力研究与发展中心计算空气动力研究所 一种基于时空多特征信息的被动声纳目标探测方法及装置
CN113111786B (zh) * 2021-04-15 2024-02-09 西安电子科技大学 基于小样本训练图卷积网络的水下目标识别方法
CN113239809B (zh) * 2021-05-14 2023-09-15 西北工业大学 基于多尺度稀疏sru分类模型的水声目标识别方法
CN113296148A (zh) * 2021-05-25 2021-08-24 电子科技大学 基于时域和小波域双通道卷积神经网络的微震识别方法
CN113435276A (zh) * 2021-06-16 2021-09-24 中国电子科技集团公司第五十四研究所 一种基于对抗残差网络的水声目标识别方法
CN113420870B (zh) * 2021-07-04 2023-12-22 西北工业大学 用于水声目标识别的U-Net结构生成对抗网络及方法
CN113673323B (zh) * 2021-07-13 2023-10-27 中国船舶重工集团公司第七一五研究所 一种基于多深度学习模型联合判决体制的水中目标识别方法
CN113607068B (zh) * 2021-07-19 2022-08-05 华中科技大学 一种光声测量信号特征的识别模型建立方法及提取方法
CN113537069B (zh) * 2021-07-19 2024-03-19 大连交通大学 一种基于声信号多特征融合的cmt焊接缺陷识别方法
CN113537113B (zh) * 2021-07-26 2022-10-25 哈尔滨工程大学 基于复合神经网络的水声目标识别方法
CN113591733B (zh) * 2021-08-04 2022-09-20 中国人民解放军国防科技大学 基于集成神经网络模型的水声通信调制模式分类识别方法
CN114220458B (zh) * 2021-11-16 2024-04-05 武汉普惠海洋光电技术有限公司 基于阵列水听器的声音识别方法和装置
CN114636995A (zh) * 2022-03-16 2022-06-17 中国水产科学研究院珠江水产研究所 一种基于深度学习的水声信号检测方法及系统
CN114543983A (zh) * 2022-03-29 2022-05-27 阿里云计算有限公司 振动信号的识别方法及装置
CN115169407B (zh) * 2022-07-18 2023-04-18 中国科学院国家空间科学中心 基于时域深度特征学习的微弱瞬态信号检测方法及系统
CN115950517A (zh) * 2023-03-02 2023-04-11 南京大学 一种可配置水声信号特征提取方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108694346A (zh) * 2017-04-05 2018-10-23 中国科学院声学研究所 一种基于两级cnn的船舶辐射噪声信号识别方法
CN109800700A (zh) * 2019-01-15 2019-05-24 哈尔滨工程大学 一种基于深度学习的水下声信号目标分类识别方法
CN110245608A (zh) * 2019-06-14 2019-09-17 西北工业大学 一种基于半张量积神经网络的水下目标识别方法
CN110853631A (zh) * 2018-08-02 2020-02-28 珠海格力电器股份有限公司 智能家居的语音识别方法及装置
CN111243569A (zh) * 2020-02-24 2020-06-05 浙江工业大学 基于生成式对抗网络的情感语音自动生成方法及装置
US20200184278A1 (en) * 2014-03-18 2020-06-11 Z Advanced Computing, Inc. System and Method for Extremely Efficient Image and Pattern Recognition and Artificial Intelligence Platform

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109767785A (zh) * 2019-03-06 2019-05-17 河北工业大学 基于卷积神经网络的环境噪声识别分类方法
CN110069199B (zh) * 2019-03-29 2022-01-11 中国科学技术大学 一种基于智能手表的皮肤式手指手势识别方法
CN110211568A (zh) * 2019-06-03 2019-09-06 北京大牛儿科技发展有限公司 一种语音识别方法及装置
CN110909613A (zh) * 2019-10-28 2020-03-24 Oppo广东移动通信有限公司 视频人物识别方法、装置、存储介质与电子设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200184278A1 (en) * 2014-03-18 2020-06-11 Z Advanced Computing, Inc. System and Method for Extremely Efficient Image and Pattern Recognition and Artificial Intelligence Platform
CN108694346A (zh) * 2017-04-05 2018-10-23 中国科学院声学研究所 一种基于两级cnn的船舶辐射噪声信号识别方法
CN110853631A (zh) * 2018-08-02 2020-02-28 珠海格力电器股份有限公司 智能家居的语音识别方法及装置
CN109800700A (zh) * 2019-01-15 2019-05-24 哈尔滨工程大学 一种基于深度学习的水下声信号目标分类识别方法
CN110245608A (zh) * 2019-06-14 2019-09-17 西北工业大学 一种基于半张量积神经网络的水下目标识别方法
CN111243569A (zh) * 2020-02-24 2020-06-05 浙江工业大学 基于生成式对抗网络的情感语音自动生成方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"基于卷积神经网络的水声目标分类技术";吕海涛 等;《舰船电子工程》;20191231;第39卷(第2期);第153-157页 *
"水下声目标的梅尔倒谱系数智能分类方法";张少康 等;《应用声学》;20190331;第38卷(第2期);第267-272页 *

Also Published As

Publication number Publication date
CN112364779A (zh) 2021-02-12

Similar Documents

Publication Publication Date Title
CN112364779B (zh) 信号处理与深-浅网络多模型融合的水声目标识别方法
CN110245608B (zh) 一种基于半张量积神经网络的水下目标识别方法
CN110491416B (zh) 一种基于lstm和sae的电话语音情感分析与识别方法
CN109522857B (zh) 一种基于生成式对抗网络模型的人数估计方法
CN109993280B (zh) 一种基于深度学习的水下声源定位方法
CN109559736B (zh) 一种基于对抗网络的电影演员自动配音方法
CN109410917B (zh) 基于改进型胶囊网络的语音数据分类方法
CN110751044B (zh) 基于深度网络迁移特征与增广自编码的城市噪声识别方法
CN109841226A (zh) 一种基于卷积递归神经网络的单通道实时降噪方法
CN108766419A (zh) 一种基于深度学习的非常态语音区别方法
CN106847309A (zh) 一种语音情感识别方法
CN113571067B (zh) 一种基于边界攻击的声纹识别对抗样本生成方法
CN110045356B (zh) 一种双向长短时记忆神经网络水面目标识别方法
Yang et al. Underwater acoustic research trends with machine learning: general background
CN108445752A (zh) 一种自适应选择深度特征的随机权神经网络集成建模方法
Wei et al. A method of underwater acoustic signal classification based on deep neural network
CN113780242A (zh) 一种基于模型迁移学习的跨场景水声目标分类方法
CN111968666A (zh) 基于深度域自适应网络的助听器语音增强方法
CN112183582A (zh) 一种多特征融合的水下目标识别方法
CN113763965A (zh) 一种多重注意力特征融合的说话人识别方法
CN114239657A (zh) 一种基于复值干涉神经网络的时序信号识别方法
Sunny et al. Recognition of speech signals: an experimental comparison of linear predictive coding and discrete wavelet transforms
CN113435276A (zh) 一种基于对抗残差网络的水声目标识别方法
CN113111786A (zh) 基于小样本训练图卷积网络的水下目标识别方法
CN117034060A (zh) 基于ae-rcnn的洪水分级智能预报方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant