CN116304863B - 一种多数据融合的车辆故障监测预警方法、设备及介质 - Google Patents
一种多数据融合的车辆故障监测预警方法、设备及介质 Download PDFInfo
- Publication number
- CN116304863B CN116304863B CN202310141592.8A CN202310141592A CN116304863B CN 116304863 B CN116304863 B CN 116304863B CN 202310141592 A CN202310141592 A CN 202310141592A CN 116304863 B CN116304863 B CN 116304863B
- Authority
- CN
- China
- Prior art keywords
- data
- vehicle
- sound
- feature vector
- fault
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000012544 monitoring process Methods 0.000 title claims abstract description 21
- 238000000605 extraction Methods 0.000 claims abstract description 40
- 230000004927 fusion Effects 0.000 claims abstract description 14
- 238000011176 pooling Methods 0.000 claims description 24
- 238000009499 grossing Methods 0.000 claims description 12
- 230000015654 memory Effects 0.000 claims description 12
- 230000005284 excitation Effects 0.000 claims description 11
- 230000002159 abnormal effect Effects 0.000 claims description 10
- 230000006870 function Effects 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 9
- 238000001228 spectrum Methods 0.000 claims description 7
- 238000013136 deep learning model Methods 0.000 claims description 6
- 238000004140 cleaning Methods 0.000 claims description 5
- 238000013528 artificial neural network Methods 0.000 claims description 4
- 238000013527 convolutional neural network Methods 0.000 claims description 3
- 239000000446 fuel Substances 0.000 claims description 3
- 239000011159 matrix material Substances 0.000 claims description 3
- 238000005070 sampling Methods 0.000 claims description 3
- 230000009286 beneficial effect Effects 0.000 abstract description 4
- 238000012423 maintenance Methods 0.000 abstract description 4
- 230000002457 bidirectional effect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000006467 substitution reaction Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000007787 long-term memory Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/27—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the analysis technique
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T90/00—Enabling technologies or technologies with a potential or indirect contribution to GHG emissions mitigation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Molecular Biology (AREA)
- Quality & Reliability (AREA)
- General Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明公开了一种多数据融合的车辆故障监测预警方法、设备及介质。方法包括以下步骤:通过物联网采集车辆声音数据和车辆行驶数据;提取车辆声音数据的滤波器组特征,将车辆声音数据转换为车辆时频数据;将车辆时频数据输入第一特征提取模型,得到第一特征向量;将车辆行驶数据输入第二特征提取模型,得到第二特征向量;将第一特征向量和第二特征向量进行拼接融合,得到第三特征向量;将第三特征向量输入分类器,得到故障分类结果。本发明有助于进一步建立车辆声音与故障的关系,构建声音、行驶数据与故障的知识图谱,为驾驶人员或维修人员提供高效的故障判别方案。
Description
技术领域
本发明涉及车辆状态监控领域,尤其是一种多数据融合的车辆故障监测预警方法、设备及介质。
背景技术
车辆在使用过程中,存在诸多的安全风险,不仅容易导致车辆在使用过程中不能正常行驶,还会导致交通事故,造成经济的损失和人员的伤亡。
当前对车辆的监控,大多通过视频并结合AI技术对驾驶员的驾驶行为进行监控,提示驾驶员安全驾驶;利用物联网技术采集车辆的速度、转速、胎压、油耗、位置等车辆行驶数据,实时同步到物联网中台,监控车辆的运行状态。但是这些监控方法忽视了车辆运行时所发出的声音,没有利用车辆的声音并结合车辆的其他行驶数据,对车辆故障进行监测预警。
发明内容
有鉴于此,本发明实施例提供一种多数据融合的车辆故障监测预警方法、设备及介质。
本发明的第一方面提供了一种多数据融合的车辆故障监测预警方法,包括以下步骤:
通过物联网采集车辆声音数据和车辆行驶数据;
提取车辆声音数据的滤波器组特征,将车辆声音数据转换为车辆时频数据;
将车辆时频数据输入第一特征提取模型,得到第一特征向量;
将车辆行驶数据输入第二特征提取模型,得到第二特征向量;
将第一特征向量和第二特征向量进行拼接融合,得到第三特征向量;
将第三特征向量输入分类器,得到故障分类结果。
进一步地,所述将车辆声音数据转换为车辆时频数据,具体包括以下步骤:
通过以下公式对车辆声音数据进行预加重处理,得到第一中间声音数据yn;
yn=xn-axn-1
式中,xn是当前时刻的车辆声音数据,xn-1是上一时刻的车辆声音数据,a是预设滤波系数;
通过以下公式对第一中间声音数据进行频谱估计,得到第二中间声音数据Fx(f);
式中,K多正弦窗函数的个数,m=1,2,……,N;N为采样点数;
对第二声音中间数据进行平滑,得到第三声音中间数据;
将第三声音中间数据输入由以下公式构成的梅尔频率滤波器,得到车辆时频数据;
式中f表示第三声音中间数据的实际频率。
进一步地,所述对第二声音中间数据进行平滑,得到第三声音中间数据,具体包括以下步骤:
将第二声音中间数据输入滑动平均滤波器,得到声音平滑数据;
逐帧比较第二声音中间数据和声音平滑数据,取第二声音中间数据和声音平滑数据中的极大值作为新的第二声音中间数据;
返回将第二声音中间数据输入滑动平均滤波器这一步骤,直至返回次数达到预设迭代次数;
将最终得到的第二声音中间数据作为第三声音中间数据输出。
进一步地,所述第一特征提取模型,具体包括一维卷积层、压缩激励残差网络层和注意力统计池化层;所述将车辆时频数据输入第一特征提取模型,得到第一特征向量,具体包括以下步骤:
通过一维卷积层对所述车辆时频数据进行卷积操作,得到车辆声音特征;
通过压缩激励残差网络层将所述车辆声音特征进行多层特征融合,提取出车辆声音特征的第一整体信息;
通过一维卷积层对所述车辆声音特征的第一整体信息进行卷积运算,得到第二整体信息;
通过注意力统计池化层压缩所述第二整体信息,得到关于车辆时频数据的第一特征向量。
进一步地,所述车辆行驶数据,具体包括车辆时速、引擎转速、轮胎胎压和车辆耗油量。
进一步地,在所述将车辆行驶数据输入第二特征提取模型之前,还包括以下步骤:
对车辆行驶数据进行数据清洗,去除车辆行驶数据中的噪声;
当所述车辆行驶数据中存在异常值时,通过线性插值法修订车辆行驶数据中的异常值;
将车辆行驶数据作归一化处理。
进一步地,所述第二特征提取模型,具体包括卷积池化层和双向长短期记忆网络层;所述将车辆行驶数据输入第二特征提取模型,得到第二特征向量,具体包括以下步骤:
通过卷积池化层对所述车辆行驶数据进行卷积池化处理,得到车辆行驶特征;
通过双向长短期记忆网络层对所述车辆行驶特征进行突出特征提取,得到车辆行驶突出特征;
通过卷积池化层对所述车辆行驶数据进行池化处理,得到关于车辆行驶数据的第二特征向量。
进一步地,所述将第三特征向量输入分类器,得到故障分类结果,具体包括以下步骤:
通过以下公式计算第三特征向量属于目标故障类别的概率:
式中,c表示目标故障类别;i表示输入向量;θc,i为权值矩阵中类别c对应的列向量Wc与输入向量i之间的夹角;CN为类别个数,m为边缘角度,s为缩放因子;
选择概率最高的目标故障类别作为第三特征向量的故障分类结果输出。
本发明第二方面提供了一种电子设备,包括处理器以及存储器;
所述存储器用于存储程序;
所述处理器执行所述程序实现一种多数据融合的车辆故障监测预警方法。
本发明第三方面提供了一种计算机可读存储介质,所述存储介质存储有程序,所述程序被处理器执行实现一种多数据融合的车辆故障监测预警方法。
本发明的实施例具有如下方面有益效果:本发明通过物联网技术采集车辆声音、时速、引擎转速、轮胎胎压和耗油量等数据;提取声音的滤波器组特征,利用多个特征提取模型对上述多模态数据进行融合,实现了通过车辆声音数据和行驶数据判断车辆故障类别。有助于进一步建立车辆声音与故障的关系,构建声音、行驶数据与故障的知识图谱,为驾驶人员或维修人员提供高效的故障判别方案。
本发明的附加方面和优点将在下面的描述部分中给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一种多数据融合的车辆故障监测预警方法、设备及介质基本流程示意图;
图2是本发明一种多数据融合的车辆故障监测预警方法、设备及介质中第一特征提取模型的特征提取流程图;
图3是本发明一种多数据融合的车辆故障监测预警方法、设备及介质的第一特征提取模型中压缩激励残差网络的特征提取流程图;
图4是本发明一种多数据融合的车辆故障监测预警方法、设备及介质中第二特征提取模型的特征提取流程图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
车辆行驶时发出的声音中包含了大量的运行状态信息,当车辆发生故障时,车辆所发出的声音相较于正常情况会发生一定的变化,并具有一定的特征。基于此,本发明实施例提出一种多数据融合的车辆故障监测预警方法、设备及介质,使用深度学习方法结合车辆行驶速度、引擎转速、轮胎胎压、油耗等数据,识别出汽车可能存在的故障。
本发明实施例所提供一种多数据融合的车辆故障监测预警方法如图1所示,主要包括以下步骤:
S1.通过物联网采集车辆声音数据和车辆行驶数据;
S2.提取车辆声音数据的滤波器组特征,将车辆声音数据转换为车辆时频数据;
S3.将车辆时频数据输入第一特征提取模型,得到第一特征向量;
S4.将车辆行驶数据输入第二特征提取模型,得到第二特征向量;
S5.将第一特征向量和第二特征向量进行拼接融合,得到第三特征向量;
S6.将第三特征向量输入分类器,得到故障分类结果。
下面具体论述本发明实施例各步骤实施流程。
S1.通过物联网采集车辆声音数据和车辆行驶数据。物联网在车辆中的应用又被称为车联网,在目标车辆上安装各类车载终端和传感器,通过车载终端和传感器实现对车辆声音数据和行驶数据的采集。本实施例中车辆行驶数据具体包括车辆时速、引擎转速、轮胎胎压和车辆耗油量;其中,车辆时速和耗油量通过与车辆自带的数据采集系统数据交互得到,引擎转速通过在车辆传动轴上安装转速传感器采集得到,轮胎胎压通过在车辆轮毂上安装压力传感器,测量轮胎气门压力采集得到;车辆声音数据则通过安装在车辆底盘等多个位置的声音传感器采集。采集完成后,通过无线网络通信将车辆声音数据和车辆行驶数据汇总至上位机中,在上位机上通过深度学习模型完成对车辆故障的识别。
在一部分实施例中,在通过物联网采集车辆声音数据和车辆行驶数据之后,会根据车辆声音数据和车辆行驶数据构建车辆声音信息库,通过车辆声音信息库中的数据对后续使用的深度学习模型进行训练,进一步优化深度学习模型的故障分类效果。
S2.提取车辆声音数据的滤波器组特征,将车辆声音数据转换为车辆时频数据。对车辆声音数据而言,由于不同的车辆声音属于会由于车况和路况等原因产生一定的差异,因此本实施例在对车辆声音数据进行特征提取之前,首先将车辆声音数据转换为车辆视频数据,以提高特征提取的效果。
将车辆声音数据转换为车辆时频数据,具体包括以下步骤:
S2-1通过以下公式对车辆声音数据进行预加重处理,得到第一中间声音数据yn;
yn=xn-axn-1……(1)
式(1)中,xn是当前时刻的车辆声音数据,xn-1是上一时刻的车辆声音数据,a是预设滤波系数。由于车辆声音信号在高频部分容易产生损失,因此本实施例通过预加重处理增加车辆声音数据在高频区间的分辨率。本实施例具体采用一阶高通滤波器进行预加重处理,滤波系数a的取值介于0.9-1.0之间。
预加重完成之后,为了对第一中间声音数据进行频谱估计,本实施例对第一中间声音数据应用多正弦窗函数进行频谱估计。
S2-2.通过以下公式对第一中间声音数据进行频谱估计,得到第二中间声音数据Fx(f);
式(2)中,K多正弦窗函数的个数,m=1,2,……,N;N为采样点数。式(2)为离散傅里叶变换(Discrete Fourier Transform,DFT)的计算公式,其中,为多正弦窗函数,/>为多正弦窗函数的加权值。经实验,本实施例中K值取5-8,具体数值根据车辆路况和车况确定;通过多个近似的正弦窗函数进行加权处理完成第一中间声音数据的频谱估计,能够得到方差更小,信号特征更稳定的第二中间声音数据。
为了进一步提高信号特征的稳定性,本实施例在对第二中间声音数据进行梅尔滤波之前,首先对信号进行平滑处理。
S2-3.对第二声音中间数据进行平滑,得到第三声音中间数据。
步骤S2-3具体包括以下步骤:
S2-3-1.将第二声音中间数据输入滑动平均滤波器,得到声音平滑数据;
S2-3-2.逐帧比较第二声音中间数据和声音平滑数据,取第二声音中间数据和声音平滑数据中的极大值作为新的第二声音中间数据;
S2-3-3.返回将第二声音中间数据输入滑动平均滤波器这一步骤,直至返回次数达到预设迭代次数;
S2-3-4.将最终得到的第二声音中间数据作为第三声音中间数据输出。
本实施例滑动平均滤波器的函数表达式如下所示:
其中,i取值介于-N-1和N+1之间,本实施例通过滑动平均滤波器对第二声音中间数据进行平滑,得到包络谱的近似表示,能够提高车辆声音数据的时间鲁棒性。
S2-4.将第三声音中间数据输入由以下公式构成的梅尔频率滤波器,得到车辆时频数据;
式中f表示第三声音中间数据的实际频率。梅尔频率滤波器是由多个三角形滤波器组成的滤波器组,随着三角形滤波器数量的增多,三角形滤波器的宽度越宽,每个三角形滤波器的中心频率点的幅度为1,向两边线性衰减到0。将第三声音中间数据通过梅尔频率滤波器进行梅尔变换,使得车辆声音数据转换为车辆时频数据。
S3.将车辆时频数据输入第一特征提取模型,得到第一特征向量。
本实施例中第一特征提取模型为时延神经网络(time delay neural network),采用由一维卷积层(Conv1D)、压缩激励残差网络层(Res2Net Block+Squeeze_ExcitationBlock)和注意力统计池化层(Attentive Stat Pooling)构成的深度学习模型,特征提取流程如图2所示。本实施例中压缩激励残差网络层为一层或多层,特征提取流程如图3所示。
本实施例中将车辆时频数据输入第一特征提取模型,得到第一特征向量,具体包括以下步骤:
S3-1.通过一维卷积层对所述车辆时频数据进行卷积操作,得到车辆声音特征;一维卷积层的卷积操作主要是为了提取车辆时频数据中的有效特征。
S3-2.通过压缩激励残差网络层将所述车辆声音特征进行多层特征融合,提取出车辆声音特征的第一整体信息;本实施例中压缩激励残差网络层主要作用是通过残差连接对特征进行重叠,使得浅层特征可以直接传播到深层特征中,令信息前后传播更加顺畅;再进行密集连接,使得后面的每一层都可以直接得到前面所有层的信息,每一层都可以直接利用梯度信息,加强了特征的传递,更有效的利用特征。
S3-3.通过一维卷积层对所述车辆声音特征的第一整体信息进行卷积运算,得到第二整体信息;通过本步骤将多个压缩激励残差网络层的输出信息融合,能够加深网络,保留更多的声音浅层特征。
S3-4.通过注意力统计池化层压缩所述第二整体信息,得到关于车辆时频数据的第一特征向量。
S4.将车辆行驶数据输入第二特征提取模型,得到第二特征向量。
步骤S4所使用第二特征提取模型具体为卷积神经网络(Convolution NeuralNetwork,CNN)和双向长短期记忆网络(Bidirectional Long-Short Term Memory,BLSTM)相结合的深度学习模型,具体包括卷积池化层和双向长短期记忆网络层。第二特征提取模型的特征提取流程如图4所示,具体包括以下步骤:
S4-1.通过卷积池化层对所述车辆行驶数据进行卷积池化处理,得到车辆行驶特征;
S4-2.通过双向长短期记忆网络层对所述车辆行驶特征进行突出特征提取,得到车辆行驶突出特征;
S4-3.通过卷积池化层对所述车辆行驶数据进行池化处理,得到关于车辆行驶数据的第二特征向量。
步骤S4中通过对车辆行驶数据进行卷积池化,得到多个车辆行驶特征;进一步使用BLSTM模型对车辆行驶特征进行计算,提取出其中较为突出的特征作为车辆行驶突出特征;将多个车辆行驶突出特征作为全连接层的输入,读取网络模型全连接层的权重,通过比较特征值之间的权重大小来判断是否保留该车辆行驶突出特征,如该特征值权重大于预设的车辆行驶特点特征值权重,则保留该特征值,否则剔除该特征,最终得到表征车辆行驶特点的第二特征向量。
在一部分实施例中,步骤S4之前还包括以下步骤:
S4-0-1.在所述将车辆行驶数据输入第二特征提取模型之前,还包括以下步骤:
S4-0-2.对车辆行驶数据进行数据清洗,去除车辆行驶数据中的噪声;
S4-0-3.当所述车辆行驶数据中存在异常值时,通过线性插值法修订车辆行驶数据中的异常值;
S4-0-4.将车辆行驶数据作归一化处理。
由于车辆行驶数据采集时可能由于路况或车况复杂造成部分异常值、缺失值和噪声出现,因此需要在车辆行驶数据输入第二特征提取模型之前,对车辆行驶数据进行预处理。主要手段包括数据清洗和线性插值法,数据清洗是指对数据进行离散化后,将数据输入多个预设的数据判定区间中,并保留符合要求的一部分数据;线性插值法则具体是通过选取异常值前后的一个或多个行驶数据构造拟合曲线,利用最小二乘法计算异常值点的近似值,使用近似值替代异常值实现。
本实施例中通过步骤S4-0对车辆行驶数据进行预处理,能够使得采集到的车辆行驶数据更平滑,反应车辆特征效果更好。
S5.将第一特征向量和第二特征向量进行拼接融合,得到第三特征向量。
执行步骤S3-S4后,能够得到表征车辆行驶过程中声音数据的第一特征向量和行驶数据的第二特征向量。由于车辆的声音数据和行驶数据在时间维度上具有对应关系,因此步骤S5中将第一特征向量和第二特征向量在时间维度上进行拼接,融合为一个同时包含声音数据和行驶数据的第三特征向量,能够减少后续步骤S6故障分类的运算量,提高分类效率。
S6.将第三特征向量输入分类器,得到故障分类结果。
步骤S6中,将第三特征向量输入分类器,得到故障分类结果,具体包括以下步骤:
S6-1.通过以下公式计算第三特征向量属于目标故障类别的概率:
式中,c表示目标故障类别;i表示输入向量;θc,i为权值矩阵中类别c对应的列向量Wc与输入向量i之间的夹角;CN为类别个数,m为边缘角度,s为缩放因子;
S6-2.选择概率最高的目标故障类别作为第三特征向量的故障分类结果输出。
步骤S6所使用分类器包括分别用于处理第三特征向量的全连接层和用于判别故障的AAM-Softmax层,通过上述公式计算第三特征向量属于目标故障类别的概率,选择概率最高的一项作为车辆的目标故障类别。
在一部分实施例中,在完成车辆故障分类之后,上位机会根据故障所对应的编号,通过实体关系图在预设的数据库中调取与车辆故障相关的注意事项,输出具体的注意事项和维修指导等专业知识给用户。以便用户能根据上位机所提供知识对车辆进行维护和保养。
本发明实施例通过车辆声音数据和行驶数据判断车辆故障类别。有助于进一步建立车辆声音与故障的关系,构建声音、行驶数据与故障的知识图谱,为驾驶人员或维修人员提供高效的故障判别方案。
本发明实施例还公开了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器可以从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行图1所示的方法。
在一些可选择的实施例中,在方框图中提到的功能/操作可以不按照操作示图提到的顺序发生。例如,取决于所涉及的功能/操作,连续示出的两个方框实际上可以被大体上同时地执行或所述方框有时能以相反顺序被执行。此外,在本发明的流程图中所呈现和描述的实施例以示例的方式被提供,目的在于提供对技术更全面的理解。所公开的方法不限于本文所呈现的操作和逻辑流程。可选择的实施例是可预期的,其中各种操作的顺序被改变以及其中被描述为较大操作的一部分的子操作被独立地执行。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。
以上是对本发明的较佳实施进行了具体说明,但本发明并不限于所述实施例,熟悉本领域的技术人员在不违背本发明精神的前提下还可做出种种的等同变形或替换,这些等同的变形或替换均包含在本申请权利要求所限定的范围内。
Claims (6)
1.一种多数据融合的车辆故障监测预警方法,其特征在于,包括以下步骤:
通过物联网采集车辆声音数据和车辆行驶数据;所述车辆行驶数据,具体包括车辆时速、引擎转速、轮胎胎压和车辆耗油量;
提取车辆声音数据的滤波器组特征,将车辆声音数据转换为车辆时频数据;
将车辆时频数据输入第一特征提取模型,得到第一特征向量;所述第一特征提取模型为时延神经网络,由一维卷积层、压缩激励残差网络层和注意力统计池化层构成;
将车辆行驶数据输入第二特征提取模型,得到第二特征向量;所述第二特征提取模型为卷积神经网络和双向长短期记忆网络相结合的深度学习模型;
将第一特征向量和第二特征向量进行拼接融合,得到第三特征向量;
将第三特征向量输入分类器,得到故障分类结果;
所述将车辆声音数据转换为车辆时频数据,具体包括以下步骤:
通过以下公式对车辆声音数据进行预加重处理,得到第一中间声音数据yn;
yn=xn-axn-1
式中,xn是当前时刻的车辆声音数据,xn-1是上一时刻的车辆声音数据,a是预设滤波系数;
通过以下公式对第一中间声音数据进行频谱估计,得到第二中间声音数据Fx(f);
式中,K多正弦窗函数的个数,m=1,2,……,N;N为采样点数;
对第二声音中间数据进行平滑,得到第三声音中间数据;
将第三声音中间数据输入由以下公式构成的梅尔频率滤波器,得到车辆时频数据;
所述对第二声音中间数据进行平滑,得到第三声音中间数据,具体包括以下步骤:
将第二声音中间数据输入滑动平均滤波器,得到声音平滑数据;
逐帧比较第二声音中间数据和声音平滑数据,取第二声音中间数据和声音平滑数据中的极大值作为新的第二声音中间数据;
返回将第二声音中间数据输入滑动平均滤波器这一步骤,直至返回次数达到预设迭代次数;
将最终得到的第二声音中间数据作为第三声音中间数据输出;
所述将第三特征向量输入分类器,得到故障分类结果,具体包括以下步骤:
通过以下公式计算第三特征向量属于目标故障类别的概率:
式中,c表示目标故障类别;i表示输入向量;θc,i为权值矩阵中类别c对应的列向量Wc与输入向量i之间的夹角;CN为类别个数,m为边缘角度,s为缩放因子;
选择概率最高的目标故障类别作为第三特征向量的故障分类结果输出。
2.根据权利要求1所述的一种多数据融合的车辆故障监测预警方法,其特征在于,所述第一特征提取模型,具体包括一维卷积层、压缩激励残差网络层和注意力统计池化层;所述将车辆时频数据输入第一特征提取模型,得到第一特征向量,具体包括以下步骤:
通过一维卷积层对所述车辆时频数据进行卷积操作,得到车辆声音特征;
通过压缩激励残差网络层将所述车辆声音特征进行多层特征融合,提取出车辆声音特征的第一整体信息;
通过一维卷积层对所述车辆声音特征的第一整体信息进行卷积运算,得到第二整体信息;
通过注意力统计池化层压缩所述第二整体信息,得到关于车辆时频数据的第一特征向量。
3.根据权利要求1所述的一种多数据融合的车辆故障监测预警方法,其特征在于,在所述将车辆行驶数据输入第二特征提取模型之前,还包括以下步骤:
对车辆行驶数据进行数据清洗,去除车辆行驶数据中的噪声;
当所述车辆行驶数据中存在异常值时,通过线性插值法修订车辆行驶数据中的异常值;
将车辆行驶数据作归一化处理。
4.根据权利要求1所述的一种多数据融合的车辆故障监测预警方法,其特征在于,所述第二特征提取模型,具体包括卷积池化层和双向长短期记忆网络层;所述将车辆行驶数据输入第二特征提取模型,得到第二特征向量,具体包括以下步骤:
通过卷积池化层对所述车辆行驶数据进行卷积池化处理,得到车辆行驶特征;
通过双向长短期记忆网络层对所述车辆行驶特征进行突出特征提取,得到车辆行驶突出特征;
通过卷积池化层对所述车辆行驶数据进行池化处理,得到关于车辆行驶数据的第二特征向量。
5.一种电子设备,其特征在于,包括处理器以及存储器;
所述存储器用于存储程序;
所述处理器执行所述程序实现如权利要求1-4中任一项所述的方法。
6.一种计算机可读存储介质,其特征在于,所述存储介质存储有程序,所述程序被处理器执行实现如权利要求1-4中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310141592.8A CN116304863B (zh) | 2023-02-08 | 2023-02-08 | 一种多数据融合的车辆故障监测预警方法、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310141592.8A CN116304863B (zh) | 2023-02-08 | 2023-02-08 | 一种多数据融合的车辆故障监测预警方法、设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116304863A CN116304863A (zh) | 2023-06-23 |
CN116304863B true CN116304863B (zh) | 2024-06-11 |
Family
ID=86784407
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310141592.8A Active CN116304863B (zh) | 2023-02-08 | 2023-02-08 | 一种多数据融合的车辆故障监测预警方法、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116304863B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117104377B (zh) * | 2023-10-23 | 2024-01-30 | 西安小果出行科技有限公司 | 电动自行车的智能管理系统及其方法 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20190018798A (ko) * | 2017-08-16 | 2019-02-26 | 강병수 | 차량 소음의 컨벌루션 뉴럴 네트워크에 의한 소음 분류 방법 |
CN109785460A (zh) * | 2019-01-03 | 2019-05-21 | 深圳壹账通智能科技有限公司 | 车辆故障识别方法、装置、计算机设备和存储介质 |
CN114022726A (zh) * | 2021-10-20 | 2022-02-08 | 金鹏电子信息机器有限公司 | 一种基于胶囊网络的人员车辆监控方法及系统 |
KR102389553B1 (ko) * | 2021-02-04 | 2022-04-27 | 휴텍 주식회사 | 복합센서를 이용한 자동차의 고장 진단 장치 및 방법 |
CN114693945A (zh) * | 2020-12-28 | 2022-07-01 | 深圳云天励飞技术股份有限公司 | 车辆发动机异常检测方法、装置、电子设备及存储介质 |
CN114839960A (zh) * | 2022-06-15 | 2022-08-02 | 行蜂科技(深圳)有限责任公司 | 一种基于人工智能算法进行车辆故障检测方法及系统 |
CN115031994A (zh) * | 2022-06-08 | 2022-09-09 | 昆山市易泰汽车科技有限公司 | 一种车辆耐久试验方法和系统 |
CN115452392A (zh) * | 2021-11-30 | 2022-12-09 | 广州汽车集团股份有限公司 | 一种车辆发动机故障声学诊断方法及系统 |
-
2023
- 2023-02-08 CN CN202310141592.8A patent/CN116304863B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20190018798A (ko) * | 2017-08-16 | 2019-02-26 | 강병수 | 차량 소음의 컨벌루션 뉴럴 네트워크에 의한 소음 분류 방법 |
CN109785460A (zh) * | 2019-01-03 | 2019-05-21 | 深圳壹账通智能科技有限公司 | 车辆故障识别方法、装置、计算机设备和存储介质 |
CN114693945A (zh) * | 2020-12-28 | 2022-07-01 | 深圳云天励飞技术股份有限公司 | 车辆发动机异常检测方法、装置、电子设备及存储介质 |
KR102389553B1 (ko) * | 2021-02-04 | 2022-04-27 | 휴텍 주식회사 | 복합센서를 이용한 자동차의 고장 진단 장치 및 방법 |
CN114022726A (zh) * | 2021-10-20 | 2022-02-08 | 金鹏电子信息机器有限公司 | 一种基于胶囊网络的人员车辆监控方法及系统 |
CN115452392A (zh) * | 2021-11-30 | 2022-12-09 | 广州汽车集团股份有限公司 | 一种车辆发动机故障声学诊断方法及系统 |
CN115031994A (zh) * | 2022-06-08 | 2022-09-09 | 昆山市易泰汽车科技有限公司 | 一种车辆耐久试验方法和系统 |
CN114839960A (zh) * | 2022-06-15 | 2022-08-02 | 行蜂科技(深圳)有限责任公司 | 一种基于人工智能算法进行车辆故障检测方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN116304863A (zh) | 2023-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107941537B (zh) | 一种机械设备健康状态评估方法 | |
CN111414477A (zh) | 车辆故障自动诊断方法、装置以及设备 | |
CN116304863B (zh) | 一种多数据融合的车辆故障监测预警方法、设备及介质 | |
CN112906969B (zh) | 发动机故障预测方法、装置、电子设备及存储介质 | |
WO2006131929A2 (en) | System and method for providing driving insurance | |
CN113761649B (zh) | 一种基于一维卷积神经网络的智能汽车轮胎偏磨预测方法 | |
CN109147279A (zh) | 一种基于车联网的驾驶员疲劳驾驶监测预警方法及系统 | |
CN114723285A (zh) | 一种电网设备安全性评估预测方法 | |
CN111717753A (zh) | 基于多维故障特征的自适应电梯故障预警系统及方法 | |
CN115520741A (zh) | 基于神经网络的电梯运行监控预警方法、系统及存储介质 | |
CN115311246A (zh) | 一种基于大数据的桥梁安全管理方法和系统 | |
CN115687969A (zh) | 一种基于声音特征分析的低压变压器故障诊断方法 | |
CN115758083A (zh) | 一种基于时域和时频域融合的电机轴承故障诊断方法 | |
CN115510990A (zh) | 一种模型训练方法和相关装置 | |
CN113156913B (zh) | 一种abs故障诊断系统及方法 | |
CN117079462B (zh) | 一种基于Apriori算法的路段突发交通事件预测系统及方法 | |
CN115169650B (zh) | 一种大数据分析的装备健康预测方法 | |
CN116385185A (zh) | 一种车险评估辅助方法、装置、计算机设备及存储介质 | |
CN116740520A (zh) | 一种异常行为检测及特征融合模型训练方法 | |
CN115631457A (zh) | 建筑施工监控视频中的人机协作异常检测方法及系统 | |
CN115061451A (zh) | 汽车故障诊断方法、装置、智能终端及存储介质 | |
CN107271024A (zh) | 一种有载分接开关诊断方法及装置 | |
CN114582083A (zh) | 一种隧道监控多传感器数据融合火灾预警方法 | |
CN117312804B (zh) | 智能数据感知监测方法和系统 | |
CN118349798A (zh) | 预警信息的生成方法、装置、存储介质及电子装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |