CN110210126B - 一种基于lstmpp的齿轮剩余寿命的预测方法 - Google Patents

一种基于lstmpp的齿轮剩余寿命的预测方法 Download PDF

Info

Publication number
CN110210126B
CN110210126B CN201910471710.5A CN201910471710A CN110210126B CN 110210126 B CN110210126 B CN 110210126B CN 201910471710 A CN201910471710 A CN 201910471710A CN 110210126 B CN110210126 B CN 110210126B
Authority
CN
China
Prior art keywords
lstmpp
neural network
data
hidden layer
weight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910471710.5A
Other languages
English (en)
Other versions
CN110210126A (zh
Inventor
秦毅
项盛
金磊
王阳阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing University
Original Assignee
Chongqing University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing University filed Critical Chongqing University
Priority to CN201910471710.5A priority Critical patent/CN110210126B/zh
Publication of CN110210126A publication Critical patent/CN110210126A/zh
Application granted granted Critical
Publication of CN110210126B publication Critical patent/CN110210126B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/10Geometric CAD
    • G06F30/17Mechanical parametric or variational design
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/049Temporal neural networks, e.g. delay elements, oscillating neurons or pulsed inputs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2119/00Details relating to the type or aim of the analysis or the optimisation
    • G06F2119/04Ageing analysis or optimisation against ageing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • General Physics & Mathematics (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Biophysics (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Biomedical Technology (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Testing Of Devices, Machine Parts, Or Other Structures Thereof (AREA)

Abstract

本发明涉及一种基于LSTMPP的齿轮剩余寿命的预测方法,属于大数据和智能制造领域。该方法首先对采集的齿轮震动信号的高维特征进行简化和融合;然后将降维后的融合特征信息用于偏心长短期记忆网络LSTMPP的多步预测,针对不同特征信息所包含的信息量不同的特点,采用注意力机制方法对融合特征数据进行偏心处理;最后,根据偏心处理结果,放大输入数据和递归数据的权重,对融合特征数据进行自动和不同程度的处理。本发明能够在降低计算量的同时提高齿轮剩余寿命的预测速度与精度。

Description

一种基于LSTMPP的齿轮剩余寿命的预测方法
技术领域
本发明属于大数据和智能制造领域,涉及一种基于LSTMPP的齿轮剩余寿命的预测方法。
背景技术
齿轮广泛应用于机械设备中,是应用最广泛的机械零件之一。齿轮具有传动效率高、结构紧凑、传动平顺性好、承载能力大、使用寿命长等独特的优点,使其具有强大而持久的生命力。在复杂的工作条件和环境下,齿轮容易发生故障,可能导致机器运行的灾难,甚至危及人身安全。对于大型或超大型设备,如水轮发电机、矿山输送机械、直升机动力传动系统、重型机床等,更是如此。进行在役齿轮的寿命预测,能够有效地确定设备的维护时间,提高生产效率,保证生产的连续高效进行,降低事故发生率,防止突发性事故发生,对于工程生产意义重大。
常用的机械设备寿命预测方法主要分为以下三类:1)基于模型的预测方法;2)数据驱动;3)前两种方法的混合。基于模型的方法构建描述组件退化过程的物理模型。这种方法需要特定的力学知识,因此适用性较低。数据驱动方法从常规收集的监测数据中派生出预测模型。它主要基于统计和机器学习方法,目的是发现系统的行为。因此,这些方法在精确性、复杂性和适用性之间提供了一种折衷。混合方法结合了基于模型和数据驱动技术。利用监测系统的物理知识建立模型,利用数据驱动技术对参数进行学习和更新。基于模型和数据驱动技术的结合使该方法准确,但仍然需要特定的物理知识而且计算上很昂贵。数据驱动方法中基于机器学习的方法能够克服退化模型未知的问题,同时构建模型的输入也不仅局限于状态监测数据,可以是多种不同类型的数据。其中基于RNN的剩余寿命预测方法能够融合原有学习样本与新的学习模式实现样本的重新训练,不仅能够提高剩余寿命预测的准确性,而且具有收敛速度快和稳定性高等特点,在可靠性评估和剩余寿命预测领域发挥着重要作用。但处理长期依赖型退化数据时,传统RNN方法会面临梯度消失或爆炸问题,剩余寿命预测精度会受到严重影响。
为解决这个问题长短期记忆(long short-term memory,LTSM)网络应运而生,然而LSTM虽然具有处理长期依赖型退化数据的能力,当其能力也有不足的时候。首先LSTM的长期信息的存储能力也是有限的,冗余信息的存储即不利于寿命预测也会白白浪费计算资源。并且不相关和/或冗余特征的存在会影响神经网络模型训练的速度和准确性。因此在神经网络训练之前,有必要把相关的信息和不必要的信息区分开来,对输入数据进行差异化处理,对预测结果贡献度大的数据着重学习,贡献度小的信息进行轻微的学习。这样就能够最优化的分配计算机资源,有目的的处理输入数据,从而实现准确快速的预测齿轮的剩余使用寿命。
发明内容
有鉴于此,本发明的目的在于提供一种基于LSTMPP的齿轮剩余寿命的预测方法,为了全面、准确地表达齿轮的退化过程,计算齿轮的所有特性,对高维特征进行简化和融合,从而减少神经网络的计算量,提高预测速度与精度。
为达到上述目的,本发明提供如下技术方案:
一种基于LSTMPP的齿轮剩余寿命的预测方法,首先对采集的齿轮振动信号的高维特征进行简化和融合;然后将降维后的融合特征信息用于LSTMPP的多步预测,针对不同特征信息所包含的信息量不同的特点,采用注意力机制方法对融合特征数据进行偏心处理;最后,根据偏心处理结果,放大输入数据和递归数据的权重,对融合特征数据进行自动和不同程度的处理;
所述预测方法具体包括以下步骤:
S1:隔Δt时间采集时间长度为T的齿轮振动信号,直到齿轮失效,其采样的齿轮振动信号段数为n;
S2:分别计算采集的n段齿轮振动信号降噪之后的21种时频特征,则得到n×21维的特征值矩阵X;
S3:选取前面n1个采样点组成的特征值矩阵X1作为训练矩阵;
S4:通过ISOMAP算法处理训练矩阵X1和特征值矩阵X,分别选取利用最大特征值计算的结果V1=(v11,v12,...,v1n1)T和V=(v1,v2,...,vn)T作为其主要成分;
S5:由于矩阵X的采样点数比矩阵X1更多,而由于ISOMAP算法的性质向量V和V1的和为零,则向量V的趋势虽然和向量V1相同但是其起始值可能不同;因此需要将它们统一化,即使用最小二乘法使目标函数
Figure BDA0002081002550000021
最小,然后通过公式vi'=avi+b将向量V里的所有元素与向量V1统一化,其中a、b分别表示向量V里的所有元素向向量V1统一化过程中所使用的函数的斜率与偏置,具体大小通过上述目标函数最小化确定;
S6:将向量V1归一化,得到归一化之后的向量W=(w1,w2,...,wn1)T
S7:重构矩阵:
Figure BDA0002081002550000031
其中p为神经网络输入层单元数;
S8:将矩阵U前面p行作为偏心长短期记忆网络LSTMPP神经网络的输入,最后一行作为LSTMPP神经网络的输出来训练网络;
S9:将倒数p个输出作为网络输入,得到下一时刻的输出;
S10:重复步骤S9一定次数,将这些输出反归一化之后与实际特征值V'=(v'p+1,v'p+2,...,v'n)T比较,以证明此方法的有效性;同时,当输出反归一化之后超过设定的阈值时,这时预测的采样点数乘以齿轮振动信号间隔时间与采样时间之和Δt+T即为齿轮的剩余寿命。
进一步,步骤S8中,所述LSTMPP网络采用偏心系数法来扩大输入数据和经过映射层运算的回归数据的权重。
进一步,所述偏心系数法为:假设t时刻输入数据集xt=[x1 x2 ... xN]及t-1时刻的递归数据集rt-1=[r1 r2 ... rm](假设映射后为m维矩阵),结合这两个数据集构成注意力机制的输入,然后计算偏心系数;基于注意力机制的偏心系数的具体计算过程包括以下步骤:
1):通过评分函数计算出输入值与预测值之间的相关性,该函数采用按比例缩放的点积模型;
在神经网络训练阶段,设xN+1为预测目标相关查询向量q,设xt和rt-1为被选择向量;在预测阶段,由于下一时刻的融合特征值未知,设xN为预测目标相关查询向量q;将输入数据与递归数据同时参与注意力分配,相关评分函数计算如下:
Figure BDA0002081002550000032
Figure BDA0002081002550000033
2):正则化由公式(1)、(2)算得的原始分值,则相应的注意系数计算如下:
Figure BDA0002081002550000034
Figure BDA0002081002550000041
其中,αi、λi分别是输入数据和递归数据的注意系数,并以注意系数作为特征信息贡献程度的评价标准;则输入数据和递归数据的偏心系数分别为:
βi=(1+αi) (5)
δi=(1+λi) (6)
3):LSTMPP网络根据给出的偏心系数,对LSTMPP网络的相应权值进行了放大;偏心系数βi和δi分别放大输入数据权重和递归数据权重:
Figure BDA0002081002550000042
其中,wix表示LSTMP神经网络输入数据与隐含层中输入门之间的权重,wox表示LSTMP神经网络输入数据与隐含层中输出门之间的权重,wfx表示LSTMP神经网络输入数据与隐含层中遗忘门之间的权重,wir表示LSTMP神经网络经过映射后的递归数据与隐含层中输入门之间的权重,wor表示LSTMP神经网络映射后的递归数据与隐含层中输出门之间的权重,wfr表示LSTMP神经网络映射后的递归数据与隐含层中遗忘门之间的权重,w′ix表示LSTMPP神经网络输入数据与隐含层中输入门之间的权重,w′ox表示LSTMPP神经网络输入数据与隐含层中输出门之间的权重、w′fx表示LSTMPP神经网络输入数据与隐含层中遗忘门之间的权重,w′ir表示LSTMPP神经网络经过映射后的递归数据与隐含层中输入门之间的权重,w′or表示LSTMPP神经网络映射后的递归数据与隐含层中输出门之间的权重,w′fr表示LSTMPP神经网络映射后的递归数据与隐含层中遗忘门之间的权重分别。
进一步,通过公式(7)及LSTM网络结构计算公式,得到LSTMPP网络的计算公式如下:
Figure BDA0002081002550000051
其中,σ为sigmod激活函数,g为线性激活函数,bi为LSTMPP隐含层输入门阈值,bf为LSTMPP隐含层遗忘门阈值,bc为LSTMPP隐含层存储细胞单元阈值,bo为LSTMPP隐含层输出门阈值,br为LSTMPP递归层阈值,by为LSTMPP输出层阈值,it为t时刻输入门输出,ft为t时刻遗忘门输出,ct-1为t-1时刻存储细胞单元输出,ct为t时刻存储细胞单元输出,ot为t时刻输出门输出,ht为t时刻隐含层输出,rt为t时刻递归层输出,yt为t时刻输出层输出,wcx为LSTMPP神经网络输入数据与隐含层中存储细胞单元之间的权重,wcr为LSTMPP神经网络经过投影后的递归数据与隐含层中存储细胞单元之间的权重,wrm为LSTMPP神经网络隐含层与递归层之间的权重,wyr为STMPP神经网络递归层与输出层之间的权重。
本发明的有益效果在于:本发明采用了LTSMPP网络,该网络在隐含层引入了偏心处理过程,从而使得计算量、预测速度、收敛速度及精度均比LTSM神经网络效果好。
本发明的其他优点、目标和特征在某种程度上将在随后的说明书中进行阐述,并且在某种程度上,基于对下文的考察研究对本领域技术人员而言将是显而易见的,或者可以从本发明的实践中得到教导。本发明的目标和其他优点可以通过下面的说明书来实现和获得。
附图说明
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作优选的详细描述,其中:
图1为本发明所述预测方法的流程图;
图2为LSTMPP神经网络结构图;
图3为LSTMPP神经网络隐含层结构图;
图4为偏心处理流程图;
图5为已知380个采样点时的失效阈值、训练值、预测值与实际值的仿真图;
图6为本发明采用的LSTMPP神经网络与传统的LSTMs神经网络的性能比较仿真图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。需要说明的是,以下实施例中所提供的图示仅以示意方式说明本发明的基本构想,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。
如图1所示,一种基于LSTMPP的齿轮剩余寿命的预测方法,首先对采集的齿轮振动信号的高维特征进行简化和融合;然后将降维后的融合特征信息用于偏心长短期记忆网络(LSTMPP)的多步预测,针对不同特征信息所包含的信息量不同的特点,采用注意力机制方法对融合特征数据进行偏心处理;最后,根据偏心处理结果,放大输入数据和递归数据的权重,对融合特征数据进行自动和不同程度的处理。该预测方法具体包括以下步骤:
S1:隔Δt时间采集时间长度为T的齿轮振动信号,直到齿轮失效,其采样的齿轮振动信号段数为n;
S2:分别计算采集的n段齿轮振动信号降噪之后的21种时频特征,则得到n×21维的特征值矩阵X;
S3:选取前面n1个采样点组成的特征值矩阵X1作为训练矩阵;
S4:通过ISOMAP算法处理训练矩阵X1和特征值矩阵X,分别选取利用最大特征值计算的结果V1=(v11,v12,...,v1n1)T和V=(v1,v2,...,vn)T作为其主要成分;
S5:由于矩阵X的采样点数比矩阵X1更多,而由于ISOMAP算法的性质向量V和V1的和为零,则向量V的趋势虽然和向量V1相同但是其起始值可能不同;因此需要将它们统一化,即使用最小二乘法使目标函数
Figure BDA0002081002550000061
最小,然后通过公式vi'=avi+b将向量V里的所有元素与向量V1统一化,其中a、b分别表示向量V里的所有元素向向量V1统一化过程中所使用的函数的斜率与偏置,具体大小通过上述目标函数最小化确定;
S6:将向量V1归一化,得到归一化之后的向量W=(w1,w2,...,wn1)T
S7:重构矩阵:
Figure BDA0002081002550000071
其中p为神经网络输入层单元数;
S8:将矩阵U前面p行作为LSTMPP神经网络的输入,最后一行作为LSTMPP神经网络的输出来训练网络;
S9:将倒数p个输出作为网络输入,得到下一时刻的输出;
S10:重复步骤S9一定次数,将这些输出反归一化之后与实际特征值V'=(v'p+1,v'p+2,...,v'n)T比较,以证明此方法的有效性;同时,当输出反归一化之后超过设定的阈值时,这时预测的采样点数乘以齿轮振动信号间隔时间与采样时间之和Δt+T即为齿轮的剩余寿命。
如图2~4所示,LSTMPP网络采用偏心系数法来扩大输入数据和经过映射层运算的回归数据的权重。偏心系数法为:假设t时刻输入数据集xt=[x1 x2 ... xN]及t-1时刻的递归数据集rt-1=[r1 r2 ... rm](假设映射后为m维矩阵),结合这两个数据集构成注意力机制的输入,然后计算偏心系数;基于注意力机制的偏心系数的具体计算过程包括以下步骤:
1):通过评分函数计算出输入值与预测值之间的相关性,该函数采用按比例缩放的点积模型。缩放后的点积模型不仅可以更好地利用矩阵乘积提高计算效率,而且在计算高纬度信息时避免了软极值函数梯度小的问题。本研究的目的是根据当前的前N个采样点来预测下一个采样点的融合特征。
在神经网络训练阶段,设xN+1为预测目标相关查询向量q,设xt和rt-1为被选择向量;在预测阶段,由于下一时刻的融合特征值未知,设xN为预测目标相关查询向量q;将输入数据与递归数据同时参与注意力分配,相关评分函数计算如下:
Figure BDA0002081002550000072
Figure BDA0002081002550000073
2):正则化由公式(1)、(2)算得的原始分值,则相应的注意系数计算如下:
Figure BDA0002081002550000074
Figure BDA0002081002550000081
其中,αi、λi分别是输入数据和递归数据的注意系数,并以注意系数作为特征信息贡献程度的评价标准。高注意系数的特征信息将得到更多的学习,进而神经网络将对贡献度大的特征信息更为青睐。则输入数据和递归数据的偏心系数分别为:
βi=(1+αi) (5)
δi=(1+λi) (6)
3):LSTMPP网络根据给出的偏心系数,对LSTMPP网络的相应权值进行了放大;偏心系数βi和δi分别放大输入数据权重和递归数据权重:
Figure BDA0002081002550000082
其中,wix表示LSTMP神经网络输入数据与隐含层中输入门之间的权重,wox表示LSTMP神经网络输入数据与隐含层中输出门之间的权重,wfx表示LSTMP神经网络输入数据与隐含层中遗忘门之间的权重,wir表示LSTMP神经网络经过映射后的递归数据与隐含层中输入门之间的权重,wor表示LSTMP神经网络映射后的递归数据与隐含层中输出门之间的权重,wfr表示LSTMP神经网络映射后的递归数据与隐含层中遗忘门之间的权重,w′ix表示LSTMPP神经网络输入数据与隐含层中输入门之间的权重,w′ox表示LSTMPP神经网络输入数据与隐含层中输出门之间的权重、w′fx表示LSTMPP神经网络输入数据与隐含层中遗忘门之间的权重,w′ir表示LSTMPP神经网络经过映射后的递归数据与隐含层中输入门之间的权重,w′or表示LSTMPP神经网络映射后的递归数据与隐含层中输出门之间的权重,w′fr表示LSTMPP神经网络映射后的递归数据与隐含层中遗忘门之间的权重分别。
最后,通过公式(7)及LSTM网络结构计算公式,得到LSTMPP网络的计算公式如下:
Figure BDA0002081002550000091
其中,σ为sigmod激活函数,g为线性激活函数,bi为LSTMPP隐含层输入门阈值,bf为LSTMPP隐含层遗忘门阈值,bc为LSTMPP隐含层存储细胞单元阈值,bo为LSTMPP隐含层输出门阈值,br为LSTMPP递归层阈值,by为LSTMPP输出层阈值,it为t时刻输入门输出,ft为t时刻遗忘门输出,ct-1为t-1时刻存储细胞单元输出,ct为t时刻存储细胞单元输出,ot为t时刻输出门输出,ht为t时刻隐含层输出,rt为t时刻递归层输出,yt为t时刻输出层输出,wcx为LSTMPP神经网络输入数据与隐含层中存储细胞单元之间的权重,wcr为LSTMPP神经网络经过投影后的递归数据与隐含层中存储细胞单元之间的权重,wrm为LSTMPP神经网络隐含层与递归层之间的权重,wyr为STMPP神经网络递归层与输出层之间的权重。
实施例:
根据以上提出的LTSMPP神经网络模型及预测方法,下面对其进行实验。本次实验采取第一级传动加速而第二级传动减速的模式,正好使实验齿轮箱的传动比为1:1。实验齿轮使用的材料为40Cr,加工精度为5级,表面硬度为55HRC,模数为5。特别地,大齿轮齿数为31,小齿轮齿数为25,第一级传动齿轮宽度为21mm。在本次实验之中,扭矩为1400N.m,大齿轮转速为500r/min,实验齿轮箱润滑油量为4L/h,冷却温度为70度。采集数据的模式选择采集过程中所有数据。由于扭矩很大,第一级传动大齿轮在运行814分钟之后就发生了断齿故障。其中,使用了齿轮运行平台;扭转控制器,用于控制试验中对齿轮实施的扭矩;冷却与润滑控制器,用于控制实验中齿轮的冷却和润滑情况;实际操作平台,用于操作整个实验的开关和设定一些实验参数。
对上述实验获得数据在已知380个融合特征点下进行齿轮剩余寿命预测,预测结果如图5所示。本发明提出的预测方法较之传统LSTMs还具有更快的收敛速度,如图6所示,从图6中可以看出,LSTMPP由于其投影层的加速以及偏心处理的影响,容易得到局部最优,收敛速度最快。
最后说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本技术方案的宗旨和范围,其均应涵盖在本发明的权利要求范围当中。

Claims (1)

1.一种基于LSTMPP的齿轮剩余寿命的预测方法,其特征在于,该方法首先对采集的齿轮振动信号的高维特征进行简化和融合;然后将降维后的融合特征信息用于LSTMPP的多步预测,其中,LSTMPP表示偏心长短期记忆网络;采用注意力机制方法对融合特征数据进行偏心处理;最后,根据偏心处理结果,放大输入数据和递归数据的权重,对融合特征数据进行自动和不同程度的处理;
所述预测方法具体包括以下步骤:
S1:隔Δt时间采集时间长度为T的齿轮振动信号,直到齿轮失效,其采样的齿轮振动信号段数为n;
S2:分别计算采集的n段齿轮振动信号降噪之后的21种时频特征,则得到n×21维的特征值矩阵X;
S3:选取前面n1个采样点组成的特征值矩阵X1作为训练矩阵;
S4:通过ISOMAP算法处理训练矩阵X1和特征值矩阵X,分别选取利用最大特征值计算的结果V1=(v11,v12,...,v1n1)T和V=(v1,v2,...,vn)T作为其主要成分;
S5:使用最小二乘法使目标函数
Figure FDA0003904540270000011
最小,然后通过公式v′i=avi+b将向量V里的所有元素与向量V1统一化,其中a、b分别表示向量V里的所有元素向向量V1统一化过程中所使用的函数的斜率与偏置,具体大小通过上述目标函数最小化确定;
S6:将向量V1归一化,得到归一化之后的向量W=(w1,w2,...,wn1)T
S7:重构矩阵:
Figure FDA0003904540270000012
其中p为神经网络输入层单元数;
S8:将矩阵U前面p行作为LSTMPP神经网络的输入,最后一行作为LSTMPP神经网络的输出来训练网络;所述LSTMPP神经网络采用偏心系数法来扩大输入数据和经过映射层运算的回归数据的权重;所述偏心系数法为:假设t时刻输入数据集xt=[x1 x2…xN]及t-1时刻的递归数据集rt-1=[r1 r2…rm],结合这两个数据集构成注意力机制的输入,然后计算偏心系数;基于注意力机制的偏心系数的具体计算过程包括以下步骤:
1):通过评分函数计算出输入值与预测值之间的相关性,该函数采用按比例缩放的点积模型;
在神经网络训练阶段,设xN+1为预测目标相关查询向量q,设xt和rt-1为被选择向量;在预测阶段,设xN为预测目标相关查询向量q;将输入数据与递归数据同时参与注意力分配,相关评分函数计算如下:
Figure FDA0003904540270000021
Figure FDA0003904540270000022
2):正则化由公式(1)、(2)算得的原始分值,则相应的注意系数计算如下:
Figure FDA0003904540270000023
Figure FDA0003904540270000024
其中,αi、λi分别是输入数据和递归数据的注意系数,并以注意系数作为特征信息贡献程度的评价标准;则输入数据和递归数据的偏心系数分别为:
βi=(1+αi) (5)
δi=(1+λi) (6)
3):LSTMPP网络根据给出的偏心系数,对LSTMPP网络的相应权值进行了放大;偏心系数βi和δi分别放大输入数据权重和递归数据权重:
Figure FDA0003904540270000025
其中,wix表示LSTMP神经网络输入数据与隐含层中输入门之间的权重,wox表示LSTMP神经网络输入数据与隐含层中输出门之间的权重,wfx表示LSTMP神经网络输入数据与隐含层中遗忘门之间的权重,wir表示LSTMP神经网络经过映射后的递归数据与隐含层中输入门之间的权重,wor表示LSTMP神经网络映射后的递归数据与隐含层中输出门之间的权重,wfr表示LSTMP神经网络映射后的递归数据与隐含层中遗忘门之间的权重,w′ix表示LSTMPP神经网络输入数据与隐含层中输入门之间的权重,w′ox表示LSTMPP神经网络输入数据与隐含层中输出门之间的权重、w′fx表示LSTMPP神经网络输入数据与隐含层中遗忘门之间的权重,w′ir表示LSTMPP神经网络经过映射后的递归数据与隐含层中输入门之间的权重,w′or表示LSTMPP神经网络映射后的递归数据与隐含层中输出门之间的权重,w′fr表示LSTMPP神经网络映射后的递归数据与隐含层中遗忘门之间的权重分别;
通过公式(7)及LSTM网络结构计算公式,得到LSTMPP网络的计算公式如下:
Figure FDA0003904540270000031
其中,σ为sigmod激活函数,g为线性激活函数,bi为LSTMPP隐含层输入门阈值,bf为LSTMPP隐含层遗忘门阈值,bc为LSTMPP隐含层存储细胞单元阈值,bo为LSTMPP隐含层输出门阈值,br为LSTMPP递归层阈值,by为LSTMPP输出层阈值,it为t时刻输入门输出,ft为t时刻遗忘门输出,ct-1为t-1时刻存储细胞单元输出,ct为t时刻存储细胞单元输出,ot为t时刻输出门输出,ht为t时刻隐含层输出,rt为t时刻递归层输出,yt为t时刻输出层输出,wcx为LSTMPP神经网络输入数据与隐含层中存储细胞单元之间的权重,wcr为LSTMPP神经网络经过投影后的递归数据与隐含层中存储细胞单元之间的权重,wrm为LSTMPP神经网络隐含层与递归层之间的权重,wyr为STMPP神经网络递归层与输出层之间的权重;
S9:LSTMPP训练好后,将倒数p个输出作为网络输入,得到下一时刻的输出;
S10:重复步骤S9一定次数,将这些输出反归一化之后与实际特征值V'=(v′p+1,v′p+2,...,v′n)T比较,当输出反归一化之后超过设定的阈值时,这时预测的采样点数乘以齿轮振动信号间隔时间与采样时间之和Δt+T即为齿轮的剩余寿命。
CN201910471710.5A 2019-05-31 2019-05-31 一种基于lstmpp的齿轮剩余寿命的预测方法 Active CN110210126B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910471710.5A CN110210126B (zh) 2019-05-31 2019-05-31 一种基于lstmpp的齿轮剩余寿命的预测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910471710.5A CN110210126B (zh) 2019-05-31 2019-05-31 一种基于lstmpp的齿轮剩余寿命的预测方法

Publications (2)

Publication Number Publication Date
CN110210126A CN110210126A (zh) 2019-09-06
CN110210126B true CN110210126B (zh) 2023-03-24

Family

ID=67790097

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910471710.5A Active CN110210126B (zh) 2019-05-31 2019-05-31 一种基于lstmpp的齿轮剩余寿命的预测方法

Country Status (1)

Country Link
CN (1) CN110210126B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111475986B (zh) * 2020-04-02 2024-05-24 重庆大学 一种基于lstm-aon的齿轮剩余寿命的预测方法
CN111581892B (zh) * 2020-05-29 2024-02-13 重庆大学 基于gdau神经网络的轴承剩余寿命的预测方法
CN111723527B (zh) * 2020-06-28 2024-04-16 重庆大学 基于鸡尾酒长短期记忆神经网络的齿轮剩余寿命的预测方法
CN112990598A (zh) * 2021-03-31 2021-06-18 浙江禹贡信息科技有限公司 一种水库水位时间序列预测方法与系统
CN115374186B (zh) * 2022-09-29 2023-08-08 上海罗盘信息科技有限公司 基于大数据的数据处理方法及ai系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108944930A (zh) * 2018-07-05 2018-12-07 合肥工业大学 一种基于lstm的模拟驾驶员特性的自动跟车方法及系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111784348B (zh) * 2016-04-26 2024-06-11 创新先进技术有限公司 账户风险识别方法及装置
WO2018236932A1 (en) * 2017-06-19 2018-12-27 Oshea Timothy James ENCODING AND DECODING INFORMATION FOR WIRELESS TRANSMISSION USING MULTIPLE ANTENNA TRANSMITTERS
WO2019094729A1 (en) * 2017-11-09 2019-05-16 Strong Force Iot Portfolio 2016, Llc Methods and systems for the industrial internet of things
CN108765394B (zh) * 2018-05-21 2021-02-05 上海交通大学 基于质量评价的目标识别方法
CN109343505A (zh) * 2018-09-19 2019-02-15 太原科技大学 基于长短期记忆网络的齿轮剩余寿命预测方法
GB201817893D0 (en) * 2018-11-01 2018-12-19 Imperial Innovations Ltd Predicting physological parameters
CN109583570B (zh) * 2018-11-30 2022-11-29 重庆大学 基于深度学习确定桥梁健康监测系统异常数据来源的方法
CN109726524B (zh) * 2019-03-01 2022-11-01 哈尔滨理工大学 一种基于cnn和lstm的滚动轴承剩余使用寿命预测方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108944930A (zh) * 2018-07-05 2018-12-07 合肥工业大学 一种基于lstm的模拟驾驶员特性的自动跟车方法及系统

Also Published As

Publication number Publication date
CN110210126A (zh) 2019-09-06

Similar Documents

Publication Publication Date Title
CN110210126B (zh) 一种基于lstmpp的齿轮剩余寿命的预测方法
CN110175425B (zh) 一种基于mmalstm的齿轮剩余寿命的预测方法
CN112629863B (zh) 变工况下动态联合分布对齐网络的轴承故障诊断方法
CN110007652B (zh) 一种水电机组劣化趋势区间预测方法与系统
CN109814527B (zh) 基于lstm循环神经网络工业设备故障预测方法及装置
CN108181591B (zh) 一种基于改进型bp神经网络的电池soc值的预测方法
CN111222549A (zh) 一种基于深度神经网络的无人机故障预测方法
CN109947076B (zh) 一种基于贝叶斯信息准则的工业过程故障诊断方法
CN111723527B (zh) 基于鸡尾酒长短期记忆神经网络的齿轮剩余寿命的预测方法
Li et al. Domain adaptation remaining useful life prediction method based on AdaBN-DCNN
CN112163640A (zh) 基于深度卷积迁移学习行星齿轮箱故障诊断方法及系统
CN113554148A (zh) 一种基于贝叶斯优化的BiLSTM电压偏差预测方法
CN106778838A (zh) 一种预测空气质量的方法
CN115828611B (zh) 一种航天器机电部件的健康状态评估方法和装置
CN113806889A (zh) 一种tbm刀盘扭矩实时预测模型的处理方法、装置以及设备
CN111475986B (zh) 一种基于lstm-aon的齿轮剩余寿命的预测方法
CN115879369A (zh) 一种基于优化LightGBM算法的磨煤机故障预警方法
CN111783242A (zh) 一种基于rvm-kf的滚动轴承剩余寿命预测方法及装置
CN116398418A (zh) 核电循环水泵在线异常监测及辨识方法
CN115758187A (zh) 一种基于k-cnn--n-gru的煤矿机械电机状态预测方法
CN111709577A (zh) 基于长程相关性gan-lstm的rul预测方法
CN111475987B (zh) 一种基于sae和on-lstm的齿轮剩余寿命的预测方法
CN115062528A (zh) 一种针对工业过程时序数据的预测方法
CN117849628A (zh) 基于时序变换记忆网络的锂离子电池健康状态估计方法
Wang et al. Similarity-based echo state network for remaining useful life prediction

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant