CN112098878A - 一种锂电池soh估算和rul预测的端到端神经网络建立方法 - Google Patents

一种锂电池soh估算和rul预测的端到端神经网络建立方法 Download PDF

Info

Publication number
CN112098878A
CN112098878A CN202010967389.2A CN202010967389A CN112098878A CN 112098878 A CN112098878 A CN 112098878A CN 202010967389 A CN202010967389 A CN 202010967389A CN 112098878 A CN112098878 A CN 112098878A
Authority
CN
China
Prior art keywords
neural network
cnn
output
astlstm
hyper
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010967389.2A
Other languages
English (en)
Other versions
CN112098878B (zh
Inventor
张子健
李鹏华
胡晓松
柴毅
熊庆宇
胡向东
陈立平
侯杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing University of Post and Telecommunications
Original Assignee
Chongqing University of Post and Telecommunications
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing University of Post and Telecommunications filed Critical Chongqing University of Post and Telecommunications
Priority to CN202010967389.2A priority Critical patent/CN112098878B/zh
Publication of CN112098878A publication Critical patent/CN112098878A/zh
Application granted granted Critical
Publication of CN112098878B publication Critical patent/CN112098878B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01RMEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R31/00Arrangements for testing electric properties; Arrangements for locating electric faults; Arrangements for electrical testing characterised by what is being tested not provided for elsewhere
    • G01R31/36Arrangements for testing, measuring or monitoring the electrical condition of accumulators or electric batteries, e.g. capacity or state of charge [SoC]
    • G01R31/392Determining battery ageing or deterioration, e.g. state of health
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01RMEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R31/00Arrangements for testing electric properties; Arrangements for locating electric faults; Arrangements for electrical testing characterised by what is being tested not provided for elsewhere
    • G01R31/36Arrangements for testing, measuring or monitoring the electrical condition of accumulators or electric batteries, e.g. capacity or state of charge [SoC]
    • G01R31/3644Constructional arrangements
    • G01R31/3648Constructional arrangements comprising digital calculation means, e.g. for performing an algorithm
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01RMEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R31/00Arrangements for testing electric properties; Arrangements for locating electric faults; Arrangements for electrical testing characterised by what is being tested not provided for elsewhere
    • G01R31/36Arrangements for testing, measuring or monitoring the electrical condition of accumulators or electric batteries, e.g. capacity or state of charge [SoC]
    • G01R31/389Measuring internal impedance, internal conductance or related variables

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明涉及一种锂电池SOH估算和RUL预测的端到端神经网络建立方法,属于电池技术领域。在数据端,对测量的电池样本进行组织,以使其适用于SOH监测和RUL预测任务。在自动建模过程中,通过KS检验研究了神经网络超参数的先验分布。结合这种先验分布和在顺序演化过程中生成的后超参数分布,将根据结果端的预期输出自动调整基于神经网络的模型。本方法应用在SOH监测和RUL预测任务中可以获得较好的效果。

Description

一种锂电池SOH估算和RUL预测的端到端神经网络建立方法
技术领域
本发明属于电池技术领域,涉及一种锂电池SOH估算和RUL预测的端到端神经网络建立方法。
背景技术
直接测量容量或内部电阻是较为困难地,这也是健康状态(SOH)估计和剩余使用寿命 (RUL)预测所要解决的的长期问题。为了间接地解决这个问题,在过去的十年中已经开发了许多基于模型和数据驱动的方法。基于模型的方法,例如增量容量分析、差分电压分析、等效电路模型、电化学模型和经验模型,利用理化机制分析电池的健康行为。但是,由于电池复杂的内部原理和不确定的工况,因此难以建立准确的模型来展示电池的动态特性。
数据驱动的方法,尤其是神经网络(NNs),由于它们具有自适应性、灵活性且没有涉及到任何物理化学机制,因此近年来受到越来越多的关注。研究人员使用电压曲线特性通过数据处理的分组方法馈送到多项式神经网络,用于SOH估计。后来的工作从一个电池的老化过程中提取了多个端子电压特征,然后将这些特征馈送到基于知识的先验神经网络以估算 SOH。为了获得嵌入在电池退化数据中的更多信息,一些研究使用多个变量而不是单个变量作为SOH任务中神经网络的输入。例如,研究人员在使用一个单元的充电状态(SOC)、电流和阻抗谱作为并行神经网络(RNN)的输入时,使用这种RNN并行估计内部电阻和容量。类似地,在另一个SOH任务中,电压、电流和温度变化会馈送到RNN。为了提高基于神经网络的估计器的泛化能力,每个单元的多个变量之外的多个单元的数据用于训练更通用的框架,例如卷积神经网络(CNN)预测框架或长期的主动状态跟踪-短期记忆神经网络(AST-LSTM 神经网络)的预测框架。
作为SOH的补充,RUL通常与SOH一起进行研究。最近的研究大多利用LSTM神经网络来预测RUL,因为此类神经网络具有出色的能力,能够处理时间序列中嵌入的长期和短期依赖性。LSTM神经网络输入的类型和管理方式是这些方法之间的差异。对于输入类型,某些研究者利用容量特征,即经验模型分解(EMD)的几个子层的值,而其他研究者使用记录的容量。对于输入策略,某些文章使用多个电池单体,有些使用一个电池单体。此外,如何应用LSTM神经网络也是一个区别。Elman神经网络和标准LSTM神经网络(S-LSTM神经网络)的混合神经网络用于预测容量的高频率和低频,而一些研究仅将S-LSTM神经网络与不同的辅助技术一起使用,例如,dropout技术和Adam算法。除了S-LSTM神经网络,还开发了一些变体,例如双向LSTM神经网络和AST-LSTM神经网络,以用来预测RUL,并且表现出比 S-LSTM神经网络更好的性能。
尽管上述方法已显示出了良好的结果,但它们在实际健康预测中的灵活应用需要通过以下方面的问题进一步验证。首先,尽管使用诸如EMD之类的特征有助于SOH或RUL任务,但这种特征提取会花费更多时间选择适合输入预测框架的特征,甚至会影响基于神经网络框架的自动建立。其次,大多数研究都集中于应用特定的神经网络来提高估计或预测的准确性,但忽略了电池数据本身对这种神经网络的影响。第三,手动调整神经网络使得发布的结果难以复制和扩展,甚至对此类方法的原始研究也比科学更具有艺术性。
这项研究旨在设计一个端到端的预测框架,以解决上述问题。我们的贡献分别总结如下:首先,提出了AST-LSTM神经网络和一维CNN的混合体,称为CNN-ASTLSTM神经网络,以分层方式捕获影响电池退化的多个变量之间的特征,并主动学习嵌入在这些特征中的长期- 短期依赖性。其次,利用Kolmogorov-Smirnov(KS)测试,将超参数的先验分布指定给SOH 或RUL任务中的流行神经网络,以评估电池数据对此类神经网络建模的影响。第三,基于上述超参数的先验分布,提出了一种贝叶斯优化算法来建立损失函数的概率替代模型。这种替代用于自动选择最有前途的超参数,以评估真实损失函数。
发明内容
有鉴于此,本发明的目的在于提供一种锂电池SOH估算和RUL预测的端到端神经网络建立方法。
为达到上述目的,本发明提供如下技术方案:
一种锂电池SOH估算和RUL预测的端到端神经网络建立方法,该方法包括以下步骤:
S1:设计CNN-ASTLSTM神经网络;
S2:CNN-ASTLSTM神经网络的超参数优化;
S3:CNN-ASTLSTM神经网络的应用。
可选的,所述S1具体为:
Figure RE-GDA0002750459560000021
Figure RE-GDA0002750459560000022
分别为第n个一维卷积层的输入和特征图,n∈{1,2,...N};上标W和C分别表示数据宽度和通道;U1是输入样本,其中数据宽度和通道分别代表样本长度和样本类型;第
Figure RE-GDA0002750459560000023
个滤波器
Figure RE-GDA0002750459560000024
的输出,即第n个卷积层的特征图,通过以下方式获得:
Figure RE-GDA0002750459560000031
其中
Figure RE-GDA0002750459560000032
σ,
Figure RE-GDA0002750459560000033
和s分别代表位置坐标、激活函数、局部邻域和步幅大小;
Figure RE-GDA0002750459560000034
的范围为
Figure RE-GDA0002750459560000035
经过最大池化后,第n+1层卷积的输入
Figure RE-GDA0002750459560000036
表示为:
Figure RE-GDA0002750459560000037
其中
Figure RE-GDA0002750459560000038
Q和d分别是下采样输出、位置坐标、池化核和步幅大小;
在每个卷积层中,通过在局部接收场内将空间和通道信息融合在一起,学习
Figure RE-GDA0002750459560000039
滤波器来表达有益的组合;通过堆叠一系列交织在一起的非线性和下采样的卷积层,一维CNN能够捕获影响电池退化的多个变量之间的分层模式;然后,使用AST-LSTM神经网络来学习这些模式中嵌入的长期短期依存关系;
对于第l个AST-LSTM层,l∈1,2,...L,令
Figure RE-GDA00027504595600000310
在时间t的输入,M是神经元的数量,并且
Figure RE-GDA00027504595600000311
是该块在时间t-1的输出;|·|表示维度运算符;
Figure RE-GDA00027504595600000312
ul+1,t=hl,t;其中
Figure RE-GDA00027504595600000313
遗忘门输出
Figure RE-GDA00027504595600000314
和候选门输出
Figure RE-GDA00027504595600000315
给出为:
fl,t=σ(kl,fu·ul,t+kl,fh·hl,t-1+bl,f) (3)
zl,t=g(kl,zu·ul,t+kl,zh·hl,t-1+bl,z) (4)
其中
Figure RE-GDA00027504595600000316
Figure RE-GDA00027504595600000317
分别是遗忘门和候选门中的输入权重,递归权重和偏置权重;逻辑sigmoidσ(·)和双曲正切tanh(·) 是遗忘门和候选门的激活函数;融合状态输入
Figure RE-GDA00027504595600000318
和状态输出
Figure RE-GDA00027504595600000319
表示为:
il,t=(1-fl,t)⊙σ(cl,t-1⊙pl,i) (5)
cl,t=cl,t-1⊙fl,t+il,t⊙zl,t (6)
其中,
Figure RE-GDA00027504595600000320
Figure RE-GDA00027504595600000321
分别代表时间t-1的细胞状态和窥视孔对旧细胞状态的权重;符号⊙表示逐点乘法;输出门输出
Figure RE-GDA00027504595600000322
和块输出
Figure RE-GDA00027504595600000323
给出为:
ol,t=σ(kl,ou·ul,t+kl,oh·hl,t-1+pl,o⊙cl,t+bl,o) (7)
hl,t=ol,t⊙g(cl,t) (8)
其中
Figure RE-GDA0002750459560000041
Figure RE-GDA0002750459560000042
分别是输出门中的输入权重,递归权重和偏置权重;在新的细胞状态下,窥孔的权重表示为
Figure RE-GDA0002750459560000043
最后,CNN-ASTLSTM神经网络的输出
Figure RE-GDA0002750459560000044
写为:
yL+1,t=kL+1hL,t (9)
其中
Figure RE-GDA0002750459560000045
是全连接的权重。
可选的,所述S2具体为:
利用CNN-ASTLSTM神经网络进行SOH估计或RUL预测的最终目标是使用这种网络查找非线性函数
Figure RE-GDA0002750459560000046
该函数使得估计或预测的误差最小;电池样本U来自自然分布的
Figure RE-GDA0002750459560000047
将该目标重新构造为使用学习算法
Figure RE-GDA0002750459560000048
将有限的电池数据集
Figure RE-GDA0002750459560000049
映射到使预期损失
Figure RE-GDA00027504595600000410
最小的函数
Figure RE-GDA00027504595600000411
中;实际的学习算法表示为
Figure RE-GDA00027504595600000412
通过优化训练准则产生
Figure RE-GDA00027504595600000413
高维空间Θ中的一组参数θ,即超参数;这将超参数优化问题描述为:
Figure RE-GDA00027504595600000414
其中
Figure RE-GDA00027504595600000415
是损失的期望值,即泛化误差;对未知自然分布
Figure RE-GDA00027504595600000416
的期望很难直接评估;为解决这个问题,在神经网络的训练过程中,考虑k折交叉验证,将等式(10)重新定义为:
Figure RE-GDA00027504595600000417
其中
Figure RE-GDA00027504595600000418
Figure RE-GDA00027504595600000419
分别表示由CNN超参数θc和AST-LSTM神经网络超参数θa指定的学习算法;通过第i个交叉验证的训练数据和有效数据分别表示为
Figure RE-GDA00027504595600000420
Figure RE-GDA00027504595600000421
通过式(11),上述问题被重新公式化为树结构化空间Θ=Θ(1)∪...∪Θ(k)∪{θr}的单个组合式分层超参数优化问题,其中θr是每个子空间Θ(i)的根级超参数;
方程(11)方式求解,包括基于顺序模型的优化,高斯过程优化和贝叶斯优化;
选择预期改进EI准则来近似使用成本较低的的代理得出的等式(11);EI是在CNN-ASTLSTM神经网络下产生
Figure RE-GDA00027504595600000422
的期望,即
Figure RE-GDA00027504595600000423
将负阈值e*c,a)超过负值,该阈值如下所示:
Figure RE-GDA00027504595600000424
其中
Figure RE-GDA0002750459560000051
表示关于损失的超参数配置θc和θa;与高斯优化直接建模
Figure RE-GDA0002750459560000052
不同,对
Figure RE-GDA0002750459560000053
Figure RE-GDA0002750459560000054
进行建模;将
Figure RE-GDA0002750459560000055
建模为两个密度估计之一,条件是e是大于还是小于给定阈值e*
Figure RE-GDA0002750459560000056
其中
Figure RE-GDA0002750459560000057
表示通过使用观测值
Figure RE-GDA0002750459560000058
形成的密度估计,相应的损失e(θc,a)小于e*,而g(·)是从其余观测中获悉的密度估计,其对应的损耗大于或等于e*;选择e*作为γ分位数,
Figure RE-GDA0002750459560000059
EI与闭式表达式成正比,即
Figure RE-GDA00027504595600000510
如下:
Figure RE-GDA00027504595600000511
Figure RE-GDA00027504595600000512
Figure RE-GDA00027504595600000513
Figure RE-GDA00027504595600000514
创建一维Parzen估计器以对
Figure RE-GDA00027504595600000515
和g(·)的密度建模,其公式为:
Figure RE-GDA00027504595600000516
其中KG是高斯核,h>0是称为带宽的平滑参数;
对于先前的分布
Figure RE-GDA00027504595600000517
使用KS检验获得超参数的先验分布;有序观测值
Figure RE-GDA00027504595600000518
定义为:
Figure RE-GDA00027504595600000519
其中I[-∞,e](Ej)是指标函数,如果Ej≤e则等于1,否则等于0;给定累积分布函数F(e)的KS 统计量写为:
Figure RE-GDA0002750459560000061
其中
Figure RE-GDA0002750459560000062
是距离集的最大值;使用Kolmogorov分布的临界值构造KS测试;如果
Figure RE-GDA0002750459560000063
则在水平α处拒绝原假设,其中Kα从下式中获取:
P(K≤Kα)=1-α (21)。
可选的,所述S3具体为:
应用CNN-ASTLSTM神经网络训练SOH估计模型的问题描述为:
Figure RE-GDA0002750459560000064
其中
Figure RE-GDA0002750459560000065
sw和co是第i个充放电轮次中电压V、温度T、电流I和采样时间t的历史采样值,第i个充放电轮次的历史容量,滑动窗口的长度和初始容量;SOH的在线估计表示为:
Figure RE-GDA0002750459560000066
其中
Figure RE-GDA0002750459560000067
是第jj个充放电轮次中观察到的电压、温度、电流和采样时间的样本;
假设寿命终止EOL为C0×70%,则实际和预测的RUL定义为:
RUL=qeol-qs (24)
Figure RE-GDA0002750459560000068
其中qeol
Figure RE-GDA0002750459560000069
分别是EOL实际和预测的充放电轮次,qs是预测开始时的充放电轮次;通过应用CNN-ASTLSTM神经网络训练RUL预测模型来获得
Figure RE-GDA00027504595600000610
Figure RE-GDA00027504595600000611
其中
Figure RE-GDA00027504595600000612
和pw分别表示开始预测充放电轮次的历史容量和预测窗口的长度;
Figure RE-GDA00027504595600000613
的在线预测描述为:
Figure RE-GDA00027504595600000614
其中
Figure RE-GDA00027504595600000615
Figure RE-GDA00027504595600000616
分别是预测和观察到的容量;将sw和pw分别指定为CNNASTLSTM神经网络第一层中的卷积核大小和最后一层中的神经元数。
本发明的有益效果在于:
在锂电池SOH监测和RUL预测领域,解决了如何提取锂电池退化数据的分层特征并优化神经网络的超参数问题。在这样的框架中,设计了一种混合神经网络,即一维卷积神经网络和主动状态跟踪-长短期记忆神经网络的混合,以捕获影响电池退化的多个变量之间的分层特征,以及这些功能中嵌入的时间依赖性。此外,通过Kolmogorov-Smirnov检验建立了SOH或 RUL任务中流行的神经网络所指定的超参数的先验分布。这也被认为是调查退化数据对此类神经网络建模的影响。基于这种替代,提出了一种贝叶斯优化算法来建立概率替代模型,以自动选择超参数顺序演化过程中最有前途的配置。
因此,本方法应用在SOH监测和RUL预测任务中可以获得较好的效果。
本发明的其他优点、目标和特征在某种程度上将在随后的说明书中进行阐述,并且在某种程度上,基于对下文的考察研究对本领域技术人员而言将是显而易见的,或者可以从本发明的实践中得到教导。本发明的目标和其他优点可以通过下面的说明书来实现和获得。
附图说明
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作优选的详细描述,其中:
图1为本发明原理图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。需要说明的是,以下实施例中所提供的图示仅以示意方式说明本发明的基本构想,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。
其中,附图仅用于示例性说明,表示的仅是示意图,而非实物图,不能理解为对本发明的限制;为了更好地说明本发明的实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;对本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。
本发明实施例的附图中相同或相似的标号对应相同或相似的部件;在本发明的描述中,需要理解的是,若有术语“上”、“下”、“左”、“右”、“前”、“后”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此附图中描述位置关系的用语仅用于示例性说明,不能理解为对本发明的限制,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语的具体含义。
1)CNN-ASTLSTM神经网络的设计
Figure RE-GDA0002750459560000081
Figure RE-GDA0002750459560000082
分别为第n个(n∈{1,2,...N})一维卷积层的输入和特征图。上标W和C分别表示数据宽度和通道。特别地,U1是输入样本,其中数据宽度和通道分别代表样本长度和样本类型(容量及其对应的电压、电流、温度、采样时间)。第
Figure RE-GDA0002750459560000083
个滤波器
Figure RE-GDA0002750459560000084
的输出,即第n个卷积层的特征图,可以通过以下方式获得:
Figure RE-GDA0002750459560000085
其中
Figure RE-GDA0002750459560000086
σ,
Figure RE-GDA0002750459560000087
和s分别代表位置坐标,激活函数,局部邻域和步幅大小。注意,
Figure RE-GDA0002750459560000088
的范围为
Figure RE-GDA0002750459560000089
经过最大池化后,第n+1层卷积的输入
Figure RE-GDA00027504595600000810
可以表示为:
Figure RE-GDA00027504595600000811
其中
Figure RE-GDA00027504595600000812
Q和d分别是下采样输出,位置坐标,池化核和步幅大小。
在每个卷积层中,通过在局部接收场内将空间和通道信息融合在一起,学习了
Figure RE-GDA00027504595600000813
滤波器来表达有益的组合。通过堆叠一系列交织在一起的非线性和下采样的卷积层,一维CNN能够捕获影响电池退化的多个变量之间的分层模式。然后,使用AST-LSTM神经网络(如图1 所示)来学习这些模式中嵌入的长期短期依存关系。
对于第l个(l∈1,2,...L)AST-LSTM层,令
Figure RE-GDA00027504595600000814
在时间t的输入,M是神经元的数量,并且
Figure RE-GDA00027504595600000815
是该块在时间t-1的输出。注意|·|表示维度运算符。显然地,
Figure RE-GDA00027504595600000816
ul+1,t=hl,t。其中
Figure RE-GDA00027504595600000817
遗忘门输出
Figure RE-GDA00027504595600000818
和候选门输出
Figure RE-GDA00027504595600000819
给出为:
fl,t=σ(kl,fu·ul,t+kl,fh·hl,t-1+bl,f) (3)
zl,t=g(kl,zu·ul,t+kl,zh·hl,t-1+bl,z) (4)
其中
Figure RE-GDA0002750459560000091
Figure RE-GDA0002750459560000092
分别是遗忘门和候选门中的输入权重,递归权重和偏置权重。逻辑sigmoidσ(·)和双曲正切tanh(·) 是遗忘门和候选门的激活函数。融合状态输入
Figure RE-GDA0002750459560000093
和状态输出
Figure RE-GDA0002750459560000094
表示为:
il,t=(1-fl,t)⊙σ(cl,t-1⊙pl,i) (5)
cl,t=cl,t-1⊙fl,t+il,t⊙zl,t (6)
其中,
Figure RE-GDA0002750459560000095
Figure RE-GDA0002750459560000096
分别代表时间t-1的细胞状态和窥视孔对旧细胞状态的权重。符号⊙表示逐点乘法。输出门输出
Figure RE-GDA0002750459560000097
和块输出
Figure RE-GDA0002750459560000098
给出为:
ol,t=σ(kl,ou·ul,t+kl,oh·hl,t-1+pl,o⊙cl,t+bl,o) (7)
hl,t=ol,t⊙g(cl,t) (8)
其中
Figure RE-GDA0002750459560000099
Figure RE-GDA00027504595600000910
分别是输出门中的输入权重,递归权重和偏置权重。在新的细胞状态下,窥孔的权重表示为
Figure RE-GDA00027504595600000911
最后,CNN-ASTLSTM神经网络的输出
Figure RE-GDA00027504595600000912
写为:
yL+1,t=kL+1hL,t (9)
其中
Figure RE-GDA00027504595600000913
是全连接的权重。
2)CNN-ASTLSTM神经网络的超参数优化
利用CNN-ASTLSTM神经网络进行SOH估计或RUL预测的最终目标是使用这种网络查找非线性函数
Figure RE-GDA00027504595600000914
该函数使得估计或预测的误差最小。电池样本U来自自然分布的
Figure RE-GDA00027504595600000915
有些研究者指出,可以将该目标重新构造为使用学习算法
Figure RE-GDA00027504595600000916
将有限的电池数据集
Figure RE-GDA00027504595600000917
映射到使预期损失
Figure RE-GDA00027504595600000918
最小的函数
Figure RE-GDA00027504595600000919
中。实际的学习算法表示为
Figure RE-GDA00027504595600000920
因为它通过优化训练准则产生
Figure RE-GDA00027504595600000921
高维空间Θ中的一组参数θ(称为超参数)。这将超参数优化问题描述为:
Figure RE-GDA00027504595600000922
其中
Figure RE-GDA00027504595600000923
是损失的期望值(也称为泛化误差)。但是,对未知自然分布
Figure RE-GDA00027504595600000924
的期望很难直接评估。为了解决这个问题,在神经网络的训练过程中,考虑k折交叉验证,将等式(10)重新定义为:
Figure RE-GDA00027504595600000925
其中
Figure RE-GDA0002750459560000101
Figure RE-GDA0002750459560000102
分别表示由CNN超参数θc和AST-LSTM神经网络超参数θa指定的学习算法。通过第i个交叉验证的训练数据和有效数据分别表示为
Figure RE-GDA0002750459560000103
Figure RE-GDA0002750459560000104
通过式(11),上述问题被重新公式化为树结构化空间Θ=Θ(1)∪…∪Θ(k)∪{θr}的单个组合式分层超参数优化问题,其中θr是每个子空间Θ(i)的根级超参数。
原则上,方程(11)可以通过多种方式求解,例如,基于顺序模型的优化,高斯过程优化和贝叶斯优化。具体来说,我们选择了预期改进(EI)准则来近似使用成本较低的的代理得出的等式(11)。EI是在CNN-ASTLSTM神经网络下产生
Figure RE-GDA0002750459560000105
的期望,即
Figure RE-GDA0002750459560000106
将负阈值e*c,a)超过负值,该阈值如下所示:
Figure RE-GDA0002750459560000107
其中
Figure RE-GDA0002750459560000108
表示关于损失的超参数配置θc和θa。与高斯优化直接建模
Figure RE-GDA0002750459560000109
不同,我们对
Figure RE-GDA00027504595600001010
Figure RE-GDA00027504595600001011
进行建模。我们将
Figure RE-GDA00027504595600001012
建模为两个密度估计之一,条件是e是大于还是小于给定阈值e*
Figure RE-GDA00027504595600001013
其中
Figure RE-GDA00027504595600001014
表示通过使用观测值
Figure RE-GDA00027504595600001015
形成的密度估计,因此相应的损失e(θc,a)小于 e*,而g(·)是从其余观测中获悉的密度估计,其对应的损耗大于或等于e*。注意,选择了e*作为γ分位数,因此
Figure RE-GDA00027504595600001016
有研究者提出EI与闭式表达式成正比,即
Figure RE-GDA00027504595600001017
如下:
Figure RE-GDA00027504595600001018
Figure RE-GDA00027504595600001019
Figure RE-GDA00027504595600001020
Figure RE-GDA0002750459560000111
创建一维Parzen估计器以对
Figure RE-GDA0002750459560000112
和g(·)的密度建模,其公式为:
Figure RE-GDA0002750459560000113
其中KG是高斯核,h>0是称为带宽的平滑参数。
对于先前的分布
Figure RE-GDA0002750459560000114
我们使用KS检验获得超参数的先验分布。有序观测值
Figure RE-GDA0002750459560000115
定义为:
Figure RE-GDA0002750459560000116
其中I[-∞,e](Ej)是指标函数,如果Ej≤e则等于1,否则等于0。给定累积分布函数F(e)的KS 统计量写为:
Figure RE-GDA00027504595600001113
其中
Figure RE-GDA0002750459560000117
是距离集的最大值。可以使用Kolmogorov分布的临界值构造KS测试。如果
Figure RE-GDA0002750459560000118
则在水平α处拒绝原假设,其中Kα可从下式中获取:
P(K≤Kα)=1-α. (21)
3)CNN-ASTLSTM神经网络的应用
应用CNN-ASTLSTM神经网络训练SOH估计模型的问题可以描述为:
Figure RE-GDA0002750459560000119
其中
Figure RE-GDA00027504595600001110
sw和co是第i个充放电轮次中电压(V),温度(T),电流(I)和采样时间 (t)的历史采样值,第i个充放电轮次的历史容量,滑动窗口的长度和初始容量。SOH的在线估计可表示为:
Figure RE-GDA00027504595600001111
其中
Figure RE-GDA00027504595600001112
是第jj个充放电轮次中观察到的电压,温度,电流和采样时间的样本。
假设寿命终止(EOL)为C0×70%,则实际和预测的RUL定义为:
RUL=qeol-qs (24)
Figure RE-GDA0002750459560000121
其中qeol
Figure RE-GDA0002750459560000122
分别是EOL实际和预测的充放电轮次,qs是预测开始时的充放电轮次。可以通过应用CNN-ASTLSTM神经网络训练RUL预测模型来获得
Figure RE-GDA0002750459560000123
Figure RE-GDA0002750459560000124
其中
Figure RE-GDA0002750459560000125
和pw分别表示开始预测充放电轮次的历史容量和预测窗口的长度。
Figure RE-GDA0002750459560000126
的在线预测描述为:
Figure RE-GDA0002750459560000127
其中
Figure RE-GDA0002750459560000128
Figure RE-GDA0002750459560000129
分别是预测和观察到的容量。请注意,将sw和pw分别指定为CNNASTLSTM神经网络第一层中的卷积核大小和最后一层中的神经元数。
最后说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本技术方案的宗旨和范围,其均应涵盖在本发明的权利要求范围当中。

Claims (4)

1.一种锂电池SOH估算和RUL预测的端到端神经网络建立方法,其特征在于:该方法包括以下步骤:
S1:设计CNN-ASTLSTM神经网络;
S2:CNN-ASTLSTM神经网络的超参数优化;
S3:CNN-ASTLSTM神经网络的应用。
2.根据权利要求1所述的一种锂电池SOH估算和RUL预测的端到端神经网络建立方法,其特征在于:所述S1具体为:
Figure FDA0002682837960000011
Figure FDA0002682837960000012
分别为第n个一维卷积层的输入和特征图,n∈{1,2,...N};上标W和C分别表示数据宽度和通道;U1是输入样本,其中数据宽度和通道分别代表样本长度和样本类型;第
Figure FDA0002682837960000013
个滤波器
Figure FDA0002682837960000014
的输出,即第n个卷积层的特征图,通过以下方式获得:
Figure FDA0002682837960000015
其中
Figure FDA0002682837960000016
σ,
Figure FDA0002682837960000017
和s分别代表位置坐标、激活函数、局部邻域和步幅大小;
Figure FDA0002682837960000018
的范围为
Figure FDA0002682837960000019
经过最大池化后,第n+1层卷积的输入
Figure FDA00026828379600000110
表示为:
Figure FDA00026828379600000111
其中
Figure FDA00026828379600000112
Q和d分别是下采样输出、位置坐标、池化核和步幅大小;
在每个卷积层中,通过在局部接收场内将空间和通道信息融合在一起,学习
Figure FDA00026828379600000113
滤波器来表达有益的组合;通过堆叠一系列交织在一起的非线性和下采样的卷积层,一维CNN能够捕获影响电池退化的多个变量之间的分层模式;然后,使用AST-LSTM神经网络来学习这些模式中嵌入的长期短期依存关系;
对于第1个AST-LSTM层,l∈1,2,...L,令
Figure FDA00026828379600000114
在时间t的输入,M是神经元的数量,并且
Figure FDA00026828379600000115
是该块在时间t-1的输出;|·|表示维度运算符;
Figure FDA00026828379600000116
ul+1,t=hl,t;其中
Figure FDA00026828379600000117
遗忘门输出
Figure FDA00026828379600000118
和候选门输出
Figure FDA00026828379600000119
给出为:
fl,t=σ(kl,fu·ul,t+kl,fh·hl,t-1+bl,f) (3)
zl,t=g(kl,zu·ul,t+kl,zh·hl,t-1+bl,z) (4)
其中
Figure FDA0002682837960000021
Figure FDA0002682837960000022
分别是遗忘门和候选门中的输入权重,递归权重和偏置权重;逻辑sigmoidσ(·)和双曲正切tanh(·)是遗忘门和候选门的激活函数;融合状态输入
Figure FDA0002682837960000023
和状态输出
Figure FDA0002682837960000024
表示为:
il,t=(1-fl,t)⊙σ(cl,t-1⊙pl,i) (5)
cl,t=cl,t-1⊙fl,t+il,t⊙zl,t (6)
其中,
Figure FDA0002682837960000025
Figure FDA0002682837960000026
分别代表时间t-1的细胞状态和窥视孔对旧细胞状态的权重;符号⊙表示逐点乘法;输出门输出
Figure FDA0002682837960000027
和块输出
Figure FDA0002682837960000028
给出为:
ol,t=σ(kl,ou·ul,t+kl,oh·hl,t-1+pl,o⊙cl,t+bl,o) (7)
hl,t=ol,t⊙g(cl,t) (8)
其中
Figure FDA0002682837960000029
Figure FDA00026828379600000210
分别是输出门中的输入权重,递归权重和偏置权重;在新的细胞状态下,窥孔的权重表示为
Figure FDA00026828379600000211
最后,CNN-ASTLSTM神经网络的输出
Figure FDA00026828379600000212
写为:
yL+1,t=kL+1hL,t (9)
其中
Figure FDA00026828379600000213
是全连接的权重。
3.根据权利要求1所述的一种锂电池SOH估算和RUL预测的端到端神经网络建立方法,其特征在于:所述S2具体为:
利用CNN-ASTLSTM神经网络进行SOH估计或RUL预测的最终目标是使用这种网络查找非线性函数
Figure FDA00026828379600000214
该函数使得估计或预测的误差最小;电池样本U来自自然分布的
Figure FDA00026828379600000215
将该目标重新构造为使用学习算法
Figure FDA00026828379600000216
将有限的电池数据集
Figure FDA00026828379600000217
映射到使预期损失
Figure FDA00026828379600000218
最小的函数
Figure FDA00026828379600000219
中;实际的学习算法表示为
Figure FDA00026828379600000220
通过优化训练准则产生
Figure FDA00026828379600000221
高维空间Θ中的一组参数θ,即超参数;这将超参数优化问题描述为:
Figure FDA00026828379600000222
其中
Figure FDA00026828379600000223
是损失的期望值,即泛化误差;对未知自然分布
Figure FDA00026828379600000224
的期望很难直接评估;为解决这个问题,在神经网络的训练过程中,考虑k折交叉验证,将等式(10)重新定义为:
Figure FDA0002682837960000031
其中
Figure FDA0002682837960000032
Figure FDA0002682837960000033
分别表示由CNN超参数θc和AST-LSTM神经网络超参数θa指定的学习算法;通过第i个交叉验证的训练数据和有效数据分别表示为
Figure FDA0002682837960000034
Figure FDA0002682837960000035
通过式(11),上述问题被重新公式化为树结构化空间Θ=Θ(1)∪…∪Θ(k)∪{θr}的单个组合式分层超参数优化问题,其中θr是每个子空间Θ(i)的根级超参数;
方程(11)方式求解,包括基于顺序模型的优化,高斯过程优化和贝叶斯优化;
选择预期改进EI准则来近似使用成本较低的的代理得出的等式(11);EI是在CNN-ASTLSTM神经网络下产生
Figure FDA0002682837960000036
$U→y的期望,即
Figure FDA0002682837960000037
将负阈值e*c,a)超过负值,该阈值如下所示:
Figure FDA0002682837960000038
其中
Figure FDA0002682837960000039
表示关于损失的超参数配置θc和θa;与高斯优化直接建模
Figure FDA00026828379600000310
不同,对
Figure FDA00026828379600000311
Figure FDA00026828379600000312
进行建模;将
Figure FDA00026828379600000313
建模为两个密度估计之一,条件是e是大于还是小于给定阈值e*
Figure FDA00026828379600000314
其中
Figure FDA00026828379600000321
表示通过使用观测值
Figure FDA00026828379600000315
形成的密度估计,相应的损失e(θc,a)小于e*,而g(·)是从其余观测中获悉的密度估计,其对应的损耗大于或等于e*;选择e*作为γ分位数,
Figure FDA00026828379600000316
EI与闭式表达式成正比,即
Figure FDA00026828379600000317
如下:
Figure FDA00026828379600000318
Figure FDA00026828379600000319
Figure FDA00026828379600000320
Figure FDA0002682837960000041
创建一维Parzen估计器以对
Figure FDA00026828379600000413
和g(·)的密度建模,其公式为:
Figure FDA0002682837960000042
其中KG是高斯核,h>0是称为带宽的平滑参数;
对于先前的分布
Figure FDA0002682837960000043
使用KS检验获得超参数的先验分布;有序观测值
Figure FDA0002682837960000044
定义为:
Figure FDA0002682837960000045
其中I[-∞,e](Ej)是指标函数,如果Ej≤e则等于1,否则等于0;给定累积分布函数F(e)的KS统计量写为:
Figure FDA0002682837960000046
其中
Figure FDA0002682837960000047
是距离集的最大值;使用Kolmogorov分布的临界值构造KS测试;如果
Figure FDA0002682837960000048
则在水平α处拒绝原假设,其中Kα从下式中获取:
P(K≤Kα)=1-α (21)。
4.根据权利要求1所述的一种锂电池SOH估算和RUL预测的端到端神经网络建立方法,其特征在于:所述S3具体为:
应用CNN-ASTLSTM神经网络训练SOH估计模型的问题描述为:
Figure FDA0002682837960000049
其中
Figure FDA00026828379600000410
sw和co是第i个充放电轮次中电压V、温度T、电流I和采样时间t的历史采样值,第i个充放电轮次的历史容量,滑动窗口的长度和初始容量;SOH的在线估计表示为:
Figure FDA00026828379600000411
其中
Figure FDA00026828379600000412
是第j个充放电轮次中观察到的电压、温度、电流和采样时间的样本;
假设寿命终止EOL为C0×70%,则实际和预测的RUL定义为:
RUL=qeol-qs (24)
Figure FDA0002682837960000051
其中qeol
Figure FDA0002682837960000052
分别是EOL实际和预测的充放电轮次,qs是预测开始时的充放电轮次;通过应用CNN-ASTLSTM神经网络训练RUL预测模型来获得
Figure FDA0002682837960000053
Figure FDA0002682837960000054
其中
Figure FDA0002682837960000055
和pw分别表示开始预测充放电轮次的历史容量和预测窗口的长度;
Figure FDA0002682837960000056
的在线预测描述为:
Figure FDA0002682837960000057
其中
Figure FDA0002682837960000058
Figure FDA0002682837960000059
分别是预测和观察到的容量;将sw和pw分别指定为CNN-ASTLSTM神经网络第一层中的卷积核大小和最后一层中的神经元数。
CN202010967389.2A 2020-09-15 2020-09-15 一种锂电池soh估算和rul预测的端到端神经网络建立方法 Active CN112098878B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010967389.2A CN112098878B (zh) 2020-09-15 2020-09-15 一种锂电池soh估算和rul预测的端到端神经网络建立方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010967389.2A CN112098878B (zh) 2020-09-15 2020-09-15 一种锂电池soh估算和rul预测的端到端神经网络建立方法

Publications (2)

Publication Number Publication Date
CN112098878A true CN112098878A (zh) 2020-12-18
CN112098878B CN112098878B (zh) 2023-11-03

Family

ID=73758818

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010967389.2A Active CN112098878B (zh) 2020-09-15 2020-09-15 一种锂电池soh估算和rul预测的端到端神经网络建立方法

Country Status (1)

Country Link
CN (1) CN112098878B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113269356A (zh) * 2021-05-18 2021-08-17 中国人民解放军火箭军工程大学 一种面向缺失数据的设备剩余寿命预测方法及系统
CN113742178A (zh) * 2021-09-18 2021-12-03 北京航空航天大学 一种基于lstm的网络节点健康状态监测方法
US20220283228A1 (en) * 2021-03-08 2022-09-08 Honda Motor Co., Ltd. Learning method, state estimation method, and state estimation device for state estimation model of secondary battery
CN115542173A (zh) * 2022-12-05 2022-12-30 江苏欧力特能源科技有限公司 电池电量估计方法及装置
CN116593904A (zh) * 2023-07-17 2023-08-15 中国华能集团清洁能源技术研究院有限公司 模型训练方法以及用于预测电池soh和电池rul的方法
CN116990692A (zh) * 2023-09-28 2023-11-03 深圳康普盾科技股份有限公司 一种锂电池的健康状况评估与剩余寿命预测方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060276980A1 (en) * 2005-04-20 2006-12-07 Denso Corporation Method and apparatus for detecting charged state of secondary battery based on neural network calculation
CN108535656A (zh) * 2018-03-22 2018-09-14 中北大学 基于pca-narx神经网络的锂离子电池剩余使用寿命预测方法和系统
CN110598842A (zh) * 2019-07-17 2019-12-20 深圳大学 一种深度神经网络超参数优化方法、电子设备及存储介质
CN110824364A (zh) * 2019-10-24 2020-02-21 重庆邮电大学 一种基于ast-lstm神经网络的锂电池soh估计与rul预测方法
CN111220921A (zh) * 2020-01-08 2020-06-02 重庆邮电大学 基于改进卷积-长短时记忆神经网络的锂电池容量估算方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060276980A1 (en) * 2005-04-20 2006-12-07 Denso Corporation Method and apparatus for detecting charged state of secondary battery based on neural network calculation
CN108535656A (zh) * 2018-03-22 2018-09-14 中北大学 基于pca-narx神经网络的锂离子电池剩余使用寿命预测方法和系统
CN110598842A (zh) * 2019-07-17 2019-12-20 深圳大学 一种深度神经网络超参数优化方法、电子设备及存储介质
CN110824364A (zh) * 2019-10-24 2020-02-21 重庆邮电大学 一种基于ast-lstm神经网络的锂电池soh估计与rul预测方法
CN111220921A (zh) * 2020-01-08 2020-06-02 重庆邮电大学 基于改进卷积-长短时记忆神经网络的锂电池容量估算方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220283228A1 (en) * 2021-03-08 2022-09-08 Honda Motor Co., Ltd. Learning method, state estimation method, and state estimation device for state estimation model of secondary battery
CN113269356A (zh) * 2021-05-18 2021-08-17 中国人民解放军火箭军工程大学 一种面向缺失数据的设备剩余寿命预测方法及系统
CN113269356B (zh) * 2021-05-18 2024-03-15 中国人民解放军火箭军工程大学 一种面向缺失数据的设备剩余寿命预测方法及系统
CN113742178A (zh) * 2021-09-18 2021-12-03 北京航空航天大学 一种基于lstm的网络节点健康状态监测方法
CN115542173A (zh) * 2022-12-05 2022-12-30 江苏欧力特能源科技有限公司 电池电量估计方法及装置
CN116593904A (zh) * 2023-07-17 2023-08-15 中国华能集团清洁能源技术研究院有限公司 模型训练方法以及用于预测电池soh和电池rul的方法
CN116593904B (zh) * 2023-07-17 2023-10-03 中国华能集团清洁能源技术研究院有限公司 模型训练方法以及用于预测电池soh和电池rul的方法
CN116990692A (zh) * 2023-09-28 2023-11-03 深圳康普盾科技股份有限公司 一种锂电池的健康状况评估与剩余寿命预测方法及系统
CN116990692B (zh) * 2023-09-28 2023-12-08 深圳康普盾科技股份有限公司 一种锂电池的健康状况评估与剩余寿命预测方法及系统

Also Published As

Publication number Publication date
CN112098878B (zh) 2023-11-03

Similar Documents

Publication Publication Date Title
CN112098878A (zh) 一种锂电池soh估算和rul预测的端到端神经网络建立方法
Wang et al. Improved anti-noise adaptive long short-term memory neural network modeling for the robust remaining useful life prediction of lithium-ion batteries
Ma et al. A hybrid transfer learning scheme for remaining useful life prediction and cycle life test optimization of different formulation Li-ion power batteries
CN111443294B (zh) 一种锂离子电池剩余寿命间接预测方法及装置
Yang A machine-learning prediction method of lithium-ion battery life based on charge process for different applications
Shu et al. State of health prediction of lithium-ion batteries based on machine learning: Advances and perspectives
Sui et al. A review of non-probabilistic machine learning-based state of health estimation techniques for Lithium-ion battery
CN110824364B (zh) 一种基于ast-lstm神经网络的锂电池soh估计与rul预测方法
Ren et al. A review of machine learning state-of-charge and state-of-health estimation algorithms for lithium-ion batteries
Wang et al. Online remaining useful life prediction of lithium-ion batteries using bidirectional long short-term memory with attention mechanism
CN110187290B (zh) 一种基于融合型算法的锂离子电池剩余寿命预测方法
Tao et al. A novel support vector regression method for online reliability prediction under multi-state varying operating conditions
CN111856287B (zh) 基于堆叠残差因果卷积神经网络的锂电池健康状态检测方法
Chen et al. An overview of data-driven battery health estimation technology for battery management system
Chen et al. Adaptive online capacity prediction based on transfer learning for fast charging lithium-ion batteries
CN112434848A (zh) 基于深度信念网络的非线性加权组合风电功率预测方法
Fei et al. A deep attention-assisted and memory-augmented temporal convolutional network based model for rapid lithium-ion battery remaining useful life predictions with limited data
Al-Greer et al. Physics-based model informed smooth particle filter for remaining useful life prediction of lithium-ion battery
CN112731183A (zh) 一种基于改进的elm的锂离子电池寿命预测方法
Xue et al. Estimating state of health of lithium-ion batteries based on generalized regression neural network and quantum genetic algorithm
Li et al. A hybrid framework for predicting the remaining useful life of battery using Gaussian process regression
CN116106761A (zh) 基于典型相关分析的锂离子电池电量实时估计方法
Liu et al. Multiple optimized online support vector regression for adaptive time series prediction
Lin et al. Physics-informed deep learning for lithium-ion battery diagnostics using electrochemical impedance spectroscopy
CN114578234A (zh) 一种考虑因果性特征的锂离子电池退化与容量预测模型

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant