CN113171106A - 基于vq-vae2和深度神经网络方法的心电异常检测方法 - Google Patents

基于vq-vae2和深度神经网络方法的心电异常检测方法 Download PDF

Info

Publication number
CN113171106A
CN113171106A CN202110449056.5A CN202110449056A CN113171106A CN 113171106 A CN113171106 A CN 113171106A CN 202110449056 A CN202110449056 A CN 202110449056A CN 113171106 A CN113171106 A CN 113171106A
Authority
CN
China
Prior art keywords
atrial fibrillation
layer
training
neural network
vae2
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110449056.5A
Other languages
English (en)
Inventor
孙见山
房洁
朱宏民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anhui Shicalifornium Information Technology Co ltd
Original Assignee
Anhui Shicalifornium Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Anhui Shicalifornium Information Technology Co ltd filed Critical Anhui Shicalifornium Information Technology Co ltd
Priority to CN202110449056.5A priority Critical patent/CN113171106A/zh
Publication of CN113171106A publication Critical patent/CN113171106A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)

Abstract

本发明涉及心电图异常检测技术领域,具体涉及一种基于VQ‑VAE2和深度神经网络方法的心电异常检测方法。该基于VQ‑VAE2和深度神经网络方法的心电异常检测方法包括以下步骤:步骤1:获取两个训练数据库,房颤训练数据库及非房颤训练数据库,对房颤训练数据库进行数据处理;步骤2:对经过数据处理后的房颤训练数据库进行VQ‑VAE2训练和先验训练,生成新的心电图图像;步骤3:房颤心率类型识别:将步骤2最终生成的新的心电图数据、房颤训练数据库混合在一起,作为房颤样本集,然后将该房颤样本集与非房颤训练数据库输入到深度神经网络中进行判别,提供一种为医生输出更准确的的评估数据,提高诊断的准确率和效率的基于VQ‑VAE2和深度神经网络方法的心电异常检测方法。

Description

基于VQ-VAE2和深度神经网络方法的心电异常检测方法
技术领域
本发明涉及心电图异常检测技术领域,具体涉及一种基于VQ-VAE2和深度神经网络方法的心电异常检测方法。
背景技术
心电图(ECG)是从体表记录心脏每一心动周期所产生的电活动变化形成的图形。通过心电图可以表征出人的多种心脏疾病。其中房颤是最常见的持续性心律失常。据统计,房颤的发病率为1%-2%,并且随着年龄的增长房颤的患病率也逐渐增加。心脏本身的疾病如心脏衰竭、瓣膜疾病、心肌梗死等与房颤疾病显著相关。实际上,由于生理信号受到个体内部变化的影响,目前房颤分类没有统一,房颤患者的症状多变且无特异性,因此对房颤的识别也较为复杂。例如,电极位置和噪声都会影响信号的波形,即使是健康受试者的心电信号,在不同的情况下,QRS复合体、P波和R-R间隔的形状在不同的节拍之间也不会是相同的,同类型的心律失常在相同患者的不同阶段之间的心电信号很可能有明显变化,不同患者同种类型的心律失常在心电信号上的差异更大。而判断心律类型的基础则就是不同类型的心电信号样本。
目前难以获得高质量的心电信号分类样本。一方面,由于采集自临床的绝大部分心电信号属于正常信号,因此所建立的数据集中异常心电信号稀少,与正常心电信号比例严重不均衡;另一方面,由于心电的类别需要由专业医生逐个心拍进行标注,因而获得大量的数据的成本很高。由于心电信号的特性,心电不能如同一般图片通过旋转、对称等方式做数据扩增。样本不均衡和总样本量较少会导致所训练的深度学习模型性能不佳。
GAN常被用来解决样本不均衡问题,然而训练GAN需要达到纳什均衡,而目前人们却没有找到很好的达到纳什均衡的方法,所以相比VAE(变分自编码机)或者PixelRNN来说,GAN的训练是不稳定的。另一方面,GAN生成的样本并不能完全捕捉真实分布中的多样性。同时,针对生成对抗网络的评价非常困难,目前依然缺少一个较通用的度量标准,用于在测试集中判断模型是否过拟合。
发明内容
本发明要解决的技术问题是:克服现有技术的不足,提供一种为医生输出更准确的评估数据,提高诊断的准确率和效率的基于VQ-VAE2和深度神经网络方法的心电异常检测方法。
本发明为解决其技术问题所采用的技术方案为:基于VQ-VAE2和深度神经网络方法的心电异常检测方法,包括以下步骤:
步骤1:获取两个训练数据库,房颤训练数据库及非房颤训练数据库,对房颤训练数据库进行数据处理;
步骤2:对经过数据处理后的房颤训练数据库进行VQ-VAE2训练和先验训练,生成新的心电图图像;
步骤3:房颤心率类型识别:将步骤2最终生成的新的心电图数据、房颤训练数据库混合在一起,作为房颤样本集,然后将该房颤样本集与非房颤训练数据库输入到深度神经网络中,进行判别。
所述步骤1包括以下子步骤:
1-1:获取两个训练数据库:房颤训练数据库及非房颤训练数据库,所述房颤训练数据库存储已知房颤的心电数据,即异常数据,非房颤训练数据库存储非房颤的心电数据;
1-2:对房颤训练数据库中的每个导联心电图信号进行除噪处理;
1-3:提取R波峰值点,以R峰为中心进行分割提取单个心拍,通过对单个心拍的截取,取得测量时间在8秒以上的原始心电图波形数据、心电图附加信息。
1-4:对每个导联的心电数据采用上下截止频率分别为0.1Hz、100Hz的fir滤波器进行滤波,如果心电信号采样频率不是500Hz时,则采用最邻近内插法将心电信号重采样为500Hz,最终生成n导联的心电信号训练样本集;
1-5:读入n个导联的心电信号的数据,对每个导联心电信号的同一时刻R波顶点的位置向前截取P个点,向后截取Q个点,每个导联的每个心拍截图W=P+Q个点的数据,将原始每个心拍的心电信号的数据处理成256*256维的浮点数向量;
1-6:将向量化后的数据进一步进行标准化处理,使得浮点数据的值介于[-1,1]范围内。
步骤1-2中对导联心电图信号进行预处理包括以下处理:
采用中值滤波滤除原始心电信号中的极限漂移;
采用巴特沃斯数字带阻滤波器滤除原始心电信号中的工频干扰;
采用切比雪夫数字低通滤波器滤除肌电干扰。
所述步骤1-3中,提取R波峰值点主要包括:将除噪后的心电信号重采样至某一固定采样率;
通过斜率、幅度和宽度的数字分析定位QRS复合波;
通过二进样条小波变换检测R波峰值,随后提取R波峰值点。
所述步骤2包括:
VQ-VAE2训练:将解码器E的输入变为量子化后的字典向量e,即将预处理后的256*256维心电信号图像x作为编码器encoder的输入数据,首先进行上层量子化,其次进行下层量子化,获得字典向量etop和ebottom,其中上层潜在空间大小为32x32,下层潜在空间大小为64x64;
先验训练:PixelCNN自回归模型,对所有输入图片计算量子化的上层etop与下层ebottom,将计算得到的{etop}和{ebottom}集合作为训练数据,训练PixelCNN神经网络,从而得到全局语义信息的联合概率密度ptop和局部贴图信息的条件概率率密度pbottom,最后的生成过程是从ptop和pbottom抽样得到量子化的字典向量,然后输入到解码器D中,生成新的图片。其中PixelCNN的思想是,如果我们把一幅图片x看成是由各像素xi随机组成的随机变量x={x1,x2,...,xn},则一幅图片就可以表示为各像素的联合分布:
p(x)=p(x1,x2,...,xn)
PixelCNN的基本思想是将这个联合分布因子化,用条件分布的乘积来表示,如下:
Figure BDA0003038077060000031
在第一阶段学习层次化隐编码中,我们可以借助层次结构建模图像。其主要思想即将局部信息与目标的全局信息分开建模。在第二阶段中,为了进一步压缩图像,并且能够从第一阶段学习到的模型中采样,我们需要在隐编码中学习一种先验知识。简而言之,首先我们需要训练一个分层的VQ-VAE2,它是由编码器和解码器组成的深度神经网络,我们需要用它将图像编码到离散的隐空间;其次我们需要在离散的隐空间拟合一个强大的PixelCNN先验,其中这个隐空间是通过所有图像数据构建的,上层PixcelCNN先验会通过类别标签进行约束,下层的PixcelCNN会以类别标签和第一级编码作为约束。通过PixelCNN得到编码分布后,就可以随机生成一个新的编码矩阵,然后通过编码表E映射为浮点数矩阵,最后经过解码器得到一张图片。
所述VQ-VAE2训练包括以下子步骤:
VQ-VAE2-1:利用编码器E将输入图像处理成32x32xD的立体潜在表示ze(x),ze(x)又可进一步表示为D个大小为32x32的二维潜在表示z构成,则z的量子化公式为:
Figure BDA0003038077060000032
其中,e1,e2,e3,...ek是字典向量,或者说是基向量。上层量子化后的字典向量etop用如下公式表示:
etop←Quantize(Etop(x))
VQ-VAE2-2:使用此字典向量etop作为条件,与输入数据x一起,计算下层潜在空间的量子化形式ebottom
VQ-VAE2-3:将上层和下层量子化选中的字典向量etop和ebottom同时输入解码器D中,计算损失函数,更新编码解码网络,以及字典向量的权重,计算公式如下:
Figure BDA0003038077060000041
L表示损失函数,x表示心电信号图像,D表示解码器,E表示编码器,e表示量子化后的字典向量,
Figure BDA0003038077060000042
表示2-范数的平方,sg表示停止梯度传播,β表示超参数。
VQ-VAE2-4:重复上述操作,直至损失函数达到稳定。
步骤3包括以下子步骤:
3-1:数据预处理:将步骤2最终生成的新的心电图图像,添加到原有的房颤训练数据库中作为房颤样本集,并将混合后的数据库中的图像都处理成12*W维的心电图浮点数向量;
3-2:搭建深度神经网络:深度神经网络包括多个依次串联的卷积层单元和全连接层单元,且在合并层单元和卷积层单元间有图像编码层用于将心电信号由一维编码为二维图像;
每个所述卷积层单元包括一个卷积层以及该卷积层输出端依次串联的一激励单元操作和一池化层操作;
构建的卷积神经网络的结构为输入层-卷积层-池化层-卷积层-池化层-卷积层-全连接层-输出层;
第一个卷积层单元的卷积核数为5个,卷积核大小为3,卷积层单元后的激励单元为relu函数,池化层单元的池化核大小为2,池化步长为2;
经过第一层池化单元后的特征图维度为(W/2)*5;第二个卷积层单元的卷积核数为10个,卷积核大小为4,卷积层单元后的激励单元为relu函数,池化层单元的池化核大小为2,池化步长为2;
经过第二层池化单元后的特征图维度为(W/4)*10,第三个卷积层单元的卷积核数为20个,卷积核大小为4,卷积层后的激励单元为relu函数,池化层单元的池化核大小为2,池化步长为2;经过第三层池化单元后的特征图维度为(W/8)*20;
多个导联的特征融合成一块,形成最终特征,得到的特征输入激励单元为softmax的全连接层,全连接层的层数为3层,得到输出分类结果y_pred;
3-3:训练卷积神经网络的参数:初始化所述卷积神经网络的参数,在房颤样本集与非房颤训练数据库中随机抽取80%数目的样本当作训练集,其他未选中的样本视为测试集;将训练集中的心电信号样本输入到初始化后的神经网络中,以最小化代价函数为目标进行迭代,生成所述卷积神经网络的参数并保存;
3-4:对测试集样本进行自动识别:将划分好的测试集样本输入到卷积神经网络中并运行,获得测试集样本对应的2维预测值向量输出,将测试集样本的标签使用one-hot编码的方法生成2维的标签向量,将输出的预测值与测试集样本的标签比对来检查分类是否正确,通过分类结果y_pred来判别模型的性能。
与现有技术相比,本发明具有以下有益效果:
本发明提供一种基于VQ-VAE2和深度神经网络方法的心电异常检测方法,以解决现有技术中对心电图中样本不均衡问题、心率类型识别准确率较低、漏检率较高的问题。通过引入VQ-VAE2(Vector Quantized Variational AutoEncoder2)分层量子化的变分自编码机来增加患者的各种心率类型样本,并利用深度神经网络学习这些扩充后的样本特征,从而提高深度学习模型的能力,为医生输出更准确的评估数据;
利用VQ-VAE2技术来学习生成更多的心率异常样本,然后在此基础上利用深度神经网络进行房颤识别;
本发明利用VQ-VAE2(深度卷积生成对抗网络)方法生成了高质量的样本,并比GAN(生成对抗网络)等其他深度学习方法更稳定;
在利用VQ-VAE2的基础上,再利用深度神经网络进行房颤识别,大大提高了诊断的准确率和效率。
附图说明
图1是本发明流程图。
具体实施方式
下面结合附图对本发明实施例做进一步描述:
实施例
如图1所示,包括以下步骤:
步骤1:获取两个训练数据库,房颤训练数据库及非房颤训练数据库,对房颤训练数据库进行数据处理;
所述步骤1包括以下子步骤:
1-1:获取两个训练数据库:房颤训练数据库及非房颤训练数据库,所述房颤训练数据库存储已知房颤的心电数据(即异常数据),非房颤训练数据库存储非房颤的心电数据;
1-2:对房颤训练数据库中的每个导联心电图信号进行除噪处理;步骤1-2中对导联心电图信号进行除噪处理包括以下处理:
采用中值滤波滤除原始心电信号中的极限漂移;
采用巴特沃斯数字带阻滤波器滤除原始心电信号中的工频干扰;
采用切比雪夫数字低通滤波器滤除肌电干扰。
1-3:提取R波峰值点;提取R波峰值点主要包括:将除噪后的心电信号重采样至某一固定采样率,之后通过斜率、幅度和宽度的数字分析定位QRS复合波;通过二进样条小波变换检测R波峰值,随后提取R波峰值点。进而以R峰为中心进行分割提取单个心拍,通过对单个心拍的截取,取得测量时间在8秒以上的原始心电图波形数据、心电图附加信息;
1-4:对每个导联的心电数据采用上下截止频率分别为0.1Hz、100Hz的fir滤波器进行滤波,如果心电信号采样频率不是500Hz时,则采用最邻近内插法将心电信号重采样为500Hz,最终生成n导联的心电信号训练样本集;
1-5:读入n个导联的心电信号的数据,对每个导联心电信号的同一时刻R波顶点的位置向前截取P个点,向后截取Q个点,每个导联的每个心拍截图W=P+Q个点的数据,将原始每个心拍的心电信号的数据处理成256*256维的浮点数向量;
1-6:将向量化后的数据进一步进行标准化处理,使得浮点数据的值介于[-1,1]范围内。
步骤2:对经过数据处理后的房颤训练数据库进行VQ-VAE2训练和先验训练,生成新的心电图图像;在第一阶段学习层次化隐编码中,我们可以借助层次结构建模图像。其主要思想即将局部信息与目标的全局信息分开建模。在第二阶段中,为了进一步压缩图像,并且能够从第一阶段学习到的模型中采样,我们需要在隐编码中学习一种先验知识。简而言之,首先我们需要训练一个分层的VQ-VAE2,它是由编码器和解码器组成的深度神经网络,我们需要用它将图像编码到离散的隐空间;其次我们需要在离散的隐空间拟合一个强大的PixelCNN先验,其中这个隐空间是通过所有图像数据构建的,上层PixcelCNN先验会通过类别标签进行约束,下层的PixcelCNN会以类别标签和第一级编码作为约束。通过PixelCNN得到编码分布后,就可以随机生成一个新的编码矩阵,然后通过编码表E映射为浮点数矩阵,最后经过解码器得到一张图片。
VQ-VAE2训练:将解码器E的输入变为量子化后的字典向量e,即将房颤训练数据库处理后的256*256维心电信号图像x作为编码器encoder的输入数据,首先进行上层量子化,其次进行下层量子化,获得字典向量etop和ebottom,其中上层潜在空间大小为32x32,下层潜在空间大小为64x64;所述VQ-VAE2训练包括以下子步骤:
VQ-VAE2-1:利用编码器E将输入图像处理成32x32xD的立体潜在表示ze(x),ze(x)又可进一步表示为D个大小为32x32的二维潜在表示z构成,则z的量子化公式为:
Figure BDA0003038077060000061
其中,e1,e2,e3,...ek是字典向量,或者说是基向量。上层量子化后的字典向量etop用如下公式表示:
etop←Quantize(Etop(x))
VQ-VAE2-2:使用此字典向量etop作为条件,与输入数据x一起,计算下层潜在空间的量子化形式ebottom
VQ-VAE2-3:将上层和下层量子化选中的字典向量etop和ebottom同时输入解码器D中,计算损失函数,更新编码解码网络,以及字典向量的权重,计算公式如下:
Figure BDA0003038077060000071
L表示损失函数,x表示心电信号图像,D表示解码器,E表示编码器,e表示量子化后的字典向量,
Figure BDA0003038077060000072
表示2-范数的平方,sg表示停止梯度传播,β表示超参数。
VQ-VAE2-4:重复上述操作,直至损失函数达到稳定。
先验训练:PixelCNN自回归模型:对所有输入图片计算量子化的上层etop与下层ebottom,将计算得到的{etop}和{ebottom}集合作为训练数据,训练PixelCNN神经网络,从而得到全局语义信息的联合概率密度ptop和局部贴图信息的条件概率率密度pbottom,最后的生成过程是从ptop和pbottom抽样得到量子化的字典向量,然后输入到解码器D中,生成新的图片。其中PixelCNN的思想是,如果我们把一幅图片x看成是由各像素xi随机组成的随机变量x={x1,x2,...,xn},则一幅图片就可以表示为各像素的联合分布:
p(x)=p(x1,x2,...,xn)
PixelCNN的基本思想是将这个联合分布因子化,用条件分布的乘积来表示,如下:
Figure BDA0003038077060000073
步骤3:房颤心率类型识别:将步骤2最终生成的新的心电图数据、房颤训练数据库混合在一起,作为房颤样本集,然后将该房颤样本集与非房颤训练数据库输入到深度神经网络中,进行判别。
步骤3包括以下子步骤:
3-1:数据预处理:将步骤2最终生成的新的心电图与房颤训练数据库混合作为房颤样本集,并将混合后的房颤样本集及非房颤训练数据库中的图像都处理成12*W维的心电图浮点数向量;
3-2:搭建深度神经网络:深度神经网络包括多个依次串联的卷积层单元和全连接层单元,且在合并层单元和卷积层单元间有图像编码层用于将心电信号由一维编码为二维图像;
每个所述卷积层单元包括一个卷积层以及该卷积层输出端依次串联的一激励单元操作和一池化层操作;
构建的卷积神经网络的结构为输入层-卷积层-池化层-卷积层-池化层-卷积层-全连接层-输出层;
第一个卷积层单元的卷积核数为5个,卷积核大小为3,卷积层单元后的激励单元为relu函数,池化层单元的池化核大小为2,池化步长为2;
经过第一层池化单元后的特征图维度为(W/2)*5;第二个卷积层单元的卷积核数为10个,卷积核大小为4,卷积层单元后的激励单元为relu函数,池化层单元的池化核大小为2,池化步长为2;
经过第二层池化单元后的特征图维度为(W/4)*10,第三个卷积层单元的卷积核数为20个,卷积核大小为4,卷积层后的激励单元为relu函数,池化层单元的池化核大小为2,池化步长为2;经过第三层池化单元后的特征图维度为(W/8)*20;
多个导联的特征融合成一块,形成最终特征,得到的特征输入激励单元为softmax的全连接层,全连接层的层数为3层,得到输出分类结果y_pred;
3-3:训练卷积神经网络的参数:初始化所述卷积神经网络的参数,在房颤样本集与非房颤训练数据库中随机抽取80%数目的样本当作训练集,其他未选中的样本视为测试集;将训练集中的心电信号样本输入到初始化后的神经网络中,以最小化代价函数为目标进行迭代,生成所述卷积神经网络的参数并保存;
3-4:对测试集样本进行自动识别:将划分好的测试集样本输入到卷积神经网络中并运行,获得测试集样本对应的2维预测值向量输出,将测试集样本的标签使用one-hot编码的方法生成2维的标签向量,将输出的预测值与测试集样本的标签比对来检查分类是否正确,通过分类结果y_pred来判别模型的性能。
VQ-VAE2是用来解决心电信号样本不均衡问题,并获取更高质量的心电信号样本。深度神经网络则是在前者扩增样本的基础上对心电信号进行学习分类,以更好地进行房颤识别。
此方法不仅可以扩增房颤样本,更是可以扩增其他异常样本,本发明只是以房颤样本为例。

Claims (7)

1.一种基于VQ-VAE2和深度神经网络方法的心电异常检测方法,其特征在于,包括以下步骤:
步骤1:获取两个训练数据库,房颤训练数据库及非房颤训练数据库,对房颤训练数据库进行数据处理;
步骤2:对经过数据处理后的房颤训练数据库进行VQ-VAE2训练和先验训练,生成新的心电图图像;
步骤3:房颤心率类型识别:将步骤2最终生成的新的心电图数据与原有房颤训练数据库混合在一起,作为房颤样本集,然后将该房颤样本集与非房颤训练数据库输入到深度神经网络中进行判别。
2.根据权利要求1所述的基于VQ-VAE2和深度神经网络方法的心电异常检测方法,其特征在于,所述步骤1包括以下子步骤:
1-1:获取两个训练数据库:房颤训练数据库及非房颤训练数据库,所述房颤训练数据库存储已知房颤的心电数据,非房颤训练数据库存储非房颤的心电数据;
1-2:对房颤训练数据库中的每个导联心电图信号进行除噪处理;
1-3:提取R波峰值点,以R峰为中心进行分割提取单个心拍,通过对单个心拍的截取,取得测量时间在8秒以上的原始心电图波形数据、心电图附加信息;
1-4:生成n导联的心电信号训练样本集;
1-5:读入n个导联的心电信号的数据,对每个导联心电信号的同一时刻R波顶点的位置向前截取P个点,向后截取Q个点,每个导联的每个心拍截图W=P+Q个点的数据,将原始每个心拍的心电信号的数据处理成256*256维的浮点数向量;
1-6:将向量化后的数据进一步进行标准化处理,使得浮点数据的值介于[-1,1]范围内。
3.根据权利要求2所述的基于VQ-VAE2和深度神经网络方法的心电异常检测方法,其特征在于,步骤1-2中对导联心电图信号进行预处理包括以下处理:
采用中值滤波滤除原始心电信号中的极限漂移;
采用巴特沃斯数字带阻滤波器滤除原始心电信号中的工频干扰;
采用切比雪夫数字低通滤波器滤除肌电干扰。
4.根据权利要求3所述的基于VQ-VAE2和深度神经网络方法的心电异常检测方法,其特征在于,所述步骤1-3中,提取R波峰值点主要包括:将除噪后的心电信号重采样至某一固定采样率;
通过斜率、幅度和宽度的数字分析定位QRS复合波;
通过二进样条小波变换检测R波峰值,随后提取R波峰值点。
5.根据权利要求2所述的基于VQ-VAE2和深度神经网络方法的心电异常检测方法,其特征在于,所述步骤2包括:
VQ-VAE2训练:将解码器E的输入变为量子化后的字典向量e,即将房颤训练数据库处理后的256*256维心电信号图像x作为编码器encoder的输入数据,首先进行上层量子化,其次进行下层量子化,获得字典向量etop和ebottom,其中上层潜在空间大小为32x32,下层潜在空间大小为64x64;
先验训练:PixelCNN自回归模型,对所有输入图片计算量子化的上层etop与下层ebottom,将计算得到的{etop}和{ebottom}集合作为训练数据,训练PixelCNN神经网络,从而得到全局语义信息的联合概率密度ptop和局部贴图信息的条件概率率密度pbottom,最后的生成过程是从ptop和pbottom抽样得到量子化的字典向量,然后输入到解码器D中,生成新的图片。
6.根据权利要求5所述的基于VQ-VAE2和深度神经网络方法的心电异常检测方法,其特征在于,所述VQ-VAE2训练包括以下子步骤:
VQ-VAE2-1:利用编码器E将输入图像处理成32x32xD的立体潜在表示ze(x),ze(x)又可进一步表示为D个大小为32x32的二维潜在表示z构成,则z的量子化公式为:
Figure FDA0003038077050000021
其中,e1,e2,e3,...ek是字典向量,上层量子化后的字典向量etop用如下公式表示:
etop←Quantize(Etop(x))
VQ-VAE2-2:使用此字典向量etop作为条件,与输入数据x一起,计算下层潜在空间的量子化形式ebottom
VQ-VAE2-3:将上层和下层量子化选中的字典向量etop和ebottom同时输入解码器D中,计算损失函数,更新编码解码网络,以及字典向量的权重,计算公式如下:
Figure FDA0003038077050000022
L表示损失函数,x表示心电信号图像,D表示解码器,E表示编码器,e表示量子化后的字典向量,
Figure FDA0003038077050000023
表示2-范数的平方,sg表示停止梯度传播,β表示超参数。
VQ-VAE2-4:重复上述操作,直至损失函数达到稳定。
7.根据权利要求6所述的基于VQ-VAE2和深度神经网络方法的心电异常检测方法,其特征在于,步骤3包括以下子步骤:
3-1:数据预处理:将步骤2最终生成的新的心电图与房颤训练数据库混合作为房颤样本集,并将混合后的房颤样本集及非房颤训练数据库中的图像都处理成12*W维的心电图浮点数向量;
3-2:搭建深度神经网络:深度神经网络包括多个依次串联的卷积层单元和全连接层单元,且在合并层单元和卷积层单元间有图像编码层用于将心电信号由一维编码为二维图像;
每个所述卷积层单元包括一个卷积层以及该卷积层输出端依次串联的一激励单元操作和一池化层操作;
构建的卷积神经网络的结构为输入层-卷积层-池化层-卷积层-池化层-卷积层-全连接层-输出层;
第一个卷积层单元的卷积核数为5个,卷积核大小为3,卷积层单元后的激励单元为relu函数,池化层单元的池化核大小为2,池化步长为2;
经过第一层池化单元后的特征图维度为(W/2)*5;第二个卷积层单元的卷积核数为10个,卷积核大小为4,卷积层单元后的激励单元为relu函数,池化层单元的池化核大小为2,池化步长为2;
经过第二层池化单元后的特征图维度为(W/4)*10,第三个卷积层单元的卷积核数为20个,卷积核大小为4,卷积层后的激励单元为relu函数,池化层单元的池化核大小为2,池化步长为2;经过第三层池化单元后的特征图维度为(W/8)*20;
多个导联的特征融合成一块,形成最终特征,得到的特征输入激励单元为softmax的全连接层,全连接层的层数为3层,得到输出分类结果y_pred;
3-3:训练卷积神经网络的参数:初始化所述卷积神经网络的参数,在房颤样本集与非房颤训练数据库中随机抽取80%数目的样本当作训练集,其他未选中的样本视为测试集;将训练集中的心电信号样本输入到初始化后的神经网络中,以最小化代价函数为目标进行迭代,生成所述卷积神经网络的参数并保存;
3-4:对测试集样本进行自动识别:将划分好的测试集样本输入到卷积神经网络中并运行,获得测试集样本对应的2维预测值向量输出,将测试集样本的标签使用one-hot编码的方法生成2维的标签向量,将输出的预测值与测试集样本的标签比对来检查分类是否正确,通过分类结果y_pred来判别模型的性能。
CN202110449056.5A 2021-04-25 2021-04-25 基于vq-vae2和深度神经网络方法的心电异常检测方法 Pending CN113171106A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110449056.5A CN113171106A (zh) 2021-04-25 2021-04-25 基于vq-vae2和深度神经网络方法的心电异常检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110449056.5A CN113171106A (zh) 2021-04-25 2021-04-25 基于vq-vae2和深度神经网络方法的心电异常检测方法

Publications (1)

Publication Number Publication Date
CN113171106A true CN113171106A (zh) 2021-07-27

Family

ID=76925629

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110449056.5A Pending CN113171106A (zh) 2021-04-25 2021-04-25 基于vq-vae2和深度神经网络方法的心电异常检测方法

Country Status (1)

Country Link
CN (1) CN113171106A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113491523A (zh) * 2021-07-30 2021-10-12 济南汇医融工科技有限公司 一种心电信号特征点检测方法及系统
CN113838041A (zh) * 2021-09-29 2021-12-24 西安工程大学 一种基于自编码器的彩色纹理织物缺陷区域的检测方法
CN113902695A (zh) * 2021-09-29 2022-01-07 西安工程大学 一种针对色织物裁片缺陷区域的检测方法
CN117257324A (zh) * 2023-11-22 2023-12-22 齐鲁工业大学(山东省科学院) 基于卷积神经网络和ecg信号的房颤检测方法
CN117717352A (zh) * 2024-02-07 2024-03-19 北京智源人工智能研究院 非侵入式房颤颤源定位的方法和所用扩散模型的训练方法
CN117975174A (zh) * 2024-04-02 2024-05-03 西南石油大学 一种基于改进vqgan的三维数字岩心重构方法
CN117974840A (zh) * 2024-04-01 2024-05-03 南京信息工程大学 基于混合量子深度卷积生成对抗网络的心电图生成系统
WO2024112915A3 (en) * 2022-11-22 2024-07-04 Anumana, Inc. System and apparatus for generating imaging information based on at least a signalcross-reference to related applications
US12114984B2 (en) 2023-11-22 2024-10-15 Anumana, Inc. System and apparatus for generating imaging information based on at least a signal

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108962393A (zh) * 2018-05-12 2018-12-07 鲁东大学 基于压缩图神经网络的自动心律失常分析方法
CN112329609A (zh) * 2020-11-03 2021-02-05 山东大学 基于2d心拍的特征融合迁移学习心律失常分类系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108962393A (zh) * 2018-05-12 2018-12-07 鲁东大学 基于压缩图神经网络的自动心律失常分析方法
CN112329609A (zh) * 2020-11-03 2021-02-05 山东大学 基于2d心拍的特征融合迁移学习心律失常分类系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ALI RAZAVI ET AL: "Generating Diverse High-Fidelity Images with VQ-VAE-2", 《ARXIV PREPRINT ARXIV:1906.00446》 *
HAN LIU ET AL: "Using the VQ-VAE to improve the recognition of abnormalities in short-duration 12-lead electrocardiogram records", 《COMPUTER METHODS AND PROGRAMS IN BIOMEDICINE》 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113491523A (zh) * 2021-07-30 2021-10-12 济南汇医融工科技有限公司 一种心电信号特征点检测方法及系统
CN113838041A (zh) * 2021-09-29 2021-12-24 西安工程大学 一种基于自编码器的彩色纹理织物缺陷区域的检测方法
CN113902695A (zh) * 2021-09-29 2022-01-07 西安工程大学 一种针对色织物裁片缺陷区域的检测方法
CN113838041B (zh) * 2021-09-29 2023-09-08 西安工程大学 一种基于自编码器的彩色纹理织物缺陷区域的检测方法
CN113902695B (zh) * 2021-09-29 2024-08-06 西安工程大学 一种针对色织物裁片缺陷区域的检测方法
WO2024112915A3 (en) * 2022-11-22 2024-07-04 Anumana, Inc. System and apparatus for generating imaging information based on at least a signalcross-reference to related applications
CN117257324A (zh) * 2023-11-22 2023-12-22 齐鲁工业大学(山东省科学院) 基于卷积神经网络和ecg信号的房颤检测方法
CN117257324B (zh) * 2023-11-22 2024-01-30 齐鲁工业大学(山东省科学院) 基于卷积神经网络和ecg信号的房颤检测方法
US12114984B2 (en) 2023-11-22 2024-10-15 Anumana, Inc. System and apparatus for generating imaging information based on at least a signal
CN117717352A (zh) * 2024-02-07 2024-03-19 北京智源人工智能研究院 非侵入式房颤颤源定位的方法和所用扩散模型的训练方法
CN117717352B (zh) * 2024-02-07 2024-04-26 北京智源人工智能研究院 非侵入式房颤颤源定位的方法和所用扩散模型的训练方法
CN117974840B (zh) * 2024-04-01 2024-06-11 南京信息工程大学 基于混合量子深度卷积生成对抗网络的心电图生成系统
CN117974840A (zh) * 2024-04-01 2024-05-03 南京信息工程大学 基于混合量子深度卷积生成对抗网络的心电图生成系统
CN117975174B (zh) * 2024-04-02 2024-06-04 西南石油大学 一种基于改进vqgan的三维数字岩心重构方法
CN117975174A (zh) * 2024-04-02 2024-05-03 西南石油大学 一种基于改进vqgan的三维数字岩心重构方法

Similar Documents

Publication Publication Date Title
CN113171106A (zh) 基于vq-vae2和深度神经网络方法的心电异常检测方法
Shaker et al. Generalization of convolutional neural networks for ECG classification using generative adversarial networks
CN111956211A (zh) 单导联心电信号房颤自动检测方法
Fang et al. Dual-channel neural network for atrial fibrillation detection from a single lead ECG wave
CN110414607A (zh) 胶囊内窥镜图像的分类方法、装置、设备及介质
Taki et al. An IVUS image-based approach for improvement of coronary plaque characterization
CN115985505B (zh) 多维度融合的心肌缺血辅助诊断模型及其构建方法
CN115530788A (zh) 基于自注意力机制的心律失常分类方法
US20230225663A1 (en) Method for predicting multi-type electrocardiogram heart rhythms based on graph convolution
CN112508884A (zh) 一种癌变区域综合检测装置及方法
CN113116300A (zh) 一种基于模型融合的生理信号分类方法
CN116361688A (zh) 用于心电节律自动分类的多模态特征融合模型构建方法
CN114492519B (zh) 一种基于超声回波射频信号的肺超声特殊征象b线识别分类方法
Lahmiri et al. Complexity measures of high oscillations in phonocardiogram as biomarkers to distinguish between normal heart sound and pathological murmur
CN112336369B (zh) 一种多通道心音信号的冠心病风险指数评估系统
CN113080992A (zh) 一种基于dcgan和深度神经网络方法的房颤识别方法
CN110811673A (zh) 基于概率神经网络模型的心音分析系统
CN115429284B (zh) 心电信号分类方法、系统、计算机设备以及可读存储介质
Liu et al. FGSQA-Net: A weakly supervised approach to fine-grained electrocardiogram signal quality assessment
CN116636858A (zh) 一种ecg感知信号编码方法及系统
CN116172573A (zh) 一种基于改进的Inception-ResNet-v2的心律失常图像分类方法
CN115553784A (zh) 基于心电、心音信号耦合分析的冠心病评估方法及系统
Chen et al. A novel method of swin transformer with time-frequency characteristics for ECG-based arrhythmia detection
CN114494952A (zh) 一种基于感知损失的乳腺mri影像时间序列生成方法
CN111345815B (zh) 一种心电信号中qrs波的检测方法、装置、设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210727

RJ01 Rejection of invention patent application after publication