CN111887858B - 基于跨模态映射的心冲击图信号心率估计方法 - Google Patents

基于跨模态映射的心冲击图信号心率估计方法 Download PDF

Info

Publication number
CN111887858B
CN111887858B CN202010772668.3A CN202010772668A CN111887858B CN 111887858 B CN111887858 B CN 111887858B CN 202010772668 A CN202010772668 A CN 202010772668A CN 111887858 B CN111887858 B CN 111887858B
Authority
CN
China
Prior art keywords
ballistocardiogram
cross
pulse signal
heart
heart rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010772668.3A
Other languages
English (en)
Other versions
CN111887858A (zh
Inventor
缑水平
刘源洁
刘宁涛
沙毓
焦昶哲
海栋
毛莎莎
程家馨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xidian University
Original Assignee
Xidian University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xidian University filed Critical Xidian University
Priority to CN202010772668.3A priority Critical patent/CN111887858B/zh
Publication of CN111887858A publication Critical patent/CN111887858A/zh
Application granted granted Critical
Publication of CN111887858B publication Critical patent/CN111887858B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1102Ballistocardiography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate

Abstract

本发明提出了一种基于跨模态映射的心冲击图信号心率估计方法,用于解决现有技术中存在的心率估计精度较低的技术问题,实现步骤为:采集心冲击图信号和心脏脉冲信号;对心冲击图信号进行滤波;利用心冲击图信号的周期性先验知识获取训练样本集和测试样本集;构建基于心冲击图信号周期性和幅值特征的跨模态映射模型;对跨模态映射模型进行训练;峰值搜索算法和平均心率法计算得到心冲击图信号的心率估计值。本发明在心冲击图信号的心率估计问题中引入跨模态映射的思想,利用一维卷积神经网络将心冲击图信号映射为心脏脉冲信号,以降低心跳检测的难度,同时避免现有技术对应同一心率值的心冲击图信号差异较大问题,很大程度上改善心率估计精度。

Description

基于跨模态映射的心冲击图信号心率估计方法
技术领域
本发明属于生物医学信息处理技术领域,涉及一种心冲击图信号心率估计方法,具体涉及一种基于跨模态映射的心冲击图信号心率估计方法,用于辅助人体健康监测。
背景技术
随着生活水平的不断改善,越来越多的人关注自身的心脏健康问题。心跳节奏超出正常范围的变化通常预示着某种疾病的发生,比如心脏性猝死,窒息,心律不齐等。因此,日常生活中的心率监测对于人们自身疾病的早期发现与治疗有着重要的意义。
由于目前在临床上,心电图(ECG)在心率监测方面被广泛应用,但是这种需要将电极或者心脏探头与人体紧密接触,这给受监测者带来极大不便和心理压力。并且由于电极对人体皮肤的刺激作用,长时间的粘贴电极,会使受试者患上皮肤疾病。在非临床上,心率监测的设备主要是手环,心率带等可穿戴设备。虽然这类设备在监测心率方面相比心电图要更加方便,但是它们同样会给受监测者带来束缚感,并且心率估计的误差较大,甚至对于一些患有疾病的老年人而言,他们可能并没有使用这种设备的能力。因此,寻找一种更加适合日常监测、简单方便、误差小的心率监测技术有着重要的意义。
目前,根据使用信号类型的不同,心率估计方法可分为基于侵入式监测信号的心率估计方法和基于非侵入式监测信号的心率估计方法两类,其中,基于非侵入式监测信号的心率估计方法,典型的为基于心冲击图信号的心率估计方法,该方法无需传感器直接贴附人体,非专业人员也可以操作。
基于心冲击图信号的心率估计方法按照是否为学习算法可以分为基于信号处理的方法和基于机器学习方法两大类,其中基于机器学习方法分为无监督、有监督、弱监督三大类。有监督的学习方法通过引入监督信息,构建神经网络模型,利用神经网络强大的特征提取能力获取心冲击图信号的周期性特征和幅值特征,进而对心冲击图信号进行心跳检测或直接回归得到心率估计。例如,申请公布号为CN110420019A,名称为“一种心冲击图信号的深度回归心率估计方法”的专利申请,公开了一种心冲击图信号的深度回归心率估计方法,该方法采用有监督的学习方式,引入心脏脉冲信号的心率值作为监督信息,通过双向循环神经网络获取心冲击图信号的周期性特征和幅值特征,然后通过回归网络同时利用心冲击图信号的周期性特征和幅值特征估计心冲击图信号的心率值。该发明在一定程度上提高了心率估计的精度,但其存在的不足之处是:1、该发明虽然利用了心冲击图信号对应的心脏脉冲信号的心率值,但在对心冲击图信号进行标记以及对双向循环神经网络进行训练的过程中,仅仅利用了心冲击图信号对应的心脏脉冲信号的心率值,未更充分的利用心脏脉冲信号提供的幅值特征和周期特征,因此估计误差较大;2、该发明在对双向循环神经网络进行训练的过程中,将由心脏脉冲信号计算得到的心率值作为参考信息,对应同一心率值的心冲击图信号差异较大,网络学习较难把握规律性,因此估计误差较大。
发明内容
本发明的目的在于针对上述现有技术的不足,提出一种基于跨模态映射的心冲击图信号心率估计方法,用于解决现有技术中存在的心率估计精度较低的技术问题。
为实现上述目的,本发明采用的技术方案包括如下步骤:
(1)采集心冲击图信号和心脏脉冲信号:
采用指夹式脉冲传感器和液压传感器,并以fs为采样频率分别采集受试者的心脏脉冲信号B和M个心冲击图信号A={A1,A2,...,Am,...,AM},其中,fs≥100Hz,Am表示第m个心冲击图信号,M≥2,B和Am的长度均为T,T≥60000;
(2)对每个心冲击图信号Am进行滤波:
采用截断频率下限和上限分别为f1和f2的带通滤波器对每个心冲击图信号Am进行带通滤波,得到带通滤波后的M个心冲击图信号A′={A′1,A′2,...,A′m,...,A′M},0.3Hz≤f1≤0.8Hz,8Hz≤f2≤12Hz;
(3)获取训练样本集和测试样本集:
(3a)采用长度为D的滑窗,并以s为步长,按照采集的时间顺序对心脏脉冲信号B和每个滤波后的心冲击图信号A′m进行N次滑动,得到心脏脉冲信号段集合B={B1,B2,...,Bn,...,BN}和A′对应的心冲击图信号段集合X={X1,X2,...,Xm,...,XM},其中,Bn表示第n个心脏脉冲信号段,Xm表示A′m对应的心冲击图信号段子集合
Figure BDA0002617236870000021
Figure BDA0002617236870000022
表示第n个滤波后的心冲击图信号段,
Figure BDA0002617236870000023
(3b)对心脏脉冲信号段集合B={B1,B2,...,Bn,...,BN}和心冲击图信号段集合
Figure BDA0002617236870000031
进行Z-Score标准化处理,得到Z-Score标准化处理后的心脏脉冲信号段集合Y={Y1,Y2,...,Yn,...,YN}和心冲击图信号段集合X′={X1′,X2′,...,X′m,...,X′M},
Figure BDA0002617236870000032
(3c)将X′中M个子集合中第n个心冲击图信号段进行组合,得到M通道心冲击图信号段集合Z={Z1,Z2,...,Zn,...,ZN},
Figure BDA0002617236870000033
(3d)通过Y中半数以上的心脏脉冲信号段分别对Z中对应位置的心冲击图信号段进行标注,并将标注后带有标签的心冲击图信号段组合为训练样本集Ztr={Z1,Z2,...,Ze,...,ZE},
Figure BDA0002617236870000034
将Z中其余心冲击图信号段组合为测试样本集Zte={Z1,Z2,...,Zj,...,ZJ},
Figure BDA0002617236870000035
(4)构建基于心冲击图信号周期性和幅值特征的跨模态映射模型H:
(4a)构建包括依次层叠的第一卷积层、多个卷积-激励层和第二卷积层的跨模态映射模型H,激励层的激励函数为ReLU,第二卷积层中卷积核个数为1;第一卷积层用于接收M通道心冲击图信号;多个卷积-激励层用于提取M通道心冲击图信号的周期性与幅值特征,并对提取的特征进行融合,通过激励函数ReLU对融合后的特征进行非线性映射,第二卷积层用于对非线性的结果进行卷积,最后输出一维映射向量,完成M通道心冲击图信号到单通道心脏脉冲信号的跨模态映射;
(4b)构建跨模态映射模型H的损失函数F:
Figure BDA0002617236870000036
其中,Y′和Y分别为模型训练输出的估计值和真值,Q为每次训练的批尺寸,||·||2表示2-范数,γ表示正则化参数,控制
Figure BDA0002617236870000037
的参与程度,w表示整个网络的权重,w=[W,b];
(5)对跨模态映射模型H进行迭代训练:
(5a)设迭代次数为k,最大迭代次数为K,K≥10,跨模态映射模型H中各层的权重矩阵W与偏置b取值为范围[-1,1]内的随机数,并令k=0,Hk=H;
(5b)将从训练样本集中随机选取Q个训练样本作为跨模态映射模型Hk的输入进行前向传播,第一卷积层对训练样本进行卷积,得到每个训练样本中M通道心冲击图信号的特征,多个卷积-激励层对提取的特征进行融合,然后通过激励函数ReLU对融合后的特征进行非线性映射,第二卷积层对非线性映射结果进行卷积,实现M通道心冲击图信号到单通道心脏脉冲信号的跨模态映射,得到映射向量集合Y′k={Y′k1,Y′k2,...,Y′kq,...,Y′kQ},Y′kq为第q个训练样本对应的一维映射向量,Q≤N且
Figure BDA0002617236870000041
Figure BDA0002617236870000042
为向下取整;
(5c)将Y′k和Y′k对应的心脏脉冲信号Yk={Yk1,Yk2,...,Ykq,...,YkQ}作为跨模态映射模型Hk的损失函数Fk的输入,计算跨模态映射模型Hk的损失值Fk,并采用反向传播算法,通过损失值Fk对各层的权重矩阵Wk与偏置bk进行更新,得到更新后的跨模态映射模型Hk
(5d)判断k=K是否成立,若是,得到训练好的跨模态映射模型H*
否则,令k=k+1,并执行步骤(5b);
(6)获取测试样本的心率估计结果:
(6a)将测试样本集作为训练好的跨模态映射模型H*的输入进行映射,得到每个测试样本对应的心脏脉冲信号,并采用峰值搜索算法,对映射出的心脏脉冲信号进行峰值搜索,获得J个测试样本对应的心跳信息C={C1,C2,...,Cj,...,CJ},其中,Cj为第j个心脏脉冲信号段对应的心跳信息,
Figure BDA0002617236870000043
cj
Figure BDA0002617236870000044
分别为第j个心脏脉冲信号段对应的心跳个数与心跳的位置;
(6b)采用平均心率法,并通过每个心脏脉冲信号段对应的心跳信息Cj,计算Cj对应的真实心率yj,得到J个测试样本对应J个真实心率。
本发明与现有技术相比,具有以下优点:
1、本发明的跨模态映射模型为一维卷积神经网络,将与心冲击图信号对应的心脏脉冲信号作为心冲击图信号的标记,充分利用了心脏脉冲信号的周期性特征和幅值特征,对心冲击图信号进行卷积提取多通道心冲击图信号的周期性特征与幅值特征并进行融合,完成从多通道心冲击图信号到单通道心脏脉冲信号的跨模态映射,将多通道心冲击图信号融合转换成易于进行心跳检测的心脏脉冲信号,这从根本上为心率估计精度的提升提供了保障。
2、本发明通过一维卷积神经网络建立从心冲击图信号到心脏脉冲信号的非线性映射关系,将多通道心冲击图信号映射成易于进行心跳检测的心脏脉冲信号,再对映射的心脏脉冲信号进行心跳检测进而计算心率,避免了现有技术对应同一心率值的心冲击图信号差异较大问题,另外,卷积神经网络在信号增强中强大的特征融合和数据拟合能力进一步提升了心率的估计精度。
附图说明
图1是本发明的实现流程图。
具体实施方式
以下结合附图和具体实施例,对本发明作进一步详细描述。
参照图1,本发明包括步骤如下:
步骤1)采集心冲击图信号和心脏脉冲信号:
采用指夹式脉冲传感器和液压传感器,并以fs为采样频率分别采集受试者的心脏脉冲信号B和M个心冲击图信号A={A1,A2,...,Am,...,AM},其中,fs≥100Hz,Am表示第m个心冲击图信号,B和Am的长度均为T,其中M=4,T=60000,fs=100Hz;n与T过小时会导致心率估计精度大幅降低,M、T和fs过大时不仅对于心率估计精度提升不明显而且会导致算法的复杂度大大升高;使用与该液压传感器相同采样频率的指夹式脉冲传感器是为了获取与心冲击图信号同步且长度相等的心脏脉冲信号;
步骤2)对每个心冲击图信号Am进行滤波:
为了减弱心冲击图信号中的呼吸分量和高频噪声对心率估计性能的影响,采用截断频率下限为f1、上限为f2的六阶巴特沃斯带通滤波器分别对每个心冲击图信号进行带通滤波,得到带通滤波后的M个心冲击图信号A′={A′1,A′2,...,A′m,...,A′M},其中f1=0.4Hz,f2=10Hz;f1的取值范围的依据为心冲击图信号中呼吸分量的频率上限约为0.3Hz~0.8Hz,f2的取值范围的依据为心冲击图信号中高频噪声分量的频率下限约为8Hz~12Hz;
步骤3)获取训练样本集和测试样本集:
步骤3a)采用长度为D的滑窗,并以s为步长,按照采集的时间顺序对心脏脉冲信号B和每个滤波后的心冲击图信号A′m进行N次滑动,得到心脏脉冲信号段集合B={B1,B2,...,Bn,...,BN}和A′对应的心冲击图信号段集合X={X1,X2,...,Xm,...,XM},其中,Bn表示第n个心脏脉冲信号段,Xm表示A′m对应的心冲击图信号段子集合
Figure BDA0002617236870000061
Figure BDA0002617236870000062
表示第n个滤波后的心冲击图信号段,其中D=600,s=1,
Figure BDA0002617236870000063
D和s为上述取值时估计精度最好;
步骤3b)对心脏脉冲信号段集合B={B1,B2,...,Bn,...,BN}和心冲击图信号段集合
Figure BDA0002617236870000064
进行Z-Score标准化处理,得到Z-Score标准化处理后的心脏脉冲信号段集合Y={Y1,Y2,...,Yn,...,YN}和心冲击图信号段集合X′={X′1,X′2,...,X′m,...,X′M},
Figure BDA0002617236870000065
Z-Score标准化处理提高了数据的可比性;
其中,对第n个心冲击图信号段
Figure BDA0002617236870000066
和第n个心冲击图信号段Bn进行Z-Score标准化处理的计算公式分别为:
Figure BDA0002617236870000067
Figure BDA0002617236870000068
其中,
Figure BDA0002617236870000069
Figure BDA00026172368700000610
分别为第n个心冲击图信号段
Figure BDA00026172368700000611
的均值和方差,
Figure BDA00026172368700000612
Figure BDA00026172368700000613
分别为第n个心脏脉冲信号段Yn的均值和方差;
步骤3c)将X′中M个子集合中第n个心冲击图信号段进行组合,得到M通道心冲击图信号段集合Z={Z1,Z2,...,Zn,...,ZN},
Figure BDA00026172368700000614
步骤3d)通过Y中半数以上的心脏脉冲信号段分别对Z中对应位置的心冲击图信号段进行标注,并将标注后带有标签的心冲击图信号段组合为训练样本集Ztr={Z1,Z2,...,Ze,...,ZE},E=35000,将Z中其余心冲击图信号段组合为测试样本集Zte={Z1,Z2,...,Zj,...,ZJ},J=20400;
步骤4)构建基于心冲击图信号周期性和幅值特征的跨模态映射模型H:
步骤4a)构建包括依次层叠的第一卷积层、多个卷积-激励层和第二卷积层的跨模态映射模型H,激励层的激励函数为ReLU,第二卷积层中卷积核个数为1;第一卷积层用于接收M通道心冲击图信号;多个卷积-激励层用于提取M通道心冲击图信号的周期性与幅值特征,并对提取的特征进行融合,通过激励函数ReLU对融合后的特征进行非线性映射,第二卷积层用于对非线性的结果进行卷积,最后输出一维映射向量,完成M通道心冲击图信号到单通道心脏脉冲信号的跨模态映射;
跨模态映射网络模型的结构为:第一卷积层->3个卷积-激励层->第二卷积层;
跨模态映射网络模型的参数设置:
第一卷积层:包含8个卷积核,每个卷积核大小为30,步长为1,其目的是为了提取心冲击图信号的结构性特征;
卷积-激励层:数量为3个,卷积层均包含16个卷积核,步长为1,三层卷积层中卷积核大小分别为50、80、80,多次卷积操作使得网络模型在信号处理中拥有了更强的特征抽象能力和更高的运算效率,激励函数增强了网络的非线性,其中ReLU激活函数的不饱和性可以有效抑制训练过程中梯度消失情况的发生,加速网络收敛;
激励层的激励函数为ReLU的表达式为:
ReLU(x)=max{x,0};
第二卷积层:卷积核个数为1,卷积核大小为80,步长为1;
步骤4b)当映射心脏脉冲信号与真实心脏脉冲信号在相差较大时,均方误差的梯度较大,当映射心脏脉冲信号与真实心脏脉冲信号在相差较小时,均方误差的梯度较小,在训练过程中使用均方误差作为跨模态映射模型H的损失函数F可以加速网络的训练过程;在跨模态映射模型H的损失函数F中引入L2正则,可有效降低网络模型的过拟合风险;
跨模态映射模型H的损失函数F表达式为:
Figure BDA0002617236870000071
其中,Y′和Y分别为模型训练输出的估计值和真值,Q为每次训练的批尺寸,||·||2表示2-范数,γ表示正则化参数,控制
Figure BDA0002617236870000081
的参与程度,w表示整个网络的权重,w=[W,b],γ=0.001;
步骤5)对跨模态映射模型H进行迭代训练:
步骤5a)设迭代次数为k,最大迭代次数为K=120,跨模态映射模型H中各层的权重矩阵W与偏置b取值为范围[-1,1]内的随机数,为了使心率回归估计网络模型的训练过程较为稳定,学习率η设置为0.0001,并令k=0,Hk=H;
步骤5b)将从训练样本集中随机选取Q个训练样本作为跨模态映射模型Hk的输入进行前向传播,第一卷积层对训练样本进行卷积,得到每个训练样本中M通道心冲击图信号的特征,多个卷积-激励层对提取的特征进行融合,多次卷积操作使得网络模型在信号处理中拥有了更强的特征抽象能力和更高的运算效率,激励函数增强了网络的非线性,然后通过激励函数ReLU对融合后的特征进行非线性映射,ReLU激活函数的不饱和性可以有效抑制训练过程中梯度消失情况的发生,并加速网络收敛,第二卷积层对非线性映射结果进行卷积,实现M通道心冲击图信号到更易进行心跳检测的单通道心脏脉冲信号的跨模态映射,得到映射向量集合Y′k={Y′k1,Y′k2,...,Y′kq,...,Y′kQ},Y′kq为第q个训练样本对应的一维映射向量,Q≤N且
Figure BDA0002617236870000082
Figure BDA0002617236870000083
为向下取整,Q=256;
步骤5c)将Y′k和Y′k对应的心脏脉冲信号Yk={Yk1,Yk2,...,Ykq,...,YkQ}作为跨模态映射模型Hk的损失函数Fk的输入,计算跨模态映射模型Hk的损失值Fk,并采用反向传播算法,通过损失值Fk对各层的权重矩阵Wk与偏置bk进行更新,得到更新后的跨模态映射模型Hk
Wk和bk的更新公式分别为:
Figure BDA0002617236870000084
Figure BDA0002617236870000085
其中,η表示学习率,η=0.0001,Wk+1、bk+1分别表示Wk、bk更新后的结果,表
Figure BDA0002617236870000091
示求导操作;
步骤5d)判断k=120是否成立,若是,得到训练好的跨模态映射模型H*
否则,令k=k+1,并执行步骤(5b);
步骤6)获取测试样本的心率估计结果:
步骤6a)将测试样本集作为训练好的跨模态映射模型H*的输入进行映射,得到每个测试样本对应的心脏脉冲信号,设定幅度阈值a=0.5和间隔阈值b=0.4,对每个心脏脉冲信号段
Figure BDA0002617236870000092
以b为间隔遍历查找心脏脉冲信号段
Figure BDA0002617236870000093
中比相邻两个元素的值都大且不小于幅度阈值a的位置,即满足xd-1<xd<xd+1,且xd≥a,获得每个心跳在心脏脉冲信号段中的位置
Figure BDA0002617236870000094
并对其心跳位置的个数进行统计,得到该心脏脉冲信号段心跳脉冲个数cj,再将cj
Figure BDA0002617236870000095
组合为第j个心脏脉冲信号段对应的心跳信息,获得J个测试样本对应的心跳信息C={C1,C2,...,Cj,...,CJ},其中,Cj为第j个心脏脉冲信号段对应的心跳信息,
Figure BDA0002617236870000096
cj
Figure BDA0002617236870000097
分别为第j个心脏脉冲信号段对应的心跳个数与心跳的位置;
步骤6b)采用平均心率法,并通过每个心脏脉冲信号段对应的心跳信息Cj,计算Cj对应的真实心率yj,得到J个测试样本对应J个真实心率;
其中平均心率法的计算公式为:
Figure BDA0002617236870000098
其中,cj为第j个心脏脉冲信号段的心跳个数,Pj为第j个心脏脉冲信号段第一个心跳脉冲与最后一个心跳脉冲的时间间隔,
Figure BDA0002617236870000099
以下结合仿真实验,对本发明的技术效果作进一步说明:
1.仿真条件和内容
本实验采用的数据包括十个受试者的采集数据,每个受试者有四个心冲击图信号和一个心脏脉冲信号。仿真平台为主频为3.20GHz的Inter酷睿i7-6900KCPU,英伟达GTX1080Ti的显卡,32.0GB的内存,Windows10操作系统,1.40版本的Tensorflow深度学习平台,Matlab2018a开发平台,Python3.6版本开发平台。
利用本方法分别为每个受试者训练跨模态网络模型,并获取每个受试者测试集样本的估计心率;利用心冲击图信号的深度回归心率估计方法(Bi-LSTM),分别获取每个受试者测试集样本的估计心率,并分别计算两种方法的心率估计误差。
心率估计误差的计算公式为:
Figure BDA0002617236870000101
其中,J为受试者测试集的样本总数,yj和y′j分别为测试集中第j个样本的真实心率和估计心率,|·|表示绝对值运算。
2.仿真结果分析
下表为本方法和心冲击图信号的深度回归心率估计方法(以下简称为Bi-LSTM方法)在上述10位受试者测试集上的心率估计误差(次数/分钟)。
表1本方法和Bi-LSTM算法的心率估计误差对比
Figure BDA0002617236870000102
从表1中可以看出,本方法在十位受试者的测试集样本上的平均心率估计误差为0.14,而Bi-LSTM方法在十位受试者的测试集样本上的平均心率估计误差为0.49,显然与Bi-LSTM方法相比,本方法的估计误差较小。并且从上表中可以看出本方法的心率估计误差的方差更小,说明本方法的鲁棒性更强。
以上的实验结果与实验分析可以表明,在有监督学习的框架下,基于跨模态的心冲击图信号心率估计方法通过一维卷积神经网络建立从心冲击图信号到心脏脉冲信号的非线性映射关系,将多通道心冲击图信号融合转换成易于进行心跳检测的单通道心脏脉冲信号,进而计算心率估计结果,可有效降低心率估计误差。

Claims (5)

1.一种基于跨模态映射的心冲击图信号心率估计方法,其特征在于,包括步骤如下:
(1)采集心冲击图信号和心脏脉冲信号:
采用指夹式脉冲传感器和液压传感器,并以fs为采样频率分别采集受试者的心脏脉冲信号B和M个心冲击图信号A={A1,A2,...,Am,...,AM},其中,fs≥100Hz,Am表示第m个心冲击图信号,M≥2,B和Am的长度均为T,T≥60000;
(2)对每个心冲击图信号Am进行滤波:
采用截断频率下限和上限分别为f1和f2的带通滤波器对每个心冲击图信号Am进行带通滤波,得到带通滤波后的M个心冲击图信号A′={A′1,A′2,...,A′m,...,A′M},0.3Hz≤f1≤0.8Hz,8Hz≤f2≤12Hz;
(3)获取训练样本集和测试样本集:
(3a)采用长度为D的滑窗,并以s为步长,按照采集的时间顺序对心脏脉冲信号B和每个滤波后的心冲击图信号A′m进行N次滑动,得到心脏脉冲信号段集合B={B1,B2,...,Bn,...,BN}和A′对应的心冲击图信号段集合X={X1,X2,...,Xm,...,XM},其中,Bn表示第n个心脏脉冲信号段,Xm表示A′m对应的心冲击图信号段子集合
Figure FDA0002970819110000011
Figure FDA0002970819110000012
表示第n个滤波后的心冲击图信号段,
Figure FDA0002970819110000013
(3b)对心脏脉冲信号段集合B={B1,B2,...,Bn,...,BN}和心冲击图信号段集合
Figure FDA0002970819110000014
进行Z-Score标准化处理,得到Z-Score标准化处理后的心脏脉冲信号段集合Y={Y1,Y2,...,Yn,...,YN}和心冲击图信号段集合X′={X′1,X′2,...,X′m,...,X′M},
Figure FDA0002970819110000021
(3c)将X′中M个子集合中第n个心冲击图信号段进行组合,得到M通道心冲击图信号段集合Z={Z1,Z2,...,Zn,...,ZN},
Figure FDA0002970819110000022
(3d)通过Y中半数以上的心脏脉冲信号段分别对Z中对应位置的心冲击图信号段进行标注,并将标注后带有标签的心冲击图信号段组合为训练样本集Ztr={Z1,Z2,...,Ze,...,ZE},
Figure FDA0002970819110000023
将Z中其余心冲击图信号段组合为测试样本集Zte={Z1,Z2,...,Zj,...,ZJ},
Figure FDA0002970819110000024
(4)构建基于心冲击图信号周期性和幅值特征的跨模态映射模型H:
(4a)构建包括依次层叠的第一卷积层、多个卷积-激励层和第二卷积层的跨模态映射模型H,激励层的激励函数为ReLU,第二卷积层中卷积核个数为1;
第一卷积层用于接收M通道心冲击图信号;多个卷积-激励层用于提取M通道心冲击图信号的周期性与幅值特征,并对提取的特征进行融合,通过激励函数ReLU对融合后的特征进行非线性映射,第二卷积层用于对非线性的结果进行卷积,最后输出一维映射向量,完成M通道心冲击图信号到单通道心脏脉冲信号的跨模态映射,其中,跨模态映射模型H的参数设置为:
第一卷积层,包含8个卷积核,每个卷积核大小为30,步长为1;
卷积-激励层的数量为3个,卷积层均包含16个卷积核,三层卷积层中卷积核大小分别为50、80、80,激励层的激励函数为ReLU的表达式为:
ReLU(x)=max{x,0}
第二卷积层中卷积核大小为80;
(4b)构建跨模态映射模型H的损失函数F:
Figure FDA0002970819110000025
其中,Y′和Y分别为模型训练输出的估计值和真值,Q为每次训练的批尺寸,||·||2表示2-范数,γ表示正则化参数,控制
Figure FDA0002970819110000026
的参与程度,w表示整个网络的权重,w=[W,b];
(5)对跨模态映射模型H进行迭代训练:
(5a)设迭代次数为k,最大迭代次数为K,K≥10,跨模态映射模型H中各层的权重矩阵W与偏置b取值为范围[-1,1]内的随机数,并令k=0,Hk=H;
(5b)将从训练样本集中随机选取Q个训练样本作为跨模态映射模型Hk的输入进行前向传播,第一卷积层对训练样本进行卷积,得到每个训练样本中M通道心冲击图信号的特征,多个卷积-激励层对提取的特征进行融合,然后通过激励函数ReLU对融合后的特征进行非线性映射,第二卷积层对非线性映射结果进行卷积,实现M通道心冲击图信号到单通道心脏脉冲信号的跨模态映射,得到映射向量集合Yk′={Y′k1,Y′k2,...,Y′kq,...,Y′kQ},Y′kq为第q个训练样本对应的一维映射向量,Q≤N且
Figure FDA0002970819110000031
Figure FDA0002970819110000032
为向下取整;
(5c)将Yk′和Yk′对应的心脏脉冲信号Yk={Yk1,Yk2,...,Ykq,...,YkQ}作为跨模态映射模型Hk的损失函数Fk的输入,计算跨模态映射模型Hk的损失值Fk,并采用反向传播算法,通过损失值Fk对各层的权重矩阵Wk与偏置bk进行更新,得到更新后的跨模态映射模型Hk
(5d)判断k=K是否成立,若是,得到训练好的跨模态映射模型H*;否则,令k=k+1,并执行步骤(5b);
(6)获取测试样本的心率估计结果:
(6a)将测试样本集作为训练好的跨模态映射模型H*的输入进行映射,得到每个测试样本对应的心脏脉冲信号,并采用峰值搜索算法,对映射出的心脏脉冲信号进行峰值搜索,获得J个测试样本对应的心跳信息C={C1,C2,...,Cj,...,CJ},其中,Cj为第j个心脏脉冲信号段对应的心跳信息,
Figure FDA0002970819110000033
cj
Figure FDA0002970819110000034
分别为第j个心脏脉冲信号段对应的心跳个数与心跳的位置;
(6b)采用平均心率法,并通过每个心脏脉冲信号段对应的心跳信息Cj,计算Cj对应的真实心率yj,得到J个测试样本对应J个真实心率。
2.根据权利要求1所述的一种基于跨模态映射的心冲击图信号心率估计方法,其特征在于,步骤(3b)中所述的对心脏脉冲信号段集合B={B1,B2,...,Bn,...,BN}和心冲击图信号段集合
Figure FDA0002970819110000041
进行Z-Score标准化处理,其中对第n个心冲击图信号段
Figure FDA0002970819110000042
和第n个心冲击图信号段Bn进行Z-Score标准化处理的计算公式分别为:
Figure FDA0002970819110000043
Figure FDA0002970819110000044
其中,
Figure FDA0002970819110000045
Figure FDA0002970819110000046
分别为第n个心冲击图信号段
Figure FDA0002970819110000047
的均值和方差,
Figure FDA0002970819110000048
Figure FDA0002970819110000049
分别为第n个心脏脉冲信号段Yn的均值和方差。
3.根据权利要求1所述的一种基于跨模态映射的心冲击图信号心率估计方法,其特征在于,步骤(5c)中所述的通过跨模态映射模型Hk的损失值Fk和对各层的权重矩阵Wk与偏置bk进行更新,更新公式分别为:
Figure FDA00029708191100000410
Figure FDA00029708191100000411
其中,η表示学习率,0<η≤0.1,Wk+1、bk+1分别表示Wk、bk更新后的结果,
Figure FDA00029708191100000412
表示求导操作。
4.根据权利要求1所述的一种基于跨模态映射的心冲击图信号心率估计方法,其特征在于,步骤(6a)中的所述的采用峰值搜索算法,对映射出的心脏脉冲信号进行峰值搜索,实现方法为:设定幅度阈值a和间隔阈值b,输入第j个心脏脉冲信号段
Figure FDA0002970819110000051
以b为间隔遍历查找心脏脉冲信号段
Figure FDA0002970819110000052
中比相邻两个元素的值都大且不小于幅度阈值a的位置,即满足xd-1<xd<xd+1,且xd≥a,获得每个心跳在心脏脉冲信号段中的位置
Figure FDA0002970819110000053
并对其心跳位置的个数进行统计,得到该心脏脉冲信号段心跳脉冲个数cj,再将cj
Figure FDA0002970819110000054
组合为第j个心脏脉冲信号段对应的心跳信息。
5.根据权利要求1所述的一种基于跨模态映射的心冲击图信号心率估计方法,其特征在于,步骤(6b)中的所述的计算Cj对应的真实心率yj,计算公式为:
Figure FDA0002970819110000055
其中,cj为第j个心脏脉冲信号段的心跳个数,Pj为第j个心脏脉冲信号段第一个心跳脉冲与最后一个心跳脉冲的时间间隔,
Figure FDA0002970819110000056
CN202010772668.3A 2020-08-04 2020-08-04 基于跨模态映射的心冲击图信号心率估计方法 Active CN111887858B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010772668.3A CN111887858B (zh) 2020-08-04 2020-08-04 基于跨模态映射的心冲击图信号心率估计方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010772668.3A CN111887858B (zh) 2020-08-04 2020-08-04 基于跨模态映射的心冲击图信号心率估计方法

Publications (2)

Publication Number Publication Date
CN111887858A CN111887858A (zh) 2020-11-06
CN111887858B true CN111887858B (zh) 2021-05-04

Family

ID=73184089

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010772668.3A Active CN111887858B (zh) 2020-08-04 2020-08-04 基于跨模态映射的心冲击图信号心率估计方法

Country Status (1)

Country Link
CN (1) CN111887858B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112818773A (zh) * 2021-01-19 2021-05-18 青岛歌尔智能传感器有限公司 心率检测方法、设备及存储介质
CN114081462B (zh) * 2021-11-19 2023-06-09 齐齐哈尔大学 一种基于多维度生理信息的心脏健康监护系统
CN114271831B (zh) * 2022-03-07 2022-05-27 合肥心之声健康科技有限公司 心音图信号转换心电图信号的方法、系统以及设备
CN115153478A (zh) * 2022-08-05 2022-10-11 上海跃扬医疗科技有限公司 心率监测方法及系统、存储介质、终端
CN115409073B (zh) * 2022-10-31 2023-03-24 之江实验室 一种面向i/q信号识别的半监督宽度学习方法及装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016049425A1 (en) * 2014-09-26 2016-03-31 Physiowave. Inc. Physiological assessment scale
US10108871B2 (en) * 2015-06-16 2018-10-23 EyeVerify Inc. Systems and methods for spoof detection and liveness analysis
CN108805088A (zh) * 2018-06-14 2018-11-13 南京云思创智信息科技有限公司 基于多模态情绪识别系统的生理信号分析子系统
CN109498046A (zh) * 2018-11-19 2019-03-22 西安电子科技大学 基于核素图像与ct冠脉造影融合的心肌梗死定量评估方法
CN109805924A (zh) * 2019-02-15 2019-05-28 济南大学 基于cnn的心电信号处理方法及心律不齐检测系统
CN110420019A (zh) * 2019-07-29 2019-11-08 西安电子科技大学 一种心冲击图信号的深度回归心率估计方法
CN110916636A (zh) * 2019-11-22 2020-03-27 新绎健康科技有限公司 一种基于动态二阶差分阈值的bcg信号心率计算方法及系统
CN111297343A (zh) * 2020-03-20 2020-06-19 中网联金乐盟科技(北京)有限公司 一种用于ppg心率测量的运动伪差消除系统及其实现方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170188868A1 (en) * 2016-01-04 2017-07-06 AventuSoft, LLC System and method of identification of the heart valve signals
CN110151156B (zh) * 2019-04-07 2021-10-29 西安电子科技大学 一种基于窗内自动加权平均算法的胎心率提取方法及系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016049425A1 (en) * 2014-09-26 2016-03-31 Physiowave. Inc. Physiological assessment scale
US10108871B2 (en) * 2015-06-16 2018-10-23 EyeVerify Inc. Systems and methods for spoof detection and liveness analysis
CN108805088A (zh) * 2018-06-14 2018-11-13 南京云思创智信息科技有限公司 基于多模态情绪识别系统的生理信号分析子系统
CN109498046A (zh) * 2018-11-19 2019-03-22 西安电子科技大学 基于核素图像与ct冠脉造影融合的心肌梗死定量评估方法
CN109805924A (zh) * 2019-02-15 2019-05-28 济南大学 基于cnn的心电信号处理方法及心律不齐检测系统
CN110420019A (zh) * 2019-07-29 2019-11-08 西安电子科技大学 一种心冲击图信号的深度回归心率估计方法
CN110916636A (zh) * 2019-11-22 2020-03-27 新绎健康科技有限公司 一种基于动态二阶差分阈值的bcg信号心率计算方法及系统
CN111297343A (zh) * 2020-03-20 2020-06-19 中网联金乐盟科技(北京)有限公司 一种用于ppg心率测量的运动伪差消除系统及其实现方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Cross-modal health state estimation;Nag N, 等;《Proceedings of the 26th ACM international conference on Multimedia》;20181031;全文 *
基于心冲击描记术的心率检测方法;孔令琴,等;《中国激光》;20200229;全文 *

Also Published As

Publication number Publication date
CN111887858A (zh) 2020-11-06

Similar Documents

Publication Publication Date Title
CN111887858B (zh) 基于跨模态映射的心冲击图信号心率估计方法
CN110420019B (zh) 一种心冲击图信号的深度回归心率估计方法
CN106108889B (zh) 基于深度学习算法的心电图分类方法
CN103038772B (zh) 预测患者的存活性的系统和装置
CN111990989A (zh) 一种基于生成对抗及卷积循环网络的心电信号识别方法
TW201918222A (zh) 事件檢測方法及設備、房顫檢測方法和非暫時性儲存介質
CN110619322A (zh) 一种基于多流态卷积循环神经网络的多导联心电异常信号识别方法及系统
CN108024730A (zh) 使用数学分析和机器学习来诊断疾病的方法和系统
CN113397555A (zh) 生理参数监测用c-lstm的心率失常分类算法
CN106214145A (zh) 一种基于深度学习算法的心电图分类方法
WO2015048514A1 (en) Analyte assessment and arrhythmia risk prediction using physiological electrical data
CN113095302B (zh) 用于心律失常分类的深度模型、利用该模型的方法及装置
Zhao et al. An IoT-based wearable system using accelerometers and machine learning for fetal movement monitoring
CN111544256A (zh) 基于图卷积和迁移学习的脑控智能全肢体康复方法
CN111000551A (zh) 一种基于深度卷积神经网络模型的心脏病发风险诊断方法
CN112906748A (zh) 基于残差网络的12导联ecg心律失常检测分类模型构建方法
CN109497991A (zh) 基于机器学习的心衰检测装置
CN104473660A (zh) 一种基于子带能量包络自相关特征的异常心音识别方法
Singh et al. Short and noisy electrocardiogram classification based on deep learning
Ganguly et al. A non-invasive approach for fetal arrhythmia detection and classification from ecg signals
CN108836316B (zh) 一种基于bp神经网络的心电信号r波提取方法
Mathur et al. Analysis of CNN and feed-forward ANN model for the evaluation of ECG signal
CN114847905A (zh) 一种心率失常数据检测识别方法及系统
Bassiouni et al. Combination of ECG and PPG signals for smart healthcare systems: Techniques, applications, and challenges
Srivastava et al. ECG Pattern Analysis using Artificial Neural Network

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant