CN108549875B - 一种基于深度通道注意力感知的脑电癫痫发作检测方法 - Google Patents

一种基于深度通道注意力感知的脑电癫痫发作检测方法 Download PDF

Info

Publication number
CN108549875B
CN108549875B CN201810356130.7A CN201810356130A CN108549875B CN 108549875 B CN108549875 B CN 108549875B CN 201810356130 A CN201810356130 A CN 201810356130A CN 108549875 B CN108549875 B CN 108549875B
Authority
CN
China
Prior art keywords
channel
electroencephalogram
depth
time
training
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810356130.7A
Other languages
English (en)
Other versions
CN108549875A (zh
Inventor
贾克斌
袁野
孙中华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing University of Technology
Original Assignee
Beijing University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing University of Technology filed Critical Beijing University of Technology
Priority to CN201810356130.7A priority Critical patent/CN108549875B/zh
Publication of CN108549875A publication Critical patent/CN108549875A/zh
Application granted granted Critical
Publication of CN108549875B publication Critical patent/CN108549875B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/08Feature extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching

Abstract

本发明公开了一种基于深度通道注意力感知的脑电癫痫发作检测方法,属于生物医学工程和机器学习领域。本发明引入注意力机制于多通道脑电癫痫发作检测中,训练端到端的深度通道注意力感知模型。该模型不仅可以提取脑波信号的深度特征,而且能够同时学习各通道对于检测癫痫的贡献分数,实现动态选择最相关脑电通道。与现有技术相比,本发明通过结合深度特征提取和注意力机制动态选择最相关脑电通道并协同表达癫痫特征,使其融合特征具有通道感知能力,并在提升癫痫检测率的同时具有可解释性。

Description

一种基于深度通道注意力感知的脑电癫痫发作检测方法
技术领域
本发明涉及生物医学工程和机器学习领域,尤其涉及一种基于深度通道注意力感知的脑电癫痫发作检测方法。
背景技术
癫痫是一种由脑部神经元异常放电所引起的慢性神经疾病,我国大约有600万左右的癫痫患者并逐年快速增长。癫痫的临床特征通常表现为抽搐、精神异常、发作性意识改变等,对患者身心健康危害极大。随着医疗信息化建设的日益发展与普及,癫痫诊断可由医学专家直接根据多通道脑电图(electroencephalogram,EEG)通过视觉检测进行诊断。但由于癫痫发作的不确定性,医生需要长期监控病人的冗长的脑电图记录。这种耗时费力的人工检测很容易导致漏诊误诊的发生。因此,有必要实现自动化的多通道脑电癫痫发作检测,从而减轻医疗工作者的工作量并避免主观因素干扰,这在医学应用中具有重大意义。
近年来,国内外对于基于机器学习的多通道脑电癫痫发作检测的方法研究给予极大重视。具体地,当前研究主要集中在应用深度学习算法自动提取多通道脑电特征从而检测癫痫的发作。由于脑电数据的多通道复杂性,有些脑电通道会提供与癫痫发作无关的干扰信息,因此研究者们尝试利用深度学习技术预先选择有用的脑电通道作为检测癫痫的主要特征。尽管如此,现有的脑电通道选择模型大多都是通过阈值判断一次性滤除所有无关通道。这种硬选择(hard selection)模型忽略了脑电通道信息的动态性,因为相关通道的选择是随不同病人和病情而变化的。另外,现有模型往往将特征学习和通道选择视为各自独立的模块,即多阶段(multi-stage)模型,并非端到端(end-to-end)模型。这种多阶段模型很难保证癫痫检测性能的稳定,由于其需要使用人工手段协调各阶段模块工作。因此,如何结合深度学习技术动态选择相关脑电通道协同表达癫痫特征,是技术人员需要攻克的一个难题。
发明内容
本发明的目的在于解决现有深度学习算法在脑电癫痫检测中的不足,提出一种基于深度通道注意力感知的脑电癫痫发作检测方法,即通过结合深度特征提取和注意力机制(attention mechanism)动态选择最相关脑电通道并协同表达癫痫特征,使其融合特征具有通道感知能力,并在提升癫痫检测率的同时具有可解释性。
为实现以上目的,本发明采用的技术方案是,一种基于深度通道注意力感知的脑电癫痫发作检测方法,该方法包括以下步骤:
1)采集多通道脑电数据X,并对所采集的多通道脑电数据进行癫痫标注Y,
将多通道脑电数据X和采集的多通道脑电数据进行癫痫标注Y作为训练数据集{(X(i),Y(i)),i=1,2,…,m},m为训练样本数量。
2)对训练数据进行预处理。对训练集中的脑电信号使用短时傅里叶变换(short-time Fourier transform,STFT)表达其时频信息,并按照时间方向定长分块,生成多通道脑电时频矩阵训练集{(S(i),Y(i)),i=1,2,…,m}。其中,对于脑电信号样本x(t),利用短时傅里叶变换表达脑电时频信息s的公式如下:
Figure BDA0001634678350000021
其中,τ为时间索引,用来定位信号并调用窗函数w(t)进行傅里叶变换;t表示时间,j为脑电信号的定长分块长度。
3)用生成的脑电时频矩阵训练集{(S(i),Y(i)),i=1,2,…,m}训练深度通道注意力感知模型,具体为:
a)通过深度神经网络表达脑电数据S(i)的全通道深度特征
Figure BDA0001634678350000022
全通道深度特征
Figure BDA0001634678350000023
为向量并反映多通道脑电信号的全局特征。
b)通过深度神经网络表达脑电数据S(i)的各通道深度特征向量组
Figure BDA0001634678350000024
其中C表示通道个数,该向量组反映多通道脑电信号的局部特征。
c)基于步骤a)~b)得到的全局和局部特征,然后计算各通道的注意力得分(attention score)
Figure BDA0001634678350000025
对于第k个通道的注意力得分
Figure BDA0001634678350000026
的计算公式如下:
Figure BDA0001634678350000027
Figure BDA0001634678350000028
表示为通道k的能量系数,
Figure BDA0001634678350000029
根据S(i)的全局特征
Figure BDA00016346783500000210
和局部特征
Figure BDA00016346783500000211
共同计算表达。经过计算后,S(i)的各通道被动态分配了一个归一化的得分
Figure BDA00016346783500000212
该归一化的得分用来表示相对应通道对癫痫检测的贡献,训练深度通道注意力感知模型根据这个动态得分自动选择通道。
d)基于脑电时频矩阵训练集{(S(i),Y(i)),i=1,2,…,n}进行端到端的特征融合训练,其成本函数(cost function)JChannelAtt为:
Figure BDA0001634678350000031
其中,
Figure BDA0001634678350000032
通过基于softmax分类器的特征融合函数获得。经过训练后,得到由参数集合Θ组成的深度通道注意力感知模型。
4)采集待检测多通道脑电信号X。
5)用步骤2)方法对待检测多通道脑电信号X进行预处理,获得待检测的多通道脑电时频矩阵S。
6)将待检测的多通道脑电时频矩阵S输入到训练好的深度通道注意力感知模型中,得到分类结果Y和各通道得分{αg1g2,…,αgC}。
7)根据模型分类结果Y和各通道得分{αg1g2,…,αgC},对待检测数据X的脑电类型即癫痫或非癫痫和各通道的贡献系数进行标记。至此,完成基于深度通道注意力感知的脑电癫痫发作检测过程。
与现有技术相比,本发明的优点在于:首先,本发明通过结合深度神经网络和注意力机制,不仅提取了脑波信号的深度特征,而且同时学习了各通道对于检测癫痫的贡献分数,实现动态选择相关脑电通道。其次,本发明是由数据驱动的端到端的学习模型,训练时的特征学习和通道选择阶段无需人工干预且不依赖其它医学先验知识。最后,本发明首次引入注意力机制于多通道脑电癫痫发作检测中,使其融合特征具有通道感知能力,并在提升癫痫检测率的同时具有可解释性。经试验,上述方法在基准数据库上的脑电癫痫识别准确率和检全率较高,准确率96%以上,检全率97%以上。
附图说明
图1是本发明基于深度通道注意力感知的脑电癫痫发作检测方法流程示意图。
图2是深度通道注意力感知模型的训练意图。
具体实施方式
下面结合附图和具体实施方式对本发明进行详细说明:
图1是基于深度通道注意力感知的脑电癫痫发作检测方法流程示意图,包括以下步骤:
步骤1、采集多通道脑电数据X,并对所采集的数据进行癫痫标注Y,将这些已标注的数据作为训练数据集{(X(i),Y(i)),i=1,2,…,m},其中m为训练样本数量。
步骤2、对训练数据进行预处理。对训练集中的生物医学信号使用短时傅里叶变换表达其时频信息,并按照时间方向定长分块,生成多通道脑电时频矩阵训练集{(S(i),Y(i)),i=1,2,…,m}。其中,对于生物医学信号样本x(t),利用短时傅里叶变换表达脑电时频信息s的公式如下:
Figure BDA0001634678350000041
其中,τ为时间索引,用来定位信号并调用窗函数w(t)进行傅里叶变换。
步骤3、用生成的脑电时频矩阵训练集{(S(i),Y(i)),i=1,2,…,m}训练深度通道注意力感知模型。图2是深度通道注意力感知模型的训练示意图,具体为:
步骤3-1、通过深度神经网络表达脑电数据的全通道深度特征,其反应多通道脑电信号的全局特征。具体地,对于具有C个通道的脑电时频矩阵S(i)
Figure BDA0001634678350000042
其全通道深度特征
Figure BDA0001634678350000043
的计算公式为:
Figure BDA0001634678350000044
其中,Wg和bg为模型中待训练的参数,函数f(·)为sigmoid激活函数f(z)=1/(1+e-z)。
步骤3-2、通过深度神经网络表达脑电数据的各通道深度特征,其反应多通道脑电信号的局部特征。具体地,对于具有C个通道的脑电时频矩阵S(i)
Figure BDA0001634678350000045
其第k个通道的深度特征
Figure BDA0001634678350000046
的计算公式为:
Figure BDA0001634678350000047
其中,Wc和bc为模型中待训练的参数。经过计算后,S(i)的各通道的深度特征可表示为向量集合
Figure BDA0001634678350000048
步骤3-3、基于步骤3-1和3-2得到的特征计算各通道的注意力得分。具体地,对于具有C个通道的脑电时频矩阵
Figure BDA0001634678350000049
其注意力得分可表示为数值集合
Figure BDA00016346783500000410
其中第k个通道的注意力得分
Figure BDA00016346783500000411
的计算公式如下:
Figure BDA00016346783500000412
其中
Figure BDA00016346783500000413
表示为通道k的能量系数,它根据S(i)的全局特征
Figure BDA00016346783500000414
和局部特征
Figure BDA00016346783500000415
共同计算表达,其公式如下:
Figure BDA00016346783500000416
其中,We和ve分别为模型中待训练的参数。经过计算后,S(i)的各通道被动态分配了一个归一化的得分
Figure BDA0001634678350000051
Figure BDA0001634678350000052
Figure BDA0001634678350000053
该得分用来表示相对应通道对癫痫检测的贡献,模型根据这个动态得分自动选择通道。
步骤3-4、基于脑电时频矩阵训练集{(S(i),Y(i)),i=1,2,…,m}进行端到端的特征融合训练,其成本函数JChannelAtt为:
Figure BDA0001634678350000054
其中,
Figure BDA0001634678350000055
可通过特征融合函数获得,其计算公式如下:
Figure BDA0001634678350000056
其中,Ws和bs分别为模型中待训练的权值矩阵和偏置向量,softmax(·)表示softmax分类器。经过训练后,得到由参数Θ={Wg,c,e,s,bg,c,s,ve}组成的深度通道注意力感知模型。
步骤4、采集待检测多通道脑电信号X。
步骤5、用步骤2方法对待检测多通道脑电信号进行预处理,获得待检测的多通道脑电时频矩阵S。
步骤6、将待检测的多通道脑电时频矩阵S输入到训练好的深度通道注意力感知模型中,得到分类结果Y和各通道得分{αg1g2,…,αgC}。
步骤7、根据模型输出的分类结果Y和各通道得分{αg1g2,…,αgC},对待检测数据X的脑电类型(癫痫、非癫痫)和各通道的贡献系数进行标记。至此,完成基于深度通道注意力感知的脑电癫痫发作检测过程。经试验,上述方法在基准数据库上的脑电癫痫识别准确率和检全率较高,准确率96%以上,检全率97%以上。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、修正等,均应包含在本发明的保护范围之内。

Claims (2)

1.一种基于深度通道注意力感知的脑电癫痫发作检测方法,其特征在于:该方法包括以下步骤,
1)采集多通道脑电数据X,并对所采集的多通道脑电数据进行癫痫标注Y,将多通道脑电数据X和采集的多通道脑电数据进行癫痫标注Y作为训练数据集{(X(i),Y(i)),i=1,2,…,m},m为训练样本数量;
2)对训练数据进行预处理;对训练集中的脑电信号使用短时傅里叶变换(short-timeFouriertransform,STFT)表达其时频信息,并按照时间方向定长分块,生成多通道脑电时频矩阵训练集{(S(i),Y(i)),i=1,2,…,m};其中,对于脑电信号样本x(t),利用短时傅里叶变换表达脑电时频信息s的公式如下:
Figure FDA0003495639920000011
其中,τ为时间索引,用来定位信号并调用窗函数w(t)进行傅里叶变换;t表示时间,j为脑电信号的定长分块长度;
用生成的脑电时频矩阵训练集{(S(i),Y(i)),i=1,2,…,m}训练深度通道注意力感知模型;
3)采集待检测多通道脑电信号X1;
4)用步骤2)方法对待检测多通道脑电信号X1进行预处理,获得待检测的多通道脑电时频矩阵S;
5)将待检测的多通道脑电时频矩阵S输入到训练好的深度通道注意力感知模型中,得到分类结果的癫痫标注Y和各通道得分{αg1g2,…,αgC};
6)根据模型分类结果Y1和各通道得分{αg1g2,…,αgC},对待检测多通道脑电信号X1的脑电类型即癫痫或非癫痫和各通道的贡献系数进行标记;至此,完成基于深度通道注意力感知的脑电癫痫发作检测过程。
2.根据权利要求1所述的一种基于深度通道注意力感知的脑电癫痫发作检测方法,其特征在于:步骤3)的具体实施过程如下,
a)通过深度神经网络表达脑电数据S(i)的全通道深度特征
Figure FDA0003495639920000012
全通道深度特征
Figure FDA0003495639920000013
为向量并反映多通道脑电信号的全局特征;
b)通过深度神经网络表达脑电数据S(i)的各通道深度特征向量组
Figure FDA0003495639920000014
其中C表示通道个数,该向量组反映多通道脑电信号的局部特征;
c)基于步骤a)~b)得到的全局和局部特征,然后计算各通道的注意力得分(attentionscore)
Figure FDA0003495639920000021
对于第k个通道的注意力得分
Figure FDA0003495639920000022
的计算公式如下:
Figure FDA0003495639920000023
Figure FDA0003495639920000024
表示为通道k的能量系数,
Figure FDA0003495639920000025
根据S(i)的全局特征
Figure FDA0003495639920000026
和局部特征
Figure FDA0003495639920000027
共同计算表达;经过计算后,S(i)的各通道被动态分配了一个归一化的得分
Figure FDA0003495639920000028
该归一化的得分用来表示相对应通道对癫痫检测的贡献,训练深度通道注意力感知模型根据这个动态得分自动选择通道;
d)基于脑电时频矩阵训练集{(S(i),Y(i)),i=1,2,…,m}进行端到端的特征融合训练,其成本函数(cost function)JChannelAtt为:
Figure FDA0003495639920000029
其中,
Figure FDA00034956399200000210
通过基于softmax分类器的特征融合函数获得;经过训练后,得到由参数集合Θ组成的深度通道注意力感知模型。
CN201810356130.7A 2018-04-19 2018-04-19 一种基于深度通道注意力感知的脑电癫痫发作检测方法 Active CN108549875B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810356130.7A CN108549875B (zh) 2018-04-19 2018-04-19 一种基于深度通道注意力感知的脑电癫痫发作检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810356130.7A CN108549875B (zh) 2018-04-19 2018-04-19 一种基于深度通道注意力感知的脑电癫痫发作检测方法

Publications (2)

Publication Number Publication Date
CN108549875A CN108549875A (zh) 2018-09-18
CN108549875B true CN108549875B (zh) 2022-04-15

Family

ID=63515659

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810356130.7A Active CN108549875B (zh) 2018-04-19 2018-04-19 一种基于深度通道注意力感知的脑电癫痫发作检测方法

Country Status (1)

Country Link
CN (1) CN108549875B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109886871B (zh) * 2019-01-07 2023-04-07 国家新闻出版广电总局广播科学研究院 基于通道注意力机制和多层特征融合的图像超分辨率方法
CN109846477B (zh) * 2019-01-29 2021-08-06 北京工业大学 一种基于频带注意力残差网络的脑电分类方法
CN110321783A (zh) * 2019-05-07 2019-10-11 北京慧脑云计算有限公司 一种基于1d卷积神经网络的meg棘波检测方法及系统
CN110236533A (zh) * 2019-05-10 2019-09-17 杭州电子科技大学 基于多深度神经网络迁移特征学习的癫痫发作预测方法
CN110222777B (zh) * 2019-06-11 2022-03-08 北京字节跳动网络技术有限公司 图像特征的处理方法、装置、电子设备及存储介质
CN111340142B (zh) * 2020-05-14 2020-08-14 南京慧脑云计算有限公司 一种癫痫脑磁图棘波自动检测方法与溯源定位系统
CN111956221B (zh) * 2020-09-07 2022-06-07 南京医科大学 一种基于小波散射因子与lstm神经网络模型的颞叶癫痫分类方法
CN113786204B (zh) * 2021-09-03 2023-10-03 北京航空航天大学 基于深度卷积注意力网络的癫痫颅内脑电信号预警方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102149320A (zh) * 2008-04-28 2011-08-10 科技研究局(A*Star) 用于专注度检测的方法和系统
CN106886792A (zh) * 2017-01-22 2017-06-23 北京工业大学 一种基于分层机制构建多分类器融合模型的脑电情感识别方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130072809A1 (en) * 2011-09-19 2013-03-21 Persyst Development Corporation Method And System For Analyzing An EEG Recording

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102149320A (zh) * 2008-04-28 2011-08-10 科技研究局(A*Star) 用于专注度检测的方法和系统
CN106886792A (zh) * 2017-01-22 2017-06-23 北京工业大学 一种基于分层机制构建多分类器融合模型的脑电情感识别方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于机器学习的癫痫脑电数据分析方法研究;周霖 等;《医学信息学杂志》;20180225;第39卷(第2期);第55-59页 *

Also Published As

Publication number Publication date
CN108549875A (zh) 2018-09-18

Similar Documents

Publication Publication Date Title
CN108549875B (zh) 一种基于深度通道注意力感知的脑电癫痫发作检测方法
CN107203692B (zh) 基于深度卷积神经网络的心电数据数字信号处理方法
CN106886792B (zh) 一种基于分层机制构建多分类器融合模型的脑电情感识别方法
CN111340142B (zh) 一种癫痫脑磁图棘波自动检测方法与溯源定位系统
CN108304917A (zh) 一种基于lstm网络的p300信号检测方法
CN104970789B (zh) 心电图分类方法及系统
CN110840432A (zh) 基于一维cnn-lstm的多通道脑电图癫痫自动检测装置
CN108511055B (zh) 基于分类器融合及诊断规则的室性早搏识别系统及方法
CN111248859A (zh) 基于卷积神经网络的睡眠呼吸暂停自动检测方法
CN108420429A (zh) 一种基于多视角深度特征融合的脑电癫痫自动识别方法
CN111436929B (zh) 一种神经生理信号的生成和识别方法
CN105559779A (zh) 一种通过脑电频谱进行认知评价的方法
CN112674782B (zh) 癫痫患者发作间期痫样电活动检测装置和方法
Zhang et al. Patient-specific seizure prediction from scalp EEG using vision transformer
CN111067513B (zh) 一种特征权重自学习的睡眠质量检测关键脑区判定方法
Yuan Detection of epileptic seizure based on EEG signals
CN115563484A (zh) 一种基于生理唤醒识别的街道绿化品质检测方法
CN111671423A (zh) 一种eeg信号的表示方法、分类方法、可视化方法及介质
CN113288157A (zh) 基于深度可分离卷积和改进损失函数的心律失常分类方法
CN113069117A (zh) 一种基于时间卷积神经网络的脑电情绪识别方法及系统
CN112990270A (zh) 一种传统特征与深度特征的自动融合方法
CN109993076A (zh) 一种基于深度学习的白鼠行为分类方法
CN112274154B (zh) 基于脑电样本权重调整的跨被试疲劳驾驶分类方法
CN114129138A (zh) 一种基于时序多尺度混合注意力模型的自动睡眠分期方法
CN112465152B (zh) 一种适用于情绪脑-机接口的在线迁移学习方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant