CN114224300B - 基于三维四元图卷积神经网络的癫痫分类检测系统及方法 - Google Patents

基于三维四元图卷积神经网络的癫痫分类检测系统及方法 Download PDF

Info

Publication number
CN114224300B
CN114224300B CN202210165084.9A CN202210165084A CN114224300B CN 114224300 B CN114224300 B CN 114224300B CN 202210165084 A CN202210165084 A CN 202210165084A CN 114224300 B CN114224300 B CN 114224300B
Authority
CN
China
Prior art keywords
matrix
quaternary
electroencephalogram
signals
column vector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210165084.9A
Other languages
English (en)
Other versions
CN114224300A (zh
Inventor
胡铃越
黎乐怡
马思琪
凌永权
赵楷龙
刘庆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong University of Technology
Original Assignee
Guangdong University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong University of Technology filed Critical Guangdong University of Technology
Priority to CN202210165084.9A priority Critical patent/CN114224300B/zh
Publication of CN114224300A publication Critical patent/CN114224300A/zh
Application granted granted Critical
Publication of CN114224300B publication Critical patent/CN114224300B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/40Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4094Diagnosing or monitoring seizure diseases, e.g. epilepsy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • A61B5/372Analysis of electroencephalograms
    • A61B5/374Detecting the frequency distribution of signals, e.g. detecting delta, theta, alpha, beta or gamma waves
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • Neurology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Artificial Intelligence (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Psychiatry (AREA)
  • Physiology (AREA)
  • Neurosurgery (AREA)
  • Evolutionary Computation (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Psychology (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)

Abstract

本发明提出一种基于三维四元图卷积神经网络的癫痫分类检测系统及方法,涉及生物医学信号处理的的技术领域,首先采集原始脑电信号样本,引入四元数的概念将原始脑电信号样本处理,融合不同脑电波频段的脑电通道信息,然后基于图结构,建立并融合脑电通道的位置特征信息和相对位置特征信息,将通道之间的关系联立,获取新的特征信息,使癫痫发作的信息获取更加多元,然后将获取的信息特征用于随机森林模型的训练,从而对正常脑电信号和癫痫信号进行识别分类,有助于癫痫检测分类准确率和效率的提高,减轻了医生工作负担。

Description

基于三维四元图卷积神经网络的癫痫分类检测系统及方法
技术领域
本发明涉及生物医学信号处理的技术领域,更具体地,涉及一种基于三维四元图卷积神经网络的癫痫分类检测系统及方法。
背景技术
癫痫是一种常见的慢性脑部疾病,指人脑神经系统紊乱时的大脑神经元突发性异常放电,导致中枢神经系统的功能发生短暂障碍。癫痫的特征是突发性、短暂性与反复性,发作时会给人体健康造成伤害,轻则导致记忆力下降、失去意识而造成意外性伤害,重则导致智力低下,甚至发生死亡。
根据癫痫引起的神经元异常发电的原理,脑电信号可以反映出对应的生理和病理信息,在临床癫痫诊断应用中,通过处理脑电信号数据以获取癫痫特征,可以进行癫痫分类检测。目前,有的学者提出利用传统的时频方式,例如利用FFT预处理脑电信号,然后通过传统CNN提取处理后的脑电信号的特征进行癫痫分类检测,但该方式挖掘到的脑电信号提供的信息较单一。除此之外,还有学者提出并采用了其它多种不同的方式来检测提取癫痫特征,包括快速/短时傅里叶变换、非线性动力学系统、模态匹配法、经验模态分解等传统方式,还有基于图论或神经网络分析、小波变换等方式。
现有技术中公开了一种基于脑网络和TSK模糊系统的癫痫脑电识别方法,该方法通过分析多通道脑电信号之间的同步性,构建癫痫病人的脑功能网络,采用复杂网络提取常用拓扑特征参数,最后将全部网络特征作为输入,建立TSK模糊系统模型,学习训练识别癫痫发作时的脑电波形,实现对癫痫发作期脑电信号的精准识别,但多通道脑电信号之间除可能具备的同步性特征之外,也存在相对位置关系信息,通道间的关系并非分割独立,弱化脑电通道间的联系,不考虑这些因素,可能导致特征提取不充分,泛化性不强,进一步也会影响癫痫检测的准确率和检测效率。
发明内容
为解决在癫痫检测中,传统基于脑电信号的分析方法忽略多脑电通道间的相对位置关系及联系,导致癫痫检测准确率和效率低的问题,本发明提出一种基于三维四元图卷积神经网络的癫痫分类检测系统及方法,引入四元数和图结构的概念,以融合脑电信号里不同频段的信息,并结合不同通道的位置信息,将通道之间的关系联立,获取新的特征信息,有助于癫痫检测分类准确率和效率的提高,减轻医生工作负担。
为了达到上述技术效果,本发明的技术方案如下:
一种基于三维四元图卷积神经网络的癫痫分类检测系统,包括:
脑电信号样本采集模块,基于N个通道分别采集每个患者在正常状态与癫痫状态下的脑电信号样本;
原始脑电信号构建模块,将采集到的每个患者在正常状态与癫痫状态下的脑电信号样本组合,形成原始脑电信号;
原始脑电信号处理模块,用于将原始脑电信号处理为δ、θ、α及β四个脑电波频段的信号,并将四个脑电波频段的信号进行处理,并融合为新的四元脑电信号矩阵;
图结构构建模块,基于N个通道脑电信号间的相关系数构造N个通道的图结构,结合图结构得到原始脑电信号的邻接矩阵,基于邻接矩阵确定四元相对位置矩阵;
四元脑电特征矩阵构建模块,用于对新的四元脑电信号矩阵进行四元数运算,得到四元脑电特征矩阵;
特征结合更新模块,所述特征结合更新模块加载了三维图卷积网络,用于更新并结合四元脑电特征矩阵中的四元列向量特征与四元相对邻接位置矩阵中的四元矩阵特征;
癫痫分类检测模块,所述癫痫分类检测模块加载了随机森林模型,将特征结合更新模块更新并结合后的四元列向量特征与四元矩阵特征输入随机森林模型以训练随机森林模型,得到训练好的随机森林训练模型,用于癫痫分类检测。
优选地,所述脑电信号样本采集模块为含N个通道的脑机接口设备,在采集每个患者在正常状态与癫痫状态下的脑电信号样本时,首先设置脑机接口设备的采样率,读取每位患者N个通道的癫痫状态的脑电信号与正常状态的脑电信号,癫痫状态与正常状态分别采集M/2个脑电信号样本点,原始脑电信号构建模块将采集到的每个患者在正常状态与癫痫状态下的脑电信号样本组合,形成原始脑电信号每个通道共M个脑电信号样本点;
设对第h位患者采集到的波长为1~30Hz的原始脑电信号定义为
Figure 611126DEST_PATH_IMAGE001
,其中,t表示M个脑电信号样本点对应的采集时间,满足:t=
Figure 387321DEST_PATH_IMAGE002
h=1,2,…,N,则
Figure 635900DEST_PATH_IMAGE001
表示为:
Figure 765530DEST_PATH_IMAGE003
其中,N×M表示原始脑电信号表征矩阵的行列维度,
Figure 438957DEST_PATH_IMAGE004
表示在第
Figure 995840DEST_PATH_IMAGE005
个采集时间点采集的第N通道的脑电信号。
优选地,原始脑电信号处理模块采用快速傅里叶变换将原始脑电信号Y h (t)处理,对已进行快速傅里叶变换的原始脑电信号Y h (t),以不同的脑电波频段作为窗口长度,加载矩形窗,将已进行快速傅里叶变换的原始脑电信号Y h (t)滤波成δ、θ、αβ四个脑电波频段的信号,其中,δ为1~3Hz的脑电波频段,θ为4~7Hz的脑电波频段,α为8~13Hz的脑电波频段,β为14~30Hz的脑电波频段,δ脑电波频段的信号的矩阵形式表示为:
Figure 997294DEST_PATH_IMAGE006
θ脑电波频段的信号的矩阵形式表示为:
Figure 930615DEST_PATH_IMAGE007
α脑电波频段的信号的矩阵形式表示为:
Figure 458548DEST_PATH_IMAGE008
β脑电波频段的信号的矩阵形式表示为:
Figure 920754DEST_PATH_IMAGE009
NM分别为δ、θ、αβ四个脑电波频段中每一个脑电波频段的信号矩阵的行列维度,
Figure 409504DEST_PATH_IMAGE010
Figure 5570DEST_PATH_IMAGE011
Figure 263376DEST_PATH_IMAGE012
Figure 427641DEST_PATH_IMAGE013
分别表示δ脑电波频段的信号的矩阵形式、θ脑电波频段的信号的矩阵形式、α脑电波频段的信号的矩阵形式及β脑电波频段的信号的矩阵形式;
原始脑电信号处理模块采用傅里叶反变换分别对
Figure 403688DEST_PATH_IMAGE010
Figure 272286DEST_PATH_IMAGE011
Figure 650178DEST_PATH_IMAGE012
Figure 719765DEST_PATH_IMAGE013
进行处理,得到对应的四个时域脑电信号:
Figure 307741DEST_PATH_IMAGE014
,将四个脑电波频段的信号进行处理并融合为新的四元脑电信号矩阵表示为:
Y’=
Figure 120977DEST_PATH_IMAGE015
其中,ijk均表示四元数中的虚数单位,Y’表示四元脑电信号矩阵,
Figure 353375DEST_PATH_IMAGE016
Figure 859443DEST_PATH_IMAGE017
Figure 669136DEST_PATH_IMAGE018
Figure 286062DEST_PATH_IMAGE019
分别表示傅里叶反变换后,在第N个通道,第M个采样点的δ、θ、αβ四个脑电波频段对应的时域信号;四元脑电信号矩阵Y’中的每一个元素均表示为四元数的形式。
优选地,利用脑电信号样本采集模块,基于N个通道分别采集每个患者的脑电信号时,将N个通道视为N个脑电节点,所述图结构构建模块基于N个通道脑电信号间的相关系数构造N个脑电节点的图结构时,设每一个患者的原始脑电信号统一表示为Y,Y的矩阵表达式为:
Figure 372966DEST_PATH_IMAGE020
其中,矩阵的第g行表示第g个脑电通道的脑电信号,设表示为Yg=[Y g1,Y g2,…,Y gM ],矩阵的第z行表示第z个脑电通道的脑电信号,设表示为Yz=[Y z1,Y z2,…,Y zM ],计算每个脑电通道相互之间的相关系数,第g个脑电通道与第z个脑电通道对应的相关系数为
Figure 49935DEST_PATH_IMAGE021
,计算表达为:
Figure 346925DEST_PATH_IMAGE022
其中,cov(YgYz)表示第g个脑电通道的脑电信号Yg与第z个脑电通道的脑电信号Yz的协方差,Var[Yg]表示第g个脑电通道的脑电信号Yg的方差,Var[Yz]表示第z个脑电通道的脑电信号Yz的方差;
最终形成相关系数矩阵ρ,表达式为:
Figure 501962DEST_PATH_IMAGE023
对于相关系数矩阵中的任意一个相关系数
Figure 708953DEST_PATH_IMAGE024
,在满足:
Figure 556823DEST_PATH_IMAGE025
>0.9时,第g个脑电通道对应的脑电节点与第z个脑电通道对应的脑电节点相连,从而得到图结构,g=1,2,...,Nz=1,2,...,N
优选地,设结合图结构得到原始脑电信号的邻接矩阵表示为A,A的表达式为:
A=
Figure 341108DEST_PATH_IMAGE026
将邻接矩阵A内的元素作为四元数的实部,四元数虚部均为零,得出四元邻接矩阵A Q
Figure 299837DEST_PATH_IMAGE027
将患者头颅最高点定义为原点(0,0,0),建立三维坐标系,并设第g个脑电节点的位置坐标为(x g y g z g ),得到位置矩阵P为:
P=
Figure 95755DEST_PATH_IMAGE028
根据位置矩阵P,得到脑电节点的相对位置矩阵R,相对位置矩阵R是一个三维立体矩阵,三维立体矩阵中的任意一层g的矩阵形式表示为:
Figure 114526DEST_PATH_IMAGE029
其中,相对位置矩阵R是一个三维立体矩阵,矩阵形式Rg的第g行中的每一个元素表示(x g y g z g )自身与(x g y g z g )自身之间的相对位置,g=1,2,...,N,所有层叠放在一起,形成三维立体矩阵,将相位位置矩阵R内的元素作为四元数的实部,四元数的虚部均为零,得出四元相对位置矩阵
Figure 386108DEST_PATH_IMAGE030
,四元相对位置矩阵
Figure 148527DEST_PATH_IMAGE030
也为一个三维立体矩阵,任意一层g的矩阵形式表示为:
Figure 64531DEST_PATH_IMAGE031
所有层叠放在一起,形成三维立体矩阵。
优选地,所述四元脑电特征矩阵构建模块对新的四元脑电信号矩阵进行的四元数运算包括取均值、方差、1范数及无穷范数,将均值、方差、1范数及无穷范数作为特征,得到四元脑电特征矩阵X,表达式为:
X=
Figure 988624DEST_PATH_IMAGE032
其中,
Figure 747502DEST_PATH_IMAGE033
表示第g个脑电通道的脑电信号的均值;
Figure 48033DEST_PATH_IMAGE034
表示第g个脑电通道的脑电信号的方差;
Figure 84122DEST_PATH_IMAGE035
i个脑电通道的脑电信号的1范数;
Figure 179117DEST_PATH_IMAGE036
表示第i个脑电通道的脑电信号的无穷范数,g=1,2,...,Nz=1,2,...,N,“4”是特征维度,四元脑电特征矩阵X有N个节点,每个节点有4个四元特征值。
优选地,所述特征结合更新模块加载的三维图卷积网络包括l个交替相连的隐藏层与激活ReLU层;在N个脑电节点中,第g个脑电节点中含有两种特征,第一种为四元脑电特征矩阵X中的第g行,定义为四元列向量特征
Figure 425291DEST_PATH_IMAGE037
,第二种为四元相对位置矩阵
Figure 529513DEST_PATH_IMAGE038
中的第g个矩阵向量,定义为四元矩阵特征
Figure 154530DEST_PATH_IMAGE039
,其中,sv均表示在处理矩阵特征的标志,无具体的物理含义;将四元列向量特征
Figure 686005DEST_PATH_IMAGE037
和四元矩阵特征
Figure 153895DEST_PATH_IMAGE039
输入三维图卷积网络进行l层四元卷积运算,得到更新后的四元列向量特征
Figure 61809DEST_PATH_IMAGE040
和更新后的四元矩阵特征
Figure 806911DEST_PATH_IMAGE041
l表示第l层,Q表示四元卷积运算。
优选地,将四元列向量特征
Figure 509287DEST_PATH_IMAGE042
和四元矩阵特征
Figure 464474DEST_PATH_IMAGE043
输入三维图卷积网络进行l层四元卷积运算时,包括以下更新:
在四元脑电特征矩阵X中含有四元列向量特征
Figure 644920DEST_PATH_IMAGE042
时,从四元脑电特征矩阵X在三维图卷积网络第l层的脑电节点g和脑电节点z开始,将四元列向量特征
Figure 244528DEST_PATH_IMAGE044
和四元列向量特征
Figure 976861DEST_PATH_IMAGE045
连成一列,更新四元列向量特征,更新表达式为:
Figure 294710DEST_PATH_IMAGE046
其中,
Figure 278846DEST_PATH_IMAGE047
表示此时更新后的四元列向量特征;ǁ表示四元列向量特征
Figure 123174DEST_PATH_IMAGE044
和四元列向量特征
Figure 167354DEST_PATH_IMAGE045
连成一列的操作,
Figure 972499DEST_PATH_IMAGE048
表示四元列向量特征对应四元列向量特征进行卷积运算时的权重矩阵,
Figure 760326DEST_PATH_IMAGE049
表示四元列向量特征对应四元列向量特征进行卷积运算时的偏差,
Figure 459161DEST_PATH_IMAGE044
Figure 674241DEST_PATH_IMAGE045
分别表示为四元数的形式为:
Figure 701103DEST_PATH_IMAGE050
Figure 151676DEST_PATH_IMAGE051
在四元相对位置矩阵
Figure 580383DEST_PATH_IMAGE038
中含有四元矩阵特征
Figure 966365DEST_PATH_IMAGE043
时,从四元相对位置矩阵
Figure 746103DEST_PATH_IMAGE038
在三维图卷积网络第l层的脑电节点g和脑电节点z开始,将四元矩阵特征
Figure 366DEST_PATH_IMAGE052
矩阵和四元矩阵特征
Figure 283580DEST_PATH_IMAGE053
矩阵连成一个新的矩阵,更新四元矩阵特征,更新表达式为:
Figure 106043DEST_PATH_IMAGE054
其中,
Figure 966551DEST_PATH_IMAGE055
表示此时更新后的四元矩阵特征,ǁ表示四元矩阵特征
Figure 899872DEST_PATH_IMAGE056
矩阵和四元矩阵特征
Figure 37593DEST_PATH_IMAGE057
矩阵连成一个新的矩阵的操作,
Figure 30956DEST_PATH_IMAGE058
表示四元矩阵特征对应四元矩阵特征进行卷积运算时的权重矩阵,
Figure 378761DEST_PATH_IMAGE059
表示四元矩阵特征对应四元矩阵特征进行卷积运算时的偏差;
在四元相对位置矩阵
Figure 850194DEST_PATH_IMAGE038
中含有四元矩阵特征
Figure 108000DEST_PATH_IMAGE060
时,更新四元矩阵特征,更新表达式为:
Figure 396899DEST_PATH_IMAGE061
其中,
Figure 576207DEST_PATH_IMAGE062
表示此时更新后的四元矩阵特征;
Figure 975965DEST_PATH_IMAGE063
表示四元矩阵特征对应四元列向量特征进行卷积运算时的权重矩阵;
Figure 353856DEST_PATH_IMAGE064
表示四元矩阵特征对应四元列向量特征进行卷积运算时的偏差;
Figure 423443DEST_PATH_IMAGE065
为z脑电节点的四元位置向量;
Figure 886786DEST_PATH_IMAGE066
表示点积。
在四元脑电特征矩阵X中含有四元列向量特征
Figure 559076DEST_PATH_IMAGE067
时,更新四元列向量特征
Figure 791474DEST_PATH_IMAGE068
,更新表达式为:
Figure 31962DEST_PATH_IMAGE069
其中,
Figure 107235DEST_PATH_IMAGE070
表示此时将四元列向量特征
Figure 724161DEST_PATH_IMAGE067
更新为的四元矩阵特征;
Figure 811065DEST_PATH_IMAGE071
表示四元列向量特征对应四元矩阵特征进行卷积运算时的权重矩阵;
Figure 347089DEST_PATH_IMAGE072
表示四元列向量特征对应四元矩阵特征进行卷积运算时的偏差;
Figure 519444DEST_PATH_IMAGE073
表示张量积。
在此,通过分别基于:四元列向量特征
Figure 674482DEST_PATH_IMAGE044
和四元列向量特征
Figure 881473DEST_PATH_IMAGE045
连成一列、四元矩阵特征
Figure 588397DEST_PATH_IMAGE052
矩阵和四元矩阵特征
Figure 248049DEST_PATH_IMAGE057
矩阵连成一个新的矩阵、四元矩阵特征
Figure 472357DEST_PATH_IMAGE060
和四元列向量特征
Figure 533854DEST_PATH_IMAGE045
连接、四元列向量特征
Figure 552625DEST_PATH_IMAGE067
与四元矩阵特征
Figure 824207DEST_PATH_IMAGE060
连接的更新操作,并融合脑电通道的位置特征信息和相对位置特征信息,将通道之间的关系联立,获取新的特征信息,使癫痫发作的信息获取更加多元。
优选地,将更新后的四元列向量特征
Figure 55468DEST_PATH_IMAGE074
、更新后的四元矩阵特征
Figure 237050DEST_PATH_IMAGE075
、更新后的四元矩阵特征
Figure 285778DEST_PATH_IMAGE076
、四元列向量特征
Figure 920022DEST_PATH_IMAGE067
更新为的四元矩阵特征
Figure 220553DEST_PATH_IMAGE077
合并成两个特征,分别沿邻域脑电节点进行卷积运算,得到最终更新后的四元列向量特征
Figure 991063DEST_PATH_IMAGE078
和更新后的四元矩阵特征
Figure 476271DEST_PATH_IMAGE079
,实现四元脑电特征和脑电通道相对位置特征的结合,卷积运算传播规则满足:
Figure 597811DEST_PATH_IMAGE080
Figure 436454DEST_PATH_IMAGE081
;
其中,Ws()表示四元列向量特征自身进行卷积运算时的权重矩阵;bs表示四元列向量特征自身进行卷积运算时的偏差;bv表示四元矩阵特征自身进行卷积运算时的偏差。
本申请还提出一种基于三维四元图卷积神经网络的癫痫分类检测方法,包括:
S1.基于N个通道的脑电信号样本采集模块分别采集每个患者在正常状态与癫痫状态下的脑电信号样本;
S2.利用原始脑电信号构建模块将采集到的每个患者在正常状态与癫痫状态下的脑电信号样本组合,形成原始脑电信号;
S3.利用原始脑电信号处理模块将原始脑电信号处理为δ、θ、α及β四个脑电波频段的信号,将四个脑电波频段的信号进行处理并融合为新的四元脑电信号矩阵;
S4.基于N个通道脑电信号间的相关系数构造N个通道的图结构,结合图结构得到原始脑电信号的邻接矩阵,基于邻接矩阵确定四元相对位置矩阵;
S5.利用四元脑电特征矩阵构建模块对新的四元脑电信号矩阵进行四元数运算得到四元脑电特征矩阵;
S6.利用特征结合更新模块更新并结合四元脑电特征矩阵中的四元列向量特征与四元相对邻接位置矩阵中的四元矩阵特征;
S7.利用癫痫分类检测模块将更新并结合后的四元列向量特征与四元矩阵特征输入随机森林模型以训练随机森林模型,得到训练好的随机森林训练模型,用于癫痫分类检测。
与现有技术相比,本发明技术方案的有益效果是:
本发明提出一种基于三维四元图卷积神经网络的癫痫分类检测系统及方法,首先采集原始脑电信号样本,引入四元数的概念将原始脑电信号样本处理,融合不同脑电波频段的脑电通道信息,然后基于图结构,建立并融合脑电通道的位置特征信息和相对位置特征信息,将通道之间的关系联立,获取新的特征信息,使癫痫发作的信息获取更加多元,然后将获取的信息特征用于随机森林模型的训练,从而对正常脑电信号和癫痫信号进行识别分类,有助于癫痫检测分类准确率和效率的提高,减轻医生工作负担。
附图说明
图1表示本发明实施例1中提出的基于三维四元图卷积神经网络的癫痫分类检测系统的结构图;
图2表示本发明实施例1中提出的四元相对位置矩阵的立体形成的示意图;
图3表示本发明实施例2中提出的特征结合更新模块加载的三维图卷积网络的结构图;
图4表示本发明实施例3中提出的基于三维四元图卷积神经网络的癫痫分类检测方法的示意图。
具体实施方式
附图仅用于示例性说明,不能理解为对本专利的限制;
为了更好地说明本实施例,附图某些部位会有省略、放大或缩小,并不代表实际尺寸;
对于本领域技术人员来说,附图中某些公知内容说明可能省略是可以理解的。
下面结合附图和实施例对本发明的技术方案做进一步的说明。
附图中描述位置关系的仅用于示例性说明,不能理解为对本专利的限制;
实施例1
如图1所示,本实施例提出一种基于三维四元图卷积神经网络的癫痫分类检测系统,参见图1,包括:
脑电信号样本采集模块101,基于N个通道分别采集每个患者在正常状态与癫痫状态下的脑电信号样本;
原始脑电信号构建模块102,将采集到的每个患者在正常状态与癫痫状态下的脑电信号样本组合,形成原始脑电信号;
原始脑电信号处理模块103,用于将原始脑电信号处理为δ、θ、α及β四个脑电波频段的信号,并将四个脑电波频段的信号进行处理,并融合为新的四元脑电信号矩阵;
图结构构建模块104,基于N个通道脑电信号间的相关系数构造N个通道的图结构,结合图结构得到原始脑电信号的邻接矩阵,基于邻接矩阵确定四元相对位置矩阵;
四元脑电特征矩阵构建模块105,用于对新的四元脑电信号矩阵进行四元数运算,得到四元脑电特征矩阵;
特征结合更新模块106,所述特征结合更新模块加载了三维图卷积网络,用于更新并结合四元脑电特征矩阵中的四元列向量特征与四元相对邻接位置矩阵中的四元矩阵特征;
癫痫分类检测模块107,所述癫痫分类检测模块107加载了随机森林模型,将特征结合更新模块106更新并结合后的四元列向量特征与四元矩阵特征输入随机森林模型以训练随机森林模型,得到训练好的随机森林训练模型,用于癫痫分类检测。
在本实施例中,脑电信号样本采集模块101为含N个通道的脑机接口设备,脑机接口是在人脑与外部设备间建立的直接连接通路,可实现脑电信号传输。因癫痫的临床变现取决于异常放电的癫痫灶神经元所在脑部位和痫样放电的扩散途径,一般在癫痫状态时发作持续三十秒至一分钟左右,可自行停止,恢复正常状态,因此,对于每个患者在正常与癫痫状态下的脑电信号均进行采集,可保证获得脑电信息的丰富性。在脑电信号样本采集模块101采集每个患者在正常状态与癫痫状态下的脑电信号样本时,首先设置采样率,本实施例中,设置采样率为512Hz,读取每位患者N个通道的癫痫状态的脑电信号与正常状态的脑电信号,癫痫状态与正常状态分别采集M/2个脑电信号样本点,原始脑电信号构建模块102将采集到的每个患者在正常状态与癫痫状态下的脑电信号样本组合,形成原始脑电信号,每个通道共M个脑电信号样本点。
在脑电信号中,重要信息主要集中于1~30Hz的频段中,设对第h位患者采集到的波长为1~30Hz的原始脑电信号定义为
Figure 186104DEST_PATH_IMAGE001
,其中,t表示M个脑电信号样本点对应的采集时间,满足:t=
Figure 717579DEST_PATH_IMAGE002
h=1,2,…,N,则
Figure 60836DEST_PATH_IMAGE001
表示为:
Figure 968749DEST_PATH_IMAGE082
其中,N×M表示原始脑电信号表征矩阵的行列维度,
Figure 572906DEST_PATH_IMAGE004
表示在第
Figure 275283DEST_PATH_IMAGE005
个采集时间点采集的第N通道的脑电信号。
然后,原始脑电信号处理模块103采用快速傅里叶变换将原始脑电信号Y h (t)处理,处理公式为:
Figure 105835DEST_PATH_IMAGE083
在此,
Figure 410915DEST_PATH_IMAGE084
表示原始脑电信号经快速傅里叶变换后的频域形式的统称,对已进行快速傅里叶变换的原始脑电信号Y h (t),以不同的脑电波频段作为窗口长度,加载矩形窗,将已进行快速傅里叶变换的原始脑电信号Y h (t)滤波成δ、θ、αβ四个脑电波频段的信号,其中,δ为1~3Hz的脑电波频段,θ为4~7Hz的脑电波频段,α为8~13Hz的脑电波频段,β为14~30Hz的脑电波频段,δ脑电波频段的信号的矩阵形式表示为:
Figure 10523DEST_PATH_IMAGE085
θ脑电波频段的信号的矩阵形式表示为:
Figure 883801DEST_PATH_IMAGE086
α脑电波频段的信号的矩阵形式表示为:
Figure 326284DEST_PATH_IMAGE087
β脑电波频段的信号的矩阵形式表示为:
Figure 44841DEST_PATH_IMAGE088
NM分别为δ、θ、αβ四个脑电波频段中每一个脑电波频段的信号矩阵的行列维度,
Figure 764536DEST_PATH_IMAGE010
Figure 933349DEST_PATH_IMAGE011
Figure 738494DEST_PATH_IMAGE012
Figure 526321DEST_PATH_IMAGE013
分别表示δ脑电波频段的信号的矩阵形式、θ脑电波频段的信号的矩阵形式、α脑电波频段的信号的矩阵形式及β脑电波频段的信号的矩阵形式;
原始脑电信号处理模块103采用傅里叶反变换分别对
Figure 959577DEST_PATH_IMAGE010
Figure 174657DEST_PATH_IMAGE011
Figure 201519DEST_PATH_IMAGE012
Figure 793037DEST_PATH_IMAGE013
进行处理,得到对应的四个时域脑电信号:
Figure 80799DEST_PATH_IMAGE014
,将四个脑电波频段的信号进行处理并融合为新的四元脑电信号矩阵表示为:
Y’=
Figure 466781DEST_PATH_IMAGE015
其中,ijk均表示四元数中的虚数单位,Y’表示四元脑电信号矩阵,
Figure 105573DEST_PATH_IMAGE016
Figure 969624DEST_PATH_IMAGE017
Figure 135330DEST_PATH_IMAGE018
Figure 692213DEST_PATH_IMAGE019
分别表示傅里叶反变换后,在第N个通道,第M个采样点的δ、θ、αβ四个脑电波频段对应的时域信号;四元脑电信号矩阵Y’中的每一个元素均表示为四元数的形式。
在本实施例中,利用脑电信号样本采集模块101,基于N个通道分别采集每个患者的脑电信号时,将N个通道视为N个脑电节点,在图结构构建模块104基于N个通道脑电信号间的相关系数构造N个脑电节点的图结构时,设每一个患者的原始脑电信号统一表示为Y,Y的矩阵表达式为:
Figure 693667DEST_PATH_IMAGE089
其中,矩阵的第g行表示第g个脑电通道的脑电信号,设表示为Yg=[Y g1,Y g2,…,Y gM ],矩阵的第z行表示第z个脑电通道的脑电信号,设表示为Yz=[Y z1,Y z2,…,Y zM ],计算每个脑电通道相互之间的相关系数,第g个脑电通道与第z个脑电通道对应的相关系数为
Figure 486042DEST_PATH_IMAGE090
,计算表达为:
Figure 623763DEST_PATH_IMAGE091
其中,cov(YgYz)表示第g个脑电通道的脑电信号Yg与第z个脑电通道的脑电信号Yz的协方差,Var[Yg]表示第g个脑电通道的脑电信号Yg的方差,Var[Yz]表示第z个脑电通道的脑电信号Yz的方差;
最终形成相关系数矩阵ρ,表达式为:
Figure 617127DEST_PATH_IMAGE092
对于相关系数矩阵中的任意一个相关系数
Figure 699352DEST_PATH_IMAGE093
,在满足:
Figure 436364DEST_PATH_IMAGE094
>0.9时,第g个脑电通道对应的脑电节点与第z个脑电通道对应的脑电节点相连,从而得到图结构,g=1,2,...,Nz=1,2,...,N
在本实施例中,基于图结构求邻接矩阵是容易的,对于有若干个节点的图,用一维数组存储节点信息,并用二维数组存储节点之间关系的信息,该二维数组称为邻接矩阵。设结合图结构得到原始脑电信号的邻接矩阵表示为A,A的表达式为:
A=
Figure 694170DEST_PATH_IMAGE026
将邻接矩阵A内的元素作为四元数的实部,四元数虚部均为零,得出四元邻接矩阵A Q
Figure 451910DEST_PATH_IMAGE095
将患者头颅最高点定义为原点(0,0,0),建立三维坐标系,并设第g个脑电节点的位置坐标为(x g y g z g ),得到位置矩阵P为:
P=
Figure 427957DEST_PATH_IMAGE028
根据位置矩阵P,得到脑电节点的相对位置矩阵R,相对位置矩阵R是一个三维立体矩阵,三维立体矩阵中的任意一层g的矩阵形式表示为:
Figure 703080DEST_PATH_IMAGE096
其中,相对位置矩阵R是一个三维立体矩阵,矩阵形式Rg的第g行中的每一个元素表示(x g y g z g )自身与(x g y g z g )自身之间的相对位置,g=1,2,...,N,所有层叠放在一起,形成三维立体矩阵,将相位位置矩阵R内的元素作为四元数的实部,四元数的虚部均为零,得出四元相对位置矩阵
Figure 940026DEST_PATH_IMAGE030
,四元相对位置矩阵
Figure 275193DEST_PATH_IMAGE030
也为一个三维立体矩阵,第一层表示为:
Figure 207377DEST_PATH_IMAGE097
第二层表示为:
Figure 410825DEST_PATH_IMAGE098
任意一层g的矩阵形式表示为:
Figure 643223DEST_PATH_IMAGE099
如图2所示,所有层叠放在一起,形成三维立体矩阵。
在本实施例中,四元脑电特征矩阵构建模块105对新的四元脑电信号矩阵进行的四元数运算包括取均值、方差、1范数及无穷范数,将均值、方差、1范数及无穷范数作为特征,得到四元脑电特征矩阵X,表达式为:
X=
Figure 883712DEST_PATH_IMAGE032
其中,
Figure 834350DEST_PATH_IMAGE033
表示第g个脑电通道的脑电信号的均值;
Figure 575910DEST_PATH_IMAGE100
表示第g个脑电通道的脑电信号的方差;
Figure 662815DEST_PATH_IMAGE035
i个脑电通道的脑电信号的1范数;
Figure 74205DEST_PATH_IMAGE036
表示第i个脑电通道的脑电信号的无穷范数,g=1,2,...,Nz=1,2,...,N,“4”是特征维度,四元脑电特征矩阵X有N个节点,每个节点有4个四元特征值。
然后,利用特征结合更新模块106更新并结合四元脑电特征矩阵中的四元列向量特征与四元相对邻接位置矩阵中的四元矩阵特征,在此,四元脑电特征矩阵中的四元列向量特征与四元相对邻接位置矩阵中的四元矩阵特征代表了脑电通道的位置特征信息和相对位置特征信息,特征结合更新模块106将脑电通道的位置特征信息和相对位置特征信息融合,实现通道之间的关系联立,获取了新的特征信息,使癫痫发作的信息获取更加多元;进一步,癫痫分类检测模块107中加载了随机森林模型,利用癫痫分类检测模块107将特征结合更新模块106更新并结合后的四元列向量特征与四元矩阵特征输入随机森林模型以训练随机森林模型,得到训练好的随机森林训练模型,用于癫痫分类检测。
随机森林(Random Forest,简称RF)拥有广泛的应用前景,可用来预测疾病的风险和病患者的易感性,能够处理具有高维特征的输入样本,评估各个特征在分类问题上的重要性,在本实施例中,随机森林模型包括许多的分类决策树,更新并结合后的四元列向量特征与四元矩阵特征按照7:3的比例划分为训练集样本和测试集样本,随机森林模型要将一个输入样本进行分类,需要将输入样本输入到每棵分类决策树中进行分类,每棵分类决策树独立地发表自己对这个输入样本的看法,进行投票,依据投票情况来确定,获得票数最多的类别,作为随机森林模型的癫痫分类结果。
实施例2
本实施例对实施例1中特征结合更新模块106如何更新并结合四元脑电特征矩阵中的四元列向量特征与四元相对邻接位置矩阵中的四元矩阵特征进行说明。特征结合更新模块106加载的三维图卷积网络如图3所示,该三维图卷积网络(3DGCN)包括l个交替相连的隐藏层与激活ReLU层,即在0~l个层中,每一个层均存在隐藏层与激活ReLU层连接,相对于二维图卷积网络,三维图卷积网络能有效利用空间信息,图卷积与网络学习操作统一起来处理,避免识别率瓶颈问题。
在本实施例中,三维图卷积网络运算没有改变,只是将里面的运算结合为四元数的运算,变成了一个高维的算法,四元数是可以加减乘除的,也可以进行卷积运算,Q代表四元数的卷积运算。具体的,结合实施例1中已进行处理的脑电信号,在N个脑电节点中,第g个脑电节点中含有两种特征,第一种为四元脑电特征矩阵X中的第g行,定义为四元列向量特征
Figure 246560DEST_PATH_IMAGE101
,第二种为四元相对位置矩阵
Figure 791811DEST_PATH_IMAGE102
中的第g个矩阵向量,定义为四元矩阵特征
Figure 733222DEST_PATH_IMAGE103
,其中,sv均表示在处理矩阵特征的标志,无具体的物理含义;将四元列向量特征
Figure 581092DEST_PATH_IMAGE101
和四元矩阵特征
Figure 240744DEST_PATH_IMAGE103
输入三维图卷积网络进行l层四元卷积运算,得到更新后的四元列向量特征
Figure 324106DEST_PATH_IMAGE104
和更新后的四元矩阵特征
Figure 385603DEST_PATH_IMAGE105
l表示第l层,Q表示四元卷积运算。
将四元列向量特征
Figure 404375DEST_PATH_IMAGE101
和四元矩阵特征
Figure 285743DEST_PATH_IMAGE103
输入三维图卷积网络进行l层四元卷积运算时,包括以下更新:
(1)在四元脑电特征矩阵X中含有四元列向量特征
Figure 172796DEST_PATH_IMAGE101
时,从四元脑电特征矩阵X在三维图卷积网络第l层的脑电节点g和脑电节点z开始,将四元列向量特征
Figure 88800DEST_PATH_IMAGE106
和四元列向量特征
Figure 278473DEST_PATH_IMAGE107
连成一列,更新四元列向量特征,更新表达式为:
Figure 912716DEST_PATH_IMAGE108
其中,
Figure 337882DEST_PATH_IMAGE109
表示此时更新后的四元列向量特征;ǁ表示四元列向量特征
Figure 108391DEST_PATH_IMAGE110
和四元列向量特征
Figure 468966DEST_PATH_IMAGE111
连成一列的操作,
Figure 324926DEST_PATH_IMAGE112
表示四元列向量特征对应四元列向量特征进行卷积运算时的权重矩阵,
Figure 553782DEST_PATH_IMAGE113
表示四元列向量特征对应四元列向量特征进行卷积运算时的偏差,
Figure 444378DEST_PATH_IMAGE110
Figure 975853DEST_PATH_IMAGE111
分别表示为四元数的形式为:
Figure 319110DEST_PATH_IMAGE114
Figure 86078DEST_PATH_IMAGE115
(2)在四元相对位置矩阵
Figure 831180DEST_PATH_IMAGE116
中含有四元矩阵特征
Figure 533557DEST_PATH_IMAGE117
时,从四元相对位置矩阵
Figure 364109DEST_PATH_IMAGE116
在三维图卷积网络第l层的脑电节点g和脑电节点z开始,将四元矩阵特征
Figure 934768DEST_PATH_IMAGE118
矩阵和四元矩阵特征
Figure 799956DEST_PATH_IMAGE119
矩阵连成一个新的矩阵,更新四元矩阵特征,更新表达式为:
Figure 673234DEST_PATH_IMAGE120
其中,
Figure 725504DEST_PATH_IMAGE121
表示此时更新后的四元矩阵特征,ǁ表示四元矩阵特征
Figure 99853DEST_PATH_IMAGE122
矩阵和四元矩阵特征
Figure 819547DEST_PATH_IMAGE119
矩阵连成一个新的矩阵的操作,
Figure 863727DEST_PATH_IMAGE123
表示四元矩阵特征对应四元矩阵特征进行卷积运算时的权重矩阵,
Figure 403292DEST_PATH_IMAGE124
表示四元矩阵特征对应四元矩阵特征进行卷积运算时的偏差;
(3)在四元相对位置矩阵
Figure 315754DEST_PATH_IMAGE116
中含有四元矩阵特征
Figure 889955DEST_PATH_IMAGE125
时,更新四元矩阵特征,更新表达式为:
Figure 105035DEST_PATH_IMAGE126
其中,
Figure 397476DEST_PATH_IMAGE127
表示此时更新后的四元矩阵特征;
Figure 848049DEST_PATH_IMAGE128
表示四元矩阵特征对应四元列向量特征进行卷积运算时的权重矩阵;
Figure 542336DEST_PATH_IMAGE129
表示四元矩阵特征对应四元列向量特征进行卷积运算时的偏差;
Figure 928318DEST_PATH_IMAGE130
为z脑电节点的四元位置向量;
Figure 442476DEST_PATH_IMAGE066
表示点积。
(4)在四元脑电特征矩阵X中含有四元列向量特征
Figure 696739DEST_PATH_IMAGE131
时,更新四元列向量特征
Figure 245532DEST_PATH_IMAGE132
,更新表达式为:
Figure 802416DEST_PATH_IMAGE133
其中,
Figure 803870DEST_PATH_IMAGE134
表示此时将四元列向量特征
Figure 861825DEST_PATH_IMAGE135
更新为的四元矩阵特征;
Figure 265124DEST_PATH_IMAGE136
表示四元列向量特征对应四元矩阵特征进行卷积运算时的权重矩阵;
Figure 992909DEST_PATH_IMAGE137
表示四元列向量特征对应四元矩阵特征进行卷积运算时的偏差;
Figure 481659DEST_PATH_IMAGE138
表示张量积。
在进行了(1)~(4)的更新操作之后,将更新后的四元列向量特征
Figure 343304DEST_PATH_IMAGE139
、更新后的四元矩阵特征
Figure 601110DEST_PATH_IMAGE140
、更新后的四元矩阵特征
Figure 499796DEST_PATH_IMAGE141
、四元列向量特征
Figure 475843DEST_PATH_IMAGE135
更新为的四元矩阵特征
Figure 875600DEST_PATH_IMAGE134
合并成两个特征,分别沿邻域脑电节点进行卷积运算,得到最终更新后的四元列向量特征
Figure 987912DEST_PATH_IMAGE142
和更新后的四元矩阵特征
Figure 323079DEST_PATH_IMAGE143
,实现四元脑电特征和脑电通道相对位置特征的结合,卷积运算传播规则满足:
Figure 520842DEST_PATH_IMAGE144
Figure 724290DEST_PATH_IMAGE145
;
其中,Ws()表示四元列向量特征自身进行卷积运算时的权重矩阵;bs表示四元列向量特征自身进行卷积运算时的偏差;bv表示四元矩阵特征自身进行卷积运算时的偏差。
则至此,实现了以实现通道之间的关系联立,获取新的特征信息,使癫痫发作的信息获取更加多元。
实施例3
如图4所示,本实施例提出一种基于三维四元图卷积神经网络的癫痫分类检测方法,包括:
S1.基于N个通道的脑电信号样本采集模块分别采集每个患者在正常状态与癫痫状态下的脑电信号样本;
S2.利用原始脑电信号构建模块将采集到的每个患者在正常状态与癫痫状态下的脑电信号样本组合,形成原始脑电信号;
S3.利用原始脑电信号处理模块将原始脑电信号处理为δ、θ、α及β四个脑电波频段的信号,将四个脑电波频段的信号进行处理并融合为新的四元脑电信号矩阵;
S4.基于N个通道脑电信号间的相关系数构造N个通道的图结构,结合图结构得到原始脑电信号的邻接矩阵,基于邻接矩阵确定四元相对位置矩阵;
S5.利用四元脑电特征矩阵构建模块对新的四元脑电信号矩阵进行四元数运算得到四元脑电特征矩阵;
S6.利用特征结合更新模块更新并结合四元脑电特征矩阵中的四元列向量特征与四元相对邻接位置矩阵中的四元矩阵特征;
S7.利用癫痫分类检测模块将更新并结合后的四元列向量特征与四元矩阵特征输入随机森林模型以训练随机森林模型,得到训练好的随机森林训练模型,用于癫痫分类检测。
显然,本发明的上述实施例仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明权利要求的保护范围之内。

Claims (1)

1.一种基于三维四元图卷积神经网络的癫痫分类检测系统,其特征在于,包括:
脑电信号样本采集模块,基于N个通道分别采集每个患者在正常状态与癫痫状态下的脑电信号样本;
所述脑电信号样本采集模块为含N个通道的脑机接口设备,在采集每个患者在正常状态与癫痫状态下的脑电信号样本时,首先设置脑机接口设备的采样率,读取每位患者N个通道的癫痫状态的脑电信号与正常状态的脑电信号,癫痫状态与正常状态分别采集M/2个脑电信号样本点,原始脑电信号构建模块将采集到的每个患者在正常状态与癫痫状态下的脑电信号样本组合,形成原始脑电信号,每个通道共M个脑电信号样本点;设对第h位患者采集到的频率为1~30Hz的原始脑电信号定义为
Figure 334726DEST_PATH_IMAGE001
,其中,t表示M个脑电信号样本点对应的采集时间,满足:t=
Figure 464356DEST_PATH_IMAGE002
h=1,2,…,N,则
Figure 216411DEST_PATH_IMAGE001
表示为:
Figure 524027DEST_PATH_IMAGE003
其中,N×M表示原始脑电信号表征矩阵的行列维度,
Figure 259902DEST_PATH_IMAGE004
表示在第
Figure 927643DEST_PATH_IMAGE005
个采集时间点采集的第N通道的脑电信号;
原始脑电信号构建模块,将采集到的每个患者在正常状态与癫痫状态下的脑电信号样本组合,形成原始脑电信号;
原始脑电信号处理模块,用于将原始脑电信号处理为δ、θ、α及β四个脑电波频段的信号,并将四个脑电波频段的信号进行处理,并融合为新的四元脑电信号矩阵;
原始脑电信号处理模块采用快速傅里叶变换将原始脑电信号Y h (t)处理,对已进行快速傅里叶变换的原始脑电信号Y h (t),以不同的脑电波频段作为窗口长度,加载矩形窗,将已进行快速傅里叶变换的原始脑电信号Y h (t)滤波成δ、θ、αβ四个脑电波频段的信号,其中,δ为1~3Hz的脑电波频段,θ为4~7Hz的脑电波频段,α为8~13Hz的脑电波频段,β为14~30Hz的脑电波频段,δ脑电波频段的信号的矩阵形式表示为:
Figure 596522DEST_PATH_IMAGE006
θ脑电波频段的信号的矩阵形式表示为:
Figure 324307DEST_PATH_IMAGE007
α脑电波频段的信号的矩阵形式表示为:
Figure 796745DEST_PATH_IMAGE008
β脑电波频段的信号的矩阵形式表示为:
Figure 2599DEST_PATH_IMAGE009
NM分别为δ、θ、αβ四个脑电波频段中每一个脑电波频段的信号矩阵的行列维度,
Figure 729246DEST_PATH_IMAGE010
Figure 627932DEST_PATH_IMAGE011
Figure 817693DEST_PATH_IMAGE012
Figure 827237DEST_PATH_IMAGE013
分别表示δ脑电波频段的信号的矩阵形式、θ脑电波频段的信号的矩阵形式、α脑电波频段的信号的矩阵形式及β脑电波频段的信号的矩阵形式;
原始脑电信号处理模块采用傅里叶反变换分别对
Figure 736287DEST_PATH_IMAGE010
Figure 540295DEST_PATH_IMAGE014
Figure 738058DEST_PATH_IMAGE012
Figure 534982DEST_PATH_IMAGE013
进行处理,得到对应的四个时域脑电信号:
Figure 236222DEST_PATH_IMAGE015
,将四个脑电波频段的信号进行处理并融合为新的四元脑电信号矩阵表示为:
Y'=
Figure 211131DEST_PATH_IMAGE016
其中,ijk均表示四元数中的虚数单位,Y'表示四元脑电信号矩阵,
Figure 896190DEST_PATH_IMAGE017
Figure 44275DEST_PATH_IMAGE018
Figure 616333DEST_PATH_IMAGE019
Figure 27722DEST_PATH_IMAGE020
分别表示傅里叶反变换后,在第N个通道,第M个采样点的δ、θ、αβ四个脑电波频段对应的时域信号;四元脑电信号矩阵Y'中的每一个元素均表示为四元数的形式;
图结构构建模块,基于N个通道脑电信号间的相关系数构造N个通道的图结构,结合图结构得到原始脑电信号的邻接矩阵,基于邻接矩阵确定四元相对位置矩阵;
利用脑电信号样本采集模块,基于N个通道分别采集每个患者的脑电信号时,将N个通道视为N个脑电节点,所述图结构构建模块基于N个通道脑电信号间的相关系数构造N个脑电节点的图结构时,设每一个患者的原始脑电信号统一表示为Y,Y的矩阵表达式为:
Figure 668919DEST_PATH_IMAGE021
其中,矩阵的第g行表示第g个脑电通道的脑电信号,设表示为Yg=[Y g1,Y g2,…,Y gM],矩阵的第z行表示第z个脑电通道的脑电信号,设表示为Yz=[Y z1,Y z2,…,Y zM],计算每个脑电通道相互之间的相关系数,第g个脑电通道与第z个脑电通道对应的相关系数为
Figure 558378DEST_PATH_IMAGE022
,计算表达为:
Figure 296527DEST_PATH_IMAGE023
其中,Cov(YgYz)表示第g个脑电通道的脑电信号Yg与第z个脑电通道的脑电信号Yz的协方差,Var[Yg]表示第g个脑电通道的脑电信号Yg的方差,Var[Yz]表示第z个脑电通道的脑电信号Yz的方差;
最终形成相关系数矩阵ρ,表达式为:
Figure 862506DEST_PATH_IMAGE024
对于相关系数矩阵中的任意一个相关系数
Figure 256579DEST_PATH_IMAGE025
,在满足:
Figure 684149DEST_PATH_IMAGE026
>0.9时,第g个脑电通道对应的脑电节点与第z个脑电通道对应的脑电节点相连,从而得到图结构,g=1,2,...,Nz=1,2,...,N
设结合图结构得到原始脑电信号的邻接矩阵表示为A,A的表达式为:
A=
Figure 480066DEST_PATH_IMAGE027
将邻接矩阵A内的元素作为四元数的实部,四元数虚部均为零,得出四元邻接矩阵A Q
Figure 983991DEST_PATH_IMAGE028
将患者头颅最高点定义为原点(0,0,0),建立三维坐标系,并设第g个脑电节点的位置坐标为(x g y g z g ),得到位置矩阵P为:
P=
Figure 865360DEST_PATH_IMAGE029
根据位置矩阵P,得到脑电节点的相对位置矩阵R,相对位置矩阵R是一个三维立体矩阵,三维立体矩阵中的任意一层g的矩阵形式表示为:
Figure 893358DEST_PATH_IMAGE030
其中,相对位置矩阵R是一个三维立体矩阵,矩阵形式Rg的第g行中的每一个元素表示(x g y g z g )自身与(x g y g z g )自身之间的相对位置,g=1,2,...,N,所有层叠放在一起,形成三维立体矩阵,将相对位置矩阵R内的元素作为四元数的实部,四元数的虚部均为零,得出四元相对位置矩阵
Figure 543783DEST_PATH_IMAGE031
,四元相对位置矩阵
Figure 202297DEST_PATH_IMAGE031
也为一个三维立体矩阵,任意一层g的矩阵形式表示为:
Figure 820229DEST_PATH_IMAGE032
所有层叠放在一起,形成三维立体矩阵;
四元脑电特征矩阵构建模块,用于对新的四元脑电信号矩阵进行四元数运算,得到四元脑电特征矩阵;
所述四元脑电特征矩阵构建模块对新的四元脑电信号矩阵进行的四元数运算包括取均值、方差、1范数及无穷范数,将均值、方差、1范数及无穷范数作为特征,得到四元脑电特征矩阵X,表达式为:
X=
Figure 651919DEST_PATH_IMAGE033
其中,
Figure 156850DEST_PATH_IMAGE034
表示第g个脑电通道的脑电信号的均值;
Figure 251845DEST_PATH_IMAGE035
表示第g个脑电通道的脑电信号的方差;
Figure 842226DEST_PATH_IMAGE036
表示第g个脑电通道的脑电信号的1范数;
Figure 166022DEST_PATH_IMAGE037
表示第g个脑电通道的脑电信号的无穷范数,g=1,2,...,N,“4”是特征维度,四元脑电特征矩阵X有N个节点,每个节点有4个四元特征值;
特征结合更新模块,所述特征结合更新模块加载了三维图卷积网络,用于更新并结合四元脑电特征矩阵中的四元列向量特征与四元相对位置矩阵中的四元矩阵特征;
所述特征结合更新模块加载的三维图卷积网络包括l个交替相连的隐藏层与激活ReLU层;在N个脑电节点中,第g个脑电节点中含有两种特征,第一种为四元脑电特征矩阵X中的第g行,定义为四元列向量特征
Figure 791038DEST_PATH_IMAGE038
,第二种为四元相对位置矩阵
Figure 853672DEST_PATH_IMAGE039
中的第g个矩阵向量,定义为四元矩阵特征
Figure 931350DEST_PATH_IMAGE040
,其中,sv均表示在处理矩阵特征的标志,无具体的物理含义;将四元列向量特征
Figure 573684DEST_PATH_IMAGE041
和四元矩阵特征
Figure 302474DEST_PATH_IMAGE040
输入三维图卷积网络进行l层四元卷积运算,得到更新后的四元列向量特征
Figure 473693DEST_PATH_IMAGE042
和更新后的四元矩阵特征
Figure 38666DEST_PATH_IMAGE043
l表示第l层,Q表示四元卷积运算;
将四元列向量特征
Figure 750270DEST_PATH_IMAGE041
和四元矩阵特征
Figure 349879DEST_PATH_IMAGE040
输入三维图卷积网络进行l层四元卷积运算时,包括以下更新:
在四元脑电特征矩阵X中含有四元列向量特征
Figure 702451DEST_PATH_IMAGE041
时,从四元脑电特征矩阵X在三维图卷积网络第l层的脑电节点g和脑电节点z开始,将四元列向量特征
Figure 489141DEST_PATH_IMAGE044
和四元列向量特征
Figure 207698DEST_PATH_IMAGE045
连成一列,更新四元列向量特征,更新表达式为:
Figure 661813DEST_PATH_IMAGE046
其中,
Figure 237151DEST_PATH_IMAGE047
表示此时更新后的四元列向量特征;ǁ表示四元列向量特征
Figure 25985DEST_PATH_IMAGE048
和四元列向量特征
Figure 548233DEST_PATH_IMAGE049
连成一列的操作,
Figure 856854DEST_PATH_IMAGE050
表示四元列向量特征对应四元列向量特征进行卷积运算时的权重矩阵,
Figure 540777DEST_PATH_IMAGE051
表示四元列向量特征对应四元列向量特征进行卷积运算时的偏差,
Figure 52792DEST_PATH_IMAGE048
Figure 378731DEST_PATH_IMAGE052
分别表示为四元数的形式为:
Figure 338597DEST_PATH_IMAGE053
Figure 458999DEST_PATH_IMAGE054
在四元相对位置矩阵
Figure 973157DEST_PATH_IMAGE039
中含有四元矩阵特征
Figure 820896DEST_PATH_IMAGE040
时,从四元相对位置矩阵
Figure 838531DEST_PATH_IMAGE039
在三维图卷积网络第l层的脑电节点g和脑电节点z开始,将四元矩阵特征
Figure 395414DEST_PATH_IMAGE055
和四元矩阵特征
Figure 928027DEST_PATH_IMAGE056
连成一个新的矩阵,更新四元矩阵特征,更新表达式为:
Figure 330189DEST_PATH_IMAGE057
其中,
Figure 218642DEST_PATH_IMAGE058
表示此时更新后的四元矩阵特征,ǁ表示四元矩阵特征
Figure 680847DEST_PATH_IMAGE059
和四元矩阵特征
Figure 638439DEST_PATH_IMAGE060
连成一个新的矩阵的操作,
Figure 906609DEST_PATH_IMAGE061
表示四元矩阵特征对应四元矩阵特征进行卷积运算时的权重矩阵,
Figure 898836DEST_PATH_IMAGE062
表示四元矩阵特征对应四元矩阵特征进行卷积运算时的偏差;
在四元相对位置矩阵
Figure 781210DEST_PATH_IMAGE039
中含有四元矩阵特征
Figure 226098DEST_PATH_IMAGE063
时,更新四元矩阵特征,更新表达式为:
Figure 235642DEST_PATH_IMAGE064
其中,
Figure 82376DEST_PATH_IMAGE065
表示此时更新后的四元矩阵特征;
Figure 948701DEST_PATH_IMAGE066
表示四元矩阵特征对应四元列向量特征进行卷积运算时的权重矩阵;
Figure 631617DEST_PATH_IMAGE067
表示四元矩阵特征对应四元列向量特征进行卷积运算时的偏差;
Figure 444852DEST_PATH_IMAGE068
为z脑电节点的四元位置向量;
Figure 146092DEST_PATH_IMAGE070
表示点积;在四元脑电特征矩阵X中含有四元列向量特征
Figure 121001DEST_PATH_IMAGE071
时,更新表达式为:
Figure 55328DEST_PATH_IMAGE072
其中,
Figure 203413DEST_PATH_IMAGE073
表示此时将四元列向量特征
Figure 24738DEST_PATH_IMAGE074
更新为的四元矩阵特征;
Figure 170549DEST_PATH_IMAGE075
表示四元列向量特征对应四元矩阵特征进行卷积运算时的权重矩阵;
Figure 811745DEST_PATH_IMAGE076
表示四元列向量特征对应四元矩阵特征进行卷积运算时的偏差;
Figure 711656DEST_PATH_IMAGE077
表示张量积;
将更新后的四元列向量特征
Figure 387488DEST_PATH_IMAGE047
、更新后的四元矩阵特征
Figure 766517DEST_PATH_IMAGE078
、更新后的四元矩阵特征
Figure 160589DEST_PATH_IMAGE065
、四元列向量特征
Figure 853739DEST_PATH_IMAGE079
更新为的四元矩阵特征
Figure 633345DEST_PATH_IMAGE080
合并成两个特征,分别沿邻域脑电节点进行卷积运算,得到最终更新后的四元列向量特征
Figure 386537DEST_PATH_IMAGE081
和更新后的四元矩阵特征
Figure 2326DEST_PATH_IMAGE082
,实现四元脑电特征和脑电通道相对位置特征的结合,卷积运算传播规则满足:
Figure 295904DEST_PATH_IMAGE083
Figure 946329DEST_PATH_IMAGE084
其中,Ws()表示四元列向量特征自身进行卷积运算时的权重矩阵;bs表示四元列向量特征自身进行卷积运算时的偏差;bv表示四元矩阵特征自身进行卷积运算时的偏差;
癫痫分类检测模块,所述癫痫分类检测模块加载了随机森林模型,将特征结合更新模块更新并结合后的四元列向量特征与四元矩阵特征输入随机森林模型以训练随机森林模型,得到训练好的随机森林训练模型,用于癫痫分类检测。
CN202210165084.9A 2022-02-23 2022-02-23 基于三维四元图卷积神经网络的癫痫分类检测系统及方法 Active CN114224300B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210165084.9A CN114224300B (zh) 2022-02-23 2022-02-23 基于三维四元图卷积神经网络的癫痫分类检测系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210165084.9A CN114224300B (zh) 2022-02-23 2022-02-23 基于三维四元图卷积神经网络的癫痫分类检测系统及方法

Publications (2)

Publication Number Publication Date
CN114224300A CN114224300A (zh) 2022-03-25
CN114224300B true CN114224300B (zh) 2022-07-12

Family

ID=80747901

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210165084.9A Active CN114224300B (zh) 2022-02-23 2022-02-23 基于三维四元图卷积神经网络的癫痫分类检测系统及方法

Country Status (1)

Country Link
CN (1) CN114224300B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106909784A (zh) * 2017-02-24 2017-06-30 天津大学 基于二维时频图像深度卷积神经网络的癫痫脑电识别方法
CN109480833A (zh) * 2018-08-30 2019-03-19 北京航空航天大学 基于人工智能的癫痫患者脑电信号的预处理和识别方法
CN111657935A (zh) * 2020-05-11 2020-09-15 浙江大学 一种基于层次图卷积神经网络的癫痫脑电识别系统、终端及存储介质
CN112294337A (zh) * 2020-09-29 2021-02-02 山东师范大学 基于线性图卷积神经网络的癫痫检测系统
CN113229829A (zh) * 2021-04-15 2021-08-10 广东工业大学 一种四元数脑电信号提取方法及系统
WO2021237918A1 (zh) * 2020-05-25 2021-12-02 五邑大学 基于gpdc图卷积神经网络的疲劳检测方法、装置及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201336475A (zh) * 2012-03-01 2013-09-16 Univ Nat Taiwan 擁有即時學習機制之癲癇發作預測方法、模組及裝置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106909784A (zh) * 2017-02-24 2017-06-30 天津大学 基于二维时频图像深度卷积神经网络的癫痫脑电识别方法
CN109480833A (zh) * 2018-08-30 2019-03-19 北京航空航天大学 基于人工智能的癫痫患者脑电信号的预处理和识别方法
CN111657935A (zh) * 2020-05-11 2020-09-15 浙江大学 一种基于层次图卷积神经网络的癫痫脑电识别系统、终端及存储介质
WO2021237918A1 (zh) * 2020-05-25 2021-12-02 五邑大学 基于gpdc图卷积神经网络的疲劳检测方法、装置及存储介质
CN112294337A (zh) * 2020-09-29 2021-02-02 山东师范大学 基于线性图卷积神经网络的癫痫检测系统
CN113229829A (zh) * 2021-04-15 2021-08-10 广东工业大学 一种四元数脑电信号提取方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于随机森林癫痫患者脑电数据的分析研究;盛晓欣等;《中国数字医学》;20200115(第01期);第41-43页 *

Also Published As

Publication number Publication date
CN114224300A (zh) 2022-03-25

Similar Documents

Publication Publication Date Title
Nogay et al. Detection of epileptic seizure using pretrained deep convolutional neural network and transfer learning
CN111657935B (zh) 一种基于层次图卷积神经网络的癫痫脑电识别系统、终端及存储介质
Ibrahim et al. Electroencephalography (EEG) signal processing for epilepsy and autism spectrum disorder diagnosis
US20110144519A1 (en) System and Methods for Neurologic Monitoring and Improving Classification and Treatment of Neurologic States
Yang et al. Removal of electrooculogram artifacts from electroencephalogram using canonical correlation analysis with ensemble empirical mode decomposition
US20070225932A1 (en) Methods, systems and computer program products for extracting paroxysmal events from signal data using multitaper blind signal source separation analysis
CN113191225B (zh) 一种基于图注意力网络的情绪脑电识别方法及系统
CN112450947B (zh) 一种针对情绪唤醒度的动态脑网络分析方法
CN114052735A (zh) 一种基于深度领域自适应的脑电情绪识别方法及系统
CN112641451B (zh) 基于单通道脑电信号多尺度残差网络睡眠分期方法及系统
Li et al. Implementation of EEG emotion recognition system based on hierarchical convolutional neural networks
Agarwal et al. Fusion of pattern-based and statistical features for Schizophrenia detection from EEG signals
CN114209323B (zh) 一种识别情绪的方法以及基于脑电数据的情绪识别模型
CN110338760B (zh) 一种基于脑电图频域数据的精神分裂症三分类方法
Fatimah et al. A multi-modal assessment of sleep stages using adaptive Fourier decomposition and machine learning
CN114224300B (zh) 基于三维四元图卷积神经网络的癫痫分类检测系统及方法
Jagannath et al. A novel Bayesian deep learning methodology for enhanced foetal cardiac signal mining
CN116421200A (zh) 一种基于并行训练的多任务混合模型的脑电情感分析方法
Dutta et al. A predictive method for emotional sentiment analysis by machine learning from electroencephalography of brainwave data
Nagwanshi et al. Wearable Sensors with Internet of Things (IoT) and Vocabulary-Based Acoustic Signal Processing for Monitoring Children's Health
Rahman et al. An End-to-End Deep Learning Model for Mental Arithmetic Task Classification from Multi-Channel EEG
CN114330422A (zh) 一种实时估计脑电情感特征的跨被试迁移学习方法
Elisha et al. EEG feature extraction using common spatial pattern with spectral graph decomposition
Kang et al. A sleep stage classification method using deep learning by extracting the characteristics of frequency domain from a single EEG channel
Shoieb et al. Neurological disorder detection of brain abnormal activities using a new enhanced computer-aided model

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant