CN111956219A - 基于脑电信号的情绪特征识别方法、识别及调节系统 - Google Patents

基于脑电信号的情绪特征识别方法、识别及调节系统 Download PDF

Info

Publication number
CN111956219A
CN111956219A CN202010877066.4A CN202010877066A CN111956219A CN 111956219 A CN111956219 A CN 111956219A CN 202010877066 A CN202010877066 A CN 202010877066A CN 111956219 A CN111956219 A CN 111956219A
Authority
CN
China
Prior art keywords
emotion
electroencephalogram
data
wavelet
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010877066.4A
Other languages
English (en)
Other versions
CN111956219B (zh
Inventor
孙明旭
牛先平
裴绪群
申涛
徐元
朱修缙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhoucun Special Education Center
University of Jinan
Original Assignee
Zhoucun Special Education Center
University of Jinan
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhoucun Special Education Center, University of Jinan filed Critical Zhoucun Special Education Center
Priority to CN202010877066.4A priority Critical patent/CN111956219B/zh
Publication of CN111956219A publication Critical patent/CN111956219A/zh
Application granted granted Critical
Publication of CN111956219B publication Critical patent/CN111956219B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4836—Diagnosis combined with treatment in closed-loop systems or methods
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7203—Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7225—Details of analog processing, e.g. isolation amplifier, gain or sensitivity adjustment, filtering, baseline or drift compensation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7253—Details of waveform analysis characterised by using transforms
    • A61B5/726—Details of waveform analysis characterised by using transforms using Wavelet transforms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/08—Other bio-electrical signals
    • A61M2230/10—Electroencephalographic signals
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biomedical Technology (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Pathology (AREA)
  • Psychiatry (AREA)
  • Biophysics (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Physiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychology (AREA)
  • Power Engineering (AREA)
  • Anesthesiology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Social Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Acoustics & Sound (AREA)
  • Hospice & Palliative Care (AREA)
  • Hematology (AREA)
  • Evolutionary Computation (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本公开提出了基于脑电信号的情绪特征识别方法、识别及调节系统，包括：获取情绪脑电数据，对数据进行预处理；对预处理后的数据中的眼电伪迹，利用小波系数做阈值处理，完成小波阈值去噪，采用小波包分解重构信号；对于小波阈值去噪后重构的信号利用带通滤波器分解，再利用快速傅里叶变换后计算各数据点的能量值并将其相加，将计算得到的能量和作为特征向量；计算得到每个样本的特征向量后，利用分类器对特征向量进行分类，识别情绪。本公开技术方案将识别出的脑电信号情绪结果可视化的显示到界面，可以实时的反馈情绪状态，从而对于自闭症儿童的音乐治疗效果可以系统的评定。

Description

基于脑电信号的情绪特征识别方法、识别及调节系统
技术领域
本公开属于情绪特征识别技术领域，尤其涉及基于脑电信号的情绪特征识别方法、识别及调节系统。
背景技术
本部分的陈述仅仅是提供了与本公开相关的背景技术信息，不必然构成在先技术。
情绪特征的准确识别有助于后续训练系统的发展，例如自闭症情绪特征的识别，目前临床治疗多采用特殊教育、心理行为治疗等综合性干预方法。其中，音乐干预治疗应用的越来越广泛。音乐治疗的基本原理就是运用人对音乐的反应规律来对人的生理、心理和行为进行调节，改变紊乱的生理反应和失调的行为方式，建立新的合适的反应方式。
目前，对于自闭症儿童传统的音乐治疗方法需要专业的音乐治疗师在患者一旁进行辅助治疗，判断出患儿的情绪状态，根据当前情绪状态手动播放对应的音乐进行治疗。传统的音乐治疗方法将音乐分为正性音乐、负性音乐和中性音乐，将自闭症儿童情绪状态分为内敛自闭型、外显冲动型和平静类型。在音乐治疗之前，治疗师根据自闭症儿童的情绪状态播放与其情绪类型相同的同质音乐，逐渐过渡到与其情绪类型相反的异质音乐，最终的目的是使其情绪状态趋于稳定，最终播放中性音乐。虽然传统的音乐治疗方法也能达到治疗调节的效果，提高自闭症儿童的注意力。
传统的音乐治疗系统、可视音乐系统需要人为的操作软件播放音乐及修改灯光，在发现自闭症儿童的情绪转变后，手动去修改音乐配合自闭症儿童的情绪变化，通过这种方式来进行音乐治疗，存储识别精度不高，不能针对实时脑电数据进行及时调整。
发明内容
为克服上述现有技术的不足，本公开提供了基于脑电信号的情绪特征识别方法，能够准确的识别出情绪特征。
为实现上述目的，本公开的一个或多个实施例提供了如下技术方案：
第一方面，公开了基于脑电信号的情绪特征识别方法，包括：
获取情绪脑电数据，对数据进行预处理；
对预处理后的数据中的眼电伪迹，利用小波系数做阈值处理，完成小波阈值去噪，采用小波包分解重构信号；
对于小波阈值去噪后重构的信号利用带通滤波器分解，再利用快速傅里叶变换后计算各数据点的能量值并将其相加，将计算得到的能量和作为特征向量；
计算得到每个样本的特征向量后，利用分类器对特征向量进行分类，识别情绪。
第二方面，公开了基于脑电信号的情绪特征识别系统，包括：
脑电采集设备，用于获取情绪脑电数据；
处理器，被配置为：对获取的情绪脑电数据进行预处理；
对预处理后的数据中的眼电伪迹，利用小波系数做阈值处理，完成小波阈值去噪，采用小波包分解重构信号；
对于小波阈值去噪后重构的信号利用带通滤波器分解，再利用快速傅里叶变换后计算各数据点的能量值并将其相加，将计算得到的能量和作为特征向量；
计算得到每个样本的特征向量后，利用分类器对特征向量进行分类，识别情绪；
显示设备，被配置为：将处理器识别出的情绪利用GUI界面显示识别结果。
第三方面，公开了基于脑电信号的情绪调节系统，包括：
基于脑电信号的情绪特征识别系统及调节模块；
所述基于脑电信号的情绪特征识别系统实现对情绪的识别并传输至调节模块；
所述调节模块被配置为基于所识别结果播放对应的音乐。
第四方面，公开了基于脑电信号的情绪调节方法，包括：
利用基于脑电信号的情绪特征识别方法实现对情绪的识别；
基于所识别结果播放对应的音乐。
以上一个或多个技术方案存在以下有益效果：
本公开技术方案将识别出的脑电信号情绪结果可视化的显示到界面，可以实时的反馈情绪状态，从而对于自闭症儿童的音乐治疗效果可以系统的评定。并且系统会根据识别的情绪状态播放对应性质的音乐，老师也可以在一旁手动操作。这大大减轻了音乐治疗师的负担，可以在音乐治疗中起到辅助作用。
本发明附加方面的优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
构成本公开的一部分的说明书附图用来提供对本公开的进一步理解，本公开的示意性实施例及其说明用于解释本公开，并不构成对本公开的不当限定。
图1为本公开实施例子的基于脑电信号的自闭症儿童的音乐调节系统示意图；
图2为本公开实施例子的基于脑电信号的自闭症儿童的音乐调节系统软件设计的示意图；
图3为本公开实施例子的脑电信号预处理前后的效果图；
图4为本公开实施例子的预处理后的脑电信号AF3通道提取的频带能量特征对比图。
具体实施方式
应该指出，以下详细说明都是示例性的，旨在对本公开提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本公开所属技术领域的普通技术人员通常理解的相同含义。
需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本公开的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。
本公开技术方案则是将脑电的情绪识别技术应用在自闭症识别上，通过实时的脑电识别分类情绪，并在软件上显示情绪的变化，以及根据情绪变化自动播放对应类型的音乐。
本实施例公开了基于脑电信号的情绪特征识别方法，包括：
获取情绪脑电数据，对数据进行预处理；
对预处理后的数据中的眼电伪迹，利用小波系数做阈值处理，完成小波阈值去噪，采用小波包分解重构信号；
对于小波阈值去噪后重构的信号利用带通滤波器分解，再利用快速傅里叶变换后计算各数据点的能量值并将其相加，将计算得到的能量和作为特征向量；
计算得到每个样本的特征向量后，利用分类器对特征向量进行分类，识别情绪。
具体实施例子中，脑电信号采集：Emotiv EPOC+实时采集脑电信号，将脑电信号的数据流实时存储.csv文件，并实时更新该文件。官方给的SDK 开发包是python文件，需要用python读取存储数据流；
实时分析处理信号：每隔10s读取一次.csv文件，对信号进行预处理及特征提取分类，分类得到正确的识别结果；
GUI界面显示识别结果：读取识别出的结果；
播放同质音乐：编程控制音乐播放，将识别结果与音乐播放指令对应。
基于自闭症儿童脑电信号的音乐调节系统使用EMOTIV EPOC+14通道移动式Brainwear。这款脑电设备具有14个电极，分别位于AF3，F7，F3， FC5，T7，P7，O1，O2，P8，T8，FC6，F4，F8和AF4。
该设备不需要弄湿帽子即可传导脑电信号。采样率是128Hz，带宽是 0.2-45Hz。采集数据通过设备自带EmotivPRO软件采集并通过官方给出的 SDK开发包进行实时的数据流传输。在设备的官方网站中提到，耳机中有大量的信号处理和滤波功能，可以去除电源噪声和谐波频率。所以在处理信号时我们针对其他干扰信号即可。
在采集得到自闭症儿童的情绪脑电数据后，对数据进行预处理以及特征提取分类的工作。在原始脑电信号中，主要存在呼吸、皮电、心电等低频噪声和肌电产生的高频噪声，首先选用1hz到45hz的五阶巴特沃斯带通滤波器将明显的噪声去除。
经过滤波后，明显的噪声信号已被去除，但是还存在伪迹，最为主要的就是眼电伪迹。对于伪迹的处理，采用小波包分解重构信号，对信号做进一步的分析和提取。我们采用db4基函数对信号进行多尺度分解，小波分解以后，需要在细节分量部分对小波系数做阈值处理，完成小波阈值去噪。本系统采用小波软阈值去噪算法。
在阈值原则的选择上选取minimaxi。信号f(t)的长度为N，采集信号长度为7680(128hz*60s)，则minimaxi表示如下：
Figure RE-GDA0002706843280000051
n表示第n个数据点。
阈值函数选择软阈值，软阈值的函数表达式为：
Figure RE-GDA0002706843280000061
式中，wj,k为处理前的小波系数；w'j,k为处理后的小波系数估计值；T 为阈值。
经过滤波和小波阈值去噪后，尖锐的噪声信号以及眼电伪迹都基本消除。对于小波阈值去噪后重构的信号我们利用一系列Butterworth带通滤波器将其分解为theta(1Hz-3Hz)、alpha(4Hz-7Hz)、beta(8Hz-12Hz)和gamma(12Hz-30Hz)四个频带，再利用快速傅里叶变换后计算各数据点的能量值并将其相加，将计算得到的能量和作为特征。每一次实验对应一个 56维(14channels×4powers)的特征样本。对于第i个频带的脑电信号xi(n)，它对应的能量公式为：
Figure RE-GDA0002706843280000062
式中，Xi(k)是信号xi(n)对应的快速傅里叶变换结果，M为快速傅里叶变换的长度。
在计算得到每个样本的特征向量后，对特征进行分类，本系统运用了 SVM分类器对三种情绪类型分类。
利用LIBSVM中的基于径向基核函数的SVM模型对其进行训练分类。在得到每个样本的特征向量后，样本标签为{-1，0，1}，分别代表负性中性和正性情绪。利用10折交叉验证计算分类识别的准确率，得到模型后再对数据进行预测。
支持向量机SVM(Support Vector Machine)是90年代中期发展起来的基于统计学习的一种机器学习算法，在这个算法中我们将所有数据在N(N 为特征总数)维空间中用点标出，寻找一个可以将训练样本点分割开的超平面，在线性可分的情况下，训练样本完全被分开的超平面有一个或多个， SVM的目标就是找到一个与数据点有最大间隔的最优的超平面，保证分类准确率最高。本系统利用SVM分类器对特征样本进行正中负情绪的三分类。
更为具体的实施例子中，脑电信号预处理效果图如图3所示：
首先选用1hz到45hz的五阶巴特沃斯带通滤波器将明显的噪声去除，再采用db4基函数对信号进行多尺度分解，小波分解以后，需要在细节分量部分对小波系数做阈值处理，完成小波阈值去噪。本系统采用小波软阈值去噪算法。可以发现尖锐的噪声信号都已经去除。
脑电信号提取频带能量特征三种情绪的对比图如图4所示：
通过提取各频带的能量特征，三种情绪的各波段的能量值发现正性情绪时能量最高，平静情绪时能量最低。
对于特征向量的分类准确率如表1所示：
表1
Figure RE-GDA0002706843280000071
提取特征后，得到一个56维(14channels×4powers)的特征向量。在得到特征向量后，利用SVM分类器分别对theta(1Hz-3Hz)、alpha(4Hz-7Hz)、 beta(8Hz-12Hz)和gamma(12Hz-30Hz)四个频带的频带能量分类和四个频带的频带能量一起进行分类。
本方案采用EMOTIV EPOC+ 14通道的脑电采集设备，将自闭症儿童的情绪分为冲动外显情绪，平静情绪，以及内敛自闭情绪三种类型。采集到自闭症儿童的脑电波后，经过带通滤波，利用小波分解对其细节分量阈值去噪进行预处理，通过提取频带功率特征，使用SVM算法分类出三种类型的情绪。根据播放同质音乐的原则，使其最终达到平静状态，从而达到音乐干预治疗的目的。该系统将识别出的脑电信号可视化的显示到界面，可以实时的反馈情绪状态，从而对于自闭症儿童的音乐治疗效果可以系统的评定。
另一实施例子中，基于脑电信号的情绪特征识别系统框图，如图1所示。
脑电采集设备，用于获取情绪脑电数据；
处理器，被配置为：对获取的情绪脑电数据进行预处理；
对预处理后的数据中的眼电伪迹，利用小波系数做阈值处理，完成小波阈值去噪，采用小波包分解重构信号；
对于小波阈值去噪后重构的信号利用带通滤波器分解，再利用快速傅里叶变换后计算各数据点的能量值并将其相加，将计算得到的能量和作为特征向量；
计算得到每个样本的特征向量后，利用分类器对特征向量进行分类，识别情绪；
显示设备，被配置为：将处理器识别出的情绪利用GUI界面显示识别结果。
具体的，自闭症儿童需要佩戴脑电帽，采集到自闭症儿童的脑电信号后，对脑电信号进行预处理以及特征提取并根据前期训练好的情绪模型进行分类。系统实时检测，形成反馈。
再次参见附图2所示，公开了基于脑电信号的情绪调节系统，包括：
基于脑电信号的情绪特征识别系统及调节模块；
所述基于脑电信号的情绪特征识别系统实现对情绪的识别并传输至调节模块；
所述调节模块被配置为基于所识别结果播放对应的音乐。
另一实施例子中，公开了基于脑电信号的情绪调节方法，包括：
利用基于脑电信号的情绪特征识别方法实现对情绪的识别；
基于所识别结果播放对应的音乐。
具体的调节时，根据音乐治疗心理状态同质的原则，对于内敛自闭型患者，在可视音乐治疗的初始阶段，应该首先从负性音乐开始，然后逐渐过度到正性音乐，治疗的目标是使其心理状态趋于平静，最终采用的是中性音乐。对于外显冲动型患者，在音乐治疗的初始阶段，应该首先选用正性音乐，然后逐渐过度到负性音乐，治疗的目标同样是使其心理状态趋于平静，最终采用的也是中性音乐。
假设自闭症儿童的初期情绪经系统识别检测为内敛自闭型情绪，则播放与其情绪类型相吻合的同性音乐，使其与音乐共鸣。当音乐性质与人的精神节律同步，才容易与人的情绪产生共鸣。系统每隔10s会输出一次情绪结果，播放音乐后若连续出现三次平静情绪，则在播放完负性歌曲后播放中性音乐，这里的目的是承上启下的作用。在播放完一首中性音乐后，播放与其情绪类型相反的正性音乐，当音乐与自闭症儿童的情绪产生共鸣以后，就可以逐渐变换音乐色彩情绪，变哀伤失落为优美扜情。在播放正性音乐时，由于音乐性质与自闭症儿童的情绪类型不符，自闭症儿童会变得躁动不安。系统在检测到自闭症儿童的情绪类型不再平静后，在正性音乐播放完毕后切换至中性音乐。并通过与音乐治疗师互动观察自闭症儿童的注意力以及情绪状态，达到音乐治疗的目的。自闭症儿童的情绪在音乐的引导下，负性情绪得到发泄，之后渐渐得到调整，最终达到内心平静。
基于脑电信号的自闭症儿童的音乐治疗软件设计图，如图2所示：
基于脑电信号的自闭症儿童的音乐调节系统算法验证可行性后，需要对软件进行设计，EPOC+耳机如果需要实时传输脑电信号需要向官方申请 SDK开发包，在官方申请的SDK开发包需要使用Python运行。通过SDK 开发包控制数据实时传输数据流，将数据不断存入.csv文件，Matlab每隔 10s读取一次这个.csv文件，并将结果在达到实时识别情绪的效果。
以上所述仅为本公开的优选实施例而已，并不用于限制本公开，对于本领域的技术人员来说，本公开可以有各种更改和变化。凡在本公开的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本公开的保护范围之内。
上述虽然结合附图对本公开的具体实施方式进行了描述，但并非对本公开保护范围的限制，所属领域技术人员应该明白，在本公开的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本公开的保护范围以内。

Claims (10)

1.基于脑电信号的情绪特征识别方法，其特征在于，包括：
获取情绪脑电数据，对数据进行预处理；
对预处理后的数据中的眼电伪迹，利用小波系数做阈值处理，完成小波阈值去噪，采用小波包分解重构信号；
对于小波阈值去噪后重构的信号利用带通滤波器分解，再利用快速傅里叶变换后计算各数据点的能量值并将其相加，将计算得到的能量和作为特征向量；
计算得到每个样本的特征向量后，利用分类器对特征向量进行分类，识别情绪。
2.如权利要求1所述的基于脑电信号的情绪特征识别方法，其特征在于，获取情绪脑电数据后，将脑电信号的数据流实时存储，并实时更新存储信息。
3.如权利要求2所述的基于脑电信号的情绪特征识别方法，其特征在于，每个设定时间读取一次存储情绪脑电数据，对信号进行预处理及特征提取分类，分类得到识别结果。
4.如权利要求1所述的基于脑电信号的情绪特征识别方法，其特征在于，获取情绪脑电数据，对数据进行预处理时，选用1hz到45hz的五阶巴特沃斯带通滤波器将明显的噪声去除，明显的噪声包括：在原始脑电信号中存在的呼吸、皮电、心电低频噪声和肌电产生的高频噪声。
5.如权利要求1所述的基于脑电信号的情绪特征识别方法，其特征在于，采用小波包分解具体为：采用db4基函数对信号进行多尺度分解。
6.如权利要求1所述的基于脑电信号的情绪特征识别方法，其特征在于，对于小波阈值去噪后重构的信号利用一系列Butterworth带通滤波器将其分解为四个频带。
7.如权利要求1所述的基于脑电信号的情绪特征识别方法，其特征在于，在得到特征向量后，利用SVM分类器对其进行分类识别。
8.基于脑电信号的情绪特征识别系统，其特征在于，包括：
脑电采集设备，用于获取情绪脑电数据；
处理器，被配置为：对获取的情绪脑电数据进行预处理；
对预处理后的数据中的眼电伪迹，利用小波系数做阈值处理，完成小波阈值去噪，采用小波包分解重构信号；
对于小波阈值去噪后重构的信号利用带通滤波器分解，再利用快速傅里叶变换后计算各数据点的能量值并将其相加，将计算得到的能量和作为特征向量；
计算得到每个样本的特征向量后，利用分类器对特征向量进行分类，识别情绪；
显示设备，被配置为：将处理器识别出的情绪利用GUI界面显示识别结果。
9.基于脑电信号的情绪调节系统，其特征在于，包括：
权利要求8所述的基于脑电信号的情绪特征识别系统及调节模块；
所述基于脑电信号的情绪特征识别系统实现对情绪的识别并传输至调节模块；
所述调节模块被配置为基于所识别结果播放对应的音乐。
10.基于脑电信号的情绪调节方法，其特征在于，包括：
利用权利要求1-7任一所述的基于脑电信号的情绪特征识别方法实现对情绪的识别；
基于所识别结果播放对应的音乐。
CN202010877066.4A 2020-08-27 2020-08-27 基于脑电信号的情绪特征识别方法、识别及调节系统 Active CN111956219B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010877066.4A CN111956219B (zh) 2020-08-27 2020-08-27 基于脑电信号的情绪特征识别方法、识别及调节系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010877066.4A CN111956219B (zh) 2020-08-27 2020-08-27 基于脑电信号的情绪特征识别方法、识别及调节系统

Publications (2)

Publication Number Publication Date
CN111956219A true CN111956219A (zh) 2020-11-20
CN111956219B CN111956219B (zh) 2023-04-28

Family

ID=73399307

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010877066.4A Active CN111956219B (zh) 2020-08-27 2020-08-27 基于脑电信号的情绪特征识别方法、识别及调节系统

Country Status (1)

Country Link
CN (1) CN111956219B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112617860A (zh) * 2020-12-31 2021-04-09 山东师范大学 基于锁相值构建的脑功能连接网络的情绪分类方法及系统
CN112618911A (zh) * 2020-12-31 2021-04-09 四川音乐学院 基于信号处理的音乐反馈调节系统
CN112999490A (zh) * 2021-02-09 2021-06-22 吉林市不凡时空科技有限公司 一种基于脑电波情绪识别的音乐疗愈系统及其处理方法
CN113143272A (zh) * 2021-03-15 2021-07-23 华南理工大学 一种辅助自闭症患者情感表达的形状可编程系统
CN113180663A (zh) * 2021-04-07 2021-07-30 北京脑陆科技有限公司 一种基于卷积神经网络的情绪识别方法、系统
CN113907768A (zh) * 2021-10-12 2022-01-11 浙江汉德瑞智能科技有限公司 一种基于matlab的脑电信号处理装置
CN114504327A (zh) * 2021-12-28 2022-05-17 深圳大学 一种脑电噪声的处理方法、装置及计算机设备
CN115770044A (zh) * 2022-11-17 2023-03-10 天津大学 基于脑电相位幅值耦合网络的情绪识别方法及装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030185408A1 (en) * 2002-03-29 2003-10-02 Elvir Causevic Fast wavelet estimation of weak bio-signals using novel algorithms for generating multiple additional data frames
CN102319067A (zh) * 2011-05-10 2012-01-18 北京师范大学 用于大脑记忆功能改善的基于脑电信号的神经反馈训练仪
CN102715902A (zh) * 2012-06-15 2012-10-10 天津大学 特殊人群的情绪监护方法
CN103412646A (zh) * 2013-08-07 2013-11-27 南京师范大学 基于脑机交互的音乐情绪化推荐方法
CN103690165A (zh) * 2013-12-12 2014-04-02 天津大学 一种跨诱发模式情绪脑电识别建模方法
CN106236027A (zh) * 2016-08-23 2016-12-21 兰州大学 一种脑电与温度相结合的抑郁人群判定方法
CN107007278A (zh) * 2017-04-25 2017-08-04 中国科学院苏州生物医学工程技术研究所 基于多参数特征融合的自动睡眠分期方法
CN107865656A (zh) * 2017-10-30 2018-04-03 陈锐斐 一种利于脑力增强的音乐文件的制作方法
CN110141258A (zh) * 2019-05-16 2019-08-20 深兰科技（上海）有限公司 一种情绪状态检测方法、设备及终端
CN110477914A (zh) * 2019-08-09 2019-11-22 南京邮电大学 基于Android的情绪激励与脑电信号情绪识别系统
WO2020002519A1 (en) * 2018-06-29 2020-01-02 Mybrain Technologies Multiclass classification method for the estimation of eeg signal quality

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030185408A1 (en) * 2002-03-29 2003-10-02 Elvir Causevic Fast wavelet estimation of weak bio-signals using novel algorithms for generating multiple additional data frames
CN102319067A (zh) * 2011-05-10 2012-01-18 北京师范大学 用于大脑记忆功能改善的基于脑电信号的神经反馈训练仪
CN102715902A (zh) * 2012-06-15 2012-10-10 天津大学 特殊人群的情绪监护方法
CN103412646A (zh) * 2013-08-07 2013-11-27 南京师范大学 基于脑机交互的音乐情绪化推荐方法
CN103690165A (zh) * 2013-12-12 2014-04-02 天津大学 一种跨诱发模式情绪脑电识别建模方法
CN106236027A (zh) * 2016-08-23 2016-12-21 兰州大学 一种脑电与温度相结合的抑郁人群判定方法
CN107007278A (zh) * 2017-04-25 2017-08-04 中国科学院苏州生物医学工程技术研究所 基于多参数特征融合的自动睡眠分期方法
CN107865656A (zh) * 2017-10-30 2018-04-03 陈锐斐 一种利于脑力增强的音乐文件的制作方法
WO2020002519A1 (en) * 2018-06-29 2020-01-02 Mybrain Technologies Multiclass classification method for the estimation of eeg signal quality
CN110141258A (zh) * 2019-05-16 2019-08-20 深兰科技（上海）有限公司 一种情绪状态检测方法、设备及终端
CN110477914A (zh) * 2019-08-09 2019-11-22 南京邮电大学 基于Android的情绪激励与脑电信号情绪识别系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
JAIDEVA C.GOSWAMI: "《小波分析理论、算法及其应用》", 28 February 2007 *
唐宋元: "《微弱信号处理理论》", 30 October 2018 *
李昕等: "一种改进脑电特征提取算法及其在情感识别中的应用" *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112617860A (zh) * 2020-12-31 2021-04-09 山东师范大学 基于锁相值构建的脑功能连接网络的情绪分类方法及系统
CN112618911A (zh) * 2020-12-31 2021-04-09 四川音乐学院 基于信号处理的音乐反馈调节系统
CN112999490A (zh) * 2021-02-09 2021-06-22 吉林市不凡时空科技有限公司 一种基于脑电波情绪识别的音乐疗愈系统及其处理方法
CN113143272A (zh) * 2021-03-15 2021-07-23 华南理工大学 一种辅助自闭症患者情感表达的形状可编程系统
CN113180663A (zh) * 2021-04-07 2021-07-30 北京脑陆科技有限公司 一种基于卷积神经网络的情绪识别方法、系统
CN113907768A (zh) * 2021-10-12 2022-01-11 浙江汉德瑞智能科技有限公司 一种基于matlab的脑电信号处理装置
CN114504327A (zh) * 2021-12-28 2022-05-17 深圳大学 一种脑电噪声的处理方法、装置及计算机设备
CN114504327B (zh) * 2021-12-28 2024-05-17 深圳大学 一种脑电噪声的处理方法、装置及计算机设备
CN115770044A (zh) * 2022-11-17 2023-03-10 天津大学 基于脑电相位幅值耦合网络的情绪识别方法及装置

Also Published As

Publication number Publication date
CN111956219B (zh) 2023-04-28

Similar Documents

Publication Publication Date Title
CN111956219B (zh) 基于脑电信号的情绪特征识别方法、识别及调节系统
Zheng et al. EEG-based emotion classification using deep belief networks
Liu et al. Real-time fractal-based valence level recognition from EEG
Hosseini et al. Emotion recognition method using entropy analysis of EEG signals
JP2018504719A (ja) スマートオーディオヘッドホンシステム
Tung et al. Entropy-assisted multi-modal emotion recognition framework based on physiological signals
Djamal et al. EEG based emotion monitoring using wavelet and learning vector quantization
Tiwari et al. Machine learning approach for the classification of EEG signals of multiple imagery tasks
CN111920420A (zh) 一种基于统计学习的患者行为多模态分析与预测系统
CN109009098A (zh) 一种运动想象状态下的脑电信号特征识别方法
CN115414051A (zh) 一种脑电信号自适应窗口的情绪分类识别方法
GS et al. Wavelet based machine learning models for classification of human emotions using EEG signal
Pan et al. Recognition of human inner emotion based on two-stage FCA-ReliefF feature optimization
Khare et al. Classification of mental states from rational dilation wavelet transform and bagged tree classifier using EEG signals
Velásquez-Martínez et al. Motor imagery classification for BCI using common spatial patterns and feature relevance analysis
Placidi et al. Classification strategies for a single-trial binary Brain Computer Interface based on remembering unpleasant odors
Dang et al. Motor imagery EEG recognition based on generative and discriminative adversarial learning framework and hybrid scale convolutional neural network
Kim et al. eRAD-Fe: Emotion recognition-assisted deep learning framework
Hassan et al. Review of EEG Signals Classification Using Machine Learning and Deep-Learning Techniques
Arslan et al. Channel selection from EEG signals and application of support vector machine on EEG data
Kraljević et al. Emotion classification using linear predictive features on wavelet-decomposed EEG data
Nor et al. Automated classification of eight different Electroencephalogram (EEG) bands using hybrid of Fast Fourier Transform (FFT) with machine learning methods
Nawas et al. K-NN classification of brain dominance
Partovi et al. A deep learning algorithm for classifying grasp motions using multi-session EEG recordings
Hasan et al. Emotion prediction through EEG recordings using computational intelligence

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant