CN110947076A - 一种可进行精神状态调节的智能脑波音乐可穿戴设备 - Google Patents

一种可进行精神状态调节的智能脑波音乐可穿戴设备 Download PDF

Info

Publication number
CN110947076A
CN110947076A CN201911179114.6A CN201911179114A CN110947076A CN 110947076 A CN110947076 A CN 110947076A CN 201911179114 A CN201911179114 A CN 201911179114A CN 110947076 A CN110947076 A CN 110947076A
Authority
CN
China
Prior art keywords
brain wave
music
mental state
module
wave music
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911179114.6A
Other languages
English (en)
Other versions
CN110947076B (zh
Inventor
张通
贾雪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China University of Technology SCUT
Original Assignee
South China University of Technology SCUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China University of Technology SCUT filed Critical South China University of Technology SCUT
Priority to CN201911179114.6A priority Critical patent/CN110947076B/zh
Publication of CN110947076A publication Critical patent/CN110947076A/zh
Application granted granted Critical
Publication of CN110947076B publication Critical patent/CN110947076B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M21/02—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis for inducing sleep or relaxation, e.g. by direct nerve stimulation, hypnosis, analgesia
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/08—Other bio-electrical signals
    • A61M2230/10—Electroencephalographic signals

Landscapes

  • Health & Medical Sciences (AREA)
  • Anesthesiology (AREA)
  • Pain & Pain Management (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Psychology (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Hematology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明提供了一种可进行精神状态调节的智能脑波音乐可穿戴设备，其特征在于：包括头带、脑电采集模块、脑波音乐生成模块、精神状态评估模块、精神状态调节模块和脑波音乐播放模块；脑电采集模块、脑波音乐生成模块、精神状态评估模块、精神状态调节模块和脑波音乐播放模块均设置在头带中。该可穿戴设备采用自身脑电生成的脑波音乐进行情绪调节，可避免个体对常规音乐敏感度不同而影响情绪调节效果，对被试者具有良好针对性，能够实现个性化调节情绪，可实现多种工作模式。

Description

一种可进行精神状态调节的智能脑波音乐可穿戴设备
技术领域
本发明涉及可穿戴设备技术领域，更具体地说，涉及一种可进行精神状态调节的智能脑波音乐可穿戴设备。
背景技术
随着人们生活节奏越来越快，生活压力增加，心理健康状态受到了大家越来越多的关注。日常生活中常用情绪调节方式包括视频调节、音乐调节、经颅刺激等。
经颅刺激调节的设备比较昂贵，操作也相对复杂；通过视频刺激来进行精神状态调节的效果较好，但也需要播放视频的设备。通过音乐进行情绪调节是常用的方法，心理学家认为，音乐可以调节人体大脑皮层的机能，使人体分泌出有益健康激素和乙酰胆碱等物质，提高体内生物酶的活性；音乐还能调节血液循环和活化神经细胞，并能使身体机能状态趋于规律化，从而促进机体新陈代谢，增加抗压力抗疾病的能力。
现有的音乐调节情绪的系统和方法，主要是根据人的精神状态，选择一些现有的音乐来调节人的情绪，然而，音乐虽可以诱发生理唤醒，却很少直接引起个体具体的外部反应，个体最终的情绪表现还是依赖于对音乐的总体认知，即情绪是个人对不同和声、节奏、旋律、音色等结合的音乐的整合解读的结果。但是由于个体差异，每个人对音乐的感受和理解并不同，因此采用现成的音乐进行情绪调节的针对性不强，不能实现个性化的情绪调节。
发明内容
为克服现有技术中的缺点与不足，本发明的目的在于提供一种可进行精神状态调节、采用自身脑电生成的脑波音乐进行情绪调节、可避免个体对常规音乐敏感度不同而影响情绪调节效果、对被试者具有良好针对性、能够实现个性化调节情绪、可实现多种工作模式的智能脑波音乐可穿戴设备。
为了达到上述目的，本发明通过下述技术方案予以实现：一种可进行精神状态调节的智能脑波音乐可穿戴设备，其特征在于：包括：
头带；
用于采集被试者脑电波信号，并将脑电波信号进行放大和滤波的脑电采集模块；
用于将脑电波信号映射为脑波音乐，将脑波音乐进行存储并标记对应的情绪标签，生成个人情绪音乐库的脑波音乐生成模块；
用于对脑电波信号进行分析，得出被试者的精神状态评估结果的精神状态评估模块；
用于设定被试者的目标情绪，将精神状态评估结果与目标情绪进行比较，生成播放控制指令的精神状态调节模块；
以及用于播放实时脑波音乐或从个人情绪音乐库中调出相应的脑波音乐进行播放的脑波音乐播放模块；
所述脑电采集模块、脑波音乐生成模块、精神状态评估模块、精神状态调节模块和脑波音乐播放模块均设置在头带中；所述脑电采集模块分别与脑波音乐生成模块和精神状态评估模块信号连接；精神状态评估模块、精神状态调节模块和脑波音乐播放模块依次信号连接；脑波音乐播放模块与脑波音乐生成模块双向信号连接；精神状态评估模块与脑波音乐生成模块信号连接。
本发明可穿戴设备可佩带在被试者头部，优选采用这样的方式工作：包括脑波音乐实时播放模式、精神状态调节模式和自动模式；
脑波音乐实时播放模式包括如下步骤：
A1步，将可穿戴设备佩戴在被试者的头部；
A2步，脑电采集模块采集被试者的脑电波信号，并进行放大和滤波；将放大和滤波后的脑电波信号发送给脑波音乐生成模块和精神状态评估模块；
A3步，脑波音乐生成模块将脑电波信号映射为脑波音乐，并发送给脑波音乐播放模块进行播放；精神状态评估模块对脑电波信号进行精神状态评估得出精神状态评估结果；脑波音乐生成模块根据精神状态评估结果的情绪类别将脑波音乐分类储存，生成个人情绪音乐库；
精神状态调节模式包括如下步骤：
B1步，将可穿戴设备佩戴在被试者的头部；
B2步，脑电采集模块实时采集被试者的脑电波信号，并进行放大和滤波；将放大和滤波后的脑电波信号发送给精神状态评估模块；
B3步，精神状态评估模块对脑电波信号进行精神状态评估得出精神状态评估结果；将精神状态评估结果发送给精神状态调节模块；精神状态调节模块判断精神状态评估结果与目标情绪是否相同：若相同，则生成停止播放的播放控制指令；否则生成播放目标情绪脑波音乐的播放控制指令；精神状态调节模块将播放控制指令发送至脑波音乐播放模块；
B4步，脑波音乐播放模块根据播放控制指令，从个人情绪音乐库调出目标情绪类别的脑波音乐进行播放，对被试者进行情绪调节；或者是停止播放脑波音乐，完成精神状态调节；
自动模式即为以上两种模式的混合使用，自动模式包括如下步骤：
C1步，将可穿戴设备佩戴在被试者的头部；
C2步，脑电采集模块实时采集被试者的脑电波信号，并进行放大和滤波；将放大和滤波后的脑电波信号发送给脑波音乐生成模块和精神状态评估模块；
C3步，精神状态评估模块对脑电波信号进行精神状态评估得出精神状态评估结果；将精神状态评估结果发送给精神状态调节模块；精神状态调节模块判断精神状态评估结果与目标情绪是否相同：
若相同，则精神状态调节模块生成播放实时脑波音乐的播放控制指令，并发送给脑波音乐播放模块；脑波音乐生成模块将当前脑电波信号映射为脑波音乐，并发送给脑波音乐播放模块进行播放；并将当前脑波音乐储存在相应情绪类别的个人情绪音乐库中；
若不相同，则精神状态调节模块生成播放目标情绪脑波音乐的播放控制指令，并发送给脑波音乐播放模块；脑波音乐播放模块根据播放控制指令从个人情绪音乐库目标情绪类别的脑波音乐进行播放，对被试者进行情绪调节；
C4步，重复执行C2步和C3步，持续播放脑波音乐，直至可穿戴设备关闭。
本发明的调节原理是：脑电波信号是神经元细胞之间传递信息时产生的生物电信号；是大脑皮质中的锥体细胞突触活动时产生的离子交换而产生的电波信号；是人脑神经元群电活动的综合体现。脑电波信号与音乐在信号形式上具有相似性，且它们都是大脑功能活动的结果，两者遵从一定共同科学规律，因此可将脑电波信号转化为脑波音乐。在紧张、压力大、疲劳状态下，大脑会产生beta波；意识清醒且在放松状态时，大脑会产生alpha波；意识中断且深度放松时，大脑会产生theta波；处于深度睡眠状态时，大脑会产生delta波。脑电波信号可以在短时间内将人带入不同的意识状态，通过将脑电波信号中的频率(Alpha,Beta,Theta和Delta四种)和被试者的大脑进行同步，从而使大脑进入相应的状态。音乐中有很强的的调节人体情绪的作用，可以影响脑电波的产生种类及频段，通过共振的形式影响着被试者的精神状态。
本发明可穿戴设备，可采集被试者在不同情绪下的脑电波信号，并将脑电波信号映射为相应情绪的脑波音乐，生成个人情绪音乐库；当需要调节精神状态时，采用自己的脑电生成的脑波音乐进行情绪调节；可避免个体对常规音乐敏感度不同而影响情绪调节效果，对被试者具有良好的针对性，能够实现个性化调节情绪。
相比于在实验条件下通过情感刺激来构建个人情绪音乐库，本发明在被试者的使用过程中实时监测被试者的精神状态来构建个人情绪音乐库，所得的脑波音乐更加接近被试者在自然状态下的情绪，更加真实。
本发明的三种模式可以满足用户的多种使用需求，脑波音乐实时播放模式可以实时播放被试者当前脑电波信号映射出的脑波音乐；精神状态调节模式下对被试者进行情绪调节，调节完毕后停止播放脑波音乐；而自动模式下，本发明可根据当前被试者的精神状态来自动选择播放当前脑电波产生的脑波音乐还是播放个人情绪音乐库中的脑波音乐进行情绪调节，在两种方式下持续播放脑波音乐，避免了手动设置，使用更加方便。
优选地，所述脑电采集模块包括至少三个电极；各个电极分别设置在头带的内侧。多个电极用于采集被试者前额Fp1、Fpz、Fp2通道的脑电信号，形成导联来检测左右脑脑电波信号。
优选地，所述脑波音乐播放模块包括一对对称设置在头带上的骨传导振子或耳机。佩戴时，骨传导振子位于被试者耳朵前侧的乳突位置，或者是耳机与被试者耳朵位置对应，使被试者听到脑波音乐。
优选地，所述头带设有可伸缩调节部。可伸缩调节部可调整头带的长度，提高佩戴舒适度。
优选地，所述脑波音乐生成模块中，将脑电波信号映射为脑波音乐，是指：提取设定时间内左右脑脑电波信号的周期、频率、振幅和平均功率，分别将左右脑脑电波信号进行映射为左右脑脑波音乐：将脑电波信号的周期或频率映射为脑波音乐的音长，将脑电波信号的振幅和平均功率分别映射为脑波音乐的音高和音强；采用调式滤波将调外音调整为最接近的调内音；采用音乐合成软件进行多通道脑波音乐整合，生成多通道立体脑波音乐。
脑电波信号的周期是指相邻的两个波谷或波峰之间的时间间隔，单位为ms。脑电波信号的频率指相同周期的脑电波信号在1秒内重复出现的次数，单位为Hz或周期/秒。把脑电波信号的周期或频率映射为脑波音乐的音长，用音乐节奏的快慢来表示脑电波信号的不同频率。
脑电波信号的振幅是指脑电波信号波动的幅度大小。脑电波信号的节律随大脑皮层活动状态的不同而变化；当大脑活动比较少时，大脑皮层许多神经元的电活动步调趋于一致，就出现频率较低而振幅较高的节律，称为同步化；当大脑活动比较剧烈，神经元的电活动不大一致时，就表现为高频率低振幅的节律，称为去同步化。音乐的音高与频率间呈对数关系，音高的范围称为音域，音域较高的乐曲，比较欢快明亮，而音域较低的乐曲，则比较深沉平稳。利用振幅与音高的相似点，将脑电波信号的振幅映射为脑波音乐的音高，用音高来反映大脑的神经元活动强烈程度。
脑电波信号的平均功率是脑电波信号的能量特征，反映了脑电波信号的能量分布情况，而音乐的音强反映了声源的能量大小，因此将脑电波信号的平均功率映射为脑波音乐的音强，用音强来强调较剧烈的神经元活动。
综上所述，脑电波信号的周期/频率、振幅和平均功率分别映射为脑波音乐的音长、音高和音强；根据脑电波信号的周期/频率、振幅和平均功率可生成不同快慢、不同欢快明亮程度、不同强度的脑波音乐，进而利用脑波音乐有针对性地对被试者的精神状态进行调节。
为了使脑波音乐更具有立体感和可听性，采用左右半球对称电极的两通道脑电波信号生成两段脑波音乐，然后采用调式滤波将调外音调整为最接近的调内音；采用音乐合成软件进行多通道脑波音乐整合，生成多通道立体脑波音乐。
优选地，所述精神状态评估模块，对脑电波信号以时间T为周期进行时间分割，得到若干脑电碎片，然后提取各个脑电碎片的时域特征和频域特征，通过分类器进行情绪分类，从而评估被试者的精神状态得出精神状态评估结果。
优选地，还包括：
用于将脑电波信号和精神状态评估结果进行储存和显示的终端模块；
所述脑电采集模块和精神状态评估模块分别与终端模块信号连接。
优选地，所述终端模块与云平台通过无线通信方式信号连接。
与现有技术相比，本发明具有如下优点与有益效果：
1、本发明中，可采集被试者在不同情绪下的脑电波信号，并将脑电波信号映射为相应情绪的脑波音乐，生成个人情绪音乐库；当需要调节精神状态时，采用自身脑电生成的脑波音乐进行情绪调节；可避免个体对常规音乐敏感度不同而影响情绪调节效果，对被试者具有良好的针对性，能够实现个性化调节情绪；
2、本发明在被试者的使用过程中实时监测被试者的精神状态来构建个人情绪音乐库，所得的脑波音乐更加接近被试者在自然状态下的情绪，更加真实；
3、本发明可实现脑波音乐实时播放模式、精神状态调节模式、自动模式等多种模式工作，可以满足用户的多种使用需求；
4、本发明中，根据脑电波信号的周期/频率、振幅和平均功率可生成不同快慢、不同欢快明亮程度和不同强度的脑波音乐，进而利用脑波音乐有针对性地对被试者的精神状态进行调节。
附图说明
图1是本发明可穿戴设备的结构示意图；
图2是本发明可穿戴设备的结构框图；
图3是本发明可穿戴设备中的脑电采集模块的原理框图；
图4是本发明可穿戴设备中脑波音乐生成模块的原理框图；
图5是本发明可穿戴设备中精神状态评估模块的原理框图；
图6是实施例二可穿戴设备的结构示意图；
其中，1为头带、2为电极、3为骨传导振子、4为可伸缩调节部、5为耳机。
具体实施方式
下面结合附图与具体实施方式对本发明作进一步详细的描述。
实施例一
本实施例一种可进行精神状态调节的智能脑波音乐可穿戴设备，其结构如图1至图5所示，包括：
头带；
用于采集被试者脑电波信号，并将脑电波信号进行放大和滤波的脑电采集模块；
用于将脑电波信号映射为脑波音乐，将脑波音乐进行存储并标记对应的情绪标签，生成个人情绪音乐库的脑波音乐生成模块；
用于对脑电波信号进行分析，得出被试者的精神状态评估结果的精神状态评估模块；
用于设定被试者的目标情绪，将精神状态评估结果与目标情绪进行比较，生成播放控制指令的精神状态调节模块；
以及用于播放实时脑波音乐或从个人情绪音乐库中调出相应的脑波音乐进行播放的脑波音乐播放模块；
脑电采集模块、脑波音乐生成模块、精神状态评估模块、精神状态调节模块和脑波音乐播放模块均设置在头带中；脑电采集模块分别与脑波音乐生成模块和精神状态评估模块信号连接；精神状态评估模块、精神状态调节模块和脑波音乐播放模块依次信号连接；脑波音乐播放模块与脑波音乐生成模块双向信号连接；精神状态评估模块与脑波音乐生成模块信号连接。
本发明可穿戴设备可佩带在被试者头部，优选采用这样的方式工作：包括脑波音乐实时播放模式、精神状态调节模式和自动模式；
脑波音乐实时播放模式包括如下步骤：
A1步，将可穿戴设备佩戴在被试者的头部；
A2步，脑电采集模块采集被试者的脑电波信号，并进行放大和滤波；将放大和滤波后的脑电波信号发送给脑波音乐生成模块和精神状态评估模块；
A3步，脑波音乐生成模块将脑电波信号映射为脑波音乐，并发送给脑波音乐播放模块进行播放；精神状态评估模块对脑电波信号进行精神状态评估得出精神状态评估结果；脑波音乐生成模块根据精神状态评估结果的情绪类别将脑波音乐分类储存，生成个人情绪音乐库；
精神状态调节模式包括如下步骤：
B1步，将可穿戴设备佩戴在被试者的头部；
B2步，脑电采集模块实时采集被试者的脑电波信号，并进行放大和滤波；将放大和滤波后的脑电波信号发送给精神状态评估模块；
B3步，精神状态评估模块对脑电波信号进行精神状态评估得出精神状态评估结果；将精神状态评估结果发送给精神状态调节模块；精神状态调节模块判断精神状态评估结果与目标情绪是否相同：若相同，则生成停止播放的播放控制指令；否则生成播放目标情绪脑波音乐的播放控制指令；精神状态调节模块将播放控制指令发送至脑波音乐播放模块；
B4步，脑波音乐播放模块根据播放控制指令，从个人情绪音乐库调出目标情绪类别的脑波音乐进行播放，对被试者进行情绪调节；或者是停止播放脑波音乐，完成精神状态调节；
自动模式即为以上两种模式的混合使用，自动模式包括如下步骤：
C1步，将可穿戴设备佩戴在被试者的头部；
C2步，脑电采集模块实时采集被试者的脑电波信号，并进行放大和滤波；将放大和滤波后的脑电波信号发送给脑波音乐生成模块和精神状态评估模块；
C3步，精神状态评估模块对脑电波信号进行精神状态评估得出精神状态评估结果；将精神状态评估结果发送给精神状态调节模块；精神状态调节模块判断精神状态评估结果与目标情绪是否相同：
若相同，则精神状态调节模块生成播放实时脑波音乐的播放控制指令，并发送给脑波音乐播放模块；脑波音乐生成模块将当前脑电波信号映射为脑波音乐，并发送给脑波音乐播放模块进行播放；并将当前脑波音乐储存在相应情绪类别的个人情绪音乐库中；
若不相同，则精神状态调节模块生成播放目标情绪脑波音乐的播放控制指令，并发送给脑波音乐播放模块；脑波音乐播放模块根据播放控制指令从个人情绪音乐库目标情绪类别的脑波音乐进行播放，对被试者进行情绪调节；
C4步，重复执行C2步和C3步，持续播放脑波音乐，直至可穿戴设备关闭。
本发明的调节原理是：脑电波信号是神经元细胞之间传递信息时产生的生物电信号；是大脑皮质中的锥体细胞突触活动时产生的离子交换而产生的电波信号；是人脑神经元群电活动的综合体现。脑电波信号与音乐在信号形式上具有相似性，且它们都是大脑功能活动的结果，两者遵从一定共同科学规律，因此可将脑电波信号转化为脑波音乐。在紧张、压力大、疲劳状态下，大脑会产生beta波；意识清醒且在放松状态时，大脑会产生alpha波；意识中断且深度放松时，大脑会产生theta波；处于深度睡眠状态时，大脑会产生delta波。脑电波信号可以在短时间内将人带入不同的意识状态，通过将脑电波信号中的频率(Alpha,Beta,Theta和Delta四种)和被试者的大脑进行同步，从而使大脑进入相应的状态。音乐中有很强的的调节人体情绪的作用，可以影响脑电波的产生种类及频段，通过共振的形式影响着被试者的精神状态。
本发明可穿戴设备，可采集被试者在不同情绪下的脑电波信号，并将脑电波信号映射为相应情绪的脑波音乐，生成个人情绪音乐库；当需要调节精神状态时，采用自己的脑电生成的脑波音乐进行情绪调节；可避免个体对常规音乐敏感度不同而影响情绪调节效果，对被试者具有良好的针对性，能够实现个性化调节情绪。
相比于在实验条件下通过情感刺激来构建个人情绪音乐库，本发明在被试者的使用过程中实时监测被试者的精神状态来构建个人情绪音乐库，所得的脑波音乐更加接近被试者在自然状态下的情绪，更加真实。
本发明的三种模式可以满足用户的多种使用需求，脑波音乐实时播放模式可以实时播放被试者当前脑电波信号映射出的脑波音乐；精神状态调节模式下对被试者进行情绪调节，调节完毕后停止播放脑波音乐；而自动模式下，本发明可根据当前被试者的精神状态来自动选择播放当前脑电波产生的脑波音乐还是播放个人情绪音乐库中的脑波音乐进行情绪调节，在两种方式下持续播放脑波音乐，避免了手动设置，使用更加方便。
如图3所示，脑电采集模块用于采集被试者脑电波信号，并将脑电波信号进行放大和滤波。脑电采集模块可采用STM32芯片进行控制和处理，首先将可穿戴设备戴在被试者头部，使电极稳定接触被试者头皮表面，然后进行导联选择，采集多导联的脑电波信号，将采集到的脑电波信号进行前置放大，以得到比较强烈的信号，之后进行后置放大和滤波操作，最后输出脑电波信号。
如图4所示，脑波音乐生成模块中，将脑电波信号映射为脑波音乐，是指：提取设定时间内左右脑脑电波信号的周期、频率、振幅和平均功率，分别将左右脑脑电波信号进行映射为左右脑脑波音乐：将脑电波信号的周期或频率映射为脑波音乐的音长，将脑电波信号的振幅和平均功率分别映射为脑波音乐的音高和音强；采用调式滤波将调外音调整为最接近的调内音；采用音乐合成软件进行多通道脑波音乐整合，生成多通道立体脑波音乐。
左右脑脑电波信号通过提取左右脑对称电极的信号获取。
脑电波信号的周期是指相邻的两个波谷或波峰之间的时间间隔，单位为ms。脑电波信号的频率指相同周期的脑电波信号在1秒内重复出现的次数，单位为Hz或周期/秒。把脑电波信号的周期或频率映射为脑波音乐的音长，用音乐节奏的快慢来表示脑电波信号的不同频率。
脑电波信号的振幅是指脑电波信号波动的幅度大小。脑电波信号的节律随大脑皮层活动状态的不同而变化；当大脑活动比较少时，大脑皮层许多神经元的电活动步调趋于一致，就出现频率较低而振幅较高的节律，称为同步化；当大脑活动比较剧烈，神经元的电活动不大一致时，就表现为高频率低振幅的节律，称为去同步化。音乐的音高与频率间呈对数关系，音高的范围称为音域，音域较高的乐曲，比较欢快明亮，而音域较低的乐曲，则比较深沉平稳。利用振幅与音高的相似点，将脑电波信号的振幅映射为脑波音乐的音高，用音高来反映大脑的神经元活动强烈程度。
脑电波信号的平均功率是脑电波信号的能量特征，反映了脑电波信号的能量分布情况，而音乐的音强反映了声源的能量大小，因此将脑电波信号的平均功率映射为脑波音乐的音强，用音强来强调较剧烈的神经元活动。
综上所述，脑电波信号的周期/频率、振幅和平均功率分别映射为脑波音乐的音长、音高和音强；根据脑电波信号的周期/频率、振幅和平均功率可生成不同快慢、不同欢快明亮程度、不同强度的脑波音乐，进而利用脑波音乐有针对性地对被试者的精神状态进行调节。
为了使脑波音乐更具有立体感和可听性，采用左右半球对称电极的两通道脑电波信号生成两段脑波音乐，然后采用调式滤波将调外音调整为最接近的调内音；采用音乐合成软件进行多通道脑波音乐整合，生成多通道立体脑波音乐。
如图5所示，精神状态评估模块，对脑电波信号以时间T为周期进行时间分割，得到若干脑电碎片，然后提取各个脑电碎片的时域特征和频域特征，通过分类器进行情绪分类，从而评估被试者的精神状态得出精神状态评估结果。
时域特征包括均值、中值、方差和峰值；所述频域特征包括功率谱和微分熵；所述分类器是指SVM分类器、随机森林分类器和宽度学习系统分类器中的任一种。
在精神状态调节模式或自动模式中，精神状态调节模块中设定被试者的目标情绪，将精神状态评估结果与目标情绪进行比较，生成播放控制指令。
脑波音乐播放模块用于播放实时脑波音乐或从个人情绪音乐库中调出相应的脑波音乐进行播放。
脑电采集模块和精神状态评估模块优选分别与移动端APP或PC端信号连接，以将脑电波信号和精神状态评估结果显示在移动端APP或PC端上。移动端APP或PC端还可以与云平台通过无线通信方式信号连接，以实现数据储存和管理。
本实施例中，脑电采集模块包括至少三个电极2；各个电极2分别设置在头带1的内侧。多个电极2用于采集被试者前额Fp1、Fpz、Fp2通道的脑电信号，形成导联来检测左右脑脑电波信号。脑电采集模块还包括信号放大和滤波处理单元。脑波音乐播放模块包括一对对称设置在头带1上的骨传导振子3。佩戴时，骨传导振子3位于被试者耳朵前侧的乳突位置，使被试者听到脑波音乐。
头带设有可伸缩调节部；可伸缩调节部可调整头带的长度，提高佩戴舒适度。脑电采集模块的信号放大和滤波处理单元、脑波音乐生成模块、精神状态评估模块、精神状态调节模块和脑波音乐播放模块优选埋设在头带中。
下面以试验对本实施例可穿戴设备的精神状态调节效果进行验证：
试验一以缓解悲伤情绪为例。被试者为10名在校大学生，没有经过系统的音乐训练，在签署知情同意书之后开始试验。
首先为每个被试者构建个人情绪音乐库。每位被试者佩戴好智能脑波音乐头环，向被试者播放3段积极的视频片段，每个视频片段大约长4分钟，观看完每段视频后，被试者填写情绪自评量表，并休息一分钟，再进行下一段视频的观看。被试者观看视频的过程中采集被试者的脑电信号，精神状态评估系统根据脑电信号进行精神状态评估，之后选取情绪自评量表结果和精神状态评估结果一致的样本生成脑波音乐，保证脑波音乐的情绪准确性。由此构建出积极情绪的个人情绪音乐库。
之后在自动模式下进行精神状态调节的试验。每位被试者佩戴好智能脑波音乐头环，向被试者播放悲伤的视频片段，视频片段大约长4分钟，观看完每段视频后，被试者填写情绪自评量表。若情绪自评量表的结果显示为悲伤情绪，认为被试者此时处于悲伤状态，然后开始采集被试者的脑电信号进行评估和调节。精神状态评估模块检测到此时的精神状态为悲伤，并将结果发送给精神状态调节模块，精神状态调节模块生成播放积极情绪脑波音乐的指令，并发送给脑波音乐播放模块，脑波音乐播放模块从当前被试者的个人情绪音乐库中选择积极情绪的脑波音乐进行播放。10名被试者在听脑波音乐一段时间后，精神状态评估模块显示当前情绪为平静情绪，继续听一段时间后，精神状态评估模块显示当前情绪为积极情绪，此时，精神状态调节模块生成播放实时脑波音乐的播放控制指令，被试者将听到自己此时的脑波生成的音乐。
此试验可以说明本系统在调节情绪方面是有效的，能够有效调节被试者的精神状态。
实施例二
本实施例一种可进行精神状态调节的智能脑波音乐可穿戴设备，与实施例一的区别在于：如图6所示，本实施例中，脑波音乐播放模块包括一对对称设置在头带上的耳机。耳机与被试者耳朵位置对应，使被试者听到脑波音乐。本实施例的其余结构与实施例一相同。
上述实施例为本发明较佳的实施方式，但本发明的实施方式并不受上述实施例的限制，其他的任何未背离本发明的精神实质与原理下所作的改变、修饰、替代、组合、简化，均应为等效的置换方式，都包含在本发明的保护范围之内。

Claims (6)

1.一种可进行精神状态调节的智能脑波音乐可穿戴设备，其特征在于：包括：
头带；
用于采集被试者脑电波信号，并将脑电波信号进行放大和滤波的脑电采集模块；
用于将脑电波信号映射为脑波音乐，将脑波音乐进行存储并标记对应的情绪标签，生成个人情绪音乐库的脑波音乐生成模块；
用于对脑电波信号进行分析，得出被试者的精神状态评估结果的精神状态评估模块；
用于设定被试者的目标情绪，将精神状态评估结果与目标情绪进行比较，生成播放控制指令的精神状态调节模块；
以及用于播放实时脑波音乐或从个人情绪音乐库中调出相应的脑波音乐进行播放的脑波音乐播放模块；
所述脑电采集模块、脑波音乐生成模块、精神状态评估模块、精神状态调节模块和脑波音乐播放模块均设置在头带中；所述脑电采集模块分别与脑波音乐生成模块和精神状态评估模块信号连接；精神状态评估模块、精神状态调节模块和脑波音乐播放模块依次信号连接；脑波音乐播放模块与脑波音乐生成模块双向信号连接；精神状态评估模块与脑波音乐生成模块信号连接。
2.根据权利要求1所述的可进行精神状态调节的智能脑波音乐可穿戴设备，其特征在于：所述脑电采集模块包括至少三个电极；各个电极分别设置在头带的内侧。
3.根据权利要求1所述的可进行精神状态调节的智能脑波音乐可穿戴设备，其特征在于：所述脑波音乐播放模块包括一对对称设置在头带上的骨传导振子或耳机。
4.根据权利要求1所述的可进行精神状态调节的智能脑波音乐可穿戴设备，其特征在于：所述头带设有可伸缩调节部。
5.根据权利要求1所述的可进行精神状态调节的智能脑波音乐可穿戴设备，其特征在于：所述脑波音乐生成模块中，将脑电波信号映射为脑波音乐，是指：提取设定时间内左右脑脑电波信号的周期、频率、振幅和平均功率，分别将左右脑脑电波信号进行映射为左右脑脑波音乐：将脑电波信号的周期或频率映射为脑波音乐的音长，将脑电波信号的振幅和平均功率分别映射为脑波音乐的音高和音强；采用调式滤波将调外音调整为最接近的调内音；采用音乐合成软件进行多通道脑波音乐整合，生成多通道立体脑波音乐。
6.根据权利要求1所述的可进行精神状态调节的智能脑波音乐可穿戴设备，其特征在于：所述精神状态评估模块，对脑电波信号以时间T为周期进行时间分割，得到若干脑电碎片，然后提取各个脑电碎片的时域特征和频域特征，通过分类器进行情绪分类，从而评估被试者的精神状态得出精神状态评估结果。
CN201911179114.6A 2019-11-27 2019-11-27 一种可进行精神状态调节的智能脑波音乐可穿戴设备 Active CN110947076B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911179114.6A CN110947076B (zh) 2019-11-27 2019-11-27 一种可进行精神状态调节的智能脑波音乐可穿戴设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911179114.6A CN110947076B (zh) 2019-11-27 2019-11-27 一种可进行精神状态调节的智能脑波音乐可穿戴设备

Publications (2)

Publication Number Publication Date
CN110947076A true CN110947076A (zh) 2020-04-03
CN110947076B CN110947076B (zh) 2021-07-16

Family

ID=69976865

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911179114.6A Active CN110947076B (zh) 2019-11-27 2019-11-27 一种可进行精神状态调节的智能脑波音乐可穿戴设备

Country Status (1)

Country Link
CN (1) CN110947076B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112545518A (zh) * 2020-12-11 2021-03-26 电子科技大学 一种基于脑波音乐的疲劳检测方法及系统
CN112596273A (zh) * 2020-12-30 2021-04-02 华南理工大学 具有脑电情绪评估和调节功能的智能变色眼镜及控制方法
CN112870522A (zh) * 2021-01-12 2021-06-01 谭新杰 一种基于双耳波差脑波音频的注意力调节方法及系统
WO2021103829A1 (zh) * 2019-11-27 2021-06-03 华南理工大学 基于脑波音乐的个性化精神状态调节系统及调节方法
FR3119990A1 (fr) * 2021-02-23 2022-08-26 Athénaïs OSLATI Dispositif et procédé de modification d’un état émotionnel d’un utilisateur
CN115211854A (zh) * 2021-04-19 2022-10-21 天津科技大学 一种基于脑电波的智能自适应司机人机交互情绪调节方法
CN115363587A (zh) * 2022-10-26 2022-11-22 安徽星辰智跃科技有限责任公司 基于音乐创作的神经心理评估及干预的方法、系统和装置
CN115770344A (zh) * 2021-09-06 2023-03-10 北京大学第六医院 一种基于脑电信号制备缓解抑郁音乐的方法、系统及存储介质

Citations (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101015451A (zh) * 2007-02-13 2007-08-15 电子科技大学 一种音乐脑电分析方法
CN101506757A (zh) * 2006-11-06 2009-08-12 松下电器产业株式会社 脑波识别方法调整装置及方法
CN101822863A (zh) * 2010-01-28 2010-09-08 深圳先进技术研究院 情绪调节装置和方法
TW201119624A (en) * 2009-12-01 2011-06-16 Guang-Tian Sun System of music therapy associated with brain wave
JP2011137917A (ja) * 2009-12-28 2011-07-14 Technos Japan:Kk 脳波のバイオフィードバックにより制御される脳トレーニング装置
CN202538166U (zh) * 2012-01-09 2012-11-21 中山大学附属第一医院 数字失眠治疗仪
CN102999701A (zh) * 2012-11-28 2013-03-27 电子科技大学 脑波音乐生成方法
CN103218034A (zh) * 2012-01-19 2013-07-24 联想(北京)有限公司 一种应用对象调整方法及电子设备
CN103412646A (zh) * 2013-08-07 2013-11-27 南京师范大学 基于脑机交互的音乐情绪化推荐方法
WO2014042599A1 (en) * 2012-09-17 2014-03-20 Agency For Science, Technology And Research System and method for developing a model indicative of a subject's emotional state when listening to musical pieces
CN203706669U (zh) * 2014-03-04 2014-07-09 江西科技学院 一种脑电自适应的音频播放器
CN104606762A (zh) * 2015-01-30 2015-05-13 上海泰亿格康复医疗科技股份有限公司 一种基于数字信号处理系统的听觉统合训练器
CN105268078A (zh) * 2014-06-23 2016-01-27 南京专创知识产权服务有限公司 基于虚拟现实和体感技术的减压头盔
CN105268080A (zh) * 2014-06-04 2016-01-27 王振兴 情绪调控系统及其调控方法
CN105536118A (zh) * 2016-02-19 2016-05-04 京东方光科技有限公司 一种情绪调节装置、可穿戴设备和缓解情绪的帽子
WO2016179811A1 (zh) * 2015-05-13 2016-11-17 日盛光检测股份有限公司 脑波调整装置及脑波调整方法
CN106345034A (zh) * 2016-11-09 2017-01-25 武汉智普天创科技有限公司 基于脑电采集终端的用于认知情绪调节的装置
CN106620990A (zh) * 2016-11-24 2017-05-10 深圳创达云睿智能科技有限公司 一种调节情绪的方法及其装置
CN106730239A (zh) * 2017-02-07 2017-05-31 陈大庆 一种基于脑电波监测的闭环催眠头罩
CN106806973A (zh) * 2017-04-05 2017-06-09 天使智心（北京）科技有限公司 一种共振心理训练装置
CN107106063A (zh) * 2014-11-02 2017-08-29 恩戈格勒公司 智能音频头戴式耳机系统
CN107802263A (zh) * 2016-09-08 2018-03-16 候俊英 一种基于脑电生理信号的可穿戴声音反馈系统
KR20180092002A (ko) * 2017-02-07 2018-08-17 남서울대학교 산학협력단 뇌파를 이용한 IoT 기반의 멘탈 케어 제공 시스템 및 그 방법
CN108628450A (zh) * 2018-04-25 2018-10-09 北京科技大学 一种脑电波编曲方法
CN108877749A (zh) * 2018-04-25 2018-11-23 杭州回车电子科技有限公司 一种脑波ai音乐的生成方法及系统
CN109350051A (zh) * 2018-11-28 2019-02-19 华南理工大学 用于精神状态评估与调节的头部可穿戴设备及其工作方法
CN109620257A (zh) * 2018-11-28 2019-04-16 华南理工大学 基于生物反馈的精神状态干预与调节系统及其工作方法
CN109864750A (zh) * 2019-01-31 2019-06-11 华南理工大学 基于经颅刺激的精神状态评估与调节系统及其工作方法
CN209361581U (zh) * 2018-10-16 2019-09-10 深圳贝仕达克技术股份有限公司 多功能保健仪
CN110286757A (zh) * 2019-06-14 2019-09-27 长春理工大学 一种基于混合现实的可穿戴式脑机接口系统及控制方法
CN110292378A (zh) * 2019-07-02 2019-10-01 燕山大学 基于脑波闭环监测的抑郁症远程康复系统

Patent Citations (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101506757A (zh) * 2006-11-06 2009-08-12 松下电器产业株式会社 脑波识别方法调整装置及方法
CN101015451A (zh) * 2007-02-13 2007-08-15 电子科技大学 一种音乐脑电分析方法
TW201119624A (en) * 2009-12-01 2011-06-16 Guang-Tian Sun System of music therapy associated with brain wave
JP2011137917A (ja) * 2009-12-28 2011-07-14 Technos Japan:Kk 脳波のバイオフィードバックにより制御される脳トレーニング装置
CN101822863A (zh) * 2010-01-28 2010-09-08 深圳先进技术研究院 情绪调节装置和方法
CN202538166U (zh) * 2012-01-09 2012-11-21 中山大学附属第一医院 数字失眠治疗仪
CN103218034A (zh) * 2012-01-19 2013-07-24 联想(北京)有限公司 一种应用对象调整方法及电子设备
WO2014042599A1 (en) * 2012-09-17 2014-03-20 Agency For Science, Technology And Research System and method for developing a model indicative of a subject's emotional state when listening to musical pieces
CN102999701A (zh) * 2012-11-28 2013-03-27 电子科技大学 脑波音乐生成方法
CN103412646A (zh) * 2013-08-07 2013-11-27 南京师范大学 基于脑机交互的音乐情绪化推荐方法
CN203706669U (zh) * 2014-03-04 2014-07-09 江西科技学院 一种脑电自适应的音频播放器
CN105268080A (zh) * 2014-06-04 2016-01-27 王振兴 情绪调控系统及其调控方法
CN105268078A (zh) * 2014-06-23 2016-01-27 南京专创知识产权服务有限公司 基于虚拟现实和体感技术的减压头盔
CN107106063A (zh) * 2014-11-02 2017-08-29 恩戈格勒公司 智能音频头戴式耳机系统
CN104606762A (zh) * 2015-01-30 2015-05-13 上海泰亿格康复医疗科技股份有限公司 一种基于数字信号处理系统的听觉统合训练器
WO2016179811A1 (zh) * 2015-05-13 2016-11-17 日盛光检测股份有限公司 脑波调整装置及脑波调整方法
CN105536118A (zh) * 2016-02-19 2016-05-04 京东方光科技有限公司 一种情绪调节装置、可穿戴设备和缓解情绪的帽子
CN107802263A (zh) * 2016-09-08 2018-03-16 候俊英 一种基于脑电生理信号的可穿戴声音反馈系统
CN106345034A (zh) * 2016-11-09 2017-01-25 武汉智普天创科技有限公司 基于脑电采集终端的用于认知情绪调节的装置
CN106620990A (zh) * 2016-11-24 2017-05-10 深圳创达云睿智能科技有限公司 一种调节情绪的方法及其装置
CN106730239A (zh) * 2017-02-07 2017-05-31 陈大庆 一种基于脑电波监测的闭环催眠头罩
KR20180092002A (ko) * 2017-02-07 2018-08-17 남서울대학교 산학협력단 뇌파를 이용한 IoT 기반의 멘탈 케어 제공 시스템 및 그 방법
CN106806973A (zh) * 2017-04-05 2017-06-09 天使智心（北京）科技有限公司 一种共振心理训练装置
CN108628450A (zh) * 2018-04-25 2018-10-09 北京科技大学 一种脑电波编曲方法
CN108877749A (zh) * 2018-04-25 2018-11-23 杭州回车电子科技有限公司 一种脑波ai音乐的生成方法及系统
CN209361581U (zh) * 2018-10-16 2019-09-10 深圳贝仕达克技术股份有限公司 多功能保健仪
CN109350051A (zh) * 2018-11-28 2019-02-19 华南理工大学 用于精神状态评估与调节的头部可穿戴设备及其工作方法
CN109620257A (zh) * 2018-11-28 2019-04-16 华南理工大学 基于生物反馈的精神状态干预与调节系统及其工作方法
CN109864750A (zh) * 2019-01-31 2019-06-11 华南理工大学 基于经颅刺激的精神状态评估与调节系统及其工作方法
CN110286757A (zh) * 2019-06-14 2019-09-27 长春理工大学 一种基于混合现实的可穿戴式脑机接口系统及控制方法
CN110292378A (zh) * 2019-07-02 2019-10-01 燕山大学 基于脑波闭环监测的抑郁症远程康复系统

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021103829A1 (zh) * 2019-11-27 2021-06-03 华南理工大学 基于脑波音乐的个性化精神状态调节系统及调节方法
GB2608690A (en) * 2019-11-27 2023-01-11 Univ South China Tech Personalized mental state adjustment system and method based on brainwave music
GB2608690B (en) * 2019-11-27 2024-09-18 Univ South China Tech Personalized mental state regulation system based on brainwave music and mental state regulation method used therein
CN112545518A (zh) * 2020-12-11 2021-03-26 电子科技大学 一种基于脑波音乐的疲劳检测方法及系统
CN112596273A (zh) * 2020-12-30 2021-04-02 华南理工大学 具有脑电情绪评估和调节功能的智能变色眼镜及控制方法
CN112870522A (zh) * 2021-01-12 2021-06-01 谭新杰 一种基于双耳波差脑波音频的注意力调节方法及系统
FR3119990A1 (fr) * 2021-02-23 2022-08-26 Athénaïs OSLATI Dispositif et procédé de modification d’un état émotionnel d’un utilisateur
WO2022180092A1 (fr) 2021-02-23 2022-09-01 Oslati Athenais Dispositif et procédé de modification d'un état émotionnel d'un utilisateur
CN115211854A (zh) * 2021-04-19 2022-10-21 天津科技大学 一种基于脑电波的智能自适应司机人机交互情绪调节方法
CN115770344A (zh) * 2021-09-06 2023-03-10 北京大学第六医院 一种基于脑电信号制备缓解抑郁音乐的方法、系统及存储介质
CN115363587A (zh) * 2022-10-26 2022-11-22 安徽星辰智跃科技有限责任公司 基于音乐创作的神经心理评估及干预的方法、系统和装置

Also Published As

Publication number Publication date
CN110947076B (zh) 2021-07-16

Similar Documents

Publication Publication Date Title
CN110947076B (zh) 一种可进行精神状态调节的智能脑波音乐可穿戴设备
CN110947075A (zh) 基于脑波音乐的个性化精神状态调节系统及调节方法
WO2021203719A1 (zh) 结合脑电检测分析控制的声电刺激神经调控方法及装置
US20200268272A1 (en) Headgear with displaceable sensors for electrophysiology measurement and training
CN101467875B (zh) 耳戴式生理反馈装置
US20030225340A1 (en) Repetitive visual stimulation to EEG neurofeedback protocols
KR20150098607A (ko) 생리학적 신호를 검출하기 위한 전두부 전극 센서의 배열 및 공간적 배치
CN110742603A (zh) 一种脑电波可听化精神状态检测方法及实现该方法的系统
de Tommaso et al. Combined EEG/EMG evaluation during a novel dual task paradigm for gait analysis
US20180333066A1 (en) Apparatus for measuring electroencephalogram, system and method for diagnosing and preventing dementia
CN112545519B (zh) 一种群体情感同质性的实时评估方法和评估系统
US20100094156A1 (en) System and Method for Biofeedback Administration
Hinterberger The sensorium: a multimodal neurofeedback environment
Kanoh et al. A brain-computer interface (BCI) system based on auditory stream segregation
KR20190049442A (ko) 청각 자극 기반 수면 유도 시스템 및 그 방법
Kaongoen et al. An auditory P300-based brain-computer interface using Ear-EEG
CN116327195A (zh) 一种基于EEG和fNIRS的可穿戴设备及推荐系统
CN109284009B (zh) 一种提高听觉稳态响应脑-机接口性能的系统及方法
CN114081511B (zh) 双耳分频听觉诱发的脑-机接口装置和方法
CN109567936B (zh) 一种基于听觉注意和多焦电生理的脑机接口系统和实现方法
CN116098619B (zh) 一种基于高频听觉稳态响应的抑郁症自动检测系统
CN114053550B (zh) 一种基于高频心电的耳机式情绪压力调节装置
CN110638445A (zh) 一种基于ssvep的少通道脑电信号采集装置
CN107802263A (zh) 一种基于脑电生理信号的可穿戴声音反馈系统
CN112716453A (zh) 血压、神经信号采集分析方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant