CN108829238B - 一种基于超声调制的脑-机接口通讯方法 - Google Patents
一种基于超声调制的脑-机接口通讯方法 Download PDFInfo
- Publication number
- CN108829238B CN108829238B CN201810422323.8A CN201810422323A CN108829238B CN 108829238 B CN108829238 B CN 108829238B CN 201810422323 A CN201810422323 A CN 201810422323A CN 108829238 B CN108829238 B CN 108829238B
- Authority
- CN
- China
- Prior art keywords
- electroencephalogram
- ultrasonic
- electroencephalogram signal
- modulation
- brain
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004891 communication Methods 0.000 title claims abstract description 38
- 238000000034 method Methods 0.000 title claims abstract description 27
- 238000002604 ultrasonography Methods 0.000 claims description 14
- 210000004556 brain Anatomy 0.000 claims description 12
- 230000000694 effects Effects 0.000 claims description 9
- 230000000875 corresponding effect Effects 0.000 claims description 7
- 238000001914 filtration Methods 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 6
- 230000005515 acousto electric effect Effects 0.000 claims description 5
- 238000000605 extraction Methods 0.000 claims description 4
- 238000005290 field theory Methods 0.000 claims description 4
- 238000012706 support-vector machine Methods 0.000 claims description 4
- 230000003321 amplification Effects 0.000 claims description 3
- 230000002596 correlated effect Effects 0.000 claims description 3
- 238000002347 injection Methods 0.000 claims description 3
- 239000007924 injection Substances 0.000 claims description 3
- 238000005259 measurement Methods 0.000 claims description 3
- 210000002569 neuron Anatomy 0.000 claims description 3
- 238000003199 nucleic acid amplification method Methods 0.000 claims description 3
- 230000004913 activation Effects 0.000 abstract description 6
- 238000007917 intracranial administration Methods 0.000 abstract description 3
- 210000003169 central nervous system Anatomy 0.000 description 6
- 230000008901 benefit Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 239000000243 solution Substances 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000000763 evoking effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Neurosurgery (AREA)
- General Health & Medical Sciences (AREA)
- Neurology (AREA)
- Health & Medical Sciences (AREA)
- Dermatology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
Abstract
本发明公开了一种基于超声调制的脑‑机接口通讯方法，包括：安装由脑电电极、脑电放大器、脑电滤波器的脑电采集系统以及基于超声调制的脑电信号测量系统组成的脑电信号测量设备、以及由聚焦超声换能器和聚焦超声波驱动装置组成的聚焦超声波发射设备；利用水听器测量聚焦超声波特性；在所设定的实验范式下，将超声波聚焦于焦斑位置，同时测量脑电信号和基于超声调制的脑电信号；利用所测量的脑电信号和基于超声调制的脑电信号制定解码策略。本方法利用聚焦超声波预先对颅内激活源信号进行调制，从激活源源头增加脑电信号的空间位置信息，进而为BCI通讯提供高时空分辨率的脑电信号，以扩展BCI系统通讯宽带、增大其指令集。
Description
技术领域
本发明涉及脑-机接口通讯技术领域，尤其涉及一种基于超声调制的脑-机接口通讯方法。
背景技术
脑-机接口(Brain-computer Interface,BCI)是一个通过检测中枢神经系统(Central Nervous System，CNS)活动并将其转化为人工输出来替代、修复、增强、补充或改善CNS正常输出，由此改变CNS与其内外环境之间持续交互作用的系统。该定义突出了BCI替代、修复、增强、补充或改善CNS功能的关键作用，更强调了BCI在改变CNS传统对外交互机制、创造新型人机交互模式方面的重要意义。BCI通过采集和分析不同状态下人的脑电信号，使用一定的工程技术手段在人脑与计算机或其他电子设备之间建立起直接的交流和控制通道，从而实现一种新的信息交换和控制技术。例如：可以为残疾人特别是那些丧失了基本肢体运动功能但思维正常的病人提供一种与外界进行信息交流与控制的途径。为此，BCI技术越来越受到重视。
在BCI系统研究中，通讯协议的设计是其中一个重要的环节，它直接决定了BCI系统的通讯带宽。目前基于脑电信号的BCI通讯协议包括：单一时间的编码方式，例如：基于ERP(事件相关电位)的BCI；单一频率的编码方式，例如：基于SSVEP(稳态视觉诱发电位)的BCI；以及基于空间、时间和频率联合编码的BCI通讯方法(CN 103150017A)。这些编码方法、解码策略的研究大大提高了BCI系统的通讯效率。
然而，受限制于脑电信号空间分辨率低、空间分布信息不足，目前基于脑电信号的BCI通讯协议存在指令集小，解码深度差的问题。同时，BCI系统受限于脑电信息微弱，极易受到干扰，其性能几乎完全依赖于对脑电信号的解码算法，难以深入学习更多的信源。
发明内容
本发明提供了一种基于超声调制的脑-机接口通讯方法，本方法在传统脑电信号检测的基础上，利用聚焦超声波预先对颅内激活源信号进行调制，从激活源源头增加脑电信号的空间位置信息，进而为BCI通讯提供高时空分辨率的脑电信号，以扩展BCI系统通讯宽带、增大其指令集，详见下文描述：
一种基于超声调制的脑-机接口通讯方法，所述方法包括以下步骤：
安装由脑电电极、脑电放大器、脑电滤波器的脑电采集系统以及基于超声调制的脑电信号测量系统组成的脑电信号测量设备、以及由聚焦超声换能器和聚焦超声波驱动装置组成的聚焦超声波发射设备；利用水听器测量聚焦超声波特性；
在所设定的实验范式下，将超声波聚焦于焦斑位置，同时测量脑电信号和基于超声调制的脑电信号；利用所测量的脑电信号和基于超声调制的脑电信号制定解码策略。
进一步地，所述基于超声调制的脑电信号测量系统依次包括：差分放大装置、带通滤波装置、二次放大装置以及数字采集装置。
其中，所述利用水听器测量聚焦超声波特性具体为：
测量聚焦超声波谐振频率、聚焦超声波焦斑的位置、尺寸、以及聚焦超声波焦斑处声压。
具体实现时，所述测量脑电信号具体为：
根据导程场理论，在已知脑内神经元电活动和组织电阻率ρ情况下，脑电电极测量的脑电信号V满足如下数学关系：
其中，
是激活源电流密度；
是电极在单位电流注入情况下对应的电流密度；Ω是全脑电活动区域。
具体实现时，所述测量基于超声调制的脑电信号具体为：
当聚焦超声波聚焦于焦斑时，聚焦区域电阻率的变化Δρ导致脑电电极测量的脑电信号的变化，产生超声调制的脑电信号VAE，该信号与聚焦超声波频率相同，与脑电信号幅值正相关，并且携带聚焦超声波焦斑空间位置信息，其数学关系如下：
进一步地，所述利用所测量的脑电信号和基于超声调制的脑电信号制定解码策略具体为：
通过滤波、共空间模式特征提取、支持向量机模式识别后，将识别结果转换为相应的BCI命令输出。
所述带通滤波装置的中心频率为1MHz，总放大倍数为50-70分贝，所选用的数字采集板块为NI PXI-5101。
本发明提供的技术方案的有益效果是：
(1)通过超声调制脑电信号，增加脑电信号的空间分布信息，进而扩展BCI系统通讯宽带、增大其指令集，可以从根本上提高BCI的通讯效率；
(2)相比于基于脑电的BCI通讯方法，基于超声调制的BCI通讯方法可以根据基于超声调制脑电信号的空间位置信息，进行深度的解码，进而增加BCI系统的解码深度。
附图说明
图1为基于超声调制的脑-机接口通讯的示意图；
图2为基于超声调制的脑-机接口通讯方法的流程图；
图3为聚焦超声波对脑电信号调制原理的示意图。
图中，将聚焦超声波触发信号施加给聚焦超声换能器进而发射聚焦超声波，将超声波聚焦于焦斑。焦斑位置记为L，图中以三个焦斑位置为例，分别记为L.1、L.2、L.3。聚焦超声波用于对颅内激活源信号进行调制，通过脑电电极对基于超声调制的脑电信号进行测量。
图4为基于超声调制的脑电信号测量系统示意图。
其中，带通滤波中心频率由超声换能器中心频率决定，实施例中所用超声换能器中心频率为1MHz，所以此处带通滤波中心频率为1MHz。如果所使用超声换能器中心频率为0.5MHz，则对应带通滤波中心频率为0.5MHz；总放大倍数为50-70分贝；所选用的数字采集板块为NI PXI-5101，其采样频率为20MHz，其他更高采样频率的数字采集板卡亦可。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面对本发明实施方式作进一步地详细描述。
声电效应是一种超声对电学调制的基本物理现象，具体指：聚焦超声波在介质中传播，造成局部区域(聚焦区域)电阻率的周期性变化(由超声波的频率决定)。基于声电效应作用，参考文献[1]-[4]中提出电流密度成像即声电成像方法，以实现电流源分布成像。这些工作为超声调制脑电信号的可行性进行了理论和实验验证，为本发明的提出提供了理论基础。
实施例1
一种基于超声调制的脑-机接口通讯新方法，参见图1和图2，该方法包括下列的步骤：
101：安装脑电信号测量装置以及聚焦超声波发射装置，并测量聚焦超声波特性；
102：在所设定的实验范式下，如运动想象实验范式，将超声波聚焦于焦斑位置，同时测量脑电信号和基于超声调制的脑电信号；
具体实现时，还可以为其他的实验范式，本发明实施例对此不做限制。
103：利用所测量的脑电信号和基于超声调制的脑电信号制定解码策略。
即，通过滤波、CSP(共空间模式)特征提取、SVM(支持向量机)模式识别后，将识别结果转换为相应的BCI命令输出。
综上所述，本发明实施例通过上述步骤101-步骤103实现了通过超声调制脑电信号，增加脑电信号的空间分布信息，进而扩展BCI系统通讯宽带、增大其指令集，可以从根本上提高BCI的通讯效率。
实施例2
下面结合图3和图4对实施例1中的方案进行进一步地介绍，详见下文描述：
201：安装脑电信号测量装置以及聚焦超声波发射装置，并测量聚焦超声波特性；
其中，脑电信号测量装置包括：脑电电极、脑电放大器、脑电滤波器的脑电采集系统以及基于超声调制的脑电信号测量系统。其中，参见图4，基于超声调制的脑电信号测量系统：包含：差分放大装置、带通滤波装置、二次放大装置以及数字采集装置。
其中，聚焦超声波发射装置包括：聚焦超声换能器、以及聚焦超声波驱动装置。
同时，利用水听器测量聚焦超声波特性，具体包括：聚焦超声波谐振频率、聚焦超声波焦斑的位置以及尺寸、聚焦超声波焦斑处声压
其中，P0聚焦超声波声压为；
为聚焦超声波角频率。
进一步地，聚焦超声换能器可以选用型号为Panametrics A392S的换能器；聚焦超声波驱动装置包括：超声脉冲信号发射/接收器：可以选用型号为Panametrics 5077PR发射/接收器。
202：在所设定的实验范式(例如：运动想象实验范式)下，将超声波聚焦于焦斑位置，同时测量脑电信号和基于超声调制的脑电信号；
根据导程场(或称引导场)理论(Lead field theory)，在已知激活源(脑内神经元电活动)和组织电阻率(ρ)情况下，脑电电极测量的脑电信号(V)满足如下数学关系：
其中，
是激活源电流密度；
是电极在单位电流注入情况下对应的电流密度；Ω是全脑电活动区域。
根据声电效应作用，当聚焦超声波聚焦于ω区域(超声波的聚焦区域(或焦斑区域)时，聚焦区域电阻率的变化，满足：
其中，k为声电效应系数，数量级为1×10-9Pa-1。
当聚焦超声波聚焦于焦斑时，聚焦区域电阻率的变化Δρ导致脑电电极测量的脑电信号的变化，产生超声调制的脑电信号(VAE)，该信号与聚焦超声波频率相同，与脑电信号幅值正相关，并且携带聚焦超声波焦斑空间位置信息，其数学关系如下：
由该公式可见，由于积分域是焦斑而不是整个全脑电活动区域，相较于传统脑电信号，超声调制可以增加传统脑电信号的空间位置信息，因此可以扩展BCI系统的通讯宽带、增大其指令集。
203：利用所测量的脑电信号和基于超声调制的脑电信号，通过滤波、特征提取、模式识别后，制定解码策略，转换为BCI命令输出，实现高效率BCI通讯。
综上所述，本发明实施例提供的基于超声调制的脑-机接口通讯新方法，能够极大的增加BCI系统带宽、增大其指令集，进一步研究可以得到完善的脑-机接口系统，有望获得可观的社会效益和经济效益。
参考文献
[1]Olafsson R,Witte R S,HuangS W,et al.Ultrasound current sourcedensity imaging.IEEE Transactions on Biomedical Engineering,2008,55(7):1840-1848.
[2]Li Q,Olafsson R,Ingram P,et al.Measuring the acoustoelectricinteraction constant using ultrasound current source density imaging.Physicsin Medicine&Biology,2012,57(19):5929-5941.
[3]Qin,Y.,Ingram,P.,Burton,A.,et al.4D acoustoelectric imaging ofcurrent sources in a human head phantom.In Ultrasonics Symposium(IUS),2016IEEE International(pp.1-4).
[4]Qin Y,Ingram P,Xu Z,et al.Performance of a transcranial US arraydesigned for 4D acoustoelectric brain imaging in humans.In UltrasonicsSymposium(IUS),2017 IEEE International(pp.1-4).
本发明实施例对各器件的型号除做特殊说明的以外，其他器件的型号不做限制，只要能完成上述功能的器件均可。
本领域技术人员可以理解附图只是一个优选实施例的示意图，上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (7)
1.一种基于超声调制的脑-机接口通讯方法，其特征在于，所述方法包括以下步骤：
安装由脑电电极、脑电放大器、脑电滤波器的脑电采集系统以及基于超声调制的脑电信号测量系统组成的脑电信号测量设备、以及由聚焦超声换能器和聚焦超声波驱动装置组成的聚焦超声波发射设备；利用水听器测量聚焦超声波特性；
在所设定的实验范式下，将超声波聚焦于焦斑位置，同时测量脑电信号和基于超声调制的脑电信号；利用所测量的脑电信号和基于超声调制的脑电信号制定解码策略。
2.根据权利要求1所述的一种基于超声调制的脑-机接口通讯方法，其特征在于，所述基于超声调制的脑电信号测量系统依次包括：差分放大装置、带通滤波装置、二次放大装置以及数字采集装置。
3.根据权利要求1所述的一种基于超声调制的脑-机接口通讯方法，其特征在于，所述利用水听器测量聚焦超声波特性具体为：
测量聚焦超声波谐振频率、聚焦超声波焦斑的位置、尺寸、以及聚焦超声波焦斑处声压。
4.根据权利要求1所述的一种基于超声调制的脑-机接口通讯方法，其特征在于，所述测量脑电信号具体为：
根据导程场理论，在已知脑内神经元电活动和组织电阻率ρ情况下，脑电电极测量的脑电信号V满足如下数学关系：
其中，
是激活源电流密度；
是电极在单位电流注入情况下对应的电流密度；Ω是全脑电活动区域。
5.根据权利要求4所述的一种基于超声调制的脑-机接口通讯方法，其特征在于，所述测量基于超声调制的脑电信号具体为：
当聚焦超声波聚焦于焦斑时，聚焦区域电阻率的变化Δρ导致脑电电极测量的脑电信号的变化，产生超声调制的脑电信号VAE，该信号与聚焦超声波频率相同，与脑电信号幅值正相关，并且携带聚焦超声波焦斑空间位置信息，其数学关系如下：
其中，k为声电效应系数，P为聚焦超声波焦斑处声压。
6.根据权利要求1所述的一种基于超声调制的脑-机接口通讯方法，其特征在于，所述利用所测量的脑电信号和基于超声调制的脑电信号制定解码策略具体为：
通过滤波、共空间模式特征提取、支持向量机模式识别后，将识别结果转换为相应的BCI命令输出。
7.根据权利要求2所述的一种基于超声调制的脑-机接口通讯方法，其特征在于，所述带通滤波装置的中心频率为1MHz，总放大倍数为50-70分贝，所选用的数字采集板块为NIPXI-5101。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810422323.8A CN108829238B (zh) | 2018-05-04 | 2018-05-04 | 一种基于超声调制的脑-机接口通讯方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810422323.8A CN108829238B (zh) | 2018-05-04 | 2018-05-04 | 一种基于超声调制的脑-机接口通讯方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108829238A CN108829238A (zh) | 2018-11-16 |
| CN108829238B true CN108829238B (zh) | 2021-01-08 |
Family
ID=64147384
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810422323.8A Active CN108829238B (zh) | 2018-05-04 | 2018-05-04 | 一种基于超声调制的脑-机接口通讯方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108829238B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109645999B (zh) * | 2018-11-29 | 2022-04-26 | 天津大学 | 一种基于声电效应的4d经颅聚焦超声神经成像方法 |
| CN111938628B (zh) * | 2020-09-01 | 2024-01-23 | 天津大学 | 一种基于经颅聚焦超声刺激的脑电源信号检测装置 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012131418A1 (en) * | 2011-03-30 | 2012-10-04 | Centre National De La Recherche Scientifique - Cnrs - | Method for ultrasound functional imaging, man-machine interface method and apparatus using such methods |
| CN103156605B (zh) * | 2013-03-26 | 2016-04-13 | 中国计量学院 | 基于声电效应的生物组织电流密度成像方法 |
| KR101457477B1 (ko) * | 2013-05-22 | 2014-11-05 | 서울대학교산학협력단 | 청각자극을 이용한 뇌파 유발 장치, 뇌 컴퓨터 인터페이스 시스템 및 방법 |
| CN205041400U (zh) * | 2015-07-16 | 2016-02-24 | 燕山大学 | 一种新型便携式经颅超声刺激及脑电信号采集装置 |
| CN205251540U (zh) * | 2015-09-14 | 2016-05-25 | 燕山大学 | 一种一体化的超声刺激及脑电信号采集探头 |
-
2018
- 2018-05-04 CN CN201810422323.8A patent/CN108829238B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN108829238A (zh) | 2018-11-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Liu et al. | Asynchronous Binaural Spatial Audition Sensor With 2$\,\times\, $64$\,\times\, $4 Channel Output | |
| US11569863B2 (en) | Acoustic sensing nodes and related systems and methods | |
| CN109645999B (zh) | 一种基于声电效应的4d经颅聚焦超声神经成像方法 | |
| CN108829238B (zh) | 一种基于超声调制的脑-机接口通讯方法 | |
| CN103385736B (zh) | 内窥式鼻咽癌超声成像装置 | |
| CN106539596A (zh) | 超声探头、包括该超声探头的超声成像设备及其控制方法 | |
| CN105792745A (zh) | 使用稀疏信号表示检测神经动作电位 | |
| JP5946957B2 (ja) | インピーダンスマッチング装置及び方法 | |
| Vizziello et al. | PHY design and implementation of a galvanic coupling testbed for intra-body communication links | |
| CN110801249A (zh) | 一种头发再生装置及方法 | |
| CN103731166B (zh) | 一种频率可调的超声波发射驱动装置 | |
| CN112220494B (zh) | 一种基于脉冲重复频率的声电神经成像系统 | |
| CN109087668A (zh) | 一种步态识别的方法及装置 | |
| CN203915795U (zh) | 一种可进行超声探头接触状态监测的超声治疗设备 | |
| CN106388774B (zh) | 一种便携型感应式磁声二维电导率成像装置 | |
| CN102247167A (zh) | 一种带无线探头的b超仪及其实现方法 | |
| Somnathe et al. | Brain Computer Interaction Framework for Speech and Motor Impairment Using Deep Learning | |
| CN103126721A (zh) | 基于多焦点、多波速的超声复合成像方法及装置 | |
| Vizziello et al. | A novel galvanic coupling testbed based on PC sound card for intra-body communication links | |
| CN111643110A (zh) | 一种基于聚焦超声空间编码的脑电检测装置 | |
| CN106487426B (zh) | 一种电容耦合型人体通信收发器辅助设计系统及方法 | |
| EP4170382B1 (en) | System and method for acoustic based gesture tracking and recognition using spiking neural network | |
| Saidov et al. | Development of equipment for experimental study of digital algorithms in nonstationary signal processing problems | |
| CN103610462B (zh) | 一种用于磁声成像的平移-圆周复合扫描方法 | |
| Pratama et al. | Implementation of ultrasonic communication for wireless body area network using amplitude shift keying modulation |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |