CN106155329B - 基于往复摆动视觉感知的稳态诱发电位脑-机接口方法 - Google Patents

基于往复摆动视觉感知的稳态诱发电位脑-机接口方法 Download PDF

Info

Publication number
CN106155329B
CN106155329B CN201610803486.1A CN201610803486A CN106155329B CN 106155329 B CN106155329 B CN 106155329B CN 201610803486 A CN201610803486 A CN 201610803486A CN 106155329 B CN106155329 B CN 106155329B
Authority
CN
China
Prior art keywords
fan
normal form
shaped
frequency
reciprocally swinging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610803486.1A
Other languages
English (en)
Other versions
CN106155329A (zh
Inventor
徐光华
闫文强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Jiaotong University
Original Assignee
Xian Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Jiaotong University filed Critical Xian Jiaotong University
Priority to CN201610803486.1A priority Critical patent/CN106155329B/zh
Publication of CN106155329A publication Critical patent/CN106155329A/zh
Application granted granted Critical
Publication of CN106155329B publication Critical patent/CN106155329B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Neurosurgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurology (AREA)
  • Health & Medical Sciences (AREA)
  • Dermatology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)

Abstract

一种基于往复摆动视觉感知的稳态诱发电位脑‑机接口方法,利用人眼对摆动运动感知的敏感性,采用红色扇形往复摆动作为范式,以等角速度方式实现扇形往复摆动,通过脑电采集设备采集使用者注视刺激图案时产生的脑电信号,经过放大、滤波与A/D转换后,将处理后的脑电信号输入计算机,采集到的脑电信号利用典型相关分析实现对脑电信号的特征提取及分类识别,本发明融合了色彩、形状、运动等视觉信息,且范式面积较小,人眼接受的刺激较少,降低了使用者的视觉疲劳,提高了EEG信噪比,在中频段也可以诱发出刺激频率。对注视目标辨识准确率也更高,具有低闪烁,低适应性的特点,可以提升脑‑机接口的交互性能。

Description

基于往复摆动视觉感知的稳态诱发电位脑-机接口方法
技术领域
本发明涉及脑-机接口技术领域,具体涉及一种基于摆动视觉感知的稳态视觉诱发电位脑-机接口方法。
背景技术
脑-机接口技术(BCI)常用方法有运动想象、P300事件相关电位、瞬态视觉诱发电位、稳态视觉诱发电位(SSVEP)等。相比而言,稳态视觉诱发电位所需电极数目更少、使用者不需要训练,辨识准确率更高。但基于SSVEP的脑-机接口常采用光闪烁或图形翻转等刺激方式,易造成使用者视觉疲劳、降低辨识准确率,限制了其进一步应用。近年来有学者提出基于运动感知的脑-机接口方法,能避免长时间强刺激对大脑响应产生的负面影响。运动视觉诱发电位(mVEP)分为瞬态和稳态两种,相比稳态而言,瞬态范式要求刺激目标按不同起始时刻作单一方向运动,运动具有方向特异性,易引发大脑运动后效应。西安交通大学谢俊等人基于稳态运动视觉诱发电位(SSMVEP),设计了收缩-扩张的牛顿环,作为脑-机接口方法,获得了很好的辨识准确率。但牛顿环中央区域图案破坏了牛顿环在运动过程中保持亮度恒定这一性质,降低了谱峰信噪比,不利于减轻使用者的视觉疲劳。为了保证在运动过程中保持亮度恒定,西安交通大学徐光华等人设计了收缩-扩张的黑白棋盘格,辨识效果良好,但该方法只能在低频段(15H以下)诱发出刺激频率,15Hz以上的辨识准确率大大降低。
发明内容
为了克服上述现有技术的缺点,本发明的目的在于提供一种基于往复摆动视觉感知的稳态诱发电位脑-机接口方法,提高信噪比,降低使用者视觉疲劳,在中频段(15-25Hz)也可以诱发出刺激频率,拓宽范式频率设置范围,用以提升脑-机接口的交互性能。
为了达到上述目的,本发明采取的技术方案为:
一种基于往复摆动视觉感知的稳态诱发电位脑-机接口方法,包括以下步骤:
1)红色扇形往复摆动范式设计:
根据色彩空间理论,选用红色作为刺激范式颜色,背景色设为白色,将扇形半径设为360像素,摆动角度范围设置为120°;设扇形运动频率为f,即往复摆动一个周期所需时间的倒数,反转频率为fc,即扇形摆动方向改变的频率,该范式刺激效果以f为基频,能量集中在其二倍频,即反转频率fc处,将反转频率fc作为诱发的SSMVEP信号基频;范式图案是通过显示屏一帧一帧呈现的,屏幕刷新率为fr,则范式呈现一个周期所需帧数n为:
n=fr/f (1)
由于帧数n需为整数,这里将其圆整为N,扇形每一帧转过的角度Deg为:
Deg=(120*2)/N (2)
得到转角后,将扇形弧度Ang设置为:
Ang=Deg+2 (3)
在扇形每一次摆动过程中有2°的交叠,更加有利于辨识;为了使扇形对称摆动,需要设置一个初始摆动位置角度Startang0:
Startang0=360-(N/2*Deg)/2 (4)
Startang0表示每一刺激开始时扇形初始位置角度;范式图案通过显示屏一帧一帧呈现,只要改变每一帧扇形初始摆动位置角度就实现扇形的往复摆动:
Startangi+1=Startangi+k*Deg (5)
其中i表示第i帧范式图案;根据式(5)知,通过改变k的值实现扇形的往复运动,k取1时,顺时针转,k取-1时,逆时针转;正式应用时,首先设置范式刺激频率,根据式(1)计算出帧数,根据式(2)计算出转角,根据式(3)计算扇形的弧度,根据式(4)、式(5),改变扇形初始摆动角度就实现其往复摆动;
2)搭建脑-机接口实验平台:
电极帽通过脑电采集设备和主控制器的输入连接,主控制器的输出通过显示屏扩展和屏幕的输入连接,使用者头戴电极帽端坐于屏幕前,头部距离屏幕100-120cm,测量电极为O1、Oz、O2、POz、PO4和PO8,左耳垂放置参考电极,FPz处为地电极,给各测量电极注入导电膏,保证电极与头皮良好接触;
3)范式呈现与识别:
主控制器通过显示屏扩展使屏幕上呈现数个刺激频率不同的红色扇形往复摆动范式,使用者每次注视刺激范式图案中任意一个,通过脑电采集设备采集使用者注视范式图案时产生的脑电信号,然后经过放大、滤波与A/D转换后,将处理后的脑电信号输入主控制器,将采集到的脑电信号利用典型相关分析进行特征提取及分类识别;
4)识别结果通过屏幕输出,完成视觉反馈后,返回步骤3),进行下一轮的目标辨识。
本发明的有益效果为:
1、本发明基于稳态运动视觉诱发电位,将色彩、形状、运动等视觉信息融合设计的红色扇形摆动范式,可以激活更多的脑区,诱发更强的SSMVEP。
2、以往范式形状大多是整圆,人眼接受的刺激较大,而本发明扇形范式面积较小,降低了使用者的视觉疲劳,提高了EEG信噪比,具有低闪烁,低适应性的特点。
3、本本发明不但在低频段(15Hz以下)有良好的响应,在中频段(15-25Hz)也可以诱发出刺激频率,拓宽了范式可设置的频率范围,对注视目标识别准确率也更高,适宜于长期使用的脑-机交互场合。
附图说明
图1为本发明的红色扇形摆动范式图案。
图2为本发明方法的脑-机接口平台示意图。
图3为摆动范式刺激频率为13Hz、18Hz时功率谱密度图,其中图(a)是刺激频率为13Hz时功率谱密度图,图(b)刺激频率为18Hz时功率谱密度图。
图4为刺激频率为7.6Hz、9.6Hz、11Hz时,摆动范式与棋盘格功率谱密度图,其中图(a)是刺激频率为7.6Hz时,摆动范式与棋盘格功率谱密度图,图(b)是刺激频率为9.6Hz时,摆动范式与棋盘格功率谱密度图,图(c)是刺激频率为11Hz时,摆动范式与棋盘格功率谱密度图。
具体实施方式
下面结合附图对本发明作详细描述。
一种基于往复摆动视觉感知的稳态诱发电位脑-机接口方法,包括以下步骤:
1)红色扇形往复摆动范式设计:
参照图1,根据色彩空间理论,人眼最容易辨识红色,并且红色刺激,潜伏期最短,有利于大脑快速响应,所以选用红色作为刺激范式颜色,背景色设为白色,基于前期实验以及参数优化结果,将扇形半径设为360像素,摆动角度范围设置为120°;设扇形运动频率为f,即往复摆动一个周期所需时间的倒数,反转频率为fc,即扇形摆动方向改变的频率,该范式刺激效果以f为基频,能量集中在其二倍频,即反转频率fc处,将反转频率fc作为诱发的SSMVEP信号基频;范式图案是通过显示屏一帧一帧呈现的,屏幕刷新率为fr,则范式呈现一个周期所需帧数n为:
n=fr/f (1)
由于帧数n需为整数,这里将其圆整为N,扇形每一帧转过的角度Deg为:
Deg=(120*2)/N (2)
得到转角后,将扇形弧度Ang设置为:
Ang=Deg+2 (3)
在扇形每一次摆动过程中有2°的交叠,更加有利于辨识;为了使扇形对称摆动,需要设置一个初始摆动位置角度Startang0:
Startang0=360-(N/2*Deg)/2 (4)
Startang0表示每一刺激开始时扇形初始位置角度;范式图案通过显示屏一帧一帧呈现,只要改变每一帧扇形初始摆动位置角度就实现扇形的往复摆动:
Startangi+1=Startangi+k*Deg (5)
其中i表示第i帧范式图案;根据式(5)知,通过改变k的值实现扇形的往复运动,k取1时,顺时针转,k取-1时,逆时针转;正式应用时,首先设置范式刺激频率,根据式(1)计算出帧数,根据式(2)计算出转角,根据式(3)计算扇形的弧度,根据式(4)、式(5),改变扇形初始摆动角度就实现其往复摆动;
2)搭建脑-机接口实验平台:
参照图2,电极帽通过脑电采集设备和主控制器的输入连接,主控制器的输出通过显示屏扩展和屏幕的输入连接,使用者头戴电极帽端坐于屏幕前,头部距离屏幕100-120cm,测量电极为O1、Oz、O2、POz、PO4和PO8,左耳垂放置参考电极,FPz处为地电极,给各测量电极注入导电膏,保证电极与头皮良好接触;
3)范式呈现与识别:
主控制器通过显示屏扩展使屏幕上呈现数个刺激频率不同的红色扇形往复摆动范式,使用者每次注视刺激范式图案中任意一个,通过脑电采集设备采集使用者注视范式图案时产生的脑电信号,然后经过放大、滤波与A/D转换后,将处理后的脑电信号输入主控制器,将采集到的脑电信号利用典型相关分析进行特征提取及分类识别;
4)识别结果通过屏幕输出,完成视觉反馈后,返回步骤3),进行下一轮的目标辨识。
下面结合具体实施例说明该范式的刺激效果,参照图3,显示屏上布置两个范式图案,刺激频率为13Hz和18Hz,被试每次注视其中一个。每个范式单次刺激时长为5秒,10次为一个周期,中间间隔2秒,被试可以适当休息,接着注视另一个,直到两个都注视完毕。选用被试Oz电极数据做Welch功率谱,可以看到刺激频率突出,信燥比较高,不但在低频13Hz,还在中频18Hz处诱发出了刺激频率,可以确定往复摆动的扇形刺激范式在中、低频段都可以诱发出刺激频率。
参照图4,为黑白棋盘格与红色扇形往复摆动范式在刺激频率为7.6Hz、9.6Hz、11Hz处刺激效果的比较,选用被试Oz电极采集的数据做Welch功率谱,从功率谱图上可以看到往复摆动的范式诱发的刺激频率处峰值更高,信噪比更高,说明人眼对摆动运动感知更加敏感。

Claims (1)

1.基于往复摆动视觉感知的稳态诱发电位脑-机接口方法,其特征在于,包括以下步骤:
1)红色扇形往复摆动范式设计:
根据色彩空间理论,选用红色作为刺激范式颜色,背景色设为白色,将扇形半径设为360像素,摆动角度范围设置为120°;设扇形运动频率为f,即往复摆动一个周期所需时间的倒数,反转频率为fc,即扇形摆动方向改变的频率,该范式刺激效果以f为基频,能量集中在其二倍频,即反转频率fc处,将反转频率fc作为诱发的SSMVEP信号基频;范式图案是通过显示屏一帧一帧呈现的,屏幕刷新率为fr,则范式呈现一个周期所需帧数n为:
n=fr/f (1)
由于帧数n需为整数,这里将其圆整为N,扇形每一帧转过的角度Deg为:
Deg=(120*2)/N (2)
得到转角后,将扇形弧度Ang设置为:
Ang=Deg+2 (3)
在扇形每一次摆动过程中有2°的交叠,更加有利于辨识;为了使扇形对称摆动,需要设置一个初始摆动位置角度Startang0:
Startang0=360-(N/2*Deg)/2 (4)
Startang0表示每一刺激开始时扇形初始位置角度;范式图案通过显示屏一帧一帧呈现,只要改变每一帧扇形初始摆动位置角度就实现扇形的往复摆动:
Startangi+1=Startangi+k*Deg (5)
其中i表示第i帧范式图案;根据式(5)知,通过改变k的值实现扇形的往复运动,k取1时,顺时针转,k取-1时,逆时针转;正式应用时,首先设置范式刺激频率,根据式(1)计算出帧数,根据式(2)计算出转角,根据式(3)计算扇形的弧度,根据式(4)、式(5),改变扇形初始摆动角度就实现其往复摆动;
2)搭建脑-机接口实验平台:
电极帽通过脑电采集设备和主控制器的输入连接,主控制器的输出通过显示屏扩展和屏幕的输入连接,使用者头戴电极帽端坐于屏幕前,头部距离屏幕100-120cm,测量电极为O1、Oz、O2、POz、PO4和PO8,左耳垂放置参考电极,FPz处为地电极,给各测量电极注入导电膏,保证电极与头皮良好接触;
3)范式呈现与识别:
主控制器通过显示屏扩展使屏幕上呈现数个刺激频率不同的红色扇形往复摆动范式,使用者每次注视刺激范式图案中任意一个,通过脑电采集设备采集使用者注视范式图案时产生的脑电信号,然后经过放大、滤波与A/D转换后,将处理后的脑电信号输入主控制器,将采集到的脑电信号利用典型相关分析进行特征提取及分类识别;
4)识别结果通过屏幕输出,完成视觉反馈后,返回步骤3),进行下一轮的目标辨识。
CN201610803486.1A 2016-09-06 2016-09-06 基于往复摆动视觉感知的稳态诱发电位脑-机接口方法 Active CN106155329B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610803486.1A CN106155329B (zh) 2016-09-06 2016-09-06 基于往复摆动视觉感知的稳态诱发电位脑-机接口方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610803486.1A CN106155329B (zh) 2016-09-06 2016-09-06 基于往复摆动视觉感知的稳态诱发电位脑-机接口方法

Publications (2)

Publication Number Publication Date
CN106155329A CN106155329A (zh) 2016-11-23
CN106155329B true CN106155329B (zh) 2019-01-08

Family

ID=57341115

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610803486.1A Active CN106155329B (zh) 2016-09-06 2016-09-06 基于往复摆动视觉感知的稳态诱发电位脑-机接口方法

Country Status (1)

Country Link
CN (1) CN106155329B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108334195B (zh) * 2018-01-17 2019-10-18 西安交通大学 基于调制的生物运动视觉感知的脑-机接口方法
CN110262658B (zh) * 2019-06-14 2023-02-03 长春理工大学 一种基于强化注意的脑机接口字符输入系统及实现方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1776572A (zh) * 2005-12-08 2006-05-24 清华大学 基于稳态视觉诱发脑电波的计算机人机交互方法
CN101464728A (zh) * 2009-01-05 2009-06-24 清华大学 视觉运动相关神经信号为载体的人机交互方法
CN101477405A (zh) * 2009-01-05 2009-07-08 清华大学 基于左右视野两个频率刺激的稳态视觉诱发脑机接口方法
CN101887307A (zh) * 2010-06-03 2010-11-17 西安交通大学 一种多频率时序组合的稳态视觉诱发电位脑-机接口方法
WO2012044261A1 (en) * 2010-09-29 2012-04-05 The Office Of National Telecommunications Commission System and method for ssvep based control of electrical devices

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1776572A (zh) * 2005-12-08 2006-05-24 清华大学 基于稳态视觉诱发脑电波的计算机人机交互方法
CN101464728A (zh) * 2009-01-05 2009-06-24 清华大学 视觉运动相关神经信号为载体的人机交互方法
CN101477405A (zh) * 2009-01-05 2009-07-08 清华大学 基于左右视野两个频率刺激的稳态视觉诱发脑机接口方法
CN101887307A (zh) * 2010-06-03 2010-11-17 西安交通大学 一种多频率时序组合的稳态视觉诱发电位脑-机接口方法
WO2012044261A1 (en) * 2010-09-29 2012-04-05 The Office Of National Telecommunications Commission System and method for ssvep based control of electrical devices

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
稳态视觉诱发电位的研究与展望;张锋等;《仪器仪表学报》;20100831;第31卷(第8期);156-165

Also Published As

Publication number Publication date
CN106155329A (zh) 2016-11-23

Similar Documents

Publication Publication Date Title
CN103845137B (zh) 基于稳态视觉诱发脑机接口的机器人控制方法
Tass et al. Synchronization tomography: a method for three-dimensional localization of phase synchronized neuronal populations in the human brain using magnetoencephalography
CN109271020B (zh) 一种基于眼动追踪的稳态视觉诱发脑机接口性能评价方法
Bakardjian et al. Optimization of SSVEP brain responses with application to eight-command brain–computer interface
CN102722244B (zh) 基于运动翻转视觉感知的稳态诱发电位脑-机接口方法
CN104965584A (zh) 基于ssvep与osp的混合脑-机接口方法
CN106155323A (zh) 基于等亮度色彩强化的稳态运动诱发电位脑‑机接口方法
CN108803873B (zh) 一种基于高刷新率呈现的运动视觉诱发电位脑机接口方法
CN103472922A (zh) 一种基于p300与ssvep混合式脑机接口的目的地选择系统
CN106155329B (zh) 基于往复摆动视觉感知的稳态诱发电位脑-机接口方法
JP7305324B2 (ja) 刺激装置及びその動作方法並びにコンピュータ読み出し可能格納媒体
CN105138818B (zh) 结合图形视觉诱发电位的弱视辅助诊疗系统
Jeanne et al. Camera-based heart rate monitoring in highly dynamic light conditions
CN107510555B (zh) 一种轮椅脑波控制装置及控制方法
CN102063180A (zh) 基于hht高频组合编码稳态视觉诱发电位脑机接口方法
CN109508094B (zh) 一种结合异步眼动开关的视觉诱发脑机接口方法
CN109875509A (zh) 阿尔茨海默症患者康复训练效果的测试系统和方法
CN110251065A (zh) 基于运动视觉诱发电位的对比敏感度检测方法
CN106333676B (zh) 清醒状态下的脑电信号数据类型的标注装置
CN106468952B (zh) 基于旋转视觉感知的稳态运动诱发电位脑-机接口方法
CN106468953A (zh) 螺旋运动视觉感知的稳态运动诱发电位脑‑机接口方法
JP6201520B2 (ja) 生理指標を用いる視線分析システムおよび方法
Kassab et al. The Effect of Noise on Contactless Heart Rate Measurement using Video Magnification
CN108888482A (zh) 基于运动皮层相关电位脑机接口的下肢外骨骼康复训练系统及方法
CN106055109B (zh) 一种基于体感电刺激的脑机接口刺激序列生成方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant