发明内容
本发明的目的在于克服现有技术的不足,提供一种不需借助人手机械力,而是通过人体产生的体电波实现对电视机等电子设备进行控制的系统及方法,尤其涉及一种基于脑电波控制电视机等电子设备的系统及方法。
为达到上述目的,本发明是通过以下技术方案来实现的:
本发明公开了一种基于体电波控制电子设备的系统,其特征在于,包括:电波信号检测装置和电子设备;所述电波信号检测装置包括电波探测器和信号处理芯片;所述电子设备包括:电子设备应用接口、无线接收装置以及USB接口;所述电波信号检测装置与所述电子设备无线通讯连接;其中,所述电波探测器,用于检测体电波信号并将其传递至所述信号处理芯片;所述信号处理芯片处理所述电波信号,编码并无线发射至所述电子设备;所述无线接收装置接收所述无线信号,解码并通过所述USB接口将信号发送至USB缓冲区内;所述电子设备应用接口通过对USB缓冲区内的数据进行检测处理、判断阈值和执行操作,实现对所述电子设备的控制操作。
特别的,所述信号处理芯片对电波信号的处理进一步包括:对电波信号进行滤波、放大、采集、转换处理,提取出平均关注度、平均放松度、眨眼信号强度或其组合等参数,无线发送至所述电子设备。
特别的,所述电子设备接收无线信号进一步包括:无线接收装置接收所述信号检测装置发射的无线信号,解码并以协议包的形式,发送至所述USB缓冲区内。
特别的,所述电子设备应用接口对USB缓冲区内数据的检测处理进一步包括:根据预先设定的阈值和条件,判断USB缓冲区内的数据包是否有效,进而根据判断结果对所述电子设备进行控制操作。
特别的,对所述电子设备进行的控制操作包括:切换频道、调节音量、各种游戏动作、开关电子设备、或其组合。
特别的,在采用平均关注度参数切换频道的同时,可以采用平均放松度信号参数来调节音量,采用眨眼信号强度控制程序进入或退出调节频道和音量的功能。
特别的,对所述电子设备的控制操作还包括:所述设备应用接口驱动所述电子设备显示界面显示有关关注度、放松度和/或原始电波的波形等参数指标。
特别的,其中所述电子设备包括:电视机、游戏机、家用电器等各类电子产品和设备。
特别的,所述体电波不仅包括人体脑电波、还包括肌电波、或其组合。
特别的,所述信号检测装置包括:耳机、头罩、眼镜、探测器等电子产品和设备。
特别的,所述信号检测装置为一耳机,所述耳机内置3.3V电池供电;耳机上面有一个旋转装置固定脑波检测探头,佩戴耳机后所述可旋转该装置使脑波探头贴在前额部位以便检测脑电波。
特别的,所述信号检测装置中的所述电波探测器是一干式探头。
本发明还公开了一种基于体电波控制电子设备的方法,该方法应用于控制系统中,控制系统包括:电波信号检测装置和电子设备,所述电波信号检测装置内设置有电波探测器和信号处理芯片;所述电子设备内设置有电子设备应用接口、无线接收装置以及USB接口,所述方法具体包括如下步骤:
(1)、所述电波探测器检测体电波信号,并将其传递至所述信号处理芯片;
(2)、所述信号处理芯片处理所述传递的电波信号,编码并无线发射至所述电子设备;
(3)、所述无线接收装置接收所述无线信号,解码并通过USB接口将信号发送至USB缓冲区内;
(4)、所述电子设备应用接口通过对USB缓冲区内的数据进行检测处理、判断阈值和执行操作,实现对所述电子设备的控制操作。
特别的,步骤(2)中所述信号处理芯片对电波信号进行处理的步骤进一步包括:对电波信号进行滤波、放大、采集、转换处理,提取出平均关注度、平均放松度、眨眼信号强度或其组合等参数,无线发送至所述电子设备。
特别的,步骤(3)中所述无线接收装置接收无线信号的步骤进一步包括:无线接收装置接收所述信号检测装置发射的无线信号,解码并以协议包的形式,发送至所述USB缓冲区内。
特别的,步骤(4)中所述电子设备应用接口对USB缓冲区内数据进行检测处理的步骤进一步包括:根据预先设定的阈值和条件,判断USB缓冲区内的数据包是否有效,进而根据判断结果对所述电子设备进行控制操作。
特别的,对所述电子设备进行的控制操作包括:切换频道、调节音量、各种游戏动作、开关电子设备、或其组合。
特别的,所述控制电子设备的操作还包括:在采用平均关注度参数切换频道的同时,可以采用平均放松度信号参数来调节音量,采用眨眼信号强度控制程序进入或退出调节频道和音量的功能。
特别的,对所述电子设备的控制操作还包括:所述设备应用接口驱动所述电子设备显示界面显示有关关注度、放松度和/或原始电波的波形等参数指标。
本发明的有益效果,采用本发明的技术方案通过对人体体电波信号的探测,提取出一些参数,如,人脑的关注度和放松度,传递给电子设备控制系统,进行计算,在特定参数达到特定阈值时,执行特定的动作,从而达到控制电子设备的目的。不需借助人手机械力,而是通过人体产生的体电波对电视机等电子设备进行控制。电子设备的界面可以实时显示用户关注度、放松度和脑电波波形等参数指标,很大程度地提升了用户的体验效果和感受度;可以实现切换频道、音量变化控制、游戏动作、开关电子设备等操作功能。
具体实施方式
本发明技术原理:人体产生的体电波主要是人的大脑产生的电波,称为脑电波;以及肌肉动作,如眨眼、心跳、说话等产生的电波,称为肌电波。
大脑在不同的状态下,会有不同的神经活动,发出不同振幅和频率的电波,形成不同的脑波模式,现有技术已经做到用传感器采集脑电波,用芯片进行数模转换后进行快速傅里叶变换(FFT),得到脑电波信号的功率谱密度(PowerSpectral Density,PSD),根据功率谱密度就可以统计一段时间内各个脑电波信号在频域的功率分布。
研究发现,人的情绪、精神状态以及专注状态都受到前额部位大脑的控制,因此本发明的脑波检测耳机把脑波检测传感器(俗称:探头)的位置设置在人的左前额部位,医学上称为FP1区。不同的神经活动会产生不同的脑波模式,从而表现为不同的大脑状态;不同的脑波模式会发出不同的振幅和频率的脑电波。脑波检测芯片将原始脑电波采集、模数转换后进行快速傅里叶变换(FFT),得到脑电波信号的功率谱密度(Power Spectral Density,PSD),根据功率谱密度就可以统计一段时间内各个脑电波信号在频域的功率分布。
实践证明,当人脑思维越活跃时脑电波频谱上高频段的谱功率越高,即高频信号越多;反之,当人脑思维进入无意识状态时频谱上低频段谱功率会变高,即低频信号越多。例如,当频率在0.1到3Hz之间的De lt波谱功率较高时,表示大脑出于无意识、深度无梦睡眠状态;频率在4到7Hz之间的Theta波谱功率较高时,表示大脑处于恍惚、心不在焉状态;频率在8到12Hz之间的Alpha波谱功率较高时,表明大脑正处于平静放松的状态;频率在12到30Hz之间的Beta波谱功率较高时,表示大脑正处于专注状态;频率超过30Hz的Gamma波谱功率较高时,表示大脑思维出于极度活跃状态,即思维高度专注于某件事上。
例如,我们可以通过对原始脑电波的分析,提取出两个参数即人脑的关注度(Attention)和放松度(Meditation)。其中,关注度表示人对某件事的关注程度,即注意力集中的程度,注意力越集中则关注度越高;放松度表示人的放松程度,也有资料称其为进入禅定的程度,即人脑思维活动越少则放松度越高;关注度和放松度这两个参数是完全独立的,譬如射箭运动员在练习射箭时既要做到注意力高度集中,还要做到完全放松、心无杂念的程度,这样射箭的成绩才能达到更好。
既然不同的大脑状态和肌肉运动可以转化为电波信号,我们就可以将该信号直接传递给电视机等电子设备,实现对它们的控制操作。
下面结合附图和实施例对本发明作进一步说明。
本发明的电子设备可以是电视机、游戏机、家用电器等各种电子设备,本实施例是以电视机为例进行介绍。
图1为本发明体电波信号控制系统的工作原理图,如图1所示,本发明通过信号检测装置,例如,脑电波检测耳机对人体体电波信号进行探测,并提取出一些关键参数,例如,可是人脑的关注度和放松度,然后通过无线方式传递给电视主机控制系统,电视主机进行处理、判断、计算,在特定参数达到特定阈值时,执行特定的动作,从而达到控制电视机等电子设备的目的。
图2为本发明体电波信号控制系统的硬件结构框图,如图2所示,该体电波信号控制系统具体应用于一电视机系统,来实现对电视机的信号控制。该体电波信号控制系统主要包括信号检测装置和电视机系统两大部分,电视系统与信号检测装置交互通讯连接。其中,信号检测装置包括脑电波探头、脑电波信号处理芯片以及电池等,电池给脑电波信号处理芯片进行供电;该脑电波探头至于人脑头部,检测出人体脑电波信号并将其传递至脑电波信号处理芯片;脑电波信号处理芯片对该脑电波信号进行滤波、放大、采集、转换等处理,提取出平均关注度、平均放松度、眨眼信号强度或其组合等参数,进行编码后无线发送至所述电视机系统。
电视机系统接收该无线信号,进行解码、计算和执行操作,具体来说,电视系统包括有无线接收模块、电视应用接口以及电视显示界面,其中,电视系统通过无线接收模块与信号检测装置交互通讯连接,无线接收模块分别与电视应用接口和电视显示界面装置交互连接。其中,无线接收模块接收来自信号检测装置发射的无线信号,通过USB发送至电视应用接口模块,应用接口模块对该信号进行解码、判断等处理,从而实现对电视机的操作控制。
本发明中关注度和放松度不仅会显示在电视机的屏幕上,必要时还可以显示出原始脑电波的波形;这些参数也可以进行统计分析,用于评价、对比用户对某个电视节目的关注程度,以及某个节目或音乐使得用户身心放松的程度,很大程度地提升了用户的体验效果和感受度。
本发明所述信号检测装置,例如可以是一种脑电波检测耳机,耳机内置3.3V电池供电;耳机上面有一个旋转装置固定了脑波检测探头,佩戴耳机后可旋转该装置使脑波探头贴在前额部位就可以检测到脑电波。
本发明公开的体电波信号控制系统,包括但不仅限于实现对电视机的控制操作,还可以包括对游戏机、家用电器等各类电子产品和设备进行控制操作。该操作内容可以是包括,诸如:切换频道、调节音量的大小、游戏动作(例如,射击、奔跑、跳跃等动作)、开关电子设备等等操作,本领域人员能够容易想到将该技术应用于对上述各类电子产品和设备上,以实现各种操作控制。
本发明公开的信号检测装置,包括但不仅限于是针对脑电波的信号检测装置,还可以是包括针对肌电波,例如对眨眼信号强度的检测等信号检测装置。
本发明公开的信号检测装置的产品形式,包括但不仅限于是耳机,还可以是头罩、眼镜、探测器等各种信号检测产品和设备。
实施例1:
本实施例中平均关注度是指每两秒钟时间关注度的平均值,平均放松度是指每两秒钟时间放松度的平均值。硬件结构如图2所示,意念控制系统包括:脑电波检测装置和电视机,脑电波检测装置包括脑电波探测器和脑电波信号处理芯片,电视机包括:电视机应用接口、无线接收装置以及USB接口,电视机处于脑电波控制的模式下的工作原理及过程如下:
A.探测人体头部的脑电波;脑电波检测设备可以采用一种现有的脑电波检测耳机,耳机内置3.3V电池供电;耳机上面有一个旋转装置固定了脑电波探测器,佩戴耳机后可旋转该设备使脑电波探测器贴在前额部位就可以检测到脑电波;
B.对脑电波信号进行处理,提取平均关注度和平均放松度两个参数,进行编码后以无线方式发射出去;这里所说的处理是指对原始信号进行滤波、放大、采集、转换等;本步骤所用的脑电波信号处理芯片,内置在步骤A所用的那种耳机中,脑电波探测器将信号直接传递给脑电波信号处理芯片;
C.电视机接收该无线信号,进行解码、计算和执行;接收无线信号的一般是插接在电视USB接口上的无线接收模块,通过USB接口提供电源并传输数据,该无线接收模块负责将接收到的无线信号进行解码,并通过USB接口将关注度、放松度、无线信号强度等有效数据以协议包的形式发送到USB缓冲区内,输出频率为每秒一次;进行执行和计算的一般是电视应用接口,它是处理数据并判定阈值、执行操作的软件部分,主要指各个应用软件的底层驱动,负责对USB缓冲区内的数据进行处理、判断并执行操作,电视应用接口可以驱动电视显示界面进行显示;软件启动运行后,工作流程如图3所示:
(1)检测USB缓冲区的数据包,如果无效,循环等待,一旦发现了有效数据包,执行步骤(2);
(2)检查信号强度,如果信号强度低于某值,如30,返回步骤(1),如不低于某值,则提取平均关注度和平均放松度参数实时显示在电视界面上,然后执行步骤(3);
(3)判断眨眼信号的强度,如低于预设阈值,返回步骤(1),如高于预设阈值,执行步骤(4);
(4)判断平均关注度参数,如果连续5秒均高于预设阈值,如70,则切换一次频道;之后每5秒检测关注度平均值,持续5秒钟平均关注度仍高于70,则再次切换频道,否则将暂时定位住该频道直至下次平均关注度参数高于70进行切换,在该过程中如发现眨眼信号强度高于预设阈值,则直接返回步骤(1);
(5)如收到退出程序的指令,则退出循环,软件终止运行;如未收到退出程序的指令,返回步骤(1)。
其中,频道的切换是循环增加。
实施例2:
与实施例1相比,在用平均关注度参数调节频道的同时,用平均放松度信号参数来调节音量,音量的调节也是循环增加一个单位;用眨眼信号强度控制程序进入或退出脑电波调节频道和音量的功能,工作流程如图4所示,在此不再赘述。
实施例3:
如图5所示,其工作过程如下:
(1)检测USB缓冲区的数据包,如果无效,循环等待,一旦发现了有效数据包,执行步骤(2);
(2)检查信号强度,如果信号强度低于某值,如30,返回步骤(1),如不低于某值,则提取平均关注度和平均放松度参数实时显示在电视界面上;前两步循环称为状态1,在状态1下检测到关注度即使大于阈值也不动作;
(3)如果检测到眨眼信号,则从状态1进入频道增加控制状态,即状态2,在状态2下检测到每5秒平均关注度大于70阈值后执行频道增加动作;
(4)再次检测到眨眼信号,则从状态2进入频道减小状态,即状态3;在状态3下检测到每5秒平均关注度大于70阈值后执行频道减少动作;
(5)再次检测到眨眼信号,则从状态3循环进入状态1;
(6)各个状态在界面上有状态指示灯,用户按遥控器退出键可退出控制程序。
电视应用接口软件的终止或退出,既可以采用传统的遥控器等外围输入设备发出指令,也可以采用判断其它脑电波参数或体电波参数。
本发明开发的功能模块包括;界面显示、脑电波监测s dk、Us b转串口模块、脑电波数据分析模块、频道调台接口、X86电视平台应用调用接口,其关系如图6所示。本发明实际应用的步骤如下:
第1步,程序启动后主动进入TV通道(HID TV)显示如图7所示的界面,按遥控器确认键或鼠标点连接键,开始扫描COM口;
第2步,扫描COM口时显示如图8所示的界面,初步设定从COM1到COM20,扫描可用包;如果此时按遥控器退出键或鼠标按Disconnect键则停止扫描COM口,并关闭程序;如果扫描到COM20口均无可用包,则显示图7界面,需要重新连接设备;如果扫描到可用包后确定该COM口,进入步骤3。
第3步,接收信号强度、专注度、放松度的数据包,并显示如图9所示的界面。
如果关注度在5秒内平均值高于阈值(假定=70),则送频道+的HID指令;之后每5秒检测其平均值做下一次动作,如果低于该阈值则不动作(注意:1.鉴于眨眼操作准确度较差,所以采用专注度单个阈值判断做单方向频道切换,TV系统在频道列表中达到最大值后从头循环开始;2.本程序未用到放松度参数,因此放松度表盘显示值仅仅解释为当前节目或音乐带给使用者的放松程度即可,不做控制用)。
程序同时接收信号强度数据包,同步显示1-5个格的信号强度。如果按遥控器退出键或鼠标按Disconnect键则关闭COM口,并退出程序。其中,串口设置:9600,8,n,1。数据包结构如下,全部使用HEX格式,譬如:aa,aa,04,d1,02,d2,67,f3,其中aa aa为包头,04为有效数据字节数,D1 02 D2 67为有效数据,F3为前面4个有效数字校验和的反码,即D1+02+D2+67+F3=FF(八位);软件会用到信号强度的包、是否有链接的包、关注度、放松度的包。具体详细的有效数据协议在Neurosky公司提供SDK后即可全部得到。
在装有游戏的电视机中,脑电波信号可以用来进行游戏控制,在某段时间内某参数的平均值达到某个预先设定的阈值时则执行相应动作,例如用关注度信号和/或放松度信号去做一些游戏中的射击、搬运、跳跃、射击等控制;也可以配合肌电波,充分利用眨眼等肌肉动作进行游戏控制。
本发明可以通过用户自定义调整阈值等参数,以避免无意中眨眼引起的动作,并能避免用力眨眼也达不到设定阈值的情况,从而能保证效果适合特定用户个体,使大部分用户都具有良好的体验效果。
上述仅为本发明的较佳实施例及所运用技术原理,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围的内。