CN108512995B - 电子装置、脑电波控制方法及相关产品 - Google Patents
电子装置、脑电波控制方法及相关产品 Download PDFInfo
- Publication number
- CN108512995B CN108512995B CN201810172062.9A CN201810172062A CN108512995B CN 108512995 B CN108512995 B CN 108512995B CN 201810172062 A CN201810172062 A CN 201810172062A CN 108512995 B CN108512995 B CN 108512995B
- Authority
- CN
- China
- Prior art keywords
- brain wave
- target
- user
- electroencephalogram
- emotion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 210000004556 brain Anatomy 0.000 title claims abstract description 217
- 238000000034 method Methods 0.000 title claims abstract description 45
- 230000002996 emotional effect Effects 0.000 claims abstract description 134
- 230000008451 emotion Effects 0.000 claims description 120
- 230000015654 memory Effects 0.000 claims description 35
- 230000008859 change Effects 0.000 claims description 28
- 230000008921 facial expression Effects 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 14
- 230000001815 facial effect Effects 0.000 claims description 12
- 238000007781 pre-processing Methods 0.000 claims description 10
- 238000004891 communication Methods 0.000 claims description 8
- 230000009286 beneficial effect Effects 0.000 abstract description 5
- 230000006870 function Effects 0.000 description 11
- 238000012545 processing Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 4
- 230000002349 favourable effect Effects 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 210000003710 cerebral cortex Anatomy 0.000 description 2
- 230000009977 dual effect Effects 0.000 description 2
- 210000004709 eyebrow Anatomy 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000036651 mood Effects 0.000 description 2
- 210000005036 nerve Anatomy 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 206010048909 Boredom Diseases 0.000 description 1
- 206010013954 Dysphoria Diseases 0.000 description 1
- 206010041349 Somnolence Diseases 0.000 description 1
- 208000003443 Unconsciousness Diseases 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 230000007177 brain activity Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008035 nerve activity Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000035790 physiological processes and functions Effects 0.000 description 1
- 210000004761 scalp Anatomy 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Psychiatry (AREA)
- Child & Adolescent Psychology (AREA)
- Biophysics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Human Computer Interaction (AREA)
- Developmental Disabilities (AREA)
- Educational Technology (AREA)
- Hospice & Palliative Care (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Physics & Mathematics (AREA)
- Environmental & Geological Engineering (AREA)
- Signal Processing (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- User Interface Of Digital Computer (AREA)
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
Abstract
本申请实施例公开了一种电子装置、脑电波控制方法及相关产品,包括:当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号;通过所述脑电波信号识别用户的情绪状态;当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。本申请实施例实现预设类型的显示界面的自动化控制,有利于在符合用户情绪状态的情况下,提升针对显示界面的操作控制速度,以及提升用户的使用黏度。
Description
技术领域
本申请涉及移动终端技术领域,具体涉及一种电子装置、脑电波控制方法及相关产品。
背景技术
随着移动终端(例如智能手机)的大量普及应用,移动终端能够支持的应用越来越多,功能越来越强大,智能手机向着多样化、个性化的方向发展,成为用户生活中不可缺少的电子用品。
目前,用户通常通过手指触控、语音输入、手势控制等形式与移动终端进行多种指令交互,移动终端可以根据该指令交互完成对用户所需的多种功能事件的执行控制。
发明内容
本申请实施例提供了一种电子装置、脑电波控制方法及相关产品,以期实现预设类型的显示界面的自动化控制,有利于在符合用户情绪状态的情况下,提升针对显示界面的操作控制速度,以及提升用户的使用黏度。
第一方面,本申请实施例提供一种电子装置,包括处理器,连接所述处理器的脑电波传感器、显示器和存储器,其中,
所述存储器,用于存储显示界面的预设类型和目标情绪状态;
所述显示器,用于显示所述预设类型的显示界面;
所述脑电波传感器,用于采集用户的脑电波信号;
所述处理器,用于通过所述脑电波信号识别用户的情绪状态;以及用于当检测到所述情绪状态与所述目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。
第二方面,本申请实施例提供一种脑电波控制方法,应用于电子装置,所述电子装置包括脑电波传感器,所述方法包括:
当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号;
通过所述脑电波信号识别用户的情绪状态;
当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。
第三方面,本申请实施例提供一种脑电波控制装置,应用于电子装置,所述电子装置包括脑电波传感器,所述脑电波控制装置包括采集单元、识别单元和控制单元,其中,
所述采集单元,用于当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号;
所述识别单元,用于通过所述采集单元采集的所述脑电波信号识别用户的情绪状态;
所述控制单元,用于当检测到所述识别单元识别出的所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。
第四方面,本申请实施例提供一种电子装置,包括处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行本申请实施例第二方面任一方法中的步骤的指令。
第五方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第二方面任一方法中所描述的部分或全部步骤。
第六方面,本申请实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第二方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出,本申请实施例中,电子装置首先当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号,其次,通过所述脑电波信号识别用户的情绪状态,最后,当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。可知,电子装置在用户操作的过程中检测到预设类型的显示界面时,首先通过脑电波信号识别用户的情绪状态,判断用户的情绪是否为不喜欢/不开心/厌烦等消极情绪,如果为该消极类情绪,表明用户不喜欢该类显示界面,且该类显示界面影响用户的操作流畅性,因此,电子装置快速通过脑电波信号自动化控制该类显示界面,实现了显示界面的自动化控制,提升了显示界面的操作控制速度,同时,迎合了用户的情绪,有利于提升用户的使用黏度。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1A是本申请实施例提供的一种电子装置的结构示意图;
图1B是本申请实施例提供的一种包括脑电波传感器信号接收器的电子装置的结构示意图;
图1C是本申请实施例提供的一种脑电波传感器芯片式信号采集器的结构示意图;
图2A是本申请实施例提供的一种脑电波控制方法的流程示意图;
图2B是本申请实施例提供的一种预设类型的显示界面的示意图;
图2C是本申请实施例提供的一种人脸图像的表情变化趋势的示意图;
图3是本申请实施例提供的另一种脑电波控制方法的流程示意图;
图4是本申请实施例提供的另一种脑电波控制方法的流程示意图;
图5是本申请实施例提供的一种电子装置的结构示意图;
图6是本申请实施例提供的一种脑电波控制装置的功能单元组成框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
本申请实施例所涉及到的电子装置可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(User Equipment,UE),移动台(Mobile Station, MS),终端设备(terminaldevice)等等。为方便描述,上面提到的设备统称为电子装置。
下面对本申请实施例进行详细介绍。
请参阅图1A,图1A是本发明实施例提供了一种电子装置100的结构示意图,该电子装置100包括:壳体110、设置于所述壳体110上的显示器(例如触控显示屏)120、设置于所述壳体110内的主板130,主板130上设置有处理器 140、连接所述处理器140的存储器150、脑电波传感器160和前置摄像头170 等,所述处理器140连接所述显示器120,所述电子装置100还包括射频系统 180,所述射频系统180包括发射器181、接收器182、信号处理器183,其中,
所述存储器150,用于存储显示界面的预设类型和目标情绪状态;
所述显示器120,用于显示所述预设类型的显示界面;
所述脑电波传感器160,用于采集用户的脑电波信号;
所述处理器140,用于通过所述脑电波信号识别用户的情绪状态;以及用于当检测到所述情绪状态与所述目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。
其中,所述显示器120包括驱动电路、显示屏和触控屏,所述驱动电路用于控制所述显示屏根据画面的显示数据和显示参数(例如,亮度,颜色,饱和度等)进行内容显示,所述触控屏用于检测触控操作,所述显示屏为有机发光二极管显示屏OLED。
其中,脑电波传感器160又可以称为脑电波芯片、脑电波接收器等,该脑电波传感器160集成在电子装置中,具有专用信号处理电路,并与电子装置100 的处理器140连接,按照采集信号类型可以分为电流式脑电波传感器和电磁式脑电波传感器,电流式脑电波传感器采集脑皮层产生的生物电流,电磁式脑电波传感器采集人脑活动时辐射的电磁波。可以理解的是,该脑电波传感器160 的具体形态可以是多种多样的,例如可以是穿戴式的脑电波传感器,或者可以是芯片式的脑电波传感器等,此处不做唯一限定。
举例来说,如图1B和1C所示,该脑电波传感器160可以包括信号接收器 161和芯片式信号采集器162,该信号接收器161可以收容于如图1B所示的电子装置中,使用时,如图1C所示,芯片式信号采集器162与电子装置采用无线连接方式,通过芯片式信号采集器162中的无线通信模块与电子装置通信连接。
其中,所述主板130的形状大小可以为所述电子装置100能够容纳的任意大小和形状,在此不做唯一限定。
其中,处理器140包括应用处理器和基带处理器,处理器140是电子装置 100的控制中心,利用各种接口和线路连接整个电子装置的各个部分,通过运行或执行存储在存储器150内的软件程序和/或模块,以及调用存储在存储器150 内的数据,执行电子装置100的各种功能和处理数据,从而对电子装置100进行整体监控。其中,应用处理器主要处理操作系统、用户界面和应用程序等,基带处理器主要处理无线通信。可以理解的是,上述基带处理器也可以不集成到处理器中。
其中,存储器150可用于存储软件程序以及模块,处理器140通过运行存储在存储器150的软件程序以及模块,从而执行电子装置100的各种功能应用以及数据处理。存储器150可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据电子装置的使用所创建的数据等。此外,存储器150可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
具体实现中,电子装置100可以控制所述脑电波传感器160在静止状态下以低功率模式工作,在运动状态下以高频率模式工作,以此降低功耗。
可以看出,本申请实施例中,电子装置首先当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号,其次,通过所述脑电波信号识别用户的情绪状态,最后,当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。可知,电子装置在用户操作的过程中检测到预设类型的显示界面时,首先通过脑电波信号识别用户的情绪状态,判断用户的情绪是否为不喜欢/不开心/厌烦等消极情绪,如果为该消极类情绪,表明用户不喜欢该类显示界面,且该类显示界面影响用户的操作流畅性,因此,电子装置快速通过脑电波信号自动化控制该类显示界面,实现了显示界面的自动化控制,提升了显示界面的操作控制速度,同时,迎合了用户的情绪,有利于提升用户的使用黏度。
在一个可能的示例中,在所述通过所述脑电波信号识别用户的情绪状态方面,所述处理器140具体用于:确定与用户状态匹配的脑电波信号的目标频段;以及用于将所述脑电波信号中处于目标频段的脑电波信号预处理后获取目标脑电图;以及用于确定所述存储器150存储的多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
在这个可能的示例中,在所述确定所述存储器150存储的多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态方面,所述处理器140具体用于:通过所述前置摄像头170连续获取多张人脸图像;以及用于根据所述多张人脸图像确定人脸表情的变化趋势;以及用于根据所述人脸表情的变化趋势确定所述多个脑电图情绪模板的优先级;以及用于根据所述优先级将所述目标脑电图与所述多个脑电图情绪模板进行匹配;以及用于确定与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
在一个可能的示例中,在所述确定与用户状态匹配的脑电波信号的目标频段方面,所述处理器140具体用于:获取用户的职业属性;以及用于根据所述职业属性确定与当前时间段对应的所述用户状态;以及用于确定与所述用户状态匹配的脑电波信号的所述目标频段。
在一个可能的示例中,在所述当检测到所述情绪状态与所述目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制方面,所述处理器140具体用于:当检测到所述情绪状态与所述目标情绪状态匹配时,根据所述存储器150存储的历史操作记录确定所述目标情绪状态对应的目标操作;以及用于当检测到所述脑电波信号反馈的参考操作与所述目标操作一致时,根据所述目标操作针对所述显示界面执行操作控制。
请参阅图2A,图2A是本申请实施例提供了一种脑电波控制方法的流程示意图,应用于如图1A-1C所述的电子装置,应用于电子装置,所述电子装置包括脑电波传感器,如图所示,本脑电波控制方法包括:
S201,电子装置当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号;
其中,所述预设类型的显示界面可以为当用户在操作电子装置时,出现的问询界面的弹框,该类弹框显示界面可以是多种多样的,在此不做限定,问询的弹框的目的例如是询问“是否允许获取位置信息”、“是否允许发送推送消息”等,如图2B所示,当用户在前台操作应用A时(应用A可以是相册类应用、游戏类应用、视频类应用等,在此不做限定),该类弹框的突然出现,询问用户“是否允许应用A获取位置信息”,需要用户做出选择,影响用户的操作流畅度。
其中,脑电波是一种使用电生理指标记录大脑活动的方法,记录大脑在活动器件的电波变化,是脑神经细胞的电生理活动在大脑皮层或头皮表面的总体反映,因此,脑电波信号是由许多神经共同放电产生的集体神经活动信号,可以通过脑电波传感器采集到神经的活动信号。
S202,所述电子装置通过所述脑电波信号识别用户的情绪状态;
其中,所述情绪状态,是对一系列主观认知经验的通称,是多种感觉、思想和行为综合产生的心理和生理状态。最普遍、通俗的情绪有喜、怒、哀、惊、恐、爱等状态,也有一些细腻微妙的情绪如嫉妒、惭愧、羞耻、自豪等状态,不同的情绪状态对用户大脑的活跃层不一样,因此不同的情绪状态获取的脑电波信号也是不同的。
其中,用户的情绪不同,用户的脑电波信号所处的波段的频率不同,电子装置可以通过用户脑电波信号的频率提取特征值,或者通过脑电波信号处理为脑电图,进而判断用户的情绪状态,每种情绪状态对应一个频段的范围。或者多个脑电图情绪模板。
其中,所述根据所述脑电波信号形成脑电图的具体实现方式可以是通过所述电子装置采用希尔伯特-黄变换(Hibert-Huang Transform,HHT)算法对所述脑电波信息进行识别,然后通过对所述脑电波信号进行去噪及滤波处理,以及模数A/D转换,得到标准脑电波信号,然后根据标准脑电波信号形成脑电图。
S203,所述电子装置当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。
其中,所述目标情绪状态为用户看到该预设类型的显示界面时发出的厌烦,烦躁这类的情绪状态,在该类情绪状态下,表明该显示界面并非用户需要的显示界面,该类显示界面影响用户的操作,用户希望该类显示界面尽快被处理,因此,在目标情绪状态下,电子装置通过脑电波信号智能化的快速处理该显示界面。
其中,所述电子装置根据所述脑电波信号针对所述显示界面执行操作控制的具体实现方式可以是多种多样的,例如可以是根据脑电波信号形成脑电图,并确定与脑电图匹配的脑电图模板,根据脑电图模板对应的“允许”、“不允许”、“取消”等操作指令处理所述显示界面;或者可以是,将所述脑电波信号通过降噪、滤波等处理确定特征值,根据特征值确定操作指令处理所述显示界面,在此不做唯一限定。
其中,不同的脑电波信号对应不同的操作指令,不同的操作指令预设有不同的脑电图模板或者特征值,如图2B所示,该脑电图模板或者特征值为用户希望电子装置执行对应的“允许”、“不允许”、“取消”等操作功能时所冥想的特定单词、词汇或短语等形成的脑电图,进而确定的脑电图模板或者特征值。其中,用户希望电子装置执行的操作指令与所冥想的关键词之间的关联关系是无法做唯一限定,例如同样的操作,关键词可以是“不允许”,也可以是“1”,也可以是“不许”等,而且,针对不同的用户,此种关联关系会千差万别,因此针对不同的用户,针对不同的操作指令,根据冥想的单词或者短语等形成的脑电波模板或者特征值也是千差万别的。
可以看出,本申请实施例中,电子装置首先当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号,其次,通过所述脑电波信号识别用户的情绪状态,最后,当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。可知,电子装置在用户操作的过程中检测到预设类型的显示界面时,首先通过脑电波信号识别用户的情绪状态,判断用户的情绪是否为不喜欢/不开心/厌烦等消极情绪,如果为该消极类情绪,表明用户不喜欢该类显示界面,且该类显示界面影响用户的操作流畅性,因此,电子装置快速通过脑电波信号自动化控制该类显示界面,实现了显示界面的自动化控制,提升了显示界面的操作控制速度,同时,迎合了用户的情绪,有利于提升用户的使用黏度。
在一个可能的示例中,所述通过所述脑电波信号识别用户的情绪状态,包括:
确定与用户状态匹配的脑电波信号的目标频段;
将所述脑电波信号中处于目标频段的脑电波信号预处理后获取目标脑电图;
确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
其中,脑电波信号可以分为四类,分别是δ波:深度睡眠脑波状态(范围 0.5-3HZ)、θ波:深度放松、无压力的潜意识状态(范围4-8HZ)、α波:学习与思考的最佳脑波状态(范围8-13HZ),以及β波:紧张、压力、脑疲劳时的脑波状态(范围14HZ以上),每种类型对应不同的频段,也对应用户不同的状态。其中,δ波对应的用户状态为无意识状态,睡眠状态等,θ波对应的用户状态为困倦、疲劳状态等,α波对应的用户状态为清醒、安静、正常血糖等放松状态,β波对应的用户状态为睁眼,紧张活动,即为工作状态。
其中,用户状态可以包括用户的情绪,放松度,紧张度,工作,或者睡眠等状态,在此不做限定。
其中,确定与用户状态匹配的脑电波信号的目标频段的具体实现方式可以是,根据用户状态确定获取的脑电波属于哪种类型的波,进而确定获取的脑电波信号处于哪个目标频段。
其中,所述针对所述脑电波信号的预处理可以包括:傅里叶变换,降噪,滤波等处理操作。
其中,所述电子装置预存有多个脑电图情绪模板,每个脑电图情绪模板对应的用户情绪不同,所述电子装置可以通过播放音乐、图片,或者视频等方式诱导用户处于不同的情绪,进而在用户处于不同情绪情况下获取该情绪对应的频率区间或者获取并形成用户的多个脑电波情绪模板,每个脑电波情绪模板对应的情绪不同,存储在所述电子设备的存储器中。
可见,本示例中,电子装置通过用户状态确定脑电波信号的目标频段,通过目标频段确定获取的脑电波信号中属于用户的脑电波信号,有利于提升脑电波信号使用的正确性,进而通过脑电波信号确定用户的情绪,有利于提升情绪确定的准确性和智能性。
在这个可能的示例中,所述确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态,包括:
连续获取多张人脸图像;
根据所述多张人脸图像确定人脸表情的变化趋势;
根据所述人脸表情的变化趋势确定所述多个脑电图情绪模板的优先级;
根据所述优先级将所述目标脑电图与所述多个脑电图情绪模板进行匹配;
确定与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
其中,连续获取多张人脸图像的具体实现方式可以是多种多样的,例如可以是后台通过前置摄像头通过连拍获取多张人脸图像,或者是通过双摄像头获取适合大小的多张人脸图像,该人脸图像可以是全部人脸图像或者可以是部分人脸图像等,在此不做限定。
其中,所述人脸表情的变化趋势可以是没有变化,也可以是喜怒哀乐等多种表情的变化趋势,可以通过多张人脸图像中眼角,嘴角,眉心等部位的角度变化确定人脸表情的变化趋势,在此不做唯一限定。
其中,通过人脸表情变化趋势可以确定用户情绪的变化,进而确定当前符合最符合用户的参考情绪状态,进而设置该参考情绪状态对应的脑电图情绪模板的优先级最高。
举例而言,如图2C所述,人脸图像的表情变化由图2 C左侧的开心变化为图2 C右侧的紧皱眉头,该表情变化趋势表明用户对该类显示界面的不喜欢,或者该类显示界面对用户当前的操作存在影响,因此,应该将厌烦类情绪对应的脑电图情绪模板的优先级设置为最高级。
可见,本示例中,电子装置通过获取多张人脸图像,确定人脸表情的变化趋势设置多个脑电图情绪模板的优先级,将符合用户当前情绪的脑电图情绪模板的优先级设置为最高,并将目标脑电图与优先级高的脑电图情绪模板优先进行匹配,有利于提升匹配速度,进而提升用户情绪状态的确定速度。
在一个可能的示例中,所述确定与用户状态匹配的脑电波信号的目标频段,包括:
获取用户的职业属性;
根据所述职业属性确定与当前时间段对应的所述用户状态;
确定与所述用户状态匹配的脑电波信号的所述目标频段。
其中,用户的职业属性可以包括工作方式,工作时间,例如白天工作还是夜间工作等,在此不做限定,用户的职业属性可以是由用户自己预先设置在所述电子装置中的,也可以是该电子装置根据用户使用电子装置的时间智能化设置在存储器中,在此不做限定。
其中,职业属性不同,对应的每天中不同时间段用户的状态不同,进而对应的目标频段不同,例如,在工作时间段中,用户的状态属于β波对应的状态。
可见,本示例中,电子装置根据用户的职业属性确定当前时间段的用户状态,进而确定与当前用户状态匹配的目标频段,处理简单,有利于提升电子装置的智能性和便捷性。
在一个可能的示例中,所述当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制,包括:
当检测到所述情绪状态与所述目标情绪状态匹配时,根据历史操作记录确定所述目标情绪状态对应的目标操作;
当检测到所述脑电波信号反馈的参考操作与所述目标操作一致时,根据所述目标操作针对所述显示界面执行操作控制。
其中,所述历史操作记录中每条记录均包括了用户的情绪状态,执行的操作,执行的时间等,在此不做限定。
其中,所述根据历史操作记录确定所述目标情绪状态对应的目标操作的具体实现方式为,根据历史操作记录确定目标情绪状态对应的多个操作中,操作次数最多的操作为目标操作或者操作时间与当前时间匹配的操作为目标操作,在此不做限定。
其中,所述脑电波信号反馈的参考操作即为脑电波信号反馈的关键词对应的操作,例如上述的“允许”与“不允许”等。
可见,本示例中,电子装置通过历史操作记录确定目标情绪状态对应的目标操作,有利于提升电子装置的智能性,同时通过脑电波信号确定参考操作,当目标操作与参考操作一致时执行操作控制,通过双重认证机制,有利于提升电子装置对显示界面操作控制的准确性。
与上述图2A所示的实施例一致的,请参阅图3,图3是本申请实施例提供的一种脑电波控制方法的流程示意图,应用于如图1A-1C所述的电子装置,应用于电子装置,所述电子装置包括脑电波传感器,如图所示,方法包括:
S301,电子装置当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号。
S302,所述电子装置确定与用户状态匹配的脑电波信号的目标频段。
S303,所述电子装置将所述脑电波信号中处于目标频段的脑电波信号预处理后获取目标脑电图。
S304,所述电子装置确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为用户的情绪状态。
S305,所述电子装置当检测到所述情绪状态与所述目标情绪状态匹配时,根据历史操作记录确定所述目标情绪状态对应的目标操作。
S306,所述电子装置当检测到所述脑电波信号反馈的参考操作与所述目标操作一致时,根据所述目标操作针对所述显示界面执行操作控制。
可以看出,本申请实施例中,电子装置首先当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号,其次,通过所述脑电波信号识别用户的情绪状态,最后,当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。可知,电子装置在用户操作的过程中检测到预设类型的显示界面时,首先通过脑电波信号识别用户的情绪状态,判断用户的情绪是否为不喜欢/不开心/厌烦等消极情绪,如果为该消极类情绪,表明用户不喜欢该类显示界面,且该类显示界面影响用户的操作流畅性,因此,电子装置快速通过脑电波信号自动化控制该类显示界面,实现了显示界面的自动化控制,提升了显示界面的操作控制速度,同时,迎合了用户的情绪,有利于提升用户的使用黏度。
此外,电子装置通过用户状态确定脑电波信号的目标频段,通过目标频段确定获取的脑电波信号中属于用户的脑电波信号,有利于提升脑电波信号使用的正确性,进而通过脑电波信号确定用户的情绪,有利于提升情绪确定的准确性和智能性。
此外,电子装置通过历史操作记录确定目标情绪状态对应的目标操作,有利于提升电子装置的智能性,同时通过脑电波信号确定参考操作,当目标操作与参考操作一致时执行操作控制,通过双重认证机制,有利于提升电子装置对显示界面操作控制的准确性。
与上述图2A所示的实施例一致的,请参阅图4,图4是本申请实施例提供的一种脑电波控制方法的流程示意图,应用于如图1A-1C所述的电子装置。如图所示,本脑电波控制方法包括:
S401,电子装置当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号。
S402,所述电子装置获取用户的职业属性。
S403,所述电子装置根据所述职业属性确定与当前时间段对应的用户状态。
S404,所述电子装置确定与所述用户状态匹配的脑电波信号的目标频段。
S405,所述电子装置将所述脑电波信号中处于目标频段的脑电波信号预处理后获取目标脑电图。
S406,所述电子装置连续获取多张人脸图像。
S407,所述电子装置根据所述多张人脸图像确定人脸表情的变化趋势。
S408,所述电子装置根据所述人脸表情的变化趋势确定所述多个脑电图情绪模板的优先级。
S409,所述电子装置根据所述优先级将所述目标脑电图与所述多个脑电图情绪模板进行匹配。
S410,所述电子装置确定与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为用户的情绪状态。
S411,所述电子装置当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。
可以看出,本申请实施例中,电子装置首先当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号,其次,通过所述脑电波信号识别用户的情绪状态,最后,当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。可知,电子装置在用户操作的过程中检测到预设类型的显示界面时,首先通过脑电波信号识别用户的情绪状态,判断用户的情绪是否为不喜欢/不开心/厌烦等消极情绪,如果为该消极类情绪,表明用户不喜欢该类显示界面,且该类显示界面影响用户的操作流畅性,因此,电子装置快速通过脑电波信号自动化控制该类显示界面,实现了显示界面的自动化控制,提升了显示界面的操作控制速度,同时,迎合了用户的情绪,有利于提升用户的使用黏度。
此外,电子装置根据用户的职业属性确定当前时间段的用户状态,进而确定与当前用户状态匹配的目标频段,处理简单,有利于提升电子装置的智能性和便捷性,而且,电子装置通过获取多张人脸图像,确定人脸表情的变化趋势设置多个脑电图情绪模板的优先级,将符合用户当前情绪的脑电图情绪模板的优先级设置为最高,并将目标脑电图与优先级高的脑电图情绪模板优先进行匹配,有利于提升匹配速度,进而提升用户情绪状态的确定速度。
此外,电子装置通过用户状态确定脑电波信号的目标频段,通过目标频段确定获取的脑电波信号中属于用户的脑电波信号,有利于提升脑电波信号使用的正确性,进而通过脑电波信号确定用户的情绪,有利于提升情绪确定的准确性和智能性。
与上述图2A、图3、图4所示的实施例一致的,请参阅图5,图5是本申请实施例提供的一种电子装置的结构示意图,如图所示,该电子装置包括处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行以下步骤的指令;
当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号;
通过所述脑电波信号识别用户的情绪状态;
当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。
可以看出,本申请实施例中,电子装置首先当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号,其次,通过所述脑电波信号识别用户的情绪状态,最后,当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。可知,电子装置在用户操作的过程中检测到预设类型的显示界面时,首先通过脑电波信号识别用户的情绪状态,判断用户的情绪是否为不喜欢/不开心/厌烦等消极情绪,如果为该消极类情绪,表明用户不喜欢该类显示界面,且该类显示界面影响用户的操作流畅性,因此,电子装置快速通过脑电波信号自动化控制该类显示界面,实现了显示界面的自动化控制,提升了显示界面的操作控制速度,同时,迎合了用户的情绪,有利于提升用户的使用黏度。
在一个可能的示例中,在所述通过所述脑电波信号识别用户的情绪状态,方面,所述程序中的指令具体用于执行以下操作:确定与用户状态匹配的脑电波信号的目标频段;以及用于将所述脑电波信号中处于目标频段的脑电波信号预处理后获取目标脑电图;以及用于确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
在这个可能的示例中,在所述确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态方面,所述程序中的指令具体用于执行以下操作:连续获取多张人脸图像;以及用于根据所述多张人脸图像确定人脸表情的变化趋势;以及用于根据所述人脸表情的变化趋势确定所述多个脑电图情绪模板的优先级;以及用于根据所述优先级将所述目标脑电图与所述多个脑电图情绪模板进行匹配;以及用于确定与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
在一个可能的示例中,在所述确定与用户状态匹配的脑电波信号的目标频段方面,所述程序中的指令具体用于执行以下操作:获取用户的职业属性;以及用于根据所述职业属性确定与当前时间段对应的所述用户状态;以及用于确定与所述用户状态匹配的脑电波信号的所述目标频段。
在一个可能的示例中,在所述当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制方面,所述程序中的指令具体用于执行以下操作:当检测到所述情绪状态与所述目标情绪状态匹配时,根据历史操作记录确定所述目标情绪状态对应的目标操作;以及用于当检测到所述脑电波信号反馈的参考操作与所述目标操作一致时,根据所述目标操作针对所述显示界面执行操作控制。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,电子装置为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子装置进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
图6是本申请实施例中所涉及的脑电波控制装置600的功能单元组成框图。该脑电波控制装置600应用于电子装置,所述电子装置包括脑电波传感器,该脑电波控制装置600包括采集单元601、识别单元602和控制单元603,其中,
所述采集单元601,用于当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号;
所述识别单元602,用于通过所述采集单元601采集的所述脑电波信号识别用户的情绪状态;
所述控制单元603,用于当检测到所述识别单元602识别出的所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。
可以看出,本申请实施例中,电子装置首先当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号,其次,通过所述脑电波信号识别用户的情绪状态,最后,当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制。可知,电子装置在用户操作的过程中检测到预设类型的显示界面时,首先通过脑电波信号识别用户的情绪状态,判断用户的情绪是否为不喜欢/不开心/厌烦等消极情绪,如果为该消极类情绪,表明用户不喜欢该类显示界面,且该类显示界面影响用户的操作流畅性,因此,电子装置快速通过脑电波信号自动化控制该类显示界面,实现了显示界面的自动化控制,提升了显示界面的操作控制速度,同时,迎合了用户的情绪,有利于提升用户的使用黏度。
在一个可能的示例中,在所述通过所述脑电波信号识别用户的情绪状态,方面,所述识别单元602具体用于:确定与用户状态匹配的脑电波信号的目标频段;以及用于将所述脑电波信号中处于目标频段的脑电波信号预处理后获取目标脑电图;以及用于确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
在这个可能的示例中,在所述确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态方面,所述识别单元602具体用于:连续获取多张人脸图像;以及用于根据所述多张人脸图像确定人脸表情的变化趋势;以及用于根据所述人脸表情的变化趋势确定所述多个脑电图情绪模板的优先级;以及用于根据所述优先级将所述目标脑电图与所述多个脑电图情绪模板进行匹配;以及用于确定与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
在一个可能的示例中,在所述确定与用户状态匹配的脑电波信号的目标频段方面,所述识别单元602具体用于:获取用户的职业属性;以及用于根据所述职业属性确定与当前时间段对应的所述用户状态;以及用于确定与所述用户状态匹配的脑电波信号的所述目标频段。
在一个可能的示例中,在所述当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制方面,所述控制单元 603具体用于:当检测到所述情绪状态与所述目标情绪状态匹配时,根据历史操作记录确定所述目标情绪状态对应的目标操作;以及用于当检测到所述脑电波信号反馈的参考操作与所述目标操作一致时,根据所述目标操作针对所述显示界面执行操作控制。
其中,识别单元602可以是处理器或者摄像头、控制单元603可以是处理器,采集单元601可以是脑电波传感器或者处理器。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。
本申请实施例还提供一种计算机程序产品,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM, Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (9)
1.一种电子装置,其特征在于,包括处理器,连接所述处理器的脑电波传感器、显示器和存储器,其中,
所述存储器,用于存储显示界面的预设类型和目标情绪状态;
所述显示器,用于显示所述预设类型的显示界面;
所述脑电波传感器,用于采集用户的脑电波信号;
所述处理器,用于通过所述脑电波信号识别用户的情绪状态;以及用于当检测到所述情绪状态与所述目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制;
其中,在所述通过所述脑电波信号识别用户的情绪状态方面,所述处理器具体用于:确定与用户状态匹配的脑电波信号的目标频段;以及用于将所述脑电波信号中处于目标频段的脑电波信号预处理后获取目标脑电图;以及用于确定所述存储器存储的多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态;
其中,所述电子装置还包括前置摄像头,在所述确定所述存储器存储的多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态方面,所述处理器具体用于:通过所述前置摄像头连续获取多张人脸图像;以及用于根据所述多张人脸图像确定人脸表情的变化趋势;以及用于根据所述人脸表情的变化趋势确定所述多个脑电图情绪模板的优先级;以及用于根据所述优先级将所述目标脑电图与所述多个脑电图情绪模板进行匹配;以及用于确定与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
2.根据权利要求1所述的电子装置,其特征在于,在所述确定与用户状态匹配的脑电波信号的目标频段方面,所述处理器具体用于:获取用户的职业属性;以及用于根据所述职业属性确定与当前时间段对应的所述用户状态;以及用于确定与所述用户状态匹配的脑电波信号的所述目标频段。
3.根据权利要求1-2任一项所述的电子装置,其特征在于,在所述当检测到所述情绪状态与所述目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制方面,所述处理器具体用于:当检测到所述情绪状态与所述目标情绪状态匹配时,根据所述存储器存储的历史操作记录确定所述目标情绪状态对应的目标操作;以及用于当检测到所述脑电波信号反馈的参考操作与所述目标操作一致时,根据所述目标操作针对所述显示界面执行操作控制。
4.一种脑电波控制方法,其特征在于,应用于电子装置,所述电子装置包括脑电波传感器,所述方法包括:
当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号;
通过所述脑电波信号识别用户的情绪状态;
当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制;
其中,所述通过所述脑电波信号识别用户的情绪状态,包括:
确定与用户状态匹配的脑电波信号的目标频段;
将所述脑电波信号中处于目标频段的脑电波信号预处理后获取目标脑电图;
确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态;
其中,所述确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态,包括:
连续获取多张人脸图像;
根据所述多张人脸图像确定人脸表情的变化趋势;
根据所述人脸表情的变化趋势确定所述多个脑电图情绪模板的优先级;
根据所述优先级将所述目标脑电图与所述多个脑电图情绪模板进行匹配;
确定与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
5.根据权利要求4所述的方法,其特征在于,所述确定与用户状态匹配的脑电波信号的目标频段,包括:
获取用户的职业属性;
根据所述职业属性确定与当前时间段对应的所述用户状态;
确定与所述用户状态匹配的脑电波信号的所述目标频段。
6.根据权利要求4-5任一项所述的方法,其特征在于,所述当检测到所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制,包括:
当检测到所述情绪状态与所述目标情绪状态匹配时,根据历史操作记录确定所述目标情绪状态对应的目标操作;
当检测到所述脑电波信号反馈的参考操作与所述目标操作一致时,根据所述目标操作针对所述显示界面执行操作控制。
7.一种脑电波控制装置,其特征在于,应用于电子装置,所述电子装置包括脑电波传感器,所述脑电波控制装置包括采集单元、识别单元和控制单元,其中,
所述采集单元,用于当检测到预设类型的显示界面时,通过所述脑电波传感器采集用户的脑电波信号;
所述识别单元,用于通过所述采集单元采集的所述脑电波信号识别用户的情绪状态;
所述控制单元,用于当检测到所述识别单元识别出的所述情绪状态与目标情绪状态匹配时,根据所述脑电波信号针对所述显示界面执行操作控制;
其中,所述通过所述脑电波信号识别用户的情绪状态,包括:确定与用户状态匹配的脑电波信号的目标频段;将所述脑电波信号中处于目标频段的脑电波信号预处理后获取目标脑电图;确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态;
其中,所述确定多个脑电图情绪模板中与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态,包括:连续获取多张人脸图像;根据所述多张人脸图像确定人脸表情的变化趋势;根据所述人脸表情的变化趋势确定所述多个脑电图情绪模板的优先级;根据所述优先级将所述目标脑电图与所述多个脑电图情绪模板进行匹配;确定与所述目标脑电图匹配的目标脑电图情绪模板对应的情绪状态为所述用户的情绪状态。
8.一种电子装置,其特征在于,包括处理器、存储器、通信接口,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行如权利要求4-6任一项所述的方法中的步骤的指令。
9.一种计算机可读存储介质,其特征在于,存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如权利要求4-6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810172062.9A CN108512995B (zh) | 2018-03-01 | 2018-03-01 | 电子装置、脑电波控制方法及相关产品 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810172062.9A CN108512995B (zh) | 2018-03-01 | 2018-03-01 | 电子装置、脑电波控制方法及相关产品 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108512995A CN108512995A (zh) | 2018-09-07 |
CN108512995B true CN108512995B (zh) | 2020-08-18 |
Family
ID=63376054
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810172062.9A Expired - Fee Related CN108512995B (zh) | 2018-03-01 | 2018-03-01 | 电子装置、脑电波控制方法及相关产品 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108512995B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3981327A4 (en) * | 2019-06-04 | 2023-01-04 | The Boeing Company | METHOD OF EVALUATION OF PROJECTION CONTENT IN A ENCLOSED ENVIRONMENT, DEVICE AND STORAGE MEDIA |
CN110477914A (zh) * | 2019-08-09 | 2019-11-22 | 南京邮电大学 | 基于Android的情绪激励与脑电信号情绪识别系统 |
EP4088794A4 (en) * | 2020-02-07 | 2023-01-25 | Life Quest Inc. | CONTENT PLAYBACK DEVICE AND METHOD, AND PROGRAM |
CN112642049A (zh) * | 2021-01-13 | 2021-04-13 | 德仕科技(深圳)有限公司 | 高度智能化香薰机的控制方法、装置及存储介质 |
CN113689936A (zh) * | 2021-09-02 | 2021-11-23 | 广东厚阅科技有限公司 | 智能心理健康状态检测方法及相关装置 |
CN115035608A (zh) * | 2022-05-26 | 2022-09-09 | 支付宝(杭州)信息技术有限公司 | 活体检测方法、装置、设备及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102016757A (zh) * | 2008-07-11 | 2011-04-13 | 松下电器产业株式会社 | 使用了脑电波的设备的控制方法和脑电波接口系统 |
CN103137157A (zh) * | 2013-01-24 | 2013-06-05 | 中国联合网络通信集团有限公司 | 终端媒体播放控制方法、装置及终端 |
CN104850227A (zh) * | 2015-05-05 | 2015-08-19 | 北京嘀嘀无限科技发展有限公司 | 信息处理的方法、设备及系统 |
CN105898567A (zh) * | 2015-12-08 | 2016-08-24 | 乐视移动智能信息技术(北京)有限公司 | 基于用户情绪的节目播放方法和系统 |
CN107145239A (zh) * | 2017-06-29 | 2017-09-08 | 上海传英信息技术有限公司 | 一种基于脑念传感器的智能系统及其控制方法 |
CN107634901A (zh) * | 2017-09-19 | 2018-01-26 | 广东小天才科技有限公司 | 会话表情的推送方法、推送装置及终端设备 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011135789A1 (ja) * | 2010-04-28 | 2011-11-03 | パナソニック株式会社 | 脳波計測装置、電気的ノイズの推定方法、および、電気的ノイズの推定方法を実行するコンピュータプログラム |
KR20160105321A (ko) * | 2015-02-27 | 2016-09-06 | 임머숀 코퍼레이션 | 사용자의 무드에 기초하는 액션 생성 |
-
2018
- 2018-03-01 CN CN201810172062.9A patent/CN108512995B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102016757A (zh) * | 2008-07-11 | 2011-04-13 | 松下电器产业株式会社 | 使用了脑电波的设备的控制方法和脑电波接口系统 |
CN103137157A (zh) * | 2013-01-24 | 2013-06-05 | 中国联合网络通信集团有限公司 | 终端媒体播放控制方法、装置及终端 |
CN104850227A (zh) * | 2015-05-05 | 2015-08-19 | 北京嘀嘀无限科技发展有限公司 | 信息处理的方法、设备及系统 |
CN105898567A (zh) * | 2015-12-08 | 2016-08-24 | 乐视移动智能信息技术(北京)有限公司 | 基于用户情绪的节目播放方法和系统 |
CN107145239A (zh) * | 2017-06-29 | 2017-09-08 | 上海传英信息技术有限公司 | 一种基于脑念传感器的智能系统及其控制方法 |
CN107634901A (zh) * | 2017-09-19 | 2018-01-26 | 广东小天才科技有限公司 | 会话表情的推送方法、推送装置及终端设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108512995A (zh) | 2018-09-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108512995B (zh) | 电子装置、脑电波控制方法及相关产品 | |
US10366778B2 (en) | Method and device for processing content based on bio-signals | |
US9086884B1 (en) | Utilizing analysis of content to reduce power consumption of a sensor that measures affective response to the content | |
CN107392124A (zh) | 情绪识别方法、装置、终端及存储介质 | |
CN108310759B (zh) | 信息处理方法及相关产品 | |
CN108304074B (zh) | 显示控制方法及相关产品 | |
CN110221684A (zh) | 装置控制方法、系统、电子装置及计算机可读存储介质 | |
Saffaryazdi et al. | Emotion recognition in conversations using brain and physiological signals | |
CN110584657B (zh) | 一种注意力检测方法及系统 | |
CN108491076A (zh) | 显示控制方法及相关产品 | |
CN108418962B (zh) | 基于脑电波的信息响应方法及相关产品 | |
CN108519811A (zh) | 截图方法及相关产品 | |
Yang et al. | Survey on emotion sensing using mobile devices | |
CN108668008B (zh) | 电子装置、显示参数调整方法和装置及计算机可读存储介质 | |
Shatilov et al. | Emerging exg-based nui inputs in extended realities: A bottom-up survey | |
CN108334200B (zh) | 电子设备控制方法及相关产品 | |
CN108304076A (zh) | 电子装置、视频播放应用的管理方法及相关产品 | |
CN108418960B (zh) | 电子装置、操作控制方法及相关产品 | |
CN108459718A (zh) | 电子设备、应用控制方法及相关产品 | |
CN108339267B (zh) | 基于脑电波的游戏菜单控制方法及相关产品 | |
CN108553881B (zh) | 电子装置、游戏控制方法及相关产品 | |
CN108427296B (zh) | 智能家居控制方法及相关产品 | |
CN108519810B (zh) | 电子装置、脑电波解锁方法及相关产品 | |
CN108205261B (zh) | 基于脑电波的智能家居控制方法及电子装置 | |
CN108491699B (zh) | 电子装置、脑电波解锁方法及相关产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. |
|
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200818 |