CN105279387B - 一种面向孤独症谱系障碍儿童的执行功能评测与训练系统 - Google Patents
一种面向孤独症谱系障碍儿童的执行功能评测与训练系统 Download PDFInfo
- Publication number
- CN105279387B CN105279387B CN201510788844.1A CN201510788844A CN105279387B CN 105279387 B CN105279387 B CN 105279387B CN 201510788844 A CN201510788844 A CN 201510788844A CN 105279387 B CN105279387 B CN 105279387B
- Authority
- CN
- China
- Prior art keywords
- user
- module
- data
- function
- waves
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Abstract
本发明公开了一种面向孤独症谱系障碍儿童的执行功能评测与训练系统，利用先进人机交互技术和脑信息感知技术来解决孤独症谱系障碍儿童执行功能评测与训练问题。包括：学生智能终端、便携式脑波仪、数据机顶盒、云服务器和家长手持智能手机，各功能单元之间通过无线通信技术相连；其中：学生智能终端提供用户交互界面，并实时记录用户面部表情图像以及按键的时空动力学行为；便携式脑波仪记录用户的脑电波节律；数据机顶盒是系统数据汇集和分析中心，通过算法对所汇集数据进行分析以实现对用户实现对执行功能的感知和估计，并在此基础上构建人机交互界面实现执行功能的训练；家长手持智能手机通过云服务器了解其孩子的执行功能评测与训练结果。
Description
技术领域
本发明涉及一种面向孤独症谱系障碍儿童的执行功能评估与干预系统，特别涉及一种集成孤独症谱系障碍儿童执行功能发展测评、康复训练、教育和信息管理为一体的儿童康复管理平台。
背景技术
孤独症谱系障碍(Autism spectrum disorder，ASD)是一组以社交障碍、语言交流障碍、兴趣或活动范围狭窄以及重复刻板行为为主要特征的神经发育性障碍。ASD已成为世界公共卫生和教育领域的严重挑战，严重危害儿童身心健康，如果不能获得康复，可造成终生残疾，影响患者终生的身心健康、社会交往、学习、生活、就业，给家庭和社会也造成了严重的负担。
尽管学术界对于孤独症的病因尚未形成统一的结论，但执行功能障碍理论得到了越来越多临床数据的支持，已成为当前发展心理学的研究热点和重点。值得强调的是，目前国内外对孤独症的执行功能缺陷理论研究较为热门，但对孤独症的执行功能康复训练研究较少；而执行功能作为认知的高级成分，在孤独症康复训练中处于不可或缺的重要地位。此外，目前孤独症康复评价体系不够健全，更缺乏对康复过程的形成性评价，未对孤独症谱系障碍儿童日常干预过程中的表现做出评估。
基于上述分析，本发明从执行功能障碍理论视角研究孤独症谱系障碍儿童的个性化康复，借助学生智能终端和便携式脑波仪实现先进人机交互和脑信息感知，建立孤独症谱系障碍儿童执行功能评测的关键脑电和行为指标，实现对孤独症谱系障碍儿童执行功能的感知和估计，并在此基础上构建人机交互界面实现对孤独症谱系障碍儿童执行功能的训练，系统解决孤独症谱系障碍儿童执行功能评测与训练问题，为孤独症谱系障碍儿童的评估和教育提供实证性研究工具和科学数据。
发明内容
本发明所解决的技术问题是：提供一种集孤独症谱系障碍儿童执行功能发展测评、康复训练、教育和信息管理为一体的儿童康复管理平台。
为了解决上述技术问题，本发明所采用的技术方案是：
提供一种面向孤独症谱系障碍儿童的执行功能评测与训练系统，包括学生智能终端10、便携式脑波仪20、数据机顶盒30、云服务器40和家长手持智能手机50；所述学生智能终端10提供用户交互界面，产生虚拟现实场景，当用户按照设计场景内容进行某种操作时，可实时记录用户的时空动力学数据，同时还通过其摄像头14记录用户的面部表情图像信息，这些数据通过无线通信技术实时传送给数据机顶盒30；所述便携式脑波仪20记录用户在使用系统过程中的脑电波节律，并通过无线通信技术将脑电波节律数据上传给数据机顶盒30；所述数据机顶盒30是系统数据汇集和分析中心，通过无线通信技术汇集所有用户数据，并通过算法对这些数据进行分析以实现对用户执行功能的评估，所述执行功能评估结果将实时反馈给学生智能终端10中虚拟现实人机交互场景就可形成了闭环的人机交互界面，用户可以根据虚拟场景的可视化结果动态调整自身的执行功能负荷水平，最终达到提升执行功能的目的；所述云服务器40与家长手持智能手机50通过云服务技术实现通讯，方便家长了解其孩子的执行功能评测与训练结果。其中，所述数据机顶盒30通过无线通信技术汇集所有用户数据，该用户数据包括用户的时空动力学数据、面部表情数据、脑电波节律。
所述学生智能终端10包括任务调度模块11、刺激呈现模块12、触屏时空数据记录模块13、摄像头14、面部表情图像记录模块15、生物反馈模块16和无线通信模块17；任务调度模块11首先通过刺激呈现模块12产生虚拟现实场景，用户按照设计场景内容进行某种操作，触屏时空数据记录模块13实时记录用户触摸电容屏的位置和时刻，与此同时面部表情图像记录模块15借助摄像头14实时记录用户的面部表情图像，触屏时空数据以及面部表情数据通过无线通信模块17上传给数据机顶盒30；数据机顶盒30通过汇集和分析用户数据后获得执行功能评估结果，所述评估结果将通过第一无线收发模块32实时反馈给学生智能终端10中生物反馈模块16，进而调节刺激呈现模块12中虚拟现实人机交互场景就可形成闭环的人机交互界面，用户可以根据虚拟场景的可视化结果动态调整自身的执行功能负荷水平，最终达到提升执行功能的目的。
所述数据机顶盒包括微处理器31、第一无线收发模块32、第二无线收发模块33、无线网络模块34、触屏时空数据分析模块35、表情分类器36、认知负荷估计器37、注意力水平估计器38、生物反馈模块39；所述微处理器31通过第一无线收发模块32与学生智能终端10实现双向无线通讯，通过第二无线收发模块33与便携式脑波仪20进行双向无线通讯，还通过无线网络模块33与云服务器40进行双向通信；所述触屏时空数据分析模块35通过分析用户触摸电容屏的位置和时刻信息获得孤独症谱系障碍儿童的响应正确率、响应时间、触屏模式这些认知线索；所述表情分类器36采用了标准化的三层前向神经网络，隐层激励函数是Sigmoid函数，输出层激活函数为线性函数，其输入参数为面部典型特征参数，输出为七种基本表情；所述认知负荷估计器37采用了标准化的三层前向神经网络，隐层激励函数是Sigmoid函数，输出层激活函数为线性函数，其输入参数为脑电波节律(包括δ波、θ波、α波、β波和γ波)，输出为认知负荷；所述注意力水平估计器38采用了标准化的三层前向神经网络，隐层激励函数是Sigmoid函数，输出层激活函数为线性函数，其输入参数为脑电波节律(包括δ波、θ波、α波、β波和γ波)，输出为注意力水平；生物反馈模块39通过多模态数据分析技术实现对用户执行功能的评估，并将评估结果将实时反馈给学生智能终端10中虚拟现实人机交互场景就可形成了闭环的人机交互界面，用户可以根据虚拟场景的可视化结果动态调整自身的执行功能负荷水平，数据机顶盒所汇集的用户数据分别通过触屏时空数据分析模块、面部表情分析模块、认知负荷估计模块、注意力水平估计模块来获得用户在面对特定任务时的认知线索、认知负荷、情绪状态以及正确率等信息，最终实现对用户执行功能的评估。
所述面部典型特征参数为Ekman的46种动作单元；所述表情分类器36通过选取国际上权威的面部表情数据库作为训练数据样本集和测试样本集，采用了标准化的前向神经网络结构设计算法，确定隐层神经元数量、输入层权值与阀值、隐层权值与阀值、输出层权值与阀值等结构信息。
所述便携式脑波仪20整体被封装在可头戴的外壳中，主要包括微处理器21、无线收发模块22、SD卡读写模块23、双导脑电采集模块24、电源调节与管理模块25、锂电池26、USB充电模块27；通过与计算机USB接口或者与带USB接口的AC-DC器件相连，USB充电模块27实现对锂电池26的充电功能；电源调节与管理模块37可以对系统所有功能单元提供稳定可靠的电源；所述微处理器21将双导脑电采集模块24采集的原始脑电信号进行分析处理并提取出反映大脑活动的脑电波节律；所述SD卡读写模块23将脑电波节律存储于SD卡中并由无线收发模块22实时发送至数据机顶盒30。
所述双导脑电采集模块24由干电极、参考电极、地电极、三级放大电路、带通滤波器和A/D转换器组成，干电极其中2个布置在双侧前额叶，而参考电极和地电极分别布置在双耳耳垂；由干电极获得的脑电信号经过三级放大电路放大后再经过带通滤波器获得信噪比较高的信号，该信号再经过高精度A/D转换器处理后获得稳定的原始脑电信号，此外，反映大脑活动的脑电波节律为δ波(1-3Hz)、θ波(4-7Hz)、α波(8-13Hz)、β波(14-25Hz)、γ波(25Hz以上)功率谱。
所述云服务器40为Browser/Server结构，采用“PHP+MySQL”进行架构，包括Web服务器41、数据库服务器42和互联网43；当用户有数据查询和服务需求时，用户首先通过浏览器经由访问互联网访问Web服务器41，再通过Web服务器41访问数据库服务器42。
本发明的有益效果是：本发明建立在脑-行为整合理论基础之上，利用先进人机交互技术和脑信息感知技术来解决孤独症谱系障碍儿童执行功能评测与训练问题，建立孤独症谱系障碍儿童执行功能评测的关键脑电及行为指标，实现对孤独症谱系障碍儿童执行功能的感知和估计，并在此基础上构建人机交互界面实现对孤独症谱系障碍儿童执行功能的训练。与目前国内外相关技术比较而言，与现有技术相比，本发明具有如下优点：
(1)本发明从脑-行为整合视角下解决执行功能评测与训练问题，建立工作执行功能评测的关键脑电及行为指标，实现对执行功能水平的感知和估计，并将这些感知计算结果实时反馈到人机交互界面，能够实现对执行功能的训练。
(2)本发明采用能诱发不同执行功能水平的虚拟场景作为刺激，记录用户在与虚拟场景进行人机交互过程中的行为响应，并同步记录用户在人机交互过程中左右前额叶皮层的脑电节律功率谱，且这些数据将被用于执行功能水平的实时在线评估，并将评估结果实时反馈以动态改变虚拟场景的进程，经过多次反馈就可以达到测量和训练执行功能的目的。
(3)本发明利用平板电脑产生虚拟现实环境，并采用最先进的人机交互技术，评测和训练的生态性好，可以准确获得孤独症谱系障碍儿童的行为学指标。
(4)本发明采用了便携式脑电信号获取技术，可以方便获得孤独症谱系障碍儿童在行为操作过程中与执行功能密切相关的脑电信息。
(5)本发明采用云服务器对数据进行存储，便于用户查询历史记录，还可定制个性化训练任务定制和专家远程咨询服务等。
附图说明
图1为本发明的整体组成框架图；
图2为本发明中学生智能终端的组成框图；
图3为本发明中便携式脑波仪的组成框图；
图4为本发明中数据机顶盒的组成框图；
图5为本发明中云服务器的组成框图。
附图标记：10-学生智能终端、20-便携式脑波仪、30-数据机顶盒、40-云服务器、50-家长手持智能手机、11-任务调度模块、12-刺激呈现模块、13-触屏时空数据记录模块、14-摄像头、15-面部表情图像记录模块、16-生物反馈模块、17-无线通信模块、21-微处理器、22-无线收发模块、23-SD卡读写模块、24-双导脑电采集模块、25-电源调节与管理模块、26-锂电池、27-USB充电模块、31-微处理器、32-第一无线收发模块、33-第二无线收发模块、34-无线网络模块、35-触屏时空数据分析模块、36-表情分类器、37-认知负荷估计器、38-注意力水平估计器、39-生物反馈模块、40-云服务器、41-Web服务器、42-数据库服务器、43-互联网
具体实施方式
本发明的实施方案如图1至图5所示，面向孤独症谱系障碍儿童的执行功能评测与训练系统主要包括学生智能终端10、便携式脑波仪20、数据机顶盒30、云服务器40和家长手持智能手机50这四个主要功能单元。
本发明首先通过学生智能终端10构建虚拟现实人机交互场景，接着用户佩戴便携式脑波仪20并按照要求完成一些操作，学生智能终端10将记录用户在操作过程中的触屏行为并同步记录用户的面部表情图像数据，而便携式脑波仪20将同步记录脑用户在操作设备过程中的脑电波节律，上述用户数据(包括用户触摸屏幕的时空动力学数据、面部表情数据、脑电波节律)通过无线通信技术发送给数据机顶盒30；数据机顶盒30是系统数据汇集和分析中心，通过分析汇集来的用户数据实现对用户执行功能的评估，所述执行功能评估结果将实时反馈给学生智能终端10中虚拟现实人机交互场景就可形成了闭环的人机交互界面，用户可以根据虚拟场景的可视化结果动态调整自身的执行功能负荷水平，最终达到提升执行功能的目的；云服务器40与家长手持智能手机50通过云服务技术实现通讯，方便家长了解其孩子的执行功能评测与训练结果。
下面具体介绍本发明系统每个部分的设计方案和实施方式。
1、学生智能终端10。如图2所示，学生智能终端10包括任务调度模块11、刺激呈现模块12、触屏时空数据记录模块13、摄像头14、面部表情图像记录模块15、生物反馈模块16和无线通信模块17等单元；任务调度模块11首先通过刺激呈现模块12产生虚拟现实场景，用户按照设计场景内容进行某种操作，触屏时空数据记录模块13实时记录用户触摸电容屏的位置和时刻，与此同时面部表情图像15记录模块借助摄像头14实时记录用户的面部表情图像，触屏时空数据以及面部表情数据通过线通信模块上传给数据机顶盒30；数据机顶盒30通过汇集和分析用户数据(包括用户触摸屏幕的时空动力学数据、面部表情数据、脑电波节律)后获得执行功能评估结果，所述评估结果将通过第一无线收发模块32实时反馈给学生智能终端10中生物反馈模块16，进而调节刺激呈现模块12中虚拟现实人机交互场景就可形成了闭环的人机交互界面，用户可以根据虚拟场景的可视化结果动态调整自身的执行功能负荷水平，最终达到提升执行功能的目的。
2、便携式脑波仪20。如图3所示，便携式脑波仪20整体被封装在可头戴的外壳中，主要包括微处理器21、无线收发模块22、SD卡读写模块23、双导脑电采集模块24、电源调节与管理模块25、锂电池26、USB充电模块27等功能单元；通过与计算机USB接口或者与带USB接口的AC-DC器件相连，USB充电模块27实现对锂电池26的充电功能；由于锂电池输出电压范围为3.7-4.2V，电源调节与管理模块25可以对系统所有功能单元提供稳定可靠的3.3V和5V电源；双导脑电采集模块24由干电极、参考电极、地电极、三级放大电路、带通滤波器、A/D转换器等单元组成，干电极其中2个布置在双侧前额叶，而参考电极和地电极分别位布置在双耳耳垂；由干电极获得的脑电信号经过三级放大电路放大后再经过带通滤波器获得信噪比较高的信号，该信号再经过高精度A/D转换器处理后获得稳定的原始脑电信号，微处理器21将通过现有的公知技术从原始脑电信号中提取反映大脑活动节律的δ波(1-3Hz)、θ波(4-7Hz)、α波(8-13Hz)、β波(14-25Hz)、γ波(25Hz以上)功率谱；大脑活动节律的δ波、θ波、α波、β波、γ波功率谱指标，将通过无线收发模块22实时发送给数据机顶盒30中的第二无线收发模块33。
3、数据机顶盒30。如图3所示，数据机顶盒30包括微处理器31、第一无线收发模块32、第二无线收发模块33、无线网络模块34、触屏时空数据分析模块35、表情分类器36、认知负荷估计器37、注意力水平估计器38、生物反馈模块39；所述微处理器31通过第一无线收发模块32与学生智能终端10实现双向无线通讯，通过第二无线收发模块33与便携式脑波仪20进行双向无线通讯，还通过无线网络模块33与云服务器40进行双向通信；所述触屏时空数据分析模块35通过分析用户触摸电容屏的位置和时刻信息获得孤独症谱系障碍儿童的响应正确率、响应时间、触屏模式等认知线索；所述认知负荷估计器37采用了标准化的三层前向神经网络，隐层激励函数是Sigmoid函数，输出层激活函数为线性函数，其输入参数为脑电波节律(包括δ波、θ波、α波、β波和γ波)，输出为认知负荷；所述注意力水平估计器38采用了标准化的三层前向神经网络，隐层激励函数是Sigmoid函数，输出层激活函数为线性函数，其输入参数为脑电波节律(包括δ波、θ波、α波、β波和γ波)，输出为注意力水平；生物反馈模块39通过多模态数据分析技术实现对用户执行功能的评估，并将评估结果将实时反馈给学生智能终端10中虚拟现实人机交互场景就可形成了闭环的人机交互界面，用户可以根据虚拟场景的可视化结果动态调整自身的执行功能负荷水平。所述表情分类器36采用了标准化的三层前向神经网络，隐层激励函数是Sigmoid函数，输出层激活函数为线性函数，其输入参数为面部典型特征参数，输出为七种基本表情，其中所述面部典型特征参数为Ekman的46种动作单元；所述表情分类器36通过选取国际上权威的面部表情数据库作为训练数据样本集和测试样本集，采用了标准化的前向神经网络结构设计算法，确定隐层神经元数量、输入层权值与阀值、隐层权值与阀值、输出层权值与阀值等结构信息。数据机顶盒30对所汇集的有用户数据(包括用户触摸屏幕的时空动力学数据、面部表情数据、脑电波节律)，分别通过触屏时空数据分析模块35、表情分类器36、认知负荷估计器37、注意力水平估计器38等工具获得用户在面对特定任务时的认知线索、认知负荷、情绪状态等信息，最终实现对用户执行功能的评估。
4、云服务器40。如图5所示，云服务器40由Web服务器41、数据库服务器42、互联网43组成；用户通过浏览器与Web服务器41和数据库服务器42进行数据交互，可以查询到评测与训练结果的历史记录，这些结果将为个性化训练任务定制、专家远程咨询服务等提供便捷；在具体的技术实现层面，采用了云服务器为Browser/Server结构，采用“PHP+MySQL”进行架构。
5、家长智能手机50。可以选用市场上主流的智能手机即可。
根据以上所述，便可实现本发明。
本发明建立在脑-行为整合理论基础之上，利用先进人机交互技术和脑信息感知技术来解决孤独症谱系障碍儿童执行功能评测与训练问题，建立孤独症谱系障碍儿童执行功能评测的关键脑电及行为指标，实现对孤独症谱系障碍儿童执行功能的感知和估计，并在此基础上构建人机交互界面实现对孤独症谱系障碍儿童执行功能的训练。与目前国内外相关技术比较而言，本发明突出的特点和进步是：(1)本发明从脑-行为整合视角下解决执行功能评测与训练问题，建立工作执行功能评测的关键脑电及行为指标，实现对执行功能水平的感知和估计，并将这些感知计算结果实时反馈到人机交互界面，能够实现对执行功能的训练；(2)本发明采用能诱发不同执行功能水平的虚拟场景作为刺激，记录用户在与虚拟场景进行人机交互过程中的行为响应，并同步记录用户在人机交互过程中左右前额叶皮层的脑电节律功率谱，且这些数据将被用于执行功能水平的实时在线评估，并将评估结果实时反馈以动态改变虚拟场景的进程，经过多次反馈就可以达到测量和训练执行功能的目的；(3)本发明利用平板电脑产生虚拟现实环境，并采用最先进的人机交互技术，评测和训练的生态性好，可以准确获得孤独症谱系障碍儿童的行为学指标；(4)本发明采用了便携式脑电信号获取技术，可以方便获得孤独症谱系障碍儿童在行为操作过程中与执行功能密切相关的脑电信息；(5)本发明采用云服务器对数据进行存储，便于用户查询历史记录，还可定制个性化训练任务定制和专家远程咨询服务等。
以上显示和描述了本发明的基本原理,主要特征和本发明的优点。本行业的技术人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的只是说明本发明的原理，在不脱离本发明精神和范围的前提下，本发明还会有各种变化和改进，这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。
Claims (8)
1.一种面向孤独症谱系障碍儿童的执行功能评测与训练系统，其特征在于：所述的系统包括学生智能终端(10)、便携式脑波仪(20)、数据机顶盒(30)、云服务器(40)和家长手持智能手机(50)；
所述学生智能终端(10)提供用户交互界面，产生虚拟现实场景，当用户按照设计场景内容进行某种操作时，可实时记录用户的时空动力学数据，同时还通过其摄像头(14)记录用户的面部表情图像数据，这些数据通过无线通信技术实时传送给数据机顶盒(30)；
所述便携式脑波仪(20)记录用户在使用系统过程中的脑电波节律，并通过无线通信技术将脑电波节律数据上传给数据机顶盒(30)；
所述数据机顶盒(30)是系统数据汇集和分析中心，通过无线通信技术汇集所有用户数据，并通过算法对这些用户数据进行分析以实现对用户执行功能的评估，执行功能的评估结果将实时反馈给学生智能终端(10)中虚拟现实人机交互场景就可形成闭环的人机交互界面，用户根据虚拟场景的可视化结果动态调整自身的执行功能负荷水平，最终达到提升执行功能的目的；
所述云服务器(40)与家长手持智能手机(50)通过云服务技术实现通讯，方便家长了解其孩子的执行功能评测与训练结果；
此外，上述数据机顶盒包括第一微处理器(31)、第一无线收发模块(32)、第二无线收发模块(33)、无线网络模块(34)、触屏时空数据分析模块(35)、表情分类器(36)、认知负荷估计器(37)、注意力水平估计器(38)、第一生物反馈模块(39)；所述第一微处理器(31)通过第一无线收发模块(32)与学生智能终端(10)实现双向无线通讯，通过第二无线收发模块(33)与便携式脑波仪(20)进行双向无线通讯，还通过无线网络模块(34)与云服务器(40)进行双向通信；所述触屏时空数据分析模块(35)通过分析用户触摸电容屏的位置和时刻信息获得孤独症谱系障碍儿童的响应正确率、响应时间、触屏模式这些认知线索；所述表情分类器(36)采用了标准化的三层前向神经网络，隐层激励函数是Sigmoid函数，输出层激活函数为线性函数，其输入参数为面部典型特征参数，输出为七种基本表情；所述认知负荷估计器(37)采用了标准化的三层前向神经网络，隐层激励函数是Sigmoid函数，输出层激活函数为线性函数，其输入参数为包括δ波、θ波、α波、β波和γ波的脑电波节律，输出为认知负荷；所述注意力水平估计器(38)采用了标准化的三层前向神经网络，隐层激励函数是Sigmoid函数，输出层激活函数为线性函数，其输入参数为包括δ波、θ波、α波、β波和γ波的脑电波节律，输出为注意力水平；第一生物反馈模块(39)通过多模态数据分析技术实现对用户执行功能的评估，并将评估结果实时反馈给学生智能终端(10)中虚拟现实人机交互场景就可形成闭环的人机交互界面，用户根据虚拟场景的可视化结果动态调整自身的执行功能负荷水平，数据机顶盒所汇集的用户数据分别通过触屏时空数据分析模块、表情分类器、认知负荷估计器、注意力水平估计器来获得用户在面对特定任务时的认知线索、基本表情、认知负荷、注意力水平以及响应正确率的信息，最终实现对用户执行功能的评估。
2.根据权利要求1所述的一种面向孤独症谱系障碍儿童的执行功能评测与训练系统，其特征在于：所述数据机顶盒(30)通过无线通信技术汇集所有用户数据，该用户数据包括用户的时空动力学数据、面部表情图像数据、脑电波节律。
3.根据权利要求1所述的一种面向孤独症谱系障碍儿童的执行功能评测与训练系统，其特征在于：所述学生智能终端(10)包括任务调度模块(11)、刺激呈现模块(12)、触屏时空数据记录模块(13)、摄像头(14)、面部表情图像记录模块(15)、第二生物反馈模块(16)和无线通信模块(17)；任务调度模块(11)首先通过刺激呈现模块(12)产生虚拟现实场景，用户按照设计场景内容进行某种操作，触屏时空数据记录模块(13)实时记录用户触摸电容屏的位置和时刻，与此同时面部表情图像记录模块(15)借助摄像头(14)实时记录用户的面部表情图像，触屏时空数据以及面部表情图像数据通过无线通信模块(17)上传给数据机顶盒(30)；数据机顶盒(30)通过汇集和分析用户数据后获得执行功能评估结果，所述评估结果将通过第一无线收发模块(32)实时反馈给学生智能终端(10)中的第二生物反馈模块(16)，进而调节刺激呈现模块(12)中虚拟现实人机交互场景就可形成闭环的人机交互界面，用户根据虚拟场景的可视化结果动态调整自身的执行功能负荷水平，最终达到提升执行功能的目的。
4.根据权利要求1所述的一种面向孤独症谱系障碍儿童的执行功能评测与训练系统，其特征在于：所述面部典型特征参数为Ekman的46种动作单元；所述表情分类器(36)通过选取国际上权威的面部表情数据库作为训练数据样本集和测试样本集，采用了标准化的前向神经网络结构设计算法，确定隐层神经元数量、输入层权值与阈 值、隐层权值与阈 值、输出层权值与阈 值结构信息。
5.根据权利要求1所述的一种面向孤独症谱系障碍儿童的执行功能评测与训练系统，其特征在于：所述便携式脑波仪(20)整体被封装在可头戴的外壳中，主要包括第二微处理器(21)、第三无线收发模块(22)、SD卡读写模块(23)、双导脑电采集模块(24)、电源调节与管理模块(25)、锂电池(26)、USB充电模块(27)；通过与计算机USB接口或者与带USB接口的AC-DC器件相连，USB充电模块(27)实现对锂电池(26)的充电功能；电源调节与管理模块(37)对系统所有功能单元提供稳定可靠的电源；所述第二微处理器(21)将双导脑电采集模块(24)采集的原始脑电信号进行分析处理并提取出反映大脑活动的脑电波节律；所述SD卡读写模块(23)将脑电波节律存储于SD卡中并由第三无线收发模块(22)实时发送至数据机顶盒(30)。
6.根据权利要求5所述的一种面向孤独症谱系障碍儿童的执行功能评测与训练系统，其特征在于：所述双导脑电采集模块(24)由干电极、参考电极、地电极、三级放大电路、带通滤波器和A/D转换器组成，干电极其中2个布置在双侧前额叶，而参考电极和地电极分别布置在双耳耳垂；由干电极获得的脑电信号经过三级放大电路放大后再经过带通滤波器获得信噪比较高的信号，该信噪比较高的信号再经过高精度A/D转换器处理后获得稳定的原始脑电信号。
7.根据权利要求5所述的一种面向孤独症谱系障碍儿童的执行功能评测与训练系统，其特征在于：所述反映大脑活动的脑电波节律为δ波：1-3Hz、θ波：4-7Hz、α波：8-13Hz、β波：14-25Hz、γ波：25Hz以上的功率谱。
8.根据权利要求1所述的面向孤独症谱系障碍儿童的执行功能评测与训练系统，其特征在于：所述云服务器(40)为Browser/Server结构，采用“PHP+MySQL”进行架构，包括Web服务器(41)、数据库服务器(42)和互联网(43)；当用户有数据查询和服务需求时，用户首先通过浏览器经由访问互联网访问Web服务器(41)，再通过Web服务器(41)访问数据库服务器(42)。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510788844.1A CN105279387B (zh) | 2015-11-17 | 2015-11-17 | 一种面向孤独症谱系障碍儿童的执行功能评测与训练系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510788844.1A CN105279387B (zh) | 2015-11-17 | 2015-11-17 | 一种面向孤独症谱系障碍儿童的执行功能评测与训练系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105279387A CN105279387A (zh) | 2016-01-27 |
| CN105279387B true CN105279387B (zh) | 2018-08-21 |
Family
ID=55148390
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510788844.1A Active CN105279387B (zh) | 2015-11-17 | 2015-11-17 | 一种面向孤独症谱系障碍儿童的执行功能评测与训练系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105279387B (zh) |
Families Citing this family (40)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105608940A (zh) * | 2016-03-16 | 2016-05-25 | 深圳市育成科技有限公司 | 交互定制计划式教学系统及其教学方法 |
| CN105975780A (zh) * | 2016-05-10 | 2016-09-28 | 华南理工大学 | 一种基于虚拟现实交互技术的机器问诊系统 |
| CN105852831A (zh) * | 2016-05-10 | 2016-08-17 | 华南理工大学 | 一种基于虚拟现实交互技术与脑功能实时监测技术的设备 |
| CN105893780B (zh) * | 2016-05-10 | 2019-04-09 | 广州博观文语科技有限公司 | 基于vr交互与脑电波及脑血流监测的精神心理评估方法 |
| CN106176009B (zh) * | 2016-07-01 | 2019-09-03 | 上海精鸣生物科技有限公司 | 一种多模态认知检测与康复系统装置 |
| CN106156514A (zh) * | 2016-07-12 | 2016-11-23 | 何侃 | 一种云计算的感官知觉及认知能力评估系统及方法 |
| CN106295184B (zh) * | 2016-08-10 | 2018-09-21 | 深圳先进技术研究院 | 用于情感康复的智能可穿戴设备 |
| CN107730576A (zh) * | 2016-08-11 | 2018-02-23 | 凡学（上海）教育科技有限公司 | 一种用于互联网教育app的信息处理方法 |
| CN106388785B (zh) * | 2016-11-11 | 2019-08-09 | 武汉智普天创科技有限公司 | 基于vr和脑电信号采集的认知评估设备 |
| CN106599558A (zh) * | 2016-12-05 | 2017-04-26 | 武汉智普天创科技有限公司 | 一种基于虚拟现实的认知评估方法及系统 |
| CN106725455A (zh) * | 2016-12-22 | 2017-05-31 | 蓝色传感（北京）科技有限公司 | 基于传感器反馈用于大脑能力培训的训练系统及方法 |
| CN106691441A (zh) * | 2016-12-22 | 2017-05-24 | 蓝色传感（北京）科技有限公司 | 基于脑电与运动状态反馈的注意力训练系统及方法 |
| CN106725458A (zh) * | 2016-12-31 | 2017-05-31 | 深圳市达实智控科技股份有限公司 | 一种基于脑电波检测及通知系统 |
| CN108538365A (zh) * | 2017-03-24 | 2018-09-14 | 华东师范大学 | 一种基于数据分析技术的自闭症社交能力评估系统 |
| CN106951717A (zh) * | 2017-03-31 | 2017-07-14 | 山东富优生命科学有限公司 | 一种儿童注意力缺陷多动障碍治疗系统 |
| CN107092783A (zh) * | 2017-04-06 | 2017-08-25 | 安徽创易心理科技有限公司 | 一种专注与放松度测试训练系统及方法 |
| CN107661198A (zh) * | 2017-08-29 | 2018-02-06 | 中山市爱明天使视光科技有限公司 | 基于恢复及提升视力的眼睫状肌体训练的模拟场景互动系统 |
| CN107785061A (zh) * | 2017-10-10 | 2018-03-09 | 东南大学 | 孤独症谱系障碍儿童情绪能力干预系统 |
| CN107569852A (zh) * | 2017-10-16 | 2018-01-12 | 江苏金惠甫山软件科技有限公司 | 一种用于心理治疗的游戏系统 |
| CN107802262B (zh) * | 2017-11-09 | 2020-09-08 | 常州大学 | 一种脑电结合vr用于儿童多动注意缺陷干预治疗的装置 |
| CN107773254A (zh) * | 2017-12-05 | 2018-03-09 | 苏州创捷传媒展览股份有限公司 | 一种测试用户体验的方法及装置 |
| CN108744220B (zh) * | 2018-03-14 | 2021-07-09 | 青岛同昌康复设备科技有限公司 | 一种基于3d打印技术的多感官训练系统 |
| CN108742602A (zh) * | 2018-03-26 | 2018-11-06 | 校宝在线（杭州）科技股份有限公司 | 一种基于脑电波的结巴检测方法 |
| CN108939249A (zh) * | 2018-07-20 | 2018-12-07 | 广州狄卡视觉科技有限公司 | 一种自闭症认知教育强化智能评估康复训练系统 |
| CN109044378A (zh) * | 2018-09-20 | 2018-12-21 | 复理智能科技（上海）有限公司 | 一种多动症评估和诊断系统 |
| CN109431522A (zh) * | 2018-10-19 | 2019-03-08 | 昆山杜克大学 | 基于叫名反应范式的孤独症早期筛查装置 |
| CN109272259A (zh) * | 2018-11-08 | 2019-01-25 | 梁月竹 | 一种孤独症谱系障碍儿童情绪能力干预系统及方法 |
| CN109621151A (zh) * | 2018-12-12 | 2019-04-16 | 上海玺翎智能科技有限公司 | 一种虚拟现实vr+听觉统合治疗儿童自闭症及评估方法 |
| CN111326253A (zh) * | 2018-12-14 | 2020-06-23 | 深圳先进技术研究院 | 自闭症谱系障碍患者的多模态情感认知能力的评估方法 |
| CN109805944B (zh) * | 2019-01-02 | 2021-10-29 | 华中师范大学 | 一种儿童共情能力分析系统 |
| CN110478593A (zh) * | 2019-05-15 | 2019-11-22 | 常州大学 | 基于vr技术的脑电注意力训练系统 |
| RU2708114C1 (ru) * | 2019-07-10 | 2019-12-04 | Общество с ограниченной ответственностью «Комплект-ОМ» | Система и способ мониторинга и обучения детей с расстройствами аутистического спектра |
| CN110600127A (zh) * | 2019-09-23 | 2019-12-20 | 上海市精神卫生中心（上海市心理咨询培训中心） | 通过视频激发面部表情实现认知障碍筛查功能的视频采集分析系统及其方法 |
| CN111128368B (zh) * | 2019-10-31 | 2023-04-07 | 东南大学 | 基于视频表情行为分析的孤独症谱系障碍自动检测方法及装置 |
| CN111081371A (zh) * | 2019-11-27 | 2020-04-28 | 昆山杜克大学 | 基于虚拟现实的孤独症早期筛查评估系统及方法 |
| CN111012367A (zh) * | 2019-12-27 | 2020-04-17 | 华中师范大学 | 一种精神疾病的智能识别系统 |
| CN113270187A (zh) * | 2021-07-21 | 2021-08-17 | 奥罗科技(天津)有限公司 | 一种智能远程自闭症康复训练系统 |
| CN113506624B (zh) * | 2021-08-16 | 2023-08-08 | 北京阿叟阿巴科技有限公司 | 基于逐层泛化推送逻辑的孤独症儿童认知能力评估干预系统 |
| CN113744841A (zh) * | 2021-08-30 | 2021-12-03 | 北京阿叟阿巴科技有限公司 | 一种基于逻辑树和多层级策略的孤独症儿童数字康复干预系统 |
| CN115486836A (zh) * | 2022-09-20 | 2022-12-20 | 浙江大学 | 一种基于vr设备的视觉运动感知检测方法及其装置 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007135441A2 (en) * | 2006-05-23 | 2007-11-29 | University Court Of The University Of Aberdeen | Apparatus and method for the assessment of neurodevelopmental disorders |
| CN102184661A (zh) * | 2011-03-17 | 2011-09-14 | 南京大学 | 儿童孤独症语言训练系统及基于物联网的集中训练中心 |
| CN102542849A (zh) * | 2012-01-20 | 2012-07-04 | 东南大学 | 形成性评测系统 |
| CN104306006A (zh) * | 2014-10-15 | 2015-01-28 | 东南大学 | 便携式工作记忆评测与训练装置 |
| CN104318253A (zh) * | 2014-11-11 | 2015-01-28 | 东南大学 | Mooc在线学习模式识别系统及方法 |
| CN104305964A (zh) * | 2014-11-11 | 2015-01-28 | 东南大学 | 头戴式疲劳检测装置及方法 |
| CN104391569A (zh) * | 2014-10-15 | 2015-03-04 | 东南大学 | 基于认知与情绪状态多模态感知的脑机接口系统 |
-
2015
- 2015-11-17 CN CN201510788844.1A patent/CN105279387B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007135441A2 (en) * | 2006-05-23 | 2007-11-29 | University Court Of The University Of Aberdeen | Apparatus and method for the assessment of neurodevelopmental disorders |
| CN102184661A (zh) * | 2011-03-17 | 2011-09-14 | 南京大学 | 儿童孤独症语言训练系统及基于物联网的集中训练中心 |
| CN102542849A (zh) * | 2012-01-20 | 2012-07-04 | 东南大学 | 形成性评测系统 |
| CN104306006A (zh) * | 2014-10-15 | 2015-01-28 | 东南大学 | 便携式工作记忆评测与训练装置 |
| CN104391569A (zh) * | 2014-10-15 | 2015-03-04 | 东南大学 | 基于认知与情绪状态多模态感知的脑机接口系统 |
| CN104318253A (zh) * | 2014-11-11 | 2015-01-28 | 东南大学 | Mooc在线学习模式识别系统及方法 |
| CN104305964A (zh) * | 2014-11-11 | 2015-01-28 | 东南大学 | 头戴式疲劳检测装置及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105279387A (zh) | 2016-01-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105279387B (zh) | 一种面向孤独症谱系障碍儿童的执行功能评测与训练系统 | |
| WO2017193497A1 (zh) | 基于融合模型的智能化健康管理服务器、系统及其控制方法 | |
| CN106267514B (zh) | 基于脑电反馈的情绪调控系统 | |
| CN104391569A (zh) | 基于认知与情绪状态多模态感知的脑机接口系统 | |
| CN105078449A (zh) | 基于健康服务机器人的老年痴呆症监护系统 | |
| CN105280044A (zh) | 一种面向孤独症谱系障碍儿童的智能教学系统 | |
| Meng et al. | Virtual rehabilitation training system based on surface emg feature extraction and analysis | |
| CN111598453B (zh) | 基于虚拟场景中执行力的操控工效分析方法、设备及系统 | |
| CN204971278U (zh) | 基于健康服务机器人的老年痴呆症监护系统 | |
| CN102920453A (zh) | 一种脑电波信号处理方法及其装置 | |
| CN104605849A (zh) | 一种脑电生物反馈诊断治疗仪、系统及使用方法 | |
| CN103226665A (zh) | 基于saas平台的人脑健康锻炼系统 | |
| CN103530727A (zh) | 野战心理防护方舱管理平台系统 | |
| WO2021004510A1 (zh) | 基于传感器的分离式部署的人体行为识别健康管理系统 | |
| CN102156813A (zh) | 一种智能体域网健康管理系统 | |
| CN109124655A (zh) | 精神状态分析方法、装置、设备、计算机介质及多功能椅 | |
| CN108379713A (zh) | 一个基于虚拟现实的交互冥想系统 | |
| CN106725455A (zh) | 基于传感器反馈用于大脑能力培训的训练系统及方法 | |
| CN107169302A (zh) | 一种中风病人信息采集及管理系统 | |
| CN203408041U (zh) | 基于物联网技术的健康监护系统 | |
| CN103656833B (zh) | 一种穿戴式脑电注意力训练仪 | |
| CN103294192A (zh) | 一种基于运动想象的led灯开关控制装置及其控制方法 | |
| CN110478593A (zh) | 基于vr技术的脑电注意力训练系统 | |
| Tian et al. | ResNet-50 based technique for EEG image characterization due to varying environmental stimuli | |
| CN109044351A (zh) | 基于脑电生物反馈的逻辑思维训练系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20211223 Address after: A203, Dishang, No. 15-18, Chunshuyuan, Xicheng District, Beijing 100052 Patentee after: Fengshi Education Technology (Beijing) Co.,Ltd. Address before: 210096 No. four archway, 2, Jiangsu, Nanjing Patentee before: SOUTHEAST University |