CN110916689A - 一种自闭症的认知与注意力强化智能评估训练系统及方法 - Google Patents

一种自闭症的认知与注意力强化智能评估训练系统及方法 Download PDF

Info

Publication number
CN110916689A
CN110916689A CN201911203650.5A CN201911203650A CN110916689A CN 110916689 A CN110916689 A CN 110916689A CN 201911203650 A CN201911203650 A CN 201911203650A CN 110916689 A CN110916689 A CN 110916689A
Authority
CN
China
Prior art keywords
user
training
information
personal
course
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911203650.5A
Other languages
English (en)
Inventor
吕随峰
秦锡填
区耀文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Qinghong Education Technology Co Ltd
Original Assignee
Shanghai Qinghong Education Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Qinghong Education Technology Co Ltd filed Critical Shanghai Qinghong Education Technology Co Ltd
Priority to CN201911203650.5A priority Critical patent/CN110916689A/zh
Publication of CN110916689A publication Critical patent/CN110916689A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/40Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4088Diagnosing of monitoring cognitive diseases, e.g. Alzheimer, prion diseases or dementia
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/168Evaluating attention deficit, hyperactivity

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Developmental Disabilities (AREA)
  • Neurology (AREA)
  • Pathology (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • Psychiatry (AREA)
  • Biophysics (AREA)
  • Hospice & Palliative Care (AREA)
  • Child & Adolescent Psychology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Psychology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Physiology (AREA)
  • Neurosurgery (AREA)
  • Educational Technology (AREA)
  • Social Psychology (AREA)
  • Image Analysis (AREA)

Abstract

本发明属于计算机技术领域,具体涉及一种自闭症的认知与注意力强化智能评估训练系统及方法,包括:互动单元,用于获取用户的个人信息、个人图像和互动信息;课程管理单元,用于根据个人信息对用户进行分析并推荐训练课程;虚拟处理单元,用于对个人图像进行处理得到用户的人脸图像,将用户的人脸图像替代训练课程中人物的人脸图像;图像显示单元,用于向用户展示训练课程或替换人脸图像后的训练课程;主控评估单元,用于根据用户的个人信息、个人图像和互动信息对用户的认知注意力进行评估并得到评估结果。本发明基于对用户的评估为其推荐训练课程,并对训练的效果进行评估反馈,相比于人为的评估推荐,本发明的评估推荐更准确,训练效果更好。

Description

一种自闭症的认知与注意力强化智能评估训练系统及方法
技术领域
本发明属于计算机技术领域,具体涉及一种自闭症的认知与注意力强化智能评估训练系统及方法。
背景技术
青少年是祖国的未来,是国家强大的希望,因此青少年的教育尤为重要。目前我国的基础教育面对所有的学生或青少年,无论个人的智力如何、认知如何、注意力如何,现有的基础教育并没有针对个人的不同而采取不同的教育课程。
现有的教育也有一些针对个人认知注意力的训练课程,通过老师或家长对青少年的评估为青少年选择合适的课程,由于老师或家长的个人知识的限制,以及人为评估的误差,这样的评估并不准确,因而也无法为青少年推荐合适的训练课程,也达不到预期的训练目的。
发明内容
针对现有技术中的缺陷,本发明提供了一种自闭症的认知与注意力强化智能评估训练系统及方法,能够基于对用户的评估为用户推荐适合的认知注意力训练课程,并对训练的效果进行评估和反馈,相比于人为的评估和推荐,本发明的评估和推荐更为准确,所能达到的训练效果更好。
第一方面,本发明提供了一种自闭症的认知与注意力强化智能评估训练系统,包括互动单元、课程管理单元、虚拟处理单元、图像显示单元、主控评估单元;
所述互动单元,用于获取用户的个人信息,对用户进行训练时采用用户的个人图像和互动信息;
所述课程管理单元,用于根据用户的个人信息对用户进行分析,并基于分析的结果为用户推荐适合用户的认知注意力训练课程;
所述虚拟处理单元,用于对用户的个人图像进行图像识别处理,并得到用户的人脸图像,用于将用户的人脸图像替代训练课程中人物的人脸图像,还用于筛选出用户档案、课程节点、受训数据等并连接评估模块;
所述图像显示单元,用于通过显示屏向用户展示训练课程,还用于通过显示屏向用户展示替换人脸图像后的训练课程;
所述主控评估单元,用于根据用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并将得到的评估结果反馈给用户。
优选地,所述个人信息包括但不限于用户的姓名、年龄、性别、性格特征、爱好、教育背景、家庭背景和备注信息。
优选地,所述互动单元通过触控屏、键盘、摄像头、麦克风和各种传感器采集用户的互动信息。
优选地,所述课程管理单元包括训练课程模块和档案数据模块;
所述训练课程模块,用于存储若干不同年龄段、不同种类的训练课程,还用于在用户初次训练时,根据用户的个人信息对用户进行分析,并基于分析的结果为用户推荐适合用户的训练课程;
所述档案数据模块,用于存储训练过的历史信息和每次训练的评估结果,在用户进行再次训练时,基于个人信息、历史信息和评估结果进行全面分析,并基于分析的结果为用户推荐适合用户的训练课程。
优选地,所述虚拟处理单元包括人脸识别模块和虚拟代入模块;
所述人脸识别模块,用于通过图像识别技术对个人图像进行处理,从个人图像中提取出用户的人脸图像;还具有筛选出用户档案、课程节点、受训数据等并连接评估模块的功能;
所述虚拟代入模块,用于将用户的人脸图像与训练课程中的人物进行匹配,将用户的人脸图像替代训练课程中人物的人脸图像。
优选地,所述主控评估单元包括操控模块、评估模块和后台管理模块;
所述后台管理模块,用于供后台管理人员查看与用户相关的所有信息,还用于根据后台管理人员的指令信息;
所述操控模块,用于根据用户的个人图像和进行训练时的互动信息,对用户的训练反应进行识别,基于识别的结果控制干预设备对用户进行干预,或根据后台管理人员的指令信息控制干预设备对用户进行干预;
所述评估模块,用于将用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并将评估结果通过显示屏展示给用户。
优选地,所述干预设备为穿戴在用户身上的训练配套设备。
优选地,所述显示屏为裸眼3D显示屏。
优选地,所述评估模块具体用于:
对用户的个人信息、个人图像和互动信息进行初步的过滤提取,并得到过滤提取后的输入信息;
将输入信息输入评估模型,对用户的认知和注意力进行评估后,评估模型输出评估结果和改进建议;
将评估结果和改进建议通过显示屏展示给用户,同时将评估结果和改进建议发送给后台管理人员和用户的监护人。
第二方面,本发明提供了一种自闭症的认知与注意力强化智能评估训练方法,适用于第一方面所述的一种自闭症的认知与注意力强化智能评估训练系统,包括以下步骤:
获取用户的个人信息;
根据用户的个人信息对用户进行分析,并基于分析的结果为用户推荐适合用户的认知注意力训练课程;
通过显示屏向用户展示训练课程;
对用户进行训练时,采用用户的个人图像和互动信息;
对用户的个人图像进行图像识别处理,并得到用户的人脸图像;通过人脸识别筛选出用户档案、课程节点、受训数据等,以便后续进行评估;
将用户的人脸图像替代训练课程中人物的人脸图像;
通过显示屏向用户展示替换人脸图像后的训练课程;
根据用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并得到评估结果。
本发明的技术方案,能够基于对用户的评估为用户推荐适合的认知注意力训练课程,并对训练的效果进行评估和反馈,相比于人为的评估和推荐,本发明的评估和推荐更为准确,所能达到的训练效果更好。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍。在所有附图中,类似的元件或部分一般由类似的附图标记标识。附图中,各元件或部分并不一定按照实际的比例绘制。
图1为本实施例中一种自闭症的认知与注意力强化智能评估训练系统的结构图;
图2为本实施例中一种自闭症的认知与注意力强化智能评估训练方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解,在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
如在本说明书和所附权利要求书中所使用的那样,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
具体实现中,本发明实施例中描述的终端包括但不限于诸如具有触摸敏感表面(例如,触摸屏显示器和/或触摸板)的移动电话、膝上型计算机或平板计算机之类的其它便携式设备。还应当理解的是,在某些实施例中,所述设备并非便携式通信设备,而是具有触摸敏感表面(例如,触摸屏显示器和/或触摸板)的台式计算机。
实施例一:
本实施例提供了一种自闭症的认知与注意力强化智能评估训练系统,如图1所示,包括互动单元、课程管理单元、虚拟处理单元、图像显示单元、主控评估单元;
所述互动单元,用于获取用户的个人信息,对用户进行训练时采用用户的个人图像和互动信息;
所述课程管理单元,用于根据用户的个人信息对用户进行分析,并基于分析的结果为用户推荐适合用户的认知注意力训练课程;
所述虚拟处理单元,用于对用户的个人图像进行图像识别处理,并得到用户的人脸图像,用于将用户的人脸图像替代训练课程中人物的人脸图像,还用于筛选出用户档案、课程节点、受训数据等并连接评估模块;;
所述图像显示单元,用于通过显示屏向用户展示训练课程,还用于通过显示屏向用户展示替换人脸图像后的训练课程;
所述主控评估单元,用于根据用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并将得到的评估结果反馈给用户。
本实施例中,在对用户进行评估训练前,通过智能终端(如智能手机、平板电脑、台式电脑等)输入用户的个人信息,所述个人信息包括但不限于用户的姓名、年龄、性别、性格特征、爱好、教育背景、家庭背景和备注信息。本实施例的系统可以用于儿童、青少年、自闭症患者等用户,并对这些用户的认知与注意力进行训练和评估。
例如,一个13岁的男孩王某,性格内向,患有自闭症,注意力较差,父母均为高知,从小学一年级开始在各大培训机构为王某报了各种认知和注意力课程,……。
本实施例在对用户进行评估和推荐训练课程时,对新用户和老用户有不同的评估方式,其中,所述课程管理单元包括训练课程模块和档案数据模块;
所述训练课程模块,用于存储若干不同年龄段、不同种类的训练课程,还用于在用户初次训练时,根据用户的个人信息对用户进行分析,并基于分析的结果为用户推荐适合用户的训练课程;
所述档案数据模块,用于存储训练过的历史信息和每次训练的评估结果,在用户进行再次训练时,基于个人信息、历史信息和评估结果进行全面分析,并基于分析的结果为用户推荐适合用户的训练课程(调取数据库中的训练课程,将分析的结果与训练课程进行匹配,得到匹配度最高的训练课程,并将该训练课程推荐给用户)。
本实施例在对新用户进行评估时,根据用户的个人信息进行评估,在对老用户进行评估时,在个人信息的基础上,结合用户训练过的历史信息和曾经的评估结果来进行综合评估。
例如,王某在首次使用本系统时,系统根据王某的个人信息进行分析后,判断自闭症患者王某的注意力较差,对人物图像比较感兴趣,因此为王某推荐了一关于人物肖像的认知注意力训练课程。
王某在第四次使用本系统时,通过人脸识别即可进行登录,简化了登录流程以及调取用户相关信息的时间,同时增强了个人信息的保密性。本系统根据王某的个人信息、前三次训练的历史信息(所述历史信息即每次训练过程中采集的有关用户的所有信息),以及前三次的评估结果来进行综合评估,判断自闭症患者王某的注意力为良好,说明在前三次的训练后,王某的注意力有所提升,为王某推荐了一关于数字的认知注意力训练课程。
本实施例为了在训练过程中对用户进行干预,得到更好的训练效果,采用了干预设备,所述干预设备为穿戴在用户身上的训练配套设备(训练配套设备上安装有传感器、扬声器、振动电机)。在用户戴好训练配套设备后,通过裸眼3D显示屏显示训练课程的视频,裸眼3D显示屏显示的内容更生动、立体,让用户有更好的沉浸感。在训练过程中,通过触控屏、键盘、摄像头、麦克风和各种传感器采集用户的互动信息,触控屏和键盘用于获取用户的输入信息,摄像头用于获取用户的个人图像,麦克风用于获取用户的语音信息,传感器安装在训练配套设备上,用于获取用户过程中的肢体动作信息,因此所述互动信息包括输入信息、语音信息和肢体动作信息。
本实施例在得到用户的个人图像后进行图像处理,其中,所述虚拟处理单元包括人脸识别模块和虚拟代入模块;
所述人脸识别模块,用于通过图像识别技术对个人图像进行处理,从个人图像中提取出用户的人脸图像;并且通过人脸识别筛选出用户档案、课程节点、受训数据等并连接评估模块;
所述虚拟代入模块,用于将用户的人脸图像与训练课程中的人物进行匹配,将用户的人脸图像替代训练课程中人物的人脸图像。
例如,本实施例在通过摄像头获得王某的个人图像后,通过现有的图像识别技术,从王某的个人图像中提取出王某的人脸图像。本实施例的人物肖像训练课程的视频内容是:引导员带领用户在历史长河中认识不同历史时期的人物。为了让该训练课程更有趣,更好的吸引用户的注意力,本实施例将王某的人脸图像替代视频中的引导员的人脸图像,在训练课程中,王某就好像陪同另外一个自己去认识历史长河中的各种人物。
在训练的过程中,本实施例会对用户进行干预,其中,所述主控评估单元包括操控模块、评估模块和后台管理模块;
所述后台管理模块,用于供后台管理人员查看与用户相关的所有信息,还用于根据后台管理人员的指令信息;
所述操控模块,用于根据用户的个人图像和进行训练时的互动信息,对用户的训练反应进行识别,基于识别的结果控制干预设备对用户进行干预,或根据后台管理人员的指令信息控制干预设备对用户进行干预;
所述评估模块,用于将用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并将评估结果通过显示屏展示给用户。
本实施例中的后台管理人员,如老师、家长、监护人等。在训练过程中,后台管理人员可通过智能终端查看用户的相关资料信息,以及监控摄像头采集的现场培训的情况。在训练过程中,根据对用户的个人图像和互动信息进行分析,可得到用户训练过程中的反应情况。如通过眼神判断用户是否注意力集中在课程上,通过面部表情判断用户是否疲惫困倦,通过肢体动作判断用户是否紧张,等等。如果基于识别的结果判断用户注意力不集中,则训练配套设备上的振动电机振动、扬声器发出语音,从而提醒用户;如果基于识别的结果判断用户比较紧张,则通过扬声器播放比较舒缓的音乐,从而缓解用户紧张情绪;等等。通过训练过程中对用户的干预,从而达到更好的训练效果。
在训练结束后,会对用户进行评估,其中,所述评估模块具体用于:
对用户的个人信息、个人图像和互动信息进行初步的过滤提取,并得到过滤提取后的输入信息;
将输入信息输入评估模型,对用户的认知和注意力进行评估后,评估模型输出评估结果和改进建议;
将评估结果和改进建议通过显示屏展示给用户,同时将评估结果和改进建议发送给后台管理人员和用户的监护人。
本实施例中,在进行评估前,对用户的个人信息、个人图像和互动信息进行过程提取,过滤掉其中一些无用的信息,提取关键信息。例如个人信息中,用户填写的曾参加的某暑假夏令营的足球比赛相关信息,例如个人图像中的用户的背景环境,等等。然后将提取出的输入信息输入评估模型,所述评估模型采用神经网络算法,且是通过若干个样本经过训练得到。评估模型进行评估后输出评估结果和改进建议。例如,通过人物肖像的训练课程对王某进行训练后,得到的评估结果是:注意力为四级(注意力等级包括一级、二级、三级、四级和五级,五级最低,一级最高),主要的原因在于专注力不够,容易走神,等等;在评估结束后,将评估结果和改进建议通过显示屏显示,并发送给老师的电脑和家长的手机,便于用户了解自己的训练情况,老师和家长了解用户的训练情况。
综上所述,本实施例技术方案,能够基于对用户的评估为用户推荐适合的认知注意力训练课程,并对训练的效果进行评估和反馈,相比于人为的评估和推荐,本发明的评估和推荐更为准确,所能达到的训练效果更好;并且在训练的过程中,将用户的人脸图像训练课程中的人物的人脸图像,让训练课程更有趣,更能吸引用户注意力,通过裸眼3D显示屏进行显示,让显示的内容更生动、立体,让用户有更好的沉浸感,从而得到更好的训练效果。
实施例二:
本实施例提供了一种自闭症的认知与注意力强化智能评估训练方法,适用于第一方面所述的一种自闭症的认知与注意力强化智能评估训练系统,如图2所示,包括以下步骤:
S1,获取用户的个人信息;
S2,根据用户的个人信息对用户进行分析,并基于分析的结果为用户推荐适合用户的认知注意力训练课程;
S3,显示屏向用户展示训练课程;
S4,对用户进行训练时,采用用户的个人图像和互动信息;
S5,对用户的个人图像进行图像识别处理,并得到用户的人脸图像;通过人脸识别筛选出用户档案、课程节点、受训数据等,以便后续进行评估;
S6,将用户的人脸图像替代训练课程中人物的人脸图像;
S7,通过显示屏向用户展示替换人脸图像后的训练课程;
S8,根据用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并得到评估结果。
本实施例中,在对用户进行评估训练前,通过智能终端(如智能手机、平板电脑、台式电脑等)输入用户的个人信息,所述个人信息包括但不限于用户的姓名、年龄、性别、性格特征、爱好、教育背景、家庭背景和备注信息。本实施例的方法可以用于儿童、青少年、自闭症患者等用户,并对这些用户的认知与记忆进行训练和评估。
例如,一个13岁的男孩王某,性格内向,患有自闭症,注意力较差,父母均为高知,从小学一年级开始在各大培训机构为王某报了各种认知和注意力课程,……。
本实施例在对用户进行评估和推荐训练课程时,对新用户和老用户有不同的评估方式,对新用户进行评估时,根据用户的个人信息进行评估,在对老用户进行评估时,在个人信息的基础上,结合用户训练过的历史信息和曾经的评估结果来进行综合评估。
例如,王某在首次使用本系统时,系统根据王某的个人信息进行分析后,判断自闭症患者王某的注意力较差,对人物图像比较感兴趣,因此为王某推荐了一关于人物肖像的认知注意力训练课程。
王某在第四次使用本系统时,根据王某的个人信息、前三次训练的历史信息(所述历史信息即每次训练过程中采集的有关用户的所有信息),以及前三次的评估结果来进行综合评估,判断自闭症患者王某的注意力为良好,说明在前三次的训练后,王某的注意力有所提升,为王某推荐了一关于数字的认知注意力训练课程。
本实施例为了在训练过程中对用户进行干预,得到更好的训练效果,采用了干预设备,所述干预设备为穿戴在用户身上的训练配套设备(训练配套设备上安装有传感器、扬声器、振动电机)。在用户戴好训练配套设备后,通过裸眼3D显示屏显示训练课程的视频,裸眼3D显示屏显示的内容更生动、立体,让用户有更好的沉浸感。在训练过程中,通过触控屏、键盘、摄像头、麦克风和各种传感器采集用户的互动信息,触控屏和键盘用于获取用户的输入信息,摄像头用于获取用户的个人图像,麦克风用于获取用户的语音信息,传感器安装在训练配套设备上,用于获取用户过程中的肢体动作信息,因此所述互动信息包括输入信息、语音信息和肢体动作信息。
本实施例在得到用户的个人图像后,通过图像识别技术对个人图像进行处理,从个人图像中提取出用户的人脸图像;然后将用户的人脸图像与训练课程中的人物进行匹配,将用户的人脸图像替代训练课程中人物的人脸图像。
例如,本实施例在通过摄像头获得王某的个人图像后,通过现有的图像识别技术,从王某的个人图像中提取出王某的人脸图像。本实施例的人物肖像训练课程的视频内容是:引导员带领用户在历史长河中认识不同历史时期的人物。为了让该训练课程更有趣,更好的吸引用户的注意力,本实施例将王某的人脸图像替代视频中的引导员的人脸图像,在训练课程中,王某就好像陪同另外一个自己去认识历史长河中的各种人物。
在训练的过程中,后台管理人员可查看与用户相关的所有信息,还可向干预装备(训练配套设备)发送后台管理人员的指令信息;训练过程中,本实施例还根据用户的个人图像和进行训练时的互动信息,对用户的训练反应进行识别,基于识别的结果控制干预设备对用户进行干预,或根据后台管理人员的指令信息控制干预设备对用户进行干预。
本实施例中的后台管理人员,如老师、家长、监护人等。在训练过程中,后台管理人员可通过智能终端查看用户的相关资料信息,以及监控摄像头采集的现场培训的情况。在训练过程中,根据对用户的个人图像和互动信息进行分析,可得到用户训练过程中的反应情况。如通过眼神判断用户是否注意力集中在课程上,通过面部表情判断用户是否疲惫困倦,通过肢体动作判断用户是否紧张,等等。如果基于识别的结果判断用户注意力不集中,则训练配套设备上的振动电机振动、扬声器发出语音,从而提醒用户;如果基于识别的结果判断用户比较紧张,则通过扬声器播放比较舒缓的音乐,从而缓解用户紧张情绪;等等。通过训练过程中对用户的干预,从而达到更好的训练效果。
在训练结束后,通过用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并将评估结果通过显示屏展示给用户,具体为:
对用户的个人信息、个人图像和互动信息进行初步的过滤提取,并得到过滤提取后的输入信息;
将输入信息输入评估模型,对用户的认知和注意力进行评估后,评估模型输出评估结果和改进建议;
将评估结果和改进建议通过显示屏展示给用户,同时将评估结果和改进建议发送给后台管理人员和用户的监护人。
本实施例中,在进行评估前,对用户的个人信息、个人图像和互动信息进行过程提取,过滤掉其中一些无用的信息,提取关键信息。例如个人信息中,用户填写的曾参加的某暑假夏令营的足球比赛相关信息,例如个人图像中的用户的背景环境,等等。然后将提取出的输入信息输入评估模型,所述评估模型采用神经网络算法,且是通过若干个样本经过训练得到。评估模型进行评估后输出评估结果和改进建议。例如,通过人物肖像的训练课程对王某进行训练后,得到的评估结果是:注意力为四级(注意力等级包括一级、二级、三级、四级和五级,五级最低,一级最高),主要的原因在于专注力不够,容易走神,等等;在评估结束后,将评估结果和改进建议通过显示屏显示,并发送给老师的电脑和家长的手机,便于用户了解自己的训练情况,老师和家长了解用户的训练情况。
综上所述,本实施例技术方案,能够基于对用户的评估为用户推荐适合的认知注意力训练课程,并对训练的效果进行评估和反馈,相比于人为的评估和推荐,本发明的评估和推荐更为准确,所能达到的训练效果更好;并且在训练的过程中,将用户的人脸图像训练课程中的人物的人脸图像,让训练课程更有趣,更能吸引用户注意力,通过裸眼3D显示屏进行显示,让显示的内容更生动、立体,让用户有更好的沉浸感,从而得到更好的训练效果。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元或步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本申请所提供的实施例中,应该理解到,所述步骤的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个步骤可结合为一个步骤,一个步骤可拆分为多个步骤,或一些特征可以忽略等。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围,其均应涵盖在本发明的权利要求和说明书的范围当中。

Claims (10)

1.一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,包括互动单元、课程管理单元、虚拟处理单元、图像显示单元、主控评估单元;
所述互动单元,用于获取用户的个人信息,对用户进行训练时采用用户的个人图像和互动信息;
所述课程管理单元,用于根据用户的个人信息对用户进行分析,并基于分析的结果为用户推荐适合用户的认知注意力训练课程;
所述虚拟处理单元,用于对用户的个人图像进行图像识别处理,并得到用户的人脸图像,用于将用户的人脸图像替代训练课程中人物的人脸图像,还用于筛选出用户档案、课程节点、受训数据并连接评估模块;
所述图像显示单元,用于通过显示屏向用户展示训练课程,还用于通过显示屏向用户展示替换人脸图像后的训练课程;
所述主控评估单元,用于根据用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并将得到的评估结果反馈给用户。
2.根据权利要求1所述的一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,所述个人信息包括但不限于用户的姓名、年龄、性别、性格特征、爱好、教育背景、家庭背景和备注信息。
3.根据权利要求2所述的一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,所述互动单元通过触控屏、键盘、摄像头、麦克风和各种传感器采集用户的互动信息。
4.根据权利要求3所述的一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,所述课程管理单元包括训练课程模块和档案数据模块;
所述训练课程模块,用于存储若干不同年龄段、不同种类的训练课程,还用于在用户初次训练时,根据用户的个人信息对用户进行分析,并基于分析的结果为用户推荐适合用户的训练课程;
所述档案数据模块,用于存储训练过的历史信息和每次训练的评估结果,在用户进行再次训练时,基于个人信息、历史信息和评估结果进行全面分析,并基于分析的结果为用户推荐适合用户的训练课程。
5.根据权利要求4所述的一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,所述虚拟处理单元包括人脸识别模块和虚拟代入模块;
所述人脸识别模块,用于通过图像识别技术对个人图像进行处理,从个人图像中提取出用户的人脸图像;还具有筛选出用户档案、课程节点、受训数据并连接评估模块的功能;
所述虚拟代入模块,用于将用户的人脸图像与训练课程中的人物进行匹配,将用户的人脸图像替代训练课程中人物的人脸图像。
6.根据权利要求5所述的一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,所述主控评估单元包括操控模块、评估模块和后台管理模块;
所述后台管理模块,用于供后台管理人员查看与用户相关的所有信息,还用于根据后台管理人员的指令信息;
所述操控模块,用于根据用户的个人图像和进行训练时的互动信息,对用户的训练反应进行识别,基于识别的结果控制干预设备对用户进行干预,或根据后台管理人员的指令信息控制干预设备对用户进行干预;
所述评估模块,用于将用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并将评估结果通过显示屏展示给用户。
7.根据权利要求6所述的一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,所述干预设备为穿戴在用户身上的训练配套设备。
8.根据权利要求7所述的一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,所述显示屏为裸眼3D显示屏。
9.根据权利要求8所述的一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,所述评估模块具体用于:
对用户的个人信息、个人图像和互动信息进行初步的过滤提取,并得到过滤提取后的输入信息;
将输入信息输入评估模型,对用户的认知和注意力进行评估后,评估模型输出评估结果和改进建议;
将评估结果和改进建议通过显示屏展示给用户,同时将评估结果和改进建议发送给后台管理人员和用户的监护人。
10.一种自闭症的认知与注意力强化智能评估训练方法,适用于权利要求1-9任一项所述的一种自闭症的认知与注意力强化智能评估训练系统,其特征在于,包括以下步骤:
获取用户的个人信息;
根据用户的个人信息对用户进行分析,并基于分析的结果为用户推荐适合用户的认知注意力训练课程;
通过显示屏向用户展示训练课程;
对用户进行训练时,采用用户的个人图像和互动信息;
对用户的个人图像进行图像识别处理,并得到用户的人脸图像;通过人脸识别筛选出用户档案、课程节点、受训数据,以便后续进行评估;
将用户的人脸图像替代训练课程中人物的人脸图像;
通过显示屏向用户展示替换人脸图像后的训练课程;
根据用户的个人信息、个人图像和互动信息,对用户的认知和注意力进行评估,并得到评估结果。
CN201911203650.5A 2019-11-29 2019-11-29 一种自闭症的认知与注意力强化智能评估训练系统及方法 Pending CN110916689A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911203650.5A CN110916689A (zh) 2019-11-29 2019-11-29 一种自闭症的认知与注意力强化智能评估训练系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911203650.5A CN110916689A (zh) 2019-11-29 2019-11-29 一种自闭症的认知与注意力强化智能评估训练系统及方法

Publications (1)

Publication Number Publication Date
CN110916689A true CN110916689A (zh) 2020-03-27

Family

ID=69847870

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911203650.5A Pending CN110916689A (zh) 2019-11-29 2019-11-29 一种自闭症的认知与注意力强化智能评估训练系统及方法

Country Status (1)

Country Link
CN (1) CN110916689A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111415723A (zh) * 2020-04-14 2020-07-14 南京青宝教育科技有限公司 一种注意能力提升的个性化内容推荐系统
CN111568446A (zh) * 2020-05-28 2020-08-25 兰州大学 结合人口学注意力机制的便携式脑电抑郁检测系统
CN113269079A (zh) * 2021-05-20 2021-08-17 北京阿叟阿巴科技有限公司 基于视频层次化比对分析和等级行为范式的儿童孤独症早期评估装置及系统
CN113941069A (zh) * 2021-09-23 2022-01-18 宁波喻星教育科技有限公司 一种基于个性化推荐的自闭症智能干预系统
CN114343585A (zh) * 2022-01-13 2022-04-15 平安科技(深圳)有限公司 认知和行为障碍的预警方法、装置、设备及存储介质
CN115581457A (zh) * 2022-12-13 2023-01-10 深圳市心流科技有限公司 注意力评估方法、装置、设备及存储介质
CN117563104A (zh) * 2023-11-07 2024-02-20 好心情健康产业集团有限公司 一种用于训练注意力的设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107239670A (zh) * 2017-06-21 2017-10-10 江苏肯尼森健康科技有限公司 一种用于认知障碍筛查及个体化训练的系统
CN107647874A (zh) * 2017-11-06 2018-02-02 南京萌宝睿贝心理咨询有限公司 一种儿童注意力评测和训练的方法
CN108665555A (zh) * 2018-05-15 2018-10-16 华中师范大学 一种融入真实人物形象的孤独症干预系统
KR101921888B1 (ko) * 2017-10-13 2018-11-28 대한민국 온라인 평가 기반 언어재활 훈련 방법
CN108939249A (zh) * 2018-07-20 2018-12-07 广州狄卡视觉科技有限公司 一种自闭症认知教育强化智能评估康复训练系统
CN108939532A (zh) * 2018-09-29 2018-12-07 广州狄卡视觉科技有限公司 一种自闭症康复训练导引游戏式人机互动系统及方法
CN109172994A (zh) * 2018-07-24 2019-01-11 杭州行开科技有限公司 一种裸眼3d影像拍摄显示系统
CN109545330A (zh) * 2018-11-30 2019-03-29 北京京师脑力科技有限公司 一种提高执行功能的认知训练方法及系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107239670A (zh) * 2017-06-21 2017-10-10 江苏肯尼森健康科技有限公司 一种用于认知障碍筛查及个体化训练的系统
KR101921888B1 (ko) * 2017-10-13 2018-11-28 대한민국 온라인 평가 기반 언어재활 훈련 방법
CN107647874A (zh) * 2017-11-06 2018-02-02 南京萌宝睿贝心理咨询有限公司 一种儿童注意力评测和训练的方法
CN108665555A (zh) * 2018-05-15 2018-10-16 华中师范大学 一种融入真实人物形象的孤独症干预系统
CN108939249A (zh) * 2018-07-20 2018-12-07 广州狄卡视觉科技有限公司 一种自闭症认知教育强化智能评估康复训练系统
CN109172994A (zh) * 2018-07-24 2019-01-11 杭州行开科技有限公司 一种裸眼3d影像拍摄显示系统
CN108939532A (zh) * 2018-09-29 2018-12-07 广州狄卡视觉科技有限公司 一种自闭症康复训练导引游戏式人机互动系统及方法
CN109545330A (zh) * 2018-11-30 2019-03-29 北京京师脑力科技有限公司 一种提高执行功能的认知训练方法及系统

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111415723A (zh) * 2020-04-14 2020-07-14 南京青宝教育科技有限公司 一种注意能力提升的个性化内容推荐系统
CN111568446A (zh) * 2020-05-28 2020-08-25 兰州大学 结合人口学注意力机制的便携式脑电抑郁检测系统
CN113269079A (zh) * 2021-05-20 2021-08-17 北京阿叟阿巴科技有限公司 基于视频层次化比对分析和等级行为范式的儿童孤独症早期评估装置及系统
CN113269079B (zh) * 2021-05-20 2024-01-05 北京阿叟阿巴科技有限公司 基于视频层次化比对分析和等级行为范式的儿童孤独症早期评估装置及系统
CN113941069A (zh) * 2021-09-23 2022-01-18 宁波喻星教育科技有限公司 一种基于个性化推荐的自闭症智能干预系统
CN113941069B (zh) * 2021-09-23 2023-12-26 宁波喻星教育科技有限公司 一种基于个性化推荐的自闭症智能干预系统
CN114343585A (zh) * 2022-01-13 2022-04-15 平安科技(深圳)有限公司 认知和行为障碍的预警方法、装置、设备及存储介质
CN114343585B (zh) * 2022-01-13 2023-09-29 平安科技(深圳)有限公司 认知和行为障碍的预警方法、装置、设备及存储介质
CN115581457A (zh) * 2022-12-13 2023-01-10 深圳市心流科技有限公司 注意力评估方法、装置、设备及存储介质
CN115581457B (zh) * 2022-12-13 2023-05-12 深圳市心流科技有限公司 注意力评估方法、装置、设备及存储介质
CN117563104A (zh) * 2023-11-07 2024-02-20 好心情健康产业集团有限公司 一种用于训练注意力的设备
CN117563104B (zh) * 2023-11-07 2024-05-14 好心情健康产业集团有限公司 一种用于训练注意力的设备

Similar Documents

Publication Publication Date Title
CN110916689A (zh) 一种自闭症的认知与注意力强化智能评估训练系统及方法
US20180032126A1 (en) Method and system for measuring emotional state
KR20180137490A (ko) 기억과 의사 결정력 향상을 위한 개인 감정-기반의 컴퓨터 판독 가능한 인지 메모리 및 인지 통찰
Alepis et al. Object-oriented user interfaces for personalized mobile learning
Pogorelc et al. Semantic ambient media: From ambient advertising to ambient-assisted living
KR101525920B1 (ko) 학습장애자용 집중력 강화 학습 제공 시스템
Faisal et al. Towards a reference model for sensor-supported learning systems
KR102100418B1 (ko) 감정 상태를 개선시키는 방법 및 그 장치
Utami et al. A Brief Study of The Use of Pattern Recognition in Online Learning: Recommendation for Assessing Teaching Skills Automatically Online Based
WO2022064621A1 (ja) ビデオミーティング評価システム及びビデオミーティング評価サーバ
WO2022168180A1 (ja) ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム
Pal et al. Using DEMATEL for Contextual Learner Modeling in Personalized and Ubiquitous Learning.
Ahmad et al. Towards a Low‐Cost Teacher Orchestration Using Ubiquitous Computing Devices for Detecting Student’s Engagement
US11935329B2 (en) Video analysis program
Mehigan et al. Modelling an holistic artificial intelligent education model for optimal learner engagement and inclusion
WO2022113248A1 (ja) ビデオミーティング評価端末及びビデオミーティング評価方法
WO2022074785A1 (ja) ビデオミーティング評価端末、ビデオミーティング評価システム及びビデオミーティング評価プログラム
WO2022064618A1 (ja) ビデオミーティング評価システム及びビデオミーティング評価サーバ
WO2022064620A1 (ja) ビデオミーティング評価システム及びビデオミーティング評価サーバ
WO2022137502A1 (ja) ビデオミーティング評価端末、ビデオミーティング評価システム及びビデオミーティング評価プログラム
WO2022064617A1 (ja) ビデオミーティング評価システム及びビデオミーティング評価サーバ
JP7388768B2 (ja) 動画像分析プログラム
Heck Presentation adaptation for multimodal interface systems: three essays on the effectiveness of user-centric content and modality adaptation
WO2022064619A1 (ja) ビデオミーティング評価システム及びビデオミーティング評価サーバ
WO2022145038A1 (ja) ビデオミーティング評価端末、ビデオミーティング評価システム及びビデオミーティング評価プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination