CN108764200A - 一种评测意识状态的方法及装置 - Google Patents
一种评测意识状态的方法及装置 Download PDFInfo
- Publication number
- CN108764200A CN108764200A CN201810573238.1A CN201810573238A CN108764200A CN 108764200 A CN108764200 A CN 108764200A CN 201810573238 A CN201810573238 A CN 201810573238A CN 108764200 A CN108764200 A CN 108764200A
- Authority
- CN
- China
- Prior art keywords
- user
- evaluation
- consciousness
- test
- acquisition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2218/00—Aspects of pattern recognition specially adapted for signal processing
- G06F2218/08—Feature extraction
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本申请提供了一种评测意识状态的方法及装置,其中,该方法包括:获取意识评测方案;基于所述意识评测方案,向用户输出引导指令,并采集用户响应引导指令所作出的响应行为;意识评测方案是根据用户基础信息确定的,所述用户基础信息包括以下的至少两个:年龄、性别、身高和体重;根据用户的响应行为,确定用户的评测结果;所述评测结果包括以下至少一个结果:以觉醒度改变为主的意识障碍,以意识内容为改变的意识障碍。本申请通过生成意识评测方案,分析用户意识评测结果,以此判定被检测人是否存在意识障碍。
Description
技术领域
本申请涉及用户行为数据处理技术领域,具体而言,涉及一种评测意识状态的方法及装置。
背景技术
意识是指意识是人脑对大脑内外表象的觉察,为一种特殊而复杂的运动,可以反映(映射)真实世界以及非实有意识自身的运动,可以正确映射真实和意识本身规律,也可不正确或歪曲反映。意识障碍是多种原因引起的一种严重的脑功能紊乱。所以,对于刚出生不久的儿童是否存在意识障碍十分重要。
发明内容
有鉴于此,本申请的目的在于提供一种评测意识状态的方法和装置,以检查被检测人是否发育正常以及被检测人是否存在意识障碍。
第一方面,本申请实施例提供了一种评测意识状态的方法,其中,包括:
获取意识评测方案;
基于所述意识评测方案,向用户输出引导指令,并采集用户响应引导指令所作出的响应行为;意识评测方案是根据用户基础信息确定的,所述用户基础信息包括以下的至少两个:年龄、性别、身高和体重;
根据用户的响应行为,确定用户的评测结果;所述评测结果包括以下至少一个结果:以觉醒度改变为主的意识障碍,以意识内容为改变的意识障碍。
结合第一方面,本申请实施例提供了第一方面的第一种可能的实施方式,其中,所述意识评测方案包括评测意识场景方案和评测意识采集方案;
评测意识场景方案包括场景参与形式、场景主题;所述场景参与形式包括陪同或独立参与;
评测意识采集方案包括以下任意一个或多个:视频采集、音频采集和传感器信号采集;
或,评测意识采集方案包括以下一个或多个:肢体动作采集、语音语调采集和面部表情采集。
结合第一方面的第一种可能的实施方式,本申请实施例提供了第一方面的第二种可能的实施方式,其中,根据用户的响应行为,确定用户的评测结果包括:
通过视频采集设备生成用户行为视频;
根据用户行为视频中的图片与参考图片的相似度确定用户的肢体动作弧线和面部表情变化情况;
所述参考图片是预先存储在处理器中的;
根据用户的肢体动作弧线和面部表情变化情况确定用户的评测结果;
根据用户的响应行为,确定用户的评测结果包括:
通过音频采集设备生成用户行为音频;
根据用户行为音频中的音频信号频谱与参考音频信号频谱的相似度确定用户的语音语调变化情况;
所述参考音频信号是预先存储在处理器中的;
根据用户的语音语调变化情况确定用户的评测结果。
结合第一方面的第一种可能的实施方式,本申请实施例提供了第一方面的第三种可能的实施方式,其中,根据用户的响应行为,确定用户的评测结果包括:
通过不同角度的摄像头获取用户的响应行为,以生成多个用户行为视频;
将多个用户行为视频转换为静态图片组;
将静态图片组压缩,得到第一图片组;
按照预定的灰度阈值对压缩后的图片进行灰度化,得到第二图片组;
对比第二图片组中的每一帧图片与每一帧参考图片的灰度等级,得到两幅图片灰度等级不同的像素点数目;
计算第二图片组中的每一帧图片总体灰度差异平均数,所述总体灰度差异平均数为第二图片组中每张图片的灰度差异平均数的总和除以第二图片组中图片的总数;所述灰度差异平均数为灰度等级不同的像素点数目的总和除以参考图片数量的结果;
根据设定的相似度等级划分规则,获取总体灰度差异平均数所对应的图片相似度;
根据图片相似度确定用户的肢体动作弧线和面部表情变化情况;
根据用户的肢体动作弧线和面部表情变化情况确定用户的评测结果;
根据用户的响应行为,确定用户的评测结果还包括:
通过不同角度的音频采集设备获取用户的响应行为,以生成多个用户音频信号;
对采集到的用户音频信号提取音频信号频谱;
识别音频信号频谱的波峰位置;
获取各波峰位置对应的特征值和时间点,根据各特征值和时间点得到用户音频信号的第一时间序列;
对比第一时间序列与第二时间序列,根据对比结果得到用户音频信号与参考音频信号的相似度;所述第二时间序列为参考音频信号的时间序列;
根据音频信号相似度确定用户的语音语调变化情况;
根据用户的语音语调变化情况确定用户的评测结果。
结合第一方面的第二种可能的实施方式,本申请实施例提供了第一方面的第四种可能的实施方式,其中,
根据用户基础信息,确定相应的意识状态评测方案;用户基础信息包括年龄、身高、性别和体重;
所述意识状态评测方案还包括相应的评测意识场景方案,评测意识场景方案包括真实场景或虚拟场景、陪同或独立;
所述意识状态评测方案还包括相应的评测意识采集方案,评测意识采集方案包括采集柱;所述采集柱上包括多个视频采集设备、声音采集设备、声音播放设备和视频播放设备;
所述意识评测方案,包括在陪同或独立的场景内,
所述视频采集设备设置在场景内不同角度的位置,用于采集用户在睡眠过程中不同角度下的身体动作、表情;
所述声音采集设备设置在场景内不同角度的位置,用于采集用户在睡觉过程中不同角度下的声音;
所述声音播放设备设置在场景内不同角度的位置,用于播放音频提示,以引导用户在场景内的行为;
所述视频播放设备设置在场景内不同角度的位置,用于播放视频提示,以引导用户在场景内的行为;
意识评测方案包括:
用户在陪同或独立的情况下,测试在睡觉过程中用户的反应;
声音播放设备和视频播放设备用于给用户提供提示;视频采集设备和音频采集设备用于采集用户在睡觉过程中的身体动作和语音语调。第二方面,本申请实施例还提供了一种评测意识状态的装置,应用于如权利要求1-5任一项所述的方法,其特征在于,该装置包括:评测室主体和设置在评测室主体上的采集模块、提示模块、处理器和交互屏,处理器分别与采集模块、提示模块、交互屏电性连接;
所述采集模块用于采集评测室主体内的用户响应引导指令所作出的响应行为,并将采集到的响应行为发送到处理器;
所述提示模块用于向评测室主体内的用户发出引导指令;
所述处理器,用于按照如权利要求1-5任一项所述的方法执行相应的动作。
结合第二方面,本申请实施例提供了第二方面的第一种可能的实施方式,其中,所述采集模块包括声音采集设备,和/或视频采集设备,和/或传感器采集设备;
所述提示模块包括声音播放设备,和/或视频播放设备;
所述声音采集设备包括话筒和录音机;
所述视频采集设备包括摄像头、录像机和图像传感器;
所述声音播放设备包括广播、音箱和扬声器;
所述视频播放设备包括电视机、电脑和交互屏;
所述传感器采集设备包括光敏传感器、声敏传感器、气敏传感器、化学传感器;
所述交互屏包括主交互屏和辅助交互屏,主交互屏用于根据系统提供的问题,与用户进行人机交互;辅助交互屏用于辅助人机交互。
结合第二方面的第一种可能的实施方式,本申请实施例提供了第二方面的第二种可能的实施方式,其中,所述评测室主体由设置在四个角落的采集柱支撑,以使评测室保持立体结构;
采集模块,用于采集用户的音视频;
提示模块,用于给用户提供帮助;
其中,所述采集模块和所述提示模块均设置在采集柱上;
所述采集柱上设置有滑轮,采集模块和提示模块可沿滑轮从评测室主体顶面板朝评测室底面板的方向滑动。
结合第二方面,本申请实施例提供了第二方面的第三种可能的实施方式,其中,所述评测室主体上还设置虚拟现实模块,,所述虚拟现实模块用于构建用户在评测室内的数据交互。
结合第二方面,本申请实施例提供了第二方面的第四种可能的实施方式,其中,所述评测室四周由自动幕布围成,自动幕布可为卷轴或者平拉。
本申请实施例提供的一种评测意识状态的方法和装置,采用获取用户基础信息来构建意识评测方案,并引导用户做出响应,并采集用户的响应行为,进行分析得出用户的意识评测结果,即对温度、触觉和痛觉有没有反应。与现有技术中的人工评测相比,其更适配于待评测用户,并可以根据用户个人情况生成用户个性化的意识评测方案,更易得出较为准确的评测结果。
为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本申请实施例所提供的一种评测意识状态的方法的流程图;
图2示出了本申请实施例所提供的另一种评测意识状态的方法的流程图;
图3示出了本申请实施例所提供的一种评测意识状态的装置的结构示意图;
图4示出了本申请实施例所提供的一种评测意识状态的装置的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
针对意识的检查在现实中非常普遍,检查过程绝大多数以人工检查为主,得到的检测结果一般是直接基于即可得到的结果,并且很少以年龄、性别等基础信息对用户进行区分检测。针对该种情况,申请人提供了一种进行评测意识状态的方法。
如图1所示,本申请实施例提供一种评测意识状态的方法,包括:如下步骤S101-S103:
S101,获取意识评测方案;
S102,基于所述意识评测方案,向用户输出引导指令,并采集用户响应引导指令所作出的响应行为;意识评测方案是根据用户基础信息确定的,所述用户基础信息包括以下的至少两个:年龄、性别、身高和体重;
S103,根据用户的响应行为,确定用户的评测结果;所述评测结果包括以下至少一个结果:以觉醒度改变为主的意识障碍,以意识内容为改变的意识障碍。
其中,被测对象的年龄需要在12个月-18个月。
获取意识评测方法首先要获取意识评测方案。
具体的,本申请实施例提供一种评测意识状态的方法,包括:意识评测方案包括评测意识场景方案和评测意识采集方案;
所述意识评测方案包括评测意识场景方案和评测意识采集方案;
评测意识场景方案包括场景参与形式、场景主题;所述场景参与形式包括陪同或独立参与;
评测意识采集方案包括以下任意一个或多个:视频采集、音频采集和传感器信号采集;
或,评测意识采集方案包括以下一个或多个:肢体动作采集、语音语调采集和面部表情采集。
其中,评测意识场景方案主要是建立对意识测试的相应反应行为与场景的对应关系,包含建立对应行为与场景设定元素的对应关系,场景设定元素包含场景适应年龄段、场景参与者、场景主题、场景形式等的对应关系;包含建立对应行为与场景设定的对应关系,场景设定包含适应年龄段、人与人的设定、人与物的设定、行为与流程内容的对应关系。场景适应年龄段是根据用户输入的用户基础信息确定的,根据不同的年龄段确定不同的评测意识场景方案。场景参与形式包括陪同或独立参与。场景的参与者包括用户,以及用户的陪伴者,当用户是完全民事行为能人时,则可以独自参与意识评测;当用户是限制民事行为能力人或者无民事行为人时,需要在监护人的陪同下进入评测场景参与意识评测。场景主题为意识检测。场景形式可以是真实或者虚拟,可以利用虚拟现实来实现用户的意识评测。
评测意识采集方案就是根据意识评测方案生成的如何采集用户信息的方案。针对用户在场景中的行为,建立对用户肢体动作、语音语调和面部表情等的采集方案。评测意识采集方案包括以下任意一个或多个:视频采集、音频采集和传感器信号采集,或者评测意识采集方案包括以下一个或多个:肢体动作采集、语音语调采集和面部表情采集。进行信号采集的时候,所使用的传感器包括光敏传感器、声敏传感器、气敏传感器、化学传感器、压敏传感器、温敏传感器以及流体传感器等。
视频采集和面部表情的采集可以通过视频采集设备采集,语音语调的采集可以通过音频采集设备采集,同时也可以利用传感器来采集用户的各种行为反应。通过视频采集设备生成用户行为视频,根据用户行为视频中图片与参考图片的相似度确定用户的肢体动作弧线和面部表情变化情况。参考图片是预先存储在处理器中的,参考图片记录用户在睡觉的过程中可能出现的肢体动作和面部表情,比如,当睡觉醒来后,肢体可能比较灵活,面部会相对放松甚至愉悦的表情;当睡觉醒来后,肢体可能比较僵硬,面部会持紧绷、皱眉的表情,其它例子与此相似,不再赘述。将这些图片作为参考图片预先存储在处理器中,与采集设备或传感器采集到的图片作对比,可以得到用户对意识障碍的结果。对于用户的语音语调也同样处理,将参考音频预先存储在处理器中,如用户在睡觉醒来后,说出比较烦躁或者抱怨的话语的等,其它例子与此相似,不再赘述。根据用户的肢体动作弧线和面部表情变化情况确定用户的评测结果,根据用户的响应行为,确定用户的评测结果包括:通过音频采集设备生成用户行为音频,根据用户行为音频中的音频信号频谱与参考音频信号频谱的相似度确定用户的语音语调变化情况,参考音频信号是预先存储在处理器中的,根据用户的语音语调变化情况确定用户的评测结果。
本申请实施例还提供一种评测意识状态的方法,其中,根据用户的响应行为,确定用户的评测结果包括:
通过视频采集设备生成用户行为视频;
根据用户行为视频中的图片与参考图片的相似度确定用户的肢体动作弧线和面部表情变化情况;
所述参考图片是预先存储在处理器中的;
根据用户的肢体动作弧线和面部表情变化情况确定用户的评测结果;
根据用户的响应行为,确定用户的评测结果包括:
通过音频采集设备生成用户行为音频;
根据用户行为音频中的音频信号频谱与参考音频信号频谱的相似度确定用户的语音语调变化情况;
所述参考音频信号是预先存储在处理器中的;
根据用户的语音语调变化情况确定用户的评测结果。
具体的,将采集到的视频信息和语音信息经过处理器的分析即可得到最后的评测结果,通过不同角度的摄像头获取用户的响应行为,以生成多个用户行为视频,安装在不同角度的摄像头可以将用户的所用行为进行不同角度的拍摄,将多个用户行为视频转换为静态图片组,将静态图片组压缩,得到第一图片组,将压缩后的图片灰度化,得到第二图片组,对比第二图片组中的每一帧图片与每一帧参考图片的灰度等级,得到两幅图片灰度等级不同的像素点数目,计算第二图片组中的每一帧图片总体灰度差异平均数,所述总体灰度差异平均数为第二图片组中每张图片的灰度差异平均数的总和除以第二图片组中图片的总数,所述灰度差异平均数为灰度等级不同的像素点数目的总和除以参考图片数量的结果,根据设定的相似度等级划分规则,获取总体灰度差异平均数所对应的图片相似度,根据图片相似度确定用户的肢体动作弧线和面部表情变化情况,相似度越高,说明采集到的用户视频图片与参考图片的重合度越高,即可判断出用户的反应情况。
本申请实施例还提供一种评测意识的方法,其中,根据用户的响应行为,确定用户的评测结果还包括:
通过不同角度的摄像头获取用户的响应行为,以生成多个用户行为视频;
将多个用户行为视频转换为静态图片组;
将静态图片组压缩,得到第一图片组;
按照预定的灰度阈值对压缩后的图片进行灰度化,得到第二图片组;
对比第二图片组中的每一帧图片与每一帧参考图片的灰度等级,得到两幅图片灰度等级不同的像素点数目;
计算第二图片组中的每一帧图片总体灰度差异平均数,所述总体灰度差异平均数为第二图片组中每张图片的灰度差异平均数的总和除以第二图片组中图片的总数;所述灰度差异平均数为灰度等级不同的像素点数目的总和除以参考图片数量的结果;
根据设定的相似度等级划分规则,获取总体灰度差异平均数所对应的图片相似度;
根据图片相似度确定用户的肢体动作弧线和面部表情变化情况;
根据用户的肢体动作弧线和面部表情变化情况确定用户的评测结果;
根据用户的响应行为,确定用户的评测结果还包括:
通过不同角度的音频采集设备获取用户的响应行为,以生成多个用户音频信号;
对采集到的用户音频信号提取音频信号频谱;
识别音频信号频谱的波峰位置;
获取各波峰位置对应的特征值和时间点,根据各特征值和时间点得到用户音频信号的第一时间序列;
对比第一时间序列与第二时间序列,根据对比结果得到用户音频信号与参考音频信号的相似度;所述第二时间序列为参考音频信号的时间序列;
根据音频信号相似度确定用户的语音语调变化情况;
根据用户的语音语调变化情况确定用户的评测结果。
具体的,通过不同角度的音频采集设备获取用户的响应行为,以生成多个用户音频信号,对采集到的用户音频信号提取音频信号频谱,识别音频信号频谱的波峰位置,获取各波峰位置对应的特征值和时间点,根据各特征值和时间点得到用户音频信号的第一时间序列,对比第一时间序列与第二时间序列,根据对比结果得到用户音频信号与参考音频信号的相似度;所述第二时间序列为参考音频信号的时间序列,根据音频信号相似度确定用户的语音语调变化情况,根据用户的语音语调变化情况确定用户的评测结果。
整个意识评测方案的整体流程如下:具体的,本申请实施例还提供一种评测意识状态的方法,包括:
根据用户基础信息,确定相应的意识状态评测方案;用户基础信息包括年龄、身高、性别和体重;
所述意识状态评测方案还包括相应的评测意识场景方案,评测意识场景方案包括真实场景或虚拟场景、陪同或独立;
所述意识状态评测方案还包括相应的评测意识采集方案,评测意识采集方案包括采集柱;所述采集柱上包括多个视频采集设备、声音采集设备、声音播放设备和视频播放设备;
所述意识评测方案,包括在陪同或独立的场景内,
所述视频采集设备设置在场景内不同角度的位置,用于采集用户在睡眠过程中不同角度下的身体动作、表情;
所述声音采集设备设置在场景内不同角度的位置,用于采集用户在睡觉过程中不同角度下的声音;
所述声音播放设备设置在场景内不同角度的位置,用于播放音频提示,以引导用户在场景内的行为;
所述视频播放设备设置在场景内不同角度的位置,用于播放视频提示,以引导用户在场景内的行为;
意识评测方案包括:
用户在陪同或独立的情况下,测试在睡觉过程中用户的反应;
声音播放设备和视频播放设备用于给用户提供提示;视频采集设备和音频采集设备用于采集用户在睡觉过程中的身体动作和语音语调。
意识评测方案,包括在陪同或独立的场景内,测试在睡觉过程中用户的反应,视频采集设备设置在场景内不同角度的位置,用于采集用户在睡觉过程中不同角度下的身体动作、表情,用户在睡觉时的身体动作、表情,声音采集设备设置在场景内不同角度的位置,用于采集用户在睡觉过程中不同角度下的声音,用户在睡觉时的声音,声音播放设备设置在场景内不同角度的位置,用于播放音频提示,以引导用户在场景内的行为,视频播放设备设置在场景内不同角度的位置,用于播放视频提示,以引导用户在场景内的行为。
意识评测方案,包括:用户在陪同或独立的情况下,测试在睡觉过程中用户的反应,声音播放设备和视频播放设备可以引导用户的陪伴者做一些有助于测试的事情,如:用户醒来后,用户的陪伴者尝试着跟用户玩耍,测试用户在睡醒后是否意识清醒,活力正常等,视频采集设备和音频采集设备采集用户在睡觉时的身体动作和语音语调。
能够按时入睡和觉醒,同时醒来后不吵闹,无以觉醒度改变为主的意识障碍;
能够按时入睡,但不能按时觉醒,叫醒后仍有困意,但不吵闹,以觉醒度改变为主的意识障碍程度为一般;
睡眠时间过长,叫醒后仍不能觉醒并伴有烦躁吵闹情绪,以觉醒度改变为主的意识障碍程度为高。
能够按时入睡和觉醒,白天意识清醒,活力正常,无以意识内容为改变的意识障碍;
能够按时入睡,按时清醒,但白天可见明显昏昏沉沉,精力不佳,思维混乱,以意识内容为改变的意识障碍的程度为一般;
未按时入睡时才会影响第二天的活力状态及昏睡情况,以意识内容为改变的意识障碍为高。
本申请所提供的方法中,步骤S103包括如下步骤:
将用户的响应行为输入到评测模型中,以使模型输出评测结果;其中,模型用于表征如下两点:
1.从看到睡觉到完成睡觉全过程的反应的角度来确定评测结果;
2.评测结果(以觉醒度改变为主的意识障碍,以意识内容为改变的意识障碍)与年龄及特定行为的对应关系。
当然,步骤S103还可以通过查表的方式来确定,并不必然采用输入到模型中的方式来实现。
举例说明,首先是采集用户基础信息,由用户录入初始信息,可以是被评测用户录入或者由其监护人录入。
例:采集被评测用户的基础信息
1)用户1:年龄:1岁1个月、性别:男性、身高:72CM,体重:10.5kg,
需父母或监护人辅助录入基础信息;
2)用户2:年龄:1岁3个月、性别:女性、身高:80.4CM,体重:11.5kg,
需父母或监护人辅助录入基础信息;
3)用户3:年龄:1岁、性别:男性、身高:69CM,体重:9.8kg,需父母或监护人辅助录入基础信息;
根据以上信息,输出评测方案:
用户1:在父母的陪同下,观察孩子在睡觉过程中的反应;
用户2:在父母的陪同下,观察孩子在睡觉过程中的反应;
用户3:在父母的陪同下,观察孩子在睡觉过程中的反应。
2)评测场景
用户1:真实场景、陪同、父母、睡觉;
用户2:真实场景、陪同、父母、睡觉;
用户3:真实场景、陪同、父母、睡觉;
3)采集方案(匹配孩子身高、多角度采集)
用户1:1米的采集柱,含多个摄像头、声音播放设备、声音采集设备;
用户2:1米的采集柱,含多个摄像头、声音播放设备、声音采集设备;
用户3:1米的采集柱,含多个摄像头、声音播放设备、声音采集设备;
采集柱是指集成了多个可旋转摄像头、声音播放设备、采集声音的设备等的集成采集装置。
评测方根据方案配置场景、内容、流程。
用户1:划分评测区、安装调试采集设备
用户2:划分评测区、安装调试采集设备
用户3:划分评测区、安装调试采集设备
被评估用户进入构建的场景,被评估用户按流程去完成指定特定行为的流程和内容。
采集系统采集用户在场景中的动作行为、语音语调、人机交互结果、表情等数据,采集系统上传采集的数据到服务端数据分析平台。
用户1:采集用户在睡觉过程中的身体动作、声音、表情;
用户2:采集用户在睡觉过程中的身体动作、声音、表情;
用户3:采集用户在睡觉过程中的身体动作、声音、表情。
服务端数据分析平台分析用户的各类行为数据,并给各类数据结果进行赋值,赋值结果主要为以觉醒度改变为主的意识障碍、以意识内容改变为主的意识障碍。
12-18个月的被测者作为被评测用户,意识评测的方案举例如下:
如图2所示,本申请实施例还提供一种评测意识状态的装置,应用于前述方法实施例的装置。该装置包括:
评测室主体和设置在评测室主体上的采集模块、提示模块、处理器和交互屏,处理器分别与采集模块、提示模块、交互屏电性连接;
所述采集模块用于采集评测室主体内的用户响应引导指令所作出的响应行为,并将采集到的响应行为发送到处理器;
所述提示模块用于向评测室主体内的用户发出引导指令;
所述处理器,用于按照如权利要求1-5任一项所述的方法执行相应的动作。
评测室主体、采集模块201、提示模块202和处理器203。该评测室是一个立体的结构,四周由采集柱作为支撑柱使评测室保持立体结构,评测室四周可以由幕布围成,幕布可以是平拉或者为卷轴的形式。
如图3所示,本申请实施例还提供一种评测意识状态的装置,包括:
所述采集模块包括声音采集设备,和/或视频采集设备,和/或传感器采集设备;
所述提示模块包括声音播放设备,和/或视频播放设备;
所述声音采集设备包括话筒和录音机;
所述视频采集设备包括摄像头、录像机和图像传感器;
所述声音播放设备包括广播、音箱和扬声器;
所述视频播放设备包括电视机、电脑和交互屏;
所述传感器采集设备包括光敏传感器、声敏传感器、气敏传感器、化学传感器;
所述交互屏包括主交互屏和辅助交互屏,主交互屏用于根据系统提供的问题,与用户进行人机交互;辅助交互屏用于辅助人机交互。
采集模块、提示模块和处理器设置在评测室主体30内,处理器311也可以设置在评测室主体30外。采集模块、提示模块分别和处理器311电性相连。采集模块将在评测室主体内采集到的用户响应行为上传到处理器311,由处理器311进行分析处理。采集模块包括声音采集设备、视频采集设备和传感器采集设备,声音采集设备包括话筒和录音机,视频采集设备包括摄像头305、录像机和图像传感器等。提示模块设置在评测室主体30内,以发出引导指令引导评测用户按照指令行为。提示模块包括声音播放设备,视频播放设备,和文字指示设备等。声音播放设备包括广播、音箱和扬声器307,视频播放设备包括电视机、电脑和交互屏,文字指示设备包括提示板、文字标志,交互屏包括主交互屏306和辅助交互屏310,主交互屏306用于根据系统提供的问题,与用户进行人机交互,辅助交互屏310用于辅助人机交互。
评测室内部设置有采集柱301,采集模块和提示模块可以设置在采集柱301上,采集柱301上设置有滑轮,滑轮沿整个采集柱平行布置,以使采集模块和提示模块可以沿着滑轮从评测室顶面板向底面板的方向上下滑动,滑轮可以是多条,以安装不同角度的采集模块和提示模块。评测室顶面板上安装灯具303,营造构建交互环境光效,也可以安装身高采集设备304,如超声波身高测量组件等。评测室的底面板上安装有人体信号采集设备308,包括体重采集设备,人体成分测量组件等,同时也设置有电源,以使整个评测室保持正常运行。评测室的前面板上设置有主交互屏306,以及扬声器307,交互屏306和扬声器307也可以安装在其他面板上,辅助交互屏310主要是为主交互屏306提供辅助作用,所以辅助交互屏310的安装位置可以在主交互屏306周围的任何面板上。此外,评测室主体30内还设置有电源309,用来给评测室内所有用电设备供电。
本申请实施例还提供一种评测意识状态的装置,包括:所述评测室主体上还设置虚拟现实模块,所述评测室主体上还设置虚拟现实模块,所述虚拟现实模块用于构建用户在评测室内的数据交互。
评测室内还设置虚拟现实装置,用于采集用户在评测室内的交互数据,对虚拟显示装置采集的交互数据可以暂存在处理器中,便于实时处理。
本申请实施例还提供一种评测意识状态的装置,包括:
所述评测室四周由自动幕布围成,自动幕布可为卷轴或者平拉。
自动幕布不仅可以播放视频,还能够用于制造一些用户在测试过程中,需要的环境,如:用户在睡觉过程中需要黑暗的环境,那么,幕布可以起到窗帘的作用,遮住光线。
为了能够有效的对光线进行遮挡,自动幕布采用白塑幕。
此外,如图4所示,是评测室主体的平面结构图,其中顶面板上设置有灯具405和身高采集设备404,前面板上设置有主交互屏407、扬声器408和视频采集设备409,底面板上设置有人体信号采集设备410和电源411,右面板上设置有辅助交互屏402和处理器403,采集柱401、411、412、413同时作为评测室主体的支撑柱。每两个支撑柱之间设置有幕布406、414、415、416。
本申请实施例所提供的一种意识评测的装置可以为设备上的特定硬件或者安装于设备上的软件或固件等。本申请实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,前述描述的系统、装置和单元的具体工作过程,均可以参考上述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的实施例中,应该理解到,所揭露装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
最后应说明的是:以上所述实施例,仅为本申请的具体实施方式,用以说明本申请的技术方案,而非对其限制,本申请的保护范围并不局限于此,尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围。都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应所述以权利要求的保护范围为准。
Claims (10)
1.一种评测意识状态的方法,其特征在于,包括:
获取意识评测方案;
基于所述意识评测方案,向用户输出引导指令,并采集用户响应引导指令所作出的响应行为;意识评测方案是根据用户基础信息确定的,所述用户基础信息包括以下的至少两个:年龄、性别、身高和体重;
根据用户的响应行为,确定用户的评测结果;所述评测结果包括以下至少一个结果:以觉醒度改变为主的意识障碍,以意识内容为改变的意识障碍。
2.根据权利要求1所述的一种评测意识状态的方法,其特征在于:
所述意识评测方案包括评测意识场景方案和评测意识采集方案;
评测意识场景方案包括场景参与形式、场景主题;所述场景参与形式包括陪同或独立参与;
评测意识采集方案包括以下任意一个或多个:视频采集、音频采集和传感器信号采集;
或,评测意识采集方案包括以下一个或多个:肢体动作采集、语音语调采集和面部表情采集。
3.根据权利要求1所述的一种评测意识状态的方法,其特征在于:
根据用户的响应行为,确定用户的评测结果包括:
通过视频采集设备生成用户行为视频;
根据用户行为视频中的图片与参考图片的相似度确定用户的肢体动作弧线和面部表情变化情况;
所述参考图片是预先存储在处理器中的;
根据用户的肢体动作弧线和面部表情变化情况确定用户的评测结果;
根据用户的响应行为,确定用户的评测结果包括:
通过音频采集设备生成用户行为音频;
根据用户行为音频中的音频信号频谱与参考音频信号频谱的相似度确定用户的语音语调变化情况;
所述参考音频信号是预先存储在处理器中的;
根据用户的语音语调变化情况确定用户的评测结果。
4.根据权利要求1所述的一种评测意识状态的方法,其特征在于:
根据用户的响应行为,确定用户的评测结果包括:
通过不同角度的摄像头获取用户的响应行为,以生成多个用户行为视频;
将多个用户行为视频转换为静态图片组;
将静态图片组压缩,得到第一图片组;
按照预定的灰度阈值对压缩后的图片进行灰度化,得到第二图片组;
对比第二图片组中的每一帧图片与每一帧参考图片的灰度等级,得到两幅图片灰度等级不同的像素点数目;
计算第二图片组中的每一帧图片总体灰度差异平均数,所述总体灰度差异平均数为第二图片组中每张图片的灰度差异平均数的总和除以第二图片组中图片的总数;所述灰度差异平均数为灰度等级不同的像素点数目的总和除以参考图片数量的结果;
根据设定的相似度等级划分规则,获取总体灰度差异平均数所对应的图片相似度;
根据图片相似度确定用户的肢体动作弧线和面部表情变化情况;
根据用户的肢体动作弧线和面部表情变化情况确定用户的评测结果;
根据用户的响应行为,确定用户的评测结果还包括:
通过不同角度的音频采集设备获取用户的响应行为,以生成多个用户音频信号;
对采集到的用户音频信号提取音频信号频谱;
识别音频信号频谱的波峰位置;
获取各波峰位置对应的特征值和时间点,根据各特征值和时间点得到用户音频信号的第一时间序列;
对比第一时间序列与第二时间序列,根据对比结果得到用户音频信号与参考音频信号的相似度;所述第二时间序列为参考音频信号的时间序列;
根据音频信号相似度确定用户的语音语调变化情况;
根据用户的语音语调变化情况确定用户的评测结果。
5.根据权利要求3所述的一种评测意识的方法,其特征在于:
根据用户基础信息,确定相应的意识状态评测方案;用户基础信息包括年龄、身高、性别和体重;
所述意识状态评测方案还包括相应的评测意识场景方案,评测意识场景方案包括真实场景或虚拟场景、陪同或独立;
所述意识状态评测方案还包括相应的评测意识采集方案,评测意识采集方案包括采集柱;所述采集柱上包括多个视频采集设备、声音采集设备、声音播放设备和视频播放设备;
所述意识评测方案,包括在陪同或独立的场景内,
所述视频采集设备设置在场景内不同角度的位置,用于采集用户在睡眠过程中不同角度下的身体动作、表情;
所述声音采集设备设置在场景内不同角度的位置,用于采集用户在睡觉过程中不同角度下的声音;
所述声音播放设备设置在场景内不同角度的位置,用于播放音频提示,以引导用户在场景内的行为;
所述视频播放设备设置在场景内不同角度的位置,用于播放视频提示,以引导用户在场景内的行为;
意识评测方案包括:
用户在陪同或独立的情况下,测试在睡觉过程中用户的反应;
声音播放设备和视频播放设备用于给用户提供提示;视频采集设备和音频采集设备用于采集用户在睡觉过程中的身体动作和语音语调。
6.一种评测意识状态的装置,应用于如权利要求1-5任一项所述的方法,其特征在于,该装置包括:评测室主体和设置在评测室主体上的采集模块、提示模块、处理器和交互屏,处理器分别与采集模块、提示模块、交互屏电性连接;
所述采集模块用于采集评测室主体内的用户响应引导指令所作出的响应行为,并将采集到的响应行为发送到处理器;
所述提示模块用于向评测室主体内的用户发出引导指令;
所述处理器,用于按照如权利要求1-5任一项所述的方法执行相应的动作。
7.根据权利要求6所述的一种评测意识状态的装置,其特征在于:
所述采集模块包括声音采集设备,和/或视频采集设备,和/或传感器采集设备;
所述提示模块包括声音播放设备,和/或视频播放设备;
所述声音采集设备包括话筒和录音机;
所述视频采集设备包括摄像头、录像机和图像传感器;
所述声音播放设备包括广播、音箱和扬声器;
所述视频播放设备包括电视机、电脑和交互屏;
所述传感器采集设备包括光敏传感器、声敏传感器、气敏传感器、化学传感器;
所述交互屏包括主交互屏和辅助交互屏,主交互屏用于根据系统提供的问题,与用户进行人机交互;辅助交互屏用于辅助人机交互。
8.根据权利要求6所述的一种评测意识状态的装置,其特征在于:
所述评测室主体由设置在四个角落的采集柱支撑,以使评测室保持立体结构;
采集模块,用于采集用户的音频;
提示模块,用于给用户提供帮助;
其中,所述采集模块和所述提示模块均设置在采集柱上;
所述采集柱上设置有滑轮,采集模块和提示模块可沿滑轮从评测室主体顶面板朝评测室底面板的方向滑动。
9.根据权利要求6所述的一种评测意识状态的装置,其特征在于:
所述评测室主体上还设置虚拟现实模块,所述虚拟现实模块用于构建用户在评测室内的数据交互。
10.根据权利要求6所述的一种评测意识状态的装置,其特征在于:
所述评测室四周由自动幕布围成,自动幕布可为卷轴或者平拉。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810573238.1A CN108764200A (zh) | 2018-06-06 | 2018-06-06 | 一种评测意识状态的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810573238.1A CN108764200A (zh) | 2018-06-06 | 2018-06-06 | 一种评测意识状态的方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108764200A true CN108764200A (zh) | 2018-11-06 |
Family
ID=63999229
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810573238.1A Withdrawn CN108764200A (zh) | 2018-06-06 | 2018-06-06 | 一种评测意识状态的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108764200A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111669636A (zh) * | 2020-06-19 | 2020-09-15 | 海信视像科技股份有限公司 | 一种音画同步的视频录制方法及显示设备 |
-
2018
- 2018-06-06 CN CN201810573238.1A patent/CN108764200A/zh not_active Withdrawn
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111669636A (zh) * | 2020-06-19 | 2020-09-15 | 海信视像科技股份有限公司 | 一种音画同步的视频录制方法及显示设备 |
CN111669636B (zh) * | 2020-06-19 | 2022-02-25 | 海信视像科技股份有限公司 | 一种音画同步的视频录制方法及显示设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Roy et al. | The human speechome project | |
CN108937969A (zh) | 一种评测认知状态的方法及装置 | |
JP2007102344A (ja) | 自動評価装置、プログラムおよび方法 | |
CN203017678U (zh) | 一种模拟自然环境的室内健身器材 | |
CN110916689A (zh) | 一种自闭症的认知与注意力强化智能评估训练系统及方法 | |
Wersenyi | Virtual localization by blind persons | |
CN110544532A (zh) | 一种基于app的声源空间定位能力检测系统 | |
CN107609334A (zh) | 一种现场观众反应分析系统及方法 | |
JP2016100033A (ja) | 再生制御装置 | |
CN108937970A (zh) | 一种评测情感状态的方法及装置 | |
CN108877841A (zh) | 一种评测语言状态的方法及装置 | |
CN108784709A (zh) | 一种评测动作行为状态的方法及装置 | |
CN108937861A (zh) | 一种评测睡眠状态的方法及装置 | |
CN108937971A (zh) | 一种评测注意力状态的方法及装置 | |
CN108764204A (zh) | 一种评测知觉状态的方法及装置 | |
CN108764200A (zh) | 一种评测意识状态的方法及装置 | |
CN108877836A (zh) | 一种评测言语状态的方法及装置 | |
CN112700353A (zh) | 智慧教室系统、学生健康数据管理方法、服务器和介质 | |
CN108777171A (zh) | 一种评测感觉状态的方法及装置 | |
Wang et al. | Heart fire: A smart watch-based musician-listener interaction system for online live-streamed concerts: A pilot study | |
CN111816214A (zh) | 一种声乐演唱技能检测系统 | |
CA2873657A1 (en) | Feedback-based lightpainting, user-interface, data visualization, sensing, or interactive system, means, and apparatus | |
CN112150871A (zh) | 一种基于互联网的在线音乐教学演示系统 | |
CN108764364A (zh) | 一种评测应激反应状态的方法及装置 | |
CN108777165A (zh) | 一种评测社交状态的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20181106 |
|
WW01 | Invention patent application withdrawn after publication |