CN108937970A - 一种评测情感状态的方法及装置 - Google Patents

Abstract

本发明提供了一种评测情感的方法及装置，其中，该方法包括：获取情感评测方案；基于情感评测方案，向用户输出引导指令，并采集用户响应引导指令所作出的响应行为；根据用户的响应行为，确定用户的评测结果；其中，情感评测方案是根据用户基础信息确定的，用户基础信息包括以下的至少两个：年龄、性别、身高、体重以及用户自主选择条件；评测结果包括：自我意识发展是否正常、能否正常转移情感、能否准确识别他人表情、能否准确认识他人复杂情感、能否理解他人情感变化原因、能否利用他人对某一情境的理解形成自己认识。本发明通过生成的情感评测方案，以及分析用户响应行为，能够判定被检测儿童是否发育正常、被检测儿童的是否存在情感障碍。

Description

一种评测情感状态的方法及装置

技术领域

本发明涉及用户行为数据处理技术领域，具体而言，涉及一种评测情感状态的方法及装置。

背景技术

情感和情感，是人对事物的态度的体验，是人的需要得到满足与否的反映，具有特殊的主观体验、显著的身体、生理变化和外部表情行为。人对事物的态度的体验，是人的需要得到满足与否的反映。情感和情感有别于认识活动，它具有特殊的主观体验、显著的身体－生理变化和外部表情行为。在个体发展中，情感反应出现在先，情感体验发生在后。新生儿一个月内就出现了愉快、痛苦的情感反应。他们最初的面部表情具有反射的性质，而随后发生的社会性情感反应就带有体验的性质，产生了情感。

近年来由于环境、教育等因素，情感障碍症的发病率有逐年增高的趋势，所以人们希望提早了解儿童是否存在情感障碍，因此，如何提供一种评测情感状态的方法和装置是目前亟待解决的技术问题。

发明内容

有鉴于此，本发明的目的在于提供一种评测情感状态的方法和装置，以检查儿童是否发育正常以及被检测人是否存在情感障碍。

第一方面，本发明实施例提供了一种评测情感状态的方法，其中，包括：

获取情感评测方案；

基于情感评测方案，向用户输出引导指令，并采集用户响应引导指令所作出的响应行为；

根据用户的响应行为，确定用户的评测结果；

其中，情感评测方案是根据用户基础信息确定的，用户基础信息包括以下的至少两个：年龄、性别、身高、体重以及用户自主选择条件；评测结果包括以下至少一个结果：自我意识发展是否正常、能否正常转移情感、能否准确识别他人表情、能否准确认识他人复杂情感、能否理解他人情感变化原因、能否利用他人对某一情境的理解形成自己认识、能否感受情感高涨、能否感受欣快、能否感受情感低落、能否感受情感淡漠、能否感受焦虑情感、能否感受躁狂、能否感受抑郁、能否感受恐惧、是否易激惹、是否情感不稳、是否情感倒错、表情贫乏、情感退缩、情感暴躁、情感矛盾、自伤观念、自杀观念、是否愉悦感丧失、是否有兴趣、能否感受平静、能否感受安全感、能否感受不安、能否感受紧张、能否感受神经过敏、能否感受慌乱、能否感受束缚感、能否感受烦恼、能否感受满意、能否感受恐惧、能否感受害羞、能否感受尴尬、能否感受自信、能否感受自卑、能否感受轻松、能否感受舒适、能否感受沮丧、能否感受愉悦、能否感受满足、能否感受压抑、能否感受疲劳、能否感受畏难、能否感受思想混乱、能否感受镇定、能否感受优柔寡断、能否感受绝望、能否感受内疚感、能否感受负罪感、能否感受愤怒、能否感受悲伤、能否感受果断。

结合第一方面，本发明实施例提供了第一方面的第一种可能的实施方式，其中，情感评测方案包括评测情感场景方案和评测情感采集方案；

评测情感场景方案包括场景参与形式、场景主题；场景主题包括以下至少一个主题：复合情感检测、情感理解检测、情感高涨检测、欣快检测、情感低落检测、情感淡漠检测、焦虑情感检测、躁狂检测、抑郁检测、恐惧检测、易激惹检测、情感不稳检测、情感倒错检测、表情贫乏检测、情感退缩检测、情感暴躁检测、情感矛盾检测、自伤观念检测、自杀观念检测、愉悦感丧失检测、兴趣检测、平静检测、安全感检测、不安检测、紧张检测、神经过敏检测、慌乱检测、束缚感检测、烦恼检测、满意检测、恐惧检测、害羞检测、尴尬检测、自信检测、自卑检测、轻松检测、舒适检测、沮丧检测、愉悦检测、满足检测、压抑检测、疲劳检测、畏难检测、思想混乱检测、镇定检测、优柔寡断检测、绝望检测、内疚感检测、负罪感检测、愤怒检测、悲伤检测、果断检测；评测情感采集方案包括以下任意一个或多个：视频采集、音频采集和传感器信号采集；

或，评测情感采集方案包括以下一个或多个：肢体动作采集、语音语调采集和面部表情采集。

结合第一方面的第一种可能的实施方式，本发明实施例提供了第一方面的第二种可能的实施方式，其中，根据用户的响应行为，确定用户的评测结果的步骤，包括：

通过视频采集设备生成用户行为视频以及通过音频采集设备生成用户音频信号；

根据用户行为视频中图片与参考图片的相似度和用户音频信号中频谱与参考音频信号频谱的相似度共同确定用户的肢体动作轨迹、面部表情、语音语调变化情况；

根据用户的肢体动作轨迹、面部表情、语音语调变化情况共同确定用户的评测结果；

其中，参考图片和参考音频信号是预先存储在处理器中的。

结合第一方面的第一种可能的实施方式，本发明实施例提供了第一方面的第三种可能的实施方式，其中，根据用户的响应行为，确定用户的评测结果的步骤，包括：

通过不同角度的摄像头获取用户的响应行为，以生成多个用户行为视频；

对多个用户行为视频中图片进行处理得到标准图片组；

对比标准图片组中的每一帧图片与每一帧参考图片的灰度等级，以根据灰度等级计算标准图片组中的每一帧图片总体灰度差异平均数；

根据设定的相似度等级划分规则，获取总体灰度差异平均数所对应的图片相似度；

根据图片相似度确定用户的肢体动作轨迹和面部表情变化情况；

通过不同角度的音频采集设备获取用户的响应行为，以生成多个用户音频信号；

对多个用户音频信号提取音频信号频谱，根据音频信号频谱计算音频信号相似度；

根据音频信号相似度确定用户的语音语调变化情况；

根据用户的肢体动作轨迹、面部表情、语音语调变化情况共同确定用户的评测结果。

本发明实施例提供了第一方面的第四种可能的实施方式，其中，情感评测方案还包括相应的评测情感场景方案，评测情感场景方案包括真实场景或虚拟场景、陪同或独立；

情感评测方案还包括相应的评测情感采集方案，评测情感采集方案包括采集柱；采集柱上包括多个视频采集设备、声音采集设备、声音播放设备和视频播放设备；

情感评测方案，包括在陪同或独立的场景内，测试用户在不同情景中的情感反应；

视频采集设备设置在场景内不同角度的位置，采集用户在不同情景中不同角度下的身体动作、表情；

声音采集设备设置在场景内不同的位置，采集用户在不同情景中不同位置下的声音；

声音播放设备设置在场景内不同角度的位置，播放音频提示引导用户在场景内的行为；

视频播放设备设置在场景内不同角度的位置，播放视频提示引导用户在场景内的行为；

根据采集到的用户的响应行为确定最终评测结果。

第二方面，本发明实施例还提供了一种评测情感的装置，设置在评测室内，应用于上述任一项中的评测情感的方法，装置包括：采集模块、提示模块、控制器和处理器，控制器分别与采集模块、提示模块电性连接，处理器分别与采集模块、提示模块电性连接；

采集模块用于采集评测室内的用户响应引导指令所作出的响应行为，并将采集到的响应行为发送到处理器；

提示模块用于向评测室内的用户发出引导指令；

控制器，用于控制采集模块和提示模块的动作；

处理器，用于执行如上述任一项的评测情感的方法的步骤。

结合第二方面，本发明实施例提供了第二方面的第一种可能的实施方式，其中，采集模块包括声音采集设备，和/或视频采集设备；

提示模块包括声音播放设备，和/或视频播放设备，和/或文字指示设备；

声音采集设备包括话筒和麦克风；

视频采集设备包括摄像头、录像机和图像传感器；

声音播放设备包括广播、音箱和扬声器；

视频播放设备包括电视机、电脑和交互屏。

结合第二方面的第一种可能的实施方式，本发明实施例提供了第二方面的第二种可能的实施方式，其中，评测情感的装置，还包括：采集柱，采集模块和提示模块设置在采集柱上。

结合第二方面，本发明实施例提供了第二方面的第三种可能的实施方式，其中，评测情感的装置，还包括：虚拟现实模块，虚拟现实模块用于构建用户在评测室内的数据交互。

结合第二方面，本发明实施例提供了第二方面的第四种可能的实施方式，其中，评测室还包括自动幕布，自动幕布至少为4个。

本发明实施例提供的一种评测情感的方法和装置，采用获取用户基础信息来构建情感评测方案，并引导用户做出响应，并采集用户的响应行为，进行分析得出用户的情感评测结果，即自我意识发展是否正常、能否正常转移情感、能否准确识别他人表情、能否准确认识他人复杂情感、能否理解他人情感变化原因、能否利用他人对某一情境的理解形成自己认识。与现有技术中的人工评测相比，其更适配于待评测用户，并可以根据用户个人情况生成用户个性化的情感评测方案，更易得出较为准确的评测结果。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1示出了本发明实施例所提供的一种评测情感的方法的流程图；

图2示出了本发明实施例所提供的一种评测情感的装置的结构示意图；

图3示出了本发明实施例所提供的一种评测室内部的立体结构示意图；

图4示出了本发明实施例所提供的一种评测室的平面结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

针对情感的检查在现实中非常普遍，检查过程绝大多数以人工检查为主，得到的检测结果一般是直接基于即可得到的结果，并且很少以年龄、性别等基础信息对用户进行区分检测。针对该种情况，申请人提供了一种进行情感评测的方法。

本发明第一方面的实施例，如图1所示，提出一种评测情感状态的方法，包括：

步骤S101，获取情感评测方案；

步骤S102，基于情感评测方案，向用户输出引导指令，并采集用户响应引导指令所作出的响应行为；

步骤S103，根据用户的响应行为，确定用户的评测结果；

其中，情感评测方案是根据用户基础信息确定的，用户基础信息包括以下的至少两个：年龄、性别、身高、体重以及用户自主选择条件；评测结果包括以下至少一个结果：自我意识发展是否正常、能否正常转移情感、能否准确识别他人表情、能否准确认识他人复杂情感、能否理解他人情感变化原因、能否利用他人对某一情境的理解形成自己认识。

本发明提供的评测情感状态的方法，首先，预先制定多种不同的情感评测方案，评测情感状态的装置根据待评测用户的基础信息自动为其匹配出与之相对应的情感评测方案；其中，用户基础信息不限于年龄、性别、身高、体重以及用户自主选择条件，即用户可以根据自身的需要自主选择进行测评的情感评测方案，通过这样的设置能够提高装置的灵活性，还能够提升用户的使用体验；然后，装置获取上述匹配出的情感评测方案，并向用户发出与该情感评测方案相对应的引导指令，用户根据引导指令会做出响应行为，装置采集用户的响应行为；最后，装置对采集到的用户的响应行为进行分析处理后，得出用户情感的测评结果。通过本发明提供的情感评测方案，能够评测出用户是否存在情感障碍，或评测出用户的情感等级，以便根据评测的结果进行相应的调整。

其中，步骤S103包括如下步骤：

将用户的响应行为输入到评测模型中，以使模型输出评测结果；其中，模型用于表征如下两点：

1.从响应行为的角度来反应评测结果；

2.评测结果(自我意识发展是否正常、能否正常转移情感、能否准确识别他人表情、能否准确认识他人复杂情感、能否理解他人情感变化原因、能否利用他人对某一情境的理解形成自己认识)与年龄及特定行为的对应关系。

在本发明的一个实施例中，优选地，情感评测方案包括评测情感场景方案和评测情感采集方案；

评测情感场景方案包括场景参与形式、场景主题；场景主题包括以下至少一个主题：复合情感检测、情感理解检测、情感高涨检测、欣快检测、情感低落检测、情感淡漠检测、焦虑情感检测、躁狂检测、抑郁检测、恐惧检测、易激惹检测、情感不稳检测、情感倒错检测、表情贫乏检测、情感退缩检测、情感暴躁检测、情感矛盾检测、自伤观念检测、自杀观念检测、愉悦感丧失检测、兴趣检测、平静检测、安全感检测、不安检测、紧张检测、神经过敏检测、慌乱检测、束缚感检测、烦恼检测、满意检测、恐惧检测、害羞检测、尴尬检测、自信检测、自卑检测、轻松检测、舒适检测、沮丧检测、愉悦检测、满足检测、压抑检测、疲劳检测、畏难检测、思想混乱检测、镇定检测、优柔寡断检测、绝望检测、内疚感检测、负罪感检测、愤怒检测、悲伤检测、果断检测；

评测情感采集方案包括以下任意一个或多个：视频采集、音频采集和传感器信号采集；

或，评测情感采集方案包括以下一个或多个：肢体动作采集、语音语调采集和面部表情采集。

在该实施例中，情感评测方案还包括评测情感场景方案和评测情感采集方案，评测情感场景方案就是建立对情感测试的相应反应行为与场景的对应关系，包含建立对应行为与场景设定元素的对应关系，场景设定元素包含场景适应年龄段、场景参与者、场景主题、场景形式等的对应关系；包含建立对应行为与场景设定的对应关系，场景设定包含适应年龄段、人与人的设定、人与物的设定、行为与流程内容的对应关系。场景适应年龄段是根据用户输入的用户基础信息确定的，即用户年龄，根据不同的年龄段确定不同的评测情感场景方案。场景参与形式包括陪同或独立参与，其中，陪同又分为照顾者陪同和测试员陪同；场景的参与者包括用户，以及用户的陪伴者，当用户是完全民事行为能人时，则可以独自参与情感评测；当用户是限制民事行为能力人或者无民事行为人时，需要在监护人的陪同下进入评测场景参与情感评测。例如，复合情感检测，例如，测试员要求儿童唱歌，并对其表示赞扬，装置根据儿童做出的响应反应，自动判断儿童的情感评测结果；情感理解检测，例如，测试员给儿童看6张不同表情照片，并询问儿童不同照片对应什么表情，装置根据儿童做出的响应反应，自动判断儿童的情感评测结果。

其中，评测情感采集方案就是根据情感评测方案生成的如何采集用户信息的方案。针对用户在场景中的行为，建立对用户肢体动作、语音语调和面部表情的采集方案。评测情感采集方案包括以下任意一个或多个：视频采集、音频采集和传感器信号采集。场景形式可以是真实或者虚拟，可以利用虚拟现实来实现用户的情感评测。

在本发明的一个实施例中，优选地，步骤S103，包括：

通过视频采集设备生成用户行为视频以及通过音频采集设备生成用户音频信号；

根据用户行为视频中图片与参考图片的相似度和用户音频信号中频谱与参考音频信号频谱的相似度共同确定用户的肢体动作轨迹、面部表情、语音语调变化情况；

根据用户的肢体动作轨迹、面部表情、语音语调变化情况共同确定用户的评测结果；

其中，参考图片和参考音频信号是预先存储在处理器中的。

在该实施例中，视频采集和面部表情的采集可以通过视频采集设备采集，语音语调的采集可以通过音频采集设备采集，同时也可以利用传感器来采集用户的各种行为反应。通过视频采集设备生成用户行为视频，根据用户行为视频中图片与参考图片的相似度确定用户的肢体动作轨迹和面部表情变化情况。其中，参考图片是预先存储在处理器中的，参考图片记录用户在不同情景中可能出现的肢体动作和面部表情，比如，面对测试员给儿童看6张不同复杂情感照片，并询问他不同照片对应什么情感时，对该问题进行不同的回答，面部会有明显的开心或沮丧的表情；面对测试员要求儿童唱歌，并对其表示赞扬，儿童情感有波动或情感无波动，并将这些图片作为参考图片预先存储在处理器中，与采集设备或传感器采集到的图片作对比，可以得到用户情感能力的结果。对于用户的语音语调也同样处理，将参考音频预先存储在处理器中，如用户开心时发出的笑声、害怕时发出的声音等，其它例子与此相似，不再赘述。

在本发明的一个实施例中，优选地，步骤103，包括：

通过不同角度的摄像头获取用户的响应行为，以生成多个用户行为视频；

对多个用户行为视频中图片进行处理得到标准图片组；

对比标准图片组中的每一帧图片与每一帧参考图片的灰度等级，以根据灰度等级计算标准图片组中的每一帧图片总体灰度差异平均数；

根据设定的相似度等级划分规则，获取总体灰度差异平均数所对应的图片相似度；

根据图片相似度确定用户的肢体动作轨迹和面部表情变化情况；

通过不同角度的音频采集设备获取用户的响应行为，以生成多个用户音频信号；

对多个用户音频信号提取音频信号频谱，根据音频信号频谱计算音频信号相似度；

根据音频信号相似度确定用户的语音语调变化情况；

根据用户的肢体动作轨迹、面部表情、语音语调变化情况共同确定用户的评测结果。

在该实施例中，将采集到的视频信息和语音信息经过处理器的分析处理后可得到用户的情感评测结果，具体地，通过不同角度的摄像头获取用户的响应行为，以生成多个用户行为视频，安装在不同角度的摄像头可以将用户的所用行为进行不同角度的拍摄，具体地，将多个用户行为视频转换为静态图片组，将静态图片组压缩，得到第一图片组，将压缩后的图片灰度化，得到第二图片组，对比第二图片组(标准图片组)中的每一帧图片与每一帧参考图片的灰度等级，得到两幅图片灰度等级不同的像素点数目，计算第二图片组中的每一帧图片总体灰度差异平均数，总体灰度差异平均数为第二图片组中每张图片的灰度差异平均数的总和除以第二图片组中图片的的总数，灰度差异平均数为灰度等级不同的像素点数目的总和除以参考图片数量的结果，根据设定的相似度等级划分规则，获取总体灰度差异平均数所对应的图片相似度；对采集到的用户音频信号提取音频信号频谱，识别音频信号频谱的波峰位置，获取各波峰位置对应的特征值和时间点，根据各特征值和时间点得到用户音频信号的第一时间序列，对比第一时间序列与第二时间序列，根据对比结果得到用户音频信号与参考音频信号的相似度，其中，第二时间序列为参考音频信号的时间序列。对于用户的语音语调也同样处理，将参考音频预先存储在处理器中，如用户面对测试员要求儿童唱歌，并对其表示赞扬，开心时发出的声音等，其它例子与此相似，不再赘述。根据图片相似度和音频信号相似度确定用户的肢体动作轨迹和语音语调情况，即可判断出用户的情感评测结果。

在本发明的一个实施例中，优选地，情感评测方案还包括相应的评测情感场景方案，评测情感场景方案包括真实场景或虚拟场景、陪同或独立；

情感评测方案还包括相应的评测情感采集方案，评测情感采集方案包括采集柱；采集柱上包括多个视频采集设备、声音采集设备、声音播放设备和视频播放设备；

情感评测方案，包括在陪同或独立的场景内，测试用户在不同情景中的情感反应；

视频采集设备设置在场景内不同角度的位置，采集用户在不同情景中不同角度下的身体动作、表情；

声音采集设备设置在场景内不同的位置，采集用户在不同情景中不同位置下的声音；

声音播放设备设置在场景内不同角度的位置，播放音频提示引导用户在场景内的行为；

视频播放设备设置在场景内不同角度的位置，播放视频提示引导用户在场景内的行为；

根据采集到的用户的响应行为确定最终评测结果。

在该实施例中，实施情感评测方案并得到评测结果的步骤包括：向用户输出引导指令，并采集用户响应引导指令所作出的响应行为，根据用户的响应行为，确定用户的评测结果。具体地，情感评测方案，包括在陪同或独立的场景内，测试用户在不同情景中的反应，视频采集设备设置在场景内不同角度的位置，采集用户在不同情景中不同角度下的身体动作、表情，声音采集设备设置在场景内不同角度的位置，采集用户在不同情景中不同角度下的声音，声音播放设备设置在场景内不同角度的位置，播放音频提示引导用户在场景内的行为，视频播放设备设置在场景内不同角度的位置，播放视频提示引导用户在场景内的行为。

情感评测方案包括：

(1)焦虑情感检测方案，包括：用户在陪同或独立的情况下，测试员将用户带到高处，声音播放设备和视频播放设备引导用户做出反应，视频采集设备和音频采集设备采集用户在此情境下的身体动作和语音语调。

测试员将用户带到高处时，用户有剧烈情感变化，感觉恐惧；或有轻微恐惧感，且过会能趋于平静；或无任何变化；

确定最终评测结果，判定用户焦虑情感是否受外部因素影响。

(2)情感理解检测方案1，包括：用户在陪同或独立的情况下，测试员给用户看6张不同表情照片，并询问用户不同照片对应什么表情，播放设备和视频播放设备引导用户做出反应，视频采集设备和音频采集设备采集用户在此情境下的身体动作和语音语调。

测试员给用户看6张不同表情照片，并询问用户不同照片对应什么表情；能答对5个以上；或能答对2-4个；或答对2个以下

确定最终评测结果，判定用户能否准确识别他人表情。

(3)情感理解检测方案2，包括：用户在陪同或独立的情况下，测试员给用户看6段不同视频，视频内容为打破花瓶后视频内人物表现愤怒，并询问用户为什么视频中的人为何会出现那种情感，播放设备和视频播放设备引导用户做出反应，视频采集设备和音频采集设备采集用户在此情境下的身体动作和语音语调。

测试员给用户看6段不同视频，视频内容为打破花瓶后视频内人物表现愤怒，并询问用户为什么视频中的人为何会出现那种情感的情景下；能答对5个以上；或能答对2-4个；或答对3个一下；

确定最终评测结果，判定用户能否理解他人情感变化原因。

(4)情感理解检测方案3，包括：用户在陪同或独立的情况下，家长陪同用户进入陌生环境，然后先后表现出平静与惊恐两种表情，观察用户反应的情景下，播放设备和视频播放设备引导用户做出反应，视频采集设备和音频采集设备采集用户在此情境下的身体动作和语音语调。

家长陪同用户进入陌生环境，然后先后表现出平静与惊恐两种表情，观察用户反应的情景下；当家长表现平静，用户也很平静；或当家长惊恐用户哭闹；或用户一直哭闹；或无反应。

确定最终评测结果，判定用户能否利用他人对某一情境的理解形成自己认识。

举例说明，首先是采集用户基础信息，由用户录入初始信息，可以是被评测用户录入或者由其监护人录入也可由用户自主选择评测方案。

例：采集被评测用户的基础信息

1)用户1：年龄：15个月、性别：男性、身高：45CM，体重：9.5g需父母或监护人辅助录入基础信息；

2)用户2：年龄：33个月、性别：男性、身高：65CM，体重：18.5g需父母或监护人辅助录入基础信息；

3)用户3：年龄：45个月、性别：女性、身高：105CM，体重：28.5g根据以上信息，输出评测方案：

用户1：在父母的陪同下，测试员将儿童带到高处，声音播放设备和视频播放设备引导用户做出反应；

用户2：在父母的陪同下，测试员给儿童看6张不同表情照片，并询问用户不同照片对应什么表情；

用户3：儿童单独进入构建的环境，测试员给用户看6段不同视频，视频内容为打破花瓶后视频内人物表现愤怒，并询问儿童为什么视频中的人为何会出现那种情感；

2)评测场景

用户1：真实场景、陪同、父母；

用户2：真实场景、陪同、父母；

用户3：真实场景、独立；

3)采集方案(匹配孩子身高、多角度采集)

用户1：1米的采集柱，含多个摄像头、声音播放设备、声音采集设备；

用户2：1米的采集柱，含多个摄像头、声音播放设备、声音采集设备；

用户3：1.5米的采集柱，含多个摄像头、声音播放设备、声音采集设备；

采集柱是指集成了多个可旋转摄像头、声音播放设备、采集声音的设备等的集成采集装置。

评测方根据方案配置场景、内容、流程。

用户1：划分评测区、准备道具、安装调试采集设备

用户2：划分评测区、准备道具、安装调试采集设备

用户3：划分评测区、准备道具、安装调试采集设备

被评估用户进入构建的场景，被评估用户按流程去完成指定特定行为的流程和内容。

采集系统采集用户在场景中的动作行为、语音语调、人机交互结果、表情等数据，采集系统上传采集的数据到服务端数据分析平台。

用户1：采集儿童在测试员将儿童带到高处的情景下，儿童的身体动作、声音、表情；

用户2：采集儿童在测试员给儿童看6张不同表情照片，并询问儿童不同照片对应什么表情的情景下，儿童的身体动作、声音、表情；

用户3：采集儿童在面对测试员给用户看6段不同视频，视频内容为打破花瓶后视频内人物表现愤怒，并询问用户为什么视频中的人为何会出现那种情感的情景下，儿童的身体动作、声音、表情。

服务端数据分析平台分析用户的各类行为数据，并给各类数据结果进行赋值，赋值结果主要为能答对5个以上；能答对2-4个；答对2个以下、有/没有表情、高兴/愤怒等表情。

用户1：面对测试员将儿童带到高处的情景下，儿童有剧烈情感变化，感觉恐惧；焦虑情感是由于受到外部因素的影响；

面对测试员将儿童带到高处的情景下，儿童有轻微恐惧感，且过会能趋于平静；不确定焦虑情感是否由于受到外部因素的影响；

面对测试员将儿童带到高处的情景下，无任何变化；焦虑情感不是由于受到外部因素的影响；

用户2：面对测试员给儿童看6张不同表情照片，并询问儿童不同照片对应什么表情的情景下，能答对5个以上；能准确识别他人表情；

面对测试员给儿童看6张不同表情照片，并询问儿童不同照片对应什么表情的情景下；能答对2-4个；不确定能准确识别他人表情；

面对测试员给儿童看6张不同表情照片，并询问儿童不同照片对应什么表情的情景下；答对1个以下；不能准确识别他人表情；

用户3：面对测试员给儿童看6段不同视频，视频内容为打破花瓶后视频内人物表现愤怒，并询问用户为什么视频中的人为何会出现那种情感的情景下；能答对5个以上；能理解他人情感变化原因；

面对测试员给儿童看6段不同视频，视频内容为打破花瓶后视频内人物表现愤怒，并询问儿童为什么视频中的人为何会出现那种情感的情景下；答对3至5；不确定能否理解他人情感变化原因；

面对测试员给儿童看6段不同视频，视频内容为打破花瓶后视频内人物表现愤怒，并询问儿童为什么视频中的人为何会出现那种情感的情景下；答对3个以下；不能理解他人情感变化原因；

服务端将被评估用户的评测方案和评测分析结果输出给评测方。

例如：

用户1：对测试员将儿童带到高处的情景下，有剧烈情感变化，焦虑情感是由于受到外部因素的影响；

用户2：对测试员给儿童看6张不同表情照片，并询问用户不同照片对应什么表情的情景下，能答对5个以上；能准确识别他人表情；

用户3：对测试员给儿童看6段不同视频，视频内容为打破花瓶后视频内人物表现愤怒，并询问儿童为什么视频中的人为何会出现那种情感的情景下；答对3个以下；不能理解他人情感变化原因。

儿童作为被评测用户，情感评测的方案举例如下：

本发明第二方面的实施例，提供一种评测情感的装置，如图2所示，设置在评测室内，应用于上述任一项中的评测情感的方法，装置包括：采集模块201、提示模块202、控制器203和处理器204，控制器203分别与采集模块201、提示模块202电性连接，处理器204分别与采集模块201、提示模块202电性连接；

采集模块201，用于采集评测室内的用户响应引导指令所作出的响应行为，并将采集到的响应行为发送到处理器；

提示模块202，用于向评测室内的用户发出引导指令；

处理器204，用于执行如上述任一项中的评测情感的方法的步骤；

控制器203，用于控制采集模块和提示模块的动作。

本发明提供的评测情感的装置，包括：采集模块201、提示模块202、控制器203和处理器204，通过提示模块202向用户输出引导指令，并通过采集模块201采集用户响应引导指令所作出的响应行为，进而根据用户的响应行为，确定用户的评测结果。具体地，采集模块201、提示模块202和处理器204设置在评测室内，处理器204也可以设置在评测室外，采集模块201将在评测室内采集到的用户响应行为上传到处理器204，由处理器204进行分析处理，最后输出用户的评测结果。其中，控制器203与采集模块201和提示模块202电性连接，进而能够控制采集模块201和提示模块202的动作，以便采集到所需要的全部信息，避免信息采集的不全面。

在本发明的一个实施例中，优选地，如图3所示，采集模块包括声音采集设备，和/或视频采集设备；

提示模块包括声音播放设备，和/或视频播放设备，和/或文字指示设备；

声音采集设备包括话筒和麦克风；

视频采集设备包括摄像头305、录像机和图像传感器；

声音播放设备包括广播、音箱和扬声器307；

视频播放设备包括电视机、电脑和交互屏306、310。

在该实施例中，采集模块包括声音采集设备、视频采集设备和传感器采集设备，声音采集设备包括话筒和录音机，视频采集设备包括摄像头305、录像机和图像传感器等。提示模块设置在评测室30内，以发出引导指令引导评测用户按照指令行为。提示模块包括声音播放设备，视频播放设备，和文字指示设备等。声音播放设备包括广播、音箱和扬声器307，视频播放设备包括电视机、电脑和交互屏，文字指示设备包括提示板、文字标志，交互屏包括主交互屏306和辅助交互屏310，主交互屏306用于根据系统提供的问题，与用户进行人机交互，辅助交互屏310用于辅助人机交互。

在本发明的一个实施例中，优选地，如图3所示，评测情感的装置，还包括：采集柱301，采集模块和提示模块设置在采集柱301上。

在该实施例中，评测室内部设置有采集柱301，采集模块和提示模块可以设置在采集柱301上，采集柱301上设置有导轨，导轨沿整个采集柱平行布置，以使采集模块和提示模块可以沿着导轨从评测室30顶面板向底面板的方向上下滑动，导轨可以是多条，以安装不同角度的采集模块和提示模块。

在本发明的一个实施例中，优选地，如图3所示，评测情感的装置，还包括：虚拟现实模块，虚拟现实模块用于构建用户在评测室30内的数据交互。

在该实施例中，评测室30包括框架302，评测室30顶面板上安装灯具303，营造构建交互环境光效，也可以安装身高采集设备304，如超声波身高测量组件等。评测室30的底面板上安装有人体信号采集设备308，包括体重采集设备，人体成分测量组件等，同时也设置有电源，以使整个评测室30保持正常运行。评测室30的前面板上设置有主交互屏306，以及扬声器307，主交交互屏306和扬声器307也可以安装在其他面板上，辅助交互屏310、311主要是为主交互屏306提供辅助作用，所以辅助交互屏310、311的安装位置可以在主交互屏306周围的任何面板上。评测室30内还设置虚拟现实装置，以构建用户在评测室30内的数据交互。评测室30主体30内还设置有电源309。

在本发明的一个实施例中，优选地，如图4所示，评测室还包括自动幕布，自动幕布至少为4个。

在该实施例中，评测室顶面板上设置有灯具405和身高采集设备404，前面板上设置有主交互屏407、扬声器408和视频采集设备409，底面板上设置有人体信号采集设备410和电源，右面板上设置有辅助交互屏402和处理器403，采集柱401、411、412、413同时作为评测室主体的支撑柱。每两个支撑柱之间设置有幕布406、414、415、416。

本发明实施例所提供的一种情感评测的装置可以为设备上的特定硬件或者安装于设备上的软件或固件等。本发明实施例所提供的装置，其实现原理及产生的技术效果和前述方法实施例相同，为简要描述，装置实施例部分未提及之处，可参考前述方法实施例中相应内容。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，前述描述的系统、装置和单元的具体工作过程，均可以参考上述方法实施例中的对应过程，在此不再赘述。

在本发明所提供的实施例中，应该理解到，所揭露装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围。都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种评测情感状态的方法，其特征在于，包括：

获取情感评测方案；

基于所述情感评测方案，向用户输出引导指令，并采集用户响应引导指令所作出的响应行为；

根据用户的响应行为，确定用户的评测结果；

其中，所述情感评测方案是根据用户基础信息确定的，所述用户基础信息包括以下的至少两个：年龄、性别、身高、体重以及用户自主选择条件；所述评测结果包括以下至少一个结果：自我意识发展是否正常、能否正常转移情感、能否准确识别他人表情、能否准确认识他人复杂情感、能否理解他人情感变化原因、能否利用他人对某一情境的理解形成自己认识、能否感受情感高涨、能否感受欣快、能否感受情感低落、能否感受情感淡漠、能否感受焦虑情感、能否感受躁狂、能否感受抑郁、能否感受恐惧、是否易激惹、是否情感不稳、是否情感倒错、表情贫乏、情感退缩、情感暴躁、情感矛盾、自伤观念、自杀观念、是否愉悦感丧失、是否有兴趣、能否感受平静、能否感受安全感、能否感受不安、能否感受紧张、能否感受神经过敏、能否感受慌乱、能否感受束缚感、能否感受烦恼、能否感受满意、能否感受恐惧、能否感受害羞、能否感受尴尬、能否感受自信、能否感受自卑、能否感受轻松、能否感受舒适、能否感受沮丧、能否感受愉悦、能否感受满足、能否感受压抑、能否感受疲劳、能否感受畏难、能否感受思想混乱、能否感受镇定、能否感受优柔寡断、能否感受绝望、能否感受内疚感、能否感受负罪感、能否感受愤怒、能否感受悲伤、能否感受果断。

2.根据权利要求1所述的一种评测情感状态的方法，其特征在于，所述情感评测方案包括评测情感场景方案和评测情感采集方案；

所述评测情感场景方案包括场景参与形式、场景主题；所述场景主题包括以下至少一个主题：复合情感检测、情感理解检测、情感高涨检测、欣快检测、情感低落检测、情感淡漠检测、焦虑情感检测、躁狂检测、抑郁检测、恐惧检测、易激惹检测、情感不稳检测、情感倒错检测、表情贫乏检测、情感退缩检测、情感暴躁检测、情感矛盾检测、自伤观念检测、自杀观念检测、愉悦感丧失检测、兴趣检测、平静检测、安全感检测、不安检测、紧张检测、神经过敏检测、慌乱检测、束缚感检测、烦恼检测、满意检测、恐惧检测、害羞检测、尴尬检测、自信检测、自卑检测、轻松检测、舒适检测、沮丧检测、愉悦检测、满足检测、压抑检测、疲劳检测、畏难检测、思想混乱检测、镇定检测、优柔寡断检测、绝望检测、内疚感检测、负罪感检测、愤怒检测、悲伤检测、果断检测；

所述评测情感采集方案包括以下任意一个或多个：视频采集、音频采集和传感器信号采集；

或，所述评测情感采集方案包括以下一个或多个：肢体动作采集、语音语调采集和面部表情采集。

3.根据权利要求1所述的一种评测情感状态的方法，其特征在于，所述根据用户的响应行为，确定用户的评测结果的步骤，包括：

通过视频采集设备生成用户行为视频以及通过音频采集设备生成用户音频信号；

根据所述用户行为视频中图片与参考图片的相似度和所述用户音频信号中频谱与参考音频信号频谱的相似度共同确定用户的肢体动作轨迹、面部表情、语音语调变化情况；

根据所述用户的肢体动作轨迹、面部表情、语音语调变化情况共同确定用户的评测结果；

其中，所述参考图片和所述参考音频信号是预先存储在处理器中的。

4.根据权利要求3所述的一种评测情感状态的方法，其特征在于，所述根据用户的响应行为，确定用户的评测结果的步骤，包括：

通过不同角度的摄像头获取用户的响应行为，以生成多个用户行为视频；

对所述多个用户行为视频中图片进行处理得到标准图片组；

对比所述标准图片组中的每一帧图片与每一帧参考图片的灰度等级，以根据所述灰度等级计算标准图片组中的每一帧图片所述总体灰度差异平均数；

根据设定的相似度等级划分规则，获取所述总体灰度差异平均数所对应的图片相似度；

根据所述图片相似度确定用户的肢体动作轨迹和面部表情变化情况；

通过不同角度的音频采集设备获取用户的响应行为，以生成多个用户音频信号；

对所述多个用户音频信号提取音频信号频谱，根据所述音频信号频谱计算音频信号相似度；

根据所述音频信号相似度确定用户的语音语调变化情况；

根据所述用户的肢体动作轨迹、面部表情、语音语调变化情况共同确定用户的评测结果。

5.根据权利要求1至4中任一项所述的一种评测情感状态的方法，其特征在于：

所述情感评测方案还包括相应的评测情感场景方案，所述评测情感场景方案包括真实场景或虚拟场景、陪同或独立；

所述情感评测方案还包括相应的评测情感采集方案，所述评测情感采集方案包括采集柱；所述采集柱上包括多个视频采集设备、声音采集设备、声音播放设备和视频播放设备；

所述情感评测方案，包括在陪同或独立的场景内，测试用户在不同情景中的情感反应；

所述视频采集设备设置在场景内不同角度的位置，采集用户在不同情景中不同角度下的身体动作、表情；

所述声音采集设备设置在场景内不同的位置，采集用户在不同情景中不同位置下的声音；

所述声音播放设备设置在场景内不同角度的位置，播放音频提示引导用户在场景内的行为；

所述视频播放设备设置在场景内不同角度的位置，播放视频提示引导用户在场景内的行为；

根据采集到的用户的响应行为确定最终评测结果。

6.一种评测情感状态的装置，设置在评测室内，应用于如权利要求1-5任一项所述的评测情感状态的方法，其特征在于，装置包括：采集模块、提示模块、控制器和处理器，所述控制器分别与所述采集模块、所述提示模块电性连接，所述处理器分别与所述采集模块、所述提示模块电性连接；

所述采集模块用于采集评测室内的用户响应引导指令所作出的响应行为，并将采集到的响应行为发送到所述处理器；

所述提示模块用于向评测室内的用户发出引导指令；

所述控制器，用于控制所述采集模块和所述提示模块的动作；

所述处理器，用于执行如权利要求1-5中任一项所述的评测情感状态的方法的步骤。

7.根据权利要求6所述的一种评测情感状态的装置，其特征在于：

所述采集模块包括声音采集设备，和/或视频采集设备；

所述提示模块包括声音播放设备，和/或视频播放设备，和/或文字指示设备；

所述声音采集设备包括话筒和麦克风；

所述视频采集设备包括摄像头、录像机和图像传感器；

所述声音播放设备包括广播、音箱和扬声器；

所述视频播放设备包括电视机、电脑和交互屏。

8.根据权利要求7所述的一种评测情感状态的装置，其特征在于，还包括：

采集柱，所述采集模块和所述提示模块设置在所述采集柱上。

9.根据权利要求8所述的一种评测情感状态的装置，其特征在于，还包括：

虚拟现实模块，所述虚拟现实模块用于构建用户在评测室内的数据交互。

10.根据权利要求6至9中任一项所述的一种评测情感状态的装置，其特征在于：

所述评测室还包括自动幕布，所述自动幕布至少为4个。