CN111104815A - 一种基于情绪能量感知的心理测评方法及装置 - Google Patents
一种基于情绪能量感知的心理测评方法及装置 Download PDFInfo
- Publication number
- CN111104815A CN111104815A CN201811246359.1A CN201811246359A CN111104815A CN 111104815 A CN111104815 A CN 111104815A CN 201811246359 A CN201811246359 A CN 201811246359A CN 111104815 A CN111104815 A CN 111104815A
- Authority
- CN
- China
- Prior art keywords
- emotion
- evaluation
- psychological
- module
- energy
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000008451 emotion Effects 0.000 title claims abstract description 54
- 238000000034 method Methods 0.000 title claims abstract description 31
- 230000008447 perception Effects 0.000 title claims abstract description 10
- 238000011156 evaluation Methods 0.000 claims abstract description 28
- 230000001939 inductive effect Effects 0.000 claims abstract description 21
- 230000002996 emotional effect Effects 0.000 claims abstract description 18
- 239000000463 material Substances 0.000 claims abstract description 17
- 238000012854 evaluation process Methods 0.000 claims abstract description 16
- 230000000694 effects Effects 0.000 claims abstract description 13
- 230000008569 process Effects 0.000 claims abstract description 11
- 230000006698 induction Effects 0.000 claims abstract description 8
- 239000012634 fragment Substances 0.000 claims description 5
- 230000001815 facial effect Effects 0.000 claims description 3
- 210000001097 facial muscle Anatomy 0.000 claims description 3
- 238000013507 mapping Methods 0.000 claims 1
- 210000003205 muscle Anatomy 0.000 abstract description 3
- 230000007547 defect Effects 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000994 depressogenic effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000000803 paradoxical effect Effects 0.000 description 1
- 230000006461 physiological response Effects 0.000 description 1
- 230000009323 psychological health Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1118—Determining activity level
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Psychiatry (AREA)
- Biomedical Technology (AREA)
- Physics & Mathematics (AREA)
- Pathology (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Developmental Disabilities (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Epidemiology (AREA)
- Child & Adolescent Psychology (AREA)
- Primary Health Care (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Surgery (AREA)
- Hospice & Palliative Care (AREA)
- Molecular Biology (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Educational Technology (AREA)
- Theoretical Computer Science (AREA)
- Physiology (AREA)
- Dentistry (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明公开了一种基于情绪能量感知的心理测评方法及装置，能够基于对受试人员的情绪能量感知，实现对其心理状态的非接触式测评，具体包括情绪诱发、视频采集、生理振动频率计算、情绪能量判定、测评结果评价五个模块。情绪诱发模块根据测评需求，结合特定心理测评素材库，实现对受试人员的情绪诱发；视频采集模块实时采集情绪诱发过程中该人的面部视频图像；生理振动频率计算模块则基于面部视频图像计算肌肉振动数据；情绪能量判定模块则根据计算出的数据判定该人的情绪能量状态；测评效果评价模块则基于情绪能量数据完成对该人心理测评过程的效果评价，并基于评价结果面向情绪诱发模块提供关于情绪诱发素材选取方面的相应建议。
Description
技术领域
本发明涉及心理测评领域，特别是涉及一种基于情绪能量感知的心理测评方法及装置。
背景技术
心理测评是依据一定的心理学理论，使用一定的操作程序，给人的能力、人格及心理健康等心理特性和行为确定出一种数量化的价值。在现代社会，人们要承受的各方面压力越来越大，遭遇的痛苦和挫折常常引发内心的抑郁和焦虑。心理学研究表明，抑郁者消极的、僵化、偏执的思维方式和习惯是导致抑郁的一个重要原因，而思维方式和习惯是可以通过心理训练来改善的。因此，心理测评在当今社会拥有广泛的应用价值和社会意义。
传统的心理测评过程主要是通过调查问卷的方式来进行的，即通过设计一系列问题列表，然后统计分析受试人员的问题回答情况，以此来实现对该受试人员心理测评的过程。然而，这种方式存在诸多缺陷，比如测评过程效率低下、数据真实性和准确性不高，以及缺乏客观统一的评价机制等。
近年来，随着智能化设备的发展，新一代心理测评系统应运而生。这种系统通常会引入特定的穿戴式设备，通过测量受试人员的生理反应信号(比如皮肤电、脑电等)来客观反应受试人员的心理状态和变化情况，以此实现心理测评过程。这种系统与传统的心理测评过程相比，在工作效率、数据准确性等方面存在较大的优势，因此成为当前主流的心理测评方式。然而，由于这种方式通常需要受试人员穿戴相应的生理信号采集设备，因此信号采集难度较大，同时还会不可避免的给受试人员带来一些不适感，降低了用户体验，因此实际应用场景受到一定限制。
发明内容
为了克服上述现有技术的不足，本发明在于提供一种基于情绪能量感知的心理测评方法及装置。与当前主流的穿戴式心理测评方法相比，本发明能够实现在非接触条件下的心理测评过程，从而能够适用更多应用场景，给受试人员带来更好的用户体验。
由于人体肌肉的微小振动与情感反射相联系，可以直接反映人的心理状态，因此本发明主要通过对人的面部及颈部的肌肉振动情况进行视频采集和分析，来实现对人的心理状态的评估，以此完成对受试人员心理状况的测评过程。
本发明所提供的基于情绪能量感知的心理测评方法及装置，其基本功能流程如附图1所示。
其中，心理测评素材库负责收集和保存用于心理测评过程中不同情绪诱发的素材，例如各种电影片段等。
首先，情绪诱发模块根据测评的特定需求，从上述心理测评素材库中选取相应的情绪诱发素材，提供给受试人员进行观看，以此实现对受试人员的情绪诱发过程；
与此同时，视频采集模块负责实时采集情绪诱发过程中受试人员的面部视频图像，并将该视频图像数据推送至生理振动频率计算模块；
生理振动频率计算模块则基于受试人员的面部视频图像数据计算该受试人员面部肌肉振动的频率数据，并将该数据推送至情绪能量判定模块；
情绪能量判定模块则根据上述频率数据判定出该受试人员的情绪状态，并录入情绪能量数据库；此时，若心理测评过程结束，则跳转至测评效果评价模块，否则，重复以上操作。
最终，测评效果评价模块基于情绪能量数据库中关于该受试人员心理测评过程中的情绪状态数据，完成对该受试人员心理测评过程的总体效果评价，并基于评价结果面向情绪诱发模块提供关于情绪诱发素材选取方面的针对性建议。
与现有技术相比，本发明的有益效果是：本发明提供的是一种基于情绪能量感知的非接触心理测评方法及装置，因此相对于传统的穿戴式心理测评方法相比，信号采集难度较低，使用简单方便，因此能够适用多种实际应用场景，同时能够给受试人员带来更好的用户体验。
附图说明
图1为该方法的具体功能流程图。
具体实施方式
下面结合附图对本发明进一步说明。
其中，心理测评素材库用于收集和保存用于心理测评过程中针对六种不同情绪的诱发素材，例如各种固定时长(例如120秒钟)的电影片段等。
首先，情绪诱发模块从心理测评素材库中调用不同的电影片段，并播放给受试人员观看，对受试人员进行高兴、淡定、愤怒、恐惧、悲伤、绝望共计六种不同情绪的诱发。
与此同时，视频采集模块则通过高清摄像头实时采集受试人员的视频图像数据，并将数据推送至生理振动频率计算模块。其中，为了保证生理振动频率计算模块的准确性，建议视频采集模块采用码率为25帧/秒的视频格式进行视频采集，且采集时长不少于60秒钟。
生理振动频率计算模块则负责对接收到的视频图像数据进行实时分析，从中对人脸进行定位，并逐帧检测分析该受试人员的面部肌肉振动情况，从中计算出生理振动频率参数值F，并将数据输出至情绪能量判定模块。其中，所述F由公式F＝∑x∑yFx，y/(x*y)计算得出，x、y表示视频图像中某个像素点的坐标位置信息，Fx，y表示该像素点在该视频图像片段中的振动频率均值，该值由公式
计算得出，n代表所述视频图像片段的总帧数，Δi代表该像素点在不同帧之间的差值。
情绪能量判定模块则根据生理振动频率计算模块推送的F值大小来判定该受试人员的情绪能量状态，并将该情绪能量状态录入情绪能量数据库。其中，F值同各种情绪能量状态的对应关系可参考下表所示。
| F值 | 情绪能量状态 |
| ≥300 | 高兴 |
| [220,300) | 淡定 |
| [150,220) | 愤怒 |
| [90,150) | 恐惧 |
| [40,90) | 悲伤 |
| <40 | 绝望 |
表1
此时，若心理测评过程结束，则跳转到测评效果评价模块，否则，重复以上过程。
最终，测评效果评价模块基于情绪能量数据库中关于该受试人员心理测评过程中的针对不同情绪诱发材料所采集到的情绪状态历史数据，完成对该受试人员心理测评过程的总体效果评价过程，同时基于上述评价结果，面向情绪诱发模块提供针对该受试人员心理测评过程中关于情绪诱发素材选取方面的针对性建议。例如，若该受试人员对于恐惧类情绪诱发效果不够敏感时，在对其进行下一次恐惧类情绪诱发时，可适当选取恐怖观感程度更明显的情绪诱发素材进行情绪诱发。本发明对上述效果评价所使用的具体模型不作具体限定。
Claims (7)
1.一种基于情绪能量感知的心理测评方法及装置，其特征在于：能够基于对受试人员的非接触式情绪能量感知，实现对该受试人员的非接触式心理测评过程，具体包括情绪诱发、视频采集、生理振动频率计算、情绪能量判定、测评效果评价共计五个模块。
2.根据权利要求1所述的方法，其特征在于：所述情绪诱发模块负责基于特定的心理测评素材库，实现在测评过程中受试人员不同情绪的诱发；所述不同情绪包含高兴、淡定、愤怒、恐惧、悲伤、绝望共计六种情绪；所述心理测评素材库含有分别用于诱发上述六种不同情绪的固定时长影音片段。
3.根据权利要求1所述的方法，其特征在于：所述视频采集模块负责实时采集所述情绪诱发模块执行过程中受试人员的面部视频图像信息；其中，所述面部视频图像时长不少于60秒钟，拍摄帧率为25帧/秒。
4.根据权利要求1所述的方法，其特征在于：所述生理振动频率计算模块负责基于权利要求3所述面部视频图像，计算该受试人员面部肌肉的振动频率均值F。
5.根据权利要求4所述的方法，其特征在于：所述振动频率均值由公式F＝∑x∑yFx，y/(x*y)计算得出；其中，所述x、y表示视频图像中某像素点的坐标位置信息，所述Fx，y表示该像素点在该视频图像片段中的振动频率均值且由公式
计算得出，其中n代表所述视频图像片段的总帧数，Δi代表该像素点在不同帧之间的差值。
6.根据权利要求1所述的方法，其特征在于：所述情绪能量判定模块根据权利要求4所述F值的大小，并基于F值与不同情绪之间的映射关系来判定该受试人员的情绪能量状态，并录入情绪能量数据库。
7.根据权利要求1所述的方法，其特征在于：所述测评效果评价模块基于情绪能量数据库中关于该受试人员在心理测评过程中的情绪状态历史数据完成对该受试人员心理测评过程的总体效果评价，并基于评价结果面向情绪诱发模块输出关于情绪诱发素材选取方面的针对性建议。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811246359.1A CN111104815A (zh) | 2018-10-25 | 2018-10-25 | 一种基于情绪能量感知的心理测评方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811246359.1A CN111104815A (zh) | 2018-10-25 | 2018-10-25 | 一种基于情绪能量感知的心理测评方法及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111104815A true CN111104815A (zh) | 2020-05-05 |
Family
ID=70417820
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811246359.1A Pending CN111104815A (zh) | 2018-10-25 | 2018-10-25 | 一种基于情绪能量感知的心理测评方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111104815A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112507959A (zh) * | 2020-12-21 | 2021-03-16 | 中国科学院心理研究所 | 一种基于视频中个体面部分析的情绪感知模型的建立方法 |
| CN112932485A (zh) * | 2021-01-03 | 2021-06-11 | 金纪高科智能科技(北京)有限公司 | 一种非接触式谈话置信率测试系统及方法 |
| CN116311510A (zh) * | 2023-03-08 | 2023-06-23 | 广东兆邦智能科技股份有限公司 | 一种基于图像采集的情绪检测方法及系统 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104055529A (zh) * | 2014-06-19 | 2014-09-24 | 西南大学 | 一种计算情感心电信号标度指数的方法 |
| CN106618608A (zh) * | 2016-09-29 | 2017-05-10 | 金湘范 | 基于视频精神生理参数监测危险人物装置及方法 |
| CN107080546A (zh) * | 2017-04-18 | 2017-08-22 | 安徽大学 | 基于脑电图的青少年环境心理的情绪感知系统及方法、刺激样本选择方法 |
| CN107212896A (zh) * | 2017-04-05 | 2017-09-29 | 天津大学 | 一种情绪稳定性综合评价系统及信息处理方法 |
| CN107766898A (zh) * | 2017-12-08 | 2018-03-06 | 南京邮电大学盐城大数据研究院有限公司 | 基于svm的三分类情绪概率判断方法 |
| CN107809951A (zh) * | 2014-04-24 | 2018-03-16 | 心灵之眼株式会社 | 利用基于视频检测出生理信号的对扭曲的心理生理探测(测谎)方法和装置 |
| CN207367229U (zh) * | 2017-08-25 | 2018-05-15 | 太原康祺科技发展有限公司 | 应用于特殊工作岗位前检测的潜在情绪智能分析系统装置 |
| CN108416542A (zh) * | 2018-05-11 | 2018-08-17 | 新华网股份有限公司 | 基于生理传感技术的体验度评估系统及方法和计算机可读存储介质 |
-
2018
- 2018-10-25 CN CN201811246359.1A patent/CN111104815A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107809951A (zh) * | 2014-04-24 | 2018-03-16 | 心灵之眼株式会社 | 利用基于视频检测出生理信号的对扭曲的心理生理探测(测谎)方法和装置 |
| CN104055529A (zh) * | 2014-06-19 | 2014-09-24 | 西南大学 | 一种计算情感心电信号标度指数的方法 |
| CN106618608A (zh) * | 2016-09-29 | 2017-05-10 | 金湘范 | 基于视频精神生理参数监测危险人物装置及方法 |
| CN107212896A (zh) * | 2017-04-05 | 2017-09-29 | 天津大学 | 一种情绪稳定性综合评价系统及信息处理方法 |
| CN107080546A (zh) * | 2017-04-18 | 2017-08-22 | 安徽大学 | 基于脑电图的青少年环境心理的情绪感知系统及方法、刺激样本选择方法 |
| CN207367229U (zh) * | 2017-08-25 | 2018-05-15 | 太原康祺科技发展有限公司 | 应用于特殊工作岗位前检测的潜在情绪智能分析系统装置 |
| CN107766898A (zh) * | 2017-12-08 | 2018-03-06 | 南京邮电大学盐城大数据研究院有限公司 | 基于svm的三分类情绪概率判断方法 |
| CN108416542A (zh) * | 2018-05-11 | 2018-08-17 | 新华网股份有限公司 | 基于生理传感技术的体验度评估系统及方法和计算机可读存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 太原康祺科技发展有限公司: "基于生物学原理对影像中人物潜在情绪情感分析识别检测系统" * |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112507959A (zh) * | 2020-12-21 | 2021-03-16 | 中国科学院心理研究所 | 一种基于视频中个体面部分析的情绪感知模型的建立方法 |
| CN112932485A (zh) * | 2021-01-03 | 2021-06-11 | 金纪高科智能科技(北京)有限公司 | 一种非接触式谈话置信率测试系统及方法 |
| CN116311510A (zh) * | 2023-03-08 | 2023-06-23 | 广东兆邦智能科技股份有限公司 | 一种基于图像采集的情绪检测方法及系统 |
| CN116311510B (zh) * | 2023-03-08 | 2024-05-31 | 广东兆邦智能科技股份有限公司 | 一种基于图像采集的情绪检测方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106956271B (zh) | 预测情感状态的方法和机器人 | |
| CN109815795A (zh) | 基于人脸监测的课堂学生状态分析方法及装置 | |
| WO2016148199A1 (ja) | デュアルタスク遂行能力評価方法、及びデュアルタスク遂行能力評価システム | |
| CN111104815A (zh) | 一种基于情绪能量感知的心理测评方法及装置 | |
| CN113741702B (zh) | 基于情绪监测的认知障碍人机交互方法及系统 | |
| Gu et al. | Wearable social sensing: Content-based processing methodology and implementation | |
| WO2020128999A1 (en) | System and method for reading and analysing behaviour including verbal, body language and facial expressions in order to determine a person's congruence | |
| CN111144359B (zh) | 一种展品评价装置和方法及展品推送方法 | |
| US11594149B1 (en) | Speech fluency evaluation and feedback | |
| US20200214630A1 (en) | Psychological Pressure Evaluation Method and Device | |
| CN107193378A (zh) | 基于脑电波机器学习的情感判定装置及方法 | |
| CN113764099A (zh) | 基于人工智能的心理状态分析方法、装置、设备及介质 | |
| Li et al. | Multi-modal emotion recognition based on deep learning of EEG and audio signals | |
| CN118248176A (zh) | 一种基于助听器的老人情绪识别方法及系统 | |
| CN112800908B (zh) | 一种基于视频中个体步态分析的焦虑感知模型的建立方法 | |
| Majumder et al. | A smart cyber-human system to support mental well-being through social engagement | |
| CN116344042B (zh) | 基于多模态分析的认知储备干预提升方法及系统 | |
| Bhatia et al. | A multimodal system to characterise melancholia: cascaded bag of words approach | |
| CN113855021B (zh) | 抑郁倾向评估方法及装置 | |
| CN113409822B (zh) | 对象状态的确定方法、装置、存储介质及电子装置 | |
| CN115497621A (zh) | 一种老年人认知状况测评系统 | |
| CN109697413B (zh) | 基于头部姿态的人格分析方法、系统和存储介质 | |
| Lan et al. | Stable feature selection for EEG-based emotion recognition | |
| CN111968725A (zh) | 基于眼动数据的教师情绪觉察训练系统及方法 | |
| US10079074B1 (en) | System for monitoring disease progression |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20200505 |