JP7323248B2 - ストレス判定装置、ストレス判定方法、及びプログラム - Google Patents
ストレス判定装置、ストレス判定方法、及びプログラム Download PDFInfo
- Publication number
- JP7323248B2 JP7323248B2 JP2023522536A JP2023522536A JP7323248B2 JP 7323248 B2 JP7323248 B2 JP 7323248B2 JP 2023522536 A JP2023522536 A JP 2023522536A JP 2023522536 A JP2023522536 A JP 2023522536A JP 7323248 B2 JP7323248 B2 JP 7323248B2
- Authority
- JP
- Japan
- Prior art keywords
- subject
- micro
- stress
- expressions
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Hospice & Palliative Care (AREA)
- Pathology (AREA)
- Developmental Disabilities (AREA)
- Psychiatry (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Physics & Mathematics (AREA)
- Child & Adolescent Psychology (AREA)
- Biophysics (AREA)
- Educational Technology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Description
「嫌悪」の微表情は、鼻にしわを寄せる動作である。
「恐怖」の微表情は、両眉を上げる動作と、両眉を中央に引き寄せる動作と、目を見開く動作と、まぶたに力を入れる動作と、口角を横に引く動作と、の組み合わせである。
「喜び」の微表情は、頬を上げる動作と、口角を上げる動作と、口角のみを上げる動作と、の組み合わせである。
「悲しみ」の微表情は、眉の内側を上げる動作と、両眉を中央に引き寄せる動作と、口角を下げる動作と、下唇を上げる動作と、の組み合わせである。
「驚き」の微表情は、両眉を上げる動作と、目を見開く動作と、口を開ける動作と、の組み合わせである。
次に、制御部14は、測定した三つの変化期間毎に、所定の基準範囲と比較して、被験者の表情が変化する速度(変化速度)の遅速を判別する。具体的に、制御部14は、変化期間が所定の基準範囲よりも長い場合、変化速度が「遅い」と判別し、所定の基準範囲内である場合、「通常」と判別し、所定の基準範囲よりも短い場合、「速い」と判別する。
ここで、主な被験者は、労働年齢の成人であることから、例えば、職業性ストレス簡易調査票により平均的なストレスレベルと判定される被験者から変化時間の平均値±標準偏差を取得し、これを所定の基準範囲とすればよい。
そして、制御部14は、例えば、「喜び」への変化速度が速く、「怒り」への変化速度が遅い場合、被験者に「喜び」の表情が早く出現し、遅くまで残って中々消失していないことから、被験者の微表情として「喜び」を検出する。
一方、制御部14は、検出した微表情が「怒り」、「悲しみ」、「嫌悪」、及び「恐怖」のいずれかである場合、微表情のタイプを“Negative”に分類する。
他方、制御部14は、検出した微表情が「驚き」である場合、微表情のタイプを“Other”に分類する。
例えば、制御部14は、“Positive”に分類される「喜び」の微表情の割合が81%~100%である場合、被験者のストレスを「低い」と判定する。
また、制御部14は、“Positive”に分類される「喜び」の微表情の割合が61%~80%である場合、被験者のストレスを「やや低い」と判定する。
さらに、制御部14は、“Positive”に分類される「喜び」の微表情の割合が40%~60%である場合、被験者のストレスを「標準」と判定する。
また、制御部14は、“Positive”に分類される「喜び」の微表情の割合が20%~41%である場合、被験者のストレスを「やや高い」と判定する。
そして、制御部14は、“Positive”に分類される「喜び」の微表情の割合が0%~19%である場合、被験者のストレスを「高い」と判定する。
また、制御部14は、検出した微表情が「悲しみ」である場合、微表情のタイプを“Negative2”に分類する。
さらに、制御部14は、検出した微表情が「嫌悪」である場合、鼻以外の顔の動作から、「怒り」寄りであるか「悲しみ」寄りであるかを判別し、「怒り」寄りであれば、微表情のタイプを“Negative1”に分類する一方、「悲しみ」寄りであれば、“Negative2”に分類する。
また、制御部14は、検出した微表情が「恐怖」である場合、その継続期間が所定期間以上であるか否かにより、瞬間的であるか継続的であるかを判別し、継続期間が所定期間未満であれば瞬間的であると判別し、微表情のタイプを“Other”に分類する。一方、制御部14は、継続期間が所定期間以上であれば継続的であると判別し、鼻以外の顔の動作から、「怒り」寄りであるか「悲しみ」寄りであるかを判別する。そして、制御部14は、「怒り」寄りであれば、微表情のタイプを“Negative1”に分類する一方、「悲しみ」寄りであれば、“Negative2”に分類する。
また、制御部14は、“Positive”に分類される微表情の割合が、“Negative1”及び“Negative2”のいずれかに分類される微表情の割合よりも高い場合、被験者の感情を“ハッピー”であるものと推定する。
さらに、制御部14は、“Negative1”に分類される微表情の割合が、“Positive”及び“Negative2”のいずれかに分類される微表情の割合よりも高い場合、被験者の感情を“イライラ”しているものと推定する。
そして、制御部14は、“Negative2”に分類される微表情の割合が、“Positive”及び“Negative1”のいずれかに分類される微表情の割合よりも高い場合、被験者の感情を“落ち込み”しているものと推定する。
また、制御部14は、被験者の感情が“ニュートラル”である場合、被験者のストレスを「標準」と判定すればよい。
そして、制御部14は、被験者の感情が“イライラ”若しくは“落ち込み”である場合、被験者のストレスを「やや高い」若しくは「高い」と判定すればよい。
11 記憶部
12 タッチパネル
13 撮像部
14 制御部
2 ガイダンステーブル
Claims (6)
- 被験者の顔を撮像する撮像部(13)と、
前記撮像部(13)で撮像して得られた前記被験者の顔の動画像を構成するフレーム画像毎に、該被験者の顔に表れる微表情を検出し、該微表情が検出された複数の該フレーム画像における、各種微表情のそれぞれが検出された該フレーム画像の数の割合に基づいて、該被験者のストレスを判定する制御部(14)と、
を備えるストレス判定装置(1)。 - 前記制御部(14)は、検出した微表情をタイプ別に分類し、該微表情が検出された複数の該フレーム画像における、該タイプ別に分類した微表情のそれぞれが検出された前記フレーム画像の数の割合に基づいて、該被験者のストレスを判定する、
ことを特徴とする請求項1に記載のストレス判定装置(1)。 - 前記制御部(14)は、前記微表情が検出された複数の該フレーム画像における、各種微表情のそれぞれが検出された前記フレーム画像の数の割合に基づいて、該被験者の感情を推定し、該推定した該被験者の感情から、該被験者のストレスを判定する、
ことを特徴とする請求項1に記載のストレス判定装置(1)。 - 前記制御部(14)は、検出した微表情をタイプ別に分類し、該微表情が検出された複数の該フレーム画像における、該タイプ別に分類した微表情のそれぞれが検出された前記フレーム画像の数の割合に基づいて、該被験者の感情を推定する、
ことを特徴とする請求項3に記載のストレス判定装置(1)。 - 撮像部(13)が、被験者の顔を撮像し、
制御部(14)が、前記撮像部(13)で撮像して得られた前記被験者の顔の動画像を構成するフレーム画像毎に、該被験者の顔に表れる微表情を検出し、
該制御部(14)が、該微表情が検出された複数の該フレーム画像における、各種微表情のそれぞれが検出された該フレーム画像の数の割合に基づいて、該被験者のストレスを判定する、
ことを特徴とするストレス判定方法。 - コンピュータに、
被験者の顔を撮像する手順と、
該撮像して得られた前記被験者の顔の動画像を構成するフレーム画像毎に、該被験者の顔に表れる微表情を検出する手順と、
該微表情が検出された複数の該フレーム画像における、各種微表情のそれぞれが検出された該フレーム画像の数の割合に基づいて、該被験者のストレスを判定する手順と、
を実行させるためのプログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2021/027425 WO2023002636A1 (ja) | 2021-07-21 | 2021-07-21 | ストレス判定装置、ストレス判定方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2023002636A1 JPWO2023002636A1 (ja) | 2023-01-26 |
JP7323248B2 true JP7323248B2 (ja) | 2023-08-08 |
Family
ID=84979043
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023522536A Active JP7323248B2 (ja) | 2021-07-21 | 2021-07-21 | ストレス判定装置、ストレス判定方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP7323248B2 (ja) |
CN (1) | CN117915831A (ja) |
WO (1) | WO2023002636A1 (ja) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103258204A (zh) | 2012-02-21 | 2013-08-21 | 中国科学院心理研究所 | 一种基于Gabor和EOH特征的自动微表情识别方法 |
JP2016149063A (ja) | 2015-02-13 | 2016-08-18 | オムロン株式会社 | 感情推定装置及び感情推定方法 |
JP2018126209A (ja) | 2017-02-06 | 2018-08-16 | ソフトバンクロボティクス株式会社 | 制御装置、制御方法及び制御プログラム |
CN109784185A (zh) | 2018-12-18 | 2019-05-21 | 深圳壹账通智能科技有限公司 | 基于微表情识别的客户餐饮评价自动获取方法及装置 |
CN109830280A (zh) | 2018-12-18 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 心理辅助分析方法、装置、计算机设备和存储介质 |
CN110110574A (zh) | 2018-01-30 | 2019-08-09 | 普天信息技术有限公司 | 心理压力参数的获取方法和标注方法 |
CN111353354A (zh) | 2018-12-24 | 2020-06-30 | 杭州海康威视数字技术股份有限公司 | 一种人体应激性信息识别方法、装置及电子设备 |
US20200265396A1 (en) | 2019-02-14 | 2020-08-20 | Toshiba Global Commerce Solutions Holdings Corporation | Systems and methods for modifying customer attention levels at purchase transaction terminals based on expressions |
CN111967363A (zh) | 2020-08-10 | 2020-11-20 | 河海大学 | 一种基于微表情识别和眼动追踪的对情绪预测的方法 |
JP2021037795A (ja) | 2019-08-30 | 2021-03-11 | 株式会社デンソー | 車両制御装置 |
-
2021
- 2021-07-21 JP JP2023522536A patent/JP7323248B2/ja active Active
- 2021-07-21 CN CN202180102049.6A patent/CN117915831A/zh active Pending
- 2021-07-21 WO PCT/JP2021/027425 patent/WO2023002636A1/ja active Application Filing
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103258204A (zh) | 2012-02-21 | 2013-08-21 | 中国科学院心理研究所 | 一种基于Gabor和EOH特征的自动微表情识别方法 |
JP2016149063A (ja) | 2015-02-13 | 2016-08-18 | オムロン株式会社 | 感情推定装置及び感情推定方法 |
JP2018126209A (ja) | 2017-02-06 | 2018-08-16 | ソフトバンクロボティクス株式会社 | 制御装置、制御方法及び制御プログラム |
CN110110574A (zh) | 2018-01-30 | 2019-08-09 | 普天信息技术有限公司 | 心理压力参数的获取方法和标注方法 |
CN109784185A (zh) | 2018-12-18 | 2019-05-21 | 深圳壹账通智能科技有限公司 | 基于微表情识别的客户餐饮评价自动获取方法及装置 |
CN109830280A (zh) | 2018-12-18 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 心理辅助分析方法、装置、计算机设备和存储介质 |
CN111353354A (zh) | 2018-12-24 | 2020-06-30 | 杭州海康威视数字技术股份有限公司 | 一种人体应激性信息识别方法、装置及电子设备 |
US20200265396A1 (en) | 2019-02-14 | 2020-08-20 | Toshiba Global Commerce Solutions Holdings Corporation | Systems and methods for modifying customer attention levels at purchase transaction terminals based on expressions |
JP2021037795A (ja) | 2019-08-30 | 2021-03-11 | 株式会社デンソー | 車両制御装置 |
CN111967363A (zh) | 2020-08-10 | 2020-11-20 | 河海大学 | 一种基于微表情识别和眼动追踪的对情绪预测的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN117915831A (zh) | 2024-04-19 |
WO2023002636A1 (ja) | 2023-01-26 |
JPWO2023002636A1 (ja) | 2023-01-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Bilakhia et al. | The MAHNOB Mimicry Database: A database of naturalistic human interactions | |
CN107251096B (zh) | 图像捕获装置和方法 | |
US6677969B1 (en) | Instruction recognition system having gesture recognition function | |
US10185869B2 (en) | Filter and shutter based on image emotion content | |
JP2014504460A (ja) | ウェブ対応アプリケーションに対する感情データの測定 | |
US20220383389A1 (en) | System and method for generating a product recommendation in a virtual try-on session | |
WO2017115453A1 (ja) | メイクアップシミュレーション支援装置、メイクアップシミュレーション支援方法およびメイクアップシミュレーション支援プログラム | |
US11810136B2 (en) | Systems and methods for assessing implicit associations | |
US11935140B2 (en) | Initiating communication between first and second users | |
JP7278972B2 (ja) | 表情解析技術を用いた商品に対するモニタの反応を評価するための情報処理装置、情報処理システム、情報処理方法、及び、プログラム | |
JP7323248B2 (ja) | ストレス判定装置、ストレス判定方法、及びプログラム | |
KR20200080577A (ko) | 이미지 편집 애플리케이션 제공 장치 및 상기 장치에 의해 수행되는 이미지 내 얼굴 변형 방법 | |
JP6855737B2 (ja) | 情報処理装置、評価システムおよびプログラム | |
JP7442838B2 (ja) | 感情推定装置、感情推定方法、及びプログラム | |
CN115035042A (zh) | 动作迁移模型的评价方法、装置、电子设备及存储介质 | |
KR20240018874A (ko) | 이미지 데이터로부터 민감 정보를 제거하기 위한 방법 및 전자 장치 | |
JP2020086559A (ja) | 感情分析システム | |
Asada et al. | A System for Posting on an SNS an Author Portrait Selected using Facial Expression Analysis while Writing a Message. | |
JP7354813B2 (ja) | 検出方法、通知方法、検出プログラムおよび通知プログラム | |
Nishiyama et al. | Design of a cognitive user-support system for skin progress analysis using a smart phone | |
US20240362900A1 (en) | Devices, systems, and methods for gamification of video annotation | |
WO2023053784A1 (ja) | 顔タイプ診断装置、顔タイプ診断方法及びプログラム | |
EP4239600A1 (en) | Systems and methods for contactless estimation of ring size | |
WO2024194211A1 (en) | A method, a computer program and an apparatus for adjusting a service consumed by a human, a robot, a vehicle, an entertainment system, and a smart home system | |
CN116758246A (zh) | 皮肤特性数据可视化装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230412 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20230412 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230502 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230615 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230718 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230720 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7323248 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |