JP6709868B1 - 解析方法、解析システム及び解析プログラム - Google Patents
解析方法、解析システム及び解析プログラム Download PDFInfo
- Publication number
- JP6709868B1 JP6709868B1 JP2019040665A JP2019040665A JP6709868B1 JP 6709868 B1 JP6709868 B1 JP 6709868B1 JP 2019040665 A JP2019040665 A JP 2019040665A JP 2019040665 A JP2019040665 A JP 2019040665A JP 6709868 B1 JP6709868 B1 JP 6709868B1
- Authority
- JP
- Japan
- Prior art keywords
- evaluation value
- muscle
- facial
- analysis
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Image Analysis (AREA)
Abstract
Description
前記動画を取得する動画取得ステップと、
前記動画を用いて、顔運動評価値を取得する解析ステップと、
前記解析ステップにおいて取得された前記顔運動評価値から、予め記憶された前記顔運動評価値と顔面および周囲を含む頭頸部構造の評価値との間の相関関係に基づいて、前記評価値を推定する評価ステップと、を備えることを特徴とする。
このような構成とすることで、対象者の動画を撮影するだけで顔面を中心とする頭頸部の筋肉の評価をすることができる。
前記評価ステップにおいて、前記筋肉量評価値を推定することを特徴とする。
このような構成とすることで、動画から頭頸部の筋肉量に関する評価を推定することができる。
前記評価ステップにおいて、前記筋肉質評価値を推定することを特徴とする。
このような構成とすることで、動画から頭頸部の筋肉の質に関する評価を推定することができる。
前記解析ステップにおいて、前記特徴点の運動評価値を取得することを特徴とする。
このような構成とすることで、動画中の特徴点を追跡することにより、頭頸部構造を評価することができる。
このような構成とすることで、移動量によって特徴点の運動を単純化して頭頸部構造の評価を行うことができるため、計算量を減らすことができる。
このような構成とすることで、表情変化によって大きく運動し、その運動の差を評価しやすい点を解析に用いることができるため、より正確に頭頸部構造の評価を行えるようになる効果が期待できる。
評価の対象となる頭頸部構造は、大頬骨筋又は小頬骨筋を含むことを特徴とする。
このような構成とすることで、本発明者らが見出した、笑顔を作ったときの頬部又は口角の点の移動量等の運動評価値と、大頬骨筋又は小頬骨筋の厚みや脂肪浸潤等の筋肉評価値と、の間の相関関係に基づいて、正確に頭頸部構造の評価値を推定することができる。
前記解析ステップにおいて、前記表情評価値を取得することを特徴とする。
このような構成とすることで、表情評価値と頭頸部構造の評価値との相関関係に基づいて、表情評価値から頭頸部構造の評価値を推定することができる。これにより、表情の大きさから頭頸部構造を評価できるため、より簡単に頭頸部構造の評価を行うことができる。
前記動画を取得する動画取得手段と、
前記動画を用いて、顔運動評価値を取得する解析手段と、
前記解析手段が取得した前記顔運動評価値から、予め記憶された前記顔運動評価値と顔面および周囲を含む頭頸部構造の評価値との間の相関関係に基づいて、前記評価値を推定する評価手段と、を備えることを特徴とする。
コンピュータを、前記動画を取得する動画取得手段と、
前記動画を用いて、顔運動評価値を取得する解析手段と、
前記解析手段が取得した前記顔運動評価値から、予め記憶された前記顔運動評価値と顔面を中心とする頭頸部構造の評価値との間の相関関係に基づいて、前記評価値を推定する評価手段と、として機能させることを特徴とする。
以下、本発明の一実施形態について、図面を用いて詳細に説明する。本実施形態においては、表情変化として笑顔を作る動作の過程を撮影した動画を用いて、大頬骨筋及び小頬骨筋の筋肉量及び質について評価を行う場合について例示する。なお、以下に示す実施形態は本発明の一例であり、本発明を以下の実施形態に限定するものではなく、様々な構成を採用することもできる。
(1)顔運動評価値測定
40代の女性10人を対象として、怒り、笑顔、驚き、嫌悪、悲しみ、恐れの各表情を順番に表現し、最後に大きく笑顔を表現する様子を撮影し、笑顔を作る動作について、AU6及びAU12の移動量を解析した。動画の解析にはFACSの技術を利用し、出力されるAU6及びAU12の運動の程度表す値を、本発明における特徴点の移動量として用いた。
(2−1)筋肉量評価値測定
(1)で顔運動評価値を測定した各被験者の顔のCTスキャンを行った。各被験者の顔のCT画像を2名の医師が確認し、大頬骨筋及び小頬骨筋のそれぞれについて、厚みを測定した。これを各被験者に対して3回繰り返し、2名の医師×3回分の測定の平均値を各被験者の測定結果とした。厚みの測定は、大頬骨筋起始部(眼輪筋外側の端部)、大頬骨筋中央部、小頬骨筋中央部について、顔の左右それぞれに対し行われた。このようにして測定された筋肉の厚みを、本発明における筋肉量評価値として用いた。
(1)で顔運動評価値を測定した各被験者の顔のMRI画像を撮影した。各被験者の顔のMRI画像を2名の医師が確認し、大頬骨筋及び小頬骨筋のそれぞれについて、脂肪浸潤の度合いを4段階で評価した。これを各被験者に対して3回繰り返し、2名の医師×3回分の評価の平均値を各被験者の評価値とした。脂肪浸潤の評価は、大頬骨筋起始部(眼輪筋外側の端部)、大頬骨筋中央部、小頬骨筋中央部について、顔の左右それぞれに対し行われた。このようにして決定された脂肪浸潤の評価値を、本発明における筋肉質評価値として用いた。
各被験者が笑顔を作った時の頬部について2名の肌評価専門家が触診を行い、硬さについて1〜8までの0.5刻みで15段階評価した。2名の肌評価専門家の平均値を各被験者の評価値とした。更に、触診の評価値をもとに、被験者を評価値が良好なポジティブ群(P群)と評価値が良好でないネガティブ群(N群)とに分けた。
各種の測定結果について、相関分析を行ったところ、以下の項目において、相関係数R0.6以上、p値0.1未満の強い相関が認められた。
AU6移動量−触診評価値:R=0.69、p=0.028
AU6移動量−大頬骨筋起始部(左右平均):R=0.74、p=0.014
AU6移動量−大頬骨筋中央部(左右平均):R=0.61、p=0.062
AU6移動量−小頬骨筋中央部(左右平均):R=0.66、p=0.038
AU12移動量−大頬骨筋起始部(左右平均):R=0.65、p=0.041
AU12移動量−大頬骨筋中央部(左右平均):R=0.60、p=0.065
AU12移動量−小頬骨筋中央部(左右平均):R=0.68、p=0.030
大頬骨筋起始部(左右平均)−大頬骨筋中央部(左右平均):R=0.96、p=0.00014
大頬骨筋中央部(左右平均)−小頬骨筋中央部(左右平均):R=0.77、p=0.0097
大頬骨筋起始部(左右平均)−小頬骨筋中央部(左右平均):R=0.73、p=0.016
P群、N群のそれぞれについて脂肪浸潤の評価値を観察すると、大頬骨筋起始部、大頬骨筋中央部、小頬骨筋中央部のそれぞれについて、N群に比べてP群の方が脂肪浸潤の評価値がよい傾向が確認された。
11 動画取得手段
12 解析手段
13 評価手段
14 記憶手段
2 端末装置
21 撮像手段
22 入力手段
23 出力手段
Claims (9)
- 頬又は口角を引き上げる対象者の顔運動を撮影した動画を用いて、当該対象者の表情筋の量又は質を評価する為の解析方法であって、
前記動画を取得する動画取得ステップと、
前記動画を用いて、頬又は口角の運動に関する顔運動評価値を取得する解析ステップと、を備え、
前記解析ステップにおいて取得された前記顔運動評価値から、予め記憶された前記顔運動評価値と大頬骨筋又は小頬骨筋の量に関する評価を表す筋肉量評価値との間の相関関係に基づいて、前記対象者の前記筋肉量評価値を推定するステップと、
前記解析ステップにおいて取得された前記顔運動評価値から、予め記憶された前記顔運動評価値と大頬骨筋又は小頬骨筋の質に関する評価を表す筋肉質評価値との間の相関関係に基づいて、前記対象者の前記筋肉質評価値を推定するステップと、のうち少なくとも何れかを更に備えることを特徴とする、解析方法。 - 前記筋肉量評価値を推定するステップでは、前記顔運動評価値と表情筋の厚さを示す指標との間の相関関係に基づいて、前記解析ステップにおいて取得された前記顔運動評価値から、前記対象者の表情筋の厚さを示す指標を、前記筋肉量評価値として推定する、請求項1に記載の解析方法。
- 前記筋肉質評価値を推定するステップでは、前記顔運動評価値と表情筋の脂肪浸潤の程度を示す指標との間の相関関係に基づいて、前記解析ステップにおいて取得された前記顔運動評価値から、前記対象者の表情筋の脂肪浸潤の程度を示す指標を、前記筋肉質評価値として推定する、請求項1又は請求項2に記載の解析方法。
- 前記顔運動評価値は、前記顔運動による顔の特徴点の運動評価値を含み、
前記解析ステップにおいて、前記特徴点の運動評価値を取得することを特徴とする、請求項1〜3の何れかに記載の解析方法。 - 前記特徴点の運動評価値は、前記顔運動の前後における前記特徴点の移動量を含むことを特徴とする、請求項4に記載の解析方法。
- 前記特徴点は、頬部又は口角の点を含むことを特徴とする、請求項4又は請求項5に記載の解析方法。
- 前記顔運動は、笑顔を作る動作であることを特徴とする、請求項6に記載の解析方法。
- 頬又は口角を引き上げる対象者の顔運動を撮影した動画を用いて、当該対象者の表情筋の量又は質を評価する為の解析システムであって、
前記動画を取得する動画取得手段と、
前記動画を用いて、頬又は口角の運動に関する顔運動評価値を取得する解析手段と、を備え、
前記解析手段が取得した前記顔運動評価値から、予め記憶された前記顔運動評価値と大頬骨筋又は小頬骨筋の量に関する評価を表す筋肉量評価値との間の相関関係に基づいて、前記対象者の前記筋肉量評価値を推定する手段と、
前記解析手段が取得した前記顔運動評価値から、予め記憶された前記顔運動評価値と大頬骨筋又は小頬骨筋の質に関する評価を表す筋肉質評価値との間の相関関係に基づいて、前記対象者の前記筋肉質評価値を推定する手段と、のうち少なくとも何れかを更に備えることを特徴とする、解析システム。 - 頬又は口角を引き上げる対象者の顔運動を撮影した動画を用いて、当該対象者の表情筋の量又は質を評価する為の解析プログラムであって、
コンピュータを、前記動画を取得する動画取得手段と、
前記動画を用いて、頬又は口角の運動に関する顔運動評価値を取得する解析手段と、として機能させ、
前記解析手段が取得した前記顔運動評価値から、予め記憶された前記顔運動評価値と大頬骨筋又は小頬骨筋の量に関する評価を表す筋肉量評価値との間の相関関係に基づいて、前記対象者の前記筋肉量評価値を推定する手段と、
前記解析手段が取得した前記顔運動評価値から、予め記憶された前記顔運動評価値と大頬骨筋又は小頬骨筋の質に関する評価を表す筋肉質評価値との間の相関関係に基づいて、前記対象者の前記筋肉質評価値を推定する手段と、のうち少なくとも何れかとして、コンピュータを更に機能させることを特徴とする、解析プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019040665A JP6709868B1 (ja) | 2019-03-06 | 2019-03-06 | 解析方法、解析システム及び解析プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019040665A JP6709868B1 (ja) | 2019-03-06 | 2019-03-06 | 解析方法、解析システム及び解析プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6709868B1 true JP6709868B1 (ja) | 2020-06-17 |
JP2020144597A JP2020144597A (ja) | 2020-09-10 |
Family
ID=71079332
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019040665A Active JP6709868B1 (ja) | 2019-03-06 | 2019-03-06 | 解析方法、解析システム及び解析プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6709868B1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022027591A (ja) * | 2020-07-29 | 2022-02-10 | 浩行 喜屋武 | オンラインショー演出システム、笑い解析装置および笑い解析方法 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111951241B (zh) * | 2020-08-06 | 2023-07-18 | 暨南大学 | 一种水生动物运动过程中肌肉形变的测定与显示方法 |
-
2019
- 2019-03-06 JP JP2019040665A patent/JP6709868B1/ja active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022027591A (ja) * | 2020-07-29 | 2022-02-10 | 浩行 喜屋武 | オンラインショー演出システム、笑い解析装置および笑い解析方法 |
JP7129724B2 (ja) | 2020-07-29 | 2022-09-02 | 浩行 喜屋武 | オンラインショー演出システムおよびそのプログラム、並びに笑い解析装置、笑い解析方法およびそのプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2020144597A (ja) | 2020-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7452016B2 (ja) | 学習データ生成プログラム、及び学習データ生成方法 | |
CN110599421B (zh) | 模型训练方法、视频模糊帧转换方法、设备及存储介质 | |
CN105701331A (zh) | 计算机辅助诊断设备和计算机辅助诊断方法 | |
WO2021068781A1 (zh) | 一种疲劳状态识别方法、装置和设备 | |
JP6709868B1 (ja) | 解析方法、解析システム及び解析プログラム | |
JP2019056957A (ja) | 情報処理装置、情報処理方法、コンピュータプログラム、及び記憶媒体 | |
Speth et al. | Unifying frame rate and temporal dilations for improved remote pulse detection | |
Gaber et al. | Automated grading of facial paralysis using the Kinect v2: a proof of concept study | |
KR20200116278A (ko) | 치과 영상으로부터 피검체의 성별 및 연령을 판정하는 방법 및 이를 이용한 장치 | |
JP6579353B1 (ja) | 情報処理装置、情報処理方法、寸法データ算出装置、及び製品製造装置 | |
US20230046705A1 (en) | Storage medium, determination device, and determination method | |
JP5276454B2 (ja) | 表情測定方法、表情測定プログラムならびに表情測定装置 | |
JP2020035122A (ja) | 顔運動量測定装置 | |
CN114241565A (zh) | 一种面部表情、目标对象状态分析方法、装置及设备 | |
JP7452015B2 (ja) | 判定プログラム、判定方法、判定装置 | |
US20230128766A1 (en) | Multimodal contactless vital sign monitoring | |
US20220142514A1 (en) | Deriving insights into motion of an object through computer vision | |
JP6090653B2 (ja) | 疲労判定装置、疲労判定方法、及びそのプログラム | |
JP7198892B2 (ja) | 動画再生装置、動画再生方法、及び動画配信システム | |
JP2019098168A (ja) | 肌解析方法及び肌解析システム | |
JP7310929B2 (ja) | 運動メニュー評価装置、方法、及びプログラム | |
Tsai et al. | Chewing Behavior Detection Based on Facial Dynamic Features | |
JP6593830B1 (ja) | 情報処理装置、情報処理方法、寸法データ算出装置、及び製品製造装置 | |
WO2022024392A1 (ja) | 算出プログラム、算出方法および情報処理装置 | |
Tan et al. | Low-cost and portable physiological signal monitor using PhysRate model |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190306 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200225 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200427 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200519 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200525 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6709868 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |