JP2020052847A - Emotion management system, emotion management method and program - Google Patents
Emotion management system, emotion management method and program Download PDFInfo
- Publication number
- JP2020052847A JP2020052847A JP2018182932A JP2018182932A JP2020052847A JP 2020052847 A JP2020052847 A JP 2020052847A JP 2018182932 A JP2018182932 A JP 2018182932A JP 2018182932 A JP2018182932 A JP 2018182932A JP 2020052847 A JP2020052847 A JP 2020052847A
- Authority
- JP
- Japan
- Prior art keywords
- emotion
- information
- target person
- unit
- situation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本開示は、一般に感情管理システム、感情管理方法及びプログラムに関し、より詳細には対象者の感情を管理するための感情管理システム、感情管理方法及びプログラムに関する。 The present disclosure relates generally to an emotion management system, an emotion management method, and a program, and more particularly, to an emotion management system, an emotion management method, and a program for managing an emotion of a subject.
特許文献１には、対象者を撮像した画像から認識される対象者の表情に基づいて、対象者の感情を推定する感情推定装置が記載されている。
特許文献１に記載の感情推定装置では、対象者を時系列で撮影した複数の画像のそれぞれから対象者の表情を認識し、その認識結果である時系列データから、対象者の表情の時間的変化に関わる特徴を検出する。そして、感情推定装置は、検出された特徴に基づいて、対象者が推定対象期間のあいだに抱いた感情を推定する。
The emotion estimation device described in
しかし、特許文献１に記載の構成では、対象者を撮像した画像から、対象者の感情を、真顔、喜び、怒り、嫌悪、驚き、怖れ及び悲しみに分類するに過ぎず、より詳細な感情の特定が望まれることがある。
However, the configuration described in
本開示は上記事由に鑑みてなされており、より詳細な感情の特定を可能とする感情管理システム、感情管理方法及びプログラムを提供することを目的とする。 The present disclosure has been made in view of the above circumstances, and it is an object of the present disclosure to provide an emotion management system, an emotion management method, and a program that can specify emotion in more detail.
本開示の一態様に係る感情管理システムは、感情取得部と、状況取得部と、対応付部と、を備える。前記感情取得部は、対象者の感情に関する感情情報を取得する。前記状況取得部は、前記感情情報を取得したときの前記対象者の周辺状況に関する状況情報を取得する。前記対応付部は、前記感情情報と前記状況情報とを対応付ける。 An emotion management system according to an aspect of the present disclosure includes an emotion acquisition unit, a situation acquisition unit, and an association unit. The emotion acquisition unit acquires emotion information about the emotion of the target person. The situation acquisition unit acquires situation information about a surrounding situation of the subject at the time of acquiring the emotion information. The association unit associates the emotion information with the situation information.
本開示の一態様に係る感情管理方法は、感情取得処理と、状況取得処理と、対応付処理と、を有する。前記感情取得処理は、対象者の感情に関する感情情報を取得する処理である。前記状況取得処理は、前記感情情報を取得したときの前記対象者の周辺状況に関する状況情報を取得する処理である。前記対応付処理は、前記感情情報と前記状況情報とを対応付ける処理である。 An emotion management method according to an aspect of the present disclosure includes an emotion acquisition process, a situation acquisition process, and an association process. The emotion acquisition process is a process of acquiring emotion information about the emotion of the target person. The situation acquisition process is a process of acquiring situation information relating to a surrounding situation of the subject at the time of acquiring the emotion information. The associating process is a process of associating the emotion information with the situation information.
本開示の一態様に係るプログラムは、１以上のプロセッサに、前記感情管理方法を実行させるためのプログラムである。 A program according to one embodiment of the present disclosure is a program for causing one or more processors to execute the emotion management method.
本開示によれば、より詳細な感情の特定が可能である、という利点がある。 According to the present disclosure, there is an advantage that more detailed emotion can be specified.
（実施形態１）
（１）概要
本実施形態に係る感情管理システム１は、図１に示すように、対象者Ｕ１の感情を管理するためのシステムである。本開示でいう「感情」は、例えば、喜怒哀楽及び好悪等の、物事に感じて起こる気持ちを意味し、情動、気分及び情操等を含む。
(Embodiment 1)
(1) Overview As shown in FIG. 1, the
特に、本実施形態に係る感情管理システム１は、特定のシーンにおける感情だけでなく、対象者Ｕ１が普段の生活の中で抱く様々な感情を管理する。つまり、対象者Ｕ１は、普段から例えば、驚き、喜び、退屈、悲しみ、恐れ、嫌悪及び愛好等の様々な感情を抱いて生活している。本実施形態に係る感情管理システム１では、対象者Ｕ１に極力意識させない形で、このように、対象者Ｕ１が普段の生活で抱く様々な感情を管理する。
In particular, the
本実施形態に係る感情管理システム１は、図２に示すように、感情取得部２２と、状況取得部２１と、対応付部２４と、を備えている。感情取得部２２は、対象者Ｕ１の感情に関する感情情報Ｉ１を取得する。状況取得部２１は、感情情報Ｉ１を取得したときの対象者Ｕ１の周辺状況に関する状況情報Ｉ２を取得する。対応付部２４は、感情情報Ｉ１と状況情報Ｉ２とを対応付ける。本開示でいう「対応付ける」は、２つ以上の物について、対応する関係にある状態、つまり相対する関係にある状態とすること、を意味する。よって、感情管理システム１では、感情取得部２２で取得される「感情情報」と、状況取得部２１で取得される「状況情報」と、は相対する関係となる。また、本開示でいう「周辺状況」は、対象者Ｕ１の周辺の状況を意味し、例えば、対象者Ｕ１から見える対象者Ｕ１の周囲の映像、又は対象者Ｕ１に聞こえている対象者Ｕ１の周囲の音等を含む。つまり、対象者Ｕ１が話し相手と向かい合って会話している場面においては、話し相手の容姿、視線、表情、音声、ジェスチャ及び行動等についても、対象者Ｕ１の周辺状況に含まれる。
As shown in FIG. 2, the
上述した構成によれば、感情管理システム１は、ある瞬間の対象者Ｕ１の感情に関する感情情報Ｉ１に、そのときの対象者Ｕ１の周辺状況に関する状況情報Ｉ２が対応付けられた状態で管理される。これにより、感情管理システム１は、例えば、対象者Ｕ１が何を見て喜んでいるのか、又は対象者Ｕ１が何を聞いて驚いているのか等、対象者Ｕ１の感情を、そのときの対象者Ｕ１の周辺状況と対応付けて管理することができる。そのため、感情管理システム１によれば、対象者Ｕ１の感情のみではなく、対象者Ｕ１がそのような感情を抱く背景となる状況をも、感情とセットで管理することができる。したがって、本実施形態に係る感情管理システム１では、例えば、単に対象者Ｕ１の感情を、驚き、喜び、退屈、悲しみ、恐れ、嫌悪及び愛好等に分類するだけでなく、そのときの状況も含めて、より詳細な感情の特定が可能になる。
According to the above-described configuration, the
（２）構成
以下、本実施形態に係る感情管理システム１の構成について、図１〜図３Ｂを参照して説明する。
(2) Configuration Hereinafter, the configuration of the
以下では、感情管理システム１が特定の場所だけでなく、屋外を含めて様々な場所で用いられる場合を例として説明する。ここでは、一例として、感情管理システム１は、対象者Ｕ１の人体の一部に装着されるウェアラブル端末２を備えている。これにより、対象者Ｕ１は、様々な場所に居ながらも、感情管理システム１によるサービスをウェアラブル端末２にて受けることが可能である。特に、以下の説明では、老若男女、国籍等を問わず、不特定多数の対象者Ｕ１が、普段から、ウェアラブル端末２を装着して生活していることを前提とする。
Hereinafter, a case where the
（２．１）全体構成
まず、本実施形態に係る感情管理システム１の全体構成について説明する。
(2.1) Overall Configuration First, the overall configuration of the
本実施形態に係る感情管理システム１は、ウェアラブル端末２と、上位システム３と、を備えている。本実施形態では、感情管理システム１は、１台の上位システム３と、複数台（多数台）のウェアラブル端末２と、を備えている。
The
以下、感情管理システム１に含まれる複数台のウェアラブル端末２をまとめて「端末群２０」ともいう。言い換えれば、感情管理システム１は、上位システム３と、複数台のウェアラブル端末２からなる端末群２０と、を備えている。本実施形態では、端末群２０を構成する複数台のウェアラブル端末２は共通の構成を採用している。そのため、以下では、特に断りが無い限り、端末群２０を構成する複数台のウェアラブル端末２のうちの１台のウェアラブル端末２を例に説明するが、他のウェアラブル端末２にも同様の構成が採用される。
Hereinafter, the plurality of
上位システム３とウェアラブル端末２とは、互いに通信可能に構成されている。本開示において「通信可能」とは、有線通信又は無線通信の適宜の通信方式により、直接的、又はネットワーク若しくは中継器等を介して間接的に、情報を授受できることを意味する。すなわち、上位システム３とウェアラブル端末２とは、互いに情報を授受することができる。本実施形態では、上位システム３とウェアラブル端末２とは、互いに双方向に通信可能であって、上位システム３からウェアラブル端末２への情報の送信、及びウェアラブル端末２から上位システム３への情報の送信の両方が可能である。ここでは、上位システム３とウェアラブル端末２とは、例えば、インターネット等のネットワーク４に接続されており、ネットワーク４を介して間接的に情報を授受する。
The
ウェアラブル端末２は、対象者Ｕ１に関連する種々の情報を上位システム３に出力したり、上位システム３からの指示を受けて種々の情報を対象者Ｕ１に出力したりする、インタフェースとしての機能を有している。そのため、ウェアラブル端末２は、個々の対象者Ｕ１に装着されている。
The
本開示でいう「ウェアラブル端末」は、通信機能及び情報処理の機能を有するコンピュータ端末のうち、単に持ち運べる端末とは異なり、対象者Ｕ１が身に着けた状態で使用可能な端末である。ウェアラブル端末２には、例えば、耳掛け型、腕時計型（スマートウォッチ）、眼鏡型（スマートグラス）、指輪型、靴型、懐中型及びペンダント型等がある。本実施形態では一例として、図１に示すように、ウェアラブル端末２が耳掛け型である場合について説明する。すなわち、ウェアラブル端末２は、人体の一部Ｐ１である対象者Ｕ１の「耳」に装着される。
The “wearable terminal” in the present disclosure is a computer terminal having a communication function and an information processing function, which is different from a simply portable terminal and is a terminal that can be used while worn by the subject U1. The
ウェアラブル端末２は、図２に示すように、感情取得部２２と、状況取得部２１と、対応付部２４と、を備えている。本実施形態では、ウェアラブル端末２は、感情取得部２２、状況取得部２１及び対応付部２４に加えて、出力部２３、処理部２５及び下位通信部２６を更に有している。
The
ウェアラブル端末２は、メモリ及びプロセッサを含むコンピュータシステムを主構成とする。すなわち、コンピュータシステムのメモリに記録されたプログラムを、プロセッサが実行することにより、ウェアラブル端末２の各部（状況取得部２１、感情取得部２２、出力部２３、対応付部２４及び処理部２５等）の機能が実現される。プログラムはメモリに予め記録されていてもよいし、インターネット等の電気通信回線を通して提供されてもよく、メモリカード等の非一時的記録媒体に記録されて提供されてもよい。
The
感情取得部２２は、対象者Ｕ１の感情に関する感情情報Ｉ１を取得する。本実施形態では、感情取得部２２は、脳波センサ２２１及び脈拍センサ２２２を含んでいる。感情取得部２２は、これらの脳波センサ２２１及び脈拍センサ２２２で取得した対象者Ｕ１の生体情報（脳波情報及び脈拍情報）に基づいて、対象者Ｕ１の感情に関する感情情報Ｉ１を推定することで、感情情報Ｉ１を取得する。
The
脳波センサ２２１は、対象者Ｕ１の脳波を検知するためのセンサである。脳波センサ２２１は、対象者Ｕ１の頭部の一部である測定箇所に配置される電極にて採取される脳波を表す脳波情報を取得する。本開示でいう「脳波」（Electroencephalogram：EEG）とは、大脳の神経細胞（群）の発する電気信号（活動電位）を体外に導出し、記録した波形を意味する。さらに、本開示でいう「脳波」は、脳磁計（Magnetoencephalography：MEG）によって測定される脳磁場から得られる脳波も含む。本開示においては、特に断りが無い限り、大脳皮質の多数のニューロン群（神経網）の総括的な活動電位を対象として、これを体表に装着した電極を用いて記録する頭皮上脳波を「脳波」という。
The
脈拍センサ２２２は、対象者Ｕ１の脈拍を検知するためのセンサである。脈拍センサ２２２は、対象者Ｕ１の頭部の一部である測定箇所に配置される電極にて採取される脈拍を表す脈拍情報を取得する。ただし、感情取得部２２は、これらのセンサに限らず、例えば、対象者Ｕ１の耳に装着されるウェアラブル端末２以外のウェアラブル端末にて検知される対象者Ｕ１の心拍（心臓の拍動）等の情報を、生体情報として用いてもよい。
The
感情取得部２２は、これらの生体情報（脳波情報及び脈拍情報）に基づいて、リアルタイムで、対象者Ｕ１の感情の推定を行う。対象者Ｕ１の感情の推定には、一例として、ラッセル円環モデルと呼ばれる、人の感情の二次元モデルを用いた推定アルゴリズムを採用可能である。
The
すなわち、一般的に、人は、覚醒、驚き、喜び、気楽、眠気、退屈、悲しみ、イライラ、怒り又は恐れというようなさまざまな感情を抱く。ラッセル円環モデルは、覚醒の度合いである覚醒感（Arousal Level）と、快適さの度合いである快適感（Valence Level）と、を２軸とする平面上に、人が抱く様々な感情が配置したモデルである。人の感情は、このような平面において円環状に配置され得ることが知られている。そこで、感情取得部２２は、例えば、対象者Ｕ１の脳波及び脈拍に基づいて、まずは対象者Ｕ１の覚醒の度合いを示す覚醒感と、対象者Ｕ１の快適さの度合いを示す快適感とを算出する。感情取得部２２は、このように算出される覚醒感及び快適感から、対象者Ｕ１の感情を推定可能である。このとき、人の覚醒の度合い及び快適さの度合いと人の感情との対応関係に基づいて、対象者Ｕ１の感情が推定される。人の覚醒の度合い及び快適さの度合いと人の感情との対応関係は、例えば、ラッセル円環モデルに相当し、メモリに記憶されている。
That is, in general, a person has various emotions such as arousal, surprise, joy, comfort, drowsiness, boredom, sadness, frustration, anger, or fear. In the Russell ring model, various emotions held by a person are arranged on a plane having two axes, a feeling of arousal (Arousal Level) which is a degree of arousal and a feeling of comfort (Valence Level) which is a degree of comfort. Model. It is known that human emotions can be arranged in an annular shape in such a plane. Therefore, based on, for example, the electroencephalogram and the pulse of the subject U1, the
状況取得部２１は、感情情報Ｉ１を取得したときの対象者Ｕ１の周辺状況に関する状況情報Ｉ２を取得する。本実施形態では、状況取得部２１は、カメラ２１１、マイクロフォン２１２及び視線センサ２１３を含んでいる。状況取得部２１は、これらのカメラ２１１、マイクロフォン２１２及び視線センサ２１３で取得した対象者Ｕ１の周辺の情報に基づいて、対象者Ｕ１の周辺状況に関する状況情報Ｉ２を推定することで、状況情報Ｉ２を取得する。
The
カメラ２１１は、対象者Ｕ１から見える対象者Ｕ１の周囲の映像を撮像し、画像信号に変換する。マイクロフォン２１２は、対象者Ｕ１に聞こえている対象者Ｕ１の周囲の音を取得し、音声信号に変換する。視線センサ２１３は、対象者Ｕ１の視線の方向を検知する。視線センサ２１３は、一例として、対象者Ｕ１の眼電位に基づいて、対象者Ｕ１の視線の方向を推定する。本開示でいう「眼電位」とは、眼球の角膜側と網膜側との間に生じている数十ｍＶの電位差であって、眼球運動等に起因して変化する。そのため、例えば、視線センサ２１３は、対象者Ｕ１の体表に装着した電極を用いて眼電位を測定することにより、対象者Ｕ１の視線の方向を推定する。
The
状況取得部２１は、カメラ２１１、マイクロフォン２１２及び視線センサ２１３等の検知結果に基づいて、リアルタイムで、対象者Ｕ１の周辺状況の推定を行う。特に、本実施形態では、状況取得部２１は、少なくとも感情取得部２２で取得される対象者Ｕ１の感情に変化があったときに、対象者Ｕ１の周辺状況の推定を行う。
The
本実施形態では、このような構成の状況取得部２１は、人体（対象者Ｕ１）の一部Ｐ１（ここでは耳）に装着されるウェアラブル端末２に搭載されている。言い換えれば、ウェアラブル端末２は、少なくとも状況取得部２１としての機能を有している。そのため、状況取得部２１は、対象者Ｕ１目線で、対象者Ｕ１が実際に見聞きしている情報に近い情報を、状況情報Ｉ２として取得しやすくなる。
In the present embodiment, the
対応付部２４は、感情情報Ｉ１と状況情報Ｉ２とを対応付ける。すなわち、対応付部２４は、感情取得部２２で取得された感情情報Ｉ１と、状況取得部２１で取得された状況情報Ｉ２と、の紐付けを行う。ここで、対応付部２４は、ある感情情報Ｉ１を感情取得部２２が取得したときに、状況取得部２１で取得された状況情報Ｉ２を、この感情情報Ｉ１と対応付ける。つまり、対応付部２４では、略同一のタイミングで取得された感情情報Ｉ１と状況情報Ｉ２とが対応付けられる（紐付けられる）。
The
出力部２３は、対象者Ｕ１に対して種々の情報を出力する。本実施形態では、出力部２３は、骨伝導スピーカ２３１及びバイブレータ２３２を含んでいる。骨伝導スピーカ２３１は、骨伝導により、対象者Ｕ１に向けて音を出力する。バイブレータ２３２は、それ自体が振動することで、対象者Ｕ１に対して通知等を行う。出力部２３は、骨伝導スピーカ２３１及びバイブレータ２３２に限らず、例えば、表示灯又はスピーカ等を有していてもよい。
The
処理部２５は、各種の情報処理を実行する。本実施形態では、例えば、対応付部２４にて対応付けられる感情情報Ｉ１及び状況情報Ｉ２の前置処理等が、処理部２５にて実行される。
The
下位通信部２６は、直接的、又はネットワーク４若しくは中継器等を介して間接的に、上位システム３と通信する。下位通信部２６と上位システム３との間の通信方式としては、無線通信又は有線通信の適宜の通信方式が採用される。ここでは、下位通信部２６は、ネットワーク４に接続されており、ネットワーク４を介して、上位システム３と通信する。本実施形態では一例として、下位通信部２６は、Wi-Fi（登録商標）、Bluetooth（登録商標）、ZigBee（登録商標）又は免許を必要としない小電力無線（特定小電力無線）等の規格に準拠した、電波を通信媒体として用いる無線通信を採用する。さらに、下位通信部２６は、屋外においてネットワーク４に接続されることも想定されるため、例えば、通信事業者が提供する携帯電話網（キャリア網）又は公衆無線ＬＡＮ（Local Area Network）を介してネットワークに接続されてもよい。携帯電話網には、例えば、３Ｇ（第３世代）回線、ＬＴＥ（Long Term Evolution）回線等がある。
The
上位システム３は、図２に示すように、変換部３１と、記録部３２と、生成部３３と、提供部３４と、上位通信部３５と、データベース３６と、を有している。すなわち、本実施形態に係る感情管理システム１は、感情取得部２２、状況取得部２１及び対応付部２４に加えて、変換部３１、記録部３２、生成部３３及び提供部３４を更に備えている。
As illustrated in FIG. 2, the
上位システム３は、メモリ及びプロセッサを含むコンピュータシステムを主構成とする。すなわち、コンピュータシステムのメモリに記録されたプログラムを、プロセッサが実行することにより、上位システム３の各部（変換部３１、記録部３２、生成部３３及び提供部３４等）の機能が実現される。プログラムはメモリに予め記録されていてもよいし、インターネット等の電気通信回線を通して提供されてもよく、メモリカード等の非一時的記録媒体に記録されて提供されてもよい。
The
変換部３１は、対応付部２４で対応付けられた感情情報Ｉ１及び状況情報Ｉ２に基づいて、対象者Ｕ１から発せられて相手に届く言葉を変換する。ここでは、変換部３１は、対象者Ｕ１が相手と会話している状況を前提として機能する。状況情報Ｉ２は相手情報を含んでいる。本開示でいう「相手情報」は、対象者Ｕ１が相手と会話している際における、相手に関する情報であって、一例として、相手の名前、容姿、国籍、感情、母国語、使用言語及び反応（表情及び感情を含む）等である。特に、本実施形態では、相手情報は、少なくとも対象者Ｕ１が相手と会話している際における、相手の反応と、会話の流れと、の少なくとも一方を含んでいる。
The
本開示でいう「会話」は、２人以上の人が向かい合って話し合うことだけでなく、チャット（Chat）のように、インターネット等のコンピュータネットワークを介してメッセージのやり取りを行って、２人以上の人が意思疎通を図ることも含む。つまり、本開示でいう「会話」には、音声による会話だけでなく、文字等を用いた言葉により、２人以上の人が意思伝達を行う行為全般を含む。また、本開示でいう「言葉」は、ある意味を表すために、口で言ったり文字で書いたりする、言語による表現全般を意味する。また、本開示でいう「会話の流れ」は、会話文の文脈、つまり会話文の文中での語の意味の続き具合を意味する。 The “conversation” referred to in the present disclosure is not only that two or more people talk face to face, but also that two or more people exchange messages via a computer network such as the Internet, such as chat. This also includes communication between people. In other words, the “conversation” in the present disclosure includes not only a conversation by voice but also an entire action in which two or more people communicate with each other using words using characters or the like. In addition, the “word” in the present disclosure means a general expression in a language, such as a word or a word, to express a certain meaning. In addition, the “flow of conversation” in the present disclosure means the context of the conversation sentence, that is, the continuation of the meaning of the word in the sentence of the conversation sentence.
すなわち、変換部３１によれば、対象者Ｕ１が相手との会話の中で、何らかの言葉を発した場合に、この言葉が相手に届く前に変換部３１にて変換され、変換後の言葉が相手に届くことになる。ここにおいて、変換部３１は、感情情報Ｉ１及び状況情報Ｉ２に基づいて言葉の変換を行うので、相手に届く言葉を、対象者Ｕ１の感情及び対象者Ｕ１の周辺状況を反映した適切な言葉に近づけるような変換が可能である。例えば、対象者Ｕ１が、相手の母国語に合わせて、不慣れな外国語で会話するような場面において、対象者Ｕ１の意に反した不適切な言葉を、対象者Ｕ１が発してしまうことがある。このような場合に、変換部３１では、対象者Ｕ１が発した不適切な言葉を、感情情報Ｉ１及び状況情報Ｉ２に基づいて自動的に適切な言葉に変換することが可能である。変換部３１の動作について詳しくは、「（３．２．１）コミュニケーション支援」の欄で説明する。
That is, according to the
記録部３２は、対応付部２４で対応付けられた感情情報Ｉ１及び状況情報Ｉ２をログ情報として記録する。つまり、ログ情報は、対応付部２４で対応付けられた感情情報Ｉ１及び状況情報Ｉ２を、両者間の対応関係を含めて記録される情報である。言い換えれば、記録部３２は、対応付部２４で対応付けられた感情情報Ｉ１及び状況情報Ｉ２を、両者間の対応関係を維持したままログ情報として記録する。さらに、本実施形態では、記録部３２は、感情情報Ｉ１及び状況情報Ｉ２に時間情報を付加し、時系列に従ってログ情報として記録する。すなわち、ログ情報は、現在の感情情報Ｉ１及び状況情報Ｉ２だけでなく、少なくとも一定期間にわたり、過去の感情情報Ｉ１及び状況情報Ｉ２の履歴も含んでいる。記録部３２は、例えば、対応付部２４にて感情情報Ｉ１及び状況情報Ｉ２が対応付けられる度に、ログ情報を記録、つまりログ情報を更新する。
The
生成部３３は、ログ情報に基づいて、対象者Ｕ１の嗜好を反映した属性情報を生成する。本開示でいう「嗜好」は、趣味及び好みを意味し、一例として、飲食物についての好み、及びファッションについての好みを含んでいる。つまり、属性情報は、少なくとも対象者Ｕ１の趣味及び好みが反映された情報である。生成部３３は、例えば、ログ情報が更新される度に、属性情報を生成、つまり属性情報を更新する。
The
提供部３４は、ログ情報に基づいて、対象者Ｕ１の嗜好を反映した物品Ｏｂ１，Ｏｂ２（図６参照）を対象者Ｕ１に提供する。本開示でいう「物品」は、現実に存在する種々の物品を意味し、一例として、飲食物及び衣服等の、対象者Ｕ１の日常生活において必要な物品を含む。提供部３４の動作について詳しくは、「（３．２．２）リコメンド」の欄で説明する。
Based on the log information, the providing
上位通信部３５は、直接的、又はネットワーク４若しくは中継器等を介して間接的に、ウェアラブル端末２（下位通信部２６）と通信する。上位通信部３５とウェアラブル端末２との間の通信方式としては、無線通信又は有線通信の適宜の通信方式が採用される。ここでは、上位通信部３５は、ネットワーク４に接続されており、ネットワーク４を介して、ウェアラブル端末２と通信する。本実施形態では一例として、上位通信部３５とネットワーク４との間の通信方式は、有線通信である。
The
データベース３６は、感情情報Ｉ１及び状況情報Ｉ２を含むログ情報を記憶している。さらに、データベース３６には、生成部３３で生成された属性情報も記憶されている。データベース３６において、ログ情報（感情情報Ｉ１及び状況情報Ｉ２）及び属性情報は、対象者Ｕ１ごとに整理されている。また、ログ情報については、データベース３６において、時系列によって整理されている。
The
（２．２）ウェアラブル端末
次に、ウェアラブル端末２のより詳細な構成について、図３Ａ及び図３Ｂを参照して説明する。ただし、図３Ａ及び図３Ｂは、ウェアラブル端末２の構造を概念的に示す概略図であって、説明に必要な構成要素のみを適宜図示している。図３Ｂは、図３Ａの領域Ｚ１内の概略構成を表す概略図である。
(2.2) Wearable Terminal Next, a more detailed configuration of the
ウェアラブル端末２は、上述したように、人体の一部Ｐ１である対象者Ｕ１の「耳」に装着される、耳掛け型の端末である。ウェアラブル端末２は、図３Ｂに示すように、筐体２７を有している。筐体２７は、状況取得部２１（カメラ２１１、マイクロフォン２１２及び視線センサ２１３）、感情取得部２２（脳波センサ２２１及び脈拍センサ２２２）及び出力部２３（骨伝導スピーカ２３１及びバイブレータ２３２）を収容している。さらに、筐体２７には、対応付部２４、処理部２５及び下位通信部２６等も収容されている。
As described above, the
筐体２７は、正面視楕円状に形成されている。筐体２７は、対象者Ｕ１の耳の後ろ（耳たぶ裏）に着脱可能に装着される。ここで、本実施形態では、不特定多数の対象者Ｕ１が、普段から、ウェアラブル端末２を装着して生活していることを前提としている。そのため、筐体２７は、対象者Ｕ１が激しく動いても外れないように比較的強固に装着され、かつ対象者Ｕ１に負担が掛かりにくいように比較的計量化されていることが好ましい。さらに、ウェアラブル端末２は、防水機能を有していることが好ましい。
The
ウェアラブル端末２は、対象者Ｕ１の耳（一部Ｐ１）に引っ掛けられた状態で装着される。この状態において、少なくともカメラ２１１が前方、つまり対象者Ｕ１の顔と同じ向きに向いていることが好ましい。これにより、カメラ２１１では、対象者Ｕ１の視線の先、つまり対象者Ｕ１から見える対象者Ｕ１の周囲の映像を撮像することが可能である。
The
本実施形態では、対象者Ｕ１は、右耳及び左耳のうちの一方（図３Ａ及び図３Ｂの例では左耳）にのみ、ウェアラブル端末２を装着している。ただし、ウェアラブル端末２は、右耳用と左耳用とで、共通の構成を採用してもよい。また、対象者Ｕ１は、２台のウェアラブル端末２を両耳（右耳及び左耳）に装着してもよい。この場合、２台のウェアラブル端末２が互いに通信することで互いに協働（連携）し、１台のウェアラブル端末２と同様の機能を実現する。
In the present embodiment, the subject U1 wears the
ここで、ウェアラブル端末２は、電池駆動であることが好ましい。そのため、本実施形態では、ウェアラブル端末２は、蓄電池を有し、蓄電池に蓄積された電気エネルギを用いて動作することとする。
Here, the
（３）動作
以下、本実施形態に係る感情管理システム１の動作について、図１、図４〜図６を参照して説明する。本実施形態に係る感情管理システム１は、種々の用途に用いることができるが、以下では、まず感情管理システム１の「基本動作」について説明し、その後に、感情管理システム１の用途の一例となる「応用動作」について説明する。
(3) Operation Hereinafter, the operation of the
（３．１）基本動作
まず、本実施形態に係る感情管理システム１の基本的な動作、つまり基本動作に相当する感情管理方法について、図１及び図４を参照して説明する。すなわち、感情管理方法は、少なくとも図４のフローチャートに示す処理Ｓ１〜Ｓ５の一連の処理を、ウェアラブル端末２及び上位システム３の１以上のプロセッサで実行することにより、実現される。図１は、対象者Ｕ１である女児が、店舗のショーケース前を通りかかった際に、ショーケース内に飾られているパンダのぬいぐるみが対象者Ｕ１の目に留まり、対象者Ｕ１がパンダのぬいぐるみを欲しいと感じた場面を想定した、概念図である。
(3.1) Basic Operation First, a basic operation of the
感情管理方法に係る一連の処理が開始すると、ウェアラブル端末２のプロセッサは、まず感情取得部２２（脳波センサ２２１及び脈拍センサ２２２を含む）にて、対象者Ｕ１の感情の変化の有無を判断する（Ｓ１）。対象者Ｕ１の感情に変化が無い場合（Ｓ１：Ｎｏ）、処理Ｓ１を繰り返し実行する。つまり、対象者Ｕ１の感情に変化が現れるまでは、ウェアラブル端末２のプロセッサは、次の処理（Ｓ２）には移行せず、待機状態を維持する。
When a series of processes related to the emotion management method starts, the processor of the
ウェアラブル端末２のプロセッサは、対象者Ｕ１の感情に変化が有ると判断すると（Ｓ１：Ｙｅｓ）、感情取得部２２にて、対象者Ｕ１の感情に関する感情情報Ｉ１を推定する。これにより、ウェアラブル端末２のプロセッサは、感情取得部２２にて、感情情報Ｉ１を取得する感情取得処理を実行する（Ｓ２）。図１の例においては、対象者Ｕ１が、ショーケース内のパンダのぬいぐるみを欲しい感じることで、対象者Ｕ１の感情に変化が生じる。このとき、感情取得部２２では、対象者Ｕ１の「愛好」の感情を表す感情情報Ｉ１を取得する。
When the processor of the
次に、ウェアラブル端末２のプロセッサは、状況取得部２１にて、感情情報Ｉ１を取得したときの対象者Ｕ１の周辺状況に関する状況情報Ｉ２を推定する。これにより、ウェアラブル端末２のプロセッサは、状況取得部２１にて、状況情報Ｉ２を取得する状況取得処理を実行する（Ｓ３）。図１の例においては、対象者Ｕ１が、ショーケース内のパンダのぬいぐるみを見つめているため、対象者Ｕ１の視線の先にはパンダのぬいぐるみが存在する。このとき、状況取得部２１では、対象者Ｕ１が注目している対象が、パンダのぬいぐるみであることを表す状況情報Ｉ２を取得する。
Next, the processor of the
次に、ウェアラブル端末２のプロセッサは、対応付部２４にて、感情情報Ｉ１と状況情報Ｉ２とを対応付ける対応付処理を実行する（Ｓ４）。図１の例においては、対象者Ｕ１の「愛好」の感情を表す感情情報Ｉ１と、対象者Ｕ１が注目している対象がパンダのぬいぐるみであることを表す状況情報Ｉ２と、が対応付けられる。ウェアラブル端末２のプロセッサは、このようにして対応付けられた感情情報Ｉ１及び状況情報Ｉ２を、下位通信部２６にて上位システム３に送信する。
Next, the processor of the
上位システム３のプロセッサは、ウェアラブル端末２から感情情報Ｉ１及び状況情報Ｉ２を受信すると、受信した感情情報Ｉ１及び状況情報Ｉ２をログ情報として、データベース３６に記録する（Ｓ５）。これにより、図１の例においては、上位システム３のデータベース３６には、対象者Ｕ１に関して、「愛好」の感情を表す感情情報Ｉ１と、注目対象がパンダのぬいぐるみであることを表す状況情報Ｉ２と、がログ情報として記録される。
Upon receiving the emotion information I1 and the situation information I2 from the
図４のフローチャートは、感情管理方法の一例に過ぎず、処理を適宜省略又は追加してもよいし、処理の順番が適宜変更されていてもよい。 The flowchart in FIG. 4 is merely an example of the emotion management method, and the processing may be omitted or added as appropriate, or the order of the processing may be changed as appropriate.
以上説明したように、感情管理システム１によれば、ある瞬間の対象者Ｕ１の感情に関する感情情報Ｉ１に、そのときの対象者Ｕ１の周辺状況に関する状況情報Ｉ２が対応付けられた状態で管理される。これにより、感情管理システム１は、例えば、対象者Ｕ１が何を見て喜んでいるのか、又は対象者Ｕ１が何を聞いて驚いているのか等、対象者Ｕ１の感情を、そのときの対象者Ｕ１の周辺状況と対応付けて管理することができる。そのため、感情管理システム１によれば、対象者Ｕ１の感情のみではなく、対象者Ｕ１がそのような感情を抱く背景となる状況をも、感情とセットで管理することができる。したがって、本実施形態に係る感情管理システム１では、例えば、単に対象者Ｕ１の感情を、驚き、喜び、退屈、悲しみ、恐れ、嫌悪及び愛好等に分類するだけでなく、そのときの状況も含めて、より詳細な感情の特定が可能になる。
As described above, according to the
例えば、図１の例においては、上位システム３には、対象者Ｕ１に関して、「愛好」の感情を表す感情情報Ｉ１と、注目対象がパンダのぬいぐるみであることを表す状況情報Ｉ２と、がログ情報として記録されている。そのため、例えば、対象者Ｕ１の家族は、対象者Ｕ１への贈り物（プレゼント）を贈る際等に、対象者Ｕ１のログ情報を閲覧することで、対象者Ｕ１がパンダのぬいぐるみを欲しがっていることを知ることができる。このように、感情管理システム１によれば、対象者Ｕ１が意思表示をしなくても、対象者Ｕ１の嗜好を考慮した、サービスの提供が可能となる。
For example, in the example of FIG. 1, the
さらに、このような感情管理システム１では、対象者Ｕ１の感情を、そのときの対象者Ｕ１の周辺状況と対応付けて管理することで、例えば、対象者Ｕ１の感情の推定精度の向上を図ることが可能である。すなわち、感情管理システム１によれば、感情情報Ｉ１のみから対象者Ｕ１の感情が推定される場合に比べると、対象者Ｕ１がそのような感情を抱く背景となる状況をも加味されることで、対象者Ｕ１の感情の推定精度を向上できる。
Further, in such an
特に、ログ情報に基づいて、対象者Ｕ１の嗜好を反映した属性情報が生成されている場合には、感情管理システム１は、感情の推定時に属性情報を参照することで、感情の推定精度の向上を図ってもよい。例えば、属性情報からみて、対象者Ｕ１が怒るはずのない状況において、感情情報が「驚き」及び「怒り」を表している場合には、感情管理システム１は、対象者Ｕ１の感情は「驚き」であると判定する。その結果、感情管理システム１による対象者Ｕ１の感情の推定精度の向上を図ることができる。
In particular, when attribute information reflecting the preference of the target person U1 is generated based on the log information, the
また、本実施形態に係る感情管理システム１によれば、ログ情報が記録されるため、対象者Ｕ１が、どのような状況において、どのような感情を抱くか、といった傾向の判断にも用いることが可能である。これにより、感情管理システム１によれば、対象者Ｕ１に対する様々なサービスにおいて、対象者Ｕ１が、どのような状況で喜び、どのような状況で傷つく（悲しい思いをする）又は嫌悪感を示すのか、といった点を考慮した、サービスを実現可能となる。一例として、対象者Ｕ１向けに対話型サービスを提供する場合には、対象者Ｕ１が、どのような言葉に喜び、どのような言葉で傷つく（悲しい思いをする）又は嫌悪感を示すのか、といった点を考慮した、対話型サービスを実現可能となる。言い換えれば、本実施形態に係る感情管理システム１によれば、対象者Ｕ１向けのサービスにおいて、空気を読む（行間を読み取る）ことが可能になる。
Further, according to the
（３．２）応用動作
次に、本実施形態に係る感情管理システム１の用途の一例となる応用的な動作、つまり応用動作について説明する。
(3.2) Applied Operation Next, an applied operation that is an example of a use of the
（３．２．１）コミュニケーション支援
まず、本実施形態に係る感情管理システム１の用途の一例として、人と人とのコミュニケーションを支援する「コミュニケーション支援」について、図５を参照して説明する。図５は、母国語が異なる２人の対象者Ｕ１が、向かい合って会話している場面を想定した、概念図である。以下、２人の対象者Ｕ１を区別する場合には、図５の左側の対象者Ｕ１を「第１対象者Ｕ１１」、右側の対象者Ｕ１を「第２対象者Ｕ１２」ともいう。図５の例では、第１対象者Ｕ１１の母国語が日本語であって、第２対象者Ｕ１２の母国語が英語であるが、第１対象者Ｕ１１も英語での一応の会話が可能であると仮定する。
(3.2.1) Communication Support First, as an example of the use of the
このような状況において、第１対象者Ｕ１１と第２対象者Ｕ１２とが英語で会話していると、第１対象者Ｕ１１にとっては、第１対象者Ｕ１１の感情をうまく会話に反映することが困難な場合がある。つまり、英語を母国語としない第１対象者Ｕ１１からすると、英語の細かな表現に含まれるニュアンスが分からず、また第２対象者Ｕ１２との間には、出身国による文化の違い、又は育った環境の違い等もある。そのため、第１対象者Ｕ１１の発する言葉が、第１対象者Ｕ１１の感情をうまく反映できておらず、第２対象者Ｕ１２にとって、不適切な言葉となることがある。例えば、第１対象者Ｕ１１の発した言葉が、第２対象者Ｕ１２にうまく伝わらず、第２対象者Ｕ１２に失礼な発言ととられたり、第２対象者Ｕ１２に誤解を与えたりする可能性がある。 In such a situation, if the first target person U11 and the second target person U12 are having a conversation in English, the first target person U11 may well reflect the emotions of the first target person U11 in the conversation. It can be difficult. In other words, the first subject U11 who does not speak English as a native language does not know the nuances contained in the detailed expressions of English, and the second subject U12 has a cultural difference due to the country of origin or has grown up with the second subject U12. There are differences in the environment. Therefore, the words uttered by the first target person U11 may not reflect the emotions of the first target person U11 well, and may be inappropriate words for the second target person U12. For example, the word uttered by the first target person U11 may not be transmitted well to the second target person U12, and may be taken as a rude statement to the second target person U12, or may give a misunderstanding to the second target person U12. There is.
本実施形態に係る感情管理システム１を用いれば、上位システム３は、変換部３１（図２参照）にて、対応付部２４で対応付けられた感情情報Ｉ１及び状況情報Ｉ２に基づいて、対象者Ｕ１から発せられて相手に届く言葉を変換することが可能である。ここでは、第１対象者Ｕ１１が話し手であって、第２対象者Ｕ１２が聞き手である場合について説明する。この場合、第１対象者Ｕ１１が発した言葉Ｗ１（図５中の「ＡＢＣ」）は、まずは第１対象者Ｕ１１のウェアラブル端末２のマイクロフォン２１２に入力され、第１対象者Ｕ１１のウェアラブル端末２から上位システム３に送信される。このとき、第１対象者Ｕ１１のウェアラブル端末２は、対応付部２４で対応付けられた感情情報Ｉ１及び状況情報Ｉ２を、上位システム３に送信する。
With the use of the
これにより、上位システム３には、第１対象者Ｕ１１が発した言葉Ｗ１のデータと、そのときの第１対象者Ｕ１１の感情に関する感情情報Ｉ１、及び第１対象者Ｕ１１の周辺状況に関する状況情報Ｉ２とがアップロードされる。そして、上位システム３は、変換部３１にて、第１対象者Ｕ１１から発せられた言葉Ｗ１を、感情情報Ｉ１及び状況情報Ｉ２に基づいて、別の言葉Ｗ２（図５中の「ＡＢＣＤ」）に変換する。このとき、変換部３１は、第１対象者Ｕ１１の感情に関する感情情報Ｉ１だけでなく、第１対象者Ｕ１１の会話の相手（第２対象者Ｕ１２）に関する相手情報を含む状況情報Ｉ２に基づいて、言葉Ｗ１，Ｗ２の変換を行う。しかも、相手情報は、少なくとも第１対象者Ｕ１１が相手（第２対象者Ｕ１２）と会話している際における、相手（第２対象者Ｕ１２）の反応と、会話の流れと、の少なくとも一方を含んでいる。そのため、変換後の言葉Ｗ２は、第１対象者Ｕ１１の感情を反映しているだけでなく、聞き手である第２対象者Ｕ１２の反応及び会話の流れ等をくみ取った、適切な言葉Ｗ２になる。ここで、第２対象者Ｕ１２の反応は、例えば、第１対象者Ｕ１１のウェアラブル端末２のカメラ２１１で撮像された第２対象者Ｕ１２の顔の表情、又は表情から推定される第２対象者Ｕ１２の感情にて表される。
As a result, the
そして、上位システム３は、変換後の言葉Ｗ２を第２対象者Ｕ１２のウェアラブル端末２に送信し、ウェアラブル端末２の骨伝導スピーカ２３１にて、言葉Ｗ２を音声として出力する。感情管理システム１は、これら一連の処理を、第１対象者Ｕ１１が言葉Ｗ１を発してから殆ど時間遅れなく実行することで、第２対象者Ｕ１２には、第１対象者Ｕ１１が実際に発した言葉Ｗ１と共に、変換部３１で変化された言葉Ｗ２が届くことになる。その結果、第２対象者Ｕ１２においては、第１対象者Ｕ１１が発した言葉Ｗ１（図５中の「ＡＢＣ」）について、例えば、表現の変更、補完及び補足等の変換がされた言葉Ｗ２を、第１対象者Ｕ１１からの言葉として受け取ることができる。よって、第１対象者Ｕ１１と第２対象者Ｕ１２との会話に際しては、感情管理システム１が、まるで気の利く通訳者のように機能し、第１対象者Ｕ１１の発した言葉を、第２対象者Ｕ１２にうまく伝えることができる。
Then, the
上述したように、本実施形態に係る感情管理システム１によれば、例えば、対象者Ｕ１が相手と会話する際に、対象者Ｕ１と相手との間のコミュニケーションの円滑化を図ることが可能である。要するに、感情管理システム１により、対象者Ｕ１の感情が特定可能であるので、対象者Ｕ１から発せられて相手に届く言葉を、対象者Ｕ１の感情に応じて変換することが可能である。これにより、例えば、対象者Ｕ１と相手とで母国語が異なる場合等、話し手である対象者Ｕ１が発する言葉が、必ずしも対象者Ｕ１の感情をうまく反映するとは限らない状況であっても、対象者Ｕ１と相手とのコミュニケーションの円滑化が可能である。そのため、対象者Ｕ１は、例えば、感情をこめて、相手と、相手の母国語でコミュニケーションをとることが可能になる。
As described above, according to the
また、図５の例では、第１対象者Ｕ１１だけでなく、第２対象者Ｕ１２もウェアラブル端末２を装着しているので、第２対象者Ｕ１２が話し手であって、第１対象者Ｕ１１が聞き手である場合についても、上記と同様に動作する。つまり、第２対象者Ｕ１２が発した言葉は、まずは第２対象者Ｕ１２のウェアラブル端末２のマイクロフォン２１２に入力され、第２対象者Ｕ１２のウェアラブル端末２から上位システム３に送信される。そして、第１対象者Ｕ１１には、第２対象者Ｕ１２が実際に発した言葉と共に、変換部３１で変化された言葉が届くことになる。
In addition, in the example of FIG. 5, not only the first target person U11 but also the second target person U12 is wearing the
ここでは、変換部３１は「翻訳」を行わない場合について説明したが、変換部３１は「翻訳」の機能を含んでいてもよい。すなわち、対象者Ｕ１の発する言葉と、相手の聞き取り可能な言葉とで言語の種別が同一である場合には、「翻訳」の機能は不要であるが、対象者Ｕ１の発する言葉と、相手の聞き取り可能な言葉とで言語の種別が異なる場合、変換部３１での翻訳が必要になる。例えば、対象者Ｕ１の発する言葉の言語の種別が「日本語」であって、相手の聞き取り可能な言葉の言語の種別が「英語」である場合、変換部３１は、日本語から英語への翻訳を実行する。
Here, the case where the
（３．２．２）リコメンド
次に、本実施形態に係る感情管理システム１の用途の一例として、対象者Ｕ１の嗜好を反映した「リコメンド（recommend）処理」について、図６を参照して説明する。図６は、対象者Ｕ１の嗜好を反映した物品Ｏｂ１，Ｏｂ２を対象者Ｕ１に提供する場面を想定した、概念図である。
(3.2.2) Recommendation Next, as an example of the use of the
すなわち、本実施形態に係る感情管理システム１によれば、対象者Ｕ１が何を見て喜んでいるのか、又は対象者Ｕ１が何を聞いて驚いているのか等が、逐一管理されているので、これらの情報から、対象者Ｕ１の嗜好を推定可能となる。これにより、例えば、対象者Ｕ１に対して、リコメンド情報を提供したり、又は対象者Ｕ１の嗜好を反映した物品Ｏｂ１，Ｏｂ２を対象者Ｕ１に実際に提供したりすることが可能となる。
That is, according to the
本実施形態では、一例として、提供部３４が、図６に示すように、ログ情報に基づいて、対象者Ｕ１の嗜好を反映した物品Ｏｂ１，Ｏｂ２を対象者Ｕ１に提供する。図６の例では、提供部３４は、対象者Ｕ１の自宅の冷蔵庫５内に、対象者Ｕ１の嗜好を反映した物品Ｏｂ１，Ｏｂ２を準備することにより、物品Ｏｂ１，Ｏｂ２を対象者Ｕ１に提供する。特に、ログ情報によれば、対象者Ｕ１の嗜好だけでなく、対象者Ｕ１の生活（食生活も含む）パターン、及び生活リズム等も把握できるため、対象者Ｕ１の嗜好が推定できるだけでなく、対象者Ｕ１が物品Ｏｂ１，Ｏｂ２を欲しているタイミングも推定できる。そのため、提供部３４は、対象者Ｕ１が物品Ｏｂ１，Ｏｂ２を欲しがるタイミングに合わせて、物品Ｏｂ１，Ｏｂ２を冷蔵庫５内に準備することで、適切なタイミングで、物品Ｏｂ１，Ｏｂ２を対象者Ｕ１に提供できる。
In the present embodiment, as an example, as illustrated in FIG. 6, the providing
図６の例においては、対象者Ｕ１が日頃から目を酷使する仕事をしており、かつ対象者Ｕ１が海外出張に近々行くことが、ログ情報から推定可能であると仮定する。この状況においては、提供部３４は、対象者Ｕ１の嗜好を反映しつつ、目の保養に効く飲食物である物品Ｏｂ１と、対象者Ｕ１の住む地域の郷土料理である物品Ｏｂ２と、を対象者Ｕ１に提供する。このような物品Ｏｂ１，Ｏｂ２を冷蔵庫５に準備する手段は、特に限定しないが、一例として、自動宅配サービスを利用可能である。
In the example of FIG. 6, it is assumed that it is possible to estimate from the log information that the target person U1 regularly performs a job of overworking the eyes and that the target person U1 is going to go on an overseas business trip soon. In this situation, the providing
すなわち、冷蔵庫５に宅外からもアクセス可能な構造を採用することで、提供部３４からの指示により、自動宅配サービスにより、冷蔵庫５に物品Ｏｂ１，Ｏｂ２が自動的に配達される。この場合において、対象者Ｕ１が、冷蔵庫５から物品Ｏｂ１，Ｏｂ２を取り出し、かつ物品Ｏｂ１，Ｏｂ２を開封した時点で、課金されるようにすることが好ましい。また、対象者Ｕ１が、開封することなく所定期間が経過した場合には、物品Ｏｂ１，Ｏｂ２は自動的に回収されることが好ましい。
That is, by adopting a structure in which the
自動宅配サービスに際して、冷蔵庫５への物品Ｏｂ１，Ｏｂ２の収容作業は、例えば、宅内側から、搬送ロボット（ドローン等を含む）にて実現されてもよい。この場合、対象者Ｕ１の自宅付近まで配達された物品Ｏｂ１，Ｏｂ２を、搬送ロボットが取りに行って、冷蔵庫５内まで搬送する。さらには、自宅の壁又は天井等に設置されたシュータ又はエレベータ等により、物品Ｏｂ１，Ｏｂ２が宅外から冷蔵庫５内に搬送されてもよい。物品Ｏｂ１，Ｏｂ２の回収についても、同様に、搬送ロボット等で実現されてもよい。
In the automatic home delivery service, the work of housing the articles Ob1 and Ob2 in the
また、別の例として、冷蔵庫５に限らず、例えば、クローゼット又は専用の宅配ボックス等へ、物品が自動的に配達されてもよい。すなわち、提供部３４が、対象者Ｕ１の嗜好を反映した物品として何を提供するかによって、配達先が変わってもよい。一例として、提供部３４が、対象者Ｕ１の嗜好を反映した物品として、衣服を提供する場合には、物品（衣服）はクローゼットに配達されることが好ましい。具体的には、クローゼットの一部を自動宅配サービス用のスペースとして利用することで、このスペースに、随時、対象者Ｕ１の嗜好を反映した衣服が準備される。そのため、対象者Ｕ１は、例えば、自動宅配サービス用のスペースに準備された衣服を着るだけで、その日の気分にあった衣服を着ることが可能となる。
Further, as another example, an article may be automatically delivered to, for example, a closet or a dedicated delivery box, not limited to the
（４）変形例
実施形態１は、本開示の様々な実施形態の一つに過ぎない。実施形態１は、本開示の目的を達成できれば、設計等に応じて種々の変更が可能である。また、実施形態１に係る感情管理システム１と同様の機能は、感情管理方法、コンピュータプログラム、又はコンピュータプログラムを記録した非一時的記録媒体等で具現化されてもよい。一態様に係る感情管理方法は、感情取得処理（図４の「Ｓ２」）と、状況取得処理（図４の「Ｓ３」）と、対応付処理（図４の「Ｓ４」）と、を有する。感情取得処理は、対象者Ｕ１の感情に関する感情情報Ｉ１を取得する処理である。状況取得処理は、感情情報Ｉ１を取得したときの対象者Ｕ１の周辺状況に関する状況情報Ｉ２を取得する処理である。対応付処理は、感情情報Ｉ１と状況情報Ｉ２とを対応付ける処理である。一態様に係る（コンピュータ）プログラムは、１以上のプロセッサに、上記の感情管理方法を実行させるためのプログラムである。
(4)
以下、実施形態１の変形例を列挙する。以下に説明する変形例は、適宜組み合わせて適用可能である。 Hereinafter, modified examples of the first embodiment will be listed. The modifications described below can be applied in appropriate combinations.
図７Ａ及び図７Ｂは、実施形態１の変形例に係るウェアラブル端末２Ａの構造を概念的に示す概略図である。図７Ｂは、図７Ａの領域Ｚ１内の概略構成を表す概略図である。図７Ａ及び図７Ｂに示すウェアラブル端末２Ａは、骨伝導スピーカ２３１（図３Ｂ）に代えて、インナーイヤー型のヘッドフォン（イヤホン）２３３を有している。インナーイヤー型のヘッドフォン２３３は、筐体２７から突出して、対象者Ｕ１の外耳に挿入される。このような構成によれば、対象者Ｕ１の外耳に挿入されているインナーイヤー型のヘッドフォン２３３により、ウェアラブル端末２Ａが対象者Ｕ１の一部Ｐ１（耳）から脱落しにくい。
7A and 7B are schematic diagrams conceptually showing a structure of a
本開示における感情管理システム１は、例えば、ウェアラブル端末２及び上位システム３等に、コンピュータシステムを含んでいる。コンピュータシステムは、ハードウェアとしてのプロセッサ及びメモリを主構成とする。コンピュータシステムのメモリに記録されたプログラムをプロセッサが実行することによって、本開示における感情管理システム１としての機能が実現される。プログラムは、コンピュータシステムのメモリに予め記録されてもよく、電気通信回線を通じて提供されてもよく、コンピュータシステムで読み取り可能なメモリカード、光学ディスク、ハードディスクドライブ等の非一時的記録媒体に記録されて提供されてもよい。コンピュータシステムのプロセッサは、半導体集積回路（ＩＣ）又は大規模集積回路（ＬＳＩ）を含む１ないし複数の電子回路で構成される。ここでいうＩＣ又はＬＳＩ等の集積回路は、集積の度合いによって呼び方が異なっており、システムＬＳＩ、ＶＬＳＩ（Very Large Scale Integration）、又はＵＬＳＩ（Ultra Large Scale Integration）と呼ばれる集積回路を含む。さらに、ＬＳＩの製造後にプログラムされる、ＦＰＧＡ（Field-Programmable Gate Array）、又はＬＳＩ内部の接合関係の再構成若しくはＬＳＩ内部の回路区画の再構成が可能な論理デバイスについても、プロセッサとして採用することができる。複数の電子回路は、１つのチップに集約されていてもよいし、複数のチップに分散して設けられていてもよい。複数のチップは、１つの装置に集約されていてもよいし、複数の装置に分散して設けられていてもよい。
The
また、ウェアラブル端末２又は上位システム３における複数の機能が、１つの筐体内に集約されていることは感情管理システム１に必須の構成ではなく、ウェアラブル端末２又は上位システム３の構成要素は、複数の筐体に分散して設けられていてもよい。さらに、感情管理システム１の少なくとも一部の機能、例えば、ウェアラブル端末２又は上位システム３の一部の機能がクラウド（クラウドコンピューティング）等によって実現されてもよい。
In addition, it is not an essential configuration of the
反対に、実施形態１において、複数の装置に分散されている感情管理システム１の少なくとも一部の機能が、１つの筐体内に集約されていてもよい。例えば、ウェアラブル端末２と上位システム３とに分散されている感情管理システム１の一部の機能が、１つの筐体内に集約されていてもよい。
Conversely, in the first embodiment, at least a part of the functions of the
すなわち、そもそもウェアラブル端末２と上位システム３とが別体であることは、感情管理システム１に必須の構成ではなく、ウェアラブル端末２と上位システム３とは一体であってもよい。本開示でいう「一体」は、物理的に分離できない状態を意味し、例えば、１つの筐体に、ウェアラブル端末２及び上位システム３の構成要素が収容されることで、ウェアラブル端末２と上位システム３とが一体化される。
That is, the fact that the
また、ウェアラブル端末２は、実施形態１のような耳掛け型の端末に限らず、例えば、腕時計型（スマートウォッチ）、眼鏡型（スマートグラス）、指輪型、靴型、懐中型及びペンダント型等であってもよい。さらには、状況取得部２１がウェアラブル端末２に搭載されていることは、感情管理システム１に必須の構成ではなく、状況取得部２１は、例えば、ウェアラブル端末２以外の可搬型の端末、又は防犯カメラ等の据置型の端末に搭載されていてもよい。
In addition, the
また、感情取得部２２は、脳波センサ２２１及び脈拍センサ２２２に限らず、例えば、加速度センサ、角速度センサ、カメラ、視線センサ、ソナーセンサ、マイクロフォン、レーダ又はＬｉＤＡＲ（Light Detection and Ranging）等を含んでいてもよい。状況取得部２１についても、カメラ２１１、マイクロフォン２１２及び視線センサ２１３に限らず、例えば、加速度センサ、角速度センサ、ソナーセンサ、レーダ又はＬｉＤＡＲ等を含んでいてもよい。
The
また、端末群２０を構成する複数台のウェアラブル端末２は、共通の構成を採用していなくてもよく、例えば、少なくとも一部のウェアラブル端末２が他のウェアラブル端末２と異なる構成を採用していてもよい。具体的には、ウェアラブル端末２によって、筐体２７のサイズ及び意匠等が異なっていてもよい。
Further, the plurality of
また、感情管理システム１の一部の機能、例えば、感情取得部２２での感情情報Ｉ１の推定、又は状況取得部２１での状況情報Ｉ２の推定等の機能について、機械学習等の技術が利用されてもよい。
In addition, techniques such as machine learning are used for some functions of the
また、感情管理システム１がウェアラブル端末２を複数台備えていることは、感情管理システム１に必須の構成ではなく、感情管理システム１は少なくとも１台のウェアラブル端末２を備えていればよい。
The fact that the
また、実施形態１では、複数台のウェアラブル端末２の各々は上位システム３のみと通信可能であるが、この構成に限らず、例えば、複数台のウェアラブル端末２同士が直接的に通信可能であってもよい。この場合、例えば、２人の対象者Ｕ１が面と向かって会話している図５のような状況において、第１対象者Ｕ１１に装着されたウェアラブル端末２と、第２対象者Ｕ１２に装着されたウェアラブル端末２と、が直接的に通信することができる。ここで、変換部３１の機能がウェアラブル端末２にあれば、上位システム３を介さなくとも、感情管理システム１は、「（３．２．１）コミュニケーション支援」で説明したような機能を実現可能である。
Further, in the first embodiment, each of the plurality of
また、実施形態１では、感情管理システム１が屋外を含めて様々な場所で用いられる場合を例として説明したが、この例に限らず、感情管理システム１は特定の場所だけで用いられてもよい。例えば、住宅、事務所、店舗、工場、倉庫、建設現場、物流センタ、学校、病院、駅、空港又は駐車場等の、特定の施設にのみ感情管理システム１が導入されてもよい。
In the first embodiment, the case where the
また、ウェアラブル端末２（下位通信部２６）の通信方式は、電波を通信媒体として用いる無線通信に限らず、例えば、光を通信媒体として用いる光通信若しくは有線通信等、又はこれらの組み合わせであってもよい。同様に、上位システム３（上位通信部３５）の通信方式は、有線通信に限らず、例えば、電波を通信媒体として用いる無線通信若しくは光を通信媒体として用いる光通信等、又はこれらの組み合わせであってもよい。 The communication method of the wearable terminal 2 (the lower-level communication unit 26) is not limited to wireless communication using radio waves as a communication medium, and may be, for example, optical communication or wire communication using light as a communication medium, or a combination thereof. Is also good. Similarly, the communication method of the host system 3 (host communication unit 35) is not limited to wired communication, but may be, for example, wireless communication using radio waves as a communication medium, optical communication using light as a communication medium, or a combination thereof. You may.
（実施形態２）
本実施形態に係る感情管理システム１Ａは、図８に示すように、２人以上の対象者Ｕ１同士の出会いを演出する演出部３７を更に備える点で、実施形態１に係る感情管理システム１と相違する。以下、実施形態１と同様の構成については、共通の符号を付して適宜説明を省略する。
(Embodiment 2)
The
本実施形態では一例として、演出部３７は、上位システム３Ａに設けられている。すなわち、上位システム３Ａは、実施形態１に係る感情管理システム１の上位システム３（図２参照）の構成に加えて、演出部３７を更に備えている。
In the present embodiment, as an example, the
本実施形態では、対象者Ｕ１は複数人であることが前提となる。さらに、これら複数人の対象者Ｕ１のうち２人以上の対象者Ｕ１を一群の対象者Ｕ１とする。演出部３７は、一群の対象者Ｕ１の各々のログ情報に基づいて、一群の対象者Ｕ１が出会う確率を上げるための演出を行う。本開示でいう「一群の対象者」は、複数人の対象者Ｕ１のうち２人以上の対象者Ｕ１であって、演出部３７にて出会いを演出する対象となる対象者Ｕ１である。
In the present embodiment, it is assumed that there are a plurality of subjects U1. Furthermore, two or more target persons U1 among these plural target persons U1 are set as a group of target persons U1. The
本実施形態に係る感情管理システム１Ａによれば、２人以上の対象者Ｕ１同士の出会いを演出することが可能である。すなわち、感情管理システム１Ａによれば、対象者Ｕ１が何を見て喜んでいるのか、又は対象者Ｕ１が何を聞いて驚いているのか等が、逐一管理されているので、これらの情報から、例えば、互いに共感しそうな２人以上の対象者Ｕ１を推定可能となる。これにより、例えば、これら２人以上の対象者Ｕ１が出会う確率を上げるように何らかの演出を行うことで、２人以上の対象者Ｕ１同士の出会いを演出することが可能となる。そこで、本実施形態に係る感情管理システム１Ａは、演出部３７により、一群の対象者Ｕ１が出会う確率を上げるための演出を行う。
According to the
一例として、演出部３７は、複数人の対象者Ｕ１のうち、図９に示すように、比較的に共通項が多い２人以上の対象者Ｕ１を一群の対象者Ｕ１として、一群の対象者Ｕ１が出会う確率を上げるための演出を行う。図９は、比較的に共通項が多い２人の対象者Ｕ１が出会う場面を想定した、概念図である。以下、２人の対象者Ｕ１を区別する場合には、図９の左側の対象者Ｕ１を「第１対象者Ｕ１１」、右側の対象者Ｕ１を「第２対象者Ｕ１２」ともいう。
As an example, as shown in FIG. 9, the
すなわち、図９の例では、第１対象者Ｕ１１のログ情報から、第１対象者Ｕ１１について、読書が趣味であること、朝食がパン派であること、及びある観光地へ旅行に行ったこと、が特定可能である。一方、第２対象者Ｕ１２のログ情報からは、第２対象者Ｕ１２について、読書が趣味であること、朝食がパン派であること、及び第１対象者Ｕ１１と同じ観光地へ旅行に行ったこと、が特定可能である。このような状況において、第１対象者Ｕ１１と第２対象者Ｕ１２との間には共通項が多いため、演出部３７は、第１対象者Ｕ１１及び第２対象者Ｕ１２を一群の対象者Ｕ１として、第１対象者Ｕ１１と第２対象者Ｕ１２とが出会う確率を上げるための演出を行う。これにより、感情管理システム１Ａは、第１対象者Ｕ１１及び第２対象者Ｕ１２に、例えば、互いに有意義な出会いの機会を与えることができる。
That is, in the example of FIG. 9, from the log information of the first target person U11, the reading of the first target person U11 is that the reading is a hobby, the breakfast is bakers, and that the first target person U11 travels to a certain tourist spot. , Can be specified. On the other hand, from the log information of the second target person U12, the second target person U12 traveled to the same sightseeing spot as the first target person U11 that reading was a hobby, breakfast was bread, and the first target person U11. That is identifiable. In such a situation, since there is much in common between the first target person U11 and the second target person U12, the
ただし、演出部３７は、一群の対象者Ｕ１が出会う確率を上げるための演出を行えばよく、本実施形態では、一群の対象者Ｕ１が偶然に出会う確率を上げるだけの演出を行う。つまり、基本的には、演出部３７は、一群の対象者Ｕ１が出会うためのきっかけを与えるに過ぎず、あくまで、一群の対象者Ｕ１の各々の自主的な行動により一群の対象者Ｕ１同士が出会うようにする。言い換えれば、演出部３７は、例えば、一群の対象者Ｕ１同士の連絡先を交換する等の手段により直接的な出会いを演出するのではなく、一群の対象者Ｕ１同士の出会いを間接的に演出する。
However, the
具体的には、演出部３７は、図１０に示すように、所定空間Ｓｐ１に一群の対象者Ｕ１が同時に存在する場合に、一群の対象者Ｕ１の共通項に係るイベントを所定空間Ｓｐ１で実行することにより、一群の対象者Ｕ１が出会う確率を上げる。図１０の例では、例えば、カフェのような公共のスペースを所定空間Ｓｐ１とし、この所定空間Ｓｐ１内に偶然に居合わせた複数人の対象者Ｕ１のうち、共通項が多い２人以上の対象者Ｕ１が出会う確率を上げる場合を想定している。図１０の例では、所定空間Ｓｐ１内に偶然に居合わせた複数人の対象者Ｕ１の中に、「釣り好き」という共通項を持った一群の対象者Ｕ１１〜Ｕ１４が含まれている。
Specifically, as shown in FIG. 10, when a group of subjects U1 is simultaneously present in the predetermined space Sp1, as shown in FIG. 10, the
この状況において、演出部３７は、所定空間Ｓｐ１に設置されているディスプレイＤ１，Ｄ２のうちの一方（ここではディスプレイＤ１）に、「魚釣り」に関連する映像コンテンツを表示する。このように、演出部３７は、一群の対象者Ｕ１の共通項に係るイベント（「魚釣り」に関連する映像コンテンツの表示）を所定空間Ｓｐ１で実行することで、ディスプレイＤ１の近くに、一群の対象者Ｕ１１〜Ｕ１４が集まるきっかけを作り出す。これにより、一群の対象者Ｕ１１〜Ｕ１４は、例えば、同じ映像コンテンツを見ながら会話をすることで、お互いに「釣り好き」であることに気付き、有意義な出会いが生まれることになる。
In this situation, the
ここで、演出部３７は、さらに一群の対象者Ｕ１１〜Ｕ１４の各々が持っているグラスＧ１を、同一色に発光させる等の演出を行ってもよい。これにより、一群の対象者Ｕ１１〜Ｕ１４においては、お互いに共通項があるということに気付きやすくなり、より出会いの確率が高くなる。
Here, the
また、一群の対象者Ｕ１１〜Ｕ１４が実際に出会った後においては、感情管理システム１Ａは、一群の対象者Ｕ１１〜Ｕ１４間において、例えば、最近行った釣り場、又は最近の釣果といった、ログ情報の一部を共有してもよい。このように、ログ情報の一部を、名刺の代わりに共有することで、出会ってすぐにでも、共通の話題が見つかりやすくなる。
In addition, after the group of target persons U11 to U14 actually meet, the
特に、感情管理システム１Ａでは、対象者Ｕ１が履歴書に記載するような趣味嗜好だけでなく、例えば、対象者Ｕ１が意識せずに目で追いかけているような興味の対象についても、対象者Ｕ１の嗜好の対象として推定可能である。そのため、感情管理システム１Ａによれば、対象者Ｕ１の潜在的な嗜好も考慮した、有意義な出会いを演出することが可能である。これにより、カクテルパーティ効果のように、多くの人が集う空間においても、同じ対象に興味を持つ一群の対象者Ｕ１を見出すことが可能である。
In particular, in the
ところで、演出部３７にて出会いを演出する対象となる一群の対象者Ｕ１を決定するに際しては、例えば、目的としている出会いが優先的に演出されるように、ログ情報の項目ごとに優先度（重み付け）を加味してもよい。例えば、男女の出会いを目的とする場においては、同性同士ではなく、異性同士の出会いが優先的に演出されるように、演出部３７は、一群の対象者Ｕ１を決定する。一例として、複数人の対象者Ｕ１が「釣り好き」という共通項を持つものの、これら複数人の対象者Ｕ１が同性同士である場合には、演出部３７は、異性の対象者Ｕ１の共通項である「読書好き」に焦点を当てて、一群の対象者Ｕ１を決定する。
By the way, when deciding a group of subjects U1 to be directed to the encounter by the directing
さらに、演出部３７は、一群の対象者Ｕ１の共通項に係るイベントとして、例えば、照明を落とす等のサプライズ要素を盛り込んだイベントを所定空間Ｓｐ１で実行することで、いわゆる「吊り橋効果」も相まって、より効果的な出会いを演出することができる。
Furthermore, the directing
また、別の例として、演出部３７は、以下のような手段で演出を行ってもよい。すなわち、演出部３７は、一群の対象者Ｕ１の各々について知人をノードとする知人ネットワークが存在する場合に、一群の対象者Ｕ１の知人ネットワーク同士をつなげることにより、一群の対象者Ｕ１が出会う確率を上げてもよい。この場合でも、演出部３７は、直接的な出会いを演出するのではなく、一群の対象者Ｕ１同士の出会いを間接的に演出することができる。
Further, as another example, the
具体的には、演出部３７は、ある対象者Ｕ１の知人ネットワークのノードである「知人」と、別の対象者Ｕ１の知人ネットワークのノードである「知人」と、を出会わせることにより、間接的に、ある対象者Ｕ１と別の対象者Ｕ１との出会いを演出する。この場合、演出部３７は、知人同士の出会いについては、例えば、連絡先を交換する等の手段により直接的な出会いを演出してもよい。
More specifically, the directing
実施形態２で説明した構成（変形例を含む）は、実施形態１で説明した構成（変形例を含む）と適宜組み合わせて採用可能である。 The configuration (including the modification) described in the second embodiment can be appropriately combined with the configuration (including the modification) described in the first embodiment.
（まとめ）
以上説明したように、第１の態様に係る感情管理システム（１，１Ａ）は、感情取得部（２２）と、状況取得部（２１）と、対応付部（２４）と、を備える。感情取得部（２２）は、対象者（Ｕ１）の感情に関する感情情報（Ｉ１）を取得する。状況取得部（２１）は、感情情報（Ｉ１）を取得したときの対象者（Ｕ１）の周辺状況に関する状況情報（Ｉ２）を取得する。対応付部（２４）は、感情情報（Ｉ１）と状況情報（Ｉ２）とを対応付ける。
(Summary)
As described above, the emotion management system (1, 1A) according to the first aspect includes the emotion acquisition unit (22), the situation acquisition unit (21), and the association unit (24). The emotion acquisition unit (22) acquires emotion information (I1) on the emotion of the subject (U1). The situation acquisition unit (21) acquires situation information (I2) relating to the surrounding situation of the subject (U1) at the time of acquiring the emotion information (I1). The association unit (24) associates the emotion information (I1) with the situation information (I2).
この態様によれば、ある瞬間の対象者（Ｕ１）の感情に関する感情情報（Ｉ１）に、そのときの対象者（Ｕ１）の周辺状況に関する状況情報（Ｉ２）が対応付けられた状態で管理される。したがって、感情管理システム（１，１Ａ）によれば、例えば、単に対象者（Ｕ１）の感情を、驚き、喜び、退屈、悲しみ、恐れ、嫌悪及び愛好等に分類するだけでなく、そのときの状況も含めて、より詳細な感情の特定が可能になる。 According to this aspect, the emotion information (I1) about the emotion of the target person (U1) at a certain moment is managed in a state where the situation information (I2) about the surrounding situation of the target person (U1) at that time is associated with the emotion information (I1). You. Therefore, according to the emotion management system (1, 1A), for example, the emotions of the subject (U1) are not only classified into surprise, joy, boredom, sadness, fear, disgust, and liking, but also at that time. More detailed emotion identification, including the situation, is possible.
第２の態様に係る感情管理システム（１，１Ａ）では、第１の態様において、状況取得部（２１）は、人体の一部（Ｐ１）に装着されるウェアラブル端末（２，２Ａ）に搭載されている。 In the emotion management system (1, 1A) according to the second aspect, in the first aspect, the situation acquisition unit (21) is mounted on a wearable terminal (2, 2A) attached to a part (P1) of a human body. Have been.
この態様によれば、対象者（Ｕ１）の一部（Ｐ１）に装着されたウェアラブル端末（２，２Ａ）にて、対象者（Ｕ１）の周辺状況に関する状況情報（Ｉ２）を取得可能である。 According to this aspect, the wearable terminal (2, 2A) attached to a part (P1) of the target person (U1) can acquire the situation information (I2) relating to the surrounding state of the target person (U1). .
第３の態様に係る感情管理システム（１，１Ａ）は、第１又は２の態様において、変換部（３１）を更に備える。状況情報（Ｉ２）は、対象者（Ｕ１）が相手と会話している際における相手に関する相手情報を含む。変換部（３１）は、対応付部（２４）で対応付けられた感情情報（Ｉ１）及び状況情報（Ｉ２）に基づいて、対象者（Ｕ１）から発せられて相手に届く言葉（Ｗ１，Ｗ２）を変換する。 The emotion management system (1, 1A) according to the third aspect is the first or second aspect, further including a conversion unit (31). The situation information (I2) includes partner information on the partner when the target person (U1) is talking with the partner. The conversion unit (31), based on the emotion information (I1) and the situation information (I2) associated by the association unit (24), outputs the words (W1, W2) emitted from the subject (U1) and reaching the partner. ).
この態様によれば、対象者（Ｕ１）から発せられて相手に届く言葉（Ｗ１，Ｗ２）が、感情情報（Ｉ１）及び状況情報（Ｉ２）に基づいて変換されるので、対象者（Ｕ１）と相手とのコミュニケーションの円滑化につながる。 According to this aspect, the words (W1, W2) emitted from the target person (U1) and reaching the partner are converted based on the emotion information (I1) and the situation information (I2), so that the target person (U1) And facilitate communication with the other party.
第４の態様に係る感情管理システム（１，１Ａ）では、第３の態様において、相手情報は、対象者（Ｕ１）が相手と会話している際における、相手の反応と、会話の流れと、の少なくとも一方を含む。 In the emotion management system (1, 1A) according to the fourth aspect, in the third aspect, the partner information includes a response of the partner and a flow of the conversation when the target person (U1) is talking with the partner. , At least one of
この態様によれば、対象者（Ｕ１）から発せられて相手に届く言葉（Ｗ１，Ｗ２）が、相手の反応と、会話の流れと、の少なくとも一方に基づいて変換されるので、対象者（Ｕ１）と相手とのコミュニケーションの円滑化につながる。 According to this aspect, the words (W1, W2) emitted from the target person (U1) and reaching the partner are converted based on at least one of the reaction of the partner and the flow of the conversation. It leads to smooth communication between U1) and the other party.
第５の態様に係る感情管理システム（１，１Ａ）は、第１〜４のいずれかの態様において、対応付部（２４）で対応付けられた感情情報（Ｉ１）及び状況情報（Ｉ２）をログ情報として記録する記録部（３２）を更に備える。 An emotion management system (1, 1A) according to a fifth aspect is the emotion management system (1, 1A) according to any one of the first to fourth aspects, wherein the emotion information (I1) and the status information (I2) associated by the association unit (24) are stored. It further includes a recording unit (32) for recording as log information.
この態様によれば、ログ情報を利用して、例えば、対象者（Ｕ１）が、どのような状況において、どのような感情を抱くか、といった傾向の判断にも用いることが可能である。 According to this aspect, it is possible to use the log information to determine, for example, the tendency of the subject (U1) in what kind of situation and what kind of emotion he or she has.
第６の態様に係る感情管理システム（１，１Ａ）は、第５の態様において、ログ情報に基づいて、対象者（Ｕ１）の嗜好を反映した属性情報を生成する生成部（３３）を更に備える。 The emotion management system (1, 1A) according to a sixth aspect further includes, in the fifth aspect, a generation unit (33) that generates attribute information reflecting the preference of the target person (U1) based on the log information. Prepare.
この態様によれば、対象者（Ｕ１）の嗜好を反映した属性情報が自動的に生成可能である。 According to this aspect, the attribute information reflecting the taste of the target person (U1) can be automatically generated.
第７の態様に係る感情管理システム（１，１Ａ）は、第５又は６の態様において、ログ情報に基づいて、対象者（Ｕ１）の嗜好を反映した物品（Ｏｂ１，Ｏｂ２）を対象者（Ｕ１）に提供する提供部（３４）を更に備える。 The emotion management system (1, 1A) according to the seventh aspect is the fifth or sixth aspect, wherein the object (Ob1, Ob2) reflecting the preference of the target person (U1) is determined based on the log information. The apparatus further includes a providing unit (34) for providing to U1).
この態様によれば、対象者（Ｕ１）の嗜好を反映した物品（Ｏｂ１，Ｏｂ２）を対象者（Ｕ１）に自動的に提供可能となる。 According to this aspect, articles (Ob1, Ob2) reflecting the taste of the target person (U1) can be automatically provided to the target person (U1).
第８の態様に係る感情管理システム（１，１Ａ）は、第５〜７のいずれかの態様において、演出部（３７）を更に備える。対象者（Ｕ１）は複数人である。演出部（３７）は、複数人の対象者（Ｕ１）のうち２人以上の対象者（Ｕ１）を一群の対象者（Ｕ１）とし、一群の対象者（Ｕ１）の各々のログ情報に基づいて、一群の対象者（Ｕ１）が出会う確率を上げるための演出を行う。 An emotion management system (1, 1A) according to an eighth aspect is configured such that, in any one of the fifth to seventh aspects, a directing unit (37) is further provided. The target person (U1) is a plurality of persons. The production unit (37) sets two or more subjects (U1) of the plurality of subjects (U1) as a group of subjects (U1), and based on each log information of the group of subjects (U1). Then, an effect is performed to increase the probability that the group of subjects (U1) will meet.
この態様によれば、対象者（Ｕ１）同士の有意義な出会いの機会を演出することが可能である。 According to this aspect, it is possible to produce a meaningful encounter opportunity between the subjects (U1).
第９の態様に係る感情管理システム（１，１Ａ）では、第８の態様において、演出部（３７）は、所定空間（Ｓｐ１）に一群の対象者（Ｕ１）が同時に存在する場合に、一群の対象者（Ｕ１）の共通項に係るイベントを所定空間（Ｓｐ１）で実行する。これにより、演出部（３７）は、一群の対象者（Ｕ１）が出会う確率を上げる。 In the emotion management system (1, 1A) according to the ninth aspect, in the eighth aspect, when the group of subjects (U1) simultaneously exists in the predetermined space (Sp1), the staging unit (37) The event related to the common term of the target person (U1) is executed in the predetermined space (Sp1). Thus, the rendering unit (37) increases the probability that the group of subjects (U1) will meet.
この態様によれば、所定空間（Ｓｐ１）に存在する対象者（Ｕ１）同士の有意義な出会いの機会を演出することが可能である。 According to this aspect, it is possible to produce a meaningful encounter opportunity between the subjects (U1) existing in the predetermined space (Sp1).
第１０の態様に係る感情管理システム（１，１Ａ）では、第８又は９の態様において、演出部（３７）は、一群の対象者（Ｕ１）の各々について知人をノードとする知人ネットワークが存在する場合に、一群の対象者（Ｕ１）の知人ネットワーク同士をつなげる。これにより、演出部（３７）は、一群の対象者（Ｕ１）が出会う確率を上げる。 In the emotion management system (1, 1A) according to the tenth aspect, in the eighth or ninth aspect, the directing unit (37) has an acquaintance network having an acquaintance as a node for each of the group of subjects (U1). In this case, the acquaintance networks of the group of target persons (U1) are connected to each other. Thus, the rendering unit (37) increases the probability that the group of subjects (U1) will meet.
この態様によれば、対象者（Ｕ１）同士の有意義な出会いを間接的に演出することが可能である。 According to this aspect, it is possible to indirectly produce a meaningful encounter between the subjects (U1).
第１１の態様に係る感情管理方法は、感情取得処理と、状況取得処理と、対応付処理と、を有する。感情取得処理は、対象者（Ｕ１）の感情に関する感情情報（Ｉ１）を取得する処理である。状況取得処理は、感情情報（Ｉ１）を取得したときの対象者（Ｕ１）の周辺状況に関する状況情報（Ｉ２）を取得する処理である。対応付処理は、感情情報（Ｉ１）と状況情報（Ｉ２）とを対応付ける処理である。 An emotion management method according to an eleventh aspect includes an emotion acquisition process, a situation acquisition process, and an association process. The emotion acquisition process is a process of acquiring emotion information (I1) regarding the emotion of the target person (U1). The situation acquisition processing is processing for acquiring situation information (I2) relating to the surrounding situation of the target person (U1) at the time of acquiring the emotion information (I1). The association process is a process of associating the emotion information (I1) with the situation information (I2).
この態様によれば、ある瞬間の対象者（Ｕ１）の感情に関する感情情報（Ｉ１）に、そのときの対象者（Ｕ１）の周辺状況に関する状況情報（Ｉ２）が対応付けられた状態で管理される。したがって、感情管理方法によれば、例えば、単に対象者（Ｕ１）の感情を、驚き、喜び、退屈、悲しみ、恐れ、嫌悪及び愛好等に分類するだけでなく、そのときの状況も含めて、より詳細な感情の特定が可能になる。 According to this aspect, the emotion information (I1) about the emotion of the target person (U1) at a certain moment is managed in a state where the situation information (I2) about the surrounding situation of the target person (U1) at that time is associated with the emotion information (I1). You. Therefore, according to the emotion management method, for example, in addition to simply classifying the emotions of the subject (U1) into surprise, joy, boredom, sadness, fear, disgust, and liking, including the situation at that time, It is possible to specify emotions in more detail.
第１２の態様に係るプログラムは、１以上のプロセッサに、第１１の態様に係る感情管理方法を実行させるためのプログラムである。 A program according to a twelfth aspect is a program for causing one or more processors to execute the emotion management method according to the eleventh aspect.
この態様によれば、ある瞬間の対象者（Ｕ１）の感情に関する感情情報（Ｉ１）に、そのときの対象者（Ｕ１）の周辺状況に関する状況情報（Ｉ２）が対応付けられた状態で管理される。したがって、上記プログラムによれば、例えば、単に対象者（Ｕ１）の感情を、驚き、喜び、退屈、悲しみ、恐れ、嫌悪及び愛好等に分類するだけでなく、そのときの状況も含めて、より詳細な感情の特定が可能になる。 According to this aspect, the emotion information (I1) about the emotion of the target person (U1) at a certain moment is managed in a state where the situation information (I2) about the surrounding situation of the target person (U1) at that time is associated with the emotion information (I1). You. Therefore, according to the above-described program, for example, the emotions of the subject (U1) are not only classified into surprise, joy, boredom, sadness, fear, disgust, love, and the like, but also include the situation at that time. Detailed emotion identification becomes possible.
上記態様に限らず、実施形態１及び実施形態２に係る感情管理システム（１，１Ａ）の種々の構成（変形例を含む）は、感情管理方法又はプログラムにて具現化可能である。 Not limited to the above aspect, various configurations (including modified examples) of the emotion management system (1, 1A) according to the first and second embodiments can be embodied by an emotion management method or a program.
第２〜１０の態様に係る構成については、感情管理システム（１，１Ａ）に必須の構成ではなく、適宜省略可能である。 The configurations according to the second to tenth aspects are not essential configurations for the emotion management system (1, 1A), and can be omitted as appropriate.
１，１Ａ 感情管理システム
２，２Ａ ウェアラブル端末
２１ 状況取得部
２２ 感情取得部
２４ 対応付部
３１ 変換部
３２ 記録部
３３ 生成部
３４ 提供部
３７ 演出部
Ｉ１ 感情情報
Ｉ２ 状況情報
Ｏｂ１，Ｏｂ２ 物品
Ｐ１ 一部
Ｓｐ１ 所定空間
Ｕ１ 対象者
Ｗ１，Ｗ２ 言葉
1, 1A
Claims (12)
前記感情情報を取得したときの前記対象者の周辺状況に関する状況情報を取得する状況取得部と、
前記感情情報と前記状況情報とを対応付ける対応付部と、を備える、
感情管理システム。 An emotion acquisition unit that acquires emotion information about the emotion of the target person;
A situation acquisition unit that acquires situation information about the surrounding situation of the target person when acquiring the emotion information,
An association unit that associates the emotion information with the situation information,
Emotion management system.
請求項１に記載の感情管理システム。 The situation obtaining unit is mounted on a wearable terminal that is mounted on a part of a human body.
The emotion management system according to claim 1.
前記状況情報は、前記対象者が相手と会話している際における前記相手に関する相手情報を含み、
前記変換部は、前記対応付部で対応付けられた前記感情情報及び前記状況情報に基づいて、前記対象者から発せられて前記相手に届く言葉を変換する、
請求項１又は２に記載の感情管理システム。 Further comprising a conversion unit,
The situation information includes partner information about the partner when the target person is talking with the partner,
The conversion unit, based on the emotion information and the situation information associated with the association unit, to convert the words emitted from the target person and reach the other party,
The emotion management system according to claim 1.
請求項３に記載の感情管理システム。 The partner information includes at least one of the reaction of the partner and the flow of the conversation when the target person is talking with the partner.
The emotion management system according to claim 3.
請求項１〜４のいずれか１項に記載の感情管理システム。 The apparatus further includes a recording unit that records the emotion information and the status information associated with the association unit as log information.
The emotion management system according to claim 1.
請求項５に記載の感情管理システム。 The apparatus further includes a generation unit configured to generate attribute information reflecting tastes of the target person based on the log information,
The emotion management system according to claim 5.
請求項５又は６に記載の感情管理システム。 Based on the log information, further includes a providing unit that provides the target person with an article reflecting the taste of the target person,
The emotion management system according to claim 5.
前記複数人の対象者のうち２人以上の対象者を一群の対象者とし、前記一群の対象者の各々の前記ログ情報に基づいて、前記一群の対象者が出会う確率を上げるための演出を行う演出部を更に備える、
請求項５〜７のいずれか１項に記載の感情管理システム。 The subject is a plurality of people,
Two or more subjects among the plurality of subjects are set as a group of subjects, and based on the log information of each of the group of subjects, an effect for increasing a probability of the group of subjects meeting is provided. Further comprising a directing unit for performing,
The emotion management system according to claim 5.
請求項８に記載の感情管理システム。 The directing unit, when the group of subjects is simultaneously present in a predetermined space, by executing an event related to a common term of the group of subjects in the predetermined space, the probability that the group of subjects meet. increase,
An emotion management system according to claim 8.
請求項８又は９に記載の感情管理システム。 The directing unit, when there is an acquaintance network with an acquaintance as a node for each of the group of subjects, by connecting the acquaintance networks of the group of subjects, the probability that the group of subjects meet. increase,
The emotion management system according to claim 8.
前記感情情報を取得したときの前記対象者の周辺状況に関する状況情報を取得する状況取得処理と、
前記感情情報と前記状況情報とを対応付ける対応付処理と、を有する、
感情管理方法。 An emotion acquisition process for acquiring emotion information about the emotion of the subject;
A situation acquisition process of acquiring situation information about the surrounding situation of the subject when acquiring the emotion information,
Having an association process for associating the emotion information with the situation information,
Emotion management method.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018182932A JP2020052847A (en) | 2018-09-27 | 2018-09-27 | Emotion management system, emotion management method and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018182932A JP2020052847A (en) | 2018-09-27 | 2018-09-27 | Emotion management system, emotion management method and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2020052847A true JP2020052847A (en) | 2020-04-02 |
Family
ID=69997314
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018182932A Pending JP2020052847A (en) | 2018-09-27 | 2018-09-27 | Emotion management system, emotion management method and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2020052847A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112181152A (en) * | 2020-11-13 | 2021-01-05 | 幻蝎科技(武汉)有限公司 | Advertisement push management method, equipment and application based on MR glasses |
| JP7185802B1 (en) * | 2022-08-19 | 2022-12-07 | 太郎 山下 | Evaluation device, evaluation method and program |
-
2018
- 2018-09-27 JP JP2018182932A patent/JP2020052847A/en active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112181152A (en) * | 2020-11-13 | 2021-01-05 | 幻蝎科技(武汉)有限公司 | Advertisement push management method, equipment and application based on MR glasses |
| CN112181152B (en) * | 2020-11-13 | 2023-05-26 | 幻蝎科技(武汉)有限公司 | Advertisement pushing management method, device and application based on MR (magnetic resonance) glasses |
| JP7185802B1 (en) * | 2022-08-19 | 2022-12-07 | 太郎 山下 | Evaluation device, evaluation method and program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11327556B2 (en) | Information processing system, client terminal, information processing method, and recording medium | |
| CN109475294B (en) | Mobile and wearable video capture and feedback platform for treating mental disorders | |
| US10595072B2 (en) | Systems and methods for recognizing faces using non-facial information | |
| CN107405120B (en) | Information processing apparatus, control method, and program | |
| JP6111932B2 (en) | Action support device, action support method, program, and storage medium | |
| US20130245396A1 (en) | Mental state analysis using wearable-camera devices | |
| KR20160144305A (en) | Method and apparatus for providing content | |
| US20210161482A1 (en) | Information processing device, information processing method, and computer program | |
| CN112181152A (en) | Advertisement push management method, equipment and application based on MR glasses | |
| EP2972678A1 (en) | Wearable computing apparatus and method | |
| US20220301002A1 (en) | Information processing system, communication device, control method, and storage medium | |
| JPWO2019207896A1 (en) | Information processing system, information processing method, and recording medium | |
| CN111465949A (en) | Information processing apparatus, information processing method, and program | |
| JP7359437B2 (en) | Information processing device, program, and method | |
| JP2020052847A (en) | Emotion management system, emotion management method and program | |
| JP2018005512A (en) | Program, electronic device, information processing device and system | |
| EP3965369A1 (en) | Information processing apparatus, program, and information processing method | |
| Shoji et al. | Proposal of spoken interactive home doctor system for elderly people | |
| WO2020003293A2 (en) | Apparatus, system, and method for machine perception | |
| CN109145010A (en) | Information query method, device, storage medium and wearable device | |
| US20210082392A1 (en) | Information processing device, information processing method, and program |