JP2020137895A - Display method, program and display system - Google Patents

Display method, program and display system Download PDF

Info

Publication number
JP2020137895A
JP2020137895A JP2019036911A JP2019036911A JP2020137895A JP 2020137895 A JP2020137895 A JP 2020137895A JP 2019036911 A JP2019036911 A JP 2019036911A JP 2019036911 A JP2019036911 A JP 2019036911A JP 2020137895 A JP2020137895 A JP 2020137895A
Authority
JP
Japan
Prior art keywords
degree
mental
user
display
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019036911A
Other languages
Japanese (ja)
Other versions
JP7352789B2 (en
Inventor
晃久 奥谷
Teruhisa Okuya
晃久 奥谷
綾菜 佐藤
Ayana Sato
綾菜 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2019036911A priority Critical patent/JP7352789B2/en
Publication of JP2020137895A publication Critical patent/JP2020137895A/en
Application granted granted Critical
Publication of JP7352789B2 publication Critical patent/JP7352789B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

To provide a display method that allows a user to objectively understand user's own mental state, and to provide a program and a display system.SOLUTION: A display method includes biological information acquisition processing and display processing. The biological information acquisition processing acquires biological information related to biological activity of a user. The display processing causes a display unit 36 to display a mental degree indicating a degree of user's mental state on the basis of the biological information and analysis information where the mental degree is analyzed.SELECTED DRAWING: Figure 1

Description

本開示は、一般に表示方法、プログラム、及び表示システムに関し、より詳細にはユーザの精神状態に関する情報を表示する表示方法、プログラム、及び表示システムに関する。 The present disclosure relates generally to display methods, programs, and display systems, and more specifically to display methods, programs, and display systems that display information about a user's mental state.

従来、視聴者の心理状態を推定し、最適な状態で映像や音響を再生する再生装置が開示されている(例えば、特許文献1参照)。 Conventionally, a playback device that estimates the psychological state of a viewer and reproduces video and sound in an optimum state has been disclosed (see, for example, Patent Document 1).

特許文献1では、単一の生体情報センサにより視聴者の心理状態を推定し、推定結果により最適な状態で映像や音響を再生する。 In Patent Document 1, the psychological state of the viewer is estimated by a single biometric information sensor, and the video or sound is reproduced in the optimum state based on the estimation result.

特開2006−15046号公報Japanese Unexamined Patent Publication No. 2006-15406

特許文献1の再生装置では、ユーザは自身の精神状態を客観的に知ることができなかった。 In the reproduction device of Patent Document 1, the user could not objectively know his / her mental state.

本開示は、上記事由に鑑みてなされており、その目的は、ユーザが自身の精神状態を客観的に知ることができる表示方法、プログラム、及び表示システムを提供することにある。 The present disclosure has been made in view of the above reasons, and an object thereof is to provide a display method, a program, and a display system capable of objectively knowing one's own mental state.

本開示の一態様に係る表示方法は、生体情報取得処理と、表示処理と、を含む。前記生体情報表示処理では、ユーザの生体活動に関連する生体情報を取得する。前記表示処理では、前記生体情報に基づいた前記ユーザの精神状態の度合いを示すメンタル度、及び前記メンタル度を分析した分析情報を表示部に表示させる。 The display method according to one aspect of the present disclosure includes a biological information acquisition process and a display process. In the biological information display process, biological information related to the biological activity of the user is acquired. In the display process, the mental degree indicating the degree of the user's mental state based on the biological information and the analysis information obtained by analyzing the mental degree are displayed on the display unit.

本開示の一態様に係るプログラムは、コンピュータシステムに前記表示方法を実行させる。 The program according to one aspect of the present disclosure causes a computer system to execute the display method.

本開示の一態様に係る表示システムは、測定部と、生体情報取得部と、算出部と、分析部と、表示部と、を備える。前記測定部は、ユーザの生体活動に関連する生体情報を測定する。前記生体情報取得部は、前記測定部から前記生体情報を取得する。前記算出部は、前記生体情報に基づいた前記ユーザの精神状態の度合いを示すメンタル度を算出する。前記分析部は、前記メンタル度を分析した分析情報を生成する。前記表示部は、前記メンタル度及び前記分析情報を表示する。 The display system according to one aspect of the present disclosure includes a measurement unit, a biological information acquisition unit, a calculation unit, an analysis unit, and a display unit. The measuring unit measures biological information related to the biological activity of the user. The biometric information acquisition unit acquires the biometric information from the measurement unit. The calculation unit calculates a mental degree indicating the degree of the user's mental state based on the biological information. The analysis unit generates analysis information obtained by analyzing the mental degree. The display unit displays the mental degree and the analysis information.

本開示では、ユーザが自身の精神状態を客観的に知ることができるという効果がある。 The present disclosure has the effect that the user can objectively know his / her mental state.

図1は、本開示の一実施形態に係る表示システムのブロック図である。FIG. 1 is a block diagram of a display system according to an embodiment of the present disclosure. 図2は、同上の表示システムに用いられる二次元心理モデルである。FIG. 2 is a two-dimensional psychological model used in the same display system. 図3Aは、同上の二次元心理モデルを用いたストレス度を求めるための説明図である。図3Bは、ストレス度の時間変化を示すグラフである。FIG. 3A is an explanatory diagram for determining the degree of stress using the same two-dimensional psychological model. FIG. 3B is a graph showing the time change of the degree of stress. 図4Aは、同上の二次元心理モデルを用いたリラックス度を求めるための説明図である。図4Bは、リラックス度の時間変化を示すグラフである。FIG. 4A is an explanatory diagram for determining the degree of relaxation using the same two-dimensional psychological model. FIG. 4B is a graph showing the time change of the degree of relaxation. 図5Aは、同上の表示システムにおける表示部に表示される表示内容の一例である。図5Bは、同上の表示システムにおける表示部に表示される表示内容の別の例である。FIG. 5A is an example of the display contents displayed on the display unit in the same display system. FIG. 5B is another example of the display content displayed on the display unit in the same display system. 図6Aは、同上の表示システムにおけるコミュニケーションアプリの表示画面の一例である。図6Bは、同上の二次元心理モデル上の精神状態の種類とイラストとの対応関係を示す説明図である。FIG. 6A is an example of the display screen of the communication application in the same display system. FIG. 6B is an explanatory diagram showing the correspondence between the types of mental states on the same two-dimensional psychological model and the illustrations.

(実施形態)
本実施形態に係る表示システム1について、図1を参照して説明する。
(Embodiment)
The display system 1 according to the present embodiment will be described with reference to FIG.

本実施形態の表示システム1は、ユーザの生体情報を測定し、測定結果に基づいたメンタル度、及びメンタル度の分析情報を表示するシステムである。ユーザは、表示されたメンタル度、分析情報を確認することにより、自身の精神状態を客観的に知ることができる。 The display system 1 of the present embodiment is a system that measures the biometric information of the user and displays the mental degree and the analysis information of the mental degree based on the measurement result. The user can objectively know his / her mental state by checking the displayed mental degree and analysis information.

本開示における「生体情報」とは、ユーザの生体活動に関連する情報であって、例えば、心拍、血圧、血管径、呼吸、瞳孔径、血糖値、表情、脳波、脳血流、発汗等のデータである。 The "biological information" in the present disclosure is information related to the biological activity of the user, such as heartbeat, blood pressure, blood vessel diameter, respiration, pupil diameter, blood glucose level, facial expression, electroencephalogram, cerebral blood flow, sweating, etc. It is data.

本開示における「メンタル度」とは、ユーザの精神状態の度合いを示すパラメータであって、例えば、ユーザのストレス、リラックス、幸福、緊張等の大きさを定量化したデータである。 The "mental degree" in the present disclosure is a parameter indicating the degree of the user's mental state, and is, for example, data quantifying the magnitude of the user's stress, relaxation, happiness, tension, and the like.

本開示における「分析情報」とは、メンタル度を分析した情報であって、他ユーザのメンタル度の情報を含んでいる。 The "analytical information" in the present disclosure is information obtained by analyzing the mental degree of another user, and includes information on the mental degree of another user.

本実施形態では、一例として、育児中の母親をユーザとして想定している。育児中の母親は、例えば、適切な育児ができているかどうか不安を感じたり、育児に対するストレスを感じる場合がある。このような場合に、本実施形態の表示システム1を用いることにより、自身の精神状態を客観的に知ることによって、安心感を得たり、改善点を見出したりすることができる。なお、表示システム1は、ユーザを育児中の母親に限定するものではなく、例えば、受験生、社会人、スポーツ選手など様々な人物に適用可能である。 In this embodiment, as an example, a mother who is raising a child is assumed as a user. Mothers who are raising children may, for example, feel anxious about proper childcare or feel stressed about childcare. In such a case, by using the display system 1 of the present embodiment, it is possible to obtain a sense of security and find an improvement point by objectively knowing one's own mental state. The display system 1 is not limited to the mother who is raising a child, and can be applied to various persons such as an examinee, a member of society, and an athlete.

以下に、本実施形態の表示システム1の詳細について説明する。 The details of the display system 1 of the present embodiment will be described below.

本実施形態の表示システム1は、測定装置2と、携帯端末3と、サーバ4と、を備えている。 The display system 1 of the present embodiment includes a measuring device 2, a mobile terminal 3, and a server 4.

測定装置2は、測定部21と、通信部22と、を備えている。 The measuring device 2 includes a measuring unit 21 and a communication unit 22.

測定部21は、ユーザの生体情報を測定するように構成されている。本実施形態では、一例として、測定部21は、生体情報としてユーザの心拍(心拍数)を測定する。測定装置2は、例えばリストバンド型の光学式心拍計であり、ユーザの手首に装着されることにより、測定部21がユーザの心拍数を測定する。測定部21は、ユーザの生体情報(心拍)を比較的短い所定周期で繰り返し測定している。つまり、測定部21は、ユーザの生体情報を常時に測定している。 The measuring unit 21 is configured to measure the biometric information of the user. In the present embodiment, as an example, the measuring unit 21 measures the user's heart rate (heart rate) as biological information. The measuring device 2 is, for example, a wristband type optical heart rate monitor, and when worn on the user's wrist, the measuring unit 21 measures the user's heart rate. The measuring unit 21 repeatedly measures the user's biological information (heartbeat) in a relatively short predetermined cycle. That is, the measuring unit 21 constantly measures the biometric information of the user.

通信部22は、Wi-Fi(登録商標)、Bluetooth(登録商標)等の無線通信に対応した無線通信インターフェースである。通信部22は、携帯端末3と無線通信が可能に構成されている。 The communication unit 22 is a wireless communication interface that supports wireless communication such as Wi-Fi (registered trademark) and Bluetooth (registered trademark). The communication unit 22 is configured to enable wireless communication with the mobile terminal 3.

測定装置2は、測定部21が測定したユーザの心拍(生体情報)を、測定時の時刻情報と対応付けて、通信部22を介して携帯端末3に送信する。 The measuring device 2 transmits the user's heartbeat (biological information) measured by the measuring unit 21 to the mobile terminal 3 via the communication unit 22 in association with the time information at the time of measurement.

なお、測定装置2(測定部21)は、生体情報として心拍(心拍数)を測定するものに限らない。測定装置2(測定部21)は、例えば、ヘッドマウント式の脳波計で構成され、ユーザの頭部に装着されることにより、生体情報としてユーザの脳波を測定してもよい。また、測定装置2(測定部21)は、カメラ装置で構成され、ユーザの瞳孔径、表情などを測定するように構成されていてもよい。また、測定装置2(測定部21)は、マイク装置で構成され、ユーザの音声、呼吸音などを測定するように構成されていてもよい。また、測定装置2(測定部21)は、複数の測定装置2を備え、ユーザの複数の生体情報を測定するように構成されていてもよい。 The measuring device 2 (measuring unit 21) is not limited to measuring the heart rate (heart rate) as biological information. The measuring device 2 (measurement unit 21) may be configured by, for example, a head-mounted electroencephalograph, and may measure the user's electroencephalogram as biological information by being attached to the user's head. Further, the measuring device 2 (measuring unit 21) may be composed of a camera device and may be configured to measure the pupil diameter, facial expression, etc. of the user. Further, the measuring device 2 (measuring unit 21) may be composed of a microphone device and may be configured to measure a user's voice, breath sounds, and the like. Further, the measuring device 2 (measuring unit 21) may be provided with a plurality of measuring devices 2 and may be configured to measure a plurality of biometric information of the user.

携帯端末3は、スマートフォン、タブレット端末等のユーザが所持する端末である。携帯端末3は、処理部30、第1通信部34、第2通信部35、表示部36、操作部37、及び記憶部38を備えている。 The mobile terminal 3 is a terminal owned by a user such as a smartphone or a tablet terminal. The mobile terminal 3 includes a processing unit 30, a first communication unit 34, a second communication unit 35, a display unit 36, an operation unit 37, and a storage unit 38.

携帯端末3は、例えばプロセッサ及びメモリを有するマイクロコンピュータを有している。そして、プロセッサがメモリに格納されているプログラムを実行することにより、マイクロコンピュータが処理部30(生体情報取得部31、行動情報取得部32、及び表示制御部33)として機能する。プロセッサが実行するプログラムは、ここではマイクロコンピュータのメモリに予め記録されているが、メモリカード等の非一時的な記録媒体に記録されて提供されてもよいし、インターネット等の電気通信回線を通じて提供されてもよい。 The mobile terminal 3 has, for example, a microcomputer having a processor and a memory. Then, when the processor executes the program stored in the memory, the microcomputer functions as the processing unit 30 (biological information acquisition unit 31, behavior information acquisition unit 32, and display control unit 33). The program executed by the processor is pre-recorded in the memory of the microcomputer here, but may be recorded in a non-temporary recording medium such as a memory card and provided, or provided through a telecommunications line such as the Internet. May be done.

第1通信部34は、通信インターフェースであり、測定装置2の通信部22と通信可能に構成されている。本実施形態では、第1通信部34は、Bluetooth(登録商標)に準拠した無線通信を通信部22との間で行うように構成されている。 The first communication unit 34 is a communication interface and is configured to be able to communicate with the communication unit 22 of the measuring device 2. In the present embodiment, the first communication unit 34 is configured to perform wireless communication conforming to Bluetooth (registered trademark) with the communication unit 22.

第2通信部35は、通信インターフェースであり、サーバ4と通信可能に構成されている。本実施形態では、第2通信部35は、Wi-Fi(登録商標)に準拠した無線通信規格に対応しており、ルータ、ゲートウェイ端末等を介して、インターネットのような公衆のネットワーク5に通信接続が可能である。第2通信部35は、ネットワーク5を介してサーバ4と通信可能に構成されている。なお、第2通信部35は、移動体通信により、ネットワーク5を介してサーバ4と通信するように構成されていてもよい。 The second communication unit 35 is a communication interface and is configured to be able to communicate with the server 4. In the present embodiment, the second communication unit 35 corresponds to a wireless communication standard compliant with Wi-Fi (registered trademark), and communicates with a public network 5 such as the Internet via a router, a gateway terminal, or the like. Connection is possible. The second communication unit 35 is configured to be able to communicate with the server 4 via the network 5. The second communication unit 35 may be configured to communicate with the server 4 via the network 5 by mobile communication.

携帯端末3は、タッチパネルディスプレイを備えており、タッチパネルディスプレイが表示部36と操作部37とを兼ねている。表示部36は、例えば液晶ディスプレイである。操作部37は、例えばタッチパッドであり、ユーザからの操作を受け付ける。 The mobile terminal 3 is provided with a touch panel display, and the touch panel display also serves as a display unit 36 and an operation unit 37. The display unit 36 is, for example, a liquid crystal display. The operation unit 37 is, for example, a touch pad and receives an operation from the user.

処理部30は、生体情報取得部31、行動情報取得部32、及び表示制御部33を有する。 The processing unit 30 includes a biological information acquisition unit 31, a behavior information acquisition unit 32, and a display control unit 33.

生体情報取得部31は、第1通信部34を介して測定装置2から測定部21の測定結果(ユーザの生体情報)を取得する生体情報取得処理を行うように構成されている。生体情報取得部31は、取得した生体情報を、第2通信部35を介してサーバ4に送信する。つまり、生体情報取得部31は、測定装置2から取得した生体情報をサーバ4に転送する。 The biometric information acquisition unit 31 is configured to perform biometric information acquisition processing for acquiring the measurement result (user's biometric information) of the measurement unit 21 from the measurement device 2 via the first communication unit 34. The biometric information acquisition unit 31 transmits the acquired biometric information to the server 4 via the second communication unit 35. That is, the biometric information acquisition unit 31 transfers the biometric information acquired from the measuring device 2 to the server 4.

記憶部38は、ROM(Read Only Memory)、RAM(Random Access Memory)、又はEEPROM(Electrically Erasable Programmable Read Only Memory)等から選択される記憶デバイスで構成される。記憶部38には、ユーザの行動予定が記憶されている。例えば、携帯端末3には、スケジュール管理のアプリケーション(アプリ)がインストールされており、ユーザが当該アプリに入力した行動予定が記憶部38に記憶される。なお、アプリに入力された行動予定は、クラウドサーバ等に記憶されていてもよい。 The storage unit 38 is composed of a storage device selected from a ROM (Read Only Memory), a RAM (Random Access Memory), an EEPROM (Electrically Erasable Programmable Read Only Memory), and the like. The storage unit 38 stores the user's action schedule. For example, a schedule management application (application) is installed in the mobile terminal 3, and the action schedule entered by the user in the application is stored in the storage unit 38. The action schedule entered in the application may be stored in a cloud server or the like.

行動情報取得部32は、ユーザの行動情報を取得する行動情報取得処理を行うように構成されている。本開示における「行動情報」とは、ユーザの行動に関する情報である。例えば、行動情報は、ユーザが行った、食事、運動、読書、睡眠等の行動の内容、及びその行動を行っている時刻(時間帯)を示す情報である。行動情報取得部32は、ユーザの行動予定が記憶されている記憶部44(又はクラウドサーバ)を参照することにより、ユーザの行動情報を取得する。行動情報取得部32は、取得した行動情報を、第2通信部35を介してサーバ4に送信する。 The action information acquisition unit 32 is configured to perform an action information acquisition process for acquiring the user's action information. The "behavioral information" in the present disclosure is information regarding the behavior of the user. For example, the behavior information is information indicating the content of the behavior such as eating, exercising, reading, and sleeping performed by the user, and the time (time zone) in which the behavior is performed. The action information acquisition unit 32 acquires the user's action information by referring to the storage unit 44 (or cloud server) in which the user's action schedule is stored. The action information acquisition unit 32 transmits the acquired action information to the server 4 via the second communication unit 35.

なお、行動情報取得部32は、ユーザの行動を推定する推定部から行動情報を取得するように構成されていてもよい。推定部は、携帯端末3のプロセッサがメモリに格納されているプログラムを実行することにより、マイクロコンピュータが推定部として機能する。推定部は、例えば、携帯端末3が備えるマイク、カメラ、加速度センサ、GPS(Global Positioning System)等の出力に基づいて、ユーザの行動を推定し、推定結果を行動情報取得部32に出力する。なお、マイク、カメラ、加速度センサ、GPS等は、携帯端末3と通信可能な別のデバイスに設けられていてもよい。例えば、加速度センサは、ユーザが装着しているウェアラブル端末に設けられていてもよい。 The behavior information acquisition unit 32 may be configured to acquire behavior information from an estimation unit that estimates the user's behavior. In the estimation unit, the processor of the mobile terminal 3 executes a program stored in the memory, so that the microcomputer functions as the estimation unit. The estimation unit estimates the user's behavior based on the output of the microphone, camera, acceleration sensor, GPS (Global Positioning System), etc. included in the mobile terminal 3, and outputs the estimation result to the behavior information acquisition unit 32. The microphone, camera, acceleration sensor, GPS, etc. may be provided in another device capable of communicating with the mobile terminal 3. For example, the acceleration sensor may be provided on the wearable terminal worn by the user.

表示制御部33は、表示部36を制御する表示処理を行うように構成されている。表示制御部33は、第2通信部35を介してサーバ4から受信したデータ(メンタル度、分析情報)を表示部36に表示させる。表示部36の表示内容については、後述する。 The display control unit 33 is configured to perform display processing for controlling the display unit 36. The display control unit 33 causes the display unit 36 to display the data (mental degree, analysis information) received from the server 4 via the second communication unit 35. The display content of the display unit 36 will be described later.

サーバ4は、通信部41、算出部42、分析部43、及び記憶部44を備えている。 The server 4 includes a communication unit 41, a calculation unit 42, an analysis unit 43, and a storage unit 44.

サーバ4は、例えばプロセッサ及びメモリを有するマイクロコンピュータを有している。そして、プロセッサがメモリに格納されているプログラムを実行することにより、マイクロコンピュータが算出部42、及び分析部43として機能する。プロセッサが実行するプログラムは、ここではマイクロコンピュータのメモリに予め記録されているが、メモリカード等の非一時的な記録媒体に記録されて提供されてもよいし、インターネット等の電気通信回線を通じて提供されてもよい。 The server 4 has, for example, a microcomputer having a processor and memory. Then, when the processor executes the program stored in the memory, the microcomputer functions as the calculation unit 42 and the analysis unit 43. The program executed by the processor is pre-recorded in the memory of the microcomputer here, but may be recorded in a non-temporary recording medium such as a memory card and provided, or provided through a telecommunications line such as the Internet. May be done.

通信部41は、通信インターフェースであり、携帯端末3(の第2通信部35)と通信可能に構成されている。通信部41は、ネットワーク5を介して第2通信部35と通信可能に構成されている。 The communication unit 41 is a communication interface, and is configured to be able to communicate with the mobile terminal 3 (second communication unit 35). The communication unit 41 is configured to be able to communicate with the second communication unit 35 via the network 5.

算出部42は、通信部41を介して受信した生体情報に基づいてユーザの精神状態の度合いを示すメンタル度を算出する。言い換えれば、算出部42は、生体情報取得部31が取得した生体情報に基づいて、ユーザの精神状態の度合いを示すメンタル度を算出する。 The calculation unit 42 calculates the mental degree indicating the degree of the user's mental state based on the biological information received via the communication unit 41. In other words, the calculation unit 42 calculates the mental degree indicating the degree of the user's mental state based on the biological information acquired by the biological information acquisition unit 31.

ここで、精神状態は、例えば、快適度及び覚醒度を指標とした二次元心理モデル(たとえばラッセルの円環モデル)によって表すことができる(図2参照)。快適度とは、快適状態のレベルを示す指標である。覚醒度とは、覚醒状態のレベルを示す指標である。図2に示す二次元心理モデルでは、X軸(快適軸)が快適度を示し、Y軸(覚醒軸)が覚醒度を示している。X軸の快適度は、X軸の正領域が「快」であり、X軸の負領域が「不快」である。快適度は、X軸の正領域でのレベル(絶対値)が大きくなるほど快適度が増加し、X軸の負領域でのレベル(絶対値)が大きくなるほど不快度が増加(快適度が減少)する。Y軸の覚醒度は、Y軸の正領域が「覚醒」であり、Y軸の負領域が「鎮静」である。覚醒度は、Y軸の正領域でのレベル(絶対値)が大きくなるほど覚醒度が増加し、Y軸の負領域でのレベル(絶対値)が大きくなるほど鎮静度が増加(覚醒度が減少)する。 Here, the mental state can be represented by, for example, a two-dimensional psychological model (for example, Russell's ring model) using comfort and alertness as indexes (see FIG. 2). Comfort is an index showing the level of comfort. Alertness is an index that indicates the level of alertness. In the two-dimensional psychological model shown in FIG. 2, the X-axis (comfort axis) indicates the comfort level, and the Y-axis (awakening axis) indicates the arousal level. As for the comfort level of the X-axis, the positive region of the X-axis is "pleasant" and the negative region of the X-axis is "unpleasant". The comfort level increases as the level (absolute value) in the positive region of the X-axis increases, and the discomfort level increases (comfort decreases) as the level (absolute value) in the negative region of the X-axis increases. To do. Regarding the arousal level of the Y-axis, the positive region of the Y-axis is "awakening" and the negative region of the Y-axis is "sedation". The arousal level increases as the level (absolute value) in the positive region of the Y-axis increases, and the sedation level increases as the level (absolute value) in the negative region of the Y-axis increases (the arousal level decreases). To do.

また、図2の二次元心理モデルでは、精神状態の種類とその種類に対応する基準点が示されている。精神状態の種類とは、例えば、興奮、幸福、安心、眠気、憂鬱、悲しみ、不満、怒り等である。二次元心理モデル上における、快適度及び覚醒度を座標軸とした二次元パラメータで表される精神評価点の位置(座標)に応じて、精神状態がどのような状態(種類)であり、さらにその状態の度合いが表される。二次元心理モデル上において、複数の基準点のうち、精神評価点に最も近い基準点に対応する種類が、ユーザの精神状態を表している。例えば、精神評価点に最も近い基準点に対応する種類が「リラックス」である場合、ユーザの精神状態がリラックス状態であることを示している。また、精神評価点と、リラックスの基準点との距離が短いほど、リラックス状態の度合いが高い、つまり、よりリラックスした状態であることを示している。 Further, in the two-dimensional psychological model of FIG. 2, the types of mental states and the reference points corresponding to the types are shown. The types of mental states are, for example, excitement, happiness, relief, drowsiness, depression, sadness, dissatisfaction, anger, and the like. What kind of state (type) is the mental state according to the position (coordinates) of the mental evaluation points represented by the two-dimensional parameters with the comfort level and the arousal level as the coordinate axes on the two-dimensional psychological model, and further Shows the degree of condition. On the two-dimensional psychological model, the type corresponding to the reference point closest to the mental evaluation point among the plurality of reference points represents the mental state of the user. For example, when the type corresponding to the reference point closest to the mental evaluation point is "relaxed", it indicates that the user's mental state is relaxed. In addition, the shorter the distance between the mental evaluation point and the reference point for relaxation, the higher the degree of relaxation, that is, the more relaxed the state.

算出部42は、通信部41を介して受信した生体情報を用いて、快適度及び覚醒度を算出する。つまり、算出部42は、生体情報に基づいて、二次元心理モデルにおける快適軸及び覚醒軸を座標軸とする二次元パラメータとして精神評価点を求める。そして、算出部42は、求めた二次元パラメータ(精神評価点)を一次元化することによりメンタル度を算出する。 The calculation unit 42 calculates the comfort level and the arousal level using the biometric information received via the communication unit 41. That is, the calculation unit 42 obtains the mental evaluation point as a two-dimensional parameter having the comfort axis and the awakening axis as the coordinate axes in the two-dimensional psychological model based on the biological information. Then, the calculation unit 42 calculates the mental degree by making the obtained two-dimensional parameter (mental evaluation point) one-dimensional.

具体的には、算出部42は、算出対象のメンタル度に対応する精神状態の種類に基づいて、メンタル度の指標とする座標軸(基準座標軸とする)を決定する。この基準座標軸は、二次元心理モデルにおいて、算出対象のメンタル度に対応する精神状態の種類の基準点と、快適軸及び覚醒軸の交点Oと、を通る軸である。算出部42は、精神評価点を通って基準座標軸と直交する垂線が基準座標軸と交差する交点を、メンタル度として算出する。メンタル度の大きさは、基準点と交点との間の距離に応じて求まる。基準座標軸において、基準点に近いほどメンタル度が大きい。つまり、算出部42は、二次元パラメータである精神評価点を、快適軸とか覚醒軸との交点Oを通る軸を座標軸とする一次元パラメータに変換する一次元化することにより、メンタル度を算出する。 Specifically, the calculation unit 42 determines a coordinate axis (referred to as a reference coordinate axis) as an index of the mental degree based on the type of the mental state corresponding to the mental degree of the calculation target. This reference coordinate axis is an axis that passes through the reference point of the type of mental state corresponding to the mental degree of the calculation target and the intersection O of the comfort axis and the arousal axis in the two-dimensional psychological model. The calculation unit 42 calculates the intersection of the perpendicular line orthogonal to the reference coordinate axis passing through the mental evaluation point and intersecting the reference coordinate axis as the mental degree. The magnitude of the mental degree is obtained according to the distance between the reference point and the intersection. In the reference coordinate axis, the closer to the reference point, the greater the mental degree. That is, the calculation unit 42 calculates the mental degree by converting the mental evaluation point, which is a two-dimensional parameter, into a one-dimensional parameter whose coordinate axis is the axis passing through the intersection O of the comfort axis and the awakening axis. To do.

例えば、図3A、図3Bを参照して、算出対象のメンタル度に対応する精神状態の種類が「ストレス」である場合について説明する。この場合、二次元心理モデルにおける「ストレス」に対応する基準点P10が、快適軸上に存在しているので、基準座標軸Z1が快適軸と重なる。ここでは、一例として、時刻t1〜t4の精神評価点がそれぞれP1、P2、P3、及びP4であるとする。精神評価点P1は、快適度及び覚醒度の両方が正である。精神評価点P2は、快適度が正であり、覚醒度が負である。精神評価点P3は、快適度及び覚醒度の両方が負である。精神評価点P4は、快適度が負であり、覚醒度が正である。 For example, with reference to FIGS. 3A and 3B, a case where the type of mental state corresponding to the mental degree of the calculation target is “stress” will be described. In this case, since the reference point P10 corresponding to "stress" in the two-dimensional psychological model exists on the comfort axis, the reference coordinate axis Z1 overlaps with the comfort axis. Here, as an example, it is assumed that the mental evaluation points at times t1 to t4 are P1, P2, P3, and P4, respectively. Psychological evaluation point P1 is positive in both comfort and alertness. The mental evaluation point P2 has a positive comfort level and a negative arousal level. Psychological evaluation point P3 is negative in both comfort and alertness. The mental evaluation point P4 has a negative comfort level and a positive arousal level.

基準座標軸Z1において、精神評価点P1〜P4それぞれを通る垂線が交差する点M11〜M14が、それぞれ時刻t1〜t4のメンタル度(ストレス度ともいう)である。ストレス度は、大きい順にM14、M13、M11、M12である(M14>M13>M11>M12)。図3Bに示すように、ストレス度は、時刻t1から時刻t2では一旦低下しているが、その後増加している。 On the reference coordinate axis Z1, the points M11 to M14 where the perpendiculars passing through the mental evaluation points P1 to P4 intersect are the mental degrees (also referred to as stress degrees) at times t1 to t4, respectively. The degree of stress is M14, M13, M11, M12 in descending order (M14> M13> M11> M12). As shown in FIG. 3B, the degree of stress decreased once from time t1 to time t2, but then increased thereafter.

別の例として、図4A、図4Bを参照して、算出対象のメンタル度に対応する精神状態の種類が「リラックス」である場合について説明する。この場合、二次元心理モデルにおける「リラックス」に対応する基準点P11と、快適軸及び覚醒軸の交点Oとを通る軸が基準座標軸Z2となる。 As another example, a case where the type of mental state corresponding to the mental degree to be calculated is "relaxed" will be described with reference to FIGS. 4A and 4B. In this case, the axis passing through the reference point P11 corresponding to "relaxation" in the two-dimensional psychological model and the intersection O of the comfort axis and the awakening axis is the reference coordinate axis Z2.

基準座標軸Z2において、精神評価点P1〜P4それぞれを通る垂線が交差する点M21〜M24が、それぞれ時刻t1〜t4のメンタル度(リラックス度ともいう)である。リラックス度は、大きい順にM22、M23、M21、M24である(M22>M23>M21>M24)。図4Bに示すように、リラックス度は、時刻t1から時刻t2では一旦増加し、その後低下している。 On the reference coordinate axis Z2, points M21 to M24 where the perpendiculars passing through the mental evaluation points P1 to P4 intersect are mental degrees (also referred to as relaxation degrees) at times t1 to t4, respectively. The degree of relaxation is M22, M23, M21, M24 in descending order (M22> M23> M21> M24). As shown in FIG. 4B, the degree of relaxation increases once from time t1 to time t2 and then decreases.

ここでは、精神状態の種類がストレス、リラックスの場合を例に説明したが、他の種類のメンタル度も上記同様に算出することができる。 Here, the case where the type of mental state is stress or relaxation has been described as an example, but other types of mental degree can be calculated in the same manner as described above.

算出部42は、精神状態に基づいて算出したメンタル度のデータを、通信部41を介して携帯端末3に送信する。 The calculation unit 42 transmits the mental degree data calculated based on the mental state to the mobile terminal 3 via the communication unit 41.

また、算出部42は、複数のユーザそれぞれのメンタル度についても、上記同様に算出している。算出部42は、算出した複数のユーザそれぞれのメンタル度のデータを、ユーザの識別情報に対応付けて記憶部44に記憶する。 Further, the calculation unit 42 also calculates the mental degree of each of the plurality of users in the same manner as described above. The calculation unit 42 stores the calculated mental degree data of each of the plurality of users in the storage unit 44 in association with the user identification information.

記憶部44は、HDD(Hard Disk Drive)、SSD(Solid State Drive)等から選択される記憶デバイスで構成されている。記憶部44には、複数のユーザそれぞれのメンタル度のデータを記憶する。さらに記憶部44は、携帯端末3から送信された行動情報をユーザの識別情報に対応付けて記憶する。つまり、記憶部44は、複数のユーザそれぞれのメンタル度及び行動情報を時刻情報に対応付けて記憶する。 The storage unit 44 is composed of a storage device selected from an HDD (Hard Disk Drive), an SSD (Solid State Drive), and the like. The storage unit 44 stores data on the mental degree of each of the plurality of users. Further, the storage unit 44 stores the action information transmitted from the mobile terminal 3 in association with the user's identification information. That is, the storage unit 44 stores the mental degree and action information of each of the plurality of users in association with the time information.

分析部43は、算出部42が算出したメンタル度を分析した分析情報を生成するように構成されている。具体的には、分析部43は、ユーザのメンタル度と比較するための、他ユーザのメンタル度のデータを、分析情報として生成する。分析部43は、記憶部44に記憶されている複数のユーザのメンタル度のデータを参照し、単位時間ごと(例えば1時間ごと)の複数のユーザのメンタル度の平均値、及び標準偏差(2σ)を算出する。そして、分析部43は、複数の他ユーザのメンタル度の代表データとして、正規分布データを生成する。正規分布データは、単位時間ごとに、メンタル度の平均値に標準偏差(2σ)を足した値を上限値、メンタル度の平均値から標準偏差(2σ)を引いた値を下限値とするデータである。なお、標準偏差は2σに限らず、σ又は3σであってもよい。また、代表データには、他ユーザのメンタル度の中央値、最頻値等が含まれていてもよい。 The analysis unit 43 is configured to generate analysis information obtained by analyzing the mental degree calculated by the calculation unit 42. Specifically, the analysis unit 43 generates data of the mental degree of another user as analysis information for comparison with the mental degree of the user. The analysis unit 43 refers to the data of the mental degrees of the plurality of users stored in the storage unit 44, and refers to the average value and the standard deviation (2σ) of the mental degrees of the plurality of users for each unit time (for example, every hour). ) Is calculated. Then, the analysis unit 43 generates normal distribution data as representative data of the mental degree of the plurality of other users. The normal distribution data is data in which the upper limit is the value obtained by adding the standard deviation (2σ) to the average value of the mental degree and the lower limit is the value obtained by subtracting the standard deviation (2σ) from the average value of the mental degree for each unit time. Is. The standard deviation is not limited to 2σ, but may be σ or 3σ. In addition, the representative data may include the median value, mode value, etc. of the mental degree of another user.

ここでは、分析部43は、他ユーザとして、ユーザと同じような属性を有する人物を選択することが好ましい。ここでいう「属性」とは、性別、年齢(年代)、職業、未婚・既婚、子供の年齢等である。本実施形態では、ユーザとして育児中の母親を想定しているため、分析部43は、他ユーザとして育児中の母親を選択して、分析情報を生成する。 Here, it is preferable that the analysis unit 43 selects a person having the same attributes as the user as another user. The "attribute" here means gender, age (age), occupation, unmarried / married, age of child, etc. In the present embodiment, since a mother who is raising a child is assumed as a user, the analysis unit 43 selects a mother who is raising a child as another user and generates analysis information.

分析部43は、生成した分析情報(正規分布データ)を、通信部41を介して携帯端末3に送信する。 The analysis unit 43 transmits the generated analysis information (normal distribution data) to the mobile terminal 3 via the communication unit 41.

携帯端末3では、表示制御部33は、サーバ4から送信されたメンタル度、及び分析情報を表示部36に表示させる表示処理を行う。図5Aに、表示制御部33が表示部36に表示させる表示内容の一例を示す。図5Aでは、メンタル度としてストレス度を表示している。 In the mobile terminal 3, the display control unit 33 performs display processing for displaying the mental degree and analysis information transmitted from the server 4 on the display unit 36. FIG. 5A shows an example of display contents to be displayed on the display unit 36 by the display control unit 33. In FIG. 5A, the stress degree is displayed as the mental degree.

図5Aに示すように、表示制御部33は、メンタル度、及び分析情報を時系列で表示する。表示制御部33は、ユーザのメンタル度のグラフD1と、分析情報のグラフ、具体的には平均値のグラフD20、上限値のグラフD21、及び下限値のグラフD22と、をまとめて表示部36に表示させている。 As shown in FIG. 5A, the display control unit 33 displays the mental degree and the analysis information in chronological order. The display control unit 33 collectively displays a graph D1 of the user's mentality, a graph of analysis information, specifically, a graph D20 of an average value, a graph D21 of an upper limit value, and a graph D22 of a lower limit value. It is displayed in.

したがって、ユーザは、自身のメンタル度(グラフD1)と、他ユーザのメンタル度(グラフD20〜D22)とを容易に比較することができ、自身の精神状態を客観的に知ることができる。例えば、ユーザのメンタル度が、正規分布データに含まれていれば、ユーザは、子育てで感じているストレスを、他ユーザも同様に感じていることを知ることができ、安心感、自己肯定感等を得ることができる。 Therefore, the user can easily compare his / her own mental degree (graph D1) with the mental degree of another user (graphs D20 to D22), and can objectively know his / her mental state. For example, if the user's mentality is included in the normal distribution data, the user can know that the stress felt by child-rearing is also felt by other users, and a sense of security and self-affirmation. Etc. can be obtained.

また、表示部36には、メンタル度の変化が時系列で表示されている。そのため、ユーザは、例えば、どのような時間帯にストレスが大きくなり、どのような時間帯にストレスが小さくなっているかを把握することができる。 Further, the display unit 36 displays changes in the mental degree in chronological order. Therefore, the user can grasp, for example, in what time zone the stress increases and in what time zone the stress decreases.

さらに、表示制御部33は、メンタル度と共にユーザの行動情報を時系列で表示部36に表示させる。これにより、ユーザは、自身の行動とメンタル度との関係を把握することができる。そのため、ユーザは、例えば、どのような行動を行っているときにストレスが大きくなり、どのような行動を行っているときにストレスが小さくなるかを把握することできる。 Further, the display control unit 33 causes the display unit 36 to display the user's behavior information together with the mental degree in chronological order. As a result, the user can grasp the relationship between his / her behavior and the mental degree. Therefore, the user can grasp, for example, what kind of action the stress increases and what kind of action the user takes less stress.

また、図5Bに示すように、表示制御部33は、ユーザによる操作部37への操作内容に応じて、分析情報として他ユーザのメンタル度及び行動情報を表示部36に表示させる。具体的には、表示制御部33は、正規分布データの対象となった複数の他ユーザのうち、一人の他ユーザのメンタル度及び行動情報を表示部36に表示させる。例えば、表示制御部33は、メンタル度のグラフの表示画面において、ユーザによって選択(例えばタッチパネルディスプレイのタップ)された任意の点を通る、他ユーザのメンタル度のグラフD3、及び当該他ユーザの行動情報を表示部36に表示させる(図5B参照)。図5Bは、ユーザが、正規分布データの下限値のグラフD22上の点S1をタップした場合の表示画面の例であって、この点S1を通る、他ユーザのメンタル度のグラフD3、及び当該他ユーザの行動情報が表示されている。 Further, as shown in FIG. 5B, the display control unit 33 causes the display unit 36 to display the mental degree and action information of another user as analysis information according to the operation content of the operation unit 37 by the user. Specifically, the display control unit 33 causes the display unit 36 to display the mental degree and behavior information of one other user among the plurality of other users who are the targets of the normal distribution data. For example, the display control unit 33 passes through an arbitrary point selected by the user (for example, a tap on the touch panel display) on the display screen of the graph of the mental degree, the graph D3 of the mental degree of another user, and the behavior of the other user. The information is displayed on the display unit 36 (see FIG. 5B). FIG. 5B is an example of a display screen when the user taps a point S1 on the graph D22 of the lower limit value of the normal distribution data, and the graph D3 of the mental degree of another user passing through this point S1 and the corresponding The behavior information of other users is displayed.

これにより、ユーザは、例えば、メンタル度が比較的低い他ユーザの行動を参考に、自身の行動を見直すことができ、精神状態の改善を図ることができる。また、ユーザが、メンタル度が比較的高い他ユーザの行動を参考にした場合、どのような行動を行った場合にメンタル度が悪化するかを知ることができる。 As a result, the user can, for example, review his / her own behavior with reference to the behavior of another user having a relatively low mental degree, and can improve the mental state. In addition, when the user refers to the behavior of another user having a relatively high mental degree, it is possible to know what kind of behavior the user takes to deteriorate the mental degree.

また、図5A、図5Bに示す例では、メンタル度としてストレス度を表示しているが、他の種類のメンタル度(例えば、リラックス度、興奮度、怒り度等)を表示してもよい。表示部36に表示されるメンタル度の種類は、ユーザによる操作部37への操作によって適宜選択可能である。 Further, in the examples shown in FIGS. 5A and 5B, the stress degree is displayed as the mental degree, but other types of mental degree (for example, relaxation degree, excitement degree, anger degree, etc.) may be displayed. The type of mental degree displayed on the display unit 36 can be appropriately selected by the user's operation on the operation unit 37.

また、本実施形態では、携帯端末3にコミュニケーションアプリ(アプリケーション)がインストールされている。コミュニケーションアプリとは、他者の携帯端末3との間で、メッセージ、画像(写真、イラスト、動画)等をやりとりするためのプログラムである。コミュニケーションアプリは、携帯端末3の処理部30において実行される。 Further, in the present embodiment, the communication application (application) is installed on the mobile terminal 3. The communication application is a program for exchanging messages, images (photographs, illustrations, videos) and the like with another person's mobile terminal 3. The communication application is executed in the processing unit 30 of the mobile terminal 3.

図6Aにコミュニケーションアプリでの画面の一例を示す。 FIG. 6A shows an example of a screen in the communication application.

図6Aに示す例では、ユーザと、○○さんとの、メッセージ交換を行っている。図6Aでは、ユーザの発言が右側に表示され、○○さんの発言が左側に表示されている。○○さんがユーザに対して「元気?」と発言した後、ユーザが「元気だよ!」と返事をしている。 In the example shown in FIG. 6A, a message is exchanged between the user and Mr. XX. In FIG. 6A, the user's remark is displayed on the right side, and Mr. XX's remark is displayed on the left side. After Mr. ○○ said to the user, "How are you?", The user replied, "I'm fine!".

ここで、本実施形態の携帯端末3では、コミュニケーションアプリにおいて、ユーザの現在の精神状態を表す表情のイラスト(スタンプ)を送信する機能を有している。処理部30は、コミュニケーションアプリにおいて、ユーザが、現在の精神状態に近いイラストを送信するための操作(例えばボタン選択等)を行った場合、複数のイラストのうち、ユーザの現在の精神状態に近い状態を表すイラストを選択する。具体的には、図6Bに示すように、複数のイラストは、二次元心理モデル上の精神状態の種類に対応付けられている。処理部30は、算出部42が算出した精神評価点を取得し、精神評価点に基づいて、複数のイラストのうち、精神評価点に最も近いイラストを選択する。そして、処理部30は、コミュニケーションアプリにおいて、選択したイラスト(図6AではA1)を送信する。 Here, the mobile terminal 3 of the present embodiment has a function of transmitting an illustration (stamp) of a facial expression representing the current mental state of the user in the communication application. When the user performs an operation (for example, button selection) for transmitting an illustration close to the current mental state in the communication application, the processing unit 30 is close to the user's current mental state among the plurality of illustrations. Select an illustration that represents the state. Specifically, as shown in FIG. 6B, the plurality of illustrations are associated with the types of mental states on the two-dimensional psychological model. The processing unit 30 acquires the mental evaluation points calculated by the calculation unit 42, and selects the illustration closest to the mental evaluation points from the plurality of illustrations based on the mental evaluation points. Then, the processing unit 30 transmits the selected illustration (A1 in FIG. 6A) in the communication application.

これにより、ユーザは、複数のイラストから自身の精神状態に近いイラストを選択する手間を省くことができる。 As a result, the user can save the trouble of selecting an illustration close to his / her mental state from a plurality of illustrations.

上記実施形態は、本開示の様々な実施形態の一つに過ぎない。上記実施形態は、本開示の目的を達成できれば、設計等に応じて種々の変更が可能である。 The above embodiment is only one of the various embodiments of the present disclosure. The above-described embodiment can be changed in various ways depending on the design and the like as long as the object of the present disclosure can be achieved.

表示システム1と同様の機能は、表示方法、コンピュータプログラム、又はプログラムを記録した非一時的な記録媒体等で具現化されてもよい。一態様に係る表示方法は、生体情報取得処理と、表示処理と、を含む。生体情報表示処理では、ユーザの生体活動に関連する生体情報を取得する。表示処理では、生体情報に基づいたユーザの精神状態の度合いを示すメンタル度、及びメンタル度を分析した分析情報を表示部36に表示させる。一態様に係る(コンピュータ)プログラムは、コンピュータシステムに、上記の表示方法を実行させるためのプログラムである。 The same function as that of the display system 1 may be realized by a display method, a computer program, a non-temporary recording medium on which the program is recorded, or the like. The display method according to one aspect includes a biological information acquisition process and a display process. In the biological information display process, biological information related to the biological activity of the user is acquired. In the display process, the display unit 36 displays the mental degree indicating the degree of the user's mental state based on the biological information and the analysis information obtained by analyzing the mental degree. The (computer) program according to one aspect is a program for causing a computer system to execute the above display method.

本開示における表示システム1は、コンピュータシステムを含んでいる。コンピュータシステムは、ハードウェアとしてのプロセッサ及びメモリを主構成とする。コンピュータシステムのメモリに記録されたプログラムをプロセッサが実行することによって、本開示における表示システム1としての機能が実現される。プログラムは、コンピュータシステムのメモリに予め記録されてもよく、電気通信回線を通じて提供されてもよく、コンピュータシステムで読み取り可能なメモリカード、光学ディスク、ハードディスクドライブ等の非一時的記録媒体に記録されて提供されてもよい。コンピュータシステムのプロセッサは、半導体集積回路(IC)又は大規模集積回路(LSI)を含む1ないし複数の電子回路で構成される。ここでいうIC又はLSI等の集積回路は、集積の度合いによって呼び方が異なっており、システムLSI、VLSI(Very Large Scale Integration)、又はULSI(Ultra Large Scale Integration)と呼ばれる集積回路を含む。さらに、LSIの製造後にプログラムされる、FPGA(Field-Programmable Gate Array)、又はLSI内部の接合関係の再構成若しくはLSI内部の回路区画の再構成が可能な論理デバイスについても、プロセッサとして採用することができる。複数の電子回路は、1つのチップに集約されていてもよいし、複数のチップに分散して設けられていてもよい。複数のチップは、1つの装置に集約されていてもよいし、複数の装置に分散して設けられていてもよい。ここでいうコンピュータシステムは、1以上のプロセッサ及び1以上のメモリを有するマイクロコントローラを含む。したがって、マイクロコントローラについても、半導体集積回路又は大規模集積回路を含む1ないし複数の電子回路で構成される。 The display system 1 in the present disclosure includes a computer system. The main configuration of a computer system is a processor and memory as hardware. The function as the display system 1 in the present disclosure is realized by the processor executing the program recorded in the memory of the computer system. The program may be pre-recorded in the memory of the computer system, may be provided through a telecommunications line, and may be recorded on a non-temporary recording medium such as a memory card, optical disk, or hard disk drive that can be read by the computer system. May be provided. A processor in a computer system is composed of one or more electronic circuits including a semiconductor integrated circuit (IC) or a large scale integrated circuit (LSI). The integrated circuit such as IC or LSI referred to here has a different name depending on the degree of integration, and includes an integrated circuit called a system LSI, VLSI (Very Large Scale Integration), or ULSI (Ultra Large Scale Integration). Further, an FPGA (Field-Programmable Gate Array) programmed after the LSI is manufactured, or a logical device capable of reconfiguring the junction relationship inside the LSI or reconfiguring the circuit partition inside the LSI should also be adopted as a processor. Can be done. A plurality of electronic circuits may be integrated on one chip, or may be distributed on a plurality of chips. The plurality of chips may be integrated in one device, or may be distributed in a plurality of devices. The computer system referred to here includes a microcontroller having one or more processors and one or more memories. Therefore, the microcontroller is also composed of one or more electronic circuits including a semiconductor integrated circuit or a large-scale integrated circuit.

また、表示システム1における複数の機能が、複数の筐体(クラウドコンピューティングを含む)に分散して設けられることは表示システム1に必須の構成ではなく、表示システム1の構成要素は、1つの筐体内に集約されていてもよい。例えば、表示システム1における算出部42、及び分析部43は、携帯端末3に設けられていてもよい。 Further, it is not an essential configuration for the display system 1 that a plurality of functions in the display system 1 are distributed and provided in a plurality of housings (including cloud computing), and the display system 1 has one component. It may be integrated in the housing. For example, the calculation unit 42 and the analysis unit 43 in the display system 1 may be provided in the mobile terminal 3.

(まとめ)
第1態様に係る表示方法は、生体情報取得処理と、表示処理と、を含む。生体情報表示処理では、ユーザの生体活動に関連する生体情報を取得する。表示処理では、生体情報に基づいたユーザの精神状態の度合いを示すメンタル度、及びメンタル度を分析した分析情報を表示部(36)に表示させる。
(Summary)
The display method according to the first aspect includes a biological information acquisition process and a display process. In the biological information display process, biological information related to the biological activity of the user is acquired. In the display process, the mental degree indicating the degree of the user's mental state based on the biological information and the analysis information obtained by analyzing the mental degree are displayed on the display unit (36).

この態様によれば、ユーザが、表示部(36)に表示されたメンタル度、分析情報を確認することにより、自身の精神状態を客観的に知ることができる。 According to this aspect, the user can objectively know his / her mental state by confirming the mental degree and the analysis information displayed on the display unit (36).

第2態様に係る表示方法では、第1態様において、表示処理は、表示部(36)にメンタル度を時系列で表示させる。 In the display method according to the second aspect, in the first aspect, the display process causes the display unit (36) to display the mental degree in chronological order.

この態様によれば、ユーザが、時間経過に伴うメンタル度の変化を把握しやすくなる。 According to this aspect, it becomes easy for the user to grasp the change in the mental degree with the passage of time.

第3態様に係る表示方法は、第1又は第2態様において、行動情報取得処理を更に含む。行動情報取得処理では、ユーザの行動に関する行動情報を取得する。表示処理では、表示部(36)に行動情報を更に表示させる。 The display method according to the third aspect further includes an action information acquisition process in the first or second aspect. In the behavior information acquisition process, behavior information related to the user's behavior is acquired. In the display process, the display unit (36) is made to further display the action information.

この態様によれば、ユーザが、メンタル度と行動の関連性を把握しやすくなる。 According to this aspect, it becomes easy for the user to grasp the relationship between the mental degree and the behavior.

第4態様に係る表示方法では、第1〜第3態様のいずれかにおいて、分析情報は、ユーザとは異なる他ユーザの精神状態の度合いを示すメンタル度を含む。 In the display method according to the fourth aspect, in any one of the first to third aspects, the analysis information includes a mental degree indicating the degree of mental state of another user different from the user.

この態様によれば、ユーザが、自身のメンタル度と他ユーザのメンタル度とを比較することができる。 According to this aspect, the user can compare his / her own mental degree with the mental degree of another user.

第5態様に係る表示方法では、第4態様において、分析情報は、複数の他ユーザのメンタル度の代表データを含む。 In the display method according to the fifth aspect, in the fourth aspect, the analysis information includes representative data of the mental degree of a plurality of other users.

この態様によれば、ユーザが、自身のメンタル度と、複数の他ユーザのメンタル度とを比較することができる。 According to this aspect, the user can compare his / her own mentality with the mentality of a plurality of other users.

第6態様に係る表示方法では、第4又は第5態様において、表示処理では、表示部(36)に他ユーザの行動に関する行動情報を更に表示させる。 In the display method according to the sixth aspect, in the fourth or fifth aspect, in the display process, the display unit (36) is made to further display the action information regarding the action of another user.

この態様によれば、ユーザが、自身の行動と、他ユーザの行動とを比較することができ、自身のメンタル度と行動との関連性をより詳細に把握しやすくなる。 According to this aspect, the user can compare his / her own behavior with the behavior of another user, and it becomes easier to grasp the relationship between his / her mentality and the behavior in more detail.

第7態様に係る表示方法では、第1〜第6態様のいずれかにおいて、メンタル度は、快適度を示す快適軸と覚醒度を示す覚醒軸とで表される精神状態の二次元パラメータを、快適軸と覚醒軸との交点を通る軸を座標軸とする一次元パラメータに変換したデータである。 In the display method according to the seventh aspect, in any one of the first to sixth aspects, the mental degree is a two-dimensional parameter of the mental state represented by a comfort axis indicating the comfort degree and an awakening axis indicating the arousal degree. This data is converted into a one-dimensional parameter whose coordinate axis is the axis passing through the intersection of the comfort axis and the awakening axis.

この態様によれば、メンタル度を一次元パラメータで定量化することができ、ユーザが自身の精神状態を把握しやすくなる。 According to this aspect, the mental degree can be quantified by a one-dimensional parameter, and the user can easily grasp his / her mental state.

第8態様に係るプログラムは、コンピュータシステムに、第1〜第7態様のいずれかの表示方法を実行させる。 The program according to the eighth aspect causes the computer system to execute the display method according to any one of the first to seventh aspects.

この態様によれば、ユーザが、表示部(36)に表示されたメンタル度、分析情報を確認することにより、自身の精神状態を客観的に知ることができる。 According to this aspect, the user can objectively know his / her mental state by confirming the mental degree and the analysis information displayed on the display unit (36).

第9態様に係る表示システム(1)は、測定部(21)と、生体情報取得部(31)と、算出部(42)と、分析部(43)と、表示部(36)と、を備える。測定部(21)は、ユーザの生体活動に関連する生体情報を測定する。生体情報取得部(31)は、測定部(21)から生体情報を取得する。算出部(42)は、生体情報に基づいたユーザの精神状態の度合いを示すメンタル度を算出する。分析部(43)は、メンタル度を分析した分析情報を生成する。表示部(36)は、メンタル度及び分析情報を表示する。 The display system (1) according to the ninth aspect includes a measurement unit (21), a biological information acquisition unit (31), a calculation unit (42), an analysis unit (43), and a display unit (36). Be prepared. The measuring unit (21) measures biological information related to the biological activity of the user. The biological information acquisition unit (31) acquires biological information from the measurement unit (21). The calculation unit (42) calculates the mental degree indicating the degree of the user's mental state based on the biological information. The analysis unit (43) generates analysis information that analyzes the degree of mentality. The display unit (36) displays the mental degree and analysis information.

この態様によれば、ユーザが、表示部(36)に表示されたメンタル度、分析情報を確認することにより、自身の精神状態を客観的に知ることができる。 According to this aspect, the user can objectively know his / her mental state by confirming the mental degree and the analysis information displayed on the display unit (36).

1 表示システム
21 測定部
31 生体情報取得部
36 表示部
42 算出部
43 分析部
1 Display system 21 Measurement unit 31 Biological information acquisition unit 36 Display unit 42 Calculation unit 43 Analysis unit

Claims (9)

ユーザの生体活動に関連する生体情報を取得する生体情報取得処理と、
前記生体情報に基づいた前記ユーザの精神状態の度合いを示すメンタル度、及び前記メンタル度を分析した分析情報を表示部に表示させる表示処理と、を含む、
表示方法。
Biometric information acquisition processing to acquire biometric information related to the user's biological activity,
It includes a mental degree indicating the degree of the user's mental state based on the biological information, and a display process for displaying the analysis information obtained by analyzing the mental degree on the display unit.
Display method.
前記表示処理では、前記表示部に前記メンタル度を時系列で表示させる、
請求項1に記載の表示方法。
In the display process, the mental degree is displayed in time series on the display unit.
The display method according to claim 1.
前記ユーザの行動に関する行動情報を取得する行動情報取得処理を更に含み、
前記表示処理では、前記表示部に前記行動情報を更に表示させる、
請求項1又は2に記載の表示方法。
The behavior information acquisition process for acquiring the behavior information related to the user's behavior is further included.
In the display process, the action information is further displayed on the display unit.
The display method according to claim 1 or 2.
前記分析情報は、前記ユーザとは異なる他ユーザの精神状態の度合いを示すメンタル度を含む、
請求項1〜3のいずれか1項に記載の表示方法。
The analysis information includes a mental degree indicating the degree of mental state of another user different from the user.
The display method according to any one of claims 1 to 3.
前記分析情報は、複数の前記他ユーザの前記メンタル度の代表データを含む、
請求項4に記載の表示方法。
The analysis information includes representative data of the mental degree of the other user.
The display method according to claim 4.
前記表示処理では、前記表示部に前記他ユーザの行動に関する行動情報を更に表示させる、
請求項4又は5に記載の表示方法。
In the display process, the display unit further displays behavior information related to the behavior of the other user.
The display method according to claim 4 or 5.
前記メンタル度は、快適度を示す快適軸と覚醒度を示す覚醒軸とで表される精神状態の二次元パラメータを、前記快適軸と前記覚醒軸との交点を通る軸を座標軸とする一次元パラメータに変換したデータである、
請求項1〜6のいずれか1項に記載の表示方法。
The mental degree is a one-dimensional parameter having a two-dimensional parameter of a mental state represented by a comfort axis indicating a comfort degree and an awakening axis indicating an arousal degree, and an axis passing through an intersection of the comfort axis and the awakening axis as a coordinate axis. Data converted into parameters,
The display method according to any one of claims 1 to 6.
コンピュータシステムに、請求項1〜7のいずれか1項に記載の表示方法を実行させるためのプログラム。 A program for causing a computer system to execute the display method according to any one of claims 1 to 7. ユーザの生体活動に関連する生体情報を測定する測定部と、
前記測定部から前記生体情報を取得する生体情報取得部と、
前記生体情報に基づいた前記ユーザの精神状態の度合いを示すメンタル度を算出する算出部と、
前記メンタル度を分析した分析情報を生成する分析部と、
前記メンタル度及び前記分析情報を表示する表示部と、を備える、
表示システム。
A measuring unit that measures biological information related to the user's biological activity,
A biometric information acquisition unit that acquires the biometric information from the measurement unit,
A calculation unit that calculates the mental degree indicating the degree of the user's mental state based on the biological information, and
An analysis unit that generates analysis information that analyzes the degree of mentality,
A display unit for displaying the mental degree and the analysis information is provided.
Display system.
JP2019036911A 2019-02-28 2019-02-28 Display methods, programs, and display systems Active JP7352789B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019036911A JP7352789B2 (en) 2019-02-28 2019-02-28 Display methods, programs, and display systems

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019036911A JP7352789B2 (en) 2019-02-28 2019-02-28 Display methods, programs, and display systems

Publications (2)

Publication Number Publication Date
JP2020137895A true JP2020137895A (en) 2020-09-03
JP7352789B2 JP7352789B2 (en) 2023-09-29

Family

ID=72279619

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019036911A Active JP7352789B2 (en) 2019-02-28 2019-02-28 Display methods, programs, and display systems

Country Status (1)

Country Link
JP (1) JP7352789B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023199839A1 (en) * 2022-04-13 2023-10-19 日本電気株式会社 Internal state estimation device, internal state estimation method, and storage medium

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005222518A (en) * 2004-01-08 2005-08-18 Daikin Ind Ltd Worker management system, method, device, and program
JP2006268395A (en) * 2005-03-24 2006-10-05 Fuji Xerox Co Ltd Information processor, information processing method and program
JP2010264038A (en) * 2009-05-14 2010-11-25 Panasonic Electric Works Co Ltd Device and method for evaluating psycological state
US20110300847A1 (en) * 2010-06-02 2011-12-08 Q-Tec Systems Llc Method and apparatus for monitoring emotion in an interactive network
JP2013537435A (en) * 2010-06-07 2013-10-03 アフェクティヴァ,インコーポレイテッド Psychological state analysis using web services
US20150206523A1 (en) * 2014-01-23 2015-07-23 National Chiao Tung University Method for selecting music based on face recognition, music selecting system and electronic apparatus
WO2016170810A1 (en) * 2015-04-23 2016-10-27 ソニー株式会社 Information processing device, control method, and program
JP2017213278A (en) * 2016-06-01 2017-12-07 コニカミノルタ株式会社 Mental health evaluation apparatus, method, and program

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005222518A (en) * 2004-01-08 2005-08-18 Daikin Ind Ltd Worker management system, method, device, and program
JP2006268395A (en) * 2005-03-24 2006-10-05 Fuji Xerox Co Ltd Information processor, information processing method and program
JP2010264038A (en) * 2009-05-14 2010-11-25 Panasonic Electric Works Co Ltd Device and method for evaluating psycological state
US20110300847A1 (en) * 2010-06-02 2011-12-08 Q-Tec Systems Llc Method and apparatus for monitoring emotion in an interactive network
JP2013537435A (en) * 2010-06-07 2013-10-03 アフェクティヴァ,インコーポレイテッド Psychological state analysis using web services
US20150206523A1 (en) * 2014-01-23 2015-07-23 National Chiao Tung University Method for selecting music based on face recognition, music selecting system and electronic apparatus
WO2016170810A1 (en) * 2015-04-23 2016-10-27 ソニー株式会社 Information processing device, control method, and program
JP2017213278A (en) * 2016-06-01 2017-12-07 コニカミノルタ株式会社 Mental health evaluation apparatus, method, and program

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
平松拓也ほか: "生体情報による感情推定手法とステージの観客反応による評価", マルチメディア,分散,協調とモバイルシンポジウム, vol. 2017, JPN6022046063, June 2017 (2017-06-01), JP, pages 3 - 4, ISSN: 0005026590 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023199839A1 (en) * 2022-04-13 2023-10-19 日本電気株式会社 Internal state estimation device, internal state estimation method, and storage medium
WO2023199422A1 (en) * 2022-04-13 2023-10-19 日本電気株式会社 Inner state inference device, inner state inference method, and storage medium

Also Published As

Publication number Publication date
JP7352789B2 (en) 2023-09-29

Similar Documents

Publication Publication Date Title
Niknejad et al. A comprehensive overview of smart wearables: The state of the art literature, recent advances, and future challenges
US12036030B2 (en) Methods for modeling neurological development and diagnosing a neurological impairment of a patient
Stopczynski et al. The smartphone brain scanner: a portable real-time neuroimaging system
Matthews et al. Tracking mental well-being: Balancing rich sensing and patient needs
JP6759201B2 (en) Chronic disease detection and management system
CN107209807B (en) Wearable equipment of pain management
US20130245396A1 (en) Mental state analysis using wearable-camera devices
US20210015415A1 (en) Methods and systems for monitoring user well-being
JP2017521756A (en) Operating system with color-based health theme
DE112014006082T5 (en) Pulse wave measuring device, mobile device, medical equipment system and biological information communication system
CN116389554A (en) System for improving user's performance in athletic activities and method thereof
JP7521226B2 (en) Information processing device, information processing method, and program
WO2019086856A1 (en) Systems and methods for combining and analysing human states
Pustiek et al. Challenges in wearable devices based pervasive wellbeing monitoring
Pingo et al. “My smartwatch told me to see a sleep doctor”: a study of activity tracker use
Rick et al. SleepBot: encouraging sleep hygiene using an intelligent chatbot
JP7352789B2 (en) Display methods, programs, and display systems
Del-Valle-Soto et al. Unveiling wearables: exploring the global landscape of biometric applications and vital signs and behavioral impact
US20210106273A1 (en) Wearable maternity sensor device
WO2022113276A1 (en) Information processing device, control method, and storage medium
Ozkaynak et al. Emerging methods for patient ergonomics
US20230036375A1 (en) Information processing apparatus, information processing method, and information processing program
Silva et al. Monitoring heart rate with common market smart-phones for identifying potential signs that may lead to sudden death
US20240164674A1 (en) System for Detecting Mental and/or Physical State of Human
WO2023167061A1 (en) Information processing method, information processing device, and information processing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221024

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221101

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20221226

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230228

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230404

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230704

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20230713

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230801

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230825

R151 Written notification of patent or utility model registration

Ref document number: 7352789

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151