JP7352789B2 - Display methods, programs, and display systems - Google Patents

Display methods, programs, and display systems Download PDF

Info

Publication number
JP7352789B2
JP7352789B2 JP2019036911A JP2019036911A JP7352789B2 JP 7352789 B2 JP7352789 B2 JP 7352789B2 JP 2019036911 A JP2019036911 A JP 2019036911A JP 2019036911 A JP2019036911 A JP 2019036911A JP 7352789 B2 JP7352789 B2 JP 7352789B2
Authority
JP
Japan
Prior art keywords
mental
level
user
display
axis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019036911A
Other languages
Japanese (ja)
Other versions
JP2020137895A (en
Inventor
晃久 奥谷
綾菜 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2019036911A priority Critical patent/JP7352789B2/en
Publication of JP2020137895A publication Critical patent/JP2020137895A/en
Application granted granted Critical
Publication of JP7352789B2 publication Critical patent/JP7352789B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Description

本開示は、一般に表示方法、プログラム、及び表示システムに関し、より詳細にはユーザの精神状態に関する情報を表示する表示方法、プログラム、及び表示システムに関する。 The present disclosure generally relates to a display method, a program, and a display system, and more particularly relates to a display method, program, and display system that display information regarding a user's mental state.

従来、視聴者の心理状態を推定し、最適な状態で映像や音響を再生する再生装置が開示されている(例えば、特許文献1参照)。 BACKGROUND ART Conventionally, a playback device has been disclosed that estimates a viewer's psychological state and plays back video and audio in an optimal state (for example, see Patent Document 1).

特許文献1では、単一の生体情報センサにより視聴者の心理状態を推定し、推定結果により最適な状態で映像や音響を再生する。 In Patent Document 1, a viewer's psychological state is estimated using a single biological information sensor, and video and audio are reproduced in an optimal state based on the estimation result.

特開2006-15046号公報Japanese Patent Application Publication No. 2006-15046

特許文献1の再生装置では、ユーザは自身の精神状態を客観的に知ることができなかった。 With the playback device of Patent Document 1, the user could not objectively know his or her own mental state.

本開示は、上記事由に鑑みてなされており、その目的は、ユーザが自身の精神状態を客観的に知ることができる表示方法、プログラム、及び表示システムを提供することにある。 The present disclosure has been made in view of the above reasons, and its purpose is to provide a display method, program, and display system that allow users to objectively know their own mental state.

本開示の一態様に係る表示方法は、生体情報取得処理と、表示処理と、を含む。前記生体情報表示処理では、ユーザの生体活動に関連する生体情報を取得する。前記表示処理では、前記生体情報に基づいた前記ユーザの精神状態の度合いを示すメンタル度、及び前記メンタル度を分析した分析情報を表示部に表示させる。前記メンタル度は、快適度を示す快適軸と覚醒度を示す覚醒軸とで表される精神状態の二次元パラメータを、前記快適軸と前記覚醒軸との交点を通る軸を座標軸とする一次元パラメータに変換したデータである。前記分析情報は、前記ユーザとは異なる他ユーザの精神状態の度合いを示すメンタル度を含み、かつ、複数の前記他ユーザの前記メンタル度の代表データを含む。前記表示処理では、前記表示部において、前記複数の他ユーザの前記メンタル度の前記代表データとして正規分布データを表示し、前記ユーザが前記正規分布データ上の任意の点を選択すると、前記複数の他ユーザのうちの前記任意の点を通る他ユーザの前記メンタル度及び行動情報を表示する。 A display method according to one aspect of the present disclosure includes biological information acquisition processing and display processing. In the biological information display process, biological information related to the user's biological activity is acquired. In the display process, a mental level indicating the degree of the user's mental state based on the biological information and analysis information obtained by analyzing the mental level are displayed on the display unit. The mental level is a two-dimensional parameter of the mental state expressed by a comfort axis indicating the comfort level and an arousal axis indicating the alertness level, and a one-dimensional parameter whose coordinate axis is an axis passing through the intersection of the comfort axis and the alertness axis. This is data converted to parameters. The analysis information includes a mental level indicating a degree of mental state of another user different from the user, and includes representative data of the mental level of a plurality of other users. In the display process, normal distribution data is displayed on the display unit as the representative data of the mental degrees of the plurality of other users, and when the user selects an arbitrary point on the normal distribution data, the plurality of Displaying the mental level and behavior information of other users who pass through the arbitrary point.

本開示の一態様に係るプログラムは、コンピュータシステムに前記表示方法を実行させる。 A program according to one aspect of the present disclosure causes a computer system to execute the display method.

本開示の一態様に係る表示システムは、測定部と、生体情報取得部と、算出部と、分析部と、表示部と、を備える。前記測定部は、ユーザの生体活動に関連する生体情報を測定する。前記生体情報取得部は、前記測定部から前記生体情報を取得する。前記算出部は、前記生体情報に基づいた前記ユーザの精神状態の度合いを示すメンタル度を算出する。前記分析部は、前記メンタル度を分析した分析情報を生成する。前記表示部は、前記メンタル度及び前記分析情報を表示する。前記メンタル度は、快適度を示す快適軸と覚醒度を示す覚醒軸とで表される精神状態の二次元パラメータを、前記快適軸と前記覚醒軸との交点を通る軸を座標軸とする一次元パラメータに変換したデータである。前記分析情報は、前記ユーザとは異なる他ユーザの精神状態の度合いを示すメンタル度を含み、かつ、複数の前記他ユーザの前記メンタル度の代表データを含む。前記表示部は、前記複数の他ユーザの前記メンタル度の前記代表データとして正規分布データを表示し、前記ユーザが前記正規分布データ上の任意の点を選択すると、前記複数の他ユーザのうちの前記任意の点を通る他ユーザの前記メンタル度及び行動情報を表示する。 A display system according to one aspect of the present disclosure includes a measurement section, a biological information acquisition section, a calculation section, an analysis section, and a display section. The measurement unit measures biological information related to the user's biological activity. The biological information acquisition section acquires the biological information from the measurement section. The calculation unit calculates a mental state indicating the degree of the user's mental state based on the biological information. The analysis unit generates analysis information by analyzing the mental level. The display section displays the mental level and the analysis information. The mental level is a two-dimensional parameter of the mental state expressed by a comfort axis indicating the comfort level and an arousal axis indicating the alertness level, and a one-dimensional parameter whose coordinate axis is an axis passing through the intersection of the comfort axis and the alertness axis. This is data converted to parameters. The analysis information includes a mental level indicating a degree of mental state of another user different from the user, and includes representative data of the mental level of a plurality of other users. The display unit displays normal distribution data as the representative data of the mental degrees of the plurality of other users, and when the user selects an arbitrary point on the normal distribution data, the The mental level and behavior information of other users passing through the arbitrary point are displayed.

本開示では、ユーザが自身の精神状態を客観的に知ることができるという効果がある。 The present disclosure has the effect that the user can objectively know his or her own mental state.

図1は、本開示の一実施形態に係る表示システムのブロック図である。FIG. 1 is a block diagram of a display system according to an embodiment of the present disclosure. 図2は、同上の表示システムに用いられる二次元心理モデルである。FIG. 2 shows a two-dimensional psychological model used in the above display system. 図3Aは、同上の二次元心理モデルを用いたストレス度を求めるための説明図である。図3Bは、ストレス度の時間変化を示すグラフである。FIG. 3A is an explanatory diagram for determining the stress level using the two-dimensional psychological model as described above. FIG. 3B is a graph showing changes in stress level over time. 図4Aは、同上の二次元心理モデルを用いたリラックス度を求めるための説明図である。図4Bは、リラックス度の時間変化を示すグラフである。FIG. 4A is an explanatory diagram for determining the degree of relaxation using the two-dimensional psychological model as described above. FIG. 4B is a graph showing changes in the degree of relaxation over time. 図5Aは、同上の表示システムにおける表示部に表示される表示内容の一例である。図5Bは、同上の表示システムにおける表示部に表示される表示内容の別の例である。FIG. 5A is an example of display content displayed on the display unit in the above display system. FIG. 5B is another example of display content displayed on the display unit in the display system described above. 図6Aは、同上の表示システムにおけるコミュニケーションアプリの表示画面の一例である。図6Bは、同上の二次元心理モデル上の精神状態の種類とイラストとの対応関係を示す説明図である。FIG. 6A is an example of a display screen of a communication application in the above display system. FIG. 6B is an explanatory diagram showing the correspondence between types of mental states on the two-dimensional psychological model and illustrations.

(実施形態)
本実施形態に係る表示システム1について、図1を参照して説明する。
(Embodiment)
A display system 1 according to this embodiment will be explained with reference to FIG. 1.

本実施形態の表示システム1は、ユーザの生体情報を測定し、測定結果に基づいたメンタル度、及びメンタル度の分析情報を表示するシステムである。ユーザは、表示されたメンタル度、分析情報を確認することにより、自身の精神状態を客観的に知ることができる。 The display system 1 of this embodiment is a system that measures a user's biological information and displays a mental level and analysis information of the mental level based on the measurement results. By checking the displayed mental level and analysis information, the user can objectively know his or her own mental state.

本開示における「生体情報」とは、ユーザの生体活動に関連する情報であって、例えば、心拍、血圧、血管径、呼吸、瞳孔径、血糖値、表情、脳波、脳血流、発汗等のデータである。 "Biological information" in this disclosure refers to information related to the user's biological activities, such as heart rate, blood pressure, blood vessel diameter, breathing, pupil diameter, blood sugar level, facial expression, brain waves, cerebral blood flow, sweating, etc. It is data.

本開示における「メンタル度」とは、ユーザの精神状態の度合いを示すパラメータであって、例えば、ユーザのストレス、リラックス、幸福、緊張等の大きさを定量化したデータである。 The "mental level" in the present disclosure is a parameter indicating the degree of a user's mental state, and is, for example, data quantifying the level of stress, relaxation, happiness, tension, etc. of the user.

本開示における「分析情報」とは、メンタル度を分析した情報であって、他ユーザのメンタル度の情報を含んでいる。 "Analysis information" in the present disclosure is information obtained by analyzing the mental level, and includes information on the mental level of other users.

本実施形態では、一例として、育児中の母親をユーザとして想定している。育児中の母親は、例えば、適切な育児ができているかどうか不安を感じたり、育児に対するストレスを感じる場合がある。このような場合に、本実施形態の表示システム1を用いることにより、自身の精神状態を客観的に知ることによって、安心感を得たり、改善点を見出したりすることができる。なお、表示システム1は、ユーザを育児中の母親に限定するものではなく、例えば、受験生、社会人、スポーツ選手など様々な人物に適用可能である。 In this embodiment, the user is assumed to be a mother who is raising a child, as an example. For example, a mother who is raising a child may feel anxious about whether or not she is being able to properly raise the child, or may feel stressed about raising the child. In such a case, by using the display system 1 of this embodiment, the user can gain a sense of security and find areas for improvement by objectively knowing his or her own mental state. Note that the display system 1 is not limited to users who are mothers who are raising children, but can be applied to various people such as students taking entrance exams, working adults, and athletes.

以下に、本実施形態の表示システム1の詳細について説明する。 Below, details of the display system 1 of this embodiment will be explained.

本実施形態の表示システム1は、測定装置2と、携帯端末3と、サーバ4と、を備えている。 The display system 1 of this embodiment includes a measuring device 2, a mobile terminal 3, and a server 4.

測定装置2は、測定部21と、通信部22と、を備えている。 The measuring device 2 includes a measuring section 21 and a communication section 22.

測定部21は、ユーザの生体情報を測定するように構成されている。本実施形態では、一例として、測定部21は、生体情報としてユーザの心拍(心拍数)を測定する。測定装置2は、例えばリストバンド型の光学式心拍計であり、ユーザの手首に装着されることにより、測定部21がユーザの心拍数を測定する。測定部21は、ユーザの生体情報(心拍)を比較的短い所定周期で繰り返し測定している。つまり、測定部21は、ユーザの生体情報を常時に測定している。 The measurement unit 21 is configured to measure the user's biological information. In this embodiment, as an example, the measurement unit 21 measures the user's heartbeat (heart rate) as biological information. The measuring device 2 is, for example, a wristband type optical heart rate meter, and is worn on the user's wrist so that the measuring unit 21 measures the user's heart rate. The measurement unit 21 repeatedly measures the user's biological information (heartbeat) at relatively short predetermined intervals. That is, the measurement unit 21 constantly measures the user's biological information.

通信部22は、Wi-Fi(登録商標)、Bluetooth(登録商標)等の無線通信に対応した無線通信インターフェースである。通信部22は、携帯端末3と無線通信が可能に構成されている。 The communication unit 22 is a wireless communication interface compatible with wireless communication such as Wi-Fi (registered trademark) and Bluetooth (registered trademark). The communication unit 22 is configured to be capable of wireless communication with the mobile terminal 3.

測定装置2は、測定部21が測定したユーザの心拍(生体情報)を、測定時の時刻情報と対応付けて、通信部22を介して携帯端末3に送信する。 The measurement device 2 transmits the user's heartbeat (biological information) measured by the measurement unit 21 to the mobile terminal 3 via the communication unit 22 in association with time information at the time of measurement.

なお、測定装置2(測定部21)は、生体情報として心拍(心拍数)を測定するものに限らない。測定装置2(測定部21)は、例えば、ヘッドマウント式の脳波計で構成され、ユーザの頭部に装着されることにより、生体情報としてユーザの脳波を測定してもよい。また、測定装置2(測定部21)は、カメラ装置で構成され、ユーザの瞳孔径、表情などを測定するように構成されていてもよい。また、測定装置2(測定部21)は、マイク装置で構成され、ユーザの音声、呼吸音などを測定するように構成されていてもよい。また、測定装置2(測定部21)は、複数の測定装置2を備え、ユーザの複数の生体情報を測定するように構成されていてもよい。 Note that the measuring device 2 (measuring unit 21) is not limited to one that measures heartbeat (heart rate) as biological information. The measuring device 2 (measuring unit 21) may be configured with a head-mounted electroencephalograph, for example, and may measure the user's brain waves as biological information by being attached to the user's head. Furthermore, the measuring device 2 (measuring unit 21) may include a camera device and may be configured to measure the pupil diameter, facial expression, etc. of the user. Further, the measuring device 2 (measuring unit 21) may include a microphone device and may be configured to measure the user's voice, breathing sounds, and the like. Further, the measuring device 2 (measuring unit 21) may include a plurality of measuring devices 2 and may be configured to measure a plurality of biological information of the user.

携帯端末3は、スマートフォン、タブレット端末等のユーザが所持する端末である。携帯端末3は、処理部30、第1通信部34、第2通信部35、表示部36、操作部37、及び記憶部38を備えている。 The mobile terminal 3 is a terminal owned by a user, such as a smartphone or a tablet terminal. The mobile terminal 3 includes a processing section 30 , a first communication section 34 , a second communication section 35 , a display section 36 , an operation section 37 , and a storage section 38 .

携帯端末3は、例えばプロセッサ及びメモリを有するマイクロコンピュータを有している。そして、プロセッサがメモリに格納されているプログラムを実行することにより、マイクロコンピュータが処理部30(生体情報取得部31、行動情報取得部32、及び表示制御部33)として機能する。プロセッサが実行するプログラムは、ここではマイクロコンピュータのメモリに予め記録されているが、メモリカード等の非一時的な記録媒体に記録されて提供されてもよいし、インターネット等の電気通信回線を通じて提供されてもよい。 The mobile terminal 3 includes, for example, a microcomputer having a processor and a memory. When the processor executes the program stored in the memory, the microcomputer functions as the processing section 30 (biological information acquisition section 31, behavior information acquisition section 32, and display control section 33). Although the program executed by the processor is pre-recorded in the memory of the microcomputer here, it may also be provided recorded on a non-temporary recording medium such as a memory card, or provided via a telecommunications line such as the Internet. may be done.

第1通信部34は、通信インターフェースであり、測定装置2の通信部22と通信可能に構成されている。本実施形態では、第1通信部34は、Bluetooth(登録商標)に準拠した無線通信を通信部22との間で行うように構成されている。 The first communication unit 34 is a communication interface, and is configured to be able to communicate with the communication unit 22 of the measuring device 2 . In this embodiment, the first communication unit 34 is configured to perform wireless communication with the communication unit 22 based on Bluetooth (registered trademark).

第2通信部35は、通信インターフェースであり、サーバ4と通信可能に構成されている。本実施形態では、第2通信部35は、Wi-Fi(登録商標)に準拠した無線通信規格に対応しており、ルータ、ゲートウェイ端末等を介して、インターネットのような公衆のネットワーク5に通信接続が可能である。第2通信部35は、ネットワーク5を介してサーバ4と通信可能に構成されている。なお、第2通信部35は、移動体通信により、ネットワーク5を介してサーバ4と通信するように構成されていてもよい。 The second communication unit 35 is a communication interface and is configured to be able to communicate with the server 4. In this embodiment, the second communication unit 35 supports a wireless communication standard based on Wi-Fi (registered trademark), and communicates with a public network 5 such as the Internet via a router, a gateway terminal, etc. Connection is possible. The second communication unit 35 is configured to be able to communicate with the server 4 via the network 5. Note that the second communication unit 35 may be configured to communicate with the server 4 via the network 5 by mobile communication.

携帯端末3は、タッチパネルディスプレイを備えており、タッチパネルディスプレイが表示部36と操作部37とを兼ねている。表示部36は、例えば液晶ディスプレイである。操作部37は、例えばタッチパッドであり、ユーザからの操作を受け付ける。 The mobile terminal 3 includes a touch panel display, and the touch panel display serves as a display section 36 and an operation section 37. The display unit 36 is, for example, a liquid crystal display. The operation unit 37 is, for example, a touch pad, and accepts operations from the user.

処理部30は、生体情報取得部31、行動情報取得部32、及び表示制御部33を有する。 The processing section 30 includes a biological information acquisition section 31, a behavior information acquisition section 32, and a display control section 33.

生体情報取得部31は、第1通信部34を介して測定装置2から測定部21の測定結果(ユーザの生体情報)を取得する生体情報取得処理を行うように構成されている。生体情報取得部31は、取得した生体情報を、第2通信部35を介してサーバ4に送信する。つまり、生体情報取得部31は、測定装置2から取得した生体情報をサーバ4に転送する。 The biological information acquisition unit 31 is configured to perform a biological information acquisition process of acquiring the measurement results of the measurement unit 21 (the user's biological information) from the measurement device 2 via the first communication unit 34 . The biological information acquisition unit 31 transmits the acquired biological information to the server 4 via the second communication unit 35. That is, the biological information acquisition unit 31 transfers the biological information acquired from the measuring device 2 to the server 4.

記憶部38は、ROM(Read Only Memory)、RAM(Random Access Memory)、又はEEPROM(Electrically Erasable Programmable Read Only Memory)等から選択される記憶デバイスで構成される。記憶部38には、ユーザの行動予定が記憶されている。例えば、携帯端末3には、スケジュール管理のアプリケーション(アプリ)がインストールされており、ユーザが当該アプリに入力した行動予定が記憶部38に記憶される。なお、アプリに入力された行動予定は、クラウドサーバ等に記憶されていてもよい。 The storage unit 38 is configured of a storage device selected from ROM (Read Only Memory), RAM (Random Access Memory), EEPROM (Electrically Erasable Programmable Read Only Memory), and the like. The storage unit 38 stores the user's action schedule. For example, a schedule management application (app) is installed on the mobile terminal 3, and the activity schedule input by the user into the application is stored in the storage unit 38. Note that the action schedule input into the application may be stored in a cloud server or the like.

行動情報取得部32は、ユーザの行動情報を取得する行動情報取得処理を行うように構成されている。本開示における「行動情報」とは、ユーザの行動に関する情報である。例えば、行動情報は、ユーザが行った、食事、運動、読書、睡眠等の行動の内容、及びその行動を行っている時刻(時間帯)を示す情報である。行動情報取得部32は、ユーザの行動予定が記憶されている記憶部44(又はクラウドサーバ)を参照することにより、ユーザの行動情報を取得する。行動情報取得部32は、取得した行動情報を、第2通信部35を介してサーバ4に送信する。 The behavior information acquisition unit 32 is configured to perform behavior information acquisition processing to acquire user behavior information. "Behavior information" in the present disclosure is information related to user behavior. For example, the behavior information is information indicating the content of the user's behavior, such as eating, exercising, reading, and sleeping, and the time (time zone) at which the user is performing the behavior. The behavior information acquisition unit 32 acquires the user's behavior information by referring to the storage unit 44 (or cloud server) in which the user's behavior schedule is stored. The behavior information acquisition unit 32 transmits the acquired behavior information to the server 4 via the second communication unit 35.

なお、行動情報取得部32は、ユーザの行動を推定する推定部から行動情報を取得するように構成されていてもよい。推定部は、携帯端末3のプロセッサがメモリに格納されているプログラムを実行することにより、マイクロコンピュータが推定部として機能する。推定部は、例えば、携帯端末3が備えるマイク、カメラ、加速度センサ、GPS(Global Positioning System)等の出力に基づいて、ユーザの行動を推定し、推定結果を行動情報取得部32に出力する。なお、マイク、カメラ、加速度センサ、GPS等は、携帯端末3と通信可能な別のデバイスに設けられていてもよい。例えば、加速度センサは、ユーザが装着しているウェアラブル端末に設けられていてもよい。 Note that the behavior information acquisition unit 32 may be configured to acquire behavior information from an estimation unit that estimates the user's behavior. The microcomputer functions as the estimator when the processor of the mobile terminal 3 executes a program stored in the memory. The estimation unit estimates the user's behavior based on the output of a microphone, camera, acceleration sensor, GPS (Global Positioning System), etc. provided in the mobile terminal 3, and outputs the estimation result to the behavior information acquisition unit 32. Note that the microphone, camera, acceleration sensor, GPS, etc. may be provided in another device that can communicate with the mobile terminal 3. For example, the acceleration sensor may be provided in a wearable terminal worn by a user.

表示制御部33は、表示部36を制御する表示処理を行うように構成されている。表示制御部33は、第2通信部35を介してサーバ4から受信したデータ(メンタル度、分析情報)を表示部36に表示させる。表示部36の表示内容については、後述する。 The display control unit 33 is configured to perform display processing to control the display unit 36. The display control section 33 causes the display section 36 to display the data (mental level, analysis information) received from the server 4 via the second communication section 35 . The display contents of the display section 36 will be described later.

サーバ4は、通信部41、算出部42、分析部43、及び記憶部44を備えている。 The server 4 includes a communication section 41, a calculation section 42, an analysis section 43, and a storage section 44.

サーバ4は、例えばプロセッサ及びメモリを有するマイクロコンピュータを有している。そして、プロセッサがメモリに格納されているプログラムを実行することにより、マイクロコンピュータが算出部42、及び分析部43として機能する。プロセッサが実行するプログラムは、ここではマイクロコンピュータのメモリに予め記録されているが、メモリカード等の非一時的な記録媒体に記録されて提供されてもよいし、インターネット等の電気通信回線を通じて提供されてもよい。 The server 4 includes, for example, a microcomputer having a processor and a memory. The microcomputer functions as the calculation section 42 and the analysis section 43 when the processor executes the program stored in the memory. Although the program executed by the processor is pre-recorded in the memory of the microcomputer here, it may also be provided recorded on a non-temporary recording medium such as a memory card, or provided via a telecommunications line such as the Internet. may be done.

通信部41は、通信インターフェースであり、携帯端末3(の第2通信部35)と通信可能に構成されている。通信部41は、ネットワーク5を介して第2通信部35と通信可能に構成されている。 The communication unit 41 is a communication interface, and is configured to be able to communicate with (the second communication unit 35 of) the mobile terminal 3. The communication unit 41 is configured to be able to communicate with the second communication unit 35 via the network 5.

算出部42は、通信部41を介して受信した生体情報に基づいてユーザの精神状態の度合いを示すメンタル度を算出する。言い換えれば、算出部42は、生体情報取得部31が取得した生体情報に基づいて、ユーザの精神状態の度合いを示すメンタル度を算出する。 The calculation unit 42 calculates a mental level indicating the degree of the user's mental state based on the biological information received via the communication unit 41. In other words, the calculation unit 42 calculates the mental level indicating the degree of the user's mental state based on the biological information acquired by the biological information acquisition unit 31.

ここで、精神状態は、例えば、快適度及び覚醒度を指標とした二次元心理モデル(たとえばラッセルの円環モデル)によって表すことができる(図2参照)。快適度とは、快適状態のレベルを示す指標である。覚醒度とは、覚醒状態のレベルを示す指標である。図2に示す二次元心理モデルでは、X軸(快適軸)が快適度を示し、Y軸(覚醒軸)が覚醒度を示している。X軸の快適度は、X軸の正領域が「快」であり、X軸の負領域が「不快」である。快適度は、X軸の正領域でのレベル(絶対値)が大きくなるほど快適度が増加し、X軸の負領域でのレベル(絶対値)が大きくなるほど不快度が増加(快適度が減少)する。Y軸の覚醒度は、Y軸の正領域が「覚醒」であり、Y軸の負領域が「鎮静」である。覚醒度は、Y軸の正領域でのレベル(絶対値)が大きくなるほど覚醒度が増加し、Y軸の負領域でのレベル(絶対値)が大きくなるほど鎮静度が増加(覚醒度が減少)する。 Here, the mental state can be expressed, for example, by a two-dimensional psychological model (for example, Russell's circular model) using comfort level and alertness level as indicators (see FIG. 2). The comfort level is an index indicating the level of comfort. The degree of alertness is an index indicating the level of alertness. In the two-dimensional psychological model shown in FIG. 2, the X-axis (comfort axis) indicates comfort level, and the Y-axis (arousal axis) indicates alertness level. Regarding the comfort level on the X-axis, the positive region of the X-axis is "comfortable" and the negative region of the X-axis is "uncomfortable." The comfort level increases as the level (absolute value) in the positive region of the X-axis increases, and the discomfort level increases (comfort level decreases) as the level (absolute value) in the negative region of the X-axis increases. do. Regarding the level of arousal on the Y-axis, the positive region of the Y-axis is "awakening" and the negative region of the Y-axis is "sedation." The degree of arousal increases as the level (absolute value) in the positive region of the Y-axis increases, and the degree of sedation increases (decreases the degree of arousal) as the level (absolute value) in the negative region of the Y-axis increases. do.

また、図2の二次元心理モデルでは、精神状態の種類とその種類に対応する基準点が示されている。精神状態の種類とは、例えば、興奮、幸福、安心、眠気、憂鬱、悲しみ、不満、怒り等である。二次元心理モデル上における、快適度及び覚醒度を座標軸とした二次元パラメータで表される精神評価点の位置(座標)に応じて、精神状態がどのような状態(種類)であり、さらにその状態の度合いが表される。二次元心理モデル上において、複数の基準点のうち、精神評価点に最も近い基準点に対応する種類が、ユーザの精神状態を表している。例えば、精神評価点に最も近い基準点に対応する種類が「リラックス」である場合、ユーザの精神状態がリラックス状態であることを示している。また、精神評価点と、リラックスの基準点との距離が短いほど、リラックス状態の度合いが高い、つまり、よりリラックスした状態であることを示している。 Further, in the two-dimensional psychological model of FIG. 2, types of mental states and reference points corresponding to the types are shown. The types of mental states include, for example, excitement, happiness, peace of mind, sleepiness, depression, sadness, dissatisfaction, and anger. Depending on the position (coordinates) of the mental evaluation point on the two-dimensional psychological model, which is expressed as a two-dimensional parameter with comfort and alertness as the coordinate axes, it is possible to determine what state (type) the mental state is, and furthermore, The degree of the condition is expressed. On the two-dimensional psychological model, among the plurality of reference points, the type corresponding to the reference point closest to the mental evaluation point represents the user's mental state. For example, if the type corresponding to the reference point closest to the mental evaluation score is "relax", this indicates that the user's mental state is relaxed. Further, the shorter the distance between the mental evaluation score and the relaxation reference point, the higher the degree of relaxation, that is, the more relaxed the state is.

算出部42は、通信部41を介して受信した生体情報を用いて、快適度及び覚醒度を算出する。つまり、算出部42は、生体情報に基づいて、二次元心理モデルにおける快適軸及び覚醒軸を座標軸とする二次元パラメータとして精神評価点を求める。そして、算出部42は、求めた二次元パラメータ(精神評価点)を一次元化することによりメンタル度を算出する。 The calculation unit 42 uses the biological information received via the communication unit 41 to calculate the comfort level and the alertness level. That is, the calculation unit 42 calculates the mental evaluation score as a two-dimensional parameter whose coordinate axes are the comfort axis and the arousal axis in the two-dimensional psychological model, based on the biological information. Then, the calculating unit 42 calculates the mental level by converting the obtained two-dimensional parameters (mental evaluation scores) into one-dimensional.

具体的には、算出部42は、算出対象のメンタル度に対応する精神状態の種類に基づいて、メンタル度の指標とする座標軸(基準座標軸とする)を決定する。この基準座標軸は、二次元心理モデルにおいて、算出対象のメンタル度に対応する精神状態の種類の基準点と、快適軸及び覚醒軸の交点Oと、を通る軸である。算出部42は、精神評価点を通って基準座標軸と直交する垂線が基準座標軸と交差する交点を、メンタル度として算出する。メンタル度の大きさは、基準点と交点との間の距離に応じて求まる。基準座標軸において、基準点に近いほどメンタル度が大きい。つまり、算出部42は、二次元パラメータである精神評価点を、快適軸とか覚醒軸との交点Oを通る軸を座標軸とする一次元パラメータに変換する一次元化することにより、メンタル度を算出する。 Specifically, the calculation unit 42 determines a coordinate axis (referred to as a reference coordinate axis) to be used as an index of the mental degree based on the type of mental state corresponding to the mental degree to be calculated. In the two-dimensional psychological model, this reference coordinate axis is an axis that passes through the reference point of the type of mental state corresponding to the mental degree to be calculated and the intersection O of the comfort axis and the arousal axis. The calculation unit 42 calculates the intersection point where a perpendicular line passing through the mental evaluation point and perpendicular to the reference coordinate axis intersects with the reference coordinate axis, as the mental degree. The magnitude of the mental degree is determined according to the distance between the reference point and the intersection point. In the reference coordinate axes, the closer to the reference point, the greater the mental degree. In other words, the calculation unit 42 calculates the mental degree by converting the mental evaluation score, which is a two-dimensional parameter, into a one-dimensional parameter whose coordinate axis is an axis passing through the intersection O with the comfort axis and the arousal axis. do.

例えば、図3A、図3Bを参照して、算出対象のメンタル度に対応する精神状態の種類が「ストレス」である場合について説明する。この場合、二次元心理モデルにおける「ストレス」に対応する基準点P10が、快適軸上に存在しているので、基準座標軸Z1が快適軸と重なる。ここでは、一例として、時刻t1~t4の精神評価点がそれぞれP1、P2、P3、及びP4であるとする。精神評価点P1は、快適度及び覚醒度の両方が正である。精神評価点P2は、快適度が正であり、覚醒度が負である。精神評価点P3は、快適度及び覚醒度の両方が負である。精神評価点P4は、快適度が負であり、覚醒度が正である。 For example, with reference to FIGS. 3A and 3B, a case where the type of mental state corresponding to the mental level to be calculated is "stress" will be described. In this case, since the reference point P10 corresponding to "stress" in the two-dimensional psychological model exists on the comfort axis, the reference coordinate axis Z1 overlaps with the comfort axis. Here, as an example, it is assumed that the mental evaluation scores at times t1 to t4 are P1, P2, P3, and P4, respectively. The mental evaluation score P1 is positive in both the comfort level and the alertness level. The mental evaluation score P2 has a positive level of comfort and a negative level of alertness. The mental evaluation score P3 is negative in both the comfort level and the alertness level. The mental evaluation point P4 has a negative comfort level and a positive alertness level.

基準座標軸Z1において、精神評価点P1~P4それぞれを通る垂線が交差する点M11~M14が、それぞれ時刻t1~t4のメンタル度(ストレス度ともいう)である。ストレス度は、大きい順にM14、M13、M11、M12である(M14>M13>M11>M12)。図3Bに示すように、ストレス度は、時刻t1から時刻t2では一旦低下しているが、その後増加している。 On the reference coordinate axis Z1, points M11 to M14 where perpendicular lines passing through the mental evaluation points P1 to P4 intersect each other are the mental levels (also referred to as stress levels) at times t1 to t4, respectively. The stress levels are M14, M13, M11, and M12 in descending order (M14>M13>M11>M12). As shown in FIG. 3B, the stress level temporarily decreases from time t1 to time t2, but increases thereafter.

別の例として、図4A、図4Bを参照して、算出対象のメンタル度に対応する精神状態の種類が「リラックス」である場合について説明する。この場合、二次元心理モデルにおける「リラックス」に対応する基準点P11と、快適軸及び覚醒軸の交点Oとを通る軸が基準座標軸Z2となる。 As another example, a case will be described in which the type of mental state corresponding to the mental degree to be calculated is "relax" with reference to FIGS. 4A and 4B. In this case, the axis passing through the reference point P11 corresponding to "relaxation" in the two-dimensional psychological model and the intersection O of the comfort axis and the arousal axis becomes the reference coordinate axis Z2.

基準座標軸Z2において、精神評価点P1~P4それぞれを通る垂線が交差する点M21~M24が、それぞれ時刻t1~t4のメンタル度(リラックス度ともいう)である。リラックス度は、大きい順にM22、M23、M21、M24である(M22>M23>M21>M24)。図4Bに示すように、リラックス度は、時刻t1から時刻t2では一旦増加し、その後低下している。 On the reference coordinate axis Z2, points M21 to M24 where perpendicular lines passing through the mental evaluation points P1 to P4 intersect each other are the mental degrees (also referred to as relaxation degrees) at times t1 to t4, respectively. The relaxation degrees are M22, M23, M21, and M24 in descending order (M22>M23>M21>M24). As shown in FIG. 4B, the degree of relaxation increases once from time t1 to time t2, and then decreases.

ここでは、精神状態の種類がストレス、リラックスの場合を例に説明したが、他の種類のメンタル度も上記同様に算出することができる。 Here, the case where the type of mental state is stress and relaxation is explained as an example, but other types of mental states can be calculated in the same manner as above.

算出部42は、精神状態に基づいて算出したメンタル度のデータを、通信部41を介して携帯端末3に送信する。 The calculation unit 42 transmits data on the mental level calculated based on the mental state to the mobile terminal 3 via the communication unit 41.

また、算出部42は、複数のユーザそれぞれのメンタル度についても、上記同様に算出している。算出部42は、算出した複数のユーザそれぞれのメンタル度のデータを、ユーザの識別情報に対応付けて記憶部44に記憶する。 Further, the calculation unit 42 calculates the mental level of each of the plurality of users in the same manner as described above. The calculation unit 42 stores the calculated mental level data of each of the plurality of users in the storage unit 44 in association with the user's identification information.

記憶部44は、HDD(Hard Disk Drive)、SSD(Solid State Drive)等から選択される記憶デバイスで構成されている。記憶部44には、複数のユーザそれぞれのメンタル度のデータを記憶する。さらに記憶部44は、携帯端末3から送信された行動情報をユーザの識別情報に対応付けて記憶する。つまり、記憶部44は、複数のユーザそれぞれのメンタル度及び行動情報を時刻情報に対応付けて記憶する。 The storage unit 44 is configured with a storage device selected from HDD (Hard Disk Drive), SSD (Solid State Drive), and the like. The storage unit 44 stores data on the mental health of each of a plurality of users. Furthermore, the storage unit 44 stores the behavior information transmitted from the mobile terminal 3 in association with the user's identification information. That is, the storage unit 44 stores the mental level and behavior information of each of the plurality of users in association with time information.

分析部43は、算出部42が算出したメンタル度を分析した分析情報を生成するように構成されている。具体的には、分析部43は、ユーザのメンタル度と比較するための、他ユーザのメンタル度のデータを、分析情報として生成する。分析部43は、記憶部44に記憶されている複数のユーザのメンタル度のデータを参照し、単位時間ごと(例えば1時間ごと)の複数のユーザのメンタル度の平均値、及び標準偏差(2σ)を算出する。そして、分析部43は、複数の他ユーザのメンタル度の代表データとして、正規分布データを生成する。正規分布データは、単位時間ごとに、メンタル度の平均値に標準偏差(2σ)を足した値を上限値、メンタル度の平均値から標準偏差(2σ)を引いた値を下限値とするデータである。なお、標準偏差は2σに限らず、σ又は3σであってもよい。また、代表データには、他ユーザのメンタル度の中央値、最頻値等が含まれていてもよい。 The analysis unit 43 is configured to generate analysis information by analyzing the mental level calculated by the calculation unit 42. Specifically, the analysis unit 43 generates data on the mental level of other users as analysis information for comparison with the user's mental level. The analysis unit 43 refers to the mental level data of the plurality of users stored in the storage unit 44, and calculates the average value and standard deviation (2σ ) is calculated. Then, the analysis unit 43 generates normal distribution data as representative data of the mental degrees of the plurality of other users. Normal distribution data is data whose upper limit is the average value of mental health plus the standard deviation (2σ), and the lower limit is the value that is the average value of mental health minus the standard deviation (2σ). It is. Note that the standard deviation is not limited to 2σ, but may be σ or 3σ. Further, the representative data may include the median value, mode value, etc. of other users' mental degrees.

ここでは、分析部43は、他ユーザとして、ユーザと同じような属性を有する人物を選択することが好ましい。ここでいう「属性」とは、性別、年齢(年代)、職業、未婚・既婚、子供の年齢等である。本実施形態では、ユーザとして育児中の母親を想定しているため、分析部43は、他ユーザとして育児中の母親を選択して、分析情報を生成する。 Here, it is preferable that the analysis unit 43 selects, as the other user, a person who has similar attributes to the user. The "attributes" here include gender, age (generation), occupation, single/married status, age of children, and the like. In this embodiment, since the user is assumed to be a mother who is raising children, the analysis unit 43 selects the mother who is raising children as another user and generates analysis information.

分析部43は、生成した分析情報(正規分布データ)を、通信部41を介して携帯端末3に送信する。 The analysis unit 43 transmits the generated analysis information (normal distribution data) to the mobile terminal 3 via the communication unit 41.

携帯端末3では、表示制御部33は、サーバ4から送信されたメンタル度、及び分析情報を表示部36に表示させる表示処理を行う。図5Aに、表示制御部33が表示部36に表示させる表示内容の一例を示す。図5Aでは、メンタル度としてストレス度を表示している。 In the mobile terminal 3, the display control unit 33 performs display processing to display the mental level and analysis information transmitted from the server 4 on the display unit 36. FIG. 5A shows an example of display content displayed on the display unit 36 by the display control unit 33. In FIG. 5A, the stress level is displayed as the mental level.

図5Aに示すように、表示制御部33は、メンタル度、及び分析情報を時系列で表示する。表示制御部33は、ユーザのメンタル度のグラフD1と、分析情報のグラフ、具体的には平均値のグラフD20、上限値のグラフD21、及び下限値のグラフD22と、をまとめて表示部36に表示させている。 As shown in FIG. 5A, the display control unit 33 displays the mental level and analysis information in chronological order. The display control unit 33 displays the user's mental level graph D1 and the analysis information graph, specifically, the average value graph D20, the upper limit value graph D21, and the lower limit value graph D22, together on the display unit 36. It is displayed on .

したがって、ユーザは、自身のメンタル度(グラフD1)と、他ユーザのメンタル度(グラフD20~D22)とを容易に比較することができ、自身の精神状態を客観的に知ることができる。例えば、ユーザのメンタル度が、正規分布データに含まれていれば、ユーザは、子育てで感じているストレスを、他ユーザも同様に感じていることを知ることができ、安心感、自己肯定感等を得ることができる。 Therefore, the user can easily compare his own mental state (graph D1) with the mental states of other users (graphs D20 to D22), and can objectively know his own mental state. For example, if the user's mental level is included in normal distribution data, the user will be able to know that other users are also feeling the same stress they are feeling while raising children, which will give them a sense of security and self-affirmation. etc. can be obtained.

また、表示部36には、メンタル度の変化が時系列で表示されている。そのため、ユーザは、例えば、どのような時間帯にストレスが大きくなり、どのような時間帯にストレスが小さくなっているかを把握することができる。 Further, the display unit 36 displays changes in the mental level in chronological order. Therefore, the user can understand, for example, in what time periods the stress is high and in what time periods the stress is low.

さらに、表示制御部33は、メンタル度と共にユーザの行動情報を時系列で表示部36に表示させる。これにより、ユーザは、自身の行動とメンタル度との関係を把握することができる。そのため、ユーザは、例えば、どのような行動を行っているときにストレスが大きくなり、どのような行動を行っているときにストレスが小さくなるかを把握することできる。 Further, the display control unit 33 causes the display unit 36 to display the user's behavior information in chronological order along with the mental level. This allows the user to understand the relationship between his or her own behavior and mental health. Therefore, the user can understand, for example, what kind of behavior causes stress to increase and what kind of behavior causes stress to decrease.

また、図5Bに示すように、表示制御部33は、ユーザによる操作部37への操作内容に応じて、分析情報として他ユーザのメンタル度及び行動情報を表示部36に表示させる。具体的には、表示制御部33は、正規分布データの対象となった複数の他ユーザのうち、一人の他ユーザのメンタル度及び行動情報を表示部36に表示させる。例えば、表示制御部33は、メンタル度のグラフの表示画面において、ユーザによって選択(例えばタッチパネルディスプレイのタップ)された任意の点を通る、他ユーザのメンタル度のグラフD3、及び当該他ユーザの行動情報を表示部36に表示させる(図5B参照)。図5Bは、ユーザが、正規分布データの下限値のグラフD22上の点S1をタップした場合の表示画面の例であって、この点S1を通る、他ユーザのメンタル度のグラフD3、及び当該他ユーザの行動情報が表示されている。 Further, as shown in FIG. 5B, the display control unit 33 causes the display unit 36 to display the mental level and behavioral information of other users as analysis information, depending on the operation details of the operation unit 37 by the user. Specifically, the display control unit 33 causes the display unit 36 to display the mental level and behavior information of one other user among the plurality of other users who are the targets of the normal distribution data. For example, the display control unit 33 displays a graph D3 of the other user's mental level that passes through an arbitrary point selected by the user (for example, by tapping on the touch panel display) on the display screen of the graph of the mental level, and the behavior of the other user. The information is displayed on the display unit 36 (see FIG. 5B). FIG. 5B is an example of a display screen when the user taps the point S1 on the graph D22 of the lower limit value of the normal distribution data, and the graph D3 of other users' mental degrees passing through this point S1 and the corresponding Behavior information of other users is displayed.

これにより、ユーザは、例えば、メンタル度が比較的低い他ユーザの行動を参考に、自身の行動を見直すことができ、精神状態の改善を図ることができる。また、ユーザが、メンタル度が比較的高い他ユーザの行動を参考にした場合、どのような行動を行った場合にメンタル度が悪化するかを知ることができる。 Thereby, the user can, for example, review his own behavior with reference to the behavior of other users with relatively low mental health, and can improve his mental state. Further, when the user refers to the actions of other users who have a relatively high mental level, it is possible to know what kind of behavior would worsen the mental level.

また、図5A、図5Bに示す例では、メンタル度としてストレス度を表示しているが、他の種類のメンタル度(例えば、リラックス度、興奮度、怒り度等)を表示してもよい。表示部36に表示されるメンタル度の種類は、ユーザによる操作部37への操作によって適宜選択可能である。 Further, in the examples shown in FIGS. 5A and 5B, the stress level is displayed as the mental level, but other types of mental levels (for example, relaxation level, excitement level, anger level, etc.) may be displayed. The type of mental level displayed on the display section 36 can be appropriately selected by the user's operation on the operation section 37.

また、本実施形態では、携帯端末3にコミュニケーションアプリ(アプリケーション)がインストールされている。コミュニケーションアプリとは、他者の携帯端末3との間で、メッセージ、画像(写真、イラスト、動画)等をやりとりするためのプログラムである。コミュニケーションアプリは、携帯端末3の処理部30において実行される。 Furthermore, in this embodiment, a communication app (application) is installed on the mobile terminal 3. The communication application is a program for exchanging messages, images (photos, illustrations, videos), etc. with another person's mobile terminal 3. The communication application is executed in the processing unit 30 of the mobile terminal 3.

図6Aにコミュニケーションアプリでの画面の一例を示す。 FIG. 6A shows an example of a screen in the communication application.

図6Aに示す例では、ユーザと、○○さんとの、メッセージ交換を行っている。図6Aでは、ユーザの発言が右側に表示され、○○さんの発言が左側に表示されている。○○さんがユーザに対して「元気?」と発言した後、ユーザが「元気だよ!」と返事をしている。 In the example shown in FIG. 6A, messages are being exchanged between the user and Mr. ○○. In FIG. 6A, the user's comments are displayed on the right side, and Mr. ○○'s comments are displayed on the left side. After Mr. ○○ says to the user, "How are you?", the user replies, "I'm fine!"

ここで、本実施形態の携帯端末3では、コミュニケーションアプリにおいて、ユーザの現在の精神状態を表す表情のイラスト(スタンプ)を送信する機能を有している。処理部30は、コミュニケーションアプリにおいて、ユーザが、現在の精神状態に近いイラストを送信するための操作(例えばボタン選択等)を行った場合、複数のイラストのうち、ユーザの現在の精神状態に近い状態を表すイラストを選択する。具体的には、図6Bに示すように、複数のイラストは、二次元心理モデル上の精神状態の種類に対応付けられている。処理部30は、算出部42が算出した精神評価点を取得し、精神評価点に基づいて、複数のイラストのうち、精神評価点に最も近いイラストを選択する。そして、処理部30は、コミュニケーションアプリにおいて、選択したイラスト(図6AではA1)を送信する。 Here, in the communication application, the mobile terminal 3 of this embodiment has a function of transmitting an illustration (stamp) of a facial expression representing the user's current mental state. When the user performs an operation (for example, button selection, etc.) to send an illustration that is close to the user's current mental state in the communication application, the processing unit 30 selects one of the multiple illustrations that is close to the user's current mental state. Select an illustration to represent the condition. Specifically, as shown in FIG. 6B, the plurality of illustrations are associated with the types of mental states on the two-dimensional psychological model. The processing unit 30 obtains the mental evaluation score calculated by the calculation unit 42, and selects the illustration closest to the mental evaluation score from among the plurality of illustrations based on the mental evaluation score. Then, the processing unit 30 transmits the selected illustration (A1 in FIG. 6A) in the communication application.

これにより、ユーザは、複数のイラストから自身の精神状態に近いイラストを選択する手間を省くことができる。 Thereby, the user can save the effort of selecting an illustration that is close to his or her mental state from a plurality of illustrations.

上記実施形態は、本開示の様々な実施形態の一つに過ぎない。上記実施形態は、本開示の目的を達成できれば、設計等に応じて種々の変更が可能である。 The above embodiment is only one of various embodiments of the present disclosure. The embodiments described above can be modified in various ways depending on the design, etc., as long as the objective of the present disclosure can be achieved.

表示システム1と同様の機能は、表示方法、コンピュータプログラム、又はプログラムを記録した非一時的な記録媒体等で具現化されてもよい。一態様に係る表示方法は、生体情報取得処理と、表示処理と、を含む。生体情報表示処理では、ユーザの生体活動に関連する生体情報を取得する。表示処理では、生体情報に基づいたユーザの精神状態の度合いを示すメンタル度、及びメンタル度を分析した分析情報を表示部36に表示させる。一態様に係る(コンピュータ)プログラムは、コンピュータシステムに、上記の表示方法を実行させるためのプログラムである。 Functions similar to those of the display system 1 may be realized by a display method, a computer program, a non-temporary recording medium on which a program is recorded, or the like. A display method according to one embodiment includes biological information acquisition processing and display processing. In the biological information display process, biological information related to the user's biological activity is acquired. In the display process, the display unit 36 displays the mental level indicating the degree of the user's mental state based on the biological information, and the analysis information obtained by analyzing the mental level. A (computer) program according to one embodiment is a program for causing a computer system to execute the above display method.

本開示における表示システム1は、コンピュータシステムを含んでいる。コンピュータシステムは、ハードウェアとしてのプロセッサ及びメモリを主構成とする。コンピュータシステムのメモリに記録されたプログラムをプロセッサが実行することによって、本開示における表示システム1としての機能が実現される。プログラムは、コンピュータシステムのメモリに予め記録されてもよく、電気通信回線を通じて提供されてもよく、コンピュータシステムで読み取り可能なメモリカード、光学ディスク、ハードディスクドライブ等の非一時的記録媒体に記録されて提供されてもよい。コンピュータシステムのプロセッサは、半導体集積回路(IC)又は大規模集積回路(LSI)を含む1ないし複数の電子回路で構成される。ここでいうIC又はLSI等の集積回路は、集積の度合いによって呼び方が異なっており、システムLSI、VLSI(Very Large Scale Integration)、又はULSI(Ultra Large Scale Integration)と呼ばれる集積回路を含む。さらに、LSIの製造後にプログラムされる、FPGA(Field-Programmable Gate Array)、又はLSI内部の接合関係の再構成若しくはLSI内部の回路区画の再構成が可能な論理デバイスについても、プロセッサとして採用することができる。複数の電子回路は、1つのチップに集約されていてもよいし、複数のチップに分散して設けられていてもよい。複数のチップは、1つの装置に集約されていてもよいし、複数の装置に分散して設けられていてもよい。ここでいうコンピュータシステムは、1以上のプロセッサ及び1以上のメモリを有するマイクロコントローラを含む。したがって、マイクロコントローラについても、半導体集積回路又は大規模集積回路を含む1ないし複数の電子回路で構成される。 The display system 1 in the present disclosure includes a computer system. A computer system mainly consists of a processor and a memory as hardware. The functions of the display system 1 in the present disclosure are realized by a processor executing a program recorded in the memory of the computer system. The program may be pre-recorded in the memory of the computer system, may be provided through a telecommunications line, or may be recorded on a non-transitory storage medium readable by the computer system, such as a memory card, optical disc, hard disk drive, etc. may be provided. A processor in a computer system is comprised of one or more electronic circuits including semiconductor integrated circuits (ICs) or large scale integrated circuits (LSIs). The integrated circuits such as IC or LSI referred to herein have different names depending on the degree of integration, and include integrated circuits called system LSI, VLSI (Very Large Scale Integration), or ULSI (Ultra Large Scale Integration). Furthermore, an FPGA (Field-Programmable Gate Array), which is programmed after the LSI is manufactured, or a logic device that can reconfigure the connections inside the LSI or reconfigure the circuit sections inside the LSI, may also be used as a processor. I can do it. The plurality of electronic circuits may be integrated into one chip, or may be provided in a distributed manner over a plurality of chips. A plurality of chips may be integrated into one device, or may be distributed and provided in a plurality of devices. The computer system herein includes a microcontroller having one or more processors and one or more memories. Therefore, the microcontroller is also composed of one or more electronic circuits including semiconductor integrated circuits or large-scale integrated circuits.

また、表示システム1における複数の機能が、複数の筐体(クラウドコンピューティングを含む)に分散して設けられることは表示システム1に必須の構成ではなく、表示システム1の構成要素は、1つの筐体内に集約されていてもよい。例えば、表示システム1における算出部42、及び分析部43は、携帯端末3に設けられていてもよい。 Furthermore, it is not an essential configuration for the display system 1 that multiple functions in the display system 1 are distributed and provided in multiple cases (including cloud computing), and the components of the display system 1 are They may be concentrated within the housing. For example, the calculation unit 42 and analysis unit 43 in the display system 1 may be provided in the mobile terminal 3.

(まとめ)
第1態様に係る表示方法は、生体情報取得処理と、表示処理と、を含む。生体情報表示処理では、ユーザの生体活動に関連する生体情報を取得する。表示処理では、生体情報に基づいたユーザの精神状態の度合いを示すメンタル度、及びメンタル度を分析した分析情報を表示部(36)に表示させる。
(summary)
The display method according to the first aspect includes biological information acquisition processing and display processing. In the biological information display process, biological information related to the user's biological activity is acquired. In the display process, the display unit (36) displays the mental level indicating the degree of the user's mental state based on the biological information, and the analysis information obtained by analyzing the mental level.

この態様によれば、ユーザが、表示部(36)に表示されたメンタル度、分析情報を確認することにより、自身の精神状態を客観的に知ることができる。 According to this aspect, the user can objectively know his or her own mental state by checking the mental level and analysis information displayed on the display unit (36).

第2態様に係る表示方法では、第1態様において、表示処理は、表示部(36)にメンタル度を時系列で表示させる。 In the display method according to the second aspect, in the first aspect, the display process causes the display unit (36) to display the mental level in chronological order.

この態様によれば、ユーザが、時間経過に伴うメンタル度の変化を把握しやすくなる。 According to this aspect, it becomes easier for the user to understand changes in mental level over time.

第3態様に係る表示方法は、第1又は第2態様において、行動情報取得処理を更に含む。行動情報取得処理では、ユーザの行動に関する行動情報を取得する。表示処理では、表示部(36)に行動情報を更に表示させる。 The display method according to the third aspect further includes behavior information acquisition processing in the first or second aspect. In the behavior information acquisition process, behavior information regarding the user's behavior is acquired. In the display process, behavior information is further displayed on the display unit (36).

この態様によれば、ユーザが、メンタル度と行動の関連性を把握しやすくなる。 According to this aspect, it becomes easier for the user to understand the relationship between mental level and behavior.

第4態様に係る表示方法では、第1~第3態様のいずれかにおいて、分析情報は、ユーザとは異なる他ユーザの精神状態の度合いを示すメンタル度を含む。 In the display method according to the fourth aspect, in any of the first to third aspects, the analysis information includes a mental level indicating the degree of mental state of another user different from the user.

この態様によれば、ユーザが、自身のメンタル度と他ユーザのメンタル度とを比較することができる。 According to this aspect, the user can compare his or her own mental level with the mental level of other users.

第5態様に係る表示方法では、第4態様において、分析情報は、複数の他ユーザのメンタル度の代表データを含む。 In the display method according to the fifth aspect, in the fourth aspect, the analysis information includes representative data of mental degrees of a plurality of other users.

この態様によれば、ユーザが、自身のメンタル度と、複数の他ユーザのメンタル度とを比較することができる。 According to this aspect, the user can compare his or her own mental level with the mental levels of a plurality of other users.

第6態様に係る表示方法では、第4又は第5態様において、表示処理では、表示部(36)に他ユーザの行動に関する行動情報を更に表示させる。 In the display method according to the sixth aspect, in the fourth or fifth aspect, in the display process, the display unit (36) further displays behavior information regarding the behavior of other users.

この態様によれば、ユーザが、自身の行動と、他ユーザの行動とを比較することができ、自身のメンタル度と行動との関連性をより詳細に把握しやすくなる。 According to this aspect, the user can compare his or her own behavior with the behavior of other users, making it easier for the user to understand the relationship between his or her own mental level and behavior in more detail.

第7態様に係る表示方法では、第1~第6態様のいずれかにおいて、メンタル度は、快適度を示す快適軸と覚醒度を示す覚醒軸とで表される精神状態の二次元パラメータを、快適軸と覚醒軸との交点を通る軸を座標軸とする一次元パラメータに変換したデータである。 In the display method according to the seventh aspect, in any of the first to sixth aspects, the mental level is a two-dimensional parameter of the mental state expressed by a comfort axis indicating the comfort level and an arousal axis indicating the alertness level. This data is converted into a one-dimensional parameter whose coordinate axis is an axis passing through the intersection of the comfort axis and the arousal axis.

この態様によれば、メンタル度を一次元パラメータで定量化することができ、ユーザが自身の精神状態を把握しやすくなる。 According to this aspect, the mental level can be quantified using a one-dimensional parameter, making it easier for the user to understand his or her own mental state.

第8態様に係るプログラムは、コンピュータシステムに、第1~第7態様のいずれかの表示方法を実行させる。 The program according to the eighth aspect causes the computer system to execute the display method according to any one of the first to seventh aspects.

この態様によれば、ユーザが、表示部(36)に表示されたメンタル度、分析情報を確認することにより、自身の精神状態を客観的に知ることができる。 According to this aspect, the user can objectively know his or her own mental state by checking the mental level and analysis information displayed on the display unit (36).

第9態様に係る表示システム(1)は、測定部(21)と、生体情報取得部(31)と、算出部(42)と、分析部(43)と、表示部(36)と、を備える。測定部(21)は、ユーザの生体活動に関連する生体情報を測定する。生体情報取得部(31)は、測定部(21)から生体情報を取得する。算出部(42)は、生体情報に基づいたユーザの精神状態の度合いを示すメンタル度を算出する。分析部(43)は、メンタル度を分析した分析情報を生成する。表示部(36)は、メンタル度及び分析情報を表示する。 The display system (1) according to the ninth aspect includes a measurement section (21), a biological information acquisition section (31), a calculation section (42), an analysis section (43), and a display section (36). Be prepared. The measurement unit (21) measures biological information related to the user's biological activity. The biological information acquisition section (31) acquires biological information from the measurement section (21). A calculation unit (42) calculates a mental degree indicating the degree of the user's mental state based on biological information. The analysis unit (43) generates analysis information by analyzing the mental level. The display unit (36) displays the mental level and analysis information.

この態様によれば、ユーザが、表示部(36)に表示されたメンタル度、分析情報を確認することにより、自身の精神状態を客観的に知ることができる。 According to this aspect, the user can objectively know his or her own mental state by checking the mental level and analysis information displayed on the display unit (36).

1 表示システム
21 測定部
31 生体情報取得部
36 表示部
42 算出部
43 分析部
1 Display system 21 Measurement section 31 Biological information acquisition section 36 Display section 42 Calculation section 43 Analysis section

Claims (6)

ユーザの生体活動に関連する生体情報を取得する生体情報取得処理と、
前記生体情報に基づいた前記ユーザの精神状態の度合いを示すメンタル度、及び前記メンタル度を分析した分析情報を表示部に表示させる表示処理と、を含み、
前記メンタル度は、快適度を示す快適軸と覚醒度を示す覚醒軸とで表される精神状態の二次元パラメータを、前記快適軸と前記覚醒軸との交点を通る軸を座標軸とする一次元パラメータに変換したデータであ
前記分析情報は、前記ユーザとは異なる他ユーザの精神状態の度合いを示すメンタル度を含み、かつ、複数の前記他ユーザの前記メンタル度の代表データを含み、
前記表示処理では、前記表示部において、前記複数の他ユーザの前記メンタル度の前記代表データとして正規分布データを表示し、前記ユーザが前記正規分布データ上の任意の点を選択すると、前記複数の他ユーザのうちの前記任意の点を通る他ユーザの前記メンタル度及び行動情報を表示する、
表示方法。
a biological information acquisition process that acquires biological information related to the user's biological activities;
A display process for displaying a mental level indicating the degree of the user's mental state based on the biological information, and analysis information obtained by analyzing the mental level on a display unit,
The mental level is a two-dimensional parameter of the mental state expressed by a comfort axis indicating the comfort level and an arousal axis indicating the alertness level, and a one-dimensional parameter whose coordinate axis is an axis passing through the intersection of the comfort axis and the alertness axis. This is data converted to parameters,
The analysis information includes a mental level indicating a degree of mental state of another user different from the user, and includes representative data of the mental level of a plurality of other users,
In the display process, normal distribution data is displayed on the display unit as the representative data of the mental degrees of the plurality of other users, and when the user selects an arbitrary point on the normal distribution data, the plurality of displaying the mental level and behavior information of other users who pass through the arbitrary point;
Display method.
前記表示処理では、前記表示部に前記メンタル度を時系列で表示させる、
請求項1に記載の表示方法。
In the display process, displaying the mental level on the display unit in chronological order;
The display method according to claim 1.
前記ユーザの行動に関する行動情報を取得する行動情報取得処理を更に含み、
前記表示処理では、前記表示部に前記行動情報を更に表示させる、
請求項1又は2に記載の表示方法。
further comprising a behavior information acquisition process of acquiring behavior information regarding the user's behavior,
In the display process, the behavior information is further displayed on the display unit,
The display method according to claim 1 or 2.
前記表示処理では、前記表示部に前記他ユーザの行動に関する行動情報を更に表示させる、In the display process, the display unit further displays behavior information regarding the behavior of the other user;
請求項1~3のいずれか1項に記載の表示方法。 The display method according to any one of claims 1 to 3.
コンピュータシステムに、請求項1~4のいずれか1項に記載の表示方法を実行させるためのプログラム。A program for causing a computer system to execute the display method according to any one of claims 1 to 4. ユーザの生体活動に関連する生体情報を測定する測定部と、a measurement unit that measures biological information related to the user's biological activity;
前記測定部から前記生体情報を取得する生体情報取得部と、 a biological information acquisition unit that acquires the biological information from the measurement unit;
前記生体情報に基づいた前記ユーザの精神状態の度合いを示すメンタル度を算出する算出部と、 a calculation unit that calculates a mental level indicating the degree of the user's mental state based on the biological information;
前記メンタル度を分析した分析情報を生成する分析部と、 an analysis unit that generates analysis information by analyzing the mental level;
前記メンタル度及び前記分析情報を表示する表示部と、を備え、 a display unit that displays the mental level and the analysis information,
前記メンタル度は、快適度を示す快適軸と覚醒度を示す覚醒軸とで表される精神状態の二次元パラメータを、前記快適軸と前記覚醒軸との交点を通る軸を座標軸とする一次元パラメータに変換したデータであり、 The mental level is a two-dimensional parameter of the mental state expressed by a comfort axis indicating the comfort level and an arousal axis indicating the alertness level, and a one-dimensional parameter whose coordinate axis is an axis passing through the intersection of the comfort axis and the alertness axis. This is data converted to parameters,
前記分析情報は、前記ユーザとは異なる他ユーザの精神状態の度合いを示すメンタル度を含み、かつ、複数の前記他ユーザの前記メンタル度の代表データを含み、 The analysis information includes a mental level indicating a degree of mental state of another user different from the user, and includes representative data of the mental level of a plurality of other users,
前記表示部は、前記複数の他ユーザの前記メンタル度の前記代表データとして正規分布データを表示し、前記ユーザが前記正規分布データ上の任意の点を選択すると、前記複数の他ユーザのうちの前記任意の点を通る他ユーザの前記メンタル度及び行動情報を表示する、 The display unit displays normal distribution data as the representative data of the mental degrees of the plurality of other users, and when the user selects an arbitrary point on the normal distribution data, the displaying the mental level and behavior information of other users passing through the arbitrary point;
表示システム。 display system.
JP2019036911A 2019-02-28 2019-02-28 Display methods, programs, and display systems Active JP7352789B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019036911A JP7352789B2 (en) 2019-02-28 2019-02-28 Display methods, programs, and display systems

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019036911A JP7352789B2 (en) 2019-02-28 2019-02-28 Display methods, programs, and display systems

Publications (2)

Publication Number Publication Date
JP2020137895A JP2020137895A (en) 2020-09-03
JP7352789B2 true JP7352789B2 (en) 2023-09-29

Family

ID=72279619

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019036911A Active JP7352789B2 (en) 2019-02-28 2019-02-28 Display methods, programs, and display systems

Country Status (1)

Country Link
JP (1) JP7352789B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023199422A1 (en) * 2022-04-13 2023-10-19 日本電気株式会社 Inner state inference device, inner state inference method, and storage medium

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005222518A (en) 2004-01-08 2005-08-18 Daikin Ind Ltd Worker management system, method, device, and program
JP2006268395A (en) 2005-03-24 2006-10-05 Fuji Xerox Co Ltd Information processor, information processing method and program
US20110300847A1 (en) 2010-06-02 2011-12-08 Q-Tec Systems Llc Method and apparatus for monitoring emotion in an interactive network
JP2013537435A (en) 2010-06-07 2013-10-03 アフェクティヴァ,インコーポレイテッド Psychological state analysis using web services
WO2016170810A1 (en) 2015-04-23 2016-10-27 ソニー株式会社 Information processing device, control method, and program
JP2017213278A (en) 2016-06-01 2017-12-07 コニカミノルタ株式会社 Mental health evaluation apparatus, method, and program

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5241598B2 (en) * 2009-05-14 2013-07-17 パナソニック株式会社 Psychological state evaluation device
TWI603213B (en) * 2014-01-23 2017-10-21 國立交通大學 Method for selecting music based on face recognition, music selecting system and electronic apparatus

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005222518A (en) 2004-01-08 2005-08-18 Daikin Ind Ltd Worker management system, method, device, and program
JP2006268395A (en) 2005-03-24 2006-10-05 Fuji Xerox Co Ltd Information processor, information processing method and program
US20110300847A1 (en) 2010-06-02 2011-12-08 Q-Tec Systems Llc Method and apparatus for monitoring emotion in an interactive network
JP2013537435A (en) 2010-06-07 2013-10-03 アフェクティヴァ,インコーポレイテッド Psychological state analysis using web services
WO2016170810A1 (en) 2015-04-23 2016-10-27 ソニー株式会社 Information processing device, control method, and program
JP2017213278A (en) 2016-06-01 2017-12-07 コニカミノルタ株式会社 Mental health evaluation apparatus, method, and program

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
平松拓也ほか,生体情報による感情推定手法とステージの観客反応による評価,マルチメディア,分散,協調とモバイルシンポジウム,日本,情報処理学会,2017年06月,2017,2.3節、4.4節、図1-3、9,情報処理学会電子図書館

Also Published As

Publication number Publication date
JP2020137895A (en) 2020-09-03

Similar Documents

Publication Publication Date Title
US11839473B2 (en) Systems and methods for estimating and predicting emotional states and affects and providing real time feedback
Gupta et al. Measuring human trust in a virtual assistant using physiological sensing in virtual reality
KR102471442B1 (en) A system and a method for generating stress level and stress resilience level information for an individual
Hicks et al. Higher Facebook use predicts greater body image dissatisfaction during pregnancy: The role of self-comparison
US20130245396A1 (en) Mental state analysis using wearable-camera devices
EP3364859A1 (en) System and method for monitoring and determining a medical condition of a user
US11986300B2 (en) Systems and methods for estimating and predicting emotional states and affects and providing real time feedback
JP2017521756A (en) Operating system with color-based health theme
EP3073400B1 (en) System and method for determining psychological stress of a person
WO2019086856A1 (en) Systems and methods for combining and analysing human states
JP7006597B2 (en) Mental and physical condition measuring device, mental and physical condition measuring method, mental and physical condition measuring program and storage medium
Pustiek et al. Challenges in wearable devices based pervasive wellbeing monitoring
CN111436957A (en) Psychological state information processing method and device
Martini et al. Data-driven continuous assessment of frailty in older people
JP7352789B2 (en) Display methods, programs, and display systems
CN114449945A (en) Information processing apparatus, information processing system, and information processing method
JP2021157609A (en) Information processing device, information processing method, and program
JP7466914B2 (en) Method, system, and program for creating health positioning maps and health functions, and methods for using same
US20210137450A1 (en) Breath monitoring and feedback application and methods
US11896384B2 (en) Wearable maternity sensor device
JP2019040525A (en) Affinity analysis system, affinity analysis apparatus, affinity analysis method, and program
JP2019109631A (en) Information providing apparatus and information providing system
WO2022113276A1 (en) Information processing device, control method, and storage medium
Ozkaynak et al. Emerging methods for patient ergonomics
JP7289095B2 (en) sleep education system, sleep education method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221024

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221101

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20221226

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230228

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230404

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230704

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20230713

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230801

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230825

R151 Written notification of patent or utility model registration

Ref document number: 7352789

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151