JP2021033532A - Information processing method, information processing system, and computer program - Google Patents

Information processing method, information processing system, and computer program Download PDF

Info

Publication number
JP2021033532A
JP2021033532A JP2019151449A JP2019151449A JP2021033532A JP 2021033532 A JP2021033532 A JP 2021033532A JP 2019151449 A JP2019151449 A JP 2019151449A JP 2019151449 A JP2019151449 A JP 2019151449A JP 2021033532 A JP2021033532 A JP 2021033532A
Authority
JP
Japan
Prior art keywords
information
pain
user
information processing
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019151449A
Other languages
Japanese (ja)
Other versions
JP7426790B2 (en
Inventor
邦久 大野
Kunihisa Ono
邦久 大野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to JP2019151449A priority Critical patent/JP7426790B2/en
Publication of JP2021033532A publication Critical patent/JP2021033532A/en
Application granted granted Critical
Publication of JP7426790B2 publication Critical patent/JP7426790B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Medical Treatment And Welfare Office Work (AREA)

Abstract

To provide an information processing method, an information processing system and a computer program for achieving the utilization of information on pain by a simple method.SOLUTION: In an information processing system, an information processing method includes processing for allowing an information processing device to acquire operation information on operation corresponding to pain of a user from a portable device (a terminal device) for receiving the operation corresponding to the pain of the user, and display information representing a state of the pain of the user corresponding to the acquired operation information to the user through a display device. Also, it varies the information representing the state of the pain of the user to be displayed in the display device according to the degree of a change in the acquired operation information.SELECTED DRAWING: Figure 7

Description

本技術は、情報処理方法、情報処理システム、及びコンピュータプログラムに関する。 The present technology relates to information processing methods, information processing systems, and computer programs.

医療現場において、患者の治療に対する痛みへの不安感や抵抗感を緩和するために、医療関係者により様々な工夫がなされている。例えば、「心の準備」として、医療関係者から患者である子供に対して事前に治療内容の説明及び治療の重要性を分かり易く伝え、安心して治療に臨める状態に導くプレパレーションは、治療に対する不安感や抵抗感を緩和するための方法の一種である。特許文献1には、プレパレーションに有効な種々のコンテンツ及び疑似体験を提供しつつ効率的な治療等を可能とする医療用VRプレパレーションツールが開示されている。 In the medical field, various measures have been taken by medical personnel in order to alleviate anxiety and resistance to the patient's treatment. For example, as "preparation of the mind", preparations that explain the treatment contents and the importance of treatment to the child who is the patient in advance in an easy-to-understand manner and lead to a state where the treatment can be performed with peace of mind are for treatment. It is a kind of method for alleviating anxiety and resistance. Patent Document 1 discloses a medical VR preparation tool that enables efficient treatment and the like while providing various contents and simulated experiences that are effective for preparation.

特開2017−189591号公報Japanese Unexamined Patent Publication No. 2017-189591

しかしながら、特許文献1の手法では、十分に患者の痛みに関する情報を活用することができないという問題がある。 However, the method of Patent Document 1 has a problem that information on patient's pain cannot be fully utilized.

本開示の目的は、簡単な方法で、痛みに関する情報を活用する情報処理装置等を提供することである。 An object of the present disclosure is to provide an information processing device or the like that utilizes information on pain in a simple manner.

本開示の一態様における情報処理方法は、ユーザの痛みに応じた操作を受け付ける可搬型装置から、前記ユーザの痛みに応じた操作に関する操作情報を取得し、取得した前記操作情報に応じた前記ユーザの痛みの状態を表す情報を、表示装置を介して前記ユーザに表示する処理を含む。 The information processing method according to one aspect of the present disclosure acquires operation information related to the operation according to the user's pain from a portable device that accepts the operation according to the user's pain, and the user according to the acquired operation information. Includes a process of displaying information representing the pain state of the user to the user via a display device.

本開示によれば、簡単な方法で、痛みに関する情報を活用することを実現する情報処理方法等を提供することができる。 According to the present disclosure, it is possible to provide an information processing method or the like that realizes the utilization of information on pain by a simple method.

実施形態1における情報処理システムの概要を示す図である。It is a figure which shows the outline of the information processing system in Embodiment 1. FIG. 情報処理システムに含まれる可搬型装置の内部構成を示すブロック図である。It is a block diagram which shows the internal structure of the portable device included in an information processing system. 情報処理システムに含まれる端末装置の内部構成を示すブロック図である。It is a block diagram which shows the internal structure of the terminal apparatus included in an information processing system. 情報処理システムに含まれる情報処理装置の内部構成を示すブロック図である。It is a block diagram which shows the internal structure of the information processing apparatus included in an information processing system. 痛み情報DBに記憶される情報の内容例を示す図である。It is a figure which shows the content example of the information stored in the pain information DB. ポイントDBに記憶される情報の内容例を示す図である。It is a figure which shows the content example of the information stored in the point DB. 情報処理システムで実行される処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the processing procedure executed in an information processing system. 端末装置の表示部に表示される画面の一例を示す図である。It is a figure which shows an example of the screen displayed on the display part of a terminal device. 端末装置の表示部に表示される画面の一例を示す図である。It is a figure which shows an example of the screen displayed on the display part of a terminal device. 端末装置の表示部に表示される画面の一例を示す図である。It is a figure which shows an example of the screen displayed on the display part of a terminal device. 端末装置の表示部に表示される画面の一例を示す図である。It is a figure which shows an example of the screen displayed on the display part of a terminal device. 実施形態2における情報処理システムの概要を示す図である。It is a figure which shows the outline of the information processing system in Embodiment 2. 情報処理システムに含まれる情報処理装置の内部構成を示すブロック図である。It is a block diagram which shows the internal structure of the information processing apparatus included in an information processing system. 学習済みモデルの生成処理に関する説明図である。It is explanatory drawing about the generation process of a trained model. 情報処理システムで実行される処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the processing procedure executed in an information processing system. 実施形態3における情報処理システムで実行される処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the processing procedure executed by the information processing system in Embodiment 3. 端末装置の表示部に表示される画面の一例を示す図である。It is a figure which shows an example of the screen displayed on the display part of a terminal device.

本発明をその実施の形態を示す図面を参照して具体的に説明する。 The present invention will be specifically described with reference to the drawings showing the embodiments thereof.

(実施形態1)
図1は、実施形態1における情報処理システム100の概要を示す図である。情報処理システム100は、可搬型装置1、端末装置2、及び情報処理装置3を含む。
(Embodiment 1)
FIG. 1 is a diagram showing an outline of the information processing system 100 according to the first embodiment. The information processing system 100 includes a portable device 1, a terminal device 2, and an information processing device 3.

端末装置2及び情報処理装置3はそれぞれ、所謂インターネット等のネットワークNを介して通信接続し、情報を送受信することが可能である。また、端末装置2は、可搬型装置1との間で有線又は無線により通信接続し、情報を送受信することが可能である。 The terminal device 2 and the information processing device 3 can each communicate and connect via a network N such as the so-called Internet to transmit and receive information. Further, the terminal device 2 can be connected to the portable device 1 by wire or wireless communication to transmit and receive information.

可搬型装置1は、痛みを抱えるユーザの操作を受け付ける操作ボタン15及びセンサ16を備える矩形の筐体である。操作ボタン15は、例えば、可搬型装置1の一部に押下可能に配設される。なお操作ボタン15は、引上可能に配設されていてもよい。センサ16は、操作ボタン15の押下圧力の変化を検知可能なセンサであり、例えば圧力センサを用いる。 The portable device 1 is a rectangular housing including an operation button 15 and a sensor 16 for receiving an operation of a user who has pain. The operation button 15 is arranged so as to be pressable on a part of the portable device 1, for example. The operation button 15 may be arranged so as to be pulled up. The sensor 16 is a sensor capable of detecting a change in the pressing pressure of the operation button 15, and for example, a pressure sensor is used.

なお、本実施形態では、可搬型装置1は操作部(操作ボタン15)を備え、ユーザの操作ボタン15の押下操作を受け付ける構成である例を説明したが、可搬型装置1の形状及び構成は限定されるものではない。可搬型装置1は、ユーザの操作を受け付け、受け付けた操作の情報を取得可能であればよい。例えば、可搬型装置1は円柱形状を有し、振動の大きさ又は周波数等を検出する振動センサ、加速度センサ等のセンサを備え、ユーザのシェイク操作の操作量の変化を取得してもよい。可搬型装置1は、圧力センサを内蔵した人形等を用いて、ユーザが人形を握る力の変化を取得してもよい。可搬型装置1は、腕輪型、又は指輪型等のウエアラブルデバイスであってもよい。なお、可搬型装置1に備えられるセンサの種類は一つに限定されない。可搬型装置1は、複数のセンサを備え、ユーザが可搬型装置1を操作する操作回数、操作時間、操作の強弱、操作速度、操作角度等を取得してよい。 In the present embodiment, an example has been described in which the portable device 1 is provided with an operation unit (operation button 15) and accepts a user's operation of pressing the operation button 15, but the shape and configuration of the portable device 1 is as follows. Not limited. The portable device 1 may be capable of accepting user operations and acquiring information on the accepted operations. For example, the portable device 1 may have a cylindrical shape, include sensors such as a vibration sensor and an acceleration sensor that detect the magnitude or frequency of vibration, and may acquire a change in the amount of operation of the user's shake operation. The portable device 1 may acquire a change in the force with which the user grips the doll by using a doll or the like having a built-in pressure sensor. The portable device 1 may be a wearable device such as a bracelet type or a ring type. The type of sensor provided in the portable device 1 is not limited to one. The portable device 1 may include a plurality of sensors, and may acquire the number of operations, the operation time, the strength of the operation, the operation speed, the operation angle, and the like for the user to operate the portable device 1.

端末装置2は、表示部24(表示装置)を備え、様々の情報処理、情報の送受信が可能な汎用の情報処理装置であり、例えばスマートフォン、タブレット端末等である。ユーザは端末装置2を用いて情報処理装置3との間で情報を送受信し、情報処理装置3から提供される情報を表示部24を介して得ることができる。 The terminal device 2 is a general-purpose information processing device provided with a display unit 24 (display device) and capable of transmitting and receiving various information processing and information, and is, for example, a smartphone, a tablet terminal, or the like. The user can send and receive information to and from the information processing device 3 using the terminal device 2, and obtain the information provided by the information processing device 3 via the display unit 24.

情報処理装置3は様々の情報処理、情報の送受信が可能な情報処理装置であり、例えばサーバコンピュータ、パーソナルコンピュータ等である。情報処理装置3は複数台設けられてもよいし、1台の情報処理装置内に設けられた複数の仮想マシンによって実現されてもよいし、クラウドサーバを用いて実現されてもよい。 The information processing device 3 is an information processing device capable of transmitting and receiving various information processing and information, and is, for example, a server computer, a personal computer, or the like. A plurality of information processing devices 3 may be provided, may be realized by a plurality of virtual machines provided in one information processing device, or may be realized by using a cloud server.

情報処理システム100は、例えば医療機関内において、ユーザの検査時、手術時、注射等の処置時、又は入院時等に使用される。ユーザは、痛みを感じた場合に、痛みの度合いに応じて可搬型装置1の操作ボタン15を押下操作する。ユーザは、強い痛みを感じる場合には可搬型装置1を強い力で操作する。また痛みの持続時間に応じて、可搬型装置1の操作時間が変化する。センサ16は、これらの操作ボタン15の操作信号を検出する。センサ16の検出結果を含む操作情報は端末装置2を経由して情報処理装置3へネットワークNを介して送信される。情報処理装置3における処理の結果出力される痛みに関する情報は、端末装置2に表示される。ユーザは自身の痛みに関する情報を可視化して得ることができる。 The information processing system 100 is used, for example, in a medical institution at the time of a user's examination, surgery, treatment such as injection, hospitalization, or the like. When the user feels pain, he / she presses the operation button 15 of the portable device 1 according to the degree of pain. When the user feels a strong pain, the user operates the portable device 1 with a strong force. Further, the operation time of the portable device 1 changes according to the duration of the pain. The sensor 16 detects the operation signals of these operation buttons 15. The operation information including the detection result of the sensor 16 is transmitted to the information processing device 3 via the terminal device 2 via the network N. The information about the pain output as a result of the processing in the information processing device 3 is displayed on the terminal device 2. The user can visualize and obtain information about his / her pain.

図2は、情報処理システム100に含まれる可搬型装置1の内部構成を示すブロック図である。可搬型装置1は、制御部10、記憶部11、通信部12、及び入出力部13を備える。 FIG. 2 is a block diagram showing an internal configuration of the portable device 1 included in the information processing system 100. The portable device 1 includes a control unit 10, a storage unit 11, a communication unit 12, and an input / output unit 13.

制御部10は、一又は複数のプロセッサを含むマイクロコンピュータを用いて、内蔵するROM(Read Only Memory)及びRAM(Random Access Memory)等のメモリを用いて各構成部を制御して処理を実行する。 The control unit 10 uses a microcomputer including one or a plurality of processors to control each component using a built-in memory such as a ROM (Read Only Memory) and a RAM (Random Access Memory) to execute processing. ..

記憶部11は、例えばフラッシュメモリ等の不揮発性メモリを含む。記憶部11は、制御部10が参照する情報を記憶する。 The storage unit 11 includes a non-volatile memory such as a flash memory. The storage unit 11 stores information referred to by the control unit 10.

通信部12は、例えばBluetooth(登録商標)、Low Energy 等の近距離無線通信用のアンテナを含む無線通信モジュールであり、制御部10から出力される情報を端末装置2へ送信する。通信部12は、ネットワークNを介して、又は所定の移動通信規格によって情報の送受信を実現してもよい。 The communication unit 12 is a wireless communication module including an antenna for short-range wireless communication such as Bluetooth (registered trademark) and Low Energy, and transmits information output from the control unit 10 to the terminal device 2. The communication unit 12 may realize transmission / reception of information via the network N or according to a predetermined mobile communication standard.

入出力部13は、センサ16に接続される。入出力部13は、A/D変換機能を含んでセンサ16から得られる信号から測定値を読み取って制御部10へ出力してもよい。制御部10は、入出力部13を介してセンサ16から得られる信号を取得する。 The input / output unit 13 is connected to the sensor 16. The input / output unit 13 may read the measured value from the signal obtained from the sensor 16 including the A / D conversion function and output it to the control unit 10. The control unit 10 acquires a signal obtained from the sensor 16 via the input / output unit 13.

図3は、情報処理システム100に含まれる端末装置2の内部構成を示すブロック図である。端末装置2は上述したように、スマートフォン等の通信機能を有するコンピュータを用いる。端末装置2は、制御部20、記憶部21、第1通信部22、第2通信部23、表示部24、操作部25、位置情報取得部26、音声入力部27、及び音声出力部28を備える。 FIG. 3 is a block diagram showing an internal configuration of the terminal device 2 included in the information processing system 100. As described above, the terminal device 2 uses a computer having a communication function such as a smartphone. The terminal device 2 includes a control unit 20, a storage unit 21, a first communication unit 22, a second communication unit 23, a display unit 24, an operation unit 25, a position information acquisition unit 26, a voice input unit 27, and a voice output unit 28. Be prepared.

制御部20は、一又は複数のCPU(Central Processing Unit )、GPU(Graphics Processing Unit)等を用いたプロセッサであり、内蔵するROM及びRAM等のメモリを用いて各構成部を制御して処理を実行する。制御部20は、プロセッサ、メモリ、記憶部21、第1通信部22、及び第2通信部23を集積した1つのハードウェア(SoC)として構成されていてもよい。制御部20は、記憶部21に記憶されているプログラム2Pに基づく情報処理を実行する。 The control unit 20 is a processor that uses one or more CPUs (Central Processing Units), GPUs (Graphics Processing Units), etc., and controls each component unit using the built-in memory such as ROM and RAM to perform processing. Execute. The control unit 20 may be configured as one piece of hardware (SoC) in which a processor, a memory, a storage unit 21, a first communication unit 22, and a second communication unit 23 are integrated. The control unit 20 executes information processing based on the program 2P stored in the storage unit 21.

記憶部21は、フラッシュメモリ等の不揮発性メモリを用いる。記憶部21は、プログラム2Pを記憶しているほか、制御部20が参照する他のプログラム及びデータを記憶する。例えば、プログラム2Pは痛みに関する情報の登録、参照のためのアプリプログラムである。プログラム2Pは、制御部20が第1通信部22を介してネットワークN経由で外部装置からダウンロードして記憶部21に記憶したものであってもよい。 The storage unit 21 uses a non-volatile memory such as a flash memory. The storage unit 21 stores the program 2P, and also stores other programs and data referred to by the control unit 20. For example, program 2P is an application program for registering and referencing information on pain. The program 2P may be one that the control unit 20 downloads from an external device via the network N via the first communication unit 22 and stores it in the storage unit 21.

第1通信部22は、ネットワークNを介して、又は所定の移動通信規格によって情報処理装置3との間の情報の送受信を実現する無線通信モジュールである。第1通信部22は、ネットワークカードを用いて有線によりネットワークNを介した通信を行なってもよい。 The first communication unit 22 is a wireless communication module that realizes transmission / reception of information to / from the information processing device 3 via the network N or according to a predetermined mobile communication standard. The first communication unit 22 may perform communication via the network N by wire using a network card.

第2通信部23は、例えばBluetooth、Low Energy 等の近距離無線通信用のアンテナを含む無線通信モジュールにより、可搬型装置1との間の通信を実現する。 The second communication unit 23 realizes communication with the portable device 1 by a wireless communication module including an antenna for short-range wireless communication such as Bluetooth and Low Energy.

表示部24は、液晶パネル、有機EL(Electro Luminescence)ディスプレイ等のディスプレイ装置を用いる。操作部25は、ユーザの操作を受け付けるインタフェースであり、物理ボタン、ディスプレイ内蔵のタッチパネルデバイス等を用いる。操作部25は、音声入力部27及び音声出力部28を介して操作を受け付けてもよい。 The display unit 24 uses a display device such as a liquid crystal panel or an organic EL (Electro Luminescence) display. The operation unit 25 is an interface that accepts user operations, and uses physical buttons, a touch panel device with a built-in display, and the like. The operation unit 25 may accept an operation via the voice input unit 27 and the voice output unit 28.

位置情報取得部26は、例えばGPS(Global Positioning System)に基づく信号を受信するアンテナを含んで端末装置2の位置を測定する。位置情報取得部26は、ネットワークNに含まれる複数のアクセスポイント、基地局との通信により位置を特定してもよい。位置情報取得部26は、測定した位置を示す位置情報(例えば緯度経度)を制御部20へ出力する。 The position information acquisition unit 26 measures the position of the terminal device 2 including, for example, an antenna that receives a signal based on GPS (Global Positioning System). The position information acquisition unit 26 may specify the position by communicating with a plurality of access points and base stations included in the network N. The position information acquisition unit 26 outputs position information (for example, latitude / longitude) indicating the measured position to the control unit 20.

音声入力部27は、マイクロフォン等を用いて、ユーザの音声情報の入力を受け付ける。音声出力部28は、スピーカ等を用いて、制御部20の制御により音声を出力する。 The voice input unit 27 receives the input of the user's voice information by using a microphone or the like. The audio output unit 28 outputs audio under the control of the control unit 20 using a speaker or the like.

図4は、情報処理システム100に含まれる情報処理装置3の内部構成を示すブロック図である。情報処理装置3は上述したように、サーバコンピュータを用いる。情報処理装置3は、制御部30、記憶部31、及び通信部32を備える。 FIG. 4 is a block diagram showing an internal configuration of the information processing device 3 included in the information processing system 100. As described above, the information processing device 3 uses a server computer. The information processing device 3 includes a control unit 30, a storage unit 31, and a communication unit 32.

制御部30は、一又は複数のCPU、GPU等を用いたプロセッサであり、内蔵するROM及びRAM等のメモリを用いて各構成部を制御して処理を実行する。制御部30は、記憶部31に記憶されているプログラム3Pに基づく情報処理を実行する。 The control unit 30 is a processor using one or a plurality of CPUs, GPUs, etc., and controls each component unit using a built-in memory such as a ROM and a RAM to execute processing. The control unit 30 executes information processing based on the program 3P stored in the storage unit 31.

通信部32は、通信に関する処理を行うための通信モジュールである。制御部30は通信部32により、ネットワークNを介した通信が可能である。 The communication unit 32 is a communication module for performing processing related to communication. The control unit 30 can communicate via the network N by the communication unit 32.

記憶部31は、ハードディスク等の大容量記憶装置を用いる。記憶部31は、プログラム3Pを記憶するほか、制御部30が参照する他のプログラム及びデータを記憶する。プログラム3Pは、制御部30が通信部32を介してネットワークN経由で外部装置からダウンロードして記憶部31に記憶したものであってもよい。プログラム3Pは、制御部30が図示しない読み取り部を介して可搬型記憶媒体3aから読み取って記憶部31に記憶したものであってもよい。プログラム3Pは、制御部30が半導体メモリ3bから読み出したものであってもよい。記憶部31は、痛み情報DB(Data Base :データベース)311及びポイントDB312を記憶する。痛み情報DB311及びポイントDB312は、情報処理装置3に接続された外部の大容量記憶装置に記憶されていてもよい。 The storage unit 31 uses a large-capacity storage device such as a hard disk. In addition to storing the program 3P, the storage unit 31 stores other programs and data referred to by the control unit 30. The program 3P may be one that the control unit 30 downloads from the external device via the network N via the communication unit 32 and stores it in the storage unit 31. The program 3P may be one that the control unit 30 reads from the portable storage medium 3a via a reading unit (not shown) and stores it in the storage unit 31. The program 3P may be read from the semiconductor memory 3b by the control unit 30. The storage unit 31 stores the pain information DB (Data Base: database) 311 and the point DB 312. The pain information DB311 and the point DB312 may be stored in an external large-capacity storage device connected to the information processing device 3.

図5は、痛み情報DB311に記憶される情報の内容例を示す図である。制御部30は、端末装置2から取得したユーザの可搬型装置1の操作信号を痛み情報DB311に記憶する。痛み情報DB311は、痛み情報を識別する痛み情報IDに対応付けて、日時、ユーザID、位置情報、操作信号、痛みの程度等を記憶する。日時は、痛み情報が取得された開始日時及び終了日時である。ユーザIDは、可搬型装置1の操作者であるユーザを識別する情報である。位置情報は、痛み情報が出力された位置を示す情報である。操作信号は、可搬型装置1のセンサ16の出力情報である。操作信号は例えば、操作ボタン15の押下げ操作の圧力変化、及び操作時間を示す時系列の電気信号を含んでよい。痛みの程度は、ユーザの痛みの程度を表す情報であり、例えば「強い」「中程度」「弱い」の3段階で示される。痛みの程度は、例えば1から10の数値で示されてもよい。 FIG. 5 is a diagram showing an example of the content of the information stored in the pain information DB 311. The control unit 30 stores the operation signal of the user's portable device 1 acquired from the terminal device 2 in the pain information DB 311. The pain information DB311 stores the date and time, the user ID, the position information, the operation signal, the degree of pain, and the like in association with the pain information ID that identifies the pain information. The date and time are the start date and time and the end date and time when the pain information was acquired. The user ID is information that identifies a user who is an operator of the portable device 1. The position information is information indicating the position where the pain information is output. The operation signal is output information of the sensor 16 of the portable device 1. The operation signal may include, for example, a pressure change in the pressing operation of the operation button 15 and a time-series electric signal indicating the operation time. The degree of pain is information indicating the degree of pain of the user, and is shown in three stages of, for example, "strong", "moderate", and "weak". The degree of pain may be indicated by a numerical value from 1 to 10, for example.

図6は、ポイントDB312に記憶される情報の内容例を示す図である。ポイントDB312は、ユーザIDに対応付けて、ポイントの取得日時、操作ポイント、及び共有ポイント等を記憶する。操作ポイントとは、ユーザの可搬型装置1の操作内容に応じて発行されるポイントである。制御部10は、操作信号から得られる操作回数、操作の強弱、操作時間の長短等の操作量を検出し、検出した操作量に基づき操作ポイントを導出する。操作ポイントは、過去の操作情報の取得履歴、取得頻度等に基づき加算されてもよい。共有ポイントは、他のユーザの操作に基づき発行されるポイントである。共有ポイントについては、他の実施形態にて詳述する。制御部10は、導出した各ポイントを、ポイントDB312に記憶する。 FIG. 6 is a diagram showing an example of the contents of the information stored in the point DB 312. The point DB 312 stores the acquisition date and time of the point, the operation point, the shared point, and the like in association with the user ID. The operation point is a point issued according to the operation content of the portable device 1 of the user. The control unit 10 detects an operation amount such as the number of operations obtained from the operation signal, the strength of the operation, and the length of the operation time, and derives an operation point based on the detected operation amount. The operation points may be added based on the acquisition history, acquisition frequency, etc. of the past operation information. A shared point is a point issued based on an operation of another user. The shared points will be described in detail in other embodiments. The control unit 10 stores each of the derived points in the point DB 312.

図7は、情報処理システム100で実行される処理手順の一例を示すフローチャートである。ユーザは、可搬型装置1を起動させる。以下の処理は、端末装置2の記憶部21に記憶してあるプログラム2Pに従って制御部20によって実行されると共に、情報処理装置3の記憶部31に記憶してあるプログラム3Pに従って制御部30によって実行される。 FIG. 7 is a flowchart showing an example of a processing procedure executed by the information processing system 100. The user activates the portable device 1. The following processing is executed by the control unit 20 according to the program 2P stored in the storage unit 21 of the terminal device 2, and is executed by the control unit 30 according to the program 3P stored in the storage unit 31 of the information processing device 3. Will be done.

なお、ユーザが初めて情報処理システム100におけるサービスを用いる際には、情報処理装置3にて提供される登録用の画面上において、ユーザが端末装置2で登録操作をすることにより、ユーザ情報が収集されるとよい。初期登録時に収集されるユーザ情報は、ユーザを識別するユーザID及び属性情報を含む。属性情報は、ユーザの年齢帯、性別等を含んでよい。ユーザ情報は、初期登録時に収集されるものに限られず、例えば病歴、服薬等の内容を含み定期的に収集されてよい。制御部30は、端末装置2を介して取得したこれらの情報を、記憶部31のユーザ情報データベース(図示せず)に記憶する。 When the user uses the service in the information processing system 100 for the first time, the user information is collected by the user performing the registration operation on the terminal device 2 on the registration screen provided by the information processing device 3. It should be done. The user information collected at the time of initial registration includes a user ID and attribute information that identifies the user. The attribute information may include the age band, gender, etc. of the user. The user information is not limited to the one collected at the time of initial registration, and may be collected regularly including the contents such as medical history and medication. The control unit 30 stores these information acquired via the terminal device 2 in the user information database (not shown) of the storage unit 31.

端末装置2の制御部20は、例えば操作部25を介してプログラム2Pの実行指示を受け付け、アプリを起動させ(ステップS103)、可搬型装置1との通信接続を確立する。なおプログラム2Pは、可搬型装置1の電源ボタン(図示せず)のオン操作、又はセンサ16の測定開始等を検出すると通信接続を確立してもよい。 The control unit 20 of the terminal device 2 receives an execution instruction of the program 2P via, for example, the operation unit 25, activates the application (step S103), and establishes a communication connection with the portable device 1. The program 2P may establish a communication connection when it detects an on operation of the power button (not shown) of the portable device 1 or the start of measurement of the sensor 16.

ユーザは、痛みに応じて可搬型装置1を操作する。強い痛みを感じた場合には、強い力が可搬型装置1に加えられる。また痛みを感じる時間が長い場合には、長時間に亘って操作が行われる。可搬型装置1は、センサ16から出力される操作回数、操作量、操作速度、操作時間等を示す操作信号を取得し、端末装置2へ送信する。 The user operates the portable device 1 according to the pain. When a strong pain is felt, a strong force is applied to the portable device 1. If the person feels pain for a long time, the operation is performed for a long time. The portable device 1 acquires an operation signal indicating the number of operations, the amount of operation, the operation speed, the operation time, etc. output from the sensor 16 and transmits the operation signal to the terminal device 2.

制御部20は、第2通信部23により、可搬型装置1からセンサ16の操作信号を取得する(ステップS105)。制御部20は、取得したセンサ16の操作信号を含む操作情報を情報処理装置3に送信する(ステップS107)。操作情報には、操作信号に加え、ユーザ情報、日時等が含まれてよい。 The control unit 20 acquires the operation signal of the sensor 16 from the portable device 1 by the second communication unit 23 (step S105). The control unit 20 transmits the operation information including the acquired operation signal of the sensor 16 to the information processing device 3 (step S107). The operation information may include user information, a date and time, and the like in addition to the operation signal.

情報処理装置3の制御部30は、操作情報を取得し(ステップS201)、痛み情報DB311に記憶する(ステップS202)。制御部30は、操作情報に基づきユーザの痛みの程度を導出する(ステップS203)。痛みの程度は、例えば痛みが「強い」「中程度」「弱い」の3段階に分けられる。例えば制御部30は、単位時間あたりの操作回数、操作量、操作速度、操作時間等を示す操作信号を取得し、予め設定される閾値に基づき、痛みの程度が「強い」「中程度」「弱い」のいずれの段階であるかを判定する。制御部30は、操作情報及び痛みの程度に基づき、痛みの状態を表す情報を導出する(ステップS205)。痛みの状態を表す情報とは、ユーザによる操作ボタン15の操作の強弱、操作時間の長短等の操作度合いを識別可能に示す情報である。制御部30は、操作信号に応じた表示パターン及びエレメントの表示内容を記憶するデータベース(図示せず)を参照して、操作情報に応じた痛みの状態を表す表示画面情報を作成する。表示画面情報には、ユーザの操作ボタン15の操作度合いに応じて変化する絵、色、及び音等が含まれる。制御部30は、導出した痛みの状態を表す情報を端末装置2へ出力する(ステップS207)。 The control unit 30 of the information processing device 3 acquires the operation information (step S201) and stores it in the pain information DB 311 (step S202). The control unit 30 derives the degree of pain of the user based on the operation information (step S203). The degree of pain can be divided into three stages, for example, "strong", "moderate", and "weak". For example, the control unit 30 acquires operation signals indicating the number of operations, the amount of operations, the operation speed, the operation time, etc. per unit time, and the degree of pain is "strong", "medium", or "moderate" based on a preset threshold value. Determine which stage is "weak". The control unit 30 derives information representing the state of pain based on the operation information and the degree of pain (step S205). The information indicating the state of pain is information that can identify the degree of operation such as the strength of the operation of the operation button 15 by the user and the length of the operation time. The control unit 30 creates display screen information representing a pain state according to the operation information by referring to a database (not shown) that stores the display pattern corresponding to the operation signal and the display contents of the element. The display screen information includes pictures, colors, sounds, and the like that change according to the degree of operation of the user's operation buttons 15. The control unit 30 outputs the derived information representing the pain state to the terminal device 2 (step S207).

端末装置2の制御部20は、痛みの状態を表す情報を取得し(ステップS109)、表示部24を介して表示する(ステップS111)。なお、端末装置2側で痛みの状態を表す情報を生成して、表示するようにしても良い。この場合、制御部20は、痛みの複数の程度に応じて単位時間あたりの操作回数の閾値を記憶したテーブル(図示せず)を参照し、センサ16から取得した単位時間あたりの操作回数に対応する痛みの程度を特定する。なお、上述したテーブルは痛みの複数の程度に応じて、操作量(ボタンの押し込み量)の閾値、操作速度の閾値、操作時間(操作を開始してボタンを押し込み、ボタンを離すまでの時間)の閾値、または、これらの組み合わせの閾値を記憶したテーブルを参照するようにしても良い。制御部20は、痛みの程度に応じて、動画及び音楽を記憶したテーブル(図示せず)を参照し、特定した痛みの程度に応じた動画を表示部24に表示するとともに、音声出力部28から痛みの程度に応じた音楽を再生する。さらに、制御部20は操作情報に応じて動画または音楽を変化させる。制御部20は、ボタンの操作に応じて動画の再生速度を変化させる、色を変化させる、特定のキャラクタ・画像を出現させる等の画像処理を行った上で、画像処理後の画像を表示部24に表示する。また制御部20は、ボタンの操作に応じて音楽の再生速度を変化させる、トーンを変化させる、特定の効果音を重畳させる等の音声処理を行った上で、音声処理後の音声を音声出力部28から出力する。 The control unit 20 of the terminal device 2 acquires information representing the pain state (step S109) and displays it via the display unit 24 (step S111). In addition, information indicating the state of pain may be generated and displayed on the terminal device 2 side. In this case, the control unit 20 refers to a table (not shown) that stores the threshold value of the number of operations per unit time according to a plurality of degrees of pain, and corresponds to the number of operations per unit time acquired from the sensor 16. Identify the degree of pain you do. In addition, the above-mentioned table shows the threshold value of the operation amount (button push amount), the operation speed threshold value, and the operation time (time from the start of the operation to the push of the button and the release of the button) according to the plurality of degrees of pain. Or a table storing the threshold values of these combinations may be referred to. The control unit 20 refers to a table (not shown) that stores moving images and music according to the degree of pain, displays a moving image according to the specified degree of pain on the display unit 24, and displays an audio output unit 28. Play music according to the degree of pain. Further, the control unit 20 changes the moving image or music according to the operation information. The control unit 20 performs image processing such as changing the playback speed of the moving image, changing the color, and making a specific character / image appear according to the operation of the button, and then displays the image after the image processing. Display on 24. Further, the control unit 20 performs voice processing such as changing the playback speed of music, changing the tone, and superimposing a specific sound effect according to the operation of the button, and then outputs the voice after the voice processing. Output from unit 28.

制御部20は、可搬型装置1のセンサ16による測定が終了したか否かを判断する(ステップS113)。可搬型装置1から終了の通知を受けておらず測定が終了したと判断されない場合(S113:NO)、制御部20は処理をステップS105へ戻し、測定値の取得を継続する。可搬型装置1から終了の通知を受け、又は所定時間が経過し測定が終了したと判断された場合(S113:YES)、制御部20は、可搬型装置1との通信を切断し、情報処理装置3へ終了を通知する(ステップS115)。 The control unit 20 determines whether or not the measurement by the sensor 16 of the portable device 1 is completed (step S113). If it is not determined that the measurement has been completed without receiving the notification of the end from the portable device 1 (S113: NO), the control unit 20 returns the process to step S105 and continues to acquire the measured value. When receiving a notification of termination from the portable device 1 or determining that the measurement has been completed after a predetermined time has elapsed (S113: YES), the control unit 20 disconnects the communication with the portable device 1 and processes information. Notify the device 3 of the end (step S115).

情報処理装置3の制御部30は、センサ16による測定が終了したか否かを判断する(ステップS209)。端末装置2から終了の通知を受けておらず終了したと判断されない場合(S209:NO)、制御部30は処理をステップS201へ戻し、操作情報の取得を継続する。 The control unit 30 of the information processing device 3 determines whether or not the measurement by the sensor 16 is completed (step S209). If the terminal device 2 has not received the end notification and it is not determined that the end has been completed (S209: NO), the control unit 30 returns the process to step S201 and continues to acquire the operation information.

端末装置2から終了の通知を受けて終了したと判断された場合(S209:YES)、制御部30は、操作情報に応じた操作ポイントを導出する(ステップS211)。制御部10は、操作情報に含まれる操作信号から操作量を検出し、検出した操作量に基づき操作ポイントを発行し、ポイントDB312に記憶する。操作量は、例えば操作ボタン15の操作回数、押下げ量、押下げ強さ(押下げ速度)、操作時間等である。例えば、押し下げ量が所定の押し下げ量以上、または所定の押し下げ量の範囲内に属した場合に、制御部20は操作ポイントを付与する。また制御部20は、押し下げ速度が、所定の押し下げ速度の範囲に属した場合に、操作ポイントを付与する。その他、制御部20は操作時間が、所定の操作時間範囲に属した場合に、操作ポイントを付与する。制御部10は、操作情報の取得履歴を参照して、操作情報の取得頻度に基づき操作ポイントを加算してもよい。制御部10は、導出した操作ポイントを端末装置2へ送信する(ステップS213)。 When the terminal device 2 receives the notification of termination and determines that the termination is completed (S209: YES), the control unit 30 derives an operation point according to the operation information (step S211). The control unit 10 detects an operation amount from an operation signal included in the operation information, issues an operation point based on the detected operation amount, and stores it in the point DB 312. The operation amount is, for example, the number of operations of the operation button 15, the amount of depression, the strength of depression (depression speed), the operation time, and the like. For example, when the push-down amount is equal to or greater than the predetermined push-down amount or belongs to the range of the predetermined push-down amount, the control unit 20 assigns an operation point. Further, the control unit 20 assigns an operation point when the depressing speed belongs to a predetermined depressing speed range. In addition, the control unit 20 assigns an operation point when the operation time belongs to a predetermined operation time range. The control unit 10 may add operation points based on the operation information acquisition frequency with reference to the operation information acquisition history. The control unit 10 transmits the derived operation point to the terminal device 2 (step S213).

端末装置2の制御部20は、操作ポイントを取得する(ステップS117)。制御部20は、操作ポイントを表示部24を介して表示し、一連の処理を終了する。 The control unit 20 of the terminal device 2 acquires an operation point (step S117). The control unit 20 displays the operation points via the display unit 24, and ends a series of processes.

上記の処理においては、情報処理装置3の制御部30によって実行される処理の一部を、端末装置2の制御部20が行う構成であってよい。 In the above processing, the control unit 20 of the terminal device 2 may perform a part of the processing executed by the control unit 30 of the information processing device 3.

図8から図11は、端末装置2の表示部24に表示される画面の一例を示す図である。表示画面は、痛みの程度に応じて異なる、複数の表示パターンにより表示される。制御部30は、痛みの程度の判定結果に応じた表示パターンをデータベースから読み出し、表示画面情報を作成する。ユーザの痛みの様子が「強い」と判定された場合には、例えばリラックス効果の高い表示画面が表示される。なお、表示パターンは制御部30が決定するものに限定されず、ユーザの選択に応じて設定又は変更される構成であってもよい。 8 to 11 are views showing an example of a screen displayed on the display unit 24 of the terminal device 2. The display screen is displayed by a plurality of display patterns that differ depending on the degree of pain. The control unit 30 reads the display pattern according to the determination result of the degree of pain from the database and creates the display screen information. When the state of pain of the user is determined to be "strong", for example, a display screen having a high relaxing effect is displayed. The display pattern is not limited to the one determined by the control unit 30, and may be set or changed according to the user's selection.

制御部20は、決定した表示パターンに基づく操作情報に応じた痛みの状態を表す表示画面情報を取得し、表示部24に表示する。表示画面に表示される内容は、ユーザの操作ボタン15の操作に基づく操作信号の変化に対応して変化する。制御部30は、操作ボタン15の操作回数、操作時間、操作速度、及び操作の強弱等に関する操作信号を取得した場合、操作信号に応じた表示パターン及びエレメントの表示内容を記憶するデータベース(図示せず)を参照し、操作信号に応じたエレメントを含む痛みの状態を表す表示画面情報を作成する。 The control unit 20 acquires display screen information indicating a pain state according to the operation information based on the determined display pattern, and displays it on the display unit 24. The content displayed on the display screen changes in response to a change in the operation signal based on the operation of the user's operation button 15. When the control unit 30 acquires an operation signal related to the number of operations of the operation button 15, the operation time, the operation speed, the strength of the operation, etc., the control unit 30 stores a display pattern corresponding to the operation signal and the display contents of the element (shown in the figure). ), And create display screen information indicating the state of pain including the element corresponding to the operation signal.

図8の例では、表示画面には、痛みの状態を表す円で示されるエレメントが複数表示されている。各エレメントは、様々な大きさ、色を有する。例えば、エレメントは、操作ボタン15の操作回数に応じた数を含み、さらに操作の強さに応じて大小に異なる大きさで示される。ユーザが痛みを感じて操作ボタン15を押すと、表示画面には、新たなエレメントが発生する様に表示される。制御部10は、表示画面情報を表示する場合において、音声を出力してもよい。例えば操作信号に応じた音声、又はユーザをリラックスさせる音楽等が出力される。 In the example of FIG. 8, a plurality of elements represented by circles representing the state of pain are displayed on the display screen. Each element has various sizes and colors. For example, the elements include a number corresponding to the number of operations of the operation button 15, and are further indicated by different sizes depending on the strength of the operation. When the user feels pain and presses the operation button 15, a new element is displayed on the display screen as if it were generated. The control unit 10 may output audio when displaying display screen information. For example, a voice corresponding to an operation signal, music that relaxes the user, or the like is output.

図9の例では、表示画面には、痛みの状態を表す花で示されるエレメントが複数表示されている。各エレメントは、様々な大きさ、開花状態で示される。制御部30は、操作ボタン15の操作回数、及び操作時間に基づく操作信号に応じて、花の開花状態を変更する。例えば、制御部30は、最初の操作信号を取得して、蕾の状態の花を表示する。ユーザの持続的な押下操作の操作信号を取得し、制御部30は持続時間に応じて開花度合いを蕾から満開へと変化させた状態の花を表示する。花の大きさは、押下操作の強弱に応じて変化する。 In the example of FIG. 9, a plurality of elements represented by flowers representing the state of pain are displayed on the display screen. Each element is shown in various sizes and flowering states. The control unit 30 changes the flowering state of the flower according to the number of operations of the operation button 15 and the operation signal based on the operation time. For example, the control unit 30 acquires the first operation signal and displays the flower in the state of a bud. The operation signal of the continuous pressing operation of the user is acquired, and the control unit 30 displays the flower in a state where the degree of flowering is changed from the bud to the full bloom according to the duration. The size of the flower changes according to the strength of the pressing operation.

図10の例では、痛みの状態は、異なる形状、及び色により示される複数のエレメントを用いて表示されている。図10では、エレメントは、円形、長円形、及び四角形を含む。制御部30は、操作ボタン15の操作回数、及び操作時間に応じて、各エレメントの色を変更する。 In the example of FIG. 10, the pain state is represented using a plurality of elements represented by different shapes and colors. In FIG. 10, elements include circles, oval, and rectangles. The control unit 30 changes the color of each element according to the number of operations of the operation button 15 and the operation time.

図11の例では、表示画面には、痛みの状態を表す円柱形状で示されるエレメントが複数表示されている。制御部30は、操作ボタン15の操作回数、又は操作時間に応じて、各エレメントの形状を変更する。制御部30は、例えば、操作ボタン15の押下操作の回数に応じて、立体の円柱形状を変化させる。ユーザは、自身の操作に応じて、画面上のエレメントが押し潰されたかの様な感覚を得ることができる。 In the example of FIG. 11, a plurality of elements represented by a cylindrical shape representing a state of pain are displayed on the display screen. The control unit 30 changes the shape of each element according to the number of operations of the operation button 15 or the operation time. The control unit 30 changes the three-dimensional cylindrical shape according to the number of times the operation button 15 is pressed, for example. The user can feel as if the elements on the screen were crushed according to his / her operation.

このようにして、情報処理システム100では、ユーザの可搬型装置1の操作に連動した痛みの状態を表す表示画面が表示される。痛みに基づく操作の内容が可視化されることで、ユーザは、痛みを客観的に捉えることが可能となる。さらに、ユーザの操作内容に応じた操作画面の変化、操作内容に応じたポイントの発行等により、ユーザの情報処理システム100の利用へのモチベーションを高めることが可能となり、痛みに関する情報の活用度が高まる。 In this way, the information processing system 100 displays a display screen showing the state of pain linked to the operation of the portable device 1 by the user. By visualizing the content of the pain-based operation, the user can objectively grasp the pain. Furthermore, by changing the operation screen according to the operation content of the user, issuing points according to the operation content, etc., it is possible to increase the motivation of the user to use the information processing system 100, and the degree of utilization of information on pain can be increased. Increase.

本実施形態においては、情報処理システム100は、痛みを検出したが、可搬型装置1はユーザの不安時に操作されてもよい。ユーザが不安を感じる場合に可搬型装置1を操作することで、不安を示す情報が可視化され、ユーザは不安な状態を客観的に捉えることが可能となる。また、情報処理システム100の利用は、医療機関内に限定されないことは勿論である。情報処理システム100は、ユーザの自宅等で使用されてもよい。情報処理システム100は、災害、紛争等の場合においての利用も想定され得る。 In the present embodiment, the information processing system 100 has detected pain, but the portable device 1 may be operated when the user is uneasy. By operating the portable device 1 when the user feels anxiety, information indicating the anxiety is visualized, and the user can objectively grasp the anxiety state. Further, it goes without saying that the use of the information processing system 100 is not limited to the medical institution. The information processing system 100 may be used at the user's home or the like. The information processing system 100 can be expected to be used in the event of a disaster, conflict, or the like.

(実施形態2)
実施形態2では、情報処理装置3は、学習済みモデル3Mを用いて操作情報に基づき痛みの情報を解析し、痛みの程度を判定する。また、得られる情報は、医療関係者と共有される。図12は、実施形態2における情報処理システム200の概要を示す図である。情報処理システム200には、可搬型装置1、端末装置2、情報処理装置3に加え、医療者情報処理装置4が含まれる。実施形態2の情報処理システム200は、医療者情報処理装置4が含まれる点、情報処理装置3の記憶部31に学習済みモデル3Mが記憶されている点、情報処理システム200が実行する処理の詳細が異なる点以外は実施形態1における構成と同様であるので、共通する構成については同一の符号を付してその詳細な説明を省略する。
(Embodiment 2)
In the second embodiment, the information processing device 3 analyzes the pain information based on the operation information using the trained model 3M, and determines the degree of pain. In addition, the information obtained will be shared with medical personnel. FIG. 12 is a diagram showing an outline of the information processing system 200 according to the second embodiment. The information processing system 200 includes a medical professional information processing device 4 in addition to the portable device 1, the terminal device 2, and the information processing device 3. The information processing system 200 of the second embodiment includes a medical person information processing device 4, a storage unit 31 of the information processing device 3 stores a learned model 3M, and a process executed by the information processing system 200. Since the configuration is the same as that in the first embodiment except that the details are different, the same reference numerals are given to the common configurations, and detailed description thereof will be omitted.

医療者情報処理装置4は、様々の情報処理、情報の送受信が可能な汎用の情報端末装置であり、例えばパーソナルコンピュータ等である。医療者情報処理装置4は、サーバコンピュータ、スマートフォン、タブレット端末等の態様であってもよい。医療者情報処理装置4は、情報処理装置3との間でネットワークNを介して通信接続し、情報を送受信することが可能である。 The medical information processing device 4 is a general-purpose information terminal device capable of transmitting and receiving various information processing and information, such as a personal computer. The medical information processing device 4 may be in the form of a server computer, a smartphone, a tablet terminal, or the like. The medical professional information processing device 4 can communicate with the information processing device 3 via the network N to transmit and receive information.

図13は、情報処理システム200に含まれる情報処理装置3の内部構成を示すブロック図である。情報処理装置3の記憶部31には、学習済みモデル3Mが記憶されている。 FIG. 13 is a block diagram showing an internal configuration of the information processing apparatus 3 included in the information processing system 200. The learned model 3M is stored in the storage unit 31 of the information processing device 3.

図14は、学習済みモデル3Mの生成処理に関する説明図である。制御部30は、深層学習を含む機械学習によって、痛みに応じた可搬型装置1の操作情報を入力とし、当該操作情報に対応する痛みの程度を出力とする学習済みモデル3Mを生成する。学習済みモデル3Mの学習アルゴリズムは、ニューラルネットワーク(Neural Network)を用いた教師ありの深層学習である。学習アルゴリズムは、時系列データを取得した場合には、リカレントニューラルネットワーク(Recurrent Neural Network)、LSTM(Long Short Term Memory)ネットワークを用いてもよい。 FIG. 14 is an explanatory diagram relating to the generation process of the trained model 3M. The control unit 30 generates a trained model 3M that inputs the operation information of the portable device 1 according to the pain and outputs the degree of pain corresponding to the operation information by machine learning including deep learning. The learning algorithm of the trained model 3M is supervised deep learning using a neural network. When the time series data is acquired, the learning algorithm may use a recurrent neural network (Recurrent Neural Network) or an LSTM (Long Short Term Memory) network.

図14に示す例では、学習済みモデル3Mは、痛みに応じた可搬型装置1の操作情報を入力する入力層と、当該操作情報に対応する痛みの程度を出力する出力層とを備える。学習済みモデル3Mは、操作情報が入力された場合に、痛みの程度を出力するように訓練データによって学習済みのパラメータを有する中間層を備える。入力層に、操作情報が入力された場合、学習済みパラメータによって中間層で演算が行なわれ、出力層から、痛みの程度が出力される。 In the example shown in FIG. 14, the trained model 3M includes an input layer for inputting operation information of the portable device 1 according to the pain, and an output layer for outputting the degree of pain corresponding to the operation information. The trained model 3M includes an intermediate layer having parameters trained by training data to output the degree of pain when operational information is input. When operation information is input to the input layer, calculations are performed in the intermediate layer according to the learned parameters, and the degree of pain is output from the output layer.

本実施形態では、痛みの程度は痛みレベルによりに示される。痛みレベルは、例えば1から10の数値で示され、数値が大きい程痛みが強いことを示している。制御部30は、操作情報として、操作信号のデータをグラフ化して画像として入力してもよい。 In this embodiment, the degree of pain is indicated by the pain level. The pain level is indicated by a numerical value from 1 to 10, for example, and the larger the numerical value, the stronger the pain. The control unit 30 may graph the operation signal data and input it as an image as the operation information.

訓練データを用いて学習されたニューラルネットワーク(学習済みモデル3M)は、人工知能ソフトウェアの一部であるプログラムモジュールとして利用が想定される。学習済みモデル3Mは、上述のごとく制御部30(CPU等)及び記憶部31を備える情報処理装置3にて用いられるものであり、このように演算処理能力を有する情報処理装置3にて実行されることにより、ニューラルネットワークシステムが構成される。すなわち、情報処理装置3の制御部30が、記憶部31に記憶された学習済みモデル3Mからの指令に従って、入力層に入力された操作情報の特徴量を抽出する演算を行い、出力層から該操作情報に対応する痛みレベルを出力するように動作する。 The neural network trained using the training data (trained model 3M) is expected to be used as a program module that is a part of artificial intelligence software. The trained model 3M is used in the information processing device 3 including the control unit 30 (CPU or the like) and the storage unit 31 as described above, and is executed by the information processing device 3 having arithmetic processing capability in this way. As a result, a neural network system is constructed. That is, the control unit 30 of the information processing device 3 performs an operation to extract the feature amount of the operation information input to the input layer according to the command from the learned model 3M stored in the storage unit 31, and the operation information is extracted from the output layer. It operates to output the pain level corresponding to the operation information.

制御部30は、操作情報と、各操作情報における痛みレベルとが対応付けられた訓練データを用いて、中間層における各種パラメータの学習を行う。例えば図14に示すように、訓練データは、操作情報に対し痛みレベルがラベル付けされたデータセットとして構築される。制御部30は、過去に測定された大量の操作情報及び、操作者からのヒアリング等に基づき決定された痛みレベルを収集したデータを用いて学習を行う。 The control unit 30 learns various parameters in the intermediate layer by using the training data in which the operation information and the pain level in each operation information are associated with each other. For example, as shown in FIG. 14, the training data is constructed as a data set in which the pain level is labeled with respect to the operation information. The control unit 30 performs learning using a large amount of operation information measured in the past and data collected from pain levels determined based on hearings from the operator and the like.

操作情報は、例えば操作量であり、操作ボタン15の押下げ量の時間変化である。操作情報は、単位時間あたりの操作回数であってもよい。操作情報は、操作速度から得られる操作の強さの時間変化であってもよい。操作情報は、これらの複数を組み合わせて入力されてもよく、操作信号の時系列データを周波数変換したデータであってよい。 The operation information is, for example, an operation amount, which is a time change of the amount of pressing the operation button 15. The operation information may be the number of operations per unit time. The operation information may be a time change of the strength of the operation obtained from the operation speed. The operation information may be input by combining a plurality of these, and may be data obtained by frequency-converting the time-series data of the operation signal.

制御部30は、訓練データに含まれる操作情報を入力層に入力し、中間層での演算処理を経て、出力層から痛みレベルを取得する。制御部30は、出力層から出力された出力値を、訓練データにおいて操作情報に対しラベル付けされた痛みレベル、すなわち正解値と比較し、出力層からの出力値が正解値に近づくように、中間層での演算処理に用いる各種パラメータを最適化する。当該パラメータは、例えばニューロン間の重み、バイアス等である。各種パラメータの最適化の方法は特に限定されないが、例えば制御部30は誤差逆伝播法を用いて各種パラメータの最適化を行う。制御部30は、訓練データに含まれる各操作情報について上記の処理を行い、学習済みモデル3Mを生成する。 The control unit 30 inputs the operation information included in the training data to the input layer, performs arithmetic processing in the intermediate layer, and acquires the pain level from the output layer. The control unit 30 compares the output value output from the output layer with the pain level labeled for the operation information in the training data, that is, the correct answer value, so that the output value from the output layer approaches the correct answer value. Optimize various parameters used for arithmetic processing in the intermediate layer. The parameters are, for example, weights between neurons, bias, and the like. The method of optimizing various parameters is not particularly limited, but for example, the control unit 30 optimizes various parameters by using the backpropagation method. The control unit 30 performs the above processing on each operation information included in the training data to generate the trained model 3M.

学習済みモデル3Mの構成は、上記の例に限定されるものではないことは勿論である。操作情報に応じて適宜入力情報に応じた出力情報を出力するように学習されるとよい。例えば、操作情報に加えてユーザの身体の動き、発声音等を入力情報に与えてもよい。例えば近接センサ、深度センサ、撮影装置等を用いて、可搬型装置1を使用時のユーザの身体の位置を取得する。マイクロフォン等を用いて、ユーザの発声音を取得する。ユーザの付近にアラーム等が設置されている場合には、そのアラート音を取得してもよい。可搬型装置1がウエアラブルデバイスである場合には、可搬型装置1に備えられる脈波センサから、ユーザの心拍数又は脈拍等を取得し、操作情報に同期して入力情報に与えてもよい。これら取得した情報に応じた痛みの程度が学習済みモデル3Mから出力される。ユーザの身体の位置、体幹、身体のバランス等に基づきユーザの痛みの程度が判定される。また、時系列データを取得しこれらの変化の度合い、変化の持続時間、不自然な変化等に基づき痛みの程度が判定されてもよい。 Of course, the configuration of the trained model 3M is not limited to the above example. It is preferable to learn to output output information according to input information as appropriate according to operation information. For example, in addition to the operation information, the user's body movement, vocal sound, and the like may be given to the input information. For example, a proximity sensor, a depth sensor, a photographing device, or the like is used to acquire the position of the user's body when the portable device 1 is used. Acquire the user's vocal sound using a microphone or the like. If an alarm or the like is installed near the user, the alert sound may be acquired. When the portable device 1 is a wearable device, the user's heart rate or pulse may be acquired from the pulse wave sensor provided in the portable device 1 and given to the input information in synchronization with the operation information. The degree of pain according to the acquired information is output from the trained model 3M. The degree of pain of the user is determined based on the position of the user's body, the trunk, the balance of the body, and the like. In addition, the degree of pain may be determined by acquiring time-series data and based on the degree of these changes, the duration of changes, unnatural changes, and the like.

学習済みモデル3Mは、出力情報として、痛みレベルに加えて痛みの変化の程度を出力してもよい。例えば、学習済みモデル3Mは、操作信号等から痛みがどれくらい変化したかを示す痛みの変化の程度を出力する。例えば、ユーザが処置又は投薬等を受けた場合において、制御部30は、学習済みモデル3Mに処置又は投薬の前後の操作信号を入力することで、痛みの変化の程度を出力とする。この場合においては、入力情報にユーザの疾患、ユーザへの処置又は投薬等の情報が含まれるとよい。ユーザの抱える痛みが、一時的な痛みか、慢性的な痛みかにより、痛みレベル又は痛みの変化の程度は変化する。従って、これらの情報を入力情報に含むことで、よりユーザの状態に応じた出力値を得ることが可能となる。 The trained model 3M may output the degree of change in pain in addition to the pain level as output information. For example, the trained model 3M outputs the degree of change in pain, which indicates how much the pain has changed from an operation signal or the like. For example, when the user receives treatment or medication, the control unit 30 outputs the degree of change in pain by inputting operation signals before and after the treatment or medication into the learned model 3M. In this case, the input information may include information such as the user's disease, treatment for the user, or medication. The pain level or the degree of change in pain varies depending on whether the user's pain is temporary or chronic. Therefore, by including these information in the input information, it is possible to obtain an output value more according to the user's state.

上述の学習済みモデル3Mを用いて、情報処理装置3は、ユーザから取得した操作情報に基づく痛みレベルを導出する。図15は、情報処理システム200で実行される処理手順の一例を示すフローチャートである。情報処理装置3で操作情報が取得されると、以下の処理が実行される。 Using the trained model 3M described above, the information processing device 3 derives a pain level based on the operation information acquired from the user. FIG. 15 is a flowchart showing an example of a processing procedure executed by the information processing system 200. When the operation information is acquired by the information processing device 3, the following processing is executed.

情報処理装置3の制御部30は、ユーザの端末装置2から取得した操作情報を学習済みモデル3Mに与え(ステップS221)、出力される痛みレベルを特定する(ステップS223)。制御部30は、特定した痛みレベルを含む、痛みに関する情報を導出し(ステップS225)、記憶部31のデータベース(図示せず)に記憶する。痛みに関する情報には、痛みレベル、痛みの変化の程度等が含まれる。制御部30は、導出した痛みに関する情報を医療者情報処理装置4に出力し(ステップS227)、一連の処理を終了する。なお、痛みレベル又は痛みの変化の程度が所定の閾値以上である場合には、制御部30は、アラート情報を含んで痛みに関する情報を出力してもよい。 The control unit 30 of the information processing device 3 gives the trained model 3M the operation information acquired from the user's terminal device 2 (step S221), and specifies the output pain level (step S223). The control unit 30 derives information about pain including the specified pain level (step S225) and stores it in a database (not shown) of the storage unit 31. Information about pain includes pain level, degree of change in pain, and the like. The control unit 30 outputs the derived information on the pain to the medical staff information processing device 4 (step S227), and ends a series of processes. When the pain level or the degree of change in pain is equal to or higher than a predetermined threshold value, the control unit 30 may output information on pain including alert information.

医療者情報処理装置4は、取得した痛みに関する情報に基づき対処方法を導出する。例えば、痛みレベルに応じて、ユーザへの巡回を実施、スピーカ等により音声にてユーザの状態を確認する等の対処方法が導出される。導出された対処情報は、例えば痛みレベルと共に医療者情報処理装置4に接続される表示画面に表示される。痛みに関する情報を取得した場合において、医療者情報処理装置4の表示画面には、痛みレベルが所定値以上である場合には、痛みに関する情報が強制的に表示される構成であってよい。 The medical information processing device 4 derives a coping method based on the acquired information on pain. For example, a coping method such as performing a patrol to the user according to the pain level and confirming the user's state by voice with a speaker or the like is derived. The derived coping information is displayed on a display screen connected to the medical staff information processing device 4 together with the pain level, for example. When the information on pain is acquired, the information on pain may be forcibly displayed on the display screen of the medical staff information processing apparatus 4 when the pain level is equal to or higher than a predetermined value.

本実施形態においては、操作情報に基づく痛みに関する情報の特定をコンピュータに実行させることが可能になる。特定された情報はビッグデータとして収集され、また医療関係者と共有される。従って、痛みに関する情報の活用度を高めることが可能となる。 In the present embodiment, it is possible to make the computer execute the identification of the information related to the pain based on the operation information. The identified information will be collected as big data and shared with healthcare professionals. Therefore, it is possible to increase the utilization of information on pain.

(実施形態3)
実施形態3では、複数ユーザから痛みに関する情報を取得し、ユーザ同士の痛みに関する情報の共有を実現する。実施形態3における情報処理システム300は、複数ユーザの使用する複数の可搬型装置1、複数の端末装置2、及び情報処理装置3を含む。
(Embodiment 3)
In the third embodiment, information on pain is acquired from a plurality of users, and information on pain is shared among users. The information processing system 300 according to the third embodiment includes a plurality of portable devices 1, a plurality of terminal devices 2, and an information processing device 3 used by a plurality of users.

本実施形態の情報処理装置3は、複数の端末装置2から各操作情報を取得する。図16は、実施形態3における情報処理システム300で実行される処理手順の一例を示すフローチャートである。情報処理システム300は、測定値の取得が開始されると、各ユーザの痛みの状態を表す情報の導出等の処理と並行して、図16に示す処理を実行する。 The information processing device 3 of the present embodiment acquires each operation information from a plurality of terminal devices 2. FIG. 16 is a flowchart showing an example of a processing procedure executed by the information processing system 300 according to the third embodiment. When the acquisition of the measured value is started, the information processing system 300 executes the process shown in FIG. 16 in parallel with the process of deriving the information indicating the pain state of each user.

端末装置2の制御部20は、位置情報取得部26を介してユーザの位置情報を取得する。なお位置情報は、可搬型装置1に位置情報の検出手段を設けることにより可搬型装置1が取得した位置情報を、制御部20が受信することにより取得してもよい。制御部20は、取得した位置情報を情報処理装置3に出力する(ステップS151)。 The control unit 20 of the terminal device 2 acquires the user's position information via the position information acquisition unit 26. The position information may be acquired by the control unit 20 receiving the position information acquired by the portable device 1 by providing the portable device 1 with the position information detecting means. The control unit 20 outputs the acquired position information to the information processing device 3 (step S151).

情報処理装置3の制御部30は、位置情報を取得し(ステップS251)、痛み情報DB311に記憶する。制御部30は、痛み情報DB311を読み出し、操作情報に基づき、痛みに関する情報を導出する(ステップS253)。痛みに関する情報には、ユーザの位置情報、痛みのレベル等が含まれる。この場合において、制御部30は、ユーザ情報データベースを参照し、個人情報を特定しない範囲のユーザの性別、年齢帯、及び疾患内容等のユーザ情報を取得してもよい。制御部30は、複数の端末装置2から取得した各操作情報に基づき、夫々の痛みに関する情報を導出する。 The control unit 30 of the information processing device 3 acquires the position information (step S251) and stores it in the pain information DB 311. The control unit 30 reads out the pain information DB311 and derives information on pain based on the operation information (step S253). Information about pain includes user's location information, pain level, and the like. In this case, the control unit 30 may refer to the user information database and acquire user information such as the gender, age band, and disease content of the user in a range that does not specify personal information. The control unit 30 derives information on each pain based on each operation information acquired from the plurality of terminal devices 2.

制御部30は、取得した複数の痛みに関する情報に基づき、複数ユーザの痛みに関する情報を含む痛みの共有情報を導出する。痛みの共有情報には、各ユーザの位置情報、痛みレベル等が含まれる。制御部30は、痛みの共有情報を含む表示画面の画面情報を作成する。制御部30は、作成した痛みの共有情報を端末装置2へ出力する(ステップS255)。 The control unit 30 derives pain sharing information including information on pain of a plurality of users based on the acquired information on the plurality of pains. The pain shared information includes the location information of each user, the pain level, and the like. The control unit 30 creates screen information of the display screen including the shared information of pain. The control unit 30 outputs the created shared pain information to the terminal device 2 (step S255).

端末装置2の制御部20は、痛みの共有情報を取得する(ステップS153)。制御部20は、取得した痛みの共有情報を含む表示画面情報を表示部24を介して表示し(ステップS155)、一連の処理を終了する。 The control unit 20 of the terminal device 2 acquires the shared pain information (step S153). The control unit 20 displays the display screen information including the acquired pain sharing information via the display unit 24 (step S155), and ends a series of processes.

図17は、端末装置2の表示部24に表示される画面の一例を示す図である。制御部20は、痛みの共有情報を取得し、図17に示す如く表示部24に表示する。図17の例では、痛みの共有情報の表示画面には、地図が表示され、各ユーザの位置情報に対応する地図上の位置に、当該ユーザのアイコン、及び痛みレベルが表示されている。痛みレベルは、レベルに対応する数の円等のエレメントを用いて示され、例えば痛みレベルが高い程、示されるエレメントの数が多くなる。ユーザアイコンは、例えばアバター、動物のイラスト等により作成されてよい。制御部30は、痛みの共有情報に含まれる各ユーザの位置情報、痛みレベル、ユーザ情報に記憶されるユーザアイコン等を読み出す。制御部30は、地図情報上に、各位置情報に対応させて痛みレベル及びユーザアイコンを重畳表示する。なお、制御部30は、ユーザアイコンと共に、又はユーザアイコンに代えて個人情報を特定しない範囲のユーザ情報(例えば性別、年齢帯等)を表示させてもよい。ユーザは、表示画面を通じて、他のユーザの状況を認識することが可能となる。 FIG. 17 is a diagram showing an example of a screen displayed on the display unit 24 of the terminal device 2. The control unit 20 acquires the pain shared information and displays it on the display unit 24 as shown in FIG. In the example of FIG. 17, a map is displayed on the display screen of the shared pain information, and the icon of the user and the pain level are displayed at the positions on the map corresponding to the position information of each user. The pain level is indicated using elements such as a number of circles corresponding to the level. For example, the higher the pain level, the greater the number of elements indicated. The user icon may be created by, for example, an avatar, an animal illustration, or the like. The control unit 30 reads out the position information of each user, the pain level, the user icon stored in the user information, and the like included in the shared pain information. The control unit 30 superimposes and displays the pain level and the user icon on the map information in correspondence with each position information. The control unit 30 may display user information (for example, gender, age band, etc.) in a range that does not specify personal information together with the user icon or instead of the user icon. The user can recognize the situation of another user through the display screen.

また共有情報の表示画面を通じて、ユーザは他のユーザと情報の送受信を行うことが可能である。例えば、情報の送受信を行うための表示画面には、複数ユーザのアイコンが示される。可搬型装置1を操作したユーザのアイコンは、例えば点滅等により操作中であることが表示画面に示される。制御部30は、操作情報を取得した場合に、操作情報に含まれるユーザを特定し、当該ユーザに対応付けられるユーザアイコンを点滅させる情報を出力する。他のユーザは、点滅しているユーザアイコンを表示画面上で確認した場合に、当該ユーザアイコンを選択し、ユーザに対して共有ポイントを送信する。共有ポイントは、点数、所定のキャラクター、メッセージ等により表示される。共有ポイントの受信履歴はポイントDB312保存される。共有ポイントを受信したユーザのアイコンは、取得した共有ポイントの点数に応じて変化する。例えば、ポイントの点数に応じて、ユーザのアイコンのキャラクターが成長するように変化するとよい。ポイントの点数に応じて、アイコンの大きさが大小に変化してもよい。 In addition, the user can send and receive information with other users through the shared information display screen. For example, icons of a plurality of users are displayed on a display screen for transmitting and receiving information. The icon of the user who has operated the portable device 1 is indicated on the display screen by, for example, blinking. When the operation information is acquired, the control unit 30 identifies a user included in the operation information and outputs information for blinking a user icon associated with the user. When another user confirms the blinking user icon on the display screen, the other user selects the user icon and sends the sharing point to the user. Shared points are displayed according to points, predetermined characters, messages, and the like. The reception history of the shared point is saved in the point DB 312. The icon of the user who received the shared point changes according to the score of the acquired shared point. For example, it is preferable that the character of the user's icon grows according to the number of points. The size of the icon may change depending on the number of points.

本実施形態によれば、ユーザは、他のユーザと痛みに関する情報を共有することが可能となるため、痛みに関する情報の活用度を高めることができる。 According to the present embodiment, the user can share information about pain with other users, so that the degree of utilization of the information about pain can be enhanced.

なお、上述のように開示された実施の形態はすべての点で例示であって、制限的なものではないと考えられるべきである。各実施例にて記載されている技術的特徴は互いに組み合わせることができ、本発明の範囲は、特許請求の範囲内での全ての変更及び特許請求の範囲と均等の範囲が含まれることが意図される。 It should be noted that the embodiments disclosed as described above are exemplary in all respects and should not be considered restrictive. The technical features described in each example can be combined with each other and the scope of the invention is intended to include all modifications within the claims and scope equivalent to the claims. Will be done.

1 可搬型装置
15 操作ボタン
16 センサ
2 端末装置
3 情報処理装置
4 医療者情報処理装置
2P,3P プログラム
10,20,30 制御部
11,21,31 記憶部
24 表示部(表示装置)
3M 学習済みモデル
311 痛み情報DB
312 ポイントDB
1 Portable device 15 Operation buttons 16 Sensor 2 Terminal device 3 Information processing device 4 Medical professional information processing device 2P, 3P Program 10, 20, 30 Control unit 11, 21, 31, 31 Storage unit 24 Display unit (display device)
3M trained model 311 pain information DB
312 point DB

Claims (11)

ユーザの痛みに応じた操作を受け付ける可搬型装置から、前記ユーザの痛みに応じた操作に関する操作情報を取得し、
取得した前記操作情報に応じた前記ユーザの痛みの状態を表す情報を、表示装置を介して前記ユーザに表示する
処理を含む情報処理方法。
From the portable device that accepts the operation according to the user's pain, the operation information related to the operation according to the user's pain is acquired.
An information processing method including a process of displaying information representing a pain state of the user according to the acquired operation information to the user via a display device.
取得した前記操作情報の変化の度合いに応じて、前記表示装置に表示する前記ユーザの痛みの状態を表す情報を変動する
請求項1に記載の情報処理方法。
The information processing method according to claim 1, wherein the information indicating the state of pain of the user to be displayed on the display device is changed according to the degree of change of the acquired operation information.
ユーザの痛みに応じた可搬型装置の操作に関する操作情報を入力した場合に前記痛みの程度を出力するよう学習アルゴリズムにより学習済みの学習済みモデルに、取得した前記操作情報を入力し、
前記学習済みモデルから出力される前記痛みの程度を取得する
請求項1又は請求項2に記載の情報処理方法。
When the operation information related to the operation of the portable device according to the user's pain is input, the acquired operation information is input to the trained model trained by the learning algorithm so as to output the degree of the pain.
The information processing method according to claim 1 or 2, wherein the degree of pain output from the trained model is acquired.
複数のユーザから、前記操作情報に基づく前記痛みに関する情報を取得し、
取得した各痛みに関する情報を記憶し、
各痛みに関する情報に基づく、痛みの共有情報を出力する
請求項1から請求項3のいずれか一項に記載の情報処理方法。
Obtaining information on the pain based on the operation information from a plurality of users,
Memorize the information about each pain you get and
The information processing method according to any one of claims 1 to 3, which outputs shared information on pain based on information on each pain.
複数のユーザから、位置情報をさらに取得し、
取得した各ユーザの前記位置情報と前記痛みに関する情報とを対応付けて、前記表示装置を介して地図上に視認可能に表示させる
請求項4に記載の情報処理方法。
Get more location information from multiple users,
The information processing method according to claim 4, wherein the acquired information on the position of each user and the information on the pain are associated with each other and visually displayed on a map via the display device.
前記操作情報に応じて前記ユーザにポイントを発行する
請求項1から請求項5のいずれか一項に記載の情報処理方法。
The information processing method according to any one of claims 1 to 5, which issues points to the user in response to the operation information.
前記操作情報に基づく前記痛みに関する情報を、医療関係者の情報処理装置へ出力する
請求項1から請求項5のいずれか一項に記載の情報処理方法。
The information processing method according to any one of claims 1 to 5, which outputs information on the pain based on the operation information to an information processing device of a medical personnel.
ユーザの痛みに応じた操作を受け付ける可搬型装置と、
前記可搬型装置から取得する操作情報に基づく前記ユーザの痛みに関する情報を表示する表示装置と
を備える情報処理システム。
A portable device that accepts operations according to the user's pain,
An information processing system including a display device that displays information on the user's pain based on operation information acquired from the portable device.
ユーザの痛みに応じた操作を受け付ける可搬型装置から、前記ユーザの痛みに応じた操作に関する操作情報を取得し、
取得した前記操作情報に応じた前記ユーザの痛みの状態を表す情報を表示する
処理をコンピュータに実行させるためのコンピュータプログラム。
From the portable device that accepts the operation according to the user's pain, the operation information related to the operation according to the user's pain is acquired.
A computer program for causing a computer to execute a process of displaying information indicating a pain state of the user according to the acquired operation information.
前記ユーザの痛みの状態を表す情報は、前記操作情報の変化の度合いに応じて変動する、色、形状、及び音の少なくともいずれか1つを含む
請求項9に記載のコンピュータプログラム。
The computer program according to claim 9, wherein the information representing the state of pain of the user includes at least one of a color, a shape, and a sound, which varies depending on the degree of change of the operation information.
複数のユーザの痛みに関する情報に基づき導出される痛みの共有情報を取得し、
取得した痛みの共有情報を表示する
処理をコンピュータに実行させるための請求項9又は請求項10に記載のコンピュータプログラム。
Obtain shared pain information derived based on information about pain of multiple users,
The computer program according to claim 9 or 10, for causing a computer to execute a process of displaying the acquired shared information of pain.
JP2019151449A 2019-08-21 2019-08-21 Information processing method, information processing system, and computer program Active JP7426790B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019151449A JP7426790B2 (en) 2019-08-21 2019-08-21 Information processing method, information processing system, and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019151449A JP7426790B2 (en) 2019-08-21 2019-08-21 Information processing method, information processing system, and computer program

Publications (2)

Publication Number Publication Date
JP2021033532A true JP2021033532A (en) 2021-03-01
JP7426790B2 JP7426790B2 (en) 2024-02-02

Family

ID=74677443

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019151449A Active JP7426790B2 (en) 2019-08-21 2019-08-21 Information processing method, information processing system, and computer program

Country Status (1)

Country Link
JP (1) JP7426790B2 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010273756A (en) * 2009-05-27 2010-12-09 Yoshida Dental Mfg Co Ltd Temporomandibular arthrosis diagnosis support system and apparatus equipped with pain detector
JP2016049438A (en) * 2014-08-28 2016-04-11 岡崎 章 Psychological amount measurement device that quantitatively measures psychology of person, and measuring method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003141260A (en) 2001-10-31 2003-05-16 Omron Corp Health appliance, server, health point bank system, health point storage method, health point bank program and computer-readable recording medium on which health point bank program is recorded
JPWO2006098298A1 (en) 2005-03-17 2008-08-21 松下電器産業株式会社 Lifestyle improvement support system and lifestyle improvement support method
ITUA20163359A1 (en) 2016-05-11 2017-11-11 Zambon Spa Method, mobile device and computer program for recording information related to the detection of symptoms of discomfort in the respiratory system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010273756A (en) * 2009-05-27 2010-12-09 Yoshida Dental Mfg Co Ltd Temporomandibular arthrosis diagnosis support system and apparatus equipped with pain detector
JP2016049438A (en) * 2014-08-28 2016-04-11 岡崎 章 Psychological amount measurement device that quantitatively measures psychology of person, and measuring method

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
美崎 栄一郎: "iPhone・iPadバカのあなたのiPhoneちょっと見せて! となりのアプリ", MAC FAN, vol. 第26巻, 第4号, JPN6023017989, 1 April 2018 (2018-04-01), JP, pages 150 - 151, ISSN: 0005051438 *

Also Published As

Publication number Publication date
JP7426790B2 (en) 2024-02-02

Similar Documents

Publication Publication Date Title
CN105981083B (en) Intelligent wearable device and for optimize output method
CN105706093B (en) The long distance wireless with two-way communication for biological attribute data is shown
US11435826B2 (en) Electronic device and control method thereof
CN103329067B (en) Bio signal is related to the operation mode of a device
CN111758137A (en) Method and apparatus for telemedicine
US20150187188A1 (en) Communications using tactile stimuli on wearable devices
CN108885498A (en) Electronic device and the in an electronic method of offer information
CN107249441A (en) Electronic installation and method for measuring biological information
CN107278138A (en) It is capable of the electronic installation and the body composition measuring method of electronic installation of automatic identification body part to be measured
CN107004055A (en) System and method for providing the annexation between wearable device
CN107106032A (en) The apparatus and method for controlling wearable device
US11755111B2 (en) Spatially aware computing hub and environment
CN107209807A (en) Pain management wearable device
CN107004373A (en) Information processor, information processing method and computer program
CN107491177A (en) Electronic equipment for the method for the rotation that identifies rotary body and for handling this method
CN111656304A (en) Communication method and system
US20230185364A1 (en) Spatially Aware Computing Hub and Environment
CN112842514B (en) Ablation operation prompting method, electronic device and computer readable storage medium
EP3984044A1 (en) Virtual reality therapeutic systems
CN106878390A (en) Electronic pet interaction control method, device and wearable device
CN104427942A (en) Measurement assistance device, measurement assistance method, control program, and recording medium
CN110113659A (en) Generate method, apparatus, electronic equipment and the medium of video
WO2021169918A1 (en) Information output method, electronic device, and medium
US10765953B1 (en) Information processing system, information processing method, information processing apparatus, and non-transitory storage medium having stored therein information processing program
US10758159B2 (en) Measuring somatic response to stimulus utilizing a mobile computing device

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230509

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230703

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231003

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231205

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231218

R150 Certificate of patent or registration of utility model

Ref document number: 7426790

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150