JP6822587B1 - Watching device, watching system, watching method, and program - Google Patents
Watching device, watching system, watching method, and program Download PDFInfo
- Publication number
- JP6822587B1 JP6822587B1 JP2020045852A JP2020045852A JP6822587B1 JP 6822587 B1 JP6822587 B1 JP 6822587B1 JP 2020045852 A JP2020045852 A JP 2020045852A JP 2020045852 A JP2020045852 A JP 2020045852A JP 6822587 B1 JP6822587 B1 JP 6822587B1
- Authority
- JP
- Japan
- Prior art keywords
- sensor
- watching
- sensor information
- abnormality
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 21
- 230000005856 abnormality Effects 0.000 claims abstract description 79
- 238000012544 monitoring process Methods 0.000 claims abstract description 63
- 238000012806 monitoring device Methods 0.000 claims abstract description 43
- 238000013459 approach Methods 0.000 claims abstract description 7
- 230000004044 response Effects 0.000 claims description 82
- 238000001514 detection method Methods 0.000 claims description 65
- 238000004891 communication Methods 0.000 claims description 62
- 230000006870 function Effects 0.000 claims description 6
- 238000005516 engineering process Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 abstract description 10
- 230000033001 locomotion Effects 0.000 description 23
- 238000007781 pre-processing Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 238000012549 training Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000013145 classification model Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- QVFWZNCVPCJQOP-UHFFFAOYSA-N chloralodol Chemical compound CC(O)(C)CC(C)OC(O)C(Cl)(Cl)Cl QVFWZNCVPCJQOP-UHFFFAOYSA-N 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Landscapes
- Emergency Alarm Devices (AREA)
- Alarm Systems (AREA)
- Telephonic Communication Services (AREA)
- Toilet Supplies (AREA)
Abstract
【課題】様々なタイプの個室がある場合であっても、個別に条件を設定することなく、トイレ使用者の見守りを行うことができる見守り装置を提供する。【解決手段】イレ空間に設けられたセンサにより検知されたセンサ情報を取得するセンサ情報取得部と、前記センサ情報と、学習済モデルとを用いて、前記トイレ空間にいる見守り対象者における異常の度合いを推定する異常推定部と、を備え、前記学習済モデルは、学習用のトイレ空間に設けられたセンサにより検知された学習用センサ情報を入力させることにより得られる出力が、前記学習用のトイレ空間にいる使用者における異常の有無に近づくように学習されたモデルであって、入力された前記センサ情報から、前記センサ情報に対応する空間にいる前記見守り対象者における異常の度合いを推定するモデルである。【選択図】図2PROBLEM TO BE SOLVED: To provide a monitoring device capable of monitoring a toilet user without setting individual conditions even when there are various types of private rooms. SOLUTION: A sensor information acquisition unit that acquires sensor information detected by a sensor provided in an irrelevant space, the sensor information, and a learned model are used to cause an abnormality in a person to be watched in the toilet space. The trained model is provided with an abnormality estimation unit for estimating the degree, and the output obtained by inputting the learning sensor information detected by the sensor provided in the learning toilet space is the output for the learning. It is a model learned to approach the presence or absence of an abnormality in the user in the toilet space, and the degree of abnormality in the monitoring target person in the space corresponding to the sensor information is estimated from the input sensor information. It is a model. [Selection diagram] Fig. 2
Description
本発明は、見守り装置、見守りシステム、見守り方法、及びプログラムに関する。 The present invention relates to a watching device, a watching system, a watching method, and a program.
従来、トイレや、シャワールーム、風呂などのプライベートな空間内において使用者の見守りを行うシステムがある。例えば、特許文献1には、空間内における人体の存否を検出するセンサの検出結果に基づいて使用者のトイレ内における状態を推定する。そして、推定した状態が、トイレを通常使用する際に使用者がとる一連の状態変化パターンから逸脱している場合に異常事態が発生したと判定する技術が開示されている。
Conventionally, there is a system for watching over a user in a private space such as a toilet, a shower room, or a bath. For example, in
しかしながら、トイレの個室には様々なものがある。例えば、車いす対応トイレは、通常の個室トイレより広く、手すりなどが設置されている。特許文献1の技術を用いて、個室ごとに異常事態を判定させようとすると、空間に設置するセンサの数や種類を個別に決定し、それぞれに応じた状態変化パターンを個別に設定する必要があり、手間がかかるという問題があった。
However, there are various private rooms in the toilet. For example, wheelchair-accessible restrooms are wider than ordinary private-room restrooms and are equipped with handrails. In order to determine an abnormal situation for each private room using the technique of
本発明は、このような状況に鑑みてなされたもので、様々なタイプの個室がある場合であっても、個別に条件を設定することなく、トイレ使用者の見守りを行うことができる見守り装置、見守りシステム、見守り方法、及びプログラムを提供する。 The present invention has been made in view of such a situation, and even if there are various types of private rooms, a watching device capable of watching over the toilet user without setting individual conditions. , A watching system, a watching method, and a program.
上記目的を達成するために、本発明一実施形態に係る見守り装置は、トイレ空間に設けられたセンサにより検知されたセンサ情報を取得するセンサ情報取得部と、前記センサ情報と、学習済モデルとを用いて、前記トイレ空間にいる見守り対象者における異常の度合いを推定する異常推定部と、を備え、前記学習済モデルは、学習用のトイレ空間に設けられたセンサにより検知された学習用センサ情報を入力させることにより得られる出力が、前記学習用のトイレ空間にいる使用者における異常の有無に近づくように学習されたモデルであって、入力された前記センサ情報から、前記センサ情報に対応する空間にいる前記見守り対象者における異常の度合いを推定するモデルであり、前記センサ情報取得部は、前記トイレ空間におけるドアの開閉を検知する開閉センサ、前記トイレ空間に設けられた照明における点灯の有無を検知する照度センサ、及び前記トイレ空間に設けられた便座への着座を検知する着座センサのそれぞれを前記トイレ空間に設けられたセンサとし、前記センサのそれぞれにより検知された情報が検知時間に対応づけられた情報を、前記センサ情報として取得し、
前記学習用センサ情報は、前記開閉センサ、前記照度センサ、及び前記着座センサのそれぞれにより検知された情報が検知時間に対応づけられた情報であることを特徴とする。
In order to achieve the above object, the monitoring device according to the first embodiment of the present invention includes a sensor information acquisition unit that acquires sensor information detected by a sensor provided in the toilet space, the sensor information, and a learned model. The learned model includes a learning sensor that estimates the degree of abnormality in the watching target person in the toilet space, and the learned model is a learning sensor detected by a sensor provided in the learning toilet space. The output obtained by inputting the information is a model learned so as to approach the presence or absence of an abnormality in the user in the learning toilet space, and corresponds to the sensor information from the input sensor information. It is a model for estimating the degree of abnormality in the watching target person in the space to be watched, and the sensor information acquisition unit is an opening / closing sensor for detecting the opening / closing of a door in the toilet space, and lighting in the lighting provided in the toilet space. Each of the illuminance sensor for detecting the presence or absence and the seating sensor for detecting sitting on the toilet seat provided in the toilet space are sensors provided in the toilet space, and the information detected by each of the sensors is used as the detection time. The associated information is acquired as the sensor information, and
The learning sensor information is characterized in that the information detected by each of the open / close sensor, the illuminance sensor, and the seating sensor is information associated with the detection time.
上記目的を達成するために、本発明一実施形態に係る見守りシステムは、上記に記載の見守り装置と、前記見守り装置に前記センサ情報を送信するセンサ端末と、を備え、前記見守り装置と前記センサ端末とは、LPWA(Low Power Wide Area)の無線通信技術により通信可能に接続されることを特徴とする。 In order to achieve the above object, the watching system according to the first embodiment of the present invention includes the watching device described above and a sensor terminal for transmitting the sensor information to the watching device, and includes the watching device and the sensor. The terminal is characterized in that it is communicably connected by the wireless communication technology of LPWA (Low Power Wide Area).
上記目的を達成するために、本発明一実施形態に係る見守り方法は、センサ情報取得部が、トイレ空間に設けられたセンサにより検知されたセンサ情報を取得し、異常推定部が、前記センサ情報と、学習済モデルとを用いて、前記トイレ空間にいる見守り対象者における異常の度合いを推定する見守り方法であって、前記学習済モデルは、学習用のトイレ空間に設けられたセンサにより検知された学習用センサ情報を入力させることにより得られる出力が、前記学習用のトイレ空間にいる使用者における異常の有無に近づくように学習されたモデルであって、入力された前記センサ情報から、前記センサ情報に対応する空間にいる前記見守り対象者における異常の度合いを推定するモデルであり、前記センサ情報取得部は、前記トイレ空間におけるドアの開閉を検知する開閉センサ、前記トイレ空間に設けられた照明における点灯の有無を検知する照度センサ、及び前記トイレ空間に設けられた便座への着座を検知する着座センサのそれぞれを前記トイレ空間に設けられたセンサとし、前記センサのそれぞれにより検知された情報が検知時間に対応づけられた情報を、前記センサ情報として取得し、前記学習用センサ情報は、前記開閉センサ、前記照度センサ、及び前記着座センサのそれぞれにより検知された情報が検知時間に対応づけられた情報であることを特徴とする。
In order to achieve the above object, in the monitoring method according to the first embodiment of the present invention, the sensor information acquisition unit acquires the sensor information detected by the sensor provided in the toilet space, and the abnormality estimation unit obtains the sensor information. This is a monitoring method for estimating the degree of abnormality in the monitoring target person in the toilet space by using the learned model and the learned model, which is detected by a sensor provided in the learning toilet space. The output obtained by inputting the learning sensor information is a model learned so as to approach the presence or absence of an abnormality in the user in the learning toilet space, and from the input sensor information, the said It is a model for estimating the degree of abnormality in the monitoring target person in the space corresponding to the sensor information, and the sensor information acquisition unit is provided in the toilet space , an open / close sensor for detecting the opening / closing of the door in the toilet space. Each of the illuminance sensor that detects the presence or absence of lighting in the lighting and the seating sensor that detects sitting on the toilet seat provided in the toilet space is a sensor provided in the toilet space, and the information detected by each of the sensors. Acquires the information associated with the detection time as the sensor information, and the learning sensor information corresponds to the detection time with the information detected by each of the open / close sensor, the illuminance sensor, and the seating sensor. The feature is that the information is obtained.
上記目的を達成するために、本発明一実施形態に係るプログラムは、上記に記載の見守り装置として動作させるためのプログラムであって、前記コンピュータを前記見守りが備える各部として機能させるためのプログラムであることを特徴とする。 In order to achieve the above object, the program according to the first embodiment of the present invention is a program for operating as the watching device described above, and is a program for operating the computer as each part provided by the watching. It is characterized by that.
本発明によれば、様々なタイプの個室がある場合であっても、個別に条件を設定することなく、トイレ使用者の見守りを行うことができる。 According to the present invention, even when there are various types of private rooms, it is possible to watch over the toilet user without setting individual conditions.
以下、図面を参照しながら本発明の実施形態を詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
見守りシステム1は、例えば、医療施設や高齢者施設等におけるトイレやシャワー室、浴室などの個室を使用する使用者(見守り対象者)の見守りに適用される。図1は、実施形態による見守りシステム1の構成の例を示すブロック図である。見守りシステム1は、例えば、複数のセンサ端末10(センサ端末10−1、10−2、10−3、…、10−M)と、AP(アクセスポイント)20と、見守り装置30と、複数の見守り端末40(見守り端末40−1、40−2、30−N)とを備える。M、及びNは任意の整数である。
The
センサ端末10は、トイレの個室などの空間(トイレ空間)に設置される通信機能付きのセンサである。センサ端末10は、例えば、通信部11と、記憶部12と、制御部13と、センサ部14とを備える。通信部11は、AP20と通信する。記憶部12は、センサ端末10の各種処理を実行するためのプログラム、及び各種処理を行う際に利用される一時的なデータを記憶する。制御部13は、センサ端末10を統括的に制御する。例えば、制御部13は、センサ部14により検知された検知結果と検知時間とを対応づけることによりセンサ情報を生成する。制御部13は、生成したセンサ情報を、通信部11を介してAP20に送信する。
The
センサ部14は、トイレ空間TK(図4参照)に設けられ、トイレを使用する見守り対象者の動きを検知するセンサである。センサ部14は、例えば、開閉センサKSと、人感センサJSと、着座センサTSを備える(図4参照)。開閉センサKSは、トイレ空間TKにおけるドアの開閉を検知する。人感センサJSは、トイレ空間TKにおける(検知領域内の)使用者の存否を検知する。着座センサTSは、トイレ空間TKに設けられたトイレBZへの着座を検知する(図4参照)。
The
例えば、ドアには、ドアが閉じられると磁石が接触し、ドアが開けられると磁石が離間するように磁石が配置され、開閉センサKSは、この磁石の接触又は離間を検知することによりドアの開閉を検知する。 For example, magnets are arranged on the door so that the magnets come into contact with each other when the door is closed, and the magnets are separated when the door is opened. Detects opening and closing.
人感センサJSは、例えば、トイレ空間TKに設けられた照明が点灯しているか否かを検知する照度センサである。照度センサは、例えば、受光素子を備え、受光素子に入射した光を電流に変換して明るさを検知する。トイレを使用する見守り対象者がトイレ空間TKに設けられた照明を点灯させた場合、照度センサが点灯を検知する。これにより、トイレ空間TKに人が存在していることが検知される。或いは、トイレ空間TKに設けられた照明が人の存在を検知して点灯および消灯を行う仕組みを有している場合、トイレを使用する見守り対象者がトイレ空間TKに入ることにより、自動的に照明が点灯する。照度センサがこの点灯を検知ことより、トイレ空間TKに人が存在していることを検知するようにしてもよい。或いは、人感センサJSは、人体等から放射される赤外線を受光することにより得られる空間の温度変化から人の存否を検知する、いわゆる赤外線センサであってもよい。 The motion sensor JS is, for example, an illuminance sensor that detects whether or not the lighting provided in the toilet space TK is lit. The illuminance sensor includes, for example, a light receiving element, and converts the light incident on the light receiving element into an electric current to detect the brightness. When the person to be watched over using the toilet turns on the lighting provided in the toilet space TK, the illuminance sensor detects the lighting. As a result, it is detected that a person is present in the toilet space TK. Alternatively, if the lighting provided in the toilet space TK has a mechanism for detecting the presence of a person and turning it on and off, the person to be watched over who uses the toilet automatically enters the toilet space TK. The lights turn on. The illuminance sensor may detect the presence of a person in the toilet space TK by detecting this lighting. Alternatively, the human sensor JS may be a so-called infrared sensor that detects the presence or absence of a person from the temperature change of the space obtained by receiving infrared rays radiated from the human body or the like.
着座センサTSは、例えば、便座に着座した場合に人の上半身が位置する領域を検知範囲とする距離センサである。距離センサは、赤外線などを照射し、照射して赤外線が物体に反射した反射光を受光するまでの時間に基づいて物体までの距離を検知する。この場合、着座センサは、便座に人が着座している場合としていない場合とで検知される距離の相違に基づいて着座の有無を検知する。 The seating sensor TS is, for example, a distance sensor whose detection range is a region in which the upper body of a person is located when seated on a toilet seat. The distance sensor irradiates infrared rays or the like, and detects the distance to the object based on the time until the infrared rays reflect the reflected light on the object. In this case, the seating sensor detects the presence or absence of seating based on the difference in the distance detected when a person is seated on the toilet seat and when the person is not seated on the toilet seat.
AP20は、センサ端末10と見守り装置30との通信を中継する中継器である。AP20は、センサ端末10からセンサにより検知された検知結果を受信し、受信した検知結果を見守り装置30に送信する。AP20は、トイレ空間、及び見守りシステム1が適用される医療施設の電波強度分布などに基づいて、一つ、或いは複数、設置される。これにより、センサ端末10から発信される検知結果を受信することができる。なお、見守りシステム1が適用される医療施設の電波状況に応じて、センサ端末10が、AP20を介さず、直接、見守り装置30に検知結果を送信するようにしてもよい。この場合、AP20を省略することが可能である。
The
センサ端末10とAP20(AP20が省略される場合には、センサ端末10と見守り装置30)との通信は、任意の通信方式であってよい。例えば、センサ端末10とAP20との通信には、LPWA(Low Power Wide Area)規格の無線通信技術が用いられる。LPWAは、通信速度を抑える(低ビットレート)ことにより、既存の通信網、例えばLTE(Long Term Evolution)などと比較して消費電力を少なく抑える(低消費電力)ことを特徴とする。また、Bluetooth(登録商標)などの近距離無線通信と比較して通信距離が大きく(広域カバレッジ)、例えば数十kmから〜100km程度であることを特徴とする。
The communication between the
LPWAには、複数の規格があり、例えば、LoRa(登録商標)、Sigfox(登録商標)、NB−IoT、及びZETA(登録商標)などが存在する。ZETAが適用される場合、中継器(AP20)によるマルチホップ(メッシュアクセス)が可能である。これにより、見守りシステム1を適用する施設における奥まった場所や地下など、電波が届きにくい領域にAP20を設置して中継させることにより、センサ端末10が施設の如何なる場所に設置された場合でも通信が可能となる。
LPWA has a plurality of standards, for example, LoRa (registered trademark), Sigfox (registered trademark), NB-IoT, and ZETA (registered trademark). When ZETA is applied, multi-hop (mesh access) by a repeater (AP20) is possible. As a result, by installing the AP20 in an area where radio waves are difficult to reach, such as a deep place or underground in a facility to which the
また、LPWAの通信帯域として、例えば日本においては、866MHz帯、915MHz帯、920MHz帯が利用されている。一方、施設には既存の通信網(例えば、WiFiに利用される2.4GHz帯、或いは5GHz帯等)が業務に利用されている。センサ端末10とAP20との通信には、LPWAを用いることにより、既存の通信網への負荷増加を抑制し、尚且つ電波干渉や通信障害を抑制することが可能である。
Further, as the communication band of LPWA, for example, in Japan, the 866 MHz band, the 915 MHz band, and the 920 MHz band are used. On the other hand, the existing communication network (for example, 2.4 GHz band used for WiFi, 5 GHz band, etc.) is used for business in the facility. By using LPWA for communication between the
見守り装置30は、センサ端末10のセンサにより検知された検知結果を集約するサーバ装置などのコンピュータである。AP20を介して、センサ端末10のセンサにより検知された検知結果を受信する。見守り装置30は、受信した検知結果に基づいて、見守り対象者に異常が生じていないかを判定し、必要に応じて、見守り端末40に対応を要請する通知を行う。見守り装置30の構成については、後述する。
The
見守り端末40は、医療施設の医師や看護師など、見守り対象者を見守るスタッフ(以下、見守りスタッフ)が携帯するコンピュータ装置、スマートフォン、タブレット端末、業務用端末などである。見守り端末40には、例えば、見守り装置30が通知する見守りサービスのアプリケーションプログラム(以下、見守りアプリという)がインストールされる。見守り端末40には、見守りアプリにおいて見守りスタッフのアカウントが作成されている。これにより、見守りスタッフに、見守り対象者に異常が発生したと判定された場合に、対応を要請するメッセージが通知されるようになる。或いは、見守りスタッフは、見守り対象者に異常が発生した場合に、対応要請の通知を受け取り可能な通知先の情報を見守り装置30に登録する。通知先の情報は、少なくとも見守り端末40により受信可能な通知先であればよく、例えば、業務用の電子メールアドレス、業務用のSNS(Social Networking Service)のアカウント等である。
The watching
見守り端末40は、例えば、通信部41と、記憶部42と、制御部43と、表示部44と、入力部45とを備える。通信部41は、通信ネットワークNWを介して見守り装置30と通信する。記憶部42は、見守り端末40の各種処理を実行するためのプログラム(例えば、見守りアプリ)、及び各種処理を行う際に利用される一時的なデータを記憶する。制御部43は、見守り端末40を統括的に制御する。例えば、制御部43は、見守り装置30からの対応要請を、通信部11を介して受信し、受信した対応要請を表示部44に表示する。表示部44は、液晶画面を含む。表示部44は、制御部43の制御に応じた画像を表示する。入力部45は、タッチパネル、マウスやキーボードなどの入力装置を含む。入力部45は、見守りスタッフにより操作入力された情報を取得する。
The
通信ネットワークNWは、見守り装置30と見守り端末40とを通信可能に接続する。通信ネットワークNWは、施設内において従来から利用されている汎用的な通信網である。通信ネットワークNWは、例えば、広域回線網、すなわちWAN(Wide Area Network)やインターネット、WiFi、或いはこれらの組合せである。通信ネットワークNWにおける通信方式には、例えば、WiFiに利用される2.4GHz帯、或いは5GHz帯や、携帯電話回線である3G(Generation)、5G、或いはLTE等が適用される。
The communication network NW connects the watching
図2は、実施形態による見守り装置30の構成の例を示すブロック図である。見守り装置30は、例えば、通信部31と、記憶部32と、制御部33とを備える。
FIG. 2 is a block diagram showing an example of the configuration of the
通信部31は、例えば、センサ通信部310と、NW(ネットワーク)通信部311とを備える。センサ通信部310は、センサ端末10及びAP20と通信する。NW通信部311は、通信ネットワークNWを介して見守り端末40と通信する。
The
記憶部32は、少なくとも1つの記憶媒体を任意に組み合わせることによって構成される。記憶媒体は、例えば、HDD(Hard Disk Drive)、フラッシュメモリ、EEPROM(Electrically Erasable Programmable Read Only Memory)、RAM(Random Access read/write Memory)、ROM(Read Only Memory)である。記憶部32は、見守り装置30の各種処理を実行するためのプログラム、及び各種処理を行う際に利用される一時的なデータを記憶する。
The
記憶部32は、例えば、センサ情報320と、学習済モデル321と、通知先情報部322とを記憶する。センサ情報320は、センサ端末10が備える各種センサにより検知された検知結果が検知された時間(検知時間)と対応づけられた情報である。学習済モデル321は、センサ情報320から見守り対象者に異常が発生したか否かを推定するモデルである。学習済モデル321の生成方法については、後で詳しく説明する。通知先情報部322は、各種の通知を行う通知先を示す情報である。各種の通知とは、例えば、見守り対象者への対応を要請する通知、見守り対象者への対応を行うスタッフが確定された旨の通知、見守り対象者への対応をするスタッフがいない旨の通知などである。
The
制御部33は、見守り装置30がハードウェアとして備えるCPU(Central Processing Unit)にプログラムを実行させることによって実現される。制御部33は、例えば、センサ情報取得部330と、異常推定部331と、対応要請制御部332と、装置制御部333とを備える。
The
センサ情報取得部330は、センサ情報を取得する。センサ情報取得部330は、センサ端末10から見守り装置30宛に送信されたセンサ情報を、通信部31を介して取得する。センサ情報取得部330は、取得したセンサ情報を、センサ情報320として記憶部32に記憶させる。なお、センサ情報取得部330がセンサ端末10のセンサにより検知された検知結果を用いてセンサ情報を生成するようにしてもよい。この場合、センサ端末10は、センサ端末10のセンサにより検知された検知結果を見守り装置30に送信する。センサ情報取得部330は、センサ端末10のセンサにより検知された検知結果を、通信部31を介して取得し、取得した検知結果を受信時刻(検知時間)と対応づけることによりセンサ情報を取得する。
The sensor
異常推定部331は、センサ情報320と学習済モデル321とを用いて、見守り対象に異常が発生したか否かを推定する。
The
学習済モデル321は、学習モデルに教師あり学習を実行することにより作成されたモデルである。学習済モデル321は、学習用のトイレ空間に設けられたセンサにより検知された学習用のセンサ情報(以下、学習用センサ情報ともいう)と、学習用センサ情報に対応する空間において使用者に異常が発生したか否かの実績との対応関係を学習したモデルである。学習済モデル321は、学習用のトイレ空間に設けられたセンサにより検知された学習用のセンサ情報(以下、学習用センサ情報ともいう)と、学習用センサ情報に対応する空間において使用者に異常が発生したか否かの実績との対応関係を学習したモデルである。
The trained
学習用のトイレ空間は、センサ情報が取得でき、使用者の異常の有無が判定可能な空間であれば任意の空間であってよい。例えば、学習用のトイレ空間は、推定の対象とするトイレ空間そのものであってもよいし、空間の構成が似たようなタイプのトイレ空間であってもよいし、様々なタイプのトイレ空間が混在していてもよい。 The toilet space for learning may be any space as long as sensor information can be acquired and the presence or absence of abnormality of the user can be determined. For example, the toilet space for learning may be the toilet space itself to be estimated, a type of toilet space having a similar structure, or various types of toilet spaces. It may be mixed.
学習済モデルは、入力された(未学習の)センサ情報320に基づいて、見守り対象者に異常が発生したか否かを予測できるように学習する。なお、学習済モデルは、異常が発生したか否かを予測してもよいし、異常が発生した度合いを確率などにより予測してもよい。すなわち、学習済モデルは、学習用センサ情報を入力させることにより得られる出力が、学習用センサ情報に対応する空間にいる使用者における異常の有無に近づくように学習されたモデルであって、入力されたセンサ情報320から、見守り対象者における異常の度合いを推定するモデルである。
The trained model learns so that it can predict whether or not an abnormality has occurred in the watch target person based on the input (unlearned)
学習済モデルへ学習させるモデル(学習モデル)は、任意の機械学習の手法が適用されたモデルであってよい。例えば、学習モデルは、画像を認識して分類する画像分類モデルとして知られているDNN(Deep Neural Network)、CNN(Convolutional Neural Network)等による深層学習(ディープラーニング)のモデルである。学習モデルとしてVAE(Variational AutoEncoder)であってもよい。学習モデルにVAEを用いることによりデータの特徴を保持しつつ次元を圧縮させることができ、学習における処理負荷の増大を抑制することが可能となる。 The model (learning model) to be trained by the trained model may be a model to which any machine learning method is applied. For example, the learning model is a model of deep learning by DNN (Deep Neural Network), CNN (Convolutional Neural Network), etc., which are known as image classification models for recognizing and classifying images. VAE (Variational AutoEncoder) may be used as the learning model. By using VAE as the learning model, it is possible to compress the dimensions while preserving the characteristics of the data, and it is possible to suppress an increase in the processing load in learning.
学習済モデルへ学習させる内容は、教師あり学習である場合、学習データと教師データとが一組にセットされた、学習データセットである。本実施形態では、学習データとして、学習用センサ情報が用いられる。 In the case of supervised learning, the content to be trained by the trained model is a learning data set in which training data and teacher data are set as a set. In this embodiment, learning sensor information is used as learning data.
学習用センサ情報は、学習モデルに入力する前に、前処理が行われる。前処理は、学習モデルが学習し易くなるように、データを加工する処理である。前処理において、学習用センサ情報は、検知時間と、各センサにより検知された検知結果とを軸とした多次元マップに加工される。 The learning sensor information is preprocessed before being input to the learning model. The pre-processing is a process of processing data so that the learning model can be easily learned. In the preprocessing, the learning sensor information is processed into a multidimensional map centered on the detection time and the detection result detected by each sensor.
例えば、開閉センサの検出結果に対応する学習用センサ情報は、前処理において、横軸が検知時間、縦軸が開閉センサによる検知結果を示す画像(マップ)において、各画素に開閉を示す情報が対応づけられた画像データに加工される。 For example, in the learning sensor information corresponding to the detection result of the open / close sensor, in the preprocessing, the horizontal axis is the detection time, and the vertical axis is the image (map) showing the detection result by the open / close sensor. It is processed into the associated image data.
人感センサの検出結果に対応する学習用センサ情報は、前処理において、横軸が検知時間、縦軸が人感センサによる検知結果を示す画像(マップ)において、各画素に人の存否を示す情報が対応づけられた画像データに加工される。着座センサの検出結果に対応する学習用センサ情報は、前処理において、横軸が検知時間、縦軸が着座センサによる検知結果を示す画像(マップ)において、各画素に着座の有無を示す情報が対応づけられた画像データに加工される。距離センサの検出結果に対応する学習用センサ情報は、前処理において、横軸が検知時間、縦軸が距離センサによる検知結果を示す画像(マップ)において、各画素に距離を示す情報が対応づけられた画像データに加工される。 In the preprocessing, the horizontal axis indicates the detection time, and the vertical axis indicates the presence or absence of a person in each pixel in the image (map) showing the detection result by the motion sensor. The information is processed into the associated image data. In the preprocessing, the learning sensor information corresponding to the detection result of the seating sensor includes information indicating the presence or absence of seating in each pixel in the image (map) in which the horizontal axis indicates the detection time and the vertical axis indicates the detection result by the seating sensor. It is processed into the associated image data. In the preprocessing, the learning sensor information corresponding to the detection result of the distance sensor is associated with the information indicating the distance to each pixel in the image (map) in which the horizontal axis indicates the detection time and the vertical axis indicates the detection result by the distance sensor. It is processed into the obtained image data.
或いは、各センサのそれぞれの検出結果に対応する学習用センサ情報は、前処理において、横軸が検知時間、縦軸が各センサによる検知結果を正規化した値を示す画像(マップ)において、各画素に、「開閉センサ、人感センサ、着座センサ(或いは距離センサ)」を示す情報が(例えば、RGB形式のように)対応づけられた画像データに加工される。 Alternatively, the learning sensor information corresponding to each detection result of each sensor is obtained in the image (map) in which the horizontal axis shows the detection time and the vertical axis shows the normalized value of the detection result by each sensor in the preprocessing. Information indicating "open / close sensor, motion sensor, seating sensor (or distance sensor)" is processed into image data associated with the pixel (for example, in RGB format).
前処理が行われることにより、学習用センサ情報を画像データとして扱うことが可能となり、画像分類モデルに、特徴を学習しやすくさせることが可能である。 By performing the preprocessing, it becomes possible to handle the learning sensor information as image data, and it is possible to make the image classification model easier to learn the features.
学習済モデルへの学習では、誤差逆伝搬法などの手法を用いて、学習モデルから出力されたデータ(異常の有無の予測値)が、当該学習データに対応する教師データ(異常の有無の実績)に近づくように、学習モデルのパラメータが調整される。学習モデルは、学習モデルの出力層から出力される予測値の誤差が所定の閾値未満となるなど、所定の終了条件を満たしたと判定される場合に、学習を終了させる。学習が終了した学習モデルが、学習済モデルとなる。 In training to a trained model, the data output from the training model (predicted value of presence / absence of abnormality) is the teacher data (actual result of presence / absence of abnormality) corresponding to the training data using a method such as the error back propagation method. ), The parameters of the learning model are adjusted. The learning model ends learning when it is determined that a predetermined end condition is satisfied, such as an error of a predicted value output from the output layer of the learning model is less than a predetermined threshold value. The learning model for which learning has been completed becomes the trained model.
対応要請制御部332は、見守り対象者への対応要請を制御する。ここでの見守り対象者への対応要請とは、見守りスタッフに、異常が生じているとみなされた見守り対象者への対応を要請することである。要請を受けた見守りスタッフは、例えば、見守り対象者の状況を確認し、状況に応じて、例えば見守り対象者が転倒していた場合には助け起こすなどの対応を行う。
The response
対応要請制御部332は、異常推定部331の推定結果に基づいて、見守り対象者への対応を要請するか否かを判定する。例えば、異常推定部331により異常が発生したか否かが二値で推定される場合、対応要請制御部332は、異常推定部331により異常が発生したと推定された場合に、対応を要請すると判定する。異常推定部331により見守り対象者に異常が発生したか否かが確率で推定される場合、対応要請制御部332は、異常推定部331により異常が発生したと推定される確率が所定の閾値以上である場合に、対応を要請すると判定する。対応要請制御部332は、対応を要請すると判定した場合、NW通信部311を介して見守り端末40にその旨を通知する。
The response
対応要請制御部332は、見守り端末40に対応を要請する通知を行う場合、異常が生じていると推定された見守り対象者がいるトイレの場所(以下、該当場所という)に応じて、通知する見守り端末40を決定するようにしてもよい。例えば、対応要請制御部332は、該当場所から所定の範囲内の区域(例えば、病室や病棟など)で作業する見守りスタッフの見守り端末40に対応を要請する通知を行う。或いは、対応要請制御部332は、該当場所に同じフロアに常駐する見守りスタッフの見守り端末40に対応を要請する通知を行うようにしてもよい。これにより、該当場所に比較的近い場所にいると推定され、迅速に対応することが可能な見守りスタッフに通知し、該当場所に比較的遠い場所にいると推定され、対応することが困難な見守りスタッフには通知を控えることができる。したがって、対応が必要な見守り対象者の位置と見守りスタッフの状況に応じた効率のよい対応要請を行うことができる。
When the response
対応要請制御部332は、NW通信部311を介して見守り端末40からの応答を取得する。ここでの応答は、対応要請に対する応答であり、要請を受けた見守りスタッフが要請に対応するか否かが示されたものである。
The response
対応要請制御部332は、見守り端末40からの応答に、対応する旨を示す通知があった場合、その対応する旨を通知してきた見守り端末40(以下、対応端末という)に対応を確定させる旨のする通知を行うと共に、他の見守り端末40に、対応端末が済みである旨の通知を行う。これにより、他の見守り端末40が対応する必要がなくなったことを知らせ、同一の見守り対応者への対応が重複しないようにすることができる。
When the response
対応要請制御部332は、所定の時間内に、見守り端末40からの応答に対応する旨を示す通知がない場合、特定の見守り端末40に対応可能な見守りスタッフがいない旨の通知を行う。ここでの特定の見守り端末40は、対応可能な見守りスタッフがいない場合の対策を行うことが可能な者の端末であり、例えば、ナースステーション等、見守りスタッフの詰所に設けられる見守り端末40や、見守りスタッフの割り当てを行うマネージャなどの立場にいる役職者の見守り端末40である。これにより、対応可能な見守りスタッフを直ちに見つけられないような状況にあっても、個別に対応させることが可能となる。例えば、対応可能な見守りスタッフがいない旨が通知された見守り端末40は、対応できそうなスタッフに個人的に打診したり、該当場所の近くにいるスタッフの作業を他のスタッフに代替させたりさせるなどして、見守り対象者に対応できるように采配する。
If there is no notification indicating that the response from the monitoring
装置制御部333は、見守り装置30を統括的に制御する。装置制御部333は、例えば、センサ情報取得部330により取得されたセンサ情報を異常推定部331に出力する。制御部33は、異常推定部331により推定された推定結果を対応要請制御部332に出力する。
The
図3は、実施形態によるセンサ情報320の構成の例を示す図である。センサ情報320は、例えば、日付、空間ID、検知時間、センサ情報などの項目を備える。日付は、センサによる検知が行われた日付である。空間IDは、センサによる検知が行われた空間を一意に識別する情報である。空間IDは、センサがトイレ空間に設けられている場合には、そのトイレの位置など、トイレ空間を識別する情報となる。検知時間は、センサによる検知が行われた時間を示す。センサ情報は、例えば、開閉センサ、人感センサ、着座センサなど、空間に設けられたセンサごとに設けられる。開閉センサには、開閉センサにより開閉が検知された検知結果が示される。人感センサには、人感センサにより人の存否が検知された検知結果が示される。着座センサには、着座センサにより便座への着座が検知された検知結果が示される。
FIG. 3 is a diagram showing an example of the configuration of the
図4は、実施形態によるトイレ空間TKの例を示す図である。トイレ空間TKは、例えば、出入口DRと、手すりTRと、トイレBZとが設けられた空間である。手すりTRは、出入口DRから見て左側と、トイレBZに着座する人から見て左右両側の、3箇所にそれぞれ設けられている。このようなトイレ空間TKに、開閉センサKS、人感センサJS、着座センサTSがそれぞれ設置される。開閉センサKSは、出入口DRのドアの開閉部分に設置される。 FIG. 4 is a diagram showing an example of the toilet space TK according to the embodiment. The toilet space TK is, for example, a space provided with an entrance / exit DR, a handrail TR, and a toilet BZ. The handrail TR is provided at three locations on the left side when viewed from the entrance / exit DR and on the left and right sides when viewed from the person sitting on the toilet BZ. An open / close sensor KS, a motion sensor JS, and a seating sensor TS are installed in such a toilet space TK, respectively. The open / close sensor KS is installed at the open / close portion of the door of the doorway DR.
人感センサJSとして照度センサが用いられる場合、照度センサは、トイレ空間TKに設けられた照明が点灯した際の光を受光できる任意の箇所に設けられる。照度センサは、例えば、出入口DRの付近や、トイレ空間TKに設けられた照明の周辺などに設置される。人感センサJSとして赤外線センサが用いられる場合、赤外線センサは、例えば、図4に示すように、出入口DRから見て右側の壁面のややトイレBZ寄りに、トイレ空間TKを立って移動する人の胸あたりの高さが検知領域となるように設けられる。 When the illuminance sensor is used as the motion sensor JS, the illuminance sensor is provided at an arbitrary place where the light when the lighting provided in the toilet space TK is turned on can be received. The illuminance sensor is installed, for example, in the vicinity of the entrance / exit DR or in the vicinity of the lighting provided in the toilet space TK. When an infrared sensor is used as the motion sensor JS, the infrared sensor is, for example, as shown in FIG. 4, a person who stands and moves in the toilet space TK slightly closer to the toilet BZ on the wall surface on the right side when viewed from the entrance / exit DR. It is provided so that the height around the chest is the detection area.
着座センサTSは、トイレBZに着座する人から見て右側に、着座する人の上半身が検知領域となるように設けられる。或いは、着座センサTSは、トイレBZに着座する人から見て後方に、着座する人の後頭部周辺が検知領域となるように設けられていてもよい。 The seating sensor TS is provided on the right side of the person sitting on the toilet BZ so that the upper body of the seated person is the detection area. Alternatively, the seating sensor TS may be provided so that the area around the back of the head of the seated person is the detection area behind the person seated in the toilet BZ.
ここで、図5〜図8を用いて、図4のトイレ空間TKにおいて検知されたセンサ情報と推定された異常の度合いとの関係の一例を説明する。図5は異常推定部331に推定された異常の度合い、図6は開閉センサKSの検知結果、図7は人感センサJSの検知結果、図8は着座センサTSの検知結果(この例では、距離センサにより検知された距離)のそれぞれの時系列変化が示されている。この例では、トイレ未使用時に出入口のドアが開いているものとする。
Here, an example of the relationship between the sensor information detected in the toilet space TK of FIG. 4 and the estimated degree of abnormality will be described with reference to FIGS. 5 to 8. FIG. 5 shows the degree of abnormality estimated by the
図6に示すように、時間10msあたりから時間420msまで、開閉センサKSによる検知結果により「閉」が検知された。これにより、時間10ms〜420msの間にトイレが使用されたことが判る。 As shown in FIG. 6, "closed" was detected by the detection result by the open / close sensor KS from about 10 ms to 420 ms. From this, it can be seen that the toilet was used during the time period of 10 ms to 420 ms.
図8に示すように、時間30msあたりに着座センサTS(距離センサ)により検知される距離が短くなり、使用者がトイレBZに着座したことが判る。また、時間120msあたりに着座センサTS(距離センサ)により検知される距離が着座前の距離に戻り、使用者が脱座したことが判る。 As shown in FIG. 8, the distance detected by the seating sensor TS (distance sensor) becomes shorter around 30 ms of time, and it can be seen that the user is seated in the toilet BZ. Further, it can be seen that the distance detected by the seating sensor TS (distance sensor) returns to the distance before seating around 120 ms of time, and the user has left the seat.
図7に示すように、時間20msあたりに人感センサJSにより人の存在が検知され、ドアが閉じられてから間もなく使用者がトイレBZ方向に移動していることが判る。時間30msあたりに人感センサJSによる人の存在が未検知となり、使用者がトイレBZに着座したことが判る。時間120msあたりに再び人感センサJSにより人の存在が検知され、使用者が脱座したことが判る。その後、140msあたりで再び人感センサJSによる人の存在が未検知となり、トイレBZから出入口DRへの移動途中に異常が発生したことが判る。ここで発生したい異常とは、使用者がしゃがみこんだり、転倒してしまったりすることが考えられる。その後、時間350ms以降、人感センサJSにより人の存在が継続的に検知され、使用者が立ち上がって出入口まで移動し、退室したことが判る。 As shown in FIG. 7, the presence of a person is detected by the motion sensor JS around 20 ms of time, and it can be seen that the user is moving toward the toilet BZ shortly after the door is closed. It can be seen that the presence of a person is not detected by the motion sensor JS around 30 ms of time, and the user is seated in the toilet BZ. The presence of a person is detected again by the motion sensor JS around 120 ms, indicating that the user has left. After that, the presence of a person was not detected again by the motion sensor JS around 140 ms, and it was found that an abnormality occurred on the way from the toilet BZ to the entrance / exit DR. The abnormality that you want to occur here may be that the user crouches down or falls over. After that, after the time of 350 ms, the presence of a person is continuously detected by the motion sensor JS, and it is found that the user stands up, moves to the doorway, and leaves the room.
図5に示すように、上述したセンサの状況に基づいて、異常推定部331は、時間300msから異常度が上昇しているとの推定を行う。これは、脱座後の退出までに要する時間が通常よりも長いこと、脱座後の人感センサJSの検知結果が通常の場合と異なっていること等に基づいて、異常度を上昇させたものと考えられる。
As shown in FIG. 5, based on the above-mentioned sensor condition, the
図9、図10は、実施形態による見守り端末40に表示される画面の例を示す図である。図9には、見守り端末40に通知された対応要請を示すメッセージM1が画面に表示された例が示されている。この例のように、対応要請には、対応すべきトイレの場所などが含まれていてもよい。また、対応するか否かの応答をするためのボタンB1、B2がメッセージM1と共に表示されるようにしてもよい。また、図10には、対応するスタッフが確定されたことが見守り端末40に通知され、そのメッセージM2が画面に表示された例が示されている。
9 and 10 are diagrams showing an example of a screen displayed on the watching
図11は、実施形態による見守りシステム1が行う処理の流れを示すシーケンス図である。まず、センサ端末10は各種センサからの検知結果を検知時間と対応づけることによりセンサ情報を取得する(ステップS10)。センサ端末10は、取得したセンサ情報をAP20に送信する。AP20は、センサ端末10から受信したセンサ情報を見守り装置30に送信することにより、センサ情報の送信を中継する(ステップS11)。
FIG. 11 is a sequence diagram showing a flow of processing performed by the
見守り装置30は、異常を推定する(ステップS12)。見守り装置30は。センサ端末10により取得されたセンサ情報を、AP20を介して受信する。見守り装置30は、受信したセンサ情報を学習済モデルに入力させる。見守り装置30は、学習済モデルから得られる出力に基づいて、使用者(見守り対象者)に異常が発生した度合いを推定する。
The
見守り装置30は、対応要請を行うか否かを判定する(ステップS13)。見守り装置30は、見守り対象者に異常が発生したと推定される度合いが所定の閾値以上である場合、対応要請を行うと判定する。一方、見守り装置30は、見守り対象者に異常が発生したと推定される度合いが所定の閾値未満である場合、対応要請を行わないと判定する。
The
見守り装置30は、対応要請を行うと判定した場合、見守り端末40に対応要請を通知する(ステップS14)。例えば、対応要請は、対話型のメッセージ形式で送信され、要請内容を示すメッセージと共に、応答ボタンが送信される。応答ボタンは、要請に対する対応の可否を「はい」「いいえ」のボタンで示すものであり、いずれかのボタンがタッチ操作されることにより対応の可否を示す応答が通知されるものである。また、対応要請には、例えば、対応を要請するトイレの場所や、要請レベル(緊急を要する、或いは念のための確認等)が含まれていてもよい。要請レベルは、例えば、見守り装置30により推定された異常度に応じて決定される。異常度は見守り対象者に異常が発生したと推定される度合いである。
When the
見守り端末40は、見守り装置30から通知された対応要請を画面に表示させる(ステップS15)。見守りスタッフは、見守り端末40に表示された対応要請を目視し、自身が対応可能か否かを判断する。見守りスタッフにより、「はい」「いいえ」のいずれかのボタンがタッチ操作されることに伴い、見守り端末40は、対応可能か否かを見守り装置30に応答する(ステップS16)。
The watching
見守り装置30は、見守り端末40から通知された応答に、対応可能である旨の応答があった場合、対応するスタッフが確定された旨の通知(対応済みの通知)を、見守り端末40に通知する(ステップS17)。対応済みの通知には、対応する見守りスタッフの氏名や従業員番号などが含まれていてもよい。見守り端末40は、見守り装置30から通知された対応済みの通知を画面に表示させる(ステップS18)。
When the
以上説明したように、実施形態における見守り装置30は、センサ情報取得部330と、異常推定部331と、を備える。センサ情報取得部330は、トイレ空間TKに設けられたセンサにより検知されたセンサ情報を取得する。異常推定部331は、センサ情報と、学習済モデルとを用いて、トイレ空間TKにいる見守り対象者における異常の度合いを推定する。学習済モデルは、学習用のトイレ空間に設けられたセンサにより検知された学習用センサ情報を入力させることにより得られる出力が、学習用のトイレ空間にいる使用者における異常の有無に近づくように学習されたモデルであって、入力されたセンサ情報から、センサ情報に対応する空間にいる見守り対象者における異常の度合いを推定するモデルである。
As described above, the
これにより、実施形態における見守り装置30は、学習済モデルを用いて、センサ情報に対応する空間にいる見守り対象者における異常の度合いを推定することができる。学習済モデルは、学習用のトイレ空間におけるセンサ情報と異常の有無との対応関係を学習したモデルである。このため、学習モデルに様々なタイプのトイレ空間におけるセンサ情報と異常の有無との対応関係を学習させることで、学習済モデル321が様々なタイプのトイレ空間において検知されたセンサ情報から、異常が発生した度合を推定することが可能となる。したがって、様々なタイプの個室がある場合であっても、個別に条件を設定することなく、トイレ使用者の見守りを行うことが可能である。
Thereby, the
また、実施形態における見守り装置30では、センサ情報取得部330は、トイレ空間TKにおけるドアの開閉を検知する開閉センサKS、トイレ空間TKの使用者の存否を検知する人感センサJS、及びトイレ空間TKに設けられた便座への着座を検知する着座センサTSのそれぞれをトイレ空間TKに設けられたセンサとする。センサ情報取得部330は、これらのセンサのそれぞれにより検知された情報が検知時間に対応づけられた情報を、センサ情報として取得する。学習用センサ情報は、開閉センサKS、人感センサJS、及び着座センサTSのそれぞれにより検知された情報が検知時間に対応づけられた情報である。これにより、実施形態における見守り装置30は、開閉センサKS、人感センサJS、及び着座センサTSのそれぞれにより検知されたセンサ情報から、異常の有無を推定することができる。
Further, in the
また、実施形態における見守りシステム1は、見守り装置30と、見守り装置30にセンサ情報を送信するセンサ端末10と、を備える。見守り装置30とセンサ端末10とは、LPWA(Low Power Wide Area)の無線通信技術により通信可能に接続される。これにより、実施形態における見守りシステムは、施設の既存の通信環境(例えば、WiFi環境)に対する電波干渉や通信障害などの影響を与えることを抑制することが可能である。
Further, the watching
また、実施形態における見守りシステム1は、見守り装置30と、見守り装置30と通信可能に接続される見守り端末40とを備える。見守り装置30は、異常推定部331による推定結果に基づいて、見守り対象者への対応要請を、見守り端末40に送信するNW通信部311を更に備える。見守り端末40は、見守り装置30から対応要請を受信する通信部41と、通信部41により受信された対応要請を表示させる表示部44と、を備える。これにより、実施形態における見守りシステム1は、見守り対象者への対応要請を見守り端末40に、見守りスタッフが知覚可能に通知することができる。したがって、見守りスタッフに対応を呼びかけることができる。
Further, the watching
また、実施形態における見守りシステム1では、NW通信部311は、対応要請と共に、対応要請に対する応答を要求するメッセージを見守り端末40に送信する。見守り端末40は、対応要請に応答するか否かを示す応答情報が入力される入力部45を更に備え、通信部41は、入力部45に入力された応答情報を、見守り装置30に送信する。これにより、実施形態における見守りシステム1では、対応要請に対する対応が可能か否かを、見守り装置30に応答することができる。応答は、見守り端末40の入力部45が取得した情報であり、例えば、見守りスタッフなどにより操作入力された情報である。このため、見守りシステム1では、対応要請に対応できる見守りスタッフがいるか否かを考慮して、対応要請を対応済みとするか、個別に対応させるかを判定することが可能である。したがって、見守りシステム1では、同一の対応要請に対する対応が重複してしまったり、対応できない状態が継続されてしまったりするような不測の事態を抑止することができる。
Further, in the
上述した実施形態における見守りシステム1、及び見守り装置30の全部又は一部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによりくずし字を対応する現代文字に対応させる認識処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境(あるいは表示環境)を備えたWWWシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。
A program for realizing all or a part of the functions of the watching
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。 Further, the program may be transmitted from a computer system in which this program is stored in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the "transmission medium" for transmitting a program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line. Further, the above program may be for realizing a part of the above-mentioned functions. Further, a so-called difference file (difference program) may be used, which can realize the above-mentioned functions in combination with a program already recorded in the computer system.
以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。 Although the embodiments of the present invention have been described in detail with reference to the drawings, the specific configuration is not limited to this embodiment, and the design and the like within a range not deviating from the gist of the present invention are also included.
1…見守りシステム
10…センサ端末10
11…通信部
12…記憶部
13…制御部
14…センサ部
20…AP
30…見守り装置
31…通信部
310…センサ通信部
32…記憶部
320…センサ情報
33…制御部
330…センサ情報取得部
331…異常推定部
332…対応要請制御部
40…見守り端末40
1 ... Watching
11 ...
30 ... Watching
Claims (6)
前記センサ情報と、学習済モデルとを用いて、前記トイレ空間にいる見守り対象者における異常の度合いを推定する異常推定部と、
を備え、
前記学習済モデルは、学習用のトイレ空間に設けられたセンサにより検知された学習用センサ情報を入力させることにより得られる出力が、前記学習用のトイレ空間にいる使用者における異常の有無に近づくように学習されたモデルであって、入力された前記センサ情報から、前記センサ情報に対応する空間にいる前記見守り対象者における異常の度合いを推定するモデルであり、
前記センサ情報取得部は、前記トイレ空間におけるドアの開閉を検知する開閉センサ、前記トイレ空間に設けられた照明における点灯の有無を検知する照度センサ、及び前記トイレ空間に設けられた便座への着座を検知する着座センサのそれぞれを前記トイレ空間に設けられたセンサとし、前記センサのそれぞれにより検知された情報が検知時間に対応づけられた情報を、前記センサ情報として取得し、
前記学習用センサ情報は、前記開閉センサ、前記照度センサ、及び前記着座センサのそれぞれにより検知された情報が検知時間に対応づけられた情報である、
ことを特徴とする見守り装置。 A sensor information acquisition unit that acquires sensor information detected by sensors installed in the toilet space,
Using the sensor information and the learned model, an abnormality estimation unit that estimates the degree of abnormality in the watching target person in the toilet space, and an abnormality estimation unit.
With
In the trained model, the output obtained by inputting the learning sensor information detected by the sensor provided in the learning toilet space approaches the presence or absence of an abnormality in the user in the learning toilet space. It is a model learned as described above, and is a model that estimates the degree of abnormality in the watching target person in the space corresponding to the sensor information from the input sensor information.
The sensor information acquisition unit includes an open / close sensor that detects the opening / closing of a door in the toilet space, an illuminance sensor that detects the presence / absence of lighting in the lighting provided in the toilet space , and seating on a toilet seat provided in the toilet space. Each of the seating sensors for detecting the above is a sensor provided in the toilet space, and the information in which the information detected by each of the sensors is associated with the detection time is acquired as the sensor information.
The learning sensor information is information in which information detected by each of the open / close sensor, the illuminance sensor, and the seating sensor is associated with the detection time.
A watching device characterized by this.
前記見守り装置に前記センサ情報を送信するセンサ端末と、
を備え、
前記見守り装置と前記センサ端末とは、LPWA(Low Power Wide Area)の無線通信技術により通信可能に接続される、
見守りシステム。 The monitoring device according to claim 1 and
A sensor terminal that transmits the sensor information to the monitoring device, and
With
The monitoring device and the sensor terminal are communicably connected by LPWA (Low Power Wide Area) wireless communication technology.
Watching system.
前記見守り装置と通信可能に接続される見守り端末と、
を備え、
前記見守り装置は、異常推定部による推定結果に基づいて、前記見守り対象者への対応要請を見守り端末に送信するネットワーク通信部を更に備え、
前記見守り端末は、
前記見守り装置から前記対応要請を受信する通信部と、
前記通信部により受信された前記対応要請を表示させる表示部と、
を備える、
見守りシステム。 The monitoring device according to claim 1 and
A monitoring terminal that is communicatively connected to the monitoring device,
With
The monitoring device further includes a network communication unit that monitors and transmits a response request to the monitoring target person to the monitoring terminal based on the estimation result by the abnormality estimation unit.
The watching terminal is
A communication unit that receives the response request from the monitoring device, and
A display unit that displays the response request received by the communication unit, and
To prepare
Watching system.
前記見守り端末は、
前記対応要請に応答するか否かを示す応答情報が入力される入力部を更に備え、
前記通信部は、前記入力部に入力された前記応答情報を、前記見守り装置に送信する、
請求項3に記載の見守りシステム。 The network communication unit watches over the message requesting a response to the response request together with the response request, and sends the message to the terminal.
The watching terminal is
An input unit for inputting response information indicating whether or not to respond to the response request is further provided.
The communication unit transmits the response information input to the input unit to the monitoring device.
The monitoring system according to claim 3 .
異常推定部が、前記センサ情報と、学習済モデルとを用いて、前記トイレ空間にいる見守り対象者における異常の度合いを推定する、
見守り方法であって、
前記学習済モデルは、学習用のトイレ空間に設けられたセンサにより検知された学習用センサ情報を入力させることにより得られる出力が、前記学習用のトイレ空間にいる使用者における異常の有無に近づくように学習されたモデルであって、入力された前記センサ情報から、前記センサ情報に対応する空間にいる前記見守り対象者における異常の度合いを推定するモデルであり、
前記センサ情報取得部は、前記トイレ空間におけるドアの開閉を検知する開閉センサ、前記トイレ空間に設けられた照明における点灯の有無を検知する照度センサ、及び前記トイレ空間に設けられた便座への着座を検知する着座センサのそれぞれを前記トイレ空間に設けられたセンサとし、前記センサのそれぞれにより検知された情報が検知時間に対応づけられた情報を、前記センサ情報として取得し、
前記学習用センサ情報は、前記開閉センサ、前記照度センサ、及び前記着座センサのそれぞれにより検知された情報が検知時間に対応づけられた情報である、
見守り方法。 The sensor information acquisition unit acquires the sensor information detected by the sensor provided in the toilet space, and
The abnormality estimation unit estimates the degree of abnormality in the watching target person in the toilet space by using the sensor information and the learned model.
It ’s a watching method,
In the trained model, the output obtained by inputting the learning sensor information detected by the sensor provided in the learning toilet space approaches the presence or absence of an abnormality in the user in the learning toilet space. It is a model learned as described above, and is a model that estimates the degree of abnormality in the watching target person in the space corresponding to the sensor information from the input sensor information.
The sensor information acquisition unit includes an open / close sensor that detects the opening / closing of a door in the toilet space, an illuminance sensor that detects the presence / absence of lighting in the lighting provided in the toilet space , and seating on a toilet seat provided in the toilet space. Each of the seating sensors for detecting the above is a sensor provided in the toilet space, and the information in which the information detected by each of the sensors is associated with the detection time is acquired as the sensor information.
The learning sensor information is information in which information detected by each of the open / close sensor, the illuminance sensor, and the seating sensor is associated with the detection time.
How to watch over.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020045852A JP6822587B1 (en) | 2020-03-16 | 2020-03-16 | Watching device, watching system, watching method, and program |
JP2020168748A JP7543820B2 (en) | 2020-03-16 | 2020-10-05 | Monitoring device, monitoring system, monitoring method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020045852A JP6822587B1 (en) | 2020-03-16 | 2020-03-16 | Watching device, watching system, watching method, and program |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020168748A Division JP7543820B2 (en) | 2020-03-16 | 2020-10-05 | Monitoring device, monitoring system, monitoring method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6822587B1 true JP6822587B1 (en) | 2021-01-27 |
JP2021149220A JP2021149220A (en) | 2021-09-27 |
Family
ID=74200363
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020045852A Active JP6822587B1 (en) | 2020-03-16 | 2020-03-16 | Watching device, watching system, watching method, and program |
JP2020168748A Active JP7543820B2 (en) | 2020-03-16 | 2020-10-05 | Monitoring device, monitoring system, monitoring method, and program |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020168748A Active JP7543820B2 (en) | 2020-03-16 | 2020-10-05 | Monitoring device, monitoring system, monitoring method, and program |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP6822587B1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022135922A (en) * | 2021-03-03 | 2022-09-15 | ヌリオン カンパニー リミテッド | Gateway-based situation monitoring system |
CN116840835A (en) * | 2022-05-05 | 2023-10-03 | 南方科技大学 | Fall detection method, system and equipment based on millimeter wave radar |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4668684B2 (en) | 2005-05-20 | 2011-04-13 | 住友大阪セメント株式会社 | Monitoring device and software program |
JP6150026B1 (en) | 2015-08-10 | 2017-06-21 | コニカミノルタ株式会社 | Central processing unit and method of monitored person monitoring system, and monitored person monitoring system |
WO2019102521A1 (en) | 2017-11-21 | 2019-05-31 | 日本電気株式会社 | Monitoring system, monitoring method, and monitoring program |
-
2020
- 2020-03-16 JP JP2020045852A patent/JP6822587B1/en active Active
- 2020-10-05 JP JP2020168748A patent/JP7543820B2/en active Active
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022135922A (en) * | 2021-03-03 | 2022-09-15 | ヌリオン カンパニー リミテッド | Gateway-based situation monitoring system |
JP7274784B2 (en) | 2021-03-03 | 2023-05-17 | ヌリオン カンパニー リミテッド | Gateway-based situation monitoring system |
CN116840835A (en) * | 2022-05-05 | 2023-10-03 | 南方科技大学 | Fall detection method, system and equipment based on millimeter wave radar |
CN116840835B (en) * | 2022-05-05 | 2024-05-10 | 南方科技大学 | Fall detection method, system and equipment based on millimeter wave radar |
Also Published As
Publication number | Publication date |
---|---|
JP2021149923A (en) | 2021-09-27 |
JP7543820B2 (en) | 2024-09-03 |
JP2021149220A (en) | 2021-09-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Taiwo et al. | Internet of Things‐Based Intelligent Smart Home Control System | |
US11941874B2 (en) | User interfaces to configure a thermal imaging system | |
Taiwo et al. | Enhanced intelligent smart home control and security system based on deep learning model | |
US20200167834A1 (en) | Intelligent identification and provisioning of devices and services for a smart home environment | |
US20180096576A1 (en) | Presence detection and uses thereof | |
US10146191B2 (en) | Switch terminal system with spatial relationship information | |
AU2019295856B2 (en) | Object tracking using disparate monitoring systems | |
EP4006860A1 (en) | Security and/or monitoring devices and systems | |
US20130100268A1 (en) | Emergency detection and response system and method | |
JP6822587B1 (en) | Watching device, watching system, watching method, and program | |
KR20210067604A (en) | A method for integrated management of kitchen environment and system for the same using artificial intelligence | |
WO2018064764A1 (en) | Presence detection and uses thereof | |
US20220031162A1 (en) | Stroke detection and mitigation | |
JP2005284535A (en) | System for monitoring life | |
US20230133750A1 (en) | Video conference interruption prediction | |
JP7353047B2 (en) | Monitoring system and server equipment | |
KR101773898B1 (en) | System for monitoring fall of care-object | |
US20230252874A1 (en) | Shadow-based fall detection | |
US10254722B2 (en) | Switch terminal system with display | |
WO2023146958A1 (en) | Smart home management system for generating augmented reality scene of potentially hazardous condition | |
US20230394878A1 (en) | Program, information processing device, and method | |
JP7152346B2 (en) | Security system | |
JP2021033379A (en) | Image processing system, image processing program, and image processing method | |
Kang et al. | A smart device for non-invasive ADL estimation through multi-environmental sensor fusion | |
US12136294B1 (en) | Biometric data processing for a security system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200316 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20200316 |
|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20200326 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200424 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200526 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200717 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200811 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201005 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201221 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6822587 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |