JPWO2019176222A1 - 異常検知システム、異常検知方法および異常検知プログラム - Google Patents
異常検知システム、異常検知方法および異常検知プログラム Download PDFInfo
- Publication number
- JPWO2019176222A1 JPWO2019176222A1 JP2020505601A JP2020505601A JPWO2019176222A1 JP WO2019176222 A1 JPWO2019176222 A1 JP WO2019176222A1 JP 2020505601 A JP2020505601 A JP 2020505601A JP 2020505601 A JP2020505601 A JP 2020505601A JP WO2019176222 A1 JPWO2019176222 A1 JP WO2019176222A1
- Authority
- JP
- Japan
- Prior art keywords
- abnormality
- unit
- information
- occurrence
- determination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/04—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using a single signalling line, e.g. in a closed loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Alarm Systems (AREA)
- Closed-Circuit Television Systems (AREA)
- Emergency Alarm Devices (AREA)
Abstract
異常検知システム(ケアサポートシステム(1))は、撮像部(11a)を含む情報取得部(11)と、検知対象エリア内の状態を示すエリア内情報に基づいて異常の発生の疑いの有無を判定する異常疑い判定部(12a)と、異常の発生の疑いありと判定された後、エリア内情報に基づいて、異常の発生の有無を確定する異常確定判定部(12b)と、異常の発生ありが確定された場合に、異常の発生を外部に通知する出力部と、異常の発生の疑いありと判定された場合に、疑いありの判定タイミングを含む映像をタイミング情報と対応付けて一時的に保持する一時保持部(13)と、異常の発生ありが確定された場合に、上記映像および上記タイミング情報に、確定結果を対応付けて記録する映像記録部とを備える。
Description
本発明は、検知対象エリアでの異常を検知する異常検知システム、異常検知方法および異常検知プログラムに関する。
従来から、介護施設などにおいて被介護者の行動を監視するシステムが種々提案されている。例えば特許文献1のシステムでは、カメラが撮影した映像を分析して人の転倒を判定し、人が転倒したと判定すると、時間の計測を開始する。そして、計測した時間が基準時間に達した場合に、予め登録された通知先に通知を行う。計測した時間が長い場合のみ(老人が転倒したり、うずくまっていることが想定される場合のみ)通知が行われ、計測した時間が短い場合(すぐに起き上った場合など)は通知が行われないため、監視者(例えばスタッフ)は、前者の場合のみ、確認のための人の手配や救急車の手配などを行えばよく、これによって、スタッフの監視負担が軽減される。
ところで、介護施設内に多数の被介護者が入居していると、それぞれの居室から少人数のスタッフに通知が集中することがある。この場合、誤った通知(以下、誤報とも称する)が多いと、スタッフの駆け付け頻度が高まり、業務負荷の増大に繋がり易い。このため、誤報の多発を防止することが望ましい。
また、居室内で、被介護者が激しく転倒することもあれば、内臓の痛みでその場でゆっくりとうずくまる(へたり込む)こともある。被介護者の転倒を、天井に設置されたカメラで撮影された映像に基づいて判断する場合、天井からの映像では、天井に対して垂直方向における被介護者の行動の変化を正確に捉えることが難しい。このため、上記映像に基づいて、被介護者の転倒としゃがみ込みとを短時間で判別することは難しい。また、被介護者は、そもそも何かを拾おうとして一時的にしゃがみ込むこともある。したがって、転倒を判定してから短時間で通知してしまうと、誤報を招く恐れがある。この点、上記した特許文献1のシステムでは、転倒判定後、一定時間が経過してから通知が行われるため、誤報の多発を防止する点では非常に有効であると考えられる。
ところが、特許文献1のシステムでは、転倒を最初に判定したときの(転倒の疑いがあるときの)カメラ映像を、事後解析のために活用するという概念がなく、カメラ映像のどの時点(タイミング)で転倒の疑いがあるかの情報を記録する概念もなく、上記情報は一切記録されていない。このため、転倒検知に用いたカメラ映像をそのまま記録しておいたとしても、記録映像から、転倒の疑いのある時点の映像(転倒の瞬間の映像)をあとで素早く探し出すことが難しく、記録映像を再利用しづらいという問題がある。特に、記録映像の数(例えば1秒あたりのフレーム数)が多いと、記録映像から必要な映像を探索することが益々困難となり、記録映像の再利用性が益々低下する。
したがって、誤報の多発を抑えながら、異常の発生(例えば転倒)の疑いがあるときの映像を、抜け漏れなく記録に残し、かつ、あとから上記映像を探索しやすくする(記録映像の再利用性を向上させる)ことが可能なシステムを構築することが望まれる。しかし、このようなシステムは、未だ提案されていない。
本発明は、上記の問題点を解決するためになされたもので、その目的は、誤報の多発を抑えながら、異常発生の疑いがある時点の映像の欠損を回避し、かつ、記録映像の再利用性を向上させることができる異常検知システム、異常検知方法および異常検知プログラムを提供することにある。
本発明の一側面に係る異常検知システムは、検知対象エリアを撮影して映像を取得する撮像部を含み、前記検知対象エリア内の状態を示すエリア内情報を取得する情報取得部と、前記エリア内情報に基づいて、前記検知対象エリア内での異常の発生の疑いの有無を判定する異常疑い判定部と、前記異常疑い判定部によって前記異常の発生の疑いありと判定された後、前記エリア内情報に基づいて、前記異常の発生の有無を確定する異常確定判定部と、前記異常確定判定部によって前記異常の発生ありが確定された場合に、前記異常の発生を外部に通知する出力部と、前記異常疑い判定部によって前記異常の発生の疑いありと判定された場合に、前記疑いありの判定タイミングを時間的に含む、前記撮像部での撮影によって取得された前記映像を、前記判定タイミングを示すタイミング情報と対応付けて一時的に保持する一時保持部と、前記異常確定判定部によって前記異常の発生ありが確定された場合に、前記一時保持部に保持された前記映像および前記タイミング情報を取得するとともに、取得した前記映像および前記タイミング情報に、前記異常確定判定部による確定結果を対応付けて記録する映像記録部とを備えている。
本発明の他の側面に係る異常検知方法は、検知対象エリアを撮影して映像を取得する撮像部を含む情報取得部によって、前記検知対象エリア内の状態を示すエリア内情報を取得する情報取得工程と、前記エリア内情報に基づいて、前記検知対象エリア内での異常の発生の疑いの有無を判定する異常疑い判定工程と、前記異常の発生の疑いありと判定された場合に、前記疑いありの判定タイミングを時間的に含む、前記撮像部での撮影によって取得された前記映像を、前記判定タイミングを示すタイミング情報と対応付けて一時保持部に一時的に保持する一時保持工程と、前記異常の発生の疑いありと判定された後、前記エリア内情報に基づいて、前記異常の発生の有無を確定する異常確定判定工程と、前記異常の発生ありが確定された場合に、前記一時保持部に保持された前記映像および前記タイミング情報を取得するとともに、取得した前記映像および前記タイミング情報に、前記異常の発生の確定結果を対応付けて映像記録部に記録する記録工程と、前記異常の発生ありが確定された場合に、前記異常の発生を外部に通知する出力工程とを含む。
本発明のさらに他の側面に係る異常検知プログラムは、上記の異常検知方法をコンピュータに実行させるプログラムである。
誤報の多発を抑えながら、異常発生の疑いがある時点の映像の欠損を回避し、かつ、記録映像の再利用性を向上させることができる。
本発明の実施の形態について、図面に基づいて説明すれば、以下の通りである。なお、以下での説明において、「映像」とは、狭義では視認可能な像を指すが、ここでは、視認可能な像のほか、像を構成する各画素のデータ(画素値)を含む広義の概念とする。なお、本発明は、以下の内容に限定されるわけではない。
〔ケアサポートシステムについて〕
図1は、本実施形態の異常検知システムの一例であるケアサポートシステム1の概略の構成を示すブロック図である。ケアサポートシステム1は、介護施設または一般住宅に入居している被介護者や、病院に入院している患者(被看護者)の日常の生活を支援するためのシステムであり、見守りシステムとも呼ばれる。被介護者および被看護者は、ケアサポートシステム1によって生活活動を支援する対象となる対象者である。ここでは、例として、ケアサポートシステム1が介護施設内で構築されている場合について説明する。
図1は、本実施形態の異常検知システムの一例であるケアサポートシステム1の概略の構成を示すブロック図である。ケアサポートシステム1は、介護施設または一般住宅に入居している被介護者や、病院に入院している患者(被看護者)の日常の生活を支援するためのシステムであり、見守りシステムとも呼ばれる。被介護者および被看護者は、ケアサポートシステム1によって生活活動を支援する対象となる対象者である。ここでは、例として、ケアサポートシステム1が介護施設内で構築されている場合について説明する。
ケアサポートシステム1は、室端末10と、管理サーバー20と、通知端末30とを、通信回線40を介して相互に通信可能に接続して構成されている。通信回線40は、有線LAN(Local Area Network)、無線LAN、インターネット回線、携帯電話の通信専用回線などを含んで構成される。本実施形態では、室端末10と管理サーバー20、管理サーバー20と通知端末30とが相互に通信可能となっているが、室端末10と通知端末30とが直接通信可能であってもよい。
室端末10は、介護施設内の対象者Tの居室Rの天井に設置されている。介護施設内に居室Rが複数存在する場合、室端末10は各居室Rごとに設置される。居室Rは、ケアサポートシステム1による異常検知の対象となるエリア(検知対象エリア)である。管理サーバー20は、各室端末10から出力される情報をまとめて管理する。
通知端末30は、スマートフォンなどの携帯端末、タブレット端末、ノート型のパーソナルコンピュータなどで構成されている。対象者Tの行動の異常を監視するスタッフSは、通知端末30を持ち運ぶことが可能であり、管理サーバー20から通知端末30に通知されて通知端末30で出力される情報に基づいて、各居室Rの対象者Tの状態を把握することが可能である。
以下、ケアサポートシステム1の詳細について説明する。
(室端末)
図2は、室端末10の具体的な構成を示すブロック図である。室端末10は、情報取得部11と、行動認識部12と、一時保持部13と、通知管理部14と、制御部15とを含んで構成されている。制御部15は、室端末10の各部の動作を制御する中央演算処理装置(CPU;Central Processing Unit)で構成されており、図示しない記憶部に記憶された動作プログラムに従って動作する。
図2は、室端末10の具体的な構成を示すブロック図である。室端末10は、情報取得部11と、行動認識部12と、一時保持部13と、通知管理部14と、制御部15とを含んで構成されている。制御部15は、室端末10の各部の動作を制御する中央演算処理装置(CPU;Central Processing Unit)で構成されており、図示しない記憶部に記憶された動作プログラムに従って動作する。
情報取得部11は、居室R内の状態(特に対象者Tの状態)を示すエリア内情報を取得するブロックであり、撮像部11aと、センサ部11bとを有している。撮像部11aは、居室R内を天井から床面に向かって撮影して、視野方向が直下である直上視点の映像(例えば赤外画像)を取得するカメラで構成されている。撮像部11aは、上記映像として、基本的に連続的な撮影によって動画を取得するが、間欠的な撮影によって静止画を間欠的に取得する構成であってもよい。撮像部11aによって取得された映像は、上記エリア内情報を構成する。
センサ部11bは、居室R内の状態を検知するセンサであり、例えば、熱エネルギー(赤外線)を検知する焦電センサ、振動を検知する振動センサ、衝撃音を検知する音センサ、対象者Tの椅子(車椅子を含む)への着座を検知する圧力センサ、対象者Tとの距離を測定する測距センサなどから適宜選択されて構成される。
例えば、居室Rの壁の異なる高さ位置に複数の焦電センサを設置すれば、より低い位置の焦電センサで赤外線を検知し、より高い位置の焦電センサで赤外線を検知しなかった場合に、対象者Tが転倒しているか、うずくまっていることを検知できる。また、居室Rの床面に振動センサを設置し、振動センサにて振動を検知することにより、対象者Tの転倒を検知することができる。また、転倒時の衝撃音を音センサで検知することにより、対象者Tの転倒を検知することができる。さらに、居室R内の椅子の座面に圧力センサを設置することにより、圧力を検知している場合には、対象者Tが椅子に座っており、転倒していないことを検知できる。また、測距センサを居室Rの天井に設置することにより、対象者Tとの距離を測定して、対象者Tが立っている状態か床面に伏している状態かをある程度は(高精度ではないが)検知することができる。センサ部11bを構成する各種センサで検知されて取得された情報は、上記エリア内情報を構成する。
なお、測距センサとしては、床面に伏している対象者Tが転倒状態であるか、しゃがみ込んだ状態であるかを正確に検知できる高精度の測距センサを用いてもよいが、そのような高精度の測距センサは高コストである。このため、測距センサを用いる場合は、要求する精度とコスト面との兼ね合いで測距センサを選択すればよい。なお、本実施形態では、後述するように、撮像部11aで取得された映像に基づいて、転倒ありの疑い判定およびその確定判定を行うため、高精度の測距センサを用いなくても、転倒を精度よく検知することができる。
行動認識部12は、情報取得部11によって取得されたエリア内情報に基づいて、居室R内の対象者Tの行動の異常の有無や行動の種類などを認識する。このような行動認識部12は、例えばリアルタイムな画像処理に特化した演算装置であるGPU(Graphics Processing Unit)で構成されるが、制御部15と同一のまたは別個のCPUで構成されてもよい。行動認識部12による対象者Tの行動の認識は、例えば以下のようにして行われる。
図3Aは、居室R内で起立した対象者Tを正面から見た状態を模式的に示し、図3Bは、図3Aの対象者Tを居室Rの天井側から見た状態を模式的に示している。また、図4Aは、居室R内で転倒した対象者Tを正面から見た状態を模式的に示し、図4Bは、図4Aの対象者Tを居室Rの天井側から見た状態を模式的に示している。行動認識部12は、撮像部11aで取得された映像から、対象者Tの頭領域を抽出してその直径値Lm(mm)を求め、求めた直径値Lmと予め設定された閾値Thb(mm)とを比較し、その大小関係に基づいて、対象者Tの転倒の有無を判定する。なお、上記映像からの頭領域の抽出は、例えば機械学習されたニューラルネットワークを用いて行うこともできるし、予め設定された形状とのパターンマッチングによって行うこともできる。
行動認識部12は、抽出した頭領域の直径値Lmが閾値Thb以上である場合は、対象者Tは居室R内で転倒しておらず(図3A、図3B参照)、直径値Lmが閾値Thb未満である場合は、対象者Tは居室R内で転倒していると判定する(図4A、図4B参照)。このような判定ができるのは、対象者Tが起立状態であれば、天井設置の室端末10と対象者Tの頭部との距離が近くなって、撮像部11aで取得される映像上で対象者Tの頭部サイズが大きくなる一方、対象者Tが転倒状態であれば、天井設置の室端末10と対象者Tの頭部との距離が遠くなって、撮像部11aで取得される映像上で対象者Tの頭部サイズが小さくなることに基づく。
ただし、行動認識部12は、対象者Tが転倒していると判定しても、一旦は「異常疑い」状態と判定し、この判定時点から、予め設定した閾値Thb以上の頭部の直径値Lmが検知されない状態が所定の時間継続した時点で「異常発生あり」を確定する判定を行う。一方、「異常疑い」状態の判定時点から、予め設定した閾値Thb以上の頭部の直径値Lmが検知された場合、行動認識部12は、「異常疑い」状態を解除して、「異常発生なし」の確定判定を行う。
なお、行動認識部12は、他の転倒検知や状態検知に基づいて、異常発生(転倒)の疑いありの判定、および/または異常発生の有無の確定の判定を行ってもよい。例えば、行動認識部12は、撮像部11aで取得された映像上で、対象者Tの所定の閾値以上の移動速度が検出されない場合に、異常発生(転倒)の疑いありの判定、および/または異常発生ありの確定判定を行ってもよい。また、行動認識部12は、撮像部11aで取得された映像上で、対象者Tがベッド上にいることが検出された場合に、異常発生の疑いを解除し、および/または異常発生なしの確定判定を行ってもよい。
さらに、行動認識部12は、撮像部11aで取得された映像以外に、センサ部11bで検知された情報に基づいて、異常発生の疑いありの判定、および/または異常発生の有無の確定判定を行ってもよい。例えば、行動認識部12は、焦電センサによって対象者Tの移動が検出されない場合に(例えば低位置の焦電センサによって赤外線が所定時間以上検知された場合)、異常発生の疑いありの判定、および/または異常発生ありの確定の判定を行ってもよい。さらに、天井に設置された測距センサからの距離が低く変化する場合や、床マット状の振動センサによる振動検知または音センサによる衝撃音の検知がある場合に、異常発生の疑いありの判定、および/または異常発生ありの確定判定を行ってもよい。
以上のことから、行動認識部12は、情報取得部11で取得されたエリア内情報(撮像部11aまたはセンサ部11bで取得された情報)に基づいて、検知対象エリア内での異常の発生の疑いの有無を判定する異常疑い判定部12aとしての機能を有しているとともに、異常の発生の疑いありと判定された後、上記エリア内情報に基づいて、異常の発生の有無を確定する異常確定判定部12bとしての機能を有していると言うことができる。
また、行動認識部12は、異常発生の疑いの有無および異常発生の有無の確定の各判定を行うと同時に、各判定のタイミングを示すタイミング情報も取得する。上記タイミング情報としては、例えば、行動認識部12が各判定を行った時点を示す時刻情報を考えることができる。したがって、行動認識部12は、時間を計時する計時部としても機能し、これによって、上記時刻情報を取得することができる。なお、上記時刻情報には、1日のうちの時刻のみならず、暦上の日にち(年月日)の情報も当然含まれるが、ここでは、便宜的上、時刻のみに特化して説明する。なお、上記タイミング情報は、上記した時刻情報のほか、行動認識部12が疑いありの判定を行った時点を示す単なるタグであってもよい。
一時保持部13は、行動認識部12(異常疑い判定部12a)によって異常の発生の疑いありと判定された場合に、疑いありの判定タイミングを時間的に含む、撮像部11aでの撮影によって取得された映像を、判定タイミングを示す上記タイミング情報と対応付けて一時的に保持する。このような一時保持部13は、例えばDRAM(Dynamic Random Access Memory)やSRAM(Static Random Access Memory)のような揮発性メモリで構成されている。また、一時保持部13は、残りのデータ容量が所定値よりも少なくなったときに、時間的に古い映像に新しい映像を上書きして保持(記憶)することができるリングバッファで構成される。
通知管理部14は、外部(管理サーバー20、通知端末30)と通信するためのインターフェースであり、通信用の入出力ポートを含む。例えば、室端末10で取得された情報(例えば一時保持部13で保持されている映像や撮像部11aで取得されるリアルタイム映像)は、通知管理部14および通信回線40を介して外部に出力される。なお、通知管理部14は、外部との無線通信に対応すべく、アンテナ、送受信回路、変調回路、復調回路などを含んで構成されていてもよい。
(管理サーバー)
図5は、管理サーバー20の具体的な構成を示すブロック図である。管理サーバー20は、各居室Rの室端末10からの通知結果を一旦集約して通知端末30に通知する。このような管理サーバー20は、映像記録部21と、アプリケーション管理部22と、制御部23とを含んで構成されている。制御部23は、管理サーバー20の各部の動作を制御するCPUで構成されており、図示しない記憶部に記憶された動作プログラムに従って動作する。
図5は、管理サーバー20の具体的な構成を示すブロック図である。管理サーバー20は、各居室Rの室端末10からの通知結果を一旦集約して通知端末30に通知する。このような管理サーバー20は、映像記録部21と、アプリケーション管理部22と、制御部23とを含んで構成されている。制御部23は、管理サーバー20の各部の動作を制御するCPUで構成されており、図示しない記憶部に記憶された動作プログラムに従って動作する。
映像記録部21は、行動認識部12(異常確定判定部12b)によって異常の発生ありが確定された場合に、室端末10の一時保持部13に保持された映像およびタイミング情報を取得するとともに、取得した映像およびタイミング情報に、異常確定判定部12bによる確定判定の結果(例えば異常発生ありの確定結果)を対応付けて記録する。このような映像記録部21は、例えばハードディスクで構成されるが、フラッシュメモリなどの他の不揮発性メモリで構成されていてもよい。
アプリケーション管理部22は、外部(室端末10、通知端末30)と通信するためのインターフェースであり、通信用の入出力ポートを含む。例えば、管理サーバー20で取得された情報(例えば映像記録部21で記録されている情報)は、アプリケーション管理部22および通信回線40を介して外部(例えば通知端末30)に出力される。なお、アプリケーション管理部22は、外部との無線通信に対応すべく、アンテナ、送受信回路、変調回路、復調回路などを含んで構成されていてもよい。
なお、管理サーバー20は、上記の他に、液晶ディスプレイなどの表示部、マウスやキーボードなどの指示入力部をさらに備えた構成であってもよい。この場合、管理サーバー20を、例えばパーソナルコンピュータのような端末装置を用いて容易に構成することができる。
なお、管理サーバー20においては、通常、通知機能のON/OFF設定、室端末10における行動認識のための初期設定、通知先の通知端末30の選択の設定、判定や通知の履歴管理など、アプリケーションに関する様々な設定や記録の管理が行われるが、これらの設定や管理は、本実施形態に直接関係するものではないため、その説明を省略する。
(通知端末)
図6は、通知端末30の具体的な構成を示すブロック図である。通知端末30は、上述したように、例えばスマートフォンなどの携帯端末で構成されており、出力部31と、通信部32と、制御部33とを含んで構成されている。制御部33は、通知端末30の各部の動作を制御するCPUで構成されており、図示しない記憶部に記憶された動作プログラムに従って動作する。
図6は、通知端末30の具体的な構成を示すブロック図である。通知端末30は、上述したように、例えばスマートフォンなどの携帯端末で構成されており、出力部31と、通信部32と、制御部33とを含んで構成されている。制御部33は、通知端末30の各部の動作を制御するCPUで構成されており、図示しない記憶部に記憶された動作プログラムに従って動作する。
出力部31は、管理サーバー20から通信回線40を介して通知された結果を出力する。特に、出力部31は、室端末10の異常確定判定部12bによって異常の発生ありが確定された場合に、管理サーバー20からの通知を受けて、異常の発生を外部に通知する。このような出力部31は、液晶ディスプレイなどの表示部や、音声出力部(スピーカー)などで構成される。なお、上記の表示部は、入力部も兼ねたタッチパネルディスプレイであってもよい。なお、通知端末30における画面表示や通知音などの通知方法は、特に限定されず、任意の方法を使用できる。
通信部32は、外部(室端末10、管理サーバー20)と通信するためのインターフェースであり、アンテナ、送受信回路、変調回路、復調回路などを含んで構成されている。したがって、通知端末30は、例えば管理サーバー20から出力される情報(例えば映像記録部21で記録されている情報)を、アプリケーション管理部22、通信回線40および通信部32を介して取得し、出力部31にて出力することが可能である。
〔通知方法〕
次に、上記した構成のケアサポートシステム1における異常発生の通知方法(異常検知方法を含む)について説明する。なお、ここでは、検知対象エリアは、対象者Tが生活活動を行う居室Rであるとし、認識対象となる検知対象エリア内の異常は、居室R内の対象者Tの行動の異常であり、上記行動の異常は、居室Rの床面への対象者Tの転倒である場合を例として説明する。
次に、上記した構成のケアサポートシステム1における異常発生の通知方法(異常検知方法を含む)について説明する。なお、ここでは、検知対象エリアは、対象者Tが生活活動を行う居室Rであるとし、認識対象となる検知対象エリア内の異常は、居室R内の対象者Tの行動の異常であり、上記行動の異常は、居室Rの床面への対象者Tの転倒である場合を例として説明する。
図7は、本実施形態のケアサポートシステム1における動作の流れの一例を示すフローチャートである。まず、室端末10の撮像部11aによって居室R内を撮影し、映像(居室Rの状態を示すエリア内情報)を動画で取得する(S1;情報取得工程)。上記映像は、制御部15の制御により、一時保持部13に一時的に保持される(S2)。なお、S1では、撮像部11aの代わりに、センサ部11bによって居室Rの状態を示すエリア内情報を取得してもよい。この場合、S2では、センサ部11bによって取得された上記エリア内情報が一時保持部13に一時的に保持される。なお、事後的な分析を行うときに、異常の発生の疑いの判定時刻よりも時間的に前の映像が不要である場合(疑い判定時刻以降の映像のみが必要となる場合)、S2を省略することも可能である。
次に、行動認識部12の異常疑い判定部12aは、S1で取得された映像に基づいて、居室R内での異常の発生(対象者Tの転倒の有無)を認識し、異常の発生の疑いを判定する(S3;異常疑い判定工程)。例えば、上述したように、異常疑い判定部12aは、撮像部11aで取得された映像から抽出される対象者Tの頭領域の直径値Lmと、予め設定された閾値Thbとの大小関係に基づいて、対象者Tの転倒の有無を認識することができ、これによって転倒の有無を判定することができる(図3B、図4B等参照)。S3にて、対象者Tの転倒あり(異常発生の疑いあり)と判定されると、次のS4に進み、転倒なしと判定された場合は、引き続き、S1で取得された映像に基づいて対象者Tの転倒の有無を判定する。
S3で転倒ありと判定されると、制御部15の制御により、一時保持部13は、転倒あり(異常発生の疑いあり)の判定タイミングを時間的に含む、撮像部11aでの撮影によって取得された映像を、判定タイミングを示すタイミング情報と対応付けて一時的に保持する(S4;一時保持工程)。例えば、図8は、一時保持部13に保持される情報の一例を示している。ここでは、撮像部11aで取得された映像(ID=0001)について、S2で、つまり、S3での転倒ありの疑い判定前に、一時保持部13に保持した時刻が「8時15分29秒」であり、S3での転倒ありの疑い判定時刻が「8時17分15秒」であり、後述するS5での転倒ありの確定判定時刻が「8時20分07秒」である場合を例として示している。すなわち、8時15分29秒から、転倒ありの疑い判定時刻(8時17分15秒)を含んで撮影された映像(ID=0001)が、上記疑い判定時刻(8時17分15秒)と対応付けられて一時保持部13に保持される。なお、S2で一時保持部13に映像を保持した時刻と、S3の転倒ありの疑い判定時刻との間が短い場合は、実質的に前者の時刻を後者の時刻で代用することも可能である。
次に、行動認識部12の異常確定判定部12bは、S1で取得された映像に基づいて、居室R内での異常の発生(対象者Tの転倒の有無)を認識し、異常の発生の有無を確定する判定を行う(S5;異常確定判定工程)。具体的には、異常確定判定部12bは、上記映像に基づいて判定される転倒ありの疑いが、所定時間継続したか否かを判断し、所定時間継続した場合には、転倒ありの確定判定を行い、所定時間継続しなかった場合は、転倒なしの確定判定を行う。なお、上記所定時間は、予め十分に長い時間(固定判定時間)に設定されてもよいし、十分に長い時間でなくても、転倒ありの疑い判定から、実際に通知すべきと判定するための信頼度が十分に高まるまでの時間に設定されてもよい。
S5にて、転倒なしの確定判定であれば、S3に戻り、S1で取得された映像に基づいて異常発生の疑い(対象者Tの転倒の有無)を判定する。一方、S5にて、転倒ありの確定判定であれば、保持された映像(ID=0001)および疑い判定時刻(8時17分15秒)に、確定結果(転倒あり)と、その転倒ありの確定判定時刻(8時20分07秒)とがさらに対応付けられて一時保持部13に保持される(S6)。
S6にて、一時保持部13に保持された情報は、通知管理部14および通信回線40を介して管理サーバー20に送信され(S7)、管理サーバー20の映像記録部21に記録される(S8;記録工程)。そして、管理サーバー20の制御部23の制御により、アプリケーション管理部22は、通知端末30に対して、異常の発生、つまり、対象者Tが居室Rで転倒したことを通知する(S9)。通知端末30では、S9での通知内容が出力部31によって出力(例えば表示)される(S10;出力工程)。これにより、通知端末30の所有者であるスタッフSは、出力された内容を見て、対象者Tの転倒を把握し、直ちに居室Rに駆け付けるなどの必要な措置を講じることが可能となる。
〔効果〕
以上のように、本実施形態では、異常疑い判定部12aによって異常の発生(例えば転倒)の疑いありが判定され(S3)、その後、異常確定判定部12bによって異常の発生ありが確定された場合に(S5)、通知端末30の出力部31によって異常の発生が外部に通知される(S10)。したがって、異常の発生の疑いがあっても、その後、異常の発生なしが確定された場合には(例えば異常の発生が短時間で解消された場合には)、外部への通知を行わないようにすることができる。これにより、外部への不要な通知、つまり、誤報が多発するのを抑えることができる。その結果、通知先の監視者(例えばスタッフS)の検知対象エリア(居室R)への駆け付け頻度を低減して、スタッフSの監視負担を低減することができる。
以上のように、本実施形態では、異常疑い判定部12aによって異常の発生(例えば転倒)の疑いありが判定され(S3)、その後、異常確定判定部12bによって異常の発生ありが確定された場合に(S5)、通知端末30の出力部31によって異常の発生が外部に通知される(S10)。したがって、異常の発生の疑いがあっても、その後、異常の発生なしが確定された場合には(例えば異常の発生が短時間で解消された場合には)、外部への通知を行わないようにすることができる。これにより、外部への不要な通知、つまり、誤報が多発するのを抑えることができる。その結果、通知先の監視者(例えばスタッフS)の検知対象エリア(居室R)への駆け付け頻度を低減して、スタッフSの監視負担を低減することができる。
また、疑いありの判定タイミングを時間的に含んで撮像部11aによって取得された映像が、一時保持部13に保持されており、映像記録部21には、一時保持部13から上記映像が取得されて記録される(S8)。これにより、疑いありの時点の映像を、抜け漏れなく映像記録部21に残すことができ、上記映像の欠損を回避することができる。
また、異常疑い判定部12aによって異常の発生の疑いありと判定された場合(S3)、疑いありの判定タイミングを時間的に含んで撮像部11aによって取得された映像が、判定タイミングを示すタイミング情報(例えば時刻情報)と対応付けられて一時保持部13に一時的に保持される(S4)。そして、異常確定判定部12bによって異常の発生ありが確定された場合(S5)、一時保持部13に保持された映像およびタイミング情報が、異常確定判定部12bによる確定結果と対応付けられて映像記録部21に記録される(S8)。これにより、異常の発生が確定された場合に、上記タイミング情報を手掛かりにして、映像記録部21に記録された異常の発生の疑いありの時点の映像を、たとえ記録映像の数(例えば1秒あたりのフレーム数)が多くても、あとから素早く探し出すことが可能となる。その結果、上記映像に基づいて、異常の発生の疑いありの時点の状況を、事後的に直ちに分析することが可能となり、記録映像の再利用性を向上させることができる。
特に、管理サーバー20が複数の場所を同時に監視する場合、つまり、管理サーバー20が複数の居室Rの各室端末10から出力される情報をまとめて管理する場合、1つの室端末10から出力される情報のみを管理する場合に比べて、映像記録部21における記録映像の数が著しく増える。したがって、上述したように記録映像の再利用性を向上させることができる本実施形態の構成は、特に管理サーバー20が複数の場所を同時に監視する場合に非常に有効となる。
また、異常疑い判定部12aは、撮像部11aによって取得された映像に基づいて異常の発生を認識して、異常の発生の疑いの有無を判定する(S1、S3)。これにより、上記映像を、検知対象エリアの監視用としてだけでなく、異常発生の疑い判定用として用いることもでき、上記映像を有効利用することができる。
また、異常確定判定部12bは、撮像部11aよって取得された映像に基づいて異常の発生を認識して、異常の発生の有無を確定する判定を行う(S1、S5)。これにより、上記映像を、検知対象エリアの監視用としてだけでなく、異常発生の確定判定用として用いることもでき、上記映像を有効利用することができる。
また、上記したタイミング情報は、異常の発生の疑いありと判定されたタイミングの時刻情報であるため、異常発生の疑いありの判定タイミングが明確に特定される。これにより、異常の発生が確定された場合に、上記時刻情報を手掛かりにして、映像記録部21に記録された異常の発生の疑いありの時点の映像を、あとから素早く探し出すことが可能となる。
また、検知対象エリアは、生活活動を支援する対象となる対象者Tの居室Rであり、異常疑い判定部12aは、エリア内情報(例えば映像)に基づいて、居室R内での対象者Tの行動に関する異常の発生の疑いの有無を判定し、異常確定判定部12bは、上記エリア内情報に基づいて、居室R内での対象者Tの行動に関する異常の発生の有無を確定する。これにより、対象者Tの居室R内での行動に関して、異常の発生の疑い有無およびその確定判定を行って、確定時に異常の発生を外部に通知するケアサポートシステム1を実現することができる。つまり、対象者Tの生活活動を支援する目的で構築されるケアサポートシステム1において、上述した本実施形態の効果を得ることができる。
また、本実施形態のケアサポートシステム1は、相互に通信可能に接続され、居室Rに設置される室端末10と、室端末10で取得される情報を管理する管理サーバー20と、上記情報をスタッフSに通知するための通知端末30とをさらに含む。そして、室端末10は、情報取得部11、異常疑い判定部12a、異常確定判定部12b、および一時保持部13を含む。また、管理サーバー20は映像記録部21を含み、通知端末30は出力部31を含む。この場合、室端末10と、管理サーバー20と、通知端末30とを有して構成されるケアサポートシステム1において、上述した本実施形態の効果を得ることができる。
また、ケアサポートシステム1において、対象者Tの行動に関する異常は、対象者Tの転倒を含む。この場合、対象者Tの居室R内での転倒の疑いの有無を判定し、転倒したことが確定された場合には外部に通知する構成において、上述した本実施形態の効果を得ることができる。
〔他の通知方法〕
図9は、本実施形態のケアサポートシステム1における動作の流れの他の例を示すフローチャートである。図9のフローチャートは、図7で示したS9およびS10を、S9’およびS10’に置き換えた以外は、図7と同様である。以下、図7と異なる部分について説明する。
図9は、本実施形態のケアサポートシステム1における動作の流れの他の例を示すフローチャートである。図9のフローチャートは、図7で示したS9およびS10を、S9’およびS10’に置き換えた以外は、図7と同様である。以下、図7と異なる部分について説明する。
S5にて、転倒ありの確定判定後、S6では、疑い判定時点を含んで取得された映像(ID=0001)と、疑い判定時刻と、確定結果と、転倒ありの確定判定時刻とが対応付けられて一時保持部13に保持される。ここで、一時保持部13には、S3での疑い判定のタイミングよりも前の時点から、時間的に後の映像が含まれており、これには、S5での転倒ありの確定判定のタイミング(確定判定時刻)で取得された映像も含まれる。したがって、S7にて、一時保持部13に保持された情報が、通知管理部14および通信回線40を介して管理サーバー20に送信され、S8にて、管理サーバー20の映像記録部21に記録されると、映像記録部21に記録される映像には、異常確定判定部12bによって異常の発生ありが確定されたタイミングで撮像部11aによって取得された映像(以下、確定時映像とも称する)も含まれていると言える。
この場合、管理サーバー20は、制御部23の制御により、アプリケーション管理部22から通知端末30に対して、異常の発生(対象者Tが転倒したこと)を通知するとともに、確定判定のタイミング情報をもとにして、映像記録部21に記録された確定時映像を送信する(S9’)。このとき、管理サーバー20は、撮像部11aによって撮影中のリアルタイム映像を室端末10から取得して、上記確定時映像と併せて、または上記確定時映像に代えて通知端末30に送信してもよい。すると、通知端末30の出力部31は、異常の発生を表示等によって外部(例えばスタッフS)に通知するとともに、確定時映像およびリアルタイム映像の少なくとも一方を出力する(S10’)。
このような通知方法では、通知端末30の所有者であるスタッフSは、異常発生の通知を見て、対象者Tに異常が発生したことを把握するとともに、出力される確定時映像およびリアルタイム映像の少なくとも一方を見て、確定時または現在の検知対象エリア(居室R)内の状況(例えば異常状態が現在も続いているかどうか)を確認しながら、居室Rに駆け付けることができる。
なお、S3での異常発生の疑いありの判定タイミングを含んで撮影された映像(疑い時映像)は、まさに転倒した瞬間の映像を含んでおり、上述したように、実際に転倒した前後の状況を後から探し出して確認するために必要となる映像である。これに対して、S5での異常発生の確定判定タイミングで取得された映像(確定時映像)は、転倒が確定した時点の状況をリアルタイムでスタッフSに通知して駆け付けてもらうために必要な映像であり、この点で、疑い時映像とは使用目的が異なる。
〔補足〕
以上で説明した室端末10の一時保持部13は、管理サーバー20に設けられてもよいし、管理サーバー20の映像記録部21は、室端末10に設けられてもよい。また、室端末10は、管理サーバー20の各構成を備えていてもよい。
以上で説明した室端末10の一時保持部13は、管理サーバー20に設けられてもよいし、管理サーバー20の映像記録部21は、室端末10に設けられてもよい。また、室端末10は、管理サーバー20の各構成を備えていてもよい。
以上では、対象者Tの行動の異常として、対象者Tの転倒を検知する例について説明したが、例えば、対象者Tのベッドからの離床や退室など、転倒以外の行動の異常を検知して外部に通知する場合にも、本実施形態の異常検知システムおよび異常検知方法を適用することは可能である。
また、以上では、検知対象エリアとして、対象者Tの居室Rを考え、居室R内での対象者Tの行動や姿勢の異常を検知して外部に通知する場合について説明したが、検知対象エリアは居室Rには限定されない。例えば、工場などのプラントにおいて、ガスの配管が敷設された区域を検知対象エリアとしてもよい。そして、上記区域におけるガス漏れを検知して外部に通知する場合にも、本実施形態の異常検知システムおよび異常検知方法を適用することは可能である。つまり、本実施形態の異常検知システムおよび異常検知方法は、人の行動や姿勢の異常以外を検知の対象とする場合にも適用可能である。
また、例えば、情報取得部11は、撮像部11aで取得された映像(赤外画像)をサーモグラフィ(温度分布)として取得することで、居室Rで火災が発生しているかどうかの異常を検知することもできる。さらに、センサ部11bとしての音センサによって居室R内の衝撃音(例えば窓ガラスの破壊音)を検知することもできる。このように、情報取得部11が撮像部11aおよびセンサ部11bを有していることにより、居室R内での対象者Tの行動以外の異常(人以外の異常)を検知して外部に通知することも可能となり、この場合でも、本実施形態で説明した通知方法を適用することが可能である。
また、異常疑い判定部12aは、基本的に、「変化」を検知することによって異常発生の疑いを判定し、異常確定判定部12bは、「状態」を検知することによって異常の発生を確定する判定を行うことが可能であるが、例えば衝撃音を検知して異常発生の疑いを判定し、圧力センサによる重量分布の検知によって異常の発生ありを確定するなど、異常発生の疑い判定と異常発生の確定判定とを、異なるセンサを用いて行うことも可能である。
本実施形態で述べた室端末10、管理サーバー20および通知端末30(特に出力部31)は、一体的に構成されてもよく(スタンドアローン型)、同じ居室R内に分離して配置されていてもよい。したがって、通知端末30は、居室Rに備え付けの端末装置であってもよい。また、管理サーバー20は、クライアントサーバーであってもよいし、クラウドサーバーであってもよい。
また、本実施形態で述べた効果は、システムの形態や構成(スタンドアローン、クライアントサーバー、クラウドサーバーなど)によって制約されるわけではない。また、通知結果の出力先は、スタッフSが所有する携帯型の個別端末(通知端末30)ではなく、管理サーバー20(外部サーバーを含む)であってもよい。さらに、室端末10から管理サーバー20を介さずに通知端末30に直接通知されてもよい。また、室端末10の行動認識部12の機能を、管理サーバー20に持たせることも可能である。また、室端末10、管理サーバー20、通知端末30は、それぞれ複数あってもよい。また、通知端末30は、スタッフSが所有するものではなく、例えば外部の建物や会社(例えば警備会社や保険会社など)において設置される端末であってもよい。
また、本実施形態で説明したケアサポートシステム1は、異常検知プログラム(アプリケーションソフトウェア)をインストールしたコンピュータ(PC)で構成することができる(例えばスタンドアローン型)。この場合、上記プログラムをコンピュータ(例えばCPUとしての制御部15)が読み取って実行することにより、ケアサポートシステム1の各部を動作させて上述した各処理(各工程)を実行させることができる。このようなプログラムは、例えばネットワークを介して外部からダウンロードすることによって取得されて記憶部(図示せず)に記憶される。また、上記プログラムは、例えばCD−ROM(Compact Disk-Read Only Memory)などのコンピュータ読取可能な記録媒体に記録され、この記録媒体から上記プログラムをコンピュータが読み取って記憶部に記憶する形態であってもよい。
〔その他〕
以上で説明した本実施形態の異常検知システム、異常検知方法および異常検知プログラムは、以下のように表現することもできる。
以上で説明した本実施形態の異常検知システム、異常検知方法および異常検知プログラムは、以下のように表現することもできる。
1.検知対象エリアを撮影して映像を取得する撮像部を含み、前記検知対象エリア内の状態を示すエリア内情報を取得する情報取得部と、
前記エリア内情報に基づいて、前記検知対象エリア内での異常の発生の疑いの有無を判定する異常疑い判定部と、
前記異常疑い判定部によって前記異常の発生の疑いありと判定された後、前記エリア内情報に基づいて、前記異常の発生の有無を確定する異常確定判定部と、
前記異常確定判定部によって前記異常の発生ありが確定された場合に、前記異常の発生を外部に通知する出力部と、
前記異常疑い判定部によって前記異常の発生の疑いありと判定された場合に、前記疑いありの判定タイミングを時間的に含む、前記撮像部での撮影によって取得された前記映像を、前記判定タイミングを示すタイミング情報と対応付けて一時的に保持する一時保持部と、
前記異常確定判定部によって前記異常の発生ありが確定された場合に、前記一時保持部に保持された前記映像および前記タイミング情報を取得するとともに、取得した前記映像および前記タイミング情報に、前記異常確定判定部による確定結果を対応付けて記録する映像記録部とを備えていることを特徴とする異常検知システム。
前記エリア内情報に基づいて、前記検知対象エリア内での異常の発生の疑いの有無を判定する異常疑い判定部と、
前記異常疑い判定部によって前記異常の発生の疑いありと判定された後、前記エリア内情報に基づいて、前記異常の発生の有無を確定する異常確定判定部と、
前記異常確定判定部によって前記異常の発生ありが確定された場合に、前記異常の発生を外部に通知する出力部と、
前記異常疑い判定部によって前記異常の発生の疑いありと判定された場合に、前記疑いありの判定タイミングを時間的に含む、前記撮像部での撮影によって取得された前記映像を、前記判定タイミングを示すタイミング情報と対応付けて一時的に保持する一時保持部と、
前記異常確定判定部によって前記異常の発生ありが確定された場合に、前記一時保持部に保持された前記映像および前記タイミング情報を取得するとともに、取得した前記映像および前記タイミング情報に、前記異常確定判定部による確定結果を対応付けて記録する映像記録部とを備えていることを特徴とする異常検知システム。
2.前記異常疑い判定部は、前記エリア内情報としての、前記撮像部によって取得された映像に基づいて前記異常の発生を認識して、前記異常の発生の疑いの有無を判定することを特徴とする前記1に記載の異常検知システム。
3.前記異常確定判定部は、前記エリア内情報としての、前記撮像部によって取得された映像に基づいて前記異常の発生を認識して、前記異常の発生の有無を確定することを特徴とする前記1または2に記載の異常検知システム。
4.前記映像記録部に記録された映像は、前記異常確定判定部によって前記異常の発生ありが確定されたタイミングで前記撮像部によって取得された確定時映像をさらに含み、
前記出力部は、前記異常の発生を外部に通知するとともに、前記確定時映像、および前記撮像部によって撮影中のリアルタイム映像の少なくとも一方を出力することを特徴とする前記1から3のいずれかに記載の異常検知システム。
前記出力部は、前記異常の発生を外部に通知するとともに、前記確定時映像、および前記撮像部によって撮影中のリアルタイム映像の少なくとも一方を出力することを特徴とする前記1から3のいずれかに記載の異常検知システム。
5.前記タイミング情報は、前記異常の発生の疑いありと判定されたタイミングの時刻情報であることを特徴とする前記1から4のいずれかに記載の異常検知システム。
6.前記検知対象エリアは、生活活動の支援の対象となる対象者の居室であり、
前記異常疑い判定部は、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の疑いの有無を判定し、
前記異常確定判定部は、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の有無を確定することを特徴とする前記1から5のいずれかに記載の異常検知システム。
前記異常疑い判定部は、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の疑いの有無を判定し、
前記異常確定判定部は、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の有無を確定することを特徴とする前記1から5のいずれかに記載の異常検知システム。
7.相互に通信可能に接続され、前記居室に設置される室端末と、前記室端末で取得される情報を管理する管理サーバーと、前記情報をスタッフに通知するための通知端末とをさらに含み、
前記室端末は、前記情報取得部、前記異常疑い判定部、前記異常確定判定部、および前記一時保持部を含み、
前記管理サーバーは、前記映像記録部を含み、
前記通知端末は、前記出力部を含むことを特徴とする前記6に記載の異常検知システム。
前記室端末は、前記情報取得部、前記異常疑い判定部、前記異常確定判定部、および前記一時保持部を含み、
前記管理サーバーは、前記映像記録部を含み、
前記通知端末は、前記出力部を含むことを特徴とする前記6に記載の異常検知システム。
8.前記対象者の行動に関する異常は、前記対象者の転倒を含むことを特徴とする前記6または7に記載の異常検知システム。
9.検知対象エリアを撮影して映像を取得する撮像部を含む情報取得部によって、前記検知対象エリア内の状態を示すエリア内情報を取得する情報取得工程と、
前記エリア内情報に基づいて、前記検知対象エリア内での異常の発生の疑いの有無を判定する異常疑い判定工程と、
前記異常の発生の疑いありと判定された場合に、前記疑いありの判定タイミングを時間的に含む、前記撮像部での撮影によって取得された前記映像を、前記判定タイミングを示すタイミング情報と対応付けて一時保持部に一時的に保持する一時保持工程と、
前記異常の発生の疑いありと判定された後、前記エリア内情報に基づいて、前記異常の発生の有無を確定する異常確定判定工程と、
前記異常の発生ありが確定された場合に、前記一時保持部に保持された前記映像および前記タイミング情報を取得するとともに、取得した前記映像および前記タイミング情報に、前記異常の発生の確定結果を対応付けて映像記録部に記録する記録工程と、
前記異常の発生ありが確定された場合に、前記異常の発生を外部に通知する出力工程とを含むことを特徴とする異常検知方法。
前記エリア内情報に基づいて、前記検知対象エリア内での異常の発生の疑いの有無を判定する異常疑い判定工程と、
前記異常の発生の疑いありと判定された場合に、前記疑いありの判定タイミングを時間的に含む、前記撮像部での撮影によって取得された前記映像を、前記判定タイミングを示すタイミング情報と対応付けて一時保持部に一時的に保持する一時保持工程と、
前記異常の発生の疑いありと判定された後、前記エリア内情報に基づいて、前記異常の発生の有無を確定する異常確定判定工程と、
前記異常の発生ありが確定された場合に、前記一時保持部に保持された前記映像および前記タイミング情報を取得するとともに、取得した前記映像および前記タイミング情報に、前記異常の発生の確定結果を対応付けて映像記録部に記録する記録工程と、
前記異常の発生ありが確定された場合に、前記異常の発生を外部に通知する出力工程とを含むことを特徴とする異常検知方法。
10.前記異常疑い判定工程では、前記エリア内情報としての、前記撮像部によって取得された映像に基づいて前記異常の発生を認識して、前記異常の発生の疑いの有無を判定することを特徴とする前記9に記載の異常検知方法。
11.前記異常確定判定工程では、前記エリア内情報としての、前記撮像部によって取得された映像に基づいて前記異常の発生を認識して、前記異常の発生の有無を確定することを特徴とする前記9または10に記載の異常検知方法。
12.前記映像記録部に記録された映像は、前記異常確定判定工程で、前記異常の発生ありが確定されたタイミングで前記撮像部によって取得された確定時映像をさらに含み、
前記出力工程では、前記異常の発生を外部に通知するとともに、前記確定時映像、および前記撮像部によって撮影中のリアルタイム映像の少なくとも一方を出力することを特徴とする前記9から11のいずれかに記載の異常検知方法。
前記出力工程では、前記異常の発生を外部に通知するとともに、前記確定時映像、および前記撮像部によって撮影中のリアルタイム映像の少なくとも一方を出力することを特徴とする前記9から11のいずれかに記載の異常検知方法。
13.前記タイミング情報は、前記異常の発生の疑いありと判定されたタイミングの時刻情報であることを特徴とする前記9から12のいずれかに記載の異常検知方法。
14.前記検知対象エリアは、生活活動の支援の対象となる対象者の居室であり、
前記異常疑い判定工程では、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の疑いの有無を判定し、
前記異常確定判定工程では、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の有無を確定することを特徴とする前記9から13のいずれかに記載の異常検知方法。
前記異常疑い判定工程では、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の疑いの有無を判定し、
前記異常確定判定工程では、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の有無を確定することを特徴とする前記9から13のいずれかに記載の異常検知方法。
15.前記対象者の行動に関する異常は、前記対象者の転倒を含むことを特徴とする前記14に記載の異常検知方法。
16.前記9から15のいずれかに記載の異常検知方法をコンピュータに実行させる異常検知プログラム。
17.前記16に記載の異常検知プログラムを記録した、コンピュータ読取可能な記録媒体。
以上、本発明の実施形態について説明したが、本発明の範囲はこれに限定されるものではなく、発明の主旨を逸脱しない範囲で拡張または変更して実施することができる。
本発明は、検知対象エリアでの異常を検知する異常検知システム、異常検知方法および異常検知プログラムに利用可能である。
1 ケアサポートシステム(異常検知システム)
10 室端末
11 情報取得部
11a 撮像部
12a 異常疑い判定部
12b 異常確定判定部
13 一時保持部
20 管理サーバー
21 映像記録部
30 通知端末
31 出力部
R 居室(検知対象エリア)
S スタッフ
T 対象者
10 室端末
11 情報取得部
11a 撮像部
12a 異常疑い判定部
12b 異常確定判定部
13 一時保持部
20 管理サーバー
21 映像記録部
30 通知端末
31 出力部
R 居室(検知対象エリア)
S スタッフ
T 対象者
Claims (16)
- 検知対象エリアを撮影して映像を取得する撮像部を含み、前記検知対象エリア内の状態を示すエリア内情報を取得する情報取得部と、
前記エリア内情報に基づいて、前記検知対象エリア内での異常の発生の疑いの有無を判定する異常疑い判定部と、
前記異常疑い判定部によって前記異常の発生の疑いありと判定された後、前記エリア内情報に基づいて、前記異常の発生の有無を確定する異常確定判定部と、
前記異常確定判定部によって前記異常の発生ありが確定された場合に、前記異常の発生を外部に通知する出力部と、
前記異常疑い判定部によって前記異常の発生の疑いありと判定された場合に、前記疑いありの判定タイミングを時間的に含む、前記撮像部での撮影によって取得された前記映像を、前記判定タイミングを示すタイミング情報と対応付けて一時的に保持する一時保持部と、
前記異常確定判定部によって前記異常の発生ありが確定された場合に、前記一時保持部に保持された前記映像および前記タイミング情報を取得するとともに、取得した前記映像および前記タイミング情報に、前記異常確定判定部による確定結果を対応付けて記録する映像記録部とを備えている、異常検知システム。 - 前記異常疑い判定部は、前記エリア内情報としての、前記撮像部によって取得された映像に基づいて前記異常の発生を認識して、前記異常の発生の疑いの有無を判定する、請求項1に記載の異常検知システム。
- 前記異常確定判定部は、前記エリア内情報としての、前記撮像部によって取得された映像に基づいて前記異常の発生を認識して、前記異常の発生の有無を確定する、請求項1または2に記載の異常検知システム。
- 前記映像記録部に記録された映像は、前記異常確定判定部によって前記異常の発生ありが確定されたタイミングで前記撮像部によって取得された確定時映像をさらに含み、
前記出力部は、前記異常の発生を外部に通知するとともに、前記確定時映像、および前記撮像部によって撮影中のリアルタイム映像の少なくとも一方を出力する、請求項1から3のいずれかに記載の異常検知システム。 - 前記タイミング情報は、前記異常の発生の疑いありと判定されたタイミングの時刻情報である、請求項1から4のいずれかに記載の異常検知システム。
- 前記検知対象エリアは、生活活動の支援の対象となる対象者の居室であり、
前記異常疑い判定部は、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の疑いの有無を判定し、
前記異常確定判定部は、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の有無を確定する、請求項1から5のいずれかに記載の異常検知システム。 - 相互に通信可能に接続され、前記居室に設置される室端末と、前記室端末で取得される情報を管理する管理サーバーと、前記情報をスタッフに通知するための通知端末とをさらに含み、
前記室端末は、前記情報取得部、前記異常疑い判定部、前記異常確定判定部、および前記一時保持部を含み、
前記管理サーバーは、前記映像記録部を含み、
前記通知端末は、前記出力部を含む、請求項6に記載の異常検知システム。 - 前記対象者の行動に関する異常は、前記対象者の転倒を含む、請求項6または7に記載の異常検知システム。
- 検知対象エリアを撮影して映像を取得する撮像部を含む情報取得部によって、前記検知対象エリア内の状態を示すエリア内情報を取得する情報取得工程と、
前記エリア内情報に基づいて、前記検知対象エリア内での異常の発生の疑いの有無を判定する異常疑い判定工程と、
前記異常の発生の疑いありと判定された場合に、前記疑いありの判定タイミングを時間的に含む、前記撮像部での撮影によって取得された前記映像を、前記判定タイミングを示すタイミング情報と対応付けて一時保持部に一時的に保持する一時保持工程と、
前記異常の発生の疑いありと判定された後、前記エリア内情報に基づいて、前記異常の発生の有無を確定する異常確定判定工程と、
前記異常の発生ありが確定された場合に、前記一時保持部に保持された前記映像および前記タイミング情報を取得するとともに、取得した前記映像および前記タイミング情報に、前記異常の発生の確定結果を対応付けて映像記録部に記録する記録工程と、
前記異常の発生ありが確定された場合に、前記異常の発生を外部に通知する出力工程とを含む、異常検知方法。 - 前記異常疑い判定工程では、前記エリア内情報としての、前記撮像部によって取得された映像に基づいて前記異常の発生を認識して、前記異常の発生の疑いの有無を判定する、請求項9に記載の異常検知方法。
- 前記異常確定判定工程では、前記エリア内情報としての、前記撮像部によって取得された映像に基づいて前記異常の発生を認識して、前記異常の発生の有無を確定する、請求項9または10に記載の異常検知方法。
- 前記映像記録部に記録された映像は、前記異常確定判定工程で、前記異常の発生ありが確定されたタイミングで前記撮像部によって取得された確定時映像をさらに含み、
前記出力工程では、前記異常の発生を外部に通知するとともに、前記確定時映像、および前記撮像部によって撮影中のリアルタイム映像の少なくとも一方を出力する、請求項9から11のいずれかに記載の異常検知方法。 - 前記タイミング情報は、前記異常の発生の疑いありと判定されたタイミングの時刻情報である、請求項9から12のいずれかに記載の異常検知方法。
- 前記検知対象エリアは、生活活動の支援の対象となる対象者の居室であり、
前記異常疑い判定工程では、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の疑いの有無を判定し、
前記異常確定判定工程では、前記エリア内情報に基づいて、前記居室内での前記対象者の行動に関する異常の発生の有無を確定する、請求項9から13のいずれかに記載の異常検知方法。 - 前記対象者の行動に関する異常は、前記対象者の転倒を含む、請求項14に記載の異常検知方法。
- 請求項9から15のいずれかに記載の異常検知方法をコンピュータに実行させる異常検知プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018045768 | 2018-03-13 | ||
JP2018045768 | 2018-03-13 | ||
PCT/JP2018/047303 WO2019176222A1 (ja) | 2018-03-13 | 2018-12-21 | 異常検知システム、異常検知方法および異常検知プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019176222A1 true JPWO2019176222A1 (ja) | 2021-03-18 |
JP7147837B2 JP7147837B2 (ja) | 2022-10-05 |
Family
ID=67907750
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020505601A Active JP7147837B2 (ja) | 2018-03-13 | 2018-12-21 | 異常検知システム、異常検知方法および異常検知プログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7147837B2 (ja) |
WO (1) | WO2019176222A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6697622B1 (ja) * | 2019-10-24 | 2020-05-20 | セコム医療システム株式会社 | 映像記録システム、映像記録方法及び映像記録プログラム |
JP7363838B2 (ja) * | 2021-03-02 | 2023-10-18 | トヨタ自動車株式会社 | 異常挙動通知装置、異常挙動通知システム、異常挙動通知方法、およびプログラム |
CN113470311B (zh) * | 2021-06-30 | 2022-06-14 | 华北理工大学 | 一种基于老人健康管理的红外线防摔监控装置及方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08249051A (ja) * | 1995-03-15 | 1996-09-27 | Toshiba Corp | 監視装置 |
JP2006072708A (ja) * | 2004-09-02 | 2006-03-16 | Sogo Keibi Hosho Co Ltd | 監視システム、監視方法 |
JP2008282219A (ja) * | 2007-05-10 | 2008-11-20 | Chudenko Corp | 離床検知システム及び方法 |
JP2010233145A (ja) * | 2009-03-30 | 2010-10-14 | Secom Co Ltd | 画像監視装置 |
JP2017200132A (ja) * | 2016-04-28 | 2017-11-02 | キヤノン株式会社 | 監視システム |
-
2018
- 2018-12-21 WO PCT/JP2018/047303 patent/WO2019176222A1/ja active Application Filing
- 2018-12-21 JP JP2020505601A patent/JP7147837B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08249051A (ja) * | 1995-03-15 | 1996-09-27 | Toshiba Corp | 監視装置 |
JP2006072708A (ja) * | 2004-09-02 | 2006-03-16 | Sogo Keibi Hosho Co Ltd | 監視システム、監視方法 |
JP2008282219A (ja) * | 2007-05-10 | 2008-11-20 | Chudenko Corp | 離床検知システム及び方法 |
JP2010233145A (ja) * | 2009-03-30 | 2010-10-14 | Secom Co Ltd | 画像監視装置 |
JP2017200132A (ja) * | 2016-04-28 | 2017-11-02 | キヤノン株式会社 | 監視システム |
Also Published As
Publication number | Publication date |
---|---|
WO2019176222A1 (ja) | 2019-09-19 |
JP7147837B2 (ja) | 2022-10-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102021999B1 (ko) | 인체 감시 발열 경보 장치 | |
US20210398659A1 (en) | Methods and systems for contact tracing of occupants of a facility | |
JPWO2019176222A1 (ja) | 異常検知システム、異常検知方法および異常検知プログラム | |
CN111538030A (zh) | 检测人类活动的方法、系统和非暂态计算机可读介质 | |
WO2016186160A1 (ja) | 画像処理システム、画像処理装置、画像処理方法、および画像処理プログラム | |
JP6527701B2 (ja) | 異常通知装置、システム、プログラム及び方法 | |
JP2019152914A (ja) | 保育施設児童見守りシステム及び情報処理方法 | |
CN113366529A (zh) | 护理记录装置、护理记录系统、护理记录程序及护理记录方法 | |
JP7172376B2 (ja) | 情報提供装置、情報提供システム、情報提供方法、及びプログラム | |
JP2019176380A (ja) | 制御装置及び監視システム | |
JP2019030628A (ja) | 情報提供装置、情報提供システム、情報提供方法、及びプログラム | |
US20180322334A1 (en) | Person Monitoring Device And Method, And Person Monitoring System | |
JP7090327B2 (ja) | 情報処理装置、情報処理方法、プログラム | |
JP2021048797A (ja) | 活動量管理プログラム、活動量管理システム、及び活動量管理方法 | |
JP2021005207A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US20140146154A1 (en) | Patient monitoring system with image capture functionality | |
US20210286978A1 (en) | Face detection method and server | |
US20210282646A1 (en) | Medical data measurement system | |
JP7342863B2 (ja) | コンピュータで実行されるプログラム、情報処理システム、および、コンピュータで実行される方法 | |
JP7095870B2 (ja) | 情報処理装置 | |
JP2020190889A (ja) | 要介護者見守りシステム | |
JP7327396B2 (ja) | 制御プログラム、レポート出力方法、およびレポート出力装置 | |
WO2019030880A1 (ja) | 監視システム、監視方法、監視プログラムおよびその記録媒体 | |
JP7363779B2 (ja) | 制御プログラム、報告書出力方法、および報告書出力装置 | |
JP2023118199A (ja) | 見守り監視システム、見守り監視方法、および見守り監視プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210628 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220823 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220905 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7147837 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |