JP2016115054A - Monitoring control program, monitoring controller, and monitoring control method - Google Patents

Monitoring control program, monitoring controller, and monitoring control method Download PDF

Info

Publication number
JP2016115054A
JP2016115054A JP2014251975A JP2014251975A JP2016115054A JP 2016115054 A JP2016115054 A JP 2016115054A JP 2014251975 A JP2014251975 A JP 2014251975A JP 2014251975 A JP2014251975 A JP 2014251975A JP 2016115054 A JP2016115054 A JP 2016115054A
Authority
JP
Japan
Prior art keywords
patient
unit
camera
power
monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014251975A
Other languages
Japanese (ja)
Other versions
JP6519166B2 (en
Inventor
舞 権藤
Mai Gondo
舞 権藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2014251975A priority Critical patent/JP6519166B2/en
Publication of JP2016115054A publication Critical patent/JP2016115054A/en
Application granted granted Critical
Publication of JP6519166B2 publication Critical patent/JP6519166B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

PROBLEM TO BE SOLVED: To provide a monitoring control program capable of reducing the power consumption by a sensor unit which is put on a person to be monitored.SOLUTION: The monitoring control program causes a controller to execute a processing to determine whether or not a person to be monitored is included in an acquired pick-up range of image, and depending on determination result whether or not the person to be monitored is included in the image pick-up range, to control a power source of a sensor unit which is put on the person to be monitored to turn ON/OFF.SELECTED DRAWING: Figure 1

Description

本明細書は、監視制御プログラム、監視制御装置、および監視制御方法に関する。   The present specification relates to a monitoring control program, a monitoring control apparatus, and a monitoring control method.

多くの人が利用する病院等において、たとえば、入院患者やお年寄りが転倒・転落した際、その転倒・転落が気付かれない等の問題がある。そのため、病院内における患者の挙動を監視することを目的とした各種システムが提案されている。その一つとして、病室(患者のベット付近)にカメラを設置する方法がある。カメラを利用すると、医師や看護師が四六時中病室内に待機しなくてもよいという利点がある。しかし、カメラはトイレなどに設置できず、限られた範囲でしか監視することができない。   In hospitals and the like used by many people, for example, when an inpatient or an elderly person falls or falls, there is a problem that the fall or fall is not noticed. Therefore, various systems aimed at monitoring the behavior of patients in hospitals have been proposed. One method is to install a camera in a hospital room (near the patient's bed). Using a camera has the advantage that doctors and nurses do not have to wait in the hospital room all the time. However, the camera cannot be installed in a toilet or the like and can only be monitored within a limited range.

そこで、患者に異常が発生していないか等の状態を検知する検知端末を患者に携帯させて、患者の状態等をモニタリングする技術がある(例えば、特許文献1)。第1の技術としては、被介護者の転倒を検出又は予測するための転倒管理サーバがある。転倒管理サーバは、受信手段、識別手段、転倒管理手段を有する。受信手段は、被介護者の歩行状態を検知する検知センサと、RFIDタグとを備えた履物から発信されるID情報を、RFID基地局を介して受信する。識別手段は、受信したID情報に基づき、一対の履物が、ある被介護者が使用しているものであることを識別する。転倒管理手段は、識別手段により識別された被介護者の一対の履物のID情報に基づき、当該被介護者の転倒を検出又は予測する。   Therefore, there is a technique for monitoring a patient's state and the like by causing the patient to carry a detection terminal that detects a state such as whether or not an abnormality has occurred in the patient (for example, Patent Document 1). As a first technique, there is a fall management server for detecting or predicting the fall of a care recipient. The fall management server includes receiving means, identification means, and fall management means. The receiving means receives ID information transmitted from footwear provided with a detection sensor that detects the walking state of the care recipient and the RFID tag via the RFID base station. The identification means identifies that the pair of footwear is used by a care recipient based on the received ID information. The fall management means detects or predicts the fall of the cared person based on the ID information of the pair of footwear of the cared person identified by the identifying means.

第2の技術としては、患者が転倒したり、ベッドから転落したことを検出し、看護師等に異常を通知することができる患者異常通知システムがある(例えば、特許文献2)。患者異常通知システムは、各患者に装着される携帯型発信機と、病棟内の複数箇所に設置される受信機と、各階のナースセンタに設置される集中監視装置とを備えている。携帯型発信機は、患者に作用する加速度、患者の脈波、脈拍、心拍、心電、血圧、及び血中酸素飽和度を検出し、これらに基づいて患者の異常を検出し、異常検出信号を無線で送信する。信号を受信した受信機は、カメラで部屋を撮像し、異常通知信号を集中監視装置へと送信する。信号を受信した集中監視装置は、異常通知画面を表示する。   As a second technique, there is a patient abnormality notification system that detects that a patient has fallen or falls from a bed and can notify a nurse or the like of the abnormality (for example, Patent Document 2). The patient abnormality notification system includes a portable transmitter attached to each patient, receivers installed at a plurality of locations in the ward, and a centralized monitoring device installed at a nurse center on each floor. The portable transmitter detects the acceleration acting on the patient, the patient's pulse wave, pulse, heart rate, electrocardiogram, blood pressure, and blood oxygen saturation, and detects the patient's abnormality based on these, and the abnormality detection signal Is transmitted wirelessly. The receiver that has received the signal images the room with the camera and transmits an abnormality notification signal to the centralized monitoring device. The centralized monitoring apparatus that has received the signal displays an abnormality notification screen.

特開2006−228024号公報JP 2006-228024 A 特開2008−47097号公報JP 2008-47097 A

上述のような検知端末は24時間起動しているため、消費電力が大きくなり、頻繁に電池交換をしなければならず、看護師の負担も大きくなる。また、電池交換を少なくしようとすると、容量が大きい電池を備える必要があり、それを装着する患者の負担が大きくなる。そこで、電池交換を少なくし、かつ電池をできるだけ小さくするために、検知端末の省電力化が求められる。   Since the detection terminal as described above is activated for 24 hours, the power consumption increases, the battery must be replaced frequently, and the burden on the nurse also increases. Further, if it is attempted to reduce battery replacement, it is necessary to provide a battery with a large capacity, which increases the burden on the patient who wears the battery. Therefore, in order to reduce battery replacement and make the battery as small as possible, power saving of the detection terminal is required.

本発明の一側面では、監視対象者によって装着されるセンサ機器の省電力化を図ることを目的とする。   An object of one aspect of the present invention is to save power in a sensor device worn by a monitoring subject.

本発明の一態様に係る監視制御プログラムは、制御装置に、次の処理を実行させる。すなわち、制御装置は、取得した撮像画像の撮像範囲に、監視対象者が含まれるか否かを判定する。制御装置は、監視対象者が撮像範囲に含まれるか否かの判定結果に応じて、監視対象者に装着されたセンサ機器の電源の投入または切断を制御する。   A monitoring control program according to an aspect of the present invention causes a control device to execute the following processing. That is, the control device determines whether or not the monitoring target person is included in the imaging range of the acquired captured image. The control device controls the power on or off of the sensor device attached to the monitoring target person according to the determination result of whether or not the monitoring target person is included in the imaging range.

本発明の一側面では、監視対象者によって装着されるセンサ機器の省電力化を図ることができる。   In one aspect of the present invention, it is possible to save power in a sensor device worn by a monitoring subject.

本実施形態における監視制御装置の一例を示す。An example of the monitoring control apparatus in this embodiment is shown. 本実施形態における患者異常検知システムの全体構成を示す。The whole structure of the patient abnormality detection system in this embodiment is shown. 本実施形態における患者異常検知システムについて説明するための図である。It is a figure for demonstrating the patient abnormality detection system in this embodiment. 本実施形態における患者異常検知システムのハードウェア構成図を示す。The hardware block diagram of the patient abnormality detection system in this embodiment is shown. 本実施形態におけるID対応付けテーブルの一例を示す。An example of the ID correlation table in this embodiment is shown. 本実施形態における患者異常検知システムの機能ブロック図を示す。The functional block diagram of the patient abnormality detection system in this embodiment is shown. 本実施形態におけるカメラによる頭部認識処理のフローを示す。The flow of the head recognition process by the camera in this embodiment is shown. 本実施形態における、カメラに患者が写らなくなって加速度センサの電源をONにする場合のシーケンス図を示す。FIG. 6 shows a sequence diagram when the patient is no longer captured by the camera and the acceleration sensor is turned on in the present embodiment. 本実施形態における、カメラに患者が写るようになって加速度センサの電源をOFFにする場合のシーケンス図を示す。The sequence diagram in the case where the patient is photographed in the camera and the power of the acceleration sensor is turned off in the present embodiment is shown. 本実施形態におけるナースセンタのPCに映し出すモニタの表示例を示す。The example of a display of the monitor projected on PC of the nurse center in this embodiment is shown.

図1は、本実施形態における監視制御装置の一例を示す。監視制御装置1は、判定部2、制御部3を含む。監視制御装置1の一例として、カメラ12が挙げられる。   FIG. 1 shows an example of a monitoring control apparatus according to the present embodiment. The monitoring control device 1 includes a determination unit 2 and a control unit 3. An example of the monitoring control device 1 is a camera 12.

判定部2は、取得した撮像画像の撮像範囲に、監視対象者が含まれるか否かを判定する。判定部2の一例として、画像処理部52が挙げられる。   The determination unit 2 determines whether or not the monitoring target person is included in the imaging range of the acquired captured image. An example of the determination unit 2 is an image processing unit 52.

制御部3は、監視対象者が撮像範囲に含まれるか否かの判定結果に応じて、監視対象者に装着されたセンサ機器4の電源の投入または切断を制御する。より具体的には、制御部3は、監視対象者が撮像範囲に含まれると判定された場合、センサ機器4の電源を切断し、監視対象者が撮像範囲に含まれないと判定された場合、センサ機器4の電源を投入するように制御する。制御部3の一例として、リモート電源制御部54が挙げられる。また、センサ機器4の一例として、検知端末、より具体的には、加速度センサ34が挙げられる。   The control unit 3 controls the power on or off of the sensor device 4 attached to the monitoring target person according to the determination result of whether or not the monitoring target person is included in the imaging range. More specifically, when it is determined that the monitoring target person is included in the imaging range, the control unit 3 turns off the power of the sensor device 4 and when it is determined that the monitoring target person is not included in the imaging range. Then, the sensor device 4 is controlled to be turned on. An example of the control unit 3 is a remote power supply control unit 54. An example of the sensor device 4 is a detection terminal, more specifically, an acceleration sensor 34.

このように構成することにより、監視対象者によって装着される検知端末の省電力化を図ることができる。   By comprising in this way, the power saving of the detection terminal with which the monitoring subject wears can be achieved.

図2は、本実施形態における患者異常検知システムの全体構成を示す。患者異常検知システム11は、カメラ12、検知端末13、アクセスポイント(AP)14、コンピュータ(PC)15を含む。カメラ12、AP14、PC15は有線Local Area Network(LAN)等のネットワークで通信可能に接続されている。検知端末13は、無線によりAP14と接続を介して、PC15と通信することができる。   FIG. 2 shows the overall configuration of the patient abnormality detection system in the present embodiment. The patient abnormality detection system 11 includes a camera 12, a detection terminal 13, an access point (AP) 14, and a computer (PC) 15. The camera 12, the AP 14, and the PC 15 are communicably connected via a network such as a wired local area network (LAN). The detection terminal 13 can communicate with the PC 15 wirelessly through a connection with the AP 14.

カメラ12は、被写体を撮影し、撮影した映像データをナースセンタのPC15へ送信する。また、カメラ12は、画像処理技術を用いて、撮影した映像データから対象となる患者を認識して、検知する人認識機能を含む。   The camera 12 captures the subject and transmits the captured video data to the PC 15 at the nurse center. Further, the camera 12 includes a human recognition function for recognizing and detecting a target patient from captured video data using an image processing technique.

検知端末13は、当該検知端末13を携帯している患者の転倒または転落を検出し、その検出情報をナースセンタのPC15へ送信する。検知端末13は、当該検知端末13を携帯している患者の転倒または転落を検出するための加速度センサを含む。   The detection terminal 13 detects the fall or fall of the patient carrying the detection terminal 13 and transmits the detection information to the PC 15 of the nurse center. The detection terminal 13 includes an acceleration sensor for detecting a fall or fall of a patient carrying the detection terminal 13.

AP14は、有線通信と無線通信とを中継する基地局であり、病院内、例えば患者が入院している病室等に設置されている。ここでは、AP14は、カメラ12と検知端末13とPC15の間の通信を中継する。PC15は、ナースセンタに設置されており、カメラ12から送信された映像情報、および検知端末13から検出された検出情報を表示する。   The AP 14 is a base station that relays wired communication and wireless communication, and is installed in a hospital, for example, a hospital room where a patient is hospitalized. Here, the AP 14 relays communication among the camera 12, the detection terminal 13, and the PC 15. The PC 15 is installed in the nurse center and displays video information transmitted from the camera 12 and detection information detected from the detection terminal 13.

図3は、本実施形態における患者異常検知システムについて説明するための図である。患者17は、検知端末13を装着している。ベッド16付近には、ベッド16上の患者17が撮影できるようにカメラ12が設置されている。   FIG. 3 is a diagram for explaining the patient abnormality detection system in the present embodiment. The patient 17 is wearing the detection terminal 13. A camera 12 is installed near the bed 16 so that the patient 17 on the bed 16 can be photographed.

本実施形態では、カメラ12が患者17を検知すると、AP14を介して、検知端末13に、加速度センサの電源をOFFするように指示する指示情報(OFF指示情報)を送信する。検知端末13は、OFF指示情報を受信すると、加速度センサの電源をOFFにする。   In the present embodiment, when the camera 12 detects the patient 17, instruction information (OFF instruction information) for instructing to turn off the power of the acceleration sensor is transmitted to the detection terminal 13 via the AP 14. When receiving the OFF instruction information, the detection terminal 13 turns off the power of the acceleration sensor.

一方で、カメラ12が患者17を検知できない場合は、AP14を介して、検知端末13に、加速度センサの電源をONするように指示する指示情報(ON指示情報)を送信する。検知端末13は、ON指示情報を受信すると、加速度センサの電源をONにする。   On the other hand, when the camera 12 cannot detect the patient 17, instruction information (ON instruction information) for instructing to turn on the power of the acceleration sensor is transmitted to the detection terminal 13 via the AP 14. Upon receiving the ON instruction information, the detection terminal 13 turns on the power source of the acceleration sensor.

ここで、カメラ12による人認識の判定条件を説明する。前提として、対象患者以外は、その対象患者のベッドに横にならないため、各ベッド16にカメラ12を設置し、カメラ12が判定する映像範囲は対象のベッド1つずつとする。   Here, conditions for determining human recognition by the camera 12 will be described. As a premise, since a patient other than the target patient does not lie down on the bed of the target patient, a camera 12 is installed on each bed 16 and the video range determined by the camera 12 is one target bed.

これにより、患者17がカメラ12に写っていない場合には、加速度センサの電源をONにし、患者17がカメラ12に写っている場合には、加速度センサの電源をOFFにする。これにより、検知端末13の省電力化を図ることができる。   Thereby, when the patient 17 is not reflected in the camera 12, the acceleration sensor is turned on. When the patient 17 is reflected in the camera 12, the acceleration sensor is turned off. Thereby, power saving of the detection terminal 13 can be achieved.

図4は、本実施形態における患者異常検知システムのハードウェア構成図を示す。カメラ12は、撮像部21、画像処理部22、制御部23、通信インターフェース(I/F)24を含む。   FIG. 4 is a hardware configuration diagram of the patient abnormality detection system in the present embodiment. The camera 12 includes an imaging unit 21, an image processing unit 22, a control unit 23, and a communication interface (I / F) 24.

撮像部21は、例えばCCD(Charge Coupled Devices)、相関2重サンプリング回路(CDS)、ゲインコントロールアンプ回路(AGC)、アナログ−デジタルコンバータ(ADC)等を含む。CCDは、レンズを介して入射された光を電気信号に変換する。CDSは、電気信号のノイズを除去する。AGCは、ゲインコントロールアンプ回路である。ADCは、アナログ信号をデジタル信号に変換する。   The imaging unit 21 includes, for example, a CCD (Charge Coupled Devices), a correlated double sampling circuit (CDS), a gain control amplifier circuit (AGC), an analog-digital converter (ADC), and the like. The CCD converts light incident through the lens into an electrical signal. CDS removes noise from electrical signals. AGC is a gain control amplifier circuit. The ADC converts an analog signal into a digital signal.

画像処理回路22は、デジタル信号化された撮影データについて、ノイズ低減処理、感度アップ処理、および対象患者を検知する人検出処理等の画像処理を行う。このとき、画像処理回路22は、画像処理の結果に応じて、人を検知したか否かの人検知通知情報を生成する。   The image processing circuit 22 performs image processing, such as noise reduction processing, sensitivity enhancement processing, and human detection processing for detecting a target patient, on digitalized imaging data. At this time, the image processing circuit 22 generates human detection notification information indicating whether or not a person has been detected in accordance with the result of the image processing.

制御部23は、中央演算装置(CPU)、メモリ(データ用メモリ、プログラム用メモリを含む。)を含む。制御部23のCPUは、カメラ全体を制御する。また、制御部23のCPUは、本実施形態に係るプログラムを実行することによりリモート電源制御部として機能する。リモート電源制御部は、検知端末13内の加速度センサの電源を遠隔でONまたはOFFにするON/OFF情報を生成する。以下では、ONまたはOFFを、ON/OFFで表記する。メモリには、例えば、本実施形態にかかるプログラム、当該カメラを識別するカメラID、人認識処理に用いる所定のパターン情報等が格納されている。   The control unit 23 includes a central processing unit (CPU) and a memory (including a data memory and a program memory). The CPU of the control unit 23 controls the entire camera. Further, the CPU of the control unit 23 functions as a remote power control unit by executing a program according to the present embodiment. The remote power control unit generates ON / OFF information for remotely turning on or off the power of the acceleration sensor in the detection terminal 13. Hereinafter, ON or OFF is expressed as ON / OFF. The memory stores, for example, a program according to the present embodiment, a camera ID for identifying the camera, predetermined pattern information used for human recognition processing, and the like.

通信I/F24は、AP14を介して検知端末13と通信したり、PC15と有線で通信したりするための通信インターフェースである。   The communication I / F 24 is a communication interface for communicating with the detection terminal 13 via the AP 14 or communicating with the PC 15 in a wired manner.

検知端末13は、通信I/F31、制御部32、電源管理部33、加速度センサ34を含む。無線通信I/F31は、AP14を介して、カメラ12またはPC15と無線で通信するための通信インターフェースである。例えば、通信I/F31は、カメラ12から、加速度センサ34の電源をON/OFFにするON/OFF指示情報を受信する。   The detection terminal 13 includes a communication I / F 31, a control unit 32, a power management unit 33, and an acceleration sensor 34. The wireless communication I / F 31 is a communication interface for wirelessly communicating with the camera 12 or the PC 15 via the AP 14. For example, the communication I / F 31 receives ON / OFF instruction information for turning ON / OFF the power supply of the acceleration sensor 34 from the camera 12.

制御部32は、中央演算装置(CPU)、メモリ(データ用メモリ、プログラム用メモリを含む。)を含む。制御部32のCPUは、検知端末13全体を制御する。また、制御部32のCPUは、本実施形態に係るプログラムを実行することにより、受信したON/OFF指示情報に基づいて、加速度センサ34の電源をON/OFFにする電源処理部として機能する。メモリには、例えば、本実施形態にかかるプログラム、当該検知端末13を識別する端末ID、加速度センサ34から得られたデータと比較して、患者が転倒または転落等していないかを判定するための基準となる情報等が格納されている。   The control unit 32 includes a central processing unit (CPU) and a memory (including a data memory and a program memory). The CPU of the control unit 32 controls the entire detection terminal 13. The CPU of the control unit 32 functions as a power processing unit that turns on / off the power of the acceleration sensor 34 based on the received ON / OFF instruction information by executing the program according to the present embodiment. In the memory, for example, the program according to the present embodiment, the terminal ID for identifying the detection terminal 13, and the data obtained from the acceleration sensor 34 are used to determine whether the patient has fallen or fallen. The information used as a reference for the above is stored.

電源管理部33は、検知端末13内の電子部品への電力の供給を管理する。例えば、電源管理部33は、制御部32から出力されたON/OFF指示情報に基づいて、加速度センサ34への電力の提供を制御する。   The power management unit 33 manages the supply of power to the electronic components in the detection terminal 13. For example, the power management unit 33 controls the supply of power to the acceleration sensor 34 based on the ON / OFF instruction information output from the control unit 32.

加速度センサ34は、検知端末13を携帯している患者17にかかる加速度を検出して、患者17の転倒及び転落を検出する。加速度センサ34で得られたデータ(センシングデータ)は、制御部32に送られる。   The acceleration sensor 34 detects the acceleration applied to the patient 17 carrying the detection terminal 13 and detects the fall and fall of the patient 17. Data (sensing data) obtained by the acceleration sensor 34 is sent to the control unit 32.

制御部32は、加速度センサ34で得られたセンシングデータの分析を行う。分析の結果、患者17の転倒または転落を検知した場合は、制御部32は、無線通信I/F31及びAP14を介して、ナースセンタのPC15に、患者17の転倒または転落を検知したことを通知する。   The control unit 32 analyzes the sensing data obtained by the acceleration sensor 34. As a result of analysis, when the fall or fall of the patient 17 is detected, the control unit 32 notifies the PC 15 of the nurse center that the fall or fall of the patient 17 has been detected via the wireless communication I / F 31 and the AP 14. To do.

ナースセンタに設置されたPC15は、制御部41、記憶装置42、通信I/F43を含む。制御部41は、例えば、PC15全体を制御する中央演算装置(CPU)等のプロセッサである。記憶装置42は、たとえば、メモリ、ハードディスクドライブ(HDD)、SSD(solid state drive)等の記憶装置である。   The PC 15 installed in the nurse center includes a control unit 41, a storage device 42, and a communication I / F 43. The control unit 41 is a processor such as a central processing unit (CPU) that controls the entire PC 15, for example. The storage device 42 is a storage device such as a memory, a hard disk drive (HDD), or an SSD (solid state drive).

ここで、カメラ12には、各カメラ12を識別するカメラIDが割り当てられている。検知端末13には、各検知端末13を識別する端末IDが割り当てられている。記憶装置42は、ID対応付けテーブル71を格納する。ID対応付けテーブル71は、カメラIDと端末IDと、その他のID等を対応付けたテーブルである。ID対応付けテーブル71について、図5を用いて説明する。   Here, a camera ID for identifying each camera 12 is assigned to the camera 12. A terminal ID for identifying each detection terminal 13 is assigned to the detection terminal 13. The storage device 42 stores an ID association table 71. The ID association table 71 is a table in which camera IDs, terminal IDs, and other IDs are associated with each other. The ID association table 71 will be described with reference to FIG.

通信I/F43は、AP14を介して検知端末13と通信したり、カメラ12と通信したりするための通信インターフェースである。   The communication I / F 43 is a communication interface for communicating with the detection terminal 13 or communicating with the camera 12 via the AP 14.

なお、本実施形態では、人検出機能を有するカメラによる監視システムを利用しているため、通信機能及び人判別機能を有するカメラを用いたが、これに限定されない。例えば、カメラには通信機能を持たせ、カメラで撮影した映像を、別筐体のコンピュータに送信し、そのコンピュータで人認識処理を行わせてもよい。   In this embodiment, since a monitoring system using a camera having a human detection function is used, a camera having a communication function and a human discrimination function is used. However, the present invention is not limited to this. For example, the camera may have a communication function, and an image captured by the camera may be transmitted to a computer in a separate housing, and the computer may perform human recognition processing.

また、制御部23,32,41が実行するプログラムは、インターネット等の通信ネットワークを介して取得されてもよいし、可搬型メモリやCD−ROM等のコンピュータ読み取り可能な可搬型記録媒体を読み込むことにより取得されてもよい。   The programs executed by the control units 23, 32, and 41 may be acquired via a communication network such as the Internet, or read a computer-readable portable recording medium such as a portable memory or a CD-ROM. May be obtained.

図5は、本実施形態におけるID対応付けテーブルの一例を示す。ID対応付けテーブル71は、「カメラID」71−1、「カメラ用IPアドレス」71−2、「端末ID」71−3、「端末用IPアドレス」71−4、「ベッドNo.」71−5、「患者ID」71−6のデータ項目を含む。   FIG. 5 shows an example of an ID association table in the present embodiment. The ID association table 71 includes “camera ID” 71-1, “camera IP address” 71-2, “terminal ID” 71-3, “terminal IP address” 71-4, and “bed No.” 71-. 5. The data item of “patient ID” 71-6 is included.

「カメラID」71−1には、カメラIDが格納される。「カメラ用IPアドレス」71−2には、カメラ12のIP(Internet Protocol)アドレスが格納される。「端末ID」71−3には、端末IDが格納される。「端末用IPアドレス」73−4には、検知端末13のIPアドレスが格納される。「ベッドNo.」71−5には、カメラ12の監視対象の患者のベッドを識別するベッドNo.が格納される。「患者ID」71−6には、カメラ12の監視対象の患者を識別する患者IDが格納される。   “Camera ID” 71-1 stores the camera ID. The “camera IP address” 71-2 stores the IP (Internet Protocol) address of the camera 12. The “terminal ID” 71-3 stores the terminal ID. The “terminal IP address” 73-4 stores the IP address of the detection terminal 13. “Bed No.” 71-5 includes a bed No. for identifying a bed of a patient to be monitored by the camera 12. Is stored. The “patient ID” 71-6 stores a patient ID for identifying a patient to be monitored by the camera 12.

図6は、本実施形態における患者異常検知システムの機能ブロック図を示す。PC15は、モニタ部72と接続されている。PC15は、通信部70、ID対応付けテーブル71を含む。通信部70は、図4の制御部41、通信I/F43に対応する。ID対応付けテーブル71は、記憶装置42に格納されている。   FIG. 6 is a functional block diagram of the patient abnormality detection system in the present embodiment. The PC 15 is connected to the monitor unit 72. The PC 15 includes a communication unit 70 and an ID association table 71. The communication unit 70 corresponds to the control unit 41 and the communication I / F 43 in FIG. The ID association table 71 is stored in the storage device 42.

カメラ12は、撮像部51、画像処理部52、信号処理部53、リモート電源制御部54、通信部55を含む。撮像部51は、図4の撮像部21に対応する。   The camera 12 includes an imaging unit 51, an image processing unit 52, a signal processing unit 53, a remote power control unit 54, and a communication unit 55. The imaging unit 51 corresponds to the imaging unit 21 in FIG.

画像処理部52は、図4の画像処理回路22に対応する。画像処理部52は、画像処理技術の人認識処理を用いて、映像データより患者17が写っているか否かを判定する。画像処理部52は、患者17がカメラ12に写っていると判断すると、リモート電源制御部54に、人を検出した旨を通知する情報(人検出通知)を送る。一方、画像処理部52は、患者17がカメラ12に写っていないと判断すると、リモート電源制御部54に、人を検出していない旨を通知する情報(人不検出通知)を送る。   The image processing unit 52 corresponds to the image processing circuit 22 in FIG. The image processing unit 52 determines whether or not the patient 17 is captured from the video data using the human recognition process of the image processing technology. When the image processing unit 52 determines that the patient 17 is captured by the camera 12, the image processing unit 52 sends information (person detection notification) for notifying that the person has been detected to the remote power control unit 54. On the other hand, when the image processing unit 52 determines that the patient 17 is not captured by the camera 12, the image processing unit 52 sends information (person non-detection notification) for notifying that the person is not detected to the remote power control unit 54.

信号処理部53は、図4の制御部23に対応する。信号処理部53は、メモリに格納されているカメラIDと、画像処理部52から出力された映像データとを対応付けて、通信部55へ送る。   The signal processing unit 53 corresponds to the control unit 23 in FIG. The signal processing unit 53 associates the camera ID stored in the memory with the video data output from the image processing unit 52, and sends it to the communication unit 55.

リモート電源制御部54は、図4の制御部23に対応する。リモート電源制御部54は、画像処理部54から人検出通知を受信すると、通信部28に対して、検知端末13の加速度センサ34の電源をOFFにするよう指示情報(OFF指示情報)を送る。一方、リモート電源制御部54は、画像処理部54から人不検出通知を受信すると、通信部28に対して、検知端末13の加速度センサ34の電源をONにするように指示情報(ON指示情報)を送る。   The remote power control unit 54 corresponds to the control unit 23 in FIG. When receiving the human detection notification from the image processing unit 54, the remote power control unit 54 sends instruction information (OFF instruction information) to the communication unit 28 to turn off the acceleration sensor 34 of the detection terminal 13. On the other hand, when the remote power supply control unit 54 receives the person non-detection notification from the image processing unit 54, the remote power supply control unit 54 instructs the communication unit 28 to turn on the acceleration sensor 34 of the detection terminal 13 (ON instruction information). )

通信部55は、図4の制御部23及び通信I/F24に対応する。通信部55は、カメラIDと共に、映像データをPC15へ送信する。また、通信部55は、カメラIDをPC15に送信すると、PC15の通信部70は、ID対応付けテーブル71からそのカメラIDに対応する端末ID及び端末用IPアドレスをカメラ12へ返信する。これにより、カメラ12は、監視対象の患者の携帯する検知端末の端末ID及び端末用IPアドレスを取得する。   The communication unit 55 corresponds to the control unit 23 and the communication I / F 24 of FIG. The communication unit 55 transmits video data to the PC 15 together with the camera ID. When the communication unit 55 transmits the camera ID to the PC 15, the communication unit 70 of the PC 15 returns a terminal ID and a terminal IP address corresponding to the camera ID from the ID association table 71 to the camera 12. Thereby, the camera 12 acquires the terminal ID and terminal IP address of the detection terminal carried by the patient to be monitored.

通信部55は、リモート電源制御部54からON/OFF指示情報を受信すると、予め取得した端末用IPアドレスを用いて、ON/OFF指示情報を、検知端末13に送信する。ON/OFF指示情報は、AP14を介して、端末用IPアドレスに対応する検知端末13に送信される。   When the communication unit 55 receives the ON / OFF instruction information from the remote power control unit 54, the communication unit 55 transmits the ON / OFF instruction information to the detection terminal 13 using the previously acquired terminal IP address. The ON / OFF instruction information is transmitted to the detection terminal 13 corresponding to the terminal IP address via the AP 14.

なお、本実施形態では、画像処理回路22を用いて人認識処理を行ったがこれに限定されない。例えば、画像処理回路22による人認識処理をプログラムにより、制御部23が実行してもよい。この場合、本実施形態にかかる監視制御プログラムが、制御部23としての制御装置に、次の処理を実行させてもよい。すなわち、制御装置は、撮像装置を用いて取得される撮像画像の撮像範囲に、監視対象者が含まれるか否かを判定する。制御装置は、監視対象者が撮像範囲に含まれるか否かの判定結果に応じて、監視対象者に装着されたセンサ機器の電源の投入または切断を制御する。   In the present embodiment, the human recognition process is performed using the image processing circuit 22, but the present invention is not limited to this. For example, the human recognition process by the image processing circuit 22 may be executed by the control unit 23 using a program. In this case, the monitoring control program according to the present embodiment may cause the control device as the control unit 23 to execute the following process. That is, the control device determines whether or not the monitoring target person is included in the imaging range of the captured image acquired using the imaging device. The control device controls the power on or off of the sensor device attached to the monitoring target person according to the determination result of whether or not the monitoring target person is included in the imaging range.

検知端末13は、通信部61、制御部32、電源管理部33、加速度センサ34を含む。通信部61は、カメラ12からON/OFF指示情報を受信すると、電源処理部62に送る。   The detection terminal 13 includes a communication unit 61, a control unit 32, a power management unit 33, and an acceleration sensor 34. When receiving the ON / OFF instruction information from the camera 12, the communication unit 61 sends it to the power processing unit 62.

制御部32は、電源処理部62、データ処理部63を含む。電源処理部62は、電源に関する処理について電源管理部33に指示を与える。例えば、電源処理部62は、通信部61からON/OFF指示情報を受信すると、電源管理部33に対してON/OFF指示信号を送る。   The control unit 32 includes a power processing unit 62 and a data processing unit 63. The power processing unit 62 gives an instruction to the power management unit 33 for processing related to power. For example, when receiving the ON / OFF instruction information from the communication unit 61, the power processing unit 62 sends an ON / OFF instruction signal to the power management unit 33.

電源管理部33は、ON/OFF指示信号を受信すると、受信したON/OFF指示信号に基づいて、加速度センサ34の電源部64をON/OFFにするためのON/OFF指示信号を電源部64に出力する。   When the power management unit 33 receives the ON / OFF instruction signal, the power management unit 33 sends an ON / OFF instruction signal for turning on / off the power supply unit 64 of the acceleration sensor 34 based on the received ON / OFF instruction signal. Output to.

加速度センサ34は、電源部64、測定部65を含む。電源部64は、電源管理部33からのON/OFF指示信号に基づいて、測定部65への電力の供給を制御する。なお、本実施形態では、患者の転倒・転落等の状態を検知するセンサの一例として、加速度センサを用いたがこれに限定されない。例えば、体温、脈拍、呼吸等の状態を検知するセンサを用いて患者の転倒・転落等の状態を検知してもよい。   The acceleration sensor 34 includes a power supply unit 64 and a measurement unit 65. The power supply unit 64 controls the supply of power to the measurement unit 65 based on the ON / OFF instruction signal from the power management unit 33. In the present embodiment, an acceleration sensor is used as an example of a sensor that detects the state of a patient falling or falling, but the present invention is not limited to this. For example, a patient's state of falling or falling may be detected using a sensor that detects the state of body temperature, pulse, breathing, or the like.

測定部65は、電源部64から電力が供給されている場合、自身にかかる加速度を計測する。また、測定部65は、電源部64から電力が供給されていない場合、自身にかかる加速度の計測処理を停止する。   When power is supplied from the power supply unit 64, the measurement unit 65 measures the acceleration applied to itself. Moreover, the measurement part 65 stops the measurement process of the acceleration concerning itself, when the electric power is not supplied from the power supply part 64. FIG.

データ処理部63は、測定部65からのセンシングデータを分析し、当該検知端末13を携帯している患者17の転倒・転落を検知する。ここでは、データ処理部63は、測定部65からのセンシングデータを加速度波形にし、その加速度波形と、予めメモリに保持されている所定のパターン(例えば、歩行している場合や座っている場合等の加速度波形のパターン)とを比較する。その加速度波形が所定のパターンより大きく異なる場合には、データ処理部63は、患者17が転倒・転落したと判定して、通信部61へ患者の状態の異常を通知する通知情報を送信する。   The data processing unit 63 analyzes the sensing data from the measurement unit 65 and detects the fall / fall of the patient 17 carrying the detection terminal 13. Here, the data processing unit 63 converts the sensing data from the measurement unit 65 into an acceleration waveform, and the acceleration waveform and a predetermined pattern (for example, when walking or sitting, etc.) stored in advance in the memory. The acceleration waveform pattern) is compared. If the acceleration waveform is significantly different from the predetermined pattern, the data processing unit 63 determines that the patient 17 has fallen or dropped, and transmits notification information for notifying the communication unit 61 of an abnormality in the patient's condition.

ここで、加速度センサ34の電源部64がOFFになると、計測部65が停止し、センシングデータが取得されず、PC15への通信も途絶える。加速度センサ34の電源をONにすると、計測部65の計測結果がデータ処理部63に送られ、加速度の異常が検知されるとPC15へ異常を知らせる通知が送信される。   Here, when the power supply unit 64 of the acceleration sensor 34 is turned off, the measurement unit 65 stops, sensing data is not acquired, and communication with the PC 15 is also interrupted. When the acceleration sensor 34 is turned on, the measurement result of the measuring unit 65 is sent to the data processing unit 63, and when an abnormality in acceleration is detected, a notification notifying the PC 15 of the abnormality is transmitted.

通信部61は、データ処理部63により患者17が転倒・転落したと判定された場合、センシングデータと、当該検知端末の端末IDとを対応付けて、AP14を介して、PC15へ送信する。   When the data processing unit 63 determines that the patient 17 has fallen or fallen, the communication unit 61 associates the sensing data with the terminal ID of the detection terminal and transmits the data to the PC 15 via the AP 14.

図7は、本実施形態におけるカメラによる頭部認識処理のフローを示す。撮像部51は、被写体を撮影し、その撮影した映像データを画像処理部52に送る(S1)。画像処理部52は、撮像部51から送られた映像データについて頭部認識処理を行う(S2)。   FIG. 7 shows a flow of head recognition processing by the camera in this embodiment. The imaging unit 51 captures a subject and sends the captured video data to the image processing unit 52 (S1). The image processing unit 52 performs head recognition processing on the video data sent from the imaging unit 51 (S2).

ここで、頭部認識処理について説明する。まず、ベッド上での患者の状態を5つ(寝床中、起床中、座位、端座位、ベッド脇に立つ)に分類し、予め状態毎に頭部の現れる位置を設定し、その位置での頭部の見え方に限定したデータ(頭部パターン情報)が作成され、カメラ12のメモリに格納されている。画像処理部52は、その頭部パターン情報に基づいて、映像データから頭部を検出する。その際、画像処理部52が枕や布団など誤って認識してしまう場合がある。その場合、画像処理部52は、患者が起床・離床する時は、必ず動きが伴うため、画像内で頭部の可能性のある複数の領域を頭部候補とし、動きがある場合は「頭部確定」、動きがない場合は「頭部候補」とし、全ての頭部候補の観測を継続する。また、画像処理部52は、寝返り等も画像から算出した患者の動きの大きさ、回数から、頭部の判別を行うことができる。   Here, the head recognition process will be described. First, categorize the patient's condition on the bed into five (being in bed, getting up, sitting, sitting on the edge, standing beside the bed), and setting the position where the head appears for each condition in advance. Data (head pattern information) limited to how the head is visible is created and stored in the memory of the camera 12. The image processing unit 52 detects the head from the video data based on the head pattern information. At that time, the image processing unit 52 may erroneously recognize a pillow or a futon. In this case, since the image processing unit 52 always moves when the patient gets up and leaves the floor, the image processing unit 52 sets a plurality of regions that may have a head in the image as head candidates. If there is no movement, “head candidate” is set, and observation of all head candidates is continued. Further, the image processing unit 52 can determine the head from the magnitude and number of movements of the patient calculated from the image, such as turning over.

頭部認識処理により頭部が認識された場合(S3でYes)、画像処理部52は、人を検出したことをリモート電源制御部54に通知(人検出通知)する(S4)。その後、画像処理部52は、順次撮像部51から送られてくる映像データについて頭部認識処理を行う(S2)。   When the head is recognized by the head recognition process (Yes in S3), the image processing unit 52 notifies the remote power supply control unit 54 that a person has been detected (person detection notification) (S4). Thereafter, the image processing unit 52 performs head recognition processing on the video data sequentially sent from the imaging unit 51 (S2).

頭部認識処理により頭部が認識されなかった場合(S3でNo)、画像処理部52は、人を検出されなかったことをリモート電源制御部54に通知(人不検出通知)する(S5)。その後、画像処理部52は、順次撮像部51から送られてくる映像データについて頭部認識処理を行う(S2)。   If the head is not recognized by the head recognition process (No in S3), the image processing unit 52 notifies the remote power supply control unit 54 that a person has not been detected (not-detected person detection) (S5). . Thereafter, the image processing unit 52 performs head recognition processing on the video data sequentially sent from the imaging unit 51 (S2).

図8は、本実施形態における、カメラに患者が写らなくなって加速度センサの電源をONにする場合のシーケンス図を示す。ここでは、カメラは、対応する検知端末の端末IDと端末用IPアドレスとを既に取得しているものとする。   FIG. 8 is a sequence diagram in the present embodiment when the patient is no longer captured by the camera and the acceleration sensor is turned on. Here, it is assumed that the camera has already acquired the terminal ID and the terminal IP address of the corresponding detection terminal.

画像処理部52で患者がいないと認識されると、図7で説明したようにリモート電源制御部54に人不検出通知が送信される。リモート電源制御部54は、画像処理部52から人不検出通知を受信すると、通信部28に対して、検知端末13の加速度センサ34の電源をONにするように指示情報(ON指示情報)を送る(S11)。通信部55は、リモート電源制御部54からON指示情報を受信すると、検知端末13の通信部61にON指示情報を送る(S12)。   When the image processing unit 52 recognizes that there is no patient, a person non-detection notification is transmitted to the remote power control unit 54 as described with reference to FIG. When the remote power supply control unit 54 receives the person non-detection notification from the image processing unit 52, the remote power supply control unit 54 instructs the communication unit 28 to turn on the acceleration sensor 34 of the detection terminal 13 (ON instruction information). Send (S11). When receiving the ON instruction information from the remote power control unit 54, the communication unit 55 sends the ON instruction information to the communication unit 61 of the detection terminal 13 (S12).

検知端末13の通信部61は、カメラ12側からON指示情報を受信すると、電源処理部62にON指示情報を送る(S13)。電源処理部62は、通信部61からON指示情報を受信すると、ON指示信号を電源管理部33に送る(S14)。   When receiving the ON instruction information from the camera 12 side, the communication unit 61 of the detection terminal 13 sends the ON instruction information to the power supply processing unit 62 (S13). When receiving the ON instruction information from the communication unit 61, the power processing unit 62 sends an ON instruction signal to the power management unit 33 (S14).

電源管理部33は、電源処理部62からON指示信号を受信すると、加速度センサ34の電源部64にON指示信号を送る(S15)。加速度センサ34の電源部64は、電源管理部33からON指示信号を受信すると、測定部65へ電力を供給する電源をONにする(S16)。加速度センサ34の電源がONになると、測定部65はセンシング可能になり、センシングデータをデータ処理部63に送る(S17)。   When receiving the ON instruction signal from the power processing section 62, the power management section 33 sends an ON instruction signal to the power supply section 64 of the acceleration sensor 34 (S15). When the power supply unit 64 of the acceleration sensor 34 receives the ON instruction signal from the power management unit 33, the power supply unit 64 turns on the power supply for supplying power to the measurement unit 65 (S16). When the acceleration sensor 34 is turned on, the measuring unit 65 becomes capable of sensing and sends sensing data to the data processing unit 63 (S17).

データ処理部63は、測定部65から送られてきたセンシングデータを解析し、転倒・転落を検知すると、通信部61に、センシングデータと異常を知らせる通知とを送信する(S18)。通信部61は、データ処理部63から送信されたセンシングデータと、異常を知らせる通知とをナースセンタのPC15に送信する(S19)。   When the data processing unit 63 analyzes the sensing data sent from the measurement unit 65 and detects a fall or fall, the data processing unit 63 transmits the sensing data and a notification notifying the abnormality to the communication unit 61 (S18). The communication unit 61 transmits the sensing data transmitted from the data processing unit 63 and the notification notifying the abnormality to the PC 15 of the nurse center (S19).

図9は、本実施形態における、カメラに患者が写るようになって加速度センサの電源をOFFにする場合のシーケンス図を示す。   FIG. 9 is a sequence diagram when the patient is photographed on the camera and the power of the acceleration sensor is turned off in the present embodiment.

画像処理部52で患者がいると認識されると、図7で説明したようにリモート電源制御部54に人検出通知が送信される。リモート電源制御部54は、画像処理部52から人検出通知を受信すると、通信部28に対して、検知端末13の加速度センサ34の電源をOFFにするように指示情報(OFF指示情報)を送る(S21)。通信部55は、リモート電源制御部54からOFF指示情報を受信すると、検知端末13の通信部61にOFF指示情報を送る(S22)。   When the image processing unit 52 recognizes that there is a patient, a human detection notification is transmitted to the remote power control unit 54 as described with reference to FIG. When receiving the human detection notification from the image processing unit 52, the remote power control unit 54 sends instruction information (OFF instruction information) to the communication unit 28 to turn off the acceleration sensor 34 of the detection terminal 13. (S21). When receiving the OFF instruction information from the remote power control unit 54, the communication unit 55 sends the OFF instruction information to the communication unit 61 of the detection terminal 13 (S22).

検知端末13の通信部61は、カメラ12側からOFF指示情報を受信すると、電源処理部62にOFF指示情報を送る(S23)。電源処理部62は、通信部61からOFF指示情報を受信すると、OFF指示信号を電源管理部33に送る(S24)。   When receiving the OFF instruction information from the camera 12 side, the communication unit 61 of the detection terminal 13 sends the OFF instruction information to the power supply processing unit 62 (S23). Upon receiving the OFF instruction information from the communication unit 61, the power processing unit 62 sends an OFF instruction signal to the power management unit 33 (S24).

電源管理部33は、電源処理部62からON指示信号を受信すると、加速度センサの電源部64にOFF指示信号を送る(S25)。加速度センサ34の電源部64は、電源管理部33からOFF指示信号を受信すると、測定部65へ電力を供給する電源をOFFにする(S26)。加速度センサ34の電源がOFFになると、測定部65はセンシングができなくなり、データ処理部63にもセンシングデータが送られないので、PC15への通知も停止する。なお、この場合、通信部61は、ナースセンタのPC15へ加速度センサ34の電源をOFFにした旨を通知してもよい。   When receiving the ON instruction signal from the power processing section 62, the power management section 33 sends an OFF instruction signal to the power supply section 64 of the acceleration sensor (S25). When receiving the OFF instruction signal from the power management unit 33, the power supply unit 64 of the acceleration sensor 34 turns off the power supply for supplying power to the measurement unit 65 (S26). When the power of the acceleration sensor 34 is turned off, the measurement unit 65 cannot perform sensing, and no sensing data is sent to the data processing unit 63, so the notification to the PC 15 is also stopped. In this case, the communication unit 61 may notify the nurse center PC 15 that the power source of the acceleration sensor 34 has been turned off.

図10は、本実施形態におけるナースセンタのPCに映し出すモニタの表示例を示す。図10(A)は、カメラに患者が写るようになって加速度センサの電源がOFFになっている場合の表示例である。図10(B)は、カメラに患者が写らなくなって加速度センサの電源がONになっている場合の表示例である。   FIG. 10 shows a display example of a monitor displayed on the PC of the nurse center in this embodiment. FIG. 10A is a display example when the patient is photographed on the camera and the acceleration sensor is turned off. FIG. 10B is a display example when the patient is no longer captured by the camera and the acceleration sensor is turned on.

PC15のモニタ部72には、表示領域81と、表示領域84とを含む画面が表示される。   A screen including a display area 81 and a display area 84 is displayed on the monitor unit 72 of the PC 15.

表示領域81には、患者一覧82、ステータス表示欄83が表示されている。ステータス表示欄83は、カメラ12および検知端末13のうちどちらの装置の監視が有効であるかを表示する。ステータス表示欄83では、検知端末13とカメラ12のうち監視が有効になっている方の装置のステータスが強調表示される。また、患者の検知端末13の電源がONになっている状態で、転倒・転落した際は、符号89で示すように、ステータス表示欄83において、対応するステータスが更に強調表示されたり点滅したりし、アラーム音で知らせるようになっている。また、患者一覧82の患者名をクリックすると、その患者に対応する画面が表示領域84に表示される。   In the display area 81, a patient list 82 and a status display field 83 are displayed. The status display field 83 displays which of the cameras 12 and the detection terminal 13 is effective for monitoring. In the status display field 83, the status of the device of which the monitoring is enabled among the detection terminal 13 and the camera 12 is highlighted. Further, when the patient's detection terminal 13 is turned on and falls or falls, the corresponding status is further highlighted or blinked in the status display field 83 as indicated by reference numeral 89. And it is to notify with an alarm sound. When a patient name in the patient list 82 is clicked, a screen corresponding to the patient is displayed in the display area 84.

表示領域84では、患者名表示欄85、ステータス表示欄86、映像表示領域87、センシングデータ表示欄88が表示される。患者名表示欄85は、患者一覧82で選択された患者名を表示する。   In the display area 84, a patient name display field 85, a status display field 86, a video display area 87, and a sensing data display field 88 are displayed. The patient name display field 85 displays the patient name selected in the patient list 82.

ステータス表示欄86は、患者名表示欄85で表示された患者について、カメラ12および検知端末13のうちどちらの装置の監視が有効であるかを表示する。   The status display column 86 displays which of the camera 12 and the detection terminal 13 is effective for monitoring the patient displayed in the patient name display column 85.

映像表示領域87は、ステータス表示欄86においてカメラが有効になっている場合、図10(A)に示すように、患者名表示欄85で表示された患者に対応するカメラ12から送信された映像データを表示する。一方、映像表示領域87は、ステータス表示欄86において検知端末13が有効になっている場合、カメラには患者が写っていないことになるので、図10(B)に示すように、映像データを表示せず、映像表示領域87を暗い色にしてもよい。   When the camera is enabled in the status display field 86, the video display area 87 is an image transmitted from the camera 12 corresponding to the patient displayed in the patient name display field 85, as shown in FIG. Display data. On the other hand, in the video display area 87, when the detection terminal 13 is enabled in the status display field 86, the patient is not shown in the camera. Therefore, as shown in FIG. The video display area 87 may be darkened without displaying.

センシングデータ表示欄88は、検知端末13から送信されたセンシングデータを表示する。センシングデータは、検知端末13がON/OFFした時刻、転倒・転落した時刻、転倒・転落した回数、カメラ12または検知端末13に切り替わった時刻を含む。   The sensing data display field 88 displays the sensing data transmitted from the detection terminal 13. The sensing data includes the time at which the detection terminal 13 is turned ON / OFF, the time at which the detection terminal 13 falls, the time at which the detection terminal 13 falls, the number of times the fall / falls, and the time at which the camera 12 or the detection terminal 13 is switched.

図10(B)では、加速度センサ34の電源がONになっているため、カメラ12では監視しておらず、映像データは表示されない。このとき、加速度センサ34の電源が入ると、加速度センサ34が検出したセンシングデータがセンシングデータ表示欄88に強調表示される。また、符号89に示すように、ステータス表示欄83の検知端末のステータスが点滅等の強調表示がされているので、その検知端末を携帯している患者が転倒または転落したと判別できる。このとき、警告音を発するようにしてもよい。また、センシングデータ表示欄88には、加速度センサ34が検出したセンシングデータに基づいて、例えば「○月○日○時○分 転倒・転落」と表示されている。   In FIG. 10B, since the acceleration sensor 34 is powered on, it is not monitored by the camera 12, and video data is not displayed. At this time, when the acceleration sensor 34 is turned on, the sensing data detected by the acceleration sensor 34 is highlighted in the sensing data display field 88. Further, as indicated by reference numeral 89, since the status of the detection terminal in the status display field 83 is highlighted such as blinking, it can be determined that the patient carrying the detection terminal falls or falls. At this time, a warning sound may be emitted. Further, in the sensing data display field 88, for example, “○ month ○ date ○ hour ○ minute fall / fall” is displayed based on the sensing data detected by the acceleration sensor 34.

このように、例えば、対象の患者がベッド上にいる場合にカメラがその対象の患者を検知し、検知端末の加速度センサの電源をOFFにする。対象の患者がベッド上にいない場合には検知端末の加速度センサの電源をONにする。そのため、本実施形態を用いれば、対象の患者が就床中、起床中、座位の際はカメラによる患者の状態の観察を行い、検知端末の加速度センサの電源をOFFにすることが可能となる。また、他の患者が映り込んでも、人認識機能により、予め登録した対象患者と、その以外の他の患者とは、区別されるので、誤ってその患者の検知端末の加速センサの電源をOFFにすることを防止することも可能である。   Thus, for example, when the target patient is on the bed, the camera detects the target patient and turns off the power of the acceleration sensor of the detection terminal. When the target patient is not on the bed, the acceleration sensor of the detection terminal is turned on. Therefore, when this embodiment is used, the patient's state can be observed by the camera when the target patient is in bed, while getting up, or sitting, and the acceleration sensor of the detection terminal can be turned off. . Even if other patients are reflected, the person recognition function distinguishes the target patient registered in advance from other patients, so that the acceleration sensor of the patient's detection terminal is accidentally turned off. It is also possible to prevent this.

本実施形態では、病院で患者の状態を検知する装置として適用した例を説明したが、その他のシーンでも利用可能である。例えば、乳児のいる家庭での子どもの状態の検知に利用することも考えられる。その場合、子どものベッドに家庭用カメラを設置し、子どもには今回発明した検知端末を装着させる。母親が持つタブレットや移動端末に、子どもの状態を確認する画面が表示される。子どもの状態をカメラ画像で確認したり、転倒・転落した際には、アラーム音で母親がすぐに駆けつけたりすることができる。そのため、子どもが見えない場所で家事をする母親が遠隔で子供を見守ることが可能となる。   In this embodiment, the example applied as an apparatus for detecting a patient's condition in a hospital has been described. However, the present invention can be used in other scenes. For example, it may be used to detect the state of a child in a home with an infant. In that case, a home camera is installed in the child's bed, and the child is made to wear the detection terminal invented this time. A screen confirming the child's condition is displayed on the tablet or mobile terminal of the mother. You can check the child's condition with a camera image, and if you fall or fall, your mother can rush to you with an alarm sound. This makes it possible for a mother who does housework in a place where the child cannot be seen to watch the child remotely.

本実施形態によれば、カメラと検知端末とを連動させ、カメラに患者が写っている場合には加速度センサの電源をOFFになり、患者が写っていない場合には加速度センサの電源をONになる。これにより、検知端末の省電力化を図ることができるので、容量が小さく、電池交換の回数が少ない検知端末を実現することができる。   According to the present embodiment, the camera and the detection terminal are interlocked, and when the patient is reflected in the camera, the acceleration sensor is turned off. When the patient is not reflected, the acceleration sensor is turned on. Become. Thereby, since the power saving of the detection terminal can be achieved, a detection terminal with a small capacity and a small number of battery replacements can be realized.

なお、本発明は、以上に述べた実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の構成または実施形態を取ることができる。   The present invention is not limited to the above-described embodiment, and various configurations or embodiments can be taken without departing from the gist of the present invention.

1 監視制御装置
2 判定部
3 制御部
4 センサ機器
11 患者異常検知システム
12 カメラ
13 検知端末
14 アクセスポイント(AP)
15 PC
32 制御部
33 電源管理部
34 加速度センサ
51 撮像部
52 画像処理部
53 信号処理部
54 リモート電源制御部
55 通信部
61 通信部
62 電源処理部
63 データ処理部
64 電源部
65 測定部
70 通信部
71 ID対応付けテーブル
72 モニタ部
DESCRIPTION OF SYMBOLS 1 Monitoring and control apparatus 2 Judgment part 3 Control part 4 Sensor apparatus 11 Patient abnormality detection system 12 Camera 13 Detection terminal 14 Access point (AP)
15 PC
32 control unit 33 power management unit 34 acceleration sensor 51 imaging unit 52 image processing unit 53 signal processing unit 54 remote power control unit 55 communication unit 61 communication unit 62 power supply processing unit 63 data processing unit 64 power supply unit 65 measurement unit 70 communication unit 71 ID association table 72 Monitor unit

Claims (4)

制御装置に、
取得した撮像画像の撮像範囲に、監視対象者が含まれるか否かを判定し、
前記監視対象者が前記撮像範囲に含まれるか否かの判定結果に応じて、前記監視対象者に装着されたセンサ機器の電源の投入または切断を制御する、
処理を実行させることを特徴とする監視制御プログラム。
To the control unit,
It is determined whether the monitoring target person is included in the imaging range of the acquired captured image,
Depending on the determination result of whether or not the monitoring target person is included in the imaging range, to control the power on or off of the sensor device attached to the monitoring target person,
A supervisory control program for executing a process.
電源の投入または切断の制御において、
前記監視対象者が前記撮像範囲に含まれると判定された場合、前記センサ機器の電源を切断する指示を前記センサ機器に通知し、前記監視対象者が前記撮像範囲に含まれないと判定された場合、前記センサ機器の電源を投入する指示を前記センサ機器に通知する
ことを特徴とする請求項1に記載の監視制御プログラム。
In controlling power on / off,
When it is determined that the person to be monitored is included in the imaging range, an instruction to turn off the power of the sensor device is notified to the sensor device, and it is determined that the person to be monitored is not included in the imaging range. In this case, the monitoring control program according to claim 1, wherein an instruction to turn on the power of the sensor device is notified to the sensor device.
取得した撮像画像の撮像範囲に、監視対象者が含まれるか否かを判定する判定部と、
前記監視対象者が前記撮像範囲に含まれるか否かの判定結果に応じて、前記監視対象者に装着されたセンサ機器の電源の投入または切断を制御する制御部と、
を備えることを特徴とする監視制御装置。
A determination unit that determines whether or not the monitoring target person is included in the imaging range of the acquired captured image;
A control unit for controlling power on or off of a sensor device attached to the monitoring target person according to a determination result of whether or not the monitoring target person is included in the imaging range;
A monitoring control device comprising:
制御装置が、
取得した撮像画像の撮像範囲に、監視対象者が含まれるか否かを判定し、
前記監視対象者が前記撮像範囲に含まれるか否かの判定結果に応じて、前記監視対象者に装着されたセンサ機器の電源の投入または切断を制御する、
処理を実行することを特徴とする監視制御方法。
The control unit
It is determined whether the monitoring target person is included in the imaging range of the acquired captured image,
Depending on the determination result of whether or not the monitoring target person is included in the imaging range, to control the power on or off of the sensor device attached to the monitoring target person,
A monitoring control method characterized by executing processing.
JP2014251975A 2014-12-12 2014-12-12 MONITORING CONTROL PROGRAM, MONITORING CONTROL DEVICE, AND MONITORING CONTROL METHOD Active JP6519166B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014251975A JP6519166B2 (en) 2014-12-12 2014-12-12 MONITORING CONTROL PROGRAM, MONITORING CONTROL DEVICE, AND MONITORING CONTROL METHOD

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014251975A JP6519166B2 (en) 2014-12-12 2014-12-12 MONITORING CONTROL PROGRAM, MONITORING CONTROL DEVICE, AND MONITORING CONTROL METHOD

Publications (2)

Publication Number Publication Date
JP2016115054A true JP2016115054A (en) 2016-06-23
JP6519166B2 JP6519166B2 (en) 2019-05-29

Family

ID=56141927

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014251975A Active JP6519166B2 (en) 2014-12-12 2014-12-12 MONITORING CONTROL PROGRAM, MONITORING CONTROL DEVICE, AND MONITORING CONTROL METHOD

Country Status (1)

Country Link
JP (1) JP6519166B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019031011A1 (en) * 2017-08-10 2019-02-14 コニカミノルタ株式会社 Sleep state detection device and method therefor, and monitored person monitoring assist system
WO2019031010A1 (en) * 2017-08-10 2019-02-14 コニカミノルタ株式会社 Device and method for detecting sleep state, and system for assisting monitoring of monitored person
WO2019031012A1 (en) * 2017-08-10 2019-02-14 コニカミノルタ株式会社 Action detection device and method therefor, and monitored person monitoring assist system
JPWO2018135316A1 (en) * 2017-01-18 2019-11-07 コニカミノルタ株式会社 Nurse call system
JP2021036383A (en) * 2019-08-30 2021-03-04 東京瓦斯株式会社 Radio communication system
US20220253629A1 (en) * 2021-02-09 2022-08-11 National Tsing Hua University Health caring system and health caring method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001307246A (en) * 2000-04-20 2001-11-02 Matsushita Electric Works Ltd Human body sensor
JP2005258830A (en) * 2004-03-11 2005-09-22 Yamaguchi Univ Understanding system on person and action
WO2009037612A2 (en) * 2007-09-19 2009-03-26 Koninklijke Philips Electronics N.V. Method and apparatus for detecting an abnormal situation
JP2014090913A (en) * 2012-11-05 2014-05-19 Aiphone Co Ltd Nurse call system and state determination system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001307246A (en) * 2000-04-20 2001-11-02 Matsushita Electric Works Ltd Human body sensor
JP2005258830A (en) * 2004-03-11 2005-09-22 Yamaguchi Univ Understanding system on person and action
WO2009037612A2 (en) * 2007-09-19 2009-03-26 Koninklijke Philips Electronics N.V. Method and apparatus for detecting an abnormal situation
JP2010539617A (en) * 2007-09-19 2010-12-16 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Abnormal state detection method and apparatus
JP2014090913A (en) * 2012-11-05 2014-05-19 Aiphone Co Ltd Nurse call system and state determination system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
岡田 奈美 NAMI OKADA: "画像認識による患者の行動理解の試み A method for understanding patient's behavior by image recogniti", 電子情報通信学会技術研究報告 VOL.103 NO.738 IEICE TECHNICAL REPORT, vol. 第103巻, JPN6019009803, 19 April 2004 (2004-04-19), JP, ISSN: 0004001018 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2018135316A1 (en) * 2017-01-18 2019-11-07 コニカミノルタ株式会社 Nurse call system
WO2019031011A1 (en) * 2017-08-10 2019-02-14 コニカミノルタ株式会社 Sleep state detection device and method therefor, and monitored person monitoring assist system
WO2019031010A1 (en) * 2017-08-10 2019-02-14 コニカミノルタ株式会社 Device and method for detecting sleep state, and system for assisting monitoring of monitored person
WO2019031012A1 (en) * 2017-08-10 2019-02-14 コニカミノルタ株式会社 Action detection device and method therefor, and monitored person monitoring assist system
JPWO2019031010A1 (en) * 2017-08-10 2020-07-09 コニカミノルタ株式会社 Sleep state detecting apparatus and method, and monitored person monitoring support system
JPWO2019031012A1 (en) * 2017-08-10 2020-07-09 コニカミノルタ株式会社 BEHAVIOR DETECTION DEVICE AND METHOD, AND MONITORED SUPPORT SUPPORT SYSTEM
JP7137154B2 (en) 2017-08-10 2022-09-14 コニカミノルタ株式会社 Behavior detection device and method, and monitored person monitoring support system
JP7180601B2 (en) 2017-08-10 2022-11-30 コニカミノルタ株式会社 SLEEP STATE DETECTION DEVICE AND METHOD, AND MONITORED PERSON MONITORING SUPPORT SYSTEM
JP2021036383A (en) * 2019-08-30 2021-03-04 東京瓦斯株式会社 Radio communication system
US20220253629A1 (en) * 2021-02-09 2022-08-11 National Tsing Hua University Health caring system and health caring method

Also Published As

Publication number Publication date
JP6519166B2 (en) 2019-05-29

Similar Documents

Publication Publication Date Title
JP6519166B2 (en) MONITORING CONTROL PROGRAM, MONITORING CONTROL DEVICE, AND MONITORING CONTROL METHOD
US20160228040A1 (en) Notification System
JP6988798B2 (en) Watching system
JP2008047097A (en) Patient abnormality notification system
WO2017082037A1 (en) Central processing device and method for person monitoring system, and person monitoring system
EP3432772B1 (en) Using visual context to timely trigger measuring physiological parameters
JP6048630B1 (en) Behavior detection device, behavior detection method, and monitored person monitoring device
JP5304870B2 (en) robot
JP2015060530A (en) Watching system, watching method, watching terminal, management terminal, program and recording medium
JP6142975B1 (en) Monitored person monitoring apparatus and method, and monitored person monitoring system
EP3360466A1 (en) A method and apparatus for monitoring a subject
JP6696606B2 (en) Care support system, care support method and program
JP7234948B2 (en) Monitoring system and display method of event list
JP2019197263A (en) System and system control method
JP6509172B2 (en) Stress monitor system and program
JP4862734B2 (en) Security system
WO2019216045A1 (en) System and system control method
JPWO2016181731A1 (en) Fall detection device, fall detection method and monitored person monitoring device
WO2019216066A1 (en) System and system control method
JP7327396B2 (en) Control program, report output method, and report output device
JP6737355B2 (en) Head detection device, head detection method, and monitored person monitoring device
JP6943261B2 (en) Nurse call system
JP2021009549A (en) Watching system and watching method
JP2021015499A (en) Control device, control program and control method
JP2020135063A (en) Surveillance device and program for surveillance device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171113

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180925

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181102

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190326

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190408

R150 Certificate of patent or registration of utility model

Ref document number: 6519166

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150