JPWO2020100461A1 - Sensor device of monitored person monitoring support system, monitoring image storage method and monitored person monitoring support system - Google Patents
Sensor device of monitored person monitoring support system, monitoring image storage method and monitored person monitoring support system Download PDFInfo
- Publication number
- JPWO2020100461A1 JPWO2020100461A1 JP2020556693A JP2020556693A JPWO2020100461A1 JP WO2020100461 A1 JPWO2020100461 A1 JP WO2020100461A1 JP 2020556693 A JP2020556693 A JP 2020556693A JP 2020556693 A JP2020556693 A JP 2020556693A JP WO2020100461 A1 JPWO2020100461 A1 JP WO2020100461A1
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- event
- time
- stored
- sensor device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 134
- 238000000034 method Methods 0.000 title claims abstract description 64
- 238000012545 processing Methods 0.000 claims description 189
- 238000001514 detection method Methods 0.000 claims description 105
- 238000003384 imaging method Methods 0.000 claims description 92
- 230000005540 biological transmission Effects 0.000 claims description 46
- 230000008569 process Effects 0.000 claims description 42
- 230000004044 response Effects 0.000 claims description 12
- 238000004891 communication Methods 0.000 description 139
- 230000009471 action Effects 0.000 description 26
- 230000006870 function Effects 0.000 description 17
- 230000006399 behavior Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 230000015654 memory Effects 0.000 description 7
- 230000000474 nursing effect Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 5
- 238000012790 confirmation Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000012905 input function Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000011410 subtraction method Methods 0.000 description 2
- 240000004050 Pentaglottis sempervirens Species 0.000 description 1
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 210000000746 body region Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G12/00—Accommodation for nursing, e.g. in hospitals, not covered by groups A61G1/00 - A61G11/00, e.g. trolleys for transport of medicaments or food; Prescription lists
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/22—Social work or social welfare, e.g. community support activities or counselling services
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/04—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using a single signalling line, e.g. in a closed loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Emergency Management (AREA)
- Tourism & Hospitality (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- General Business, Economics & Management (AREA)
- Animal Behavior & Ethology (AREA)
- Economics (AREA)
- Multimedia (AREA)
- Veterinary Medicine (AREA)
- Epidemiology (AREA)
- Medical Informatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Child & Adolescent Psychology (AREA)
- Nursing (AREA)
- Signal Processing (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Theoretical Computer Science (AREA)
- Alarm Systems (AREA)
- Emergency Alarm Devices (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Accommodation For Nursing Or Treatment Tables (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本発明の被監視者監視支援システム、そのセンサ装置および監視画像保存方法は、被監視者に関わる所定のイベントを、前記被監視者に対応して設けられたセンサ装置で検知して、前記イベントを管理する中央管理装置に通知し、前記中央管理装置を介して前記センサ装置で検知されたイベントを端末装置に通知する被監視者監視支援システムにおいて、動画を生成し、前記イベントを検知した場合に、前記生成した、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信し、前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持つ動画記憶部に、前記生成した動画を保存動画として記憶する。 The monitored person monitoring support system, its sensor device, and the monitoring image storage method of the present invention detect a predetermined event related to the monitored person with a sensor device provided corresponding to the monitored person, and the event. When a moving image is generated and the event is detected in the monitored person monitoring support system that notifies the central management device that manages the above and notifies the terminal device of the event detected by the sensor device via the central management device. In the storage, the generated moving image of the predetermined first time including the time when the event is detected is transmitted to the central management device as the event moving image, and the moving image of the predetermined second time longer than the first time is stored. The generated moving image is stored as a saved moving image in a moving image storage unit having a capacity.
Description
本発明は、被監視者の監視を支援するための被監視者監視支援システムのセンサ装置、その監視画像を保存する監視画像保存方法、および、前記被監視者監視支援システムに関する。 The present invention relates to a sensor device of a monitored person monitoring support system for supporting monitoring of a monitored person, a monitoring image saving method for storing the monitored image, and the monitored person monitoring support system.
近年、超高齢社会の突入に伴って、看護業界や介護業界等の業務を補完する技術が、研究、開発されており、例えば、特許文献1に開示されている。
In recent years, with the entry of a super-aging society, technologies for complementing operations in the nursing industry, long-term care industry, etc. have been researched and developed, and are disclosed in, for example,
この特許文献1に開示されたナースコールシステムは、ベッドに設置されて患者が看護師を呼び出すためのナースコール子機と、ナースステーションに設置されて前記ナースコール子機による呼び出しに応答するためのナースコール親機とを有するナースコールシステムであって、ベッド上の患者をベッド上方から撮像するカメラと、前記カメラの撮像映像から、患者が上半身を起こした状態及び患者がベッド上から離れた状態のうち少なくとも一方の発生を判断して注意状態発生信号を出力する状態判断手段とを有し、前記ナースコール親機は、前記注意状態発生信号を受けて報知動作する報知手段を有する。そして、このナースコール親機は、映像を表示するモニタ及び前記注意状態発生信号を受信したら前記モニタに前記カメラの撮像映像を表示させる映像制御部と、映像を保存する映像記憶部とを有し、この映像制御部は、前記モニタへのカメラ撮像映像の表示に合わせて、前記カメラの撮像映像を前記映像記憶部に保存する。
The nurse call system disclosed in
前記特許文献1に開示されたナースコールシステムは、呼出操作した患者の映像が保存されるため、後から呼出時の患者の状態を把握でき、看護業務に役立つ(前記特許文献1の[0030]段落参照)。しかしながら、前記特許文献1に開示されたナースコールシステムは、患者が上半身を起こした状態および患者がベッド上から離れた状態のうち少なくとも一方の発生を判断した場合にのみ、撮像映像を保存する。このため、前記特許文献1に開示されたナースコールシステムでは、前記発生の判断をミスした場合には、すなわち、前記発生を判断すべき場合に判断できなかった場合(失報の場合)には、本来保存されるべき撮像映像が保存されないという不都合がある。また、看護業界や介護業界等の業務では、失報ではないものの、後日、患者等の様子を確認した場合もある。
Since the nurse call system disclosed in
本発明は、上述の事情に鑑みて為された発明であり、その目的は、発生時の画像を保存しながら、失報時の画像も保存できる被監視者監視支援システムのセンサ装置、監視画像保存方法および前記被監視者監視支援システムを提供することである。 The present invention has been made in view of the above circumstances, and an object of the present invention is a sensor device and a monitoring image of a monitored person monitoring support system that can save an image at the time of occurrence while also saving an image at the time of misreporting. The purpose is to provide a storage method and the monitored person monitoring support system.
上述した目的を実現するために、本発明の一側面を反映した、被監視者監視支援システム、そのセンサ装置および監視画像保存方法は、被監視者に関わる所定のイベントを、前記被監視者に対応して設けられたセンサ装置で検知して、前記イベントを管理する中央管理装置に通知し、前記中央管理装置を介して前記センサ装置で検知されたイベントを端末装置に通知する被監視者監視支援システムにおいて、動画を生成し、前記イベントを検知した場合に、前記生成した、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信し、前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持つ動画記憶部に、前記生成した動画を保存動画として記憶する。 In order to realize the above-mentioned object, the monitored person monitoring support system, its sensor device, and the monitoring image storage method, which reflect one aspect of the present invention, provide the monitored person with a predetermined event related to the monitored person. Monitored person monitoring that detects by a corresponding sensor device, notifies the central management device that manages the event, and notifies the terminal device of the event detected by the sensor device via the central management device. In the support system, when a moving image is generated and the event is detected, the generated moving image of a predetermined first time including the time when the event is detected is transmitted as an event moving image to the central management device, and the first The generated moving image is stored as a storage moving image in a moving image storage unit having a storage capacity for storing a moving image of a predetermined second time longer than one hour.
発明の1または複数の実施形態により与えられる利点および特徴は、以下に与えられる詳細な説明および添付図面から十分に理解される。これら詳細な説明及び添付図面は、例としてのみ与えられるものであり本発明の限定の定義として意図されるものではない。 The advantages and features provided by one or more embodiments of the invention are fully understood from the detailed description and accompanying drawings provided below. These detailed descriptions and accompanying drawings are given by way of example only and are not intended as a limited definition of the present invention.
以下、図面を参照して、本発明の1または複数の実施形態が説明される。しかしながら、発明の範囲は、開示された実施形態に限定されない。なお、各図において同一の符号を付した構成は、同一の構成であることを示し、適宜、その説明を省略する。本明細書において、総称する場合には添え字を省略した参照符号で示し、個別の構成を指す場合には添え字を付した参照符号で示す。 Hereinafter, one or more embodiments of the present invention will be described with reference to the drawings. However, the scope of the invention is not limited to the disclosed embodiments. It should be noted that the configurations with the same reference numerals in each figure indicate that they are the same configurations, and the description thereof will be omitted as appropriate. In the present specification, when they are generically referred to, they are indicated by reference numerals without subscripts, and when they refer to individual configurations, they are indicated by reference numerals with subscripts.
実施形態における被監視者監視支援システムは、監視すべき(見守るべき)監視対象(見守り対象)である被監視者(見守り対象者、対象者)を監視する監視者(ユーザ)の前記監視を支援するものである。この被監視者監視支援システムは、本実施形態では、被監視者に対応して設けられ、前記被監視者に関わる所定のイベントを検知するセンサ装置、前記センサ装置と通信可能に接続され、前記センサ装置で検知されたイベントの通知を受けて前記イベントを管理する中央管理装置、および、前記中央管理装置と通信可能に接続され前記中央管理装置を介して前記センサ装置で検知されたイベントの通知を受ける端末装置を備える。そして、本実施形態では、被監視者監視支援システムは、動画を生成する撮像部と、前記イベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する動画送信処理部と、前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持ち、前記撮像部で生成された動画を保存動画として記憶する動画記憶部とを備える。前記端末装置は、1種類の装置であって良いが、本実施形態態では、前記端末装置は、固定端末装置と携帯端末装置との2種類の装置である。これら固定端末装置と携帯端末装置との主な相違は、固定端末装置が固定的に運用される一方、携帯端末装置が例えば看護師や介護士等の監視者(ユーザ)に携行されて運用される点であり、これら固定端末装置と携帯端末装置とは、略同様である。一例として、前記撮像部、前記動画送信処理部および前記動画記憶部が前記センサ装置に備えられる場合について、以下、より具体的に説明する。 The monitored person monitoring support system in the embodiment supports the monitoring of the monitor (user) who monitors the monitored person (watching target person, target person) which is the monitoring target (watching target) to be monitored (watched). Is what you do. In the present embodiment, the monitored person monitoring support system is provided in response to the monitored person, and is communicably connected to a sensor device that detects a predetermined event related to the monitored person and the sensor device. A central management device that receives notification of an event detected by the sensor device and manages the event, and a notification of an event detected by the sensor device via the central management device that is communicably connected to the central management device. Equipped with a terminal device to receive. Then, in the present embodiment, the monitored person monitoring support system has a predetermined number including an imaging unit that generates a moving image and a time point when the event is detected, which is generated by the imaging unit when the event is detected. It has a moving image transmission processing unit that transmits a 1-hour moving image as an event moving image to the central management device, and a storage capacity for storing a predetermined 2nd hour moving image longer than the 1st hour, and the moving image generated by the imaging unit. It is provided with a moving image storage unit that stores the image as a saved moving image. The terminal device may be one type of device, but in the present embodiment, the terminal device is two types of devices, a fixed terminal device and a mobile terminal device. The main difference between these fixed terminal devices and mobile terminal devices is that while fixed terminal devices are operated in a fixed manner, mobile terminal devices are carried and operated by observers (users) such as nurses and caregivers, for example. The fixed terminal device and the mobile terminal device are substantially the same. As an example, a case where the image pickup unit, the moving image transmission processing unit, and the moving image storage unit are provided in the sensor device will be described more specifically below.
図1は、実施形態における被監視者監視支援システムの構成を示す図である。図2は、前記被監視者監視支援システムにおけるセンサ装置の構成を示す図である。図3は、前記被監視者監視支援システムにおける管理サーバ装置の構成を示す図である。図4は、前記管理サーバ装置に記憶されるイベント動画情報テーブルの構成を示す図である。図5は、前記管理サーバ装置に記憶される保存動画情報テーブルの構成を示す図である。 FIG. 1 is a diagram showing a configuration of a monitored person monitoring support system in the embodiment. FIG. 2 is a diagram showing a configuration of a sensor device in the monitored person monitoring support system. FIG. 3 is a diagram showing a configuration of a management server device in the monitored person monitoring support system. FIG. 4 is a diagram showing a configuration of an event moving image information table stored in the management server device. FIG. 5 is a diagram showing a configuration of a stored moving image information table stored in the management server device.
実施形態における被監視者監視支援システムMSは、被監視者Obの監視を支援するシステムであり、例えば、図1に示すように、1または複数のセンサ装置SU(SU−1〜SU−4)と、管理サーバ装置SVと、固定端末装置SPと、1または複数の携帯端末装置TA(TA−1、TA−2)と、構内交換機(PBX、Private branch exchange)CXとを備え、これらは、有線や無線で、LAN(Local Area Network)等の網(ネットワーク、通信回線)NWを介して通信可能に接続される。ネットワークNWは、通信信号を中継する例えばリピーター、ブリッジおよびルーター等の中継機が備えられても良い。図1に示す例では、これら複数のセンサ装置SU−1〜SU−4、管理サーバ装置SV、固定端末装置SP、複数の携帯端末装置TA−1、TA−2および構内交換機CXは、L2スイッチの集線装置(ハブ、HUB)LSおよびアクセスポイントAPを含む有線および無線の混在したLAN(例えばIEEE802.11規格に従ったLAN等)NWによって互いに通信可能に接続されている。より詳しくは、複数のセンサ装置SU−1〜SU−4、管理サーバ装置SV、固定端末装置SPおよび構内交換機CXは、集線装置LSに接続され、複数の携帯端末装置TA−1、TA−2は、アクセスポイントAPを介して集線装置LSに接続されている。そして、ネットワークNWは、TCP(Transmission control protocol)およびIP(Internet protocol)等のインターネットプロトコル群が用いられることによっていわゆるイントラネットを構成する。 The monitored person monitoring support system MS in the embodiment is a system that supports monitoring of the monitored person Ob, and for example, as shown in FIG. 1, one or a plurality of sensor devices SU (SU-1 to SU-4). A management server device SV, a fixed terminal device SP, one or more portable terminal devices TA (TA-1, TA-2), and a private branch exchange (PBX, Private network change) CX. It is connected by wire or wirelessly via a network (network, communication line) NW such as a LAN (Local Area Network) so that it can communicate with each other. The network NW may be provided with repeaters such as repeaters, bridges and routers that relay communication signals. In the example shown in FIG. 1, the plurality of sensor devices SU-1 to SU-4, the management server device SV, the fixed terminal device SP, the plurality of mobile terminal devices TA-1, TA-2, and the premises exchange CX are L2 switches. Concentrators (hubs, HUBs) LS and mixed wired and wireless LANs including access point APs (eg LANs according to the 802.11 standard) NWs are communicatively connected to each other. More specifically, the plurality of sensor devices SU-1 to SU-4, the management server device SV, the fixed terminal device SP, and the private branch exchange CX are connected to the line concentrator LS, and the plurality of mobile terminal devices TA-1 and TA-2 are connected. Is connected to the concentrator LS via the access point AP. Then, the network NW constitutes a so-called intranet by using a group of Internet protocols such as TCP (Transmission Control Protocol) and IP (Internet Protocol).
構内交換機(回線切換機)CXは、ネットワークNWに接続され、携帯端末装置TA同士における発信、着信および通話等の内線電話の制御を行って前記携帯端末装置TA同士の内線電話を実施し、そして、例えば固定電話網や携帯電話網等の公衆電話網PNを介して例えば固定電話機や携帯電話機等の外線電話機TLに接続され、外線電話機TLと携帯端末装置TAとの間における発信、着信および通話等の外線電話の制御を行って外線電話機TLと携帯端末装置TAとの間における外線電話を実施するものである。構内交換機CXは、例えば、デジタル交換機や、IP−PBX(Internet Protocol Private Branch eXchange)等である。 The premises exchange (line switching machine) CX is connected to the network NW, controls the extension telephones such as outgoing calls, incoming calls, and calls between the mobile terminal devices TAs, and executes the extension telephones between the mobile terminal devices TAs. , For example, is connected to an outside line telephone TL such as a fixed telephone or a mobile phone via a public telephone network PN such as a fixed telephone network or a mobile phone network, and makes, receives, and makes a call between the outside line telephone TL and the mobile terminal device TA. The outside line telephone is controlled between the outside line telephone TL and the mobile terminal device TA to carry out the outside line telephone. The private branch exchange CX is, for example, a digital exchange, an IP-PBX (Internet Protocol Private Branch eXchange), or the like.
被監視者監視支援システムMSは、被監視者Obに応じて適宜な場所に配設される。被監視者(見守り対象者)Obは、例えば、病気や怪我等によって看護を必要とする者や、身体能力の低下等によって介護を必要とする者や、一人暮らしの独居者等である。特に、早期発見と早期対処とを可能にする観点から、被監視者Obは、例えば異常状態等の所定の不都合な事象がその者に生じた場合にその発見を必要としている者であることが好ましい。このため、被監視者監視支援システムMSは、被監視者Obの種類に応じて、病院、老人福祉施設および住戸等の建物に好適に配設される。図1に示す例では、被監視者監視支援システムMSは、複数の被監視者Obが入居する複数の居室RMや、ナースステーション等の複数の部屋を備える介護施設の建物に配設されている。 The monitored person monitoring support system MS is arranged at an appropriate place according to the monitored person Ob. The monitored person (person to be watched over) Ob is, for example, a person who needs nursing care due to illness or injury, a person who needs nursing care due to deterioration of physical ability, or a person living alone. In particular, from the viewpoint of enabling early detection and early response, the monitored person Ob may be a person who needs the detection when a predetermined inconvenient event such as an abnormal state occurs in the person. preferable. Therefore, the monitored person monitoring support system MS is suitably arranged in buildings such as hospitals, welfare facilities for the elderly, and dwelling units, depending on the type of monitored person Ob. In the example shown in FIG. 1, the monitored person monitoring support system MS is arranged in a plurality of living room RMs in which a plurality of monitored person Obs move in, or in a building of a nursing care facility having a plurality of rooms such as a nurse station. ..
センサ装置SUは、ネットワークNWを介して他の装置SV、SP、TAと通信する通信機能等を備え、被監視者Obに関わる所定のイベント(事象)を、管理サーバ装置SVへ通知し、後述のイベント動画を管理サーバ装置SVへ送信し、そして、後述の保存動画を記憶する装置である。前記所定のイベント(事象)は、好適には対処が必要な所定のイベントであり、例えば、本実施形態では、被監視者Obにおける予め設定された所定の行動およびナースコールである。このため、本実施形態では、センサ装置SUは、被監視者Obにおける所定の行動を検知して検知結果を前記所定のイベントの一例として管理サーバ装置SVへ通知(送信)し、ナースコールを受け付けて前記ナースコールを前記所定のイベントの他の一例として管理サーバ装置SVへ通知(送信)し、端末装置SP、TAとの間で音声通話を行い、そして、動画を含む画像を生成して端末装置SP、TAへ動画を配信する装置である。このようなセンサ装置SUは、例えば、図2に示すように、撮像部11と、音入出力部12と、ナースコール受付操作部13と、センサ側制御処理部(SU制御処理部)14と、センサ側通信インターフェース部(SU通信IF部)15と、センサ側記憶部(SU記憶部)16とを備える。
The sensor device SU has a communication function for communicating with other devices SV, SP, TA via the network NW, and notifies a predetermined event (event) related to the monitored person Ob to the management server device SV, which will be described later. This is a device that transmits the event video of the above to the management server device SV and stores the saved video described later. The predetermined event (event) is a predetermined event that needs to be dealt with preferably, and is, for example, a predetermined action and a nurse call in the monitored person Ob in the present embodiment. Therefore, in the present embodiment, the sensor device SU detects a predetermined action in the monitored person Ob, notifies (transmits) the detection result to the management server device SV as an example of the predetermined event, and accepts the nurse call. The nurse call is notified (transmitted) to the management server device SV as another example of the predetermined event, a voice call is made with the terminal devices SP and TA, and an image including a moving image is generated and the terminal is generated. It is a device that delivers a moving image to the devices SP and TA. As shown in FIG. 2, such a sensor device SU includes, for example, an
撮像部11は、SU制御処理部14に接続され、SU制御処理部14の制御に従って、画像(画像データ)を生成する装置である。前記画像には、静止画(静止画データ)および動画(動画データ)が含まれる。撮像部11は、監視すべき監視対象である被監視者Obが所在を予定している空間(所在空間、図1に示す例では配設場所の居室(部屋)RM)を監視可能に配置され、前記所在空間を撮像対象としてその上方から撮像し、前記撮像対象を俯瞰した画像(画像データ)を生成し、前記撮像対象の画像(対象画像)をSU制御処理部14へ出力する。好ましくは、監視対象の被監視者Ob全体を撮像できる蓋然性が高いことから、撮像部11は、例えば、被監視者Obが横臥する寝具(例えばベッド等)における、被監視者Obの頭部が位置すると予定されている予め設定された頭部予定位置(通常、枕の配設位置)の直上から撮像対象を撮像できるように配設される。あるいは、例えば、前記所在空間全体を撮像できる蓋然性が高いことから、撮像部11は、天井面の略中央位置に配設される。センサ装置SUは、この撮像部11によって、被監視者Obを、被監視者Obの上方から撮像した画像、好ましくは前記頭部予定位置の直上や前記天井面の略中央位置から撮像した画像、好ましくは動画を取得する。
The
このような撮像部11は、可視光の画像を生成する装置であって良いが、比較的暗がりでも被監視者Obを監視できるように、本実施形態では、赤外線の画像を生成する装置である。このような撮像部11は、例えば、本実施形態では、撮像対象における赤外の光学像を所定の結像面上に結像する結像光学系、前記結像面に受光面を一致させて配置され、前記撮像対象における赤外の光学像を電気的な信号に変換するエリアイメージセンサ、および、エリアイメージセンサの出力を画像処理することで前記撮像対象における赤外の画像を表すデータである画像データ、好ましくは動画データを生成する画像処理部等を備えるデジタル赤外線カメラである。撮像部11の前記結像光学系は、本実施形態では、その配設された居室RM全体を撮像できる画角を持つ広角な光学系(いわゆる広角レンズ(魚眼レンズを含む))であることが好ましい。
Such an
音入出力部12は、音を入出力する回路である。すなわち、音入出力部12は、SU制御処理部14に接続され、SU制御処理部14の制御に従って音を表す電気信号に応じた音を生成して出力するための回路であって、外部の音を取得してセンサ装置SUに入力するための回路である。音入出力部12は、例えば、音の電気信号(音データ)を音の機械振動信号(音響信号)に変換するスピーカ等と、可聴領域の音の機械振動信号を電気信号に変換するマイクロフォン等とを備えて構成される。音入出力部12は、外部の音を表す電気信号をSU制御処理部14へ出力し、また、SU制御処理部14から入力された電気信号を音の機械振動信号に変換して出力する。
The sound input /
ナースコール受付操作部13は、SU制御処理部14に接続され、ナースコールを当該センサ装置SUに入力するための例えば押しボタン式スイッチ等のスイッチ回路である。なお、ナースコール受付操作部13は、有線でSU制御処理部14に接続されて良く、また、例えばBluetooth(登録商標)規格等の近距離無線通信でSU制御処理部14に接続されて良い。
The nurse call
SU通信IF部15は、SU制御処理部14に接続され、SU制御処理部14の制御に従って通信を行うための通信回路である。SU通信IF部15は、SU制御処理部14から入力された転送すべきデータを収容した通信信号を、この被監視者監視支援システムMSのネットワークNWで用いられる通信プロトコルに従って生成し、この生成した通信信号をネットワークNWを介して他の装置SV、SP、TAへ送信する。SU通信IF部15は、ネットワークNWを介して他の装置SV、SP、TAから通信信号を受信し、この受信した通信信号からデータを取り出し、この取り出したデータをSU制御処理部14が処理可能な形式のデータに変換してSU制御処理部14へ出力する。SU通信IF部15は、例えば、IEEE802.11規格等に従った通信インターフェース回路を備えて構成される。
The SU communication IF
SU記憶部16は、SU制御処理部14に接続され、SU制御処理部14の制御に従って、各種の所定のプログラムおよび各種の所定のデータを記憶する回路である。前記各種の所定のプログラムには、例えば、センサ装置SUの各部11〜13、15、16を当該各部の機能に応じてそれぞれ制御するSU制御プログラムや、被監視者Obに対する監視に関する所定の情報処理を実行するSU監視処理プログラム等の制御処理プログラムが含まれる。前記SU監視処理プログラムには、被監視者Obにおける所定の行動を検知して検知結果を前記所定のイベント(事象)の一例として管理サーバ装置SVを介して所定の端末装置SP、TAへ通知する行動検知処理プログラムや、ナースコール受付操作部13でナースコールを受け付けた場合にその旨を前記所定のイベントの他の一例として管理サーバ装置SVへ通知し、SU音入出力部12等を用いることで端末装置SP、TAとの間で音声通話を行うナースコール処理プログラムや、撮像部11で生成した動画を、その動画を要求した端末装置SP、TAへストリーミングで配信するストリーミング処理プログラムや、撮像部11で生成された動画をSU記憶部16に記憶するSU動画記憶処理プログラムや、前記イベント、本実施形態では前記複数の種類のうちの予め設定された特定の種類のイベントを検知した場合に、撮像部11で生成された、前記特定の種類のイベントを検知した時点を含む所定の第1時間の動画をイベント動画として管理サーバ装置SVへ送信する動画送信処理プログラムや、前記複数の種類のうちの、前記特定の種類を除く残余の種類のイベントを検知した場合に、前記検知したイベントに関する所定のタグ情報を、SU記憶部に記憶されている後述の保存動画に関連付けるタグ情報付与処理プログラムや、年月日時分秒で計時するSU時計プログラム等が含まれる。前記各種の所定のデータには、自機の、センサ装置SUを特定し識別するための識別子であるセンサ装置識別子(センサID)、管理サーバ装置SVの通信アドレス、撮像部11で生成された動画等の、各プログラムを実行する上で必要なデータ等が含まれる。SU記憶部16は、例えば不揮発性の記憶素子であるROM(Read Only Memory)や書き換え可能な不揮発性の記憶素子であるEEPROM(Electrically Erasable Programmable Read Only Memory)等を備える。SU記憶部16は、前記所定のプログラムの実行中に生じるデータ等を記憶するいわゆるSU制御処理部14のワーキングメモリとなるRAM(Random Access Memory)等を含む。そして、本実施形態では、SU記憶部16は、リングバッファの第1および第2リングバッファ記憶部161、162を機能的に備える。
The
第1リングバッファ記憶部161は、所定の第1時間の動画(第1時間長の動画)を記憶する記憶容量(第1記憶容量)を持ち、撮像部11で生成された動画を記憶する、いわゆるリングバッファである。このため、撮像部11で生成された動画における各フレーム(各フレームデータ)は、生成順に順次に、第1リングバッファ記憶部161の先頭アドレス(第1先頭アドレス)から最終アドレス(第1最終アドレス)まで記憶され、この第1最終アドレスに到達すると、前記第1先頭アドレスに戻って記憶される。したがって、第1リングバッファ記憶部161に記憶されてから第1時間経過後に、最も古く(最も過去に)記憶された動画のフレームが、この時点で撮像部11により生成された動画のフレームで上書きされ、自動的に消去される。前記第1時間は、例えば、30秒、60秒(1分)、2分、3分等で予め適宜に設定される。
The first ring
第2リングバッファ記憶部162は、前記第1時間より長い所定の第2時間の動画(第2時間長の動画)を記憶する記憶容量(第2記憶容量)を持ち、撮像部11で生成された動画を保存動画として記憶する、いわゆるリングバッファである。このため、撮像部11で生成された動画における各フレーム(各フレームデータ)は、生成順に順次に、第2リングバッファ記憶部162の先頭アドレス(第2先頭アドレス)から最終アドレス(第2最終アドレス)まで記憶され、この第2最終アドレスに到達すると、前記第2先頭アドレスに戻って記憶される。したがって、第2リングバッファ記憶部162に記憶されてから第2時間経過後に、最も古く(最も過去に)記憶された動画のフレームが、この時点で記憶される動画のフレームで上書きされ、自動的に消去される。前記第2時間は、後日、患者等の様子を動画で確認できるように、例えば、1日、3日および6日等で予め適宜に設定される。そして、撮像部11で生成された動画が制御処理部14によって撮像部11から直接的に第2リングバッファ記憶部162に記憶されても良いが、本実施形態では、制御処理部14によって第1リングバッファ記憶部161に記憶された動画が第2リングバッファ記憶部162に記憶される。
The second ring
第1および第2リングバッファ記憶部161、162は、それぞれ、物理的に記憶素子をリング状に配置して構成されても良いが、現実的ではないので、第1リングバッファ記憶部161は、RAMに第1記憶容量で第1リングバッファ記憶部161用に記憶領域(第1記憶領域)が確保され、この第1記憶領域の第1先頭アドレスと第1最終アドレスとを繋げることで論理的に構成され、同様に、第2リングバッファ記憶部162は、RAMに第2記憶容量で第2リングバッファ記憶部162用に記憶領域(第2記憶領域)が確保され、この第2記憶領域の第2先頭アドレスと最終アドレスとを繋げることで論理的に構成される。
The first and second ring
SU制御処理部14は、センサ装置SUの各部11〜13、15、16を当該各部の機能に応じてそれぞれ制御し、被監視者Obに関わる所定のイベント(事象)を、管理サーバ装置SVへ通知し、イベント動画を管理サーバ装置SVへ送信し、そして、保存動画を記憶するための回路である。より具体的には、本実施形態では、SU制御処理部14は、被監視者Obにおける所定の行動を検知してその検知結果を前記所定のイベントの一例として管理サーバ装置SVへ通知(報知、送信)し、ナースコールを受け付けてそのナースコールを前記所定のイベントの他の一例として管理サーバ装置SVへ通知(報知、送信)し、端末装置SP、TAとの間で音声通話を行い、動画を含む画像を生成して端末装置SP、TAへ動画を配信し、特定の種類のイベントを検知するとイベント動画を管理サーバ装置SVへ送信し、そして、保存動画を記憶する。SU制御処理部14は、例えば、CPU(Central Processing Unit)およびその周辺回路を備えて構成される。SU制御処理部14は、前記制御処理プログラムが実行されることによって、センサ側制御部(SU制御部)141、行動検知処理部142、ナースコール処理部143、ストリーミング処理部144、センサ側動画記憶処理部(SU動画記憶処理部)145、動画送信処理部146、タグ情報付与処理部147およびセンサ側時計部(SU時計部)148を機能的に備える。
The SU
SU制御部141は、センサ装置SUの各部11〜13、15、16を当該各部の機能に応じてそれぞれ制御し、センサ装置SUの全体制御を司るものである。
The
行動検知処理部142は、被監視者Obにおける、予め設定された所定の行動を検知して検知結果を前記所定のイベントの一例として管理サーバ装置SVへ通知するものである。より具体的には、本実施形態では、前記所定の行動は、例えば、被監視者Obが起きた起床、被監視者Obが寝具から離れた離床、被監視者Obが寝具から落ちた転落、および、被監視者Obが倒れた転倒の4つの行動である。そして、行動検知処理部142は、例えば、撮像部11で撮像した対象画像に基づいて被監視者Obの頭部を検出し、この検出した被監視者Obの頭部における大きさの時間変化に基づいて被監視者Obの起床、離床、転倒および転落を検知する。より詳しくは、まず、寝具BDの所在領域、第1閾値Th1、第2閾値Th2および第3閾値Th3が前記各種の所定のデータの1つとして予めSU記憶部16に記憶される。前記第1閾値Th1は、寝具BDの所在領域内における横臥姿勢の頭部の大きさと座位姿勢の頭部の大きさとを識別するための閾値である。前記第2閾値Th2は、寝具BDの所在領域を除く居室RM内における立位姿勢の頭部の大きさであるか否かを識別するための閾値である。前記第3閾値Th3は、寝具BDの所在領域を除く居室RM内における横臥姿勢の頭部の大きさであるか否かを識別するための閾値である。そして、行動検知処理部142は、対象画像から例えば背景差分法やフレーム差分法によって被監視者Obの人物の領域として動体領域を抽出する。次に、行動検知処理部142は、この抽出した動体領域から、例えば円形や楕円形のハフ変換によって、また例えば予め用意された頭部のモデルを用いたパターンマッチングによって、また例えば頭部検出用に学習したニューラルネットワークによって、被監視者Obの頭部領域を抽出する。次に、行動検知処理部142は、この抽出した頭部の位置および大きさから起床、離床、転倒および転落を検知する。例えば、行動検知処理部142は、この抽出した頭部の位置が寝具BDの所在領域内であって、前記抽出した頭部の大きさが前記第1閾値Th1を用いることによって横臥姿勢の大きさから座位姿勢の大きさへ時間変化した場合には、起床と判定し、前記起床を検知する。例えば、行動検知処理部142は、この抽出した頭部の位置が寝具BDの所在領域内から寝具の所在領域外へ時間変化した場合であって、前記抽出した頭部の大きさが前記第2閾値Th2を用いることによって或る大きさから立位姿勢の大きさへ時間変化した場合には、離床と判定し、前記離床を検知する。例えば、行動検知処理部142は、この抽出した頭部の位置が寝具BDの所在領域内から寝具BDの所在領域外へ時間変化した場合であって、前記抽出した頭部の大きさが前記第3閾値Th3を用いることによって或る大きさから横臥姿勢の大きさへ時間変化した場合には、転落と判定し、前記転落を検知する。例えば、行動検知処理部142は、この抽出した頭部の位置が寝具BDの所在領域を除く居室RM内であって、前記抽出した頭部の大きさが前記第3閾値Th3を用いることによって或る大きさから横臥姿勢の大きさへ時間変化した場合には、転倒と判定し、前記転倒を検知する。
The action
このように前記所定の行動を検知すると、行動検知処理部142は、被監視者Obに関わる所定のイベント(事象)の内容を表すイベント情報(事象情報)を収容した、前記イベントを通知するための通信信号(第1イベント通知通信信号)をSU通信IF部15で管理サーバ装置SVへ通知する。より詳しくは、行動検知処理部142は、自機のセンサID、前記イベントの内容を表すイベント情報、前記所定の行動を検知した時刻(検知時刻)、前記所定の行動の検知に用いられた対象画像を収容した第1イベント通知通信信号を、SU通信IF部15を介して管理サーバ装置SVへ送信する。前記イベント情報は、本実施形態では、起床、離床、転落、転倒およびナースコール(NC)のうちの1または複数であり、ここでは、行動検知処理部142は、検知した起床、離床、転落および転倒のうちの1または複数を前記イベント情報として第1イベント通知通信信号に収容する。前記画像は、静止画および動画のうちの少なくとも一方であって良く、本実施形態では、まず、静止画が報知され、ユーザの要求に応じて動画が配信される。なお、まず、動画が配信されても良く、また、静止画および動画が送信され、画面分割で静止画および動画が端末装置SP、TAに表示されても良い。
When the predetermined action is detected in this way, the action
ナースコール処理部143は、ナースコール受付操作部13でナースコールを受け付けた場合にその旨を前記所定のイベントの他の一例として収容した第1イベント通知通信信号を管理サーバ装置SVへ通知し、音入出力部12等を用いることで端末装置SP、TAとの間で音声通話を行うものである。より具体的には、ナースコール処理部143は、ナースコール受付操作部13が入力操作されると、自機のセンサID、前記ナースコールを検知した時刻(検知時刻)、および、前記イベント情報としてナースコールを収容した第1イベント通知通信信号をSU通信IF部15を介して管理サーバ装置SVへ送信する。そして、ナースコール処理部143は、音入出力部12等を用い、端末装置SP、TAとの間で例えばVoIP(Voice over Internet Protocol)によって音声通話を行う。
When the nurse call
ストリーミング処理部144は、SU通信IF部15を介して固定端末装置SPまたは携帯端末装置TAから動画の配信の要求があった場合に、この要求のあった固定端末装置SPまたは携帯端末装置TAへ、撮像部11で生成した動画(例えばライブの動画)をストリーミング再生でSU通信IF部15を介して配信するものである。
When the
SU動画記憶処理部145は、撮像部11で生成された動画をSU記憶部16に記憶するものである。より具体的には、SU動画記憶処理部145は、撮像部11で生成された動画をSU記憶部16の第1リングバッファ記憶部161に記憶し、撮像部11で生成された動画を保存動画としてSU記憶部16の第2リングバッファ記憶部162に記憶する。より詳しくは、まず、SU動画記憶処理部145は、撮像部11で生成された動画における各フレーム(各フレームデータ)を、生成順に順次に、第1リングバッファ記憶部161の第1先頭アドレスから第1最終アドレスまで記憶し、この第1最終アドレスに到達すると、前記第1先頭アドレスに戻って記憶する。そして、SU動画記憶処理部145は、前記第1時間の経過ごとに第1リングバッファ記憶部161に記憶された第1時間の動画を読み出し、この読み出した前記第1時間の動画を前記保存動画として第2リングバッファ記憶部162に記憶する。すなわち、SU動画記憶処理部145は、撮像部11で生成された動画の各フレームを、生成順に順次に、第1リングバッファ記憶部161の第1先頭アドレスから第1最終アドレスまで記憶し、この第1最終アドレスに到達すると、第1リングバッファ記憶部161に記憶されている第1時間の動画を、前記保存動画として第2リングバッファ記憶部162に記憶する。したがって、第2リングバッファ記憶部162には、前記第1時間の経過ごとに第1リングバッファ記憶部161に記憶された第1時間の動画が、順次に、第2リングバッファ記憶部162の第2先頭アドレスから第2最終アドレスまで記憶され、この第2最終アドレスに到達すると、前記第2先頭アドレスに戻って記憶される。
The SU moving image
動画送信処理部146は、前記イベント、本実施形態では前記複数の種類のうちの予め設定された特定の種類のイベントを検知した場合に、撮像部11で生成された、前記特定の種類のイベントを検知した時点を含む所定の第1時間の動画をイベント動画として管理サーバ装置SVへ送信するものである。前記イベントにおける複数の種類は、上述したように、本実施形態では、起床、離床、転落、転倒およびナースコールである。前記特定の種類は、この中から適宜に予め設定される。本実施形態では、イベントの重要性が考慮さされ、前記特定の種類として転落および転倒が設定される。前記イベント動画は、前記特定の種類のイベントを検知した時点(検知時刻)から第1時間だけ遡った(過去の)動画であって良いが、本実施形態では、前記イベントを検知した時点より前に撮像部11で生成された動画(検知前動画)と、前記イベントを検知した時点以後に前記撮像部11で生成された動画(検知後動画)とを含む。これら検知前動画および検知後動画の各時間長は、同一であっても異なっても良い。一例では、前記第1時間が60秒である場合に、各時間長は、30秒であり、あるいは、イベントに至る過程を重視する観点から、検知前動画の時間長が45秒であり検知後動画の時間長が15秒であり、あるいは、イベント後の被監視者Obや監視者の様子の確認を重視する観点から、検知前動画の時間長が15秒であり検知後動画の時間長が45秒である。したがって、本実施形態では、動画送信処理部146は、転落が行動検知処理部142で検知されると、この検知した時点から前記第1時間より短い所定の第7時間(上述の例では30秒や45秒や15秒)の経過後に、第1リングバッファ記憶部161に記憶された第1時間の動画を読み出し、この読み出した前記第1時間の動画を前記イベント動画として管理サーバ装置SVへ送信する。そして、動画送信処理部146は、転倒が行動検知処理部142で検知されると、この検知した時点から前記第7時間の経過後に、第1リングバッファ記憶部161に記憶された第1時間の動画を読み出し、この読み出した前記第1時間の動画を前記イベント動画として管理サーバ装置SVへ送信する。このイベント動画の送信では、自機のセンサID、イベント動画の送信に起因したイベントのイベント情報、前記イベントの検知時刻、および、前記イベント動画を収容する通信信号(イベント動画通知通信信号)が管理サーバ装置SVへ送信される。
When the moving image
さらに、本実施形態では、動画送信処理部146は、第2リングバッファ記憶部162に記憶されている保存動画を管理サーバ装置SVへ送信する。より具体的には、動画送信処理部146は、前記第2時間の経過ごとに第2リングバッファ記憶部162に記憶された第2時間の保存動画を読み出し、この読み出した前記第2時間の保存動画を管理サーバ装置SVへ送信する。すなわち、前記第1時間の経過ごとに第1リングバッファ記憶部161に記憶された第1時間の動画が、順次に、第2リングバッファ記憶部162の第2先頭アドレスから第2最終アドレスまで記憶され、この第2最終アドレスに到達すると、動画送信処理部146は、第2リングバッファ記憶部162に記憶された第2時間の保存動画を読み出し、この読み出した前記第2時間の保存動画を管理サーバ装置SVへ送信する。この保存動画の送信では、自機のセンサIDおよび前記第2時間の保存動画を収容する通信信号(保存動画通知通信信号)が管理サーバ装置SVへ送信される。
Further, in the present embodiment, the moving image
タグ情報付与処理部147は、前記複数の種類のうちの、前記特定の種類を除く残余の種類のイベントを検知した場合に、前記検知したイベントに関する所定のタグ情報を、SU記憶部16に記憶されている保存動画に関連付けるものである。上述のように、本実施形態では、前記特定の種類は、転落および転倒であるので、前記残余の種類は、起床、離床およびナースコールである。前記タグ情報は、予め適宜に設定され、例えば、本実施形態では、前記検知したイベントのイベント情報および検知時刻である。したがって、タグ情報付与処理部147は、起床が行動検知処理部142で検知されると、前記タグ情報として起床およびその検知時刻を保存動画に関連付け、離床が行動検知処理部142で検知されると、前記タグ情報として離床およびその検知時刻を保存動画に関連付け、ナースコールがナースコール処理部143で検知されると、前記タグ情報としてナースコールおよびその検知時刻を保存動画に関連付ける。前記タグ情報の関連付けでは、例えば、タグ情報を記憶した電子ファイルがSU記憶部16に記憶され、第2リングバッファ記憶部162に記憶された第2時間の保存動画が上述のように管理サーバ装置SVへ送信される際に、前記保存動画通知通信信号にタグ情報の前記電子ファイルもさらに収容され、前記保存動画通知通信信号の送信後に、タグ情報の前記電子ファイルがSU記憶部16から消去される。あるいは、例えば、タグ情報が保存動画のデータに組み込まれて収容される。このようなメタデータ(本実施形態ではタグ情報)を収容できる動画データは、例えば、mp4形式である。
When the tag information
SU時計部148は、年月日時分秒で計時するものである。
The
図1には、一例として、第1ないし第4センサ装置SU−1〜SU−4が示されており、第1センサ装置SU−1は、被監視者Obの一人であるAさんOb−1の居室RM−1(不図示)に配設され、第2センサ装置SU−2は、被監視者Obの一人であるBさんOb−2の居室RM−2(不図示)に配設され、第3センサ装置SU−3は、被監視者Obの一人であるCさんOb−3の居室RM−3(不図示)に配設され、そして、第4センサ装置SU−4は、被監視者Obの一人であるDさんOb−4の居室RM−4(不図示)に配設されている。 In FIG. 1, the first to fourth sensor devices SU-1 to SU-4 are shown as an example, and the first sensor device SU-1 is Mr. A Ob-1 who is one of the monitored persons Ob. The second sensor device SU-2 is arranged in the living room RM-2 (not shown) of Mr. B Ob-2, who is one of the monitored persons Ob, and is arranged in the living room RM-2 (not shown). The third sensor device SU-3 is arranged in the living room RM-3 (not shown) of Mr. C Ob-3, who is one of the monitored persons Ob, and the fourth sensor device SU-4 is the monitored person. It is arranged in the living room RM-4 (not shown) of Mr. D Ob-4, who is one of the Obs.
なお、本実施形態は、第1時間と、前記第1時間以上であって前記第2時間未満である所定の第3時間と、前記第3時間以下の所定の第4時間とが、同一の前記第1時間である場合の実施形態であり、第1リングバッファ記憶部161は、前記第1時間以上であって前記第2時間未満である所定の第3時間の動画を記憶する記憶容量を持ち、前記撮像部で生成された動画を記憶するリングバッファの記憶部の一例に相当する。第2リングバッファ記憶部162は、前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持ち、前記撮像部で生成された動画を保存動画として記憶する動画記憶部の一例に相当する。SU動画記憶処理部145は、前記第3時間以下の所定の第4時間の経過ごとに前記リングバッファの記憶部に記憶された第4時間の動画を読み出し、前記読み出した前記第4時間の動画を前記保存動画として前記動画記憶部に記憶する動画記憶処理部の一例に相当する。
In this embodiment, the first hour, the predetermined third hour that is equal to or greater than the first hour and less than the second hour, and the predetermined fourth hour that is equal to or less than the third hour are the same. In the case of the first time, the first ring
管理サーバ装置SVは、ネットワークNWを介して他の装置SU、TA、SPと通信する通信機能を備え、センサ装置SUから前記所定のイベントの通知を受けると、被監視者Obに対する監視に関する情報(監視情報(本実施形態では例えば前記所定のイベント(センサ装置SUで検知した所定の行動の種類やセンサ装置SUで受け付けたナースコール)、被監視者Obの画像(静止画および動画)、および、前記検知時刻等))を管理し、前記所定のイベントを所定の端末装置SP、TAへ通知(再通知、再報知、送信)し、クライアント(本実施形態では端末装置SP、TA等)の要求に応じたデータを前記クライアントに提供し、被監視者監視支援システムMS全体を管理する装置である。そして、本実施形態では、管理サーバ装置SVは、センサ装置SUから受信したイベント動画や保存動画も管理する。このような管理サーバ装置SVは、例えば、図3に示すように、サーバ側通信インターフェース部(SV通信IF部)21と、サーバ側制御処理部(SV制御処理部)22と、サーバ側記憶部(SV記憶部)23とを備える。 The management server device SV has a communication function for communicating with other devices SU, TA, and SP via the network NW, and when the sensor device SU notifies the predetermined event, the information regarding the monitoring of the monitored person Ob ( Monitoring information (in the present embodiment, for example, the predetermined event (type of predetermined action detected by the sensor device SU or a nurse call received by the sensor device SU), an image (still image and moving image) of the monitored person Ob, and The detection time, etc.)) is managed, the predetermined event is notified (re-notification, re-notification, transmission) to the predetermined terminal device SP, TA, and the request of the client (terminal device SP, TA, etc. in the present embodiment) is performed. This is a device that provides the client with data according to the above and manages the entire monitored person monitoring support system MS. Then, in the present embodiment, the management server device SV also manages the event video and the stored video received from the sensor device SU. As shown in FIG. 3, such a management server device SV includes, for example, a server-side communication interface unit (SV communication IF unit) 21, a server-side control processing unit (SV control processing unit) 22, and a server-side storage unit. (SV storage unit) 23 is provided.
SV通信IF部21は、SU通信IF部15と同様に、SV制御処理部22に接続され、SV制御処理部22の制御に従って通信を行うための通信回路である。SV通信IF部21は、例えば、IEEE802.11規格等に従った通信インターフェース回路を備えて構成される。
Like the SU communication IF
SV記憶部23は、SV制御処理部22に接続され、SV制御処理部22の制御に従って、各種の所定のプログラムおよび各種の所定のデータを記憶する回路である。前記各種の所定のプログラムには、例えば、管理サーバ装置SVの各部21、23を当該各部の機能に応じてそれぞれ制御するSV制御プログラムや、被監視者Obに対する監視に関する所定の情報処理を実行する監視処理プログラムや、センサ装置SUから受信したイベント動画や保存動画に対する記憶(記録)に関する所定の記憶処理を実行するSV動画記憶処理プログラムや、年月日時分秒で計時を行うSV時計プログラム等の制御処理プログラムが含まれる。前記各種の所定のデータには、自機の、管理サーバ装置SVを特定し管理サーバ装置SVを識別するためのサーバ識別子(サーバID)や、被監視者Obの前記監視情報や、前記所定のイベント(事象)の通知先等の装置SU、SP、TA間の情報を表す装置間情報や、センサ装置SUに関するセンサ情報や、端末装置SP、TAに関する端末情報や前記イベント動画や前記保存動画等の各プログラムを実行する上で必要なデータ等が含まれる。これら監視情報、装置間情報、センサ情報、端末情報、イベント動画および保存動画それぞれを記憶するために、SV記憶部23は、監視情報記憶部231、装置間情報記憶部232、センサ情報記憶部233、端末情報記憶部234、イベント動画記憶部235および保存動画記憶部236を機能的に備える。
The
SV監視情報記憶部231は、各装置SU、SP、TAそれぞれとの間で送受信した被監視者Obの監視情報を記憶するものである。より具体的には、SV監視情報記憶部231には、本実施形態では、前記監視情報として、第1イベント通知通信信号等の通信信号に収容された各情報に基づいて、センサID、イベント情報(事象情報、本実施形態では起床、離床、転落、転倒およびナースコール)、検知時刻、対象画像、ライブ動画の取得先としてセンサ装置SUの通信アドレスおよび対処の有無(対応の受付の有無)が互いに対応付けて記憶される。前記対処の有無は、端末装置SP、TAで受信した通信信号に収容されたイベント情報に対する対処(対応、処置、措置)する意思が前記端末装置SP、TAを扱う監視者にある旨を、前記端末装置SP、TAで受け付けたか否かを表す情報である。
The SV monitoring
装置間情報記憶部232は、前記装置間情報として、本実施形態では、センサ装置SUから送信された第1イベント通知通信信号等の通知先(再通知先、再報知先、送信先)を示す、送信元であるセンサIDと通知先(再通知先)である端末IDとの対応関係(通知先対応関係)、および、各装置SU、SP、TAのID(センサID、端末ID)とその通信アドレスとの対応関係(通信アドレス対応関係)等を記憶するものである。前記端末IDは、端末装置SP、TAを特定し端末装置SP、TAを識別するための端末識別子である。
In the present embodiment, the inter-device
なお、センサID、サーバIDおよび端末IDそれぞれは、例えば所定の記号列から成るシリアル番号等であって良く、また例えば通信アドレスであって良い(この場合通信アドレス対応関係は省略できる)。 Each of the sensor ID, the server ID, and the terminal ID may be, for example, a serial number consisting of a predetermined symbol string or the like, or may be, for example, a communication address (in this case, the communication address correspondence relationship can be omitted).
センサ情報記憶部233は、前記センサ情報を記憶するものである。本実施形態では、前記センサ情報は、センサ装置SUに関する情報であり、センサ装置SUのセンサIDと被監視者Obの被監視者名とを互いに対応付けた情報である。
The sensor
端末情報記憶部234は、前記端末情報として、本実施形態では、端末装置SP、TAにログインしている監視者(ユーザ)(端末装置SP、TAを扱っている監視者)を示すログイン監視者情報、および、監視者の勤務状況(勤務シフト、勤務時間)を示す監視者勤務情報等を記憶するものである。
In the present embodiment, the terminal
イベント動画記憶部235は、イベント動画を記憶するものである。本実施形態では、イベント動画記憶部235は、イベント動画の電子ファイルと前記イベント動画における所定の属性情報(イベント動画属性情報)と記憶する。前記イベント動画属性情報は、本実施形態では、例えば、図4に示すようにテーブル形式でイベント動画記憶部235に記憶される。図4に示すイベント動画属性情報テーブルITは、イベント動画通知通信信号に収容されたセンサID、イベント情報および検知時刻、ならびに、イベント動画通知通信信号に収容されたイベント動画のファイル名(イベント動画ファイル名)それぞれを登録するセンサIDフィールド2351、イベントフィールド2352、検知時刻フィールド2353およびイベント動画ファイル名フィールド2354を備え、イベント動画(イベント動画ファイル名)ごとにレコードを持つ。イベント動画属性情報を参照することで、イベント動画に関わる被監視者(センサID)、検知されたイベントの種類(イベント情報)および検知時刻が認識できる(だれが、どんなイベントを、いつ起こしたかが認識できる)。なお、検知時刻フィールド2353には、前記検知時刻に代え、前記受信したイベント動画通知通信信号の受信時刻が登録されても良い。
The event
保存動画記憶部236は、保存動画を記憶するものである。本実施形態では、保存動画記憶部236は、保存動画の電子ファイルと前記保存動画における所定の属性情報(保存動画属性情報)と記憶する。前記保存動画属性情報は、本実施形態では、例えば、図5に示すようにテーブル形式で保存動画記憶部236に記憶される。図5に示す保存動画属性情報テーブルLTは、保存動画通知通信信号に収容されたセンサID、および、保存動画通知通信信号に収容された保存動画のファイル名(保存動画ファイル名)それぞれを登録するセンサIDフィールド2361および保存動画ファイル名フィールド2364を備え、保存動画(保存動画ファイル名)ごとにレコードを持つ。そして、本実施形態では、保存動画通知通信信号にタグ情報が収容されている場合が考慮され、保存動画属性情報テーブルLTは、さらに、保存動画通知通信信号に収容されたタグ情報におけるイベント情報および検知時刻それぞれを登録するイベントフィールド2362および検知時刻フィールド2363を備える。なお、本実施形態では、所定の時間の経過後に保存動画を消去するために、保存動画通知通信信号にタグ情報が収容されていない場合、検知時刻フィールド2363には、前記保存動画通知通信信号の受信時刻が登録される。また、保存動画通知通信信号にタグ情報が収容されている場合でも、検知時刻フィールド2363には、前記検知時刻に代え、前記保存動画通知通信信号の受信時刻が登録されても良い。保存動画属性情報を参照することで、保存動画に関わる被監視者(センサID)および受信時刻が認識でき、保存動画通知通信信号にタグ情報が収容されていた場合には、さらに、前記保存動画に関わる、検知されたイベントの種類(イベント情報)および検知時刻が認識できる。
The stored moving
SV制御処理部22は、管理サーバ装置SVの各部21、23を当該各部の機能に応じてそれぞれ制御し、センサ装置SUから前記所定のイベントの通知を受けると、被監視者Obに対する監視に関する監視情報を管理し、前記所定のイベントを所定の端末装置SP、TAへ通知(再通知、再報知、送信)し、クライアントの要求に応じたデータを前記クライアントに提供し、被監視者監視支援システムMS全体を管理するための回路である。そして、本実施形態では、SV制御処理部22は、センサ装置SUから受信したイベント動画や保存動画も管理する。SV制御処理部22は、例えば、CPUおよびその周辺回路を備えて構成される。SV制御処理部22は、前記制御処理プログラムが実行されることによって、サーバ側制御部(SV制御部)221、監視処理部222、サーバ側動画記憶処理部(SV動画記憶処理部)223およびサーバ側時計部(SV時計部)224を機能的に備える。
The SV
SV制御部221は、管理サーバ装置SVの各部21、23を当該各部の機能に応じてそれぞれ制御し、管理サーバ装置SVの全体制御を司るものである。
The
監視処理部222は、センサ装置SUから前記所定のイベントの通知を受信すると被監視者Obに対する監視に関する監視情報を管理し、前記所定のイベントを所定の端末装置SP、TAへ通知するものである。より具体的には、監視処理部222は、センサ装置SUから前記第1イベント通知通信信号を受信すると、この受信した第1イベント通知通信信号に収容された、被監視者Obに対する監視に関する監視情報をSV監視情報記憶部231に記憶(記録)する。監視処理部222は、前記受信した第1イベント通知通信信号を送信したセンサ装置SUに対応する通知先(再通知先、転送先、送信先)を、装置間情報記憶部232に記憶された前記通知先対応関係から選定(検索)し、これら選定結果に基づいて第2イベント通知通信信号を生成し、この生成した第2イベント通知通信信号をSV通信IF部21で送信する。この通知先の端末装置SP、TAの選定(検索処理)は、前記受信した第1イベント通知通信信号を送信したセンサ装置SUに対応するセンサIDに基づいて実施される。前記第1イベント通知通信信号に収容されたイベント情報が前記所定の行動(起床、離床、転落および転倒のうちの1または複数)である場合には、前記第2イベント通知通信信号には、第1イベント通知通信信号に収容されたセンサID、イベント情報および対象画像、ならびに、動画のダウンロード先として、第1イベント通知通信信号に収容されたセンサIDを持つセンサ装置SUに対応する通信アドレスが収容される。前記第1イベント通知通信信号に収容されたイベント情報が前記ナースコールである場合には、前記第2イベント通知通信信号には、第1イベント通知通信信号に収容されたセンサIDおよびイベント情報が収容される。
When the
SV動画記憶処理部223は、センサ装置SUから受信したイベント動画や保存動画に対する記憶(記録)に関する所定の記憶処理を実行するものである。
The SV moving image
より具体的には、まず、イベント動画通知通信信号が受信されると、SV動画記憶処理部223は、この受信したイベント動画通知通信信号に収容されたイベント動画をSV記憶部23のイベント動画記憶部235に記憶する。なお、イベント動画の電子ファイルにファイル名(イベント動画ファイル名)が無い場合には、SV動画記憶処理部223は、所定のファイル名(例えば、イベント動画であることを表す符号列と最初に受信したイベント動画から順に割り振られた通し番号とから成るファイル名等)を付して前記イベント動画をイベント動画記憶部235に記憶する。そして、SV動画記憶処理部223は、イベント動画記憶部235に記憶されているイベント動画属性情報テーブルITにレコードを新たに追加し、この追加したレコードにおけるセンサIDフィールド2351、イベントフィールド2352および検知時刻フィールド2353それぞれに、前記受信したイベント動画通知通信信号に収容されたセンサID、イベント情報および検知時刻それぞれを登録し、この追加したレコードにおけるイベント動画ファイル名フィールド2354に、前記受信したイベント動画通知通信信号に収容されたイベント動画のイベント動画ファイル名を登録する。
More specifically, first, when the event video notification communication signal is received, the SV video
一方、保存動画通知通信信号が受信されると、SV動画記憶処理部223は、この受信した保存動画通知通信信号に収容された保存動画をSV記憶部23の保存動画記憶部236に記憶する。なお、保存動画の電子ファイルにファイル名(保存動画ファイル名)が無い場合には、SV動画記憶処理部223は、所定のファイル名(例えば、保存動画であることを表す符号列と最初に受信したイベント動画から順に割り振られた通し番号とから成るファイル名等)を付して前記保存動画を保存動画記憶部236に記憶する。そして、SV動画記憶処理部223は、保存動画記憶部236に記憶されている保存動画属性情報テーブルLTにレコードを新たに追加し、この追加したレコードにおけるセンサIDフィールド2351に、前記受信したイベント動画通知通信信号に収容されたセンサIDを登録し、この追加したレコードにおける保存動画ファイル名フィールド2364に、前記受信した保存動画通知通信信号に収容された保存動画の保存動画ファイル名を登録する。そして、前記受信したイベント動画通知通信信号にタグ情報が収容されている場合には、SV動画記憶処理部223は、前記新たに追加したレコードにおけるイベントフィールド2362および検知時刻フィールド2363それぞれに、前記受信した保存動画通知通信信号に収容されたタグ情報におけるイベント情報および検知時刻それぞれを登録し、前記受信したイベント動画通知通信信号にタグ情報が収容されていない場合には、SV動画記憶処理部223は、前記新たに追加したレコードにおける検知時刻フィールド2363に、前記受信した保存動画通知通信信号の受信時刻を登録する。
On the other hand, when the stored video notification communication signal is received, the SV video
さらに、本実施形態では、SV動画記憶処理部223は、センサ装置SUからイベント動画を受信した受信時刻または前記イベント動画に関わるイベントの検知時刻から、前記第2時間より長い所定の第5時間の経過後に、前記イベント動画をイベント動画記憶部235から消去する。より具体的には、SV動画記憶処理部223は、例えば日付が切り替わる午前0時等の、1日のうちで予め設定された時刻になると、イベント動画属性情報テーブルITにおける検知時刻フィールド2353に登録されている検知時刻または受信時刻を参照し、この参照結果、検知時刻フィールド2353に登録されている検知時刻または受信時刻から前記第5時間を経過している場合には、このレコードにおけるイベント動画ファイル名フィールド2354に登録されているイベント動画ファイル名を持つイベント動画の電子ファイルをイベント動画記憶部235から消去し、このレコードをイベント動画属性情報テーブルITから削除(消去)する。前記第5時間は、イベント動画の保存期間等を考慮することによって、例えば1ヶ月、3ヶ月および6ヶ月等で予め適宜に設定される。そして、SV動画記憶処理部223は、センサ装置SUから保存動画を受信した受信時刻または前記保存動画に関わるイベントの検知時刻から、前記第2時間より長い所定の第6時間の経過後に、保存動画記憶部236に記憶されていた保存動画を保存動画記憶部236から消去する。より具体的には、SV動画記憶処理部223は、例えば日付が切り替わる午前0時等の、1日のうちで予め設定された時刻になると、保存動画属性情報テーブルLTにおける検知時刻フィールド2363に登録されている検知時刻または受信時刻を参照し、この参照結果、検知時刻フィールド2363に登録されている検知時刻または受信時刻から前記第6時間を経過している場合には、このレコードにおける保存動画ファイル名フィールド2364に登録されている保存動画ファイル名を持つ保存動画の電子ファイルを保存動画記憶部236から消去し、このレコードを保存動画属性情報テーブルLTから削除(消去)する。前記第6時間は、保存動画の保存期間等を考慮することによって、例えば1ヶ月、3ヶ月および6ヶ月等で予め適宜に設定される。なお、前記第5時間と前記第6時間とは、互いに同じであって良く、また、互いに異なっていても良い。
Further, in the present embodiment, the SV video
SV時計部224は、年月日時分秒で計時を行うものである。
The
なお、管理サーバ装置SVは、図3に破線で示すように、必要に応じて、さらに、SV制御処理部22に接続され例えば各種コマンドや各種データ等を入力するサーバ側入力部(SV入力部)24、SV入力部24で入力された各種コマンドや各種データおよび被監視者Obに対する監視に関する監視情報等を出力するサーバ側出力部(SV出力部)25、および、外部機器との間でデータの入出力を行うサーバ側インターフェース部(SVIF部)26等を備えても良い。
As shown by the broken line in FIG. 3, the management server device SV is further connected to the SV
このような管理サーバ装置SVは、例えば、通信機能付きのコンピュータによって構成可能である。 Such a management server device SV can be configured by, for example, a computer having a communication function.
この管理サーバ装置SVは、中央処理装置の一例に相当する。SV動画記憶処理部223は、前記センサ装置から前記イベント動画を受信した受信時刻または前記イベント動画に関わるイベントの検知時刻から、前記第2時間より長い所定の第5時間の経過後に、前記イベント動画をイベント動画記憶部から消去するイベント動画消去処理部の一例に相当する。そして、SV動画記憶処理部223は、前記センサ装置から前記保存動画を受信した受信時刻または前記保存動画に関わるイベントの検知時刻から、前記第2時間より長い所定の第6時間の経過後に、前記保存動画記憶部に記憶されていた保存動画を前記保存動画記憶部から消去する保存動画消去処理部の一例にも相当する。
This management server device SV corresponds to an example of a central processing unit. The SV moving image
固定端末装置SPは、ネットワークNWを介して他の装置SU、SV、TAと通信する通信機能、所定の情報を表示する表示機能、および、所定の指示やデータを入力する入力機能等を備え、管理サーバ装置SVや携帯端末装置TAに与える所定の指示やデータを入力したり、管理サーバ装置SVからの通知によってセンサ装置SUで得られた監視情報を表示したり等することによって、被監視者監視支援システムMSのユーザインターフェース(UI)として機能する機器である。本実施形態では、固定端末装置SPは、ユーザによって指定されたイベント動画や保存動画も表示する。このような固定端末装置SPは、例えば、通信機能付きのコンピュータによって構成可能である。 The fixed terminal device SP includes a communication function for communicating with other devices SU, SV, and TA via a network NW, a display function for displaying predetermined information, an input function for inputting predetermined instructions and data, and the like. The person to be monitored by inputting predetermined instructions and data given to the management server device SV and the mobile terminal device TA, displaying the monitoring information obtained by the sensor device SU by the notification from the management server device SV, and the like. It is a device that functions as a user interface (UI) of the monitoring support system MS. In the present embodiment, the fixed terminal device SP also displays an event video and a saved video specified by the user. Such a fixed terminal device SP can be configured by, for example, a computer having a communication function.
携帯端末装置TAは、ネットワークNWを介して他の装置SV、SP、SUと通信する通信機能、所定の情報を表示する表示機能、所定の指示やデータを入力する入力機能、および、音声通話を行う通話機能等を備え、管理サーバ装置SVやセンサ装置SUに与える所定の指示やデータを入力したり、管理サーバ装置SVからの通知によってセンサ装置SUで得られた前記監視情報を表示したり、センサ装置SUとの間で音声通話によってナースコールの応答や声かけしたり等するための機器である。本実施形態では、携帯端末装置TAは、ユーザによって指定されたイベント動画や保存動画も表示する。このような携帯端末装置TAは、例えば、通信機能付きのタブレット型コンピュータや、いわゆるスマートフォンによって構成可能である。 The mobile terminal device TA has a communication function for communicating with other devices SV, SP, and SU via a network NW, a display function for displaying predetermined information, an input function for inputting predetermined instructions and data, and a voice call. It is equipped with a call function to perform, inputting predetermined instructions and data given to the management server device SV and the sensor device SU, displaying the monitoring information obtained by the sensor device SU by notification from the management server device SV, and displaying the monitoring information. It is a device for answering and calling a nurse call by voice call with the sensor device SU. In the present embodiment, the mobile terminal device TA also displays an event video and a stored video specified by the user. Such a mobile terminal device TA can be configured by, for example, a tablet computer having a communication function or a so-called smartphone.
次に、本実施形態における被監視者監視支援システムMSの動作について説明する。図6は、前記センサ装置における保存動画の記憶に関する動作を示すフローチャートである。図7は、前記センサ装置における保存動画の送信に関する動作を示すフローチャートである。図8は、前記被監視者監視支援システムにおけるイベントの通知に関する動作を示すシーケンス図である。図9は、前記センサ装置におけるイベント動画の送信に関する動作を示すフローチャートである。 Next, the operation of the monitored person monitoring support system MS in this embodiment will be described. FIG. 6 is a flowchart showing an operation related to storage of a stored moving image in the sensor device. FIG. 7 is a flowchart showing an operation related to transmission of a stored moving image in the sensor device. FIG. 8 is a sequence diagram showing an operation related to event notification in the monitored person monitoring support system. FIG. 9 is a flowchart showing an operation related to transmission of an event moving image in the sensor device.
このような被監視者監視支援システムMSでは、各装置SU、SV、SP、TAは、電源が投入されると、必要な各部の初期化を実行し、その稼働を始める。センサ装置SUでは、その制御処理プログラムの実行によって、SU制御処理部14には、SU制御部141、行動検知処理部142、ナースコール処理部143、SUストリーミング処理部144、SU動画記憶処理部145、動画送信処理部146、タグ情報付与処理部147およびSU時計部148が機能的に構成される。管理サーバ装置SVでは、その制御処理プログラムの実行によって、SV制御処理部22には、SV制御部221、監視処理部222、SV動画記憶処理部223およびSV時計部224が機能的に構成される。
In such a monitored person monitoring support system MS, each device SU, SV, SP, and TA executes necessary initialization of each part when the power is turned on, and starts its operation. In the sensor device SU, by executing the control processing program, the SU
まず、センサ装置SUにおける、撮像部11で生成される動画に対する処理について説明する。センサ装置SUでは、その稼働を始めると、センサ装置SUは、SU制御処理部14のSU動画記憶処理部145によって、撮像部11で生成された動画における各フレーム(各フレームデータ)を、生成順に順次に、第1リングバッファ記憶部161の第1先頭アドレスから第1最終アドレスまで記憶し、この第1最終アドレスに到達すると、前記第1先頭アドレスに戻って記憶し、以後、これを繰り返す。
First, the processing of the moving image generated by the
このような第1リングバッファ記憶部161に撮像部11で生成された動画の各フレームを記憶している際に、SU動画記憶処理部145は、図6において、第1リングバッファ記憶部161に対する記憶処理が一巡したか否かを判定する(S11)。すなわち、フレームの記憶処理が第1最終アドレスに到達したか否かが判定される。この判定の結果、一巡していない場合(第1最終アドレスに到達していない場合、No)には、SU動画記憶処理部145は、処理を処理S11に戻す。すなわち、一巡するまで処理S11が繰り返される。一方、前記判定の結果、一巡している場合(第1最終アドレスに到達している場合、Yes)には、SU動画記憶処理部145は、第1リングバッファ記憶部161に記憶されている第1時間の動画を、保存動画として第2リングバッファ記憶部162に記憶し(S12)、次に、処理S13を実行する。
When each frame of the moving image generated by the
この処理S13では、センサ装置SUは、SU制御処理部14によって、その稼働が終了(停止)か否かを判定する。この判定の結果、稼働の終了(停止)である場合(Yes)には、センサ装置SUは、本処理を終了し、一方、稼働の終了(停止)ではない場合(No)には、センサ装置SUは、処理を処理S11に戻す。
In this process S13, the sensor device SU determines whether or not its operation is completed (stopped) by the SU
そして、第2リングバッファ記憶部162に、第1リングバッファ記憶部161に記憶された第1時間の動画を保存動画として記憶している際に、SU動画記憶処理部145は、図7において、第2リングバッファ記憶部162に対する記憶処理が一巡したか否かを判定する(S21)。すなわち、第1時間の動画に対する記憶処理が第2最終アドレスに到達したか否かが判定される。この判定の結果、一巡していない場合(第2最終アドレスに到達していない場合、No)には、SU動画記憶処理部145は、処理を処理S21に戻す。すなわち、一巡するまで処理S21が繰り返される。一方、前記判定の結果、一巡している場合(第2最終アドレスに到達している場合、Yes)には、SU制御処理部14の動画送信処理部146によって、第2リングバッファ記憶部162に記憶されている第2時間の保存動画を保存動画通知通信信号で管理サーバ装置SVへ送信し(S22)、次に、処理S23を実行する。
Then, when the second ring
この処理S23では、センサ装置SUは、SU制御処理部14によって、その稼働が終了(停止)か否かを判定する。この判定の結果、稼働の終了(停止)である場合(Yes)には、センサ装置SUは、本処理を終了し、一方、稼働の終了(停止)ではない場合(No)には、センサ装置SUは、処理を処理S21に戻す。
In this process S23, the sensor device SU determines whether or not its operation is completed (stopped) by the SU
このように撮像部11で生成された動画の各フレームは、第1リングバッファ記憶部161に記憶され、第1リングバッファ記憶部161に対する記憶処理が第1先頭アドレスから第1最終アドレスに到達して一巡すると、第1リングバッファ記憶部161に記憶されている第1時間の動画(第1時間長の動画)が保存動画として第2リングバッファ記憶部162に記憶される。そして、第2リングバッファ記憶部162に対する記憶処理が第2先頭アドレスから第2最終アドレスに到達して一巡すると、第2リングバッファ記憶部162に記憶されている第2時間の保存動画(第2時間長の保存動画)が保存動画通知通信信号で管理サーバ装置SVへ送信される。
Each frame of the moving image generated by the
次に、被監視者監視支援システムMSにおけるイベントの通知に関する動作について説明する。図8において、センサ装置SUは、イベントを検知すると(C1)、この検知したイベントを通知するために、第1イベント通知通信信号を管理サーバ装置SVへ送信する(C2)。より具体的には、センサ装置SUは、その稼働を始めると、各フレームごとに、あるいは、数フレームおきに、次のように動作することで、前記所定のイベントを検知し、前記所定のイベントを検知した場合に第1イベント通知通信信号を管理サーバ装置SVへ送信する。センサ装置SUは、撮像部11から1フレーム分の画像(画像データ)を対象画像として取得し、この取得した対象画像に基づいて被監視者Obにおける所定の行動を検知し、前記所定の行動を検知すると、その検知結果を所定の端末装置SP、TAへ通知するために、前記イベント情報として検知した前記所定の行動を収容した、行動検知の第1イベント通知通信信号を、SU通信IF部15で管理サーバ装置SVへ送信する。このように動作している間に、センサ装置SUは、ナースコールを受け付けているか否かを判定し、ナースコールを受け付けると、そのナースコールの受付を所定の端末装置SP、TAへ通知するために、センサ装置SUは、前記イベント情報として前記受け付けたナースコールを収容した、ナースコール検知の第1イベント通知通信信号を、SU通信IF部15で管理サーバ装置SVへ送信する。
Next, the operation related to event notification in the monitored person monitoring support system MS will be described. In FIG. 8, when the sensor device SU detects an event (C1), the sensor device SU transmits a first event notification communication signal to the management server device SV (C2) in order to notify the detected event. More specifically, when the sensor device SU starts its operation, it operates at each frame or every few frames as follows to detect the predetermined event and detect the predetermined event. Is detected, the first event notification communication signal is transmitted to the management server device SV. The sensor device SU acquires an image (image data) for one frame from the
続いて、センサ装置SUから第1イベント通知通信信号を受信すると(C3)、管理サーバ装置SVは、監視処理部222によって、この受信した第1イベント通知通信信号による監視情報を記録(記憶)し(C4)、前記受信した第1イベント通知通信信号に応じた第2イベント通知通信信号を所定の端末装置SP、TAへ送信する(C5)。より具体的には、監視処理部222は、第1イベント通知通信信号をネットワークNWを介してセンサ装置SUから受信すると、この受信した第1イベント通知通信信号に収容されたセンサIDおよびイベント情報等の各情報を、このセンサIDを持つセンサ装置SUで監視されている被監視者Obの監視情報としてSV記憶部23に記憶(記録)する。そして、監視処理部222は、前記受信した第1イベント通知通信信号に収容されたセンサIDに対応する端末IDを持つ端末装置SP、TA宛に第2イベント通知通信信号を生成し、この生成した第2イベント通知通信信号をSV通信IF部21で送信する。
Subsequently, when the first event notification communication signal is received from the sensor device SU (C3), the management server device SV records (stores) the monitoring information by the received first event notification communication signal by the
続いて、管理サーバ装置SVから第2イベント通知通信信号を受信すると(C6)、この第2イベント通知通信信号を受信した端末装置SP、TAは、この第2イベント通知通信信号に収容されたセンサIDおよびイベント情報等の各情報を、このセンサIDを持つセンサ装置SUで監視されている被監視者Obの監視情報として記憶し、前記監視情報を表示する(C7)。これによってセンサ装置SUで検知されたイベントが管理サーバ装置SVを介して所定の端末装置SP、TAに表示される。 Subsequently, when the second event notification communication signal is received from the management server device SV (C6), the terminal devices SP and TA that have received the second event notification communication signal are the sensors accommodated in the second event notification communication signal. Each information such as ID and event information is stored as monitoring information of the monitored person Ob monitored by the sensor device SU having this sensor ID, and the monitoring information is displayed (C7). As a result, the event detected by the sensor device SU is displayed on the predetermined terminal devices SP and TA via the management server device SV.
前記監視情報を参照した看護師や介護士等の監視者NSは、例えば通話するために、通話要求を端末装置SP、TAに入力する。この入力を受け付けると、端末装置SP、TAは、表示中の監視情報にかかるセンサIDを持つセンサ装置SUに通話を要求するための通信信号(通話要求通信信号)を送信する。この通話の要求に応じて端末装置SP、TAとセンサ装置SUとは、VoIPで通話可能に接続され、監視者NSは、被監視者Obと通話する。 An observer NS such as a nurse or a caregiver who has referred to the monitoring information inputs a call request to the terminal devices SP and TA in order to make a call, for example. Upon receiving this input, the terminal devices SP and TA transmit a communication signal (call request communication signal) for requesting a call to the sensor device SU having the sensor ID related to the monitoring information being displayed. In response to this call request, the terminal device SP, TA and the sensor device SU are connected so as to be able to make a call by VoIP, and the observer NS makes a call with the monitored person Ob.
また例えば、動画をライブで参照するために、監視者NSは、動画要求を端末装置SP、TAに入力する。この入力を受け付けると、端末装置SP、TAは、表示中の監視情報にかかるセンサIDを持つセンサ装置SUに動画を要求するための通信信号(動画要求通信信号)を送信する。この動画の要求に応じて端末装置SP、TAとセンサ装置SUとは、ストリーミングで動画を再生可能に接続され、監視者NSは、端末装置SP、TAに表示された動画を参照する。 Further, for example, in order to refer to the moving image live, the observer NS inputs the moving image request to the terminal devices SP and TA. Upon receiving this input, the terminal devices SP and TA transmit a communication signal (video request communication signal) for requesting a moving image to the sensor device SU having the sensor ID related to the monitoring information being displayed. In response to the request for the moving image, the terminal device SP, TA and the sensor device SU are connected so as to be able to play the moving image by streaming, and the observer NS refers to the moving image displayed on the terminal device SP, TA.
次に、センサ装置SUにおけるイベント動画の送信に関する処理について説明する。上述のようにイベントの検知よってイベントを通知する一方で、センサ装置SUは、次のように動作することでイベント動画を送信している。 Next, the process related to the transmission of the event moving image in the sensor device SU will be described. While notifying the event by detecting the event as described above, the sensor device SU transmits the event moving image by operating as follows.
図9において、図8を用いて説明したようにイベントを検知すると(S31、図8に示す処理C1)、センサ装置SUは、SU制御処理部14の動画送信処理146によって、前記検知したイベントの種類が特定の種類であるか否かを判定する(S32)。この判定の結果、前記特定の種類である場合(Yes)には、センサ装置SUは、SU制御処理部14の動画送信処理146によって、処理S34、処理S35および処理S36の各処理を順次に実行した後に、本処理を終了する。一方、前記判定の結果、前記特定の種類ではない場合(No、前記残余の種類である場合)には、センサ装置SUは、SU制御処理部14のタグ情報付与処理部147によって、処理S33を実行した後に、本処理を終了する。
In FIG. 9, when an event is detected as described with reference to FIG. 8 (S31, process C1 shown in FIG. 8), the sensor device SU receives the detected event by the moving
処理S34では、前記検知前動画と前記検知後動画とを含むイベント動画を生成するために、動画送信処理146は、第7時間にセットしたタイマーをSU制御処理部14に機能的に生成し、この生成したタイマーを稼働させる。
In the process S34, in order to generate the event video including the pre-detection video and the post-detection video, the
処理S34に続く処理S35では、動画送信処理146は、前記タイマーがタイムアップしたか否かを判定する。この判定の結果、タイムアップしていない場合(No)には、動画送信処理146は、処理を処理S35に戻す。すなわち、タイムアップするまで、処理S35が繰り返される。一方、前記判定の結果、タイムアップしている場合(Yes)には、動画送信処理146は、処理S36を実行する。
In the process S35 following the process S34, the moving
この処理S36では、動画送信処理146は、イベント動画を管理サーバ装置SVへ送信する。より具体的には、動画送信処理146は、第1リングバッファ記憶部161に記憶された第1時間の動画を読み出し、この読み出した前記第1時間の動画をイベント動画としてイベント動画通知通信信号で管理サーバ装置SVへ送信する。したがって、第1リングバッファ記憶部161に記憶された動画は、上述のように、第2リングバッファ記憶部162に保存動画として記憶するために、読み出される一方、特定の種類のイベントが検知された場合には、管理サーバ装置SVへイベント動画として送信するために読み出される。なお、一致することも有り得るが、通常、第2リングバッファ記憶部162に保存動画として記憶するために、読み出される前記動画と、管理サーバ装置SVへイベント動画として送信するために読み出される動画とは、一致しない。
In this process S36, the moving
一方、処理S33では、タグ情報付与処理部147は、前記検知したイベントに関する所定のタグ情報を、SU記憶部16に記憶されている保存動画に関連付ける。例えば、タグ情報(本実施形態ではイベント情報および検知時刻)が保存動画のデータに組み込まれて収容される。
On the other hand, in the process S33, the tag information
このようにイベントが検知されると、この検知されたイベントの種類が前記特定の種類(本実施形態では転落および転倒)である場合には、イベント動画がイベント動画通知通信信号で管理サーバ装置SVへ送信され、前記検知されたイベントの種類が前記残余の種類(本実施形態では起床、離床およびナースコール)である場合には、タグ情報が保存動画に関連付けられる。 When an event is detected in this way, if the type of the detected event is the specific type (fall and fall in this embodiment), the event video is the event video notification communication signal and the management server device SV. When the detected event type is the residual type (wake-up, wake-up and nurse call in the present embodiment), the tag information is associated with the stored moving image.
次に、管理サーバ装置SVにおける、イベント動画および保存動画に関する処理について説明する。 Next, the processing related to the event moving image and the saved moving image in the management server device SV will be described.
上述のようにセンサ装置SUから送信された保存動画通知通信信号を受信すると、管理サーバ装置SVは、SV制御処理部22のSV動画記憶処理部223によって、この受信した保存動画通知通信信号に収容された保存動画をSV記憶部23の保存動画記憶部236に記憶する。そして、管理サーバ装置SVは、SV制御処理部22のSV動画記憶処理部223によって、保存動画記憶部236に記憶されている保存動画属性情報テーブルLTにレコードを新たに追加し、この追加したレコードにおけるセンサIDフィールド2351に、前記受信したイベント動画通知通信信号に収容されたセンサIDを登録し、この追加したレコードにおける保存動画ファイル名フィールド2364に、前記受信した保存動画通知通信信号に収容された保存動画の保存動画ファイル名を登録する。そして、前記受信したイベント動画通知通信信号にタグ情報が収容されている場合には、SV動画記憶処理部223は、前記新たに追加したレコードにおけるイベントフィールド2362および検知時刻フィールド2363それぞれに、前記受信した保存動画通知通信信号に収容されたタグ情報におけるイベント情報および検知時刻それぞれを登録し、前記受信したイベント動画通知通信信号にタグ情報が収容されていない場合には、SV動画記憶処理部223は、前記新たに追加したレコードにおける検知時刻フィールド2363に、前記受信した保存動画通知通信信号の受信時刻を登録する。
Upon receiving the saved video notification communication signal transmitted from the sensor device SU as described above, the management server device SV is accommodated in the received saved video notification communication signal by the SV video
一方、SV動画記憶処理部223は、保存動画の受信時刻または前記保存動画に関わるイベントの検知時刻から前記第6時間の経過後に、保存動画記憶部236に記憶されていた保存動画を保存動画記憶部236から消去する。より具体的には、SV動画記憶処理部223は、例えば1日のうちで予め設定された時刻になると、保存動画属性情報テーブルLTにおける検知時刻フィールド2363に登録されている検知時刻または受信時刻を参照し、この参照結果、検知時刻フィールド2363に登録されている検知時刻または受信時刻から前記第6時間を経過している場合には、このレコードにおける保存動画ファイル名フィールド2364に登録されている保存動画ファイル名を持つ保存動画の電子ファイルを保存動画記憶部236から消去し、このレコードを保存動画属性情報テーブルLTから削除する。
On the other hand, the SV video
また、上述のように、センサ装置SUから送信されたイベント動画通知通信信号を受信すると、管理サーバ装置SVは、SV制御処理部22のSV動画記憶処理部223によって、この受信したイベント動画通知通信信号に収容されたイベント動画をSV記憶部23のイベント動画記憶部235に記憶する。そして、管理サーバ装置SVは、SV制御処理部22のSV動画記憶処理部223によって、イベント動画記憶部235に記憶されているイベント動画属性情報テーブルITにレコードを新たに追加し、この追加したレコードにおけるセンサIDフィールド2351、イベントフィールド2352および検知時刻フィールド2353それぞれに、前記受信したイベント動画通知通信信号に収容されたセンサID、イベント情報および検知時刻それぞれを登録し、この追加したレコードにおけるイベント動画ファイル名フィールド2354に、前記受信したイベント動画通知通信信号に収容されたイベント動画のイベント動画ファイル名を登録する。
Further, as described above, when the event video notification communication signal transmitted from the sensor device SU is received, the management server device SV is subjected to the received event video notification communication by the SV video
一方、SV動画記憶処理部223は、イベント動画の受信時刻または前記イベント動画に関わるイベントの検知時刻から前記第5時間の経過後に、前記イベント動画をイベント動画記憶部235から消去する。より具体的には、SV動画記憶処理部223は、例えば1日のうちで予め設定された時刻になると、イベント動画属性情報テーブルITにおける検知時刻フィールド2353に登録されている検知時刻または受信時刻を参照し、この参照結果、検知時刻フィールド2353に登録されている検知時刻または受信時刻から前記第5時間を経過している場合には、このレコードにおけるイベント動画ファイル名フィールド2354に登録されているイベント動画ファイル名を持つイベント動画の電子ファイルをイベント動画記憶部235から消去し、このレコードをイベント動画属性情報テーブルITから削除する。
On the other hand, the SV video
このようにイベント動画が管理サーバ装置SVに記憶され、第5時間の経過後に消去され、保存動画が管理サーバ装置SVに記憶され、第6時間の経過後に消去される。 In this way, the event moving image is stored in the management server device SV and deleted after the lapse of the fifth hour, and the saved moving image is stored in the management server device SV and deleted after the lapse of the sixth time.
以上説明したように、本実施形態における被監視者監視支援システムMS、センサ装置SUおよびこれに実装された監視画像保存方法は、イベントを検知した場合に、撮像部11で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として管理サーバ装置SVへ送信する一方で、前記撮像部11で生成された動画を保存動画として第2リングバッファ記憶部162に記憶する。したがって、管理サーバ装置SVで前記イベント動画の保存が可能となり、上記被監視者監視支援システムMS、センサ装置SUおよび監視画像保存方法は、発生時の画像を保存しながら、前記保存動画として失報時の画像も保存できる。したがって、イベント発生後直ちにイベント動画を用いたイベントの検証が可能となり、後日、発覚したイベントに対する保存動画を用いた検証も可能となり、これら両者の検証が効率よく実施できる。
As described above, the monitored person monitoring support system MS, the sensor device SU, and the monitoring image storage method implemented therein in the present embodiment generate the event generated by the
上記被監視者監視支援システムMS、センサ装置SUおよび監視画像保存方法は、撮像部11で生成された動画を第1リングバッファ記憶部161に記憶し、この第1リングバッファ記憶部161に記憶された動画から、前記イベント動画を管理サーバ装置SVへ送信する一方、前記保存動画を第2リングバッファ記憶部162に記憶する。このため、上記被監視者監視支援システムMS、センサ装置SUおよび監視画像保存方法は、構成が簡単化され、また、後日、患者等の様子を確認する場合に、前記イベント動画の内容と前記保存動画の内容とを同等の価値で扱うことができる。例えば、エビデンスとして前記イベント動画の内容と前記保存動画の内容とを同等に扱うことができる。また、第1リングバッファ記憶部161がリングバッファであるので、第1時間の動画を記憶する最小の記憶容量のメモリ素子で上記被監視者監視支援システムMS、センサ装置SUおよび監視画像保存方法が構成でき、第1リングバッファ記憶部161に記憶されてから第1時間経過後に、最も古く(最も過去に)記憶された動画のフレームが、この時点で撮像部により生成された動画のフレームで上書きされ、自動的に消去できる。
In the monitored person monitoring support system MS, the sensor device SU, and the monitoring image storage method, the moving image generated by the
上記被監視者監視支援システムMS、センサ装置SUおよび監視画像保存方法は、第2リングバッファ記憶部162がリングバッファであるので、第2時間の動画を記憶する最小の記憶容量のメモリ素子で上記被監視者監視支援システムMS、センサ装置SUおよび監視画像保存方法が構成でき、第2リングバッファ記憶部162に記憶されてから第2時間経過後に、最も古く(最も過去に)記憶された動画のフレームが、この時点で記憶される動画のフレームで上書きされ、自動的に消去できる。
In the above-mentioned monitored person monitoring support system MS, sensor device SU, and monitoring image storage method, since the second ring
上記被監視者監視支援システムMS、センサ装置SUおよび監視画像保存方法は、特定の種類のイベントにかかるイベント動画が管理サーバ装置SVで保存することで、管理サーバ装置SVで参照でき、前記残余の種類のイベントにかかる動画は、タグ情報に基づいて保存動画で参照できる。 The monitored person monitoring support system MS, the sensor device SU, and the monitoring image saving method can be referred to by the management server device SV by saving the event video related to a specific type of event in the management server device SV. The videos related to the types of events can be referred to in the saved videos based on the tag information.
なお、上述の実施形態では、第1リングバッファ記憶部161から第1時間の動画を保存動画として第2リングバッファ記憶部162へ記憶する際に、第1時間の動画は、そのままの画質で記憶されたが、画質を変更してから記憶されても良い。例えば、前記保存動画は、第1時間の動画(例えばイベント動画)の第1画質よりも低い第2画質で第1リングバッファ記憶部161から第2リングバッファ記憶部162へ記憶される。より具体的には、例えば、SU動画記憶処理部145は、第1リングバッファ記憶部161に記憶されている第1時間の動画を、その第1解像度からより低い第2解像度となるように画像処理することによって保存動画を生成し、この第2解像度の保存動画を第2リングバッファ記憶部162に記憶する。一例では、解像度が1920×1080から1280×720へ変更される。あるいは、例えば、SU動画記憶処理部145は、第1リングバッファ記憶部161に記憶されている第1時間の動画を、その第1フレームレートからより低い第2フレームレートとなるように画像処理することによって保存動画を生成し、この第2フレームレートの保存動画を第2リングバッファ記憶部162に記憶する。一例では、フレームレートが30fpsから15fpsへ変更される。これによれば、保存動画が第1時間の動画(例えばイベント動画)の第1画質より低い第2画質であるので、第2リングバッファ記憶部162が、より少ない記憶容量のメモリ素子で構成できる。
In the above-described embodiment, when the moving image of the first time from the first ring
また、上述の実施形態では、撮像部11で生成された画像から、被監視者Obにおける所定の行動をイベントの一つとして検出したが、これに限定されるものではなく、撮像部11に代え、あるいは、撮像部11に追加して、他のセンサから被監視者Obにおける所定の行動が検出されてもよい。例えば、レーダ(またはアクティブソナー)が撮像部11に代え、あるいは、撮像部11に追加して、用いられても良い。レーダ(またはアクティブソナー)を用いた所定の行動の検出方法は、例えば、WO2018/186042(PCT/JP2018/006492)に開示されている。撮像部11およびレーダ(またはアクティブソナー)が用いられる場合では、例えば、撮像部11での第1検出結果とレーダ(またはアクティブソナー)での第2検出結果とをOR演算によって最終的な検出結果が決定される。なお、撮像部11での第1検出結果とレーダ(またはアクティブソナー)での第2検出結果とが互いに同一で所定時間以内である場合には、1つに統合されても良い。
Further, in the above-described embodiment, a predetermined action in the monitored person Ob is detected as one of the events from the image generated by the
また、上述の実施形態では、イベント動画の時間長と第1リングバッファ記憶部161から第2リングバッファ記憶部162に記憶される保存動画の時間長は、同一の第1時間であるが、異なっても良い。すなわち、第1リングバッファ記憶部161は、上述の実施形態ではイベント動画の時間長と同一の第1時間の動画を記憶できる記憶容量であるが、前記第1時間以上の動画を記憶できる記憶容量であっても良い。また、上述の実施形態では、第1リングバッファ記憶部161に対する記憶処理が一巡した場合に、第1先頭アドレスから第1最終アドレスまでの第1時間の動画が保存動画として第1リングバッファ記憶部161から第2リングバッファ記憶部162に記憶されたが、第1リングバッファ記憶部161の一部の記憶領域に記憶されている動画が順次に第2リングバッファ記憶部162に記憶されても良い。すなわち、第1リングバッファ記憶部161は、前記第1時間以上であって前記第2時間未満である所定の第3時間の動画を記憶する記憶容量を持ち、前記撮像部11で生成された動画を記憶するリングバッファの記憶部であり、SU動画記憶処理部145は、前記第3時間以下の所定の第4時間の経過ごとに第1リングバッファ記憶部161(前記リングバッファの記憶部の一例)に記憶された第4時間の動画を読み出し、前記読み出した前記第4時間の動画を前記保存動画として第2リングバッファ記憶部162(前記動画記憶部の一例)に記憶し、そして、動画送信処理部146は、前記イベントを検知した場合に、第1リングバッファ記憶部161に記憶された前記第1時間の動画を読み出し、前記読み出した前記第1時間の動画を前記イベント動画として管理サーバ装置SVへ送信する。好ましくは、前記第3時間は、前記第4時間の複数倍である。一例では、前記第3時間は、10分であり、前記第4時間は、2分である。この例では、第1リングバッファ記憶部161は、10分ごとに一巡し、この10分で一巡している間に、2分ごとに2分の動画が保存動画として第1リングバッファ記憶部161から順次に読み出されて第2リングバッファ記憶部162に順次に記憶される。また、この場合において、時系列で隣接する2個の保存動画間において、所定時間(数フレーム)だけオーバラップがあって良く、前記オーバラップが無くても良い。
Further, in the above-described embodiment, the time length of the event moving image and the time length of the stored moving image stored in the first ring
また、上述の実施形態では、第2リングバッファ記憶部162に対する記憶処理が一巡した場合には、第2リングバッファ記憶部162に記憶されている第2時間の保存動画が保存動画通知通信信号で管理サーバ装置SVへ送信されたが、前記第2時間の保存動画は、管理サーバ装置SVへ送信されずに、第2リングバッファ記憶部162の第2先頭アドレスから順次に上書きされることにより消去されても良い。後日の確認のために必要な日数の記憶容量が第2リングバッファ記憶部162に確保されることで、前記後日の確認に十分対応でき、前記第2時間の保存動画の記憶に、管理サーバ装置SVの記憶容量を確保しなくて済む。
Further, in the above-described embodiment, when the storage process for the second ring
また、上述の実施形態では、管理サーバ装置SVは、保存動画を第6時間の経過後に消去したが、保存動画記憶部236が第3先頭アドレスから第3最終アドレスまでのリングバッファで構成され、管理サーバ装置SVは、センサ装置SUから受信した保存動画を前記受信ごとに前記第3先頭アドレスから前記第3最終アドレスまで順次に記憶し、この第3最終アドレスに到達すると、前記第3先頭アドレスに戻って上書きで記憶することで、前記保存動画を順次に消去しても良い。
Further, in the above-described embodiment, the management server device SV erases the stored moving image after the lapse of the sixth time, but the stored moving
また、上述の実施形態では、前記検知したイベントの種類が特定の種類ではない場合に、タグ情報が付与されたが、前記検知したイベントの種類にかかわらず、全ての種類に対しタグ情報が付与されても良い。 Further, in the above-described embodiment, tag information is added when the detected event type is not a specific type, but tag information is added to all types regardless of the detected event type. May be done.
本明細書は、上記のように様々な態様の技術を開示しているが、そのうち主な技術を以下に纏める。 The present specification discloses various aspects of the technology as described above, of which the main technologies are summarized below.
一態様にかかるセンサ装置は、監視対象である被監視者に対応して設けられ、前記被監視者に関わる所定のイベントを検知するセンサ装置、前記センサ装置と通信可能に接続され、前記センサ装置で検知されたイベントの通知を受けて前記イベントを管理する中央管理装置、および、前記中央管理装置と通信可能に接続され前記中央管理装置を介して前記センサ装置で検知されたイベントの通知を受ける端末装置を備え、前記被監視者の監視を支援するための被監視者監視支援システムの前記センサ装置であって、動画を生成する撮像部と、前記イベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する動画送信処理部と、前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持ち、前記撮像部で生成された動画を保存動画として記憶する動画記憶部とを備える。好ましくは、上述のセンサ装置において、前記イベント動画は、前記イベントを検知した時点より前に前記撮像部で生成された動画(検知前動画)と、前記イベントを検知した時点以後に前記撮像部で生成された動画(検知後動画)とを含む。好ましくは、上述のセンサ装置において、前記イベントは、複数の種類を含み、前記動画送信処理部は、前記複数の種類のうちの、予め設定された特定の種類のイベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する。好ましくは、前記イベントの種類は、起床、離床、転落、転倒およびナースコールであり、前記特定の種類は、前記転落および前記転倒である。好ましくは、上述のセンサ装置において、前記動画送信部は、さらに、前記動画記憶部に記憶されている保存動画を前記中央管理装置へ送信する。 The sensor device according to one aspect is provided corresponding to the monitored person to be monitored, and is communicably connected to the sensor device that detects a predetermined event related to the monitored person and the sensor device. Receives notification of the event detected in the central management device that manages the event, and receives notification of the event detected by the sensor device via the central management device that is communicably connected to the central management device. The sensor device of the monitored person monitoring support system provided with a terminal device and for supporting the monitoring of the monitored person. The image pickup unit that generates a moving image and the image pickup unit when the event is detected. A moving image transmission processing unit that transmits the generated moving image of the predetermined first time including the time when the event is detected to the central management device as an event moving image, and a moving image of a predetermined second time longer than the first time. It has a storage capacity for storing, and includes a moving image storage unit that stores a moving image generated by the imaging unit as a stored moving image. Preferably, in the above-mentioned sensor device, the event moving image is a moving image (pre-detection moving image) generated by the imaging unit before the time when the event is detected and a moving image (pre-detection moving image) generated by the imaging unit after the time when the event is detected. Includes the generated video (video after detection). Preferably, in the sensor device described above, the event includes a plurality of types, and when the moving image transmission processing unit detects a preset specific type of event among the plurality of types, the event is described. A predetermined first-hour moving image including the time when the event is detected, which is generated by the imaging unit, is transmitted to the central management device as an event moving image. Preferably, the types of events are wake up, get out of bed, fall, fall and nurse call, and the particular type is the fall and the fall. Preferably, in the above-mentioned sensor device, the moving image transmitting unit further transmits a stored moving image stored in the moving image storage unit to the central management device.
このようなセンサ装置は、前記イベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する一方で、前記撮像部で生成された動画を保存動画として動画記憶部に記憶する。したがって、前記中央管理装置で前記イベント動画の保存が可能となり、上記センサ装置は、発生時の画像を保存しながら、前記保存動画として失報時の画像も保存できる。 When such an event is detected, such a sensor device transmits, as an event video, a moving image of a predetermined first time including a time when the event is detected generated by the imaging unit to the central management device. Then, the moving image generated by the imaging unit is stored in the moving image storage unit as a saved moving image. Therefore, the central management device can save the event moving image, and the sensor device can save the image at the time of failure as the saved moving image while saving the image at the time of occurrence.
他の一態様では、上述のセンサ装置において、前記第1時間以上であって前記第2時間未満である所定の第3時間の動画を記憶する記憶容量を持ち、前記撮像部で生成された動画を記憶するリングバッファの記憶部と、前記第3時間以下の所定の第4時間の経過ごとに前記リングバッファの記憶部に記憶された第4時間の動画を読み出し、前記読み出した前記第4時間の動画を前記保存動画として前記動画記憶部に記憶する動画記憶処理部とをさらに備え、前記動画送信部は、前記イベントを検知した場合に、前記リングバッファの記憶部に記憶された前記第1時間の動画を読み出し、前記読み出した前記第1時間の動画を前記イベント動画として前記中央管理装置へ送信する。好ましくは、上述のセンサ装置において、前記動画送信部は、前記イベントを検知した場合に、前記イベントを検知した時点から前記第1時間より短い所定の第7時間の経過後に、前記リングバッファに記憶された第1時間の動画を読み出し、前記読み出した前記第1時間の動画を前記イベント動画として前記中央管理装置へ送信する。 In another aspect, in the above-mentioned sensor device, the moving image generated by the imaging unit has a storage capacity for storing a moving image of a predetermined third time that is the first time or more and less than the second time. A ring buffer storage unit that stores The first moving unit is further provided with a moving image storage processing unit that stores the moving image of the above as the stored moving image in the moving image storage unit, and the moving image transmitting unit stores the moving image in the storage unit of the ring buffer when the event is detected. The moving image of the time is read, and the read moving image of the first time is transmitted to the central management device as the event moving image. Preferably, in the above-mentioned sensor device, when the event is detected, the moving image transmitting unit stores the event in the ring buffer after a predetermined seventh time shorter than the first time has elapsed from the time when the event is detected. The video of the first time is read, and the read video of the first time is transmitted to the central management device as the event video.
このようなセンサ装置は、撮像部で生成された動画をリングバッファの記憶部に記憶し、このリングバッファの記憶部に記憶された動画から、前記イベント動画を中央管理装置へ送信する一方、前記保存動画を動画記憶部に記憶する。このため、前記センサ装置では、構成が簡単化され、また、後日、患者等の様子を確認する場合に、前記イベント動画の内容と前記保存動画の内容とを同等の価値で扱うことができる。また、前記記憶部がリングバッファであるので、前記リングバッファの記憶部に記憶されてから第3時間経過後に、最も古く(最も過去に)記憶された動画のフレームが、この時点で撮像部により生成された動画のフレームで上書きされ、自動的に消去できる。 Such a sensor device stores the moving image generated by the imaging unit in the storage unit of the ring buffer, and transmits the event moving image from the moving image stored in the storage unit of the ring buffer to the central management device. Save The video is stored in the video storage unit. Therefore, in the sensor device, the configuration is simplified, and when the state of the patient or the like is confirmed at a later date, the content of the event moving image and the content of the stored moving image can be handled with the same value. Further, since the storage unit is a ring buffer, the oldest (oldest) stored moving image frame after the lapse of 3 hours after being stored in the storage unit of the ring buffer is stored by the imaging unit at this time. It will be overwritten with the frame of the generated video and can be deleted automatically.
他の一態様では、上述のセンサ装置において、前記動画記憶部は、リングバッファである。 In another aspect, in the sensor device described above, the moving image storage unit is a ring buffer.
このようなセンサ装置では、前記動画記憶部がリングバッファであるので、第2時間の動画を記憶する最小の記憶容量のメモリ素子で上記センサ装置が構成でき、前記動画記憶部に記憶されてから第2時間経過後に、最も古く(最も過去に)記憶された動画のフレームが、この時点で記憶される動画のフレームで上書きされ、自動的に消去できる。 In such a sensor device, since the moving image storage unit is a ring buffer, the sensor device can be configured with a memory element having a minimum storage capacity for storing the moving image of the second time, and after being stored in the moving image storage unit. After the second hour, the oldest (oldest) stored video frame is overwritten with the video frame stored at this point and can be automatically erased.
他の一態様では、上述のセンサ装置において、前記保存動画は、前記イベント動画の第1画質より低い第2画質である。好ましくは、上述のセンサ装置において、前記保存動画は、前記イベント動画の第1解像度より低い第2解像度である、好ましくは、上述のセンサ装置において、前記保存動画は、前記イベント動画の第1フレームレートより低い第2フレームレートである。 In another aspect, in the sensor device described above, the stored moving image has a second image quality lower than the first image quality of the event moving image. Preferably, in the above-mentioned sensor device, the stored moving image has a second resolution lower than the first resolution of the event moving image. The second frame rate is lower than the rate.
このようなセンサ装置は、前記保存動画が前記イベント動画の第1画質より低い第2画質であるので、前記動画記憶部が、より少ない記憶容量のメモリ素子で構成できる。 In such a sensor device, since the stored moving image has a second image quality lower than the first image quality of the event moving image, the moving image storage unit can be configured by a memory element having a smaller storage capacity.
他の一態様では、上述のセンサ装置において、前記イベントは、複数の種類を含み、前記動画送信処理部は、前記複数の種類のうちの、予め設定された特定の種類のイベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画を前記イベント動画として前記中央管理装置へ送信し、前記複数の種類のうちの、前記特定の種類を除く残余の種類のイベントを検知した場合に、前記検知したイベントに関する所定のタグ情報を、前記動画記憶部に記憶されている前記保存動画に関連付けるタグ情報付与処理部をさらに備える。好ましくは、上述のセンサ装置において、前記イベントの種類は、起床、離床、転落、転倒およびナースコールであり、前記特定の種類は、前記転落および前記転倒であり、前記残余の種類は、起床、離床およびナースコールである。 In another aspect, in the sensor device described above, the event includes a plurality of types, and the moving image transmission processing unit detects a preset specific type of event among the plurality of types. In addition, the moving image of a predetermined first time including the time when the event is detected, which is generated by the imaging unit, is transmitted to the central management device as the event moving image, and the specific type among the plurality of types is transmitted. Further provided is a tag information imparting processing unit that associates predetermined tag information relating to the detected event with the stored moving image stored in the moving image storage unit when an event of the remaining type other than the above is detected. Preferably, in the sensor device described above, the types of events are wake up, get out, fall, fall and nurse call, the particular type is the fall and the fall, and the residual type is wake up, Get out of bed and nurse call.
このようなセンサ装置では、特定の種類のイベントにかかるイベント動画は、中央管理装置で保存することで、中央管理装置で参照でき、前記残余の種類のイベントにかかる動画は、タグ情報に基づいて保存動画で参照できる。 In such a sensor device, an event video related to a specific type of event can be referred to by the central management device by saving it in the central management device, and the video related to the remaining type of event can be referred to based on the tag information. You can refer to it in the saved video.
他の一態様にかかる監視画像保存方法は、監視対象である被監視者に対応して設けられ、前記被監視者に関わる所定のイベントを検知するセンサ装置、前記センサ装置と通信可能に接続され、前記センサ装置で検知されたイベントの通知を受けて前記イベントを管理する中央管理装置、および、前記中央管理装置と通信可能に接続され前記中央管理装置を介して前記センサ装置で検知されたイベントの通知を受ける端末装置を備え、前記被監視者の監視を支援するための被監視者監視支援システムの監視画像保存方法であって、動画を生成する撮像工程と、前記イベントを検知した場合に、前記撮像工程で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する動画送信処理工程と、前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持つ動画記憶部に前記撮像工程で生成された動画を保存動画として記憶する動画記憶工程とを備える。 The monitoring image storage method according to the other aspect is provided corresponding to the monitored person to be monitored, and is communicably connected to the sensor device for detecting a predetermined event related to the monitored person and the sensor device. , A central management device that receives notification of an event detected by the sensor device and manages the event, and an event that is communicably connected to the central management device and detected by the sensor device via the central management device. This is a monitoring image storage method of a monitored person monitoring support system for supporting the monitoring of the monitored person, which is provided with a terminal device that receives the notification of the above, and is an imaging process for generating a moving image and when the event is detected. A moving image transmission processing step of transmitting the moving image of a predetermined first time including the time when the event is detected to the central management device as an event moving image generated in the imaging step, and a predetermined first time longer than the first time. The moving image storage unit having a storage capacity for storing a moving image for 2 hours is provided with a moving image storage step of storing the moving image generated in the imaging step as a saved moving image.
このような監視画像保存方法は、前記イベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する一方で、前記撮像部で生成された動画を保存動画として動画記憶部に記憶する。したがって、前記中央管理装置で前記イベント動画の保存が可能となり、上記監視画像保存方法は、発生時の画像を保存しながら、前記保存動画として失報時の画像も保存できる。 In such a monitoring image storage method, when the event is detected, a moving image of a predetermined first time including the time when the event is detected generated by the imaging unit is transmitted to the central management device as an event moving image. On the other hand, the moving image generated by the imaging unit is stored in the moving image storage unit as a saved moving image. Therefore, the event moving image can be saved by the central management device, and the monitoring image saving method can save the image at the time of failure as the saved moving image while saving the image at the time of occurrence.
他の一態様にかかる被監視者監視支援システムは、監視対象である被監視者に対応して設けられ、前記被監視者に関わる所定のイベントを検知するセンサ装置、前記センサ装置と通信可能に接続され、前記センサ装置で検知されたイベントの通知を受けて前記イベントを管理する中央管理装置、および、前記中央管理装置と通信可能に接続され前記中央管理装置を介して前記センサ装置で検知されたイベントの通知を受ける端末装置を備え、前記被監視者の監視を支援するための被監視者監視支援システムであって、動画を生成する撮像部と、前記イベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する動画送信処理部と、前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持ち、前記撮像部で生成された動画を保存動画として記憶する動画記憶部とを備える。他の一態様にかかる被監視者監視支援システムは、監視対象である被監視者に対応して設けられ、前記被監視者に関わる所定のイベントを検知するセンサ装置、前記センサ装置と通信可能に接続され、前記センサ装置で検知されたイベントの通知を受けて前記イベントを管理する中央管理装置、および、前記中央管理装置と通信可能に接続され前記中央管理装置を介して前記センサ装置で検知されたイベントの通知を受ける端末装置を備え、前記被監視者の監視を支援するための被監視者監視支援システムであって、前記センサ装置は、これら上述のいずれかのセンサ装置である。 The monitored person monitoring support system according to the other aspect is provided corresponding to the monitored person to be monitored, and can communicate with the sensor device and the sensor device that detect a predetermined event related to the monitored person. A central management device that is connected and receives notification of an event detected by the sensor device and manages the event, and is communicably connected to the central management device and detected by the sensor device via the central management device. A monitored person monitoring support system for supporting the monitoring of the monitored person, which is provided with a terminal device for receiving notification of the event, and has an imaging unit that generates a moving image and the imaging unit when the event is detected. A video transmission processing unit that transmits a predetermined first time video including a time when the event is detected to the central management device as an event video generated by the unit, and a predetermined second time longer than the first time. It has a storage capacity for storing moving images, and includes a moving image storage unit that stores moving images generated by the imaging unit as saved moving images. The monitored person monitoring support system according to the other aspect is provided corresponding to the monitored person to be monitored, and can communicate with the sensor device and the sensor device that detect a predetermined event related to the monitored person. A central management device that is connected and receives notification of an event detected by the sensor device and manages the event, and is communicably connected to the central management device and detected by the sensor device via the central management device. It is a monitored person monitoring support system for supporting the monitoring of the monitored person, comprising a terminal device for receiving notification of the event, and the sensor device is any of the above-mentioned sensor devices.
このような被監視者監視支援システムは、前記イベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する一方で、前記撮像部で生成された動画を保存動画として動画記憶部に記憶する。したがって、前記中央管理装置で前記イベント動画の保存が可能となり、上記被監視者監視支援システムは、発生時の画像を保存しながら、前記保存動画として失報時の画像も保存できる。 In such a monitored person monitoring support system, when the event is detected, the central management device generates a moving image of a predetermined first time including the time when the event is detected, which is generated by the imaging unit, as an event moving image. On the other hand, the moving image generated by the imaging unit is stored in the moving image storage unit as a saved moving image. Therefore, the event moving image can be saved by the central management device, and the monitored person monitoring support system can save the image at the time of failure as the saved moving image while saving the image at the time of occurrence.
他の一態様では、上述の被監視者監視支援システムにおいて、前記中央管理装置は、前記センサ装置から受信した前記イベント動画を記憶するイベント動画記憶部と、前記センサ装置から前記イベント動画を受信した受信時刻または前記イベント動画に関わるイベントの検知時刻から、前記第2時間より長い所定の第5時間の経過後に、前記イベント動画をイベント動画記憶部から消去するイベント動画消去処理部とを備える。 In another aspect, in the above-mentioned monitored person monitoring support system, the central management device receives the event moving image storage unit for storing the event moving image received from the sensor device and the event moving image from the sensor device. It is provided with an event video erasing processing unit that erases the event video from the event video storage unit after a predetermined fifth time longer than the second time has elapsed from the reception time or the detection time of the event related to the event video.
このような被監視者監視支援システムは、イベント動画をその受信時刻またはそのイベントの検知時刻から第5時間の経過後に自動的に消去するので、イベント動画を必要な時間だけ記憶でき、イベント動画記憶部の記憶容量を必要最小限にできる。 Such a monitored person monitoring support system automatically deletes the event video after the lapse of the fifth time from the reception time or the detection time of the event, so that the event video can be memorized for the required time, and the event video can be stored. The storage capacity of the unit can be minimized.
他の一態様では、これら上述の被監視者監視支援システムにおいて、前記動画送信部は、さらに、前記動画記憶部に記憶されている保存動画を前記中央管理装置へ送信し、前記中央管理装置は、前記センサ装置から受信した、前記保存動画を記憶する保存動画記憶部と、前記センサ装置から前記保存動画を受信した受信時刻または前記保存動画に関わるイベントの検知時刻から、前記第2時間より長い所定の第6時間の経過後に、前記保存動画記憶部に記憶されていた保存動画を前記保存動画記憶部から消去する保存動画消去処理部とを備える。 In another aspect, in the above-mentioned monitored person monitoring support system, the moving image transmission unit further transmits a stored moving image stored in the moving image storage unit to the central management device, and the central management device causes the central management device. , The second time is longer than the second time from the storage moving image storage unit that stores the stored moving image received from the sensor device and the reception time when the saved moving image is received from the sensor device or the detection time of the event related to the saved moving image. After a lapse of a predetermined sixth time, the storage moving image erasing processing unit for erasing the stored moving image stored in the stored moving image storage unit from the stored moving image storage unit is provided.
このような被監視者監視支援システムは、保存動画を中央管理装置で保存でき、また、この保存動画をその受信時刻またはそのイベントの検知時刻から第6時間の経過後に自動的に消去するので、保存動画を必要な時間だけ記憶でき、保存動画記憶部の記憶容量を必要最小限にできる。 Such a monitored person monitoring support system can save the saved video in the central management device, and automatically deletes the saved video after the lapse of 6 hours from the reception time or the detection time of the event. The saved video can be stored for the required time, and the storage capacity of the saved video storage unit can be minimized.
この出願は、2018年11月15日に出願された日本国特許出願特願2018−214508を基礎とするものであり、その内容は、本願に含まれるものである。 This application is based on Japanese Patent Application No. 2018-214508 filed on November 15, 2018, the contents of which are included in the present application.
本発明の実施形態が詳細に図示され、かつ、説明されたが、それは単なる図例及び実例であって限定ではない。本発明の範囲は、添付されたクレームの文言によって解釈されるべきである。 Although embodiments of the present invention have been illustrated and described in detail, they are merely illustrations and examples and are not limited. The scope of the invention should be construed by the wording of the accompanying claims.
本発明を表現するために、上述において図面を参照しながら実施形態を通して本発明を適切且つ十分に説明したが、当業者であれば上述の実施形態を変更および/または改良することは容易に為し得ることであると認識すべきである。したがって、当業者が実施する変更形態または改良形態が、請求の範囲に記載された請求項の権利範囲を離脱するレベルのものでない限り、当該変更形態または当該改良形態は、当該請求項の権利範囲に包括されると解釈される。 In order to express the present invention, the present invention has been appropriately and sufficiently described through the embodiments with reference to the drawings above, but those skilled in the art can easily change and / or improve the above embodiments. It should be recognized that it can be done. Therefore, unless the modified or improved form implemented by a person skilled in the art is at a level that deviates from the scope of rights of the claims stated in the claims, the modified form or the improved form is the scope of rights of the claims. It is interpreted as being comprehensively included in.
本発明によれば、被監視者の監視を支援するための被監視者監視支援システムのセンサ装置、その監視画像を保存する監視画像保存方法、および、前記被監視者監視支援システムが提供できる。
According to the present invention, it is possible to provide a sensor device of a monitored person monitoring support system for supporting monitoring of a monitored person, a monitoring image saving method for storing the monitored image, and the monitored person monitoring support system.
Claims (10)
動画を生成する撮像部と、
前記イベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する動画送信処理部と、
前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持ち、前記撮像部で生成された動画を保存動画として記憶する動画記憶部とを備える、
センサ装置。A sensor device that is provided in response to the monitored person to be monitored and detects a predetermined event related to the monitored person, is communicably connected to the sensor device, and notifies the notification of the event detected by the sensor device. It is provided with a central management device that receives and manages the event, and a terminal device that is communicably connected to the central management device and receives notification of an event detected by the sensor device via the central management device, and is monitored. The sensor device of the monitored person monitoring support system for supporting the monitoring of a person.
An imaging unit that generates moving images and
When the event is detected, a moving image transmission processing unit that transmits the moving image of a predetermined first time including the time when the event is detected generated by the imaging unit to the central management device as an event moving image.
It has a storage capacity for storing a moving image of a predetermined second time longer than the first time, and includes a moving image storage unit for storing a moving image generated by the imaging unit as a stored moving image.
Sensor device.
前記第3時間以下の所定の第4時間の経過ごとに前記リングバッファの記憶部に記憶された第4時間の動画を読み出し、前記読み出した前記第4時間の動画を前記保存動画として前記動画記憶部に記憶する動画記憶処理部とをさらに備え、
前記動画送信部は、前記イベントを検知した場合に、前記リングバッファの記憶部に記憶された前記第1時間の動画を読み出し、前記読み出した前記第1時間の動画を前記イベント動画として前記中央管理装置へ送信する、
請求項1に記載のセンサ装置。A storage unit of a ring buffer having a storage capacity for storing a moving image of a predetermined third time that is equal to or longer than the first hour and less than the second time, and storing a moving image generated by the imaging unit.
The moving image of the 4th hour stored in the storage unit of the ring buffer is read out every time the predetermined 4th hour of the 3rd hour or less elapses, and the read moving image of the 4th hour is stored as the stored moving image. It also has a video storage processing unit that stores in the unit.
When the moving image transmission unit detects the event, the moving image transmitting unit reads the moving image of the first time stored in the storage unit of the ring buffer, and the read moving image of the first time is used as the event moving image for central management. Send to device,
The sensor device according to claim 1.
請求項1または請求項2に記載のセンサ装置。The moving image storage unit is a ring buffer.
The sensor device according to claim 1 or 2.
請求項1ないし請求項3のいずれか1項に記載のセンサ装置。The saved moving image has a second image quality lower than the first image quality of the event moving image.
The sensor device according to any one of claims 1 to 3.
前記動画送信処理部は、前記複数の種類のうちの、予め設定された特定の種類のイベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画を前記イベント動画として前記中央管理装置へ送信し、
前記複数の種類のうちの、前記特定の種類を除く残余の種類のイベントを検知した場合に、前記検知したイベントに関する所定のタグ情報を、前記動画記憶部に記憶されている前記保存動画に関連付けるタグ情報付与処理部をさらに備える、
請求項1ないし請求項4のいずれか1項に記載のセンサ装置。The event includes multiple types
When the moving image transmission processing unit detects a preset specific type of event among the plurality of types, a predetermined first unit including a time point when the event is detected, which is generated by the imaging unit. A video of the time is transmitted as the event video to the central management device,
When an event of a residual type other than the specific type is detected among the plurality of types, predetermined tag information regarding the detected event is associated with the stored moving image stored in the moving image storage unit. Further equipped with a tag information addition processing unit,
The sensor device according to any one of claims 1 to 4.
動画を生成する撮像工程と、
前記イベントを検知した場合に、前記撮像工程で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する動画送信処理工程と、
前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持つ動画記憶部に前記撮像工程で生成された動画を保存動画として記憶する動画記憶工程とを備える、
監視画像保存方法。A sensor device that is provided in response to the monitored person to be monitored and detects a predetermined event related to the monitored person, is communicably connected to the sensor device, and notifies the notification of the event detected by the sensor device. It is provided with a central management device that receives and manages the event, and a terminal device that is communicably connected to the central management device and receives notification of an event detected by the sensor device via the central management device, and is monitored. It is a monitoring image storage method of the monitored person monitoring support system to support the monitoring of the person.
The imaging process to generate a moving image and
When the event is detected, a moving image transmission processing step of transmitting the moving image of a predetermined first time including the time when the event is detected generated in the imaging step to the central management device as an event moving image, and
A moving image storage unit having a storage capacity for storing a moving image of a predetermined second time longer than the first time is provided with a moving image storage step of storing the moving image generated in the imaging step as a storage moving image.
Surveillance image storage method.
動画を生成する撮像部と、
前記イベントを検知した場合に、前記撮像部で生成された、前記イベントを検知した時点を含む所定の第1時間の動画をイベント動画として前記中央管理装置へ送信する動画送信処理部と、
前記第1時間より長い所定の第2時間の動画を記憶する記憶容量を持ち、前記撮像部で生成された動画を保存動画として記憶する動画記憶部とを備える、
被監視者監視支援システム。A sensor device that is provided in response to the monitored person to be monitored and detects a predetermined event related to the monitored person, is communicably connected to the sensor device, and notifies the notification of the event detected by the sensor device. It is provided with a central management device that receives and manages the event, and a terminal device that is communicably connected to the central management device and receives notification of an event detected by the sensor device via the central management device, and is monitored. It is a monitored person monitoring support system to support the monitoring of people.
An imaging unit that generates moving images and
When the event is detected, a moving image transmission processing unit that transmits the moving image of a predetermined first time including the time when the event is detected generated by the imaging unit to the central management device as an event moving image.
It has a storage capacity for storing a moving image of a predetermined second time longer than the first time, and includes a moving image storage unit for storing a moving image generated by the imaging unit as a stored moving image.
Observed person monitoring support system.
前記センサ装置は、請求項1ないし請求項5のいずれか1項に記載のセンサ装置である、
被監視者監視支援システム。A sensor device that is provided in response to the monitored person to be monitored and detects a predetermined event related to the monitored person, is communicably connected to the sensor device, and notifies the notification of the event detected by the sensor device. It is provided with a central management device that receives and manages the event, and a terminal device that is communicably connected to the central management device and receives notification of an event detected by the sensor device via the central management device, and is monitored. It is a monitored person monitoring support system to support the monitoring of people.
The sensor device is the sensor device according to any one of claims 1 to 5.
Observed person monitoring support system.
前記センサ装置から受信した前記イベント動画を記憶するイベント動画記憶部と、
前記センサ装置から前記イベント動画を受信した受信時刻または前記イベント動画に関わるイベントの検知時刻から、前記第2時間より長い所定の第5時間の経過後に、前記イベント動画をイベント動画記憶部から消去するイベント動画消去処理部とを備える、
請求項7または請求項8に記載の被監視者監視支援システム。The central management device
An event video storage unit that stores the event video received from the sensor device, and an event video storage unit.
The event video is deleted from the event video storage unit after a predetermined fifth time longer than the second time has elapsed from the reception time when the event video is received from the sensor device or the detection time of the event related to the event video. Equipped with an event video erasing processing unit
The monitored person monitoring support system according to claim 7 or 8.
前記中央管理装置は、
前記センサ装置から受信した、前記保存動画を記憶する保存動画記憶部と、
前記センサ装置から前記保存動画を受信した受信時刻または前記保存動画に関わるイベントの検知時刻から、前記第2時間より長い所定の第6時間の経過後に、前記保存動画記憶部に記憶されていた保存動画を前記保存動画記憶部から消去する保存動画消去処理部とを備える、
請求項7ないし請求項9のいずれか1項に記載の被監視者監視支援システム。
The moving image transmitting unit further transmits the stored moving image stored in the moving image storage unit to the central management device.
The central management device
A storage moving image storage unit that stores the stored moving image received from the sensor device, and a storage moving image storage unit.
The storage stored in the stored moving image storage unit after a predetermined sixth time longer than the second time has elapsed from the reception time when the stored moving image is received from the sensor device or the detection time of the event related to the saved moving image. A storage moving image erasing processing unit for erasing a moving image from the stored moving image storage unit is provided.
The monitored person monitoring support system according to any one of claims 7 to 9.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018214508 | 2018-11-15 | ||
JP2018214508 | 2018-11-15 | ||
PCT/JP2019/039341 WO2020100461A1 (en) | 2018-11-15 | 2019-10-04 | Sensor device for to-be-monitored person monitoring assistance system, monitoring image storage method, and to-be-monitored person monitoring assistance system |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020100461A1 true JPWO2020100461A1 (en) | 2021-10-14 |
JP7491219B2 JP7491219B2 (en) | 2024-05-28 |
Family
ID=70731800
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020556693A Active JP7491219B2 (en) | 2018-11-15 | 2019-10-04 | Sensor device for monitoring support system for monitored person, monitoring image storage method, and monitoring support system for monitored person |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7491219B2 (en) |
WO (1) | WO2020100461A1 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112261143B (en) * | 2020-10-23 | 2022-04-01 | 泰华智慧产业集团股份有限公司 | Personnel position abnormity monitoring method and device |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3799544B2 (en) * | 2001-07-31 | 2006-07-19 | 株式会社日立プラントテクノロジー | Mobile object monitoring method and system |
JP7370857B2 (en) * | 2017-04-06 | 2023-10-30 | コニカミノルタ株式会社 | Behavior detection device, behavior detection method, and monitored person monitoring support system |
-
2019
- 2019-10-04 WO PCT/JP2019/039341 patent/WO2020100461A1/en active Application Filing
- 2019-10-04 JP JP2020556693A patent/JP7491219B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
WO2020100461A1 (en) | 2020-05-22 |
JP7491219B2 (en) | 2024-05-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7031585B2 (en) | Central processing unit, program and long-term care record system of long-term care record system | |
JP6680352B2 (en) | Monitored person monitoring apparatus, method and system | |
JP2020098619A (en) | Monitored person monitoring system, information processing device, and program | |
JP7021634B2 (en) | Central processing unit and central processing method of the monitored person monitoring system and the monitored person monitoring system | |
JP6880811B2 (en) | Observed person monitoring device, the method and the system | |
JP6226110B1 (en) | Monitored person monitoring apparatus, method and system | |
JP6805621B2 (en) | Central processing unit and central processing method of the monitored person monitoring system and the monitored person monitoring system | |
JPWO2020100461A1 (en) | Sensor device of monitored person monitoring support system, monitoring image storage method and monitored person monitoring support system | |
WO2018230104A1 (en) | Central processing device and central processing method for person-to-be-monitored monitoring assist system, and person-to-be-monitored monitoring assist system | |
JP7095598B2 (en) | Care plan output device, method and system as well as monitored person monitoring system | |
JP6740633B2 (en) | Central processing unit and central processing method of monitored person monitoring system, and monitored person monitoring system | |
JP6895090B2 (en) | Detection system and display processing method of detection system | |
JP7137142B2 (en) | Monitored person monitoring system | |
JP6673382B2 (en) | Terminal device, program and method | |
JP7063333B2 (en) | Observed person monitoring device and method, and monitored person monitoring support system | |
WO2019142566A1 (en) | Monitored person monitoring support system and monitored person monitoring support method | |
JP7251476B2 (en) | CENTRAL PROCESSING UNIT AND METHOD OF MONITORED PERSON MONITORING SUPPORT SYSTEM AND MONITORED PERSON MONITORING SUPPORT SYSTEM | |
JP7234931B2 (en) | Sensor Device of Monitored Person Monitoring Support System, Processing Method of Sensor Device, and Monitored Person Monitoring Support System | |
JP2020188487A (en) | Central processing device, monitored person monitoring method, and monitored person monitoring system | |
JPWO2020031531A1 (en) | Movement behavior abnormality determination device and its method, and monitored person monitoring support system | |
JPWO2019142449A1 (en) | Image recording system and its method and monitored person monitoring support system | |
JPWO2019142450A1 (en) | Observed person monitoring support system and its method | |
JPWO2019235068A1 (en) | Monitored person monitoring support device, monitored person monitoring support method, monitored person monitoring support system and monitored person monitoring support server device | |
JPWO2019150685A1 (en) | Observed person monitoring support system and its method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220920 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231114 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240112 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240416 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240429 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7491219 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |