JP7205540B2 - Computer Executed Programs, Information Processing Devices, and Computer Executed Methods - Google Patents

Computer Executed Programs, Information Processing Devices, and Computer Executed Methods Download PDF

Info

Publication number
JP7205540B2
JP7205540B2 JP2020527346A JP2020527346A JP7205540B2 JP 7205540 B2 JP7205540 B2 JP 7205540B2 JP 2020527346 A JP2020527346 A JP 2020527346A JP 2020527346 A JP2020527346 A JP 2020527346A JP 7205540 B2 JP7205540 B2 JP 7205540B2
Authority
JP
Japan
Prior art keywords
resident
area
range
living room
area defined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020527346A
Other languages
Japanese (ja)
Other versions
JPWO2020003955A1 (en
Inventor
寛 古川
武士 阪口
海里 姫野
恵美子 寄▲崎▼
修 遠山
浩一 藤原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Publication of JPWO2020003955A1 publication Critical patent/JPWO2020003955A1/en
Application granted granted Critical
Publication of JP7205540B2 publication Critical patent/JP7205540B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/04Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/04Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using a single signalling line, e.g. in a closed loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Description

本開示はデータ処理に関し、より特定的には、移動軌跡に基づくデータ処理に関する。 TECHNICAL FIELD This disclosure relates to data processing, and more particularly to data processing based on movement trajectories.

居住者を見守る技術が知られている。例えば、特開2015-215711号公報(特許文献1)は、『居住者の生活に寄り添う形で居住者の行動や生態の相対的な変化を見守るべく、個人差が著しい「老い」の進行を、その居住者の能力や環境に応じて相対的に評価しその評価に合った見守りの仕様を提示できる見守りシステム』を開示している([要約]の[課題]参照)。 Techniques for watching over residents are known. For example, Japanese Unexamined Patent Application Publication No. 2015-215711 (Patent Document 1) discloses that “In order to monitor the relative changes in the behavior and ecology of residents in a way that is close to the lives of residents, the progress of “aging”, which has significant individual differences, can be monitored. , a watching system that can relatively evaluate according to the ability and environment of the resident and present specifications of watching that match the evaluation” (see [Problem] in [Summary]).

特開2017-117423号公報(特許文献2)は、『見守り対象者の歩速を含む日常行動を把握可能な見守りシステム』を開示している。当該見守りシステムは、『住居Hに設置された複数の子機2(2A~2G)と親機3とを備える。各子機2は、対象者を感知すると通知信号を親機3に送信する。親機3は、子機2Dからの通知信号の時刻データと子機2Eからの通知信号の時刻データとに基づいて、見守り対象者の寝室PDからトイレPDまでの移動時間を算出し、当該移動時間に基づき見守り対象者の歩速を算出する。』という構成を備える([要約]参照)。 Japanese Patent Laying-Open No. 2017-117423 (Patent Document 2) discloses a “watching system capable of grasping daily behavior including walking speed of a person being watched over”. The monitoring system "includes a plurality of slave units 2 (2A to 2G) and a master unit 3 installed in a residence H. Each slave device 2 transmits a notification signal to the master device 3 when it senses the target person. Based on the time data of the notification signal from child device 2D and the time data of the notification signal from child device 2E, master device 3 calculates the movement time of the watching target from bedroom PD to toilet PD, The walking speed of the person being watched over is calculated based on the time. ] (See [Abstract]).

特開2015-215711号公報JP 2015-215711 A 特開2017-117423号公報JP 2017-117423 A

一方で、見守りシステムでは、常に入居者の移動軌跡等を監視しているが、入居者のみならず、介助者等入居者以外が存在している場合もある。 On the other hand, the monitoring system always monitors the moving trajectory and the like of the resident, but there are cases where not only the resident but also a caregiver or other person other than the resident exists.

当該場合には、入居者以外の移動軌跡に関するデータも計測されるため入居者のデータ測定に支障が生じる場合がある。 In this case, since data related to the locus of movement of a person other than the resident is also measured, data measurement of the resident may be hindered.

本開示は上述のような背景に鑑みてなされたものであって、ある局面における目的は、入居者のデータ測定を精度よく行うことが可能な技術を提供することである。 The present disclosure has been made in view of the background as described above, and an object of a certain aspect is to provide a technique capable of accurately measuring data of residents.

ある実施の形態に従うと、コンピュータで実行されるプログラムが提供される。プログラムはコンピュータに、居室の入居者の行動範囲として規定されたエリアと、入居者以外の人の行動範囲として規定されたエリアとを表わすエリア情報を設定するステップと、居室における人の移動軌跡を表わす一つ以上の移動軌跡データを取得するステップと、エリア情報と、取得された一つ以上の移動軌跡データとに基づいて、入居者の移動軌跡データを識別するステップとを実行させる。 According to one embodiment, a computer-executable program is provided. The program sets, in the computer, area information representing an area defined as the range of activities of residents in the living room and an area defined as the range of activities of people other than the residents; Obtaining representative one or more trajectory data, and identifying the resident's trajectory data based on the area information and the obtained one or more trajectory data are performed.

ある実施の形態に従うと、入居者の行動範囲として規定されたエリアは、ベッドの近傍、トイレの近傍、家具の近傍、または洗面所の近傍の少なくとも一つを含む。 According to one embodiment, the area defined as the resident's range of movement includes at least one of the vicinity of the bed, the vicinity of the toilet, the vicinity of the furniture, or the vicinity of the washroom.

ある実施の形態に従うと、入居者以外の行動範囲として規定されたエリアは、居室の隅、または、入居者のベッドと居室の壁との間の少なくとも一つを含む。 According to one embodiment, the defined areas for non-resident activity include at least one of the corners of the living room or between the resident's bed and the wall of the living room.

ある実施の形態に従うと、エリア情報を設定するステップは、居室における家具の配置に基づいて、入居者の行動範囲として規定されたエリアまたは入居者以外の人の行動範囲として規定されたエリアとを表すエリア情報を設定するステップを含む。 According to an embodiment, the step of setting the area information includes selecting an area defined as the movement range of the resident or an area defined as the movement range of people other than the resident based on the arrangement of furniture in the living room. including the step of setting the area information to represent.

ある実施の形態に従うと、メモリーと、メモリーに結合されたプロセッサーとを備える。プロセッサーは、居室の入居者の行動範囲として規定されたエリアと、入居者以外の人の行動範囲として規定されたエリアとを表わすエリア情報を設定し、居室における人の移動軌跡を表わす一つ以上の移動軌跡データを取得し、エリア情報と、取得された一つ以上の移動軌跡データとに基づいて、入居者の移動軌跡データを識別するように構成されている。 According to one embodiment, it comprises a memory and a processor coupled to the memory. The processor sets area information representing an area defined as the range of movement of residents in the living room and an area defined as the range of movement of people other than the residents, and one or more pieces of information representing movement trajectories of people in the room. and identifying the resident's trajectory data based on the area information and the one or more trajectory data obtained.

ある実施の形態に従うと、入居者の行動範囲として規定されたエリアは、ベッドの近傍、トイレの近傍、家具の近傍、または洗面所の近傍の少なくとも一つを含む。 According to one embodiment, the area defined as the resident's range of movement includes at least one of the vicinity of the bed, the vicinity of the toilet, the vicinity of the furniture, or the vicinity of the washroom.

ある実施の形態に従うと、入居者以外の行動範囲として規定されたエリアは、居室の隅、または、入居者のベッドと居室の壁との間の少なくとも一つを含む。 According to one embodiment, the defined areas for non-resident activity include at least one of the corners of the living room or between the resident's bed and the wall of the living room.

ある実施の形態に従うと、プロセッサーは、居室における家具の配置に基づいて、入居者の行動範囲として規定されたエリアまたは入居者以外の人の行動範囲として規定されたエリアとを表すエリア情報を設定する。 According to an embodiment, the processor sets area information representing an area defined as the movement range of the resident or an area defined as the movement range of people other than the resident based on the arrangement of furniture in the living room. do.

ある実施の形態に従うと、コンピュータで実行される方法であって、居室の入居者の行動範囲として規定されたエリアと、入居者以外の人の行動範囲として規定されたエリアとを表わすエリア情報を設定するステップと、居室における人の移動軌跡を表わす一つ以上の移動軌跡データを取得するステップと、エリア情報と、取得された一つ以上の移動軌跡データとに基づいて、入居者の移動軌跡データを識別するステップとを含む。 According to one embodiment, a computer-implemented method generates area information representing an area defined as a resident's movement range in a living room and an area defined as a movement range of a person other than the resident. a step of setting; a step of acquiring one or more movement trajectory data representing a movement trajectory of a person in a living room; area information; and identifying the data.

ある実施の形態に従うと、入居者の行動範囲として規定されたエリアは、ベッドの近傍、トイレの近傍、家具の近傍、または洗面所の近傍の少なくとも一つを含む。 According to one embodiment, the area defined as the resident's range of movement includes at least one of the vicinity of the bed, the vicinity of the toilet, the vicinity of the furniture, or the vicinity of the washroom.

ある実施の形態に従うと、入居者以外の行動範囲として規定されたエリアは、居室の隅、または、入居者のベッドと居室の壁との間の少なくとも一つを含む。 According to one embodiment, the defined areas for non-resident activity include at least one of the corners of the living room or between the resident's bed and the wall of the living room.

ある実施の形態に従うと、エリア情報を設定するステップは、居室における家具の配置に基づいて、入居者の行動範囲として規定されたエリアまたは入居者以外の人の行動範囲として規定されたエリアとを表すエリア情報を設定する。 According to an embodiment, the step of setting the area information includes selecting an area defined as the movement range of the resident or an area defined as the movement range of people other than the resident based on the arrangement of furniture in the living room. Set the area information to represent.

この発明の上記および他の目的、特徴、局面および利点は、添付の図面と関連して理解されるこの発明に関する次の詳細な説明から明らかとなるであろう。 The above and other objects, features, aspects and advantages of the present invention will become apparent from the following detailed description of the invention taken in conjunction with the accompanying drawings.

見守りシステム100の構成の一例を示す図である。It is a figure which shows an example of a structure of the watching system 100. FIG. 見守りシステム100の構成の概要を示すブロック図である。It is a block diagram which shows the outline of a structure of the watching system 100. FIG. コンピューターシステム300のハードウェア構成を表わすブロック図である。3 is a block diagram showing the hardware configuration of computer system 300. FIG. センサーボックス119を用いた見守りシステム100の装置構成の概略の一例を示す図である。It is a figure which shows an example of an outline of an apparatus structure of the watching system 100 using the sensor box 119. FIG. コンピューターシステム300が備えるハードディスク5におけるデータの格納の一態様を表わす図である。3 is a diagram showing one mode of data storage in hard disk 5 included in computer system 300. FIG. コンピュータシステム300が有する家具備品の情報について説明する図である。3 is a diagram for explaining information on furniture fixtures held by the computer system 300. FIG. X座標およびY座標で規定される居室空間を示す居室エリア700を説明する図である。7 is a diagram for explaining a living room area 700 showing a living room space defined by X coordinates and Y coordinates; FIG. 実施形態に従う移動軌跡データの識別について説明する図である。It is a figure explaining identification of movement track|trajectory data according to embodiment. 実施形態に従うコンピュータシステム300が移動軌跡データの識別を実行する処理の一部を説明するフロー図である。FIG. 4 is a flow diagram illustrating part of a process in which a computer system 300 according to an embodiment performs identification of movement trajectory data;

以下、図面を参照しつつ、本開示に係る技術思想の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。 Hereinafter, embodiments of the technical concept according to the present disclosure will be described with reference to the drawings. In the following description, the same parts are given the same reference numerals. Their names and functions are also the same. Therefore, detailed description thereof will not be repeated.

[技術思想]
居室内における、ベッド位置、部屋の入り口、居室内トイレ、洗面台の位置等に基づいて、入居者の行動を観測するエリアを限定する。
[Technical concept]
The area in which the behavior of the resident is observed is limited based on the position of the bed, the entrance of the room, the toilet in the room, the washbasin in the room, and the like.

観測エリアを限定することで、入居者と介助者との行動の切り分けが可能である。例えば、入居者がトイレへ行く時の行動だけを取り出すことも可能である。これにより、入居者の行動の観測精度を上げることができる。 By limiting the observation area, it is possible to separate the actions of the resident and the caregiver. For example, it is possible to extract only the behavior of the resident when going to the bathroom. Thereby, the observation precision of a resident|tenant's action can be raised.

[見守りシステムの構成]
図1は、見守りシステム100の構成の一例を示す図である。見守り対象は、例えば、施設の居室領域180に設けられた各居室内の入居者である。図1の見守りシステム100では、居室領域180に、居室110,120が設けられている。居室110は、入居者111に割り当てられている。居室120は、入居者121に割り当てられている。図1の例では、見守りシステム100に含まれる居室の数は2であるが、当該数はこれに限定されない。
[Configuration of monitoring system]
FIG. 1 is a diagram showing an example of the configuration of the watching system 100. As shown in FIG. The watching target is, for example, a resident in each living room provided in the living room area 180 of the facility. In the monitoring system 100 of FIG. 1 , living rooms 110 and 120 are provided in a living room area 180 . A living room 110 is assigned to a resident 111 . A living room 120 is assigned to a resident 121 . In the example of FIG. 1, the number of living rooms included in the watching system 100 is two, but the number is not limited to this.

見守りシステム100では、居室110,120にそれぞれ設置されたセンサーボックス119と、管理センター130に設置された管理サーバー200と、アクセスポイント140とが、ネットワーク190を介して接続される。ネットワーク190は、イントラネットおよびインターネットのいずれをも含み得る。 In monitoring system 100 , sensor boxes 119 installed in living rooms 110 and 120 , management server 200 installed in management center 130 , and access point 140 are connected via network 190 . Network 190 may include both intranets and the Internet.

見守りシステム100では、介護者141が携帯する携帯端末143、および、介護者142が携帯する携帯端末144は、アクセスポイント140を介してネットワーク190に接続可能である。さらに、センサーボックス119、管理サーバー200、および、アクセスポイント140は、ネットワーク190を介して、クラウドサーバー150と通信可能である。 In the watching system 100 , a mobile terminal 143 carried by a caregiver 141 and a mobile terminal 144 carried by a caregiver 142 can be connected to a network 190 via an access point 140 . Furthermore, sensor box 119 , management server 200 and access point 140 can communicate with cloud server 150 via network 190 .

居室110,120は、それぞれ、設備として、タンス112、ベッド113、および、トイレ114を含む。居室110のドアには、当該ドアの開閉を検出するドアセンサー118が設置されている。トイレ114のドアには、トイレ114の開閉を検出するトイレセンサー116が設置されている。ベッド113には、各入居者111,121の臭いを検出する臭いセンサー117が設置されている。各入居者111,121は、当該入居者111,121のバイタル情報を検出するバイタルセンサー290を装着している。検出されるバイタル情報は、入居者の体温、呼吸、心拍数等を含む。居室110,120では、各入居者111,121は、それぞれ、ケアコール子機115を操作することができる。 Living rooms 110 and 120 each include a wardrobe 112, a bed 113, and a toilet 114 as equipment. A door sensor 118 is installed on the door of the living room 110 to detect opening and closing of the door. A toilet sensor 116 for detecting opening and closing of the toilet 114 is installed on the door of the toilet 114 . A bed 113 is provided with an odor sensor 117 that detects the odor of each of the residents 111 and 121 . Each resident 111,121 is equipped with a vital sensor 290 for detecting vital information of the resident 111,121. The detected vital information includes the resident's body temperature, respiration, heart rate, and the like. In living rooms 110 and 120, each resident 111 and 121 can operate a care call slave device 115, respectively.

センサーボックス119は、居室110,120内の物体の挙動を検出するためのセンサーを内蔵している。センサーの一例は、物体の動作を検出するためのドップラーセンサーである。他の例は、カメラである。センサーボックス119は、センサーとしてドップラーセンサーとカメラの双方を含んでもよい。 The sensor box 119 incorporates sensors for detecting behavior of objects in the living rooms 110 and 120 . One example of a sensor is a Doppler sensor for detecting motion of an object. Another example is a camera. Sensor box 119 may include both a Doppler sensor and a camera as sensors.

図2を参照して、見守りシステム100の構成要素について説明する。図2は、見守りシステム100の構成の概要を示すブロック図である。 The constituent elements of the watching system 100 will be described with reference to FIG. 2 . FIG. 2 is a block diagram showing an overview of the configuration of the watching system 100. As shown in FIG.

[センサーボックス119]
センサーボックス119は、制御装置101と、ROM(Read Only Memory)102と、RAM(Random Access Memory)103と、通信インターフェイス104と、カメラ105と、ドップラーセンサー106と、無線通信装置107と、記憶装置108とを備える。
[Sensor box 119]
The sensor box 119 includes a control device 101, a ROM (Read Only Memory) 102, a RAM (Random Access Memory) 103, a communication interface 104, a camera 105, a Doppler sensor 106, a wireless communication device 107, and a storage device. 108.

制御装置101は、センサーボックス119を制御する。制御装置101は、たとえば、少なくとも1つの集積回路によって構成される。集積回路は、たとえば、少なくとも1つのCPU(Central Processing Unit)、MPU(Micro Processing Unit)その他のプロセッサー、少なくとも1つのASIC(Application Specific Integrated Circuit)、少なくとも1つのFPGA(Field Programmable Gate Array)、またはこれらの組み合わせなどによって構成される。 The control device 101 controls the sensor box 119 . The control device 101 is composed of, for example, at least one integrated circuit. Integrated circuits include, for example, at least one CPU (Central Processing Unit), MPU (Micro Processing Unit) and other processors, at least one ASIC (Application Specific Integrated Circuit), at least one FPGA (Field Programmable Gate Array), or these It is composed of a combination of

通信インターフェイス104には、アンテナ(図示しない)などが接続される。センサーボックス119は、当該アンテナを介して、外部の通信機器との間でデータをやり取りする。外部の通信機器は、たとえば、管理サーバー200、携帯端末143,144その他の端末、アクセスポイント140、クラウドサーバー150、その他の通信端末などを含む。 An antenna (not shown) and the like are connected to the communication interface 104 . The sensor box 119 exchanges data with an external communication device via the antenna. External communication devices include, for example, the management server 200, the mobile terminals 143, 144 and other terminals, the access point 140, the cloud server 150 and other communication terminals.

カメラ105は、一実現例では、近赤外カメラである。近赤外カメラは、近赤外光を投光するIR(Infrared)投光器を含む。近赤外カメラが用いられることにより、夜間でも居室110,120の内部を表わす画像が撮影され得る。他の実現例では、カメラ105は、可視光のみを受光する監視カメラである。さらに他の実現例では、カメラ105として、3Dセンサやサーモグラフィーカメラが用いられてもよい。センサーボックス119およびカメラ105は、一体として構成されてもよいし、別体で構成されてもよい。 Camera 105, in one implementation, is a near-infrared camera. A near-infrared camera includes an IR (Infrared) projector that projects near-infrared light. By using a near-infrared camera, an image representing the inside of living room 110, 120 can be captured even at night. In other implementations, camera 105 is a surveillance camera that receives only visible light. In still other implementations, camera 105 may be a 3D sensor or a thermographic camera. The sensor box 119 and the camera 105 may be configured integrally or separately.

ドップラーセンサー106は、たとえばマイクロ波ドップラーセンサーであり、電波を放射及び受信して、居室110,120内の物体の挙動(動作)を検出する。これにより、居室110,120の入居者111,121の生体情報が検出され得る。一例では、ドップラーセンサー106は、24GHz帯のマイクロ波を各居室110,120のベッド113に向けて放射し、入居者111,121で反射した反射波を受信する。反射波は、入居者111,121の動作により、ドップラーシフトしている。ドップラーセンサー106は、当該反射波から、入居者111,121の呼吸状態や心拍数を検出し得る。 The Doppler sensor 106 is, for example, a microwave Doppler sensor that emits and receives radio waves to detect the behavior (movement) of objects in the living rooms 110 and 120 . Thereby, the biological information of the residents 111 and 121 in the living rooms 110 and 120 can be detected. In one example, the Doppler sensor 106 emits microwaves in the 24 GHz band toward the beds 113 of the living rooms 110 and 120 and receives reflected waves reflected by the residents 111 and 121 . The reflected waves are Doppler-shifted by the motions of the residents 111 and 121 . The Doppler sensor 106 can detect the respiratory state and heart rate of the residents 111 and 121 from the reflected waves.

無線通信装置107は、ケアコール子機240、ドアセンサー118、トイレセンサー116、臭いセンサー117、および、バイタルセンサー290からの信号を受信し、当該信号を制御装置101へ送信する。たとえば、ケアコール子機240は、ケアコールボタン241を備える。当該ボタンが操作されると、ケアコール子機240は、当該操作があったことを示す信号を無線通信装置107へ送信する。ドアセンサー118、トイレセンサー116、臭いセンサー117、および、バイタルセンサー290は、それぞれの検出結果を無線通信装置107へ送信する。 Wireless communication device 107 receives signals from care call slave device 240 , door sensor 118 , toilet sensor 116 , odor sensor 117 , and vital sensor 290 and transmits the signals to control device 101 . For example, care call slave device 240 has care call button 241 . When the button is operated, care call slave device 240 transmits a signal indicating that the operation has been performed to wireless communication device 107 . Door sensor 118 , toilet sensor 116 , odor sensor 117 , and vital sensor 290 transmit their detection results to wireless communication device 107 .

記憶装置108は、たとえば、フラッシュメモリーまたはハードディスク等の固定記憶装置、あるいは、外付けの記憶装置などの記録媒体である。記憶装置108は、制御装置101によって実行されるプログラム、および、当該プログラムの実行に利用される各種のデータを格納する。各種のデータは、入居者111,121の行動情報を含んでいてもよい。行動情報の詳細は後述する。 The storage device 108 is, for example, a fixed storage device such as a flash memory or hard disk, or a recording medium such as an external storage device. The storage device 108 stores programs executed by the control device 101 and various data used for executing the programs. Various data may include the behavior information of residents 111 and 121 . Details of the action information will be described later.

上記のプログラムおよびデータのうち少なくとも一方は、制御装置101がアクセス可能な記憶装置であれば、記憶装置108以外の記憶装置(たとえば、制御装置101の記憶領域(たとえば、キャッシュメモリーなど)、ROM102、RAM103、外部機器(たとえば、管理サーバー200や携帯端末143,144等)に格納されていてもよい。 At least one of the programs and data described above can be stored in a storage device other than the storage device 108 (for example, a storage area of the control device 101 (eg, cache memory), ROM 102, etc.) as long as the storage device can be accessed by the control device 101. It may be stored in the RAM 103, external equipment (for example, the management server 200, mobile terminals 143, 144, etc.).

[行動情報]
上記の行動情報について、説明する。行動情報は、たとえば入居者111,121が所定の行動を実行したことを表わす情報である。一例では、所定の行動は、入居者111,121が起きたことを表わす「起床」、入居者111,121がベッド(寝具)113から離れたことを表わす「離床」、入居者111,121がベッド(寝具)113から落ちたことを表わす「転落」、および、入居者111,121が倒れたことを表わす「転倒」の4つの行動を含む。
[Action information]
The above action information will be explained. Action information is, for example, information indicating that residents 111 and 121 have performed a predetermined action. In one example, the predetermined actions are "get up" indicating that the residents 111 and 121 have woken up, "leave the bed" indicating that the residents 111 and 121 have left the bed (bedding) 113, and the residents 111 and 121 It includes four actions of "falling" indicating falling from the bed (bedding) 113 and "falling" indicating that the residents 111 and 121 have fallen.

一実施の形態では、制御装置101が、各居室110,120に設置されたカメラ105が撮像した画像に基づいて、各居室110,120に関連付けられた入居者111,121の各行動情報を生成する。制御装置101は、たとえば、上記画像から入居者111,121の頭部を検出し、この検出した入居者111,121の頭部における大きさの時間変化に基づいて、入居者111,121の「起床」、「離床」、「転倒」および「転落」を検出する。以下、行動情報の生成の一具体例を、より詳細に説明する。 In one embodiment, the control device 101 generates each action information of the residents 111 and 121 associated with each living room 110 and 120 based on the images captured by the cameras 105 installed in each living room 110 and 120. do. For example, the control device 101 detects the heads of the residents 111 and 121 from the above images, and determines the " Detects "Getting up", "Getting out of bed", "Falling" and "Falling". A specific example of generating behavior information will be described in more detail below.

まず、記憶装置108に、居室110,120における各ベッド113の所在領域、第1閾値Th1、第2閾値Th2、および、第3閾値Th3が格納される。第1閾値Th1は、ベッド113の所在領域内において、横臥姿勢にあるときと座位姿勢にあるときとの間で入居者の頭部の大きさを識別する。第2閾値Th2は、ベッド113の所在領域を除く居室110,120内において、入居者の頭部の大きさに基づいて、当該入居者が立位姿勢にあるか否かを識別する。第3閾値Th3は、ベッド113の所在領域を除く居室110,120内において、入居者の頭部の大きさに基づいて、当該入居者が横臥姿勢にあるか否かを識別する。 First, the storage device 108 stores the location area of each bed 113 in the rooms 110 and 120, the first threshold Th1, the second threshold Th2, and the third threshold Th3. The first threshold Th1 distinguishes the size of the resident's head between the lying posture and the sitting posture within the location area of the bed 113 . The second threshold Th2 identifies whether or not the resident is in a standing posture in the living rooms 110 and 120 excluding the area where the bed 113 is located, based on the size of the resident's head. The third threshold Th3 identifies whether or not the resident is lying down based on the head size of the resident in the living rooms 110 and 120 excluding the area where the bed 113 is located.

制御装置101は、対象画像から、例えば背景差分法やフレーム差分法によって、入居者111,121の人物の領域として、動体領域を抽出する。制御装置101は、さらに、当該抽出した動体領域から、例えば円形や楕円形のハフ変換によって、予め用意された頭部のモデルを用いたパターンマッチングによって、頭部検出用に学習したニューラルネットワークによって導出された閾値を用いて、入居者111,121の頭部領域を抽出する。制御装置101は、当該抽出された頭部の位置および大きさから、「起床」、「離床」、「転倒」および「転落」を検知する。 The control device 101 extracts a moving body region as a human region of the residents 111 and 121 from the target image by, for example, a background subtraction method or a frame subtraction method. The control device 101 further derives from the extracted moving object region, for example, a circular or elliptical Hough transform, pattern matching using a head model prepared in advance, and a neural network trained for head detection. The head regions of the residents 111 and 121 are extracted using the threshold values thus obtained. The control device 101 detects "getting up", "getting out of bed", "falling", and "falling" from the extracted position and size of the head.

制御装置101は、上記のように抽出された頭部の位置がベッド113の所在領域内にあり、かつ、上記のように抽出された頭部の大きさが第1閾値Th1を用いることによって横臥姿勢の大きさから座位姿勢の大きさへと変化したことを検出した場合に、行動「起床」が発生したことを決定してもよい。 The control device 101 determines that the position of the head extracted as described above is within the location area of the bed 113 and the size of the head extracted as described above is determined by using the first threshold value Th1. It may be determined that the action "wake up" has occurred when it detects a change from posture magnitude to sitting posture magnitude.

制御装置101は、上記のように抽出された頭部の位置がベッド113の所在領域内からベッド113の所在領域外へ移動した場合において、上記のように抽出された頭部の大きさに対して第2閾値Th2を適用することにより、頭部がある大きさから立位姿勢の大きさへと変化したことを検出したときには、行動「離床」が発生したと判定してもよい。 When the position of the head extracted as described above moves from within the location area of the bed 113 to outside the location area of the bed 113, the control device 101 controls the size of the head extracted as described above. By applying the second threshold Th2 to the head position, it may be determined that the action "getting out of bed" has occurred when it is detected that the size of the head has changed from a certain size to the size of the standing posture.

制御装置101は、上記のように抽出された頭部の位置がベッド113の所在領域内からベッド113の所在領域外へ移動した場合において、上記のように抽出された頭部の大きさに対して第3閾値Th3を適用することにより、頭部がある大きさから横臥姿勢の大きさへと変化したことを検出したときには、行動「転落」が発生したと判定してもよい。 When the position of the head extracted as described above moves from within the location area of the bed 113 to outside the location area of the bed 113, the control device 101 controls the size of the head extracted as described above. By applying the third threshold value Th3 to , it may be determined that the action "fall" has occurred when it is detected that the head has changed from a certain size to the size of the lying posture.

制御装置101は、上記のように抽出された頭部の位置がベッド113の所在領域を除く居室110,120内に位置し、かつ、抽出された頭部の大きさが第3閾値Th3を用いることによって或る大きさから横臥姿勢の大きさへと変化したことを検出した場合には、行動「転倒」が発生したと決定してもよい。 The control device 101 determines that the position of the head extracted as described above is located in the living room 110 or 120 excluding the location area of the bed 113, and the size of the extracted head uses the third threshold value Th3. It may be determined that the action "fall" has occurred if it detects a change from a size to a lying size by .

以上説明されたように、一具体例では、センサーボックス119の制御装置101が、入居者111,121の各行動情報を生成する。なお、他の局面に従う見守りシステム100では、居室110,120内の画像を用いて、制御装置101以外の他の要素(例えば、クラウドサーバー150)が入居者111,121の行動情報を生成してもよい。 As described above, in one specific example, the control device 101 of the sensor box 119 generates each action information of the residents 111 and 121 . In addition, in the monitoring system 100 according to another aspect, an element other than the control device 101 (for example, the cloud server 150) generates the behavior information of the residents 111 and 121 using the images in the living rooms 110 and 120. good too.

[携帯端末143,144]
携帯端末143,144は、制御装置221と、ROM222と、RAM223と、通信インターフェイス224と、ディスプレイ226と、記憶装置228と、入力デバイス229とを含む。ある局面において、携帯端末143,144は、例えば、スマートフォン、タブレット端末、腕時計型端末その他のウェアラブル装置等として実現される。
[Portable terminals 143, 144]
The mobile terminals 143 , 144 include a control device 221 , a ROM 222 , a RAM 223 , a communication interface 224 , a display 226 , a storage device 228 and an input device 229 . In one aspect, the mobile terminals 143 and 144 are implemented as, for example, smart phones, tablet terminals, wristwatch-type terminals, and other wearable devices.

制御装置221は、携帯端末143,144を制御する。制御装置221は、たとえば、少なくとも1つの集積回路によって構成される。集積回路は、たとえば、少なくとも1つのCPU、少なくとも1つのASIC、少なくとも1つのFPGA、またはそれらの組み合わせなどによって構成される。 The control device 221 controls the mobile terminals 143 and 144 . The control device 221 is composed of, for example, at least one integrated circuit. An integrated circuit is composed of, for example, at least one CPU, at least one ASIC, at least one FPGA, or a combination thereof.

通信インターフェイス224には、アンテナ(図示しない)などが接続される。携帯端末143,144は、当該アンテナおよびアクセスポイント140を介して、外部の通信機器との間でデータをやり取りする。外部の通信機器は、たとえば、センサーボックス119、管理サーバー200などを含む。 An antenna (not shown) and the like are connected to the communication interface 224 . Mobile terminals 143 and 144 exchange data with external communication devices via the antenna and access point 140 . External communication equipment includes, for example, the sensor box 119, management server 200, and the like.

ディスプレイ226は、たとえば液晶ディスプレイ、有機EL(Electro Luminescence)ディスプレイ等によって実現される。入力デバイス229は、たとえばディスプレイ226に設けられたタッチセンサーによって実現される。当該タッチセンサーは、携帯端末143,144に対するタッチ操作を受け付け、当該タッチ操作に応じた信号を制御装置221へ出力する。 The display 226 is implemented by, for example, a liquid crystal display, an organic EL (Electro Luminescence) display, or the like. The input device 229 is implemented by a touch sensor provided on the display 226, for example. The touch sensor receives a touch operation on the mobile terminals 143 and 144 and outputs a signal corresponding to the touch operation to the control device 221 .

記憶装置228は、たとえば、フラッシュメモリー、ハードディスクその他の固定記憶装置、あるいは、着脱可能なデータ記録媒体等により実現される。 The storage device 228 is implemented by, for example, a flash memory, a hard disk or other fixed storage device, or a removable data recording medium.

[コンピュータシステム300の構成]
図3は、コンピューターシステム300のハードウェア構成を表わすブロック図である。
[Configuration of computer system 300]
FIG. 3 is a block diagram showing the hardware configuration of computer system 300. As shown in FIG.

図3を参照して、コンピュータシステム300の構成について説明する。
コンピュータシステム300は、クラウドサーバー150および管理サーバ200を含む。クラウドサーバー150および管理サーバ200のいずれか一方でも良く、協働で動作させるようにしても良い。
The configuration of the computer system 300 will be described with reference to FIG.
Computer system 300 includes cloud server 150 and management server 200 . Either one of the cloud server 150 and the management server 200 may be used, or they may be operated in cooperation.

コンピューターシステム300は、主たる構成要素として、プログラムを実行するCPU1と、コンピューターシステム300の使用者による指示の入力を受けるマウス2およびキーボード3と、CPU1によるプログラムの実行により生成されたデータ、又はマウス2若しくはキーボード3を介して入力されたデータを揮発的に格納するRAM4と、データを不揮発的に格納するハードディスク5と、光ディスク駆動装置6と、通信インターフェイス(I/F)7と、モニター8とを含む。各構成要素は、相互にデータバスによって接続されている。光ディスク駆動装置6には、CD-ROM9その他の光ディスクが装着される。 The computer system 300 has, as main components, a CPU 1 that executes a program, a mouse 2 and a keyboard 3 that receive instructions input by the user of the computer system 300, data generated by the execution of the program by the CPU 1, or the mouse 2 Alternatively, a RAM 4 for volatilely storing data input via a keyboard 3, a hard disk 5 for nonvolatilely storing data, an optical disk drive 6, a communication interface (I/F) 7, and a monitor 8 are provided. include. Each component is connected to each other by a data bus. The optical disc drive device 6 is loaded with a CD-ROM 9 or other optical discs.

コンピューターシステム300における処理は、各ハードウェアおよびCPU1により実行されるソフトウェアによって実現される。このようなソフトウェアは、ハードディスク5に予め記憶されている場合がある。また、ソフトウェアは、CD-ROM9その他の記録媒体に格納されて、コンピュータープログラムとして流通している場合もある。あるいは、ソフトウェアは、いわゆるインターネットに接続されている情報提供事業者によってダウンロード可能なアプリケーションプログラムとして提供される場合もある。このようなソフトウェアは、光ディスク駆動装置6その他の読取装置によりその記録媒体から読み取られて、あるいは、通信インターフェイス7を介してダウンロードされた後、ハードディスク5に一旦格納される。そのソフトウェアは、CPU1によってハードディスク5から読み出され、RAM4に実行可能なプログラムの形式で格納される。CPU1は、そのプログラムを実行する。 Processing in the computer system 300 is implemented by each piece of hardware and software executed by the CPU 1 . Such software may be stored in the hard disk 5 in advance. Also, the software may be stored in a CD-ROM 9 or other recording medium and distributed as a computer program. Alternatively, the software may be provided as a downloadable application program by a so-called information provider connected to the Internet. Such software is temporarily stored in the hard disk 5 after being read from the recording medium by the optical disk drive 6 or other reading device, or downloaded via the communication interface 7 . The software is read from the hard disk 5 by the CPU 1 and stored in the RAM 4 in the form of an executable program. CPU1 executes the program.

図3に示されるコンピューターシステム300を構成する各構成要素は、一般的なものである。したがって、本開示に係る技術思想の本質的な部分の一つは、RAM4、ハードディスク5、CD-ROM9その他の記録媒体に格納されたソフトウェア、あるいはネットワークを介してダウンロード可能なソフトウェアであるともいえる。記録媒体は、一時的でない、コンピューター読取可能なデータ記録媒体を含み得る。なお、コンピューターシステム300の各ハードウェアの動作は周知であるので、詳細な説明は繰り返さない。 Each component that makes up the computer system 300 shown in FIG. 3 is conventional. Therefore, it can be said that one of the essential parts of the technical idea according to the present disclosure is software stored in RAM 4, hard disk 5, CD-ROM 9 or other recording media, or software that can be downloaded via a network. Recording media may include non-transitory computer-readable data recording media. Since the operation of each piece of hardware in computer system 300 is well known, detailed description will not be repeated.

なお、記録媒体としては、CD-ROM、FD(Flexible Disk)、ハードディスクに限られず、磁気テープ、カセットテープ、光ディスク(MO(Magnetic Optical Disc)/MD(Mini Disc)/DVD(Digital Versatile Disc))、IC(Integrated Circuit)カード(メモリーカードを含む)、光カード、マスクROM、EPROM(Electronically Programmable Read-Only Memory)、EEPROM(Electronically Erasable Programmable Read-Only Memory)、フラッシュROMなどの半導体メモリー等の固定的にプログラムを担持する媒体でもよい。 The recording medium is not limited to CD-ROM, FD (Flexible Disk), hard disk, magnetic tape, cassette tape, optical disk (MO (Magnetic Optical Disc) / MD (Mini Disc) / DVD (Digital Versatile Disc)). , IC (Integrated Circuit) card (including memory card), optical card, mask ROM, EPROM (Electronically Programmable Read-Only Memory), EEPROM (Electronically Erasable Programmable Read-Only Memory), flash ROM and other semiconductor memories It may be a medium that literally carries the program.

ここでいうプログラムとは、CPUにより直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。 The program here includes not only a program that can be directly executed by the CPU, but also a program in source program format, a compressed program, an encrypted program, and the like.

[見守りシステム100の装置構成]
図4を参照して、見守りシステム100を用いた見守りについて説明する。図4は、センサーボックス119を用いた見守りシステム100の装置構成の概略の一例を示す図である。
[Device configuration of watching system 100]
Watching using the watching system 100 will be described with reference to FIG. FIG. 4 is a diagram showing an example of a schematic device configuration of the monitoring system 100 using the sensor box 119. As shown in FIG.

見守りシステム100は、見守り対象者(監視対象者)である入居者111,121その他の入居者を見守るために利用される。図4に示されるように、居室110の天井には、センサーボックス119が取り付けられている。他の居室にも同様にセンサーボックス119が取り付けられている。 The watching system 100 is used to watch over residents 111 and 121 who are watching targets (monitoring targets) and other residents. As shown in FIG. 4, a sensor box 119 is attached to the ceiling of living room 110 . Sensor boxes 119 are similarly installed in other living rooms.

範囲410は、センサーボックス119による検出範囲を表わす。センサーボックス119が前述のドップラーセンサーを有する場合、当該ドップラーセンサーは、範囲410内で生じた人の挙動を検出する。センサーボックス119がセンサーとしてカメラを有する場合、当該カメラは、範囲410内の画像を撮影する。 Range 410 represents the detection range by sensor box 119 . If the sensor box 119 has a Doppler sensor as described above, the Doppler sensor detects human behavior occurring within the range 410 . If sensor box 119 has a camera as a sensor, the camera takes an image within range 410 .

センサーボックス119は、たとえば、介護施設、医療施設、宅内などに設置される。図4の例では、センサーボックス119は、天井に取り付けられており、入居者111およびベッド113を天井から撮影している。センサーボックス119の取り付け場所は天井に限られず、居室110の側壁に取り付けられてもよい。 Sensor box 119 is installed, for example, in nursing homes, medical facilities, homes, and the like. In the example of FIG. 4, the sensor box 119 is attached to the ceiling and photographs the resident 111 and the bed 113 from the ceiling. The mounting location of the sensor box 119 is not limited to the ceiling, and may be mounted on the side wall of the living room 110 .

見守りシステム100は、カメラ105から得られた一連の画像(すなわち、映像)に基づいて入居者111に生じている危険を検知する。一例として、検知可能な危険は、入居者111の転倒や、危険個所(たとえば、ベッドの柵など)に入居者111がいる状態などを含む。 The watching system 100 detects a danger to the resident 111 based on a series of images (that is, video) obtained from the camera 105 . By way of example, detectable hazards include resident 111 falling, resident 111 being in a hazardous area (eg, bed rails, etc.), and the like.

見守りシステム100は、入居者111に危険が生じていることを検知した場合に、そのことを介護者141,143等に報知する。報知方法の一例として、見守りシステム100は、入居者111の危険を介護者141,142の携帯端末143,144に通知する。携帯端末143,144は、当該通知を受信すると、入居者111の危険をメッセージ、音声、振動等で介護者141,142に報知する。これにより、介護者141,142は、入居者111に危険が生じていることを即座に把握でき、入居者111の元に素早く駆け付けることができる。 When the watching system 100 detects that the resident 111 is in danger, the monitoring system 100 notifies the caregivers 141, 143, etc. of the fact. As an example of the notification method, the watching system 100 notifies the mobile terminals 143 and 144 of the caregivers 141 and 142 of the danger of the resident 111 . Upon receiving the notification, the portable terminals 143 and 144 notify the caregivers 141 and 142 of the danger of the resident 111 by message, voice, vibration, or the like. As a result, the caregivers 141 and 142 can immediately grasp that the resident 111 is in danger, and can quickly rush to the resident 111 .

なお、図4には、見守りシステム100が1つのセンサーボックス119を備えている例が示されているが、見守りシステム100は、複数のセンサーボックス119を備えてもよい。また、図4には、見守りシステム100が複数の携帯端末143,144を備えている例が示されているが、見守りシステム100は、一つの携帯端末でも実現され得る。 Note that FIG. 4 shows an example in which the monitoring system 100 includes one sensor box 119 , but the monitoring system 100 may include a plurality of sensor boxes 119 . Moreover, although FIG. 4 shows an example in which the monitoring system 100 includes a plurality of mobile terminals 143 and 144, the monitoring system 100 can also be realized by a single mobile terminal.

[データ構造]
図5を参照して、コンピューターシステム300のデータ構造について説明する。図5は、コンピューターシステム300が備えるハードディスク5におけるデータの格納の一態様を表わす図である。
[data structure]
The data structure of computer system 300 will now be described with reference to FIG. FIG. 5 is a diagram showing one mode of data storage in hard disk 5 provided in computer system 300. As shown in FIG.

ハードディスク5は、テーブル60を保持している。テーブル60は、各居室に設けられた各センサーから送信されるデータを移動軌跡データとして逐次保存している。より具体的には、テーブル60は、部屋ID61と、日時62と、X座標値63と、Y座標値64とを含む。部屋ID61は、入居者の居室を識別する。日時62は、センサーから送られた信号が取得された日時を識別する。X座標値63は、当該日時において検出された点、すなわち、入居者の位置のX座標値を表わす。Y座標値64は、当該日時において検出された点、すなわち、入居者の位置のY座標値を表わす。ある局面において、X座標値およびY座標値の元となる座標軸は、例えば、当該居室の端点(例えば、部屋の片隅)を基準として規定される。別の局面において、当該座標軸は、各居室が設けられた施設におけるある一点を基準として規定されてもよい。 The hard disk 5 holds a table 60. FIG. The table 60 sequentially stores data transmitted from each sensor provided in each living room as movement trajectory data. More specifically, table 60 includes room ID 61 , date and time 62 , X coordinate value 63 , and Y coordinate value 64 . The room ID 61 identifies the room of the resident. Date and time 62 identifies the date and time when the signal sent from the sensor was acquired. The X-coordinate value 63 represents the X-coordinate value of the point detected at the date and time, that is, the position of the resident. Y-coordinate value 64 represents the Y-coordinate value of the point detected at the date and time, that is, the position of the resident. In one aspect, the coordinate axes from which the X coordinate value and the Y coordinate value are based are defined, for example, with reference to the end point of the living room (for example, one corner of the room). In another aspect, the coordinate axes may be defined with reference to a certain point in the facility where each living room is provided.

さらに、ハードディスク5は、センサーボックス119から送られた画像データを保持している。画像データは予め定められた時間間隔で取得される。CPU1は、各画像データを用いて画像解析を行なうことにより、入居者の状態を識別することができる。例えば、CPU1は、各画像データから頭を抽出し、入居者が横になっている時間、入居者がベッド113に座っている時間、および、入居者が歩いている時間を抽出し得る。 Furthermore, the hard disk 5 holds image data sent from the sensor box 119 . Image data is acquired at predetermined time intervals. The CPU 1 can identify the state of the resident by performing image analysis using each image data. For example, the CPU 1 can extract the head from each image data, the time the resident is lying down, the time the resident is sitting on the bed 113, and the time the resident is walking.

なお、居室で移動する人は、入居者以外に介護者や家族などの可能性もある。したがって、CPU1は、入居者以外の人の移動軌跡を除外し得る。例えば、CPU1は、各移動軌跡について移動速度を算出し、スタッフなどの入居者以外の移動速度と推定される一定速度以上の速度が算出された移動軌跡を、画像解析の対象から除外し得る。この場合、入居者以外の移動速度として、予め測定された移動速度や、画像解析の際に測定された移動速度が使用できる。また、移動軌跡からの移動速度を算出するために、例えば、CPU1は、複数の時刻で検出された各点について、X座標値およびY座標値と、各点のうちのある点から次の点に至るまでの時間とに基づいて算出し得る。 In addition to the resident, there is a possibility that the person who moves in the living room may be a caregiver or a family member. Therefore, the CPU 1 can exclude the movement trajectories of people other than the resident. For example, the CPU 1 may calculate the movement speed for each movement trajectory, and exclude the movement trajectory for which a speed equal to or higher than a certain speed, which is estimated to be the movement speed of non-residents such as staff, is calculated from the image analysis targets. In this case, as the moving speed of a person other than the resident, a moving speed that has been measured in advance or a moving speed that has been measured during image analysis can be used. Also, in order to calculate the movement speed from the movement trajectory, for example, the CPU 1 calculates the X coordinate value and the Y coordinate value for each point detected at a plurality of times, and can be calculated based on the time to

[CPU1の動作概要]
(1)ある局面において、CPU1は、居室の入居者の行動範囲として規定されたエリアと、入居者以外の人の行動範囲として規定されたエリアとを表わすエリア情報を設定する。CPU1は、入居者の移動軌跡を表わす複数の移動軌跡データをハードディスク5から読み出す。CPU1は、設定されたエリア情報と、読み出された一つ以上の移動軌跡データとに基づいて、入居者の移動軌跡データを識別する。
[Overview of operation of CPU 1]
(1) In a certain aspect, the CPU 1 sets area information representing an area defined as the range of activities of residents in the room and an area defined as the range of activities of people other than the residents. The CPU 1 reads out from the hard disk 5 a plurality of locus data representing the locus of movement of the resident. The CPU 1 identifies the moving track data of the resident based on the set area information and one or more read moving track data.

ある局面において、入居者の行動範囲として規定されたエリアは、ベッドの近傍、トイレの近傍、家具の近傍、または洗面所の近傍の少なくとも一つを含む。 In one aspect, the area defined as the resident's range of activities includes at least one of the vicinity of the bed, the vicinity of the toilet, the vicinity of the furniture, or the vicinity of the washroom.

ある局面において、入居者以外の行動範囲として規定されたエリアは、居室の隅、または、入居者のベッドと居室の壁との間の少なくとも一つを含む。 In one aspect, the area defined as the range of activities other than the resident includes at least one of the corner of the living room and the space between the resident's bed and the wall of the living room.

ある局面において、CPU1は、居室における家具の配置に基づいて、入居者の行動範囲として規定されたエリアまたは入居者以外の人の行動範囲として規定されたエリアとを表すエリア情報を設定する。 In a certain aspect, the CPU 1 sets area information representing an area defined as the range of activities of the residents or an area defined as the range of activities of people other than the residents, based on the arrangement of furniture in the living room.

[エリア情報]
図6は、コンピュータシステム300が有する家具備品の情報について説明する図である。
[Area Information]
FIG. 6 is a diagram for explaining information on furniture fixtures held by the computer system 300. As shown in FIG.

図6を参照して、一例としてコンピュータシステム300が備えるハードディスク5におけるデータの格納の一態様を表す。 Referring to FIG. 6, one mode of data storage in hard disk 5 included in computer system 300 is shown as an example.

ハードディスク5は、テーブル600を保持している。
より具体的には、テーブル600は、部屋ID610と、入居者名620と、家具備品名630と、占有エリア640とを含む。
The hard disk 5 holds a table 600. FIG.
More specifically, table 600 includes room ID 610 , resident name 620 , furniture fixture name 630 , and occupied area 640 .

部屋IDは、入居者の居室を識別する。入居者名620は、入居者の名前である。家具備品名630は、居室内に配置されている家具の名前である。占有エリア640は、居室空間をXY座標で表した場合、当該家具が占有しているエリアである。占有エリア640は、一例として矩形領域を示し、矩形領域の右上端点の座標(X座標値、Y座標値)と、左下端点の座標(X座標値、Y座標値)とを含む。ある局面において、X座標値およびY座標値の元となる座標軸は、例えば、当該居室の端点(例えば、部屋の片隅)を基準として規定される。別の局面において、当該座標軸は、各居室が設けられた施設におけるある一点を基準として規定されてもよい。 The room ID identifies the room of the resident. The resident name 620 is the name of the resident. The furniture fixture name 630 is the name of the furniture arranged in the living room. The occupied area 640 is an area occupied by the furniture when the living room space is represented by XY coordinates. Occupied area 640 shows a rectangular area as an example, and includes the coordinates (X coordinate value, Y coordinate value) of the upper right end point and the coordinates (X coordinate value, Y coordinate value) of the lower left end point of the rectangular area. In one aspect, the coordinate axes from which the X coordinate value and the Y coordinate value are based are defined, for example, with reference to the end point of the living room (for example, one corner of the room). In another aspect, the coordinate axes may be defined with reference to a certain point in the facility where each living room is provided.

本例においては、Aさんの部屋に、「ベッド」、「タンス」、「洗面台」、「椅子」、「トイレ」の家具備品が配置されており、XY座標における当該家具備品の占有エリアが登録されている。 In this example, in Mr. A's room, furniture fixtures such as "bed", "drawer", "washstand", "chair", and "toilet" are arranged, and the area occupied by the furniture fixtures in the XY coordinates is Registered.

当該テーブル600は、予め管理者が登録している。
図7は、X座標およびY座標で規定される居室空間を示す居室エリア700を説明する図である。
The table 600 is registered in advance by an administrator.
FIG. 7 is a diagram illustrating a living room area 700 showing a living room space defined by X and Y coordinates.

図7(A)を参照して、居室エリア700には、一例としてAさんの部屋の種々の家具等の占有エリアが示されている。 Referring to FIG. 7A, in a living room area 700, an occupied area such as various pieces of furniture in Mr. A's room is shown as an example.

具体的には、居室エリア内には、ベッドの占有エリア720、椅子の占有エリア730、タンスの占有エリア740、洗面台の占有エリア750およびトイレの占有エリア760が示されている。また、当該居室に入退出するドアのエリア770も示されている。 Specifically, a bed occupied area 720, a chair occupied area 730, a dresser occupied area 740, a washbasin occupied area 750, and a toilet occupied area 760 are shown in the room area. Also shown is the door area 770 for entering and exiting the room.

実施形態においては、当該家具等の占有エリアに基づいて、居室の入居者の行動範囲として規定されたエリアと、入居者以外の人の行動範囲として規定されたエリアとを設定する。 In the embodiment, based on the area occupied by the furniture or the like, an area defined as the range of activities of the occupants of the living room and an area defined as the range of activities of people other than the residents are set.

図7(B)を参照して、コンピュータシステム300は、家具等の占有エリアに基づいて、エリア情報を設定する。具体的には、エリア情報として居室の入居者の行動範囲として規定されたエリアと、入居者以外の人の行動範囲として規定されたエリアとを設定する。 Referring to FIG. 7B, computer system 300 sets area information based on the area occupied by furniture or the like. Specifically, as area information, an area defined as the range of activities of residents in the living room and an area defined as the range of activities of people other than the residents are set.

具体的には、コンピュータシステム300は、ベッドの占有エリア720の周辺領域を居室の入居者の行動範囲として規定されたエリア780に設定する。また、コンピュータシステム300は、椅子の占有エリア730、タンスの占有エリア740、洗面台の占有エリア750およびトイレの占有エリア760のうちの少なくとも1つの近傍の領域を居室の入居者の行動範囲として規定されたエリア782に設定する。なお、本例においては、椅子の占有エリア730、タンスの占有エリア740、洗面台の占有エリア750およびトイレの占有エリア760の近傍全ての領域をエリア782に設定した場合について説明する。コンピュータシステム300は、居室内の領域のうちエリア780,782以外の領域を入居者以外の人の行動範囲として規定されたエリアに設定する。 Specifically, the computer system 300 sets the peripheral area of the occupied area 720 of the bed to the area 780 defined as the movement range of the occupants of the living room. In addition, the computer system 300 defines an area near at least one of the chair occupied area 730, the dresser occupied area 740, the washstand occupied area 750, and the toilet occupied area 760 as the occupant's movement range in the living room. area 782. In this example, a case where all the areas near the chair occupied area 730, the dresser occupied area 740, the washstand occupied area 750, and the toilet occupied area 760 are set as the area 782 will be described. The computer system 300 sets the area other than the areas 780 and 782 in the living room as an area defined as the movement range of people other than the resident.

具体的には、コンピュータシステム300は、エリア790,792を入居者以外の人の行動範囲として規定されたエリアに設定する。 Specifically, computer system 300 sets areas 790 and 792 as areas defined as the range of activities of people other than residents.

また、当該方式に限られず、コンピュータシステム300は、居室の隅、または、ベッドの占有エリア720と居室の壁との間の領域を入居者以外の人の行動範囲として規定されたエリア790に設定しても良い。 In addition, without being limited to this method, the computer system 300 sets the corner of the living room or the area between the occupied area 720 of the bed and the wall of the living room as the area 790 defined as the movement range of people other than the resident. You can

なお、当該居室エリア図のエリア情報の設定に関するプログラムは、ハードディスク5に予め格納されており、CPU1が当該プログラムを読み出すことにより実行することが可能である。 A program for setting the area information of the living room area map is pre-stored in the hard disk 5, and can be executed by the CPU 1 reading out the program.

なお、本例においては、一例としてエリア情報をプログラムを読み出すことにより設定する方式について説明するが、特に当該プログラムに限られず、管理者が、マウス2やキーボード3等を用いて、エリア情報として、居室の入居者の行動範囲として規定されたエリアと、入居者以外の人の行動範囲として規定されたエリアとを設定することも可能である。 In this example, a method of setting area information by reading a program will be described as an example, but the program is not particularly limited, and the administrator uses the mouse 2, keyboard 3, etc. to It is also possible to set an area defined as the range of activities of the residents of the living room and an area defined as the range of activities of people other than the residents.

[移動軌跡データの識別]
図8は、実施形態に従う移動軌跡データの識別について説明する図である。
[Identification of movement trajectory data]
FIG. 8 is a diagram illustrating identification of movement trajectory data according to the embodiment.

図8を参照して、エリア情報に基づいて移動軌跡データを識別する場合が示されている。 Referring to FIG. 8, there is shown a case of identifying movement locus data based on area information.

本例においては、エリア782に含まれる移動軌跡データについては、入居者の移動軌跡データとして識別する。一方、エリア790,792に含まれる移動軌跡データについては、入居者以外の移動軌跡データとして識別する。 In this example, the trajectory data contained in area 782 is identified as resident trajectory data. On the other hand, the trajectory data included in areas 790 and 792 is identified as trajectory data for those other than residents.

当該識別により、エリア782に含まれる入居者の移動軌跡データを抽出することが可能となり、入居者のデータ測定を精度よく行うことが可能である。例えば、入居者の精度の高い移動速度を算出することも可能である。 By the identification, it becomes possible to extract the movement locus data of the resident included in the area 782, and it is possible to accurately measure the data of the resident. For example, it is possible to calculate the moving speed of the resident with high accuracy.

また、エリア790,792に含まれる入居者以外の移動軌跡データを抽出することが可能となり、入居者以外のデータ測定も精度よく行うことが可能である。例えば、入居者以外の移動速度を算出して介助者等の作業効率等を算出することも可能である。 In addition, it becomes possible to extract movement locus data of other than the residents included in the areas 790 and 792, and it is possible to accurately measure the data of the other than the residents. For example, it is possible to calculate the work efficiency of a caregiver by calculating the moving speed of a person other than the resident.

[制御フロー]
図9は、実施形態に従うコンピュータシステム300が移動軌跡データの識別を実行する処理の一部を説明するフロー図である。
[Control flow]
FIG. 9 is a flow diagram illustrating part of the process by which computer system 300 performs identification of movement trajectory data according to an embodiment.

図9を参照して、CPU1は、ハードディスク5から、居室の入居者の行動範囲として規定されたエリアと、入居者以外の人の行動範囲として規定されたエリアとを表すエリア情報を読み出して設定する(ステップS2)。具体的には、図7で説明したように家具等の占有エリアに基づいて、居室の入居者の行動範囲として規定されたエリアと、入居者以外の人の行動範囲として規定されたエリアとを設定する。 Referring to FIG. 9, CPU 1 reads from hard disk 5 area information representing an area defined as the range of activities of residents in the living room and an area defined as the range of activities of people other than residents. (step S2). Specifically, as described in FIG. 7, based on the occupied area such as furniture, an area defined as the movement range of the occupant of the living room and an area defined as the movement range of people other than the resident are divided. set.

次に、CPU1は、居室における人の移動軌跡を表す1つ以上の移動軌跡データを取得する(ステップS4)。図5で説明したように、ハードディスク5に格納されている移動軌跡データを取得する。 Next, the CPU 1 acquires one or more movement trajectory data representing the movement trajectory of the person in the living room (step S4). As described with reference to FIG. 5, the movement locus data stored in the hard disk 5 is obtained.

次に、CPU1は、エリア情報と1つ以上の移動軌跡データとに基づいて、入居者の移動軌跡データを識別する(ステップS6)。CPU1は、図7で説明したようにエリア782に含まれる移動軌跡データを入居者の移動軌跡データとして識別する。 Next, the CPU 1 identifies moving track data of the resident based on the area information and one or more pieces of moving track data (step S6). The CPU 1 identifies the moving track data included in the area 782 as the moving track data of the resident as described in FIG.

そして、処理を終了する(終了)。
当該処理により、入居者の移動軌跡データを精度よく抽出することが可能となり、入居者のデータ測定を精度よく行うことが可能である。
Then, the process ends (end).
By this processing, it is possible to accurately extract the movement locus data of the resident, and it is possible to accurately measure the data of the resident.

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて請求の範囲によって示され、請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。 It should be considered that the embodiments disclosed this time are illustrative in all respects and not restrictive. The scope of the present invention is indicated by the scope of the claims rather than the above description, and is intended to include all changes within the scope and meaning equivalent to the scope of the claims.

本技術は、病院、老人ホーム、養護施設その他の施設で得られるデータを用いた情報処理に適用可能である。 This technology is applicable to information processing using data obtained in hospitals, nursing homes, nursing homes, and other facilities.

51 洗面台、52 机、60 テーブル、100 システム、101,221 制御装置、105 カメラ、106 ドップラーセンサー、107 無線通信装置、108 記憶装置、110,120 居室、111,121 入居者、112 タンス、113 ベッド、114 トイレ、115 ケアコール子機、116 トイレセンサー、117 センサー、118 ドアセンサー、119 センサーボックス、228 記憶装置、130 管理センター、140 アクセスポイント、141,142 介護者、143,144 携帯端末、150 クラウドサーバー、180 居室領域、190 ネットワーク、200 管理サーバー。 51 washstand, 52 desk, 60 table, 100 system, 101,221 control device, 105 camera, 106 Doppler sensor, 107 wireless communication device, 108 storage device, 110,120 living room, 111,121 resident, 112 chest, 113 bed, 114 toilet, 115 care call child device, 116 toilet sensor, 117 sensor, 118 door sensor, 119 sensor box, 228 storage device, 130 management center, 140 access point, 141,142 caregiver, 143,144 mobile terminal, 150 Cloud server, 180 room area, 190 network, 200 management server.

Claims (12)

コンピュータで実行されるプログラムであって、前記プログラムは前記コンピュータに、
居室の入居者の行動範囲として規定されたエリアと、前記入居者以外の人の行動範囲として規定されたエリアとを表わすエリア情報を設定するステップと、
居室における人の移動軌跡を表わす一つ以上の移動軌跡データを取得するステップと、
前記エリア情報と、取得された前記一つ以上の移動軌跡データとに基づいて、前記入居者の移動軌跡データを識別するステップとを実行させる、プログラム。
A program executed on a computer, said program causing said computer to:
a step of setting area information representing an area defined as a range of activities of a resident of the living room and an area defined as a range of activities of persons other than the resident;
obtaining one or more movement trajectory data representing a movement trajectory of a person in the living room;
and identifying movement trajectory data of the resident based on the area information and the acquired one or more movement trajectory data.
前記入居者の行動範囲として規定されたエリアは、ベッドの近傍、トイレの近傍、家具の近傍、または洗面所の近傍の少なくとも一つを含む、請求項1に記載のプログラム。 2. The program according to claim 1, wherein the area defined as the resident's range of activities includes at least one of the vicinity of the bed, the vicinity of the toilet, the vicinity of the furniture, and the vicinity of the washroom. 前記入居者以外の行動範囲として規定されたエリアは、前記居室の隅、または、前記入居者のベッドと前記居室の壁との間の少なくとも一つを含む、請求項1または2に記載のプログラム。 3. The program according to claim 1 or 2, wherein the area defined as the range of activities other than the resident includes at least one of a corner of the living room and a space between the bed of the resident and a wall of the living room. . 前記エリア情報を設定するステップは、前記居室における家具の配置に基づいて、前記入居者の行動範囲として規定されたエリアまたは前記入居者以外の人の行動範囲として規定されたエリアとを表すエリア情報を設定するステップを含む、請求項1~3のいずれかに記載のプログラム。 In the step of setting the area information, based on the arrangement of furniture in the living room, area information representing an area defined as the movement range of the resident or an area defined as the movement range of people other than the resident. 4. The program according to any one of claims 1 to 3, comprising a step of setting . メモリーと、
前記メモリーに結合されたプロセッサーとを備え、
前記プロセッサーは、
居室の入居者の行動範囲として規定されたエリアと、前記入居者以外の人の行動範囲として規定されたエリアとを表わすエリア情報を設定し、
居室における人の移動軌跡を表わす一つ以上の移動軌跡データを取得し、
前記エリア情報と、取得された前記一つ以上の移動軌跡データとに基づいて、前記入居者の移動軌跡データを識別するように構成されている、情報処理装置。
a memory;
a processor coupled to the memory;
The processor
setting area information representing an area defined as a range of activities of a resident of a living room and an area defined as a range of activities of a person other than the resident;
Acquiring one or more movement trajectory data representing the movement trajectory of a person in a living room;
An information processing device configured to identify the movement trajectory data of the resident based on the area information and the acquired one or more movement trajectory data.
前記入居者の行動範囲として規定されたエリアは、ベッドの近傍、トイレの近傍、家具の近傍、または洗面所の近傍の少なくとも一つを含む、請求項5に記載の情報処理装置。 6. The information processing apparatus according to claim 5, wherein the area defined as the resident's range of activities includes at least one of the vicinity of the bed, the vicinity of the toilet, the vicinity of the furniture, and the vicinity of the washroom. 前記入居者以外の行動範囲として規定されたエリアは、前記居室の隅、または、前記入居者のベッドと前記居室の壁との間の少なくとも一つを含む、請求項5または6に記載の情報処理装置。 7. The information according to claim 5 or 6, wherein the area defined as the range of activities other than the resident includes at least one corner of the living room or between the bed of the resident and the wall of the living room. processing equipment. プロセッサーは、前記居室における家具の配置に基づいて、前記入居者の行動範囲として規定されたエリアまたは前記入居者以外の人の行動範囲として規定されたエリアとを表すエリア情報を設定する、請求項5~7のいずれかに記載の情報処理装置。 The processor sets area information representing an area defined as the range of activities of the resident or an area defined as the range of activities of people other than the resident based on the arrangement of furniture in the living room. 8. The information processing device according to any one of 5 to 7. コンピュータで実行される方法であって、
居室の入居者の行動範囲として規定されたエリアと、前記入居者以外の人の行動範囲として規定されたエリアとを表わすエリア情報を設定するステップと、
居室における人の移動軌跡を表わす一つ以上の移動軌跡データを取得するステップと、
前記エリア情報と、取得された前記一つ以上の移動軌跡データとに基づいて、前記入居者の移動軌跡データを識別するステップとを含む、方法。
A computer implemented method comprising:
a step of setting area information representing an area defined as a range of activities of a resident of the living room and an area defined as a range of activities of persons other than the resident;
obtaining one or more movement trajectory data representing a movement trajectory of a person in the living room;
and identifying trajectory data for the resident based on the area information and the one or more trajectory data obtained.
前記入居者の行動範囲として規定されたエリアは、ベッドの近傍、トイレの近傍、家具の近傍、または洗面所の近傍の少なくとも一つを含む、請求項9に記載の方法。 10. The method of claim 9, wherein the area defined as the resident's range of movement includes at least one of near the bed, near the toilet, near furniture, or near the washroom. 前記入居者以外の行動範囲として規定されたエリアは、前記居室の隅、または、前記入居者のベッドと前記居室の壁との間の少なくとも一つを含む、請求項9または10に記載の方法。 11. The method according to claim 9 or 10, wherein the area defined as the range of activities other than the resident includes at least one corner of the living room or between the bed of the resident and the wall of the living room. . 前記エリア情報を設定するステップは、前記居室における家具の配置に基づいて、前記入居者の行動範囲として規定されたエリアまたは前記入居者以外の人の行動範囲として規定されたエリアとを表すエリア情報を設定する、請求項9~11のいずれかに記載の方法。 In the step of setting the area information, based on the arrangement of furniture in the living room, area information representing an area defined as the movement range of the resident or an area defined as the movement range of people other than the resident. The method according to any one of claims 9 to 11, wherein setting
JP2020527346A 2018-06-26 2019-06-06 Computer Executed Programs, Information Processing Devices, and Computer Executed Methods Active JP7205540B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018121242 2018-06-26
JP2018121242 2018-06-26
PCT/JP2019/022471 WO2020003955A1 (en) 2018-06-26 2019-06-06 Program executed by computer, information processing device, and method executed by computer

Publications (2)

Publication Number Publication Date
JPWO2020003955A1 JPWO2020003955A1 (en) 2021-08-02
JP7205540B2 true JP7205540B2 (en) 2023-01-17

Family

ID=68986431

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020527346A Active JP7205540B2 (en) 2018-06-26 2019-06-06 Computer Executed Programs, Information Processing Devices, and Computer Executed Methods

Country Status (2)

Country Link
JP (1) JP7205540B2 (en)
WO (1) WO2020003955A1 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006333013A (en) 2005-05-25 2006-12-07 Matsushita Electric Works Ltd Picture monitor
JP2014174627A (en) 2013-03-06 2014-09-22 Nk Works Co Ltd Information processing device, information processing method, and program
WO2016190348A1 (en) 2015-05-27 2016-12-01 コニカミノルタ株式会社 Monitoring device
WO2017081995A1 (en) 2015-11-09 2017-05-18 コニカミノルタ株式会社 Person monitoring device and method, and person monitoring system
WO2018030024A1 (en) 2016-08-08 2018-02-15 コニカミノルタ株式会社 Watch-over system, watch-over device, watch-over method, and watch-over program
WO2018047795A1 (en) 2016-09-09 2018-03-15 コニカミノルタ株式会社 Monitoring system, monitoring device, monitoring method, and monitoring program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6387724B2 (en) * 2014-07-30 2018-09-12 船井電機株式会社 Watch device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006333013A (en) 2005-05-25 2006-12-07 Matsushita Electric Works Ltd Picture monitor
JP2014174627A (en) 2013-03-06 2014-09-22 Nk Works Co Ltd Information processing device, information processing method, and program
WO2016190348A1 (en) 2015-05-27 2016-12-01 コニカミノルタ株式会社 Monitoring device
WO2017081995A1 (en) 2015-11-09 2017-05-18 コニカミノルタ株式会社 Person monitoring device and method, and person monitoring system
WO2018030024A1 (en) 2016-08-08 2018-02-15 コニカミノルタ株式会社 Watch-over system, watch-over device, watch-over method, and watch-over program
WO2018047795A1 (en) 2016-09-09 2018-03-15 コニカミノルタ株式会社 Monitoring system, monitoring device, monitoring method, and monitoring program

Also Published As

Publication number Publication date
WO2020003955A1 (en) 2020-01-02
JPWO2020003955A1 (en) 2021-08-02

Similar Documents

Publication Publication Date Title
US10904492B2 (en) Video monitoring system
JP7281457B2 (en) Vital Signs with Contactless Activity Detection Networks for Elderly Care
US9940822B2 (en) Systems and methods for analysis of subject activity
JP7468350B2 (en) Condition monitoring device and control method for condition monitoring device
JP7435459B2 (en) Condition monitoring device and condition monitoring method
JP7342863B2 (en) Computer-executed programs, information processing systems, and computer-executed methods
JP7327397B2 (en) Computer-implemented programs, information processing systems, and computer-implemented methods
JP7205540B2 (en) Computer Executed Programs, Information Processing Devices, and Computer Executed Methods
WO2020075675A1 (en) Care system management method, management device and program
JP7215481B2 (en) Computer Executed Programs, Information Processing Devices, and Computer Executed Methods
JP7255359B2 (en) Program, Information Notification Apparatus, and Computer Implemented Method for Posting Information
JP7276336B2 (en) Computer-implemented programs, information processing systems, and computer-implemented methods
CN211432928U (en) Monitoring system
JP7371624B2 (en) Programs that run on computers, information processing devices, and methods that run on computers
JP7310327B2 (en) Behavior detection device, system provided with same, behavior detection method, and program
JP7225649B2 (en) Condition monitor
Kaluža et al. A multi-agent system for remote eldercare
WO2020137061A1 (en) Information display method, program, and information display device
WO2020075674A1 (en) Care system management method, management device, and program
JP2020057222A (en) Status monitoring device and status monitoring method
JP2021196739A (en) Assistance degree estimation method, program, and information processing device
JP2020013367A (en) Information processing device, method, program, and watching system
JP2020184201A (en) Information reporting program, information processing device, and method to be executed by computer in order to report information

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211224

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221129

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221212

R150 Certificate of patent or registration of utility model

Ref document number: 7205540

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150