WO2019240196A1 - 情報処理装置 - Google Patents

情報処理装置 Download PDF

Info

Publication number
WO2019240196A1
WO2019240196A1 PCT/JP2019/023347 JP2019023347W WO2019240196A1 WO 2019240196 A1 WO2019240196 A1 WO 2019240196A1 JP 2019023347 W JP2019023347 W JP 2019023347W WO 2019240196 A1 WO2019240196 A1 WO 2019240196A1
Authority
WO
WIPO (PCT)
Prior art keywords
person
information
biological information
monitoring
bed
Prior art date
Application number
PCT/JP2019/023347
Other languages
English (en)
French (fr)
Inventor
安川　徹
Original Assignee
エイアイビューライフ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by エイアイビューライフ株式会社 filed Critical エイアイビューライフ株式会社
Publication of WO2019240196A1 publication Critical patent/WO2019240196A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/113—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb occurring during breathing
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/04—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using a single signalling line, e.g. in a closed loop

Definitions

  • the present invention relates to an information processing apparatus and an information processing method.
  • the position of the bed is extracted from the distance image, the person's area is detected, and the person's movement is discriminated. Specifically, the position of the bed is obtained from the frequency distribution of the height in the longitudinal direction and the short direction of the bed.
  • the human motion is determined by detecting the position of the object with respect to a predetermined height position, such as a bedded state, a state where the upper body is raised, and a standing state.
  • Patent Document 1 has a problem in that the biological information of a person who is a care recipient cannot be detected more accurately. For example, even when a measurement device that detects biological information such as respiration and heartbeat is provided on the bed, accurate biological information may not be detected depending on the action of a person on the bed.
  • an object of the present invention is to provide an information processing apparatus that can solve the above-described problem that biological information of a person cannot be accurately detected.
  • An information processing apparatus for acquiring a distance image of a predetermined area including a bed; Detecting means for detecting an action of a person in the distance image based on the distance image; Measuring means for detecting biological information of the person on the bed from the measuring device installed on the bed; Monitoring means for performing monitoring processing on the biological information based on the movement of the person and the biological information;
  • the monitoring means performs a monitoring process on the biological information when the action of the person is a specific action.
  • the configuration is as follows.
  • the monitoring means includes the living body information and the reference value information at the time of absence, which is a measurement value from the measurement device in a state where no person exists on the bed, and the person exists on the bed. Based on the comparison result with the normal reference value information set in advance that is the measurement value from the measurement device in the state, the monitoring process for the biological information is performed.
  • the configuration is as follows.
  • the monitoring means performs a monitoring process on the biological information when the biological information is different from the absent reference value information.
  • Information processing device In the information processing apparatus, The monitoring means performs a monitoring process on the biological information when the biological information is different from the absent reference value information.
  • the monitoring means stops the monitoring process when the movement of the person changes while performing the monitoring process, and then revises the biological information based on the movement of the person and the biological information. Perform monitoring processing,
  • the configuration is as follows.
  • An information processing method includes: Information processing device A distance image of a predetermined area including a bed is acquired, and based on the distance image, an action of a person in the distance image is detected, Detecting biometric information of the person on the bed from the measuring device installed on the bed, Based on the action of the person and the biological information, a monitoring process for the biological information is performed.
  • Information processing device A distance image of a predetermined area including a bed is acquired, and based on the distance image, an action of a person in the distance image is detected, Detecting biometric information of the person on the bed from the measuring device installed on the bed, Based on the action of the person and the biological information, a monitoring process for the biological information is performed.
  • the configuration is as follows.
  • a program which is one embodiment of the present invention is In the information processing device, Distance image acquisition means for acquiring a distance image of a predetermined area including a bed; Detecting means for detecting an action of a person in the distance image based on the distance image; Measuring means for detecting biological information of the person on the bed from the measuring device installed on the bed; Monitoring means for performing monitoring processing on the biological information based on the movement of the person and the biological information; To realize, The configuration is as follows.
  • the present invention can provide an information processing apparatus, an information processing method, and a program capable of accurately detecting the biological information of a person by being configured as described above.
  • FIG. 1 It is the schematic which shows the structure of the information processing system in Embodiment 1 of this invention. It is a block diagram which shows the structure of the monitoring server disclosed in FIG. It is a figure which shows the mode of the image processing by the monitoring server disclosed in FIG. It is a figure which shows the mode of the image processing by the monitoring server disclosed in FIG. It is a figure which shows the mode of the process of the biometric information by the monitoring server disclosed in FIG. It is a figure which shows the mode of the process of the biometric information by the monitoring server disclosed in FIG. It is a flowchart which shows the processing operation of the monitoring server disclosed in FIG.
  • FIGS. 1 and 2 are diagrams illustrating the configuration of the information processing system.
  • 3 to 7 are diagrams for explaining the processing operation of the information processing system.
  • the configuration and operation of the information processing system will be described with reference to the drawings.
  • the information processing system is an information processing system for monitoring the behavior and biological information of a person P to be monitored, such as a care recipient and a monitored person.
  • the information processing system includes a monitoring server 10, a distance image camera C, a biosensor S, a mobile terminal 20, and a monitoring terminal 30.
  • the distance image camera C (imaging device) is disposed at a position where a distance image can be captured in the region R in which the bed B on which the person P to be monitored lies is disposed.
  • the distance image camera C is provided on the ceiling of a room in a medical facility, a care facility, or a house, and is disposed at a position where the entire bed B can be accommodated in the image.
  • the distance image camera C is not necessarily installed on the ceiling, and may be installed in any place such as a wall or a stand.
  • the bed B to be photographed may be any sleeping bed such as a futon.
  • the distance image camera C captures a distance image with a pixel value as a distance value.
  • the distance image camera C may be of a type that measures a distance from a round-trip time when an infrared laser is projected onto a target, or may be any type of imaging device.
  • the distance image camera C has a function of photographing a distance image at a constant time interval or at a timing when a photographing instruction is received, and transmitting the distance image to the monitoring server 10 described later.
  • the function of the monitoring server 10 can be installed in the distance image camera C. That is, the function of the monitoring server 10 may be realized by an information processing device mounted on the distance image camera C.
  • the biosensor S (measuring device) is installed in a bed B on which a person P to be monitored lies.
  • the biological sensor S is, for example, a microwave sensor, which irradiates the person P lying on the bed B with microwaves, and uses the reflected waves to represent body movements of the person P due to heartbeat, respiration, and the like as waveforms.
  • the detected biological information is detected.
  • the biological sensor S may be a measuring device that detects biological information such as heartbeat and respiration of the person P by any method, and the biological information to be detected is not necessarily limited to information representing heartbeat or respiration. Not.
  • the mobile terminal 20 is an information processing terminal such as a smartphone that is held and operated by a user U who is a monitoring person who cares for or monitors a person who is a care recipient.
  • the portable terminal 20 is connected to and can communicate with the monitoring server 10 via wireless communication, and can input an operation instruction of the user U to the monitoring server 10 as described later.
  • the mobile terminal 20 displays a distance image captured by the distance image camera C on the display screen and an operation screen on which an operation instruction related to monitoring can be input.
  • the operation instruction is transmitted from the mobile terminal 20 to the monitoring server 10.
  • the mobile terminal 20 also has a function of receiving notification of abnormality of a person who is a care receiver issued from the monitoring server 10 and notifying the user U.
  • the monitoring terminal 30 is an information processing terminal that is operated by a user U who is a monitoring person who cares for or monitors a person who is a care receiver.
  • the monitoring terminal 30 is installed in a place such as a monitoring room where a user U such as a monitor is present, and can be operated by a plurality of users U.
  • the monitoring terminal 30 displays a distance image on the display screen and allows an operation instruction related to monitoring to be input.
  • the operation instruction can be transmitted to the monitoring server 10 or issued from the monitoring server 10.
  • the function of receiving a notification of an abnormality of a person to be notified to the user U is provided.
  • the monitoring server 10 is a server device (information processing device) having an arithmetic device and a storage device. Then, as shown in FIG. 2, the monitoring server 10 includes a distance image acquisition unit 11, a biological information measurement unit 12, an operation detection unit 13, a monitoring unit 14, and a notification unit, which are constructed by an arithmetic device executing a program. 15. The monitoring server 10 also includes a reference information storage unit 16 formed in a storage device.
  • a reference information storage unit 16 formed in a storage device.
  • the distance image acquisition unit 11 (distance image acquisition means) periodically acquires a distance image including the bed B and the person P to be monitored, which is captured by the distance image camera C, from the distance image camera C. get. Then, by passing the acquired distance image to the motion detection unit 13, the distance image is used for motion detection processing and monitoring processing described later.
  • the biological information measuring unit 12 acquires biological information (measurement values) of heartbeat and respiration of the person P on the bed B, which is periodically detected by the biological sensor S.
  • the biological information is represented by a waveform of body movement that occurs in the person P during breathing, as shown in the upper diagram of FIG.
  • the biological information is used for the monitoring process mentioned later by passing the acquired biological information to the monitoring part 14. Since the biological sensor S measures an event that occurs on the bed B, the biological information measuring unit 12 acquires a measured value even when the person P is not present on the bed B, and the measured value is monitored 14. Have passed on.
  • the motion detector 13 detects a person P in the distance image using the distance image, and performs a motion detection process for detecting the motion of the person P. Specifically, the motion detection unit 13 detects the area of the bed B and the person P in the distance image. For example, the motion detection unit 13 first identifies the area of the bed B based on the coordinates in the distance image that designates the area of the bed B that is designated in advance. Then, the motion detection unit 13 detects an object that exists in the area of the bed B, and detects the highest vertex and the gravity center position of the person P from the object (step S1 in FIG. 7). At this time, for example, the person detection unit 13 detects an object made up of individual chunks in the distance image 21, and detects the person from the mass of the detected object, the positional relationship between the objects, the volume ratio (area ratio), and the like. To detect.
  • the motion detection unit 13 detects the motion of the person P from the positional relationship between the detected apex of the person P and the center of gravity (step S2 in FIG. 7). At this time, the motion detection unit 13 detects the height and the gravity center position of the person P, and determines the motion of the person P from the height, the gravity center position, and the positional relationship in the distance image 21.
  • the motion detection unit 13 detects whether or not the person P is lying on the bed B, that is, whether the person is in the “recumbent position” (Yes in step S3 in FIG. 7).
  • the motion detection unit 13 has a positional relationship in which the highest vertex of the person P and the gravity center position are connected on the plane of the bed B, and each is set slightly higher than the lying height position of the bed B. If the position is not exceeded, it is determined that the action of the person P is “prone”.
  • the upper diagram shows the distance image 21, and the lower diagram shows the bed B viewed from the side. The same applies to FIG. 4 described below.
  • the motion detection unit 13 also detects whether or not the person P has changed the motion on the bed B. For example, the motion detection unit 13 detects that the motion has changed by detecting that the positions of the highest vertex and the center of gravity of the person detected from the distance image have changed. As an example, when the highest vertex or the center of gravity of the person changes by a predetermined value or more, it is detected that the operation has changed. At this time, the motion detection unit 13 also detects a change in motion when the person P changes from the supine position as shown in FIG. 3 to the lateral position as shown in FIG. The above-described detection of the action of the person P may be performed by any method.
  • the monitoring unit 14 (monitoring means) performs a monitoring process on the biological information based on the motion of the person P detected as described above and the biological information of the person P.
  • the monitoring unit 14 performs monitoring processing of the biological information detected from the biological sensor S when the detected action of the person P is the above-described “posture”. In other words, the monitoring unit 14 does not perform the monitoring process on the biological information except in the lying position.
  • the monitoring unit 14 compares the biological information detected from the biological sensor S with the absent reference value information stored in the reference information storage unit 16 in advance, and is different from the absent reference value information. When it is determined that the biological information is an effective value of the person P, the detected biological information is monitored (Yes in step S4 in FIG. 7, step S5). Conversely, when the biological information detected from the biological sensor S is equivalent to the absent reference value information, the monitoring unit 14 does not perform monitoring processing on the detected biological information.
  • the absence reference value information is a measurement value from the biological sensor S in a state where the person P is not present on the bed B stored in advance as shown in the lower diagram of FIG.
  • the reference value information at the time of absence shows a slight waveform due to external vibration or the like, but clearly differs from the waveform when the person P is present on the bed B. Therefore, it is possible to determine that the biological information is different from the absent reference value information by examining the difference between the amplitude and the frequency of the biological information and the absent reference value information for a certain period.
  • the monitoring part 14 will preset and memorize
  • the monitoring unit 14 determines that the biological information is abnormal (Yes in step S7 in FIG. 7), the monitoring unit 14 notifies the notification unit 15 (step S8 in FIG. 7). Then, the notification unit 15 notifies the mobile terminal 20 and the monitoring terminal 30 that there is an abnormality in the biological information of the person P.
  • the motion detection unit 13 always detects the motion of the person P during the biological information monitoring process described above, but the motion detection unit 13 changes the motion of the person P. In such a case (Yes in step S6 in FIG. 7), the monitoring process is temporarily stopped. For example, in the case where the motion detection unit 13 changes the motion of the person P from the supine position as shown in FIG. 3 to the horizontal position as shown in FIG. In addition, the monitoring unit 14 stops the monitoring process.
  • the monitoring unit 14 again performs monitoring processing on the biological information based on the operation of the person P and the biological information of the person P (steps S2 to S8 in FIG. 7). For example, after the monitoring unit 14 changes from the supine position shown in FIG. 3 to the horizontal position shown in FIG. 7 (Yes in step S3), the measured biological information is determined to be a person's value (Yes in step S4 in FIG. 7), so that the biological information monitoring process is started again (step S5 in FIG. 7). Thus, even when the operation changes to the same lying state, it is possible to suppress erroneously detecting a change in the biological state accompanying the change in operation as an abnormality by temporarily stopping the monitoring process. .
  • the biological information of the person P can be detected more accurately by the biological sensor S installed in the bed B. As a result, the abnormality of the person P can be detected and notified with higher accuracy.
  • Non-transitory computer readable media include various types of tangible storage media (tangible storage medium).
  • Examples of non-transitory computer-readable media include magnetic recording media (eg flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (eg magneto-optical discs), CD-ROMs (Read Only Memory), CD-Rs, CD-R / W, semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable ROM), flash ROM, RAM (Random Access Memory)) are included.
  • the program may also be supplied to the computer by various types of temporary computer-readable media. Examples of transitory computer readable media include electrical signals, optical signals, and electromagnetic waves.
  • the temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • General Physics & Mathematics (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Emergency Alarm Devices (AREA)
  • Alarm Systems (AREA)

Abstract

本発明の情報処理装置は、寝床を含む所定領域の距離画像を取得する距離画像取得手段と、距離画像に基づいて、当該距離画像内の人物の動作を検出する検出手段と、寝床に設置された計測装置から当該寝床上の人物の生体情報を検出する計測手段と、人物の動作と生体情報とに基づいて、当該生体情報に対する監視処理を行う監視手段と、を備える。

Description

情報処理装置
　本発明は、情報処理装置及び情報処理方法に関する。
　近年、高齢者の人口が増加し、介護の需要が高まっている。一方で、介護には、多くの介護者が必要となり、介護者の作業負担や人件費の増加という問題が生じる。そこで、特許文献１に記載のような、距離画像センサで撮影した画像を用いて、被介護者といった人物を監視する監視システムが多く開発されている。
　特許文献１に開示の監視システムでは、距離画像からベッドの位置を抽出し、また、人の領域を検出し、人の動作を判別している。具体的に、ベッドの位置は、ベッドの長手方向及び短手方向における高さの度数分布から求めている。また、人の動作は、所定の高さ位置に対する物体の位置を検出することで、臥床の状態、上半身を起こした状態、起立の状態、といった人の動作を判別している。
特開２０１２－０３００４２号公報
　しかしながら、上述した特許文献１の技術では、被介護者である人物の生体情報をより正確に検出することができない、という問題が生じる。例えば、ベッド上に呼吸や心拍などの生体情報を検出する計測装置を装備している場合であっても、ベッド上の人物の動作によっては正確な生体情報を検出することができない場合がある。
　このため、本発明の目的は、上述した課題である、人物の生体情報を正確に検出することができない、ということを解決することができる情報処理装置を提供することにある。
　本発明の一形態である情報処理装置は、
　寝床を含む所定領域の距離画像を取得する距離画像取得手段と、
　前記距離画像に基づいて、当該距離画像内の人物の動作を検出する検出手段と、
　前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出する計測手段と、
　前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う監視手段と、
を備えた、
という構成をとる。
　また、上記情報処理装置では、
　前記監視手段は、前記人物の動作が特定の動作である場合に、前記生体情報に対する監視処理を行う、
という構成をとる。
　また、上記情報処理装置では、
　前記監視手段は、前記生体情報と予め設定された前記寝床上に人物が存在していない状態における前記計測装置からの計測値である不在時基準値情報および前記寝床上に人物が存在している状態における前記計測装置からの計測値である予め設定された正常基準値情報との比較結果に基づいて、前記生体情報に対する監視処理を行う、
という構成をとる。
　また、上記情報処理装置では、
　前記監視手段は、前記生体情報が前記不在時基準値情報と異なる場合に、前記生体情報に対する監視処理を行う、
情報処理装置。
　また、上記情報処理装置では、
　前記監視手段は、前記監視処理を行っているときに前記人物の動作が変化した場合に、当該監視処理を停止し、その後、改めて前記人物の動作と前記生体情報とに基づいて当該生体情報に対する監視処理を行う、
という構成をとる。
　また、本発明の一形態である情報処理方法は、
　情報処理装置が、
　寝床を含む所定領域の距離画像を取得し、前記距離画像に基づいて当該距離画像内の人物の動作を検出すると共に、
　前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出し、
　前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う、
という構成をとる。
　また、上記情報処理方法では、
　前記監視処理を行っているときに前記人物の動作が変化した場合に、当該監視処理を停止し、
　その後、改めて前記人物の動作の検出と前記生体情報の検出とを行い、前記人物の動作と前記生体情報とに基づいて当該生体情報に対する監視処理を行う、
という構成をとる。
　また、本発明の一形態であるプログラムは、
　情報処理装置に、
　寝床を含む所定領域の距離画像を取得する距離画像取得手段と、
　前記距離画像に基づいて、当該距離画像内の人物の動作を検出する検出手段と、
　前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出する計測手段と、
　前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う監視手段と、
を実現させる、
という構成をとる。
　本発明は、以上のように構成されることにより、人物の生体情報を正確に検出することできる、情報処理装置、情報処理方法、プログラムを提供することができる。
本発明の実施形態１における情報処理システムの構成を示す概略図である。 図１に開示した監視サーバの構成を示すブロック図である。 図１に開示した監視サーバによる画像処理の様子を示す図である。 図１に開示した監視サーバによる画像処理の様子を示す図である。 図１に開示した監視サーバによる生体情報の処理の様子を示す図である。 図１に開示した監視サーバによる生体情報の処理の様子を示す図である。 図１に開示した監視サーバの処理動作を示すフローチャートである。
　＜実施形態１＞
　本発明の第１の実施形態を、図１乃至図７を参照して説明する。図１乃至図２は、情報処理システムの構成を示す図である。図３乃至図７は、情報処理システムの処理動作を説明するための図である。以下、各図を参照して、情報処理システムの構成及び動作を説明する。
　本発明における情報処理システムは、被介護者や被監視者といった監視対象となる人物Ｐの行動及び生体情報を監視するための情報処理システムである。そして、情報処理システムは、監視サーバ１０と、距離画像カメラＣと、生体センサＳと、携帯端末２０と、監視端末３０と、を備えて構成されている。
　上記距離画像カメラＣ（撮影装置）は、監視対象となる人物Ｐが横たわるベッドＢが配置された領域Ｒ内の距離画像を撮影可能な位置に配置されている。例えば、距離画像カメラＣは、医療施設や介護施設、宅内の一室の天井に設けられ、ベッドＢ全体が画像内に収まる位置に配置されている。なお、距離画像カメラＣは、必ずしも天井に設置されていることに限定されず、壁やスタンドなど、いかなる場所に設置されていてもよい。また、撮影されるベッドＢは、布団などのいかなる寝床であってもよい。
　距離画像カメラＣは、画素値を距離値とした距離画像を撮影するものである。例えば、距離画像カメラＣは、赤外線レーザをターゲットに投射した際の往復の時間から距離を計測する形式のものであってもよく、いかなる方式の撮影装置であってもよい。そして、距離画像カメラＣは、一定の時間間隔で、あるいは、撮影指示を受けたタイミングで、距離画像を撮影し、かかる距離画像を後述する監視サーバ１０に送信する機能を有する。なお、上記監視サーバ１０の機能については、上記距離画像カメラＣに搭載することもできる。つまり、距離画像カメラＣに搭載された情報処理装置にて監視サーバ１０の機能を実現してもよい。
　上記生体センサＳ（計測装置）は、監視対象となる人物Ｐが横たわるベッドＢに設置されている。そして、生体センサＳは、例えば、マイクロ波センサであり、ベッドＢに横たわる人物Ｐに対してマイクロ波を照射し、その反射波を用いて人物Ｐの心拍や呼吸などによる体動を波形で表した生体情報を検出する、というものである。但し、生体センサＳは、いかなる方法で人物Ｐの心拍や呼吸などの生体情報を検出する計測装置であってもよく、また、検出する生体情報は必ずしも心拍や呼吸を表す情報であることに限定されない。
　上記携帯端末２０は、被介護者である人物の介護を行ったり、監視する監視者であるユーザＵが保持して操作するスマートフォンなどの情報処理端末である。携帯端末２０は、監視サーバ１０と無線通信を介して接続され通信可能であり、後述するように、監視サーバ１０に対してユーザＵの操作指示を入力することが可能である。例えば、携帯端末２０は、表示画面に、距離画像カメラＣにて撮影された距離画像を表示すると共に、監視に関する操作指示を入力可能な操作画面を表示する。かかる画面に対してユーザＵからタッチ操作によって指示が入力されることで、かかる操作指示が携帯端末２０から監視サーバ１０に送信されることとなる。また、携帯端末２０は、監視サーバ１０から発せられる被介護者である人物の異常の通知を受信して、ユーザＵに報知する機能も有する。
　上記監視端末３０は、被介護者である人物の介護を行ったり、監視する監視者であるユーザＵが操作する情報処理端末である。監視端末３０は、監視者などのユーザＵが在籍する監視ルームなどの場所に設置されており、複数のユーザＵによって操作可能である。監視端末３０は、上述した携帯端末２０と同様に、表示画面に距離画像を表示すると共に、監視に関する操作指示を入力可能とし、かかる操作指示を監視サーバ１０に送信したり、監視サーバ１０から発せられる人物の異常の通知を受信して、ユーザＵに報知する機能を有する。
　上記監視サーバ１０は、演算装置及び記憶装置を有するサーバ装置（情報処理装置）である。そして、監視サーバ１０は、図２に示すように、演算装置がプログラムを実行することで構築された、距離画像取得部１１、生体情報計測部１２、動作検出部１３、監視部１４、通知部１５、を備えている。また、監視サーバ１０は、記憶装置に形成された、基準情報記憶部１６を備えている。以下、各構成について詳述するが、併せて監視サーバ１０の動作も、図７のフローチャートを参照して併せて説明する。
　上記距離画像取得部１１（距離画像取得手段）は、上述したように距離画像カメラＣにて撮影されたベッドＢ及び監視対象となる人物Ｐを含む距離画像を、定期的に距離画像カメラＣから取得する。そして、取得した距離画像を動作検出部１３に渡すことで、当該距離画像は後述する動作検出処理や監視処理に用いられる。
　上記生体情報計測部１２（計測手段）は、定期的に生体センサＳにて検出されたベッドＢ上の人物Ｐの心拍や呼吸の生体情報（計測値）を取得する。例えば、生体情報は、図５の上図に示すように、呼吸の際に人物Ｐに生じる体動の波形にて表される。そして、取得した生体情報を監視部１４に渡すことで、当該生体情報は後述する監視処理に用いられる。なお、生体センサＳではベッドＢ上に生じる事象を計測しているため、生体情報計測部１２は、ベッドＢ上に人物Ｐが存在しない場合でも計測値を取得し、かかる計測値を監視部１４に渡している。
　上記動作検出部１３（検出手段）は、距離画像を用いて、当該距離画像内の人物Ｐを検出して、当該人物Ｐの動作を検出する動作検出処理を行う。具体的に、動作検出部１３は、距離画像内におけるベッドＢの領域と、人物Ｐと、を検出する。例えば、動作検出部１３は、まず、予め指定されているベッドＢの領域を指定する距離画像内の座標に基づいて、ベッドＢの領域を特定する。そして、動作検出部１３は、ベッドＢの領域内に存在する物体を検出し、かかる物体から人物Ｐの最頂点と重心位置を検出する（図７のステップＳ１）。このとき、人物検出部１３は、例えば、距離画像２１内における個々の塊からなる物体を検出し、検出した物体の質量や、物体間の位置関係や体積比（面積比）などから、人物を検出する。
　そして、動作検出部１３は、検出された人物Ｐの最頂点と重心位置の位置関係から、人物Ｐの動作を検出する（図７のステップＳ２）。このとき、動作検出部１３は、人物Ｐの高さと重心位置を検出し、当該高さと重心位置と距離画像２１内の位置関係から、人物Ｐの動作を判定する。
　特に、動作検出部１３は、人物ＰがベッドＢ上において横たわっている動作、つまり、「臥位」であるか否かを検出する（図７のステップＳ３でＹｅｓ）。例えば、動作検出部１３は、図３に示すように、人物Pの最頂点と重心位置がベッドＢの平面上で連結した位置関係となり、それぞれベッドＢの臥位高さ位置よりもやや高く設定された位置を超えていない場合に、人物Ｐの動作が「臥位」であると判定する。ここで、図３は、上図が距離画像２１を示しており、下図がベッドＢを側方から見た図を示している。以下に説明する図４も同様である。
　なお、動作検出部１３は、人物ＰがベッドＢ上において動作を変化させたか否かの検出も行う。例えば、動作検出部１３は、距離画像から検出した人物の最頂点と重心の位置が変化したことを検出することで、動作に変化があったことを検出する。一例としては、人物の最頂点や重心位置が所定値以上変化した場合に、動作が変化したことを検出する。このとき、動作検出部１３は、人物Ｐが、図３に示すような仰向けの臥位状態から、図４に示す横向きの臥位状態に変化させた場合も、動作変化として検出する。なお、上述した人物Ｐの動作の検出は、いかなる方法で行われてもよい。
　上記監視部１４（監視手段）は、上述したように検出した人物Ｐの動作と、当該人物Ｐの生体情報とに基づいて、当該生体情報に対する監視処理を行う。特に、監視部１４は、検出した人物Ｐの動作が、上述した「臥位」である場合に、生体センサＳから検出した生体情報の監視処理を行う。つまり、監視部１４は、臥位状態以外の場合には、生体情報に対する監視処理は行わない。そして、監視部１４は、具体的には、生体センサＳから検出した生体情報が、予め基準情報記憶部１６に記憶された不在時基準値情報と比較して、当該不在時基準値情報と異なり、生体情報が人物Ｐの有効値であると判断された場合に、検出した生体情報に対する監視処理を行う（図７のステップＳ４でＹｅｓ、ステップＳ５）。逆に、監視部１４は、生体センサＳから検出した生体情報が不在時基準値情報と同等である場合には、検出した生体情報に対する監視処理は行わない。
　ここで、上記不在時基準値情報は、図５の下図に示すように、予め記憶されたベッドＢ上に人物Ｐが存在していない状態における生体センサＳからの計測値である。このように、不在時基準値情報は、外部振動などにより多少の波形が表されているが、明らかにベッドＢ上に人物Ｐが存在している場合の波形とは異なる。このため、生体情報と不在時基準値情報との一定期間の振幅や振動数との差異を調べることで、生体情報が不在時基準値情報とは異なることを判断することができる。その結果、人物Ｐが存在していない場合の生体センサＳからの計測値を監視処理することを抑制することができ、より確実に人物Ｐの心拍や呼吸などを計測した生体情報に対する監視処理を行うことができる。
　そして、監視部１４は、生体情報の監視処理に入ると、一定時間における生体センサＳからの計測値を正常基準値として予め設定して記憶しておく。そして、この正常基準値と、その後に検出した生体情報とを比較して、当該生体情報が正常か異常かの判定を行う。例えば、検出した生体情報である心拍や呼吸の波形の振幅や周波数が、正常基準値よりも大きすぎたり小さすぎる場合には、検出した生体情報が異常であると判定する。図６に示す呼吸の生体情報の例では、領域Ｒ１の波形は正常時を表しているが、領域Ｒ２の波形は異常時を表している。このため、領域Ｒ２のような波形を検出した場合には、異常であると判定する。そして、監視部１４は、生体情報が異常であると判定した場合には（図７のステップＳ７でＹｅｓ）、その旨を通知部１５に通知する（図７のステップＳ８）。すると、通知部１５は、人物Ｐの生体情報に異常があった旨を、携帯端末２０や監視端末３０に通知する。
　また、監視部１４は、上述した生体情報の監視処理中に、動作検出部１３にて常に人物Ｐの動作検出が行われているが、当該動作検出部１３にて人物Ｐの動作が変化した場合には（図７のステップＳ６でＹｅｓ）、監視処理を一旦停止する。例えば、動作検出部１３により、図３に示すように人物Ｐが仰向けの臥位の状態から、図４に示すように寝返りを打って横向きの臥位の状態に動作が変化した場合であっても、監視部１４は監視処理を停止する。
　その後、監視部１４は、再度、人物Ｐの動作と、当該人物Ｐの生体情報とに基づいて、当該生体情報に対する監視処理を行う（図７のステップＳ２～Ｓ８）。例えば、監視部１４は、図３に示す仰向けの臥位から、図４に示す横向きの臥位に変化した後には、動作検出部１３で人物Ｐの動作が「臥位」と判断され（図７のステップＳ３でＹｅｓ）、計測した生体情報が人物の値であると判断されるため（図７のステップＳ４でＹｅｓ）、再度、生体情報の監視処理に入る（図７のステップＳ５）。このように、同じ臥位状態に動作が変化した場合であっても、一旦、監視処理を停止することにより、動作変化に伴う生体状態の変化を異常と誤検出することを抑制することができる。
　以上のように、本発明によると、ベッドＢに装備した生体センサＳにてより正確に人物Ｐの生体情報を検出することができる。その結果、人物Ｐの異常をより高精度に検出して通知することができる。
　なお、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
　以上、上記実施形態等を参照して本願発明を説明したが、本願発明は、上述した実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明の範囲内で当業者が理解しうる様々な変更をすることができる。
　なお、本発明は、日本国にて２０１８年６月１５日に特許出願された特願２０１８－１１４２１８の特許出願に基づく優先権主張の利益を享受するものであり、当該特許出願に記載された内容は、全て本明細書に含まれるものとする。
１０　監視サーバ
１１　距離画像取得部
１２　生体情報計測部
１３　動作検出部
１４　監視部
１５　通知部
１６　基準情報記憶部
２０　携帯端末
２１　距離画像
３０　監視端末
Ｂ　ベッド
Ｃ　距離画像カメラ
Ｓ　生体センサ
Ｐ　人物
Ｕ　ユーザ
 

Claims (8)

  1. 　寝床を含む所定領域の距離画像を取得する距離画像取得手段と、
    　前記距離画像に基づいて、当該距離画像内の人物の動作を検出する検出手段と、
    　前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出する計測手段と、
    　前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う監視手段と、
    を備えた情報処理装置。
  2. 　請求項１に記載の情報処理装置であって、
    　前記監視手段は、前記人物の動作が特定の動作である場合に、前記生体情報に対する監視処理を行う、
    情報処理装置。
  3. 　請求項１又は２に記載の情報処理装置であって、
    　前記監視手段は、前記生体情報と予め設定された前記寝床上に人物が存在していない状態における前記計測装置からの計測値である不在時基準値情報および前記寝床上に人物が存在している状態における前記計測装置からの計測値である予め設定された正常基準値情報との比較結果に基づいて、前記生体情報に対する監視処理を行う、
    情報処理装置。
  4. 　請求項３に記載の情報処理装置であって、
    　前記監視手段は、前記生体情報が前記不在時基準値情報と異なる場合に、前記生体情報に対する監視処理を行う、
    情報処理装置。
  5. 　請求項１乃至４のいずれかに記載の情報処理装置であって、
    　前記監視手段は、前記監視処理を行っているときに前記人物の動作が変化した場合に、当該監視処理を停止し、その後、改めて前記人物の動作と前記生体情報とに基づいて当該生体情報に対する監視処理を行う、
    情報処理装置。
  6. 　情報処理装置が、
    　寝床を含む所定領域の距離画像を取得し、前記距離画像に基づいて当該距離画像内の人物の動作を検出すると共に、
    　前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出し、
    　前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う、
    情報処理方法。
  7. 　請求項６に記載の情報処理方法であって、
    　前記監視処理を行っているときに前記人物の動作が変化した場合に、当該監視処理を停止し、
    　その後、改めて前記人物の動作の検出と前記生体情報の検出とを行い、前記人物の動作と前記生体情報とに基づいて当該生体情報に対する監視処理を行う、
    情報処理方法。
  8. 　情報処理装置に、
    　寝床を含む所定領域の距離画像を取得する距離画像取得手段と、
    　前記距離画像に基づいて、当該距離画像内の人物の動作を検出する検出手段と、
    　前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出する計測手段と、
    　前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う監視手段と、
    を実現させるためのプログラム。
     
PCT/JP2019/023347 2018-06-15 2019-06-12 情報処理装置 WO2019240196A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-114218 2018-06-15
JP2018114218A JP7090327B2 (ja) 2018-06-15 2018-06-15 情報処理装置、情報処理方法、プログラム

Publications (1)

Publication Number Publication Date
WO2019240196A1 true WO2019240196A1 (ja) 2019-12-19

Family

ID=68842970

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/023347 WO2019240196A1 (ja) 2018-06-15 2019-06-12 情報処理装置

Country Status (2)

Country Link
JP (1) JP7090327B2 (ja)
WO (1) WO2019240196A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111803769A (zh) * 2020-06-19 2020-10-23 周建 病人体位异常管理系统以及相应终端

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7396215B2 (ja) 2020-06-26 2023-12-12 沖電気工業株式会社 情報処理装置、情報処理方法及び情報処理システム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014147594A (ja) * 2013-02-01 2014-08-21 Daikin Ind Ltd 生体監視システム
WO2015037269A1 (ja) * 2013-09-13 2015-03-19 コニカミノルタ株式会社 被監視者監視装置および該方法ならびに被監視者監視システム
JP2017023232A (ja) * 2015-07-17 2017-02-02 ジャスト株式会社 健康状態監視システム
JP2017134037A (ja) * 2016-01-29 2017-08-03 パナソニックＩｐマネジメント株式会社 見守りシステム及び制御プログラム
WO2017213136A1 (ja) * 2016-06-09 2017-12-14 コニカミノルタ株式会社 生体監視装置及び生体監視方法
JP2017537725A (ja) * 2014-12-16 2017-12-21 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 乳幼児睡眠モニタ

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108337914A (zh) * 2015-10-06 2018-07-27 柯尼卡美能达株式会社 行动检测系统、行动检测装置、行动检测方法以及行动检测程序

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014147594A (ja) * 2013-02-01 2014-08-21 Daikin Ind Ltd 生体監視システム
WO2015037269A1 (ja) * 2013-09-13 2015-03-19 コニカミノルタ株式会社 被監視者監視装置および該方法ならびに被監視者監視システム
JP2017537725A (ja) * 2014-12-16 2017-12-21 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 乳幼児睡眠モニタ
JP2017023232A (ja) * 2015-07-17 2017-02-02 ジャスト株式会社 健康状態監視システム
JP2017134037A (ja) * 2016-01-29 2017-08-03 パナソニックＩｐマネジメント株式会社 見守りシステム及び制御プログラム
WO2017213136A1 (ja) * 2016-06-09 2017-12-14 コニカミノルタ株式会社 生体監視装置及び生体監視方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111803769A (zh) * 2020-06-19 2020-10-23 周建 病人体位异常管理系统以及相应终端

Also Published As

Publication number Publication date
JP7090327B2 (ja) 2022-06-24
JP2019216807A (ja) 2019-12-26

Similar Documents

Publication Publication Date Title
KR101070389B1 (ko) 환자 상태 모니터링 시스템
JP6086468B2 (ja) 被写体見守りシステム
JP2014171574A (ja) 呼吸モニタリング装置、システム、及び方法
WO2019240196A1 (ja) 情報処理装置
WO2016186160A1 (ja) 画像処理システム、画像処理装置、画像処理方法、および画像処理プログラム
JP2017228042A (ja) 監視装置、監視システム、監視方法及び監視プログラム
JP7468350B2 (ja) 状態監視装置および状態監視装置の制御方法
JP2019197263A (ja) システム、およびシステムの制御方法
US20180322334A1 (en) Person Monitoring Device And Method, And Person Monitoring System
JP7095870B2 (ja) 情報処理装置
JP2020187389A (ja) 移動体軌跡分析装置、移動体軌跡分析プログラム、および移動体軌跡分析方法
JP7232497B2 (ja) 情報処理装置
US20220148334A1 (en) Breathing detection apparatus and methods for detecting breathing
JP7090328B2 (ja) 情報処理装置
WO2020149126A1 (ja) 情報処理装置
WO2020003954A1 (ja) コンピューターで実行されるプログラム、情報処理装置、および、コンピューターで実行される方法
WO2020021897A1 (ja) 情報処理装置
JP7033305B2 (ja) 情報処理装置
JP2021033379A (ja) 画像処理システム、画像処理プログラム、および画像処理方法
JP6565468B2 (ja) 呼吸検知装置、呼吸検知方法、及び呼吸検知プログラム
JP7039011B2 (ja) 情報処理装置
WO2020145145A1 (ja) 情報処理装置
JP2022126069A (ja) 画像処理方法
JP2022126071A (ja) 画像処理方法
JP7364179B2 (ja) ロボット

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19819984

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19819984

Country of ref document: EP

Kind code of ref document: A1