CN105960664A - 信息处理装置、信息处理方法及程序 - Google Patents

信息处理装置、信息处理方法及程序 Download PDF

Info

Publication number
CN105960664A
CN105960664A CN201580006841.6A CN201580006841A CN105960664A CN 105960664 A CN105960664 A CN 105960664A CN 201580006841 A CN201580006841 A CN 201580006841A CN 105960664 A CN105960664 A CN 105960664A
Authority
CN
China
Prior art keywords
depth
person
guardianship
shooting image
degree
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201580006841.6A
Other languages
English (en)
Inventor
松本修
松本修一
村井猛
上辻雅义
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Noritsu Precision Co Ltd
Original Assignee
Noritsu Precision Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Noritsu Precision Co Ltd filed Critical Noritsu Precision Co Ltd
Publication of CN105960664A publication Critical patent/CN105960664A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1113—Local tracking of patients, e.g. in a hospital or private home
    • A61B5/1115—Monitoring leaving of a patient support, e.g. a bed or a wheelchair
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7405—Details of notification to user or communication with user or patient ; user input means using sound
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
    • A61B5/748—Selection of a region of interest, e.g. using a graphics tablet
    • A61B5/7485—Automatic selection of region of interest
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02—Operational features
    • A61B2560/0266—Operational features for monitoring or limiting apparatus function
    • A61B2560/0276—Determining malfunction
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219—Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Surgery (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Alarm Systems (AREA)
  • Accommodation For Nursing Or Treatment Tables (AREA)
  • Invalid Beds And Related Equipment (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Nursing (AREA)
  • Critical Care (AREA)
  • Emergency Management (AREA)
  • Emergency Medicine (AREA)
  • Business, Economics & Management (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Social Psychology (AREA)
  • Psychology (AREA)
  • Child & Adolescent Psychology (AREA)

Abstract

一种信息处理装置(1)，取得通过具有深度传感器的拍摄装置(2)拍摄到的、包含深度信息的拍摄图像，并根据各像素的深度判断监护对象者与床的区域的位置关系是否满足预定的条件。在无法通过该深度传感器取得拍摄图像内的各像素的深度的状态持续了一定时间以上的情况下，通知存在对所述监护对象者的监护并非正常的可能性。

Description

信息处理装置、信息处理方法及程序
技术领域
本发明涉及信息处理装置、信息处理方法以及程序。
背景技术
存在一种下述技术：通过从室内斜上方向室内下方拍摄到的图像的边界边来检测从地面区域向床区域的人体移动，从而判断上床情况，并且，通过检测从床区域向地面区域的人体移动，从而判断下床情况(专利文献1)。
另外，存在一种下述技术：将用于判断躺在床上的患者进行起床举动的监护区域设定为包含在床上就寝的患者的床的正上方区域，在表示从床的横向上被认为是患者的图像区域占包含监护区域的拍摄图像的监护区域的大小的变动值小于表示被认为是患者的图像区域占在患者躺在床上的状态下从摄像机得到的拍摄图像的监护区域的大小的初始值的情况下，判断患者正在进行起床举动(专利文献2)。
现有技术文献
专利文献
专利文献1：日本特开2002-230533号公报
专利文献2：日本特开2011-005171号公报
发明内容
发明要解决的技术问题
近年来，住院病人、福利机构入住者、要看护者等监护对象者从床上跌倒、滚落的事故、以及由痴呆症患者的来回走动所造成的事故处于逐年增加的趋势。作为防止这样的事故的方法，例如，已开发出像专利文献1及2中所例示那样的、通过用设置于室内的拍摄装置(摄像机)拍摄监护对象者并解析拍摄到的图像来检测起来、端坐、下床等监护对象者的行为的监护系统。
在这样的监护系统中，当进行监护的环境(以下，也称为“监护环境”)变化时，具有无法恰当地检测监护对象者的行为的可能性。例如，由于拍摄装置的方向改变，监护对象者没有显现在拍摄图像中，具有无法检测监护对象者的行为的可能性。如果在这样的状态下对监护系统置之不理，则就会导致无法正常进行监护对象者的监护的事态持续。
本发明在一方面上是考虑这样的问题而做出的，其目的在于，提供一种技术，在已变为无法对监护对象者进行正常的监护的状态下，能够防止对监护系统置之不理。
用于解决技术问题的方案
本发明采用以下的构成来解决上述的技术问题。
即，本发明的一方面所涉及的信息处理装置具备：图像取得部，取得通过拍摄装置拍摄到的拍摄图像，该拍摄装置是为了监护监护对象者在床上的行为而设置的，并具有用于测量被拍摄体的深度的深度传感器，所述拍摄图像包括通过该深度传感器测量的表示该拍摄图像内的各像素的深度的深度信息；行为检测部，根据由所述深度信息表示的所述拍摄图像内的各像素的深度，判断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件，从而检测所述监护对象者的与所述床关联的行为；异常判断部，判断无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态是否持续了一定时间以上；以及通知部，在判断为无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态持续了一定时间以上的情况下，进行用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
因此，上述构成所涉及的信息处理装置，根据拍摄图像内的各像素的深度，判断真实空间内的在床的高度方向上，床的基准面与监护对象者的位置关系是否满足预定的条件。然后，上述构成所涉及的信息处理装置根据该判断的结果而推断监护对象者与床在真实空间内的位置关系，检测监护对象者的与床关联的行为。
也就是说，上述构成所涉及的信息处理装置，根据拍摄图像中所包括的深度信息而检测监护对象者的行为。因此，在无法取得该深度信息的状态下，上述构成所涉及的信息处理装置就无法检测监护对象者的行为。为了处理该问题，上述构成所涉及的信息处理装置判断无法通过拍摄装置中所包括的深度传感器取得拍摄图像内的各像素的深度的状态是否持续了一定时间以上。然后，在判断为无法通过深度传感器取得拍摄图像内的各像素的深度的状态持续了一定时间以上的情况下，进行用于告知具有尚不能正常进行监护对象者的监护的可能性的通知。
由此，在上述构成所涉及的信息处理装置中，在判断为无法通过深度传感器取得拍摄图像内的各像素的深度的状态持续了一定时间以上的情况下，能够向使用者等报警具有无法正常进行监护的可能性。因此，能够防止在由于无法取得深度信息而产生的监护状况不良的状态下对监护对象置之不理。即，根据上述构成，能够防止在已变为无法正常进行监护对象者的监护的状态下对监护对象置之不理。
此外，所谓监护对象者，就是通过本发明而被监护在床上的行为的对象者，例如为住院病人、福利机构入住者、要看护者等。另一方面，进行监护对象者的监护的人，例如为护士、福利机构职员、看护者等。另外，与床关联的行为，是指监护对象者在放有床的地方进行的可能性的行为，例如为在床上起来、在床上的端坐、越过床的护栏、从床上落下、从床上下床等。在此，端坐是指监护对象者正坐在床端的状态。另外，越过护栏是指监护对象者正在从床护栏上探出身的状态。
另外，作为上述一方面所涉及的信息处理装置的另外的方式，在对所述床的区域无法取得深度的比例超过预定的比例的情况下，所述异常判断部判断为是无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态。在该构成中，信息处理装置在对于成为监护对象者的行为的基准的床的区域无法取得深度的情况下，判断为是无法取得拍摄图像内的各像素的深度的状态。因此，对于在与检测监护对象者的行为无关的区域上无法取得深度的情况下，能够防止判断为是无法取得拍摄图像内的各像素的深度的状态。由此，根据该构成，能够降低监护系统中产生误报异常发生的可能性。
另外，作为上述一方面所涉及的信息处理装置的另外的方式，上述信息处理装置可以还具备前景提取部，所述前景提取部根据被设定作为所述拍摄图像的背景的背景图像与所述拍摄图像的差分而提取所述拍摄图像的前景区域。而且，所述行为检测部可以将根据所述前景区域内的各像素的深度确定的、所述前景区域显现的对象在真实空间内的位置用作所述监护对象者的位置，判断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件，从而检测所述监护对象者的与所述床关联的行为。
根据该构成，通过提取背景图像与拍摄图像的差分而确定拍摄图像的前景区域。该前景区域是从背景图像上发生了变化的区域。因此，在前景区域中，作为与监护对象者关联的像，包括由于监护对象者活动而发生了变化的区域、换言之、存在监护对象者的身体部位中在动的部位(以下，也称为“动作部位”)的区域。因此，通过参照由深度信息表示的前景区域内的各像素的深度而能确定监护对象者的动作部位在真实空间内的位置。
因此，上述构成所涉及的信息处理装置将根据前景区域内的各像素的深度而确定的拍到前景区域的对象在真实空间内的位置用作监护对象者的位置，并判断床的基准面与监护对象者的位置关系是否满足预定的条件。即，用于检测监护对象者的行为的预定条件是假设前景区域与监护对象者的行为关联而被设定的。上述构成所涉及的信息处理装置根据在真实空间内监护对象者的动作部位相对于床的基准面存在于哪个高度上来检测监护对象者的行为。
在此，能够以背景图像与拍摄图像的差分来提取前景区域，因此，即使不利用高级的图像处理也能确定前景区域。因此，根据上述构成，能够以简单的方法来检测监护对象者的行为。
另外，作为上述一方面所涉及的信息处理装置的另外的方式，所述拍摄装置可以还具备加速度传感器；在基于所述加速度传感器检测到所述拍摄装置的撞击之后，所述异常判断部比较该撞击前的拍摄图像与该撞击后的拍摄图像，从而判断所述拍摄装置的拍摄范围是否发生一定量以上的偏移，在判断为所述拍摄装置的拍摄范围发生了一定量以上的偏移的情况下，所述通知部进行用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
如上所述，由于拍摄装置的方向改变，监护对象者没有在拍摄图像中显现，具有无法检测监护对象者的行为的可能性。根据该构成，在判断为拍摄装置的拍摄范围发生了一定程度以上的偏移的情况下，能够向使用者等报警具有无法正常进行监护的可能性。因此，能够防止在由于拍摄装置的方向改变而产生的监护状况不良的状态下对监护对象置之不理。
另外，作为上述一方面所涉及的信息处理装置的另外的方式，上述信息处理装置可以与护士呼叫系统连接，该护士呼叫系统用于呼叫进行所述监护对象者的监护的执行者。而且，所述通知部可以通过所述护士呼叫系统的呼出，作为用于告知存在对所述监护对象者的监护并非正常的可能性的通知。根据该构成，能够通过护士呼叫系统而报警监护系统中的异常发生。
另外，作为上述一方面所涉及的信息处理装置的另外的方式，上述信息处理装置可以与声音输出装置连接，该声音输出装置用于输出声音。而且，在无法进行通过所述护士呼叫系统的呼出的情况下，所述通知部可以使所述声音输出装置进行预定声音的输出来代替通过该护士呼叫系统的呼出，作为用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
另外，作为上述一方面所涉及的信息处理装置的另外的方式，上述信息处理装置可以与显示装置连接，该显示装置用于进行画面显示。而且，在无法进行通过所述护士呼叫系统的呼出的情况下，所述通知部可以使所述显示装置进行预定模式的画面显示来代替通过该护士呼叫系统的呼出，作为用于告知存在对所述监护对象者的监护并非正常的可能性的通知。根据该构成，即使是无法正常进行护士呼叫系统的呼出的情况，也能够报警监护系统中的异常发生。
另外，作为上述一方面所涉及的信息处理装置的另外的方式，所述异常判断部可以判断所述信息处理装置是否处于能够识别所述拍摄装置的状态，在判断为所述信息处理装置未处于能够识别所述拍摄装置的状态的情况下，所述通知部可以进行用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
如果无法进行拍摄装置的识别，则上述信息处理装置就无法取得用于检测监护对象者的行为的拍摄图像，因此就无法正常地执行监护对象者的监护。根据该构成，由于在这种状态下进行监护系统中的异常发生的通知，因此能够防止在由于无法取得拍摄图像所引起的监护状况不良的状态下对监护对象置之不理。
另外，作为上述一方面所涉及的信息处理装置的另外的方式，所述异常判断部可以判断通过所述行为检测部进行的所述监护对象者的行为的检测是否未执行一定时间以上，在判断为通过所述行为检测部进行的所述监护对象者的行为的检测未执行一定时间以上的情况下，所述通知部可以进行用于告知存在对所述监护对象者的监护并非正常的可能性的通知。在未执行监护对象者的行为的检测的情况下，具有尚不能正常进行监护对象者的监护的可能性。根据该构成，由于在这种情况下进行异常发生的通知，因此能够防止在由于监护对象者的行为检测未被执行一定时间以上所引起的监护状况不良的状态下对监护对象置之不理。
另外，作为上述一方面所涉及的信息处理装置的另外的方式，所述拍摄装置中所具有的深度传感器可以是基于红外线的照射测量深度的红外线深度传感器。如果为红外线深度传感器，则即使是暗处，也能够取得被拍摄体的深度。因此，根据该构成，不受进行监护对象者的监护的场所的明亮度的影响而取得被拍摄体的深度进而检测监护对象者的行为成为可能。
需要说明的是，作为上述各方式所涉及的信息处理装置的其它方式，既可以为实现以上各构成的信息处理系统，也可以为信息处理方法，还可以为程序，也可以为记录有这样的程序的、计算机及其它装置、机器等可读的存储介质。在此，计算机等可读的记录介质是通过电、磁、光学、机械或者化学作用蓄积程序等信息的介质。另外，信息处理系统还可以通过一个或多个信息处理装置实现。
例如，本发明的一方面所涉及的信息处理方法是一种计算机执行如下步骤的信息处理方法：取得通过拍摄装置拍摄到的拍摄图像，该拍摄装置是为了监护监护对象者在床上的行为而设置的，并具有用于测量被拍摄体的深度的深度传感器，所述拍摄图像包括通过该深度传感器测量的表示该拍摄图像内的各像素的深度的深度信息；根据由所述深度信息表示的所述拍摄图像内的各像素的深度，判断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件，从而检测所述监护对象者的与所述床关联的行为；判断无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态是否持续了一定时间以上；以及在判断为无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态持续了一定时间以上的情况下，进行用于告知存在对所述监护对象者的监护并非正常的可能性。
另外，例如，本发明的一方面所涉及的程序是一种用于使计算机执行如下步骤的程序：取得通过拍摄装置拍摄到的拍摄图像，该拍摄装置是为了监护监护对象者在床上的行为而设置的，并具有用于测量被拍摄体的深度的深度传感器，所述拍摄图像包括通过该深度传感器测量的表示该拍摄图像内的各像素的深度的深度信息；根据由所述深度信息表示的所述拍摄图像内的各像素的深度，判断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件，从而检测所述监护对象者的与所述床关联的行为；判断无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态是否持续了一定时间以上；以及在判断为无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态持续了一定时间以上的情况下，进行用于告知存在对所述监护对象者的监护并非正常的可能性。
发明的效果
根据本发明，能够防止在已变为无法正常进行监护对象者的监护的状态下对监护对象置之不理。
附图说明
图1示出应用本发明的情形的一个例子。
图2示出根据各像素的深度而确定了该各像素的灰度值的拍摄图像的一个例子。
图3例示实施方式所涉及的信息处理装置的硬件构成。
图4例示实施方式所涉及的深度。
图5例示实施方式所涉及的功能构成。
图6例示在实施方式中当检测监护对象者的行为时的信息处理装置的处理程序。
图7例示实施方式所涉及的信息处理装置在进行监护对象者的监护时显示的画面。
图8例示根据拍摄图像中所包括的深度信息而确定的拍摄范围的被拍摄体的三维分布。
图9例示从拍摄图像中提取的前景区域的三维分布。
图10示意性例示用于实施方式涉及的监护系统检测起来的检测区域。
图11示意性例示用于实施方式涉及的监护系统检测下床的检测区域。
图12示意性例示用于实施方式涉及的监护系统检测端坐的检测区域。
图13例示实施方式所涉及的信息处理装置执行的、用于防止在不能正常进行监护的状态下对监护对象置之不理的处理程序。
图14例示区域的扩展状态与弥散的关系。
具体实施方式
以下，基于附图说明本发明的一个方面所涉及的实施方式(以下也表述为“本实施方式”)。不过，以下说明的本实施方式的所有方面只不过是本发明的例示。当然在不脱离本发明的范围的情况下能够进行各种改良和变形。即，在本发明的实施中，可以适当采用与实施方式对应的具体的构成。
需要说明的是，在本实施方式中，利用自然语言说明出现的数据，更具体来讲，由计算机能够识别的伪语言、命令、参数、机器语言等指定。
§1应用情形例
首先，使用图1来对应用本发明的情形进行说明。图1示意性示出应用本发明的情形的一个例子。在本实施方式中，设想了在医疗机构或者护理机构中住院病人或福利机构入住者作为监护对象者的例示而被监护行为的情形。进行监护对象者的监护的人(以下，也称为“使用者”)例如为护士或福利机构职员。利用包括信息处理装置1和摄像机2的监护系统而进行监护对象者在床上的行为的监护。
本实施方式所涉及的监护系统通过利用摄像机2拍摄监护对象者的行为而取得拍有监护对象者和床的拍摄图像3。然后，该监护系统通过信息处理装置1解析由摄像机2取得的拍摄图像3，从而检测监护对象者的行为，对监护对象者的行为进行监护。
摄像机2相当于本发明的拍摄装置，为监护监护对象者在床上的行为而设置。摄像机2的可能配置的位置可以没有特别限制，但在本实施方式中，摄像机2被设置于床的长度方向的前方。图1例示了从侧面观察摄像机2的情形，图1的上下方向相当于床的高度方向。另外，图1的左右方向相当于床的长度方向，垂直于图1的纸面的方向相当于床的宽度方向。
本实施方式所涉及的摄像机2包括用于测量被拍摄体的深度的深度传感器(后述的深度传感器8)，能够取得对应于拍摄图像内的各像素的深度。因此，正如在图1中例示的，通过该摄像机2取得的拍摄图像3包括表示对每像素获得的深度的深度信息。
包括该深度信息的拍摄图像3的数据形式可以没有特别限制，可以根据实施的方式而适当选择。拍摄图像3，例如，既可以为表示拍摄范围内的被拍摄体的深度的数据，也可以为拍摄范围内的被拍摄体的深度分布成二维状的数据(例如深度图)。另外，拍摄图像3可以在包括深度信息的同时，也可包括RGB图像。并且，拍摄图像3既可以为动画图像，也可以为静止图像。
图2示出这样的拍摄图像3的一个例子。在图2中例示的拍摄图像3是各像素的灰度值根据该各像素的深度而确定的图像。越黑色的像素表示越靠近摄像机2。另一方面，越白色的像素，表示越远离摄像机2。根据该深度信息，能够确定拍摄范围内的被拍摄体在真实空间(三维空间)内的位置。
更详细而言，被拍摄体的深度相对于该被拍摄体的表面取得。于是，通过使用拍摄图像3中包含的深度信息，从而能够确定显现在摄像机2中的被拍摄体表面在真实空间内的位置。在本实施方式中，通过摄像机2拍摄到的拍摄图像3被发送至信息处理装置1。然后，信息处理装置1根据已取得的拍摄图像3而推断监护对象者的行为。
本实施方式所涉及的信息处理装置1为了根据所取得的拍摄图像3而推断监护对象者的行为，提取被设定作为该拍摄图像3的背景的背景图像与拍摄图像3的差分，从而确定拍摄图像3内的前景区域。被确定的前景区域是从背景图像上发生了变化的区域，因此包括监护对象者的动作部位存在的区域。因此，信息处理装置1利用前景区域作为与监护对象者关联的像来检测监护对象者的行为。
例如，当监护对象者在床上起来时，如在图1中例示的，拍有关于起来的部位(在图1中上半身)的区域作为前景区域被提取。通过参照如此提取的前景区域内的各像素的深度，从而能够确定监护对象者的动作部位在真实空间内的位置。
监护对象者在床上的行为能根据如此确定的动作部位与床的位置关系而推断。例如，如在图1中例示的，当监护对象者的动作部位在床的上表面的上方被检测到的情况下，能够推断，监护对象者在床上正在进行起来的动作。另外，例如，当监护对象者的动作部位在床的侧部附近被检测到的情况下，能够推断，监护对象者正在想要变为端坐的状态。
因此，信息处理装置1将根据前景区域内的各像素的深度所确定的、在前景区域显现的对象在真实空间内的位置作为监护对象者的位置而利用。具体而言，本实施方式所涉及的信息处理装置1根据在前景区域显现的对象与床在真实空间内的位置关系而检测监护对象者的行为。也就是说，信息处理装置1根据在真实空间内监护对象者的动作部位相对于床存在于哪里而检测监护对象者的行为。因此，当由于监护环境的变化，例如，变得无法取得深度信息或者拍摄范围改变时，具有变为无法正常检测监护对象者的行为的可能性。如果在这样的状态下对监护对象置之不理，则就会导致无法正常进行监护对象者的监护的状态持续。
为了处理该问题，本实施方式所涉及的信息处理装置1判断无法通过摄像机2中所包括的深度传感器取得拍摄图像3内的各像素的深度的状态是否持续了一定时间以上。然后，在判断为无法通过深度传感器取得拍摄图像3内的各像素的深度的状态持续了一定时间以上的情况下，进行用于告知具有尚不能正常进行监护对象者的监护的可能性的通知。
由此，在本实施方式所涉及的信息处理装置1中，在判断为无法通过深度传感器取得拍摄图像3内的各像素的深度的状态持续了一定时间以上的情况下，能够向使用者等报警具有无法正常进行监护的可能性。因此，根据本实施方式，能够防止在由于无法取得深度信息而产生的监护状况不良的状态下对监护对象置之不理。即，能够防止在已变得无法正常进行监护对象者的监护的状态下对监护对象置之不理。
§2构成例
<硬件构成例>
接着，使用图3来说明信息处理装置1的硬件构成。图3例示本实施方式所涉及的信息处理装置1的硬件构成。如在图3中所例示的，信息处理装置1是电连接有如下部分的计算机：包括CPU、RAM(Random Access Memory：随机存取存储器)、ROM(Read Only Memory：只读存储器)等的控制部11；存储在控制部11中执行的程序5等的存储部12；用于进行图像的显示和输入的触摸面板显示器13；用于输出声音的扬声器14；用于与外部装置连接的外部接口15；用于经由网络而进行通信的通信接口16；以及用于读取存储介质6中所存储的程序的驱动器17。但是，在图3中，通信接口及外部接口分别被记作为“通信I/F”及“外部I/F”。
需要注意的是，关于信息处理装置1的具体的硬件构成，可根据实施方式而适当进行构成成分的省略、置换以及追加。例如，控制部11也可以包括多个处理器。另外，例如触摸面板显示器13也可以被替换为各自分别独立地被连接的输入装置及显示装置。另外，例如，可以省略扬声器14。另外，例如，扬声器14可以不作为信息处理装置1的内部装置，而作为外部装置连接于信息处理装置1。另外，信息处理装置1可以内置摄像机2。
信息处理装置1可以具备多个外部接口15，与多个外部装置连接。在本实施方式中，信息处理装置1经由外部接口15而与摄像机2连接。本实施方式所涉及的摄像机2为了对监护对象者在床上的行为监护而设置。该摄像机2具备：用于测量被拍摄体的深度的深度传感器8和用于测量摄像机2的移动的加速度传感器9。这些深度传感器8及加速度传感器9的种类和测量方法可以根据实施的方式而适当选择。例如，作为深度传感器8，能够列举TOF(Time Of Flight，飞行时间)方式等的传感器。另外，作为加速度传感器9的种类，能够列举：静电电容检测方式、压阻方式、热检测方式等的传感器。
此外，对监护对象者进行监护的场所(例如医疗机构的病房)为监护对象者的床放置的场所，换而言之，为监护对象者就寝的场所。因此，对监护对象者进行监护的场所多为暗的场所。因此，为了不受拍摄场所的明亮度影响来取得深度，优选的是，基于红外线的照射测量深度的红外线深度传感器作为深度传感器8。作为包括这样的红外线深度传感器的较廉价的拍摄装置，能够列举微软公司的Kinect、ASUS公司的Xtion、PrimeSense公司的CARMINE。
在此，使用图4来详细地说明通过本实施方式所涉及的深度传感器8来测量的深度。图4示出能作为本实施方式所涉及的深度看待的距离的一个例子。该深度体现被拍摄体的深度。如在图4中所例示的，被拍摄体的深度例如既可以用摄像机与对象物之间的直线距离A来表现，也可以用从水平轴向摄像机的被拍摄体垂下的垂线的距离B来体现。即，本实施方式所涉及的深度既可以为距离A，也可以为距离B。在本实施方式中，将距离B作为深度来对待。不过，距离A与距离B能通过使用例如勾股定理等来相互转换。因此，使用了距离B的以后的说明能直接应用于距离A。
另外，如在图3中所例示的，信息处理装置1经由外部接口15而连接于护士呼叫系统4。护士呼叫系统4的硬件构成及功能构成可以根据实施的方式而适当选择。护士呼叫系统4是用于呼叫进行监护对象者的监护的使用者(护士、福利机构职员等)的装置，作为护士呼叫系统，可以是已知的装置。本实施方式所涉及的护士呼叫系统4具备用布线18与信息处理装置1连接的总机40和能与该总机40无线通信的分机41。
总机40被设置于，例如，使用者的值班室。总机40主要被用于呼叫在值班室的使用者。另一方面，分机41一般被使用者携带。分机41被用于呼叫携带该分机41的使用者。总机40及分机41可以分别具备用于用声音输出各种通知的扬声器。另外，总机40及分机41可以分别具备话筒，以便能经由信息处理装置1等而与监护对象者对话。信息处理装置1可以像这样经由外部接口15与护士呼叫系统4等已设置于福利机构中的设备连接，从而与该设备协作而进行各种通知。
另外，如在图3中所例示的，信息处理装置1经由外部接口15而连接于护士呼叫器。这样，信息处理装置1可以通过经由外部接口15而与护士呼叫器等已设置于福利机构中的设备连接，从而与该设备协作而进行通知，该通知用于告知具有危险逼近监护对象者的预兆的。
需要说明的是，程序5是使信息处理装置1执行后述的动作中所包含的处理的程序，相当于本发明的“程序”。该程序5可以被记录在存储介质6中。存储介质6是以计算机及其它装置、机器等能读取所记录的程序等信息的方式而通过电、磁、光学、机械或化学作用来累积该程序等信息的介质。存储介质6相当于本发明的“存储介质”。需要注意的是，图3例示了作为存储介质6的一例的CD(Compact Disk：高密度光盘)、DVD(Digital VersatileDisk：数字多用光盘)等盘式存储介质。然而，存储介质6的种类并非限定于盘式，也可以为盘式以外的存储介质。作为盘式以外的存储介质，能够列举例如闪存等半导体存储器。
另外，作为信息处理装置1，例如除了使用被设计成专门用于所提供的服务的装置之外，还可以使用PC(Personal Computer：个人计算机)、平板终端等通用的装置。另外，信息处理装置1也可以通过一个或者多个计算机来安装。
<功能构成例>
接着，使用图5来说明信息处理装置1的功能构成。图5例示本实施方式所涉及的信息处理装置1的功能构成。本实施方式涉及的信息处理装置1所具备的控制部11将存储于存储部12中的程序5展开到RAM中。然后，控制部11通过CPU来解释和执行已被展开至RAM中的程序5，从而控制各构成要素。由此，本实施方式所涉及的信息处理装置1作为具备图像取得部21、前景提取部22、行为检测部23、异常判断部24、通知部25、以及显示控制部26的计算机发挥作用。
图像取得部21取得通过摄像机2拍摄到的拍摄图像3。在取得的拍摄图像3中包括有表示通过深度传感器8测量出的各像素的深度的深度信息。前景提取部22根据作为拍摄图像3的背景而已设定的背景图像与该拍摄图像3的差分提取拍摄图像3的前景区域。行为检测部23根据由深度信息示出的前景区域内的各像素的深度而判断在前景区域显现的对象与床在真实空间内的位置关系是否满足预定的条件。然后，行为检测部23根据该判断的结果而检测监护对象者的与床关联的行为。
异常判断部24判断监护系统的监护是否具有异常发生的可能性。然后，在判断为监护系统的监护具有异常发生的可能性的情况下，进行用于告知具有尚不能正常进行监护对象者的监护的可能性的通知。显示控制部26控制触摸屏显示器13的画面显示。
例如，异常判断部24判断无法通过深度传感器8取得拍摄图像3内的各像素的深度的状态是否持续了一定时间以上。然后，在判断为无法通过深度传感器8取得拍摄图像3内的各像素的深度的状态持续了一定时间以上的情况下，通知部25进行用于告知具有尚不能正常进行监护对象者的监护的可能性的通知。在这种情况下，显示控制部26可以在触摸面板显示器13上进行涉及该通知的画面显示。
需要注意的是，关于各功能，将在后述的动作例中详细地说明。在此，在本实施方式中，说明了这些功能均通过通用的CPU来实现的例子。但是，这些功能的一部分或者全部也可以通过一个或者多个专用的处理器来实现。并且，关于信息处理装置1的功能构成，可以根据实施方式而适当进行功能的省略、置换以及追加。
§3动作例
[监护对象者的行为检测]
首先，使用图6及图7来说明通过信息处理装置1进行的监护对象者的行为检测的处理程序。图6例示通过信息处理装置1进行的监护对象者的行为检测所涉及的处理程序。图7例示当执行行为检测所涉及的处理时显示于触摸面板显示器13上的画面50。
在通过图6中例示的处理程序进行监护对象者的监护时，本实施方式所涉及的控制部11作为显示控制部26发挥作用，将在图7中例示的画面50显示于触摸面板显示器13。画面50包括：显示通过摄像机2已拍摄的拍摄图像3的区域51、用于接收在图6中例示的监护处理的暂时停止的按钮52、以及用于接收监护处理的各种设定的按钮53。控制部11一边使这样的画面50显示于触摸面板显示器13，一边执行以下的步骤S101～S105的处理，从而进行监护对象者的与床关联的行为的检测。使用者利用该行为检测的结果进行监护对象者的监护。
此外，以下说明的关于行为检测的处理程序只不过是一个例子，各处理可以最大限度地变更。关于以下说明的处理程序，能根据实施的方式而适当进行步骤的省略、置换以及追加。另外，当进行监护对象者的监护时显示于触摸面板显示器13上的画面可以不限定于在图7中例示的画面50，可以根据实施的方式而适当设定。
(步骤S101)
在步骤S101中，控制部11作为图像取得部21发挥作用，取得通过摄像机2拍摄到的拍摄图像3。在本实施方式中，由于摄像机2具备深度传感器8，因此在所取得的拍摄图像3中包括表示各像素的深度的深度信息。作为包括该深度信息的拍摄图像3，控制部11取得例如在图2及图7中例示那样的、根据各像素的深度而确定了各像素的灰度值(像素值)的拍摄图像3。也就是说，在图2及图7中例示的拍摄图像3的各像素的灰度值对应于在该各像素显现的对象的深度。
如上所述，控制部11能够根据该深度信息确定各像素显现的对象在真实空间中的位置。即，控制部11能够根据拍摄图像3内的各像素的位置(二维信息)和深度而确定在该各像素内的显现被拍摄体在三维空间(真实空间)中的位置。例如，在图7中例示的拍摄图像3显现的被拍摄体在真实空间中的状态例示在下一个图8中。
图8例示基于拍摄图像3中所包括的深度信息而确定的拍摄范围内的被拍摄体的位置的三维分布。通过用拍摄图像3内的位置和深度将各像素绘制于三维空间内，从而能够制作在图8中例示的三维分布。也就是说，控制部11能够如在图8中例示的三维分布那样识别拍摄图像3内显现的被拍摄体在真实空间内的状态。
此外，本实施方式涉及的信息处理装置1为了在医疗机构或护理机构中监护住院病人或福利机构入住者而利用。因此，控制部11可以与摄像机2的视频信号同步而取得拍摄图像3，以便能够实时地监护住院病人或福利机构入住者的行为。而且，控制部11可以对已取得的拍摄图像3立即执行后述的步骤S102直至S105为止的处理。信息处理装置1通过不间断连续地执行这样的动作，从而实现实时图像处理，使实时地监护住院病人或福利机构入住者的行为变为可能。
(步骤S102)
返回至图6，在步骤S102中，控制部11作为前景提取部22发挥作用，根据作为在步骤S101中已取得的拍摄图像3的背景而设定的背景图像与拍摄图像3的差分，提取该拍摄图像3的前景区域。在此，背景图像是为了提取前景区域而利用的数据，被设定为包括成为背景的对象的深度。制作背景图像的方法可以根据实施的方式而适当设定。例如，控制部11可以通过算出在开始了监护对象者的监护时获得的数帧大小的拍摄图像的平均来制作背景图像。此时，通过也包括深度信息而算出拍摄图像的平均，从而制作包括深度信息的背景图像。
图9例示在图7及图8中已例示的被拍摄体中的从拍摄图像3中提取的前景区域的三维分布。具体而言，图9例示了当监护对象者在床上起来了时提取的前景区域的三维分布。利用上述那样的背景图像而提取的前景区域，在背景图像中示出的真实空间内的状态上开始发生了变化的位置出现。因此，当监护对象者在床上移动了的情况下，拍有监护对象者的动作部位的区域作为该前景区域而被提取。例如，在图9中，由于监护对象者在床上正在进行立起上半身的(起来)动作，因此，拍有监护对象者的上半身的区域作为前景区域而被提取。控制部11使用这样的前景区域而判断监护对象者的动作。
此外，在本步骤S102中，控制部11提取前景区域的方法可以不限定于以上那样的方法，例如，也可以使用背景差分法来分离背景和前景。作为背景差分法，例如，能够列举出：根据上述那样的背景图像与输入图像(拍摄图像3)的差分而分离背景和前景的方法、使用不同的三张图像而分离背景和前景的方法、以及通过应用统计模型而分离背景和前景的方法。提取前景区域的方法，可以没有特别限制，可以根据实施的方式而适当选择。
(步骤S103)
返回至图6，在步骤S103中，控制部11作为行为检测部23发挥作用，根据在步骤S202中已提取的前景区域内的像素的深度判断前景区域显现的对象与床的位置关系是否满足预定的条件。然后，控制部11根据该判断结果而检测监护对象者正在进行的行为。
此外，检测监护对象者的行为的方法、用于检测各行为的预定的条件以及作为检测对象的行为可以没有特别限制，可以根据实施的方式而适当选择。在以下，作为检测监护对象者的行为的方法的一个例子，说明根据床上表面与前景区域的位置关系而检测监护对象者的起来、下床、端坐以及越过护栏的方法。
该床上表面为床的垂直方向上侧的面，例如为床垫的上表面。该床上表面在真实空间内的范围既可以预先设定，也可以通过解析拍摄图像3来确定床的位置而设定，还可以通过在拍摄图像3内由使用者指定其范围而设定。此外，检测监护对象者的行为的基准可以不限定于这样的床上表面，不局限于存在于床上的物理上的对象，可以为假想的对象。
即，本实施方式所涉及的控制部11根据前景区域显现的对象与床上表面在真实空间内的位置关系是否满足预定的条件的判断而检测监护对象者正在进行的行为。因此，用于检测监护对象者的行为的预定的条件相当于用于判断前景区域显现的对象是否包括在将床上表面作为基准而确定的预定的区域(以下，也称为“检测区域”)中的条件。因此，在这里，为说明的方便，说明基于该检测区域与前景区域的关系而检测监护对象者的行为的方法。
(1)起来
图10示意性例示用于检测起来的检测区域DA。假定当监护对象者在床上已起来时，在图9中例示的前景区域出现于床上表面的上方。因此，用于检测起来的检测区域DA，例如，如图10中例示的那样，被设定于从床上表面起在床的高度方向上方具有预定的距离量的高的位置。检测区域DA的范围可以没有特别限制，可以根据实施的方式而适当设定。在已判断为在检测区域DA中包括阈值以上的像素数量的前景区域显现的对象的情况下，控制部11可以检测监护对象者在床上起来。
(2)下床
图11示意性例示用于检测下床的检测区域DB。设想：在监护对象者从床上已下床的情况下，前景区域出现于与床的侧框架分离的位置。因此，用于检测下床的检测区域DB，例如，在图11中例示的那样，被设定于沿床的宽度方向从床上表面已离开的位置。该检测区域DB的范围与上述检测区域DA同样地，可以根据实施的方式而适当设定。在已判断为在检测区域DB中包括阈值以上的像素数目的前景区域显现的对象的情况下，控制部11可以检测监护对象者从床上下床。
(3)端坐
图12示意性例示用于检测端坐的检测区域DC。设想：当监护对象者在床上进行端坐时，前景区域从床的上方至下方出现在床的侧框架周边。因此，如在图12中所例示的，用于检测端坐的检测区域DC可以被设定于床的侧框架周边，并且从床的上方直至下方。在已判断为在检测区域DC中包括阈值以上的像素数目的前景区域显现的对象的情况下，控制部11可以检测监护对象者在床上的端坐。
(4)越过护栏
设想：在监护对象者从床的护栏上已探出身的情况下、换而言之，在监护对象者进行了越过护栏的情况下，前景区域出现于床的侧框架周边并且床的上方。因此，用于检测越过护栏的检测区域可以设定于床的侧框架周边且床的上方。在已判断为在该检测区域中包括阈值以上的像素数量的前景区域显现的对象的情况下，控制部11可以检测监护对象者越过护栏。
(5)其它
在本步骤S103中，控制部11通过上述方式进行监护对象者的各行为的检测。即，控制部11能够在判断为满足对象的行为的上述判断条件的情况下检测出该对象的行为。另一方面，在已判断为不满足各行为的上述判断条件的情况下，控制部11没有检到监护对象者的行为，使处理前进至下一个步骤S104。
需要注意的是，检测监护对象者的行为的方法可以不限定于上述的方法，可以根据实施的方式而适当设定。例如，控制部11可以通过取得作为前景区域已被提取的各像素的拍摄图像3内的位置及深度的平均而算出前景区域的平均位置。然后，控制部11可以通过判断在真实空间内该前景区域的平均位置是否被包括在作为检测各行为的条件而已设定的检测区域中，从而检测监护对象者的行为。
并且，控制部11可以根据前景区域的形状而确定前景区域显现的身体部位。前景区域示出从背景图像上发生的变化。因此，前景区域显现的身体部位对应于监护对象者的动作部位。基于此，控制部11可以根据已确定的身体部位(动作部位)与床上表面的位置关系而检测监护对象者的行为。与此同样地，控制部11可以通过判断各行为的检测区域中所包括的前景区域显现的身体部位是否为预定的身体部位而检测监护对象者的行为。
(步骤S104)
在步骤S104中，控制部11判断在步骤S103中已检测的行为是否为显示出危险迫近监护对象者的预兆的行为。然后，当已判断为在步骤S103中已检测的行为是显示出危险迫近监护对象者的预兆的行为时，控制部11使处理前进至步骤S105。另一方面，当在步骤S103中未检测监护对象者的行为时，或在步骤S103检测到的行为并不是显示出危险迫近监护对象者的预兆的行为时，控制部11结束本动作例涉及的处理。
被设定为是显示出危险迫近监护对象者的预兆的行为的行为可以根据实施的方式而适当选择。例如，也可以是端坐作为有可能发生滚落或跌倒的行为而被设定为显示出危险迫近监护对象者的预兆的行为。在这种情况下，控制部11当在步骤S103中已检测为监护对象者处于端坐的状态时，就判断为在步骤S103中检测到的行为为显示出危险迫近监护对象者的预兆的行为。
当判断在该步骤S103中检测到的行为是否为显示出危险迫近监护对象者的预兆的行为时，控制部11可以利用监护对象者的行为的转变。例如想象，与从下床变为端坐的状态相比，从起来变为端坐的状态发生监护对象者的滚落或跌倒的可能性更高。因此，控制部11在步骤S104中可以基于监护对象者的行为的转变而判断在步骤S103中检测到的行为是否为显示出危险迫近监护对象者的预兆的行为。
例如，控制部11正在定期地检测监护对象者的行为时，在步骤S103中，在检测出监护对象者起来之后又检测出监护对象者变为端坐的状态。此时，控制部11在本步骤S104中可以判断为在步骤S103中推断出的行为是显示出危险迫近监护对象者的预兆的行为。
(步骤S105)
在步骤S105中，控制部11作为通知部25发挥作用，进行用于告知具有危险迫近监护对象者的预兆的通知。控制部11进行该通知的方法可以根据实施的方式而适当选择。
例如，控制部11可以与连接于信息处理装置1的护士呼叫系统4等已设置于福利机构中的设备协作，进行用于告知具有危险迫近监护对象者的预兆的通知。在本实施方式中，控制部11可以控制经由外部接口15连接的护士呼叫系统4，从而作为用于告知具有危险迫近监护对象者的预兆的通知而进行基于该护士呼叫系统4的呼出。由此，能够将具有危险迫近监护对象者的预兆向对监护对象者的行为监护的使用者恰当地通知。
此外，作为基于该护士呼叫系统4的呼出的一个例子，控制部11，例如，使总机40及分机41的至少一方输出预定的声音。该呼出既可以在总机40和分机41两方中进行，也可以在任一方中进行。进行呼出的方法可以根据实施的方式而适当选择。
另外，例如，控制部11可以通过从连接于信息处理装置1的扬声器14中输出预定的声音来进行用于告知具有危险迫近监护对象者的预兆的通知。在该扬声器14配置于床的周边的情况下，通过用扬声器14进行这样的通知，从而对位于进行监护的场所周边的人通知具有危险迫近监护对象者的预兆变为可能。在这种位于进行监护的场所周边的人中，可以包括监护对象者自己。由此，能够将具有危险迫近监护对象者的预兆也向监护对象者自己报警。
另外，例如，控制部11可以使用于告知具有危险迫近监护对象者的预兆的画面显示于触摸面板显示器13上。另外，例如，控制部11可以利用电子邮件进行这样的通知。在这种情况下，成为通知目的地的用户终端的电子邮件地址可以被预先登记于存储部12中，控制部11可以利用该预先已登记的电子邮件地址来进行用于告知具有危险迫近监护对象者的预兆的通知。
当该通知完成时，控制部11结束本动作例所涉及的处理。但是，信息处理装置1在定期地检测监护对象者的行为的情况下，可以定期地重复上述的动作例中所示出的处理。定期地重复处理的间隔可以适当设定。另外，信息处理装置1可以根据使用者的要求而执行上述的动作例中所示出的处理。并且，信息处理装置1可以对应于设在画面50上的按钮52的操作而暂时停止监护对象者的行为检测所涉及的处理。
如以上那样，本实施方式所涉及的信息处理装置1通过利用前景区域和被拍摄体的深度而评价监护对象者的动作部位与床在真实空间内的位置关系，从而检测监护对象者的行为。因此，根据本实施方式，适合于真实空间中的监护对象者的状态的行为推断成为可能。
[异常判断]
接着，使用图15来说明用于防止在不能正常进行监护的状态下对监护对象置之不理的处理。图15例示本实施方式所涉及的信息处理装置1执行的、用于防止在不能正常进行监护的状态下对监护对象置之不理的处理程序。此外，防止在该异常状态下对监护对象置之不理所涉及的处理可以在任何时间上执行，例如，在程序5正在被执行的期间定期地执行。以下说明的处理程序只不过是一个例子，各处理可以最大限度地变更。并且，关于在以下说明的处理程序，能根据实施的方式而适当进行步骤的置换以及追加。
(步骤S201及步骤S202)
在步骤S201及步骤S202中，控制部11作为异常判断部24发挥作用，判断在监护系统的监护上是否具有异常发生的可能性。然后，控制部11在已判断为在监护系统的监护上具有异常发生的可能性的情况下，使处理前进至下一个步骤S203。另一方面，控制部11在已判断为在监护系统的监护上异常发生的可能性为没有的情况下，结束本动作例涉及的处理。判断是否具有在监护系统的监护上发生异常的可能性的方法可以根据实施的方式而适当选择。以下，例示判断在监护系统的监护上是否具有异常发生的可能性的具体方法。
(i)未取得深度信息
控制部11，例如，在无法通过深度传感器8取得拍摄图像3内的各像素的深度的状态持续了一定时间以上的情况下，可以判断为在监护系统的监护上具有异常发生的可能性。可以列举各种无法通过深度传感器8取得对应于各像素的深度的原因。例如，在深度传感器8发生了不良情况时，深度传感器8就变得无法取得各像素的深度。另外，例如，在深度传感器8为红外线深度传感器的情况下，当吸收红外线的物体存在于拍摄范围内时、太阳光等强光照射至拍摄范围时等，深度传感器8就无法取得各像素的深度。
在由于这些原因而无法取得各像素的深度的情况下，在无法取得深度的像素上分配错误值。控制部11例如根据这样的错误值出现的持续时间而判断无法通过深度传感器8取得拍摄图像3内的各像素的深度的状态是否持续了一定时间以上。成为判断为持续了一定时间以上的基准的预定时间既可以作为设定值而预先决定，也可以通过使用者的输入值来决定，还可以通过从多个设定值中选择来决定。
然后，控制部11在判断为无法通过深度传感器8取得拍摄图像3内的各像素的深度的状态持续了一定时间以上的情况下，评价为在监护系统的监护上具有异常发生的可能性，并使处理前进至下一个步骤S203。即，正如后所述的，控制部11进行用于告知具有尚不能正常进行监护系统的监护的可能性的通知。另一方面，在不是那样的情况下，控制部11评价为在监护系统的监护上没有异常发生的可能性，并结束本动作例涉及的处理。
如上所述，信息处理装置1根据深度信息而评价监护对象者与床在真实空间内的位置关系。因此，在无法取得深度信息的情况下，信息处理装置1就无法检测监护对象者的行为。换而言之，导致无法通过信息处理装置1来对监护对象者的行为进行监护。对此，本实施方式所涉及的信息处理装置1在能够评价为无法取得深度信息的情况下，向使用者等报警具有无法正常进行监护对象者的监护的可能性。因此，根据本实施方式，能够防止在由于无法取得深度信息而产生的监护状况不良的状态下监护系统的报警。
此外，控制部11，例如，在对于床的区域超过预定的比例而无法取得深度的情况下，可以判断为无法通过深度传感器8取得拍摄图像3内的各像素的深度的状态。如上所述，本实施方式所涉及的信息处理装置1根据床上表面与前景区域的位置关系检测监护对象者的行为。因此，如果能够取得床周围的深度信息，则信息处理装置1就能检测监护对象者的行为。
因此，本实施方式所涉及的控制部11测量床区域(例如床上表面)中的、无法取得深度的区域的比例。然后，控制部11可以在无法取得深度的区域的比例已超过预定值的情况下判断为无法通过深度传感器8取得拍摄图像3内的各像素的深度的状态。另一方面，控制部11可以在无法取得深度的区域的比例为预定值以下的情况下判断为非无法通过深度传感器8取得拍摄图像3内的各像素的深度的状态。
由此，对于与检测监护对象者的行为无关的区域，对于无法取得深度的情况，能够防止如下情况：判断为是无法取得拍摄图像3内的各像素的深度的状态。因此，能够降低监护系统中的异常发生的误报产生的可能性。此外，成为判断为是无法取得深度信息的状态的基准的预定值既可以作为设定值而预先决定，也可以通过使用者的输入值来决定，还可以通过从多个设定值中选择来决定。
(ii)拍摄范围的偏移
另外，控制部11，例如，在摄像机2的拍摄范围发生了一定程度以上的偏移的情况下，可以判断为在监护系统的监护上具有异常发生的可能性。能够列举各种摄像机2的拍摄范围发生偏移的原因。例如，当在摄像机2的附近往来的行人碰到摄像机2时，摄像机2的拍摄范围发生偏移。
在由于这种原因摄像机2的拍摄范围发生一定程度以上的偏移的情况下，在摄像机2上产生一定程度以上的移动。因此，控制部11首先根据加速度传感器9而检测摄像机2的撞击。例如，控制部11可以在通过加速度传感器9测量出的摄像机2的移动量超过了预定值的情况下检测摄像机2的撞击。
在根据加速度传感器9而检测到摄像机2的撞击之后，控制部11接着比较在检测该撞击之前已取得的拍摄图像3与在检测到该撞击之后取得的拍摄图像3。控制部11，例如，通过使从摄像机2中连续取得的拍摄图像3持续保持于存储部12中一定时间，从而就能够从存储部12中取得撞击前的拍摄图像3和撞击后的拍摄图像3。
这种比较撞击前的拍摄图像3与撞击后的拍摄图像3的方法，可以根据实施的方式而适当选择。控制部11，例如，可以根据撞击前的拍摄图像3与撞击后的拍摄图像3的一致度而比较这些拍摄图像3。即，控制部11可以根据撞击前的拍摄图像3与撞击后的拍摄图像3的一致度判断摄像机2的拍摄范围是否发生了一定程度以上的偏移。
在这种情况下，控制部11在撞击前的拍摄图像3与撞击后的拍摄图像3的一致度为预定值以下时，判断为摄像机2的拍摄范围发生了一定程度以上的偏移。另一方面，控制部11在撞击前的拍摄图像3与撞击后的拍摄图像3的一致度超过预定值时，判断为摄像机2的拍摄范围尚未发生一定程度以上的偏移。
然后，控制部11在已判断为摄像机2的拍摄范围发生了一定程度以上的偏移的情况下，评价为在监护系统的监护上具有异常发生的可能性，并使处理前进至下一个步骤S203。即，如后所述的，控制部11进行用于告知具有尚不能正常进行监护系统的监护的可能性的通知。另一方面，在不是那样的情况下，控制部11评价为在监护系统的监护上异常发生的可能性为没有，并结束本动作例涉及的处理。
如上所述，信息处理装置1通过在拍摄图像3内显现床附近的状态来检测监护对象者的与床关联的行为。因此，如果摄像机2的拍摄范围偏移，则床附近的状态就不会充分地在拍摄图像3内显现，信息处理装置1具有变得无法检测监护对象者的行为的可能性。对此，本实施方式所涉及的信息处理装置1在能够评价为拍摄范围发生了一定程度以上的偏移的情况下，向使用者等报警具有不能正常进行监护对象者的监护的可能性。因此，能够防止在由于摄像机2的方向改变而产生的监护状况不良的状态下对监护对象置之不理。
此外，成为检测摄像机2的撞击的基准的预定值，以及成为判断摄像机2的拍摄范围的偏移的基准的预定值，分别既可以作为设定值而预先决定，也可以通过使用者的输入值来决定，还可以通过从多个设定值中选择来决定。
(iii)不能识别拍摄装置
另外，控制部11，例如，在无法识别摄像机2的情况下，可以判断为在监护系统的监护上具有异常发生的可能性。能够列举各种信息处理装置1变得无法识别摄像机2的原因。例如，摄像机2与信息处理装置1之间的布线被切断、摄像机2的电源插头从插座上脱落等为原因，摄像机2变得不被信息处理装置1识别。
在由于这些原因而无法识别摄像机2的情况下，控制部11就变为无法经由外部接口15访问摄像机2。因此，控制部11可以根据是否能够经由外部接口15访问摄像机2来判断是否能够识别摄像机2。
然后，控制部11在判断为无法识别摄像机2的情况下，评价为在监护系统的监护上具有异常发生的可能性，并使处理前进至下一个步骤S203。即，如后面所述，控制部11进行用于告知具有尚不能正常进行监护系统的监护的可能性的通知。另一方面，在不是那样的情况下，控制部11评价为在监护系统的监护上异常发生的可能性为没有，并结束本动作例涉及的处理。
如上所述，信息处理装置1通过解析拍摄图像3来检测监护对象者的行为。因此，如果无法识别摄像机2，则信息处理装置1就变为无法从摄像机2中取得拍摄图像3，变为无法检测监护对象者的行为。对此，本实施方式所涉及的信息处理装置1在能够评价为无法取得拍摄图像3的情况下，向使用者等报警具有无法正常进行监护对象者的监护的可能性。因此，根据本实施方式，能够防止在由于无法取得拍摄图像3而产生的监护状况不良的状态下对监护对象置之不理。
(iv)不实施行为检测
控制部11，例如，在通过上述步骤S103进行的监护对象者的行为检测未被执行一定时间以上的情况下，可以判断为在监护系统的监护上具有异常发生的可能性。能够列举各种监护对象者的行为检测未被执行的原因。例如，如在图7中例示的，由于按钮52的操作监护处理被放置在已暂时停止的状态下、由于按钮53的操作设定画面被放置在已显示的状态下等原因，监护对象者的行为检测变为未被执行。
在由于这些原因行为检测的处理未被执行的情况下，上述暂时停止等状态就会一直被维持。因此，控制部11可以根据该暂时停止等状态被维持的时间判断监护对象者的行为的检测是否未被执行一定时间以上。此外，成为判断为未被执行一定时间以上的基准的预定时间既可以作为设定值而预先决定，也可以通过使用者的输入值来决定，还可以通过从多个设定值中选择来决定。
然后，控制部11在已判断为监护对象者的行为的检测未被执行一定时间以上的情况下，评价为在监护系统的监护上具有异常发生的可能性，并使处理前进至下一个步骤S203。即，如后面所述，控制部11进行用于告知具有尚不能正常进行监护系统的监护的可能性的通知。另一方面，在不是那样的情况下，控制部11评价为在监护系统的监护上异常发生的可能性为没有，并结束本动作例涉及的处理。
如上所述，信息处理装置1通过检测监护对象者的行为而进行该监护对象者的监护。因此，在监护对象者的行为检测未被执行一定时间以上的情况下，具有不能正常进行监护对象者的监护的可能性。对此，本实施方式所涉及的信息处理装置1在能够评价为未检测监护对象者的行为一定时间以上的情况下，向使用者等报警具有无法正常进行监护对象者的监护的可能性。因此，根据本实施方式，能够防止在由于监护对象者的行为检测未被执行一定时间以上而产生的监护状况不良的状态下的监护系统的报警。
(v)其它
此外，判断为在监护系统的监护上具有异常发生的可能性的监护系统的状态不局限于上述的例子，可以根据实施的方式而适当设定。例如，在检测监护对象者的行为的信息处理装置(在本实施方式中信息处理装置1)的CPU的负荷高的情况下，具有监护对象者的行为的检测处理未被恰当地执行的可能性。因此，控制部11可以在一定程度以上的负荷正在施加于CPU的情况下判断为具有不能正常进行监护对象者的监护的可能性。
判断CPU的负荷的方法可以根据实施的方式而适当设定。例如，控制部11能够根据CPU的使用率、CPU的温度等判断CPU的负荷。控制部11可以在CPU的使用率超过了预定值的情况下判断为一定程度以上的负荷正在施加于CPU。另外，控制部11可以在CPU的温度超过了预定温度的情况下判断为一定程度以上的负荷正在施加于CPU。
另外，例如，在触摸面板显示器13的画面操作通过密码已锁定的情况下，错误输入密码的使用者可能不是该监护系统的正规的使用者。在监护系统已被这样的使用者利用的情况下，具有在监护系统上发生无法预见的不良情况的可能性。因此，控制部11可以在使用者错误输入密码预定次数(例如3次)的情况下判断为具有不能正常进行监护对象者的监护的可能性。
此外，在本步骤S201及步骤S202中，控制部11可以从上述判断方法中采用一个或多个种类的判断方法来判断在监护系统的监护上是否具有异常发生的可能性。并且，控制部11可以接收从上述判断方法中采用哪一种判断方法的选择。然后，控制部11可以利用已选择的一种或多种判断方法来判断在监护系统的监护上是否具有异常发生的可能性。在判断为监护系统的监护具有异常发生的可能性的情况下，执行下一个步骤S203的处理。
(步骤S203)
在步骤S203中，控制部11作为通知部25发挥作用，进行用于告知具有尚不能正常进行监护对象者的监护的可能性的通知。进行这样的通知的方法可以根据实施的方式而适当选择。例如，与上述危险预兆的通知同样地，作为告知这样的异常发生预兆的通知，控制部11既可以进行基于护士呼叫系统4的呼出，也可以使预定声音从扬声器14中输出。
另外，例如，作为告知异常发生预兆的通知，控制部11可以使装置在触摸面板显示器13上进行预定模式的画面显示。作为预定模式的画面显示，控制部11例如可以使显示于触摸面板显示器13的画面闪烁。并且，作为告知异常发生预兆的通知，控制部11既可以进行电子邮件的发送，也可以生成记录了检测到异常发生预兆的时刻的记录。这样的异常发生预兆的记录，能够使在检测了异常发生预兆之后操作信息处理装置1的使用者知道具有尚不能正常进行监护对象者的监护的可能性的时刻。
此外，控制部11可以在用于告知具有尚不能正常进行监护对象者的监护的可能性的通知上利用一个或多个设备。
并且，控制部11可以利用特定的设备来进行用于告知具有尚不能正常进行监护对象者的监护的可能性的通知。在这种情况下，当已变得无法识别进行通知的该特定的设备时，控制部11就不能进行告知上述异常发生预兆的通知。为了处理该问题，在已变得无法识别进行通知的设备时，控制部11可以利用与进行该通知的设备不同的另外的设备来进行用于告知该异常发生预兆的通知。
例如，在已设定护士呼叫系统4作为进行用于告知异常发生预兆的通知的设备的情况下，当正在正常地控制护士呼叫系统4时，控制部11根据上述的事态的发生而进行基于护士呼叫系统4的呼出。
另一方面，在由于布线18已切断等理由而已变得无法正常地控制护士呼叫系统4时，就无法进行基于护士呼叫系统4的呼出。此时，作为用于告知异常发生预兆的通知，控制部11，例如，可以使扬声器14进行预定声音的输出来代替基于护士呼叫系统4的呼出。扬声器14相当于本发明的声音输出装置。该预定声音可以没有特别的限制，例如可以为告知异常内容的语音信息、哔哔声等。由此，除上述各异常事态的预兆以外，还能够通过声音向使用者等报警与护士呼叫系统4连接发生异常的情况。
另外，控制部11在无法进行基于护士呼叫系统4的呼出时，作为用于告知异常发生预兆的通知，例如，可以使触摸面板显示器13进行预定模式的画面显示来代替基于护士呼叫系统4的呼出。触摸面板显示器13相当于本发明的显示装置。该预定模式的画面显示可以没有特别的限制，控制部11，例如，可以使显示于触摸面板显示器13的画面闪烁来作为预定模式的画面显示。由此，除上述各异常事态的预兆以外，还能够在视觉上向使用者等报警与护士呼叫系统4连接发生异常的情况。
代替这样的护士呼叫系统4进行用于告知异常发生预兆的通知的设备既可以预先已设定，也可以当进行该通知时从控制部11已识别的设备中任意地选择。由此，即使在无法正常进行基于护士呼叫系统4的呼出的情况下，也能够报警监护系统中的异常发生。
§4变形例
以上，虽然详细说明了本发明的实施方式，但前述的说明在所有方面都只不过是本发明的例示。可在不脱离本发明范围的前提下进行各种改良和变形，这一点自不必说。
(1)面积的利用
例如，被拍摄体离摄像机2越远，拍摄图像3内的被拍摄体的像越小，被拍摄体越接近摄像机2，拍摄图像3内的被拍摄体的像越大。虽然拍到拍摄图像3内的被拍摄体的深度相对于被拍摄体的表面而取得，但对应于该拍摄图像3的各像素的被拍摄体的表面部分的面积在各像素间未必一致。
因此，为了排除由于被拍摄体的远近所带来的影响，控制部11可以在上述步骤S103中算出前置区域显现的被拍摄体中包含于检测区域中的部分在真实空间中的面积。然后，控制部11可以根据已算出的面积而检测监护对象者的行为。
需要说明的是，拍摄图像3内的各像素在真实空间中的面积能够根据该各像素的深度而通过以下方式求出。控制部11能够根据以下的数学式1及数学式2的关系式而分别算出图7中例示的拍摄图像3内的任意的点s(1像素)在真实空间内的横向的长度w及纵向的长度h。此外，Ds表示在点s处的深度。Vx表示摄像机2的横向的视角。Vy表示摄像机2的纵向的视角。W表示拍摄图像3的横向的像素数。H表示拍摄图像3的纵向的像素数。将拍摄图像3的中心点(像素)的坐标设为(0，0)。控制部11，例如，能够通过访问摄像机2来取得这些信息。
[数学式1]
w = ( D s &times; tan V x 2 ) / W 2
[数学式2]
h = ( D s &times; tan V y 2 ) / H 2
因此，控制部11能够通过如此算出的w的平方、h的平方、或w与h之积来求出深度Ds上的1像素在真实空间内的面积。因此，上述步骤S103中，控制部11算出前置区域内的像素中拍有包含于检测区域中的对象的各像素在真实空间内的面积的总和。然后，控制部11可以通过判断算出的面积的总和是否包括在预定的范围内来检测监护对象者在床上的行为。由此，能够排除被拍摄体的远近的影响，进而提高监护对象者的行为的检测精度。
需要注意的是，这样的面积有时会因深度信息的噪声、监护对象者以外的物体的移动等而发生大的变化。为了应对该问题，控制部11可以利用数帧量的面积的平均。另外，控制部11也可以在处理对象帧中的相应区域的面积与该处理对象帧之前的数帧中的该相应区域的面积的平均之差超过规定范围的情况下，将该相应区域从处理对象中排除。
(2)利用了面积及弥散(分散)的行为推断
在利用上述那样的面积来检测监护对象者的行为的情况下，作为用于检测行为的条件的面积的范围根据被设想为包括在检测区域中的监护对象者的预定部位而设定。该预定部位例如为监护对象者的头部、肩部等。即，根据监护对象者的预定部位的面积而设定成为用于检测行为的条件的面积的范围。
但是，若只有前置区域显现的对象在真实空间内的面积，控制部11并不能够确定该前置区域显现的对象的形状。因此，控制部11可能搞错包含在检测区域中的监护对象者的身体部位而导致误检测监护对象者的行为。因此，控制部11也可以利用表示真实空间中的扩展情况的弥散来防止这样的误检测。
使用图12来说明该弥散。图12例示区域的扩展状态与弥散的关系。设在图12中例示的区域TA及区域TB分别为相同的面积。当欲只用上述那样的面积来推断监护对象者的行为时，会导致控制部11识别为区域TA与区域TB相同，因此具有导致误检测监护对象者的行为的可能性。
然而，如在图12中例示的，区域TA与区域TB在真实空间中的扩展差别很大(在图12中水平方向的扩展状态)。因此，控制部11可以在上述步骤S103中算出前置区域上所包括的像素中的、显现的检测区域上所包括的对象的各像素的弥散。然后，控制部11可以根据已算出的弥散是否包括在预定的范围中的判断而检测监护对象者的行为。
需要注意的是，与上述面积的例子同样地，成为行为检测的条件的弥散的范围根据被设想为包括在检测区域中的监护对象者的预定部位而设定。例如，在设想被包括在检测区域上的预定部位为头部的情况下，作为行为检测的条件的弥散的值在较小值的范围内设定。另一方面，在设想被包括在检测区域中的规定部位是肩部的情况下，作为行为检测的条件的弥散的值在较大值的范围内设定。
(3)前景区域的不利用
在上述实施方式中，控制部11(信息处理装置1)利用在步骤S102中提取的前景区域而检测监护对象者的行为。然而，检测监护对象者的行为的方法可以不限定于这种利用了前景区域的方法，可以根据实施的方式而适当选择。
在检测监护对象者的行为时不利用前景区域的情况下，控制部11可以省略上述步骤S102的处理。然后，控制部11可以作为行为检测部23发挥作用，根据拍摄图像3内的各像素的深度判断床基准面与监护对象者在真实空间内的位置关系是否满足预定的条件，从而检测监护对象者的与床关联的行为。作为这种例子，例如，作为步骤S103的处理，控制部11可以通过模式检测、图形元素检测等来解析拍摄图像3而确定与监护对象者关联的影像。该与监护对象者关联影像既可以为监护对象者的全身像，也可以为头部、肩部等一个或多个身体部位影像。然后，控制部11可以根据已确定的与监护对象者关联影像与床在真实空间内的位置关系而检测监护对象者的与床关联的行为。
需要注意的是，如上所述，用于提取前景区域的处理只不过是计算拍摄图像3与背景图像的差分的处理。因此，在如上述实施方式那样利用前景区域而检测监护对象者的行为的情况下，控制部11(信息处理装置1)不利用高级的图像处理即可检测监护对象者的行为。由此，能够使对监护对象者的行为的检测所涉及的处理高速化。
附图标记说明
1…信息处理装置、2…摄像机、3…拍摄图像、4…护士呼叫系统、5…程序、6…存储介质、8…深度传感器、9…加速度传感器、11…控制部、12…存储部、13…触摸面板显示器、14…扬声器、15…外部接口、16…通信接口、17…驱动器、21…图像取得部、22…前景提取部、23…行为检测部、24…异常判断部、25…通知部、26…显示控制部。

Claims (12)

1.一种信息处理装置，具备：
图像取得部，取得通过拍摄装置拍摄到的拍摄图像，该拍摄装置是为了监护监护对象者在床上的行为而设置的，并具有用于测量被拍摄体的深度的深度传感器，所述拍摄图像包括通过该深度传感器测量的表示该拍摄图像内的各像素的深度的深度信息；
行为检测部，根据由所述深度信息表示的所述拍摄图像内的各像素的深度，判断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件，从而检测所述监护对象者的与所述床关联的行为；
异常判断部，判断无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态是否持续了一定时间以上；以及
通知部，在判断为无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态持续了一定时间以上的情况下，进行用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
2.根据权利要求1所述的信息处理装置，其中，
在对所述床的区域无法取得深度的比例超过预定的比例的情况下，所述异常判断部判断为是无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态。
3.根据权利要求1或2所述的信息处理装置，其中，
所述信息处理装置还具备前景提取部，所述前景提取部根据被设定作为所述拍摄图像的背景的背景图像与所述拍摄图像的差分而提取所述拍摄图像的前景区域，
所述行为检测部将根据所述前景区域内的各像素的深度确定的、所述前景区域显现的对象在真实空间内的位置用作所述监护对象者的位置，判断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件，从而检测所述监护对象者的与所述床关联的行为。
4.根据权利要求1至3中任一项所述的信息处理装置，其中，
所述拍摄装置还具备加速度传感器，
在基于所述加速度传感器检测到所述拍摄装置的撞击之后，所述异常判断部比较该撞击前的拍摄图像与该撞击后的拍摄图像，从而判断所述拍摄装置的拍摄范围是否发生一定量以上的偏移，
在判断为所述拍摄装置的拍摄范围发生了一定量以上的偏移的情况下，所述通知部进行用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
5.根据权利要求1至4中任一项所述的信息处理装置，其中，
所述信息处理装置与护士呼叫系统连接，该护士呼叫系统用于呼叫对所述监护对象者进行监护的执行者，
所述通知部进行通过所述护士呼叫系统的呼出，作为用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
6.根据权利要求5所述的信息处理装置，其中，
所述信息处理装置与声音输出装置连接，该声音输出装置用于输出声音，
在无法进行通过所述护士呼叫系统的呼出的情况下，所述通知部使所述声音输出装置进行预定声音的输出来代替通过该护士呼叫系统的呼出，作为用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
7.根据权利要求5或6所述的信息处理装置，其中，
所述信息处理装置与显示装置连接，该显示装置用于进行画面显示，
在无法进行通过所述护士呼叫系统的呼出的情况下，所述通知部使所述显示装置进行预定模式的画面显示来代替通过该护士呼叫系统的呼出，作为用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
8.根据权利要求1至7中任一项所述的信息处理装置，其中，
所述异常判断部判断所述信息处理装置是否处于能够识别所述拍摄装置的状态，
在判断为所述信息处理装置未处于能够识别所述拍摄装置的状态的情况下，所述通知部进行用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
9.根据权利要求1至8中任一项所述的信息处理装置，其中，
所述异常判断部判断通过所述行为检测部进行的对所述监护对象者的行为的检测是否未执行一定时间以上，
在判断为通过所述行为检测部进行的所述监护对象者的行为的检测未执行一定时间以上的情况下，所述通知部进行用于告知存在对所述监护对象者的监护并非正常的可能性的通知。
10.根据权利要求1至9中任一项所述的信息处理装置，其中，
所述拍摄装置所具有的深度传感器是基于红外线的照射测量深度的红外线深度传感器。
11.一种信息处理方法，由计算机执行如下步骤：
取得通过拍摄装置拍摄到的拍摄图像，该拍摄装置是为了监护监护对象者在床上的行为而设置的，并具有用于测量被拍摄体的深度的深度传感器，所述拍摄图像包括通过该深度传感器测量的表示该拍摄图像内的各像素的深度的深度信息；
根据由所述深度信息表示的所述拍摄图像内的各像素的深度，判断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件，从而检测所述监护对象者的与所述床关联的行为；
判断无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态是否持续了一定时间以上；以及
在判断为无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态持续了一定时间以上的情况下，进行用于告知存在对所述监护对象者的监护并非正常的可能性。
12.一种程序，用于使计算机执行如下步骤：
取得通过拍摄装置拍摄到的拍摄图像，该拍摄装置是为了监护监护对象者在床上的行为而设置的，并具有用于测量被拍摄体的深度的深度传感器，所述拍摄图像包括通过该深度传感器测量的表示该拍摄图像内的各像素的深度的深度信息；
根据由所述深度信息表示的所述拍摄图像内的各像素的深度，判断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件，从而检测所述监护对象者的与所述床关联的行为；
判断无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态是否持续了一定时间以上；以及
在判断为无法通过所述深度传感器取得所述拍摄图像内的各像素的深度的状态持续了一定时间以上的情况下，进行用于告知存在对所述监护对象者的监护并非正常的可能性。
CN201580006841.6A 2014-02-07 2015-01-22 信息处理装置、信息处理方法及程序 Pending CN105960664A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014-021822 2014-02-07
JP2014021822 2014-02-07
PCT/JP2015/051631 WO2015118953A1 (ja) 2014-02-07 2015-01-22 情報処理装置、情報処理方法、及び、プログラム

Publications (1)

Publication Number Publication Date
CN105960664A true CN105960664A (zh) 2016-09-21

Family

ID=53777760

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580006841.6A Pending CN105960664A (zh) 2014-02-07 2015-01-22 信息处理装置、信息处理方法及程序

Country Status (4)

Country Link
US (1) US20160345871A1 (zh)
JP (1) JP6500785B2 (zh)
CN (1) CN105960664A (zh)
WO (1) WO2015118953A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108652625A (zh) * 2018-02-05 2018-10-16 苏州朗润医疗系统有限公司 一种用于保障磁共振扫描安全的图像识别方法及系统
CN109043962A (zh) * 2018-09-05 2018-12-21 魏龙亮 一种各部位温度可调的石墨烯加热床垫及其温控方法
CN109658675A (zh) * 2017-10-12 2019-04-19 日立乐金光科技株式会社 生活规律测定系统和生活规律测定方法
CN109964248A (zh) * 2017-03-02 2019-07-02 欧姆龙株式会社 看护辅助系统及其控制方法、以及程序
CN111096752A (zh) * 2018-10-26 2020-05-05 由昉信息科技（上海）有限公司 一种运用于医疗照护领域的感测及警示系统及方法
CN111419584A (zh) * 2020-04-13 2020-07-17 南京林业大学 一种智能养老康复护理床

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10725297B2 (en) * 2015-01-28 2020-07-28 CCP hf. Method and system for implementing a virtual representation of a physical environment using a virtual reality environment
US10726625B2 (en) 2015-01-28 2020-07-28 CCP hf. Method and system for improving the transmission and processing of data regarding a multi-user virtual environment
US9852546B2 (en) 2015-01-28 2017-12-26 CCP hf. Method and system for receiving gesture input via virtual control objects
JP6804220B2 (ja) * 2016-05-27 2020-12-23 ヒースト株式会社 離床検出装置
EP3486868A4 (en) * 2016-07-12 2019-07-17 Konica Minolta, Inc. BEHAVIOR AND BEHAVIORAL PROCEDURE
JP2019217103A (ja) * 2018-06-21 2019-12-26 ノーリツプレシジョン株式会社 介助システム、介助方法及び介助プログラム

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008110215A (ja) * 2007-11-15 2008-05-15 Sumitomo Osaka Cement Co Ltd 監視装置
JP2012070223A (ja) * 2010-09-24 2012-04-05 Mega Chips Corp 監視カメラ、監視システムおよび監視方法
CN102610054A (zh) * 2011-01-19 2012-07-25 上海弘视通信技术有限公司 基于视频的起身检测系统
CN102710894A (zh) * 2011-03-28 2012-10-03 株式会社日立制作所 摄像机设置支援方法、图像识别方法
JP2013078433A (ja) * 2011-10-03 2013-05-02 Panasonic Corp 監視装置、プログラム
CN103150736A (zh) * 2012-11-16 2013-06-12 佳都新太科技股份有限公司 一种基于视频监控的摄像机移动检测方法
CN103189871A (zh) * 2010-09-14 2013-07-03 通用电气公司 用于规程遵守的系统和方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009029996A1 (en) * 2007-09-05 2009-03-12 Conseng Pty Ltd Patient monitoring system
JP5105478B2 (ja) * 2008-01-22 2012-12-26 アツミ電氣株式会社 ビームセンサ
US9579047B2 (en) * 2013-03-15 2017-02-28 Careview Communications, Inc. Systems and methods for dynamically identifying a patient support surface and patient monitoring
JP2010272065A (ja) * 2009-05-25 2010-12-02 Sony Corp センサ端末、センサ端末の異常判断情報送信方法、コントローラおよびコントローラのセンサ異常判断方法
JP5634810B2 (ja) * 2010-09-29 2014-12-03 セコム株式会社 警備システム
JP2012090235A (ja) * 2010-10-22 2012-05-10 Mitsubishi Electric Building Techno Service Co Ltd 映像監視システム
US9235977B2 (en) * 2011-02-22 2016-01-12 Richard Deutsch Systems and methods for monitoring caregiver and patient protocol compliance
US20140140590A1 (en) * 2012-11-21 2014-05-22 Microsoft Corporation Trends and rules compliance with depth video

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008110215A (ja) * 2007-11-15 2008-05-15 Sumitomo Osaka Cement Co Ltd 監視装置
CN103189871A (zh) * 2010-09-14 2013-07-03 通用电气公司 用于规程遵守的系统和方法
JP2012070223A (ja) * 2010-09-24 2012-04-05 Mega Chips Corp 監視カメラ、監視システムおよび監視方法
CN102610054A (zh) * 2011-01-19 2012-07-25 上海弘视通信技术有限公司 基于视频的起身检测系统
CN102710894A (zh) * 2011-03-28 2012-10-03 株式会社日立制作所 摄像机设置支援方法、图像识别方法
JP2013078433A (ja) * 2011-10-03 2013-05-02 Panasonic Corp 監視装置、プログラム
CN103150736A (zh) * 2012-11-16 2013-06-12 佳都新太科技股份有限公司 一种基于视频监控的摄像机移动检测方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109964248A (zh) * 2017-03-02 2019-07-02 欧姆龙株式会社 看护辅助系统及其控制方法、以及程序
CN109658675A (zh) * 2017-10-12 2019-04-19 日立乐金光科技株式会社 生活规律测定系统和生活规律测定方法
CN108652625A (zh) * 2018-02-05 2018-10-16 苏州朗润医疗系统有限公司 一种用于保障磁共振扫描安全的图像识别方法及系统
CN108652625B (zh) * 2018-02-05 2021-07-16 苏州朗润医疗系统有限公司 一种用于保障磁共振扫描安全的图像识别方法及系统
CN109043962A (zh) * 2018-09-05 2018-12-21 魏龙亮 一种各部位温度可调的石墨烯加热床垫及其温控方法
CN111096752A (zh) * 2018-10-26 2020-05-05 由昉信息科技（上海）有限公司 一种运用于医疗照护领域的感测及警示系统及方法
CN111419584A (zh) * 2020-04-13 2020-07-17 南京林业大学 一种智能养老康复护理床
CN111419584B (zh) * 2020-04-13 2021-05-07 南京林业大学 一种智能养老康复护理床

Also Published As

Publication number Publication date
WO2015118953A1 (ja) 2015-08-13
JP6500785B2 (ja) 2019-04-17
US20160345871A1 (en) 2016-12-01
JPWO2015118953A1 (ja) 2017-03-23

Similar Documents

Publication Publication Date Title
CN105960664A (zh) 信息处理装置、信息处理方法及程序
CN105283129B (zh) 信息处理装置、信息处理方法
CN105940434A (zh) 信息处理装置、信息处理方法及程序
Zhang et al. A viewpoint-independent statistical method for fall detection
Zhang et al. Evaluating depth-based computer vision methods for fall detection under occlusions
Bevilacqua et al. Fall detection in indoor environment with kinect sensor
CN107194967A (zh) 基于Kinect深度图像的人体摔倒检测方法及装置
CN106415654A (zh) 信息处理装置、信息处理方法及程序
CN105940428A (zh) 信息处理装置、信息处理方法及程序
JP6780641B2 (ja) 画像解析装置、画像解析方法、及び、画像解析プログラム
CN105960663A (zh) 信息处理装置、信息处理方法及程序
KR102205964B1 (ko) 듀얼 카메라와 적외선 카메라를 이용한 낙상 예방 시스템 및 낙상 예방 방법
JP2011198161A (ja) 対象物認識システム及び該システムを利用する監視システム、見守りシステム
JP6708980B2 (ja) 画像処理システム、画像処理装置、画像処理方法、および画像処理プログラム
CN109767600B (zh) 一种可自动报警的ar眼镜及其实现方法
Bai et al. Recognition of direction of fall by smartphone
CN113366529A (zh) 护理记录装置、护理记录系统、护理记录程序及护理记录方法
CN104361724A (zh) 婴儿尿湿检测的装置和方法
JP5657377B2 (ja) 異常検知装置
JP2011209794A (ja) 対象物認識システム及び該システムを利用する監視システム、見守りシステム
CN112861564A (zh) 一种坐姿检测的实现装置
CN118338853A (zh) 计算机程序、信息处理方法及信息处理装置
JP6607253B2 (ja) 画像解析装置、画像解析方法、及び、画像解析プログラム
Kwolek et al. Fall detection using kinect sensor and fall energy image
JP7500929B2 (ja) 画像処理システム、画像処理プログラム、および画像処理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160921