CN105940434A

CN105940434A - 信息处理装置、信息处理方法及程序

Info

Publication number: CN105940434A
Application number: CN201580006830.8A
Authority: CN
Inventors: 安川徹
Original assignee: Noritsu Precision Co Ltd
Current assignee: Noritsu Precision Co Ltd
Priority date: 2014-03-06
Filing date: 2015-01-22
Publication date: 2016-09-14
Also published as: WO2015133195A1; JPWO2015133195A1; US20160371950A1

Abstract

信息处理装置(1)通过解析由拍摄装置(2)拍摄的拍摄图像来检测监护对象者的行为。并且，在能够监护所述监护对象者的行为的范围内检测第三者的存在。在未检测到所述第三者存在的期间，响应于检出所述监护对象者的行为而进行报告，另一方面，在检测到所述第三者存在的期间，通过省略报告而降低由于第三者拍入拍摄图像所导致的监护系统的误报。

Description

信息处理装置、信息处理方法及程序

技术领域

本发明涉及信息处理装置、信息处理方法以及程序。

背景技术

例如，专利文献1中提议了一种利用拍摄图像来判断患者的起床举动的技术。在专利文献1提议的起床监视装置中，将用于判断躺在床上的患者的起床举动的监护区域设定于床的正上方。并且，起床监视装置通过摄像机从床的横向拍摄监护区域，在患者的图像区域占由该摄像机得到的拍摄图像内的监护区域的大小不足初始值的情况下检出患者的起床举动。

现有技术文献

专利文献

专利文献1：特开2011-005171号公报

发明内容

发明要解决的技术问题

近年来，住院病人、福利机构入住者、要看护者等监护对象者从床上跌倒、滚落的事故、以及由痴呆症患者的来回走动所造成的事故处于逐年增加的趋势。作为防止这样的事故的方法，例如，已开发出像专利文献1中所例示那样的、通过用设置于室内的拍摄装置(摄像机)拍摄监护对象者并解析拍摄到的图像来检测起来、端坐、下床等监护对象者的行为的监护系统。

在这样的监护系统中，当监护对象者以外的第三者进入拍摄装置的拍摄范围时，存在将第三者的举动误认作监护对象者的举动而无法恰当地检测监护对象者的行为的可能性。当误认监护对象者来检测第三者的行为时，会导致尽管监护对象者实际上没有进行起来等举动，但监护系统却基于错误的检测而报告监护对象者的举动。作为防止这样的误报的对策，现有技术中，如专利文献1所例示地，提议了通过区分监护对象者的举动和第三者的举动来防止监护对象者的举动的误检测的方法。但是，区分监护对象者的举动和第三者的举动存在局限性，防止由于第三者拍入拍摄图像而导致的监护系统的误报是困难的。

本发明是在一方面考虑了这样的问题点而完成的，其目的在于，提供防止由于监护对象者以外的第三者拍入拍摄图像而导致的监护系统的误报的技术。

用于解决技术问题的方案

本发明为解决上述技术问题而采用以下的构成。

也就是说，本发明的一方面所涉及的信息处理装置包括：图像取得部，取得通过拍摄装置拍摄到的拍摄图像，所述拍摄装置是为了监护监护对象者的行为而设置的；行为检测部，通过解析所取得的所述拍摄图像来检测所述监护对象者的行为；第三者检测部，在能够监护所述监护对象者的行为的范围内检测所述监护对象者以外的第三者的存在；以及报告部，在未检测到所述第三者的存在的期间，响应于检出所述监护对象者的行为，进行用于通知检出所述监护对象者的行为的报告，并且，在检测到所述第三者的存在的期间，省略用于通知检出所述监护对象者的行为的报告。

根据上述构成的信息处理装置，解析由为了监护监护对象者的行为而设置的拍摄装置拍摄到的拍摄图像，以检测该监护对象者的行为。然后，响应监护对象者的行为的检出，进行用于通知检出监护对象者的行为的报告。也就是说，根据上述构成的信息处理装置，构建基于图像解析来对监护对象者进行监护的监护系统。

在此，本发明的发明人发现了下述事项。即，正是在监护监护对象者的行为的人员不在的情形下，通过监护系统进行监护是必要的。与此相对，在监护对象者以外的第三者拍入拍摄图像这样的情形下，监护对象者由该第三者进行监护，而不需要通过监护系统进行监护的可能性高。也就是说，本发明的发明人发现，如果在能够监护监护对象者的行为的范围内存在第三者的话，也可以不执行监护系统的报告。

因此，上述构成的信息处理装置在能够监护监护对象者的行为的范围内检测监护对象者以外的第三者的存在。然后，上述构成的信息处理装置在检测到第三者存在的期间，省略执行用于通知检出监护对象者的行为的报告。由此，在监护对象者以外的第三者拍入拍摄图像这样的情形下，不再执行监护系统的报告。为此，能够防止由于第三者拍入拍摄图像而导致的监护系统的误报。

需要说明的是，监护对象者是指其行为受到监护的对象，例如为住院病人、福利机构入住者、要看护者等。并且，作为停止监护系统的报告的触发的第三者为监护对象者以外即可，可以是任何人，例如包括对监护对象者进行监护的人员。对监护对象者进行监护的人员例如为护士、福利机构职员、看护者等。并且，作为上述信息处理装置的检测对象的监护对象者的行为可以为任何行为，例如为在床上起来、在床上的端坐、越过床的护栏、从床上落下、从床上下床等。这里，端坐是指监护对象者正坐在床端的状态。另外，越过护栏是指监护对象者正在从床护栏上探出身的状态。

此外，作为上述一方面所涉及的信息处理装置的其它方式，也可以是，所述信息处理装置还包括履历创建部，所述履历创建部创建由所述行为检测部检出的所述监护对象者的行为的履历。通过该构成，能够保留监护系统进行的行为检测的履历。

此外，作为上述一方面所涉及的信息处理装置的其它方式，也可以是，所述行为检测部不管所述第三者的存在的检测如何均检测所述监护对象者的行为，所述履历创建部不管所述第三者的存在的检测如何均创建由所述行为检测部检出的所述监护对象者的行为的履历。根据该构成，不管关于检出监护对象者的行为的报告的执行停止与否，均能够保留监护系统进行的行为检测的履历。

此外，作为上述一方面所涉及的信息处理装置的其它方式，也可以是，所述第三者检测部通过解析所取得的所述拍摄图像来检测所述第三者的存在。在第三者拍入拍摄图像这样的情形下，如上所述，不需要监护系统的监护的可能性高。另一方面，由于第三者拍入到了拍摄图像内，因此，监护系统误检出监护对象者的行为并报告检出监护对象者的行为的可能性高。根据该构成，通过在这样的情形下停止执行监护系统的报告，从而能够防止关于检出监护对象者的行为的报告发生错误。

此外，作为上述一方面所涉及的信息处理装置的其它方式，也可以是，所述拍摄装置将作为所述监护对象者的行为基准的对象物与所述监护对象者一同进行拍摄，所述图像取得部取得包含深度信息的拍摄图像，所述深度信息表示所述拍摄图像内的各像素的深度。并且，所述行为检测部也可以根据由所述深度信息表示的所述拍摄图像内的各像素的深度，判断所述监护对象者与所述对象物在真实空间内的位置关系是否满足规定的条件，从而来检测所述监护对象者的与所述对象物相关联的行为。

各像素的深度表示拍摄于该各像素的对象的深度。为此，根据该构成，能够考虑在真实空间内的状态来检测监护对象者的行为。需要注意的是，作为监护对象者的行为基准的对象物可根据对监护对象者进行监护的情形而适当选择。例如，在监护监护对象者在床上起来等的情况下，将该床设定为作为行为基准的对象物。

此外，作为上述一方面所涉及的信息处理装置的其它方式，所述信息处理装置也可以还包括前景提取部，所述前景提取部根据被设定作为所述拍摄图像的背景的背景图像与所述拍摄图像的差分而提取所述拍摄图像的前景区域。并且，所述行为检测部也可以将根据所述前景区域内的各像素的深度而确定的拍到所述前景区域的对象在真实空间内的位置用作所述监护对象者的位置，并通过判断所述监护对象者与所述对象物在真实空间内的位置关系是否满足规定的条件来检测所述监护对象者的与所述对象物相关联的行为。

根据该构成，通过提取背景图像与拍摄图像的差分而确定拍摄图像的前景区域。该前景区域是从背景图像上发生了变化的区域。为此，在前景区域中，作为与监护对象者关联的像，包括由于监护对象者活动而发生了变化的区域、换言之、存在监护对象者的身体部位中在动的部位(以下，也称为“动作部位”)的区域。因此，通过参照由深度信息表示的前景区域内的各像素的深度而能确定监护对象者的动作部位在真实空间内的位置。

因此，上述构成的信息处理装置将根据前景区域内的各像素的深度而确定的拍到前景区域的对象在真实空间内的位置用作监护对象者的位置，并判断监护对象者与对象物在真实空间内的位置关系是否满足规定的条件。即，用于检测监护对象者的行为的规定条件是假设前景区域与监护对象者的行为关联而设定的。由此，上述构成的信息处理装置能够检测监护对象者的与对象物相关联的行为。

在此，提取前景区域的处理只不过是背景图像与拍摄图像的差分计算。为此，根据上述构成，能够以简易的方法执行与真实空间的状况相应的监护对象者的行为检测。

此外，作为上述一方面所涉及的信息处理装置的其它方式，所述信息处理装置也可以与接收装置连接，所述接收装置用于接收从所述第三者所携带的无线通信装置发送的信息。并且，所述接收装置也可以配置于能够与存在于能对所述监护对象者进行监护的范围内的第三者所携带的无线通信装置进行通信的场所。进一步地，所述第三者检测部也可以响应于所述接收装置接收到从所述无线通信装置发送来的信息而检测到所述第三者的存在。根据该构成，通过接收从无线通信装置发送来的信息即可检测第三者的存在。为此，无需图像识别等高度的信息处理即可检测第三者。

此外，作为上述一方面所涉及的信息处理装置的其它方式，所述第三者检测部也可以通过参照从所述无线通信装置发送来的信息而判断所述第三者是否为规定的人物。并且，所述报告部也可以在检测到所述第三者的存在的期间，当判断为所述第三者为规定的人物时，省略用于通知检出所述监护对象者的行为的报告。

根据进入能够监护监护对象者的范围的第三者的不同，有时会有不会注意到监护对象者的情况。为此，并非优选对于任何的第三者都停止监护系统的报告。根据该构成，只有在进入能够监护监护对象者的范围的第三者为规定人物的情况下才能够停止监护系统的报告的执行。也就是说，能够防止不优选停止监护对象者的报告的第三者进入了可监护范围时停止该报告的执行。

此外，作为上述一方面所涉及的信息处理装置的其它方式，所述信息处理装置也可以与用于呼叫对所述监护对象者进行监护的人员的护士呼叫系统相连接。并且，所述报告部也可以通过所述护士呼叫系统进行呼叫来作为用于通知检出所述监护对象者的行为的报告。根据该构成，能够通过护士呼叫系统报告通过监护系统检出监护对象者的行为。

需要注意的是，作为上述各方式所涉及的信息处理装置的其它方式，既可以为实现以上各构成的信息处理系统，也可以为信息处理方法，还可以为程序，也可以为记录有这样的程序的、计算机及其它装置、机器等可读的存储介质。在此，计算机等可读的记录介质是通过电、磁、光学、机械或者化学作用蓄积程序等信息的介质。另外，信息处理系统还可以通过一个或多个信息处理装置实现。

例如，本发明的一方面所涉及的信息处理方法中，计算机执行以下步骤：取得通过拍摄装置拍摄到的拍摄图像的步骤，所述拍摄装置是为了监护监护对象者的行为而设置的；通过解析所取得的所述拍摄图像来检测所述监护对象者的行为的步骤；在能够监护所述监护对象者的行为的范围内检测所述监护对象者以外的第三者的存在的步骤；在未检测到所述第三者的存在的情况下响应于检出所述监护对象者的行为而进行用于通知检出所述监护对象者的行为的报告的步骤；以及在检测到所述第三者的存在的情况下省略用于通知检出所述监护对象者的行为的报告的步骤。

此外，例如，本发明的一方面所涉及的程序用于使计算机执行以下步骤：取得通过拍摄装置拍摄到的拍摄图像的步骤，所述拍摄装置是为了监护监护对象者的行为而设置的；通过解析所取得的所述拍摄图像来检测所述监护对象者的行为的步骤；在能够监护所述监护对象者的行为的范围内检测所述监护对象者以外的第三者的存在的步骤；在未检测到所述第三者的存在的情况下响应于检出所述监护对象者的行为而进行用于通知检出所述监护对象者的行为的报告的步骤；以及在检测到所述第三者的存在的情况下省略用于通知检出所述监护对象者的行为的报告的步骤。

发明效果

根据本发明，能够降低由于监护对象者以外的第三者拍入拍摄图像而导致的监护系统的误报。

附图说明

图1示出应用本发明的一例情形。

图2例示实施方式涉及的信息处理装置的硬件构成。

图3例示由实施方式涉及的摄像机取得的深度。

图4例示由实施方式涉及的摄像机取得的深度与被拍摄体的关系。

图5示出根据各像素的深度确定该各像素的灰度值后的拍摄图像的一例。

图6例示实施方式涉及的信息处理装置的功能构成。

图7例示实施方式涉及的信息处理装置的报告模式的状态转变。

图8例示与实施方式涉及的信息处理装置的状态转变相关的处理步骤。

图9示意性例示由实施方式涉及的摄像机取得的拍摄图像。

图10例示与实施方式涉及的信息处理装置的监护有关的处理步骤。

图11例示实施方式涉及的信息处理装置对监护对象者进行监护时所显示的画面。

图12例示基于拍摄图像中包含的深度信息确定的拍摄范围的被拍摄体的三维分布。

图13例示从拍摄图像提取的前景区域的三维分布。

图14示意性例示实施方式涉及的监护系统用于检测起来的检测区域。

图15示意性例示实施方式涉及的监护系统用于检测下床的检测区域。

图16示意性例示实施方式涉及的监护系统用于检测端坐的检测区域。

图17例示实施方式涉及的履历信息。

图18例示区域的扩展情况与弥散的关系。

图19A例示变形例中检测第三者的方法。

图19B例示变形例中检测第三者的方法。

图20例示变形例涉及的监护系统的硬件构成。

具体实施方式

以下，基于附图说明本发明的一个方面所涉及的实施方式(以下也表述为“本实施方式”)。不过，以下说明的本实施方式的所有方面只不过是本发明的例示。当然在不脱离本发明的范围的情况下能够进行各种改良和变形。即，在本发明的实施中，可以适当采用与实施方式对应的具体的构成。

需要说明的是，在本实施方式中，利用自然语言说明出现的数据，更具体来讲，由计算机能够识别的伪语言、命令、参数、机器语言等指定。

§1应用情形例

首先，使用图1来对应用本发明的情形进行说明。图1示意性示出应用本发明的情形的一个例子。在本实施方式中，设想了在医疗机构或者护理机构中住院病人或福利机构入住者作为监护对象者其行为受到监护的情形。对监护对象者进行监护的人(以下，也称为“使用者”)例如为护士或者福利机构职员。使用者利用包括信息处理装置1和摄像机2的监护系统进行监护对象者在床上行为的监护。不过，监护对象者、使用者及进行监护的情形分别可以根据实施方式而适当选择。

本实施方式涉及的监护系统通过摄像机2拍摄监护对象者的行为。摄像机2相当于本发明的拍摄装置。在本实施方式中，摄像机2是为了监护监护对象者在床上的行为而设置的。需要注意的是，摄像机2的可配置位置也可以没有特别的限定，可根据实施的方式而适当地选择。在本实施方式中，摄像机2设置于床的长度方向的前方。

本实施方式涉及的信息处理装置1取得由这样的摄像机2拍摄的拍摄图像3。并且，信息处理装置1通过解析所取得的拍摄图像3来检测监护对象者的行为。然后，信息处理装置1响应检测到监护对象者的行为而进行用于通知检测到该监护对象者的行为的报告。由此，在本实施方式中，能够通过监护系统对监护对象者进行监护。

不过，在本实施方式中，由于通过解析拍摄图像3来检测监护对象者的行为，因此，如图1所例示地，当监护对象者以外的第三者进入拍摄范围时，信息处理装置1有可能弄错监护对象者的举动而检出第三者的举动。于是，信息处理装置1会基于错误的检测结果进行通知检测到行为的报告。因此，尽管监护对象者没有进行任何的行为，但由于第三者拍入拍摄图像3，从而有可能导致信息处理装置1进行通知检测到行为的报告。

为了防止这样的误报，本实施方式涉及的信息处理装置1判断在能够监护监护对象者的行为的范围内是否存在监护对象者以外的第三者。然后，在未检测到第三者存在的期间，信息处理装置1响应监护对象者的行为的检出而进行用于通知检出该行为的报告。另一方面，在检测到第三者存在的期间，信息处理装置1即使检出监护对象者的行为，也省略用于通知检测到行为的报告的执行。由此，在本实施方式中，由于在监护对象者拍入拍摄图像3这样的情形下能够省略用于通知检测到行为的报告的执行，因此，能够防止由于第三者拍入拍摄图像3而导致的监护系统的误报。

需要注意的是，监护对象者以外的第三者可以是作为监护对象者的人员以外的任何人，例如为护士、福利机构职员、看护者等对监护对象者进行监护的人员。此外，该第三者中也可以包含监护对象者的访客、在监护环境中进行作业的作业人员等。

§2构成例

<硬件构成>

下面，使用图2说明信息处理装置1的硬件构成。图2例示本实施方式涉及的信息处理装置1的硬件构成。如图2所例示，信息处理装置1是电连接有如下部分的计算机：包括CPU、RAM(Random Access Memory：随机存取存储器)、ROM(Read Only Memory：只读存储器)等的控制部11；存储在控制部11中执行的程序5等的存储部12；用于进行图像的显示和输入的触摸面板显示器13；用于输出声音的扬声器14；用于与外部装置连接的外部接口15；用于经由网络而进行通信的通信接口16；以及用于读入存储介质6中所存储的程序的驱动器17。不过，在图2中，通信接口及外部接口分别被记作“通信I/F”及“外部I/F”。

需要注意的是，关于信息处理装置1的具体的硬件构成，可根据实施方式而适当进行构成成分的省略、置换以及追加。例如，控制部11也可以包括多个处理器。另外，例如触摸面板显示器13也可以被替换为各自分别独立地被连接的输入装置及显示装置。并且，例如可以省略扬声器14。并且，例如扬声器14也可以不作为信息处理装置1的内部装置而是作为外部装置连接于信息处理装置1。并且，信息处理装置1也可以内置摄像机2。

信息处理装置1也可以包括多个外部接口15，并与多个外部装置相连接。在本实施方式中，信息处理装置1经由外部接口15而与摄像机2相连接。本实施方式涉及的摄像机2是为了监护监护对象者在床上的行为而设置的。该摄像机2包括用于测定被拍摄体的深度的深度传感器21。该深度传感器21的种类及测定方法可根据实施的方式而适当地选择。例如，作为深度传感器21，可以列举TOF(Time of Flight：飞行时间)方式等的传感器。

此外，对监护对象者进行监护的场所(例如医疗机构的病房)为监护对象者的床所放置的场所，换言之，为监护对象者就寝的场所。为此，监护对象者的监护有可能在暗的场所进行。因此，为了不受拍摄场所的明亮度的影响来取得深度，优选使用基于红外线的照射来测定深度的红外线深度传感器作为深度传感器21。作为包括这样的红外线深度传感器的较廉价的拍摄装置，可列举微软公司的Kinect、ASUS公司的Xtion、PrimeSense公司的CARMINE。

在此，使用图3～图5详细地说明由本实施方式涉及的深度传感器21测定的深度。图3示出能作为本实施方式涉及的深度看待的距离的一个例子。该深度体现被拍摄体的深度。如在图3中所例示的，被拍摄体的深度例如既可以用摄像机与对象物之间的直线距离A来体现，也可以用从水平轴向摄像机的被拍摄体垂下的垂线的距离B来体现。

即，本实施方式所涉及的深度既可以为距离A，也可以为距离B。在本实施方式中，将距离B作为深度来对待。不过，距离A与距离B例如能通过使用勾股定理等而相互转换。为此，使用了距离B的之后的说明可直接应用于距离A。当利用这样的深度时，如图4所例示地，能够考虑真实空间的状态来检测监护对象者的行为。

图4例示由本实施方式涉及的摄像机2取得的深度与被拍摄体在真实空间中的关系。图4例示了从侧面观察摄像机2的情形。为此，图4的上下方向相当于床的高度方向。并且，图4的左右方向相当于床的长度方向，垂直于图4的纸面的方向相当于床的宽度方向。

如图4所例示，摄像机2能够通过深度传感器21取得与拍摄图像3内的各像素对应的深度。为此，在由摄像机2取得的拍摄图像3中包含表示按每个像素得到的深度的深度信息。需要注意的是，包含该深度信息的拍摄图像3的数据形式可以没有特别的限定，可根据实施的方式适当地选择。拍摄图像3例如既可以为表示拍摄范围内的被拍摄体的深度的数据，也可以为拍摄范围内的被拍摄体的深度呈二维状分布的数据(例如深度图)。另外，拍摄图像3也可以在包括深度信息的同时，包括RGB图像。进而，拍摄图像3既可以为动画图像，也可以为静止图像。

图5示出这样的拍摄图像3的一例。图5中例示的拍摄图像3为各像素的灰度值根据该各像素的深度而确定的图像。越黑的像素表示靠摄像机2越近。另一方面，越白的像素表示离摄像机2越远。根据该深度信息，能够确定拍摄范围内的被拍摄体在真实空间(三维空间)内的位置。为此，信息处理装置1通过利用该深度信息，从而能够考虑真实空间的状态来检测监护对象者的行为。

并且，如图2所例示，信息处理装置1经由外部接口15而连接于护士呼叫系统4。护士呼叫系统4的硬件构成及功能构成可根据实施的方式适当地选择。护士呼叫系统4为用于呼叫对监护对象者进行监护的监护系统的使用者(护士、福利机构职员等)的装置，也可以是作为护士呼叫系统而已知的装置。本实施方式涉及的护士呼叫系统4包括通过配线18而与信息处理装置1连接的主机40、和能够与该主机40进行无线通信的子机41。

主机40例如设置于使用者的办公室。主机40主要用于呼叫位于办公室的使用者。另一方面，子机41一般被使用者携带。子机41用于呼叫携带该子机41的使用者。主机40及子机41也可以分别包括用于通过声音输出各种通知的扬声器。并且，主机40及子机41也可以分别包括麦克风，以便经由信息处理装置1等而与监护对象者对话。这样，信息处理装置1也可以经由外部接口15而与护士呼叫系统4等设置于机构的设备相连接，并与该设备协作而进行各种报告。

需要说明的是，程序5是使信息处理装置1执行后述的动作中包含的处理的程序，相当于本发明的“程序”。该程序5也可以记录在存储介质6中。存储介质6是以计算机及其它装置、机器等能读取所记录的程序等信息的方式通过电、磁、光学、机械或化学作用来蓄积该程序等信息的介质。存储介质6相当于本发明的“存储介质”。需要注意的是，图2例示了作为存储介质6的一例的CD(Compact Disk：高密度盘)、DVD(Digital Versatile Disk：数字多用盘)等盘式存储介质。然而，存储介质6的种类并非限定于盘式，也可以为盘式以外的存储介质。作为盘式以外的存储介质，能够列举例如闪存等半导体存储器。

另外，作为信息处理装置1，例如除了使用被设计成专门用于所提供的服务的装置之外，还可以使用PC(Personal Computer：个人计算机)、平板终端等通用的装置。另外，信息处理装置1也可以通过一个或多个计算机来安装。

<功能构成例>

下面，使用图6说明信息处理装置1的功能构成。图5例示了本实施方式涉及的信息处理装置1的功能构成。本实施方式涉及的信息处理装置1所包括的控制部11将存储于存储部12的程序5在RAM中展开。然后，控制部11通过CPU来解释和执行在RAM中展开的程序5，从而控制各构成成分。由此，本实施方式涉及的信息处理装置1作为包括图像取得部31、前景提取部32、行为检测部33、报告部34、第三者检测部35、履历创建部36及显示控制部37的计算机而发挥作用。

图像取得部31取得由摄像机2拍摄到的拍摄图像3。行为检测部33通过解析所取得的拍摄图像3来检测监护对象者的行为。在本实施方式中，如后所述，行为检测部33检测在床上的起来、从床上下床、在床上的端坐以及越过床的护栏。

并且，第三者检测部35在能够监护监护对象者的行为的范围内检测监护对象者以外的第三者的存在。然后，在第三者检测部35未检测到第三者存在的情况下，报告部34响应行为检测部33检出监护对象者的行为，进行用于通知检出该行为的报告。另一方面，在第三者检测部35检测到第三者存在的情况下，报告部34省略用于通知检出该行为的报告的执行。也就是说，在这样的情况下，即使行为检测部33检出监护对象者的行为，报告部34也不执行用于通知检测到行为的报告。

此外，前景提取部32根据被设定作为拍摄图像3的背景的背景图像与该拍摄图像3的差分来提取拍摄图像3的前景区域。行为检测部33也可以利用该前景区域来检测监护对象者的行为。并且，履历创建部36创建通过行为检测部33检测到的监护对象者的行为的履历。进而，显示控制部37控制触摸面板显示器13的画面显示。

关于各功能，将在后述的动作例中详细地说明。这里，在本实施方式中，说明了这些功能均通过通用的CPU来实现的例子。但是，这些功能的一部分或全部也可以通过一个或多个专用的处理器来实现。并且，关于信息处理装置1的功能构成，也可以根据实施方式而适当地进行功能的省略、置换以及追加。例如，在不进行触摸面板显示器13的画面显示的情况下，也可以省略显示控制部37。

§3动作例

[报告模式的控制]

首先，使用图7及图8，对于规定监护系统是否执行用于通知检测到行为的报告的报告模式的控制进行说明。不过，控制有无执行报告的方法不限于这样的方法，也可以根据实施的方式而适当地选择。

图7例示本实施方式涉及的报告模式的状态转变。如图7所例示地，本实施方式涉及的报告模式有执行模式和省略模式两种。在此，执行模式为执行用于通知检测到行为的报告的模式。另一方面，省略模式为省略该报告的执行的模式。表示这样的报告模式的信息例如保持于RAM上。控制部11通过更新保持于该RAM上的表示报告模式的信息而进行报告模式的切换。

例如，控制部11在开始了监护的时间点将报告模式设定为执行模式。然后，在检测到第三者存在的情况下，控制部11将报告模式从执行模式切换为省略模式。之后，当没有检测到第三者存在时，控制部11将报告模式从省略模式切换为执行模式。由此，控制部11控制监护系统的报告模式。需要注意的是，使用图8来说明有关该状态转变的处理步骤。

图8例示有关本实施方式涉及的报告模式的状态转变的处理步骤。以下说明的处理步骤只不过是一个例子，可以尽可能地变更各处理。并且，关于以下说明的处理步骤，也可以根据实施的方式而适当地进行步骤的省略、置换以及追加。

(步骤S101&步骤S102)

在步骤S101中，控制部11作为第三者检测部35而发挥作用，执行用于在能够监护监护对象者的行为的范围内检测第三者存在的处理。于是，在步骤S101中检测到第三者存在的情况下，控制部11在步骤S102中使处理前进至步骤S104。另一方面，在步骤S101中未能检测到第三者存在的情况下，控制部11在步骤S102中使处理前进至步骤S103。

需要注意的是，在能够监护的范围内检测第三者的方法没有特别的限定，可根据实施的方式而适当地选择。在本实施方式中，控制部11通过解析拍摄图像3来检测第三者的存在。使用图9说明该通过解析拍摄图像3来检测第三者存在的方法。

图9示意性例示拍入了第三者的拍摄图像3。在第三者拍入拍摄图像3的情况下，基本上在拍摄图像3中拍入有多个人物。为此，控制部11例如通过图案检测、图形元素检测等图像解析来判断是否有多个人物拍入拍摄图像3内。

然后，在判断为有多个人物拍入拍摄图像3内的情况下，控制部11判断在能够监护的范围内存在第三者。为此，这种情况下，控制部11在步骤S102中使处理前进至步骤S104。另一方面，在判断为没有多个人物拍入拍摄图像3内的情况下，控制部11判断在能够监护的范围内不存在第三者。为此，这种情况下，控制部11在步骤S102中使处理前进至步骤S103。

根据该方法，通过第三者拍入拍摄图像3，从而控制部11检测第三者的存在。为此，控制部11能够适当地掌握有可能发生由于第三者拍入拍摄图像3而导致监护系统误报的期间。由此，控制部11通过解析拍摄图像3来进行第三者的检测，从而能够将后述的停止报告的期间抑制为最小限度。

需要注意的是，如图9所例示地，在第三者拍入拍摄图像3内的情况下，在监护对象者附近存在第三者。为此，在这样的情况下，第三者至少能够对监护对象者进行监护。也就是说，存在第三者拍入拍摄图像3的可能性的真实空间上的范围包含在能够对监护对象者进行监护的范围内。

这里，存在第三者拍入拍摄图像3的可能性的真实空间上的范围既可以相当于能够对监护对象者进行监护的范围本身，也可以相当于能够对监护对象者进行监护的范围的一部分。可适当地设定能够对监护对象者进行监护的范围。在本实施方式中，第三者拍入拍摄图像3的范围被设定为能够对监护对象者进行监护的范围。

(步骤S103)

在步骤S103中，控制部11设报告模式为执行模式并结束本动作例涉及的处理。例如，在报告模式已被设定为执行模式的情况下，控制部11使报告模式原样保持为执行模式。另一方面，在报告模式已被设定为省略模式的情况下，控制部11将报告模式从省略模式切换为执行模式。

(步骤S104)

并且，在步骤S104中，控制部11设报告模式为省略模式并结束本动作例涉及的处理。例如，在报告模式已被设定为省略模式的情况下，控制部11使报告模式原样保持为省略模式。另一方面，在报告模式已被设定为执行模式的情况下，控制部11将报告模式从执行模式切换为省略模式。如此一来，本实施方式涉及的信息处理装置1控制监护系统的报告模式。

[监护对象者的行为检测]

下面，使用图10及图11说明信息处理装置1执行的监护对象者的行为检测的处理步骤。图10例示信息处理装置1执行的监护对象者的行为检测所涉及的处理步骤。并且，图11例示在执行有关行为检测的处理时显示于触摸面板显示器13的画面50。需要注意的是，在本实施方式中，该有关监护对象者的行为检测的处理作为与上述有关报告模式的控制的处理分开的处理来进行说明。但是，该有关监护对象者的行为检测的处理也可以与上述有关报告模式的控制的处理作为一连串的处理来执行。

本实施方式涉及的控制部11在根据图10例示的处理步骤对监护对象者进行监护时，作为显示控制部37而发挥作用，将图11所例示的画面50显示于触摸面板显示器13。画面50包含：显示正由摄像机2拍摄的拍摄图像3的区域51、用于接收暂时停止图10例示的监护处理的按钮52、以及用于接收监护处理的各种设定的按钮53。

控制部11边使这样的画面50显示于触摸面板显示器13的同时，边执行以下的步骤S201～S207的处理，进行监护对象者的与床关联的行为的检测。监护系统的使用者利用该监护系统进行行为检测的结果，对监护对象者进行监护。

需要注意的是，以下说明的有关行为检测的处理步骤只不过是一个例子，也可以尽可能地变更各处理。并且，关于以下说明的处理步骤，可以根据实施的方式而适当地进行步骤的省略、置换以及追加。并且，触摸面板显示器13上显示的画面不限于图7所例示的画面50，还可以根据实施的方式适当地设定。

(步骤S201)

在步骤S201中，控制部11作为图像取得部31而发挥作用，取得由摄像机2拍摄到的拍摄图像3。在本实施方式中，摄像机2包括深度传感器21。为此，在本步骤S201中取得的拍摄图像3中包含表示各像素的深度的深度信息。控制部11取得例如在图5及图11中例示那样的、根据各像素的深度确定了各像素的灰度值(像素值)的拍摄图像3作为该包含深度信息的拍摄图像3。也就是说，图5及图11中例示的拍摄图像3的各像素的灰度值与拍到该各像素的对象的深度相对应。

如上所述，控制部11能够根据该深度信息确定拍到各像素的对象在真实空间中的位置。也就是说，控制部11能够根据拍摄图像3内的各像素的位置(二维信息)和深度而确定拍到该各像素内的被拍摄体在三维空间(真实空间)中的位置。例如，拍到图11中例示的拍摄图像3的被拍摄体在真实空间中的状态于下面的图12中例示。

图12例示根据拍摄图像3中包含的深度信息而确定的拍摄范围内的被拍摄体的位置的三维分布。通过根据拍摄图像3内的位置和深度将各像素标示于三维空间内，从而能够创建图12所例示的三维分布。也就是说，控制部11能够如图12中例示的三维分布那样识别拍到拍摄图像3内的被拍摄体在真实空间内的状态。

需要注意的是，本实施方式涉及的信息处理装置1被用于在医疗机构或护理机构中监护住院病人或福利机构入住者。因此，控制部11也可以与摄像机2的视频信号同步地取得拍摄图像3，以便能够实时地监护住院病人或福利机构入住者的行为。而且，控制部11也可以对已取得的拍摄图像3立即执行后述的步骤S202～S207的处理。信息处理装置1通过不间断地连续执行这样的动作，从而可以实现实时图像处理，实时地监护住院病人或福利机构入住者的行为。

(步骤S202)

返回至图10，在步骤S202中，控制部11作为前景提取部32而发挥作用，根据被设定作为在步骤S201中取得的拍摄图像3的背景的背景图像与拍摄图像3的差分，提取该拍摄图像3的前景区域。在此，背景图像是为了提取前景区域而被利用的数据，被设定为包括作为背景的对象的深度。创建背景图像的方法也可以根据实施的方式而适当地设定。例如，控制部11也可以通过算出在开始了监护对象者的监护时获得的数帧量的拍摄图像的平均来创建背景图像。此时，通过也包括深度信息并算出拍摄图像的平均，从而创建包括深度信息的背景图像。

图13例示从图11及图12中例示的拍摄图像3提取的前景区域的三维分布。具体而言，图13例示了监护对象者在床上起来了时所提取的前景区域的三维分布。利用上述那样的背景图像而提取的前景区域出现于从背景图像中示出的真实空间内的状态发生了变化的位置。为此，对应监护对象者所进行的行为，拍有监护对象者的动作部位的区域作为该前景区域而被提取。例如，在图13中，由于监护对象者正在床上进行立起上半身(起来)的动作，因此，拍有监护对象者的上半身的区域作为前景区域而被提取。控制部11使用这样的前景区域来判断监护对象者的动作。

需要注意的是，在本步骤S202中，控制部11提取前景区域的方法也可以不限定于以上那样的方法，例如，也可以使用背景差分法来分离背景和前景。作为背景差分法，例如，可列举出：根据上述那样的背景图像与输入图像(拍摄图像3)的差分而分离背景和前景的方法、使用不同的三张图像分离背景和前景的方法、以及通过应用统计模型来分离背景和前景的方法。提取前景区域的方法也可以没有特别的限定，可根据实施的方式而适当地选择。

(步骤S203)

返回至图10，在步骤S203中，控制部11作为行为检测部33而发挥作用，根据在步骤S202中提取的前景区域内的各像素的深度而判断拍到前景区域的对象与床的位置关系是否满足规定的条件。然后，控制部11根据该判断结果来检测监护对象者所正进行的行为。

需要注意的是，检测监护对象者的行为的方法、用于检测各行为的规定的条件以及作为检测对象的行为可以没有特别的限定，可根据实施的方式而适当地选择。以下，作为检测监护对象者的行为的一例方法，说明根据床上表面与前景区域的位置关系来检测监护对象者的起来、下床、端坐以及越过护栏的方法。

此外，如图4所例示地，床上表面为床的垂直方向上侧的面，例如为床垫的上表面。该床上表面在真实空间内的范围既可以预先设定，也可以通过解析拍摄图像3而确定床的位置来进行设定，还可以由使用者在拍摄图像3内指定其范围来进行设定。需要注意的是，检测监护对象者的行为的基准也可不限于这样的床上表面，其可不限于存在于床上的物理的对象，还可以为假想的对象。

也就是说，本实施方式涉及的控制部11基于拍到前景区域的对象与床上表面在真实空间内的位置关系是否满足规定条件的判断来检测监护对象者所正进行的行为。为此，用于检测监护对象者的行为的规定条件相当于用于判断拍到前景区域的对象是否包含在以床上表面为基准而确定的规定区域(以下，也称为“检测区域”)中的条件。因此，在此，为了说明的方便，对基于该检测区域与前景区域的关系来检测监护对象者的行为的方法进行说明。

(1)起来

图14示意性例示用于检测起来的检测区域DA。设想：在监护对象者在床上起来了的情况下，图13所例示的前景区域出现在床上表面的上方。为此，例如在图14中所例示地，用于检测起来的检测区域DA也可以设定在从床上表面起向床的高度方向上方高出规定距离的位置。检测区域DA的设定范围可以没有特别的限定，也可以根据实施的方式而适当地决定。例如，控制部11在判断为拍到阈值以上的像素数的前景区域的对象包括在检测区域DA中的情况下，检测出监护对象者在床上起来。

(2)下床

图15示意性例示用于检测下床的检测区域DB。设想：在监护对象者从床上已下床的情况下，前景区域出现于与床的侧框架分离的位置。为此，例如，如在图15中所例示地，用于检测下床的检测区域DB也可以设定于在床的宽度方向上与床上表面分离的位置。该检测区域DB的设定范围与上述检测区域DA同样地也可以根据实施的方式而适当决定。例如，控制部11在判断为拍到阈值以上的像素数的前景区域的对象包括在检测区域DB中时，检测出监护对象者从床上下床。

(3)端坐

图16示意性例示用于检测端坐的检测区域DC。设想：当监护对象者在床上进行了端坐时，前景区域从床的上方至下方出现在床的侧框架周边。为此，如在图16中所例示地，用于检测端坐的检测区域DC也可以从床的上方至下方设定在床的侧框架周边。例如，控制部11在判断为拍到阈值以上的像素数的前景区域的对象被包括在检测区域DC中的情况下，检测出监护对象者在床上的端坐。

(4)越过护栏

设想：在监护对象者从床的护栏探出身的情况下，换言之，在监护对象者进行了越过护栏的情况下，前景区域出现于床的侧框架周边且在床的上方。为此，用于检测越过护栏的检测区域也可以设定于床的侧框架周边且在床的上方。例如，控制部11在判断为拍到阈值以上的像素数的前景区域的对象被包括在该检测区域中的情况下，检测出监护对象者越过护栏。

(5)其它

在本步骤S203中，控制部11如上述这样进行监护对象者的各行为的检测。即，控制部11能够在判断为满足上述各行为的判断条件的情况下检测出该各行为。另一方面，当判断为不满足上述各行为的判断条件的情况下，控制部11没有检到监护对象者的行为，使处理前进至下一步骤S204。

需要注意的是，检测监护对象者的行为的方法也可以不限于上述的方法，可根据实施的方式而适当地选择。例如，控制部11也可以通过取作为前景区域而被提取的各像素在拍摄图像3内的位置及深度的平均而算出前景区域的平均位置。于是，控制部11也可以通过判断在真实空间内该前景区域的平均位置是否包括在作为检测各行为的条件而设定的检测区域中来检测监护对象者的行为。

并且，控制部11也可以根据前景区域的形状而确定拍到前景区域的身体部位。前景区域表示从背景图像上发生的变化。为此，拍到前景区域的身体部位对应于监护对象者的动作部位。基于此，控制部11也可以根据确定的身体部位(动作部位)与床上表面的位置关系来检测监护对象者的行为。与此同样地，控制部11也可以通过判断拍到包含于各行为的检测区域中的前景区域的身体部位是否为规定的身体部位来检测监护对象者的行为。

需要注意的是，在本实施方式中，床相当于本发明的“作为监护对象者的行为基准的对象物”。这样的对象物也可以不限于床，可根据实施的方式而适当地选择。

(步骤S204)

在步骤S204中，控制部11判断在步骤S203中是否能检出监护对象者的行为。当在步骤S203中检出监护对象者的行为的情况下，控制部11使处理前进至下一步骤S205。另一方面，当在步骤S203中未检出监护对象者的行为的情况下，控制部11结束本动作例涉及的处理。

(步骤S205)

在步骤S205中，控制部11作为报告部34而发挥作用，参照表示报告模式的信息。并且，控制部11判断监护系统的报告模式是否为执行模式。在监护系统的报告模式为执行模式的情况下，控制部11使处理前进至下一步骤S206，执行用于通知检测到行为的报告。另一方面，在监护系统的报告模式不为执行模式的情况下，换言之，在监护系统的报告模式为省略模式的情况下，控制部11省略步骤S206的处理，使处理前进至下一步骤S207。

也就是说，控制部11在监护系统的报告模式设定为执行模式的期间，响应步骤S203中的监护对象者的行为的检出，在下一步骤S206中执行用于通知检测到行为的报告。另一方面，在监护系统的报告模式设定为省略模式的期间，即使在步骤S203中检出监护对象者的行为，也省略在步骤S206中执行用于通知检测到行为的报告。

(步骤S206)

在步骤S206中，控制部11作为报告部34而发挥作用，响应步骤S203中的监护对象者的行为的检出，进行用于通知检出该监护对象者的行为的报告。控制部11进行该报告的单元(手段)(以下也称为“报告单元(手段)”)可根据实施的方式而适当地选择。

例如，控制部11也可以与连接于信息处理装置1的护士呼叫系统4等设置于机构的设备相联合来进行用于通知检出监护对象者的行为的报告。这种情况下，控制部11也可以经由外部接口15而控制护士呼叫系统4。于是，例如，作为用于通知检测到行为的报告，控制部11也可以通过该护士呼叫系统4进行呼叫。由此，能够向监护监护对象者的行为的使用者适当地通知检出监护对象者的行为。

需要注意的是，作为通过护士呼叫系统4进行呼叫的一例，例如，控制部11使主机40及子机41中至少一方输出规定的声音。该呼叫既可以由主机40及子机41双方进行，也可以由某一方进行。进行呼叫的方法可根据实施的方式而适当地选择。

并且，例如，控制部11也可以通过从与信息处理装置1连接的扬声器14输出规定的声音来进行用于通知检出监护对象者的行为的报告。在该扬声器14配置于床的周边的情况下，通过由扬声器14进行这样的报告，从而能够对处于进行监护的场所周边的人通知检出监护对象者的行为。该处于进行监护的场所周边的人中也可以包含监护对象者本人。由此，也可以向监护对象者本人报告进行了监护系统的监护对象者的行为。

此外，例如，控制部11也可以将用于通知检出监护对象者的行为的画面显示于触摸面板显示器13上。此外，例如，控制部11也可以利用电子邮件进行这样的通知。这种情况下，作为通知目的地的用户终端的电子邮件地址也可以预先登记于存储部12中，控制部11也可以利用该预先登记的电子邮件地址来进行用于通知检出监护对象者的行为的报告。

需要注意的是，用于通知检出监护对象者的行为的报告也可以作为用于告知存在危险迫近监护对象者的预兆的通知而进行。这种情况下，控制部11也可以不对检出的所有行为执行该报告。例如，也可以是，在步骤S203中检出的行为为显示出危险迫近监护对象者的预兆的行为的情况下，控制部11进行该报告。

在此，被设定为显示出危险迫近监护对象者的预兆的行为的行为可根据实施的方式而适当地选择。例如，也可以是端坐作为有可能发生滚落或跌倒的行为而被设定为显示出危险迫近监护对象者的预兆的行为。在这种情况下，控制部11若在步骤S203中检测出监护对象者处于端坐的状态时，则判断为在步骤S203中检测出的行为是显示出危险迫近监护对象者的预兆的行为。

并且，当判断在该步骤S203中检测出的行为是否为显示出危险迫近监护对象者的预兆的行为时，控制部11也可以利用监护对象者的行为的转变。例如想象：与从下床变为端坐的状态相比，从起来变为端坐的状态发生监护对象者的滚落或跌倒的可能性更高。因此，控制部11也可以基于监护对象者的行为的转变来判断在步骤S203中检测出的行为是否为显示出危险迫近监护对象者的预兆的行为。

例如，假设控制部11正在定期地检测监护对象者的行为，在步骤S203中，在检测出监护对象者起来之后又检测出监护对象者变为了端坐的状态。此时，控制部11也可以在本步骤S206中判断为在步骤S203中推断出的行为是显示出危险迫近监护对象者的预兆的行为。

(步骤S207)

在步骤S207中，控制部11作为履历创建部36而发挥作用，创建在步骤S203中检出的监护对象者的行为的履历。例如，控制部11创建在步骤S203中检出的监护对象者的行为的履历信息并将创建的履历信息保持于存储部12。由此，也可以创建监护对象者的行为的履历。

这里，使用图17说明在此步骤S207中创建的履历信息。在图17中例示了表式的履历信息。不过，履历信息的数据形式也可以不限于图17所例示的表形式，可根据实施的方式而适当地选择。

在图17所例示的履历信息中，一条记录的内容与一次的检测结果相对应。履历信息的各条记录中包含存储检出时刻和检出行为的字段(フィールド)。检出时刻表示由步骤S203检出监护对象者的行为的时刻。并且，检出行为表示由步骤S203检出的行为的类别。

在此步骤S207中，控制部11首先将保持于存储部12的履历信息读出至RAM。然后，控制部11创建与步骤S203中的检测结果对应的记录，并将创建的记录追加到读出至RAM的履历信息中。最后，将追加有检测结果的履历信息写入存储部12。由此，在每次检出监护对象者的行为时，更新履历信息。

这样，在本实施方式中，能够保留监护系统的行为检测的履历。通过该履历信息，使用者能够追溯既往来确认监护对象者的行为。

需要注意的是，在本实施方式中，即使报告模式为省略模式，也执行步骤S203中的监护对象者的行为检测处理。并且，在步骤S207中存储该行为检测处理的结果。像这样地即使为省略模式也不省略监护对象者的行为检测及其履历创建的处理的理由如下所述。

即，进入能够监护的范围的第三者不一定注意到监护对象者。存在该第三者的注意转向监护对象者以外的可能性。为此，考虑到这样的可能性，即使停止了用于通知检测到行为的报告的执行，最好也不要停止监护对象者的行为检测处理本身。为了与之相应，在本实施方式中，控制部11不管第三者存在的检测如何，均检测监护对象者的行为。并且，控制部11不管第三者存在的检测如何，均创建检出的监护对象者的行为的履历。

不过，该检测结果有可能因第三者的存在而发生错误。因此，为了能够判断检测结果正确与否，控制部11也可以使检出监护对象者的行为时的拍摄图像3与表示该检测结果的记录相对应地存储于存储部12。使用者通过参照与该履历一同存储的拍摄图像3而能判断监护对象者的行为的检测结果是否正确。

当完成该履历创建的处理时，控制部11结束本动作例涉及的处理。不过，信息处理装置1在定期性检测监护对象者的行为的情况下，也可以定期性地重复上述动作例中所示的处理。定期性地重复处理的间隔也可以适当地设定。另外，信息处理装置1也可以根据使用者的要求而执行上述动作例中所示的处理。进而，信息处理装置1还可以响应设置于画面50的按钮52的操作而暂时性地停止监护对象者的行为检测所涉及的处理。

综上所述，当在可监护监护对象者的行为的范围内能检测出第三者存在这样的情况下，本实施方式涉及的信息处理装置1省略执行用于通知检出监护对象者的行为的报告。更详细而言，信息处理装置1在能够于拍摄图像3内检测出第三者存在的情况下，省略用于通知检测到行为的报告的执行。为此，在监护对象者以外的第三者拍入拍摄图像3这样的场合下，不再执行监护系统的报告。由此，能够防止由于第三者拍入拍摄图像3而导致的监护系统的误报。

并且，本实施方式涉及的信息处理装置1通过利用前景区域和被拍摄体的深度来评价监护对象者的动作部位与床在真实空间内的位置关系，以此来检测监护对象者的行为。也就是说，本实施方式涉及的信息处理装置1利用深度信息来检测监护对象者的行为。为此，根据本实施方式，可以进行符合真实空间中的监护对象者的状态的行为推断。

并且，本实施方式涉及的信息处理装置1利用在步骤S202中提取的前景区域来确定监护对象者的动作部位的位置。在此，用于提取前景区域的处理只不过是计算拍摄图像3与背景图像的差分的处理。为此，根据本实施方式，控制部11(信息处理装置1)不利用高度的图像处理即可检测监护对象者的行为。由此，可以使监护对象者的行为的检测所涉及的处理高速化。

§4变形例

以上，虽然详细说明了本发明的实施方式，但前述的说明在所有方面都只不过是本发明的例示。可在不脱离本发明范围的前提下进行各种改良和变形，这一点自不必说。

(1)面积的利用

例如，被拍摄体离摄像机2越远，拍摄图像3内的被拍摄体的像越小，被拍摄体越接近摄像机2，拍摄图像3内的被拍摄体的像越大。虽然拍到拍摄图像3内的被拍摄体的深度相对于被拍摄体的表面而取得，但对应于该拍摄图像3的各像素的被拍摄体的表面部分的面积在各像素间未必一致。

因此，为了排除由于被拍摄体的远近所带来的影响，控制部11也可以在上述步骤S203中算出拍到前置区域的被拍摄体中包含于检测区域中的部分在真实空间中的面积。然后，控制部11也可以根据算出的面积来检测监护对象者的行为。

需要说明的是，拍摄图像3内的各像素在真实空间中的面积可根据该各像素的深度按下述这样求出。控制部11可根据以下的数学式1及数学式2的关系式而分别算出图11中例示的拍摄图像3内的任意的点s(1像素)在真实空间内的横向长度w及纵向长度h。需要说明的是，D_s表示在点s的深度。V_x表示摄像机2的横向的视角。V_y表示摄像机2的纵向的视角。W表示拍摄图像3的横向的像素数。H表示拍摄图像3的纵向的像素数。将拍摄图像3的中心点(像素)的坐标设为(0，0)。控制部11例如能够通过访问摄像机2而取得这些信息。

[数学式1]

w = (D_{s} \times t a n \frac{V_{x}}{2}) / \frac{W}{2}

[数学式2]

h = (D_{s} \times \tan \frac{V_{y}}{2}) / \frac{H}{2}

因此，控制部11可通过如此算出的w的平方、h的平方、或w与h之积来求出深度D_s上的1像素在真实空间内的面积。因此，控制部11在上述步骤S203中算出前置区域内的像素中拍有包含于检测区域中的对象的各像素在真实空间内的面积的总和。然后，控制部11也可以通过判断算出的面积的总和是否包括在规定范围内来检测监护对象者在床上的行为。由此，能够排除被拍摄体的远近的影响，进而提高监护对象者的行为的检测精度。

需要注意的是，这样的面积有时会因深度信息的噪声、监护对象者以外的物体的移动等而发生大的变化。为了应对该问题，控制部11也可以利用数帧量的面积的平均。另外，控制部11也可以在处理对象帧中的相应区域的面积与该处理对象帧之前的数帧中的该相应区域的面积的平均之差超过规定范围的情况下，将该相应区域从处理对象中排除。

(2)利用了面积及弥散(分散)的行为推断

在利用上述那样的面积来检测监护对象者的行为的情况下，作为用于检测行为的条件的面积的范围根据被设想为包括在检测区域中的监护对象者的规定部位而设定。该规定部位例如为监护对象者的头部、肩部等。即，根据监护对象者的规定部位的面积而设定作为用于检测行为的条件的面积的范围。

不过，光是拍到前置区域的对象在真实空间内的面积的话，控制部11并不能够确定拍到该前置区域的对象的形状。为此，控制部11可能搞错包含在检测区域中的监护对象者的身体部位而导致误检测监护对象者的行为。因此，控制部11也可以利用表示真实空间中的扩展情况的弥散来防止这样的误检测。

使用图18来说明该弥散。图18例示区域的扩展情况与弥散的关系。设图18中例示的区域TA及区域TB分别为相同面积。当欲只用上述那样的面积来推断监护对象者的行为时，会导致控制部11识别为区域TA与区域TB相同，因此有可能导致误检测监护对象者的行为。

然而，如在图18中例示地，区域TA与区域TB在真实空间中的扩展大大地不同(在图18中水平方向的扩展情况)。因此，控制部11也可以在上述步骤S203中算出包含于前置区域的像素中包括在检测区域中的各像素的弥散。然后，控制部11也可以根据算出的弥散是否包括在规定范围内的判断来检测监护对象者的行为。

需要注意的是，与上述面积的例子同样，作为行为检测的条件的弥散的范围是根据被设想为包括在检测区域中的监护对象者的规定部位而设定的。例如，在设想被包括在检测区域中的规定部位是头部的情况下，作为行为检测的条件的弥散的值在较小值的范围内设定。另一方面，在设想被包括在检测区域中的规定部位是肩部的情况下，作为行为检测的条件的弥散的值在较大值的范围内设定。

(3)前景区域的不利用

在上述实施方式中，控制部11(信息处理装置1)利用在步骤S202中提取的前景区域来检测监护对象者的行为。然而，检测监护对象者的行为的方法可以不限定于这样的利用了前景区域的方法，可根据实施的方式而适当地选择。

需要注意的是，当在检测监护对象者的行为的处理(步骤S203)中不利用前景区域的情况下，控制部11也可以省略上述步骤S202的处理。这种情况下，控制部11也可以作为行为检测部33而发挥作用，通过根据拍摄图像3内的各像素的深度来判断监护对象者与床在真实空间内的位置关系是否满足规定的条件，从而检测监护对象者的与床关联的行为。

作为这种例子，例如，作为步骤S203的处理，控制部11也可以通过图案检测、图形元素检测等图像解析而在拍摄图像3内确定拍监护对象者的区域。该确定的区域中既可以拍摄有监护对象者的全身，也可以拍摄有监护对象者的头部、肩部等一个或多个身体部位。如果利用该确定的区域中所包含的各像素的深度，则能够确定监护对象者在真实空间内的位置。为此，控制部11也可以利用确定的区域中包含的各像素的深度来判断监护对象者与床在真实空间内的位置关系是否满足规定的条件。由此，控制部11能够检测监护对象者的与床相关联的行为。

(4)深度信息的不利用

在上述实施方式中，控制部11(信息处理装置1)通过根据深度信息而推断在真实空间内的监护对象者的状态来检测监护对象者的行为。但是，检测监护对象者的行为的方法也可以不限于这样的利用了深度信息的方法，可根据实施的方式而适当地选择。

当在检测监护对象者的行为的处理(步骤S203)中不利用深度信息的情况下，摄像机2也可以不包含深度传感器21。这种情况下，也可以是，控制部11作为行为检测部33而发挥作用，通过判断拍于拍摄图像3内的监护对象者与床的位置关系是否满足规定的条件来检测监护对象者的行为。例如，与上述同样地，控制部11也可以通过图案检测、图形元素检测等图像解析来确定拍监护对象者的区域。然后，控制部11也可以根据确定的拍监护对象者的区域与拍床的区域在拍摄图像3内的位置关系来检测监护对象者的与床相关联的行为。并且，例如，控制部11也可以将拍于前景区域的对象假定为监护对象者，通过判断前景区域出现的位置是否满足规定的条件来检测监护对象者的行为。

(5)利用了前景区域的第三者检测

考虑进入能够监护的范围内的第三者正在移动。为此，信息处理装置1也可以利用通过步骤S202的处理而提取的前景区域来进行第三者的检测。这种情况下，控制部11(第三者检测部35)例如在步骤S101中，通过图案检测、图形元素检测等图像解析来判断在前景区域内是否存在拍第三者的区域，从而检测第三者的存在。

于是，控制部11也可以在判断为前景区域内存在拍第三者的区域的情况下，使处理前进至步骤S104，并使报告模式为省略模式。另一方面，控制部11也可以在判断为前景区域内不存在拍第三者的区域的情况下，使处理前进至步骤S103，并使报告模式为执行模式。

这样，通过在第三者的检测中利用前景区域，从而能够限定检测第三者的拍摄图像3内的区域。也就是说，作为图案匹配(パターンマッチング)等图像解析的对象的区域并非拍摄图像3内的整个区域，而被限制在前景区域内。由此，能够减轻步骤S101中的处理负担。

(6)利用了无线通信的第三者检测

在上述实施方式中，控制部11(信息处理装置1)通过对由摄像机2拍摄的拍摄图像3进行图像解析，从而来检测监护对象者以外的第三者的存在。但是，检测在能够监护监护对象者的范围内是否存在第三者的方法也可以不限于这样的基于图像解析的方法，可根据实施的方式而适当地选择。例如，控制部11也可以替代上述的步骤S101的处理、或者与步骤S101的处理一道地进行图19A及图19B中所例示的利用无线通信的第三者检测处理。

图19A及图19B例示利用无线通信来检测第三者的情形。在由图19A及图19B所例示的情形中，第三者持有无线通信装置7。并且，信息处理装置1连接有用于接收从该无线通信装置7发送的信息的接收装置8。接收装置8配置于能够与存在于可对监护对象者进行监护的范围内的第三者所携带的无线通信装置7进行通信的场所。接收装置8的配置场所也可以根据实施的方式而适当地选择，例如，接收装置8配置于床下。并且，适当地调节在无线通信装置7与接收装置8之间能够通信的距离，使得可通信区域相当于能够对监护对象者进行监护的范围。由此，响应接收装置8接收到从无线通信装置7发送的信息，信息处理装置1可在能监护监护对象者的行为的范围内检测出第三者的存在。

图19A中例示因第三者侵入无线通信装置7与接收装置8能够通信的区域(图中的“可通信区域”)而无线通信装置7变为能够与接收装置8通信的情形。在该情形下，于步骤S101中，控制部11(第三者检测部35)根据接收装置8从无线通信装置7接收到信息，可检测出第三者存在。为此，控制部11在步骤S102中判断为检测到第三者，并使处理前进至步骤S104。也就是说，控制部11使监护系统的报告模式为省略模式。由此，信息处理装置1停止执行用于通知检出监护对象者的行为的报告。

另一方面，图19B例示由于第三者离开可通信区域而变为无线通信装置7不能与接收装置8通信的情形。在该情形下，于步骤S101中，由于是接收装置8不能与无线通信装置7通信的状态，因此，控制部11(第三者检测部35)不能检测到第三者的存在。为此，控制部11在步骤S102中判断为未检测到第三者的存在，并使处理前进至步骤S103。也就是说，控制部11使监护系统的报告模式为执行模式。由此，信息处理装置1响应于检出监护对象者的行为，执行用于通知检出监护对象者的行为的报告。

在该示例中，即使是在第三者未拍入拍摄图像3内的情况下，信息处理装置1也有可能检出第三者的存在而停止执行行为检出的报告。因此，这样的情形下的报告停止无助于降低误报。但是，从对监护对象者进行监护的观点来看，如上所述，即使在这样的情形下停止报告，对监护对象者的监护带来障碍的可能性也极低。为此，在这样的情形下也可以停止报告。

在此，使用图20说明利用无线通信检测第三者时的监护系统的硬件构成。图20例示这种情况下的监护系统的硬件构成。需要注意的是，图20中省略了信息处理装置1的硬件构成。信息处理装置1的硬件构成可应用图2中例示的构成。

(无线通信装置)

无线通信装置7包括：限压电路71、整流电路72、解调电路73、调制电路74、控制电路75、存储电路76以及天线77。关于无线通信装置7的具体的硬件构成，可根据实施方式而适当地进行构成成分的省略、置换以及追加。

限压电路71为用于保护内部电路免受对天线77过大输入而造成的影响的电路。整流电路72将输入天线77的交流转换为直流并向内部的电路供给电源。解调电路73对输入天线77的交流信号进行解调并将解调的信号发送至控制电路75。另一方面，调制电路74对来自控制电路75的信号进行调制并经由天线77向接收装置8发送信息。

控制电路75为用于控制无线通信装置7的动作的电路，响应输入的信号进行各种运算处理。控制电路75既可以通过在抑制功耗的目的下所需最小限的逻辑电路而构建，也可以通过CPU(Central Processing Unit：中央处理器)这样的大规模电路而构建。

存储电路76为用于记录信息的电路。在该存储电路76的存储区域中也可以包含存储标签的固有ID并仅接受读出的区域。需要注意的是，作为存储电路76，例如可以使用EPROM(Electrically Programmable Read Only Memory：电可编程只读存储器)、EEPROM(Electrically Erasable and Programmable Read Only Memory：电可擦除可编程只读存储器)、FeRAM(Ferroelectric Random Access Memory：铁电随机存取存储器)以及SRAM(Static Random Access Memory：静态随机存取存储器)等。

此外，存储电路76中也可以写入有用于识别持有该无线通信装置7的第三者的识别信息。这种情况下，控制电路75适当地控制调制电路74并将该识别信息发送至接收装置8。这里，识别信息只要是能够识别第三者的信息即可，可以为任何内容。例如，识别信息的内容也可以为分配至第三者的代码。

需要注意的是，图20所例示的无线通信装置7为RFID(Radio FrequencyIdentification：无线射频识别)的RF标签中的无源标签。但是，无线通信装置7只要是能够通过无线通信发送信息的装置即可，可以使用RF标签以外的装置。例如，也可以将便携电话、智能手机等能够无线通信的用户终端用作无线通信装置7。并且，作为无线通信装置7，也可以不使用无源标签而使用有源标签。

进而，无线通信装置7的通信标准也可以根据实施方式而适当地选择。作为无线通信装置7的通信标准，例如可以使用Wi-Fi(注册商标)、Bluetooth(注册商标)、ZigBee(注册商标)、UWB(Ultra Wide Band：超宽带)等通信标准。不过，在如上述实施方式这样于医疗场所使用无线通信装置7的情况下，优选对起搏器等医疗器械没有影响的通信标准。

并且，第三者持有无线通信装置7的方式也可以根据实施的方式而适当地决定。如图19A及图19B中例示地，无线通信装置7(RF标签)例如也可以安装于佩戴于第三者的胸口附近的名牌中。这里，无线通信装置7基本上是被第三者平时所携带有。为此，优选无线通信装置7如RF标签这样为小型、轻量。由此，能够使第三者易于持有无线通信装置7，并能使第三者难以意识到持有无线通信装置7。

(接收装置)

接收装置8包括：振荡电路81、控制电路82、调制电路83、发送电路84、接收电路85、解调电路86以及天线87。关于接收装置8的具体的硬件构成，可根据实施方式而适当地进行构成成分的省略、置换以及追加。

振荡电路81生成用于与无线通信装置7通讯的载波。控制电路82经由外部接口15而与信息处理装置1相连接。控制电路82进行与信息处理装置1的通信控制、与无线通信装置7的通讯控制、接收装置8的动作控制等。

调制电路83将来自控制电路82的信号叠置于由振荡电路81生成的载波上来进行调制，并将其发送至发送电路84。然后，发送电路84将叠置于从调制电路83发送来的载波上的信号经由天线87发送至无线通信装置7。另一方面，接收电路85接收经由天线87进入的来自无线通信装置7的载波。然后，解调电路86对接收电路85接收到的叠置于载波上的信号进行解调，并将解调的信号发送至控制电路82。

需要注意的是，图20所例示的接收装置8为RFID中的读写器。但是，接收装置8只要能够接收从无线通信装置7无线发送来的信息即可，也可以为该读写器以外的装置。

(作用、效果)

信息处理装置1通过使用上述这样的无线通信装置7及接收装置8，从而能够根据有无无线通信而检测第三者的存在。也就是说，检测第三者存在的条件只不过是有无无线通信而已，因此，不依赖于图像识别等高度且复杂的信息处理即可检测第三者。

并且，在上述那样的基于图像解析的第三者检测中，如果第三者不拍入拍摄图像3则无法检测第三者。为此，从第三者拍入拍摄图像3至该第三者被检测有可能发生时滞。并且，在该时滞的期间，信息处理装置1可能根据第三者的举动而执行行为检测，导致误报告检出监护对象者的行为。

与此对比，根据该利用了无线通信的方法，能够在第三者拍入拍摄图像3之前检测到第三者。为此，能够防止从第三者拍入拍摄图像3至该第三者被检测发生时滞。由此，能够防止有可能在上述时滞期间发生的监护系统的误报。

(7)第三者的识别

需要注意的是，信息处理装置1也可以根据从无线通信装置7发送来的信息识别第三者，并且，仅在检测到的第三者为特定人物的情况下，使监护系统的报告模式为省略模式。也就是说，在步骤S101中，控制部11(第三者检测部35)也可以参照从无线通信装置7发送来的信息而判断进入可通信区域的第三者是否为规定的人物。用于该判断的信息只要是能够用于第三者的识别的信息即可，可以为任何的信息，例如，也可以为用于识别该第三者的识别信息、标签的固有ID等。

于是，控制部11也可以在判断进入可通信区域的第三者为规定的人物的情况下，使处理前进至步骤S104。也就是说，控制部11也可以使监护系统的报告模式为省略模式。另一方面，控制部11也可以在判断进入可通信区域的第三者不是规定的人物的情况下，使处理前进至步骤S103。也就是说，控制部11也可以使监护系统的报告模式为执行模式。由此，信息处理装置1能够仅在检测到的第三者为特定人物的情况下，省略执行用于通知检测到监护对象者的行为的报告。

根据该构成，仅在检测的第三者为特定人物的情况下，省略监护系统的报告的执行。为此，能够控制作为省略监护系统的报告执行的对象的人物。由此，能够防止在不注意监护对象者的行为的第三者进入了可通信区域的情况下省略监护系统的报告执行。

(8)停止报告执行的报告单元的选择

上述实施方式中，在能够监护监护对象者的范围内没有护士等进行监护的人员的情形下，若监护系统检出监护对象者的行为，则为了呼叫该进行监护的人员，使用护士呼叫系统4作为报告单元。为此，在能够监护监护对象者的范围内存在进行监护的人员的情形下，不需要这样的呼叫。因此，上述实施方式中，于能够监护监护对象者的范围内检出第三者的情况下，信息处理装置1省略监护系统的报告执行。

但是，存在于可监护范围内的第三者未必会注意到监护对象者。为此，为了使这样的第三者的注意转向监护对象者，信息处理装置1也可以在省略不存在第三者时所采用的通过报告单元执行报告的同时，开始其它报告单元的使用。

例如，控制部11也可以在省略模式下省略护士呼叫系统的主机40的呼叫的同时，进行子机41的呼叫。并且，控制部11也可以在省略模式下在触摸面板显示器13上进行用于吸引第三者的注意的画面显示。在用于吸引第三者注意的画面显示中例如也可以包含使画面闪烁等伴有视觉效果的画面显示。进而，控制部11也可以在省略模式下通过扬声器14进行用于吸引第三者注意的声音输出。用于吸引第三者注意的声音既可以为说出检测到的行为的名称的声音，也可以为“哔”声等警告声。由此，能够使存在于可监护范围内的第三者的注意转向监护对象者。

符号说明

1信息处理装置、2摄像机、3拍摄图像、4护士呼叫系统、5程序、6存储介质、8深度传感器、9加速度传感器、11控制部、12存储部、13触摸面板显示器、14扬声器、15外部接口、16通信接口、17驱动器、31图像取得部、32前景提取部、33行为检测部、34报告部、35第三者检测部、36履历创建部、37显示控制部。

Claims

1.一种信息处理装置，包括：

图像取得部，取得通过拍摄装置拍摄到的拍摄图像，所述拍摄装置是为了监护监护对象者的行为而设置的；

行为检测部，通过解析所取得的所述拍摄图像来检测所述监护对象者的行为；

第三者检测部，在能够监护所述监护对象者的行为的范围内检测所述监护对象者以外的第三者的存在；以及

报告部，在未检测到所述第三者存在的期间，响应于检出所述监护对象者的行为，进行用于通知检出所述监护对象者的行为的报告，并且，在检测到所述第三者存在的期间，省略用于通知检出所述监护对象者的行为的报告。

2.根据权利要求1所述的信息处理装置，还包括：

履历创建部，所述履历创建部创建由所述行为检测部检出的所述监护对象者的行为的履历。

3.根据权利要求2所述的信息处理装置，其中，

所述行为检测部不管所述第三者的存在的检测如何均对所述监护对象者的行为进行检测，

所述履历创建部不管所述第三者的存在的检测如何均创建由所述行为检测部检出的所述监护对象者的行为的履历。

4.根据权利要求1至3中任一项所述的信息处理装置，其中，

所述第三者检测部通过解析所取得的所述拍摄图像来检测所述第三者的存在。

5.根据权利要求1至4中任一项所述的信息处理装置，其中，

所述拍摄装置将作为所述监护对象者的行为基准的对象物与所述监护对象者一同进行拍摄，

所述图像取得部取得包含深度信息的拍摄图像，所述深度信息表示所述拍摄图像内的各像素的深度，

所述行为检测部根据由所述深度信息表示的所述拍摄图像内的各像素的深度，判断所述监护对象者与所述对象物在真实空间内的位置关系是否满足规定的条件，从而来检测所述监护对象者的与所述对象物相关联的行为。

6.根据权利要求5所述的信息处理装置，其中，

所述信息处理装置还包括前景提取部，所述前景提取部根据被设定作为所述拍摄图像的背景的背景图像与所述拍摄图像的差分而提取所述拍摄图像的前景区域，

所述行为检测部将根据所述前景区域内的各像素的深度而确定的拍到所述前景区域的对象在真实空间内的位置用作所述监护对象者的位置，并通过判断所述监护对象者与所述对象物在真实空间内的位置关系是否满足规定的条件来检测所述监护对象者的与所述对象物相关联的行为。

7.根据权利要求1至6中任一项所述的信息处理装置，其中，

所述信息处理装置与接收装置连接，所述接收装置用于接收从所述第三者所携带的无线通信装置发送的信息，

所述接收装置配置于能够与存在于能对所述监护对象者进行监护的范围内的第三者所携带的无线通信装置通信的场所，

所述第三者检测部响应于所述接收装置接收到从所述无线通信装置发送来的信息而检测到所述第三者的存在。

8.根据权利要求7所述的信息处理装置，其中，

所述第三者检测部通过参照从所述无线通信装置发送来的信息而判断所述第三者是否为规定的人物，

在检测到所述第三者存在的期间，当判断为所述第三者为规定的人物时，所述报告部省略用于通知检出所述监护对象者的行为的报告。

9.根据权利要求1至9中任一项所述的信息处理装置，其中，

所述信息处理装置与用于呼叫对所述监护对象者进行监护的人员的护士呼叫系统相连接，

所述报告部通过所述护士呼叫系统进行呼叫来作为用于通知检出所述监护对象者的行为的报告。

10.一种信息处理方法，其中，计算机执行以下步骤：

取得通过拍摄装置拍摄到的拍摄图像的步骤，所述拍摄装置是为了监护监护对象者的行为而设置的；

通过解析所取得的所述拍摄图像来检测所述监护对象者的行为的步骤；

在能够监护所述监护对象者的行为的范围内检测所述监护对象者以外的第三者的存在的步骤；

在未检测到所述第三者存在的情况下响应于检出所述监护对象者的行为而进行用于通知检出所述监护对象者的行为的报告的步骤；以及

在检测到所述第三者存在的情况下省略用于通知检出所述监护对象者的行为的报告的步骤。

11.一种程序，用于使计算机执行以下步骤：