CN111066318A - 监视支援装置和监视支援系统 - Google Patents

Abstract

本发明的监视支援装置具备再现部和历史存储部。再现部在由监视者选择出根据影像数据所表示的影像的相对于时间的变化量而判定出发生的期间的事件的情况下，根据识别事件的事件识别信息中的由监视者选择出的事件的事件识别信息，将与该事件识别信息关联起来存储且与发生该事件的期间对应的影像数据的部分发送到显示装置，其中，该显示装置对接收到的影像数据所表示的影像进行显示。历史存储部将监视支援数据与该事件的事件识别信息关联起来进行存储，其中，该监视支援数据包括表示再现部是否向显示装置发送了与发生事件的期间对应的影像数据的部分的信息。由此，监视支援装置不按照成为由监视者进行的确认作业的对象的单位的每个部分将影像数据细分化，而能够按照每个该部分来存储确认作业的实绩的信息。

Description

监视支援装置和监视支援系统

技术领域

本发明涉及监视支援装置和监视支援系统。

背景技术

专利文献1公开了监视支援系统的例子。监视支援系统具备监视支援装置。监视支援装置对影像数据所表示的影像中的物体的移动量进行计算。监视支援装置在计算出的移动量大于设定的值的情况下，提取影像数据的对应的部分。显示装置根据监视者的选择来显示提取出的影像数据的部分所表示的影像。监视者将显示于显示装置的影像作为对象，通过目视来进行确认作业。

现有技术文献

专利文献

专利文献1：日本特开2004-254141号公报

发明内容

发明要解决的问题

但是，专利文献1所公开的监视支援装置按照影像数据的文件单位来管理确认作业的实绩的信息。因此，为了按照作为监视者进行的确认作业的对象的单位的每个部分来存储确认作业的实绩的信息，需要按照每个该部分将影像数据作为文件而细分化。

本发明是为了解决上述问题而完成的。本发明的目的在于，提供一种监视支援装置及监视支援系统，不按照作为监视者进行的确认作业的对象的单位的每个部分将影像数据细分化，而能够按照每个该部分来存储确认作业的实绩的信息。

用于解决问题的手段

本发明的监视支援装置具备：再现部，其在由监视者选择出根据影像数据所表示的影像相对于时间的变化量而判定出发生的期间的事件的情况下，根据识别事件的事件识别信息中的由监视者选择出的事件的事件识别信息，将与该事件识别信息关联起来存储且与发生该事件的期间对应的影像数据的部分发送到显示装置，其中，该显示装置对接收到的影像数据所表示的影像进行显示；以及历史存储部，其将监视支援数据与该事件的事件识别信息关联起来而进行存储，其中，该监视支援数据包括表示再现部是否向显示装置发送了与发生事件的期间对应的影像数据的部分的信息。

本发明的监视支援系统具备：显示装置，其对接收到的影像数据所表示的影像进行显示；以及监视支援装置，其在由监视者选择出根据影像数据所表示的影像相对于时间的变化量而判定出发生的期间的事件的情况下，根据识别事件的事件识别信息中的由监视者选择出的事件的事件识别信息，将与该事件识别信息关联起来存储且与发生该事件的期间对应的影像数据的部分发送到显示装置，并且，将监视支援数据与该事件的事件识别信息关联起来而存储，该监视支援数据包括表示是否向显示装置发送了与发生事件的期间对应的影像数据的部分的信息。

发明的效果

根据这些发明，监视支援装置根据由监视者选择出的事件的事件识别信息，将与该事件识别信息关联起来存储且与发生该事件的期间对应的影像数据的部分发送到显示装置。监视支援装置将监视支援数据与该事件的事件识别信息关联起来而进行存储，该监视支援数据包括表示是否向显示装置发送了与发生事件的期间对应的影像数据的部分的信息。由此，监视支援装置不按照成为由监视者进行的确认作业的对象的单位的每个部分将影像数据细分化，而能够按照每个该部分来存储确认作业的实绩的信息。

附图说明

图1是示出具备本发明的实施方式1的监视支援系统的监视系统的整体结构的框图。

图2是示出本发明的实施方式1的监视支援装置的结构的框图。

图3是示出本发明的实施方式1的监视支援装置的主要部分的硬件结构的图。

图4是示出本发明的实施方式1的指定区域的设定画面的例子的图。

图5是示出本发明的实施方式1的事件类别数据的构造的图。

图6是示出本发明的实施方式1的事件数据的构造的图。

图7是示出本发明的实施方式1的监视支援装置对发生事件的期间进行判定的动作例的流程图。

图8是示出对本发明的实施方式1的事件的一览进行显示的画面的例子的图。

图9是示出本发明的实施方式1的监视支援数据的构造的图。

图10是示出生成本发明的实施方式1的监视支援装置的事件的一览的动作例的流程图。

图11是示出本发明的实施方式1的显示装置显示的发生事件的影像的画面的例子的图。

图12是示出本发明的实施方式1的再现历史数据的构造的图。

图13是示出本发明的实施方式1的监视支援装置的将发生事件的影像向显示装置发送的动作例的流程图。

图14是示出本发明的实施方式1的监视结果数据的构造的图。

图15是示出本发明的实施方式1的作为摘要影像数据而结合的期间的例子的图。

图16是示出本发明的实施方式1的监视支援装置的生成摘要影像数据的动作例的流程图。

图17是示出本发明的实施方式1的监视者数据的构造的图。

图18是示出本发明的实施方式1的显示装置显示的发生事件的影像的画面的另一例的图。

图19是示出本发明的实施方式1的监视支援装置的连续再现功能的动作例的流程图。

图20是示出本发明的实施方式1的变形例的监视支援装置的结构的框图。

图21是示出本发明的实施方式1的变形例的监视支援装置的结构的框图。

图22是示出本发明的实施方式1的变形例的监视支援装置的结构的框图。

具体实施方式

参照附图对本具体实施方式进行说明。在各图中，对相同或相当的部分标注相同的标号，适当简化或省略重复的说明。

实施方式1.

图1是示出具备本实施方式的监视支援系统的监视系统的整体结构的框图。

监视系统1是用于进行监视对象场所的监视的系统。

监视对象场所是成为远程进行监视的对象的场所。以下，以监视对象场所是电梯轿厢中的情况为例进行说明。

影像数据是将相对于时间而变化的监视对象场所的状况记录为影像的数据。以下，将影像数据设为对各个帧赋予了连续的编号的形式来进行说明，其中，该帧是表示隔开固定时间的间隔而拍摄到的图像的数据。另外，本实施方式不限定于影像数据的具体的数据形式。

对于影像数据，从原始的影像数据取出影像数据的部分。取出的影像数据的部分是与原始的影像数据不同的影像数据。

监视系统1具备多个摄影装置2、影像存储装置3以及监视支援系统4。

摄影装置2是拍摄监视对象场所的影像的装置。摄影装置2例如是网络摄像头。摄影装置2将拍摄到的影像作为影像数据，经由网络5进行发送。摄影装置2也可以在发送影像数据之前对影像数据进行编码。

影像存储装置3是将接收到的影像数据作为文件而存储的装置。影像存储装置3接收从各个摄影装置2发送的影像数据。影像存储装置3例如是NAS(Network AttachedStorage)。

监视支援系统4是用于支援监视对象场所的基于目视的确认作业的系统。

监视支援系统4具备监视支援装置6、监视终端7、显示装置8以及输入装置9。

监视支援装置6及监视终端7与网络5连接。显示装置8及输入装置9与监视终端7连接。

监视支援装置6是根据表示监视者的确认作业的实绩的信息的数据来支援监视对象场所的基于目视的确认作业的装置。

监视支援装置6接收从各个摄影装置2发送的影像数据。监视支援装置6对接收到的影像数据分别进行解析。监视支援装置6将解析出的结果作为确认用数据进行发送。

确认用数据包括表示发生事件的影像的影像数据。

事件是在影像数据表示的影像中发生的事象。事件例如是电梯轿厢的门开闭的事象、人相对于电梯轿厢出入的事象、或者搭乘于电梯轿厢的人进行不自然的动作的事象。

影像的变化量是以数值来表示影像变化的量。根据要计算变化量的影像数据与作为基准的影像数据之间的差分来计算变化量。

监视终端7发送从监视支援装置6接收到的确认用数据所包含的影像数据。监视终端7例如是个人计算机。

显示装置8是显示从监视终端7接收到的影像数据所表示的影像的装置。显示装置8例如是显示器。

输入装置9是向监视终端7发送由监视者进行的操作的输入的装置。输入装置9例如是键盘或鼠标。监视终端7将接收到的输入向监视支援装置6发送。监视支援装置6根据接收到的输入而动作。

接下来，对本实施方式的监视支援装置6的结构进行说明。图2是示出本实施方式的监视支援装置的结构的框图。网络5和监视终端7在本实施方式中主要负责装置之间的通信，因此，在以后的图中省略图示。

监视支援装置6具备判定部60、事件存储部61、再现部62、历史存储部63、历史管理部64、摘要影像处理部65以及摘要影像存储部66。

判定部60根据影像的相对于时间的变化量来判定发生事件的期间。

判定部60从摄影装置2或影像存储装置3接收影像数据。判定部60在从摄影装置2接收影像数据的情况下，取得在影像存储装置3中保存该影像数据的文件的路径。判定部60在从影像存储装置3接收影像数据的情况下，取得保存该影像数据的文件的路径。影像数据的文件的路径是具有影像数据的文件的场所的信息的例子。

判定部60对接收到的影像数据进行解析，计算影像数据所表示的影像的相对于时间的变化量。判定部60针对影像的预先设定的指定区域来计算变化量。

指定区域是对由监视者预先设定的影像的一部分进行指定的区域。

判定部60具有多个用于计算变化量的方法。多个变化量的计算方法对应于影像的多个特征的变化。

判定部60根据计算出的变化量来判定发生事件的期间。发生事件的期间是从该期间的开始时间点到结束时间点为止的期间。判定部60在判定出发生事件的期间的开始时间点之后，根据计算出的变化量来判定发生该事件的期间的结束时间点。

判定部60将计算出的变化量的值变成大于开始阈值的值的时间点判定为发生事件的期间的开始时间点。开始阈值是预先设定的值。

判定部60在判定出发生事件的期间的开始时间点之后，将计算出的变化量的值变成小于结束阈值的时间点判定为该期间的结束时间点。结束阈值是预先设定的值。结束阈值是开始阈值以下的值。

判定部60在判定出发生事件的期间的开始时间点之后，在计算出的变化量的值为结束阈值以上的情况下，判定为处于该期间内。

判定部60按照每个事件类别来进行发生事件的期间的判定。事件类别是根据在所发生的期间的判定中使用的变化量的计算方法、指定区域、开始阈值及结束阈值而对事件进行分类的类别。

判定部60将事件类别的信息作为事件类别数据来存储。判定部60将事件类别数据与事件类别编号关联起来而存储。事件类别编号是用于识别事件类别的信息。

判定部60具有将作为判定对象的事件类别的事件类别编号设为要素的事件类别列表。判定部60针对事件类别列表的全部事件类别，进行发生事件的期间的判定。

按照要素的下标编号而指定存放于事件类别列表的事件编号。关于以后的其他列表，也按照要素的下标编号而指定存放于列表的要素。

判定部60在判定出发生事件的期间的开始时间点的情况下，取得新的事件编号。事件编号是识别事件的事件识别信息的例子。

与发生事件的期间对应的影像数据的部分是表示发生事件的影像的影像数据。事件的开始帧编号是该影像数据的部分的最初的帧的编号。事件的结束帧编号是该影像数据的部分的最后的帧的编号。事件的开始帧编号及结束帧编号与表示发生该事件的影像的影像数据的文件所在的场所的信息的组，是确定与发生事件的期间对应的影像数据的部分的信息的例子。

判定部60在判定出发生事件的期间的结束时间点的情况下，发送事件数据。事件数据包括事件的事件编号、以及确定与发生该事件的期间对应的影像数据的部分的信息。

事件存储部61保存事件数据。事件存储部61将从判定部60接收到的事件数据与该事件数据的事件编号关联起来而存储。

即，事件存储部61将确定与发生事件的期间对应的影像数据的部分的信息跟该事件的事件编号关联起来而存储。

再现部62生成在由监视者选择出的选择期间的期间内发生的事件的一览。

再现部62从事件存储部61取得在选择期间的期间内发生的事件的事件编号。再现部62根据取得的事件编号，从事件存储部61取得事件数据。再现部62向显示装置8发送数据，该数据表示根据取得的事件数据而生成的事件的一览。显示装置8显示接收到的数据所表示的事件的一览。

再现部62在生成事件的一览时，针对取得的各个事件而生成监视支援数据。监视支援数据包括用于识别监视支援数据的监视支援编号。

再现部62在生成监视支援数据时，新取得监视支援编号。再现部62在生成监视支援数据之后，将事件编号以及与由通过该事件编号识别的事件对应的监视支援数据发送到历史存储部63。

历史存储部63将接收到的事件编号与监视支援数据关联起来而存储。

再现部62向显示装置8发送与由监视者选择出的事件对应的影像数据。

再现部62在由监视者选择出事件的情况下，从事件存储部61取得与由监视者选择出的事件编号关联起来而存储的事件数据。再现部62根据取得的事件数据，将与发生该事件的期间对应的影像数据的部分发送到显示装置8。

即，再现部62在由监视者选择出事件的情况下，根据选择出的事件的事件编号，将与该事件编号关联起来而存储且与发生该事件的期间对应的影像数据的部分发送到显示装置8。

再现部62在向显示装置8发送影像数据的部分时，生成影像数据，该影像数据表示在与该影像数据的部分所表示的影像的指定区域对应的位置处重叠了与该事件对应的监视辅助显示后的影像。再现部62将生成的数据发送到显示装置8。

监视辅助显示例如是在影像中的发生事件的位置处显示的标记图像。标记图像以与影像中的发生事件的位置处对应的坐标为基准，显示于预先设定的相对坐标的位置。

再现部62在向显示装置8发送与发生事件的期间对应的影像数据的部分所表示的影像时，生成该事件的再现历史数据。

再现历史数据包括用于识别再现历史数据的再现历史编号、以及再现部62将对应的影像数据的部分发送到显示装置8的时刻。再现部62在生成再现历史数据时，新取得再现历史编号。

再现部62在生成再现历史数据之后，将对应的事件的事件编号和该事件的再现历史数据发送到历史存储部63。

历史存储部63所存储的监视支援数据包括再现历史编号的列表。

历史存储部63保存再现历史数据。即，历史存储部63对接收到的再现历史数据进行存储。之后，历史存储部63向与接收到的事件编号关联起来而存储的监视支援数据的再现历史编号的列表追加所存储的再现历史数据的再现历史编号。

在再现部62未向显示装置8发送与发生事件的期间对应的影像数据的部分的情况下，与该事件对应的监视支援数据的再现历史编号的列表成为一个要素也不包括的空列表。再现历史编号的列表是表示再现部62是否向显示装置8发送了与发生事件的期间对应的影像数据的部分的信息的例子。

监视支援数据包括用于识别再现历史数据的信息即再现历史编号的列表。因此，监视支援数据包括表示再现部62是否向显示装置8发送了与发生事件的期间对应的影像数据的部分的信息。

即，历史存储部63将监视支援数据与该事件的事件编号关联起来而存储，该监视支援数据包括表示再现部62是否向显示装置8发送了与发生事件的期间对应的影像数据的部分的信息。

历史管理部64根据由监视者经由输入装置9进行的输入，来生成监视结果数据。

监视结果数据包括用于识别监视结果数据的监视结果编号。监视结果数据包括如下结果：该结果是，在由监视者进行了显示于显示装置8的发生该事件的影像的基于目视的确认作业之后，监视者对该事件中有无异常进行判断而得到的结果。监视结果数据包括影像保存码。

影像保存码表示监视者对与该事件对应的影像数据的部分是否需要保存进行判断而得到的结果。

历史管理部64在生成监视结果数据时，新取得监视结果编号。历史管理部64在生成监视结果数据之后，将对应的事件的事件编号和该事件的监视结果数据发送到历史存储部63。

历史存储部63所存储的监视支援数据包括监视结果编号的列表。

历史存储部63保存监视结果数据。即，历史存储部63对接收到的监视结果数据进行存储。历史存储部63向与接收到的事件编号关联起来而存储的监视支援数据的监视结果编号的列表追加所存储的监视结果数据的监视结果编号。

在未输入发生事件的影像的基于目视的确认作业的结果的情况下，与该事件对应的监视支援数据的监视结果编号的列表成为空列表。监视结果编号的列表是由监视者对事件进行的基于目视的确认作业的结果的信息的例子。监视支援数据包括用于识别监视结果数据的信息，即监视结果编号的列表。

摘要影像处理部65生成摘要影像数据。

摘要影像处理部65从事件存储部61取得由监视者选择出的在选择期间的期间内发生的事件的事件编号。摘要影像处理部65根据取得的各个事件编号，从事件存储部61取得事件数据。摘要影像处理部65根据取得的各个事件编号，从历史存储部63取得监视支援数据。

摘要影像处理部65根据取得的监视支援数据各自的影像保存码，来判定所取得的事件编号分别对应的影像数据的部分是否需要保存。摘要影像处理部65生成用于存放与判定为需要保存的影像数据的部分对应的事件编号的事件列表。

基于选择期间和影像保存码的事件列表的生成是由监视者进行的一个或多个事件的选择的例子。

摘要影像处理部65针对分别识别为事件列表的要素的各个事件，使表示发生该事件的影像的影像数据的部分作为摘要影像数据而结合。摘要影像处理部65在发生该各个事件的期间中存在重复的期间的情况下，不使与该重复的期间对应的影像数据的部分重复地作为摘要影像数据而结合。摘要影像处理部65不结合与未发生事件的期间对应的影像数据的部分。

摘要影像处理部65根据对应于不与摘要影像数据结合的期间的帧的数量，来校正原始的影像数据中的事件的开始帧编号及结束帧编号。摘要影像处理部65通过该校正，来计算摘要影像数据中的该事件的开始帧编号及结束帧编号。摘要影像数据中的事件的开始帧编号及结束帧编号是确定与发生事件的期间对应的该摘要影像数据的部分的信息的例子。

摘要影像处理部65生成存档数据。存档数据包括摘要影像数据、以及该摘要影像数据中的事件的开始帧编号及结束帧编号。存档数据包括事件列表、以及与存放于该列表的事件编号关联起来而存储于历史存储部63的监视支援数据。摘要影像处理部65发送存档数据。

摘要影像存储部66保存存档数据。即，摘要影像存储部66对从摘要影像处理部65接收到的存档数据进行存储。之后，摘要影像存储部66将事件编号与存储的存档数据的摘要影像数据关联起来。之后，摘要影像存储部66将确定与发生事件的期间对应的该摘要影像数据的部分的信息跟所存储的存档数据的摘要影像数据关联起来。之后，摘要影像存储部66将监视支援数据与所存储的存档数据的摘要影像数据关联起来。

摘要影像数据所表示的影像的开始时间点至结束时间点包含在选择期间内。摘要影像处理部65从影像存储装置3删除影像数据的与选择期间对应的部分。

监视支援装置6将监视者的信息作为监视者数据而存储。监视支援装置6通过从监视者发送的监视者编号，来识别经由监视终端7进行确认作业的监视者。

监视者编号是用于识别通过目视进行确认作业的监视者的信息。例如在为了进行监视支援装置6的操作而开始与监视终端7的连接时，从监视者发送监视者编号。会话(session)是监视支援装置6与监视终端7持续连接的期间。监视支援装置6存储监视者编号，直至会话结束。

接下来，对本实施方式的监视支援装置的例子进行说明。图3是示出本实施方式的监视支援装置的主要部分的硬件结构的图。

监视支援装置6的各功能能够通过处理电路来实现。处理电路具备至少1个处理器6b和至少1个存储器6c。处理电路也可以与处理器6b及存储器6c一起或者代替他们而具备至少1个专用的硬件6a。

在处理电路具备处理器6b和存储器6c的情况下，监视支援装置6的各功能通过软件、固件、或软件与固件的组合来实现。软件及固件中的至少一方被记述为程序。该程序存放在存储器6c中。处理器6b通过读出并执行存储于存储器6c的程序，来实现监视支援装置6的各功能。

处理器6b也称为CPU(Central Processing Unit)、中央处理装置、处理装置、运算装置、微处理器、微型计算机、DSP。存储器6c例如由RAM、ROM、闪速存储器、EPROM、EEPROM等非易失性或易失性的半导体存储器、磁盘、软盘、光盘、高密度盘、迷你盘、DVD等构成。

在处理电路具备专用的硬件6a的情况下，处理电路例如通过单一电路、复合电路、程序化的处理器、并行程序化的处理器、ASIC、FPGA或者它们的组合来实现。

监视支援装置6的各功能能够分别通过处理电路来实现。或者，监视支援装置6的各功能也能够统一通过处理电路来实现。关于监视支援装置6的各功能，也可以通过专用的硬件6a来实现一部分，通过软件或固件来实现另一部分。这样，处理电路通过硬件6a、软件、固件或它们的组合来实现监视支援装置6的各功能。

接下来，针对根据影像的相对于时间的变化量来判定发生事件的期间的功能进行说明。根据影像的预先设定的指定区域来计算变化量。图4是示出本实施方式的指定区域的设定画面的例子的图。

指定区域的设定画面显示于显示装置8，并由监视者经由输入装置9操作。指定区域的设定画面显示背景图像80和框81。

背景图像80是未发生事件的监视对象场所的图像。背景图像80例如是不存在乘客的电梯轿厢中的图像。背景图像80是作为基准的影像数据的例子。

指定区域是与背景图像80重叠显示的框81的内部。框81能够通过操作锚节点81a来进行移动、放大及缩小。锚节点81a由监视者经由输入装置9来操作。背景图像80及指定区域预先由监视者设定。

判定部60根据由监视者进行的操作的输入来切换影像数据的接收源。判定部60例如在通常的情况下，从摄影装置2接收影像数据。判定部60例如在根据过去的影像数据再次判定发生事件的期间的情况下，从影像存储装置3接收影像数据。

判定部60在影像数据被进行了编码的情况下，在计算变化量之前进行影像数据的解码。

判定部60在从摄影装置2接收影像数据的情况下，针对从多个摄影装置2分别发送的各个影像数据来进行发生事件的期间的判定。利用影像编号来识别发送影像数据的各个摄影装置2。

判定部60将影像数据的帧依次读入到作业区域。作业区域例如是存储器6c。

判定部60在从摄影装置2接收影像数据的情况下，在开始了判定发生事件的期间的动作时，将摄影装置2拍摄到的帧读入到作业区域。判定部60在从影像存储装置3接收影像数据的情况下，将影像数据的最初的帧至最后的帧读入到作业区域。

判定部60针对读入的帧分别计算变化量。

判定部60在读入到作业区域的帧与背景图像80中，计算各像素的亮度信息的差分。判定部60针对与指定区域对应的像素，对计算出的亮度信息的差分的绝对值的平均值进行计算。判定部60将计算出的平均值设为该帧的变化量。

判定部60在计算变化量时，对变化位置的坐标进行计算。判定部60针对与指定区域对应的像素，将与背景图像80之间的亮度信息的差分的绝对值作为权重来计算坐标的加权平均。判定部60将计算出的坐标的加权平均作为该帧的变化位置的坐标。变化位置的坐标是与影像中的发生事件的位置对应的坐标的例子。

接下来，对发生事件的期间的判定方法进行说明。图5是示出本实施方式的事件类别数据的构造的图。

在图5中，在各项目下列举出的要素是数据的形式的例子。圆括号表示要素的固定长度的组。方括号表示列表或要素的可变长度的组。

事件类别数据70包括事件类别编号、变化量计算方法编号、开始阈值、结束阈值以及指定区域。

变化量计算方法编号对判定部60计算帧的变化量的方法进行识别。

判定部60将帧的变化量变成大于开始阈值的时间点判定为发生事件的期间的开始时间点。发生事件的期间的开始时间点的帧的变化量大于开始阈值。发生事件的期间的开始时间点的帧的紧前的帧的变化量为开始阈值以下。

判定部60将帧的变化量变成小于开始阈值的时间点判定为发生事件的期间的开始时间点。发生事件的期间的结束时间点的帧的变化量小于结束阈值。发生事件的期间的结束时间点的帧的紧前面的帧的变化量为结束阈值以上。

判定部60根据事件类别数据70来进行发生事件的期间的判定。

判定部60使用通过事件类别数据70所包含的变化量计算方法编号识别的变化量计算方法，来计算帧的变化量。

事件类别数据70还包括监视类别编号、标记的相对坐标以及标记图像数据。

监视类别编号是根据监视者应注意怎样的影像变化进行监视来对确认作业进行分类的编号。监视类别编号与事件类别编号关联起来，使得监视者能够根据事件类别来关注应给予注意的影像的特征。监视类别编号包括是否需要基于目视的确认作业的信息。

标记图像数据是表示发生与事件的影像重叠显示的标记图像的数据。

标记的相对坐标是指定与发生事件的影像重叠显示的标记图像的位置的数据。标记的相对坐标是以变化位置的坐标为基准的相对坐标。

接下来，对事件数据进行说明。图6是示出本实施方式的事件数据的构造的图。事件数据71包括事件编号、事件发生时刻、事件类别编号、影像编号、影像数据的文件的路径、以及发生事件的期间的开始帧编号及结束帧编号。事件数据71包括开始帧至结束帧的变化量的列表及变化位置的坐标的列表。

事件发生时刻是与发生事件的期间的开始时间点对应的帧所表示的影像的时刻。

如以下那样生成事件数据71。

判定部60在判定出发生事件的期间的开始时间点时，新生成事件数据71。判定部60新取得事件编号。之后，判定部60取得当前的帧的编号作为开始帧编号。之后，判定部60取得当前的帧所表示的影像的时刻作为事件发生时刻。之后，判定部60将变化量的列表和变化位置的坐标的列表分别生成为空的列表。之后，判定部60向变化量的列表追加当前的帧的变化量。之后，判定部60向变化位置的坐标的列表追加当前的帧的变化位置的坐标的列表。

判定部60在判定为处于发生事件的期间内时，向事件数据71追记。判定部60将当前的帧的变化量追加到变化量的列表。之后，判定部60将当前的帧的变化位置的坐标追加到变化位置的坐标的列表。

判定部60在判定出发生事件的期间的结束时间点时，向事件数据71追记并保存。判定部60取得当前的帧的编号作为结束帧编号。之后，判定部60将当前的帧的变化量追加到变化量的列表。之后，判定部60将当前的帧的变化位置的坐标追加到变化位置的坐标的列表。之后，判定部60组合以上取得或制作的信息、判定出发生的期间的事件的事件类别编号、进行了判定的影像的影像编号、以及影像数据的文件的路径来生成事件数据。

判定部60在生成事件数据71之后，向事件存储部61发送事件数据71。事件存储部61对接收到的事件数据71进行保存。

接下来，对判定发生事件的期间的动作进行说明。图7是示出本实施方式的监视支援装置的对发生事件的期间进行判定的动作例的流程图。监视支援装置6对从多个摄影装置2分别发送的各个影像数据进行图7所示的动作。

判定部60将帧从接收到的影像数据读入到一个作业区域。之后，判定部60将当前的下标编号设定为与事件类别列表的开头的要素对应的下标编号(S101)。

判定部60从事件类别列表取得一个当前的下标编号所指定的事件类别编号。之后，判定部60根据取得的事件类别编号，读入事件类别数据70。之后，判定部60根据事件类别数据70的变化量计算方法编号和指定区域，对读入到作业区域的帧的变化量及变化位置的坐标进行计算(S102)。

判定部60判定紧前的帧的变化量是否为开始阈值以下(S103)。在判定结果为“是”时，监视支援装置6的动作进入S104。在判定结果为“否”时，监视支援装置6的动作进入S105。

判定部60判定当前的帧的变化量是否大于开始阈值(S104)。在判定结果为“是”时，监视支援装置6的动作进入S106。在判定结果为“否”时，监视支援装置6的动作进入S109。

判定部60判定当前的帧的变化量是否小于结束阈值(S105)。在判定结果为“否”时，监视支援装置6的动作进入S107。在判定结果为“是”时，监视支援装置6的动作进入S108。

判定部60将当前的帧判定为是发生事件的期间的开始时间点。判定部60新生成事件数据71(S106)。

判定部60将当前的帧判定为处于发生事件的期间内。判定部60向事件数据71追记(S107)。

判定部60将当前的帧判定为是发生事件的期间的结束时间点。判定部60向事件数据71追记。之后，事件存储部61对事件数据71进行保存(S108)。

判定部60判定当前的下标编号是否为事件类别列表的末尾的下标编号(S109)。在判定结果为“否”时，将当前的下标编号设为下一个下标编号。之后，监视支援装置6的动作进入S102。在判定结果为“是”时，判定部60将当前的帧设定为下一个帧。之后，监视支援装置6的动作进入S101。

接下来，对生成事件的一览的功能进行说明。图8是示出显示本实施方式的事件的一览的画面的例子的图。图8所示的画面的例子例如在会话开始时显示于显示装置8。

在显示事件的一览的画面中，显示开始时刻输入栏82a、结束时刻输入栏82b、一览显示按钮83、显示区域84、摘要影像生成按钮85、以及连续再现按钮86。

通过由监视者向开始时刻输入栏82a及结束时刻输入栏82b输入开始时刻及结束时刻来设定选择期间。

在选择期间的期间内发生的事件例如是如下事件，与发生该事件的期间的开始时间点对应的时刻为选择期间的开始时刻以后，且与发生该事件的期间的结束时间点对应的时刻为选择期间的结束时刻以前。

生成事件的一览的功能的动作在由监视者按下一览显示按钮83的情况下开始。在生成了事件的一览的情况下，显示装置8显示在显示区域84中生成的事件的一览。

显示区域84显示在选择期间的期间内发生的事件的一览。会话开始时的显示区域84也可以为空栏。显示区域84显示与事件编号关联起来而存储的信息。显示区域84例如显示监视支援编号、事件编号、事件发生时刻、事件类别编号、影像编号、再现历史编号以及监视结果编号。显示区域84显示再现按钮84a和监视结果输入按钮84b。

向显示装置发送事件所发生的影像的功能的动作例如在由监视者按下与该事件对应的再现按钮84a的情况下开始。

输入监视结果的功能的动作例如在由监视者按下与该事件对应的监视结果输入按钮84b的情况下开始。

生成摘要影像数据的功能的动作例如在由监视者按下摘要影像生成按钮85的情况下开始。

监视支援装置6也可以具有针对多个事件将发生该各个事件的影像连续地发送到显示装置8的功能。连续地发送到显示装置8的功能的动作例如在由监视者按下连续再现按钮86的情况下开始。

接下来，对监视支援数据进行说明。图9是示出本实施方式的监视支援数据的构造的图。

监视支援数据72包括监视支援编号、事件编号、监视类别编号、再现历史编号的列表、监视结果编号的列表、以及针对影像数据的链接信息。

历史存储部63保存监视支援数据。即，历史存储部63将监视支援编号与事件编号相互关联起来而存储。

针对影像数据的链接信息是针对与监视支援数据关联起来的事件来确定与发生该事件的期间对应的影像数据的部分的信息。针对影像数据的链接信息例如是该事件的开始帧编号及结束帧编号与对应的影像数据的路径的组。

再现部62如以下那样生成监视支援数据。

再现部62从事件存储部61取得在选择期间内发生的事件的事件编号、以及与该事件编号分别关联起来的各个事件数据71。再现部62生成将取得的事件编号作为要素而存放的事件列表。

再现部62根据取得的事件数据71的事件类别编号，取得事件类别数据70。再现部62取得所取得的事件类别数据70所包含的监视类别编号。再现部62根据取得的监视类别编号，判定是否需要基于目视的确认作业。

再现部62在判定为需要基于目视的确认作业的情况下，判定是否已经生成对应的监视支援数据。再现部62在判定为未生成对应的监视支援数据的情况下，开始监视支援数据的生成。

再现部62在开始了监视支援数据的生成时，新取得监视支援编号。之后，再现部62将再现历史编号的列表生成为空的列表。之后，再现部62将监视结果编号的列表生成为空的列表。再现部62根据取得的事件数据71，生成针对影像数据的链接信息。

再现部62将以上取得或生成的信息组合而生成监视支援数据72。再现部62在生成监视支援数据之后，将生成的监视支援数据与对应的事件编号发送到历史存储部63。

接下来，对生成事件的一览的动作进行说明。图10是示出本实施方式的监视支援装置的生成事件的一览的动作例的流程图。

监视者向开始时刻输入栏82a及结束时刻输入栏82b输入选择期间。之后，监视者按下一览显示按钮83。之后，监视支援装置6开始进行生成事件的一览的动作。

再现部62生成在选择期间内发生的全部事件的事件列表。之后，再现部62将当前的下标编号设定为与事件列表的开头的要素对应的下标编号(S201)。

再现部62从事件列表取得一个由当前的下标编号所指定的事件编号。再现部62根据取得的事件编号，从事件存储部61取得事件数据71(S202)。

再现部62根据取得的事件数据71，判定是否需要基于目视的确认作业(S203)。在判定结果为“是”时，监视支援装置6的动作进入S204。在判定结果为“否”时，监视支援装置6的动作进入S206。

再现部62判定是否已经生成与当前的事件编号对应的监视支援数据(S204)。在判定结果为“否”时，监视支援装置6的动作进入S205。在判定结果为“是”时，监视支援装置6的动作进入S206。

再现部62生成监视支援数据。之后，再现部62发送当前的事件编号和生成的监视支援数据。之后，历史存储部63对接收到的监视支援数据进行保存(S205)。

再现部62判定当前的下标编号是否为事件列表的末尾的下标编号(S206)。在判定结果为“否”时，将当前的下标编号设为下一个下标编号。之后，监视支援装置6的动作进入S202。在判定结果为“是”时，监视支援装置6的动作进入S207。

再现部62将表示事件的一览的数据发送到显示装置8。之后，显示装置8在显示区域84显示事件的一览(S207)。

接下来，对将发生事件的影像发送到显示装置的功能进行说明。图11是示出本实施方式的显示装置显示的发生事件的影像的画面的例子的图。图11所示的画面的例子在由监视者按下再现按钮84a时显示于显示装置8。

影像显示画面显示监视图像87、标记图像88以及框89。

监视图像87是记录有监视对象场所的状况的影像数据的各个帧所表示的图像。监视图像87例如是乘客乘坐的电梯轿厢中的图像等。

以变化位置的坐标为基准，在预先设定的相对坐标的位置处与监视图像重叠显示标记图像88。标记图像88是监视辅助显示的例子。

再现部62根据监视者从显示于显示区域84的事件的一览中选择出的事件的事件编号，从事件存储部61取得该事件的事件数据71。

再现部62根据取得的事件数据的事件类别编号，取得判定部60存储的事件类别数据70。

再现部62根据监视者从生成的一览中选择出的事件的事件编号，从历史存储部63取得该事件的监视支援数据72。

再现部62根据取得的事件数据71，依次读入与发生选择出的事件的期间对应的影像数据的部分的开始帧至结束帧。

再现部62根据取得的事件数据71，将与读入的帧对应的变化位置的坐标作为显示标记图像的位置的基准。再现部62根据取得的事件类别数据70所包含的标记的相对坐标，对显示标记图像的位置进行计算。例如在标记的相对坐标为(0，0)的情况下，将标记图像显示于变化位置的坐标。

框89显示于选择出的事件所对应的事件类别的指定区域的边界。框89是监视辅助显示的另一例。

再现部62根据取得的监视支援数据来改变监视辅助显示的方式。

监视辅助显示的方式例如是监视辅助显示的颜色、透明度、大小或线种类。

再现部62例如在选择出的事件的监视支援数据的再现历史编号的列表为空的情况下，将框89的颜色变为红色。再现部62例如在选择出的事件的监视支援数据的再现历史编号的列表不为空的情况下，将框89的颜色变为蓝色。

接下来，对再现历史数据进行说明。图12是示出本实施方式的再现历史数据的构造的图。

再现历史数据73包括再现历史编号、监视者编号、事件编号、再现开始时刻、再现开始帧以及再现结束帧。

监视者编号是与通过目视进行确认作业的监视者对应的监视者编号。

再现开始时刻是选择出监视者进行确认作业的事件的时刻。

再现开始帧的编号是再现部62发送到显示装置8的最初的帧的编号。再现结束帧的编号是再现部62发送到显示装置8的最后的帧的编号。

再现历史数据73如以下那样生成。

再现部62在向显示装置8发送与发生选择出的事件的期间对应的影像数据的部分的开始帧时，新取得再现历史编号。之后，再现部62取得再现开始帧的编号。之后，再现部62取得当前的时刻作为再现开始时刻。之后，再现部62取得在当前的会话中登录的监视者的监视者编号。

再现部62在向显示装置8发送该影像数据的部分的结束帧时，取得再现结束帧的编号。

再现部62将以上取得的信息与事件编号组合而生成再现历史数据73。

再现部62在生成再现历史数据73之后，将事件编号和生成的再现历史数据73发送到历史存储部63。

接下来，对向显示装置发送发生事件的影像的动作进行说明。图13是示出本实施方式的监视支援装置的向显示装置发送发生事件的影像的动作例的流程图。

监视者通过按下再现按钮84a来选择对应的事件。在按下了再现按钮84a的情况下，监视支援装置6开始进行向显示装置8发送发生选择出的事件的影像的功能的动作。

再现部62根据选择出的事件的事件编号，取得事件数据及监视支援数据。再现部62将当前的帧设定为开始帧(S301)。

再现部62根据取得的监视支援数据72，设定监视辅助显示的方式(S302)。

再现部62将当前的帧读入到作业区域(S303)。

再现部62与读入到作业区域的帧所表示的图像重叠地写入设定了显示的监视辅助显示(S304)。

再现部62将存放于作业区域的数据发送到显示装置8(S305)。

再现部62判定当前的帧的编号是否为结束帧编号(S306)。在判定结果为“否”时，再现部62将当前的帧设定为下一个帧。之后，监视支援装置6的动作进入S303。在判定结果为“是”时，再现部62取得再现结束帧的编号。之后，监视支援装置6的动作进入S307。

再现部62生成再现历史数据73。之后，再现部62将再现历史数据73和事件编号发送到历史存储部63。之后，历史存储部63对再现历史数据进行保存(S307)。

接下来，对输入基于目视的确认作业的结果的功能进行说明。

历史管理部64根据由监视者进行的确认作业的结果的输入，生成监视结果数据。图14是示出本实施方式的监视结果数据的构造的图。

监视结果数据74包括监视结果编号、事件编号、监视者编号、监视支援编号、再现历史编号的列表、确认日期时间、监视结果码、影像保存码、以及特别记载事项。

确认日期时间是由监视者输入了确认作业的结果的时刻。

监视结果码是表示如下的信息的例子，该信息表示在由监视者进行显示于显示装置8的发生该事件的影像的基于目视的确认作业之后，由监视者针对该事件中有无异常进行判断而得到的结果的信息。在由监视者判断为目视确认作业的结果没有异常的情况下，监视结果编号被输入0。

影像保存码表示：监视者针对是否需要将与该事件对应的影像数据的部分作为摘要影像数据结合并保存这一情况进行判断而得到的结果。在由监视者判断为不需要保存目视确认作业的结果影像数据的该部分的情况下，影像保存码被输入0。

特别记载事项例如是监视者的判断依据等、将针对监视结果的说明作为字符串数据而输入的自由记述项目。

接下来，对输入基于目视的确认作业的结果的功能的动作进行说明。

监视者通过按下监视结果输入按钮84b来选择对应的事件。在按下监视结果输入按钮84b的情况下，监视支援装置6开始进行输入针对选择出的事件的确认作业的监视结果的功能的动作。

监视支援装置6向监视者请求监视结果的输入。监视结果的输入的请求例如以对话的形式进行。监视支援装置6按照监视结果码、影像保存码、特别记载事项的顺序逐一地向监视者请求输入。

在针对选择出的事件的监视结果的输入结束的情况下，历史管理部64生成监视结果数据74。

如以下那样生成监视结果数据74。历史管理部64在生成监视结果数据74时，新取得监视结果编号。历史管理部64根据选择出的事件的事件编号，从历史存储部63取得监视支援数据72。历史管理部64取得所取得的监视支援数据72所包含的监视支援编号。

历史管理部64取得在当前的会话中登录的监视者的监视者编号。历史管理部64取得在当前的会话中生成的再现历史中的、选择出的事件共通的再现历史的再现历史编号。

历史管理部64取得当前的时刻作为确认日期时间。

历史管理部64根据监视者的输入，取得监视结果码、影像保存码以及特别记载事项。

历史管理部64将以上取得的信息组合，生成监视结果数据74。

历史管理部64在生成监视结果数据74之后，将选择出的事件编号和生成的监视结果数据发送到历史存储部63。

接下来，对生成摘要影像数据的功能进行说明。

图15是示出作为本实施方式的摘要影像数据而结合的期间的例子的图。在图15中，横轴表示时间。

摘要影像处理部65从事件存储部61取得在选择期间内发生的事件的事件编号、以及与该事件编号分别关联起来的各个事件数据71。摘要影像处理部65生成将取得的事件编号作为要素而存放的事件列表。

摘要影像处理部65从历史存储部63取得与存放于事件列表的事件编号分别关联起来而存储的各个监视支援数据72。摘要影像处理部65根据在取得的监视支援数据72的监视结果编号的列表中存放的监视结果编号，从历史存储部63取得监视结果数据74。摘要影像处理部65根据取得的监视结果数据74的影像保存码，判定是否需要将与该事件对应的影像数据作为摘要影像数据结合并保存。

摘要影像处理部65将判定为需要作为摘要影像数据结合并保存的事件设为需要保存的事件。摘要影像处理部65将判定为不需要作为摘要影像数据结合并保存的事件设为无需保存的事件。摘要影像处理部65从事件列表中去除与无需保存的事件对应的事件编号。存放于事件列表的事件编号所表示的事件是由监视者选择出的一个或多个事件的例子。

在图15中，在两端具有圆的线段表示各个发生事件的期间。线段的左端示出发生该事件的期间的开始时间点。线段的右端示出发生该事件的期间的结束时间点。在两端具有圆的实线的线段表示需要保存的事件90。在两端具有圆的虚线的线段表示无需保存的事件91。

摘要影像处理部65针对原始的影像数据，依次读入从与选择期间的开始时间点对应的帧编号到与结束时间点对应的帧编号。摘要影像处理部65判定与读入的帧编号对应的时间点是否在发生需要保存的事件90的任意一个事件的期间内。摘要影像处理部65在判定为与读入的帧编号对应的时间点处于该期间内的情况下，将该帧编号指定的帧作为摘要影像数据而结合。

由此，摘要影像处理部65在发生各个需要保存的事件90的期间中存在重复的期间的情况下，使与该重复的期间对应的影像数据的部分不重复地作为摘要影像数据而结合。摘要影像处理部65不使与一个需要保存的事件90也未发生的期间对应的影像数据的部分作为摘要影像数据而结合。

在图15中，在两端具有菱形的线段表示与摘要影像处理部65生成的摘要影像数据对应的保存期间92。保存期间92是包括选择出的一个或多个发生事件的期间在内的期间。保存期间92也可以不是一个连续的期间。

摘要影像处理部65在从原始的影像数据结合与不连续的保存期间92对应的影像数据的情况下，对帧编号进行校正，使得摘要影像数据中的帧编号连续。摘要影像处理部65通过将不包含在保存期间92内的帧的数量从比该帧靠后的帧的帧编号减去来进行校正。摘要影像处理部65针对取得的事件数据71及再现历史数据73所包含的帧编号的数据，也同样地进行帧编号的校正。进行分配后的帧编号是摘要影像数据中的帧编号。

摘要影像处理部65从影像存储装置3删除与如下期间对应的原始的影像数据的部分，该期间包括从需要保存的事件90的开始时间点中的最早的时间点到需要保存的事件90的结束时间点中的最晚的时间点为止。

在图15中，在两端具有三角形的线段表示作为摘要影像处理部65的删除对象的删除期间93。摘要影像处理部65也可以从影像存储装置3删除与包含删除期间93的选择期间整体对应的原始的影像数据的部分。

摘要影像处理部65按照影像编号不同的每个摄影装置2来生成摘要影像数据。

接下来，对生成摘要影像数据的动作进行说明。图16是示出生成本实施方式的监视支援装置的摘要影像数据的动作例的流程图。监视支援装置6针对从多个摄影装置2分别发送的各个影像数据进行图16所示的动作。

监视支援装置6在由监视者按下摘要影像生成按钮85的情况下，开始生成摘要影像数据的功能。

摘要影像处理部65生成对需要保存的事件90的事件编号进行存放的事件列表。之后，摘要影像处理部65将当前的帧编号设定为与选择期间的开始时间点对应的帧编号。之后，摘要影像处理部65将输出用的作业区域设为空(S401)。

摘要影像处理部65将当前的下标编号设定为事件列表的开头的下标编号(S402)。

摘要影像处理部65从与由当前的下标编号指定的事件编号关联起来的事件数据71取得开始帧编号和结束帧编号。之后，摘要影像处理部65进行帧编号的校正(S403)。

摘要影像处理部65判定当前的帧编号是否处于由取得的开始帧编号和结束帧编号指定的期间内(S404)。在判定结果为“是”时，监视支援装置6的动作进入S405。在判定结果为“否”时，监视支援装置6的动作进入S406。

摘要影像处理部65读入当前的帧，与校正后的帧编号一起追加写入到输出用的作业区域(S405)。

摘要影像处理部65判定当前的下标编号是否为事件列表的末尾的下标编号(S406)。在判定结果为“否”时，将当前的下标编号设为下一个下标编号。之后，监视支援装置6的动作进入S403。在判定结果为“是”时，监视支援装置6的动作进入S407。

摘要影像处理部65更新不包含在保存期间92内的帧的数量(S407)。

摘要影像处理部65判定当前的帧编号是否为与选择期间的结束时间点对应的帧编号(S408)。在判定结果为“否”时，将当前的帧编号设定为下一个帧编号。之后，监视支援装置6的动作进入S402。在判定结果为“是”时，监视支援装置6的动作进入S409。

摘要影像处理部65将存储在输出用的作业区域中的帧的内容作为摘要影像数据而结合。之后，摘要影像处理部65生成存档数据。之后，摘要影像处理部65发送生成的存档数据。之后，摘要影像存储部66保存接收到的存档数据。之后，摘要影像处理部65从影像存储装置3删除与删除期间对应的影像数据的部分(S409)。

接下来，对监视者数据进行说明。图17是示出本实施方式的监视者数据的构造的图。监视支援装置6存储监视者数据75。监视者数据包括监视者编号和监视者名。监视者数据75也可以包括监视者的所属、职务或监视的经验等与监视者的属性相关的信息。

如以上说明的那样，监视支援系统4如下那样对监视者的确认作业进行支援。再现部62根据由监视者选择出的事件编号，将与发生该事件的期间对应的影像数据的部分发送到显示装置8。显示装置8显示接收到的影像数据所表示的影像。监视者将显示于显示装置8的该影像作为对象，通过目视进行确认作业。历史存储部63将监视支援数据72与事件编号关联起来而存储。监视支援数据72包括再现历史数据73，该再现历史数据73是表示再现部62是否向显示装置8发送了该影像数据的部分的信息。即，监视支援装置6将与发生事件的期间对应的影像数据的部分作为成为由监视者进行的确认作业的对象的单位的部分，不按照每个该部分对影像数据进行细分化，而能够按照每个该部分来存储确认作业的实绩的信息。

判定部60根据影像的相对于时间的变化量，判定发生事件的期间。监视支援装置6提取表示发生事件的影像的影像数据。由此，监视者能够仅将提取出的发生事件的影像作为对象来进行确认作业。因此，监视者的基于目视的确认作业的负担降低。

历史存储部63将包括监视结果数据74的监视支援数据72与事件编号关联起来而存储。历史存储部63不按照与发生事件的期间对应的影像数据的每个部分对影像数据进行细分化，而能够按照每个该部分来存储确认作业的结果的信息。由此，能够抑制多个监视作业的结果的信息散失。因此，监视者能够容易地对确认作业的结果的信息进行管理。

历史管理部64根据监视者经由输入装置9自己进行的输入，生成监视结果数据74。由此，与历史存储部63存储仅包括再现历史数据73的监视支援数据的情况相比，监视支援装置6能够提高监视者是否实际上进行了确认作业的信息的精度。

判定部60根据影像中的指定区域来计算变化量。由此，监视者能够灵活地设定作为影像中的确认作业的对象的区域。此外，监视者能够按照每个事件来设定指定区域。由此，历史存储部63能够按照确定了影像数据中的时间及区域的每个事件，来存储由监视者进行的确认作业的实绩的信息。

再现部62将在事件的影像中重叠了监视辅助显示后的数据发送到显示装置8，该监视辅助显示表示发生了事件的区域及事件类别等信息。由此，监视支援系统4能够向监视者明确地示出影像中的应关注的部分或区域。因此，监视者在确认作业中看落应确认的事项的可能性降低。

再现部62根据监视支援数据来改变监视辅助显示的方式。由此，监视支援系统4能够向监视者强调地示出未确认的影像数据的部分或者发生存在问题的事件的部分等在确认作业中特别需要注意的部分。因此，监视者在确认作业中看漏需要注意的部分的可能性降低。

摘要影像处理部65将与发生事件的期间对应的影像数据作为摘要影像数据而结合。由此，监视者能够容易地统一进行多个事件的确认作业。

摘要影像处理部65从影像存储装置3删除与作为摘要影像数据而结合的部分对应的原始的影像数据的部分。由此，监视系统1能够有效地利用影像存储装置3的存储容量。

摘要影像存储部66将从原始的影像数据提取出的摘要影像数据与监视支援数据72关联起来而存储。由此，监视者能够针对在摘要影像数据所表示的影像中发生的多个事件，统一地检查确认作业的实绩的有无。因此，能够降低确认作业的遗漏的发生。此外，监视支援系统4能够根据存档数据，在摘要影像数据上也重叠监视辅助显示而向监视者示出。

接下来，对将发生事件的影像发送到显示装置的功能的另一例进行说明。图18是示出本实施方式的显示装置显示的发生事件的影像的画面的另一例的图。

作为将发送事件的影像发送到显示装置8的功能的另一例，监视支援装置6也可以具有连续再现功能。连续再现功能是在作为对象的一个摄影装置2拍摄到的影像中由监视者选择出在选择期间内发生的多个事件的情况下的再现部62的功能的例子。通过由监视者选择出的影像编号来指定作为对象的摄影装置2。

影像显示画面显示监视图像87、标记图像88以及框89。影像显示画面在多个事件同时发生的情况下，针对多个事件的各个事件显示标记图像88或框89。

连续再现功能的动作在由监视者按下连续再现按钮86的情况下开始。

再现部62从事件存储部61取得在选择期间内发生的选择出的影像编号的事件的事件编号、以及与该事件编号分别关联起来的各个事件数据71。再现部62生成将取得的事件编号作为要素而存放的事件列表。

再现部62根据取得的各个事件数据71，取得各个事件的开始帧编号及结束帧编号。

再现部62根据取得的各个事件数据的事件类别编号，取得各个事件类别数据70。

再现部62根据存放于事件列表的各个事件编号，从历史存储部63取得各个监视支援数据72。监视支援装置6也可以在未生成事件的一览的情况下，在开始连续再现功能的动作之前开始进行生成事件的一览的功能的动作。

再现部62根据存放于事件列表的事件编号和取得的监视支援数据72，针对在选择期间内发生的各个事件，设定监视辅助显示的方式。

再现部62依次向作业区域读入从与选择期间的开始时间点对应的帧到与结束时间点对应的帧。

再现部62在向显示装置8发送与选择期间的开始时间点对应的帧时，新取得再现历史编号。之后，再现部62取得再现开始帧的编号。之后，再现部62取得当前的时刻作为再现开始时刻。之后，再现部62取得在当前的会话中登录的监视者的监视者编号。

再现部62在向显示装置8发送与选择期间的结束时间点对应的帧时，取得再现结束帧的编号。

再现部62在连续再现功能中一次进行多个事件的确认作业，因此，代替事件编号而将事件列表组合来生成再现历史数据73。

再现部62在生成再现历史数据73之后，将事件列表和生成的再现历史数据73发送到历史存储部63。

历史存储部63保存再现历史数据73。即，历史存储部63存储接收到的再现历史数据73。之后，历史存储部63向与存放于接收到的事件列表中的各个事件编号关联起来而存储的监视支援数据包含的再现历史编号的列表追加所存储的再现历史数据包含的再现历史编号。

接下来，作为将发生事件的影像发送到显示装置的动作的另一例，对连续再现功能的动作进行说明。图19是示出本实施方式的监视支援装置的连续再现功能的动作例的流程图。

监视者选择作为对象的影像编号。监视者通过按下连续再现按钮86，一并选择在选择期间内发生的所选择的影像编号的事件。在按下连续再现按钮86的情况下，监视支援装置6开始连续再现功能的动作。

再现部62生成在选择期间内发生的事件的事件列表。之后，再现部62针对事件列表的各个事件，设定监视辅助显示的方式。之后，再现部62将当前的帧的编号设定为与选择期间的开始时间点对应的帧的编号(S501)。

再现部62将当前的帧读入到作业区域。之后，再现部62将当前的下标编号设定为与事件列表的开头的要素对应的下标编号(S502)。

再现部62判定当前的帧是否处于由当前的下标编号指定的事件的期间内(S503)。在判定结果为“是”时，监视支援装置6的动作进入S504。在判定结果为“否”时，监视支援装置6的动作进入S505。

再现部62与读入到作业区域的帧所表示的图像重叠地写入由当前的下标编号指定的事件的监视辅助显示(S504)。

再现部62判定当前的下标编号是否为事件列表的末尾的下标编号(S505)。在判定结果为“否”时，再现部62将当前的下标编号设为下一个下标编号。之后，监视支援装置6的动作进入S503。在判定结果为“是”时，监视支援装置6的动作进入S506。

再现部62将存放于作业区域的数据发送到显示装置8(S506)。

再现部62判定当前的帧的编号是否为与选择期间的结束时间点对应的帧编号(S507)。在判定结果为“是”时，监视支援装置6的动作进入S508。在判定结果为“否”时，再现部62将当前的帧设定为下一个帧。之后，监视支援装置6的动作进入S502。

再现部62生成再现历史数据73。之后，再现部62将再现历史数据73和事件列表发送到历史存储部63。之后，历史存储部63保存接收到的再现历史数据73(S508)。

另外，关于输入基于目视的确认作业的结果的功能，在显示装置8对发生输入结果的对象的事件的影像进行显示的情况下，也可以在由监视者选择出与该影像重叠显示的标记图像88时开始动作。监视者的选择例如在输入装置9为鼠标的情况下，也可以是监视者对监视辅助显示的点击。

本实施方式不限定于判定部60的计算变化量及变化位置的坐标的方法。

代替与背景图像80之间的亮度信息的差分，判定部60也可以将与紧前的帧之间的亮度信息的差分用于变化量的计算。由此，判定部60能够将影像的变化速度用于判定事件的发生。判定部60在将影像中的人物的不自然的动作设为确认作业的对象的情况下，也可以使用与相邻的帧之间的差分来计算变化量。

判定部60在对影像数据进行编码的情况下，也可以不将编码后的数据解码而进行处理。判定部60也可以将离散余弦转换的系数用于变化量的计算。由此，判定部60能够减轻计算变化量时的解码所涉及的处理。

判定部60也可以通过众所周知的图像识别的技术，将特定的人物与影像中的人物之间的脸的一致度作为变化量进行计算。判定部60也可以在影像中存在多个人的情况下，将一致度的最大值设为变化量。由此，判定部60能够将在影像中是否拍摄到特定的人物用于判定发生事件的期间。

判定部60也可以仅具有一个计算变化量的方法。

变化量的计算中的指定区域不限定于矩形区域。指定区域也可以是由连结3个以上的锚节点的线段围成的封闭区域。指定区域也可以是从影像中的一个点起的处于预先决定的长度的范围的内侧的圆形区域。

也可以不根据指定区域来计算变化量。即，也可以仅针对影像数据的区域整体来计算变化量。

判定部60也可以将比变化量的值大于开始阈值的时间点早预先设定的时间的时间点判定为发生事件的期间的开始时间点。判定部60也可以将比变化量的值小于结束阈值的时间点晚预先设定的时间的时间点判定为发生事件的期间的结束时间点。由此，监视者能够也包含影像中发生变化的期间的前后的状况在内来进行确认作业。

再现部62也可以不将监视辅助显示与影像重叠地发送到显示装置8。再现部62也可以通过监视者的操作来切换监视辅助显示的显示或非显示。

再现部62也可以不根据监视支援数据来变更监视辅助显示的方式。由此，在进行确认作业时监视支援数据的内容不重要的情况下，监视者能够将注意集中于影像。

摘要影像处理部65也可以仅生成摘要影像数据而不生成存档数据。由此，生成摘要影像数据的处理的负荷降低。

摘要影像处理部65在生成摘要影像数据时，也可以不从影像存储装置3删除原始的影像数据。

摘要影像处理部65也可以在多个监视结果数据对应于一个事件且各个影像保存码不一致的情况下，如果存在即便是一个需要影像保存的数据，则判定为需要影像保存。

摘要影像处理部65也可以根据事件类别数据或再现历史数据等来判定是否需要影像保存。例如，摘要影像处理部65也可以在不存在与事件对应的再现历史数据的情况下，判定为需要影像保存。

图20是示出本实施方式的变形例的监视支援装置的结构的框图。监视支援装置6也可以不具备摘要影像处理部65。由此，在能够充分地确保影像存储装置3的存储容量的情况下或者在不长期保存影像数据的情况下，监视支援系统4变得简单，维护性提高。

图21是示出本实施方式的变形例的监视支援装置的结构的框图。监视支援装置6也可以不具备历史管理部64。由此，在仅通过再现历史数据的管理就足够的情况下，监视支援系统4变得简单，维护性提高。

图22是示出本实施方式的变形例的监视支援装置的结构的框图。监视支援装置6也可以不具备摘要影像处理部65及历史管理部64这两方。由此，监视支援系统4变得简单，维护性提高。

监视支援装置6也可以不具备判定部60及事件存储部61。监视支援装置6也可以根据其他监视支援系统或监视支援装置生成的事件数据，生成及存储监视支援数据。

监视支援系统4也可以经由缓冲区而进行与装置或部分之间的通信。缓冲区例如是存储器6c。例如，影像存储装置3也可以向缓冲区发送影像数据。判定部60也可以从缓冲区接收该影像数据。

监视系统1也可以仅具备一个摄影装置2。监视系统1也可以不具备摄影装置2。监视系统1也可以仅将已经作为文件而存储于影像存储装置3的由其他监视系统记录的影像数据作为对象。

监视系统1也可以不具备影像存储装置3。摄影装置2也可以向判定部60直接发送影像数据。事件存储部61也可以存储与发生事件的期间对应的影像数据的部分。

监视系统1也可以不具备监视终端7。在监视系统1中，摄影装置2、影像存储装置3、监视支援装置6、显示装置8以及输入装置9也可以不经由网络5或监视终端7而连接。监视系统1也可以通过配置于一个场所的单一的装置来实现。

本实施方式的影像数据不限定于对帧赋予了连续的编号的形式。影像数据例如也可以是通过MPEG(Motion Picture Expert Group)-2或H.264等影像编码方式进行编码而得到的动态图像数据的形式。

在影像数据的部分中，原始的影像数据与具体的数据的形式也可以不同。影像数据的部分也可以是不存储为文件而暂时存储于作业区域的数据。

本实施方式的各个数据不限定于为了说明而例示的构造。本实施方式的各个数据也可以是根据要应用的数据的种类、形式或规模，例如作为相关数据库而被标准化的数据。

在本实施方式的数据中，事件编号等用于识别数据的信息不限定于由字符或数值构成的数据。识别数据的信息也可以是表示存储有该数据的地址的数据。

产业利用性

本发明的监视支援装置及监视支援系统能够应用于通过影像远程进行目视监视的系统。

标号说明

1监视系统，2摄影装置，3影像存储装置，4监视支援系统，5网络，6监视支援装置，7监视终端，8显示装置，9输入装置，60判定部，61事件存储部，62再现部，63历史存储部，64历史管理部，65摘要影像处理部，66摘要影像存储部，6a硬件，6b处理器，6c存储器，70事件类别数据，71事件数据，72监视支援数据，73再现历史数据，74监视结果数据，75监视者数据，80背景图像，81框，81a锚节点，82a开始时刻输入栏，82b结束时刻输入栏，83一览显示按钮，84显示区域，84a再现按钮，84b监视结果输入按钮，85摘要影像生成按钮，86连续再现按钮，87监视图像，88标记图像，89框，90需要保存的事件，91无需保存的事件，92保存期间，93删除期间。

Claims (12)

1.一种监视支援装置，该监视支援装置具备：

再现部，其在由监视者选择出根据影像数据所表示的影像相对于时间的变化量而判定出发生的期间的事件的情况下，根据识别事件的事件识别信息中的由监视者选择出的事件的事件识别信息，将与该事件识别信息关联起来存储且与发生该事件的期间对应的所述影像数据的部分发送到显示装置，其中，该显示装置对接收到的影像数据所表示的影像进行显示；以及

历史存储部，其将监视支援数据与该事件的事件识别信息关联起来而进行存储，其中，该监视支援数据包括表示再现部是否向所述显示装置发送了与发生事件的期间对应的所述影像数据的部分的信息。

2.根据权利要求1所述的监视支援装置，其中，

所述历史存储部将监视者对事件进行的基于目视的确认作业的结果的信息包含在与该事件的事件识别信息关联起来而存储的监视支援数据中来进行存储。

3.根据权利要求1或2所述的监视支援装置，其中，

该监视支援装置具备：

判定部，其计算所述变化量，根据所述变化量来判定发生事件的期间；以及

事件存储部，其将用于确定与所述判定部判定出的期间对应的所述影像数据的部分的信息与该事件的事件识别信息关联起来而进行存储。

4.根据权利要求3所述的监视支援装置，其中，

所述判定部将所述变化量变成比预先设定的值大的时间点判定为发生事件的期间的开始时间点。

5.根据权利要求3或4所述的监视支援装置，其中，

所述判定部将所述变化量变成比预先设定的值小的时间点判定为发生事件的期间的结束时间点。

6.根据权利要求3至5中的任意一项所述的监视支援装置，其中，

所述判定部针对所述影像的预先设定的指定区域计算所述变化量。

7.根据权利要求6所述的监视支援装置，其中，

所述再现部将表示如下影像的影像数据发送到所述显示装置，该影像是在与发生事件的期间对应的所述影像数据的部分所表示的影像的与所述指定区域对应的位置处重叠了与该事件对应的监视辅助显示而得到的影像。

8.根据权利要求7所述的监视支援装置，其中，

所述再现部根据所述监视支援数据来改变所述监视辅助显示的方式。

9.根据权利要求1至8中的任意一项所述的监视支援装置，其中，

该监视支援装置具备摘要影像处理部，该摘要影像处理部将与如下期间对应的所述影像数据的部分作为摘要影像数据而结合，该期间包括发生由监视者选择出的一个或多个事件的全部期间。

10.根据权利要求9所述的监视支援装置，其中，

所述再现部根据在存储于影像存储装置的影像数据所表示的影像中发生的事件中的、由监视者选择出的事件的事件识别信息，将与该事件识别信息关联起来存储且与发生该事件的期间对应的该影像数据的部分发送到所述显示装置，

所述摘要影像处理部从所述影像存储装置删除与如下期间对应的所述影像数据的部分，其中，该期间包含所述摘要影像数据所表示的影像的开始时间点至结束时间点。

11.根据权利要求9或10所述的监视支援装置，其中，

该监视支援装置具备摘要影像存储部，该摘要影像存储部将事件的事件识别信息、用于确定与发生该事件的期间对应的该摘要影像数据的部分的信息、以及与该事件识别信息关联起来而存储于所述历史存储部的监视支援数据与摘要影像数据关联起来而进行存储。

12.一种监视支援系统，该监视支援系统具备：

显示装置，其对接收到的影像数据所表示的影像进行显示；以及

监视支援装置，其在由监视者选择出根据影像数据所表示的影像相对于时间的变化量而判定出发生的期间的事件的情况下，根据识别事件的事件识别信息中的由监视者选择出的事件的事件识别信息，将与该事件识别信息关联起来存储且与发生该事件的期间对应的所述影像数据的部分发送到所述显示装置，并且，将监视支援数据与该事件的事件识别信息关联起来而进行存储，该监视支援数据包括表示是否向所述显示装置发送了与发生事件的期间对应的所述影像数据的部分的信息。

Images