CN103379313A - 影像监视系统、事件管理装置及影像监视方法 - Google Patents

影像监视系统、事件管理装置及影像监视方法 Download PDF

Info

Publication number
CN103379313A
CN103379313A CN2012101367521A CN201210136752A CN103379313A CN 103379313 A CN103379313 A CN 103379313A CN 2012101367521 A CN2012101367521 A CN 2012101367521A CN 201210136752 A CN201210136752 A CN 201210136752A CN 103379313 A CN103379313 A CN 103379313A
Authority
CN
China
Prior art keywords
event
image
image monitoring
incident management
situation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012101367521A
Other languages
English (en)
Inventor
吉内英也
朱鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi China Research and Development Corp
Original Assignee
Hitachi China Research and Development Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi China Research and Development Corp filed Critical Hitachi China Research and Development Corp
Priority to CN2012101367521A priority Critical patent/CN103379313A/zh
Publication of CN103379313A publication Critical patent/CN103379313A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Alarm Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明提供一种影像监视系统、影像监视系统中的事件管理装置及影像监视方法,该影像监视系统包括检测装置、事件管理装置、影像发送装置以及影像监视终端。其中,事件利用多个信号定义,在接收到定义事件的全部信号的情况下,事件管理装置检测为该事件发生,影像发送装置向影像监视终端发送与该事件相关的影像,影像监视终端接收与该事件相关的影像并进行显示。由此,能够显示正确地对应于事件发生的影像,避免基于单一信号进行的事件检测中由于单一信号的误检测而导致的事件的误检测,从而提高事件检测的正确性。

Description

影像监视系统、事件管理装置及影像监视方法
技术领域
本发明涉及利用影像的影像监视系统、影像监视系统中的事件管理装置及影像监视方法。
背景技术
近年来,利用影像监视银行、学校、店铺等各种场所的影像监视系统加速普及。在这种影像监视系统中,一般使用以下技术:使用各种传感器检测与特定情况对应的事件,对监视对象的影像进行提取,提高监视者的监视效率,并且仅保存与事件相关联的影像,来削减存储装置的容量。例如,在专利文献1中公开了以下技术:在发生了电视广播中作为开始录像的契机等的事件时,回溯规定时间量的蓄积录像中的录像数据并进行保存。
专利文献1:日本特开2010-50692号
在现有技术中,单一的信号与一个事件相对应,影像的保存根据事先决定的事前缓冲时间以及事后缓冲时间进行,因此无法实现正确地对应于事件发生的影像的录像。另外,在通过单一的信号进行的事件检测中,单一的信号的误检测导致事件的误检测,而引起事件检测的正确性下降。像这样,在基于通过单一的信号进行的事件检测的影像监视系统中,存在事件的误检测、监视效率的低下以及存储装置的消耗量增加等技术问题。
发明内容
为了解决上述技术问题,本发明提供一种影像监视系统、影像监视系统中的事件管理装置及影像监视方法,通过多个信号的组合来定义监视对象的事件,在接收到用于定义事件的全部信号时,向影像监视终端发送影像,并进行向存储装置保存该影像的保存处理。另外,针对到发生为止需要一定时间的事件,通过分别定义向影像监视终端的影像发送契机,能够由监视终端适当地监视有紧急性的事件。进而,在接收到用于定义事件的各信号时,进行保存影像所需的各种缓冲处理,实现影像保存处理的最优化。
为了解决上述技术问题,本发明涉及一种影像监视系统,其特征在于,包括:检测装置,对指定的情况进行检测,并输出与检测结果对应的信号;事件管理装置,根据从所述检测装置输出的信号,对事件进行检测;影像发送装置,根据所述事件管理装置的检测结果,发送与事件相关的影像;以及影像监视终端,接收从所述影像发送装置发送的影像并进行显示;所述事件利用多个信号定义,在接收到定义事件的全部信号的情况下,所述事件管理装置检测为该事件发生,所述影像发送装置向所述影像监视终端发送与该事件相关的影像,所述影像监视终端接收与该事件相关的影像并进行显示。
根据本发明所涉及的影像监视系统,通过多个信号的组合来定义监视对象的事件,在接收到用于定义事件的全部信号时,向影像监视终端发送影像并显示。由此,能够显示正确地对应于事件发生的影像,并防止向影像监视终端发送不需要的影像,而且能够避免基于单一信号进行的事件检测中由于单一信号的误检测而导致的事件的误检测,从而提高事件检测的正确性。
在本发明所涉及的影像监视系统中,也可以是:在针对一个检测装置定义了多个事件的情况下,所述事件管理装置判断所述多个事件是否具有关联性,在所述事件管理装置判断为所述多个事件具有关联性的情况下,所述影像发送装置将与所述多个事件相关的影像作为一个影像。
由此,通过判断多个事件之间的关联性,并且在判断为多个事件具有关联性的情况下将与多个事件相关的影像作为一个影像,能够适当地进行与相关联的多个事件相关的影像所需的缓冲,降低存储装置的消耗量。
在本发明所涉及的影像监视系统中,也可以是:所述多个事件包括第一事件和第二事件,在接收到定义所述第一事件的最后的信号之前,接收到定义所述第二事件的最初的信号的情况下,所述事件管理装置判断为所述第一事件与所述第二事件具有关联性。
由此,能够适当地判断第一事件与第二事件之间的关联性,从而能够适当地进行与相关联的多个事件相关的影像所需的缓冲,降低存储装置的消耗量。
在本发明所涉及的影像监视系统中,也可以是:在所述事件管理装置接收到定义具有关联性的多个事件的全部信号的情况下,所述影像发送装置将与所述多个事件相关的全部影像以及与所述多个事件相关的信息发送给所述影像监视终端。
由此,通过将与多个事件相关的信息和与所述多个事件相关的全部影像一起发送给影像监视终端,能够更加清楚地掌握所监视的事件,提高监视的效率。
在本发明所涉及的影像监视系统中,也可以是:在所述事件管理装置接收到定义某一个事件的多个信号之中的某一个信号之后,经过了规定时间仍未接收到定义该事件的多个信号之中的下一个信号的情况下,检测为该事件未发生,所述影像发送装置删除仅与该事件相关的影像,并保留与该事件有关联性的事件和该事件之间共同相关的影像。
由此,在检测为某事件未发生的情况下,通过删除仅与该事件相关的影像,并保留与该事件有关联性的事件和该事件之间共同相关的影像,能够适当地进行与相关联的多个事件相关的影像所需的缓冲,降低存储装置的消耗量。
在本发明所涉及的影像监视系统中,也可以是:所述影像监视系统还包括影像蓄积装置,该影像蓄积装置对所述影像发送装置发送的影像进行蓄积;所述影像监视终端在对所述影像蓄积装置中蓄积的影像进行检索时,不仅显示作为检索结果的事件,而且显示与作为检索结果的事件具有关联性的事件。
由此,通过在检索时不仅显示作为检索结果的事件,而且显示与作为检索结果的事件具有关联性的事件,能够更加清楚地掌握所监视的事件及与其相关联的事件,从而提高监视的效率。
在本发明所涉及的影像监视系统中,也可以是:在所述事件管理装置接收到定义事件的全部信号之前,所述影像发送装置向所述影像监视终端发送与该事件相关的影像。
由此,针对到发生为止需要一定时间的事件,通过在接收到定义事件的全部信号之前发送与该事件相关的影像,能够适当地监视有紧急性的事件。
在本发明所涉及的影像监视系统中,也可以是:在所述事件管理装置接收到按每个事件预先决定的信号之后,所述影像发送装置向所述影像监视终端发送与该事件相关的影像。
由此,针对到发生为止需要一定时间的事件,通过按照每个事件分别定义影像发送契机,能够根据各事件的具体情况,更加适当地监视有紧急性的事件。
在本发明所涉及的影像监视系统中,也可以是:在所述事件管理装置未能接收到定义事件的全部信号的情况下,所述影像发送装置向所述影像监视终端发送表示该事件未发生的事件未发生通知。
由此,针对到发生为止需要一定时间的事件,在接收到定义事件的全部信号之前发送与该事件相关的影像但该事件最终并没有发生的情况下,通过发送表示该事件未发生的事件未发生通知,能够更加清楚所监视的事件的进展情况,从而提高监视的效率。
另外,本发明还提供一种影像监视系统中的事件管理装置,该影像监视系统包括:检测装置,对指定的情况进行检测,并输出与检测结果对应的信号;所述事件管理装置;影像发送装置,根据所述事件管理装置的检测结果,发送与事件相关的影像;以及影像监视终端,接收从所述影像发送装置发送的影像并进行显示;所述事件管理装置根据从所述检测装置输出的信号,对利用多个信号定义的事件进行检测,在接收到定义事件的全部信号的情况下,检测为该事件发生,并向所述影像发送装置发送表示法事件发生的事件通知。
根据本发明所涉及的影像监视系统中的事件管理装置,通过多个信号的组合来定义监视对象的事件,在接收到用于定义事件的全部信号时,向影像监视终端发送影像并显示。由此,能够显示正确地对应于事件发生的影像,并防止向影像监视终端发送不需要的影像,而且能够避免基于单一信号进行的事件检测中由于单一信号的误检测而导致的事件的误检测,从而提高事件检测的正确性。
另外,本发明还提供一种影像监视系统的影像监视方法,包括以下步骤:由检测装置对指定的情况进行检测,并输出与检测结果对应的信号;由事件管理装置根据从所述检测装置输出的信号,对事件进行检测;由影像发送装置根据所述事件管理装置的检测结果,发送与事件相关的影像;以及由影像监视终端接收从所述影像发送装置发送的影像并进行显示;所述事件利用多个信号定义,在接收到定义事件的全部信号的情况下,所述事件管理装置检测为该事件发生,所述影像发送装置向所述影像监视终端发送与该事件相关的影像,所述影像监视终端接收与该事件相关的影像并进行显示。
根据本发明所涉及的影像监视系统的影像监视方法,通过多个信号的组合来定义监视对象的事件,在接收到用于定义事件的全部信号时,向影像监视终端发送影像并显示。由此,能够显示正确地对应于事件发生的影像,并防止向影像监视终端发送不需要的影像,而且能够避免基于单一信号进行的事件检测中由于单一信号的误检测而导致的事件的误检测,从而提高事件检测的正确性。
因此,本发明所涉及的影像监视系统、事件管理装置及影像监视系统通过提高事件检测的精度,并且在接收到与各事件对应的信号时适当地进行影像监视、影像保存所需的影像控制处理,能够防止向影像监视终端发送不需要的影像,并削减保存影像所需的存储装置的容量。
附图说明
图1是表示本发明的第一实施方式的影像监视系统的结构图。
图2是本发明的第一实施方式的影像监视终端的结构框图。
图3是本发明的第一实施方式的事件管理服务器的结构框图。
图4A、图4B是本发明的第一实施方式的影像发送服务器的结构框图。
图5是本发明的第一实施方式的影像蓄积服务器的结构框图。
图6是说明本发明的第一实施方式的事件检测处理的时序图。
图7A~图7D是表示本发明的第一实施方式的事件检测处理中的缓冲信息数据库的变化的说明图。
图8是说明本发明的第二实施方式的事件检测处理的时序图。
图9A~图9F是表示本发明的第二实施方式的事件检测处理中的缓冲信息数据库的变化的说明图。
图10是说明本发明的第三实施方式的处理的时序图。
图11A、图11B是表示本发明的第三实施方式中的缓冲信息数据库的变化的说明图。
图12是说明本发明的第四实施方式中的处理的时序图。
图13是本发明的第四实施方式中发生超时的情况下的时序图。
图14A、图14B是本发明的第四实施方式中发生超时的情况下的缓冲信息数据库的变化的说明图。
图15是包格式的一览图(1)。
图16是表示事件定义信息数据库的具体例的说明图(1)。
图17A、图17B是表示事件信息数据库的更新的情况的说明图。
图18是表示事件定义信息数据库的具体例的说明图(2)。
图19是表示事件定义信息数据库的具体例的说明图(3)。
图20是包格式的一览图(2)。
图21是说明本发明的第五实施方式的影像检索处理的时序图。
图22是表示本发明的第五实施方式的影像检索窗口的说明图。
图23是表示本发明的第五实施方式的影像检索结果显示窗口的说明图。
图24是影像监视终端的处理流程图。
图25是事件管理服务器的处理流程图。
图26是影像发送服务器的处理流程图。
图27是影像蓄积服务器的处理流程图。
附图标记说明
1 影像监视终端
2 事件管理服务器
3 影像发送服务器
4 影像蓄积服务器
5 传感器
6 摄像机
7 监视对象场所
8 网络
具体实施方式
(第一实施方式)
以下,结合附图说明本发明的第一实施方式。
图1表示本发明的第一实施方式的影像监视系统的一例,是包括影像监视终端1、配置于监视对象场所7的事件管理服务器2、影像发送服务器3、影像蓄积服务器4、多个传感器5-1~5-N、多个摄像机6-1~6-M的影像监视系统的结构图。在后文中,根据需要将传感器5-1~5-N统称为传感器5,将摄像机6-1~6-M统称为摄像机6。传感器5及摄像机6分别作为检测特定情况的检测装置发挥作用。例如,传感器5包括温度传感器、人体感应传感器或进出房间管理系统中的ID卡读卡器等。摄像机6通过图像分析功能,能够进行动物体检测、遗留物检测等处理。事件管理服务器3通过这些各种情况的组合来定义一个事件。例如,在进出房间管理系统检测到通过ID卡进行的ID输入处理,同时,对ID卡读器附近进行监视的摄像机检测到人物的动作的情况下,通过组合这两个信号,能够定义通过ID卡确定的人物进入房间这样的事件,并作为影像监视系统的监视对象。影像发送服务器4、影像蓄积服务器5与事件相对应地分别进行影像向影像监视终端1的发送、影像的蓄积处理等处理。构成系统的各种装置以及传感器、摄像机通过网络8相互连接。
接下来,说明各装置的详细结构。图2是第一实施方式的影像监视终端1的结构框图。影像监视终端1具备网络接口10、控制部(CPU)12、由硬盘等构成的外部存储装置14、由存储器等构成的内部存储装置16、由显示器等构成的外部输出装置17、总线18等基本的硬件结构,经由网络接口10中的包控制部101与网络8进行通信。在内部存储装置16中搭载着用于执行影像监视处理的影像监视程序161。影像监视程序161将从影像发送服务器3经由网络8由网络接口10接收的影像与和影像一起通知的事件建立关联地显示在例如外部输出装置17的画面上。
图3是第一实施方式的事件管理服务器2的结构框图。事件管理服务器2具备网络接口20、控制部(CPU)22、由硬盘等构成的外部存储装置24、由摄像机等构成的内部存储装置26、总线28等基本的硬件结构,经由网络接口20中的包控制部201与网络8进行通信。在内部存储装置26中搭载着事件管理程序261,该事件管理程序261接收来自传感器5及摄像机6的警报(信号),判断有无事件发生。
外部存储装置24具备事件定义信息数据库(DB)241,该事件定义信息数据库241对用于定义事件的信息进行管理。事件定义信息数据库241具备事件识别符、事件发生时作为影像控制及蓄积处理的对象的摄像机的摄像机识别符、用于定义事件的多个传感器识别符、从传感器发送的警报识别符、从接收警报开始到接收下次警报为止能够等待的警报等待时间。用于定义事件的传感器识别符、警报识别符、警报等待事件这3个构成1组,可以与一个事件识别符相对应地存在多组。事件定义信息数据库241还包括事前缓冲时间、在事件发生后继续影像的录像的事后缓冲时间、用于开始影像发送的警报的识别符即影像发送开始警报识别符。在针对到发生为止需要较长的事件、而且监视有紧急性的事件,不等待事件确定就开始影像发送处理的情况下,影像发送开始警报识别符定义作为开始影像发送的契机的警报的识别符。关于该处理留待后述。
外部存储装置还具备事件信息数据库243,该事件信息数据库243管理事件的实际的发生状况。事件信息数据库243具备事件识别符、事件发生时作为影像控制及蓄积处理的对象的摄像机的摄像机识别符、用于定义事件的多个传感器识别符、从传感器发出的警报识别符、接收警报的时刻即警报接收时刻、从接收警报开始到接收下次警报为止能够等待的警报等待时间。用于定义事件的传感器识别符、警报识别符、警报接收时刻、警报等待事件这4个构成1组,可以与一个事件识别符相对应地存在多组。
各数据库的保存位置不一定限于这里的结构,可以考虑对数据的存取速度、数据容量等因素来决定。例如,也可以考虑事件定义信息数据库241及事件信息数据库243配置在内部存储装置26中的结构和其他结构。
图4A是第一实施方式的影像发送服务器3的结构框图。影像发送服务器3具备网络接口30、控制部(CPU)32、由硬盘等构成的外部存储装置34、由存储器等构成的内部存储装置36、总线38等基本的硬件结构,经由网络接口30中的包控制部301与网络8进行通信。在内部存储装置36中,搭载着提供影像控制功能的影像控制程序361,并包括保存影像所需的影像缓冲362。
外部存储装置34保存摄像机信息数据库341,该摄像机信息数据库341管理与控制对象的摄像机相关的信息。摄像机信息数据库341具备摄像机识别符、从摄像机接收的影像的帧率即影像帧率、以及摄像机接收的影像的比特率即影像比特率。
外部存储装置34还保存缓冲信息数据库343,该缓冲信息数据库343管理与暂时保存影像的影像缓冲362相关的信息。缓冲信息数据库343包括缓冲识别符、缓冲(缓冲器)中保存的影像的发送源摄像机的识别符即摄像机识别符、有可能利用缓冲所积蓄的影像的事件的候选列表即事件候选列表、缓冲所积蓄的影像数据的缓冲起始位置、缓冲所积蓄的影像数据的缓冲结束位置。在接收到警报的情况下,影像发送服务器将上次警报接收时刻与所述接收到的警报的接收时刻之间接收的影像视为一个影像数据,保存影像数据的缓冲起始位置、结束位置,并且将事件定义的一部分包括所述接收到的警报在内的事件的识别符作为事件候选列表,与影像数据建立关联地管理。接收了全部警报而确定的事件被保存在缓冲信息数据库343的确定事件列表中。
外部存储装置34还保存事件信息数据库345,该事件信息数据库345管理与确定发生的事件相关的信息。事件信息数据库345具备相关联的缓冲识别符、事件识别符、事件发生时作为影像控制及蓄积处理的对象的摄像机的识别符即摄像机识别符、用于定义事件的多个传感器识别符、从传感器发出的警报识别符、接收警报的时刻即警报接收时刻。用于定义事件的传感器识别符、警报识别符、警报接收时刻这3个构成1组,可以与一个事件识别符相对应地存在多组。
各数据库的保存位置不一定限于这里的结构,可以考虑对数据的存取速度、数据容量等因素来决定。例如,也可以考虑摄像机信息数据库341配置在内部存储装置36中、而缓冲信息数据库343以及事件信息数据库345配置在外部存储装置34中的结构以及其他的结构。另外,关于影像缓冲362,由于处理的数据量较大,因此也可以考虑以下结构,即如图4B所示,分散配置为在内部存储装置36中配置一次影像缓冲362′,而在外部存储装置34中配置二次影像缓冲347。
图5是第一实施方式的影像蓄积服务器4的结构框图。影像蓄积服务器4具备网络接口40、控制部(CPU)42、由硬盘等构成的外部存储装置44、由存储器等构成的内部存储装置46、总线48等基本的硬件结构,经由网络接口40中的包控制部401与网络8进行通信。在内部存储装置46中,搭载着影像蓄积程序461,该影像蓄积程序461提供影像的蓄积功能。影像蓄积程序461接受来自影像发送服务器3的请求,进行将影像保存在外部存储装置44中的处理。
外部存储装置44保存影像信息数据库441,该影像信息数据库441管理与蓄积的影像相关的信息。影像信息数据库441具备记录的影像的发送源摄像机的识别符即摄像机识别符、影像的录像开始时刻、影像的录像结束时刻、与影像相关联的事件的识别符即事件识别符以及事件信息、影像数据。事件识别符及事件信息有时与一个影像数据相对应地存在多个,事件信息由用于定义通过事件识别符确定的事件的传感器5的识别符即传感器识别符、警报识别符、警报接收时刻所成的组构成。
接下来,利用时序图说明影像监视系统的基本动作。图6是说明本发明的第一实施方式的事件检测处理的时序图。如图6所示,监视处理从事件管理服务器2从摄像机6或传感器5接收警报并开始事件检测处理开始。其中,在图6中,摄像机6所通知的动物体检测、遗留物检测等的信号也与传感器5同样处理,在以下的其他实施方式中相同。另外,在图6中虽未明示出摄像机6,但设为影像发送服务器3随机接收来自摄像机6的影像。在此,系统中存在4个传感器5-1~5-4,在各传感器按照警报1~警报4的顺序依次发送警报时,设为发生事件1。事件1的定义如图16所示。其中,在图16中,在事件的定义所需的要素之中,仅表示了事件识别符、摄像机识别符、传感器识别符和警报识别符所成的组。设为在这种状态下,事件管理服务器2从传感器1(传感器5-1)接收到警报1的通知(S1-01)。图15的PF-01表示警报通知的消息格式。警报通知包括消息的发送源地址和目的地地址、包种类(警报通知)、传感器识别符、警报识别符和警报接收时刻。接收到警报通知的事件管理服务器2检索事件定义信息数据库241,得知警报1是定义事件1的警报。因此,事件管理服务器2如图17A所示地更新事件信息数据库243,开始事件检测处理。在图17A的事件信息数据库243中,指定了传感器识别符、警报识别符、对应的警报接收时刻、到接收下次警报为止能够等待的警报等待时间。警报等待时间从事件信息定义数据库241中提取出其值来进行设定。结束了事件信息数据库243的更新后,事件管理服务器2为了向相关联的影像发送服务器3通知有可能发生事件1而且为此需要开始准备蓄积影像数据,发送缓冲请求(S1-04)。图15的PF-02表示缓冲请求的消息格式。缓冲请求包括消息的发送源地址和目的地地址、包种类(缓冲请求)、摄像机以别符、有可能发生的事件的事件识别符、与各事件对应的事前缓冲时间。在此,指定事件1作为事件识别符。事前缓冲时间在针对该事件首次发送缓冲请求的情况下、即接收到的警报通知是某事件的开始警报的情况下,设定为1以上的值,在此外的情况下设定为0秒。接收到缓冲请求的影像发送服务器3利用接收的事件识别符来检索缓冲信息数据库343,确认有无相关联的影像缓冲。在此,S1-01中事件管理服务器2所接收到的警报1是与事件1对应的最初的警报,因此在该时刻不存在与事件1对应的缓冲。因此,影像发送服务器3如图7A所示更新缓冲信息数据库343,开始与摄像机1的影像对应的缓冲处理(S1-07)。在缓冲信息数据库343中,指定第一个影像缓冲起始位置,但缓冲结束位置为空值。
接下来,设为传感器2(传感器5-2)向事件管理服务器2通知警报2(S1-10)。事件管理服务器2检索事件定义信息数据库241及事件信息数据库243,得知警报2符合作为当前进行检测处理的事件1的第二个警报的条件,在更新事件信息数据库243之后,向影像发送服务器3发送将事件识别符设定为事件1的缓冲请求(S1-13)。接收了缓冲请求的影像发送服务器3利用缓冲请求中包括的事件识别符来检索缓冲信息数据库343,得知与事件1对应的影像当前正在缓冲处理中。因此,影像发送服务器3如图7B所示地缓冲信息数据库343(S1-16)。影像发送服务器3能够以步骤S1-13中接收的缓冲请求作为契机,在步骤S1-07中开始的与事件1对应的缓冲处理中,设定缓冲结束位置,将步骤S1-07到步骤S1-16之间接收的影像作为独立的影像数据进行处理,并且设定新的缓冲开始位置,开始步骤S1-16之后接收的影像的缓冲处理。在此,影像缓冲如图4B所示分离为一次影像缓冲362′和二次影像缓冲347的情况下,将影像数据从一次影像缓冲362′移动到二次影像缓冲347。在后文的说明中省略该处理的说明。
接下来,传感器3(传感器5-3)向事件管理服务器2进行警报3的通知(S1-19)。事件管理服务器与步骤S1-13同样,检测出警报3与事件1对应,在更新事件信息数据库243之后,将缓冲请求向影像发送服务器3发送(S1-22)。影像发送服务器3接受缓冲请求,与步骤S1-16进行相同的处理,如图7C所示更新缓冲信息数据库(S1-25)。结果,从步骤S1-16到步骤S1-25之间接收的影像可以作为具有缓冲开始位置XXY+1和缓冲结束位置YYY的影像数据来处理。
在传感器4(传感器5-4)向事件管理服务器2通知了警报4的情况下(步骤S 1-28),事件管理服务器2参照事件定义信息数据库241及事件信息数据库243,检测出事件1确定发生。最终,事件1确定后的事件信息数据库243的状态如图17B所示。检测出事件1确定发生的事件管理2将事件通知发送给影像发送服务器3(S1-31)。图15的PF-05表示事件通知的消息格式。事件通知包括消息的发送源地址和目的地地址、包种类(事件通知)、摄像机识别符、事件识别符、用于定义事件的全部传感器识别符的列表即传感器识别符列表、警报识别符的列表即警报识别符列表和警报接收时刻的列表即警报接收时刻列表、事件发生时刻。传感器识别符列表、警报识别符列表、警报接收时刻列表由图17B的事件信息数据库243中包括的全部传感器识别符、警报识别符、警报接收时刻构成。接收到事件通知的影像发送服务器3检测到与事件1相关联的影像的缓冲处理完成,开始缓冲处理的结束准备。另一方面,检测出事件1确定发生的事件管理服务器2参照事件定义信息数据库241,在经过了事件1的事后缓冲事件之后,将缓冲结束通知发送给影像发送服务器3(S1-34)。在图
15的PF-06中表示缓冲结束请求的消息格式。缓冲结束请求包括消息的发送源地址和目的地地址、包种类(缓冲结束请求)、摄像机识别符、相关联的事件的识别符。虽然可能包括多个事件识别符,但在步骤S1-34中仅指定事件1。
在步骤S1-31中接收到事件通知的影像发送服务器3利用接收到的事件通知中包括的事件识别符,调查有无相关联的缓冲。在此相当于图7D所示的缓冲1,因此影像发送服务器3在事件信息数据库345中制作以缓冲1作为缓冲识别符的记录,将步骤S1-31中接收的事件通知中包括的传感器识别符列表、警报识别符列表、警报接收时刻列表分别设定在对应的项目中。然后,在步骤S1-34中从事件管理服务器2接收到缓冲结束通知时,如图7D所示更新缓冲信息数据库343。在图7D中,接受警报4的通知,针对从步骤S1-25至步骤S1-34之间接收的影像数据的缓冲,设定缓冲结束位置YYZ,在确定事件列表中设定事件1。进而,针对与各缓冲起始位置、缓冲结束位置对应的事件候选列表,将事件1设定为“确定”。经过这些处理,影像发送服务器3检测出与缓冲1对应的全部事件已确定,向影像监视终端1发送事件通知(S1-40),并且使用确定的缓冲1的数据,构筑从缓冲起始位置1到缓冲结束位置3的影像数据、即从步骤S1-04至步骤S1-34之间接收的影像数据,并将影像数据发送给影像监视终端1。此时,不仅包括影像数据,还包括与事件1相关联的全部警报接收时刻。影像数据的发送通过将影像发送消息发送给影像监视终端1来进行(S1-40)。在图15的PF-08中表示影像发送消息的消息格式。影像发送消息包括消息的发送源地址和目的地地址、包种类(影像发送)、摄像机识别符、事件识别符、事件发生时刻、用于定义事件的全部的警报接收时刻、影像数据。警报接收时刻可以从事件信息数据库345取得。
在结束了向影像监视终端1的影像发送处理之后,影像发送服务器3通过向影像蓄积服务器4发送影像蓄积请求,来执行影像的蓄积处理(S1-43)。在图15的PF-07中表示影像蓄积请求的消息格式。影像蓄积请求包括消息的发送源地址和目的地地址、包种类(影像蓄积请求)、摄像机识别符、影像的录像开始时刻和录像结束时刻、事件识别符和事件信息、影像数据。事件识别符与事件信息成对,在一个消息中可以包括多对。事件信息包括用于构筑事件的全部传感器识别符、警报识别符和警报接收时刻。接收了影像蓄积请求的影像蓄积服务器4进行影像的蓄积处理(S1-46)。使用影像蓄积请求中包括的全部数据,在影像信息数据库441中登录新的项目,由此进行影像蓄积处理。通过以上处理,能够将影像数据与相关联的事件的信息以及用于构筑事件的全部传感器、警报、警报接收时刻相对应地进行管理。
如上所述,第一实施方式所涉及的影像监视系统包括:检测装置,对指定的情况进行检测,并输出与检测结果对应的信号;事件管理装置,根据从所述检测装置输出的信号,对事件进行检测;影像发送装置,根据报述事件管理装置的检测结果,发送与事件相关的影像;以及影像监视终端,接收从所述影像发送装置发送的影像并进行显示;所述事件利用多个信号定义,在接收到定义事件的全部信号的情况下,所述事件管理装置检测为该事件发生,所述影像发送装置向所述影像监视终端发送与该事件机关的影像,所述影像监视终端接收与该事件相关的影像并进行显示。
另外,第一实施方式的影像监视系统的影像监视方法包括以下步骤:由检测装置对指定的情况进行检测,并输出与检测结果对应的信号;由事件管理装置根据从所述检测装置输出的信号,对事件进行检测;由影像发送装置根据所述事件管理装置的检测结果,发送与事件相关的影像;以及由影像监视终端接收从所述影像发送装置发送的影像并进行显示;所述事件利用多个信号定义,在接收到定义事件的全部信号的情况下,所述事件管理装置检测为该事件发生,所述影像发送装置向所述影像监视终端发送与该事件相关的影像,所述影像监视终端接收与该事件相关的影像并进行显示。
根据第一实施方式的影像监视系统、事件管理装置及影像监视方法,通过多个信号的组合来定义监视对象的事件,在接收到用于定义事件的全部信号时,向影像监视终端发送影像并显示。由此,能够显示正确地对应于事件发生的影像,并防止向影像监视终端发送不需要的影像,而且能够避免基于单一信号进行的事件检测中由于单一信号的误检测而导致的事件的误检测,从而提高事件检测的正确性。
(第二实施方式)
以下结合附图说明本发明的第二实施方式。其中,第二实施方式所涉及的影像监视系统及其具有的各装置的结构与第一实施方式相同,仅针对同一影像在短时间内发生多个事件并且共享缓冲的情况进行了改进。以下着重说明第二实施方式与第一实施方式的不同点,而省略重复的说明。
接下来,利用图8的时序图,说明第二实施方式中针对同一影像在短时间内发生多个事件并且共享缓冲的情况下的动作。在本例中,设为在系统中存在5个传感器5-1~5-5,如图18所示,事件1和事件2针对同一摄像机1定义。事件1在依次接收到传感器1、3、4的警报1、3、4时发生,事件2在依次接收到传感器2、5的警报2、5时发生。另外,在图18中,仅表示了事件的定义所需的要素之中的事件识别符、摄像机识别符、传感器识别符和警报识别符所成的组。在该状态下,设为事件管理服务器2从传感器1(传感器5-1)接收到警报1的通知(S2-01)。接收到警报通知的事件管理服务器2检索事件定义信息数据库241,得知警报1是用于定义事件1的警报。因此,事件管理服务器2更新事件信息数据库243,开始事件检测处理。在结束了事件信息数据库243的更新之后,事件管理服务器2为了向相关联的影像发送服务器3通知有可能发生事件1、以及需要为此开始影像数据的蓄积准备,发送缓冲请求(S2-04)。接收到缓冲请求的影像发送服务器利用接收到的事件识别符来检索缓冲信息数据库343,确认有无相关联的影像缓冲。在此,步骤S2-01中由事件管理服务器2接收到的警报1是与事件1对应的最初的警报,因此在该时刻不存在与事件1对应的缓冲。因此,影像发送服务器3如图9A所示更新缓冲信息数据库343,开始针对摄像机1的影像的缓冲处理(S2-07)。接下来,设为传感器2(传感器5-2)向事件管理服务器2通知警报2(S2-10)。事件管理服务器2检索事件定义信息数据库241及事件信息数据库243,得知警报2是与事件1对应的最初的警报,在更新事件信息数据库243之后,向影像发送服务器3发送将识别识别符设定为事件2的缓冲请求(S2-13)。接收到缓冲请求的影像发送服务器3利用缓冲请求中包括的事件识别符来检索缓冲信息数据库343,检测出不存在与事件2对应的缓冲。接下来,影像发送服务器3利用缓冲请求中包括的摄像机识别符来检索缓冲信息数据库343,得知存在与事件1及摄像机1对应的缓冲。在步骤S2-13中接收到缓冲请求的时刻,事件1处于未确定的状态,需要保留在事件候选列表中。另外,针对步骤S2-13中接收的缓冲请求所指定的事件2,必须新追加到事件候选列表中。结果,如图9B所示更新缓冲信息数据库343。由于事件1、2都没有确定而且都有可能发生,因此在步骤S2-13的时刻,在事件候选列表中存在事件1、2双方。另外,与警报2的接收相对应的缓冲结束位置1(XXY)和缓冲开始位置(XXY+1)的更新与图6的步骤S1-16同样进行。
接下来,设定传感器3(传感器5-3)向事件管理服务器2进行警报3的通知(S2-19)。事件管理服务器2检测出警报3是与事件1对应的警报,在更新事件信息数据库243之后,将缓冲请求发送给影像发送服务器3(S2-22)。影像发送服务器3接受缓冲请求,进行与步骤S2-16同样的处理。如图9C所示更新缓冲信息数据库343(S2-25)。结果,从步骤S2-16至步骤S2-25之间接收的影像可以作为具有缓冲开始位置XXY+1和缓冲结束位置YYY的影像数据处理。在事件候选列表中包括事件1、2。
接下来,设为传感器4(传感器5-4)向事件管理服务器2通知警报4(S2-28)。事件管理服务器2参照事件定义信息数据库241及事件信息数据库243,检测出事件1确定发生。另外,警报4虽然与事件2无关,但得知事件2的检测处理正在持续中。因此,向影像发送服务器3发送将事件识别符设定为事件2的缓冲请求,指示进行针对事件2的缓冲处理(S2-31)。另一方面,由于事件1已经确定,因此事件管理服务器2向影像发送服务器3发送将事件识别符设定为事件1的事件通知(S2-34),通知事件1的发生。进而,事件管理服务器2在从事件1确定开始经过事件1的事后缓冲时间之后,将针对事件1的缓冲结束请求发送给影像发送服务器3(S2-37)。
针对从步骤S2-31至步骤S2-37的一系列动作,影像发送服务器3进行以下处理。在步骤S2-31中接收到针对事件2的缓冲请求时,影像发送服务器3视为事件1、2的检测处理在持续中,如图9D所示更新缓冲信息数据库343。具体而言,将与事件候选列表3对应的缓冲结束位置设定为YYZ,在事件候选列表4中新追加事件1、2,将其缓冲起始位置4设定为YYZ+1。接下来,在步骤S2-34中接受针对事件1的事件通知,并在步骤S2-37中接受针对事件1的缓冲结束请求,得知事件1已发生。影像发送服务器3在向影像监视终端1发送事件通知之后(S2-40),开始与事件1对应的影像数据的构筑。与事件1对应的影像数据可以通过结合事件候选列表中包括事件1的全部缓冲来取得。在图9D中,在事件候选列表1、2、3、4中包括事件1,而在与事件候选列表4对应的缓冲中尚未设定结束位置。因此,影像发送服务器3构架并结合以下的4个缓冲来生成与事件1对应的影像数据。
(1)与事件候选列表1对应的缓冲(XXX~XXY)
(2)与事件候选列表2对应的缓冲(XXY+1~YYY)
(3)与事件候选列表3对应的缓冲(YYY+1~YYZ)
(4)从事件候选列表4的开始位置开始,以步骤S2-37中接收到针对事件1的缓冲结束请求的时刻作为结束位置的缓冲
影像发送服务器3在步骤S2-43中向影像监视终端1发送由上述(1)到(4)的缓冲构成的影像数据。另外,影像发送服务器3接受到事件1的发生,将缓冲信息数据库343的事件候选列表中包括的事件1全部设定为已确定,并在确定事件列表中追加事件1。结果,缓冲信息数据库变化为图9E所示(S4-46)。
接下来,设为传感器5(传感器5-5)向事件管理服务器2通知警报4(S2-49)。事件管理服务器2参照事件定义信息数据库241及事件信息数据库243,检测出事件2确定发生。因此,事件管理服务器2向影像发送服务器3发送将事件识别符设定为事件2的事件通知(S2-52),在经过了事件2的事后缓冲时间之后,将针对事件2的缓冲结束请求发送给影像发送服务器3(S2-55)。接收到这些消息的影像发送服务器3向影像监视终端1发送事件通知(S2-58)。另外,接受到针对事件2的缓冲结束请求,将事件候选列表中包括的事件2设定为已确定,并在确定事件列表中追加事件2。更新后的缓冲信息数据库343如图9F所示。影像发送服务器3接受事件2的发生,开始构筑与事件2相关联的影像数据。与事件2相关联的影像数据可以通过结合事件候选列表中包括事件2的全部缓冲来获得。在图9F中相当于与事件候选列表2、3、4对应的缓冲,分别与以下的影像对应。
(1)事件候选列表2的缓冲:警报2~警报3的影像
(2)事件候选列表3的缓冲:警报3~警报4的影像
(3)事件候选列表4的缓冲:警报4~警报5事后缓冲时间经过后的影像
影像发送服务器3将像这样构筑的事件2的影像数据发送给影像监视终端1(S2-61)。在此,影像发送服务器3检测出与该缓冲对应的全部事件已确定,开始影像的蓄积处理。具体而言,结合缓冲信息数据库343中包括的全部缓冲来构筑影像数据,并且设定事件1、2作为相关联的事件信息。将像这样构筑的影像数据作为按照如图15的PF-07的格式的影像蓄积请求,发送给影像蓄积服务器4(S2-64)。影像蓄积服务器4将接收的影像存放在影像信息数据库441中(S2-67)。像这样,在针对同一影像(摄像机)在短时间内发生多个事件的情况下,多个事件与蓄积的影像数据相关联。
如上所述,根据第二实施方式的影像监视系统,在针对一个检测装置定义了多个事件的情况下,事件管理装置判断所述多个事件是否具有关联性,在所述事件管理装置判断为所述多个事件具有关联性的情况下,所述影像发送装置将与所述多个事件相关的影像作为一个影像。由此,通过判断多个事件之间的关联性,并且在判断为多个事件具有关联性的情况下将与多个事件相关的影像作为一个影像,能够适当地进行与相关联的多个事件相关的影像所需的缓冲,降低存储装置的消耗量。
另外,根据第二实施方式的影像监视系统,多个事件包括第一事件和第二事件,在接收到定义所述第一事件的最后的信号之前,接收到定义所述第二事件的最初的信号的情况下,所述事件管理装置判断为所述第一事件与所述第二事件具有关联性。由此,能够适当地判断第一事件与第二事件之间的关联性,从而能够适当地进行与相关联的多个事件相关的影像所需的缓冲,降低存储装置的消耗量。
另外,根据第二实施方式的影像监视系统,在所述事件管理装置接收到定义具有关联性的多个事件的全部信号的情况下,所述影像发送装置将与所述多个事件相关的全部影像以及与所述多个事件相关的信息发送给所述影像监视终端。由此,通过将与多个事件相关的信息和与所述多个事件相关的全部影像一起发送给影像监视终端,能够更加清楚地掌握所监视的事件,提高监视的效率。
(第三实施方式)
以下结合附图说明本发明的第三实施方式。其中,第三实施方式所涉及的影像监视系统及其具有的各装置的结构与第一、第二实施方式相同,仅针对在平行处理多个事件的情况下由于某事件未发生而删除无用的缓冲的情况进行了改进。以下着重说明第三实施方式与第一、第二实施方式的不同点,而省略重复的说明。
接下来,利用图10的时序图,说明在平行处理多个事件的情况下由于某事件未发生而删除无用的缓冲的处理。在此,事件的定义与图8相同,按照图18的事件定义信息数据库241。在这种状态下,与图8相同,传感器1、2、3依次发送警报1、2、3,在图10的步骤S3-01~S3-25中进行与图8的步骤S2-01~S2-25相同的处理,影像发送服务器3的缓冲信息数据库343变化为图9C所示。在此,设为未进行来自传感器4的警报通知,在事件管理服务器2中警报4的等待事件超时(S3-28)。事件管理服务器2使事件1的检测处理中止,为了向影像发送服务器3指示与事件1相关联的缓冲的释放,发送缓冲释放请求(S3-31)。缓冲释放请求的消息格式如图15的PF-03所示。缓冲释放请求包括消息的发送源地址和目的地地址、消息种类(缓冲释放请求)、摄像机识别符、相关联的事件识别符。相关联的事件可以指定多个。在步骤S3-31中仅指定事件1。接收了缓冲释放请求的影像接收服务器3利用摄像机识别符和事件识别符来检索缓冲信息数据库343,取得对应的项目。接下来,从缓冲中的全部事件候选列表中删除事件1。更新后的缓冲信息数据库343如图11A所示。在此,事件候选列表1为空,表示不存在对应的事件候选。影像发送服务器3将这样的缓冲视为无用的缓冲并删除(S3-34)。删除后的缓冲信息数据库343的状态如图11B所示。
在结束缓冲释放处理之后从传感器5接收到警报5的情况下(S3-37),由于事件2确定发生,因此影像发送服务器3针对确定的事件,向影像监视终端1发送影像,并对影像蓄积服务器4指示影像蓄积处理。在图10中步骤S3-37至步骤S3-55所表示的一系列处理的内容与图6中步骤S1-28至步骤S1-46相同,因此省略说明。另外,图10表示最早开始保存的缓冲无用的例子,但根据事件的发生顺序,有时最迟开始保存的缓冲无用。此时,在进行缓冲释放处理之后,进行针对已确定的事件的影像发送处理和影像蓄积处理。
根据第三实施方式的影像监视系统,在所述事件管理装置接收到定义某一个事件的多个信号之中的某一个信号之后,经过了规定时间仍未接收到定义该事件的多个信号之中的下一个信号的情况下,检测为该事件未发生,所述影像发送装置删除仅与该事件相关的影像,并保留与该事件有关联性的事件和该事件之间共同相关的影像。由此,在检测为某事件未发生的情况下,通过删除仅与该事件相关的影像,并保留与该事件有关联性的事件和该事件之间共同相关的影像,能够适当地进行与相关联的多个事件相关的影像所需的缓冲,降低存储装置的消耗量。
(第四实施方式)
以下结合附图说明本发明的第四实施方式。其中,第四实施方式所涉及的影像监视系统及其具有的各装置的结构与第一~第三实施方式相同,其不同点在于在接收到全部信号之前就发送影像。以下着重说明第四实施方式与第一~第三实施方式的不同点,而省略重复的说明。
如果使用来自多个传感器的警报来判定事件的发生,则有时判定需要长时间,而在向影像监视终端1通知事件时信息已经不再有用。例如,在以防止犯罪为目的的监视系统中,事件通知要求紧急性。在此情况下,要求不等待事件的确定就实时地监视对象场所。为了实现这样的动作,不仅将事件确定时作为影像的发送契机,而且在预先定义的定时开始影像的发送即可。作为实现这样的动作的简单方法,可以举出以下方法:将构成事件的警报中的任一个作为开始发送影像的契机。图3的事件定义信息数据库241的影像发送开始警报识别符是用于对此进行设定的项目,例如设定构成事件的最初的警报,则能够最早开始发送影像。利用图12的时序图来说明此情况。在图12中,事件如图19所示定义。即,定义为:在从传感器1、2、3、4依次接收到警报1、2、3、4时事件发生,而且影像的发送从警报1的接收时就开始。现在,设为事件管理服务器2从传感器1接收到警报1(S4-01)。接收到警报通知的事件管理服务器2检索事件定义信息数据库241,得知警报1是用于定义事件1的警报。因此,事件管理服务器2开始事件1的检测处理,更新事件信息数据库243。然后,为了向影像发送服务器3通知有可能发生事件1、以及为此需要开始影像数据的蓄积准备,而发送缓冲请求(S4-04)。接收到缓冲请求的影像发送服务器3针对与事件1相关联的影像开始缓冲处理(S4-07)。事件管理服务器2在检索图19所示的事件定义信息数据库241时,检测出警报1为影像发送开始的契机。因此,为了指示影像发送服务器3开始发送影像以备事件1的发生,将影像发送请求发送给影像发送服务器3(S4-10)。影像发送请求的消息格式如图20的PF-09所示。影像发送请求包括消息的发送源地址和目的地地址、包种类(影像发送请求)、摄像机识别符、有可能发生的事件的事件识别符。接收到影像发送请求的影像发送服务器3为了向影像监视终端1通知事件1有可能发生,而发送事件候选通知(S4-13)。事件候选通知的消息格式如图15的PF-04所示。事件候选通知包括消息的发送源地址和目的地地址、包种类(事件候选通知)、摄像机识别符、有可能发生的事件的事件识别符。事件识别符可以在一个消息中设定多个,但在图12的例子中仅设定事件1。然后,影像发送服务器3不等待事件1的确定就开始影像发送(S4-16)。影像发送的消息格式按照图15的PF-08,但在步骤S4-13的阶段,除了警报1的接收时刻以外的警报的接收时刻以及事件的发生时刻都未确定,因此这些值未设定。
接下来,设为事件管理服务器2从传感器2接收到警报2(S4-19)。事件管理服务器2检索事件信息数据库243,得知事件1的检测处理在持续中,向影像发送服务器发送缓冲请求(S4-22)。在步骤S4-22中,缓冲请求的事件识别符设定为事件1,接收到该缓冲请求的影像发送服务器3与图6的步骤S16同样更新缓冲信息数据库343(S4-28)。在此由于与事件1对应的影像已经在步骤S4-16中开始向影像监视终端1发送,因此影像发送服务器3还将事件候选通知发送给影像监视终端1(S4-25)。在传感器3通知警报3时也进行同样的处理(S4-31~S4-40)。在传感器4通知警报4时(S4-43),事件管理服务器2检测出事件1已确定,并将事件通知发送给影像发送服务器3(S4-46)。然后,在经过事件1的事后缓冲时间之后,事件管理服务器2将缓冲结束请求发送给影像发送服务器3(S4-52)。接收到事件通知的影像发送服务器3将事件通知转发给影像监视终端1,通知事件1已确定。在接收到缓冲结束请求时,进行缓冲信息数据库343的更新,但由于已经开始向影像监视终端1发送影像,在此仅请求开始向影像蓄积服务器4的影像蓄积处理(S4-55)。影像蓄积服务器4将指定的影像保存在影像信息数据库441中。
在事件确定前就开始发送影像的情况下,在事件最终没有发生的情况下,需要将该情况通知给影像监视终端1。使用图13的时序图来说明这样的例子。在图13的例子中,事件定义与图12同样通过图19的事件定义信息数据库241赋予。传感器1(传感器5-1)将警报1通知给事件管理服务器2(S5-01),事件管理服务器2向影像发送服务器3发送针对事件1的缓冲请求(S5-04)。影像发送服务器3接受来自事件管理服务器2的请求,如图14A所示更新缓冲信息数据库343。事件管理服务器2在步骤S5-01中接收到警报通知时检索事件定义信息数据库241,检测出警报1是开始发送影像的契机。因此,向影像发送服务器3发送影像发送请求(S5-10)。接收到影像发送请求的影像发送服务器3为了向影像监视终端1通知有可能发生事件1,而发送事件候选通知(S5-13)。然后开始发送影像(S5-16)。在事件管理服务器2接收到警报2时,也进行与图12的步骤S4-19相同的处理,结果,影像发送服务器3的缓冲信息数据库343如图14B所示变化。从步骤S5-01至步骤S5-28的处理与图12的步骤S4-01至步骤S4-28的处理相同。
在此,设为未从传感器3发送警报3,而在事件管理服务器2中警报3的等待时间超时(S5-31)。在该时刻,事件管理服务器2使事件1的检测处理终止,并从事件信息数据库243中删除对应的项目之后,将缓冲释放请求发送给影像发送服务器3(S5-34)。在缓冲释放请求的事件以别符中设定事件1。接收到缓冲释放请求的影像发送服务器3检索缓冲信息数据库343,删除与事件1相关的缓冲(S5-37)。进而,影像发送服务器3由于事件1未发生,而且与事件1对应的影像已经开始发送,因此将事件未发生通知发送给影像监视终端1(S5-40)。事件未发生通知的消息格式如图20的PF-10所示。事件未发生通知包括消息的发送源地址和目的地地址、包种类(事件候选通知)、摄像机识别符、未发生的事件的事件识别符。接收到事件未发生通知的影像发送服务器3在经过由系统预先设定的规定时间之后,停止影像发送(S5-43)。
根据第四实施方式的影像监视系统,在所述事件管理装置接收到定义事件的全部信号之前,所述影像发送装置向所述影像监视终端发送与该事件相关的影像。由此,针对到发生为止需要一定时间的事件,通过在接收到定义事件的全部信号之前发送与该事件相关的影像,能够适当地监视有紧急性的事件。
另外,根据第四实施方式的影像监视系统,在所述事件管理装置接收到按每个事件预先决定的信号之后,所述影像发送装置向所述影像监视终端发送与该事件相关的影像。由此,针对到发生为止需要一定时间的事件,通过按照每个事件分别定义影像发送契机,能够根据各事件的具体情况,更加适当地监视有紧急性的事件。
另外,根据第四实施方式的影像监视系统,在所述事件管理装置未能接收到定义事件的全部信号的情况下,所述影像发送装置向所述影像监视终端发送表示该事件未发生的事件未发生通知。由此,针对到发生为止需要一定时间的事件,在接收到定义事件的全部信号之前发送与该事件相关的影像但该事件最终并没有发生的情况下,通过发送表示该事件未发生的事件未发生通知,能够更加清楚所监视的事件,从而提高监视的效率。
(第五实施方式)
以下结合附图说明本发明的第五实施方式。其中,第五实施方式所涉及的影像监视系统及其具有的各装置的结构与第一~第四实施方式相同,仅针对通过影像监视终端检索的情况进行了改进。以下着重说明第五实施方式与第一~第四实施方式的不同点,而省略重复的说明。
影像蓄积服务器4中保存的影像可以通过影像监视终端1来检索。图21表示该处理的情况。在设定影像检索时,可以想到以下方法:不仅设定摄像机名而且设定检索对象的开始时刻和结束时刻的方法、以及设定发生的事件种类的方法。在此,说明设定事件种类的方法。如图8的时序图所示,在影像数据之中,存在与多个事件相关的影像数据。这样的事件由于发生时刻有重叠,因此可以视为具有某种关联性的事件。因此,在图22的影像检索窗口G1中,设置指示在检索结果中包括相关联的事件的选择框G1-01。如果将该选择框选为有效,则在影像检索结果中,不仅取得与指定的事件种类对应的影像,而且取得与指定的事件种类相关联的事件的影像。在设定了影像检索条件之后,如果按下检索开始按钮G1-02,则影像监视终端1将影像检索请求发送给影像蓄积服务器4(S6-01)。影像检索请求的消息格式如图20的PF-11所示。影像检索请求包括消息的发送源地址和目的地地址、包种类(事件候选通知)、摄像机识别符、检索对象的事件识别符、指定是否将有关联的事件包括在检索结果中的事件关联设定。接收到影像检索请求的影像蓄积服务器4检索影像信息数据库441,提取相关联的影像数据。在提取影像数据时,在还包括与指定的事件相关联的事件的情况与仅包括指定的事件的情况下处理不同。例如在图8的时序图中,如图9F所示将与事件1、事件2对应的影像数据保存在影像蓄积数据库4中,而在此将事件1作为检索对象,并指定为将相关联的事件包括在检索对象之中的情况下,提取的影像以图9F的全部影像作为对象。在不将相关联的事件包括在检索对象之中的情况下,提取的影像仅为图9F的影像数据之中的与事件1相关联的部分。要仅提取与事件1相关联的部分,从影像信息数据库441中使用事件1的信息,提取从最初的警报接收时到最后的警报接收时刻的影像数据即可。
在检索影像数据之后,影像蓄积服务器4将提取的影像数据作为影像检索结果发送给影像监视终端1(S6-04)。影像检索结果的消息格式如图20的PF-12所示。影像检索结果包括消息的发送源地址和目的地地址、包种类(影像检索结果)、摄像机识别符、影像信息的列表。影像信息包括录像开始时间、录像结束时间、与影像相关联的事件识别符的列表、事件信息的列表、影像数据,事件信息包括用于定义事件的传感器的传感器识别符的列表、警报的警报识别符的列表、各警报的警报接收时刻。接收到影像检索结果的影像监视终端1使用图23所示的影像检索结果显示窗口G2来显示结果。影像检索结果显示窗口G2包括对选择的影像进行再现的影像显示部G2-01、以及显示检索结果的检索结果显示部G0-02。在检索结果显示部中,显示与指定的事件相关的影像的列表。在此,在与指定的事件相关联的事件包括在影像之中的情况下,相关联的事件的名称显示在检索结果中。例如G2-021所示,通过将“事件2”的标记与检索结果窗口一起显示,监视者能够容易得知该影像不仅与事件1相关联,而且还与事件2相关联。事件名的标记方法可以想到多种方法,例如可以想到将比事件种类G2-03所指定的事件更早发生的事件的名称在检索结果窗口中显示在画面的左侧,而将其后发生的事件的名称显示在画面的右侧。G2-022以及G2-023是这样的例子,分别表示事件2比事件1早发生,而事件3比事件1晚发生。
根据第五实施方式的影像监视系统,所述影像监视系统还包括影像蓄积装置,该影像蓄积装置对所述影像发送装置发送的影像进行蓄积;所述影像监视终端在对所述影像蓄积装置中蓄积的影像进行检索时,不仅显示作为检索结果的事件,而且显示与作为检索结果的事件具有关联性的事件。由此,通过在检索时不仅显示作为检索结果的事件,而且显示与作为检索结果的事件具有关联性的事件,能够更加清楚地掌握所监视的事件及与其相关联的事件,从而提高监视的效率。
(影像显示系统中各装置的流程)
接下来,说明结合了上述各实施方式的影像显示系统中的各装置的处理流程。图24是影像监视终端1的流程图。影像监视终端1在启动时进行初始化处理,开始消息处理循环(F1-01、F1-04)。在消息处理循环中,接收到事件通知的情况下(F1-07)或接收到事件候选通知的情况下(F1-10),影像监视终端1判断与事件或事件候选对应的影像是否显示在画面上(F1-31)。在未显示影像的情况下,影像监视终端前进至步骤F1-46,显示事件并且开始影像显示的准备。在已经显示有影像的情况下前进至步骤F1-34,通过使影像的框的颜色闪烁等强调显示相对应的影像。强调的方法根据事件种类、事件候选种类而不同。在消息处理循环中接收到事件未发生通知的情况下(F1-13),也前进到步骤F1-34进行相对应的影像的强调显示。在消息处理循环中接收到影像发送的情况下(F1-16),影像监视终端1前进到步骤F1-37,开始影像显示。在消息处理循环中,在检测到影像检索开始窗口G1的检索开始按钮G1-02被按下的情况下(F1-19),影像监视终端1前进到步骤F1-40,向影像蓄积服务器发送影像检索请求。在从影像蓄积服务器接收到影像检索结果的情况下(F1-22),影像监视终端1在影像检索结果显示窗口G2中显示检索结果(F1-43)。消息处理循环在影像监视终端1的关机时结束(F1-25)。在消息处理循环停止后,影像监视终端1停止工作(F1-28)。
接下来,利用图25的流程图说明事件管理服务器2的处理流程。事件管理服务器2在启动时进行初始化,开始消息处理循环(F2-01、F2-04)。在消息处理循环中,在接收到警报通知的情况下(F1-07),事件管理服务器2检索事件定义信息数据库241和事件信息数据库243并进行以下处理。首先,前进至步骤F2-19,调查有无基于警报接收而确定的事件。在存在确定的事件的情况下,前进到步骤F2-34,在向影像发送服务器3发送事件通知之后,将在事件识别符中设定为所确定的事件后的缓冲结束请求发送给影像发送服务器3(F2-37)。在步骤F2-19中不存在确定的事件的情况下,前进至步骤F2-22,将缓冲请求发送给影像发送服务器3。其后,参照事件定义信息数据库241的信息,检索是否为应该开始影像发送的事件、即是否为事件定义信息数据库241的影像发送开始警报识别符与步骤F2-07中接收的警报一致的事件。在存在应该开始影像发送的事件的情况下,前进至步骤F2-28,将影像发送发送给影像发送服务器3。在消息处理循环中,在检测到警报等待时间超时的情况下(F2-10),事件管理服务器2将针对对象事件的缓冲释放请求发送给影像发送服务器3。消息处理循环在事件管理服务器2关机时结束(F2-13),在消息处理循环停止后,事件管理服务器2停止工作(F2-16)。
接下来,利用图26的流程图说明影像发送服务器3的处理流程。影像发送服务器3在启动时进行初始化处理,开始消息处理循环(F3-01、F3-04)。在消息处理循环中,接收到缓冲请求的情况下(F3-07),影像发送服务器3参照缓冲信息数据库343,更新相关联的影像缓冲的信息(F3-28)。接下来,前进至步骤F3-31,判断是否开始了与缓冲相关联的影像的发送。在已经开始了影像发送的情况下前进至步骤F3-34,将事件候选通知发送给影像监视终端1。其后,在步骤F3-58中,判断发送事件候选通知的契机是否为缓冲请求。成为发送事件候选通知的契机的消息,除了缓冲请求之外,还可以想到影像发送请求。在消息处理循环中接收到影像发送请求的情况下(F3-10),影像发送服务器3前进至步骤F3-34,将事件候选通知发送给影像监视终端1。其后在步骤F3-58中,判断发送事件候选通知的契机是否为缓冲请求。在发送事件候选通知的契机的消息是影像发送请求的情况下前进至步骤F3-37,判断影像发送是否开始。在影像发送还没有开始的情况下将影像发送到影像监视终端1(F3-40),并判断在缓冲内是否有未确定的事件(F3-43)。在通过影像发送请求开始影像发送的情况下,由于事件处于未确定状态,因此在此不进行继续的处理。在消息处理循环中接收到缓冲结束请求的情况下也前进到步骤F3-37,判断有无影像发送。缓冲结束请求是在事件确定时接收的消息,因此在没有开始影像发送的情况下,将与步骤F3-40中确定的事件对应的影像数据发送给影像监视终端1。其后,在步骤F3-43中,判断缓冲内是否行未确定的事件。在缓冲内的全部事件都确定了的情况下,前进到步骤F3-46,经过图8的步骤S2-64的处理将影像蓄积请求发送给影像蓄积服务器4。在消息处理循环中接收到事件通知的情况下(F3-16),影像发送服务器3前进至步骤F3-49,将事件通知发送给影像监视终端1。在消息处理循环中接收到缓冲释放请求的情况下(F3-19),影像发送服务器3释放指定的缓冲(F3-52)。其后,影像发送服务器3判断是否有与释放的缓冲对应的发送中的影像(F3-55)。在存在对应的影像的情况下,前进至步骤F3-61,将事件未发生通知发送给影像监视终端1之后,停止影像发送。消息处理循环在影像发送服务器3关机时结束(F3-22),在消息处理循环停止后,影像发送服务器3停止工作(F3-25)。
接下来,利用图27的流程图说明影像蓄积服务器4的处理流程。影像蓄积服务器4在启动时进行初始化处理,并开始消息处理循环(F4-01、F4-04)。在消息处理循环中接收到影像蓄积请求的情况下(F4-07),影像蓄积服务器4前进至步骤F4-19,将接收到的影像数据保存到影像信息数据库441中。在消息处理循环中接收到影像检索请求的情况下(F4-10),影像蓄积服务器4按照检索条件检索影像信息数据库441,将检索结果发送给影像监视终端1(F4-22)。消息处理循环在影像蓄积服务器4关机时结束(F4-13),在消息处理循环停止后,影像蓄积服务器4停止工作(F4-16)。
(其他)
在以上各实施方式中,说明了影像监视系统具有影像蓄积服务器的结构,但在本发明中,影像监视系统也可以不具有影像蓄积服务器。即,本发明的影像监视系统即使不具备影像蓄积服务器,也能够实现本发明的技术方案并得到相应的技术效果。
另外,在以上各实施方式中,说明了基于由传感器发出的警报来定义事件的情况。但在本发明中,只要由检测装置对指定的情况进行检测并输出与检测结果对应的信号即可,也可以基于由摄像机发出的信号(警报)来定义事件,或基于由传感器和摄像机发出的信号(警报)来定义事件等。
如上所述,本发明所涉及的影像监视装置及影像监视系统中,在由多个传感器在短时间内检测出不同的事件并共享影像的情况下,提供一种高效的影像发送、蓄积管理方法。在事件发生需要时间的情况下,通过事先发送与未确定的事件对应的影像,能够实现对紧急性高的事件的监视。本发明的技术能够适用于监视场所存在多个传感器并利用这些传感器监视各种事件的高精度的大规模影像监视系统。

Claims (11)

1.一种影像监视系统,其特征在于,包括:
检测装置,对指定的情况进行检测,并输出与检测结果对应的信号;
事件管理装置,根据从所述检测装置输出的信号,对事件进行检测;
影像发送装置,根据所述事件管理装置的检测结果,发送与事件相关的影像;以及
影像监视终端,接收从所述影像发送装置发送的影像并进行显示;
所述事件利用多个信号定义,在接收到定义事件的全部信号的情况下,所述事件管理装置检测为该事件发生,所述影像发送装置向所述影像监视终端发送与该事件相关的影像,所述影像监视终端接收与该事件相关的影像并进行显示。
2.如权利要求1所述的影像监视系统,其特征在于,
在针对一个检测装置定义了多个事件的情况下,所述事件管理装置判断所述多个事件是否具有关联性,在所述事件管理装置判断为所述多个事件具有关联性的情况下,所述影像发送装置将与所述多个事件相关的影像作为一个影像。
3.如权利要求2所述的影像监视系统,其特征在于,
所述多个事件包括第一事件和第二事件,在接收到定义所述第一事件的最后的信号之前,接收到定义所述第二事件的最初的信号的情况下,所述事件管理装置判断为所述第一事件与所述第二事件具有关联性。
4.如权利要求2所述的影像监视系统,其特征在于,
在所述事件管理装置接收到定义具有关联性的多个事件的全部信号的情况下,所述影像发送装置将与所述多个事件相关的全部影像以及与所述多个事件相关的信息发送给所述影像监视终端。
5.如权利要求2所述的影像监视系统,其特征在于,
在所述事件管理装置接收到定义某一个事件的多个信号之中的某一个信号之后,经过了规定时间仍未接收到定义该事件的多个信号之中的下一个信号的情况下,检测为该事件未发生,所述影像发送装置删除仅与该事件相关的影像,并保留与该事件有关联性的事件和该事件之间共同相关的影像。
6.如权利要求2所述的影像监视系统,其特征在于,
所述影像监视系统还包括影像蓄积装置,该影像蓄积装置对所述影像发送装置发送的影像进行蓄积;
所述影像监视终端在对所述影像蓄积装置中蓄积的影像进行检索时,不仅显示作为检索结果的事件,而且显示与作为检索结果的事件具有关联性的事件。
7.如权利要求1所述的影像监视系统,其特征在于,
在所述事件管理装置接收到定义事件的全部信号之前,所述影像发送装置向所述影像监视终端发送与该事件相关的影像。
8.如权利要求7所述的影像监视系统,其特征在于,
在所述事件管理装置接收到按每个事件预先决定的信号之后,所述影像发送装置向所述影像监视终端发送与该事件相关的影像。
9.如权利要求7所述的影像监视系统,其特征在于,
在所述事件管理装置未能接收到定义事件的全部信号的情况下,所述影像发送装置向所述影像监视终端发送表示该事件未发生的事件未发生通知。
10.一种影像监视系统中的事件管理装置,
该影像监视系统包括:
检测装置,对指定的情况进行检测,并输出与检测结果对应的信号;
所述事件管理装置;
影像发送装置,根据所述事件管理装置的检测结果,发送与事件相关的影像;以及
影像监视终端,接收从所述影像发送装置发送的影像并进行显示;
所述事件管理装置根据从所述检测装置输出的信号,对利用多个信号定义的事件进行检测,在接收到定义事件的全部信号的情况下,检测为该事件发生,并向所述影像发送装置发送表示该事件发生的事件通知。
11.一种影像监视系统的影像监视方法,包括以下步骤:
由检测装置对指定的情况进行检测,并输出与检测结果对应的信号;
由事件管理装置根据从所述检测装置输出的信号,对事件进行检测;
由影像发送装置根据所述事件管理装置的检测结果,发送与事件相关的影像;以及
由影像监视终端接收从所述影像发送装置发送的影像并进行显示;
所述事件利用多个信号定义,在接收到定义事件的全部信号的情况下,所述事件管理装置检测为该事件发生,所述影像发送装置向所述影像监视终端发送与该事件相关的影像,所述影像监视终端接收与该事件相关的影像并进行显示。
CN2012101367521A 2012-04-28 2012-04-28 影像监视系统、事件管理装置及影像监视方法 Pending CN103379313A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2012101367521A CN103379313A (zh) 2012-04-28 2012-04-28 影像监视系统、事件管理装置及影像监视方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012101367521A CN103379313A (zh) 2012-04-28 2012-04-28 影像监视系统、事件管理装置及影像监视方法

Publications (1)

Publication Number Publication Date
CN103379313A true CN103379313A (zh) 2013-10-30

Family

ID=49463811

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012101367521A Pending CN103379313A (zh) 2012-04-28 2012-04-28 影像监视系统、事件管理装置及影像监视方法

Country Status (1)

Country Link
CN (1) CN103379313A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107592506A (zh) * 2017-09-26 2018-01-16 英华达(上海)科技有限公司 一种监控方法以及监控装置、监控系统
CN108696646A (zh) * 2017-04-10 2018-10-23 三菱电机大楼技术服务株式会社 监视系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1413030A (zh) * 2001-10-05 2003-04-23 艾迪斯株式会社 遥控和管理系统
CN1784701A (zh) * 2003-05-07 2006-06-07 皇家飞利浦电子股份有限公司 事件检测系统
CN101542548A (zh) * 2006-06-02 2009-09-23 传感电子公司 用于远程场点的分布式监视的系统和方法
CN102098419A (zh) * 2009-12-09 2011-06-15 霍尼韦尔国际公司 使用安全系统中的疏耦合来过滤安全区域中的视频事件

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1413030A (zh) * 2001-10-05 2003-04-23 艾迪斯株式会社 遥控和管理系统
CN1784701A (zh) * 2003-05-07 2006-06-07 皇家飞利浦电子股份有限公司 事件检测系统
CN101542548A (zh) * 2006-06-02 2009-09-23 传感电子公司 用于远程场点的分布式监视的系统和方法
CN102098419A (zh) * 2009-12-09 2011-06-15 霍尼韦尔国际公司 使用安全系统中的疏耦合来过滤安全区域中的视频事件

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108696646A (zh) * 2017-04-10 2018-10-23 三菱电机大楼技术服务株式会社 监视系统
CN108696646B (zh) * 2017-04-10 2021-03-16 三菱电机大楼技术服务株式会社 监视系统
CN107592506A (zh) * 2017-09-26 2018-01-16 英华达(上海)科技有限公司 一种监控方法以及监控装置、监控系统

Similar Documents

Publication Publication Date Title
CN107302549B (zh) 一种远程数据传输与存储系统及方法
CN103702053B (zh) 录像存储和检索方法及系统、监控系统
CN102340625B (zh) 事件启动的视频捕获方法及捕获事件启动的视频的摄像机
CN201075279Y (zh) 具有图像缓存存储器的图像显示设备
US8271665B2 (en) Internet protocol camera management system and method
EP3321880B1 (en) Monitoring system, photography-side device, and verification-side device
US20050144513A1 (en) Computer system including active system and redundant system and state acquisition method
WO2016147789A1 (ja) 画像監視装置及び画像監視方法
CN102547093A (zh) 图像记录装置、图像记录方法和程序
CN110740290B (zh) 监控录像预览方法及装置
US20240083443A1 (en) Driving state monitoring device, driving state monitoring method, and driving state monitoring system
CN106354606A (zh) 应用程序异常处理方法及装置
CN103379313A (zh) 影像监视系统、事件管理装置及影像监视方法
EP2453654A1 (en) Transmission apparatus and transmission method
CN107483280B (zh) 用于服务节点设备监控的方法及设备
US20160247543A1 (en) System management device, system management method, and program
CN102780872B (zh) 装置监视服务器以及装置监视系统
US20090248745A1 (en) Metadata management apparatus
CN115878379A (zh) 一种数据备份方法、主服务器、备份服务器及存储介质
JP2017184045A (ja) 監視カメラシステム及び監視方法
JP5612012B2 (ja) 情報処理システム及びその処理方法
JP2002073436A (ja) ネットワーク対応機器能力提示装置
JP6532600B2 (ja) ドライブレコーダ撮像画像送信システム、ドライブレコーダ撮像画像送信方法及びプログラム
CN103262051A (zh) 数据管理设备、系统、程序和方法
CN114285989A (zh) 一种紧急视频触发阈值的自适应调节方法与设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20131030