CN101052123A - 监控设备和方法 - Google Patents

Abstract

一种监控设备和方法，该监控设备包括：视频数据获得部，用于从监控终端获得视频数据；元数据获得部，用于从监控终端获得描述关于监控对象的信息的元数据；过滤设置存储部，用于存储过滤设置；元数据过滤部，用于通过使用存储在过滤设置存储部中的过滤设置，对元数据进行过滤处理；以及输出部，用于基于通过在元数据过滤部中进行过滤处理而获得的过滤处理结果，输出监控结果。

Description

监控设备和方法

技术领域

本发明涉及一种监控设备和方法。根据本发明，从监控终端获得视频数据和元数据(metadata)，并且对元数据进行过滤(filtering)处理。然后，基于通过进行过滤处理所获得的过滤处理结果，输出监控结果。

背景技术

过去的监控系统将来自监控终端的监控影像的视频数据通过网络提供给监控设备，并将该视频数据记录在监控设备中，由此监控设备可以检查有异常的监控影像(如日本特开2003-274390号公报(专利文献1))。

发明内容

顺便提及，当通过使用监控系统进行监控时，并且当基于预先定义的一条信息判断出发生了异常时，不能进行各种各样的监控操作。例如，当基于从监控终端提供的表示活动对象的检测结果的活动对象检测信息判断出发生了异常时，即使对可能不需要通知异常发生的活动对象的移动，监控设备也可以判断出发生了异常。

而且，当基于不同于活动对象检测信息的信息判断出发生了异常时，为了正确接收不同于活动对象检测信息的信息，在监控设备中可能需要遵从该信息的格式和定时的信息获得部。因为这个原因，当通过使用各种信息进行各种各样的监控操作时，可能需要设置每种信息的信息获得部。因此，不能容易地扩展监控设备的功能。

因此，希望提出一种允许容易地进行各种各样的监控操作的监控设备和方法。

根据本发明的实施例，从监控终端获得视频数据和描述与监控对象有关的信息的元数据。过滤设置被存储在过滤设置存储部中。通过使用所存储的过滤设置对元数据进行过滤处理，并基于过滤处理结果输出监控结果。

输出监控结果包括通过使用基于视频数据的影像、基于元数据的影像和示出元数据过滤部中所使用的过滤设置的影像中的一个影像、或由合成多个影像所产生的影像，表示监控结果的影像。

存储所获得的视频数据和元数据以允许播放所存储的视频数据和元数据。这里，当一起播放视频数据和元数据时，播放同步部播放与将播放的视频数据同步的元数据。

在该实施例中，当通过监控设备监控活动对象时，与监控对象有关的信息包括表示是否检测到了活动对象的活动对象检测信息和/或表示活动对象的位置的活动对象位置信息。当监控通过监控终端所监控的区域的状态时，与监控对象有关的信息包括表示监控影像的亮度的信息和/或表示温度的信息。

针对每种信息将过滤设置存储在过滤设置存储部中，该过滤设置用作基于与监控对象有关的信息输出例如警报的必要性的判断标准。使用过滤设置对元数据进行过滤处理对于与监控对象有关的每种信息，可以以过滤处理结果表示输出例如警报的必要性。基于过滤处理结果输出监控结果允许对与监控对象有关的每种信息输出例如警报。例如，当检测到活动对象时、当活动对象进入预先定义的区域时、当监控区域变暗时、和/或当温度异常发生时，可以输出与该状态相对应的警报。

由于通过使用基于视频数据的影像、基于元数据的影像和示出元数据过滤部中所使用的过滤设置的影像中的其中一个影像、或由合成多个影像所产生的影像，输出表示监控结果的影像，因而可以用图形显示监控结果，这允许容易且准确地识别监控结果。

为了改变和/或添加与监控对象有关的信息，以标记语言描述与监控对象有关的信息允许容易地改变和/或添加过滤设置。

根据本发明的实施例，通过监控设备从监控终端获得视频数据和表示与监控对象有关的信息的元数据。此外在监控设备中，通过使用存储在过滤设置存储部中的过滤设置，对元数据进行过滤处理，并且基于过滤处理结果输出监控结果。因而，可以容易地进行各种各样的监控操作，并且可以通过将与元数据中所包括的信息相对应的过滤设置存储在过滤设置存储部中来输出监控结果，这里该元数据包括与监控对象有关的各种信息。

附图说明

图1是示出监控系统的结构的图；

图2是监控终端的功能性框图；

图3A和3B是示出数据结构的图；

图4是监控设备的功能性框图；

图5是示出控制部的操作的流程图；

图6是示出视频数据获得部的操作的流程图；

图7是示出元数据获得部的操作的流程图；

图8是示出元数据过滤部的操作的流程图；

图9是示出切换指示部的操作的流程图；

图10是示出视频数据播放部的操作的流程图；

图11是示出播放同步部的操作的流程图；

图12是示出元数据播放部的操作的流程图；

图13是示出输出部的操作的流程图；

图14A～14C是示出监控影像、基于元数据的影像、以及过滤设置的影像的图；以及

图15A～15D是示出从输出部输出的影像的图。

具体实施方式

以下将参照附图说明本发明的实施例。图1示出监控系统10的结构。监控终端20和监控设备30通过网络40连接。监控终端20创建监控影像的视频数据，并创建描述与监控对象有关的信息的元数据。监控设备30可以远程控制监控终端20，获得、分析和存储监控终端20所创建的视频数据和/或元数据，并观看所存储的影像。

图2是监控终端的功能性框图。监控终端20具有视频数据创建部21和元数据创建部23。视频数据创建部21创建监控影像的视频数据Dt。换句话说，成像部212基于通过镜头部211输入的入射光创建成像信号Sv，并将该成像信号Sv提供给成像信号处理部213。成像信号处理部213通过进行例如A/D转换、拐点(knee)校正或处理，创建视频数据Dv。

为了减少要通信的监控影像的数据量，数据处理部214通过对视频数据Dv进行编码处理，创建视频数据Dt。数据处理部214还将所创建的视频数据Dt以预定数据结构提供给监控设备30。

成像操作切换部22基于来自监控设备30的切换指示信号CA，切换监控终端20的操作以获得最佳监控影像。例如，成像操作切换部22可以通过向镜头部211提供控制信号CMa来选择变焦比或光圈；通过向成像部212和成像信号处理部213提供控制信号CMb来切换监控影像的帧频(frame rate)；以及通过向数据处理部214提供控制信号CMc来切换视频数据的压缩比。例如，成像操作切换部22还可以切换成像方向。

元数据创建部23创建描述与监控对象有关的信息的元数据Dm。例如，当监控活动对象时，通过使用视频数据创建部21所创建的视频数据Dv来检测活动对象，并创建表示是否检测到活动对象的活动对象检测信息和/或表示检测到的活动对象的位置的活动对象位置信息。将这些信息作为与监控对象有关的信息包括在元数据中。元数据创建部23可以将关于活动对象的类型和/或状态的信息用作与监控对象有关的信息。

与监控对象有关的信息可以是表示监控终端所监控的区域的状态的信息，而不局限于与活动对象有关的信息。例如，可以使用表示监控区域的温度和/或明度的信息。可选地，可以使用关于监控区域中所进行的操作的信息。当监控温度时，元数据创建部23将温度测量结果包括在元数据中。当监控明度时，元数据创建部23基于视频数据创建部21所创建的视频数据Dv判断例如监控影像的平均亮度，并将判断结果包括在元数据中。当监控例如ATM(Automated Teller Machine，自动柜员机)或POS(Point Of Sales，销售点)终端上所进行的用户操作时，元数据创建部23将例如表示操作按键或操作面板上的用户操作的信息包括在元数据中。通过将成像操作信息QF(例如，表示当创建监控影像的视频数据时的视频数据创建部的拍摄方向、变焦状态和设置状态的信息)和/或从成像操作切换部22提供的时间信息包括在元数据中，元数据创建部23可以判断创建元数据的时间和/或视频数据是怎样创建的。

图3A和3B示出视频数据和元数据的数据结构。视频数据和元数据均包括链接信息和数据主体。视频数据的数据主体是监控影像的视频数据。元数据的数据主体描述表示例如监控对象的信息以及定义信息的描述方法的属性信息。链接信息描述例如表示视频数据和元数据之间关联性的关联信息以及定义信息数据的描述方法的属性信息。

使用用于识别视频数据的时间戳和/或序号作为关联信息。时间戳是提供创建视频数据时的时间的信息(时间信息)。序号是提供创建内容数据的顺序的信息(顺序信息)。当多个监控影像具有相同的时间戳时，可以识别创建具有相同时间戳的视频数据的顺序。可选地，可以使用用于识别创建视频数据的装置的信息(例如，生产商的名称、机器类型以及序列号)作为关联信息。

这里，以定义为用于描述通过Web交换的信息的方法的标记语言来描述链接信息和/或元数据主体。以这种方式使用标记语言允许容易地通过网络40交换信息。而且，使用XML等用于交换例如文档和/或电子数据的标记语言允许容易地交换视频数据和/或元数据。当使用XML时，定义用于描述信息的方法的属性信息可以是例如XML Schema。

可以将监控终端20所创建的视频数据和/元数据作为一个流(stream)提供给监控设备30，或者可以将视频数据和元数据作为不同流异步提供给监控设备30。

图4是监控设备的功能性框图。可以通过硬件或软件来配置监控设备的各功能块。

监控设备30的视频数据获得部311从监控终端20获得视频数据Dt。视频数据获得部311还对编码后的视频数据Dt进行解码处理，并将得到的视频数据Dv保持在视频数据获得部311内的缓冲器(未示出)中。视频数据获得部311将所保持的视频数据Dv顺序提供给输出部323。通过以这种方式将视频数据保持在缓冲器中，可以不依赖于来自监控终端的视频数据的定时而将视频数据顺序输出到输出部323。视频数据获得部311基于来自后面将说明的切换指示部315的存储指示信号CR，使视频数据存储部316将所保持的视频数据Dv存储在视频数据存储部316中。可以将编码后的视频数据Dt存储在视频数据存储部316中，并可以通过后面将说明的视频数据播放部320对其进行解码。

元数据获得部312从监控终端20获得元数据Dm，并将元数据Dm保持在元数据获得部312内的缓冲器(未示出)中。元数据获得部312将所保持的元数据Dm顺序提供给输出部323。元数据获得部312还进行用于将所保持的元数据Dm提供给元数据过滤部313的处理。通过以这种方式将元数据保持在缓冲器中，可以不依赖于来自监控终端20的元数据的定时而将元数据顺序提供给输出部323。可以将元数据与视频数据同步地提供给输出部323。元数据获得部312使元数据存储部317存储从监控终端20获得的元数据Dm。这里，通过在将元数据Dm存储在元数据存储部317中时添加与元数据Dm同步的视频数据Dv的时间信息，可以不装载元数据Dm的描述且不判断时间，而通过使用所添加的时间信息从元数据存储部317装载所期望时间的元数据。

元数据过滤部313通过使用存储在过滤设置存储部314中的过滤设置FS，对元数据获得部312所获得的元数据Dm或从元数据存储部317所提供的元数据Dmp进行过滤处理，并将过滤处理结果FJ提供给切换指示部315和输出部323。

过滤设置存储部314存储过滤设置FS，并将与元数据过滤部313将要进行的过滤处理相对应的过滤设置提供给元数据过滤部313。过滤设置FS表示对包括在元数据中的与监控对象有关的每条信息输出警报和/或切换监控终端中的成像操作的必要性的判断标准。通过使用过滤设置FS对元数据进行过滤处理，可以对与监控对象有关的每条信息用过滤处理结果表示输出警报和/或切换监控终端中的成像操作的必要性。

切换指示部315基于来自元数据过滤部313的过滤处理结果FJ，生成切换指示信号CA并将该切换指示信号CA提供给监控终端20。例如，可以基于过滤处理结果FJ切换监控终端20的操作以获得适于监控的监控影像。切换指示部315还基于过滤处理结果FJ将存储指示信号CR提供给视频数据存储部316，并使视频数据存储部316存储视频数据获得部311所获得的视频数据Dv。

可以在切换指示部315中选择用于存储视频数据Dv的模式。例如，可以选择动态搜索模式和最小化模式中的一种。当用户选择了动态搜索模式时，且当过滤处理结果FJ表示检测到了活动对象时，切换指示部315使视频数据存储部316存储视频数据获得部311所获得的视频数据Dv。当选择了最小化模式时，且当基于过滤处理结果FJ判断出发生可能需要输出警告或警报的状态的情况时，切换指示部315使视频数据存储部316存储视频数据获得部311所获得的视频数据Dv。这里，当选择了动态搜索模式时，存储检测到活动对象时的时间的视频数据。因此，通过由后面将说明的视频数据播放部320播放所存储的视频数据Dv，并对与所播放的视频数据Dv同步的元数据利用所期望的过滤设置进行过滤处理，可以搜索满足该过滤设置的视频数据。当选择了最小化模式时，可以容易且快速地播放可能需要输出警告或警报的状态的视频数据。另外，可以减少要存储的视频数据量。

视频数据存储部316存储视频数据获得部311所获得的视频数据Dv。元数据存储部317存储元数据获得部312所获得的元数据Dm。

视频数据播放部320进行用于播放存储在视频数据存储部316中的视频数据Dv的处理。换句话说，视频数据播放部320从用户指示的播放位置开始顺序装载视频数据，并将所装载的视频数据Dvp提供给输出部323。视频数据播放播放320还将正被播放的视频数据的播放位置(播放时间)JS提供给播放同步部321。

播放同步部321将同步控制信号CP提供给元数据播放部322，并控制元数据播放部322的操作以使从视频数据播放部320提供的播放位置JS和元数据播放播放322播放存储在元数据存储播放317中的元数据的位置同步。

元数据播放部322进行用于播放存储在元数据存储部317中的元数据Dm的处理。换句话说，元数据播放部322从用户指示的播放位置开始顺序装载元数据，并将所装载的元数据Dmp提供给元数据过滤部313和输出部323。为了播放视频数据和元数据，元数据播放部322基于从如上所述的播放同步部321提供的同步控制信号CP控制播放操作，并输出与视频数据Dvp同步的元数据Dmp。

输出部323基于从视频数据获得部311提供的视频数据Dv、从视频数据播放播放320提供的视频数据Dvp、从元数据获得播放312提供的元数据Dm、从元数据播放部322提供的元数据Dmp和/或来自元数据过滤部313的过滤设置FS，通过使用监控影像、元数据影像和过滤设置影像中的一个影像、或者将其组合所产生的影像，基于过滤处理结果FJ生成并输出表示监控结果的影像的显示信号VS。

用户接口部326与控制部325连接。用户接口部326包括操作按键和/或远程控制信号接收器。用户接口部326生成与用户操作相对应的操作信号SP，并将该操作信号SP提供给控制部325。控制部325通过生成基于操作信号SP的控制信号CT并将该控制信号CT提供给各组件，来控制监控设备30使其根据用户操作而工作。

接着，参照流程图说明通过软件配置各组件的情况下的操作。

图5示出控制部的操作。在步骤ST1，控制部325指示开始监控操作。开始监控操作的指示使除视频数据播放部320和元数据播放部322以外的组件开始工作，并且控制部325进入步骤ST2。

在步骤ST2，控制部325判断过滤设置是否完成。如果对元数据过滤部313的过滤设置未完成，则控制部325进入步骤ST3。如果该过滤设置已完成，则控制部325进入步骤ST4。

在步骤ST3，控制部325进行过滤设置。在过滤设置中，例如，可以在显示装置的屏幕上显示对元数据过滤部313的过滤设置未完成的事实。之后，基于从用户接口部326提供的操作信号SP，控制部325在元数据过滤部313中根据用户操作定义过滤设置，并进入步骤ST4。

在步骤ST4，控制部325判断是否指示从监控模式切换到播放模式。这里的监控模式是指使输出部323输出基于保持在视频数据获得部311中的视频数据和/或保持在元数据获得部312中的元数据的影像的工作模式。这里的播放模式是指使输出部323输出基于视频数据播放部320所播放的视频数据和/或元数据播放部322所播放的元数据的影像的工作模式。

如果基于来自用户接口部326的操作信号SP判断出指示切换到播放模式，则控制部325进入步骤ST5。如果判断出未指示切换到播放模式，则控制部325进入步骤ST16。

在步骤ST5，控制部325判断是否指示了播放位置。如果未指示播放位置，则控制部325返回步骤ST5。如果通过操作信号SP指示了播放位置，则控制部325进入步骤ST6。

在步骤ST6，控制部325判断播放模式下的过滤设置是否完成。如果对元数据过滤部313的过滤设置未完成，则控制部325进入步骤ST7。如果该过滤设置已完成，则控制部325进入步骤ST8。

在步骤ST7，控制部325以与步骤ST3中的方式相同的方式进行过滤设置，并进入步骤ST8。

在步骤ST8，控制部325指示开始播放，并进入步骤ST9。换句话说，控制部325使视频数据播放部320、播放同步部321和/或元数据播放部322开始工作，以从根据步骤ST5中的指示判断出的播放位置开始播放视频数据和/或元数据。

在步骤ST9，控制部325指示切换显示，并进入步骤ST10。换句话说，控制部325指示输出部323切换显示，并使输出部323输出由合成基于视频数据播放部320所播放的视频数据的影像、基于元数据播放部322所播放的元数据的影像、以及基于元数据过滤部313中的过滤设置的影像而产生的影像的显示信号VS。

在步骤ST10，控制部325判断是否进行了用于退出播放模式的操作。如果所提供的操作信号SP不表示用于退出播放模式的操作，则控制部325进入步骤ST11。如果所提供的操作信号SP表示用于退出播放模式的操作，则控制部325进入步骤ST14。

在步骤ST11，控制部判断是否进行了用于退出的操作。如果所提供的操作信号SP不表示用于退出的操作，则控制部325进入步骤ST12。如果所提供的操作信号SP表示用于退出的操作，则控制部325退出监控设备30的操作。

在步骤ST12，控制部325判断是否进行了改变操作。如果所提供的操作信号SP不表示改变操作，则控制部325返回步骤ST10。如果所提供的操作信号SP表示改变操作，则控制部325进入步骤ST13。

在步骤ST13，控制部325根据改变操作指示改变，并返回步骤ST10。例如，响应于用于改变播放位置的改变操作，控制部325可以指示视频数据播放部320和/或元数据播放部322从改变后的播放位置开始进行播放操作。如果进行用于改变过滤设置的改变操作，则控制部325指示元数据过滤部313利用改变后的过滤设置进行过滤处理。

在从步骤ST10进入到步骤ST14后，控制部325指示切换到监控模式，并进入步骤ST15。换句话说，控制部325退出视频数据播放部320、播放同步部321和元数据播放部322的操作。控制部325还将元数据过滤部313的过滤设置返回到监控模式下的过滤设置。

在步骤ST15，控制部325指示显示切换，并进入步骤ST16。换句话说，控制部325通过显示切换指示控制输出部323，以生成用于显示由合成基于来自视频数据获得部311的视频数据的影像、基于来自元数据获得部312的元数据的影像、以及基于元数据过滤部313中的过滤设置的影像而产生的影像的显示信号，并使输出部323输出该影像。

在步骤ST16，控制部325判断是否进行了退出操作。如果所提供的操作信号SP不表示退出操作，则控制部325进入步骤ST17。如果所提供的操作信号SP表示退出操作，则控制部325退出监控设备的操作。

在步骤ST17，控制部325判断是否进行了改变操作。如果所提供的操作信号SP不表示改变操作，则控制部返回到步骤ST4。如果所提供的操作信号SP表示改变操作，则控制部325进入步骤ST18。

在步骤ST18，控制部325根据改变操作进行改变指示，并返回步骤ST4。例如，如果进行了用于改变过滤设置的改变操作，则控制部325可以指示元数据过滤部313利用改变后的过滤设置进行过滤处理。

图6是示出视频数据获得部的操作的流程图。在步骤ST21，视频数据获得部311进行用于获得视频数据的处理。换句话说，视频数据获得部311向监控终端20请求视频数据和/或建立与监控终端20的会话(session)，并进入步骤ST22。

在步骤ST22，视频数据获得部311判断是否从监控终端20提供了视频数据。如果提供了视频数据，则视频数据获得部311进入步骤ST23。如果未提供视频数据，则视频数据获得部311进入步骤ST26。

在步骤ST23，视频数据获得部311对视频数据进行缓冲处理，并进入步骤ST24。在缓冲处理中，视频数据获得部311保持从监控终端20提供的视频数据。而且，视频数据获得部311将所保持的视频数据提供给输出部323。

在步骤ST24，视频数据获得部311判断是否从切换指示部315提供了存储指示信号CR。如果提供了存储指示信号CR，则视频数据获得部311进入步骤ST25。如果未提供存储指示信号CR，则视频数据获得部311进入步骤ST26。

在步骤ST25，视频数据获得部311进行视频数据存储处理，将所保持的视频数据存储在视频数据存储部316中，且进入步骤ST26。

在步骤ST26，视频数据获得部311判断是否从控制部325提供了退出指示。如果未从控制部325指示退出指示，则视频数据获得部311进入步骤ST27。如果从控制部325提供了退出指示，则视频数据获得部311退出该操作。

在步骤ST27，视频数据获得部311判断与监控终端20的会话是否被断开。如果该会话没有被断开，则视频数据获得部311返回步骤ST22。如果该会话被断开，则视频数据获得部311返回步骤ST21，再次建立会话并获得视频数据。

图7是示出元数据获得部的操作的流程图。在步骤ST31，元数据获得部312进行用于获得元数据的处理。换句话说，元数据获得部312向监控终端20请求元数据和/或建立与监控终端20的会话，并进入步骤ST32。

在步骤ST32，元数据获得部312判断是否从监控终端20提供了元数据。如果提供了元数据，则元数据获得部312进入步骤ST33。如果未提供元数据，则元数据获得部312进入步骤ST36。

在步骤ST33，元数据获得部312对元数据进行缓冲处理，并进入步骤ST34。在缓冲处理中，元数据获得部312保持从监控终端20提供的元数据。而且，元数据获得部312将所保持的元数据提供给输出部323。

在步骤ST34，元数据获得部312将所保持的元数据输出给元数据过滤部313，并进入步骤ST35。

在步骤ST35，元数据获得部312将所保持的元数据存储在元数据存储部317中，并进入步骤ST36。

在步骤ST36，元数据获得部312判断是否从控制部325提供了退出指示。如果未从控制部325指示退出指示，则元数据获得部312进入步骤ST37。如果从控制部325提供了退出指示，则元数据获得部312退出该操作。

在步骤ST37，元数据获得部312判断与监控终端20的会话是否被断开。如果该会话没有被断开，则元数据获得部312返回步骤ST32。如果该会话被断开，则元数据获得部312返回步骤ST31，再次建立会话并获得元数据。

图8是示出元数据过滤部的操作的流程图。在步骤ST41，元数据过滤部313判断是否提供了元数据。如果未提供元数据，则元数据过滤部313返回步骤ST41。如果提供了元数据，则元数据过滤部313进入步骤ST42。

在步骤ST42，元数据过滤部313对元数据进行过滤处理，并进入步骤ST43。

在步骤ST43，元数据过滤部313判断是否需要通知过滤处理结果。如果判断出不需要该通知，则元数据过滤部313返回步骤ST41。如果判断出需要该通知，则元数据过滤部313进入步骤ST44。例如，如果判断出不需要输出警告或警报，则元数据过滤部313可以返回到步骤ST41。如果判断出需要输出警告或警报，则元数据过滤部313进入步骤ST44。

在步骤ST44，元数据过滤部313通知过滤处理结果。换句话说，元数据过滤部313将过滤处理结果提供给切换指示部315和/或输出部323，并进入步骤ST45。

在步骤ST45，元数据过滤部313判断是否从控制部325提供了退出指示。如果未从控制部325提供退出指示，则元数据过滤部313返回步骤ST41。如果从控制部325提供了退出指示，则元数据过滤部313退出该操作。

图9是示出切换指示部的操作的流程图。在步骤ST51，切换指示部315判断是否从元数据过滤部313通知了过滤处理结果。如果没有，则切换指示部315返回到步骤ST51。如果通知了过滤处理结果，则切换指示部315进入步骤ST52。

在步骤ST52，切换指示部315判断过滤处理结果的详细内容，并进入步骤ST53。

在步骤ST53，切换指示部315进行用于输出切换指示的处理。换句话说，切换指示部315基于详细内容的判断结果生成并输出切换指示。例如，切换指示部315可以向视频数据获得部311提供存储指示信号CR。存储指示信号CR用于将所获得的视频数据存储在视频数据存储部316中。切换指示部315还向监控终端20提供切换指示信号CA，以使监控终端20创建适于监控的监控影像的视频数据。

在步骤ST54，切换指示部315判断是否从控制部325提供了退出指示。如果未从控制部325提供退出指示，则切换指示部315返回到步骤ST51。如果从控制部325提供了退出指示，则切换指示部315退出该操作。

图10是示出视频数据播放部的操作的流程图。在步骤ST61，视频数据播放部320定义播放位置。换句话说，视频数据播放部320将用户通过用户接口部326所选择的位置定义为播放位置，并进入步骤ST62。

在步骤ST62，视频数据播放部320开始播放操作，并从播放位置开始顺序装载存储在视频数据存储部316中的视频数据，并将该视频数据提供给输出部323。

在步骤ST63，视频数据播放部320通知播放同步部321正播放的视频数据的播放位置，并进入步骤ST64。

在步骤ST64，视频数据播放部320判断视频数据是否结束。如果视频数据没有结束，则视频数据播放部320进入步骤ST65。如果视频数据结束，则视频数据播放部320退出该操作。

在步骤ST65，视频数据播放部320判断是否从控制部325提供了退出指示。如果未从控制部325提供退出指示，则视频数据播放部320返回到步骤ST63。如果从控制部325提供了退出指示，则视频数据播放部320退出该操作。

图11是示出播放同步部的操作的流程图。在步骤ST71，播放同步部321从视频数据播放部320获得视频数据的播放位置，并进入步骤ST72。

在步骤ST72，播放同步部321判断元数据播放部322中的元数据的播放位置，并进入步骤ST73。

在步骤ST73，播放同步部321判断元数据的播放位置是否在视频数据的播放位置后。如果元数据的播放位置在视频数据的播放位置后，则播放同步部321进入步骤ST74。如果元数据的播放位置不在视频数据的播放位置后，则播放同步部321进入步骤ST75。

在步骤ST74，播放同步部321进行用于使播放元数据的位置与播放视频数据的位置同步的播放位置同步处理，并进入步骤ST77。例如，播放同步部321将用于使这两个播放位置同步的同步控制信号CP提供给元数据播放部322，由此可以暂时停止元数据的播放，并且可以当视频数据的播放位置和元数据的播放位置相同时开始元数据的播放。可选地，通过将播放元数据的位置返回到播放视频数据的位置，使这两个播放位置同步。

在步骤ST75，播放同步部321判断元数据的播放位置是否在视频数据的播放位置前。如果元数据的播放位置在视频数据的播放位置前，则播放同步部321进入步骤ST76。如果元数据的播放位置不在视频数据的播放位置前，则播放同步部321进入步骤ST77。

在步骤ST76，播放同步部321进行用于使播放元数据的位置与播放视频数据的位置同步的播放位置同步处理，并进入步骤ST77。换句话说，播放同步部321将同步控制信号CP提供给元数据播放部322，由此可以使播放元数据的位置前进到播放视频数据的位置，并且可以使这两个播放位置同步。

在步骤ST77，播放同步部321判断是否从控制部325提供了退出指示。如果未从控制部325提供退出指示，则播放同步部321返回到步骤ST71。如果从控制部325提供了退出指示，则播放同步部321退出该操作。

图12是示出元数据播放部的操作的流程图。在步骤ST81，元数据播放部322定义播放位置。换句话说，元数据播放部322将用户通过用户接口部326所选择的位置定义为播放位置，并进入步骤ST82。

在步骤ST82，元数据播放部322开始播放操作，并从该播放位置开始顺序装载存储在元数据存储部317中的元数据并将其提供给输出部323。

在步骤ST83，元数据播放部322判断是否从播放同步部321提供了播放同步指示。如果响应于从播放同步部321提供同步控制信号CP而提供了播放同步指示，则元数据播放部322进入步骤ST84。如果未提供播放同步指示，则元数据播放部322进入步骤ST85。

在步骤ST84，元数据播放部322基于来自播放同步部321的播放同步指示，进行用于切换播放操作的处理，并进入步骤ST85。例如，基于同步控制信号CP，元数据播放部322可以切换操作以暂时停止播放操作或使播放位置前进，由此可以使播放元数据的位置与播放视频数据的位置同步。

在步骤ST85，元数据播放部322判断元数据是否结束。如果元数据没有结束，则元数据播放部322进入步骤ST86。如果元数据结束，则元数据播放部322退出该操作。

在步骤ST86，元数据播放部322判断是否从控制部325提供了退出指示。如果未从控制部325提供退出指示，则元数据播放部322返回到步骤ST83。如果从控制部325提供了退出指示，则元数据播放部322退出该操作。

图13是示出输出部的操作的流程图。在步骤ST91，输出部323判断是否设置了监控模式和播放模式中的一种。如果设置了监控模式，则输出部323进入步骤ST92。如果没有设置监控模式，也就是说，如果设置了播放模式，则输出部323进入步骤ST94。

在步骤ST92，输出部323从视频数据获得部311获得视频数据，并进入步骤ST93。在步骤ST93，输出部323从元数据获得部312获得元数据，并进入步骤ST96。

在步骤ST94，输出部323从视频数据播放部320获得视频数据，并进入步骤ST95。在步骤ST95，输出部323从元数据播放部322获得元数据，并进入步骤ST96。

在步骤ST96，输出部323获得在元数据过滤部313中所定义的过滤设置和过滤处理结果，并进入步骤ST97。

在步骤ST97，输出部323进行影像合成处理，并进入步骤ST98。影像合成处理在基于视频数据的监控影像上对基于元数据的影像、过滤设置的影像和/或基于过滤处理结果的影像进行合成。

在步骤ST98，输出部323进行显示输出，将由影像合成处理产生的视频信号输出给影像显示装置，并进入步骤ST99。

在步骤ST99，输出部323判断数据是否结束。如果数据没有结束，则输出部323进入步骤ST100。如果数据结束，则输出部323退出该操作。

在步骤ST100，输出部323判断是否从控制部325提供了退出指示。如果未从控制部325提供退出指示，则输出部323返回到步骤ST91。如果从控制部325提供了退出指示，则输出部323退出该操作。

接着，说明监控系统的操作。监控系统10通过监控设备30获得由监控终端20创建的元数据。监控设备30通过使用所获得的元数据进行过滤处理，并基于过滤处理结果切换监控设备30的操作或监控终端20的操作。

将与表示包括在元数据Dm中的监控对象的信息相对应的过滤设置FS存储在过滤设置存储部314中。例如，如果元数据Dm包括表示是否检测到了活动对象的活动对象检测信息，则用户存储用于检测活动对象检测信息的过滤设置，从而用户可以通过使用该过滤设置获得表示是否检测到了活动对象的过滤处理结果。如果元数据Dm包括表示活动对象的位置的信息，则用户存储表示预先定义的区域的过滤设置，从而用户可以通过使用该过滤设置获得表示活动对象是否进入用户定义的区域的过滤处理结果。可选地，可以定义预先定义的区域外的注意区域，并且可以存储表示该注意区域的过滤设置，从而可以通过使用该过滤设置提供表示活动对象是否接近用户定义的区域的过滤处理结果。如果元数据Dm包括表示温度的信息，则用户可以存储温度的阈值作为过滤设置，从而用户可以通过使用该过滤设置获得表示具有监控终端20的地方的温度是否高于该阈值的过滤处理结果。如果元数据Dm包括表示监控图像的亮度的信息，则用户可以存储亮度的阈值作为过滤设置，从而用户可以通过使用该过滤设置获得表示监控影像的亮度是否低于该阈值的过滤处理结果。而且，如果元数据Dm包括表示用户操作的信息，则可以将预定操作存储为过滤设置，从而可以通过使用该过滤设置提供表示是否进行了预定操作的过滤处理结果。

现在说明基于过滤处理结果FJ切换监控设备30的操作的情况。如果将监控设备30设置成监控模式，则元数据过滤部313对从元数据获得部312提供的元数据Dm进行过滤处理，并将过滤处理结果FJ提供给切换指示部315和输出部323。如果基于过滤处理结果FJ判断出需要存储监控影像，则切换指示部315向视频数据获得部311提供存储指示信号CR，并使视频数据存储部316存储所获得的视频数据。输出部323基于过滤处理结果FJ输出警告和/或警报。

如果将切换指示部315设置成动态警报模式，并且当过滤处理结果表示检测到了活动对象时，切换指示部315向视频数据获得部311提供存储指示信号CR，并使视频数据存储部316存储由视频数据获得结果311所获得的视频数据。

如果过滤处理结果表示检测到了活动对象，通过以这种方式配置成将视频数据存储在视频数据存储部316中，可以将检测到活动对象期间的视频数据存储在视频数据存储部316中。因而，由于未将不需要检查活动对象期间的视频数据存储在视频数据存储部316中，因而可以将视频数据有效地存储在视频数据存储部316中。

如果将切换指示部315设置成最小化模式，并当过滤处理结果表示活动对象的位置接近或在用户预先定义的区域内时，切换指示部315向视频数据获得部311提供存储指示信号CR，并使视频数据存储部316存储由视频数据获得部311所获得的视频数据。

如果过滤处理结果表示活动对象的位置接近或在用户预先定义的区域内，通过以这种方式将视频数据存储在视频数据存储部316中，视频数据存储部316可以存储由于活动对象的位置接近用户预先定义的区域而需要输出警告期间的视频数据，或者可以存储由于活动对象的位置处于用户预先定义的区域内而需要输出警报期间的视频数据。因此，由于可以仅将输出警告或警报的状态的视频数据存储在视频数据存储部316中，因而可以将视频数据更有效地存储在视频数据存储部316中。

通过在活动对象的位置接近用户预先定义的区域时开始存储视频数据，之后，当由于活动对象的位置处于用户预先定义的区域内而输出警报时，可以检查紧挨在输出警报之前的监控影像。

而且，如下所述，可以通过切换指示部315指示切换监控终端20的成像操作，以获得适于监控的监控影像。在这种情况下，例如，当活动对象的位置接近用户预先定义的区域时，可以进行视频数据的存储和/或用于切换成像操作的指示。这里，如果当活动对象的位置处于用户预先定义的区域内时要进行成像操作的切换和/或视频数据的存储，其中活动对象的位置处于用户预先定义的区域内会导致输出警报，则由于切换成像操作而不能存储输出警报时的监控影像。然而，通过配置成在活动对象的位置接近用户预先定义的区域时进行视频数据的存储和/或用于切换成像操作的指示，之后，当活动对象的位置处于用户预先定义的区域内时，可以提供适于监控的监控影像。因此，可以将输出警报时的监控影像存储为适于监控的影像。

接着，说明基于过滤处理结果进行显示切换操作的情况。监控模式下的输出部323基于从视频数据获得部311提供的视频数据Dv、从元数据获得部312提供的元数据Dm、或从元数据过滤部313提供的过滤设置FS，生成监控影像、元数据和过滤设置中的一种，或者生成用于将它们的合成显示在显示装置的屏幕上的显示信号VS。输出部323还基于元数据过滤部313的过滤处理结果FJ切换显示。

图14A～14C分别示出监控影像、元数据的影像和过滤设置的影像。图14A是基于视频数据的监控影像。图14B示出元数据的影像，如果元数据中包括活动对象位置信息，则图14B包括基于活动对象位置信息的活动对象位置表示HP。虚线表示活动对象MB。图14C示出过滤设置的影像。基于是否要输出警告和/或警报而分成梯形区域PA和具有相对于边界LN的箭头的区域PB。

输出部323对监控影像、元数据的影像和过滤设置的影像进行合成，生成并输出图15A中所示的合成影像的显示信号VS。如果过滤处理结果表示活动对象MB移动并且活动对象MB的位置接近用户预先定义的区域，则输出部323切换显示，并输出作为监控结果的警告。由于可以基于活动对象位置信息判断活动对象MB的位置，因而例如如图15B所示，当活动对象MB接近区域PB时，可以在活动对象MB的位置处显示作为矩形虚线表示的警告HW。当过滤处理结果表示活动对象MB的位置处于用户预先定义的区域内时，输出部323切换显示并输出作为监控结果的警报。例如，如图15C所示，当活动对象MB进入区域PB时，在活动对象MB的位置处显示作为矩形框表示的警报HA。而且，如图15D所述，当活动对象MB进入区域PA时，在活动对象MB的位置处显示作为矩形框表示的警报HA。通过用图形显示作为监控结果的警告HW或警报HA，可以基于显示信号VS从影像中容易且正确地识别监控结果。

当过滤处理结果与例如温度、亮度或异常操作有关时，输出部323可以通过文本或用图形输出与该信息有关的警告和/或警报。

接着，说明将监控设备30设置成播放模式的情况。元数据过滤部313对从元数据播放部322提供的元数据Dmp进行过滤处理，并将过滤处理结果FJ提供给输出部323。输出部323基于从视频数据播放部320提供的视频数据Dvp、从元数据播放部322提供的元数据Dmp或从元数据过滤部313提供的过滤设置FS，生成监控影像、元数据和过滤设置中的一个，或生成用于将它们的合成显示在显示装置的屏幕上的显示信号VS。输出部323还基于元数据过滤部313的过滤处理结果FJ切换显示。

视频数据播放部320从用户所选择的位置开始播放视频数据，并将从视频数据存储部316装载的视频数据Dvp提供给输出部323。由于设置了播放同步部321，因而可以通过元数据播放部322从元数据存储部317装载与视频数据Dvp同步的元数据，并将该元数据提供给输出部323。

输出部323通过对所播放的监控影像、所播放的元数据影像和过滤设置影像进行合成，生成并输出显示信号VS。这里，当过滤处理结果表示活动对象的位置接近或处于用户预定定义的区域内时，输出部323以与监控模式下的方式相同的方式输出警告或警报。

为了判断是否进行了异常操作，输出部323可以基于在用户进行过滤设置时的元数据过滤部313的过滤处理结果，在进行异常操作的位置处输出警告或警报。而且，输出部323可以基于例如用户定义的文本信息，在包括与进行对元数据的过滤处理时的元数据相对应的信息的位置处，输出警告或警报。

当进行对元数据的过滤处理时，即使改变关于监控对象的信息和/或增加关于监控对象的信息类型的数量，也可以仅通过定义过滤设置和与该过滤设置的过滤处理结果相对应的切换指示，通过使用关于监控对象的各种信息容易地进行各种各样的监控操作。

定义各种过滤设置可以进行各种各样的通知。例如，如上所述，当活动对象接近预先定义的区域时，可以输出警告，而当活动对象进入该区域时，可以输出警报。因此，可以容易地进行详细的监控操作。

而且，由于元数据以标记语言描述关于监控对象的信息，因而元数据过滤部和/或元数据播放部可以仅需具有读取标记语言的功能。这样就不需要对每种格式的元数据设置元数据过滤部和/或元数据播放部，从而简化了监控设备的结构。而且，由于可以不依赖于元数据的格式而播放关于监控对象的所期望的信息或对该信息进行过滤处理，因而可以与监控影像同步播放各种元数据。

在被设置成播放模式的监控设备30中，视频数据播放部320从用户所选择的位置开始播放视频数据，元数据播放部322播放与视频数据Dvp同步的元数据。然而，元数据存储部317可以存储关于监控对象的各种信息，并且元数据播放部322可以播放所存储元数据的信息。因此，元数据播放部322可以播放用户所选择的信息，并且视频数据播放部320可以播放与将播放的元数据的信息同步的视频数据。在这种情况下，元数据播放部322将所播放的元数据的播放位置通知给播放同步部321。播放同步部321向视频数据播放部320提供同步控制信号，并控制视频数据播放部320的操作，使得从元数据播放部322所通知的播放位置和视频数据播放部320播放存储在视频数据存储部316中的视频数据的位置同步。

这不仅允许用户通过选择播放视频数据的位置来检查监控影像，而且还允许用户选择和播放元数据的所期望的信息。因此，可以自动播放与该信息同步的监控影像，以检查监控影像。通过选择和播放所期望的信息，可以输出基于所播放的信息的警告和/或警报。在监控模式和/或播放模式下输出警告和/或警报不局限于输出部的图形显示，而还可以通过声音输出警告和/或警报、或通过使用发光元件等指示器显示警告和/或警报。

顺便提及，不仅可以在监控设备30上，而且还可以在监控终端20上，进行基于过滤处理结果的操作切换。下面简要说明基于过滤处理结果在监控终端20上进行操作切换的情况。

元数据过滤部313对从元数据获得部312提供的元数据Dm进行过滤处理，并将过滤处理结果FJ提供给切换指示部315。切换指示部315基于过滤处理结果FJ，生成切换指示信号CA并将该切换指示信号CA提供给监控终端20。这里，切换指示部315切换监控终端20的操作，使得例如监控影像的帧频可以很高。在这种情况下，由于监控影像的时间间隔短，因而可以以精细的时间间隔监控活动对象的移动。由于当未检测到活动对象时监控影像的帧频低，因而从监控终端20向监控设备30提供视频数据的次数少。因此，可以防止由于使用多个监控终端20增加了网络40的通信量而引起的从监控终端20向监控设备30提供视频数据的延迟。由于切换指示部315可以切换成低压缩比，这可以减轻监控影像质量的劣化。因此，可以在高质量影像上检查活动对象。由于当未检测到活动对象时压缩比高，因而可以防止由于使用多个监控终端20增加了网络40的通信量而引起的从监控终端20向监控设备30提供视频数据的延迟。

如果过滤处理结果表示监控影像过亮或过暗，则切换指示部315通过成像操作切换部22控制镜头部211、成像部212或成像信号处理部213的操作，由此生成切换指示信号CA，并将该信号提供给监控终端20，以获得具有所期望亮度的监控影像。通过以这种方式生成切换指示信号CA，从监控终端20提供的监控影像可以自动具有适当的亮度。

如果过滤处理结果表示进行了异常操作，则切换指示部315通过成像操作切换部22，控制镜头部211的动作和/或成像方向，由此生成切换指示信号CA，并将该信号提供给监控终端20，以在进行了异常操作的方向上获得监控影像。通过以这种方式生成切换指示信号CA，可以有效地使用监控终端20，并且可以提供适于监控的监控影像。

如上所述，通过基于元数据的过滤处理结果切换监控终端20的操作，可以自动获得适于监控的监控影像。而且，使用元数据的过滤处理结果，即使当改变和/或添加关于监控对象的信息时，也可以仅通过根据过滤设置和使用该过滤设置的过滤处理结果生成切换指示信号CA，基于监控对象的改变后的信息和/或添加的信息，自动提供最佳的监控影像。

本领域的技术人员应该理解，根据设计需要和其它因素可以发生各种修改、组合、子组合和改变，只要它们在所述权利要求书或与其等同物的范围内即可。

本发明包含与2006年4月3日在日本专利局提交的日本专利申请JP 2006-102291有关的主题，其全部内容通过引用包括在此。

Claims (9)

1.一种监控设备，其包括：

视频数据获得部，用于从监控终端获得视频数据；

元数据获得部，用于从所述监控终端获得描述关于监控对象的信息的元数据；

过滤设置存储部，用于存储过滤设置；

元数据过滤部，用于通过使用存储在所述过滤设置存储部中的过滤设置，对所述元数据进行过滤处理；以及

输出部，用于基于通过在所述元数据过滤部中进行过滤处理而获得的过滤处理结果，输出监控结果。

2.根据权利要求1所述的监控设备，其特征在于，所述输出部通过使用基于所述视频数据获得部所获得的视频数据的影像、基于所述元数据获得部所获得的元数据的影像和示出所述元数据过滤部所使用的过滤设置的影像中的一个影像、或由合成多个影像所产生的影像，输出显示所述监控结果的影像。

3.根据权利要求1所述的监控设备，其特征在于，还包括：

视频数据存储部，用于存储所述视频数据；

元数据存储部，用于存储所述元数据；

视频数据播放部，用于播放存储在所述视频数据存储部中的视频数据；

元数据播放部，用于播放存储在所述元数据存储部中的元数据；以及

播放同步部，用于使所述元数据播放部播放与所述视频数据播放部所播放的视频数据同步的元数据，以便一起播放所述视频数据和所述元数据，

其中，所述元数据过滤部通过使用存储在所述过滤设置存储部中的过滤设置，对所述元数据播放部所播放的元数据进行过滤处理；以及

所述输出部通过使用基于所述视频数据播放部所播放的视频数据的影像、基于所述元数据播放部所播放的元数据的影像和示出所述元数据过滤部中所使用的过滤设置的影像中的一个影像、或由合成多个影像所产生的影像，输出显示所述监控结果的影像。

4.根据权利要求3所述的监控设备，其特征在于，所述视频数据获得部基于通过在所述元数据过滤部中进行过滤处理而获得的过滤处理结果，使所述视频数据存储部存储所获得的视频数据。

5.根据权利要求1所述的监控设备，其特征在于，所述视频数据获得部和所述元数据获得部通过网络从所述监控终端获得所述视频数据和所述元数据。

6.根据权利要求1所述的监控设备，其特征在于，在所述元数据中以标记语言描述与监控对象有关的信息。

7.根据权利要求1所述的监控设备，其特征在于，所述与监控对象有关的信息具有表示是否检测到了活动对象的活动对象检测信息和/或表示所检测到的活动对象的位置的活动对象位置信息。

8.根据权利要求1所述的监控设备，其特征在于，所述与监控对象有关的信息具有表示所述监控终端所监控的区域的状态的信息。

9.一种监控方法，其包括以下步骤：

获得视频数据；

获得元数据；

通过使用过滤设置对所述元数据进行过滤处理；以及

基于通过在进行元数据过滤处理的步骤中进行过滤处理而获得的过滤处理结果，输出监控结果。

Images