CN101895727B - 监视系统、摄像设备、分析设备和监视方法 - Google Patents

Abstract

本发明公开了监视系统、摄像设备、分析设备和监视方法。提供一种监视系统，它包括摄像设备，所述摄像设备包括根据从拍摄对象的图像的摄像部分输入的图像数据，进行分析处理，并生成第一元数据的基础分析部分，和通过网络把第一元数据和不同于第一元数据的第二元数据输出给与网络连接的监视设备的第一元数据输出部分，和分析设备，所述分析设备包括根据从摄像设备接收的图像数据，进行与基础分析部分不同的分析处理，并生成第二元数据的扩展分析部分，和把第二元数据输出给摄像设备的第二元数据输出部分。

Description

监视系统、摄像设备、分析设备和监视方法

技术领域

本发明涉及监视系统，摄像设备，分析设备和监视方法。

背景技术

存在一种包括具有有线或无线LAN功能的监视照相机(下面也称为“IP照相机”)和控制并监视多台IP照相机的监视设备(下面也称为“中央服务器”)的监视系统，IP照相机和中央服务器通过网络相互连接。在该监视系统中，IP照相机通过网络把拍摄的图像数据传送给中央服务器。中央服务器记录接收的图像数据，通过分析图像数据检测异常的发生，并输出报警。这样，在检查显示在监视器上的图像数据和由中央服务器输出的报警的细节的时候，观察人员能够进行监视。

日本专利No.4148285公开一种与当监视设备监视图像数据，和输出报警时的对象识别有关的技术。

发明内容

在监视系统中，存在其中IP照相机包括分析处理部分(例如，运动对象检测处理部分)和IP照相机产生元数据和事件，以便把处理分散在整个系统内的情况。

在监视中心(中央服务器)中，观察人员在线或离线地监视每台IP照相机的图像。近年来，观察人员只监视从均具有分析功能的IP照相机获得的分析结果(元数据或事件)，以便容易地监视许多照相机。

但是，当仅仅依据IP照相机中的资源(CPU性能，存储器大小等)进行分析处理时，难以进行充分的处理。为了使每台IP照相机进行分析处理，要求IP照相机具有诸如高性能CPU和存储器之类的硬件。

目前，尽管在IP照相机中进行诸如运动对象检测之类的简单处理，不过在IP照相机中未进行使用大量存储器的诸如面部识别，车辆识别和匹配处理之类的复杂处理。

鉴于上面所述，希望提供一种能够在包括摄像设备的监视系统中高效进行分析处理的新的改进监视系统、摄像设备、分析设备和监视方法。

按照本发明的一个实施例，提供一种监视系统，它包括摄像设备和分析设备，所述摄像设备包括根据从拍摄对象的图像的摄像部分输入的图像数据，进行分析处理，并生成第一元数据的基础分析部分，和通过网络把第一元数据和不同于第一元数据的第二元数据输出给与网络连接的监视设备的第一元数据输出部分，所述分析设备包括根据从摄像设备接收的图像数据，进行与基础分析部分不同的分析处理，并生成第二元数据的扩展分析部分，和把第二元数据输出给摄像设备的第二元数据输出部分。

监视系统可包括多个摄像设备。分析设备还可包括合成根据来自一个摄像设备的图像数据生成的第二元数据，和根据来自另一个摄像设备的图像数据生成的第二元数据的元数据合成部分，第二元数据输出部分把合成的元数据输出给所述一个摄像设备。

分析设备可包括多个扩展分析部分，每个扩展分析部分进行不同的分析处理和产生不同的第二元数据，分析设备还包括合成由每个扩展分析部分生成的第二元数据，从而生成合成元数据的元数据合成部分，第二元数据输出部分可把合成的元数据输出给摄像设备。

按照本发明的一个实施例，提供一种摄像设备，它包括根据从拍摄对象的图像的摄像部分输入的图像数据，进行分析处理，从而生成第一元数据的基础分析部分，和通过网络把第一元数据和第二元数据输出给与网络连接的监视设备的第一元数据输出部分，所述第二元数据是通过根据从摄像设备接收的图像数据，进行与基础分析部分不同的分析处理，在分析设备中的扩展分析部分中生成的。

摄像设备还可包括合成第一元数据和第二元数据，从而生成合成元数据的元数据合成部分。第一元数据输出部分可把合成的元数据输出给监视设备。

按照本发明的一个实施例，提供一种分析设备，它包括从具有基础分析部分和第一元数据输出部分的多个摄像设备接收图像数据，并根据接收的图像数据进行不同于基础分析部分的分析处理，从而生成第二元数据的扩展分析部分，和把第二元数据输出给摄像设备的第二元数据输出部分，所述多个摄像设备的基础分析部分根据从拍摄对象的图像的摄像部分输入的图像数据，进行分析处理并生成第一元数据，第一元数据输出部分通过网络把第一元数据和不同于第一元数据的第二元数据输出给与网络连接的监视设备。

分析设备还可包括合成根据来自一个摄像设备的图像数据生成的第二元数据，和根据来自另一个摄像设备的图像数据生成的第二元数据的元数据合成部分。第二元数据输出部分把合成的元数据输出给摄像设备。

分析设备可包括多个扩展分析部分，每个扩展分析部分进行不同的分析处理和产生不同的第二元数据，分析设备还包括合成由每个扩展分析部分生成的第二元数据，从而生成合成元数据的元数据合成部分，第二元数据输出部分把合成的元数据输出给摄像设备。

按照本发明的一个实施例，提供一种监视方法，包括下述步骤：由摄像设备根据从拍摄对象的图像的摄像部分输入的图像数据，进行分析处理，并生成第一元数据，由分析设备根据从摄像设备接收的图像数据进行分析处理，并生成不同于第一元数据的第二元数据，由分析设备把第二元数据输出给摄像设备，和由摄像设备通过网络把第一元数据和第二元数据输出给与网络连接的监视设备。

按照本发明的一个实施例，在包括摄像设备的监视系统中，能够高效地进行分析处理。

附图说明

图1是图解说明按照本发明的一个实施例的监视系统的结构和连接例子的说明图；

图2是图解说明中央服务器10，IP照相机100和分析服务器130之间的关系的连接框图；

图3是图解说明IP照相机100和分析服务器130之间的能力交换的例子的流程图；

图4是图解说明按照实施例的监视系统中的检测处理的流程图；

图5是图解说明按照实施例的IP照相机100的方框图；

图6是图解说明按照实施例的分析服务器130的方框图；

图7是图解说明使用按照实施例的监视系统的分析服务器130的检测处理的操作的流程图；

图8是图解说明IP照相机130的安装例子的说明图；

图9是图解说明由每台IP照相机100拍摄的人物Obj1和车辆Obj2的拍摄图像例子的说明图；

图10是图解说明按照实施例的多台IP照相机100和分析服务器130的方框图；

图11是图解说明与按照实施例的多台IP照相机100和分析服务器130之间的协作有关的操作的流程图；以及

图12是图解说明显示在监视器12或屏幕上的观察器180的说明图。

具体实施方式

下面参考附图，详细说明本发明的优选实施例。注意，在说明书和附图中，实质上具有相同功能和结构的结构元件用相同的附图标记表示，这些结构元件的重复说明被省略。

将按照下述顺序进行说明：

1.实施例

1-1.监视系统的结构

1-2.利用IP照相机100和分析服务器130的分析处理方法

1-3.分析服务器130的元数据生成方法

1-4.监视系统中的检测处理

1-5.监视系统中的利用分析服务器130的检测处理

1-6.IP照相机100和分析服务器130之间的协作方法

1-7.多台IP照相机100和分析服务器130之间的关系

1-8.与多台IP照相机100和分析服务器130之间的协作有关的操作

1-9.关于观察器

1-10.实施例的效果

<1.实施例>

[监视系统的结构]

首先，说明按照本发明的实施例的监视系统的结构。图1是图解说明按照实施例的监视系统的结构和连接例子的说明图。

按照实施例的监视系统例如包括多台IP照相机100，分析服务器130，在中央控制IP照相机100的中央服务器10，监视器12，能够访问中央服务器10的客户端30，中继来自IP照相机100的数据的代理服务器20，用于传送数据的网络等等。IP照相机100是摄像设备的一个例子，分析服务器130是分析设备的一个例子。中央服务器是监视设备的一个例子。

作为现有技术的改进，考虑监视系统中的一部分分析处理被分配给外部分析服务器。不过，即使当使用外部服务器时，为了响应每个服务器的负载，以及能够连接的照相机的数目的增大，也希望高效地降低分析服务器的负载。于是，在本实施例中，向监视系统中增加了补充IP照相机100的资源的分析服务器130。分析服务器130直接与多台IP照相机100连接，起当从中央服务器10看时，好像中央服务器10只与IP照相机100连接的作用。

本实施例的特征在于通过根据多台IP照相机100的安装信息，在分析服务器130中合成在每台IP照相机100中产生的分析处理结果，并把合成的结果返回给IP照相机100，中央服务器10能够接收元数据和事件，好像所述元数据和事件是由进行所有处理的一台IP照相机100生成似的。

[使用IP照相机100和分析服务器130的分析处理方法]

首先，说明使用IP照相机100和分析服务器130的分析处理方法。

IP照相机100是按照IP(网际协议)与网络连接的照相机。

在本说明书中，与观察人员直接监视的，其上安装可显示的观察器的监视器12连接的服务器被称为“中央服务器10”。中央服务器10能够通过观察器监视所有的IP照相机100，并且能够用包括在中央服务器10中的记录器管理所有照相机的记录数据。

为每几个IP照相机100提供分析服务器130，分析服务器130进行不包括在IP照相机100中的分析处理。

代理服务器20以组的形式管理一些IP照相机100，并在中央服务器10和IP照相机100之间中继数据。

观察人员从中央服务器10向每台IP照相机100发送检测请求，并通过观察器监视来自IP照相机100的元数据和事件。此时，观察人员(中央服务器10)不必知道分析服务器130的存在。中央服务器10认为中央服务器10直接连接到IP照相机100。观察人员可利用客户端30进行诸如监视之类的操作。

图2图解说明服务器之间的关系。图2是图解说明中央服务器10，IP照相机100和分析服务器130之间的关系的连接框图。这里，为了简单起见，将省略代理服务器20的描述。代理服务器20位于中央服务器10和IP照相机100之间，作为其基本功能，具有传送检测请求和元数据的作用。

依据来自用户的指令，中央服务器10利用GUI(图形用户界面)或命令，向IP照相机100发送与所述指令对应的检测请求。IP照相机100按照所述指令，把检测结果作为元数据传送给中央服务器10。作为普通的监视功能，IP照相机拍摄的图像数据被传送给中央服务器10。从中央服务器10还向IP照相机100传送除检测请求之外的照相机控制命令等。

从IP照相机100传送的元数据的格式是预定的。例如，使用二进制格式或XML格式。就传送的内容来说，当检测到人物时，传送如表1中描述的元数据。

[表1]

名称	含义
		检测ID	序号
外接矩形	外接目标对象的框架(上边缘，下边缘，右边缘，左边缘)
		头部位置	头部的位置(x，y)
头部定向	头部的定向(滚转，俯仰，偏转)
		面部五官的位置	眼睛、鼻子和嘴的位置
面部分数	检测期间计算的脸属性(faceness)
		面部属性	与面部相关的属性，比如男性/女性，种族，年龄，微笑等
识别特征量	颜色，图像特征(边缘模式等)，和通过与其它元数据比较，用于识别的特征量。

按照类似的方式，当检测到车辆时，传送诸如运动方向，颜色，车辆种类和牌照号之类的元数据。此外，例如，当通过分析元数据，规则引擎确定诸如对象进入某一区域，或者对象经过某一虚拟线之类的事件时，传送该事件。

由于CPU、存储器等的限制，目前的IP照相机难以具有能够在一台照相机中处理如上所述的所有元数据的分析处理功能。例如在目前，在IP照相机中包括检测在显示屏幕中移动的部分的运动对象检测功能。但是，由于资源不足，IP照相机难以包括上述功能之外的功能。

[分析服务器130的元数据生成方法]

下面说明利用补充IP照相机100的能力的分析服务器130的元数据生成方法。

如图2中所示，IP照相机100返回响应来自中央服务器100的请求的元数据。此时，IP照相机100与分析服务器130交换能力。分析服务器130进行IP照相机100没有能力进行的分析处理，IP照相机100从分析服务器130接收分析处理的结果，IP照相机100把结果作为元数据返回给中央服务器10。

可以事先在IP照相机100和分析服务器130之间交换指示包括何种能力的信息。例如，按照如图3中图解说明的方式，能够进行能力交换。图3是图解说明IP照相机100和分析服务器130之间的能力交换的例子的流程图。图3图解说明其中在软件程序之间使用SOAP的例子，SOAP是一种用于交换消息(对象)的协议。

首先，分析服务器130呼叫IP照相机100(步骤S101)，IP照相机100响应该呼叫(步骤S102)。随后，在步骤S102，分析服务器130对应答所述呼叫的IP照相机100作出响应。

[监视系统中的检测处理]

下面说明按照实施例的监视系统中的检测处理。图4是图解说明按照实施例的监视系统中的检测处理的流程图。

首先，中央服务器10向IP照相机100发送检测请求(步骤S111)。随后，IP照相机100分析该请求(步骤S112)。通过分析该请求，IP照相机100确定IP照相机本身是否能够响应该请求(步骤S113)。如果能够响应该请求，那么IP照相机100独自响应该请求(步骤S121)。

另一方面，如果不能响应该请求，那么IP照相机100搜索分析服务器130(步骤S114)。当IP照相机100不能找到分析服务器130时(步骤S115)，IP照相机100利用只包括在IP照相机100中的能力创建和返回元数据(步骤S121)。这种情况下，元数据的不足部分被清空或者被忽略，并传送元数据。

当IP照相机100能够找到分析服务器130时(步骤S115)，IP照相机100与分析服务器130交换能力(步骤S116)。当分析服务器130没有能力进行所请求的处理时，例如，当所请求的处理不同于分析服务器130能够进行的处理(关于人或者关于车辆的处理)时(步骤S117)，IP照相机100使用只包括在IP照相机100中的能力创建和返回元数据。这种情况下，元数据的不足部分被清空或者被忽略，并传送元数据。

另一方面，当分析服务器130有能力进行所请求的处理时，进行检测处理(步骤S118)。下面说明利用分析服务器130的检测处理。

[利用监视系统中的分析服务器130的检测处理]

下面说明利用按照实施例的监视系统中的分析服务器130的检测处理。图5是图解说明按照实施例的IP照相机100的方框图。图6是图解说明按照实施例的分析服务器130的方框图。为了简单起见，将主要描述IP照相机100和分析服务器130之间的关系。在图5和6中，以及当参考图5和6描述处理时，“...A”表示IP照相机100进行处理，“...B”表示分析服务器130进行处理，“...C”表示数据被合成。每次元数据或事件经过功能块(“...部分”)时，添加到元数据和事件尾部的数字被递增，不过，元数据或事件基本上是相同的数据，与尾部数字无关。

来自中央服务器10的检测请求被发送给IP照相机100的分析控制部分102。分析控制部分102按照所述请求，向基础分析部分104和照相机-服务器通信部分A106发送控制信号。

当分析控制部分102确定需要分析服务器130时，照相机-服务器通信部分A与分析服务器130交换能力，获得保存在分析服务器130的分析服务器能力数据部分中的分析服务器能力。除非检测请求发生变化，否则不必再次交换能力。获得的分析服务器能力被记录在分析服务器能力数据存储部分108中。IP照相机100与具有适合于检测请求的分析服务器能力的分析服务器130通信。

经过由诸如透镜、图像传感器(例如，CMOS图像传感器和CCD图像传感器)之类光学系统构成的摄像部分，输入图像被发送给基础分析部分104。基础分析部分104通过例如进行运动对象检测处理，利用输入的图像生成元数据A1。此时，例如，在上面说明的表1中的元数据中，通过运动对象检测处理获得外接矩形的信息。

在IP照相机100的基础分析部分104中产生的元数据A1被传送给照相机-服务器通信部分A106。IP照相机100中的照相机-服务器通信部分A106向分析服务器130中的照相机-服务器通信部分B132传送数据/从照相机-服务器通信部分B132接收数据。

IP照相机100把图像数据、照相机状态、元数据A2、控制命令A1等传送给分析服务器130。图像数据是输入图像。输入图像可被转换成JPEG等，图像的大小可被改变。照相机状态指示例如照相机的当前摇摄/俯仰/变焦值。元数据A2指示在IP照相机100的基础分析部分104中生成的元数据。控制命令A1指示用于分析服务器130中的分析的参数。

分析服务器130把元数据B2、事件B2和控制命令B1传送给IP照相机100。元数据B2是在分析服务器130的扩展分析部分136中生成的元数据。例如，扩展分析部分136进行面部检测处理，并产生诸如头部位置、头部定向、面部五官的位置、面部分数(它们是在上表1中描述的元数据)之类的信息。通过面部分析处理，获得诸如男性/女性和年龄之类的面部属性。此外，获得用于面部匹配处理的面部特征量。

事件B2是根据元数据B1是否遵守某一规则而生成的信息。规则引擎部分B138通过应用诸如对象进入图像中的某一区域，或者对象通过某一虚拟线之类的规则，产生事件B1，和根据对象是否遵守所述规则产生事件B1。在本实施例中，事件生成和事件处理不是必不可少的功能。

控制命令B1例如是当进行跟踪处理时，改变IP照相机100的摇摄/俯仰/变焦功能的命令。跟踪处理是其中IP照相机100利用机构控制功能跟踪对象的处理。

元数据合成部分112通过合成从分析服务器130传送给IP照相机100的元数据B3，和从IP照相机100中的基础分析部分104获得的元数据A1，生成元数据C。元数据C被传送给元数据通信部分114(第一元数据输出部分)，并作为元数据流被传送给中央服务器10。可不在IP照相机100中合成元数据A1和元数据B3，而是单独传送它们，然后可在中央服务器10中合成元数据A1和元数据B3。

元数据C由规则引擎部分A116转换成事件A1，并作为事件流由事件通信部分118传送给中央服务器10。输入图像在图像通信部分122中被转换，并作为图像流被传送给中央服务器10。

中央服务器10利用GUI等显示每个接收的流，从而以报警的形式向用户显示，并记录数据/图像。

图5图解说明IP照相机100与中央服务器10连接的网络不同于IP照相机100与分析服务器130连接的网络。换句话说，在图5中，为了澄清每个服务器的功能的作用，每个服务器的功能被图解表示成独立的功能块。不过，实施例并不局限于这种结构。例如，IP照相机100可被安装成以致通过把传输地址切换成中央服务器10的地址或者分析服务器130的地址，使IP照相机100通过相同的功能块与中央服务器10连接，或者与分析服务器130连接。具体地说，图像通信部分122和元数据通信部分114的功能可被包括在照相机-服务器通信部分A106中，从而它们可被集成到一个功能块中。

下面，说明利用按照实施例的监视系统的分析服务器130的检测处理的操作。图7是图解说明利用按照实施例的监视系统的分析服务器130的检测处理的操作的流程图。

图7是图解说明图4中的步骤S118中的检测处理的流程图。图7主要图解说明元数据的流动。于是将省略与规则引擎部分A116和规则引擎部分B138相关的描述。

在IP照相机100中，IP照相机100的基础分析部分104进行分析处理，随后进行检测处理(步骤S131)。基础分析部分104生成元数据A1(步骤S132)。

之后，与检测源信息相关的必要信息从IP照相机100的照相机-服务器通信部分A106被传送给分析服务器130的照相机-服务器通信部分B132(第二元数据输出部分)(步骤S141)。这里，所述必要信息包括图像数据，照相机状态，元数据A2和控制命令A1。

在IP照相机100和分析服务器130中并行进行检测处理。

在分析服务器130中，扩展分析部分136进行分析处理，随后进行检测处理(步骤S142)。扩展分析部分136生成元数据B1(步骤S143)。分析服务器130把在扩展分析部分136中生成的元数据B1传送给照相机-服务器通信部分B132，和把来自照相机-服务器通信部分B132的元数据B2传送给IP照相机100(步骤S144)。

之后，在IP照相机100中，元数据合成部分112通过合成元数据A1和元数据B3，生成元数据C(步骤S133)。元数据A1和元数据B3可以不在IP照相机100中被合成，而是在中央服务器10中被合成。

IP照相机100把元数据C传送给中央服务器10(步骤S134)。对每个处理帧进行上述操作。处理帧可包括相同数目的普通图像帧，或者可包括数目适当减少的图像帧。

[IP照相机100和分析服务器130之间的协作方法]

下面说明当相互连接多个IP照相机100和分析服务器130时的高效协作方法。图8是图解说明IP照相机100的安装例子的说明图。在图8中，沿警戒区的外围布置多个IP照相机100(这里，由IP照相机100-1，IP照相机100-2和IP照相机100-3组成的三个IP照相机)。

图9是图解说明由每台IP照相机100拍摄的人物Obj1和车辆Obj2的拍摄图像例子的说明图。

当对IP照相机100进行位置校准时，可以计算每台IP照相机100拍摄的运动区域是否相同。替换地，通过参照目标对象的颜色信息和形状信息，能够识别目标对象。利用上面的事实，使基于来自IP照相机100-3的图像数据，在扩展分析部分136中生成的元数据与基于IP照相机100-1的元数据合成。结果，能够输出如图9a-1中所示的太小以至于不能在IP照相机100-1中获得面部属性的目标对象(人物Obj1)的面部属性，作为IP照相机100-1的元数据。

如上所述，中央服务器10表现得好像它只与IP照相机100连接似的。这是因为由分析服务器130和IP照相机100-3生成，并且难以由IP照相机100-1生成的元数据能够仿佛是由IP照相机100-1生成似的被输出。

按照类似的方式，例如，即使当目标对象(车辆Obj2)在图像中太小，如图9b-1中所示，以至难以识别牌照号码时，通过利用分析服务器130和IP照相机100-3，也能够生成被增加牌照号码信息的元数据，并从IP照相机100-1输出该元数据。

[多台IP照相机100和分析服务器130之间的关系]

下面说明按照实施例的多台IP照相机100和分析服务器130之间的关系。图10是图解说明按照实施例的多台IP照相机100和分析服务器130的方框图。在图10的例子中，说明其中有三台IP照相机100的情况，所述三台IP照相机100是第一照相机100-1，第二照相机100-2和第三照相机100-3。安装的IP照相机100的数目并不局限于在图10中图解说明的例子中的IP照相机100的数目。

第一照相机100-1(同样地，第二照相机100-2，第三照相机100-3)的基础分析部分104生成元数据A1-1(元数据A1-2，元数据A1-3)。

照相机-服务器通信部分A106接收生成的元数据A1-1(元数据A1-2，元数据A1-3)，图像数据等，并把元数据A2-1(元数据A2-2，元数据A2-3)，图像数据等传送给分析服务器130。照相机-服务器通信部分A106从分析服务器130接收由分析服务器130生成的元数据E2。

分析服务器130的照相机-服务器通信部分B132从每台IP照相机100(第一照相机100-1，第二照相机100-2，第三照相机100-3)接收元数据A2(元数据A2-1，元数据A2-2，元数据A2-3)和图像数据。照相机-服务器通信部分B132向每台IP照相机100传送元数据E2。

分析服务器130的照相机协作信息部分142事先从IP照相机100接收诸如每台IP照相机100(第一照相机100-1，第二照相机100-2，第三照相机100-3)的位置校准数据之类的协作信息，并保存所述协作信息。

识别部分144根据来自IP照相机100的元数据，确定由每台IP照相机100生成的元数据代表的目标对象是否彼此相同。

扩展分析部分(N)136-N进行诸如人物检测、面部检测和面部鉴别之类的分析处理，并生成元数据B1。扩展分析部分(N)136-N表示各个功能块的每个扩展分析部分具有彼此不同的功能。例如，扩展分析部分(1)136-1具有人物检测的功能，扩展分析部分(2)136-2具有面部检测的功能，扩展分析部分(3)136-3具有面部鉴别的功能，等等。

元数据合成部分B148合成根据来自IP照相机100的数据生成的每个元数据和其它IP照相机100根据由识别部分144生成的识别信号获得的元数据信息。例如，元数据合成部分B148合成根据来自第一照相机100-1的数据生成的元数据和由第二照相机100-2及第三照相机100-3根据由识别部分144生成的识别信号获得的元数据信息。

元数据缓冲部分146保存其它IP照相机100的元数据和该IP照相机100本身在其它时间的元数据，并在合成元数据时使用这些元数据。

[与多台IP照相机100和分析服务器130之间的协作相关的操作]

下面说明与多台IP照相机100和分析服务器130之间的协作相关的操作。图11是图解说明与按照实施例的多台IP照相机100和分析服务器130之间的协作相关的操作的流程图。图11中图解说明的流程图不包括对分析服务器130的照相机协作信息的预先传输。由于每台IP照相机100具有相同的处理流程，因此在该流程图中将省略相同处理流程的说明。图11是图解说明图4中的步骤S118中的检测处理的流程图。

首先，在每台IP照相机100中，IP照相机100的基础分析部分104进行分析处理，随后进行检测处理(步骤S131)。基础分析部分104生成元数据A1(步骤S132)。

之后，从IP照相机100的照相机-服务器通信部分A106向分析服务器130的照相机-服务器通信部分B132传送与检测源信息相关的必要信息(步骤S141)。这里，所述必要信息包括图像数据，照相机状态，元数据A2和控制命令A1。

在IP照相机100和分析服务器130中并行进行检测处理。在分析服务器130中，并行进行两种流程。

在分析服务器130中，扩展分析部分136进行分析处理，随后进行检测处理(步骤S142)。扩展分析部分生成元数据B1(步骤S143)。

生成的元数据B1被保存在元数据缓冲部分146中(步骤S151)。在步骤S162中，保存的元数据B1作为元数据D被元数据合成部分B148调用。

另一方面，利用经照相机-服务器通信部分B132从IP照相机100传送给分析服务器130的元数据A3，和保存在照相机协作信息部分142中的照相机协作信息，进行识别处理(步骤S161)。在识别处理中，从元数据缓冲部分146中的其它照相机的元数据和当前使用的照相机的其它时间的元数据中，搜索相同的目标对象。

从元数据缓冲部分146调用在多个IP照相机100中被识别为相同的目标对象的元数据(步骤S162)。

之后，元数据合成部分B148合成在扩展分析部分136-N中生成的元数据B1和从元数据缓冲部分146调用的元数据D(步骤S171)。

分析服务器130把在扩展分析部分136中生成的元数据B1传送给照相机-服务器通信部分B132，并把来自照相机-服务器通信部分B132的元数据B2传送给IP照相机100(步骤S144)。

之后，在IP照相机100中，元数据合成部分112通过合成在IP照相机100中生成的元数据A1，和从分析服务器130传来的元数据B3，生成元数据C(步骤S133)。可不在IP照相机100中合成元数据A1和元数据B3，而是在中央服务器10中合成元数据A1和元数据B3。

IP照相机100把合成的元数据C传送给中央服务器10(步骤S134)。对每个处理帧进行上述操作。处理帧可包括相同数目的普通图像帧，或者可包括数目适当减少的图像帧。

[关于观察器]

下面，说明显示在按照实施例的监视系统中的监视器12或者客户端30的屏幕上的观察器。图12是图解说明显示在监视器12或屏幕上的观察器180的说明图。

观察器180例如包括照相机图像面板182，控制面板184，报警列表面板186等等。

照相机图像面板182排列和显示多台IP照相机100的图像。尽管在图12中，照相机图像面板182是2×2的矩阵，不过实施例并不局限于此。例如，照相机图像面板182可以是1×1的矩阵，16×16的矩阵，或者2×3的矩阵。这里，尽管通过分割监视器屏幕，把照相机图像显示在一个监视器12上，不过通过利用多个监视器12，可把每台IP照相机100的图像各自显示在一个监视器12上。例如，一台IP照相机100的图像可被显示在一个监视器12上。

控制面板184由进行诸如IP照相机100的PTZ设置和中央服务器10的记录设置之类的控制的GUI构成。

报警列表面板186显示在IP照相机100或中央服务器10中产生的报警的列表。

图12A是图解说明当分析服务器130的检测处理被关闭时的状态的说明图。当分析服务器130的检测处理被关闭时，检测框192(虚线部分)被显示在照相机图像面板182中的IP照相机的目标对象上。同时，报警和元数据被显示在报警列表面板186上。

图12B是图解说明当分析服务器130的检测处理被打开时的状态的说明图。当分析服务器130的检测处理被打开时，检测框192被显示在照相机图像面板182中的IP照相机的目标对象上，还能够显示附加信息194。例如，当目标对象是人物时，根据另一台IP照相机100检测的，并记录在数据库中的姓名被显示为附加信息194。当目标对象是车辆时，在另一台IP照相机100中检测的牌照号码信息被显示为附加信息194。同时，其中增加作为详细信息登记的姓名和牌照号码的报警和元数据被显示在报警列表面板194上。

[实施例的效果]

如上所述，实施例涉及依据来自中央服务器10的请求，在IP照相机100中生成的元数据的产生方法。在实施例中，多台IP照相机100和分析服务器130高效地共享处理，并产生元数据。

按照实施例，中央服务器10能够在不知道分析服务器130的存在的情况下进行操作。当分析服务器130和IP照相机100互连时，当从中央服务器10观察时，所请求的元数据的信息量和内容量增大。另一方面，当分析服务器130和IP照相机100不互连时，当从中央服务器10观察时，所请求的元数据包括最少数量的信息和最少数量的内容。

当多台IP照相机100与分析服务器130连接时，如果另一台IP照相机100与当前使用的IP照相机拍摄相同的目标对象，那么借助分析服务器130，能够把当前使用的IP照相机难以获得的信息增加到元数据中。从而，即使当一台IP照相机100本身并不具有高水平的分析能力时，当从中央服务器10看来时，该IP照相机也能够表现得好像它具有高水平的分析能力似的。

本领域的技术人员应明白根据设计要求和其它因素，可做出各种修改、组合、子组合和变更，只要它们在附加权利要求或其它等同物的范围之内。

本申请包含与在2009年5月21日向日本专利局提交的日本优先权专利申请JP2009-123413中公开的主题相关的主题，该申请的整个内容在此通过引用被并入。

Claims (5)

1.一种监视系统，包括：

摄像设备，包括基于从拍摄对象的图像的摄像部分输入的图像数据进行分析处理、并生成第一元数据的基础分析部分，和通过网络把所述第一元数据和不同于所述第一元数据的第二元数据输出给与所述网络连接的监视设备的第一元数据输出部分；和

分析设备，包括基于从所述摄像设备接收的图像数据进行与所述基础分析部分不同的分析处理、并生成所述第二元数据的扩展分析部分，和把所述第二元数据输出给所述摄像设备的第二元数据输出部分，

其中所述摄像设备不能生成所述分析设备所生成的第二元数据，并且

所述监视系统还包括：

多个所述摄像设备，

其中所述分析设备还包括合成基于来自所述多个所述摄像设备中的一个摄像设备的图像数据生成的第二元数据和基于来自所述多个所述摄像设备中的另一摄像设备的图像数据生成的第二元数据的元数据合成部分，以及

所述第二元数据输出部分把合成的元数据输出给所述多个所述摄像设备。

2.按照权利要求1所述的监视系统，

其中所述分析设备包括多个所述扩展分析部分，每个扩展分析部分进行不同的分析处理并生成不同的第二元数据，

所述分析设备还包括合成由每个扩展分析部分生成的第二元数据、从而生成合成的元数据的元数据合成部分，以及

所述第二元数据输出部分把合成的元数据输出给所述摄像设备。

3.一种分析设备，包括：

从具有基础分析部分和第一元数据输出部分的多个摄像设备接收图像数据，并基于所接收的图像数据进行不同于所述基础分析部分的分析处理、从而生成第二元数据的扩展分析部分，所述基础分析部分基于从拍摄对象的图像的摄像部分输入的图像数据进行分析处理并生成第一元数据，所述第一元数据输出部分通过网络把所述第一元数据和不同于所述第一元数据的第二元数据输出给与所述网络连接的监视设备；和

把所述第二元数据输出给所述多个摄像设备的第二元数据输出部分，

其中所述摄像设备不能生成所述分析设备所生成的第二元数据，并且

所述分析设备还包括：

合成基于来自所述多个摄像设备中的一个摄像设备的图像数据生成的第二元数据和基于来自所述多个摄像设备中的另一摄像设备的图像数据生成的第二元数据的元数据合成部分，

其中所述第二元数据输出部分把合成的元数据输出给所述多个摄像设备。

4.按照权利要求3所述的分析设备，

其中所述分析设备包括多个所述扩展分析部分，每个扩展分析部分进行不同的分析处理并生成不同的第二元数据，

所述分析设备还包括合成由每个扩展分析部分生成的第二元数据、从而生成合成的元数据的元数据合成部分，以及

所述第二元数据输出部分把合成的元数据输出给所述多个摄像设备。

5.一种监视方法，包括下述步骤：

由摄像设备基于从拍摄对象的图像的摄像部分输入的图像数据进行分析处理，并生成第一元数据；

由分析设备基于从所述摄像设备接收的图像数据进行分析处理，并生成不同于所述第一元数据的第二元数据；

由所述分析设备把所述第二元数据输出给所述摄像设备；和

由所述摄像设备通过网络把所述第一元数据和所述第二元数据输出给与所述网络连接的监视设备，

其中所述摄像设备不能生成所述分析设备所生成的第二元数据，并且

所述监视方法还包括：

合成基于来自多个所述摄像设备中的一个摄像设备的图像数据生成的第二元数据和基于来自多个所述摄像设备中的另一摄像设备的图像数据生成的第二元数据的元数据合成部分，以及

把合成的元数据输出给多个所述摄像设备。

Images