CN1694530A - 监视系统和监视摄像机 - Google Patents

Abstract

本发明提供一种监视系统，即使上位装置上连接的监视摄像机很多，也能够在上位装置上正确监视监视区域，并防止安全性降低。监视摄像机(1)，将摄像部(12)拍摄的监视区域的摄影图像存储在运动图像存储部(15)中。此外，若摄影图像中有人物被拍到，抽出被摄人物的面部图像，并将抽出的面部图像以静止图像方式发送给主机装置(2)中。再有，监视摄像机(1)，响应来自主机装置(2)的请求，将存储在运动图像存储部(15)中的运动图像发送给主机装置(2)。

Description

监视系统和监视摄像机

技术领域

本发明涉及的是，确保有大量人员出入的机场、银行、写字楼、公寓等设施的安全的监视系统及适用于该监视系统的监视摄像机。

背景技术

目前，在有大量人员出入的机场、银行、写字楼、公寓等设施中为了确保安全，使用了监视系统，通过监视摄像机拍摄的摄影图像来监视可疑分子等的出入。现有监视系统，将设施的出入口和设施内的主要场所等作为监视区域，并在各个监视区域设置监视摄像机。此外，在警卫室等设置主机装置，并能利用该主机装置确认各监视区域的摄影图像。具体讲，通过LAN或IP网络等将监视摄像机与主机装置连接。监视摄像机基本实时地将拍摄到的监视区域的摄影图像发送给主机装置。从监视摄像机发送给主机装置的摄影图像是运动图像。主机装置，对各个监视摄像机发送来的监视区域的摄影图像(运动图像)进行保存。

此外，通过在主机装置中设置如下的面部比对功能，即当监视摄像机发送来的监视区域的摄影图像中拍到人物时、将该人物的面部图像抽出并与预先登记在册人员的面部图像进行对比来判定其是否为在册人员，由此使强化了安全性的监视摄像机得到实际应用。在册人员，可根据监视摄像机的用途来设定。例如，如果利用监视系统的设施是写字楼或公寓等的情况下，可将准许出入设施内的人物设为在册人员，此外如果是机场和银行等的情况下，可将通缉的人物(罪犯)设为在册人员。主机装置，输出面部比对的结果。例如，当面部比对的人物是不准许出入设施内的人物时、或者是被通缉的罪犯时发出警报等，将该情况通知给保安人员。这样，保安人员等能够对可疑分子迅速作出反应，从而能够提高安全性。

此外，现有的监视系统中，提出的方案有：检测出在摄影图像中是否有人物被拍到，如果有人物被拍到，则通过将该摄影图像记录到存储介质中(参照专利文献1)、或将背景图像的基准画面与摄影图像间的差值图像压缩保存(参照专利文献2)，则可毫无遗漏地记录监视摄像机拍摄到的人物图像，并可控制记录摄影图像所需要的存储介质的记录容量。

【专利文献1】特开2000-115389号公报

【专利文献2】特开2000-13742号公报

然而，在作为上位装置的主机装置上连接有多个监视摄像机的监视系统中，由于各监视摄像机是实时地以运动图像的方式向主机装置发送监视区域的摄影图像，因此连接监视摄像机和主机装置的网络的流量很大。因此，从监视摄像机送到主机装置来的监视区域的摄影图像很可能发生延迟或丢失。若从监视摄像机送到主机装置来的监视区域的摄影图像发生延迟或丢失时，产生的问题就是，主机装置无法正确地监视监视区域，从而导致安全性降低。

另一方面，虽然通过将从监视摄像机送到主机装置来的监视区域的摄影图像转换成粗糙的图像、再压缩发送，能够控制流量增大从而解决上述问题，但是，由于该方法中从监视摄像机送到主机装置来的监视区域的摄影图像较粗糙，因此从该摄影图像中抽出的人物的面部图像无法正确进行面部比对，结果就是无法防止安全性的降低。

本发明的目的在于，提供一种监视系统及适用于该监视系统的监视摄像机，即使上位装置上连接着许多监视摄像机，在上位装置中也能够正确地监视监视区域，并防止安全性降低。

发明内容

为解决上述课题，本发明的监视系统具有以下结构。

(1)具备具有对监视区域进行摄像的摄像模块的监视摄像机、和连接该监视摄像机的上位装置的监视系统中，

所述监视摄像机，具备：运动图像存储模块，将所述摄像模块拍摄的所述监视区域的摄像图像，以运动图像方式进行存储；

面部图像抽出模块，若所述摄像模块拍摄的所述监视区域的摄像图像中有人物被拍到，抽出该人物的面部图像；以及，

静止图像发送模块，将所述面部图像抽出模块抽出的面部图像以静止图像方式传送给上位装置，

所述上位装置，具备：运动图像请求模块，对于从所述监视摄像机以静止图像方式发送来的面部图像而言，当该面部图像相关的运动图像的取得请求被输入时，请求所述监视摄像机发送所述面部图像相关的运动图像，

所述监视摄像机还具备：运动图像发送模块，响应来自所述上位装置的运动图像的发送请求，将所述运动图像存储模块中存储的所述监视区域的运动图像，发送给该上位装置。

在该结构中，监视摄像机将摄像模块拍摄到的监视区域的摄像图像，以运动图像方式存储到运动图像存储模块中。此外，当监视区域的摄像图像中有人物被拍到时，监视摄像机通过面部图像抽出模块，将该人物的面部图像抽出，并将此处抽出的面部图像，通过静止图像发送模块，以静止图像方式，发送给上位装置。

另一方面，上位装置，对于从监视摄像机以静止图像方式发送来的面部图像而言，若该面部图像相关的运动图像取得请求被输入后，向监视摄像机请求该面部图像相关的运动图像的发送。监视摄像机响应来自上位装置的请求，将存储在运动图像存储模块中的监视区域的摄像图像，以运动图像方式进行发送。

这样，由于监视摄像机的结构为，在监视区域的摄像图像中有人物被拍到时，基本实时地将该人物的面部图像抽出，并将此处抽出的面部图像以静止图像方式发送给上位装置，因此不会将从监视摄像机发送给上位装置的面部图像粗糙化，并能够充分控制连接监视摄像机和上位装置的网络的流量。从而，能够防止在上位装置上无法正确监视监视区域的情况发生，避免降低安全性。

此外，由于上位装置中，对于从监视摄像机以静止图像方式发送来的面部图像，能够根据需要取得该面部图像相关的运动图像，因此能够以运动图像方式确认该人物通过监视区域时的状况。

(2)所述上位装置，具备：面部图像存储模块，存储在册人员的面部图像；以及，

面部对比模块，对从所述监视摄像机以静止图像方式发送来的面部图像、与存储在所述面部图像存储模块中的在册人员的面部图像进行对比，并输出其结果。

在该结构中，由于上位装置对从监视摄像机以静止图像方式发送来的人物的面部图像、与在册人员的面部图像进行对比，并输出其结果，因此当发现可疑分子等时，能够立即将该情况通知给保安人员等，使保安人员等能够迅速作出处理。

(3)所述上位装置，具备：面部图像存储模块，存储从所述监视摄像机以静止图像方式发送来的面部图像；以及，

显示模块，显示所述面部图像存储模块所存储的面部图像，

所述运动图像请求模块，对于所述显示模块所显示的面部图像，受理运动图像取得请求的输入。

在该结构中，上位装置中，能够将从监视摄像机以静止图像方式发送来的面部图像存储到面部图像存储模块中，并在显示模块上显示存储的面部图像。此外，对于显示模块所显示的面部图像，运动图像请求模块受理运动图像的取得请求的输入。由此，从监视摄像机以静止图像方式发送来的人物的面部图像的确认、和该人物通过监视区域时的状况的确认，不仅仅可在面部图像从监视摄像机发送来的时刻进行，根据需要任何时刻都可进行。

(4)所述监视摄像机具备时间戳附加模块，对面部图像抽出模块抽出的面部图像，附加表示抽出该面部图像的图像的摄像时间的时间戳，

所述静止图像发送模块，将附加了所述时间戳的面部图像发送给所述上位装置。

在该结构中，上位装置能够根据从监视摄像机以静止图像方式发送来的面部图像中所附加的时间戳，确认拍摄抽出该面部图像的图像的时间。

(5)所述上位装置的运动图像请求模块，在请求所述监视摄像机发送面部图像相关的运动图像时，将附加在该面部图像中的所述时间戳发送给所述监视摄像机，

所述监视摄像机，将涵盖来自所述上位装置的运动图像的发送请求中所包含的时间戳所表示的时间的给定时间量的运动图像，发送给所述上位装置。

在该结构中，能够控制从监视摄像机送往上位装置的运动图像的量，能够防止白白加大连接监视摄像机和上位装置的网络的流量。此外，对于给定时间而言，可为以时间戳所表示的时间为中心、4～5s的运动图像。

(6)在具备具有对监视区域进行摄像的摄像模块的监视摄像机、和连接该监视摄像机的上位装置的监视系统中，

所述监视摄像机，具备：运动图像发送模块，将所述摄像模块拍摄的所述监视区域的摄像图像，以运动图像方式发送；

面部图像抽出模块，若在所述摄像模块拍摄的所述监视区域的摄像图像中有人物被拍到，抽出该人物的面部图像；以及，

静止图像存储模块，将所述面部图像抽出模块抽出的面部图像以静止图像的方式存储，

所述运动图像发送模块，以比所述静止图像发送模块发送的面部图像粗糙的图像发送运动图像，

另外，所述上位装置具备运动图像请求模块，对于从所述监视摄像机发送来的运动图像中被拍摄的人物而言，当面部图像的取得请求被输入时，请求所述监视摄像机发送该人物的面部图像，

所述监视摄像机，还具备静止图像发送模块，响应来自所述上位装置的面部图像的取得请求，向该上位装置发送存储在所述静止图像存储模块中的人物的面部图像。

在该结构中，监视摄像机将通过摄像模块拍摄到的监视区域的摄像图像、通过运动图像发送模块以粗糙图像的方式发送给上位装置。此外，监视摄像机在监视区域的摄像图像中有人物被拍到时，通过面部图像抽出模块将该人物的面部图像抽出，并将在此抽出的面部图像存储到静止图像存储模块中。

另一方面，上位装置，当对于从监视摄像机发送来的运动图像中所拍到的人物被输入面部图像的取得请求时，会向监视摄像机请求该面部图像的发送。监视摄像机响应来自上位装置的请求，将存储在静止图像存储模块中的面部图像，以静止图像方式进行发送。

这样，由于监视摄像机构成为，将监视区域的摄像图像以粗糙图像方式基本实时地发送给上位装置发送，因此能够充分控制连接监视摄像机和上位装置的网络的流量。此外，对于从监视摄像机发送到上位装置的运动图像，不但变为粗糙图像，还通过进行压缩，能够进一步控制连接监视摄像机和上位装置的网络的流量。此外，上位装置，能够根据需要从监视摄像机取得在监视摄像机发送来的运动图像中拍摄到的人物的面部图像(静止图像)，此外，由于该面部图像不是像运动图像那样的粗糙图像，因此，通过取得该面部图像，能够正确地对该人物进行面部对比。因此，能够防止在上位装置上无法正确监视监视区域的情况，防止降低安全性。

利用本发明，能够充分控制连接监视摄像机和上位装置的网络的流量。从而能够防止在上位装置上无法正确监视监视区域的情况发生，避免降低安全性。

附图说明

图1是表示本发明实施方式的监视系统的结构的图。

图2是表示适用于本发明实施方式的监视系统的监视摄像机的结构的图。

图3是表示适用于本发明实施方式的监视系统的主机装置的结构的图。

图4是表示上述实施方式的监视摄像机中的运动图像处理的流程图。

图5是表示上述实施方式的监视摄像机中的面部图像发送处理的流程图。

图6是表示上述实施方式的主机装置中的面部图像接收处理的流程图。

图7是表示上述实施方式的主机装置中的运动图像取得处理的流程图。

图8是表示上述实施方式的监视摄像机中的运动图像发送处理的流程图。

图9是表示适用于本发明另一实施方式的监视系统的监视摄像机的结构的图。

图10是表示适用于本发明另一实施方式的监视系统的主机装置的结构的图。

图11是表示另一实施方式的监视摄像机中的运动图像发送处理的流程图。

图12是表示另一实施方式的监视摄像机中的面部图像存储处理的流程图。

图13是表示另一实施方式的主机装置中的运动图像接收处理的流程图。

图14是表示另一实施方式的主机装置中的面部图像取得处理的流程图。

图15是表示另一实施方式的监视摄像机中的面部图像发送处理的流程图。

图中：

1-监视摄像机，2-主机装置，3-网络，12-摄像部，13-FF模块，14-图像压缩部，15-运动图像存储部，16-通信部，17-静止图像存储部，22-在册人员存储部，23-通信部，24-面部对比部，25-图像展开部，26-显示部，27-面部图像存储部，28-运动图像存储部

具体实施方式

下面，对作为本发明实施方式的监视系统进行说明。

图1是表示作为本发明实施方式的监视系统的结构图。该实施方式的监视系统，通过网络3将多个监视摄像机1与主机装置2连接。该监视装置用于对出入机场、银行、写字楼、公寓等设施的人物或在设施内通行的人物等进行监视，并确保安全。各个监视区域都设置监视摄像机1。监视区域是设施的出入口或设施内的主要场所等。主机装置2设置在警卫室等中，保安人员等能够确认监视区域的状况。网络3，例如是LAN或IP网络。

图2是表示适用于本发明实施方式的监视系统中的监视摄像机的结构的图。监视摄像机1包括：控制部11，控制主体的动作；摄像部12，对监视区域进行拍摄；人脸搜寻模块13(Face Finding Module，以下简称FF模块13)，判定在摄像部12拍摄的监视区域的摄影图像中是否拍摄到人物，如果拍摄到人物，将拍到的人物的面部图像以静止图像的方式抽出；图像压缩部14，将摄像部12拍摄的监视区域的摄影图像作为运动图像获取，并将其压缩；运动图像存储部15，存储由图像压缩部14压缩的运动图像；以及，通信部16，通过网络3与主机装置2之间进行通信。

摄像部12，具有CDD作为摄像传感器。摄像部12拍摄的监视区域的摄影图像，被输入到FF模块13和图像压缩部14。FF模块13和图像压缩部14，以预定的时间间隔、例如间隔0.3s，取入输入的摄影图像。关于FF模块13和图像压缩部14取入摄影图像的时间间隔，既可以相同也可以不同。FF模块13，具有对取入的摄影图像中是否有人物被拍到进行判定的功能、和当有人物被拍到时抽出人物面部图像的功能。此FF模块13，相当于本发明所说的面部图像抽出模块。FF模块13从摄影图像中所抽出的面部图像(静止图像)，基本实时地被通过网络3从通信部16发送给主机装置2。送往主机装置2的面部图像中，附加有表示摄影时间的时间戳。有关该时间戳的详细内容在以后描述。此外，图像压缩部14将作为运动图像获取的监视区域的摄影图像，以MPEG4等方式进行压缩。运动图像存储部15，对该压缩的监视区域的运动图像进行存储。在运动图像存储部15所存储的运动图像中，也以适当的间隔附加表示摄影时间的时间戳，能够判断运动图像存储部15所存储的运动图像的摄影时间。监视摄像机1响应来自主机装置2的请求，将存储在运动图像存储部15的运动图像发送给主机装置2。运动图像存储部15，具有例如硬盘作为存储介质。

接下来，对适用于该监视系统的主机装置2的结构进行说明。图3是表示适用于作为本发明实施方式的监视系统中的主机装置的结构的图。主机装置2，具备：控制部21，控制主体的动作；在册人员数据存储部22，存储各个在册人员的面部图像；通信部23，通过网络3与监视摄像机1进行通信；面部对比部24，将从监视摄像机1以静止图像送来的面部图像、与在册人员数据存储部22中所存储的在册人员面部图像进行对比；图像展开部25，将从监视摄像机1送来的以MPEG4压缩的运动图像展开；显示部26，显示从监视摄像机1送来的面部图像或运动图像；以及，面部图像存储部27，存储从监视摄像机1以静止图像送来的面部图像。

在册人员数据存储部22，作为在册人员的面部图像，存储有眼、鼻、口等面部组成部分的特征量。在册人员，可以是例如准许出入设施的人物、或是被通缉的罪犯，可根据监视系统的用途来决定在册人员。面部对比部24，从由监视摄像机1以静止图像送来的面部图像中、抽取面部组成部分的特征量，并计算出与存储在在册人员数据存储部22中的各个在册人员的面部组成部分的特征量的相似度，将该相似度最大、且大于预定阈值的在册人员判定为本次送来的面部图像的人物。另外，若不存在相似度大于预定阈值的在册人员，则判定为不是在册人员。图像展开部25，将从监视摄像机1送来的运动图像展开，并生成再生图像信号。显示部26，显示从监视摄像机1送来的面部图像或运动图像(基于图像展开部25所生成的再生图像信号的图像)。面部图像存储部27，存储从监视摄像机1以静止图像送来的面部图像。面部图像存储部27，具有硬盘等作为存储介质。

下面，对本实施方式的监视系统的动作进行说明。

监视摄像机1，将基本实时地处理监视区域的摄影图像的监视图像处理、和响应来自主机装置2的请求发送存储在运动图像存储部15中的运动图像的运动图像发送处理并列执行。首先，说明监视摄像机1中的监视图像处理。该监视图像处理分为两个处理，即，运动图像处理，将摄像部12拍摄的监视区域的摄影图像，作为运动图像存储到运动图像存储部15；和，面部图像发送处理，当摄影图像中拍到人物时，抽出该人物的面部图像，传往主机装置2。

图4是表示运动图像处理的流程图。监视摄像机1以预定的一定时间间隔、例如间隔0.3s，将摄像部12拍摄的监视区域的摄影图像取入到图像压缩部14中(s1、s2)。图像压缩部14，将以一定时间间隔取入的摄影图像作为运动图像，将其以MPEG4等方式压缩(s3)。监视摄像机1将此压缩运动图像存储到运动图像存储部15(s4)。运动图像存储部15中存储的运动图像被以适当的间隔、例如间隔1～2分钟，附加表示摄影时间的时间戳。

监视摄像机装置1，通过反复执行上述s1～s4的处理，将监视区域的运动图像存储到运动图像存储部15中。此外，由于在存储于运动图像存储部15中的运动图像上以适当的间隔附加了表示摄影时间的时间戳，因此通过参照该时间戳，就可以判断出存储于运动图像存储部15中的运动图像的摄影时间。

接下来，说明面部图像发送处理。图5是表示该面部图像发送处理的流程图。监视摄像机1以预定的一定时间间隔、例如间隔0.3s，将摄像部12拍摄的监视区域的摄影图像取入到FF模块13中(s11、s12)。FF模块13，算出上次取入的摄影图像与本次取入的摄影图像之间的差值(s13)。众所周知，当有人物被拍到时，由于被拍人物的位置和姿势等发生了变化，上次取入的摄影图像和本次取入的摄影图像的差值会变大。

FF模块13，在s13计算的差值大于预定的阈值的情况下(s14)，判定在该摄影图像中有人物被拍到，并将该摄影图像暂时保存在未图示的缓存中(s15)。此外，FF模块13在s13计算的差值不大于预定阈值的情况下，跳转到s19将缓存清空。FF模块13，当用s15将摄影图像存储到缓存后，判定是否有适于抽出面部图像帧数的摄影图像被存储到该缓存中(s16)。在s16，要在缓存中存储几帧、例如4～6帧的摄影图像，以避免无法从例如被拍人物的面部图像被截断、或者面部朝向不佳的摄影图像中，抽出适合用于该人物面部对比的面部图像。换言之，提高了能够抽出适合用于该人物面部对比的面部图像的摄影图像，被存储在缓存中的可能性。当FF模块13，用s16判定缓存中没有存储适于面部图像抽出的帧数的摄影图像时，就返回s11重复上述处理，在该缓存中存储适于抽出面部图像帧数的摄影图像。

另外，适于抽出面部图像的帧数，为被摄人物通过监视区域的时间(2～3s)内、FF模块13能够取入的摄影图像的帧数以下。

另一方面，在s16，如果判定缓存中存有适于面部图像抽出帧数的摄影图像，就从存储在该缓存的多帧摄影图像中，选择最适合面部图像抽出的摄影图像(s17)。在s17，选择所摄人物的面部没被截断、面部朝向为正面的摄影图像。FF模块13，从由s17选择的摄影图像中抽出所摄人物的面部图像(s18)。在s18，从摄影图像中检测出面部形状(椭圆形)，并将包含这里检测到的面部形状的范围、作为本次拍摄到的人物的面部图像抽出。当FF模块13，用s18抽出本次拍摄到的人物的面部图像后，清空缓存(s19)。监视摄像机1对由s18抽出的面部图像附加表示摄影时间的时间戳(s20)，并将其从通信部16送往主机装置2(s21)，返回s11重复上述处理。

这样，监视摄像机1就能够将摄像部12拍摄的通过监视区域的人物的面部图像、基本实时地送到主机装置2中。换言之，在主机装置2中，能够基本实时地获得通过监视区域的人物的面部图像。此外，由于监视摄像机1，并不是对主机装置2发送监视区域的运动图像，而是以静止图像的形式发送抽出的面部图像，因此从监视摄像机1发送到主机装置2的数据量就得到充分控制，即使是主机装置2上连接的监视摄像机1较多的监视系统，连接主机装置2与监视摄像机1的网络3的流量也能得到充分控制。此外，对于以静止图像的形式从监视摄像机1向主机装置2发送面部图像来说，由于可以不使用粗糙图像，因此在后述的主机装置2中能够正确地进行所摄人物的面部对比，不会降低安全性。

这里，对接收以静止图像方式从监视摄像机1送来的面部图像的主机装置2的动作进行说明。图6是表示主机装置中的面部图像接收处理的流程图。主机装置2接收从监视摄像机1以静止图像方式送来的面部图像后，将该面部图像存储到图像存储部27中，同时将该面部图像显示在显示部26上(s31、s32)。在存储于图像存储部27的面部图像中，附加有表示抽出该面部图像的摄影图像的摄影时间的时间戳。主机装置2实施对本次从监视摄像机1送来的面部图像、与存储在在册人员数据存储部22中的在册人员面部图像进行对比的面部对比处理(s33)。该面部对比处理，使用例如公知的伽柏小波(Gabor Wavelet)和图像比对方法(GraphMatching Method)来进行。这里，虽不详细说明，但简单来说，就是从由监视摄像机1送来的面部图像中抽出眼、鼻、口等面部组成部分的特征量，并计算出与存储在在册人员数据存储部22中的各个在册人员的面部组成部分的特征量的相似度。然后，将算出的相似度最大且大于预定阈值的在册人员判定为本次被送来面部图像的人物。此外，如果不存在相似度大于预定阈值的在册人员，则判定为不是在册人员。

主机装置2输出s33的面部对比处理结果(s34)。在s34中，面部对比的结果显示在显示部26上，根据需要进行报警。例如，如果是禁止在册人员以外的人物出入的设施，当通过s33的面部对比，证明本次面部图像被送来的人物不是在册人员时进行报警。如上所述，由于监视摄像机1基本实时地将通过监视区域的人物的面部图像发送到主机装置2中，因此对该人物的面部对比也能够基本实时地进行。因此，能够基本实时地检测出可疑分子进入设施等，并能够迅速将该情况报告给保安人员等。这样，保安人员等就能对可疑分子迅速作出处理，避免降低设施安全性。

此外，主机装置2，能够将存储在图像存储部27中的、从监视摄像机1以静止图像方式送来的面部图像显示在显示部26上。对于被在显示部26上显示面部图像的人物，能够从监视摄像机1中获取该人物通过监视区域时的运动图像。接下来，对主机装置2从监视摄像机1获得运动图像的运动图像取得处理进行说明。图7是表示主机装置中的运动图像取得处理的流程图，图8是表示与其对应的监视摄像机的运动图像发送处理的流程图。

保安人员等，对于认为需要确认通过监视区域时的状况的面部图像的人物，向主机装置2中输入运动图像的取得请求。具体讲，在主机装置2的显示部26上显示要取得运动图像的人物的面部图像，并进行请求获取运动图像的输入操作。主机装置2，被输入该运动图像的取得请求后，开始图7所示的运动图像取得处理。首先，读出附加在本次请求取得运动图像的人物的面部图像上的时间戳(s41)。主机装置2，将发送由s41读出的时间戳所表示的时间的运动图像的请求，从通信部23送到监视摄像机1(s42)。

监视摄像机1接收到来自主机装置2的运动图像发送请求后(s51)，读出该发送请求中包含的时间戳所表示的时间(s52)。监视摄像机1从运动图像存储部15中，读出以s52读出的时间为中心的前后数秒、例如4～5秒的运动图像(s53)，并将其从通信部16传往主机装置2(s54)。

主机装置2，接收到从监视摄像机1送来的运动图像后(s43)，在图像展开部25展开接收到的运动图像，并生成再生影像信号(s44)。主机装置2将基于由s44生成的再生影像信号的图像显示在显示部26上(s45)。

这样，主机装置2就能够根据需要，对面部图像被以静止图像方式传送来的人物，取得通过监视区域时的运动图像图像，并进行确认。换言之，能够对面部图像被以静止图像方式送来的人物，用主机装置2确认通过监视区域时的状况。此外，由于对于上述运动图像发送请求，监视摄像机1发送给主机装置2的运动图像是数秒的运动图像，因此不会白白增加连接监视摄像机1和主机装置2的网络3的流量，获得充分控制。

另外，在上述实施方式中，虽然运动图像存储部15中总存储有监视区域的运动图像，但也可以在上述面部图像发送处理中，在s18抽出面部图像之后、s19清空缓存之前，将存储在该缓存中的多帧的摄影图像作为运动图像压缩，并存储在运动图像存储部15中。换言之，也可以构成为，将摄影图像中有人物被拍到时的运动图像存储在运动图像存储部15中，没有人物被摄到时的监视区域的运动图像不存储到运动图像存储部15中。这样，就能够控制运动图像存储部15所需要的存储容量。此外，由于不总进行图4所示的运动图像处理，因此能够降低监视摄像机1的负荷。

接下来，对本发明的另一个实施方式进行说明。该实施方式的监视系统与上述实施方式相同具有如图1所示的结构。监视摄像机1的结构虽然与上述实施方式的装置大致相同，但是如图9所示，不同点在于，不具备运动图像存储部15、和具有静止图像存储部17。静止图像存储部17，对由FF模块13抽出的人物的面部图像进行存储。此外，主机装置2的结构虽然与上述实施方式的装置大致相同，但是如图10所示，不同点在于，不具备面部图像存储部27、和具有运动图像存储部28。运动图像存储部28，存储从监视摄像机1送来的监视区域的运动图像。

下面，对本实施方式的监视系统的动作进行说明。

监视摄像机1，将基本实时地处理监视区域的摄影图像的监视图像处理、和响应主机装置2的请求将存储在静止图像存储部17中的人物的面部图像以静止图像方式发送给主机装置2的静止图像发送处理并列执行。首先，说明监视摄像机1中的监视图像处理。该监视图像处理，包含：运动图像发送处理，将摄像部12所摄的监视区域的摄影图像作为运动图像发送给主机装置2；和，面部图像存储处理，若摄影图像中摄到人物，将该人物的面部图像抽出后存储到静止图像存储部17中。

图11是表示运动图像发送处理的流程图。监视摄像机1以预定的一定时间间隔、例如间隔0.3s，将摄像部12所摄的监视区域的摄影图像取入到图像压缩部14(s61、s62)。在图像压缩部14中，将以一定时间间隔取入的摄影图像作为运动图像，并将其以MPEG4等方式压缩(s63)。在s63中，将摄影图像变为较粗糙的图像并进行压缩。监视摄像机1将由图像压缩部14压缩后的运动图像，从通信部16经由网络3送往主机装置2(s64)。在送往主机装置2的运动图像中，附加表示摄影时间的时间戳。

监视摄像机装置1通过重复执行上述s1～s4的处理，将监视区域的运动图像基本实时地发送给主机装置2。此外，由于发送到主机装置2上的运动图像为较粗糙的图像，因此能够充分控制发送到主机装置2上的运动图像的数据量。从而，即使是主机装置2上连接的监视摄像机1较多的监视系统，连接主机装置2与监视摄像机1的网络3的流量也能得到充分控制。此外，由于在送往主机装置2的运动图像中，附加了表示摄影时间的时间戳，因此主机装置2通过参照时间戳能够判断摄影时间。

接下来，说明面部图像存储处理。图12是表示该面部图像存储处理的流程图。监视摄像机1以预定的一定时间间隔、例如间隔0.3s，将摄像部12所摄的监视区域的摄影图像取入FF模块13中(s71、s72)。FF模块13，计算出上次取入的摄影图像、与本次取入的摄影图像的差值(s73)。FF模块13在由s73计算出的差值大于预定阈值的情况下(s74)，判定在该摄影图像中有人物被拍到，并将该摄影图像暂时保存在未图示的缓存中(s75)。此外，FF模块13在由s73计算出的差值不大于预定阈值的情况下，跳转到s79将缓存清空。当FF模块13用s75将摄影图像存储到缓存后，判定是否有适于抽出面部图像帧数的摄影图像被存储到该缓存中(s76)。在s16，要在缓存中存储几帧、例如4～6帧的摄影图像，以避免无法从例如被拍人物的面部图像被截断、或者面部朝向不佳的摄影图像中，抽出适合用于该人物面部对比的面部图像。换言之，提高抽出适合进行用于该人物面部对比的面部图像的摄影图像，被存储在缓存中的可能性。当FF模块13用s76判定缓存中没有存储适于面部图像抽出帧数的摄影图像时，返回s71重复上述处理，在该缓存中存储适于抽出面部图像帧数的摄影图像。

另外，适于抽出面部图像的帧数，是所摄人物通过监视区域的时间(2～3s)内、FF模块13能够取入的摄影图像的帧数以下。

另一方面，在s76中，如果判定缓存中存有适于面部图像抽出帧数的摄影图像，就从存储在该缓存的多帧摄影图像中，选择最适合面部图像抽出的摄影图像(s77)。在s77中，选择所摄人物的面部没有截断、面部朝向为正面的摄影图像。FF模块13，从由s77选择的摄影图像中抽出拍摄人物的面部图像(s78)。在s78中，从摄影图像中检测出面部形状(椭圆形)，抽出包含该检测的面部形状的范围，作为本次拍摄到的人物的面部图像。此外，不将摄影图像粗糙化，抽出面部图像。换言之，虽然图像压缩部14将变为粗糙图像并压缩后的摄影图像发送到主机装置2，但是FF模块13不将摄影图像变为粗糙图像，从该摄影图像中抽出面部图像。当FF模块13，用s78将本次拍摄的人物的面部图像抽出后，清空缓存(s79)。监视摄像机1，将表示摄影时间的时间戳附加在由s78抽出的面部图像中(s80)，并将其存储到静止图像存储部17中(s81)，并返回s71重复上述处理。

这样，监视摄像机1就可以将摄像部12所摄的通过监视区域的人物的面部图像，以静止图像方式存储到静止图像存储部17中。此外，该面部图像是能够进行正确面部对比的非粗糙的图像。

这里，对接收从监视摄像机1送来的运动图像的主机装置2的动作进行说明。图13是表示主机装置中的运动图像接收处理的流程图。当主机装置2，接收从监视摄像机1送来的运动图像后，将该运动图像存储在运动图像存储部28中(s91)，同时图像展开部25将接收的运动图像展开，并生成再生影像信号(s92)。主机装置2，将基于由s92生成的再生影像信号的运动图像显示在显示部26上(s93)。

这样，由于在主机装置2中，监视区域的运动图像被基本实时地显示出来，因此保安人员等能通过主机装置2基本实时地确认监视区域的状况。此外，在保安人员等认为显示部26上所显示的运动图像的人物需要面部对比时，能够获得适于进行该人物的面部对比的面部图像。以下，说明在主机装置2中获得能够正确进行该人物面部对比的面部图像的面部图像取得处理。

图14是表示主机装置中的面部图像取得处理的流程图。图15是表示与其对应的监视摄像机的面部图像发送处理的流程图。

保安人员等，对于通过监视区域的人物认为需要进行面部对比时，向主机装置2中输入面部图像的取得请求。具体讲，对于在主机装置2的显示部26上以运动图像方式显示的人物，进行请求取得其面部图像的输入操作。主机装置2在该面部图像取得请求被输入后，开始图14所示的面部图像取得处理。首先，读出附加在本次请求面部图像取得的人物的运动图像上的时间戳(s101)。主机装置1，将由s101读出的时间戳所表示的时间的面部图像的发送请求，从通信部23发送到监视摄像机1(s102)。

监视摄像机1，接收到来自主机装置2的面部图像的发送请求后(s111)，读出该发送请求中所含的时间戳所表示的时间(s112)。监视摄像机1从静止图像存储部17中，读出附加有与由s112读出的时间最接近的时间戳的面部图像(s113)，并将该面部图像以静止图像方式从通信部16传往主机装置2(s114)。

主机装置2，接收到从监视摄像机1送来的面部图像后(s103)，将该面部图像显示在显示部26上(s104)。然后，主机装置2，进行对比本次从监视摄像机1送来的面部图像、与存储在在册人员数据存储部22中的在册人员面部图像的面部对比处理(s105)。该面部对比处理，与上述实施方式同样，使用伽柏小波(Gabor Wavelet)和图像比对方法(GraphMatching Method)来进行。主机装置2输出s105的面部对比处理结果(s106)。在s106中，将面部对比的结果显示在显示部26上，并根据需要进行报警。

这样，由于主机装置2能够从监视摄像机1中取得适于进行面部对比的面部图像，因此避免降低安全性。此外，由于用于面部对比的面部图像以静止图像方式从监视摄像机1发送到主机装置2，因此不会白白增加连接监视摄像机1和主机装置的网络3的流量。因此，即使是主机装置2上连接的监视摄像机1较多的监视系统，主机装置2也能够对监视区域正确地进行监视，且避免降低安全性。

Claims (8)

1.一种监视系统，具备：具有对监视区域进行摄像的摄像模块的监视摄像机，和连接该监视摄像机的上位装置，其特征在于：

所述监视摄像机，具备：运动图像存储模块，将所述摄像模块拍摄的所述监视区域的摄像图像，以运动图像方式进行存储；

面部图像抽出模块，若所述摄像模块拍摄的所述监视区域的摄像图像中有人物被拍到，抽出该人物的面部图像；以及，

静止图像发送模块，将所述面部图像抽出模块抽出的面部图像以静止图像方式传送给上位装置，

所述上位装置，具备：运动图像请求模块，对于从所述监视摄像机以静止图像方式发送来的面部图像而言，当该面部图像相关的运动图像的取得请求被输入时，请求所述监视摄像机发送所述面部图像相关的运动图像，

所述监视摄像机还具备：运动图像发送模块，响应来自所述上位装置的运动图像的发送请求，将所述运动图像存储模块中存储的所述监视区域的运动图像，发送给该上位装置。

2.根据权利要求1所述的监视系统，其特征在于，

所述上位装置，具备：面部图像存储模块，存储在册人员的面部图像；以及，

面部对比模块，对从所述监视摄像机以静止图像方式发送来的面部图像、与存储在所述面部图像存储模块中的在册人员的面部图像进行对比，并输出其结果。

3.根据权利要求1或2所述的监视系统，其特征在于，

所述上位装置，具备：面部图像存储模块，存储从所述监视摄像机以静止图像方式发送来的面部图像；以及，

显示模块，显示所述面部图像存储模块所存储的面部图像，

所述运动图像请求模块，对于所述显示模块所显示的面部图像，受理运动图像取得请求的输入。

4.根据权利要求1～3的任一项所述的监视系统，其特征在于，

所述监视摄像机具备时间戳附加模块，对面部图像抽出模块抽出的面部图像，附加表示抽出该面部图像的图像的摄像时间的时间戳，

所述静止图像发送模块，将附加了所述时间戳的面部图像发送给所述上位装置。

5.根据权利要求4所述的监视系统，其特征在于，

所述上位装置的运动图像请求模块，在请求所述监视摄像机发送面部图像相关的运动图像时，将附加在该面部图像中的所述时间戳发送给所述监视摄像机，

所述监视摄像机，将涵盖来自所述上位装置的运动图像的发送请求中所包含的时间戳所表示的时间的给定时间量的运动图像，发送给所述上位装置。

6.一种监视摄像机，其特征在于，具备：

摄像模块，对监视区域进行摄像；

运动图像存储模块，将所述摄像模块拍摄的所述监视区域的摄像图像以运动图像方式进行存储；

面部图像抽出模块，若在所述摄像模块拍摄的所述监视区域的摄像图像中有人物被拍到，抽出该人物的面部图像；

静止图像发送模块，将所述面部图像抽出模块抽出的面部图像以静止图像方式发送往上位装置；以及，

运动图像发送模块，响应来自所述上位装置的请求，将所述运动图像存储模块中存储的所述监视区域的运动图像，发送给该上位装置。

7.一种监视系统，具备：具有对监视区域进行摄像的摄像模块的监视摄像机，和连接该监视摄像机的上位装置，其特征在于，

所述监视摄像机，具备：运动图像发送模块，将所述摄像模块拍摄的所述监视区域的摄像图像，以运动图像方式发送；

面部图像抽出模块，若在所述摄像模块拍摄的所述监视区域的摄像图像中有人物被拍到，抽出该人物的面部图像；以及，

静止图像存储模块，将所述面部图像抽出模块抽出的面部图像以静止图像的方式存储，

所述运动图像发送模块，以比所述静止图像发送模块发送的面部图像粗糙的图像发送运动图像，

另外，所述上位装置具备运动图像请求模块，对于从所述监视摄像机发送来的运动图像中被拍摄的人物而言，当面部图像的取得请求被输入时，请求所述监视摄像机发送该人物的面部图像，

所述监视摄像机，还具备静止图像发送模块，响应来自所述上位装置的面部图像的取得请求，向该上位装置发送存储在所述静止图像存储模块中的人物的面部图像。

8.一种监视摄像机，其特征在于，具备：

摄像模块，对监视区域进行摄像；

运动图像发送模块，将所述摄像模块拍摄的所述监视区域的摄像图像，以运动图像的方式进行发送；

面部图像抽出模块，若在所述摄像模块拍摄的所述监视区域的摄像图像中有人物被拍到，抽出该人物的面部图像；

静止图像存储模块，将所述面部图像抽出模块抽出的面部图像以静止图像方式进行存储；以及，

静止图像发送模块，响应来自所述上位装置的请求，向该上位装置发送存储在所述静止图像存储模块中的人物的面部图像，

所述运动图像发送模块，以比所述静止图像发送模块发送的面部图像粗糙的图像发送运动图像。

Images