CN1829319B - 信息处理系统、信息处理装置和方法 - Google Patents

Abstract

公开了一种信息处理系统、信息处理装置和方法，该信息处理装置可以准确拍摄活动体的详细的图像。跟踪对象全方位移动变焦模块以预定的时间间隔读出存储在活动体跟踪等级管理数据库中的活动体信息，并基于作为与具有最高优先级的活动体的视角相对应的出现信息的视角信息，控制变焦照相机的全方位移动。此时，以远远短于重复跟踪对象全方位移动变焦处理的时间间隔的预定的时间间隔，附加跟踪对象全方位移动模块读出活动体跟踪等级管理数据库的最新的活动体信息，并进一步重复控制变焦照相机的全方位移动。

Description

信息处理系统、信息处理装置和方法

技术领域

本发明涉及一种信息处理系统、信息处理装置、方法和程序，尤其涉及一种可以拍摄预定区域的图像、并且可以拍摄该预定区域中的活动体的图像的信息处理系统、信息处理装置和方法。 

背景技术

近年来，为了确保安全，例如在有自动柜员机(automaticteller machine，ATM)的银行、停车区和住宅等中经常安装多地点照相机监控系统(多照相机系统)。 

如上所述的这种多照相机系统包括多个视频照相机和用于记录由该视频照相机获取的图像的记录装置。已经提出了利用如上所述的这种多照相机系统的装置，其中，如例如在日本特开平10-108163号公报中所公开的，按比例缩小多个图像，并将其合成为一帧图像。还提出了一种设备，其中，如例如在日本特开2000-243062号公报中所公开的，收集来自多个视频照相机图像，并将其记录在记录介质例如录像带上。 

图1示出相关技术的多照相机系统的例子的外观图。 

参考图1，所示的多照相机系统1包括四个照相机11-1到11-4。照相机11-1到11-4是拍摄方向固定的固定照相机或者拍摄方向可变的全方位移动变焦(pan tilt zoom)照相机。例如在停车区，照相机11-1到11-4监控直径40m的圆形广范围的区域21。 

图2示出图1中所示的多照相机系统1的结构的例子。 

参考图2，每个照相机11-1到11-4拍摄图像。照相机11-1到11-4被分别连接到记录装置41，并将通过图像拍摄所获得的图像的模拟信号提供给记录装置41。记录装置41记录图像数据，该图像数据是通过从照相机11-1到11-4提供的图像的模拟信号的A/D转换而获得的图像的数字信号。此外，记录装置41被连接到显示装置42，并使显示装置42显示与该图像数据相对应的图像。 

然而，在图2中的多照相机系统1中，可被连接到记录装置41的照相机仅限于四个照相机11-1到11-4，因此多照相机系统1的可扩展性差。 

图3示出图1中的多照相机系统1的结构的另一例子。 

参考图3，通过网络51将照相机11-1到11-4连接到个人计算机(PC)52。每个照相机11-1到11-4拍摄图像，并根据IP(Internet Protocol，网络协议)通过网络51将通过图像拍摄所获得的图像数据传输给PC 52。PC 52记录该图像数据并显示与该图像数据相对应的图像。 

现在，参考图4对将被记录在图2中所示的记录装置41或图3中所示的PC 52中的图像数据进行说明。 

从图4可以看出，记录装置41或PC52记录由照相机11-1到11-4所获得的所有图像数据。因此，在多照相机系统1被用于监控的情况下，即使根据预定的压缩方法对图像数据进行压缩，将被记录在记录装置41或PC52中的图像数据量仍非常大。 

例如，在24小时记录根据JPEG(Joint PhotographicExperts Group，联合图像专家组)系统在预定的条件下(50KB/帧，10帧/秒)所压缩的图像数据的情况下，在由四个照相机11-1到11-4形成的多照相机系统1中，将被记录在记录装置41或PC52中的图像数据量约为164GB。此外，在由八个照相机形成多照相机系统1的情况下，图像数据量约为328GB，在由十六个照相机形成多照相机系统1的情况下，图像数据量约为656GB。 

这样，在多照相机系统1中，为了监控区域21，需要四个照相 机11-1到11-4。因此，照相机的安装很麻烦，且多照相机系统1的成本高。此外，在获取高清晰度的图像的情况下，必须在高摄像倍率(magnification)的条件下进行图像拍摄，因此，需要更多数量的照相机11-1到11-4。此外，在不增加照相机11-1到11-4的数量而想要获取高清晰度的图像的情况下，难以获取关于整个区域21的高清晰度图像。因此，通常需要操作者监控正常图像并指定所期望的区域，以获取该区域的高清晰度的图像。 

因而，有这样一种监控照相机：其可利用单个照相机通过在顺序改变摄像方向的同时顺序拍摄对象的图像以获得由多个单元图像形成的整个对象的全景图像来监控广范围的状况。 

发明内容

然而，利用刚刚所述的监控照相机，为了产生整个被摄体的图像，需要获取形成整个被摄体的图像的所有单元图像，并需要大量时间以产生整个被摄体的图像。因此，难以完全捕获在短时间内出现在图像拍摄的范围内的状况下的任何微小的变化。 

特别地，在获取整个摄像范围的图像之后直到获取整个摄像范围的下一图像为止，以高速度活动的活动体(活动被摄体)有时在一段时间内会移出图像拍摄的范围。 

此外，实际上，在监控照相机移动到拍摄活动体的图像的位置的时间段内，监控照相机也拍摄图像。因而，在监控照相机移动到其可以拍摄活动体的图像的位置的过程中所拍摄的图像的数量，即在执行如水平转动、高低俯仰或变焦处理时所拍摄的图像的数量，可能大于在由该监控照相机捕获该活动体时所拍摄的图像的数量。因此，监控照相机存在需要解决的课题，因为可能再现大量不希望观察的图像。 

期望提供一种信息处理系统、信息处理装置、方法和程序，其中，可以拍摄预定区域的图像，并且可以准确地拍摄该预定区域中的活动体的图像。 

根据本发明的实施例，提供一种信息处理系统，包括：区域图像拍摄装置，用于拍摄预定区域的图像；检测装置，用于基于由所述区域图像拍摄装置通过图像拍摄所获得的区域图像，来检测存在于该预定区域中的活动体；活动体图像拍摄装置，用于拍摄由所述检测装置检测到的活动体的图像；计算装置，用于计算由所述检测装置检测到的每一活动体的视角；视角信息存储装置，用于存储由所述计算装置所计算的一个以上活动体各自的视角信息；第一活动体图像拍摄控制装置，用于基于来自存储在所述视角信息存储装置中的活动体的视角信息内的特定的一个活动体的视角信息，控制所述活动体图像拍摄装置的图像拍摄；以及第二活动体图像拍摄控制装置，用于在由所述第一活动体图像拍摄控制装置控制所述活动体图像拍摄装置后的定时，基于由所述第一活动体图像拍摄控制装置控制了其图像拍摄的该特定活动体的新的视角信息，控制所述活动体图像拍摄装置的图像拍摄；其中，在所述活动体图像拍摄装置完成全方位移动之后以及在所述活动体图像拍摄装置完成变焦之后，所述第二活动体图像拍摄控制装置均以预定的时间间隔按预定的次数控制该活动体的图像拍摄。 

在该信息处理系统中，拍摄预定区域的图像，并基于通过该图像拍摄所获得的区域图像，检测存在于该预定区域中的任何活动体。然后，拍摄检测到的活动体的图像，并计算每一检测到的活动体的视角。此外，存储所计算的一个以上活动体各自的视角信息，并基于来自所存储的活动体的视角信息内的特定的一个活动体的视角信息，控制图像拍摄。然后，在控制该图像拍摄后的定时，基于其图像拍摄被控制的特定活动体的新的视角信息，控制图像拍摄。 

根据本发明的另一实施例，提供一种信息处理装置，包括：检测装置，用于基于通过预定区域的图像拍摄所获得的区域图像，来检测存在于该预定区域中的活动体；计算装置，用于计算由所 述检测装置检测到的每一活动体的视角；视角信息存储装置，用于存储由所述计算装置计算的一个以上活动体各自的视角信息；第一活动体图像拍摄控制装置，用于基于来自存储在所述视角信息存储装置中的活动体的视角信息内的特定的一个活动体的视角信息，控制所述活动体的图像拍摄；以及第二活动体图像拍摄控制装置，用于在由所述第一活动体图像拍摄控制装置控制该活动体的图像拍摄后的定时，基于该特定活动体的新的视角信息，控制该活动体的图像拍摄；其中，在完成全方位移动之后以及完成变焦之后，所述第二活动体图像拍摄控制装置均以预定的时间间隔按预定的次数控制该活动体的图像拍摄。 

根据本发明的又一实施例，提供一种信息处理方法，包括以下步骤：检测步骤，用于基于通过预定区域的图像拍摄所获得的区域图像，检测存在于该预定区域中的活动体；计算步骤，用于计算通过该检测步骤中的处理检测到的每一活动体的视角；视角信息存储步骤，用于存储通过该计算步骤中的处理所计算的一个以上活动体各自的视角信息；第一活动体图像拍摄控制步骤，用于基于来自通过该视角信息存储步骤中的处理所存储的活动体的视角信息内的特定的一个活动体的视角信息，控制该活动体的图像拍摄；以及第二活动体图像拍摄控制步骤，用于在通过该第一活动体图像拍摄控制步骤中的处理控制该活动体的图像拍摄后的定时，基于通过该第一活动体图像拍摄控制步骤中的处理控制了其图像拍摄的该特定活动体的新的视角信息，来控制该活动体的图像拍摄；其中，在完成全方位移动之后以及完成变焦之后，在所述第二活动体图像拍摄控制步骤中，均以预定的时间间隔按预定的次数控制该活动体的图像拍摄。 

根据本发明的又一实施例，提供一种信息处理系统，包括：区域图像拍摄部分，用于拍摄预定区域的图像；检测部分，用于基于由所述区域图像拍摄部分通过图像拍摄所获得的区域图像，来检测存在于该预定区域中的活动体；活动体图像拍摄部分，用于拍摄由所述检测部分检测到的该活动体的图像；计算部分，用于计算由所述检测部分检测到的每一活动体的视角；视角信息存 储部分，用于存储由所述计算部分所计算的一个以上活动体各自的视角信息；第一活动体图像拍摄控制部分，用于基于来自存储在所述视角信息存储部分中的活动体的视角信息内的特定的一个活动体的视角信息，来控制所述活动体图像拍摄部分的图像拍摄；以及第二活动体图像拍摄控制部分，用于在由所述第一活动体图像拍摄控制部分控制所述活动体图像拍摄部分后的定时，基于由所述第一活动体图像拍摄控制部分控制了其图像拍摄的该特定活动体的新的视角信息，来控制所述活动体图像拍摄部分的图像拍摄；其中，在所述活动体图像拍摄部分完成全方位移动之后以及在所述活动体图像拍摄部分完成变焦之后，所述第二活动体图像拍摄控制部分均以预定的时间间隔按预定的次数控制该活动体的图像拍摄。 

根据本发明的又一实施例，提供一种信息处理装置，包括：检测部分，用于基于通过预定区域的图像拍摄所获得的区域图像，来检测存在于该预定区域中的活动体；计算部分，用于计算由所述检测部分检测到的每一活动体的视角；视角信息存储部分，用于存储由所述计算部分所计算的一个以上活动体各自的视角信息；第一活动体图像拍摄控制部分，用于基于来自存储在所述视角信息存储部分中的活动体视角的信息内的特定的一个活动体的视角信息，来控制所述活动体的图像拍摄；以及第二活动体图像拍摄控制部分，用于在由所述第一活动体图像拍摄控制部分控制该活动体的图像拍摄后的定时，基于该特定活动体的新的视角信息，来控制该活动体的图像拍摄；其中，在完成全方位移动之后以及完成变焦之后，所述第二活动体图像拍摄控制部分均以预定的时间间隔按预定的次数控制该活动体的图像拍摄。 

在该信息处理装置、方法和程序中，基于通过预定区域的图像拍摄所获得的区域图像，检测存在于该预定区域中的任何活动体，并且计算每一检测到的活动体的视角。此外，存储所计算的一个以上活动体各自的视角信息，并基于来自所存储的活动体的视角信息内的特定的一个活动体的视角信息，控制该活动体的图 像拍摄。然后，在控制特定的活动体的图像拍摄后的定时，基于其图像拍摄被控制的特定的活动体的视角，控制该活动体的图像拍摄。 

该信息处理装置可以是独立的装置和执行信息处理的模块中的任何一个。 

利用该信息处理系统、信息处理装置、方法和程序，可以准确地拍摄图像拍摄区域中特定的活动体的图像。 

通过下面结合附图的说明和所附的权利要求书，本发明的上述和其它目的、特征和优点将变得很明显，其中在所有的附图中，相同的部分或元件用相同的附图标记来表示。 

附图说明

图1是示出传统多照相机系统的例子的外观的示意图； 

图2是示出图1中的多照相机系统的结构的例子的示意图； 

图3是类似但示出图1中的多照相机系统的结构的另一例子的视图； 

图4是示出记录在图2中所示的记录装置或图3中所示的PC中的图像数据的略图； 

图5是示出应用本发明的监控系统的结构的例子的视图； 

图6是示出图5中所示的监控系统的结构的示意图； 

图7是示出图6中所示的客户机PC的结构的例子的框图； 

图8是示出图6中所示的客户机PC的功能结构的例子的框图； 

图9是示出登记在图8中所示的活动体跟踪顺序数据库中的活动体信息的例子的视图； 

图10是示出由图8中所示的传感器图像获取模块执行的传感器图像获取处理的流程图； 

图11是示出由图8中所示的摄像视角计算模块执行的摄像视角计算处理的流程图； 

图12是示出由图8中所示的活动体检测模块执行的活动体检测处理的流程图； 

图13是示出由图8中所示的跟踪对象全方位移动变焦模块执行的跟踪对象全方位移动变焦处理的流程图； 

图14是示出由图8中所示的附加跟踪对象全方位移动模块执行的附加跟踪对象全方位移动处理的流程图； 

图15是示出由图8中所示的变焦图像获取模块执行的变焦图像获取处理的流程图； 

图16是示出由图8中所示的结果显示模块执行的结果显示处理的流程图； 

图17是示出由图5的监控系统执行的一系列处理的流程图；以及 

图18和19是示出图5中所示的监控系统的结构的不同的例子的示意图。 

具体实施方式

在详细说明本发明的优选实施例之前，对在所附权利要求书中叙述的几个特征与下面说明的优选实施例的特定要素之间的对应关系进行说明。然而，该说明仅用于确认：在本发明的实施例的说明中公开了支持如在权利要求书中所叙述的本发明的特定要素。因此，即使一些在实施例的说明中叙述的特定要素在以下说明中没有被叙述为其中一个特征，这并不意味着该特定要素不与特征相对应。相反，即使一些特定要素被叙述为与其中一个特征相对应的要素，这也并不意味着该要素不与除该要素以外的任何其它特征相对应。 

此外，以下说明不意味着：与本发明的实施例中所述的特定要素相对应的本发明都在权利要求书中进行了说明。换句话说，以下说明不否认存在一种发明，其对应于在本发明的实施例的说明中所述的特定要素，但是没有在权利要求书中进行叙述，即，该说明不否认存在一种发明，其可以以分案专利申请申请专利或可作为对权利要求书的随后修改的结果被附加包括在本专利申请中。 

根据本发明的信息处理系统包括：区域图像拍摄装置(例如，图8中所示的传感器照相机121)，用于拍摄预定区域的图像；检测装置(例如，图8中所示的活动体检测模块303)，用于基于由区域图像拍摄装置通过图像拍摄所获得的区域图像，来检测存在于该预定区域中的任何活动体；活动体图像拍摄装置，用于拍摄通过该检测装置检测到的任何活动体的图像；计算装置(例如，图8中所示的计算部分302a)，用于计算通过检测装置检测到的每一活动体的视角；视角信息存储装置(例如，图8中所示的活动体跟踪顺序管理DB 304)，用于存储通过该计算装置所计算的一个以上活动体各自的视角信息；第一活动体图像拍摄控制装置(例如，图8中所示的跟踪对象全方位移动变焦模块305)，用于基于来自存储 在该视角信息存储装置中的活动体的视角信息内的特定的一个活动体的视角信息，来控制活动体图像拍摄装置的图像拍摄；以及第二活动体图像拍摄控制装置(例如，图8中所示的附加跟踪对象全方位移动模块306)，用于在通过第一活动体图像拍摄控制装置控制活动体图像拍摄装置之后的定时，基于由第一活动体图像拍摄控制装置控制了其图像拍摄的特定活动体的视角信息，来控制活动体图像拍摄装置的图像拍摄。 

根据本发明的信息处理装置包括检测装置(例如，图8中所示的活动体检测模块303)，用于基于通过预定区域的图像拍摄所获得的区域图像，来检测存在于该预定区域中的任何活动体；计算装置(例如，图8中所示的计算部分302a)，用于计算通过该检测装置检测到的每一活动体的视角；视角信息存储装置(例如，图8中所示的活动体跟踪顺序管理DB 304)，用于存储通过该计算装置所计算的一个以上活动体各自的视角信息；第一活动体图像拍摄控制装置(例如，图8中所示的跟踪对象全方位移动变焦模块305)，用于基于来自存储在视角信息存储装置中的活动体的视角信息内的特定的一个活动体的视角信息，来控制活动体图像拍摄装置的图像拍摄；以及第二活动体图像拍摄控制装置(例如，图8中所示的附加跟踪对象全方位移动模块306)，用于基于在通过第一活动体图像拍摄控制装置控制了活动体的图像拍摄之后的定时的特定活动体的视角信息，来控制该活动体的图像拍摄。 

该信息处理装置还可以包括优先级设置装置(例如，图8中所示的等级确定部分302b)，用于基于预定的条件，设置存储在视角信息存储装置中的活动体各自的视角信息的优先级；第一活动体图像拍摄控制装置，可操作其按照通过优先级设置装置所设置的优先程度的递减顺序，从存储在视角信息存储装置中的活动体的视角信息内，选择特定的活动体，并基于所选择的活动体的视角 信息，控制该活动体的图像拍摄。 

根据本发明的信息处理方法包括：检测步骤(例如，图12的流程图的步骤S41中的处理)，用于基于通过预定区域的图像拍摄所获得的区域图像，检测存在于该预定区域中的任何活动体；计算步骤(例如，图11的流程图中的步骤S23的处理)，用于计算通过检测步骤中的处理检测到的每一活动体的视角；视角信息存储步骤(例如，图11的流程图中的步骤S25的处理)，用于存储通过计算步骤中的处理所计算的一个以上活动体各自的视角信息；第一活动体图像拍摄控制步骤(例如，图13的流程图中的步骤S64和S68的处理)，用于基于来自通过视角信息存储步骤中的处理所存储的活动体的视角信息内的特定的一个活动体的视角信息，控制该活动体的图像拍摄；以及第二活动体图像拍摄控制步骤(例如，图14的流程图中的步骤S84的处理)，用于在通过第一活动体图像拍摄控制步骤中的处理控制特定的活动体的图像拍摄后的定时，基于通过第一活动体图像拍摄控制步骤中的处理控制了其图像拍摄的该活动体的视角信息，控制该活动体的图像拍摄。 

应该注意，根据本发明的程序包括与上述的信息处理方法相同的步骤，在此省略其重复说明以免冗余。 

下面，参考附图对本发明的特定实施例进行详细说明。 

图5示出应用本发明的监控系统101的外观的例子。 

参考图5，所示的监控系统101包括照相机单元111。参考图6，该照相机单元111包括：传感器照相机121，用于拍摄广范围的区域；以及变焦照相机122，用于在变焦(放大)状态下拍摄预定活动体的图像。传感器照相机121拍摄广范围的区域的图像，变焦照相机122变焦并拍摄从由传感器照相机121通过图像拍摄所获得的传感器图像151内检测到的活动体的图像。因而，根据监控系统101，例如，在将其用于停车区中的情况下，可以监控例如停车区 中直径约为40m的圆柱形广范围的区域21。 

结果，与图1中所示的多照相机系统1相比较，图5中所示的监控系统101需要较少数量的照相机，并且可以容易地安装和以较低的成本进行生产。 

自然地，图5的监控系统101的结构仅是例子，并可以将其修正成使得例如提高变焦照相机122的倍率因子以扩大监控范围，或者另外提供一个或多个附加的变焦照相机，以便可以获取更高清晰度的图像。 

图6示出监控系统101的结构的例子。 

参考图6，监控系统101包括：照相机单元111，其包括传感器照相机121和变焦照相机122；网络131；以及客户机PC 132。监控系统101将由传感器照相机121所获取的传感器图像151和利用变焦照相机122通过图像拍摄所获得的变焦图像152，通过网络131记录在客户机PC132中，并利用客户机PC132再现相应的传感器图像151和变焦图像152。 

照相机单元111的传感器照相机121包括作为单一部件而形成的全方位移动部分121A和照相机部分121B。全方位移动部分121A作为可转动台而形成，用于例如关于水平转动和高低俯仰的两个轴(水平方向和垂直方向)自由改变摄像方向。照相机部分121B被设置在形成全方位移动部分121A的可转动台上，并在客户机PC132的控制下控制全方位移动部分121A，以调整摄像方向的水平或垂直方向，且改变摄像视角以扩大或缩小拍摄作为活动图片的广范围的(被摄体的)图像的摄像倍率。特别地，例如，照相机部分121B顺序改变摄像方向，以拍摄被摄体的图像从而获取多个单元图像，并产生由该多个单元图像组成的全景图像的传感器图像151。因此，传感器照相机121可以是任何照相机，只要其具有拍摄全方位图像的图像拍摄功能即可，例如其可以使用全景 照相机。 

照相机部分121B通过网络131将通过图像拍摄所获得的传感器图像151提供给客户机PC 132。在图6中，传感器照相机121拍摄包括活动体161和162的广范围的图像，以获取包括活动体161和162的传感器图像151。 

与传感器照相机121类似，变焦照相机122包括作为单一部件而形成的全方位移动部分122A和照相机部分122B。与全方位移动部分121A类似，全方位移动部分122A作为可转动台而形成，用于例如关于水平转动和高低俯仰的两个轴自由改变摄像方向。照相机部分122B被设置在形成全方位移动部分122A的可转动台上，并在客户机PC132的控制下，控制全方位移动部分122A以调整摄像方向的水平或垂直方向，且改变摄像视角以增大或减小摄像倍率以拍摄预定活动体作为变焦后的活动图片。 

客户机PC132检测包括在从传感器照相机121提供给其的传感器图像151中的活动体161和162，并确定围绕每一活动体161或162的预定区域(例如，矩形区域)作为活动体框171或172。 

客户机PC132将例如传感器图像151上的活动体框172的四个顶点A到D(四边形活动体框的顶点A到D)在X轴(图6中的水平方向上的轴)和Y轴(垂直方向上的轴)上的坐标提供给变焦照相机122。变焦照相机122基于该坐标执行活动体162的(活动体框172的)变焦图像拍摄以获取变焦图像152。应该注意，在下面的说明中，以帧为单位获取传感器图像151和变焦图像152。变焦照相机122通过网络131将变焦图像152提供给客户机PC132。 

网络131是允许数据的双向通信的通信网络，例如可以是通过电话线路连接到客户机的PC132的因特网、或者连接到TA(Terminal Adapter，终端适配器)或调制解调器的ISDN(Integrated Services Digital Network，综合业务数字网)/B (宽带)-ISDN、或LAN(Local Area Network，局域网)等。 

例如由个人计算机形成客户机132，客户机132通过网络131控制传感器照相机121和变焦照相机122。此外，客户机132记录来自传感器照相机121的传感器图像151和来自变焦照相机122的变焦图像152，并再现所记录的传感器图像151和变焦图像152，以对其进行显示。 

图7是示出图6中所示的客户机PC132的结构的例子的框图。 

参考图7，中央处理单元(CPU)201通过总线204与只读存储器(ROM)202和随机存取存储器(RAM)203连接。另外，输入/输出接口205被连接到总线204。 

CPU201根据存储在ROM 202中的程序或存储在RAM 203中的程序执行各种处理。ROM 202具有存储于其中的各种程序。RAM 203存储通过通信部分209获取的程序。此外，RAM 203适当存储CPU 201执行各种处理所需的数据等。 

包括键盘、鼠标、以及麦克风等的输入部分206、包括液晶显示器(LCD)单元以及扬声器等的输出部分207、由硬盘等形成的存储器部分208和由TA以及调制解调器等形成的通信部分209被连接到输入/输出接口205。通信部分209被连接到图6中的网络131，并通过网络131与传感器照相机121和变焦照相机122进行通信。 

必要时将驱动器210与输入/输出接口205适当连接，从装入驱动器210中的可移动介质211中读出程序，并将其安装在存储器部分208中。CPU 201将安装在存储器部分208中的该程序载入例如RAM 203中，并执行该程序。 

图8是示出图6中所示的客户机PC 132的功能结构的例子的框图。 

参考图8，所示的客户机PC 132包括传感器图像获取模块 301、摄像视角计算模块302、活动体检测模块303、跟踪对象全方位移动变焦模块305、附加跟踪对象全方位移动模块306、变焦图像获取模块307、结果显示模块308以及定时器模块309，它们都是例如由图7中所示的CPU 201执行的程序模块。客户机PC 132还包括活动体跟踪顺序管理DB 304，其对应于例如图7中所示的存储器部分208。 

此外，图8中由块表示的每一模块可被视为具有单一功能的硬件(例如，芯片组)。特别地，图8可被视为软件功能框图或硬件框图，其中，每一模块具有一种功能。 

从响应于用户操作的输入部分206将获取传感器图像151的指令提供给传感器图像获取模块301，并根据该指令控制传感器照相机121。传感器照相机121在传感器图像获取模块301的控制下拍摄广范围区域21的图像，并将通过图像拍摄所获得的传感器图像151和表示传感器照相机121本身并且对传感器照相机121唯一的ID(下文称之为照相机ID)提供给传感器图像获取模块301。传感器图像获取模块301将来自传感器照相机121的传感器图像151提供给摄像视角计算模块302和结果显示模块308。 

摄像视角计算模块302将从传感器图像获取模块301提供给其的传感器图像151提供给活动体检测模块303，使得活动体检测模块303计算传感器图像151中所拍摄的每一活动体的图像的位置和大小，并提供计算的结果。 

摄像视角计算模块302的计算部分302a基于来自活动体检测模块303的信息，将从传感器图像151的顶端帧开始的检测到活动体出现的传感器图像151中的那一帧的位置识别为当再现与该活动体相对应的传感器图像151时的再现开始位置。此外，摄像视角计算模块302确定例如捕获检测到活动体出现的该活动体的四边形活动体框172(171)。然后，摄像视角计算模块302计算该活动 体框172的顶点A到D的坐标，作为该活动体的出现位置(视角)，并将视角ID赋给每一出现位置。此外，摄像视角计算模块302基于从定时器模块309提供的并表示当前日期和时间的日期和时间信息，产生由活动体的出现日期和时间、消失日期和时间以及出现位置、视角ID、再现开始位置、以及从传感器照相机121提供的照相机ID形成的活动体信息。此外，等级确定部分302b读出活动体跟踪顺序管理DB 304，确定活动体跟踪等级，并将其与如上所述再现的信息一起登记到活动体跟踪顺序管理DB 304中(在等级确定部分302b进行登记之前登记了活动体信息的情况下，重新排列并更新包括该时间以前的活动体信息的活动体信息的顺序)。 

跟踪对象全方位移动变焦模块305基于活动体跟踪顺序管理DB 304的信息以预定的时间间隔控制变焦照相机122的全方位移动变焦，并从目前仍没有被拍摄图像的活动体中选择跟踪等级最高的视角ID。然后，跟踪对象全方位移动变焦模块305使得变焦照相机122根据与所选择的出现位置信息相对应的视角拍摄活动体的变焦图像，并将所拍摄的图像提供给变焦图像获取模块307。之后，跟踪对象全方位移动变焦模块305重复执行上述的处理。 

在通过跟踪对象全方位移动变焦模块305控制变焦照相机122以开始图像拍摄后，附加跟踪对象全方位移动模块306以远远短于跟踪对象全方位移动变焦模块305的处理中的时间间隔的预定的时间间隔，获取与通过跟踪对象全方位移动变焦模块305所选择的视角ID相对应的最新的出现位置信息。然后，附加跟踪对象全方位移动模块306控制变焦照相机122，以根据与所获取的出现位置信息相对应的视角拍摄该活动体的变焦图像，并将所拍摄的图像提供给变焦图像获取模块307。之后，附加跟踪对象全方位移动模块306重复执行上述处理。 

特别地，在跟踪对象全方位移动变焦模块305利用一个视角 ID的一个视角控制变焦照相机122的全方位移动变焦的同时(对于每一视角ID仅执行一次全方位移动变焦)，附加跟踪对象全方位移动模块306以远远短于跟踪对象全方位移动变焦模块305的处理中的时间间隔的时间间隔，利用一个视角ID的多个视角控制变焦照相机122的全方位移动变焦。 

通过跟踪对象全方位移动变焦模块305和附加跟踪对象全方位移动模块306控制变焦图像获取模块307的打开和关闭，变焦图像获取模块307获取从变焦照相机122提供的变焦图像，并将其提供给结果显示模块308。 

结果显示模块308获取从变焦图像获取模块307提供的变焦图像和从传感器图像获取模块301提供的传感器图像，并使未示出的显示单元来显示所获取的图像。 

定时器模块309测量当前的日期和时间，并将表示测量到的日期和时间的日期和时间信息提供给传感器图像获取模块301、跟踪对象全方位移动变焦模块305和附加跟踪对象全方位移动模块306。 

现在，参考图9对登记在图8中所示的活动体跟踪顺序管理DB304中的活动体信息进行说明。 

从图9可以看出，活动体跟踪顺序管理DB 304包括活动体的(跟踪)等级、出现日期和时间、消失日期和时间以及出现位置、视角ID、再现开始位置、以及照相机ID的信息。在活动体跟踪顺序管理DB 304中，对每一管理时区产生一个文件。应该注意，当对每一日期从9:00(9点)开始按顺序以1小时对一天进行划界时，在以下说明的管理时区中被定义为以一小时为单位。然而，管理时区的划界不限于此。 

此外，图9示出在活动体跟踪顺序管理DB 304中用于从2004年1月10日10:00到11:00的管理时区的文件中登记的活动体跟踪 顺序管理信息的例子。从图9中可以看出，摄像视角计算模块302在2004年1月10日的11:00检测到活动体的消失，其中该活动体的出现是在同一天的10:00检测到的、并将视角ID“1”赋给该活动体。此外，摄像视角计算模块302确定视角ID为“1”的活动体的活动体框(例如，图6中所示的活动体框171或172)，并将该活动体框的顶点A到D的坐标(1，2)、(1，5)、(2，5)和(2，2)识别为出现位置。 

此外，在检测到视角ID为“1”的活动体的出现的传感器图像151的帧为从帧的顶端开始的第一帧的帧#1，并且摄像视角计算模块302将帧#1识别为再现开始位置。应该注意，在以下的说明中，从帧的顶端开始的第一帧被称为帧#1。此外，摄像视角计算模块302接收作为传感器照相机121的照相机ID提供给其的“1”，其中通过该传感照相机121获取检测到活动体ID为“1”的活动体的出现的传感器图像151。 

此外，摄像视角计算模块302在2004年1月10日的10:30检测到活动体的消失，其中该活动体的出现是在同一天的10:05检测到的、并将视角ID“2”赋给该活动体。摄像视角计算模块302确定视角ID为“2”的活动体的活动体框(例如，图6中所示的活动体框171或172)，并将该活动体框的顶点A到D的坐标(3，5)、(3，9)、(5，9)和(5，5)识别为出现位置。 

而且，在检测到视角ID为“2”的活动体的出现的传感器图像151的帧为帧#2，并且摄像视角计算模块302将帧#2识别为再现开始位置。此外，传感器图像获取模块301接收作为传感器照相机121的照相机ID提供给其的“1”，其中通过该传感器照相机121，获取在检测到视角ID为“2”的活动体的出现的传感器图像151。 

此外，在图9中，通过等级确定部分302b将视角ID＝1的活动体的跟踪等级设置为第一等级，将视角ID＝2的活动体的跟踪等级 设置为第二等级。 

应该注意，等级确定部分302b参考优先条件来确定活动体的等级，该优先条件例如：活动体移动时的时间点的前后关系、在传感器图像中的活动体的视角位置(例如，优先选择传感器图像中上面位置处所显示的视角)、传感器图像中的活动体的大小(例如，优先选择传感器图像中所显示的活动体中具有相对较大的大小的活动体的图像)、或活动体的高宽比。 

换句话说，通过根据用于优先级的各种条件排列活动体，可以容易地捕获将被优先捕获的活动体。 

例如，在为了优先捕获传感器图像中相对较高位置处的活动体，将照相机放置在房间中相对较低的位置处(2到3m)的情况下，可以容易地捕获人脸，因为其存在于较高位置处。 

然而，在为了优先捕获传感器图像中较低位置处的活动体，将照相机放置在较高位置处(10m或更高)，例如户外建筑物的屋顶上的情况下，可以捕获距离照相机相对较近的人、汽车等的移动，而不是天空、建筑物的较高位置等。 

此外，如果优先捕获传感器图像中较大大小的活动体，则当例如与位于距离照相机较远的活动体相比时，可以优先捕获距离照相机较近的活动体(当活动体距离传感器照相机121越近时，通过传感器照相机121所捕获的该活动体的图像的大小越大)。 

此外，如果优先捕获传感器图像中较小大小的活动体，则当与位于距离照相机较近的活动体的移动相比时，可以优先捕获位于距离该照相机较远的人或汽车等的移动。 

此外，如果优先捕获传感器图像中垂直延伸的活动体，则可以容易地捕获人。特别地，在人正在行走并注意此人的体格的情况下，可以容易地将人作为传感器照相机121的传感器图像中的垂直延伸的活动体进行捕获。 

现在，参考图10对图8中所示的传感器图像获取模块301的传感器图像获取处理进行说明。当用户操作输入部分206以发出获取传感器图像151的指令时，执行该传感器图像获取处理。 

在步骤S1，传感器图像获取模块301向传感器照相机121发出获取传感器图像151的请求。传感器照相机121的照相机部分121B控制全方位移动部分121A以调整摄像方向的水平方向或垂直方向，并以预定的摄像比率拍摄广范围的区域的图像作为活动图片。传感器照相机121将传感器图像151和传感器照相机121的照相机ID提供给传感器图像获取模块301，以响应来自传感器图像获取模块301的请求。 

在步骤S1中的处理之后，处理进入步骤S2。在步骤S2，传感器图像获取模块301从传感器照相机121获取传感器图像151和照相机ID。之后，处理进入步骤S3。在步骤S3，传感器图像获取模块301将来自传感器照相机121的传感器图像151和照相机ID输入给摄像视角计算模块302。之后，处理进入步骤S4。 

在步骤S4，传感器图像获取模块301更新传感器照相机121的客户机返回缓冲器。之后，处理进入步骤S5。在步骤S5，传感器图像获取模块301判定是否从输入部分206发出结束获取传感器图像151和变焦图像152的请求，即用户是否操作输入部分206以发出结束该处理的指令。如果判定没有发出结束该处理的请求，则处理返回到步骤S1，以重复执行所述处理。 

另一方面，如果在步骤S5判定从输入部分206发出了结束该处理的请求，则结束该处理。 

现在，参考图11对摄像视角计算模块302的摄像视角计算处理进行说明。 

在步骤S21，摄像视角计算模块302将从传感器图像获取模块301提供给其的传感器图像提供给活动体检测模块303。 

此时，活动体检测模块303执行活动体检测处理。 

在此参考图12的流程图对活动体检测模块303的活动体检测处理进行说明。 

在步骤S41，活动体检测模块303基于输入给其的传感器图像，计算每一活动体的位置和大小。 

在步骤S42，活动体检测模块303将基于所输入的传感器图像计算出的活动体的位置和大小的信息返回给从其接收所输入的传感器图像的摄像视角计算模块302。 

返回参考图11的流程图，在步骤S22，摄像视角计算模块302接收从活动体检测模块303提供给其的所有活动体的位置和大小的信息。 

在步骤S23，摄像视角计算模块302使得计算部分302a基于活动体的位置和大小的信息，计算每一活动体的视角，即每一活动体的活动体框(例如，图6中所示的活动体框171或172)的顶点A到D的坐标，作为活动体的出现位置(视角)。此时，计算部分302a对可以在传感器图像中相互结合的多个活动体计算一个视角。或者，在确定与预先登记在活动体跟踪顺序管理DB 304中的任何一个视角ID相对应的活动体的视角的情况下，计算部分302a计算每一活动体的视角，以便继续所登记的视角ID。 

在步骤S24，摄像视角计算模块302读出活动体跟踪顺序管理DB304中的信息，并控制等级确定部分302b以确定包括当前所计算的视角的跟踪等级。应该注意，可以预先对如上文所述的优先捕获的活动体的一个或多个特征设置跟踪等级，并确定跟踪等级以满足诸如以下条件：活动体移动时的时间点的前后关系、传感器图像中的活动体的视角的位置、传感器图像中的活动体的大小、或活动体的高宽比。 

在步骤S25，摄像视角计算模块302将作为每一活动体的出现 位置的视角ID用于设置每一所计算的活动体框的四个视角的坐标。此外，摄像视角计算模块302产生活动体信息，该活动体信息包括：活动体的出现日期和时间、消失日期和时间以及出现位置、视角ID、再现开始位置、以及从传感器照相机121提供的照相机ID。然后，摄像视角计算模块302将该活动体信息存储在活动体跟踪顺序管理DB 304中(在已经存储了活动体信息的情况下，更新该活动体信息)。 

在每一预定的时间间隔后，分别由传感器图像获取模块301、摄像视角计算模块302和活动体检测模块303重复执行上述传感器图像获取处理、摄像视角计算处理和活动体检测处理。从而，通常将最新的活动体信息存储在活动体跟踪顺序管理DB 304中。应该注意，优选在之后重复执行传感器图像获取处理、摄像视角计算处理和活动体检测处理的该预定的时间间隔短于在之后执行跟踪对象全方位移动变焦处理和附加跟踪对象全方位移动处理的时间间隔。 

现在，参考图13的流程图对跟踪对象全方位移动变焦模块305的跟踪对象全方位移动变焦处理进行说明。 

在步骤S61，跟踪对象全方位移动变焦模块305读出存储在活动体跟踪顺序管理DB 304中的活动体信息，并在步骤S62判定在传感器图像中是否存在活动体。特别地，例如，判定在传感器图像中不存在与以下视角ID相对应的活动体：对于该视角ID，设置例如包括在活动体信息中的消失时间。因此，如果对活动体信息内的所有视角ID设置消失时间，则判定不存在活动体。在这种情况下，处理进入步骤S70。 

另一方面，如果没有设置与某个视角ID相对应的消失时间，则判定存在活动体，并且处理进入步骤S63。 

在步骤S63，跟踪对象全方位移动变焦模块305计算将变焦照 相机122全方位移动到的位置，即，活动体信息内的垂直方向上的仰角(elevation angle)和水平方向上的俯角(depression angle)的值(全方位移动值)，其为视角信息并对应于优先级最高的未被处理的视角ID，其中，基于出现位置的信息控制变焦照相机122到该垂直方向上的仰角和水平方向上的俯角。 

在步骤S64，跟踪对象全方位移动变焦模块305基于步骤S63中的处理所计算的全方位移动值，控制变焦照相机122，以执行全方位移动。此时，变焦照相机122的照相机部分122B根据该请求控制全方位移动部分122A，并将变焦照相机122设置为所请求的仰角和俯角。 

在步骤S65，跟踪对象全方位移动变焦模块305将变焦图像获取模块307的图像更新标记设置为ON。换句话说，通过刚才所述的处理，变焦图像获取模块307被置于可以从变焦照相机122获取图像的状态。 

在步骤S66，跟踪对象全方位移动变焦模块305激活下文所述的附加跟踪对象全方位移动模块306。 

在步骤S67，跟踪对象全方位移动变焦模块305将当前正由此处理的视角ID传输给附加跟踪对象全方位移动模块306。 

在步骤S68，跟踪对象全方位移动变焦模块305基于作为视角ID的视角信息的出现位置的信息，计算倍率，并向变焦照相机122发出变焦指令。 

在步骤S69，跟踪对象全方位移动变焦模块305判定是否发出结束该处理的请求。如果判定没有发出结束该处理的指令，则处理进入步骤S70。 

在步骤S70，跟踪对象全方位移动变焦模块305判定预定的时间段是否过去，并重复该判定直到其判定该预定时间过去后为止。换句话说，跟踪对象全方位移动变焦模块305保持待机状态直到该 预定的时间段过去后为止。然后，当在步骤S70一判定该预定的时间段过去时，则处理返回到步骤S61，以重复从步骤S61开始的步骤中的处理。 

另一方面，如果在步骤S69判定发出了结束该处理的指令，则结束该处理。 

通过上述处理，在预定的时间间隔检测活动体的有/无，直到存在一个或多个活动体为止，对该活动体按照优先度的递减顺序设置全方位移动值，以便可以顺序拍摄该活动体的图像。 

现在，参考图14的流程图对附加跟踪对象全方位移动模块306的附加跟踪对象全方位移动处理进行说明。 

在步骤S81，附加跟踪对象全方位移动模块30判定是否从跟踪对象全方位移动变焦模块305接收到激活指令，并重复步骤S81的处理直到接收到激活指令后为止。如果例如作为图13的流程图中的步骤S66的处理的结果，将激活指令传输给附加跟踪对象全方位移动模块306，则激活附加跟踪对象全方位移动模块306，并且处理进入步骤S82。应该注意，严格地说，如果附加跟踪对象全方位移动模块306是由CPU 201执行的程序模块，则CPU 201根据来自跟踪对象全方位移动变焦模块305的指令激活附加跟踪对象全方位移动模块306。另一方面，在由硬件形成附加跟踪对象全方位移动模块306的情况下，开始附加跟踪对象全方位移动模块306的操作。 

在步骤S82，例如，附加跟踪对象全方位移动模块306获取例如作为步骤S67中的处理的结果、从跟踪对象全方位移动变焦模块305传输的、当前指示给变焦照相机122的视角的视角ID。 

在步骤S83，附加跟踪对象全方位移动模块306从存储在跟踪对象顺序管理DB304中的活动体信息内，读出从跟踪对象全方位移动变焦模块305提供给其的视角ID的出现位置的信息。 

在步骤S84，附加跟踪对象全方位移动模块306基于与所读出的视角ID相对应的视角的出现位置的信息，计算将变焦照相机122全方位移动到的位置，即变焦照相机122将被控制到的垂直方向上的仰角和水平方向上的俯角的值(全方位移动值)。 

在步骤S85，附加跟踪对象全方位移动模块306基于通过步骤S84中的处理所判定的全方位移动值控制变焦照相机122以执行全方位移动。此时，变焦照相机122的照相机部分122B根据该请求控制全方位移动部分122A以将变焦照相机122设置成预定的仰角和俯角。 

在步骤S86，附加跟踪对象全方位移动模块306判定步骤S82到S85中的处理是否被重复指定的次数。如果判定该处理没有被重复该指定的次数，则处理进入步骤S87。 

在步骤S87，附加跟踪对象全方位移动模块306判定在步骤S87预定的时间段是否过去，并重复该处理直到判定该预定的时间段过去后为止。当判定该预定的时间段已过去时，处理返回到步骤S82，以便重复从步骤S82开始的步骤中的处理。应该注意，在步骤S87的处理中该预定的时间段远远短于图13中的流程图的步骤S70的处理中的预定的时间段。 

另一方面，如果在步骤S86判定步骤S82到S85中的处理已被重复该指定的次数，则处理进入步骤S88。在步骤S88，附加跟踪对象全方位移动模块306将变焦图像获取模块307的图像更新标记设置为OFF。 

然后在步骤S89，附加跟踪对象全方位移动模块306判定是否发出结束该处理的请求。如果判定没有发出结束该处理的请求，则处理返回到步骤S81，以便重复从步骤S81开始的步骤中的处理。 

另一方面，如果在步骤S89判定发出了结束该处理的请求，则 结束该处理。 

通过上述处理，还在通过跟踪对象全方位移动变焦模块305将变焦照相机122设置成基于具有相对较高的优先级的活动体的视角ID的视角之后，可以控制变焦照相机122以短的时间间隔按指定的次数跟踪活动体的视角的变化。结果，即使通过跟踪对象全方位移动变焦模块305将变焦照相机122设置成例如具有相对较高的优先级的活动体的视角，并且在直到进入变焦照相机122的全方位移动状态的时间间隔中该活动体实际上在移动(例如，即使过去了几秒，而变焦照相机122自身旋转180°并且活动体到达与通过传感器照相机121捕获该活动体的位置不同的位置)，可以更新变焦照相机122的全方位移动值，以基于在随后较短的时间间隔处的仍最新的出现位置的信息，来控制变焦照相机122。因此，在完成变焦前的时间段，可以捕获活动体。因此，例如，可以消除以下这种状况：活动体移出活动体框，从而作为变焦结果的不能进行该活动体的图像拍摄。 

现在，参考图15的流程图对变焦图像获取模块307的变焦图像获取处理进行说明。 

在步骤S101，变焦图像获取模块307向变焦照相机122发出获取图像的请求。此时，变焦照相机122根据该请求提供图像。 

结果，在步骤S102，变焦图像获取模块307获取从变焦照相机122传输给其的图像。 

在步骤S103，变焦图像获取模块307判定图像更新标记是否为ON。例如，如果通过图13的流程图的步骤S65中的处理将图像更新标记设置为ON，并随后在图14的流程图的步骤S88中没有将其设置为OFF，则变焦图像获取模块307判定图像更新标记为ON。然后，处理进入步骤S104。 

在步骤S104，变焦图像获取模块307利用从变焦照相机122 传输给其的图像来更新未示出的客户机返回缓冲器。 

另一方面，如果在步骤S103判定图像更新标记为OFF，则跳过步骤S104中的处理。 

在步骤S105，变焦图像获取模块307判定是否接收到结束请求。例如，如果判定没有接收到结束请求，则处理返回到步骤S101，而如果判定接收到结束请求，则结束该处理。 

通过上述处理，在图像更新标记保持为ON时，可以利用通过变焦图像获取模块307所获取的变焦图像顺序更新客户机返回缓冲器。 

现在，参考图16中的流程图对结果显示模块308的结果显示处理进行说明。 

在步骤S121，结果显示模块308获取存储在传感器图像获取模块301中的未示出的缓冲器中的传感器图像。 

在步骤S122，结果显示模块308获取存储在变焦图像获取模块307中的未示出的另一缓冲器中的变焦图像。 

在步骤S123，结果显示模块308使例如显示单元显示该传感器图像和该变焦图像。 

由于通过如上所述的处理显示传感器图像和变焦图像，因此，仅当检测到活动体时，才可以显示传感器图像和变焦图像。应该注意，可以读出存储在跟踪对象顺序管理DB 304中的活动体信息并对其进行显示。 

上述图5的监控系统101的处理可被总结为如图17中的时序图所示。参考图17，以预定的时间间隔重复传感器图像获取处理(图10)。然后，在基于通过摄像视角计算处理(图11)的步骤S21中的处理所提供的传感器图像，通过活动体检测处理(图12)检测到活动体之后，通过摄像视角计算处理计算该活动体的视角。然后，使用作为活动体的出现位置的计算出的视角来产生活动体 信息，并将活动体的跟踪等级存储在跟踪对象顺序管理DB 304中。重复所述处理的序列。 

特别地，跟踪对象全方位移动变焦模块305基于存储在跟踪对象顺序管理DB 304中的活动体信息，按照优先级的递减顺序，在与每一活动体的视角ID相对应的出现位置(视角)，在图17中的最上段所表示的从时刻t0到时刻t1的时间段(图17中的PT的范围)，控制变焦照相机122的全方位移动。 

然后，从图17中的最上段可以看出，跟踪对象全方位移动变焦模块305在时刻t1开始调整变焦照相机122的变焦。此外，在时刻t1，从图17中的最下段可以看出，开始将由变焦照相机122所拍摄的变焦图像存储在变焦图像获取模块307的客户机返回缓冲器中，以更新客户机返回缓冲器(客户机返回缓冲器变为ON)。因此，附加跟踪对象全方位移动模块306以预定的短的时间间隔(图17中的附加PT1的范围)，重复在图17中的次上段示出的附加跟踪全方位移动处理指定的次数。应该注意，从图17中的次下段可以看出，在通过跟踪对象全方位移动变焦模块305完成变焦的时刻t2之后，另外可以执行附加跟踪对象全方位移动处理。 

结果，对于由结果显示模块308所显示的变焦图像，由于从图17可以看出，在通过跟踪对象全方位移动变焦处理大幅度全方位移动变焦照相机122的时间段，客户机返回缓冲器为OFF，因此不拍摄变焦图像，从而可以显示平滑的全方位移动变焦图像。此时，因为以短于跟踪对象全方位移动变焦处理的时间间隔的时间间隔，重复附加跟踪对象全方位移动处理，所以即使活动体在移动，也基于最新的视角来顺序更新变焦照相机122将被设置成的视角。因此，可以拍摄在其中准确捕获活动体的变焦图像。应该注意，还是在这种情况下，尽管使用了全方位移动处理，由于在跟踪对象全方位移动变焦处理中通过全方位移动处理已经将变焦照相机 122设置到大致的水平转动和高低俯仰位置的状态下，以较短的时间间隔重复附加跟踪全方位移动处理，所以该全方位移动处理不包括变焦照相机122的大量的移动。因此，可以再现平滑的图像。 

应该注意，在上述说明中，附加跟踪对象全方位移动模块306以远远短于通过跟踪对象全方位移动变焦模块305重复跟踪对象全方位移动变焦处理的时间间隔的时间间隔，重复附加跟踪对象全方位移动处理，以便在通过跟踪对象全方位移动变焦处理水平转动和高低俯仰变焦照相机122后的定时，变焦照相机122跟踪活动体的移动。然而，由于在通过跟踪对象全方位移动变焦处理水平转动和高低俯仰变焦照相机122后的定时，活动体有时会显示没有移动，因此例如当在跟踪对象全方位移动变焦处理的全方位移动后执行的有/无活动体的移动的检测期间检测到活动体的某个移动时，可以以预定的短的时间间隔另外附加地重复附加跟踪对象全方位移动处理。 

此外，在上述说明中，尽管将传感器照相机121用作用于拍摄所监控的整个区域的图像的装置，但是图像拍摄装置不局限于此，而可以使用任何图像拍摄装置，只要其可以拍摄整个区域的图像即可。例如，可以用如图18中所见的静态照相机451代替图6中所示的传感器照相机121，其中该静态照相机451可以实时地执行360度的全方位图像拍摄。 

此外，如图19中所见，可以另外提供静态照相机471，并将其连接到网络131。在这种情况下，客户机PC 132的活动体检测模块303还检测固定图像中的活动体，并使得在需要时显示该静态图像，其中该固定图像是利用静态照相机471通过图像拍摄所获得的活动图片。 

此外，尽管上述说明中的传感器照相机121和变焦照相机122为采用了全方位移动型驱动系统的类型，但是它们不局限于此， 而可以使用任何其它驱动系统的照相机，只要其可以拍摄区域21的图像即可。 

此外，尽管上文所述的监控系统101使用包括传感器照相机121和变焦照相机122的照相机单元111，但是可以用具有传感器照相机121的功能和变焦照相机122的功能的单个照相机来代替该照相机单元111。 

此外，尽管上述说明涉及将本发明应用于监控系统的例子，但是本发明可以应用于有效拍摄活动体的图像的任何系统，并且本发明的应用不局限于监控系统。 

根据上述监控系统，由于在活动体移动到可以拍摄该活动体的图像的位置的过程中的图像(在执行例如全方位移动变焦处理的处理时的图像)被最小化，因此可以拍摄预定区域的图像，并可以准确拍摄该区域中的活动体的图像。结果，可以满意地观察所拍摄的图像。 

尽管可以通过硬件执行上述一系列处理，但是也可以通过软件来执行。在通过软件来执行该一系列处理的情况下，将编写该软件的程序从记录介质安装在包含于专用硬件中的计算机中，或者例如安装在通过安装各种程序可以执行各种功能的通用个人计算机中。 

在其上或其中记录程序的记录介质可作为如图7中所示的可移动介质211而形成，该可移动介质211例如：磁盘(包括软盘)、光盘(包括CD-ROM(只读式光盘)和DVD(数字多功能光盘))、磁光盘(包括MD(迷你光盘))、或半导体存储器，具有记录在其上或其中的该程序，并对其进行分发以将该程序独立于计算机提供给用户，或者作为包括在存储器部分208中的硬盘而形成，该存储器部分208具有记录在其中或其上的该程序，并以包含在计算机中的形式将其提供给用户。 

应该注意，在本说明书中，说明记录在记录介质中或记录介质上的程序的步骤可以但不是必须按照所述顺序的时间序列来处理，该步骤包括被并行或单独执行的处理，而不按照时间序列来处理(例如，并行处理或基于对象的处理)。 

此外，可以由单个计算机来处理该程序，或者由多个计算机分散处理该程序。此外，可以将该程序传输到远程计算机并由该远程计算机来执行该程序。 

尽管使用特定条件说明了本发明的优选实施例，但是该说明仅仅是为了例示性的目的，并且应该理解，在不脱离以下权利要求书的精神或范围的情况下，可以做出改变和变化。 

Claims (8)

1.一种信息处理系统，包括：

区域图像拍摄装置，用于拍摄预定区域的图像；

检测装置，用于基于由所述区域图像拍摄装置通过图像拍摄所获得的区域图像，来检测存在于该预定区域中的活动体；

活动体图像拍摄装置，用于拍摄由所述检测装置检测到的活动体的图像；

计算装置，用于计算由所述检测装置检测到的每一活动体的视角；

视角信息存储装置，用于存储由所述计算装置所计算的一个以上活动体各自的视角信息；

第一活动体图像拍摄控制装置，用于基于来自存储在所述视角信息存储装置中的活动体的视角信息内的特定的一个活动体的视角信息，控制所述活动体图像拍摄装置的图像拍摄；以及

第二活动体图像拍摄控制装置，用于在由所述第一活动体图像拍摄控制装置控制所述活动体图像拍摄装置后的定时，基于由所述第一活动体图像拍摄控制装置控制了其图像拍摄的该特定活动体的新的视角信息，控制所述活动体图像拍摄装置的图像拍摄；

其中，在所述活动体图像拍摄装置完成全方位移动之后以及在所述活动体图像拍摄装置完成变焦之后，所述第二活动体图像拍摄控制装置均以预定的时间间隔按预定的次数控制该活动体的图像拍摄。

2.根据权利要求1所述的信息处理系统，其特征在于，所述第一活动体图像拍摄控制装置基于来自存储在所述视角信息存储装置中的活动体的视角信息内的该特定活动体的视角信息，控制图像拍摄时所述活动体图像拍摄装置的水平方向上的位置、垂直方向上的位置和望远倍率。

3.根据权利要求1所述的信息处理系统，其特征在于，所述第二活动体图像拍摄控制装置在由所述第一活动体图像拍摄控制装置控制该活动体的图像拍摄后的定时，基于该特定活动体的视角信息，控制图像拍摄时该活动体图像拍摄装置的水平方向上的位置和垂直方向上的位置。

4.一种信息处理装置，包括：

检测装置，用于基于通过预定区域的图像拍摄所获得的区域图像，来检测存在于该预定区域中的活动体；

计算装置，用于计算由所述检测装置检测到的每一活动体的视角；

视角信息存储装置，用于存储由所述计算装置计算的一个以上活动体各自的视角信息；

第一活动体图像拍摄控制装置，用于基于来自存储在所述视角信息存储装置中的活动体的视角信息内的特定的一个活动体的视角信息，控制所述活动体的图像拍摄；以及

第二活动体图像拍摄控制装置，用于在由所述第一活动体图像拍摄控制装置控制该活动体的图像拍摄后的定时，基于该特定活动体的新的视角信息，控制该活动体的图像拍摄；

其中，在完成全方位移动之后以及完成变焦之后，所述第二活动体图像拍摄控制装置均以预定的时间间隔按预定的次数控制该活动体的图像拍摄。

5.根据权利要求4所述的信息处理装置，其特征在于，还包括优先级设置装置，该优先级设置装置用于基于预定的条件，设置存储在所述视角信息存储装置中的活动体各自的视角信息的优先级；

所述第一活动体图像拍摄控制装置如下操作：按照来自存储在所述视角信息存储装置中的活动体的视角信息内的由所述优先级设置装置所设置的优先度的递减顺序，来选择该特定的活动体，并基于所选择的活动体的视角信息，控制该活动体的图像拍摄。

6.根据权利要求5所述的信息处理装置，其特征在于，该预定条件包括活动体移动的时刻、区域图像中的活动体的位置、区域图像中的活动体的大小或活动体的高宽比。

7.根据权利要求4所述的信息处理装置，其特征在于，在由所述第一活动体图像拍摄控制装置控制该活动体的图像拍摄后的定时，基于该特定活动体的视角信息，开始该特定活动体的图像拍摄。

8.一种信息处理方法，包括以下步骤：

检测步骤，用于基于通过预定区域的图像拍摄所获得的区域图像，检测存在于该预定区域中的活动体；

计算步骤，用于计算通过该检测步骤中的处理检测到的每一活动体的视角；

视角信息存储步骤，用于存储通过该计算步骤中的处理所计算的一个以上活动体各自的视角信息；

第一活动体图像拍摄控制步骤，用于基于来自通过该视角信息存储步骤中的处理所存储的活动体的视角信息内的特定的一个活动体的视角信息，控制该活动体的图像拍摄；以及

第二活动体图像拍摄控制步骤，用于在通过该第一活动体图像拍摄控制步骤中的处理控制该活动体的图像拍摄后的定时，基于通过该第一活动体图像拍摄控制步骤中的处理控制了其图像拍摄的该特定活动体的新的视角信息，来控制该活动体的图像拍摄；

其中，在完成全方位移动之后以及完成变焦之后，在所述第二活动体图像拍摄控制步骤中，均以预定的时间间隔按预定的次数控制该活动体的图像拍摄。

Images