CN110351475B - 摄像系统、信息处理设备及其控制方法和存储介质 - Google Patents

Abstract

本发明提供一种摄像系统、信息处理设备及其控制方法和存储介质。根据本发明的摄像系统包括：第一摄像单元，其被配置为获取第一图像；第二摄像单元，其被配置为至少改变摄像方向或视角的任意一个；第一显示控制单元，其被配置为执行用于对显示有第一图像的指定画面进行显示的控制；摄像控制单元，其被配置为控制第二摄像单元，使得通过基于指定画面处所指定的第一画面区域来至少控制第二摄像单元的摄像方向或视角，从而通过对与第一画面区域相对应的摄像区域进行摄像来获取第二图像；以及第二显示控制单元，其被配置为执行用于显示第二图像的控制。

Description

摄像系统、信息处理设备及其控制方法和存储介质

技术领域

本发明涉及摄像系统、信息处理设备、信息处理设备的控制方法和存储介质。

背景技术

已知广域监视应用和精确监视应用作为安装在城市中的监视照相机的监视应用。广域监视应用是意图用于监控发生了诸如事故等的事件的特定场所或追踪移动物体的路径的应用。精确监视应用是意图用于精确拍摄事件或特定被摄体的应用。

然而，为了以单个监视照相机满足上述两个监视应用，需要提供一种能够在维持精确地拍摄图像所需的分辨率的同时对宽区域进行摄像的监视照相机。因此，针对能够实现上述两个监视应用的监视照相机可使用的图像传感器或光学透镜的性能受到限制。

关于上述点，已知了一种监视系统，其使用意图用于通过使用多个照相机来监视宽区域的固定视角照相机(以下称为“广域照相机”)、以及意图用于精确拍摄所监视的宽区域周边的一部分范围的平摇-俯仰-变焦(PTZ)照相机(日本特开2006-128932)。PTZ照相机可以通过沿平摇方向或俯仰方向改变包括光学透镜和图像传感器的镜筒的朝向来改变摄像方向，使得可以根据来自用户的指示来调整摄像区域。此外，PTZ照相机可以通过沿图像传感器的光轴方向移动光学透镜的位置来执行变焦操作，使得可以根据用户操作来改变视角。

主要已知两种操作方法作为用于上述PTZ照相机的用户操作方法。第一种操作方法是独立操作PTZ照相机的方法。具体地，PTZ照相机利用设置在专用于PTZ照相机的控制器上的按钮或操纵杆来操作，或者通过显示在画面上的图形用户界面(GUI)来操作(日本特开2015-141471)。在第二操作方法中，如日本特开2006-128932中所述，用户从广域照相机所拍摄的图像中选择用户想要精确地拍摄图像的范围。计算平摇/俯仰/变焦操作的控制量，并且基于计算结果来驱动包括在摄像设备中的预定马达，使得通过PTZ照相机来拍摄用户所选择的范围。在第二操作方法中，由于可以根据广域照相机所拍摄的图像来设置PTZ照相机的摄像区域，因此可以直观地执行操作。因此，可以将PTZ照相机的摄像区域瞬时调整到目标摄像区域。

然而，利用第二操作方法，即使被描述为第二摄像单元的一个示例的PTZ照相机可以拍摄被描述为第一摄像单元的一个示例的广域照相机的摄像区域外侧的区域，第二摄像单元的摄像区域也局限于第一摄像单元的摄像区域内的区域。因此，在通过第二摄像单元对位于第一摄像单元的摄像区域的边界上的被摄体整体进行摄像并显示整个被摄体的情况下，无法使用上述的第二操作方法。另一方面，利用第一操作方法，难以将PTZ照相机的摄像区域直观地调整到目标摄像区域。

发明内容

本发明提供一种摄像系统，包括：第一摄像单元，其被配置为通过对所确定的摄像区域进行摄像来获取第一图像；第二摄像单元，其被配置为改变摄像方向或视角中的至少任一个；第一显示控制单元，其被配置为执行用于对显示有所述第一图像的指定画面进行显示的控制，其中通过所述指定画面能够指定包括与显示有所述第一图像的区域不同的区域的第一画面区域；摄像控制单元，其被配置为控制所述第二摄像单元，使得通过基于所述指定画面处所指定的所述第一画面区域来控制所述第二摄像单元的摄像方向或视角中的至少任一个，从而通过对与所述第一画面区域相对应的摄像区域进行摄像来获取第二图像；以及第二显示控制单元，其被配置为执行用于对通过所述摄像控制单元执行的控制所获取到的所述第二图像进行显示的控制。

本发明提供一种信息处理设备，包括：第一显示控制单元，其被配置为执行用于显示指定画面的控制，其中在所述指定画面上显示有通过用于对所确定的摄像区域进行摄像的第一摄像单元所执行的摄像而获取到的第一图像，通过所述指定画面能够指定包括与显示有所述第一图像的区域不同的区域的第一画面区域；以及第二显示控制单元，其被配置为执行用于显示第二图像的控制，其中所述第二图像是通过控制能够改变摄像方向和视角中的至少任一个的第二摄像单元的摄像方向和视角中的至少任一个、从而通过所述第二摄像单元对与所述指定画面处所指定的所述第一画面区域相对应的摄像区域进行摄像而获取到的。

本发明提供一种信息处理设备的控制方法，包括：利用第一显示控制来执行用于显示指定画面的控制，其中在所述指定画面上显示有通过用于对所确定的摄像区域进行摄像的第一摄像单元所执行的摄像而获取到的第一图像，通过所述指定画面能够指定包括与显示有所述第一图像的区域不同的区域的第一画面区域；以及利用第二显示控制来执行用于显示第二图像的控制，其中所述第二图像是通过控制能够改变摄像方向和视角中的至少任一个的第二摄像单元的摄像方向和视角中的至少任一个、从而通过所述第二摄像单元对与所述指定画面处所指定的所述第一画面区域相对应的摄像区域进行摄像而获取到的。

本发明提供一种非暂时性计算机可读存储介质，其存储用于使计算机用作以下单元的程序，所述单元包括：第一显示控制单元，其被配置为执行用于显示指定画面的控制，其中在所述指定画面上显示有通过用于对所确定的摄像区域进行摄像的第一摄像单元所执行的摄像而获取到的第一图像，通过所述指定画面能够指定包括与显示有所述第一图像的区域不同的区域的第一画面区域；以及第二显示控制单元，其被配置为执行用于显示第二图像的控制，其中所述第二图像是通过控制能够改变摄像方向和视角中的至少任一个的第二摄像单元的摄像方向和视角中的至少任一个、从而通过所述第二摄像单元对与所述指定画面处所指定的所述第一画面区域相对应的摄像区域进行摄像而获取到的。

通过以下参考附图对典型实施例的说明，本发明的其它特征将变得明显。

附图说明

图1A、1B和1C是示出根据一个实施例的摄像系统的结构的示例的框图。

图2A和2B是示出根据一个实施例的摄像设备的外观的示例的图。

图3是示出根据一个实施例的摄像设备沿俯仰方向的摄像区域的示例的图。

图4是示出根据一个实施例的摄像设备沿平摇方向的摄像区域的示例的图。

图5是示出根据一个实施例的指定画面的示例的图。

图6是示出根据一个实施例的指定画面的示例的图。

图7是示出根据一个实施例的摄像区域的设置处理的示例的流程图。

具体实施方式

将参考图1A来描述摄像系统。图1A是示出摄像系统的结构的示例的框图。摄像系统包括摄像设备100和客户端设备140。摄像设备100和客户端设备140在相互可通信的状态下经由互联网协议(IP)网络130彼此连接。

摄像设备100包括广域照相机110、平摇-俯仰-变焦(PTZ)照相机120、系统控制单元124和存储单元125。

广域照相机110包括摄像光学系统111、图像传感器单元112和图像处理单元113。

图像传感器单元112基于穿过摄像光学系统111的光来输出图像的电信号。图像传感器单元112包括电荷耦合器件(CCD)传感器或互补金属氧化物半导体(CMOS)传感器。广域照相机110是第一摄像单元的一个示例。

图像处理单元113基于从图像传感器单元112输出的图像的电信号来执行所确定的图像处理。

在图1A所示的示例中，在广域照相机110中仅示出一个摄像光学系统111和一个图像传感器单元112。然而，其数量不限于此，因而广域照相机110可以包括多个摄像光学系统111和图像传感器单元112。例如，广域照相机110可以包括多个照相机。这里，各照相机包括一个摄像光学系统111和一个图像传感器单元112。在广域照相机110包括多个照相机的情况下，广域照相机110可以通过对从各个照相机输出的图像进行合成并通过图像处理单元113生成全景图像来拍摄宽区域。构成广域照相机110的各照相机可以包括图像处理单元113。在这种情况下，系统控制单元124可以对各个照相机的输出图像进行合成以生成全景图像。广域照相机110以固定的视角拍摄图像。

PTZ照相机120可以沿平摇方向和俯仰方向改变摄像方向，并且还通过改变视角来执行变焦。PTZ照相机120包括摄像光学系统121、图像传感器单元122、图像处理单元123、驱动控制单元126、变焦马达127、平摇马达128和俯仰马达129。PTZ照相机120是能够改变摄像方向和视角中的至少任一个的第二摄像单元的一个示例。

摄像光学系统121包括调焦透镜或光圈机构(未示出)。摄像光学系统121由系统控制单元124控制，以在最佳曝光条件下拍摄图像。此外，摄像光学系统121可以通过变焦马达127来驱动被布置成可沿图像传感器单元122的光轴方向移动的光学透镜，以调整视角。

图像传感器单元122基于穿过摄像光学系统121的光来输出图像的电信号。图像传感器单元122包括CCD传感器或CMOS传感器。

图像处理单元123基于从图像传感器单元122输出的图像的电信号来执行所确定的图像处理。

驱动控制单元126基于系统控制单元124的控制来控制变焦马达127、平摇马达128和俯仰马达129，以改变PTZ照相机120的摄像方向或视角。系统控制单元124根据从客户端设备140接收到的控制命令来控制驱动控制单元126。通过上述控制，控制PTZ照相机120的摄像方向或视角，使得对用户通过客户端设备140的输入单元142所指定的摄像区域进行摄像。变焦马达127基于驱动控制单元126的控制使得摄像光学系统121的光学透镜在图像传感器单元122的光轴方向上移动。

平摇马达128基于驱动控制单元126的控制使得PTZ照相机120的摄像方向在平摇方向上移动。

俯仰马达129基于驱动控制单元126的控制使得PTZ照相机120的摄像方向在俯仰方向上移动。

系统控制单元124通常控制摄像设备100的各构成元件，设置各种参数，并且控制相对于客户端设备140的通信。更具体地，系统控制单元124执行各种处理，诸如摄像控制、图像的压缩编码、图像剪切、输出图像的生成和网络分发等。系统控制单元124可以通过图像剪切来实现数字PTZ功能。

如示出摄像设备100的结构的示例的图1B所示，系统控制单元124包括中央处理单元(CPU)131。此外，如图1B所示，存储单元125包括只读存储器(ROM)132和随机存取存储器(RAM)133。CPU 131将存储在ROM132中的程序加载到RAM 133并执行该程序，从而实现图7中的处理或由系统控制单元124执行的其它处理。RAM 133用作用于执行程序的工作区域以及各种数据和参数信息的存储区域。存储单元125包括非易失性存储器，使得各种数据或参数信息可以存储在非易失性存储器中。

客户端设备140包括显示单元141、输入单元142、系统控制单元143和存储单元144。客户端设备140是信息处理设备的一个示例。

显示单元141显示各种画面和图像。例如，液晶显示器用作显示单元141。

输入单元142包括可由用户操作的鼠标和键盘。显示单元141可以包括触摸面板，并且用作输入单元142。

系统控制单元143通常控制客户端设备140的各个构成元件，设置各种参数，并控制相对于摄像设备100的通信。

如示出客户端设备140的结构的示例的图1C所示，系统控制单元143包括CPU 145。如图1C所示，存储单元144包括ROM 146和RAM 147。CPU 145将存储在ROM 146中的程序加载到RAM 147并执行该程序，从而实现由系统控制单元143所要执行的处理。RAM 147用作用于执行程序的工作区域以及各种数据和参数信息的存储区域。存储单元144包括非易失性存储器，使得程序和各种数据可以存储在非易失性存储器中。

被视为摄像设备100的外部设备的诸如个人计算机(PC)或移动电话等的信息处理终端用作客户端设备140，但是客户端设备140不限于此。

例如，IP网络130包括满足诸如以太网(Ethernet，注册商标)等的通信标准的多个路由器、交换机和线缆。然而，在本典型实施例中，只要摄像设备100和客户端设备140之间的通信可执行，就无需考虑IP网络130的通信标准、规模和配置。例如，IP网络130可以包括有线局域网(LAN)、无线LAN或广域网(WAN)。

客户端设备140的系统控制单元143经由IP网络130向摄像设备100发送各种控制命令。控制命令表示针对摄像设备100的指示。控制命令包括针对广域照相机110或PTZ照相机120的摄像参数的设置指示、针对摄像设备100的驱动组件的驱动控制指示、以及视频流传输开始/停止指示。摄像设备100的驱动组件包括变焦马达127、平摇马达128和俯仰马达129。

摄像设备100的系统控制单元124经由IP网络130，从客户端设备140接收控制命令，并将对所接收到的控制命令的响应发送到客户端设备140。

摄像设备100的系统控制单元124经由IP网络130将广域照相机110或PTZ照相机120所拍摄的图像分发到客户端设备140。客户端设备140的系统控制单元143控制显示单元141以显示从摄像设备100接收到的图像。通过该处理，用户可以浏览从摄像设备100分发的图像。此外，通过操作输入单元142，用户可以输入用于改变PTZ照相机120的摄像方向或视角的指示。

接着，将参考图2A和2B来进一步描述摄像设备100。图2A是示出摄像设备100的侧面的示例的图。图2B是从下面描述的旋转部152侧观看的摄像设备100的俯视图。

摄像设备100包括固定部151和旋转部152。

固定部151被固定到诸如天花板等的摄像设备100的安装场所。更具体地，固定部151具有安装面150并且安装面150被固定到天花板或专用附接构件，使得摄像设备100安装在天花板上。广域照相机110布置在固定部151上。广域照相机110基于摄像设备100的安装状态以固定视角来拍摄图像。在图2A所示的示例中，广域照相机110包括第一照相机110a、第二照相机110b和第三照相机110c。然而，构成广域照相机110的照相机的数量不限于三个，并且例如，广域照相机110可以包括四个以上的照相机，使得由此可以拍摄摄像设备100的整个周围的图像。可选地，广域照相机110可以由单个照相机构成，并且针对照相机的摄像光学系统111使用广角镜头，从而可以由此拍摄宽区域。

旋转部152布置在与固定部151的安装面150相对的一侧。旋转部152可以在通过使第一旋转轴156作为中心而指定的范围内旋转。例如，第一旋转轴156垂直于安装面150。

PTZ照相机120布置在旋转部152上。当旋转部152绕第一旋转轴156旋转时，PTZ照相机120基于第一旋转轴156与旋转部152一起旋转。利用这种结构，PTZ照相机120沿图2B中的箭头158所示的平摇方向旋转，从而改变PTZ照相机120的摄像方向。这里，将被视为平摇方向上的基准的PTZ照相机120的摄像方向指定为图2B中的第一基准方向157。在本典型实施例中，PTZ照相机120的平摇角度可以在-90°至+90°之间的范围内变化。当第一基准方向157被指定为基准时，PTZ照相机120的平摇角度是平摇方向上的摄像角度。PTZ照相机120基于平摇角度的变化而旋转，以改变其摄像方向。PTZ照相机120的平摇角度的可变范围不限于-90°至+90°之间的范围，而可以是-5°至90°之间的范围，并且可以基于摄像设备100的构造来确定任意范围。平摇马达128使PTZ照相机120在平摇方向上旋转。

此外，包括PTZ照相机120的摄像光学系统121和图像传感器单元122的镜筒159被配置为可绕垂直于第一旋转轴156的第二旋转轴153旋转。利用该结构，PTZ照相机120沿图2A中的箭头155指示的俯仰方向旋转，以改变PTZ照相机120的摄像方向。这里，将被视为俯仰方向上的基准的PTZ照相机120的摄像方向指定为图2A中的第二基准方向154。在本典型实施例中，PTZ照相机120的俯仰角度可以在-0°至+60°的范围内变化。当第二基准方向154被指定为基准时，PTZ照相机120的俯仰角度是俯仰方向上的摄像角度。PTZ照相机120基于俯仰角度的改变而旋转，以改变其摄像方向。PTZ照相机120的俯仰角度的可变范围不限于-0°至+60°之间的范围，而可以是-5°至90°之间的范围，并且可以基于摄像设备100的构造来确定任意范围。俯仰马达129使PTZ照相机120沿俯仰方向旋转。

随后，将参考图3来描述摄像设备100沿俯仰方向的摄像区域。图3是示出摄像设备100沿俯仰方向的摄像区域的示例的图。

图3中的可摄像区域160是指可以由PTZ照相机120进行摄像的摄像区域，并且PTZ照相机120可以通过改变俯仰角度来对可摄像区域160的一部分进行摄像。图3中的第一摄像区域160a是当PTZ照相机120的俯仰角度为0°时的俯仰方向上的摄像区域。此外，图3中的第二摄像区域160b是当PTZ照相机120的俯仰角度为+60°时的俯仰方向上的摄像区域。PTZ照相机120的俯仰角度可以在0°至+60°之间的范围内变化。因此，可以将可摄像区域160确定为第一摄像区域160a中的俯仰方向的负侧的摄像边界165a与第二摄像区域160b中的俯仰方向的正侧的摄像边界165b之间的范围。图3中的位置120a是当PTZ照相机120的俯仰角度为0°时的PTZ照相机120的位置。图3中的位置120b是当PTZ照相机120的俯仰角度为+60°时的PTZ照相机120的位置。

摄像区域161是由广域照相机110恒定拍摄的俯仰方向上的范围。

接着，将参考图4来描述摄像设备100沿平摇方向的摄像区域。图4是示出摄像设备100沿平摇方向的摄像区域的示例的图。

图4中的可摄像区域162是可以由PTZ照相机120进行摄像的摄像区域，并且PTZ照相机120可以通过改变平摇角度来对可摄像区域162的一部分进行摄像。图4中的第三摄像区域162a是当PTZ照相机120的平摇角度为+90°时的平摇方向上的摄像区域。此外，图4中的第四摄像区域162b是当PTZ照相机120的平摇角度是-90°时的平摇方向上的摄像区域。PTZ照相机120的平摇角度可以在-90°至+90°的范围内变化。因此，可以将可摄像区域162确定为第三摄像区域162a中的平摇方向的正侧的摄像边界166a与第四摄像区域162b中的平摇方向的负侧的摄像边界166b之间的范围。图4中的位置120c是当PTZ照相机120的平摇角度为+90°时的PTZ照相机120的位置。图4中的位置120d是当PTZ照相机120的平摇角度为-90°时的PTZ照相机120的位置。

摄像区域163是由广域照相机110恒定拍摄的平摇方向上的范围。

如图3所示，广域照相机110的俯仰方向上的摄像区域161包括在PTZ照相机120的俯仰方向上的可摄像区域160中。此外，如图4所示，广域照相机110的平摇方向上的摄像区域163包括在PTZ照相机120的平摇方向上的可摄像区域162中。然后，PTZ照相机120可以通过改变平摇角度和俯仰角度来对包括广域照相机110的摄像区域161和163的范围的一部分进行摄像。在本典型实施例中，PTZ照相机120的可摄像区域160和162被设置为覆盖广域照相机110的摄像区域161和163的整个范围，并且PTZ照相机120可以拍摄广域照相机110的摄像区域161和163外侧的区域。然而，该结构不限于此，并且可以是如下结构：广域照相机110的摄像区域161和163与PTZ照相机120的可摄像区域160和162至少一部分重叠。例如，广域照相机110的摄像区域161和163与PTZ照相机120的可摄像区域160和162可以仅在平摇方向或在俯仰方向上部分地重叠。

接着，将参考图5来描述指定画面220。图5是示出指定画面220的示例的图。客户端设备140的系统控制单元143控制要在显示单元141处显示的指定画面220。该处理是由第一显示控制单元执行的处理的一个示例。

指定画面220是显示通过广域照相机110的摄像操作所获取到的第一图像210和通过PTZ照相机120的摄像操作所获取到的第二图像211的画面，并且指定画面220显示在客户端设备140的显示单元141处。此外，用户可以在指定画面220上指定PTZ照相机120的摄像区域。

指定画面220包括显示框200、第一显示区域201、第二显示区域202和可指定区域204。指定画面220的各个部分显示在显示框200内。

第一显示区域201是指定画面220中的与广域照相机110的摄像区域相对应的区域。将广域照相机110所拍摄的第一图像210显示在第一显示区域201上。由于第一显示区域201是与广域照相机110的摄像区域相对应的区域，因此第一显示区域201的大小与第一图像210的大小相同。

第二显示区域202是显示PTZ照相机120所拍摄的第二图像211的区域。

光标203是用户操作以在显示单元141处指定任意点或任意范围的对象。

可指定区域204是指定画面220中的表示PTZ照相机120的可摄像区域160和162的区域。当用户指定了可指定区域204中的区域时，设置PTZ照相机120的平摇角度、俯仰角度和变焦量，使得PTZ照相机120可以对与用户所指定的区域(指定区域)相对应的摄像区域进行摄像。因此，改变PTZ照相机120的摄像方向和视角。第一图像210显示在可指定区域204中的与广域照相机110的摄像区域161和163相对应的位置处。第一图像210包括在可指定区域204中并与可指定区域204重叠。将与可指定区域204中的第一图像210的区域不同的区域(即，第一图像210外侧的区域)称为外侧区域212。可指定区域204是第二画面区域的示例。

在本典型实施例中，用户使用输入单元142来操作光标203，并通过在可指定区域204内指定任意点或任意范围来指定可指定区域204内的区域，使得可以改变PTZ照相机120的摄像方向和视角。此时，基于来自输入单元142的输出，客户端设备140的系统控制单元143接受可指定区域204中的用户所指定的区域。

在指定画面220中，可指定区域204包括显示第一图像210的第一显示区域201外侧的区域。在本典型实施例中，可指定区域204包括整个第一显示区域201。然后，外侧区域212在第一显示区域201的整个周围中与第一显示区域201邻接。外侧区域212显示为空白空间。

例如，摄像设备100的系统控制单元124将广域照相机110所拍摄的第一图像210和PTZ照相机120所拍摄的第二图像211定期发送到客户端设备140。客户端设备140的系统控制单元143使用从摄像设备100接收到的第一图像210和第二图像211来更新指定画面220中的第一图像210和第二图像211。

接着，将参考图6来描述通过使用指定画面220来设置PTZ照相机120的摄像方向和视角的方法。图6是示出指定画面220的示例的图。如图6所示，将包括分别与PTZ照相机120的平摇方向和俯仰方向相对应的水平方向轴205和垂直方向轴206的坐标设置到可指定区域204。用户操作光标203以指定这些坐标中的任意点。水平方向轴205和垂直方向轴206可以是或可以不是实际显示在指定画面220中的。

在本典型实施例中，在可指定区域204中，水平方向轴205延伸的方向的中央对应于0°的平摇角度，其左端对应于-90°的平摇角度，以及其右端对应于90°的平摇角度。此外，在可指定区域204中，垂直方向轴206延伸的方向的中央对应于30°的俯仰角度，其上端对应于0°的俯仰角度，以及其下端对应于60°的俯仰角度。在本典型实施例中，平摇角度和俯仰角度在可指定区域204中线性地改变。然而，该结构不限于此。例如，可以基于广域照相机110的曲率非线性地分配平摇角度和俯仰角度。

如图6所示，用户操作输入单元142以指定范围指定开始点207a和范围指定结束点207b，从而指定在对角线上具有这两个点207a和207b的矩形区域(要指定的区域)。指定区域与PTZ照相机120的新摄像区域相对应。由用户执行的要指定的区域的指定与用于改变PTZ照相机120的摄像区域的指示相对应。在图6的示例中，指定区域包括第一图像210的一部分和与第一图像210邻接的外侧区域212的一部分。指定区域是第一画面区域的示例。指定区域可以是仅包括外侧区域212的一部分的区域，或者可以是仅包括第一图像210的一部分的区域。

通过基于输入单元142的输出来接受范围指定开始点207a和范围指定结束点207b，客户端设备140的系统控制单元143接受在对角线上具有这两个点207a和207b的矩形指定区域。

然后，为了通过PTZ照相机120来对与指定区域相对应的摄像区域进行摄像，系统控制单元143基于所接受的范围指定开始点207a和范围指定结束点207b来计算PTZ照相机120的摄像方向和视角。将与以上所计算出的PTZ照相机120的摄像方向和视角有关的信息称为摄像区域信息。

然后，系统控制单元143将摄像区域信息发送到摄像设备100。基于从客户端设备140发送来的摄像区域信息，摄像设备100的系统控制单元124通过下面描述的摄像区域设置处理来改变PTZ照相机120的摄像方向和视角。更具体地，基于摄像区域信息，系统控制单元124经由驱动控制单元126来驱动变焦马达127、平摇马达128和俯仰马达129。

接着，将参考图7来描述摄像区域设置处理。图7是示出摄像区域设置处理的示例的流程图。摄像区域设置处理由摄像设备100的系统控制单元124执行。特别地，摄像区域设置处理是用于设置PTZ照相机120的摄像方向和视角的处理。图7中的处理是由摄像控制单元执行的处理的一个示例。

在步骤S301中，基于客户端设备140和摄像设备100所执行的通信，系统控制单元124判断用户是否经由客户端设备140的输入单元142输入了用于改变PTZ照相机120的摄像区域的指示。如果系统控制单元124判断为用户输入了用于改变PTZ照相机120的摄像区域的指示(步骤S301中为“是”)，则处理进入步骤S302。如果系统控制单元124判断为用户没有输入该指示(步骤S301中为“否”)，则图7中的处理结束。

在步骤S302中，系统控制单元124从客户端设备140接收摄像区域信息。如上所述，摄像区域信息是与客户端设备140所计算出的PTZ照相机120的摄像方向和视角有关的信息。

在步骤S303中，系统控制单元124判断步骤S302中所接收到的摄像区域信息中所包括的视角是否落入PTZ照相机120的最大视角的范围内。如果系统控制单元124判断为摄像区域信息中所包括的视角落入PTZ照相机120的最大视角的范围内(步骤S303中为“是”)，则处理进入步骤S305。如果系统控制单元124判断为摄像区域信息中所包括的视角没有落入PTZ照相机120的最大视角的范围内(步骤S303中为“否”)，则处理进入步骤S304。

在步骤S304中，系统控制单元124将步骤S302中所接收到的摄像区域信息中所包括的视角校正为PTZ照相机120的最大视角。然而，系统控制单元124可以将步骤S302中所接收到的摄像区域信息中所包括的视角校正为小于PTZ照相机120的最大视角的角度。

在步骤S305中，基于摄像区域信息，系统控制单元124经由驱动控制单元126来驱动变焦马达127、平摇马达128和俯仰马达129。通过上述处理，系统控制单元124将PTZ照相机120的摄像方向和视角控制为用户所指定的摄像方向和视角。然后，系统控制单元124控制PTZ照相机120，以对与指定画面220处所指定的区域相对应的摄像区域进行摄像，从而获取第二图像211。如果在步骤S304中执行了校正，则系统控制单元124控制PTZ照相机120c，从而以校正后的视角拍摄与在指定画面220处所指定的区域相对应的摄像方向上的图像，由此获取第二图像211。

客户端设备140的系统控制单元143从摄像设备100的系统控制单元124定期接收第二图像211，以在指定画面220上显示第二图像211。用于显示第二图像211的处理是由第二显示控制单元执行的处理的一个示例。

如上所述，在指定画面220处，用户可以指定要指定为包括外侧区域212的一部分的区域。然后，客户端设备140在指定画面220上显示通过PTZ照相机120对与指定区域相对应的摄像区域进行摄像所获取到的第二图像211。因此，用户可以直观地指定未包括在与第一图像210相对应的摄像区域中的摄像区域。然后，用户可以容易地显示通过对广域照相机110的摄像区域161和163的范围外侧的区域进行摄像而所获取到的第二图像211。此外，在根据本典型实施例的摄像系统中，如图6所示，可以通过PTZ照相机120对位于广域照相机110的摄像区域的边界上的被摄体整体进行摄像，并显示整个被摄体，从而提高了用户的可用性。

<变形例>

在上述典型实施例中，图6中的外侧区域212在指定画面220中被显示为空白空间。然而，例如，客户端设备140的系统控制单元143可以着色并显示外侧区域212以与第一图像210区分开。

此外，系统控制单元143可以在外侧区域212中显示过去由PTZ照相机120拍摄并获取到的与外侧区域212相对应的摄像区域的图像。在这种情况下，摄像设备100在启动时使PTZ照相机120拍摄与外侧区域212相对应的图像，并将拍摄图像发送到客户端设备140。客户端设备140在外侧区域212对从摄像设备100接收到的图像进行合成并显示。此后，每当摄像设备100对与外侧区域212相对应的摄像区域进行摄像时，客户端设备140通过使用经由摄像操作所获取到的图像来更新外侧区域212中所显示的图像。系统控制单元143可以仅在外侧区域212的一部分中显示过去由PTZ照相机120拍摄并获取到的图像。外侧区域212中所显示的图像是第三图像的示例。

此外，系统控制单元143可以对第一显示区域201中所显示的第一图像210和外侧区域212中所显示的图像执行不同的图像处理。此外，可指定区域204的内侧和外侧之间的边界线可以用如图5或6所示的虚线表示，或者可以用实线表示。此外，代替显示可指定区域204的内侧和外侧之间的边界线，可以使用任意图像来区分可指定区域204的内侧和外侧。

此外，在上述典型实施例中，如参考图6所述，用户指定范围指定开始点207a和范围指定结束点207b。这里，在用户指定了范围指定开始点207a的情况下，系统控制单元143可以在指定画面220上显示下面描述的参考区域。该参考区域是使范围指定开始点207a作为顶点的矩形区域，并且是PTZ照相机120能够以最大视角对与该参考区域相对应的摄像区域进行摄像的区域。由于PTZ照相机120可以对与参考区域中所包括的区域相对应的摄像区域进行摄像，因此用户可以在指定画面220处容易地指定要由PTZ照相机120进行摄像的区域。该参考区域是第三画面区域的示例。

此外，在上述典型实施例中，预先确定PTZ照相机120的平摇角度和俯仰角度的范围。然而，可以通过在摄像设备100的初始设置时执行校准来调整PTZ照相机120的平摇角度和俯仰角度的范围。

此外，在上述典型实施例中，在图7的步骤S303和S304中，通过摄像设备100的系统控制单元124来执行与摄像区域信息中所包括的视角是否落入PTZ照相机120的最大视角的范围内有关的判断以及对摄像区域信息的校正。然而，可以通过客户端设备140的系统控制单元143来执行与摄像区域信息中所包括的视角是否落入PTZ照相机120的最大视角的范围内有关的判断以及对摄像区域信息的校正。在这种情况下，系统控制单元143将校正后的摄像区域信息发送到摄像设备100，并且摄像设备100基于所接收到的摄像区域信息来执行用于改变PTZ照相机120的摄像方向和视角的控制。

在用户在指定画面220处指定的范围表示超过PTZ照相机120的最大视角的视角的情况下，客户端设备140的系统控制单元143可以在显示单元141处显示错误消息。然后，在这种情况下，系统控制单元143可以执行不接受用户指定的区域的控制。

在上述典型实施例中，如图5和6所示，整个第一图像210与可指定区域204重叠。然而，如果广域照相机110的摄像区域161和163与PTZ照相机120的可摄像区域160和162部分重叠，则第一图像210的一部分相应地与可指定区域204重叠。

此外，代替使用PTZ照相机120，摄像设备100可以使用能够仅改变摄像方向和视角中的一个的照相机。

<其它典型实施例>

本发明可以以如下方式实现：将用于实现根据上述典型实施例的一个或多个功能的程序经由网络或存储介质提供给系统或设备，并且系统或设备中的计算机的一个或多个处理器读取并执行该程序。此外，还可以利用实现一个或多个功能的电路(例如，专用集成电路(ASIC))来实现本发明。

尽管已经说明了本发明的典型实施例，但上述典型实施例仅仅是实现本发明的示例，并且不应当被解释为限制本发明的技术范围。换句话说，在不脱离本发明的技术精神或主要特征的情况下，可以以各种方式实现本发明。

例如，可以提供多个CPU作为摄像设备100或客户端设备140的硬件结构，并且多个CPU可以基于存储在各设备的HDD中的程序来执行处理。此外，代替CPU，图形处理单元(GPU)可以用作摄像设备100或客户端设备140的硬件结构。

如上所述，根据上述典型实施例，可以容易地显示通过对期望的摄像区域进行摄像所获取到的图像。

其它实施例

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。

尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (16)

1.一种摄像系统，包括：

多个固定的第一摄像单元，其被配置为能够对第一摄像区域进行摄像；

第二摄像单元，其被配置为能够通过改变第二摄像单元的摄像方向对第二摄像区域进行摄像，其中，第二摄像区域包括第一摄像区域和与第一摄像区域邻接的外侧区域；

第一显示控制单元，其被配置为执行用于对显示画面进行显示的控制，在所述显示画面上显示有表示第一摄像区域的第一框、表示第二摄像区域的第二框以及与第一摄像区域对应的第一图像和与由第二摄像单元摄像的外侧区域对应的外侧图像，

其中，第二框围绕着第一框进行显示，

其中，根据用户操作，在第一图像、外侧图像或包括第一图像的一部分和外侧图像的一部分中，设置要由第二摄像单元摄像的指定区域；

摄像控制单元，其被配置为控制所述第二摄像单元，使得通过基于所述指定区域来控制所述第二摄像单元的摄像方向，从而获取与指定区域对应的图像；以及

第二显示控制单元，其被配置为执行用于对通过所述摄像控制单元执行的控制所获取到的图像进行显示的控制。

2.根据权利要求1所述的摄像系统，其中，所述第一显示控制单元将所述第二摄像区域中的与所述第一摄像区域不重叠的部分以与所述第一摄像区域区分的方式进行显示。

3.根据权利要求1所述的摄像系统，其中，所述第二摄像单元对所述第二摄像区域中的与所述第一摄像区域不重叠的部分相对应的摄像区域进行摄像，所述外侧图像显示在所述第二框中的与所述第一框不重叠的部分中。

4.根据权利要求3所述的摄像系统，其中，所述第一显示控制单元对所述外侧图像执行与对所述第一图像所执行的图像处理不同的图像处理。

5.根据权利要求3所述的摄像系统，其中，每当通过所述第二摄像单元所执行的摄像获取到所述外侧图像时，所述第一显示控制单元更新所述显示画面中的所述外侧图像。

6.根据权利要求1所述的摄像系统，其中，所述第一显示控制单元执行用于在所述第二摄像区域中的与所述第一摄像单元的摄像区域相对应的位置处显示所述第一图像的控制。

7.根据权利要求1所述的摄像系统，其中，在所述显示画面处指定一个点的情况下，所述第一显示控制单元执行用于在所述显示画面上显示以该一个点作为顶点的画面区域的控制，其中在该画面区域中，所述第二摄像单元能够以最大视角对相应的摄像区域进行摄像。

8.根据权利要求1所述的摄像系统，其中，在所述第二摄像单元对与所述显示画面处所指定的画面区域相对应的摄像区域进行摄像的视角超过所述第二摄像单元的最大视角的情况下，所述摄像控制单元将所述第二摄像单元的视角控制成落入所述最大视角内，并控制所述第二摄像单元以通过对摄像区域进行摄像来获取图像。

9.根据权利要求1所述的摄像系统，其中，所述第二显示控制单元执行用于在所述显示画面上显示通过所述摄像控制单元执行的控制所获取到的图像的控制。

10.根据权利要求1所述的摄像系统，其中，所述第一摄像单元以固定的视角拍摄图像。

11.根据权利要求1所述的摄像系统，其中，所述第二摄像单元能够在平摇方向和俯仰方向上改变摄像方向，并且进一步能够改变视角。

12.根据权利要求1所述的摄像系统，还包括摄像设备，所述摄像设备包括所述第一摄像单元和所述第二摄像单元。

13.根据权利要求1所述的摄像系统，

其中，所述第一摄像单元是广域照相机，以及

其中，所述广域照相机包括多个照相机。

14.一种信息处理设备，包括：

第一显示控制单元，其被配置为执行用于对显示画面的显示的控制，其中在所述显示画面上显示有表示第一摄像区域的第一框、表示第二摄像区域的第二框以及与第一摄像区域对应的第一图像和与由第二摄像单元摄像的外侧区域对应的外侧图像，所述第一摄像区域能够由对所确定的摄像区域进行摄像的第一摄像单元进行摄像，所述第二摄像区域能够通过第二摄像单元改变摄像方向来进行摄像，其中，第二摄像区域包括第一摄像区域和与第一摄像区域邻接的外侧区域，其中，第二框围绕着第一框进行显示，其中，根据用户操作，在第一图像、外侧图像或包括第一图像的一部分和外侧图像的一部分中，指定要由第二摄像单元摄像的指定区域；以及

第二显示控制单元，其被配置为执行用于图像的显示的控制，其中该图像是通过控制第二摄像单元的摄像方向、从而通过所述第二摄像单元对与所述显示画面处所指定的指定区域相对应的摄像区域进行摄像而获取到的。

15.一种信息处理设备的控制方法，包括：

利用第一显示控制来执行用于显示画面的显示的控制，其中在所述显示画面上显示有表示第一摄像区域的第一框、表示第二摄像区域的第二框以及与第一摄像区域对应的第一图像和与由第二摄像单元摄像的外侧区域对应的外侧图像，所述第一摄像区域能够由对所确定的摄像区域进行摄像的第一摄像单元进行摄像，所述第二摄像区域能够通过第二摄像单元改变摄像方向来进行摄像，其中，第二摄像区域包括第一摄像区域和与第一摄像区域邻接的外侧区域，其中，第二框围绕着第一框进行显示，其中，根据用户操作，在第一图像、外侧图像或包括第一图像的一部分和外侧图像的一部分中，指定要由第二摄像单元摄像的指定区域；以及

利用第二显示控制来执行用于图像的显示的控制，其中该图像是通过控制第二摄像单元的摄像方向、从而通过所述第二摄像单元对与所述显示画面处所指定的指定区域相对应的摄像区域进行摄像而获取到的。

16.一种非暂时性计算机可读存储介质，其存储用于使计算机用作以下单元的程序，所述单元包括：

第一显示控制单元，其被配置为执行用于对显示画面的显示的控制，其中在所述显示画面上显示有表示第一摄像区域的第一框、表示第二摄像区域的第二框以及与第一摄像区域对应的第一图像和与由第二摄像单元摄像的外侧区域对应的外侧图像，所述第一摄像区域能够由对所确定的摄像区域进行摄像的第一摄像单元进行摄像，所述第二摄像区域能够通过第二摄像单元改变摄像方向来进行摄像，其中，第二摄像区域包括第一摄像区域和与第一摄像区域邻接的外侧区域，其中，第二框围绕着第一框进行显示，其中，根据用户操作，在第一图像、外侧图像或包括第一图像的一部分和外侧图像的一部分中，指定要由第二摄像单元摄像的指定区域；以及

第二显示控制单元，其被配置为执行用于图像的显示的控制，其中该图像是通过控制第二摄像单元的摄像方向、从而通过所述第二摄像单元对与所述显示画面处所指定的指定区域相对应的摄像区域进行摄像而获取到的。

Images